Как мы распараллелили CatBoost на Spark

Спасибо, что поделились решением. Что в итоге по точности, выросла она при переходе на кластерное обучение по сравнению локальным с обучением на кусках данных?

Наши 5 лет с инфраструктурой «ВсеИнструменты.ру»: от нескольких ВМ до отказоустойчивого решения в трёх дата-центрах

Наверное, руководители частных компаний глупы и обожают прожигать бюджеты на сотрудников, которые ничего не делают и не вносят вклада в зарабатывание прибыли. Либо что-то в Ваших предпосылках неверно.

PostgreSQL 9.5: что нового? Часть 2. TABLESAMPLE

Интересно, а почему не существует bernoulli_rows, возможно ли его добиться какой-то простой адаптацией?

Postgresso 10 (47)

Хотел попробовать Pro Standard, полез, обрадовался, что поддерживается PG15 и TimeScaleDB, и в том же самом релизе уже НЕ поддерживается Виндовс. Уже не могли, блин, дотянуть поддержку винды до этого релиза ((

Pyspark. Анализ больших данных, когда Pandas не достаточно

df.dropna(inplace = True) # :))

Zettelkasten и Obsidian — лучшие друзья вашей памяти и креативности

Скрещённые-то скрещённые, но это будут знания чатГПТ, а надо развивать же именно свой мозг...

ML-модель out-of-stock. Как контролировать доступность 200 млн товаров на рынке e-grocery?

Спасибо, что поделились опытом! Кажется необычным, что построение индивидуальной модели для каждого из 4 сегментов дало лучшие результаты, чем одной большой модели с теми же фичами, ведь категория товара наверняка входила в список признаков.

Туториал по FASM (Windows x32 API/Win32API), «Hello world!»

Не знаю, не знаю. Я вот с изумлением смотрю, в какую ассемблерную кашу компилируется рекурсивный расчёт числа Фибоначчи на С.

Попробуйте сами:

#include <stdio.h>

int fibonacci(int n)
{
if (n <= 1)
{
return n;
}
return fibonacci(n - 1) + fibonacci(n - 2);
}

int main(void)
{
printf("%i", fibonacci(45));
}

Как прогнозировать спрос и автоматизировать закупки с помощью machine learning: кейс Ozon

-Cложное и детальное прогнозирование на уровне конкретного товара — это бессмысленные затраты времени и вычислительных ресурсов.

-А можно нам другого дата-сайентиста?

Как мы заняли первое место в хакатоне ВК «Машинное обучение на графах», где не было графов

Как это можно всё за 2 дня успеть?! Тут месяцами не успеваешь попробовать и половину подходов... )

Клара. Паблик, который ведётся ИИ

Подписался )

Как одно изменение конфигурации PostgreSQL улучшило производительность медленных запросов в 50 раз

С каких пор максимальная утилизация приложением железа считается несвойственной для приложения деятельностью? Этим должны феи из страны грёз заниматься? Какой процент установок Постгрес делается Ансиблом или подобными системами, неужели близкий к 100? Откуда Ансиблу знать оптимальные параметры под конкретное железо и профиль нагрузки конкретной БД?

Как правило, БД - это сердце любого приложения, где вообще есть БД. Какого лешего на сервере с 1Тб RAM предлагать по умолчанию work_mem=4Mb? Ты что-то слышал про системные вызовы, позволяющие определить запущенные приложения и используемую ими память, не прибегая к телепатии? Если требуется сделать запас, почему нельзя это сделать указанием одного параметра (фиксированного или динамического макс. порога исползования RAM) вместо пяти? Что, ПО СУБД не способно посчитать оптимальную разбивку самостоятельно?

Имхо, комментарий человека с мышлением IT-неандертальца, не делающего хорошо свою работу, не стремящегося повысить эффективность работы, и забивающего на сигналы пользователей продукта об устаревшей конфигурации (да и моральном устаревании подхода с фиксированной конфигурацией как такового), "ведь это лишь нытьё". Так может, СУБД вообще не нужны, супермэн ты наш суровый, можно ж в csv данные хранить, зачем перенимать свойственную им функцию хранения данных ещё куда-то?

Как одно изменение конфигурации PostgreSQL улучшило производительность медленных запросов в 50 раз

При том, что уже 2022-й год на дворе, AI якобы стучится в окно. А чёртов постгрес даже сам посчитать оптимальную разбивку памяти не может. Какой там AI...

Проблемы современного машинного обучения

Идея с Contrastive evaluations очень понравилась!

Рекомендательная система торговой сети самообслуживания. Часть 2

Хороший стиль изложения, интересно читать.

Вот так выглядит нейросеть без фреймворков

+100

Настройка параметров PostgreSQL для оптимизации производительности

+100. Удивляет, что в 2021м сделано всё ещё так тупо и неадаптивно. Уверен, бОльшую часть всех параметров из файла конфига определять можно динмически.

Расширение кластера PostgreSQL размером 5,7 ТБ и переход с версии 9.6 на 12.4

Поржал, спасибо )

Postgresso 32

Спасибо за пост! А можете подсказать, как называется пакет PostGresSQL14, желательно с lz4, для установки на Ubuntu? Я уже 2 часа ищу эту инфу, нигде нет. Просто sudo apt-get install postgresql ставит 13-ю версию.

sudo sh -c 'echo "deb http://apt.postgresql.org/pub/repos/apt $(lsb_release -cs)-pgdg main 14" > /etc/apt/sources.list.d/pgdg.list'

wget --quiet -O - https://www.postgresql.org/media/keys/ACCC4CF8.asc | sudo apt-key add -

sudo apt-get update

sudo apt-get install postgresql-14

ставит версию 14~beta2-1.pgdg20.04+1, проверяю новый метод компрессии сейчас.

Искусственный интеллект ещё сильнее ухудшает плохую медицину

Так бери, обучай врачей и на простых, и на сложных снимках, кто мешает? Речь о том, что ценное время специалиста разумнее потратить на сложные случаи, где модель не уверена в качестве прогноза, а остальные врач сможет быстро просмотреть для подтверждения диагноза.