LightGBM – быстрая библиотека градиентного бустинга

Высокопроизводительная библиотека для градиентного бустинга деревьев решений (GBT), оптимизированная для скорости и низкого потребления памяти.
⚡ Когда использовать? ✅ Предсказание значений ✅ Обработка больших данных ✅ Улучшение рекомендаций
👨💻 Пример из практики LightGBM+FLAML обучает рекомендации, это объем корзины с 1.3 до 2.3 элемента. Команда внедрила за 2 недели, а не разрабатывала модели с нуля.
📝 5 шагов внедрения: 1️⃣ Подготовка данных (Data Scientist, AI PM) 2️⃣ Обучение модели (ML Engineer) 3️⃣ Оптимизация гиперпараметров (ML Engineer, Data Scientist) 4️⃣ Развертывание в прод (DevOps, AI PM) 5️⃣ Мониторинг и дообучение (Data Scientist, AI PM)
🛠 Сравнение с похожими: 🔹 XGBoost → точнее на сложных данных, но медленнее 🔹 CatBoost → лучше для категориальных данных 🔹 Random Forest → проще, но хуже масштабируется 🔹 H2O.ai → распределенный бустинг, требует больше ресурсов #mltool
Впервые опубликовано: @ai_ossresearch.
Методология
Методология одной книгой
Как Product Owner ведёт запрос бизнеса от первого письма до результата, который можно показать: пять стадий, у каждой понятный выход. Оставьте почту, и я пришлю книгу.
Читать дальше
- CodeAbra/iai-personal-memory-engine
Тоже пусть тут лежит, это знакомый из Threads разрабатывает. Больше про разграничение персональных контекстов агента
- OpenObserve - открытая observability-платформа для логов, метрик, трейсов и RUM
Условный Elasticsearch/Datadog, только в разы дешевле по хранению и разворачивается одним бинарником.
- Headlong - OpenSource автономный AI-агент с постоянной рефлексией
Очень прожорливая штука по токенам, в авторах там мегакрутые чуваки (Konwinski - Perplexity & Co) - работает в фоне, а не только по запросу - сам выбирает, о чём думать и что…