Привет! Я Федор Тарасов, занимаюсь машинным обучением в команде collection стрима моделирования розничного бизнеса в Департаменте анализа данных и моделирования банка ВТБ.

Как обучается классификатор CatBoost? В статье на Хабре разберем вывод функции потерь, градиентов и гессианов, выбор сплитов и расчёт ответов листьев. Затем на небольшом датасете шаг за шагом воспроизведём вычисления в Excel и учебной реализации на Python и сравним результаты с библиотекой.

Будет полезно всем, кто знаком с основами градиентного бустинга, хочет разобраться в деталях работы CatBoost и не боится большого количества математических формул.

➡️ Читай на Хабре