Поэтому он предложил три изменения:

Ввести порог для дополнительного продвижения 🤩

Раньше даже слабые сигналы сохранений и повторных просмотров увеличивали рейтинг видео. Теперь дополнительное продвижение начинается только после превышения определённого порога.

Учитывать активность пользователя🟢 Раньше вес этих сигналов был одинаковым для всех. Теперь он зависит от активности конкретного пользователя. Фактически влияние сохранений и повторных просмотров становится персонализированным.

Изменить основу ранжирования 🌲 Раньше дополнительные сигналы усиливали общую оценку релевантности видео. Теперь они усиливают оценку ожидаемой длительности просмотра. Таким образом, алгоритм сильнее ориентируется на основную бизнес-метрику. После реализации изменений запустили повторный A/B-тест. На этот раз время просмотра выросло на 0,071%, а показатель реальных показов — на 0,118%. Защитные метрики остались стабильными.

Фактически агент прошёл полный цикл: гипотеза → реализация → A/B → анализ ошибок → новая гипотеза → повторный A/B.