Результаты эксперимента с текстами песен в Spotify 🎶
Доброго утра, коллеги! Сегодня у нас последняя часть продуктового кейса. Напомню фабулу: мы добавляем возможность просмотреть текст песни в приложение Spotify. Мы уже обсудили, что целевой метрикой будет количество часов стриминга музыки на пользователя, и что в эксперимент мы будем включать всех, у кого на экране появилась та часть интерфейса, где находится кнопка "Открыть текст песни".
Эксперимент проведен, и результаты выглядят прекрасно: в варианте с кнопкой мы видим статистически значимое увеличение количества часов стриминга на 0.5% (половину процента). На масштабе Spotify это значительное улучшение. Однако, текст песни открывало всего 1.5% пользователей из тех, кто видел кнопку, а скроллило текст дальше первого экрана всего 0.3%. Среднее время стриминга на пользователя у этой группы такое же, как в базе эксперимента, даже чуть ниже.
