Иногда эксперимент не провалился. Его просто поставили не туда.

До меня гибридную выдачу в Циане запускали несколько раз.

И несколько раз откатывали.

Причина вполне убедительная: метрики падали. Казалось бы, всё — гипотеза проверена, пациент скорее мёртв.

Но мне всё равно хотелось понять: почему штука, которая вроде бы должна помогать пользователю, делает только хуже?

Посмотрела, как запускали раньше.

Что не работало:

→ карта и список почти никак не были синхронизированы — по сути, два разных интерфейса, которые просто слепили в один;

→ гибридкой заменяли карту. А тут уже ломалась сама логика сценария: если человек специально открыл карту, скорее всего, он хочет… карту. Неожиданно :)

Я пошла с другой стороны.

У нас был список с большой аудиторией, но довольно грустной конверсией: на карте она была в 2–3 раза выше.

При этом просто взять огромную аудиторию списка и насильно отправить всех на карту — тоже идея так себе.

А зачем мы вообще пытаемся чинить карту? Чинить надо список.

Поэтому гибридной выдачей я заменила именно его.

Оставила пользователю привычную механику списка, добавила карту и синхронизировала их в реальном времени: двигаешь карту — меняется список, листаешь объекты — сразу понимаешь, где они находятся.

А обычную карту вообще не трогала.

Что получили: → ЦД одного поиска +8,6% → конверсия в успех +1,6% → доля пользователей с оплатой +7%

Одну и ту же гипотезу можно несколько раз протестировать, получить минус и торжественно похоронить.

Хотя проблема вообще не в гипотезе.

Иногда не надо придумывать новую идею. Надо понять, почему старая не сработала.

В нашем случае все пытались сделать лучше карту.

А чинить надо было список.

Иногда эксперимент не провалился. Его просто поставили не туда.
До меня гибридную выдачу в Циане запускали несколько раз.
И несколько раз откатывали.
Причина вполне убедительная: метрики падали | Сетка — социальная сеть от hh.ru