Привет, Сетка! Сегодня расскажу, как я тестирую гипотезы, чтобы пользователи влюблялись в продукт, а метрики росли, как на стероидах.

Тестирование гипотез — это не просто A/B-тесты и «пофиг, что выйдет, главное что-то делаю». Для меня это как разминировать поле: найти где лежит мина, обезвредить ее, убедиться что дальше идти безопасно, доказать это остальным. Мой подход прост — кастдев + аналитика + итерации.

Кастдев, чтобы не гадать на кофейной гуще. 90% гипотез, которые мы зарезали на кастдеве, сэкономили нам недели разработки. Когда я работал в Горбилете, был кейс поднять Retention и конверсию карточки. Изначально гипотеза была связанна с подборками, думал они плохо конвертят и старался говорить об этом. Но уже к 5 интервью понял, что пользователей напрягает отсутствие кнопки «Поиск» на главном экране настолько, что не хочется заходить обратно в приложение. Отсюда гипотеза: «при добавлении кнопки поиска на главный экран R30 и CR карточки вырастет».

A/B-тесты с чётким фокусом. Гипотеза прошла кастдев, разработка готова на 90%, остается протестить. Четкими цифрами поделиться не смогу, но примерные расчеты показали что нам хватит 2 недели при ожидаемом приросте 10%. Вот вам кейс, посчитайте :) Тест превзошел ожидания, уже через 2 месяца все было готово для раскатывания на всех пользователей.

Метрики — твои друзья. Я смотрю не только целевые метрики теста, в нашем случае конверсия и ретен, но и смежные: глубина просмотра, тепловая карта кликов, конверсия в покупку. Всегда есть вероятность увидеть что-то большее, чем задумывалось.

Итерации, а не одноразки. Допустим, если гипотеза не зашла, то я всегда копаю глубже: что пошло не так? Как я могу исправить ситуацию? Пивот? Какой секрет успеха?

Я думаю что надо всегда слушать юзеров, проверять идеи маленькими шагами и не бояться косячить. Главное — сделать продукт лучше.

А как вы формулируете и тестируете гипотезы? Напишите в комментариях одну гипотезу, которую вы бы проверили в своём продукте прямо завтра.