📊 Как определить метрики для АБ-теста? 4 ключевых типа 🎯 1. Целевые метрики Это главный показатель успеха. Их рост напрямую доказывает, что гипотеза сработала.
Пример: конверсия из триала в платную подписку.💰
📈 2. Прокси-метрики (опережающие) Более чувствительные индикаторы, которые меняются раньше целевых. Используем, когда не можем долго ждать или нужна большая чувствительность.
Пример: вовлеченность в первые дни триала 🕐, активация ключевой функции 🔑
🛡️ 3. Заградительные метрики Контрольные показатели, которые нельзя уронить. Их падение может перечеркнуть успех, даже если целевая метрика выросла.
Пример: Retention на 7-й день 📅, доход на пользователя (ARPU) 📉
🧠 4. Информационные метрики Помогают понять, как изменилось поведение пользователей. На решение по тесту не влияют, но дают пищу для новых гипотез.
Пример: среднее время до оплаты ⏳, частота дополнительных покупок 🛒
⚠️ Правило: выбирай минимальный набор метрик, достаточный для принятия решения. Чем больше метрик - тем выше риск ложных выводов из-за множественного сравнения 🔀