В e-commerce красный флаг: вы “собрали данные”, но не зафиксировали контекст — и метрики начинают врать.
Сценарий узнаваемый: вчера конверсия выросла, сегодня упала, маркетинг празднует ROMI, продукт спорит про A/B, финансы смотрят на маржу и не понимают, где деньги. Итог один: решения принимаются по “цифрам”, которые описывают не бизнес, а случайный срез.
Почему ломается интерпретация? Потому что e-commerce — это цепочка: показ → клик → заказ → оплата → отгрузка → доставка → возврат. А мы часто смотрим на один узел и делаем вывод про всю цепь. Плюс правила игры постоянно меняются: окно атрибуции, модель, промо, цены, наличие, логистика. Если эти изменения не записаны рядом с метрикой, вы сравниваете разные миры.
Минимальный стандарт, без которого выводам нельзя доверять:
- Атрибуция и окна. Всегда фиксируйте модель, lookback, post-click и post-view, что считается “заказом” и в какой момент он засчитывается. Смена окна превращает “рост” в артефакт.
- Каннибализация. Разделяйте инкремент и перераспределение: новый канал, витрина или рекомендация часто забирают продажи у других источников, а не создают новые.
- Промо и маржа. Выручка без скидок, купонов, субсидий доставки и COGS — не про бизнес. В периоды промо смотрите вклад в маржу, а не только в заказы.
- Возвраты и отмены. Договаривайтесь, что вы меряете: размещённые заказы, оплаченные, доставленные, чистую выручку после возвратов. И одинаково применяйте правило во времени.
- Out-of-stock. Наличие — это “скрытая переменная”. Если товар отсутствует, вы тестируете не фичу и не креатив, а ограничение склада.
Правильная практика выглядит скучно: у каждой метрики есть подпись мелким шрифтом — окно, источник истины, статус заказа, политика возвратов, промо-календарь, правило учёта наличия. Обычно спорят про “какая метрика главнее”, но чаще проблема в другом: метрика одна, а реальностей вокруг неё несколько. Это особенно критично на коротких тестах и в промо-периоды.
