🚨 Ошибки в работе с коэффициентом конверсии

В одном из чатов спросили про ошибки при расчете коэффициента конверсии, накатал комментарий и решил поделиться у себя)

Пункты ниже не всегда являются ошибками, но чаще всего все же являются, нужно смотреть конкретную ситуацию.

1. Усреднение конверсии по сегментам, которые сильно отличаются. Например, мобилки и десктоп или разные источники трафика.

2. Расчет конверсии на всем потоке пользователей, а не на когортах.

3. Точечная оценка конверсии, без учёта доверительных интервалов.

4. Расчет конверсии без учёта цикла сделки, т.е. периода дозревания когорт.

5. Не верный выбор базисных единиц в числителе и знаменателе. Например, в числитель записали число заявок, а в знаменателе число пользователей. Это получится не конверсия, к среднее число заявок на пользователя.

6. Возможна не верная оценка результатов АБ тестов при расчете конверсии по сессиям. Статья1, статья2