❔ Как выбрать A/B-платформу: своя, open source или SaaS? Раньше выбор был из двух: платишь за SaaS или пишешь своё. Сейчас между этими полюсами появился нормальный open source 🎩 SaaS — когда нужно быстро VWO, A/B Tasty, Optimizely, Statsig, Kameleoon — классика для старта. Подключил, завёл тест, через пару дней уже смотришь результаты. У многих есть визуальный редактор: лендинг можно крутить без разработчиков
Подходит, если задачи стандартные — сравнить два варианта, протестировать лендинг, покрутить кнопку. Не подходит, если нужен полный контроль над данными или глубокая интеграция с внутренней инфраструктурой
🤓 Open source — когда есть DevOps, но нет бюджета на лицензии GrowthBook, Unleash, Flagsmith. Лицензия бесплатная, деплоишь у себя, данные остаются внутри. GrowthBook чаще всего закрывает потребности с запасом — flags, эксперименты, аналитика. Unleash силён в feature flags, Flagsmith удобен для мобилки и веба с remote config
Экономия на подписке, но затраты на инфра и поддержку — на стороне команды. При выборе стоит смотреть на базовые вещи: встанет ли в стек, потянет ли нагрузку, есть ли живое комьюнити и документация
Подходит, если нужен контроль без enterprise-ценника. Не подходит, если некому поддерживать — self-hosted без DevOps быстро превращается в головную боль 🤨 Своё — когда готовые решения не тянут
Дорого, долго, но иногда без вариантов. Кастомные метрики, жёсткая безопасность, нестандартное сплитование, интеграция с внутренним DWH
У Ozon, например, своя платформа — это не просто «вариант A vs B». Поверх сплит-сервиса и стенда метрик работает оптимизатор: подбирает параметры алгоритма рекомендаций, учитывает десятки метрик с защитными ограничениями, интегрируется с ClickHouse и Airflow. Такое ни один SaaS из коробки не даст
Подходит, если объём экспериментов и трафика окупают разработку, и есть команда, которая будет это поддерживать как продукт. Не подходит, если экспериментов мало или некому развивать — в итоге получится дорогой костыль А нужна ли платформа вообще?
Перед выбором из трёх — стоит честно ответить себе на это. Платформа раскрывается, когда уже есть сплитование, метрики и постоянный поток тестов. Сама по себе она не починит данные, не научит формулировать гипотезы и не создаст культуру решений на цифрах Если в ближайший год меньше десятка экспериментов — хватит Google Analytics, таблички и пары feature flags. Сначала — тесты руками. Потом — выбор между SaaS, open source и своим Как не ошибиться?
Кому-то нужен no-code для лендингов, кому-то мультивариант, кому-то SDK под бэкенд или мобилку. Начинать лучше с задачи, а не с прайса. Самая частая ошибка — взять «самый мощный» тариф, где половина функций не понадобится
📈 Инструмент приходит вторым. Сначала — эксперименты