← Все руководстваЭксперименты · 7 минут

Первый A/B-тест: от идеи до решения

«Вариант B красивее» — не гипотеза. «Объяснение трёх преимуществ до выбора тарифа поможет новым пользователям понять ценность» задаёт причину и ожидаемый эффект.

Команда RuFlow · Проверено

Сформулируйте причинную гипотезу

«Вариант B красивее» — не гипотеза. «Объяснение трёх преимуществ до выбора тарифа поможет новым пользователям понять ценность» задаёт причину и ожидаемый эффект.

Выберите одну основную метрику

Конверсия в покупку удобна для первого теста, но не описывает всё. Следите также за выручкой на пользователя и доступными данными о возвратах. Не выбирайте победителя по той метрике, которая случайно оказалась лучше.

Определите аудиторию и окно

Не смешивайте новых пользователей с теми, кто уже видел предложение, без осознанной причины. В RuFlow отчёт использует созревшие семидневные когорты: свежие показы ещё не успели получить полный результат.

Не останавливайтесь на первом зелёном числе

Маленькая выборка часто даёт большой случайный эффект. Смотрите на объём, интервалы неопределённости и полноту событий. Если данных недостаточно, корректный вывод — «пока не знаем».

Запишите решение

Сохраните версии, аудиторию, период и результат. Даже отсутствие убедительного различия полезно: команда перестаёт возвращаться к одной и той же непроверенной идее.

Применим к вашему приложению?

На пилоте пройдём этот сценарий вместе.

Обсудить пилот →

Читать дальше