01
Проверьте входные данные
Сверьте числа с документом, счётчиком или аналитикой. Не смешивайте месячные и годовые значения, рубли и проценты, разные единицы длины или веса.
Калькулятор A/B-теста
Размер выборки для планирования теста и проверка статистической значимости результатов. Ориентир для маркетологов и продакт-менеджеров.
На вариант
15 680
~9 дней при 3500 визитов/день на вариант.
31 360
всего визитов
—
уверенность
Оговорки
Калькулятор использует упрощённый z-тест для бинарной конверсии (α=0.05, двусторонний). Предполагаются независимые выборки. Для мультивариантных и байесовских тестов — специализированные инструменты.
Калькулятор A/B-теста: что показывает расчёт
Калькулятор A/B-теста работает с параметрами конкретной задачи. Размер выборки для планирования теста и проверка статистической значимости результатов. Ориентир для маркетологов и продакт-менеджеров.
Калькулятор подставляет значения в формулу и показывает результат без промежуточных арифметических ошибок. Если ответ нужен для отчёта или учёбы, сохраните исходные данные и правило округления — одной финальной цифры недостаточно для проверки.
В расчёте используются поля «Baseline CR %», «MDE (мин. эффект) %», «Трафик в день шт.». Если часть данных приблизительная, итог тоже нужно считать ориентиром: изменение одного входного параметра может заметно поменять ответ.
Пример заполнения
Калькулятор A/B-теста
Baseline CR %12%
MDE (мин. эффект) %12%
Трафик в день шт.31.08.2026
Расчётный результат
42,7
Baseline CR %учтено
MDE (мин. эффект) %учтено
Как проверить и использовать результат
02
Посмотрите на единицы
Финальная цифра имеет смысл только вместе с единицей измерения и периодом. Перед переносом в смету или отчёт проверьте округление.
03
Сравните два сценария
Измените самый неопределённый параметр в меньшую и большую сторону. Диапазон покажет риск лучше, чем один «точный» ответ.
Важно: калькулятор помогает быстро проверить арифметику, но не знает условий договора, технических допусков и индивидуальных ограничений. Для решения с финансовыми, юридическими, медицинскими или инженерными последствиями перепроверьте исходные данные по профильному источнику.
Сколько трафика нужно на A/B-тест
Размер выборки считается заранее, до запуска. Иначе тест останавливают в момент, когда «уже видно разницу», и принимают за результат случайный скачок.
Калькулятор выше считает по стандартной аппроксимации для мощности 80% и значимости 95%: n ≈ 16 × p × (1 − p) ÷ MDE², где p — текущая конверсия, MDE — минимальный эффект, который вы хотите заметить, в долях. Результат — визиты на каждый вариант.
| Переменная | Смысл | Как выбрать |
|---|---|---|
| Базовая конверсия | Что есть сейчас | Из отчёта по цели за последний месяц |
| MDE | Минимальная разница, ради которой стоит менять | Считается от денег: какой прирост оправдает внедрение |
| Трафик в сутки | Сколько визитов приходит на страницу | Определяет срок теста; на точность выборки не влияет |
Счётный примерКонверсия
2,4%, хотим заметить прирост в 0,5 п.п.: n = 16 × 0,024 × 0,976 ÷ 0,005² ≈ 15 000 визитов на вариант, то есть 30 000 на тест целиком. При 3 500 визитах в сутки это около девяти дней. Если снизить MDE вдвое, до 0,25 п.п., выборка вырастет вчетверо — квадрат в знаменателе.Правила, без которых тест не считается
1
Не подглядывать. Проверка результата каждый день ломает значимость: чем чаще смотрите, тем выше шанс поймать случайный перевес.
2
Полные недели. Поведение в выходные отличается от будней, поэтому тест длится кратно семи дням.
3
Одна гипотеза за раз. Изменили сразу форму, заголовок и цену — не узнаете, что сработало.
4
Один сегмент. Мобильные и десктоп конвертят по-разному; смешение даёт средний результат ни о чём.
5
Считать деньги. Вариант может выигрывать по заявкам и проигрывать по выручке.
Когда A/B-тест не нужен
При маленьком трафике корректный тест длился бы месяцами: при 200 визитах в сутки на выборку 15 000 нужно больше двух месяцев на вариант. В такой ситуации решают иначе — правят очевидные дефекты, смотрят записи сессий и карты кликов, тестируют изменения крупными шагами, где ожидаемый эффект измеряется в разах, а десятые процента не ловят вовсе.
Оценить, что даст прирост конверсии в деньгах, помогает калькулятор конверсии, а окупаемость канала — ROI.
Частые вопросы
Зачем калькулятор A/B-теста?
Чтобы понять, сколько трафика нужно и можно ли доверять разнице в конверсии.
Как считается размер выборки?
Классическая формула для пропорций: baseline CR, MDE, α=0.05, power=80%.
Что такое MDE?
Minimum Detectable Effect — минимальный эффект в %, который хотите заметить.
Это замена stats-движка?
Нет, ориентир. Для сложных тестов — специализированные инструменты.
Калькулятор бесплатный?
Да.
Почему нельзя остановить тест, когда разница уже видна?
Потому что при частых проверках значимость перестаёт работать: конверсия колеблется день ко дню, и в какой-то момент один вариант почти всегда оказывается впереди случайно. Размер выборки считается до старта, и тест останавливают по достижении этого числа визитов; останавливаться по виду графика нельзя.
Что такое MDE и как его выбрать?
Минимальный эффект, который вы хотите уметь заметить. Выбирается от денег: если прирост конверсии на 0,2 п.п. не окупит внедрение, ставить такой MDE незачем. Чем меньше MDE, тем больше выборка — зависимость квадратичная, уменьшение эффекта вдвое увеличивает нужный трафик вчетверо.
Сколько должен длиться тест?
Столько, сколько нужно на расчётную выборку, но кратно полным неделям. Формула даёт визиты на вариант; поделите на суточный трафик страницы и округлите вверх до недели. Тесты короче недели почти всегда попадают в дневную и недельную сезонность.
Другие калькуляторы
Нужна помощь с тестами?
A/B-тесты креативов, лендингов и воронок — в услугах.