# Байес и частотный подход в A/B

В Sales Ninja это не академический спор, а выбор стратегии остановки в форме A/B-теста.

Байесовская (по умолчанию) Частотные (объём выборки / последовательная)
Вопрос «С какой вероятностью вариант лучше?» «Можно ли отвергнуть гипотезу об отсутствии разницы?»
Остановка Порог вероятности победы + макс. длительность Объём + мин. дни или значимость на промежуточных проверках
Поправка множественных сравнений Не используется Бонферрони / Шидак / без — см. страницу
Язык результата «С вероятностью X% B лучше» Значимость / объём набран / срок вышел

# Когда что

  • Байес — большинство продуктовых тестов, нужна понятная формулировка для команды.
  • Объём выборки — заранее известный MDE и желание строгой «выборки до решения».
  • Последовательная — долгий горизонт и желание остановиться раньше при ясном эффекте.
  • Ручная — полный контроль; оценка на карточке ориентировочная.

Подробные параметры: Стратегии остановки.

# Связано