# A/B тесты
A/B тест — инструмент для проверки гипотез. Вы создаёте несколько вариантов страницы, система показывает каждый вариант части посетителей и собирает статистику. По результатам вы принимаете решение: какой вариант работает лучше.
# A/B тест vs Персонализация
Оба инструмента изменяют контент на странице и отслеживают конверсии. Но цели у них разные:
| A/B тест | Персонализация | |
|---|---|---|
| Цель | Проверить гипотезу, выбрать лучший вариант | Непрерывно растить конверсию |
| Кто выбирает вариант | Случайно (или по многорукому бандиту) | AI на основе поведения пользователя |
| Результат | Принять решение по одному варианту | Показывать каждому пользователю оптимальный вариант |
| Когда заканчивается | После накопления достаточной статистики | Никогда — работает постоянно |
| Обучение | Отсутствует | Постоянное обучение ML-модели |
Когда выбрать A/B тест:
- Нужно проверить конкретную гипотезу ("красная кнопка конвертирует лучше синей?")
- Нужен однозначный ответ — какой вариант победил
- Тест планируется завершить после набора статистики
Когда выбрать персонализацию:
- Нужно постоянно оптимизировать конверсию
- Разные посетители могут реагировать на разные варианты по-разному
- Нет желания вручную принимать решение о победителе
Двустороннее преобразование: A/B тест можно превратить в персонализацию (и наоборот) — все данные и настройки сохраняются.
# Многорукий бандит
По умолчанию в A/B тестах включён многорукий бандит — алгоритм, который автоматически перераспределяет трафик в пользу более успешных вариантов.
С многоруким бандитом (по умолчанию): варианты получают трафик неравномерно. Вариант с более высокой конверсией постепенно получает больше показов. Это позволяет быстрее достичь статистически значимого результата и получать повышенный эффект уже во время проведения теста.
Без многорукого бандита: каждый вариант получает одинаковую долю трафика. Например, при 4 вариантах — каждый получает 25%.
Отключить можно в настройках A/B теста.
# Три статуса
| Статус | Описание |
|---|---|
| Работает | Тест активен, посетители распределяются по вариантам |
| Остановлено | Тест приостановлен. Посетители видят обычный сайт |
| В архиве | Тест завершён и скрыт из основного списка |