Сплит-тест
A/B Test
Сплит-тест (A/B-тест) — метод сравнения двух или более вариантов страницы, оффера или креатива, при котором трафик случайно делится между ними, а победитель выбирается по целевой метрике.
Gambling, Betting, Crypto, Fintech, Dating, Nutra
Как это работает
Трафик случайно делится между вариантами A и B. Каждый посетитель видит один вариант, а система считает конверсию в целевое действие: регистрацию, депозит, первую покупку или подписку. Сравнение имеет смысл только тогда, когда вариант меняется один и выборки в группах сопоставимы.
Где применяется
В гемблинге и беттинге тестируют лендингиЛендингЛендинг (landing page) — одностраничный сайт, на который ведёт рекламный трафик, с одной целевой задачей: получить лид, регистрацию, депозит или покупку. регистрации, формулировки бонусов и порядок игр или событий в лобби. В криптовалютах и финтехе проверяют онбординг, формы подключения кошелька и количество шагов верификации. В дейтинге сравнивают фото и первое сообщение. В нутре проверяют заголовки, структуру прелендингаПрелендингПрелендинг — промежуточная страница между рекламой и посадочной страницей оффера, которая прогревает пользователя и повышает конверсию или проходит модерацию. и офферыОфферОффер — предложение рекламодателя партнёрам: продукт вместе с условиями выплат, гео и требованиями к трафику, за которые партнёр получает вознаграждение. с учётом правил рекламных площадок для товаров для здоровья.
На что влияет
Конверсия напрямую влияет на CRCRCR (Conversion Rate) — конверсия: доля посетителей или кликов, которые выполнили целевое действие, например регистрацию, депозит или заявку., стоимость целевого действия и ROIROIОкупаемость: сколько процентов прибыли принесли вложения. кампании. Небольшое улучшение на этапе депозита при большом объёме трафика заметно меняет экономику, но только если тест проведён корректно.
Частые ошибки
Остановка теста по первому выигрышу, пока выборка мала. Одновременное изменение нескольких элементов, из-за чего непонятно, что дало эффект. Разный состав трафика в вариантах: разные гео, источники или устройства. Сравнение по кликам вместо целевого действия. Игнорирование сезонности и смены креативовКреативКреатив — рекламный материал (баннер, видео, текст, нативный блок), который показывают пользователю в трафиковом канале, чтобы привлечь его на оффер или лендинг. посреди теста.
Что важно при запуске
Одна гипотеза и одна основная метрика на тест. Заранее заданы минимальный размер выборки и длительность, рассчитанные от базовой конверсии и ожидаемого прироста. Распределение должно быть стабильным: пользователь при повторном визите видит тот же вариант.
Частые вопросы
Сколько длится сплит-тест?
Длительность зависит от базовой конверсии, объёма трафика и размера ожидаемого эффекта. Тест нельзя останавливать, пока не набрана заранее рассчитанная выборка, даже если один вариант выглядит лучше.
Чем сплит-тест отличается от мультивариантного теста?
В сплит-тесте сравниваются полные версии страницы или оффера целиком. Мультивариантный тест одновременно проверяет несколько отдельных элементов и их комбинации, поэтому требует значительно большей выборки.
Можно ли тестировать креативы в рекламной сети?
Да, креативы и связки обычно проверяют раздельно по одинаковым условиям показа. Важно сравнивать варианты на одинаковых площадках, гео и аудиториях, иначе результат будет искажён.