Сообщить об ошибкеКороткий ответ
В тесте меняют одну основную переменную и заранее выбирают метрику успеха. Результат оценивают после достаточного объёма данных, учитывая статистическую неопределённость.
Как это работает подробнее
Трафик случайным образом делится между вариантами одновременно и в одинаковых условиях, после чего сравнивается ключевая метрика — CTR, CPA или CR — с учётом статистической значимости различия. Помимо встроенного инструмента A/B-теста платформы, тест можно проводить и через раздельные кампании с одинаковым бюджетом и таргетингом, но это менее надёжно, так как аукцион для двух отдельных кампаний формируется независимо.
Что использовать на практике
- Используйте встроенное распределение аудитории платформы, ограничьте число вариантов и задайте длительность и целевую метрику до запуска.
Подводные камни
- Несопоставимые периоды, одновременная смена текста и изображения и преждевременный выбор по нескольким кликам превращают тест в шумное наблюдение.