Короткий ответ
Нужно выделить на тест ограниченную, заранее определённую долю общего бюджета (а не весь бюджет кампании сразу), достаточную для набора статистически значимых данных в разумный срок, и только после выбора победителя направлять основной бюджет на лучший вариант, а не держать весь бюджет поровну между вариантами весь период кампании.
Как это работает подробнее
фаза теста рассматривается как отдельный этап с собственным небольшим бюджетом и сроком (например, 10–15% от общего бюджета кампании на 3–5 дней), после которого принимается решение и оставшийся бюджет направляется на масштабирование выигравшего варианта.
Что использовать на практике
- На практике. слишком маленький тестовый бюджет не даст достаточно данных для значимого вывода, а слишком большой увеличивает риск потратить значительную часть бюджета кампании на заведомо менее эффективный вариант; нужно заранее рассчитать минимальный необходимый объём показов/кликов и выделить под это соответствующий бюджет, независимо от желания «сэкономить» на тесте.
- Пример. Общий бюджет кампании — 300 000 руб. На тестовую фазу (3 креатива, 4 дня) выделяется 45 000 руб. (15%), после чего оставшиеся 255 000 руб. направляются на креатив-победитель. Проверка: к концу тестовой фазы каждый вариант набрал не менее 1000 кликов, что достаточно для статистически значимого сравнения CTR.
Подводные камни
- Частые ошибки. распределение всего бюджета кампании поровну между вариантами на весь срок без выделения отдельной тестовой фазы, что снижает общую эффективность расходования бюджета; слишком раннее перераспределение бюджета в пользу лидирующего варианта до накопления статистически значимых данных.