Как корректно поставить KPI для A/B-теста «карусель против Reels» на одну и ту же тему контента?

Короткий ответ

Нужно заранее определить одну главную метрику успеха, соответствующую цели теста (например, ER по охвату или переходы по ссылке в профиле), зафиксировать равные условия публикации (похожее время, отсутствие параллельных платных кампаний, сопоставимая тема), и только после этого сравнивать результаты — иначе разница в форматах смешается с разницей в условиях публикации и выводы будут ненадёжны.

Как это работает подробнее

у карусели и Reels разные встроенные метрики (глубина просмотра слайдов против процента досмотра видео), поэтому для честного сравнения нужна общая метрика более высокого уровня — ER по охвату, количество сохранений или переходов, а не сравнение несопоставимых внутренних показателей каждого формата.

Что использовать на практике

• Рекомендация. тест стоит планировать на нескольких парах публикаций (не на одной паре), чтобы сгладить случайные колебания охвата, и заранее решить минимальный срок наблюдения (например, 7 дней на пост), прежде чем снимать итоговые цифры.

Подводные камни

• Риск. сравнивать всего одну карусель с одним Reels и делать вывод на основе одной пары постов; менять несколько переменных одновременно (и формат, и тему, и время публикации), из-за чего невозможно понять, что именно повлияло на разницу в результатах.