Короткий ответ Объясню руководству, что наблюдаемая разница скорее всего частично или полностью объясняется тем, что более активные и платящие клиенты чаще видят кампанию (а не кампания делает их активными), покажу это на данных через сравнение характеристик групп до кампании, и предложу способ получить надёжный причинный ответ (геоэксперимент, holdout-группа) вместо того, чтобы подтвердить желаемый, но непроверенный вывод. Как это работает подробнее если показ кампании не был рандомизирован, а зависел от поведения клиента (например, кампанию видят те, кто чаще заходит в приложение или уже совершал покупки), то сравнение «видел vs не видел» сравнивает не эффект кампании, а изначально разные по качеству группы клиентов — это классическое смещение самоотбора, похожее на смещение выжившего. Пример кода Что использовать на практике Применение. проверяю характеристики обеих групп до начала кампании (историческая выручка, частота покупок за предыдущий период) — если группы уже различались до кампании, это прямое до
Загрузка…
