Сообщить об ошибкеКороткий ответ
Объясню без термина «парадокс Симпсона», а через аналогию: общая цифра упала не потому, что каждый сегмент работает хуже, а потому, что изменился состав трафика — выросла доля сегмента с изначально более низкой конверсией (например, мобильного веба), что «утяжелило» общую смесь вниз даже при улучшении каждой отдельной части.
Как это работает подробнее
агрегированная метрика — это взвешенная сумма метрик сегментов, и вес каждого сегмента (его доля в общем трафике) может меняться во времени независимо от качества самого сегмента; при сдвиге структуры трафика общий показатель может двигаться в другую сторону, чем каждая его часть.
Что использовать на практике
- Применение. показываю таблицу «было / стало» с долями сегментов и их конверсией отдельно, явно считаю вклад каждого сегмента в общий показатель (weighted contribution), чтобы визуально показать, что рост доли слабого сегмента перевесил улучшение внутри каждого сегмента.
- Проверка или пример. Сегмент Q1: доля / конв. Q2: доля / конв. Десктоп 50% / 4.0% 30% / 4.5% Мобильный веб 30% / 1.5% 55% / 1.8% Приложение 20% / 5.0% 15% / 5.5% Общая конверсия Q1 = 0.54.0 + 0.31.5 + 0.25.0 = 3.45% Общая конверсия Q2 = 0.34.5 + 0.551.8 + 0.155.5 = 3.14% Вывод для руководства: каждый сегмент улучшился, но доля низкоконвертирующего мобильного веба выросла с 30% до 55%, что и утянуло общий показатель вниз — обсуждать нужно причины сдвига канала привлечения, а не качество продукта.
Подводные камни
- Частая ошибка. объяснять только словами без таблицы с цифрами — абстрактное объяснение парадокса плохо воспринимается без наглядного примера; сделать вывод «конверсия выросла везде, значит всё хорошо», без упоминания изменившейся структуры трафика, которая и должна стать предметом отдельного обсуждения (например, почему выросла доля мобильного веба).