Сообщить об ошибкеКороткий ответ
Соберу обе стороны (или их формулировки по отдельности), покажу точное определение метрики с расчётом на конкретном примере когорты, и явно выделю, в чём именно расходится интерпретация (например, одна сторона смотрит на retention от даты регистрации, другая — от даты первой покупки), прежде чем предлагать решение.
Как это работает подробнее
споры об интерпретации одной метрики часто возникают не из-за разных цифр, а из-за разных скрытых определений («retention» может считаться от разных точек отсчёта, разных событий «возврата», разных окон) — конфликт решается явным формализованным определением, а не спором о выводах.
Что использовать на практике
- Применение. прошу каждую сторону письменно сформулировать, как именно они понимают метрику, показываю расчёт на одной и той же когорте с обоими определениями рядом, чтобы увидеть, где расхождение, и предлагаю зафиксировать единое определение в общем глоссарии метрик (data dictionary), доступном всей компании.
- Проверка или пример. Определение продукта: Retention D30 = доля пользователей, открывших приложение на 30-й день от регистрации. Определение продаж: Retention D30 = доля клиентов, сделавших повторную покупку в течение 30 дней от первой покупки. Расчёт на одной когорте сентября: По определению продукта: 18% По определению продаж: 9% Оба расчёта корректны для своих целей (вовлечённость в приложение vs повторные покупки), но называть их нужно разными именами («App Retention D30» и «Repeat Purchase Rate D30»), чтобы прекратить путаницу.
Подводные камни
- Частая ошибка. попытаться «математически доказать», что одна сторона права, без прояснения того, что они на самом деле по-разному определяют метрику — спор продолжается, потому что стороны говорят о разных вещах; не задокументировать итоговое определение, из-за чего конфликт повторяется через несколько месяцев с новыми участниками.