Сообщить об ошибкеКороткий ответ
Ошибка I типа (ложноположительный результат) — это признать эффект значимым, когда на самом деле его нет; её вероятность контролируется alpha. Ошибка II типа (ложноотрицательный результат) — это не заметить реально существующий эффект; её вероятность связана с мощностью теста (1 - мощность = бета).
Как это работает подробнее
обе ошибки — это два разных способа ошибиться при принятии решения по тесту: alpha контролирует частоту «увидеть эффект там, где его нет», бета — частоту «пропустить эффект, который есть».
Таблица-памятка: | | Эффекта нет (H0 верна) | Эффект есть (H0 неверна) | | Признали значимым | Ошибка I типа (alpha) | Верное решение | | Не признали значимым | Верное решение | Ошибка II типа (бета) | Пример: alpha=0.05 означает не более 5% ложных тревог среди тестов без реального эффекта; бета=0.2 (мощность 80%) означает, что до 20% реальных эффектов могут быть пропущены при данном дизайне теста.
Что использовать на практике
- снижение alpha (более строгий порог значимости) при том же размере выборки обычно повышает бету (растёт риск пропустить реальный эффект), поэтому их выбирают совместно с учётом стоимости каждой ошибки для бизнеса.
Подводные камни
- путают два типа ошибок местами или считают, что снижение alpha «делает тест лучше» без учёта того, что это повышает риск пропустить реальный эффект при фиксированной выборке.