Что такое ошибка первого рода

Ошибка первого рода (False Positive, Type I error) — это ошибочное отклонение верной нулевой гипотезы (H₀), когда на самом деле она верна. Например, в A/B-тестировании это означает, что мы ошибочно считаем, что новая версия лучше, хотя разницы нет.

Уровень значимости (α) задает вероятность ошибки первого рода. Например, при α=0.05 мы допускаем 5% ложных срабатываний.

Пример в Python:

from scipy import stats
# Предположим, p-value = 0.03 при α=0.05
p_value = 0.03
if p_value < 0.05:
    print("Отклоняем H₀ (риск ошибки первого рода 5%)")
else:
    print("Не отклоняем H₀")