Мощность эксперимента: как связаны минимальный значимый эффект, размер выборки и риск не заметить улучшение?

Четыре величины связаны жёстко: уровень значимости (риск увидеть эффект, которого нет), мощность (шанс заметить эффект, который есть), минимальный значимый эффект и размер выборки. Зафиксировав три, четвёртую вы не выбираете — она вычисляется. Для доли размер группы примерно 16 · p(1−p) / Δ² при 80% мощности и 5% значимости. Отсюда главный вывод: маленькие эффекты требуют огромных выборок, и это надо признавать до эксперимента, а не после.