Почему минимальная обнаруживаемая разница важна в статистическом тестировании?

Минимальная обнаруживаемая разница (минимально обнаруживаемый эффект, MDE) важна в статистическом тестировании, потому что позволяет определить, позволяет ли размер выборки провести тест с достаточной чувствительностью для выявления значимых различий. en.wikipedia.org

Некоторые причины важности MDE:

• Небольшие различия трудно обнаружить. workspace.ru Для этих целей требуются очень масштабные выборки. workspace.ru Сильные различия видны и на примере небольшой выборки. workspace.ru
• Маленькие выборки могут быть ненадёжны, а тесты — ошибочны. workspace.ru Всегда существует риск ошибки, есть небольшая числовая вилка, в пределах которой результат можно считать достоверным. workspace.ru
• Важно избежать ложноотрицательных результатов, когда тест не показывает преимущество ни одного из вариантов, несмотря на то, что есть варианты эффективнее других. workspace.ru

MDE зависит от размеров выборки, базовых пропорций и параметров тестирования. en.wikipedia.org Увеличение объёма образцов или меньшие требования к мощности приводят к меньшему MDE, что делает тест более чувствительным к меньшим различиям. en.wikipedia.org