Почему нельзя всегда использовать уровень значимости 0,05 в статистических исследованиях?

Уровень значимости 0,05 нельзя всегда использовать в статистических исследованиях, потому что выбор критического уровня значимости зависит от объёма выборки. www.statmethods.ru

При малом объёме выборки более вероятно получить случайный результат, поэтому можно допустить большую вероятность ошибки первого рода. www.statmethods.ru При увеличении объёма выборки случайные отклонения компенсируют друг друга, и получить значимое различие в выборках при их однородности менее вероятно, поэтому нужно брать меньший уровень значимости. www.statmethods.ru

Например, если объём выборки небольшой (до 100 единиц), то можно отвергнуть нулевую гипотезу при уровне значимости 0,05 или даже 0,1. www.statmethods.ru При объёме выборки, измеряемой сотнями (от 100 до 1000), следует понизить уровень значимости хотя бы до 0,01. www.statmethods.ru А при больших выборках, измеряемых тысячами наблюдений, уверенно отвергать нулевую гипотезу можно только при значимости меньшей 0,001. www.statmethods.ru

Кроме того, уровень значимости устанавливается произвольно, и его смещение в большую или меньшую сторону повышает вероятность получения ложноположительных или ложноотрицательных результатов. xn--80aegcaa6cbngm5a6c1ci.xn--p1ai

Таким образом, выбор уровня значимости требует компромисса между заданной значимостью и мощностью, и истинным критерием является экспертное мнение исследователя, его опыт и интуиция, а не применение стандартного значения 0,05. www.statmethods.ru