Некоторые основные недостатки использования p-значений в научных исследованиях:

• Неправильная интерпретация. 1 P-значение часто неверно понимается как вероятность того, что нулевая гипотеза верна. 1 Также распространена практика принятия альтернативной гипотезы для любого P-значения, номинально меньшего 0,05, без других подтверждающих доказательств. 1
• Ошибки первого рода (ложноположительные заключения). 1 Использование p-значений нередко приводит к ним, так как их применение не учитывает контекстуальные факторы, такие как дизайн исследования, качество измерений, внешние доказательства изучаемого явления и обоснованность предположений, лежащих в основе анализа данных. 1
• Неустойчивость на эквивалентных выборках. 1 Это может стать препятствием для воспроизводимости результатов эксперимента. 1
• Не указание на размер или важность наблюдаемого эффекта. 2 Небольшое значение p может наблюдаться для эффекта, который не является значимым. 2