Некоторые причины, по которым научные исследования могут не давать однозначных результатов:
- Недостаточная статистическая мощность. 1 Чем меньше выборка, тем выше вероятность того, что результаты окажутся случайными. 1
- Маленький размер эффекта. 1 Такие эффекты сложнее подтвердить, а вероятность случайных находок выше. 1
- Соотношение истинных и ложных гипотез в конкретной научной области. 1 Если большинство исследуемых гипотез ложны, вероятность получения ложноположительного результата возрастает. 1
- Гибкость в дизайне исследования, выборе методики анализа и интерпретации данных. 1 Изменение методик на ходу или манипуляции с анализом данных могут приводить к тому, что отрицательные результаты превращаются в положительные. 1
- Финансовые и другие предвзятости. 1 Например, фармацевтические компании заинтересованы в том, чтобы их препараты демонстрировали положительные результаты, что может приводить к предвзятости в выборе данных или методов анализа. 1
- Конкуренция за публикации. 1 В областях с большим числом исследовательских групп конкуренция за публикации ведёт к снижению надёжности результатов. 1
Также к причинам ненадёжности исследований относят маленькие выборки, нестыковки в цифрах, стремление к сенсациям и слишком простые ответы на сложные вопросы. 4