Почему коэффициент конкордации может быть незначимым при большом количестве экспертов?

Коэффициент конкордации может быть незначимым при большом количестве экспертов по нескольким причинам:

• Оценка каждого эксперта в отдельности почти не влияет на групповую оценку. portal.tpu.ru При очень большом количестве экспертов трудно добиться согласованного мнения. cito-web.yspu.org
• Рост численности экспертной группы не всегда приносит повышение достоверности оценок. portal.tpu.ru Часто расширение группы экспертов возможно лишь за счёт малоквалифицированных специалистов, что может привести к уменьшению достоверности групповых оценок. portal.tpu.ru
• Увеличиваются трудности, связанные с координацией работы группы и обработкой результатов опроса. portal.tpu.ru

Коэффициент конкордации должен быть обязательно проверен на значимость, так как при незначимом коэффициенте конкордации суммарное ранжирование по всей экспертной группе не несёт в себе объективной информации об относительной важности упорядочиваемых элементов. cyberleninka.ru