Некоторые альтернативы метрике mean reciprocal rank (MRR) для оценки качества ранжирования:
- Cumulative gain at K (CG@K). 2 Базовая метрика ранжирования, которая использует идею: чем релевантные элементы в топе, тем лучше. 2
- Метрики на основе ранговой корреляции. 2 Например, коэффициенты Спирмена и Кендэлла, которые учитывают не сами значения, а их ранг (порядок). 2 Однако они не учитывают позицию элементов, поэтому на практике используются редко. 2
- Mean Average Precision (MAP). 4 Отражает долю релевантных рекомендаций и то, насколько хорошо система помещает более релевантные элементы в начало списка. 4
- Normalized Discounted Cumulative Gain (NDCG@k). 3 Нормированная метрика, которая даёт оценку в диапазоне от 0 до 1: чем выше оценка, тем лучше ранжирование. 3
Для комплексной оценки качества ранжирования можно комбинировать несколько метрик. 4