Что показывают MAP@K и MRR и когда какая метрика уместна?

MRR (средний обратный ранг) смотрит только на первый релевантный объект: если он на позиции r, вклад запроса равен 1/r. Метрика для задач, где нужен один правильный ответ: автодополнение, «продолжить просмотр», ответ на конкретное намерение. MAP@K (средняя точность) усредняет Precision по всем позициям, где встретился релевантный объект, и потому вознаграждает плотную верхушку целиком. Метрика для лент и подборок, где пользователь пробегает несколько карточек. Обе бинарны: релевантно или нет. Есть градации релевантности — берите NDCG.