8 / 10
Зачем мерить покрытие каталога, разнообразие и новизну, если метрики релевантности растут?
Потому что метрики релевантности растут и у выродившейся системы. Модель, которая всем показывает топ-100 бестселлеров, получит приличные Precision и NDCG — популярное действительно кликают. При этом каталог перестаёт продаваться, новые товары не получают шанса, а лента становится одинаковой для всех. Покрытие ловит, какая доля каталога вообще показывается; разнообразие — насколько объекты внутри одной выдачи не похожи друг на друга; новизна — насколько показанное нетривиально для этого пользователя. Это метрики-ограничители: их держат в допустимом коридоре, пока оптимизируют релевантность.