Как часто переобучать модель и как понять, что она деградировала?

Частота определяется скоростью, с которой устаревают данные, а не календарём. Практический ориентир: ранжировщик — от ежедневного до еженедельного, модель отбора — раз в неделю-две, эмбеддинги объектов — по мере появления новинок инкрементально. Деградацию ловят не по одной цифре, а по связке: сдвиг распределения входных признаков, ухудшение калибровки, падение офлайн-метрики на свежем окне и, наконец, продуктовые метрики. Первые три сигнализируют раньше. Отдельная проверка — сравнение с зафиксированной старой версией на одном и том же свежем окне: это отделяет деградацию модели от изменения самих данных.