7 / 20
Теневой режим, канареечная выкатка, A/B и перемешивание выдачи: чем эти способы выкатки модели отличаются и что каждый измеряет?
Четыре способа отвечают на разные вопросы. Теневой режим (shadow) — «не сломается ли новая модель технически»: она получает копию трафика, ответы никому не показываются, только логируются. Канареечная выкатка (canary) — «безопасно ли увеличивать долю»: небольшой процент реального трафика под автоматическими проверками. A/B-тест — «лучше ли она по бизнес-метрике»: статистически значимое сравнение на разделённых группах. Перемешивание выдачи (interleaving) — быстрое сравнение ранжирований: результаты двух моделей смешиваются в одном списке.