Отложенные метки: как учиться, если подтверждение приходит через недели?

Во многих задачах истина известна не сразу: чарджбэк приходит через 30–120 дней, возврат товара — через две недели, брак вскрывается на следующем переделе. Это ломает и обучение, и измерение. Первое следствие — свежие данные размечены неполно: отсутствие подтверждения не означает «всё хорошо», оно означает «ещё не приехало», и наивная разметка нулями систематически занижает долю положительных. Лечится это несколькими способами: обучаться только на созревших периодах (проще всего, но модель отстаёт на срок созревания), взвешивать свежие наблюдения по доле уже наступивших подтверждений, либо явно моделировать распределение задержки — подход, известный как delayed feedback modeling. Второе следствие — метрики нельзя считать по свежему окну: отчёт за последнюю неделю всегда покажет фиктивно низкий уровень фрода. Практическое правило: держать две шкалы времени — время события и время наступления метки, и всегда указывать, на какую дату посчитан отчёт.