Как проектировать сбор labels и feedback: implicit signals, position bias, замкнутая feedback loop?

Labels в проде почти никогда не даются готовыми — их добывают из поведения, и каждый источник biased. Implicit feedback (clicks, views, purchases) дёшев и обилен, но заражён position bias и exposure bias. Explicit (ratings, reports) чище, но его мало и он непредставителен. Отдельная опасность — замкнутая feedback loop: модель решает, что показать → показ решает, какие labels соберутся → labels решают следующую модель.