Перейти к содержимому
39 / 39

Что такое слабый надзор и синтетические данные: размечающие функции Snorkel, перенос знаний из LLM и обучающие примеры, сгенерированные моделью?

Слабый надзор (weak supervision) заменяет ручную разметку размечающими функциями (правила, регулярные выражения, уже готовые модели), а Snorkel учит модель LabelModel объединять их подсказки с учётом точности и взаимных корреляций. Синтетические данные добавляют примеры через расширение данных, порождающие модели (GAN, диффузия), перенос знаний из большой LLM в маленькую и программную генерацию. Итог всегда проверяйте на реальном тестовом наборе — иначе модель выродится и наберёт ничем не подкреплённых искажений.

Что такое слабый надзор и синтетические данные: размечающие функции Snorkel, перенос знаний из LLM и обучающие примеры, сгенерированные моделью? | JScriptiser