SYSTEM ATLASЗагрузка материала

Расхождение обучения и инференса

Training-Serving Skew

Различие между данными или преобразованиями при обучении и в production, вызывающее непредсказуемое ухудшение модели.

Простыми словами

Представьте приложение с моделью, которая получает данные и выдаёт прогноз, ответ или действие. Важно понимать не только итог модели, но и какие данные, ограничения и проверки привели к нему, потому что уверенный результат всё равно может оказаться неправильным. Так модель остаётся частью контролируемого процесса, а её результат можно проверить, ограничить и пересмотреть. Поэтому модель проверяют на новых данных и ошибках, а не только на примерах, которые она уже видела.

Пример от @Vibeclakr

Пример при разработке

Например, для «Расхождение обучения и инференса» назначают ответственного и добавляют тест или метрику, по которой видно реальный результат.

Это редакционный пример применения, а не часть определения или доказательство концепции.

Формальное определение

Различие между данными или преобразованиями при обучении и в production, вызывающее непредсказуемое ухудшение модели.

Механизм действия

Для «Расхождение обучения и инференса» команда фиксирует область действия, владельца, проверяемый сигнал и поведение при нарушении условия.

Пример в работе

Нерабочий подход

Повторять термин «Расхождение обучения и инференса», не объяснив, где он применяется, кто отвечает и по какому признаку видно результат.

Системный подход

Связать «Расхождение обучения и инференса» с конкретным сценарием, автоматической или ручной проверкой и правилом пересмотра.

Ограничения

«Расхождение обучения и инференса» решает ограниченную задачу и не заменяет проверку соседних рисков, исходных допущений и последствий для всей системы.

Источник

Google, “Production ML Systems: Monitoring Pipelines”, 2025.

Первоисточник