Новая кнопка категории в интерфейсе не учит классификатор новому смыслу. Согласованно меняются определения меток, разметка примеров, модель и потребители результата. Начните с вопроса: какие обращения раньше относились к другой категории, а теперь должны попадать в новую? Без этой границы дообучение лишь перенесёт спор в данные.
Соберите искусственные положительные примеры, похожие отрицательные и граничные случаи. Например, вопрос о порядке обмена и жалоба на уже оформленный обмен могут требовать разных меток по вашему процессу. Это условное разделение, не универсальная таксономия. Ответственный за очередь подтверждает определения до подготовки финального теста.
Новая метка меняет договор нескольких компонентов
| Компонент | Что версионировать | Типичный сбой |
|---|---|---|
| Определения | Границы и примеры категорий | Операторы размечают по старым правилам |
| Данные | Смысл каждой эталонной метки | Одинаковое имя означает разные задачи |
| Модель и подготовка | Совместимый комплект | Новая модель читает старый словарь |
| Маршрутизация | Разрешённый исход новой категории | Неизвестная метка теряется |
| Отчёт | Сопоставимость периодов | История меняет смысл без пояснения |
Старая категория «другое» не превращается целиком в новую. В ней могут быть десятки разных смыслов. Если исходные данные доступны по разрешённому процессу, пересматривается ограниченная выборка. Если нет, история сохраняет прежнюю метку и версию. Выдуманная ретроспективная точность хуже честного разрыва сравнимости.
Независимый тест не участвует в выборе примеров
Рекомендации scikit-learn предупреждают об утечке данных: использование тестовых данных для выбора модели или обучения преобразований делает оценку чрезмерно оптимистичной. Проверено 14 октября 2026 года. Новую категорию также проверяют на отдельной части корпуса; примеры, по которым разработчик уточнял правила, не выдаются за независимую приёмку.
Условный комплект релиза:
label_schema: v_next
annotation_guide: <утверждённая версия>
preprocessing: <совместимая версия>
model: <кандидат>
routing_contract: <поддерживает новую метку>
acceptance_set: <не использован при настройке>Старые категории остаются в проверке. Модель может научиться новой теме ценой массового переноса соседнего класса. Сравните ошибки до и после на одном контрольном наборе, отдельно прочитайте пары меток, между которыми прошла граница. Нужен результат по каждому значимому срезу, а не только итоговый рост совпадений.
Метка, не поддерживаемая маршрутизацией, должна давать согласованный разбор, а не пропасть из очереди. Во время поэтапного выпуска старый обработчик может ещё принимать запросы. Либо он работает со своей версией договора, либо отклоняет несовместимый результат явно. Названия полей и порядок числовых кодов не подменяют версию.
Приёмка проходит через сохранение и повтор
- Проверить положительные и похожие отрицательные примеры.
- Сравнить старые категории на неизменённом корпусе.
- Сохранить новую метку и прочитать её в очереди.
- Повторить операцию без второй заявки.
- Вернуть прежний комплект и проверить новые исторические записи.
Откат модели не удаляет уже принятые метки новой версии. Старый интерфейс должен показать их безопасно или направить на предусмотренный разбор, не переименовывая автоматически. Журнал сохраняет исходную классификацию и последующее подтверждённое исправление. Так отчёт может объяснить, почему распределение изменилось в день релиза.
Перед выпуском подготовьте определения границ, версионированный комплект и результаты независимой проверки. Схема относится к технической сортировке обращений, не к автоматическому решению о людях. Готовность видна в полном пути: новый смысл распознаётся, соседний не поглощается, очередь понимает метку, а история остаётся читаемой после возврата прежней версии.