Английское обращение о возврате должно сохранять смысл «возврат», даже если язык влияет на выбор команды. Если модель возвращает «English» вместо предметной категории, проверьте словарь меток и обучающие примеры. Язык и намерение решают разные вопросы; смешанный список вынуждает систему выбирать между ними.
Создайте искусственные варианты одного запроса на нескольких языках и короткое смешанное сообщение. Сравните два поля: язык и категорию. Не используйте происхождение человека как замену языку текста. Разбор касается технической очереди обращений, а не решений о пригодности людей или доступе к значимым услугам.
Договор результата не заставляет выбирать между полями
Условный ответ классификации:
category: return_request
language: en
category_state: accepted / uncertain
language_state: accepted / mixed / unknown
label_schema: <версия>
routing_policy: <отдельное правило очереди>Один смысл может быть выражен несколькими языками, а один язык встречается во всех категориях. Если в обучающем наборе английские тексты почти всегда про возвраты, модель может выучить ложную связь. Подготовьте контрольные сочетания: разные смыслы на одном языке и тот же смысл на разных языках. Перевод не считается новым независимым клиентским случаем.
Ошибки читаются в языковых срезах
В scikit-learn confusion_matrix строка соответствует истинной метке, столбец — предсказанной; порядок можно задать списком labels. Проверено 14 октября 2026 года. Для проверки категории можно построить такие матрицы отдельно по языкам. Общая матрица без срезов способна скрыть ошибки небольшого языкового сегмента.
| Контроль | Ожидаемый смысл | Что выявляет |
|---|---|---|
| Одинаковый запрос на двух языках | Одна предметная категория | Зависимость категории от языка |
| Разные вопросы на одном языке | Разные предметные категории | Сведение всех текстов к языковой метке |
| Короткое «OK» | Язык может остаться неизвестным | Принудительное угадывание |
| Смешанное сообщение | Согласованный mixed или иной исход | Потерю неопределённости |
Не требуйте единственный уверенный язык от каждого короткого текста. Ссылки, названия товаров и цитата чужого сообщения могут не отражать язык текущего запроса. Установите правило, какой фрагмент анализируется и когда требуется уточнение. Не превращайте unknown языка в неизвестную предметную категорию автоматически.
Разделение полей не обязывает запускать две внешние модели. Реализация может быть общей или отдельной, но договор и оценка остаются раздельными. Если используется перевод, сохраняйте его версию и проверьте, не исчезли ли отрицание, название операции или контекст. Отказ перевода должен иметь предусмотренный исход.
Очередь выбирается после классификации
- Проверить искусственные пары одного намерения.
- Добавить разные категории на каждом тестовом языке.
- Испытать короткий и смешанный текст.
- Прочитать отдельные поля на сервере и в интерфейсе.
- Проверить маршрутизацию при unknown языка.
Политика очереди может учитывать язык и категорию вместе, но это отдельное правило. Смена языка интерфейса пользователя не меняет категорию уже прочитанного обращения. Поздний ответ старой версии анализа не должен заменить результат после редактирования текста. Свяжите вычисление с ревизией входа.
При миграции смешанного словаря не заменяйте все старые English на одну предметную метку: исходный смысл из такого значения не восстановить. Пометьте неизвестность и пересмотрите только разрешённую выборку по доступному тексту. Сохраните прежний результат для истории. Для дальнейшего разбора нужны определения обоих полей, контрольные пары и матрицы по языкам — без личных сообщений клиентов.