Когда поисковик индексирует только основной язык, возьмите одну пару страниц — например /ru/service/ и /en/service/ — и откройте обе без cookie и заголовка Accept-Language. Каждая должна отвечать 200, содержать полноценный текст своего языка, self-canonical и ссылки на обе версии. Если английский вариант появляется только после выбора языка в JavaScript или сразу перенаправляет обратно по IP, робот может его не обнаружить.
Hreflang не заставляет неиндексируемую страницу попасть в поиск. Он связывает уже доступные варианты и помогает выбрать подходящий для пользователя. Сначала устраните 404, noindex, robots, чужой canonical и тонкий машинный перевод; затем проверяйте аннотации. Это экономит время на исправлении XML, когда проблема находится в маршрутизации или контенте.
Определите стадию, на которой исчез язык
| Стадия | Что видно | Следующая проверка |
|---|---|---|
| обнаружение | URL нет в обходе и логах | обычные ссылки и sitemap |
| обход | робот получает redirect/403/5xx | ответ без cookie и геолокации |
| рендеринг | HTML пуст до JavaScript | отрендеренный контент и ресурсы |
| канонизация | выбран URL другого языка | self-canonical и различие текста |
| кластер hreflang | аннотации игнорируются | взаимность, коды и конечные URL |
| качество | страница обходится, но не показывается | полнота перевода и ценность |
Проверьте серверные логи по точному URL и отчёт инспекции страницы. Sitemap сообщает о существовании адреса, но не заменяет внутреннюю ссылку. Переключатель языка должен быть обычной ссылкой с href, чтобы робот и пользователь могли перейти без выполнения сценария. Не прячьте все варианты за POST-формой выбора языка.
Пара URL должна быть согласована симметрично
<!-- /en/service/ -->
<link rel="canonical" href="https://example.test/en/service/">
<link rel="alternate" hreflang="en" href="https://example.test/en/service/">
<link rel="alternate" hreflang="ru" href="https://example.test/ru/service/">
<link rel="alternate" hreflang="x-default" href="https://example.test/service/">Пример показывает форму аннотаций, а не обязательную структуру каталогов. На русской странице перечисляется тот же набор URL, включая её саму. Коды языка и региона берут из поддерживаемого формата, не из произвольных названий рынков. Все ссылки ведут сразу на конечный 200-ответ; redirect внутри hreflang-кластера затрудняет проверку и может изменить фактическую цель.
Автоопределение языка не должно запирать варианты
- Googlebot обычно приходит без Accept-Language, поэтому один динамический URL скрывает часть вариантов;
- георедирект предлагает язык, но оставляет прямой URL доступным и сохраняет ручной выбор;
- cookie влияет на подсказку интерфейса, а не заменяет адрес страницы;
- основное содержание и навигация переведены, а не только title и H1;
- canonical одного языка не указывает на другой лишь потому, что страницы похожи по структуре;
- локализованные URL присутствуют в собственной навигации и, при выбранной схеме, в sitemap.
Google определяет язык по видимому содержимому страницы. Атрибут lang полезен для браузера и доступности, но сам по себе не превращает русский текст в английскую версию. Страница со смешанным шаблоном, пустым описанием и несколькими переведёнными кнопками может выглядеть как слабый дубль. Проверяйте именно то, что видит гость, а не наличие записи в таблице переводов.
Исправления выпускают маленьким языковым набором
Выберите пять важных страниц одного типа, исправьте URL, ссылки, canonical, hreflang и полноту перевода. Обновите sitemap и дождитесь повторного обхода. Не меняйте одновременно домен, CMS и структуру всех языков: тогда невозможно отличить задержку переезда от ошибки локализации.
В отчёте сравнивайте не только количество проиндексированных URL, но и выбранный canonical, последний обход, язык видимого текста и показы по локальным запросам. Одна страница может индексироваться под другим URL, поэтому простая проверка site: не объясняет причину.
Финальный тест выполняется без персонализации
- Запросить оба URL без cookie, Accept-Language и авторизации и сохранить HTTP-цепочку.
- Сравнить title, H1, основной текст, canonical и полный взаимный набор hreflang.
- Перейти по переключателю как по обычной ссылке и проверить сохранение выбранного языка.
- Найти оба адреса в sitemap и внутренних ссылках, исключив redirect и noindex.
- Повторить инспекцию после релиза и записать, какой canonical выбрала поисковая система.
Для диагностики подготовьте таблицу языковых пар, ответы curl, фрагменты head, sitemap и результаты инспекции без пользовательских данных. Доступ к аккаунтам переводчиков не нужен. Если языков много, сначала исправьте один шаблон и применяйте доказанную схему пакетно, сохраняя список исключений.