Конфигурация hreflang настроена правильно, но страница не попала в индекс. В чём может быть причина?

После запуска многоязычного сайта теги hreflang уже настроены, но страницы на разных языках всё никак не появляются в результатах поиска Google. С такой ситуацией сталкиваются многие специалисты по управлению сайтами. Не спешите снова и снова менять теги: hreflang указывает на соответствие языков и регионов страниц, но не гарантирует их сканирование или индексацию. Чтобы оптимизировать индексацию страниц с hreflang, проверку нужно расширить и включить в неё сканирование, каноникализацию, содержание страниц и внутренние ссылки сайта.

Для начала выясните: страница действительно не проиндексирована или просто не показывается?

Если страница на нужном языке не видна при поиске по ключевому слову, это не обязательно означает, что она не проиндексирована. Возможно, она занимает низкую позицию или поисковая система считает, что для текущего пользователя больше подходит другая версия. Вместо многократного поиска по ключевым словам проще открыть Google Search Console, воспользоваться инструментом «Проверка URL» и ввести полный URL страницы, которая не показывается. Проверьте статус индексации, время последнего сканирования и URL, выбранный Google в качестве канонического.

Если инструмент сообщает «URL есть в Google», но результат поиска неудовлетворительный, дополнительно проверьте соответствие ключевым словам, местоположение пользователя и качество страницы. Если указано, что страница не проиндексирована, устраните причину, указанную в отчёте. Обратите внимание: проверка в реальном времени позволяет оценить текущую доступность страницы, но успешный результат проверки не означает, что страница уже проиндексирована.

На каком этапе может возникнуть проблема — от сканирования до индексации?

1. Страница недоступна для сканирования

Даже если hreflang настроен безупречно, дальнейшая обработка невозможна, если поисковая система не может получить содержимое страницы. Открыть целевой URL в браузере — это только первый шаг. Проверьте также, возвращает ли сервер ожидаемый код состояния 200, нет ли ограничений на вход, капчи, блокировки по регионам или частых ошибок сервера. Если сайт загружает содержимое с помощью JavaScript, просмотрите отрендеренную страницу в инструменте проверки URL и убедитесь, что основной текст и ссылки доступны для чтения.

Затем проверьте robots.txt, директиву noindex на странице и HTTP-заголовки ответа. Особое внимание: запрет сканирования в robots.txt не является надёжным способом запретить индексацию. Если на странице изначально была директива noindex, а сканирование заблокировано, поисковая система также может не увидеть эту директиву. Если вы хотите, чтобы страница индексировалась, снимите соответствующие ограничения и обеспечьте возможность её сканирования.

2. Канонический URL указывает на другую версию

Предположим, что canonical французской страницы указывает на главную страницу на английском языке. В таком случае поисковая система может счесть французскую страницу дубликатом, а не отдельной языковой версией. При проверке изучите не только указанный на странице canonical, но и «URL, выбранный Google в качестве канонического» в Search Console. Если они не совпадают, проверьте сходство содержимого, внутренние ссылки, перенаправления и карту сайта, чтобы выявить противоречивые сигналы.

Для страниц на разных языках обычно следует указывать канонический URL каждой страницы, соответствующий ей самой. Если существуют версии на одном языке для разных регионов с очень похожим содержимым, принимайте решение с учётом фактического содержимого и целевых рынков. Не удаляйте все canonical без разбора только ради индексации какой-либо страницы.

3. Корректный формат тегов не гарантирует полноту связей между версиями

Даже если синтаксис hreflang на отдельной странице не вызывает ошибок, проверьте, что группа страниц ссылается друг на друга, в том числе каждая версия ссылается на саму себя; коды языка и региона действительны; целевые URL доступны и не перенаправляют на страницы, не имеющие отношения к ним. Например, для английского языка в Великобритании используется en-GB, а не произвольное сокращение названия страны. x-default можно использовать для указания страницы по умолчанию, если язык или регион пользователя не соответствует ни одной из заданных версий, но это не переключатель индексации.

Информацию hreflang можно указывать в HTML-тегах, HTTP-заголовках ответа и XML-карте сайта. Независимо от выбранного способа главное — обеспечить согласованность ссылок. Если используются несколько способов, особенно важно следить, чтобы для одной и той же языковой версии не указывались разные адреса.

4. Страница обнаружена, но её содержимого недостаточно для индексации

Статусы «Обнаружена — пока не проиндексирована» и «Просканирована — пока не проиндексирована» не всегда означают техническую неисправность. В первом случае нужно проверить ресурсы сканирования, ответы сервера и структуру сайта. Во втором — также оценить, не является ли содержимое дублирующимся, поверхностным или лишённым практической ценности. Не следует делать вывод о причине только по названию статуса.

Типичный пример: переведена только навигация, а описания продуктов, характеристики и сведения о покупке отсутствуют; на страницах для разных регионов меняется лишь символ валюты; машинный перевод затрудняет понимание технических характеристик и отраслевых терминов. Для экспортных компаний обычно полезнее добавить сведения о сценариях применения, единицах измерения характеристик, способах доставки и возможности отправить запрос, которые важны для местных пользователей, чем просто копировать страницы. Содержимое должно быть достоверным и подходить для соответствующего рынка; не нужно выдумывать информацию ради создания различий.

Порядок проверки для специалистов по управлению сайтами

Если не проиндексировано много страниц, выберите один показательный URL и последовательно проверьте следующее, вместо того чтобы одновременно менять весь сайт:

1. Можно ли просканировать страницу: проверьте код состояния, robots.txt, noindex, перенаправления и результат рендеринга страницы.
2. Какая версия считается канонической: сравните указанный canonical с URL, выбранным Google в качестве канонического, и проверьте наличие противоречивых сигналов.
3. Соответствуют ли друг другу языковые версии: по отдельности проверьте адреса и коды hreflang, а также взаимные ссылки; убедитесь, что целевые страницы доступны.
4. Легко ли обнаружить страницу: добавьте доступные для сканирования внутренние ссылки из навигации, страниц категорий или связанных страниц на соответствующем языке и отправьте канонические URL в карте сайта.
5. Соответствует ли содержимое местным потребностям: проверьте качество перевода, полноту основной информации и то, действительно ли страница соответствует целевому языку и региону.

После исправлений можно запросить индексацию важных страниц в Search Console и зафиксировать дату изменений и результаты проверки. Такой запрос лишь предлагает поисковой системе повторно обработать страницу и не гарантирует немедленное сканирование или индексацию. Для большого числа страниц эффективнее устранять общие проблемы, улучшать внутренние ссылки и карту сайта, а затем отслеживать результаты.

После запуска многоязычного сайта проверяйте не только теги

Если команда управляет несколькими языковыми версиями с помощью системы создания сайтов, шаблоны могут автоматически генерировать canonical, hreflang, навигационные ссылки и карту сайта для множества страниц. Прежде чем вносить изменения, выясните, где управляются эти правила, а затем проверьте их на небольшом числе страниц. Это поможет снизить риск того, что одно изменение повлияет на несколько рынков. После добавления языка, переноса домена или изменения URL эти сигналы также следует проверить повторно.

Если команда одновременно отвечает за создание многоязычных сайтов и привлечение клиентов за рубежом, технические проверки можно включить в повседневные рабочие процессы. 易营宝 предоставляет услуги по созданию многоязычных сайтов и SEO-оптимизации. При выборе способа внедрения рекомендуем прежде всего убедиться, что содержимое страниц, директивы индексации и связи между языковыми версиями удобно проверять и поддерживать. Главное в оптимизации индексации страниц с hreflang — не усложнить теги, а обеспечить поисковым системам доступ к каждой ценной странице, возможность понять её содержимое и отличить её от других.