Как проверить URL в Google Search Console

Сравните индексную версию и проверку опубликованной страницы в Google Search Console: доступность, индексную политику и canonical. Пример и границы проверки.

Инструмент проверки URL в Search Console отвечает на два разных вопроса, и маркетолог теряет время, когда смешивает их. Сведения из индекса показывают, что Google знает о последней проиндексированной версии страницы. Проверка опубликованной страницы показывает, что доступно роботу сейчас. Как проверить URL в Google Search Console без путаницы: сначала снять данные индекса, затем прогнать live-проверку и сравнить три поля — доступность, индексную политику и canonical.

Запуск проверки URL в Search Console

Инструмент проверки URL даёт сведения о проиндексированной роботами Google версии страницы, а также о структурированных данных, AMP-версии, текущем статусе и возможности индексирования Инструмент проверки URL[1].

Запускают его двумя способами Инструмент проверки URL[1]:

  1. Ввести полный URL в строке поиска в верхней части интерфейса Search Console. Адрес должен вести на доступный ресурс.
  2. Нажать значок проверки рядом с URL страницы в большинстве отчётов. Иногда значок появляется при наведении указателя на URL.

Условие одно: URL должен относиться к вашему ресурсу. Для чужого адреса справка предлагает инструменты проверки расширенных результатов и AMP-страниц Инструмент проверки URL[1]. Перед первым запуском проверьте, что аккаунт добавлен к ресурсу — об этом в материале как добавить пользователя в Google Search Console.

Число запросов на проверку за день ограничено для каждого ресурса Инструмент проверки URL[1]. Поэтому проверяют не весь сайт подряд, а страницы, где расхождение с индексом меняет решение.

Сведения об индексной версии: что показывает карточка

Карточка индекса открывается сразу после ввода URL. Она описывает последнюю проиндексированную версию, а не ту страницу, что сейчас лежит на сервере: со времени сканирования страница могла измениться или исчезнуть Инструмент проверки URL[1].

Поля, которые сравнивают в первую очередь:

  • Общий статус. «URL есть в индексе Google» означает, что страница может быть, но необязательно будет представлена в результатах поиска. «URL нет в индексе Google» — что этого не произойдёт Инструмент проверки URL[1].
  • Как обнаружено. Каким способом роботы Google нашли URL Инструмент проверки URL[1].
  • Сканирование. Дата сканирования или проблемы, помешавшие ему. Если статус «URL нет в индексе Google», причина обычно описана здесь Инструмент проверки URL[1].
  • Индексирование. Канонический URL, который алгоритмы Google выбрали для страницы Инструмент проверки URL[1].
  • Доступность страницы. Включает статус индексирования, разрешение сканирования и индексирования, страницу, указанную вебмастером, и страницу, выбранную Google.

Отдельно стоит поле Каноническая страница, выбранная пользователем — это URL, который вы задали явно через тег, HTTP-заголовок, Sitemap или другим способом. Google не гарантирует выбор именно его, но учитывает Инструмент проверки URL[1]. Каноническая страница, выбранная Google — это URL, который роботы выбрали среди аналогичных версий. Он может не совпадать с указанным вебмастером Инструмент проверки URL[1]. Значение этого поля может отставать от индекса на несколько часов Инструмент проверки URL[1].

Здесь появляется первая граница. Инструмент проверки URL не учитывает всех требований к показу страниц в Google; чтобы понять, появляется ли страница в результатах, справка предлагает выполнить поиск её URL в Google Инструмент проверки URL[1].

Проверка опубликованной страницы: что даёт live-тест

Live-тест смотрит на ту версию страницы, которая опубликована сейчас, и анализирует её в режиме реального времени. Результаты могут отличаться от проверки проиндексированной версии Инструмент проверки URL[1].

Как запустить:

  1. Ввести URL и открыть проверку.
  2. Нажать Проверить страницу на сайте.
  3. Переключаться между опубликованной версией и данными индекса кнопками Проверить опубликованную версию и Использовать данные из индекса Google.

Важно, чтобы страница была доступна любому пользователю интернета без авторизации Инструмент проверки URL[1]. Если она закрыта авторизацией или брандмауэром, live-тест не покажет содержимое, которое видит робот.

Live-тест проверяет доступность страницы для индексирования роботом Google-InspectionTool. Он показывает, разрешено ли сканирование и индексирование, и какой canonical указан на странице Инструмент проверки URL[1]. Но определить каноническую версию можно только на основе результатов индексирования; проверка опубликованных страниц не даёт представления, можно ли считать проверенную версию канонической Инструмент проверки URL[1].

Поэтому выбор Google по canonical в live-тесте не виден. Если система выполняет перенаправления, она тестирует итоговую страницу, но в результатах не показывает, что был переход, и не называет конечный проверенный URL Инструмент проверки URL[1].

Почему положительный live-тест не подтверждает включение в поиск

Справка отвечает на это прямо: положительный результат подтверждает лишь то, что страница доступна для индексирования роботом Google-InspectionTool. Проверки, которая гарантированно покажет, будет ли страница включена в индекс Google, не существует Инструмент проверки URL[1].

Чтобы индексирование состоялось, страница должна пройти и другие условия: отсутствие ручных мер и юридических проблем, уникальность или корректный canonical в наборе похожих страниц, достаточное качество Инструмент проверки URL[1]. Часть этих условий live-тест не проверяет.

Запрос на индексирование — отдельное действие с отдельной кнопкой Запросить индексирование. Отправка запроса не гарантирует появления страницы в индексе Google, а число запросов за день ограничено Инструмент проверки URL[1]. Если live-тест покажет, что страницу проиндексировать невозможно, запросить индексирование не даст Инструмент проверки URL[1].

Таблица сравнения и учебный пример

Сравнение двух проверок по одним и тем же полям удобнее вести таблицей. Колонки — источник данных; строки — поля, которые меняют решение.

Поле Сведения об индексной версии Проверка опубликованной страницы (live-тест)
Что проверяется
Последняя проиндексированная версия
Опубликованная версия в реальном времени
Доступность
Общий статус: URL есть в индексе Google / URL есть в индексе Google, но есть проблемы / URL нет в индексе Google
URL доступен Google / URL доступен Google, но есть проблемы / URL недоступен Google
Индексная политика
Сканирование разрешено? Индексирование разрешено?
Сканирование разрешено? Индексирование разрешено?
Заявленный canonical
Каноническая страница, выбранная пользователем
Каноническая страница, выбранная пользователем
Выбранный Google canonical
Каноническая страница, выбранная Google (в разделе «Доступность страницы»)
Не показывается

Значения полей для индексной версии взяты из карточки индекса и раздела «Доступность страницы», для live-теста — из отчёта проверки опубликованной страницы Инструмент проверки URL[1]. Выбранный Google canonical появляется только в данных индекса, поэтому в правой колонке прочерк.

Учебный пример

Учебный пример

Берём адрес https://example.com/article. Подставляйте адрес своей страницы. Заполняем две колонки по шагам: сначала снимаем данные индекса, затем запускаем live-тест и переносим значения в таблицу.

Поле Данные индекса Live-тест
Общий статус
URL есть в индексе Google
URL доступен Google
Доступность страницы
Страница проиндексирована
URL можно проиндексировать
Сканирование разрешено?
Да
Да
Индексирование разрешено?
Да
Да
Каноническая страница, выбранная пользователем
https://example.com/article
https://example.com/article
Каноническая страница, выбранная Google
https://example.com/article
Не показывается

Контрольный результат по этому проходу:

  1. В учебной таблице заявленный canonical совпадает в обеих версиях. В данных индекса выбранный Google canonical тоже равен https://example.com/article. Именно поле «Каноническая страница, выбранная Google» показывает выбор Google для индексной версии; совпадение двух заявленных адресов само по себе этого не доказывает Инструмент проверки URL[1].
  2. В учебной таблице URL есть в индексе, а live-тест показывает доступность. Если при проверке своей страницы вы получите сочетание «URL доступен Google» и «URL нет в индексе Google», проверьте, не изменились ли noindex или robots.txt после последнего сканирования: роботы могли ещё не проиндексировать новую версию Инструмент проверки URL[1].
  3. Если live-тест даёт «URL доступен Google», это подтверждает доступность, но не включение в поиск и не заменяет запрос на индексирование.

Проверить результат можно так: повторите live-тест через сутки и сравните поля с первой таблицей. Если статус индекса не изменился, а live-тест стабильно показывает доступность, откройте отчёт об индексировании страниц и посмотрите, какая причина указана в разделе «Доступность». Для страницы с дублями проверьте canonical по материалу canonical в техническом SEO.

Границы результата и что не входит в проверку

Справка перечисляет сведения, которые не отображаются в результатах проверки Инструмент проверки URL[1]:

  • Соответствие страницы и структурированных данных рекомендациям по качеству и безопасности.
  • Проблемы безопасности сайта и меры, принятые вручную.
  • Требования об удалении контента по закону.
  • Временная блокировка URL в Search Console.
  • Для live-теста — проиндексировано ли видео: видно, что ролик обнаружен, но не видно, включён ли он в индекс.

Live-тест не смотрит на присутствие URL в файлах Sitemap и на ссылающиеся страницы Инструмент проверки URL[1]. Он не нацелен на выявление всех проблем индексирования, включая случаи, когда страница является копией или альтернативной версией Инструмент проверки URL[1].

Отдельно держите в голове ловушку с robots.txt: если доступ к странице заблокирован файлом robots.txt, в поле «Индексирование разрешено?» всегда будет «Да», потому что робот не увидит директиву noindex. Тогда страница может появляться в результатах, даже если индексирование запрещено в настройках сайта Инструмент проверки URL[1]. Сначала проверяйте сканирование, затем индексирование.

Порядок действий для одной страницы за один проход:

  1. Снять данные индекса: общий статус, сканирование, индексирование, заявленный и выбранный Google canonical.
  2. Убрать из проверки всё, что не относится к доступности и индексной политике.
  3. Прогнать live-тест и заполнить правую колонку.
  4. Сравнить поля построчно и записать контрольный результат: доступна ли страница, совпадает ли canonical, есть ли расхождение между версиями.
  5. Если опубликованная страница отличается от индексной и live-тест подтверждает доступность, можно запросить индексирование, отправить Sitemap или дождаться автоматического сканирования Инструмент проверки URL[1]. Если сохраняется ошибка доступности, сначала изучить её причину в разделе «Доступность».

После сравнения видно, какие вопросы закрыты, а какие остаются за пределами обеих проверок. Live-тест показывает текущую доступность и заявленный canonical. Выбранный Google canonical проверяют в данных индекса. Появление страницы в поиске проверяют поиском её URL в Google; положительный live-тест не подтверждает соответствие требованиям качества Инструмент проверки URL[1].

Источники

  1. Инструмент проверки URL - Справка Search Consolesupport.google.com

Валерий Курземнек

Автор метода «Машиночитаемый маркетинг»

Что ещё почитать