Как проверить индексацию страницы в Яндексе и Google

Проверить индексацию страницы нужно в двух случаях: когда вы опубликовали что-то новое и ждёте появления в поиске, и когда трафик на страницу вдруг пропал. В статье разберём все рабочие способы проверки в Яндексе и Google — от быстрого поискового оператора до панелей вебмастера и массовой проверки сотен адресов, а также расскажем, как читать статусы и что делать, если страницы в индексе нет. Инструкция пригодится владельцам сайтов, маркетологам и SEO-специалистам.

Что значит «страница в индексе»

Страница в индексе — это страница, которую поисковая система обошла, обработала и включила в свою базу для показа в результатах поиска. Важно различать три состояния:

робот о странице не знает — адрес ещё не найден ни по ссылкам, ни в sitemap;
страница обойдена, но исключена — робот её видел, но решил не показывать в поиске: дубль, noindex, малоценная страница;
страница в поиске — она может показываться по запросам, хотя позиция при этом может быть любой.

От того, в каком состоянии страница, зависит, что делать дальше. Если робот о ней не знает, её нужно показать поисковику — например, через сервис ускорения индексации страниц или инструменты вебмастера. Если страница исключена, отправлять её повторно бесполезно, пока не устранена причина.

Способ 1. Поисковые операторы site: и url:

Самый быстрый способ, не требующий никаких доступов, — поисковые операторы. Они подходят и для своего, и для чужого сайта, например чтобы проверить, проиндексирована ли статья о вашей компании на внешней площадке.

В Яндексе

url:example.ru/uslugi/remont — проверяет конкретный адрес. Если страница в индексе, она будет в результатах. Со звёздочкой в конце адреса оператор покажет все страницы раздела.
site:example.ru — страницы всего сайта, включая поддомены. Число результатов приблизительное.

В Google

site:example.ru/uslugi/remont — проверка конкретной страницы: введите полный адрес после оператора.
site:example.ru — страницы сайта в индексе, тоже с приблизительным числом результатов.

Ещё один приём — поиск точной фразы из текста страницы в кавычках. Если страница в индексе и текст уникален, она найдётся. Так удобно проверять страницы, у которых сложные адреса с параметрами.

Ограничения операторов: число найденных страниц — оценка, а не точный подсчёт; выдача может отличаться в разных регионах; свежие изменения в индексе иногда отражаются в результатах с задержкой. Поэтому для своего сайта опирайтесь на данные панелей вебмастера.

Способ 2. Яндекс Вебмастер

Если права на сайт подтверждены, Вебмастер даёт самую точную информацию о том, как Яндекс видит страницы. Как добавить сайт и подтвердить права, мы описали в статье о настройке Яндекс Вебмастера.

«Индексирование → Проверка статуса URL». Вставьте адрес — Вебмастер покажет, в поиске ли страница, когда робот обходил её последний раз и какой код ответа получил. Если страница исключена, будет указана причина.
«Индексирование → Страницы в поиске». История добавления и исключения страниц за период и полный список адресов в поиске. Таблицу можно выгрузить в файл.
Исключённые страницы в том же разделе — список адресов, которые Яндекс видел, но не показывает, с причиной для каждого.
«Индексирование → Статистика обхода». Какие страницы робот запрашивал и какие ответы сервера получал — помогает найти ошибки 5xx и лишние редиректы.

Способ 3. Google Search Console

В Search Console аналогичную роль играют два инструмента:

«Проверка URL» — статус конкретной страницы: проиндексирована ли она, какую каноническую страницу выбрал Google, когда было последнее сканирование. Здесь же есть кнопка «Запросить индексирование».
Отчёт «Индексирование страниц» — сводка по сайту: сколько страниц проиндексировано и по каким причинам остальные не попали в индекс. По каждой причине можно открыть список примеров.

Обратите внимание на поле с канонической страницей в «Проверке URL». Если Google выбрал каноническим другой адрес, а не тот, что указан у вас в canonical, значит, он считает страницы дублями. Такая страница формально «известна» Google, но в поиске показывается другая. Подробнее о том, как работает этот тег, — в статье что такое canonical.

Ещё одна полезная функция — просмотр проверенной страницы глазами робота. Если важная часть контента подгружается скриптами и робот её не увидел, страница может индексироваться, но без того текста, ради которого её создавали.

Как проверить индексацию сразу многих страниц

Проверять операторами сотню адресов вручную долго. Для массовой проверки есть несколько вариантов:

Сравнение выгрузки с sitemap. Выгрузите список страниц в поиске из Вебмастера и сравните его со списком адресов из sitemap.xml в таблице. Всё, что есть в карте, но нет в выгрузке, — кандидаты на разбор.
Отчёты Search Console — списки проиндексированных и непроиндексированных страниц с причинами, которые тоже можно выгрузить.
Сервисы массовой проверки индексации. Они проверяют адреса запросами к поиску, как операторы, только автоматически. Это единственный вариант для страниц на чужих сайтах, но результат стоит считать ориентиром, а не абсолютной истиной.

Если вы отправляете страницы через наш сервис, проверять вручную не придётся: после выполнения заказа мы сами проверяем результат и присылаем отчёт по каждой ссылке на email.

Как проверить индексацию страницы на чужом сайте

Часто нужно проверить не свою страницу, а внешнюю: статью о компании в отраслевом издании, публикацию со ссылкой на ваш сайт, карточку в каталоге или на площадке отзывов. Доступа к Вебмастеру такого сайта у вас нет, поэтому остаются операторы: url: с полным адресом в Яндексе и site: с полным адресом в Google, либо поиск уникальной фразы из текста в кавычках.

Если внешняя страница не в индексе, ссылка с неё на ваш сайт поисковику не видна — польза от публикации откладывается. Повлиять на обход чужого сайта напрямую нельзя: попросить владельца поставить на публикацию ссылку с главной или из свежих материалов можно, но это не всегда реально. Именно для таких страниц чаще всего и заказывают ускорение индексации.

Почему страница то появляется в индексе, то пропадает

Бывает, что страница сегодня находится по оператору, а через неделю исчезает, потом возвращается. Обычно у этого есть объяснимая причина:

нестабильный сервер — робот несколько раз подряд получил ошибку или таймаут и временно убрал страницу из поиска;
конкуренция дублей — поисковик колеблется, какую из похожих страниц считать основной, и показывает то одну, то другую;
пограничное качество — в Яндексе страница может то попадать в поиск, то исключаться как малоценная или маловостребованная;
случайные изменения на сайте — после обновления шаблона на время появился noindex или сломался canonical.

В таких случаях смотрите историю: «Страницы в поиске» и «Статистика обхода» в Вебмастере покажут, когда и почему страница выпадала. Если причина в сервере, поможет стабилизация хостинга; если в дублях или качестве — работа над самой страницей.

Статусы страниц и что они означают

Статус	Что означает	Что делать
Яндекс: «Малоценная или маловостребованная страница»	Технически всё в порядке, но Яндекс не видит в странице достаточной пользы или спроса	Усилить содержание, объединить со схожими страницами или закрыть от индексации
Яндекс: «Дубль»	Содержимое совпадает с другой страницей сайта	Настроить canonical, редирект или сделать страницу уникальной
Яндекс: «Запрещено в файле robots.txt»	Адрес закрыт директивой Disallow	Если страница нужна в поиске — поправить robots.txt
Яндекс: «Страница перенаправляет» или «Ошибка HTTP»	Вместо страницы робот получил редирект или ошибку	Проверить ответ сервера, убрать адрес из sitemap
Google: «Обнаружена, не проиндексирована»	Google знает адрес, но ещё не сканировал его	Внутренние ссылки, запрос индексирования, проверить скорость сервера
Google: «Просканирована, но пока не проиндексирована»	Google видел страницу, но пока не включил её в индекс	Проверить качество и уникальность, усилить страницу
Google: «Исключено тегом noindex»	На странице есть запрет индексации	Убрать noindex, если страница должна быть в поиске

Что делать, если страницы нет в индексе

Действуйте по порядку — от простого к сложному:

Убедитесь, что страница открыта для робота. Код ответа 200, нет noindex, адрес не закрыт в robots.txt, canonical указывает на саму страницу. Для одного адреса удобно воспользоваться нашим бесплатным SEO-анализом страницы.
Посмотрите статус в Вебмастере и Search Console. Если страница исключена, причина там почти всегда указана — исправляйте её, а не отправляйте страницу повторно.
Проверьте, ведут ли на страницу внутренние ссылки и есть ли она в sitemap.xml.
Покажите страницу поисковикам. «Переобход страниц» в Вебмастере, «Запросить индексирование» в Search Console, IndexNow — или отправьте страницу на индексацию через сервис, о котором мы писали выше, если адресов много, они на чужом сайте или нет доступа к панелям.
Если не индексируется много страниц, проблема системная. Разберите основные причины по статье почему сайт не индексируется или закажите технический аудит сайта — найдём, что мешает, и дадим список правок.

Бесплатные способы ускорения мы подробно разобрали в отдельном материале — как ускорить индексацию сайта в Яндексе и Google.

Как часто проверять индексацию

Для небольшого сайта услуг достаточно раз в неделю смотреть график «Страницы в поиске» в Вебмастере и сводку в Search Console: резкое падение числа страниц — повод разобраться сразу. Отдельно проверяйте индексацию после каждого заметного события: запуска нового раздела, редизайна, переезда на другую CMS или домен, массового обновления каталога. Именно в такие моменты чаще всего остаются случайные noindex, ломаются canonical и появляются дубли.

И не путайте индексацию с позициями: страница может быть в индексе, но показываться далеко от первой страницы. Как отслеживать видимость по запросам, мы рассказали в статье как проверить позиции сайта.

Проверили и увидели, что новых страниц в поиске нет, хотя сайт открыт для робота? Загрузите ссылки в сервис быстрой индексации — проверим каждую, отправим в Яндекс и Google и пришлём отчёт.