Проверка индексации сайта
Проверка индексации сайта: какие страницы знает Яндекс или Google, где вместо нужной показан другой адрес и каких нет в поиске совсем. Страница без индекса не получит позиций.
- Яндекс и Google
- Адреса из карты сайта
- Скопировать не найденные
Как работает
Проверка индексации сайта - страница за страницей
Впишите сайт
И URL - по одному в строке; если пусто, они возьмутся из карты сайта.
Программа проверяет
Каждый адрес оператором url: в выдаче Яндекса (или site: в Google).
Смотрите итог
Доля в индексе и раздел, где выпавших больше всего.
Что получите
Что выпало из поиска - и где
Итог по разделам
Доля адресов в индексе кольцом и по разделам сайта - видно, какой раздел проседает.
- Раздел с выпавшими - в выводе
- Дальше - проверить выпавшие в «Ответах сервера»
- Перепроверить не найденные
Нет в индексе
Адреса, которых Яндекс не знает. Список - для переобхода в Вебмастере или для поиска причины.
- Скопировать не найденные
- Отбор одним щелчком
- Excel
В индексе и склейки
Если вместо адреса в поиске другой - зеркало, canonical, редирект, - это видно в строке.
- Другой адрес вместо своего
- Что в выдаче по адресу
- Перепроверка без повторной работы
Преимущества
Почему удобно проверять индексацию здесь
По каждому адресу
Не общая цифра из поиска, а ответ по каждой странице.
Из карты сайта
Список возьмётся из sitemap.xml, если не вставлять свой.
Склейки видны
Другой адрес вместо своего - причина часто в canonical или зеркалах.
Готовый список
«Скопировать не найденные» - сразу в Вебмастер на переобход.
Связка с проверками
Выпавшие URL по ссылке уходят на проверку HTTP-кодов.
Excel
Все адреса с результатом.
Подробно
Проверка индексации сайта: способы и причины выпадения
Индексация - это добавление страниц в базу поисковой системы. Страница, которой нет в индексе, не показывается в поиске и не приносит трафик, каким бы полезным ни был её контент. Проверка индексации сайта показывает, какие страницы попали в базу Яндекса и Google, какие выпали и почему, и с чего начинать исправления.
Способы проверить индексацию
- Яндекс Вебмастер. «Индексирование» и «Страницы в поиске»: что добавлено, что исключено и по какой причине.
- Google Search Console. Отчёт «Индексирование страниц» и проверка URL: статус конкретной страницы, дата последнего сканирования, выбранный canonical.
- Поисковые операторы. site:example.com покажет примерное количество проиндексированных страниц, url: в Яндексе - есть ли в индексе конкретный URL.
- Сервисы массовой проверки. Проверяют перечень URL целиком и помогают, когда доступа к Вебмастеру нет: сайт конкурента, новый клиент, проект до передачи прав.
Почему страницы не индексируются
- Запрет в robots.txt или метатег noindex - часто остаётся после разработки.
- Страница отдаёт 404, 5xx или редирект вместо кода 200.
- Canonical указывает на другой URL, и поисковик берёт в индекс его.
- Дубли и малоценный контент: Яндекс исключает такие документы как «малоценные или маловостребованные».
- На страницу не ведут внутренние ссылки, и робот о ней не знает.
- Сайт новый и робот ещё не обошёл все URL, или на сайт наложены санкции.
Как ускорить индексирование
- Держать sitemap.xml актуальным: только рабочие URL с кодом 200 и датой изменения.
- Ставить ссылки на новые материалы с главной и из каталога.
- Отправлять важные страницы на переобход в Вебмастере и запрашивать индексирование в Search Console.
- Подключить IndexNow: протокол сразу сообщает Яндексу и Bing о новых и изменённых страницах.
- Следить за скоростью загрузки и доступностью сайта: на медленном хостинге робот успевает обойти меньше.
Как следить за индексацией
Проверку индексации сайта стоит повторять раз в месяц и после крупных обновлений: переезда на HTTPS, смены CMS или структуры URL. Сравнивайте количество проиндексированных страниц с числом URL в sitemap.xml: большой разрыв говорит о технической проблеме, а резкое падение - о сбое или санкциях. Историю изменений полезно хранить, чтобы увидеть, после какого релиза начались потери.
В SERP-X достаточно вписать сайт и URL построчно; если поле пустое, они возьмутся из sitemap.xml. Для Яндекса проверка идёт оператором url: в мобильном поиске, для Google - оператором site:. Итог показывает долю страниц в индексе кольцом и по частям сайта, а вывод называет, где выпавших больше всего. Для любого URL видно, в индексе ли он, показан ли вместо него другой (склейка зеркал, canonical, редирект) или его нет совсем. «Скопировать не найденные» готовит перечень для переобхода в Вебмастере, «Перепроверить не найденные» повторяет проверку только для них, результат выгружается в Excel. Выпавшие страницы стоит сразу проверить на коды HTTP и правила robots.txt.
Вопросы
Частые вопросы
Как проверяется индексация?
Оператором url: в мобильной выдаче Яндекса - по каждому адресу; для Google - site:.
Нужен ли Вебмастер?
Нет. С Вебмастером в «Фильтрах» видны и причины исключения - из данных самого Яндекса.
Что значит «другой адрес»?
По вашему адресу в поиске нашлась другая страница: склейка зеркал, canonical или редирект.
Можно перепроверить только не найденные?
Да, «Перепроверить не найденные» - без повторной проверки остальных.
Сколько времени занимает индексация новой страницы?
От нескольких часов до нескольких недель: зависит от того, как часто робот заходит на сайт, ведут ли на страницу ссылки и есть ли она в sitemap.xml.
Почему число страниц в Яндексе и Google разное?
У поисковых систем разные базы и разные правила отбора: страница может быть в Google и отсутствовать в Яндексе. Поэтому сравнивают не только общие цифры, но и конкретные URL.
Можно ли проверить индексацию чужого сайта?
Да: поисковые операторы и массовая проверка не требуют доступа к Вебмастеру или Search Console. Причины исключения при этом видит только владелец.
Проверка индексации - в программе SERP-X
Все инструменты в одной программе для Windows. Начать можно бесплатно.