Как проверить индексацию сайта в Яндексе и Google

Короткий ответ: точнее всего индексацию показывают Яндекс Вебмастер и Google Search Console. Быстро прикинуть можно поиском с оператором site:. А чтобы понять, заходит ли робот вообще, смотрят логи сервера. Если новые страницы долго не попадают в поиск, им нужны ссылки с уже известных поисковику страниц и уведомление через IndexNow.

1. Яндекс Вебмастер

Раздел «Индексирование» → «Страницы в поиске»: какие страницы в поиске, какие исключены и почему (дубль, ошибка, запрет в robots.txt, малоценная страница). Там же можно отправить страницы на переобход.

2. Google Search Console

Отчёт «Индексирование страниц» показывает, сколько страниц в индексе и почему остальные не попали. Инструмент проверки URL покажет состояние конкретной страницы и позволит запросить индексацию.

3. Оператор site:

Наберите в поиске site:вашсайт.ru — увидите примерный список страниц в индексе. Это грубая оценка, но для быстрой проверки «есть ли страница вообще» хватает.

4. Логи сервера

В журнале веб-сервера видно, какие страницы и когда открывали роботы YandexBot и Googlebot. Если робот на страницу ни разу не заходил, её не будет в поиске, как бы хорошо она ни была написана. Мы сами так проверяем свои новые страницы: на нашем сайте робот Яндекса за неделю обошёл меньше половины новых адресов, Google — две трети.

5. Карта сайта

Файл sitemap.xml со списком страниц должен открываться, содержать только рабочие адреса без дублей и быть указан в robots.txt и в Вебмастере.

Что делать, если страницы не индексируются

• Проверьте запреты: нет ли noindex на странице и запрета в robots.txt — частая ошибка после переноса с тестового адреса.
• Поставьте ссылки на новые страницы с главной, из меню, подвала и популярных статей. Робот ходит по ссылкам. Помогает и HTML-карта сайта, где все страницы в один клик.
• Сообщите поисковикам через IndexNow (Яндекс его поддерживает) и переобход в Вебмастере.
• Уберите дубли: один и тот же текст по двум адресам, адреса со слешем и без.
• Ускорьте сайт: медленный сервер робот обходит реже.
• Сделайте страницы полезными: пустые шаблонные страницы Яндекс исключает как малоценные.

Если нужна помощь

Индексация — первое, что мы проверяем при SEO-продвижении (от 20 000 ₽ в месяц). Для бизнеса в Крыму — SEO в Крыму. Про регион сайта в Вебмастере — статья SEO в Крыму: регион в Вебмастере.