Почему страница не индексируется — проверка

SEO и маркетинг

Может заинтересовать

Почему страница не попадает в Google.

Проверяем всё, что мешает странице попасть в поиск: правила robots.txt для Googlebot, метатег robots, заголовок X-Robots-Tag, код ответа, цепочку редиректов и каноникал.

Почему страницы нет в Google

Семь причин в порядке от самой частой. Первые три покроют большинство случаев.

Мета-тег noindex В коде страницы стоит запрет показывать её в поиске. Часто остаётся после разработки, когда сайт закрывали от индексации и забыли открыть.

Запрет в robots.txt Правило Disallow не пускает робота на страницу. Бывает, что под запрет случайно попадает целый раздел из-за слишком широкого правила.

Канонический ведёт на другую страницу Тег canonical говорит Google: «главная версия — вот та». Тогда эта страница в индекс не попадает, даже если всё остальное правильно.

Страница отдаёт ошибку Код 404 или 500 в ответе. Для посетителя страница может выглядеть нормально, а робот видит ошибку и уходит.

На страницу нет ссылок Google находит страницы, переходя по ссылкам. Если на неё не ведёт ни одна — ни из меню, ни из карты сайта, — робот о ней просто не узнает.

Дубль существующей страницы Текст почти совпадает с другой страницей сайта. Google выбирает одну версию, остальные оставляет вне индекса.

Сайт совсем новый Ничего не сломано — просто ещё не дошла очередь. Первые страницы появляются за неделю-две, полная индексация занимает до месяца.

noindex и Disallow — не одно и то же

Их постоянно путают, а разница принципиальная.

noindex

Запрет показывать

Робот заходит на страницу, читает её и видит указание не добавлять в поиск. Ссылки со страницы он при этом учитывает.

Ставится в коде страницы
Для служебных страниц и фильтров

≠

Disallow

Запрет заходить

Робот даже не открывает страницу. Но если на неё ведут ссылки, адрес всё равно может появиться в выдаче — без описания.

Ставится в файле robots.txt
Для экономии краулингового бюджета

Главная ловушка: поставить оба запрета одновременно. Disallow не пускает робота на страницу, поэтому он никогда не увидит noindex — и адрес остаётся в выдаче. Чтобы убрать страницу из поиска, нужен именно noindex и открытый доступ к ней.

Сколько ждать индексации

Новый сайт первые страницы за 1–2 недели, полная индексация до месяца

Новая страница на живом сайте — от нескольких часов до недели

После исправления сняли noindex — отправьте страницу на проверку в Search Console, это ускоряет до суток

Когда беспокоиться если прошёл месяц, а страницы нет — причина техническая, ищите её в перечне выше

Частые вопросы

Чем это отличается от проверки метазаголовков?

Инструмент «Метазаголовки и Open Graph» показывает, что написано в тегах страницы. Этот — отвечает на другой вопрос: попадёт ли она в поиск. Здесь мы дополнительно загружаем robots.txt и применяем его правила именно к вашему адресу по логике Googlebot, читаем заголовок X-Robots-Tag, который в коде страницы не виден вообще, и проверяем цепочку редиректов.

Страница открыта, но её нет в Google. Почему?

Открыта для индексации и проиндексирована — разные вещи. Если блокировок нет, самые частые причины такие: страница новая и робот до неё ещё не дошёл; на неё не ведёт ни одна внутренняя ссылка, поэтому Google о ней не знает; содержимое слишком короткое или почти дублирует другую страницу — тогда в Search Console будет статус «Просканирована, но не проиндексирована». Отправьте адрес через инструмент проверки URL и добавьте на неё ссылки с других страниц.

Что делать, если каноникал указывает на другой адрес?

Это означает, что вы сами сказали Google: «индексируй не эту страницу, а ту». Иногда так и задумано — например, для страниц с фильтрами или UTM-метками. Но если каноникал стоит ошибочно, страница никогда не появится в выдаче, сколько бы ссылок на неё ни вело. Классическая поломка после неудачной настройки SEO-плагина — когда все страницы сайта каноникалят на главную.

Мы предлагаем

NEW CASE

Сделаем первый шаг к вашему сайту — напишите нам

Проверка индексации страницы