Индексация сайта: как проверить, попали ли статьи в поиск

Статья вышла на сайте, а посетителей из поиска нет. Частая причина простая: страница ещё не попала в индекс, то есть поисковая система о ней не знает или решила её не сохранять. Расскажем, как владельцу сайта проверить это самостоятельно и что делать, если статьи в поиск не попадают.

Что такое индексация сайта простыми словами

Индекс, это база страниц, которые поисковая система сохранила и может показать в выдаче. Робот Яндекса и Google регулярно обходит сайты, читает страницы и решает, какие из них сохранить. Если статьи нет в индексе, её нет и в выдаче: ни позиций, ни показов, ни переходов. Поисковик просто не знает, что она существует, или знает, но отказался её хранить.

Путь статьи до читателя состоит из трёх шагов. Сначала робот находит страницу и скачивает её, это называется обход. Потом система решает, сохранить ли страницу в индекс. И только после этого статья начинает получать показы по запросам. На каждом шаге возможна остановка, и проверяются они по разному.

Важно не путать индексацию с видимостью. Страница может быть в индексе, но стоять так далеко в выдаче, что переходов всё равно нет. Это уже вопрос позиций, а не индексации. Подробно о разнице и о том, как измерить видимость, мы писали в статье «Видимость сайта в поиске: как проверить и почему она важнее позиций».

Проверка в Яндекс Вебмастере: отчёт «Страницы в поиске»

Основной инструмент проверки, это Яндекс Вебмастер, бесплатный сервис Яндекса для владельцев сайтов. Сайт добавляют в него один раз и подтверждают права метатегом, файлом или записью в DNS. После этого владельцу доступны отчёты о том, как Яндекс видит сайт.

Что показывает отчёт «Страницы в поиске»

Отчёт находится в разделе «Индексирование». В нём собраны страницы, которые Яндекс знает: и те, что участвуют в поиске, и исключённые. По каждой странице виден статус и дата последнего обхода роботом.

Первое, что стоит сделать, это сравнить число страниц в поиске с числом опубликованных. Если в разделе статей вышло двести материалов, а в отчёте их сорок, разрыв и есть ваша задача. Дальше уже разбираем, какие именно статьи исключены и почему.

Как читать статусы страниц

Статус «В поиске» означает, что страница сохранена в индексе и может показываться. У исключённых страниц Яндекс указывает причину. Встречаются чаще всего такие формулировки:

• «Запрещено в файле robots.txt»: страница закрыта от робота в служебном файле сайта.
• «Неканоническая»: система считает страницу копией другой и хранит основную версию.
• «Дубль»: такое же или почти такое же содержание уже есть на другом адресе.
• «Недостаточно качественная»: по оценке системы страница не даёт читателю ничего нового.
• «Ошибка сервера» или «Страница не найдена»: робот пришёл и получил отказ.

Каждая причина требует своего действия. Разберём их в разделе о причинах исключения.

Проверка оператором site:

Оператор site: работает и в Яндексе, и в Google, и никаких сервисов для него подключать не нужно. Он удобен для быстрой проверки, когда Вебмастер ещё не настроен или нужно посмотреть чужой сайт.

Как выполнить проверку

1. Откройте Яндекс или Google.
2. Введите в строку поиска запрос site:вашдомен.ru без пробела после двоеточия. Поисковик покажет примерное число страниц сайта в индексе.
3. Для проверки одной статьи введите site: и полный её адрес, например site:вашдомен.ru/blog/novaya-statya.
4. Если статья нашлась, она в индексе. Если по запросу ничего нет, страницы в индексе скорее всего нет.

Ограничения оператора site:

Число, которое показывает оператор, примерное. Сам Яндекс предупреждает, что выдача по site: неполная: часть сохранённых страниц в ней может не отображаться. Обратная ситуация тоже бывает: новая статья не ищется оператором в первые дни, хотя робот её уже видел. Поэтому site: годится для быстрой прикидки, а точную картину даёт отчёт в Вебмастере.

Как быстро проверить новую статью

Для свежей публикации порядок действий такой:

1. Сразу после выхода статьи отправьте её адрес на переобход в Яндекс Вебмастере: раздел «Индексирование», пункт «Переобход страниц». Так вы сообщаете роботу о новой странице, а не ждёте, пока он найдёт её сам.
2. Через несколько дней откройте отчёт «Страницы в поиске» и проверьте статус адреса.
3. Дополнительно введите в поиске site: и полный адрес статьи.

Проверять статью каждый день не нужно. По нашим данным первый показ статьи в Яндексе приходит через две-пять недель после публикации, в зависимости от сайта, а рабочего уровня показов статья достигает примерно к третьему месяцу. Достаточно смотреть статус раз в неделю и реагировать, если он не меняется дольше месяца.

Проверка индексации в Google

В Google действует та же логика. Аналог Вебмастера называется Search Console. После добавления сайта и подтверждения прав там доступен отчёт «Индексирование страниц» и инструмент «Проверка URL»: вставляете адрес статьи и видите, есть ли она в индексе Google и когда робот посещал её последний раз. Оператор site: работает и здесь.

Яндекс и Google индексируют страницы независимо друг от друга. Статья может быть в индексе одной системы и отсутствовать у другой, поэтому при проверке смотрят обе.

Почему страница не попадает в индекс

Причины исключения делятся на две группы. Первая, техническая: робот не может прочитать страницу или получает запрет. Вторая, содержательная: робот страницу прочитал, но решил не сохранять. Разберём те, что встречаются чаще всего.

Запрет в robots.txt или метатеге noindex

Файл robots.txt в корне сайта задаёт правила для роботов. Одна строка Disallow может закрыть целый раздел или весь сайт. Похожую роль играет метатег robots со значением noindex на самой странице. Частая история после переезда сайта или доработок: запрет поставили на время тестирования и забыли снять. Проверка простая: откройте адрес вашдомен.ru/robots.txt и посмотрите, нет ли запрета на раздел со статьями.

Дубли страниц и неверный canonical

Если похожее содержание доступно по нескольким адресам, поисковик хранит одну версию, а остальные исключает как дубли. Так бывает со страницами с параметрами в адресе, версиями для печати и повторами статей в разных разделах. Основную версию системе подсказывает атрибут canonical в коде страницы. Если в нём указан неверный адрес, из индекса выпадает нужная страница, а остаётся её случайная копия.

Технические ошибки сайта

Робот приходит на страницу несколько раз. Если в ответ он стабильно получает ошибку сервера, сообщение «страница не найдена» или слишком долгую загрузку, страницу исключают. То же происходит, когда сайт периодически недоступен целиком: у робота складывается картина ненадёжного ресурса, и он заходит реже.

Слабое содержание страницы

Яндекс помечает страницу как «недостаточно качественную», если текст короткий, повторяет другие страницы того же сайта или пересказывает чужой материал без новых смыслов. Сюда же относятся статьи, написанные под поисковик, а не под читателя: набор ключевых фраз без ответа на вопрос. О том, как поиск относится к разным текстам, мы подробно писали в статье «ИИ-тексты и SEO: портят ли статьи нейросети позиции сайта» с разбором данных по 3 480 статьям.

Сайт новый, робот ещё не добрался

У молодого сайта нет истории, и робот заходит на него редко. Страницы, на которые не ведут ссылки из других разделов, он может не находить месяцами. Здесь помогают ссылки на статью из разделов, которые робот посещает регулярно, карта сайта sitemap.xml и отправка адреса на переобход.

Причины исключения страниц и действия по каждой

Что делать, если страница исключена из индекса

Найдите причину в Вебмастере

Откройте отчёт «Страницы в поиске», найдите адрес среди исключённых и прочитайте статус. Причина указана прямо в отчёте, и именно она определяет дальнейшие действия. Гадать не нужно: Яндекс пишет, почему страница ему не подошла.

Исправьте и отправьте на переобход

Дальше действуем по причине из таблицы выше: снимаем запрет в robots.txt, исправляем canonical, устраняем ошибку сервера или дорабатываем текст. После исправления отправьте адрес на переобход, чтобы робот вернулся раньше обычного графика.

Отдельный случай, статус «Недостаточно качественная». Одним переобходом его не снять: страница должна измениться по содержанию. Добавьте конкретику по теме, примеры из практики компании, ответы на вопросы, которые читатель задаёт перед покупкой.

Проверьте результат

Вернитесь к отчёту через одну-две недели. Если статус сменился на «В поиске», задача закрыта. Если страница снова исключена с той же причиной, значит причина не устранена: например, запрет сняли на одной странице, но оставили на уровне всего раздела.

Как часто проверять индексацию

Постоянной проверки индексация не требует. Рабочий ритм выглядит так: после каждой публикации отправляете адрес на переобход, раз в неделю смотрите статусы свежих статей в отчёте «Страницы в поиске», раз в месяц сверяете долю статей в индексе с общим числом публикаций.

Для ориентира по доле приведём свои данные. Мы наблюдали статьи, опубликованные на сайтах клиентов в апреле-июне 2026 года, всего 1 894 статьи. По данным Яндекс Вебмастера на сентябрь 2026 года показы в поиске получили 56 % из них, переходы, 17 %. Разброс между сайтами большой: от 8 % до 77 % статей с показами. И решает этот разброс техническое состояние сайта, а не тексты. Если доля ваших статей в индексе заметно ниже ожиданий, начинайте с технической стороны, а не с переписывания материалов.

Итог

Индексация проверяется без программиста и без платных сервисов. Отчёт «Страницы в поиске» в Яндекс Вебмастере показывает статус каждой статьи и причину исключения, оператор site: даёт быструю прикидку в любом поисковике, Search Console закрывает ту же задачу для Google. Новую статью достаточно отправить на переобход и проверять раз в неделю.

Если статьи регулярно не попадают в индекс, причина почти всегда на стороне сайта: запреты в служебных файлах, дубли, ошибки сервера или слабое содержание. Диагностика занимает один заход в Вебмастер, а дальше всё решается по списку из таблицы выше.

Что почитать дальше:

• Видимость сайта в поиске: как проверить и почему она важнее позиций
• Как продвинуть сайт в Яндексе самостоятельно: план на первые три месяца
• Блог компании на сайте: зачем он бизнесу и что в нём публиковать

Сколько стоит КОНТЕНТЗАВОД

КОНТЕНТЗАВОД работает по подписке: сервис пишет статьи под запросы из Вордстата и публикует их на вашем сайте, копирайтер и редактор в штате не нужны. При оплате сразу за три месяца месяц выходит дешевле. Цены указаны без НДС.

• Базовый: 30 000 ₽ в месяц, при оплате за три месяца 25 000 ₽ в месяц (75 000 ₽ за три месяца). До 5 новостных статей в день по свежим инфоповодам из 50 источников, проверка на заимствования, автоматическая публикация на сайт. Настройку ведёте сами, аналитика не подключена.
• Профессиональный: 50 000 ₽ в месяц, при оплате за три месяца 45 000 ₽ в месяц (135 000 ₽ за три месяца). Всё из тарифа «Базовый», до 5 статей в день, из них 1 экспертная. Контент-план по конкурентам и запросам Вордстата, вся настройка на нашей стороне, аналитика Яндекс Метрики и Вебмастера, ежемесячный отчёт с аудитом.
• Индивидуальный: стоимость по итогам аудита. Подходит для узкой ниши, повышенных требований к информационной безопасности, объёмов больше тарифных или доработок под задачу.

Первые 7 дней бесплатны, и открыты все возможности сервиса, включая аналитику: результат можно оценить до оплаты. Состав тарифов и оформление подписки на странице тарифов КОНТЕНТЗАВОДа.