О рейтингеИндексирование — это когда поисковик обошёл страницу и добавил её в свою базу; без этого страница не может появиться в выдаче. Проверить индексацию можно бесплатно: в Яндекс Вебмастере — «Индексирование» → «Страницы в поиске», в Google Search Console — отчёт об индексировании страниц и проверка URL. Частые причины, почему страниц нет в поиске: закрыты в robots.txt или noindex, отдают ошибку, признаны дублями или малоценными. Ускорить индексацию помогают sitemap.xml, переобход в Вебмастере, запрос индексирования в Search Console и протокол IndexNow для Яндекса.
Содержание статьи
Что такое индексирование сайта?
Поисковый робот находит страницу по ссылке или через sitemap.xml, скачивает её, анализирует и решает, добавить ли в индекс — базу, из которой поисковик подбирает ответы. Только после этого страница может участвовать в ранжировании. Индексирование и индексация — одно и то же.
Важно: попасть в индекс — не значит попасть в топ. Индексация — входной билет, а позиции зависят от качества страницы и сайта. Как Google решает, какие страницы ставить выше, — в статье «Продвижение сайта в Google».
Проверка
Как проверить индексацию: 4 способа
- Яндекс Вебмастер → «Индексирование» → «Страницы в поиске». Сколько страниц в поиске, какие добавлены и исключены, и причины исключения по каждой. Как подключить Вебмастер, — в статье «Яндекс Вебмастер».
- Google Search Console → отчёт об индексировании страниц. Проиндексированные и непроиндексированные страницы с причинами.
- Search Console → проверка URL. Состояние конкретной страницы: в индексе ли она, когда её сканировали, какой canonical выбрал Google.
- Оператор site: в поиске. Запрос site:вашсайт.by даёт примерное представление, но не точное число — для цифр используйте отчёты.
Быстрая сверка: сравните число страниц в индексе с числом страниц, которые должны быть в поиске (услуги, категории, товары, статьи). Если в индексе в разы больше — в поиск попали дубли и мусор. Если в разы меньше — что-то мешает индексации.
Причины
Почему страниц нет в поиске: 7 причин
| Причина | Как проверить | Что делать |
|---|---|---|
| Запрет в robots.txt или мета-тег noindex | Анализ robots.txt в Вебмастере, проверка URL в Search Console | Убрать запрет для нужных страниц |
| Ошибка ответа: 3xx, 4xx, 5xx | «Проверка ответа сервера» в Вебмастере | Исправить ошибку или редирект |
| Дубль другой страницы | Причина в отчёте, выбранный canonical | Склеить дубли, указать canonical, сделать страницы разными |
| Страница признана малоценной или маловостребованной | Причина в «Исключённых страницах» Вебмастера | Добавить полезный контент; Яндекс отмечает, что это не нарушение и решение алгоритма может измениться |
| Робот ещё не дошёл | Страница новая, нет в sitemap и без внутренних ссылок | Добавить в sitemap и в меню или перелинковку, отправить на переобход |
| Нет внутренних ссылок на страницу | Страница-«сирота» | Связать с разделами сайта |
| Закончился срок регистрации домена | Панель регистратора | Продлить домен — Яндекс прямо советует проверять и это |
⚠ Частая история после редизайна: новый сайт выкатили вместе с robots.txt тестовой версии, где закрыто всё. Через неделю страницы начинают пропадать из поиска. Проверяйте robots.txt в день запуска — это пункт из чек-листа «Технический аудит сайта».
Ускорение
Как ускорить индексацию
- Актуальный sitemap.xml только с рабочими страницами, добавленный в Вебмастер и Search Console.
- Переобход страниц в Яндекс Вебмастере — для новых и изменённых страниц; есть дневной лимит.
- Запрос индексирования в Search Console через проверку URL — для важных страниц.
- IndexNow для Яндекса. Протокол позволяет автоматически сообщать о новых, изменённых и удалённых страницах через API. Яндекс предупреждает, что это не гарантирует индексацию, но избавляет от ожидания очередного обхода. Для многих CMS есть готовые плагины.
- Обход по счётчикам Метрики — Яндекс узнаёт о страницах из данных счётчика.
- Внутренние ссылки с главной и разделов на новые страницы.
Что закрыть
Какие страницы закрывать от индексации
Индексация нужна не всем страницам. Закрывают то, что не несёт пользы в поиске и создаёт дубли:
- корзину, оформление заказа, личный кабинет;
- результаты поиска по сайту;
- страницы сортировок и большинство комбинаций фильтров;
- служебные и тестовые страницы, версии для печати;
- адреса с UTM-метками и другими параметрами.
Делают это через robots.txt, мета-тег noindex или canonical — в зависимости от ситуации. Ошибка в этих настройках — частая причина, почему из поиска пропадают нужные страницы, поэтому изменения в robots.txt лучше согласовывать с SEO-специалистом. Короткие ответы о самостоятельной оптимизации — в разделе «Как можно оптимизировать сайты».
Кто должен следить за индексацией
Если сайт продвигает агентство, индексация — его зона ответственности: ошибки должны находиться и исправляться без напоминаний. Владельцу достаточно раз в месяц смотреть число страниц в поиске и уведомления Вебмастера. Если число страниц резко изменилось, это повод спросить подрядчика. Цены на аудит и продвижение — в обзоре «Цены на SEO-продвижение», сравнение подрядчиков — в рейтинге SEO-компаний Беларуси.
Страницы пропадают из поиска, а причина непонятна? Найдите подрядчика для аудита в рейтинге SEO-агентств Беларуси.
Частые вопросы об индексации
Что такое индексирование простыми словами?
Это добавление страницы в базу поисковой системы. Пока страницы нет в индексе, она не может появиться в результатах поиска.
Как проверить, проиндексирована ли страница?
В Яндекс Вебмастере — в разделе «Страницы в поиске», в Google Search Console — через проверку URL. Оператор site: в поиске даёт только примерную картину.
Сколько времени занимает индексация новой страницы?
От нескольких часов до нескольких недель — зависит от сайта и того, как быстро робот узнаёт о странице. Ускоряют процесс sitemap.xml, переобход в Вебмастере, запрос индексирования в Search Console и IndexNow для Яндекса.
Почему страница исключена как малоценная?
Яндекс считает, что у неё мало шансов быть востребованной: мало контента, дублирует другие страницы или не отвечает интересам пользователей. Это не нарушение, и решение алгоритма может измениться, если страницу улучшить.
Что такое IndexNow?
Протокол, который позволяет сайту автоматически сообщать поисковикам о новых, изменённых и удалённых страницах. Яндекс его поддерживает; индексацию он не гарантирует, но ускоряет уведомление.
Что почитать дальше
Материал опубликован 4 ноября 2026 года.
Источники: справка Яндекс Вебмастера — «Почему страницы исключены из поиска», «Поддержка протокола IndexNow», переобход страниц (yandex.ru/support/webmaster/ru/); справка Google Search Console — отчёт об индексировании страниц и проверка URL.
Забрать подарок