Сайт открывается в браузере, но в поиске его нет — значит, между публикацией и выдачей сломался один из четырёх шагов: робот не дошёл до страницы, не смог её загрузить, загрузил и отбросил или принял, но пока держит в очереди. Разбираться надо именно в этом порядке, иначе можно месяц править тексты там, где страницу вообще запрещал robots.txt.
Четыре шага, на которых теряется страница
Индексация идёт цепочкой. Робот должен узнать адрес, получить содержимое, оценить его и положить в базу. Каждый шаг отваливается по своим причинам, и лечится он тоже по-своему.
- 01
Робот не знает адрес
Страницы нет в карте сайта, на неё не ведёт ни одной внутренней ссылки. Сам сайт в Вебмастер тоже не добавлен. Для поиска такой страницы просто не существует.
- 02
Робот не может её загрузить
Страница отдаёт 404, 500 или 503, висит дольше таймаута, закрыта в robots.txt, помечена
meta name="robots" content="noindex"или доступна только после входа. - 03
Робот загрузил и отбросил
Canonical указывает на другой адрес, содержание повторяет соседнюю страницу или состоит из пары абзацев. В Вебмастере это статусы «Дубль» и «Недостаточно качественная страница».
- 04
Робот принял, но не показал
Страница в базе, однако по запросам её обходят другие. Тут вопрос уже к релевантности и конкуренции. Лечится он содержанием страницы.
Что проверить за первый час
Порядок важен: каждая следующая проверка бессмысленна, пока не прошла предыдущая. Все они делаются без платных сервисов.
Откройте адрес в режиме инкогнито. Нужен 200. Если 301 — смотрите, куда ведёт цепочка: в индекс попадёт конечный адрес цепочки, а опубликованный вами останется редиректом.
Проверьте /robots.txt на запреты, под которые случайно попал нужный раздел. Частый случай — запрет /*?, закрывающий страницы с параметрами вместе с полезными фильтрами.
В исходном коде страницы не должно быть noindex. На WordPress он остаётся включённым после снятия галочки «Попросить поисковые системы не индексировать сайт».
Тег должен указывать на саму страницу. Canonical на главную или на соседний адрес — прямая инструкция «в индекс меня не бери».
Адрес обязан быть в sitemap.xml, а сама карта — отдаваться без ошибок и быть указана в Вебмастере.
Раздел «Индексирование → Страницы в поиске» показывает, что Яндекс уже решил по каждому адресу и по какой причине исключил.
Самая частая причина — вы конкурируете сами с собой
Когда технических запретов нет, а страницы всё равно не в поиске, почти всегда обнаруживается, что один и тот же материал доступен по двум адресам. Движок отдаёт запись и по короткому пути, и по пути с разделом; каталог показывает один товар в трёх категориях; постраничная навигация плодит копии первой страницы. Яндекс выбирает из этих адресов один, а остальные помечает как дубли — и вы видите это как «страницы пропали».
Летом 2026 года у нас в поиске было 120 страниц и 361 исключённая. Разбор показал два источника: 32 кейса инфографики отвечали по двум адресам сразу, а 19 записей блога — по короткому и по полному пути. После 301-редиректов осталось 101 страница в поиске и 46 исключённых, причём 30 из них — это те самые редиректы, то есть нормальное состояние.
Обратите внимание на важную деталь: rel="canonical" на обоих адресах у нас стоял правильно с самого начала, и это не помогло. Для Яндекса canonical — подсказка, которую он вправе проигнорировать. Надёжно убирает дубль только 301-редирект или физическое удаление второго адреса.
Сколько ждать и когда пора вмешиваться
Новый сайт обычно попадает в индекс за одну-три недели, отдельная страница на живом сайте — за несколько дней. Ускорить это можно, но только в пределах разумного: очередь обхода зависит от того, как часто у вас появляется новое и насколько сервер быстро отвечает.
- Добавьте сайт в Вебмастер и подтвердите права. Без этого вы работаете вслепую: причина исключения каждой страницы видна только там.
- Отправьте адреса в «Переобход страниц». Лимит небольшой, поэтому тратьте его на важные страницы: на весь сайт лимита всё равно не хватит.
- Включите обход по счётчику Метрики. Робот узнаёт о странице по первому же визиту живого человека, не дожидаясь планового обхода.
- Свяжите новую страницу ссылками. Страница, на которую не ведёт ни одна ссылка изнутри сайта, обходится последней и выглядит для поиска менее нужной.
- Проверьте скорость ответа сервера. Если страница отдаёт 5xx хотя бы иногда, робот приходит реже: для него это признак ненадёжного сайта.
Чего делать не стоит
Вокруг индексации много советов, которые в лучшем случае бесполезны, в худшем растягивают проблему на месяцы.
Владелец открывает сайт, и всё в порядке. Клиент из поиска попадает на чужую страницу. Причина — старая версия PHP, для которой не выходят заплатки.
Проверьте себя. Найдите в панели хостинга версию PHP. Восемь-один или ниже — перешлите ролик тому, кто ведёт сайт.
Прислать сайт на разборЕсли страницу запрещает robots.txt, её содержание никто не прочитает — ни робот, ни читатель из поиска.
Это подсказка. Дубль уходит надёжно только после 301 или удаления второго адреса.
Закрытая страница не выпадает из индекса, а просто перестаёт обновляться. Для удаления нужен noindex или 404/410.
От десятка похожих URL быстрее приходит статус «Недостаточно качественная страница».
Вопросы об индексации в Яндексе
Сколько ждать, прежде чем считать, что сайт не индексируется?
Для нового сайта — три недели с момента подтверждения прав в Вебмастере. Для новой страницы на живом сайте — неделю. Если за это время адрес не появился ни в поиске, ни в списке исключённых, робот до него не дошёл: проверьте карту сайта и внутренние ссылки.
Что означает «Недостаточно качественная страница»?
Яндекс загрузил страницу и решил, что она не даёт самостоятельной пользы: мало содержания, оно повторяет другие адреса или страница служебная. Помогает самостоятельный ответ на конкретный вопрос или объединение с соседней страницей через 301. От перестановки слов в тексте статус не снимается.
Почему страница была в поиске и выпала?
Чаще всего появился более сильный дубль внутри сайта, изменился canonical, страница стала отдавать ошибку или долго грузиться. Точная причина указана в Вебмастере рядом с адресом в разделе «Страницы в поиске».
Помогает ли переобход страниц в Вебмастере?
Да, переобход двигает страницу в очереди. Решения об индексации он не меняет. Если страница исключена как дубль или малоценная, переобход вернёт тот же вердикт.
Нужно ли закрывать служебные страницы в robots.txt?
Запрет в robots.txt закрывает обход, но не индекс: уже известный адрес может остаться в выдаче без описания. Чтобы страница ушла, нужен noindex в meta robots при открытом обходе либо ответ 404 или 410.