Почему сайт не индексируется в Google и Яндексе?

Сайт не индексируется по 6 типичным причинам: robots.txt блокирует, есть noindex, ошибки сервера, JS без SSR, молодой домен или штраф поисковика. Первый шаг диагностики — открыть Google Search Console → раздел «Страницы». Там точно видно, какие URL не в индексе и почему. Вторая проверка — открыть вашсайт.ru/robots.txt и убедиться, что нет Disallow: /.

6 причин: чек-лист диагностики

1. robots.txt блокирует. Откройте вашсайт.ru/robots.txt. Если видите Disallow: / для всех User-agent — это запрет. Как создать правильный robots.txt.
2. Мета-тег noindex. В исходном коде страницы есть <meta name="robots" content="noindex">. Подробнее: что такое noindex.
3. HTTP-ошибки. Сервер отвечает 404, 410, 500, 503 — бот не видит контента. Проверьте через Screaming Frog.
4. JS-сайт без рендеринга. SPA на React/Vue без SSR/SSG отдаёт боту пустой <div id="root">. Решение: Next.js, Nuxt, prerender.
5. Молодой домен. Сайту 1–4 недели — нормально, что Google ещё не зашёл. Принудительно отправьте URL в Search Console.
6. Штраф / фильтр. Если страницы были, потом исчезли — проверьте «Меры, принятые вручную» в GSC и «Безопасность» в Я.Вебмастере.

Если не индексируется только в Яндексе (Google всё ок)

• Не подтверждены права в Я.Вебмастере — без этого Яндекс индексирует медленнее.
• Нет в Яндекс.Бизнес (для коммерческих сайтов).
• Подозрение на «зеркало» — Яндекс мог склеить с другим сайтом.
• Региональность не задана — Яндекс не понимает, под какой регион ранжировать.

Если не индексируется только в Google (Яндекс ок)

См. отдельный гайд: почему сайт не индексируется в Google — там разбор Discovered/Crawled статусов и Core Web Vitals.

Сколько ждать после исправления

После устранения проблемы и отправки URL в Search Console — 1–7 дней до повторного обхода. Если через неделю не появилось — снова диагностика. Подробнее: сколько индексируется сайт.

Не нашли причину сами? Технический аудит от Adaptive Lab за 24–48 часов покажет точную причину блокировки.