Почему Google не индексирует страницы сайта: причины и способы решения

Вы опубликовали новую страницу, добавили её в Sitemap, отправили на проверку через Google Search Console, а поисковик всё равно не показывает её в результатах. Знакомая ситуация.

В Search Console при этом могут появляться статусы:

• «Обнаружена, но не проиндексирована»;
• «Просканирована, но не проиндексирована»;
• Crawled - currently not indexed;
• Excluded by Google;
• URL заблокирован в robots.txt;
• Страница исключена тегом noindex.

Причина не всегда заключается в технической ошибке. Google может знать о странице, успешно её просканировать, но всё равно не добавить в индекс. Индексация и ранжирование являются разными процессами: сначала поисковик должен обнаружить URL и оценить его, а уже затем принять решение о включении страницы в индекс.

В этой статье разберём, почему Google не индексирует сайт или отдельные страницы, что означают основные статусы Search Console и какие действия действительно имеют смысл.

Как Google индексирует страницы сайта

Упрощённо процесс выглядит так:

Google узнаёт о URL → сканирует страницу → анализирует содержимое → оценивает страницу в контексте сайта → принимает решение об индексации.

Важно понимать разницу между этими этапами.

Если Google ещё не посещал страницу, проблема связана с обнаружением и сканированием.

Если Google уже просканировал URL, но не добавил его в индекс, вопрос обычно связан с оценкой страницы, дублированием, качеством контента, канонической версией или техническими особенностями.

Google прямо указывает, что не каждая найденная или просканированная страница обязательно попадает в индекс. Поэтому большое количество URL в разделе Excluded само по себе не означает, что сайт работает неправильно.

Наиболее распространённые причины:

1. Google ещё не успел просканировать URL.
2. Страница закрыта от индексации через noindex.
3. Доступ к URL ограничен правилами robots.txt.
4. Страница является дублем другой страницы.
5. Google выбрал другой canonical URL.
6. Контент слишком похож на уже существующие страницы.
7. Страница содержит мало самостоятельной ценности.
8. Сайт имеет слабую внутреннюю структуру.
9. На сервере возникают ошибки или нестабильность.
10. Google не считает URL приоритетным для текущего обхода.

Одна из главных ошибок владельцев сайтов заключается в попытке исправить все статусы одинаково. Например, отправлять один и тот же URL на повторную индексацию десять раз. Это не превращает страницу в более полезную. Увы, Google не впечатляется настойчивостью.

Статус «Обнаружена, но не проиндексирована» означает, что Google знает о существовании URL, но ещё не просканировал его.

На английском этот статус обычно отображается как:

Discovered - currently not indexed

Это означает, что поисковая система обнаружила страницу, но пока не перешла к полноценному сканированию.

Возможные источники обнаружения URL:

• внутренняя ссылка;
• внешняя ссылка;
• Sitemap;
• другие известные Google страницы;
• ранее обнаруженный URL.

В такой ситуации проблема может быть не в самой странице. Google может откладывать сканирование URL, если считает его менее приоритетным или если на сайте обнаружено большое количество страниц, которые требуют обхода.

Что проверить

1. Есть ли на страницу внутренние ссылки.
2. Доступен ли URL для Googlebot.
3. Возвращает ли сервер код ответа 200.
4. Нет ли проблем с производительностью сервера.
5. Не создано ли на сайте большое количество малополезных URL.
6. Есть ли страница в Sitemap, если она действительно должна индексироваться.

Для небольших сайтов один такой статус не обязательно означает серьёзную проблему. Если же десятки или сотни важных страниц долго остаются в состоянии Discovered - currently not indexed, нужно анализировать структуру сайта и общую техническую ситуацию.

Статус Crawled - currently not indexed означает, что Google уже посетил страницу, но пока не включил её в индекс.

Это принципиально отличается от статуса «Обнаружена, но не проиндексирована».

Discovered - currently not indexed

Google знает о URL, но ещё не просканировал страницу.

Crawled - currently not indexed

Google уже просканировал страницу, но не добавил её в индекс.

Сам по себе статус Crawled currently not indexed не доказывает наличие технической ошибки. Если такая ситуация возникает на одной странице, это может быть нормальным результатом работы алгоритмов. Если же большая часть сайта получает такой статус, стоит искать общие причины.

1. Страница слишком похожа на другие URL

Если на сайте есть несколько страниц с почти одинаковым содержанием, Google может не считать необходимым индексировать каждую из них.

Типичные примеры:

• одинаковые описания товаров;
• страницы фильтров;
• почти идентичные категории;
• региональные страницы с заменой только названия города;
• дубли страниц с параметрами URL.

Уникальность текста сама по себе не гарантирует ценность страницы. Можно переписать каждое предложение своими словами, но оставить тот же смысл, структуру и набор информации, что и на десяти других URL.

Google оценивает страницу не только по наличию уникальных фраз, но и в контексте общего качества и полезности ресурса.

2. На странице недостаточно самостоятельной ценности

Страница может быть технически исправной, доступной и написанной без копирования чужого текста, но при этом не давать пользователю ничего нового.

Например, карточка товара содержит:

• название;
• два предложения описания;
• характеристики, скопированные из каталога;
• цену.

Для большого интернет-магазина такая страница может оказаться недостаточно информативной, особенно если десятки похожих товаров имеют практически одинаковый контент.

Что можно улучшить:

• добавить конкретные характеристики;
• объяснить область применения;
• указать совместимость;
• описать особенности выбора;
• добавить реальные фотографии;
• показать варианты использования;
• раскрыть важные вопросы покупателей.

Не нужно превращать карточку товара в роман на 40 000 знаков. Пользователю нужен ответ на вопрос, а не литературная премия для SEO-текста.

3. Слабая внутренняя перелинковка

Если на важную страницу практически никто не ссылается внутри сайта, поисковой системе сложнее понять её значение.

Особенно это актуально для:

• новых статей;
• карточек товаров;
• страниц услуг;
• вложенных категорий.

Проверьте, есть ли ссылки на страницу:

• из категории;
• из тематических статей;
• из связанных товаров;
• из других релевантных разделов.

Внутренняя ссылка должна быть естественной и вести на страницу, которая действительно помогает пользователю.

В Google Search Console есть отдельная группа Excluded, или исключённых страниц.

Сам факт попадания URL в этот раздел не означает ошибку.

Google может исключать:

• дубли;
• страницы с noindex;
• URL с перенаправлением;
• страницы с ошибками;
• служебные URL;
• параметры фильтрации;
• страницы, которые поисковая система считает не предназначенными для индексации.

Главный вопрос: должна ли конкретная страница находиться в Google?

Если это технический URL, фильтр, корзина или дубль, исключение является нормальным.

Если это важная коммерческая страница или статья, нужно разбираться с причиной.

Google рекомендует оценивать не общее количество исключённых URL, а проверять, индексируются ли именно важные страницы сайта.

Проверьте исходный код страницы и HTTP-заголовки.

Один из вариантов запрета:

HTML
<meta name="robots" content="noindex">

Также директива может передаваться в HTTP-заголовке:

Plain text
X-Robots-Tag: noindex

Если страница должна индексироваться, необходимо убрать запрет.

После этого:

1. откройте URL Inspection в Google Search Console;
2. запустите проверку актуальной версии страницы;
3. убедитесь, что noindex больше не определяется;
4. отправьте запрос на индексацию.

Важно: запрос на индексацию не гарантирует немедленного попадания URL в индекс. Google самостоятельно принимает решение о повторном обходе и включении страницы в поиск.

Файл robots.txt управляет доступом поисковых роботов к URL.

Например:

Plain text
User-agent: *

Disallow: /private/

Если нужная страница попала под правило Disallow, Google может не получить доступ к её содержимому.

Но здесь есть важный нюанс.

robots.txt не является универсальным способом запретить страницу от появления в поиске. Если Google узнает URL из внешних источников, он в некоторых случаях может показать URL без полноценного доступа к содержимому.

Если необходимо именно запретить индексацию страницы, обычно используют noindex, при этом Google должен иметь возможность просканировать страницу и увидеть эту директиву.

Canonical сообщает поисковой системе, какая версия страницы является основной.

Например:

HTML
<link rel="canonical" href="https://site.ru/page/">

Проблема возникает, если:

• canonical указывает на другой URL;
• несколько страниц указывают на одну и ту же каноническую страницу;
• canonical ведёт на несуществующий URL;
• важная страница случайно канонизирована на другую.

В результате Google может считать текущую страницу дублем и не добавлять её в индекс.

Проверить это можно через URL Inspection в Google Search Console. Там отображается информация о выбранной Google канонической версии

Если Googlebot получает:

• 5xx;
• тайм-ауты;
• ошибки соединения;
• нестабильные ответы;

это может мешать сканированию и индексации страниц.

Проверьте:

• логи сервера;
• стабильность хостинга;
• время ответа;
• работу CDN;
• корректность редиректов;
• доступность страницы без авторизации.

Если сайт периодически работает, а периодически возвращает ошибки, Google может сократить частоту обхода.

Для крупного сайта это особенно критично, но проблемы с сервером могут влиять на любой ресурс.

Используйте URL Inspection в Google Search Console.

Введите полный URL и проверьте:

1. URL доступен Google?

Если нет, изучите конкретную причину.

2. Разрешена ли индексация?

Проверьте:

• noindex;
• robots.txt;
• доступность страницы.

3. Какой canonical выбрал Google?

Сравните его с тем, который указан на странице.

4. Когда Google последний раз сканировал URL?

Если страница ещё не посещалась, причина может быть в обнаружении и приоритетности обхода.

5. Как Google видит страницу?

Используйте проверку актуальной версии URL и просмотр протестированной страницы, особенно если контент формируется с помощью JavaScript.

Если Googlebot получает HTML, но при рендеринге не видит основной контент, это может повлиять на оценку страницы.

Шаг 1. Убедитесь, что страница действительно отсутствует в индексе

Не всегда отсутствие страницы в выдаче означает отсутствие индексации.

Проверьте URL через Search Console. При необходимости используйте поиск по оператору:

Plain text
site:example.ru/page/

Однако оператор site: не является полноценным инструментом диагностики. Основным источником информации должен оставаться Search Console.

Шаг 2. Проверьте статус URL

Определите, что именно происходит:

• Discovered - currently not indexed;
• Crawled - currently not indexed;
• noindex;
• robots.txt;
• duplicate;
• canonical;
• server error.

Разные причины требуют разных действий.

Шаг 3. Проверьте техническую доступность

Убедитесь, что:

• URL возвращает 200 OK;
• нет цепочки редиректов;
• страница доступна без авторизации;
• robots.txt не блокирует URL;
• нет noindex;
• canonical настроен корректно.

Шаг 4. Оцените страницу как пользователь

Задайте простой вопрос:

Что эта страница даёт пользователю сверх уже существующих страниц сайта?

Если ответить сложно, вероятно, проблема именно здесь.

Проверьте:

• полноту информации;
• соответствие поисковому намерению;
• отсутствие шаблонного текста;
• наличие конкретных данных;
• понятность структуры.

Шаг 5. Усильте внутренние ссылки

Добавьте ссылки на страницу из релевантных разделов сайта.

Например, для статьи о Google Search Console можно использовать перелинковку с материалами:

• [Google Search Console: полное руководство];
• [Как ускорить индексацию сайта в Google];
• [Продвижение сайта в Google в 2026 году].

Важно, чтобы ссылки были логически связаны с содержанием страницы, а не добавлялись просто ради количества.

Шаг 6. Проверьте Sitemap

Если страница должна индексироваться, она может быть включена в XML Sitemap.

Но наличие URL в Sitemap не является гарантией индексации. Sitemap помогает сообщить Google о существовании страниц, но не заставляет поисковик включать их в индекс.

Шаг 7. Отправьте URL на повторную проверку

После существенных изменений можно использовать функцию Request Indexing.

Это особенно уместно после:

• исправления noindex;
• устранения технической ошибки;
• серьёзного обновления контента;
• исправления canonical.

Не нужно отправлять одну и ту же страницу на переобход бесконечно. Если проблема заключается в качестве, дублировании или структуре сайта, повторная отправка URL сама по себе ничего не исправит.

Для нового сайта или недавно опубликованной страницы отсутствие индексации в течение некоторого времени может быть нормальным.

Google указывает, что после публикации или отправки URL на индексацию может пройти от нескольких дней до нескольких недель. Скорость зависит от множества факторов, включая сайт, страницу и текущую работу поисковой системы.
На скорость могут влиять:

• возраст сайта;
• количество страниц;
• внутренняя структура;
• частота обновлений;
• качество контента;
• техническое состояние сервера;
• количество уже известных Google URL.

Поэтому публикация статьи утром и проверка её в Google через 15 минут не является SEO-аудитом. Это скорее проверка терпения владельца сайта.

Если нужно повысить вероятность более быстрого обнаружения и обхода страницы:

1. Добавьте внутренние ссылки

Новая страница должна быть доступна из уже известных разделов сайта.

2. Обновите Sitemap

Убедитесь, что URL включён в актуальную карту сайта.

3. Улучшите структуру сайта

Важные страницы не должны находиться в глубине сайта без навигационных связей.

4. Уберите технические препятствия

Проверьте:

• robots.txt;
• noindex;
• canonical;
• коды ответа сервера;
• редиректы.

5. Создайте действительно полезную страницу

Google должен видеть в URL самостоятельную ценность, а не ещё одну копию уже существующего материала.

6. Используйте URL Inspection

После существенных изменений можно отправить запрос на переобход.

Подробный алгоритм можно посмотреть в отдельном материале «Как ускорить индексацию сайта в Google».

Иногда владельцы сайтов пытаются решить проблему с индексацией публикацией ещё большего количества страниц.

Если Google не индексирует 100 уже существующих страниц, создание ещё 500 похожих URL вряд ли поможет.

Напротив, массовая генерация:

• тонких страниц;
• дублей;
• страниц с минимальными отличиями;
• бесполезных фильтров;
• автоматически созданных текстов;

может усложнить структуру сайта и затруднить поисковой системе определение приоритетных URL.

Лучше иметь меньше страниц, каждая из которых отвечает на конкретный запрос и действительно полезна пользователю.

Если проблема касается практически всех страниц, проверьте сайт по этому чек-листу.

Техническая часть

• сайт доступен по HTTPS;
• сервер стабильно отвечает;
• нет массовых ошибок 5xx;
• robots.txt не блокирует важные разделы;
• нет глобального noindex;
• canonical настроен корректно;
• Sitemap доступен.

Структура

• важные страницы связаны внутренними ссылками;
• нет большого количества дублей;
• URL понятны и логичны;
• нужные страницы доступны из навигации.

Контент

• страницы не являются копиями друг друга;
• материалы отвечают на реальные запросы;
• информация актуальна;
• контент создан с учётом поискового намерения;
• нет массовых страниц с минимальной самостоятельной ценностью.

Search Console

Проверьте:

• Page Indexing;
• URL Inspection;
• Manual Actions;
• Security Issues;
• Performance.

Если сайт полностью отсутствует в Google, сначала нужно убедиться, что вы проверяете правильный домен и нужную версию URL. Например, http, https, www и разные поддомены могут рассматриваться как разные варианты ресурса.

Почему Google не индексирует сайт?

Причиной может быть техническая ошибка, отсутствие доступных внутренних ссылок, проблемы с robots.txt или noindex, дублирование страниц, низкая самостоятельная ценность контента или то, что сайт ещё недостаточно давно опубликован.

Что означает «страница обнаружена, но не проиндексирована»?

Google знает о существовании URL, но пока не просканировал страницу. Это не обязательно означает техническую ошибку.

Что такое Crawled - currently not indexed?

Google уже просканировал страницу, но пока не включил её в индекс. Нужно проверить качество страницы, дублирование, canonical, внутренние ссылки и общую структуру сайта.

Что означает Excluded в Google Search Console?

Это означает, что URL не включён в индекс. Причина может быть нормальной, например noindex на служебной странице, или требовать исправления, если исключена важная статья или коммерческий URL.

Сколько времени Google индексирует новую страницу?

Срок может составлять от нескольких дней до нескольких недель. Точный срок не гарантируется и зависит от конкретного сайта и URL.

Поможет ли добавление страницы в Sitemap?

Sitemap помогает Google обнаружить URL, но не гарантирует его индексацию. Страница всё равно должна пройти оценку поисковой системой.

Нужно ли постоянно обновлять страницу, чтобы Google её проиндексировал?

Нет. Бессмысленное изменение нескольких слов не делает страницу более ценной. Обновлять материал стоит тогда, когда появились новые данные, изменилась информация или страницу действительно можно улучшить.

Если Google не индексирует сайт или отдельные страницы, не стоит сразу искать одну магическую настройку.

Сначала определите, на каком этапе возникает проблема:

• Google не знает о URL;
• знает, но ещё не просканировал;
• просканировал, но не добавил в индекс;
• исключил страницу по технической причине;
• выбрал другую каноническую версию.

Статусы Discovered - currently not indexed, Crawled - currently not indexed и Excluded требуют разного подхода.

Правильная последовательность действий выглядит так:

проверить статус → найти причину → исправить технические проблемы → улучшить страницу → усилить внутренние связи → отправить URL на повторную проверку.

Главное, не пытаться лечить проблему с индексацией публикацией ещё сотни похожих страниц. В SEO количество страниц само по себе ничего не решает. Google всё-таки научился отличать большой сайт от большого количества цифрового мусора.

Для написания статьи использовалась информация с официального источника ⁠Google Помощь