Сегодня разберём частый вопрос: почему страница не индексируется, даже если, кажется, всё сделано правильно?
Это точно не индекс?
Сначала проверь, действительно ли страница не проиндексирована. Может быть, она просто не ранжируется по нужным тебе запросам. Это не значит, что её нет в индексе.
Возможные причины
Есть много причин, почему Google может не индексировать страницу. Вот основные:
Технические проблемы
- Блокировка в robots.txt. Если ботам запрещён доступ, Google не увидит контент. Он может знать о странице по карте сайта, но не поймёт, о чём она, и не будет показывать её в поиске.
- Страница не рендерится. Если бот зашёл, но не смог отобразить контент, он может не индексировать страницу.
- Тег noindex. Иногда на странице стоит метка noindex. Она прямо запрещает индексировать.
- Блокировка на уровне сервера. Иногда сервер или CDN блокирует Googlebot.
- Ошибки ответа сервера. Если страница возвращает код 4XX или другой, Google может решить, что она не живая.
- Медленная загрузка. Если страница грузится очень долго, бот может не успеть её просканировать.
Качество страницы
- Мало внутренних ссылок. Если на страницу почти не ссылаются из других разделов сайта, Google считает её малозначимой.
- Нет ценности. Если страница слабая, пустая или копирует другие тексты, Google может не индексировать её.
- Дубликаты. Если страница похожа на другие, Google решит, что она не нужна.
- Ручные санкции. Если сайт получил ручной фильтр (например, за «тонкие» страницы), это тоже причина проблем с индексом.
Как найти причину?
1. Проверь в Bing
Если страница есть в индексе Bing, значит, проблема именно в Google.
2. Проверь в Google Search Console
В отчёте «Страницы» посмотри статус URL. Вот что может быть:
- Исключено из-за noindex. Убери тег и отправь страницу на переобход.
- Обнаружена – не проиндексирована. Google знает про страницу, но пока не добавил в индекс. Часто это из-за низкого качества или перегрузки сайта.