Серфинг, задания, SEO-аудит РЕКЛАМА
ГлавнаяО проектеСерфингТарифыУслугиСтатьиВопросы и ответыПравилаКонтакты
Главная / Статьи / SEO-продвижение / Почему сайт выпал из индекса и что с этим делать

Почему сайт выпал из индекса и что с этим делать

Дата: 15 января  |  Рубрика: SEO-продвижение  |  Опубликовал: admin  |  Время чтения: ~5 мин.
Почему сайт выпал из индекса и что с этим делать

Одна из самых неприятных ситуаций для владельца сайта — утром открыть статистику и увидеть, что трафик из поиска упал почти до нуля. Проверка показывает, что страниц нет в индексе. Паниковать рано: в большинстве случаев причина находится и устраняется, а позиции восстанавливаются. Главное — действовать последовательно и не делать резких движений.

В этой статье — пошаговый план диагностики, от самых частых и простых причин к редким и сложным.

Шаг 1. Проверьте, действительно ли страницы выпали

Иногда кажется, что сайт исчез, а на деле проблема в другом: сбой счётчика статистики, изменения в отчётах или временные колебания выдачи. Откройте Яндекс Вебмастер и посмотрите раздел «Страницы в поиске». Там видно, сколько страниц в индексе, какие были исключены и по какой причине. Аналогичная информация есть в Google Search Console.

Если число страниц в индексе действительно упало, переходите к следующим шагам. Если нет — ищите проблему в аналитике или позициях.

Шаг 2. Доступность сайта

Самая банальная и самая частая причина — сайт был недоступен, когда приходил робот. Сервер упал, закончилась оплата хостинга, истёк сертификат безопасности или домен. Робот видит ошибку и после нескольких неудачных попыток исключает страницы из поиска.

Проверьте историю доступности в панелях вебмастеров, загляните в логи сервера. Если сайт сейчас работает, страницы вернутся после следующего обхода. Ускорить процесс можно, отправив важные адреса на переобход.

Шаг 3. Robots.txt и метатеги

Следующий подозреваемый — запрет индексации. Такое случается после обновления CMS, переноса сайта или работы разработчиков. Откройте файл robots.txt и проверьте, нет ли там строки, закрывающей весь сайт или важные разделы. Посмотрите код страниц на наличие метатега robots со значением noindex. Иногда его включают на тестовой копии сайта и забывают отключить при переносе.

Проверьте и HTTP-заголовки: запрет индексации можно задать и через X-Robots-Tag на уровне сервера.

Шаг 4. Редиректы и канонические адреса

Неверно настроенные редиректы могут отправлять робота по кругу или на несуществующие страницы. Тег canonical, указывающий на другую страницу, заставит поисковик считать текущую дублем. Проверьте несколько выпавших страниц: куда они перенаправляют и какой канонический адрес указан в коде.

После смены протокола с http на https или переезда на новый домен такие ошибки встречаются особенно часто.

Шаг 5. Дубли и малоценные страницы

Поисковики исключают из индекса страницы, которые считают дублями или малополезными. Если на сайте сотни почти одинаковых страниц — например, карточки товаров с одинаковым описанием или страницы фильтров с параметрами, — часть из них может пропасть. В Вебмастере такие страницы обычно помечены как «Дубль» или «Недостаточно качественная».

Решение — объединить дубли, закрыть служебные страницы от индексации и сделать оставшиеся страницы уникальными и полезными.

Шаг 6. Санкции и фильтры

Если технических проблем нет, стоит проверить, не наложены ли санкции. В Яндекс Вебмастере есть раздел «Безопасность и нарушения», в Google Search Console — «Меры, принятые вручную». Там будет указано, если сайт нарушил правила.

Типичные причины санкций:

  • массовая закупка некачественных ссылок;
  • скрытый текст или переоптимизированный контент;
  • накрутка поведенческих факторов;
  • взлом сайта и размещение вредоносного кода или спама;
  • копирование контента с других сайтов в больших объёмах.

Шаг 7. Взлом

Отдельно проверьте, не взломан ли сайт. Злоумышленники часто размещают скрытые страницы со спамом или настраивают редиректы для посетителей из поиска, оставляя сайт нормальным для владельца. Поищите в выдаче страницы вашего сайта с оператором site: и посмотрите, нет ли там странных адресов и текстов. Проверьте файлы на сервере на недавние изменения.

Что делать после устранения проблемы

Когда причина найдена и исправлена, отправьте основные страницы на переобход, обновите карту сайта и следите за отчётами. Восстановление после технических ошибок обычно занимает от нескольких дней до пары недель. После санкций — дольше: нужно подать запрос на пересмотр и дождаться решения.

Как не допустить повторения

Настройте мониторинг доступности сайта — существуют бесплатные сервисы, которые присылают уведомление, если сайт перестал открываться. Включите уведомления в панелях вебмастеров о критических ошибках. Перед любыми крупными изменениями — переездом, обновлением CMS, сменой дизайна — делайте резервную копию и проверяйте robots.txt и метатеги после запуска.

Частичное выпадение: когда пропадают отдельные разделы

Не всегда сайт исчезает целиком. Иногда пропадает один раздел — например, весь каталог или блог. Это хорошая подсказка: значит, проблема в шаблоне или настройках именно этого раздела. Сравните код выпавшей страницы с кодом страницы, которая осталась в индексе. Часто разница находится за минуты: лишний метатег, неверный canonical, закрывающее правило в robots.txt с маской, которое случайно затронуло весь каталог.

Бывает и обратная ситуация: из индекса выпадают отдельные случайные страницы. Обычно это малоценные материалы — короткие новости, пустые теги, архивы. Здесь поможет ревизия контента: объединение похожих страниц и улучшение тех, что остались.

Журнал изменений как страховка

Привычка записывать все изменения на сайте окупается именно в таких ситуациях. Если в журнале видно, что за день до падения обновили плагин или поменяли настройки сервера, круг поиска сразу сужается. Без журнала диагностика превращается в перебор вариантов, а каждый день простоя — это потерянные клиенты.

Когда обращаться к специалистам

Если вы прошли все шаги и не нашли причину, или если сайт попал под санкции, имеет смысл привлечь опытного специалиста. Свежий взгляд и профессиональные инструменты помогают найти проблему быстрее, а грамотно составленный запрос на пересмотр санкций сокращает время восстановления.

Короткая памятка на случай падения

  • не вносите на сайт новых изменений, пока не найдена причина;
  • проверьте доступность, robots.txt, метатеги и редиректы;
  • загляните в разделы нарушений в панелях вебмастеров;
  • проверьте сайт на взлом и посторонние страницы;
  • после исправления отправьте ключевые страницы на переобход;
  • запишите, что произошло и как исправили, в журнал изменений.

Как ускорить возвращение

После исправления проблемы используйте инструменты переобхода в панелях вебмастеров для самых важных страниц, обновите карту сайта и проверьте, что внутренняя перелинковка ведёт на восстановленные страницы. Публикация нового качественного материала тоже стимулирует робота чаще заходить на сайт. Наберитесь терпения: полное восстановление позиций может занять несколько недель.

Итог

Выпадение из индекса почти всегда имеет конкретную причину. В подавляющем большинстве случаев это технические ошибки, которые исправляются за час-два. Не спешите покупать ссылки или переписывать тексты — сначала найдите проблему. Последовательная диагностика по нашему плану поможет вернуть сайт в поиск с минимальными потерями.

Хотите проверить идеи из статьи на живых посетителях? Добавьте сайт в серфинг — это бесплатно.