Вряд ли можно назвать плохим ваш сайт: рекламой не перегружен, и вообще, по всем признакам должен поисковой системе нравиться. Однако из индекса он выпал. В чем причина? Что приводит к медленному, но уверенному выпадению страничек из индекса поисковика?
Быть уверенным в точной причине удаления страниц из индекса можно, лишь зная всю «историю болезни». Тем не менее, к заболеванию приводят те же причины. Будем более конкретны.
1. Причины технические
Проблемы с хостингом, неверный ответ сервера, «заскоки» движка сайта и т.п. – это может служить причиной выпадения страниц с индекса.
Чтобы разобраться, происходит ли выпадение страниц из индекса по этой причине, следует в Яндекс вебмастер добавить свой сайт, а затем изучить раздел «ошибки». В случае если робот не может попасть на сайт, тогда в «ошибках» вам сообщат про это.
2. Внутренние дубли страниц
Присутствие идентичных страниц под разными именами способно привести к выпадению даже целых разделов. Часто, разные URL с аналогичным по содержанию страниц CMS сайта автоматически генерируются. Об их существовании вебмастер может и не знать.
Есть два пути решения сей проблемы: обратиться к файлу robots.txt, чтобы ограничить дубли, либо поработать с движком для решения проблемы генерирования дублей.
3. Не имеющие контента страницы
В случае, если существенная часть большинства страниц, благодаря своему объёму, сквозным блокам уступает - имеется высокая вероятность удаления таких страниц из системы поиска. Следует привести пример, для пущей наглядности: значительная часть страницы наполнена различными изображениями, либо 1-2 предложениями текста, или шапкой – каталогом, имеющей навигацию на сотню разделов.
Судя по всему, поисковик посчитает подобные страницы малоинформативными и абсолютно бесполезными для пользователей. Посему из индекса он их выбрасывает.
Чтобы не вляпаться в столь пагубные неприятности, нужно следить, чтобы каждая страничка содержала уникальный, качественный контент. Увлекаться раздуванием навигации и иных сквозных блоков не стоит.
4. Исходящие ссылки
Мы не беремся утверждать, что присутствие исходящих ссылок ведет к выпадению страниц из поискового индекса. Но было замечено, что Яндекс убирает из своей базы такие директории сайта, где имеются страницы со ссылками. При этом, подобное может случаться с вполне качественными сайтами, которые нормально, до этого, поисковыми системами индексировались, не учитывая некоторые директории, содержащие продажные статьи.
5. Низкая уникальность текста
Выпадать из индекса могут страницы, наполненные неуникальным контентом. Бывали случаи, когда приличный сайт (СДЛ) на тему поиска роботы «уходил» из индекса потому, что на нем находился текст из КЗОТа.
Если вам необходимо, чтобы такая страница присутствовала в индексе, тогда следует неуникальный контент заменить на уникальный. В случае, если текст, в силу содержания, уникальным не сделать, тогда добавьте на страницу уникального контента.