Одна из самых распространённых ошибок большого количества сайтовых «движков» — это динамическая обработка всех запросов (в т.ч. запросов на несуществующие страницы) и отдача кода 200 (файл существует) с «мордой» сайта, либо сообщением о несуществующей странице.
И если, не дай бог, в купе с этим присутствует неправильная генерация ссылок — это либо относительные ссылки, либо неверная конвертация в абсолютные, то для поисковиков может получиться «бесконечный сайт»! с сотнями тысяч !!! страниц-дублей с соответствующим негативным отношением поисковика к такому сайту
Кстати — не забываем следить за состоянием сайта в webmaster.yandex.ru
1. Закрываем индексацию по шаблону в robots.txt
2. Правим движек
На несуществующие страницы:
header('HTTP/1.1 404 Not Found');
и далее хтмл-страничка 404 во всей красе...
die ('404 Not Found');
Один комментарий на «“Куча левых страниц в индексе поисковиков — отдаём 404ю”»
Достаточно интересная и познавательная тема