удаление мертвых страниц

1

kBace4ka

24 июля 2003, 12:25

561

1. на сайте есть страницы, которые не существуют, но при заходе на них отдается главная страница, по этому поисковики считают эти страницы живыми. Я хочу их удалить из поисковиков добавив в robots.txt эти страницы и запретив их индексацию. Удалятся ли они сами при следующем обходе паука ?

без ручного удаления их со страницы http://www.yandex.ru/removeurl.html

Я не хочу выдавать ни 404 страницу, ни страницы с редиректом и не хочу отлавливать сервером пауков и выдавать им 404 страницу.

2. некоторые страницы обновляются, обновляются ли они на поисковых серверах ? или же надо их удалять и добавлять заново ?

я так понимаю что если на сервере несколько тысяч страниц, то паук маловероятно доберется до старых страниц, которые уже давно изменились.

www.chelout.ru - Челябинск, твой город развлечений.

1183

wolf

24 июля 2003, 14:14

#1

хочу их удалить из поисковиков добавив в robots.txt эти страницы и запретив их индексацию. Удалятся ли они сами при следующем обходе паука ?
без ручного удаления их со страницы http://www.yandex.ru/removeurl.html

Эдак они могут очень долго удаляться...

Сергей Людкевич, независимый консультант, SEO-аудиты и консультации - повышаю экспертность SEO-команд и специалистов ( http://www.ludkiewicz.ru/p/blog-page_2.html ) SEO-блог - делюсь пониманием некоторых моментов поискового продвижения ( http://www.ludkiewicz.ru/ )

K4

1

kBace4ka

24 июля 2003, 17:22

#2

Как писал wolf

Эдак они могут очень долго удаляться...

т.е нужно добавлять и удалять каждую страницу. хорошо.

а почему старые страницы не измеяются ?

когда паук будет просматривать старые страницы на предмет изменения контента ? после полной идексации сайта ?

Все что нужно знать о DDоS-атаках грамотному менеджеру

VK приобрела 70% в структуре компании-разработчика red_mad_robot