Гуглоботы сканируют несуществующие страницы - надо ли что-то делать?

D
На сайте с 25.08.2011
Offline
74
848

Привет всем,

у меня гуглоботы пытаются сканировать страницы, которых уже давным давно нет (Я переделал сайт, как рекомендовали тут).

Я конечно знаю про то, что инфор в кеше у гугла долго сохраняется итп. Вопрос в следующем:

  • Желательно ли мне удалить те старые страницы из индекса и кеша гугла или нет?
  • Могут быть ли негативные последствия от того, что гугл "думает" что эти страницы у меня есть?
  • И еще не знаю как правильно задать вопрос... Существует ли определенный лимит на сайт у гугла, т.е. если я его "освобожу" от ненужной работы, то может ли он увеличить переиндексацию существующих страниц?

Заранее благодарен за комментарии и советы.

deyneko.com (http://deyneko.com)
Garin33
На сайте с 31.08.2009
Offline
169
#1

"Забей, Сеня" :), а если серьезно - ничего предпринимать не нужно.

Через какое-то время удаленные страницы сами пропадут из кеша, и ручное удаление через ГуглВебмастер тут даже не 100% панацея. Главное чтобы удаленные страницы ошибку выдавали правильную и соотв. 404 код сервера.

У меня на одном сайте с апреля страницы удаленные в кеше висят ).

Потому что Drupal - это круто.
Solmyr
На сайте с 10.09.2007
Offline
501
#2

Обязательно убедитесь что ответ сервера на этих страницах имеет код 404 и не содержит в хтмл-коде ссылок на другие несуществующие страницы.

D
На сайте с 25.08.2011
Offline
74
#3

Ясно, спасибо - пусть сканирует. Да, выдается 404. Эти старые страницы сканирует только гугль и еще там где зарегистрироваться (в coppermine) - упорно и пачками, почти ежедневно, сканируют какие-то китайские хакеры 🤪

D
На сайте с 25.08.2011
Offline
74
#4
deyneko:
Да, выдается 404.

Я не уверен что выдается 404. Когда мы вводим несуществующую страницу - мой вордпресс выводит страницу с уведомлением что мол такого нет на сервере, попробуйте поиск.

Вот пример старой, и уже не существующей страницы.

Правда там нет ссылок на несуществующие страницы.

Опять тот же самый вопрос: надо ли что-то делать? Не вредить ли это сайту каким либо образом?

Jekyll
На сайте с 04.05.2009
Offline
136
#5
deyneko:
Я не уверен что выдается 404.

Выдаётся, но со второго раза (видимо, сначала что-то пишет в куки). В первый раз отдаёт код "300 Multiple Choices" и редиректит на deyneko.com/ru/

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий