lukas

Рейтинг
11
Регистрация
01.10.2003
Должность
SA

Это был не бан. Похоже, что вот такой вот роботс.тхт начиная с 18го мая стал запрещающим для гугльбота.

User-Agent: *

User-agent: teleport

Disallow: /

User-agent: asterias

Disallow: /

и он перестал что либо индексить.

после замены на

User-agent: Googlebot

Disallow: sometext

начал жрать странички обратно

раньше бот забирал по полторы-две тысячи страниц в день...

хочу добавить, что сайт не падал, хостинг и днс не менялся...