Что делал GoogleBot?

J
На сайте с 05.06.2003
Offline
42
590

Нашел в логах сегодня вот это:

64.68.82.58 - - [22/Jul/2003:10:20:15 +0400] "GET /robots.txt HTTP/1.0" 302 278 "-" "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"

64.68.82.58 - - [22/Jul/2003:10:20:17 +0400] "GET /index.php HTTP/1.0" 200 45293 "-" "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"

64.68.82.58 - - [22/Jul/2003:10:20:17 +0400] "GET / HTTP/1.0" 200 7995 "-" "Googlebot/2.1 (+http://www.googlebot.com/bot.html)"

Ужасно инетересно, что это за бот, и что он делал? Он ведь ничего и не проиндексировал. И почему он на сайте сразу полез в index.php, если по умолчанию стоит index.html ?

Буду рад, если кто-то подскажет!

bejee
На сайте с 24.12.2002
Offline
75
#1

посмотри вот тут

Незнание правил форума не освобождает от ответственности.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий