Кто это - Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) ?

REBUS
На сайте с 20.02.2003
Offline
109
1361

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) - что это за бот ?

IL
На сайте с 04.10.2003
Offline
196
IDL
#1
Как писал REBUS
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) - что это за бот ?

да обычный гугловский бот.

Хотя может софта какая-нить ресурс сканила и криво настроенным юзер-агентом

L
На сайте с 06.09.2001
Offline
67
#2
Как писал REBUS
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) - что это за бот ?

Гугля. адреса гуглевые.

почему Мозиллой прикидывается - не понятно, может на клоакинг проверяет, а может просто так.

Slurp, кстати, тоже пишет слово Mozilla.

TrafficHolder.com - Buy/Sell Adult Traffic (http://www.trafficholder.com/aff.php?samuelapirrone)
REBUS
На сайте с 20.02.2003
Offline
109
#3

Может это что-то типа фрэш бота или т.п. ?! ... замечать его стал недавно, а сейчас кажется на Гуге в очередной раз что-то замышляется, судя по тормозам с пересчетом ПР и апдэйтам базы.

D
На сайте с 21.09.2003
Offline
53
#4

Это гугль проводил тестирование новой системы идентификации бота. Они собираются сделать так, чтобы бот был больше похож на обычного посетителя. Выяснено из высказывания GoogleGuy (представитель гугла на Webmasterworld.com): http://www.webmasterworld.com/forum3/22408-2-15.htm

С уважением, DEkart Блог о Ruby on Rails (http://railorz.ru/) | Создание сайтов от 6999 рублей (http://lite.itvektor.ru)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий