Форум Поисковые системы Google

Различие функций разных ботов Гугля

[Удален]
807

Есть, как я понимаю, 2 разных бота Гугля:

1. Googlebot/2.1 (+_ttp://www.google.com/bot.html)

2. Mozilla/5.0 (compatible; Googlebot/2.1; +_ttp://www.google.com/bot.html)

Вопросы опытным продвиженцам:

Есть ли между ними разница?

Мои наблюдения сводятся к тому, что бот №1 является ботом обновления уже существующих в кэше страниц, в то время как бот №2 занимается поиском новых страниц (Но вопрос: индексируются ли найденные данным ботом страницы или у него какие-то другие функции?).

Какие все-таки функции у этих двух ботов (или это вопрос на засыпку? :) )

Lor
На сайте с 28.05.2004
Offline
352
Lor
#1
Какие все-таки функции у этих двух ботов (или это вопрос на засыпку? )

Не думайте об этом - больше времени для работы останется. ;)

Йопез - форум без модераторов. https://yopez.com
S
На сайте с 16.11.2003
Offline
51
sbkor
#2

А еще подмечено, что

1.Именно первый приходит с http 1.0, а второй с http 1.1.

2.Первый тянет полный размер страниц, а второй - в неск. раз меньше (может быть сам протокол использует такое сжатие данных).

3.Всякие апдейты, пересчеты и т.п. знаменуются как раз походом первого бота.

Я второму вообще не радуюсь.

И насчет кэша подмечено абсолютно точно.

Я рад, что своей жизнью подтверждаю чью-то терию.
Научите бороться с DDoS-атаками Добавьте налоговую информацию MSNbot стал поддерживать протоколы
deleon
На сайте с 16.09.2004
Offline
173
deleon
#3

Обнаружил в своей статистике таких ботов:

Mozilla/5.0 (compatible; Googlebot/2.1; +_ttp://www.google.com/bot.html)

Googlebot/2.1 (+_ttp://www.google.com/bot.html)

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; Googlebot/2.1 (+_ttp://www.google.com/bot.html)

Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.0; Googlebot/2.1 (+_ttp://www.google.com/bot.html);

Googlebot/2.1 (+_ttp://www.googlebot.com/bot.html)

Но самый активный у меня первый.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий