Googlebot/2.1 and mozilla/4.0(compatible; googlebot/2.1) кто что знает? false or true

1 234
Painkill
На сайте с 29.08.2005
Offline
6
#21

Supplimental results.... что-то я не пойму, какой в них смысл?

что-то не так...
Painkill
На сайте с 29.08.2005
Offline
6
#22

кстати может здесь кто объяснит почему на http://www.google.com/addurl/ "контрольный текст" это всего навсего фикция?

NL
На сайте с 29.01.2003
Offline
212
#23

Сегодня с 64.233.166.136 зашел некто

UP.Browser/6.1.0.1.140 (Google CHTML Proxy/1.0)

pharaoh
На сайте с 15.09.2005
Offline
8
#24

Ко мне вот такой заходит Mediapartners-Google/2.1

S
На сайте с 16.01.2005
Offline
60
#25
NULL:
Ко мне 3 недели назад с crawl-66-249-65-36.googlebot.com заходил
Nokia6820/2.0 (4.83) Profile/MIDP-1.0 Configuration/CLDC-1.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
Хост гуглевый, при чем тут Nokia - непонятно. Может гейт какой-нибудь.

wap.google.com/wml

Этот гугловский гейт

Пользуясь поиском и переходя по ссылке в результате посика вы можете посмотреть обыкновенный сайт на мобильном телефоне через этот гейт. В данном случае как понимаю это была нокиа 6820 :)

Painkill
На сайте с 29.08.2005
Offline
6
#26
Сегодня с 64.233.166.136 зашел некто
UP.Browser/6.1.0.1.140 (Google CHTML Proxy/1.0)

Вполне может быть что Гугл начинает потихоньку тестить свой браузер...

webcat
На сайте с 19.10.2005
Offline
137
#27

Если номер типа 66.249.93.104 - это Freshbot, временный. Если типа 216.239.59.104 - это Deep Crawl,правильный

Painkill
На сайте с 29.08.2005
Offline
6
#28
webcat:
Если номер типа 66.249.93.104 - это Freshbot, временный. Если типа 216.239.59.104 - это Deep Crawl,правильный

Интересно...а откуда такая инфа?

webcat
На сайте с 19.10.2005
Offline
137
#29

Доврый день,

Google использует 2 робота для индексации сайтов - Freshbot и Deepbot - названные так в соответсивии с их основными назначениями.

Deepbot приблизительно раз в месяц (иногда чаще) проходит всю сеть и результаты этого индксироваия собственно и отражаются в основном индексе Google. Поэтому Вы и видите его в Ваших статитиках реже.

Freshbot посещает сеть постоянно, и получается так *называмый Everflux* . Он ответственен за нахождение и уточнение свежих содержаний как новости, новые страницы или сайты, блоги, новое в форумах и т.д. Новое проверяет он часто, чтобы увидеть, будут ли регулярные уточнения. Вероятно он вносит всё новое в отдельную базу данных, которая актуализируется каждый раз когда начинается новый цикл. Поэтому Вы видите его в Ваших статитиках намного чаще.

При этом вначале Freshbot и основной индекс смешиваются для получения серпов. Может получится так, что новый контент появляется быстро в поиске, но и быстро исчезает для того, чтобы через два-три месяца появится в актуализированном основном google Index.

В одно время Freshbot использовал адресы интернета начиная при 64. и адресы Deepbot начиная с 216.; но с середины 2003 роботы Google *Freshbot* приходят к Вам с машин 64. * или 66. *

Вс. хор

Painkill
На сайте с 29.08.2005
Offline
6
#30
Доврый день,

Google использует 2 робота для индексации сайтов - Freshbot и Deepbot - названные так в соответсивии с их основными назначениями.

Deepbot приблизительно раз в месяц (иногда чаще) проходит всю сеть и результаты этого индксироваия собственно и отражаются в основном индексе Google. Поэтому Вы и видите его в Ваших статитиках реже.

Freshbot посещает сеть постоянно, и получается так *называмый Everflux* . Он ответственен за нахождение и уточнение свежих содержаний как новости, новые страницы или сайты, блоги, новое в форумах и т.д. Новое проверяет он часто, чтобы увидеть, будут ли регулярные уточнения. Вероятно он вносит всё новое в отдельную базу данных, которая актуализируется каждый раз когда начинается новый цикл. Поэтому Вы видите его в Ваших статитиках намного чаще.

При этом вначале Freshbot и основной индекс смешиваются для получения серпов. Может получится так, что новый контент появляется быстро в поиске, но и быстро исчезает для того, чтобы через два-три месяца появится в актуализированном основном google Index.

В одно время Freshbot использовал адресы интернета начиная при 64. и адресы Deepbot начиная с 216.; но с середины 2003 роботы Google *Freshbot* приходят к Вам с машин 64. * или 66. *

Вс. хор

Т.е, насколько я понял, основная задача "СВЕЖЕГО" робота установить насколько часто-обновляемым является ресурс?

Или периодичность обновлений?

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий