Форум Поисковые системы Google

crawler.googlebot.com

SilverMaster
На сайте с 08.10.2003
Offline
228
SilverMaster
755

На мой сайт ходят два вида гугльбота

crawler15.googlebot.com и просто с IP

64.68.82.178

64.68.82.37

64.68.82.176

64.68.82.*

Поскажите плиз, если инфа, кто из них чем занимается на моем сайте?

Из детских комшаров: "А вдруг ночью придет страшный робот!" Из взрослых: "И криво проиндексирует сайт". Не всякий гик добежит до середины поисковой страницы гугла
Netsah
На сайте с 21.11.2003
Offline
158
Netsah
#1

Инфу по ним найдешь здесь

Обычные боты.

Детям - мороженое, женщинам - цветы.
SilverMaster
На сайте с 08.10.2003
Offline
228
SilverMaster
#2
Как писал Netsah
Инфу по ним найдешь здесь

Обычные боты.

О, сенкс за информатион. У меня просито картинка типа

crawler15.googlebot.com

64.68.82.178

64.68.82.37

64.68.82.176

64.68.82.34

64.68.82.37

crawler13.googlebot.com

64.68.82.178

64.68.82.37

64.68.82.176

64.68.82.22

64.68.82.25

crawler16.googlebot.com

64.68.82.178

64.68.82.37

64.68.82.176

64.68.82.22

64.68.82.21

Шо РОБОТ какой-то ходит. Хотелось узнать что за чем он есть, что ему интрересне и кто какую тянет инфу.

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
Netsah
На сайте с 21.11.2003
Offline
158
Netsah
#3

Почитай о денсе

SilverMaster
На сайте с 08.10.2003
Offline
228
SilverMaster
#4
Как писал Netsah
Почитай о денсе

Да, ну, старик, брось.. Статья датированая августом не отвечает реалиям. И я не про дэнс. Денс то отдельная тема, я именно про то, что копает каждый из ботов, тем более что они так реально разделяются (кто-то с IP кто-то с именем). Может дыть есть по этому поводу информация. А денс, денс идет помоему нон-стоп. Ибица какая-то.

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
Netsah
На сайте с 21.11.2003
Offline
158
Netsah
#5

Сам гугл пишет: мы мол вам инфу даем, а там уж сами смотрите, ищите отличия. Сами же хвалят 15-го бота, говорят "глубоко копает":)

Google Crawler 15 is one of their more deeper crawling spiders.

Google Crawler History

Below you will find the 10 latest Google Web Crawler events on Google Dance Tool after August 20, 2003 (the date the script was installed). This will help you develop ideas of your own concerning how Google operates, their crawling patterns, and maybe help figure out the specific function of each google crawler.

We're focused on building Hetzner начал выгонять хостеров Google Updates - апдейты

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий