Обьясните поведение GOOGLEBOTа

P
На сайте с 03.05.2002
Offline
53
1050

Есть свежий кластер доменов (был развернут 4 апреля)

Состоящий из домена 2 го уровня(в зоне .net), и ~15 доменов 3-го.

До этого домен 2-го уровня зарегистрирован не был.

При просмотре логов был обнаружен дип-бот (фрешбота не было), который со всех доменов запросил sitemap.html, который собственно нес функцию хеллвэя, а так же, я не нашел ни одного запроса гугльботом страницы с которой была ссылка на sitemap.html

Вопрос. как это понимать?

Мои дополнения.

На этот кластер были проставлены следующие ссылки:

1. ссылки с корневых страниц 3-х доменов PR-0 которые повторяли

структуру данного кластера т.е. ссылка с корневой страницы на хеллвэй (sitemap.html), а от туда на все остальные страницы домена.

цель этих линков привести бота на данный кластер.

2. Просто ссылки 3-4 ссылки с доменов с PR:3-5

цель: повышение PR

B
На сайте с 03.12.2002
Offline
8
#1

Может гуглбар? Он давно в подозреваемых ходит.

C уважением
P
На сайте с 03.05.2002
Offline
53
#2
Как писал Babay
Может гуглбар? Он давно в подозреваемых ходит.

Лично я, на эти страницы не заходил.

Я и так знаю что там.

Поэтому наврят ли. Единстренное, что я могу предположить, что у гугля есть, какой то структурный анализатор.

И на его оснвое он сначала проходит "самые полезные" с его точки зрения страницы.

Cossack
На сайте с 17.12.2002
Offline
279
#3

При чем тут GoogleBar? Просто осталось в базе от презднего владельца домена например...

Прощание славянки... (http://www.youtube.com/watch?v=0xf9lFMWfKw)
P
На сайте с 03.05.2002
Offline
53
#4
Как писал Cossack
При чем тут GoogleBar? Просто осталось в базе от прежнего владельца домена например...

Я в первом посте специально отметил что:

До этого домен 2-го уровня зарегистрирован не был.

А уж шанс что совпадут по названиям и домены 3-го уровня, очень мал.

Cossack
На сайте с 17.12.2002
Offline
279
#5

Как можно быть в чем-либо уверенным? Тем более, что совсем недавно можно было делать "резервирование" доменов. Я слышал так украинскую оч-чень крупную компанию домена лишили ;).

P
На сайте с 03.05.2002
Offline
53
#6
Как писал Cossack
Как можно быть в чем-либо уверенным?

Открою мальнкую тайну! =)а для некоторых и не тайну

Я проверяю так.

1. whois.sc

2. archive.org

Если они говорят, что там ничего не было, то я вполне им верю.

Сразу поясню, что это справедливо для .com .net .org

другие меня мало интересуют.

каждый по себе сервис не надежен, но при двойной проверке вероятность выявить правду велика

Cossack
На сайте с 17.12.2002
Offline
279
#7

ну и что? ответ хошь? скажи ip бота, там точно было 216.239.xxx.xxx, а не 64.68.xxx.xxx? (подробности начинаются тут: http://www.searchengineworld.com/spiders/ip_addresses/google.htm).

Note: Я сам уводил домен через "резервирование" - и данные появились только после регистрации ;). Кстати, оба сервиса тухлые, хотя первые и подлизываются к Открытому каталогу, а вторые внаглую используют ...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий