Форум Поисковые системы Яндекс

Странное поведение робота Я

KR
На сайте с 02.02.2006
Offline
9
Kubik-Rubik
1439

Робот Яндекса запросил каждую страницу по четыре раза...

Вот часть лога:

213.180.207.247 - - [07/Mar/2006:09:11:34 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:35 +0300] "GET /robots.txt HTTP/1.1" 200 165 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:35 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:36 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:37 +0300] "GET /robots.txt HTTP/1.1" 200 165 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:37 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:38 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:39 +0300] "GET /robots.txt HTTP/1.1" 200 165 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:39 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:40 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:40 +0300] "GET /robots.txt HTTP/1.1" 200 165 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:41 +0300] "GET / HTTP/1.1" 200 27458 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:41 +0300] "GET /color.html HTTP/1.1" 200 23918 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:43 +0300] "GET /color.html HTTP/1.1" 200 23918 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:44 +0300] "GET /color.html HTTP/1.1" 200 23918 "-" "Yandex/1.01.001 (compatible; Win16; H)"
213.180.207.247 - - [07/Mar/2006:09:11:44 +0300] "GET /color.html HTTP/1.1" 200 23918 "-" "Yandex/1.01.001 (compatible; Win16; H)"

Кто-нить знает для чего?

KR
На сайте с 02.02.2006
Offline
9
Kubik-Rubik
#1

И еще потом запросил некоторые страницы, которые запрашивал четыре раза - еще по два раза.

Зачем???

P
На сайте с 08.06.2004
Offline
21
promoter
#2

по классификации яндекса, это был робот, определяющий зеркала. может, это у них там какой хитрый алгоритм по 4 раза страницу запрашивать?

или, скорее сервер глючил - какие-нибудь тайм-ауты выдавал.

целевые посетители для вашего сайта с поисковых систем (http://hb1.pp.ru)
K
На сайте с 31.01.2001
Offline
737
Kost
#3

Чтобы увидеть наглядно, что хотел зеркальщик, надо писать в лог имя запрашиваемого хоста. Есть минимум 2 варианта: с www и без. На хостинге Зенон сайты видны и по имени koi.site.ru.

Задача зеркальщика - сравнить страницы, выдаваемые с разных хостов, если есть подозрение, что это зеркала одного сайта.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
KR
На сайте с 02.02.2006
Offline
9
Kubik-Rubik
#4

Скорее всего зеркальщик...

Спасибо

Garin&Klubok
На сайте с 22.11.2002
Offline
111
Garin&Klubok
#5

последний раз он выходил в сеть в начале апреля 2006

Кто скажет, когда ждать его в очередной раз?

KlubOK - управление качеством (http://www.klubok.net/) Мой канал YouTube (https://www.youtube.com/user/garinklubok)
K
На сайте с 31.01.2001
Offline
737
Kost
#6
Kubik-Rubik:
Скорее всего зеркальщик...

Что значит "скорее всего"? Срочно идите в FAQ.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий