Зачем стучит Дятел

Independence
На сайте с 29.10.2005
Offline
428
716

Собственно говоря, давно заметил такую вещь, что Дятел Яндекса время от времени дергает страницы. Вот сегодня несколько страниц проверил. При этом если роботы индексаторы используют в своих запросах метод GET, то это - HEAD. Пример:

HEAD /page.html HTTP/1.0 | - | Yandex/2.01.000 (compatible; Win16; Dyatel; C)

Везде, во всех доках, в т.ч. на сайте самого Яндекса указано, что это робот каталога. На сайта в каталоге как не было, так и нет. Пошуршал поиском - нашел записи в блогах, что у некоторых владельцев сайтов возникает такие же вопросы. Складывается ощущение, что это не робот каталога, а что он закладки простукивает. В общем, кто что может сказать на эту тему?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий