Serg_Kotov

Serg_Kotov
Рейтинг
113
Регистрация
23.11.2005
Должность
СЕО + Сисадмин
Интересы
СЕО, Химия

Изменились позиции - +1, +2, +1, остальные на месте.

Недавно купил, неделю назад :-)

Я не могу понять одного - у меня нет записей в логах о заходе ботов Яндекса, индексирующих ТЕКСТ. Тех, кто исследует картинки (Yandex/1.01.001 (compatible; Win16; I)) -куча.

Тем не менее все страницы проиндексированы.

Замечены частые обращения к страницам с

sfront23.yandex.ru - но там нет идентификатора агента:

sfront23.yandex.ru - - [23/Dec/2005:21:21:11 +0300] "GET /index.html

HTTP/1.1" 200 15192

Что посоветуете, чтобы отслеживать user-agent паучка?

Всего: 403