Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Быстробот

12
P7
На сайте с 04.01.2007
Offline
9
Petya77rus
1176

Как узнать, что на сайт заходил быстробот?

Возможно ли по выдаче узнать: проиндексирован сайт обычным роботом или быстроботом?

Куплю ссылки с сайтов спортивной тематики (футбол, хоккей)
6666
На сайте с 10.01.2005
Offline
505
6666
#1
Petya77rus:
Возможно ли по выдаче узнать

Да, если в выдаче через полчаса, то явно, что не основной бот. :)

Каждое мое сообщение проверила и одобрила Елена Летучая. (c) Для меня очень важно все что Вы говорите! (http://surrealism.ru/123.mp3) .
P7
На сайте с 04.01.2007
Offline
9
Petya77rus
#2
6666:
Да, если в выдаче через полчаса, то явно, что не основной бот. :)

Я имел ввиду не сроки выдачи, а визуальные моменты.

F
На сайте с 18.01.2007
Offline
109
fuster
#3

Насколько Я понял у Яндекса несколько роботов:

Yandex/1.01.001 (compatible; Win16; I)

Yandex/1.03.003 (compatible; Win16; D)

Yandex/1.03.000 (compatible; Win16; M)

D - "быстрое" добавление и проверка

I - индексатор

M - подсветчик

P7
На сайте с 04.01.2007
Offline
9
Petya77rus
#4
fuster:
Насколько Я понял у Яндекса несколько роботов:

D - "быстрое" добавление и проверка

D-добавление через ADD URL

6666
На сайте с 10.01.2005
Offline
505
6666
#5
Petya77rus:
Возможно ли по выдаче узнать
Petya77rus:
Я имел ввиду не сроки выдачи

Вы уж определитесь, что хотите узнать. :)

F
На сайте с 18.01.2007
Offline
109
fuster
#6

короче говоря надо искать Yandex в логах сервера в поле user-agent. и дальше уже смотреть какой именно робот заходил. если быстый, то индексации не будет

p.s. если кто-нибудь чего-нибудь в курсе про доры (или не доры?) буду признателен если загляните /ru/forum/111648

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
A
На сайте с 25.10.2005
Offline
219
alut
#7

Petya77rus,

Если вместо даты стоит "N часов назад", "вчера" и т.д. - страница прихвачена быстророботом.

P7
На сайте с 04.01.2007
Offline
9
Petya77rus
#8
alut:
Petya77rus,
Если вместо даты стоит "N часов назад", "вчера" и т.д. - страница прихвачена быстророботом.

А если указан только размер страницы, но нет ни даты, ни времени?

K
На сайте с 31.01.2001
Offline
737
Kost
#9

Значит не он.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
F
На сайте с 18.01.2007
Offline
109
fuster
#10
alut:

Если вместо даты стоит "N часов назад", "вчера" и т.д. - страница прихвачена быстророботом.

Вчера раскидывал объявы и сразу же их добавлял в Яндекс. Сегодня проверил ссылающиеся на свой сайт страницы и там эти объявы и как раз где дата стоит 8 часов назад и т.д.

Но если они попали в индекс, значит это был не быстробот?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий