Сайт под фильтром АГС - у кого как часто заходит яндекс бот по логам?

Toppins
На сайте с 26.03.2011
Offline
45
1302

Доброго времени суток. Поделитесь результатами анализа лог-файлов сайта (если конечно анализируете), который находится под фильтром АГС - у кого как часто заходит яндекс бот. У меня сейчас заходит каждый час и вот что написано:

"95.108.235.53 - - [08/Nov/2011:20:19:40 +0400] "GET / HTTP/1.0" 200 147135 "-" "Yandex/1.01.001 (compatible; Win16; I)""

Может у кого по другому?

CpaClub.org (http://cpaclub.org/)
F
На сайте с 13.11.2009
Offline
252
#1

Это у Вас в новых логах? Почему спрашиваю, потому что роботы яндекса уже давно под другим именем заходят. http://help.yandex.ru/webmaster/?id=995329

А раньше было так

Toppins
На сайте с 26.03.2011
Offline
45
#2
foran:
Это у Вас в новых логах? Почему спрашиваю, потому что роботы яндекса уже давно под другим именем заходят. http://help.yandex.ru/webmaster/?id=995329

А раньше было так

Ну да новые вот дата и время: 08/Nov/2011:20:19:40

Получается старый бот забегает? Или что?

F
На сайте с 13.11.2009
Offline
252
#3
Toppins:
Ну да новые вот дата и время: 08/Nov/2011:20:19:40
Получается старый бот забегает? Или что?

не думаю, что старый робот, старый на пенсии наверное :)

может просто я ошибаюсь, но у меня боты под новыми именами. Кто знает, каких роботов яндексоиды выпускают погулять.

А то, что робот бегает по сайту, который под АГС, это нормально. Ему же надо проверять, может сайт уже стал удовлетворять по качеству их алгоритмам :)

infin1ty
На сайте с 03.06.2009
Offline
116
#4

Бан/АГС - робот сидел сутками. Это нормальное явление. Сейчас слава богу таких наблюдений нет

Toppins
На сайте с 26.03.2011
Offline
45
#5
foran:
не думаю, что старый робот, старый на пенсии наверное

Ага, точно, получается что пенсионер шалит...

infin1ty:
Бан/АГС - робот сидел сутками.

Как это "сидел сутками"? Не заходил или наоборот часто сидел на сайте?

ZG
На сайте с 17.07.2008
Offline
26
#6

Может это какой нибуть бот парсер, косит под яндекс, просто забыли новое имя вписать

Как заработать на форекс (http://communitytraders.ru)
Toppins
На сайте с 26.03.2011
Offline
45
#7

И что он, этот пенсионер у меня интересно "парсит"?

KiryaBH
На сайте с 07.06.2009
Offline
132
#8

Имеется сайтик под АГС уже месяца как два, первые недели по логам бот не заходил.

Провел кое какие работы над сайтом(убрал дубли, метки, составил правильный robots.txt, убрал все страницы типа профилей, сбавил внутренюю перелинковку, покопался немного в коде).

Сейчас можно сказать бот живет на сайте, постоянно жрет страницы, но в индексе сайт так и не появляется.

П.С. сейчас готовлю большую пачку контента для вброса и надеюсь на лучшее.

ТОПчик среди хостингов! (https://goo.gl/z4QszF) | Дешевая РАБсила (https://goo.gl/8Mg7if) | ПУШИстая партнерка (https://clickstar.me/?ref=35ddc4aa)
AA
На сайте с 26.09.2011
Offline
17
#9
Zloj_Genij:
Может это какой нибуть бот парсер, косит под яндекс, просто забыли новое имя вписать

Элементарно проверяется по хосту.

Если сетевая php-функция gethostbyaddr($IP) выдаёт хост, содержащий yandex.ru (для указанного - 95.108.235.53 это именно так), значит бот Яндекса настоящий☝.

Toppins
На сайте с 26.03.2011
Offline
45
#10
Andre_A:
Элементарно проверяется по хосту.
Если сетевая php-функция gethostbyaddr($IP) выдаёт хост, содержащий yandex.ru (для указанного - 95.108.235.53 это именно так), значит бот Яндекса настоящий.

Так вот он заходит один раз в час на главную страницу и всё...

Вот ещё зашел, вроде нормальный, но один раз:

77.88.27.25 - - [09/Nov/2011:08:36:32 +0400] "GET / HTTP/1.0" 200 18992 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий