Неизвестный User-Agent с гугловским адресом.

C
На сайте с 19.09.2001
Offline
120
1461

Сегодня ночью на одном из сайтов было замечено нечто со следующими параметрами:

IP: 216.239.33.5

address: proxy.google.com

User-Agent: Python-urllib/2.0a1

Может кто-нибудь сказать, что это за зверь и чего от него можно ожидать?

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)
Григорий Селезнев
На сайте с 25.09.2001
Offline
298
#1

ручная проверка дорвеев?

L
На сайте с 06.09.2001
Offline
67
#2

нет, не ручная проверка

у Гугля есть питоновские боты. Что они точно делают не знаю, но таких ботов больше, чем один.

TrafficHolder.com - Buy/Sell Adult Traffic (http://www.trafficholder.com/aff.php?samuelapirrone)
R
На сайте с 06.06.2004
Offline
44
#3

Google предоставляет возможность поиска с сайта с помощью Python. То есть это вроде Яндекс.Поиска. Насколько я помню, в гугле регистрируешь айпишник и после этого с помощью скрипта можешь генерить запросы и получать ответы от гугла. На Яндекс.XML тоже немного похоже :)

J
На сайте с 16.06.2004
Offline
7
#4

Интересно. Эта услуга бесплатна?

[Удален]
#5

Блин, ну нафига старые треды поднимать. :(

Робот, упомянутый в первом сообщении - это программа от Slide Viewer из Google Labs, сервис, который делал "слайд-шоу" из результатов поиска. Этот робот как и сервис в настоящее время не существуют. (Так что вопрос из первого сообщения уже имеет только историческую значимость).

Сервис, который похож на Яндекс.XML 😂 - это http://www.google.com/apis/. Услуга бесплатна, но ограничена 1000 обращениями в сутки с одного зарегистрированного пользователя системы. Запросов к сайтам, находящимся в индексе Гугля, при использовании этой системы не делается, только к индексу Гугля.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий