Лимит обращений к Google с одного IP в день

[Удален]
916

Хочу сделать определялку индекса гугла.

Задача: есть куча URL разных страниц разных сайтов (скажем 20 000). Их надо проверить на предмет наличия в индексе Гугла.

Реализация: циклически проверять их наличие в гугле простыми обращениями, типа:

http://www.google.ru/search?hl=ru&newwindow=1&q=inurl%3A%22site.ru%2Fsite%2Fssyi.html%22&lr=&aq=f&oq=

Вопрос - какой лимит обращений у Гугла за 1 день с одного IP??

(для примера у Яндекса 1000 запросов в день)

Sower
На сайте с 30.12.2009
Offline
659
#1

Я ставил в парсере по 2 запроса в минуту, и парсил часов 10 с домашнего компа без прокси. Проблем не было.

__________________Бесплатная накрутка ПФ: посещаемость, просмотры, переходы с поисковиков по ключевикам, итд.
__________________Все посетители живые, не боты. (http://livesurf.ru/promo/80271)
R_Tem
На сайте с 21.08.2008
Offline
137
#2

3-4 запроса в минуту и не больше.

K
На сайте с 09.02.2006
Offline
116
#3
R_Tem:
3-4 запроса в минуту и не больше.

болтовня.

Я парсю с задержкой в 8 секунд с одного IP, не банит. Чаще дергать начинаешь тогда да.

Но справеливости ради стоит отметить, у гугла все зависит какой опрератор дергаете. Если site: или inurl то задержки надо больше ставить.

выше сказаный таймаут работает просто для серча.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий