Парсить гугл

lis, первый раз о таком слышу. Хотя дать ответа к сожалению не могу.

2 минуты достаточно большой интервал, не должен банить. Хотя не факт.

lis, 2 мин нормальный интерва, чтобы изежать бана, но для полной гарантии лучше, чтобы интервал менялся случайным образом. В настройках семонитора есть возможность такая.

/ru/forum/306080 посмотрите эту тему может вам поможет

Хорошая идея.

Гиблая затея имхо. Если запросы будут однотипными, а они скорее всего такими и будут - банить будут только так.

Я вот броузером натыкаюсь на грабли, когда делаю запрос именно для определения позиций и закономерности, а для поиска. Так что гугл банит за "нестандартное поведение", а не за превышение лимитов. Лучше сразу в сторону АПИ хмльного смотреть. Да, есть погрешность и расхождения. А где их сейчас нету. Стабильные позиции канули в лету.

Ничего подобного.

Мой скрипт парсит гугловскую выдачу примерно раз в 10 секунд. И вполне успешно.

Подозреваю, что ключевое слово здесь "примерно", так как интервалы могут быть разными - от 8 до 12 секунд.

А представьте себе, как обращаются к гуглу обитатели локальных домовых сетей, у которых на выход всего один айпи на полторы тысячи человек? Я уверен, значительно чаще, чем раз в 2 минуты.

75 запросов с интервалом 2 секунды, не банит

думаю, что можно и больше.

когда тестировал - по несолько раз подряд гонял.

правда, у меня полная эмуляция браузера (все заголовки, наличие кукис, POST запросы итп)

а прокси кто то отменял?