Google блокирует парс больших массивов запросов.Что делать?

decontenance
На сайте с 13.06.2006
Offline
35
1019

Доброе время суток, уважаемые. Проблема в сборе позиций по ПС GOOGLE. Подскажите пожалуйста способы сбора информации по позициям, так чтобы гугл не блокировал постоянную долбежку.Пользуюсь ашмановским аудитором, не знаю как хитро его настроить. Прокси - не прокси подскажите, если имеются, все варианты, как и другой софт для сбора выдачи. Спасибо.

N5
На сайте с 19.06.2007
Offline
14
#1
decontenance:
Доброе время суток, уважаемые. Проблема в сборе позиций по ПС GOOGLE. Подскажите пожалуйста способы сбора информации по позициям, так чтобы гугл не блокировал постоянную долбежку.Пользуюсь ашмановским аудитором, не знаю как хитро его настроить. Прокси - не прокси подскажите, если имеются, все варианты, как и другой софт для сбора выдачи. Спасибо.

Парсить: 1) Через прокси, для этого использовать хороший парсер, который позволяет менять их на лету. Из дескстопных хорош Xkovator. Из серверных aura.

2) Устанавливать таймаут 20+ сек между запросами.

3) Парсить разные ДЦ Гугла, чередуя запросы.

4) Подвариант п.3 парсить разную национальную выдачу.

Для получения более 1000 результатов нужно применять вариаторы TLD (*.com, *.biz, *.net и т.д.) добавлять слова вариаторы (не использовать стоп-слова).

Одна из лучших программ для SEO - это Semonitor. Профи версия имеет полный набор инструментов, включая анализ позиций, конкуренцию, ключевые слова и т.п. Must have.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий