Парсинг позиций в Google

12
oxg
На сайте с 08.08.2011
Offline
218
oxg
#11

гоглу народ уже через ipv6 парсит давно, на том же упомянутом выше A-парсере.

Прокси IPv6 Россия (http://proxy-ipv6.ru/proxy_ipv6.html) /32 сеть, каждый IP в отдельной /48 сети Прокси IPv4 (http://proxyk.ru/proxy-russia.html) более 160 подсетей А,B,C Прокси для Инстаграм (http://proxy-ipv6.ru/instagram-proxy.html)
vga1
На сайте с 18.02.2007
Offline
251
#12
oxg:
гоглу народ уже через ipv6 парсит давно, на том же упомянутом выше A-парсере.

Раньше хорошо через ipv6 парсился, последние несколько месяцев сплошные капчи. И на ipv4 тоже хуже стало. Правильно выше написали, паранойя у гугла. Пока только большими тайм-аутами больше 60 сек спасаюсь.

XPraptor
На сайте с 15.10.2004
Offline
333
#13

Я давно уже говорил, что они начнут отслеживать технологии самих браузеров и будут пинать всех, у кого не сходится. Вот оно и начинается сейчас.

На тесте сейчас проверил - если не давать гуглу доступ к webrtc и serviceworker как будто в браузерах - он пинает капчами как сумасшедший. А если дать ему доступ к ним - 1000 запросов в 4 минуты сделал - ни одной капчи, узнаёт меня сАбака и не обижается :)

А выдавать ему нужные данные через эти сервисы, дело техники, так что можно уже не отключать эти технологии, раз так пошло.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий