Прокси для парсинга выдачи гугла

12
Апокалипсис
На сайте с 02.11.2008
Offline
391
1483

Здравствуйте!

Кто чем пользуется?..

awmproxy.com - знаю, но дорого.

Спасибо

Записки нищего (http://zapiskinishego.ru) - мой личный блог Услуги php программиста. Очень нужна любая работа. Не покупают? Поведенческий аудит интернет-магазина за 5000 руб. (/ru/forum/990312)
Fruit
На сайте с 15.07.2008
Offline
166
#1

Можно индивидуальные прокси FineProxy, разве что, попробовать.

Mik Foxi
На сайте с 02.03.2011
Offline
1076
#2

во всех публичных сервисах прокси будут гуглом уже спалены и на каждый запрос будут капчи, потому я парсю без проксей, разгадывая капчи в антиkапче, правда мне не много запросов надо, максимум 10к в сутки, на капчу уходит около 2-3$ в месяц.

Антибот, антиспам, веб файрвол, защита от накрутки поведенческих: https://antibot.cloud/ + партнерка, до 40$ с продажи.
emariaru
На сайте с 26.10.2010
Offline
73
#3

а как вы капчу им отправляете? пробовал отправлять капчу с сохранением куков, все равно при следующем запросе выскакивает капча

[Удален]
#4
foxi:
во всех публичных сервисах прокси будут гуглом уже спалены и на каждый запрос будут капчи, потому я парсю без проксей, разгадывая капчи в антиkапче, правда мне не много запросов надо, максимум 10к в сутки, на капчу уходит около 2-3$ в месяц.

Как то не совсем понятно - 10к заходов в google.com - это фактически 10к каптчей, при условии что парситься будет с первой стр выдачи (если внутрь идти то еще больше) - а это в антигейте минимум 10 вмз в день.

Mik Foxi
На сайте с 02.03.2011
Offline
1076
#5

borroza, парсю хуманом эмулятором, данных мне хватает с первой страницы вида:

https://www.google.com/search?q=запрос

капча вылазить раз на 200-300 запросов.

[Удален]
#6
foxi:
borroza, парсю хуманом эмулятором, данных мне хватает с первой страницы вида:
https://www.google.com/search?q=запрос
капча вылазить раз на 200-300 запросов.

Просто не знаю как ТС, а я немного про иное - про парсинг выдачи и иного с гугла по уже имеющимся ключам.

Как со своего ip так и со всех листов прокси идет множественная каптча, при работе в 50-100 потоков. Тут видимо проблема решится только большим и часто обновляемым списком хороших прокси?

Mik Foxi
На сайте с 02.03.2011
Offline
1076
#7

borroza, все прокси уже давно найдены до вас и засраны хрефером, который для хрумера базы парсит.

из проксей нормально сейчас работают только приватные сетки соксов своего ботнета :D

я парсю в один поток.

юни
На сайте с 01.11.2005
Offline
902
#8
Апокалипсис:
знаю, но дорого

Сколько запросов в сутки будет?

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
Апокалипсис
На сайте с 02.11.2008
Offline
391
#9
юни:
Сколько запросов в сутки будет?

100 тысяч +

юни
На сайте с 01.11.2005
Offline
902
#10

Апокалипсис, 100к будут стоить ~200 wmz в месяц.

Приемлемо?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий