Чем парсим массово выдачу Google?

12 3
LEOnidUKG
На сайте с 25.11.2006
Offline
1722
2956

Пробовал и программы и свои скрипты, recaptcha спрашивает по 25 картинок за 1 раз.

Это уже бред какой-то. Может есть у кого на примете какие-то сервисы по этому поводу?

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/
TF-Studio
На сайте с 17.08.2010
Offline
334
#1

имитация браузера?

Всё ещё лучший способ заработка для белых сайтов: GoGetLinks (https://www.gogetlinks.net/?inv=fahbn8).
LEOnidUKG
На сайте с 25.11.2006
Offline
1722
#2
TF-Studio:
имитация браузера?

Пробовал через имитацию, там каптчу полгода распознают. Потом проксей надо куча. Описание всех этих процедур сводиться, что мне легче просто в браузере javascript-ом цеплять выдачу и всё.

Я хочу вставить нужные запросы и получить результат в кратчайший срок.

vga1
На сайте с 18.02.2007
Offline
251
#3
LEOnidUKG:
Пробовал через имитацию, там каптчу полгода распознают. Потом проксей надо куча. Описание всех этих процедур сводиться, что мне легче просто в браузере javascript-ом цеплять выдачу и всё.

Я хочу вставить нужные запросы и получить результат в кратчайший срок.

Попробовал ipv6 прокси для поисковиков, за 20 штук 140 руб просят за месяц. Можно и дешевле, если от 100 шт. Софт serp parser.

LEOnidUKG
На сайте с 25.11.2006
Offline
1722
#4
vga1:
Попробовал ipv6 прокси для поисковиков, за 20 штук 140 руб просят за месяц. Можно и дешевле, если от 100 шт. Софт serp parser.

А прокси прямо у них покупаются? Просто если софт десктопный, у меня нет ip6 на провайдере, как на них буду запросы делать?

---------- Добавлено 18.09.2017 в 20:35 ----------

Да серппарсер он вроде сам сайт ищет, а мне просто нужны все сайты по запросу.

vga1
На сайте с 18.02.2007
Offline
251
#5
LEOnidUKG:
А прокси прямо у них покупаются? Просто если софт десктопный, у меня нет ip6 на провайдере, как на них буду запросы делать?

---------- Добавлено 18.09.2017 в 20:35 ----------

Да серппарсер он вроде сам сайт ищет, а мне просто нужны все сайты по запросу.

Не, прокси у независимого продавца proxy-seller.ru брал.

Они дают список IP4 адресов с портами на входе

ip4: port1

ip4: port2

ip4: port3

...

ip4: port20

, а на выходе из прокси запросы идут от ip6

----

Опс, наверно, тогда serp parser Вам не подойдет. Я позиции по своим сайтам снимаю. С 20 прокси все быстро получется, да же с распознаванием капч через сервис.

UPD: хотя что-то похожее у них есть http://serpparser.ru/doc_top_member_report.html

юни
На сайте с 01.11.2005
Offline
901
#6
vga1:
Попробовал ipv6 прокси для поисковиков

Яндекс с Гуглом? И как, всё работает без капчи?

https://a-parser.com/ - парсер для профессионалов SEO, маркетологов, арбитражников и SaaS, https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит
vga1
На сайте с 18.02.2007
Offline
251
#7
юни:
Яндекс с Гуглом? И как, всё работает без капчи?

С капчей, но для ее распознавания анти гейт подключен (ссылку не ставлю, форум ее затирает). Капча не сразу появляется, через какое-то количество запросов.

Ip6 прокси можно использовать для парсинга сайтов, которые тест проходят http://ipv6-test.com/validate.php

Segey
На сайте с 23.08.2005
Offline
404
#8

Вот так вот - за 100 рублей 5000 запросов. Итого за запрос = 20 копеек

Brexit - уже совсем рядом. (https://about-this-model.blogspot.com/2019/03/brexit.html)
LEOnidUKG
На сайте с 25.11.2006
Offline
1722
#9
Segey:
Вот так вот - за 100 рублей 5000 запросов. Итого за запрос = 20 копеек

Я смотрел, но я что-то не врубился, где там можно просто парсить просто выдачу, без всякой аналитики. Может просто не нашёл.

Segey
На сайте с 23.08.2005
Offline
404
#10
LEOnidUKG:
Я смотрел, но я что-то не врубился, где там можно просто парсить просто выдачу, без всякой аналитики. Может просто не нашёл.

Чистую выдачу - не нашел, но пока и не нашел повода связываться с API поисковиков. Особенно когда Яндекс выдал мне некую политику - добавь сайт и получи больше запросов. А если учесть что поисковиков штук 5, везде все платно.

Кстати, у них Google и Яндекс тоже есть API, правда капча там чуть стоит ей учуять сеошника - лезет каждую секунду. Я долго мучался с этим, пытаясь найти метод и в итоге посчитал, что готовое API конкретно разрезающее мои запрос намного лучше. То есть между API, капчами, JS, TWebBrowser, купить что-то у кого-то ..... Взял Мегаиндекс.

Кстати, есть еще http://www.botmasterru.com/hrefer/ если чистая выдача, что кстати для парсинга подойдет

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий