Так есть ли толковый парсер выдачи Гугла

12
I
На сайте с 06.03.2007
Offline
123
3960

Можно и платный, недорогой, что то поиск особо не помог....

S2
На сайте с 07.01.2008
Offline
611
#1

Вот посмотрите например этот.

Не надо приписывать мне свои выводы, я имею ввиду только то, что написал. Лучшая партнёрка по футболкам/толстовкам (http://partnerka.kolorado.ru/?ref=1921540) Опрос: Проверить текст на уник - как? (/ru/forum/495885)
I
На сайте с 06.03.2007
Offline
123
#2

спасибо полезные вещички, но как обойти ограничения?

LEOnidUKG
На сайте с 25.11.2006
Offline
1774
#3

Как агресспарсер СДОХ, я руками парсю :)

1. захожу по этой ссылке:

http://www.google.com/ie?q=site.ru&num=100&hl=ru&start=0&sa=N&filter=0

2. ввожу вот такой вот JavaScript в строку адреса:

javascript:all=document.links.length;mass='<b>Всего ссылок на странице:\u0020'+all+'</b><br><br>\n';for(i=0;i<all;i++){mass+=document.links+'<br>\n';}newwind=window.open('about:blank','result','width=600,top=100,left=100,scrollbars=1');newwind.document.write(mass);

Он показывает все ссылки со страницы, у меня этот скрипт в закладках и усё.

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/ ✅ Настройка и оптимизация серверов https://getmanyspeed.ru/
T
На сайте с 21.06.2007
Offline
54
#4

Сайт bajron.od.ua - скачайте парсер и ставьте ограничение в 5000мс...Парсится отлично..

S2
На сайте с 07.01.2008
Offline
611
#5
LEOnidUKG:
Как агресспарсер СДОХ, я руками парсю :)
1. захожу по этой ссылке:
http://www.google.com/ie?q=site.ru&num=100&hl=ru&start=0&sa=N&filter=0
2. ввожу вот такой вот JavaScript в строку адреса:
javascript:all=document.links.length;mass='<b>Всего ссылок на странице:\u0020'+all+'</b><br><br>\n';for(i=0;i<all;i++){mass+=document.links+'<br>\n';}newwind=window.open('about:blank','result','width=600,top=100,left=100,scrollbars=1');newwind.document.write(mass);

Он показывает все ссылки со страницы, у меня этот скрипт в закладках и усё.

Браузер у вас какой? У меня в IE 6.0 - реакция на этот скрипт "0".

Tazzard:
Сайт bajron.od.ua - скачайте парсер и ставьте ограничение в 5000мс...Парсится отлично..

Более точна, эта ссылка: http://bajron.od.ua/?p=68

А тут описание программы: http://www.seonews.ru/article/.publication/410/

LEOnidUKG
На сайте с 25.11.2006
Offline
1774
#6
Браузер у вас какой? У меня в IE 6.0 - реакция на этот скрипт "0".

В основном использую оперу. Про IE особенно 6 забыл уже давным давно...

I
На сайте с 06.03.2007
Offline
123
#7
LEOnidUKG:
Как агресспарсер СДОХ, я руками парсю :)

1. захожу по этой ссылке:
http://www.google.com/ie?q=site.ru&num=100&hl=ru&start=0&sa=N&filter=0
2. ввожу вот такой вот JavaScript в строку адреса:
javascript:all=document.links.length;mass='<b>Всего ссылок на странице:\u0020'+all+'</b><br><br>\n';for(i=0;i<all;i++){mass+=document.links+'<br>\n';}newwind=window.open('about:blank','result','width=600,top=100,left=100,scrollbars=1');newwind.document.write(mass);

Он показывает все ссылки со страницы, у меня этот скрипт в закладках и усё.

Тоже прикольно, но к сожалению более 200 ссылок не выдает...

ispan добавил 31.08.2008 в 16:11

Tazzard:
Сайт bajron.od.ua - скачайте парсер и ставьте ограничение в 5000мс...Парсится отлично..

Неа, не отлично!

Запрос inurl:submit.php intext:"Добавление ссылки"

Выдает:

список УРЛ запросов

http://www.google.com.ua/search?num=100&hl=ru&q=%D0%94%D0%BE%D0%B1%D0%B0%D0%B2%D0%BB%D0%B5%D0%BD%D0%B8%D0%B5+%D1%81%D1%81%D1%8B%D0%BB%D0%BA%D0%B8%22+%22ubmit%2Ephp+intext%3A%22+%2Dintext%3A%22ubmit%2Ephp+intext%3A%22+%2Dintitle%3A%22ubmit%2Ephp+intext%3A%22&meta=lr%3Dlang_ru

И результат

http://www.download.com/Antivirus/3150-2239-0.html

http://www.download.com/sort/3150-8022-0-1-4.html

Ну а далее:

Приносим свои извинения...

... но ваш запрос похож на запросы, автоматически рассылаемые компьютерным вирусом или вредоносным программным обеспечением. В целях защиты наших пользователей мы не можем обработать ваш запрос немедленно.

Как обойти именно это ограничение на кол-во запросов?

LEOnidUKG
На сайте с 25.11.2006
Offline
1774
#8
Тоже прикольно, но к сожалению более 200 ссылок не выдает...

В СМЫСЛЕ?! на первой странице спарсили... перешли на вторую... парси сколько влезет.

I
На сайте с 06.03.2007
Offline
123
#9
LEOnidUKG:
В СМЫСЛЕ?! на первой странице спарсили... перешли на вторую... парси сколько влезет.

ну вот а начиная с третьей меня не пускает, проэксперементируйте с данным запросом...

надо какую нить прокси утилитку попробовать

LEOnidUKG
На сайте с 25.11.2006
Offline
1774
#10
ispan:
ну вот а начиная с третьей меня не пускает, проэксперементируйте с данным запросом...
надо какую нить прокси утилитку попробовать

меня тоже не пускает на некоторые запросы, это глюк гуглы...

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий