Какой парсилкой/прогой вытаскиваете выдачу серпа Гугла?

123
A8
На сайте с 06.04.2010
Offline
59
#11
astronom_2:
serp parser

Он вроде только позиции снимает.

Берегите здоровье!
dma84
На сайте с 21.04.2009
Offline
168
#12

Написал свой парсер 1,5 года назад, вёрстка у гугла ни разу не менялась

zmey29
На сайте с 08.09.2010
Offline
109
#13

Тоже актуален данный вопрос..

Proofer
На сайте с 04.11.2011
Offline
291
#14

Site-Auditor, SeSpider

S4
На сайте с 23.08.2010
Offline
68
#15
dma84:
Написал свой парсер 1,5 года назад, вёрстка у гугла ни разу не менялась

Неправду говорите :)

Меняется и у Я и у Го , раз в год / два (очень незначительно, но переделывать приходится). Паршу много, лучше парсить своим парсером со своего ip, можно и за сутки ниразу капчи не схватить.

php python *nix
arkadiy_a
На сайте с 11.06.2008
Offline
82
#16
Stas40:
Неправду говорите :)
Меняется и у Я и у Го , раз в год / два (очень незначительно, но переделывать приходится). Паршу много, лучше парсить своим парсером со своего ip, можно и за сутки ниразу капчи не схватить.

Много это сколько? И парсите всю выдачу 1000 резалтов или ограничиваетесь первыми скажем 100?

Наверное, все упирается в количества, да?

S4
На сайте с 23.08.2010
Offline
68
#17
arkadiy_a:
Много это сколько? И парсите всю выдачу 1000 резалтов или ограничиваетесь первыми скажем 100?
Наверное, все упирается в количества, да?

Столько , сколько нужно. При "имитации человека" гугл отдает всё, что есть, но после 1000 полный шлак, который просто не нужен.

Всё упирается во время.

arkadiy_a
На сайте с 11.06.2008
Offline
82
#18

Stas40 расскажите плиз как вам удаетеся парсить больше 1000 по одному запросу?

S4
На сайте с 23.08.2010
Offline
68
#19

Сорри, конечно ошибся, больше 1000 он не даёт.

arkadiy_a выдача уже дальше 100 страницы шлак (примерно конечно, для ВЧ конкурентных дальше). До 1000-й не нужно реально никому. Просто парсеры парсят всё, что им дают. Даже при сборе позиций нет смысла - частая и условно "широкая" ротация.

Вам вообще для чего выдача ? Я паршу функционалом inurl,intext,intitle... Мне просто нужно вся выдача. 90% результатов всё равно не пригодится при дальнейшем разборе.

[Удален]
#20

а баблопарс если не ошибаюсь больше 1000 по запросу парсит

123

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий