Подскажите алгоритм парсинга более 1000 результатов Google

kolchakA
На сайте с 19.06.2010
Offline
226
1307

Хочу написать парсер Google, который позволяет парсить более 1000 результатов по запросу. Знаю, что это можно сделать используя операторы Google. Принцип такой: допустим запрос окна - чтобы получить 2000 результатов, сначала получаем 1000 результатов, где обязательно ЕСТЬ слово двери на странице, а затем 1000 результатов, где его обязательно НЕТ.

https://www.google.com.ua/advanced_search?q=%D0%BE%D0%BA%D0%BD%D0%B0+%D0%B4%D0%B2%D0%B5%D1%80%D0%B8&num=30&hl=ru&lr=&tbo=d&as_qdr=all

https://www.google.com.ua/advanced_search?q=%D0%BE%D0%BA%D0%BD%D0%B0+-%D0%B4%D0%B2%D0%B5%D1%80%D0%B8&num=30&hl=ru&tbo=d

Если вы знаете точный алгоритм (на базе данного принципа, либо какой нибудь другой вариант), то буду благодарен за подсказку и поделюсь лицензией на разработанную в ближайшем будущем программку.

p.s. вариант вроде нижеприведенного не подходит, поскольку выдача будет получаться с одного сайта (с оператором site:domain.com )


пиво inurl:ru
пиво -inurl:ru
пиво inurl:de
пиво -inurl:de
Автоматизация для SEO : подключение API, пайпланы из нескольких сервисов, AI генерация контента
fivefinger
На сайте с 27.01.2011
Offline
87
#1

kolchakA, вот здесь описано, как это можно сделать.

EvilMinds - пока другие делают вид, мы работаем на результат. (/ru/forum/936293)
kolchakA
На сайте с 19.06.2010
Offline
226
#2
fivefinger:
kolchakA, вот здесь описано, как это можно сделать.

спасибо, действительно , сам об этом почему-то не подумал.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий