Программа для сбора данных

A-parser / Zenno

С первым пунктом справится SERP Parser, в программе можно снять всю выдачу (включая рекламу) с последующей выгрузкой в Excel.

А кто подскажет как формировать запрос на поиск по домену?

https://search-maps.yandex.ru/v1/?text=http://domain.ru/&type=biz&lang=ru_RU&apikey=ТУТ КЛЮЧ

оно? по другому не дано?

и можно больше 500 запросов, если с разными API? или по IP не пропустят и IP надо еще дополнительно прокси...?

не могу уловить как спарсить все 1000 страниц гугла, яндекс их домены вместе с контекстной реклмой яндекс и гугла, в данной программе?

у меня он только ТОП10 вывел url.

Виталий Макаркин

/ru/forum/comment/13875643

если я поставлю отображать в результатх поиска не 10 а 100 результатов, и таких будет 10 страниц. И теоритически предположим 1000 разных URL.

Все эту выгрузку я получу? или только ТОП 100 ограничится?

Виталий Макаркин, точно, ведь нужна вся выдача. Для этого нужно немного изменить настройки:

1. Изменить режим поиска

http://serpparser.ru/doc_keywords.html#keyword_manager

установить Анализировать всю выдачу, и снять галочку Ограничить глубину поиска, тогда программу будет собирать

2. В настройках проекта

http://serpparser.ru/doc_project_options.html

снять галочку с Хранить только позиции целей.

толи я не туда нажал. ТОП 10 только https://www.screencast.com/t/hC23jyF803k

Вам ведь нужна выгрузка, она в меню Отчеты\Выгрузки\Выгрузка ТОП.