Ключевые слова Рамблера

Auto, софт есть. А какие конкретно ограничения по парсингу? Некогда было вычислять....

Задался целью обработать все запросы? или выбираешь род деятельности? :)

Вот попробуй это: https://ad.rambler.ru/swrds/ может поможет :)

Если парсить ключевое слово не заходя слишком глубоко, то рамблер даёт где-то 10-15 страниц в сутки, но чем глубже тем меньше, на 100-ой странице не больше 5. Ограничения снимаются после полуночи (0 часов 0 минут).

Лучше парсить залогинившись, т.к. не залогинившемуся отдаются не больше 2-х страниц. Этим логином лучше ползоваться под одним и тем же ip, т.к. если воспользуешься другим ip, то ограничения перенесутся и на этот ip. Т.е. сменив ip, но не сменив логин больше не напарсишь.

Новою станицу ключевых слов лучше открывать с задержкой не меньше минуты, иначе меньше отдаст страниц. А лучше вообще через 2-3 минуты обращаться.

Вроде ключевые слова сейчас не кодируют с помощью java-скриптов, так как это делал год назад.

По-мойму идеальная схема парсинга такова: нужны прокси, нужно зарегестрировать для каждой отдельной прокси отдельный логин. Парсить каждой связкой прокси-логин ключевые слова с задержкой в 3 минуты. После полуночи можно воспользоваться заново старой связкой прокси-логин. Схема тяжёлая. Мне проще руками пока собирать, соглашусь что доисторически, но ничего не поделаешь...

нет мне не нужны все запросы, мне нужны все запросы отдельной тематики. Собирать так как собираю я надо две недели. Но мне нужны все слова, поэтому приходится. Род деятельности выбран, и я не дорвейщик. Где парсить я знаю, читай выше - на парсинг есть ограничения.

Auto, странно, у меня больше получалось без логина.

А вот https проксей не наберешься....