Чем спарсить страницы сайта?

regnet
На сайте с 12.11.2009
Offline
164
943

Доброе утро, подскажите, пожалуйста, чем спарсить страницы сайта ( более 1 млн), sitemap отсутствует, ScreamingFrog не выдерживает парсинга(PRO версия).

Через аналитику тоже не вариант, нужные все страницы сайта ( не только те что в индексе )

S
На сайте с 05.01.2013
Offline
40
#1
regnet:
Доброе утро, подскажите, пожалуйста, чем спарсить страницы сайта ( более 1 млн), sitemap отсутствует, ScreamingFrog не выдерживает парсинга(PRO версия).
Через аналитику тоже не вариант, нужные все страницы сайта ( не только те что в индексе )

Если не найдете готового - могу на заказ сваять парсер. Дорого.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий