Подскажите парсер урлов

Здравствуйте!

Подскажите есть ли такие десктопные проги-ввел адрес сайта(а еще лучше список сайтов) нажал кнопочку -и получил список всех урлов с этого сайта.Перерыл весь инет-все не то.парсить карту сайта - не совсем то (сайтов много, у всех разный движок)

Парсить rss-тоже не вариант там только свежие новости

В общем у меня пачка сайтов - мне нужно получить единый список всех урлов с этих сайтов (для автопостинга в прокаченный твиттер)

Если такого готового продукта на блюдечке не бывает прошу вас подсказать софт который приблизительно способен выполнять подобные функции.

Заранее спасибо