[Ищу]Парсер ссылок выдаче и парсер тайтлов

G
На сайте с 21.04.2010
Offline
161
1110

Подскажите чем можно спарсить ссылки в яндексе? Вбиваю site.ru выдает 20к страниц, вот адреса этих страниц нужно спарсить, в sitemap сайта только 11к, а мне нужны все.

И чем потом можно спарсить тайтлы?

CB9TOIIIA
На сайте с 22.06.2010
Offline
76
#1

Возможно CheckParams поможет.

Софт рассчитан на полностью автоматическую проверку миллионов ссылок/доменов. Т.е. алгоритм работы примерно такой: добавили ссылки => запустили => немного подождали => получили результат. Всё остальное программа сделает самостоятельно. Также имеется возможность настройки автоматического запуска программы по расписанию с помощью встроенных средств Windows, при этом софт автоматически завершит свою работу после выполнения всех заданий.

/ru/forum/511667

[Удален]
#2

Попробуйте Screaming Frog Seo Spider - отличный парсер, можно целиком спарсить сайт и выгрузить Title в Excel. Причем вам хватит возможностей бесплатной версии.

Sevix
На сайте с 24.10.2011
Offline
93
#3
GAGAn:
Вбиваю site.ru выдает 20к страниц, вот адреса этих страниц нужно спарсить

А SEO Spider версии фри выдает только 500 урлов. Но прога хорошая, где то здесь ключи генеренные занедорого продавали.

d4k
На сайте с 02.03.2010
Offline
146
d4k
#4

Спарсить из выдачи - scrapebox.

или

Прочекать весь сайт на общее кол-во ссылок (PageWeight, ScreamingFrog, любой sitemap генератор) и пробить их на индекс любым чекером (Определяйка, CheckerTrast и т.д.)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий