Чем достать индекс сайта?

Jumanjee
На сайте с 27.03.2010
Offline
83
844

К примеру по site:site.ru гугл показывает 4300 результатов.... Чем все эти результаты можно достать и кинуть к текстовый файл?

september
На сайте с 11.09.2009
Offline
591
#1

Сайтмапа на сайте нету?

$ карта для вывода вебмани в любой точке мира (https://www.epayments.com/registration?p=dc2462e885)
d4k
На сайте с 02.03.2010
Offline
146
d4k
#2
Jumanjee:
К примеру по site:site.ru гугл показывает 4300 результатов.... Чем все эти результаты можно достать и кинуть к текстовый файл?

Scrapebox (платно, $50)

Jumanjee
На сайте с 27.03.2010
Offline
83
#3
september:
Сайтмапа на сайте нету?

Так-то оно понятно. Разумеется надо для сопоставления реального количества страниц и индекса. Поиск мусора короче.

d4k:
Scrapebox (платно, $50)

Спасибо, гляну.

УС
На сайте с 04.10.2011
Offline
65
#4
d4k:
Scrapebox (платно, $50)

он отделяет сопли?

нужен софт который именно без соплей собирает по команде site всю выдачу, например 500000 страниц

бамболео бамболео
Proofer
На сайте с 04.11.2011
Offline
291
#5

Утренний стояк, zennoposter + прямые руки)

E
На сайте с 21.09.2009
Offline
283
#6
Proofer:
zennoposter + прямые руки)

поиск настроен максимум на выдачу 1000 результатов тут ни кривые ни косые руки не помогут :)

d4k
На сайте с 02.03.2010
Offline
146
d4k
#7
Утренний стояк:
он отделяет сопли?
нужен софт который именно без соплей собирает по команде site всю выдачу, например 500000 страниц

Ну да, как и любой нормальный парсер: site:http://MySite.com/& - снимаете всю основную выдачу, site:http://MySite.com/ - все, вместе с соплями. Достать конкретно сопли уже можно подручными средствами...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий