подскажите - есть ли сервис для выкачки урлов сайта

P
На сайте с 11.12.2006
Offline
107
835

нужно получить все урлы сайта (или максимально возможное кол-во), а не просто имеющиеся в индексе какой-либо поисковой системы

чето не догоняю как это сделать

и возможно ли вообще

CunninGFox
На сайте с 05.10.2007
Offline
167
#1

http://xml-sitemaps.com/ - 500 страниц "выкачивает"...

скачиваешь получившийся html файл, меняешь кодировку и видишь все урлы с тайтлами...

как вариант - можно еще http://www.pagerank-monitor.com/index.aspx?url=http://site.com

Комплексное продвижение сайтов: увеличение количества клиентов для Вашей компании. От 8.000 рублей. Возможна работа по договору и оплата по безналу. Пишите: seo@sergeus.ru
V
На сайте с 24.04.2007
Offline
72
#2

CoffeeCup Google SiteMapper - полностью настраиваемая (типы файлов, папки и т.д.), несколько вариантов выдачи (html, xml), ораничений по количеству вроде нет

P
На сайте с 11.12.2006
Offline
107
#3
CunninGFox:
http://xml-sitemaps.com/ - 500 страниц "выкачивает"...

скачиваешь получившийся html файл, меняешь кодировку и видишь все урлы с тайтлами...

как вариант - можно еще http://www.pagerank-monitor.com/index.aspx?url=http://site.com

спасибо, но не то немного

500 страниц мало, нужно тысячи, а pagerank-monitor насколько я понимаю берет только из индекса гугла, да и вообще часто глючит

SiteService
На сайте с 08.05.2005
Offline
72
#4
pivz:
нужно тысячи

http://home.snafu.de/tilman/xenulink.html - то что вам нужно

PROMOpark - центр управления продвижением (http://www.promopark.ru/) Самые быстрые прокси (/ru/forum/398887) Скрипт для вывода отчета о продвижении на своем сайте (/ru/forum/390023)
D . G .
На сайте с 27.05.2005
Offline
151
#5
SiteService:
http://home.snafu.de/tilman/xenulink.html - то что вам нужно

нет не то. он показывает уникальные ссылки.

а человеку - как и мне кстате сейчас - нужно СУММА ссылок внутреннего ссылочного. вроде :)

*** 10 страниц. все ссылаются друг на друга + на себя. - нужна сумма

грубо нужна сумма a href`ов

...

первое что на ум пришло

можно дримвивером заменить "a href" на "ahref" и потом обратно и посмотреть в отчете скока изменений было и где...

легко и просто собсна. незабыть xenu проверить потом чтобы все работало. мало ли дрим накосячит.

CunninGFox
На сайте с 05.10.2007
Offline
167
#6

не, не то... мне нужно подсчитать количество страниц сайта.. сейчас тоже с этим столкнулся.

Начал проверять ~100 страничный сайт xenu - получил в первую секунду больше 400 ссылок... вот так вот...

страниц явно более 500...

S
На сайте с 09.01.2004
Offline
196
#7

Посмотрите модуль Сайт Анализатор в Semonitor. 10-30 тыс. страниц выкачает. Правда если нужно будет у всех у них проверить PageRank, то это нужно будет по частям делать - Google теперь блокирует выдачу PR при проверке более 3-5 тыс. урлов за раз

Всего доброго,

Никита Мелькин

Для получения быстрой тех. поддержки - пишите мне на почту! Контакты здесь (http://www.semonitor.ru/contact.html)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий