- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Может есть у кого скрипт или программа такая :
на входе: главная страница сайта (http://site.ua)
на выходе: список всех страниц сайта
3.Ы. По-гуглил но не могу пока найти того что мне нужно.
xenu link sleuth
xenu link sleuth
С помощью Хenu пробовал реализовать свою задумку. Но эта прога парсит все типы файлов , при этом в настройках программы смотрел и пытался ограничить парсинг именно на .html внут. страницах - не получилось. Может я что-то не понимаю..но Хenu не совсем подходит под мою потребность.
Могу ошибаться.
STGrabber - в сети есть.
У меня в подписи попробуйте, она платная но там 5 дней триала так что уложитесь проверить не один сайт :)
Программа или сервис генерации sitemap.xml, например http://www.xml-sitemaps.com/ (только там до 500 адресов).
но Хenu не совсем подходит под мою потребность.
Могу ошибаться.
Очень даже подходит - выгружаете отчёт, там уже список валидных/битых урлов.
P.S. Обратите внимание, Xenu ещё и внешние урлы в отчёт добавляет.
ограничить парсинг именно на .html внут. страницах - не получилось.
Как вариант- в Эксели обработать полученный список.
Как вариант можно SiteMap Generator http://wonderwebware.com/sitemap-generator/
Может есть у кого скрипт или программа такая :
на входе: главная страница сайта (http://site.ua)
на выходе: список всех страниц сайта
3.Ы. По-гуглил но не могу пока найти того что мне нужно.
wget выкачает сайт и сложит в файл
wget-log отчет с адресами страниц.
$ wget -r -t 0 -l 999999 \
--no-parent \
--no-clobber \
--background \
--page-requisites \
--domains="site.ua" \
http://site.ua/
Я вам ссылку в лс бросил качайте