Форум Сайтостроение Веб-строительство

Как получить ссылки на типовые страницы сайта

mr_krabs
На сайте с 31.03.2010
Offline
77
mr_krabs
585

Возьмем, например, интернет-магазин.

У него есть главная, страница категории / тега / фильтра, карточка товара, статические страницы (контакты, доставка, о нас...). Необходимо получить по одному урлу для каждого типа страницы.

Как это сделать?

Или может кто-то подскажет сервис, где эту информацию можно взять / спарсить?

Профессиональные услуги веб-аналитики (http://forup.ru) Форум о веб-аналитике (http://allmetrics.ru)
totamon
На сайте с 12.05.2007
Offline
437
totamon
#1
mr_krabs:
Необходимо получить по одному урлу для каждого типа страницы.

все просто: адресная строка и Ctr+C, Ctr+V☝

Домены и хостинг https://8fn.ru/regru | Дедик от 3000р https://8fn.ru/73 | VPS в Москве https://8fn.ru/72 | Лучшие ВПС, ТП огонь, все страны! https://8fn.ru/inferno | ХОСТИНГ №1 РОССИИ https://8fn.ru/beget
mr_krabs
На сайте с 31.03.2010
Offline
77
mr_krabs
#2

Сделаете мне это для пары тысяч сайтов? ))

D8
На сайте с 16.06.2007
Offline
74
dm8
#3

Запросто.

А как самому - регексп + дом(dom модель в смысле ) + вирт. браузер + по возможности прокси

Все просто.

---------- Добавлено 05.06.2016 в 05:30 ----------

mr_krabs:
Сделаете мне это для пары тысяч сайтов? ))

это как раз и делалось, как не удивительно :)

с периодом в неделю. Без нагрузки, - мне хватало.

Как сейчас поисковики относятся Отдельная тема по биланам Блог sliderxxx, на котором

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий