Форум Практика оптимизации Сервисы и программы для работы с SE

Как спарсить конкретный раздел и поддомен сайта?

RO
На сайте с 04.04.2017
Offline
36
random_object
665

Здравствуйте. Есть мультиязычный сайт с кучей поддоменов. Хочу спарсить русскоязычную версию site.com/ru и его поддомен tech.site.com/ru Как настроить Screaming frog?

Станислав Романенко
На сайте с 05.09.2007
Offline
325
Станислав Романенко
#1

Меню Configuration - Include, туда добавить:

http://site.com/ru/.*

http://tech.site.com/ru/.*

Для надёжности можно домен и поддомен парсить по отдельности.

Сайт не лезет в топ? Сделаю аудит без воды всего за 8000 рублей! Отзывы клиентов тут (https://searchengines.guru/ru/forum/939454), почта для связи: ingref@ya.ru Посмотрю, в чём проблема с вашим сайтом, за 100 рублей (https://searchengines.guru/ru/forum/comment/15662080).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий