Все вопросы по robots.txt - 2

Станислав Романенко
На сайте с 05.09.2007
Offline
325
#261

Disallow: /*/clear/

Сайт не лезет в топ? Сделаю аудит без воды всего за 8000 рублей! Отзывы клиентов тут (https://searchengines.guru/ru/forum/939454), почта для связи: ingref@ya.ru Посмотрю, в чём проблема с вашим сайтом, за 100 рублей (https://searchengines.guru/ru/forum/comment/15662080).
Alex Klo
На сайте с 15.06.2006
Offline
304
#262

у меня вот так срабатывает:

Disallow: */filter/*

Проверка и мониторинг позиций сайта ( http://www.topvisor.ru/?inv=1520 ) Продвигаю сайты http://climat-nw.ru/conditioner-installation/ http://www.aircom-spb.ru/service/montaj/
[Удален]
#263
Alex Klo:
Disallow: */filter/*

А на конце звездочка зачем?

Alex Klo
На сайте с 15.06.2006
Offline
304
#264
Miha Kuzmin (KMY):
А на конце звездочка зачем?

это из стандартой подстановки роботса Битрикса для хвостов, можно и убрать

NW
На сайте с 25.04.2017
Offline
14
#265

Одно ясно совершенно точно

Disallow: */clear/apply/

не срабатывает

Сейчас буду пробовать

Disallow: */filter/*

[Удален]
#266
NinaWhite:
Одно ясно совершенно точно
Disallow: */clear/apply/
не срабатывает
Сейчас буду пробовать
Disallow: */filter/*

Тоже не сработает. Ибо первое стопроцентно должно было сработать, у вас или руки не оттуда растут при внесении строки в роботс, или вы не понимаете, как проверить, работает или нет.

---------- Добавлено 06.02.2019 в 10:03 ----------

Чисто теоретически разве что слеша перед * не хватает - но это уже вкусовщина - жрут и так.

X
На сайте с 08.05.2012
Offline
112
#267

Всем привет. Гуру роботса, подскажите, пожалуйста, насколько возможно сделать подобное:

Имеется огромный ряд url по типу

https://site.com/ru/sankt-peterburg/real-estate/

https://site.com/ru/moskwa/real-estate/

https://site.com/ru/omsk/real-estate/

Доступной к индексации требуется только https://site.com/ru/real-estate/ (без города)

Как запретить их в роботсе и возможно ли это в принципе?

Станислав Романенко
На сайте с 05.09.2007
Offline
325
#268

Disallow: /*/real-estate/

Allow: /ru/real-estate/

X
На сайте с 08.05.2012
Offline
112
#269
Ingref:
Disallow: /*/real-estate/
Allow: /ru/real-estate/

Спасибо! Так, вобщем-то, и думал. Но подтверждающих примеров нигде в сети не нашел конкретно на такой случай.

A
На сайте с 22.01.2019
Offline
1
#270
NinaWhite:
Одно ясно совершенно точно
Disallow: */clear/apply/
не срабатывает
Сейчас буду пробовать
Disallow: */filter/*

Можете рассказать, как вы проверили? Через инструмент Вебмастера?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий