Как правильно закрыть в роботсе

Sonce
На сайте с 30.08.2007
Offline
62
886

Здравствуйте, пожалуйста, подскажите как прописать правило в роботсе вот в такой ситуации:

на сайте есть две одинаковые страницы с разными урлами такого вида:

http://site.ru/url_stranicy и http://site.ru/url_stranicy#12.

Необходимо в роботсе запретить к индексации страницы вида http://site.ru/url_stranicy#12.

Возможно ли и как прописать единое правило для всех подобных страниц?

Заранее спасибо за ответ.

VoV@
На сайте с 22.09.2007
Offline
196
#1

Disallow: /url_stranicy#

⭐ Разработка Андроид-приложений (Xamarin C#). ⭐ Разработка ASP.NET (WebForms, MVC, WebAPI, Core). ⭐ Цой жив!
Sonce
На сайте с 30.08.2007
Offline
62
#2
VoV@:
Disallow: /url_stranicy#

а если на сайте тысяча страниц и сколько подобных url_stranicy# неизвестно, выискивать все? возможно ли одним правилом исключить все ненужные страницы?

VoV@
На сайте с 22.09.2007
Offline
196
#3

Sonce, в стандарте роботс нет регулярных выражений, сделайте из этого выводы.

Sonce
На сайте с 30.08.2007
Offline
62
#4
VoV@:
Sonce, в стандарте роботс нет регулярных выражений, сделайте из этого выводы.

Попробовала закрыть как вы говорите, закрывается к индексации и нормальная страница и с #

T
На сайте с 26.07.2010
Offline
11
#5

Disallow: /*#12*

Z
На сайте с 13.12.2009
Offline
452
#6

попробуйде директиву clean-patram использовать

Консультации, seo-аудиты - https://seo-consulting.su Профессионально и без воды
Sonce
На сайте с 30.08.2007
Offline
62
#7

Спасибо большое, сейчас попробую и то, и другое

Pavel Medvedev
На сайте с 27.01.2006
Offline
166
#8

Sonce, а # в урле это разве не якорь для перемещения на метку на странице?

Консультирую по SEO. Опыт c 2005: окна топ1,Ашан,Фишки,Спортс и др. Пишите в FB.
Sonce
На сайте с 30.08.2007
Offline
62
#9
sni:
Sonce, а # в урле это разве не якорь для перемещения на метку на странице?

Только хотела написать, да, оказалось, что это ссылки-якоря. Всем большое спасибо, кто ответил в теме.

edka
На сайте с 17.01.2010
Offline
208
#10

Можно использовать mod_rewrite там можно применять регулярные выражения, привести дубли к некому стандартному виду и потом обрезать ненужные страницы уже в роботс, но это уже надо искать профи в написании регулярок для mod_rewrite :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий