Закрыть от индексации урлы с параметрами

T
На сайте с 17.06.2012
Offline
90
1014

Всем привет!

Как правильно в robots закрыть от индексации урлы типа

site.ru/katalog/?sort=...

site.ru/katalog/?limit=...

site.ru/kategoriya/?sort=...

site.ru/kategoriya/?limit=...

site.ru/kategoriya1/kategoriya2/?sort=...

site.ru/kategoriya1/kategoriya2/?limit=...

И т.д.

Заранее спасибо!

[Удален]
#1

А эта тема для кого? /ru/forum/828288

/*sort=

Каноникалами вернее.

yanus
На сайте с 21.01.2009
Offline
348
#2
trendy:
Всем привет!
Как правильно в robots закрыть от индексации урлы типа
site.ru/katalog/?sort=...
site.ru/katalog/?limit=...
site.ru/kategoriya/?sort=...
site.ru/kategoriya/?limit=...
site.ru/kategoriya1/kategoriya2/?sort=...
site.ru/kategoriya1/kategoriya2/?limit=...

И т.д.

Заранее спасибо!

Disallow: *?*=

Уберет все варианты, где в урле присутствует "?" а потом "="

CS
На сайте с 01.05.2017
Offline
5
#3

Так же дополню, если хотите что бы робот и вовсе не включал в поиск страницы, можете так же воспользоваться тегом

<meta name="robots" content="noindex, nofollow">

Информация с сайта robotstxt.org.ru

Он отличается от Стандарта исключения для роботов тем, что вам не нужно тратить много усилий или получать доступ у Администратора cервера.
[Удален]
#4

CodeStyle, ну да, менять файлы можно, а доступа нет. Или цмс стоит что в мету шо хошь пиши. А доступа по фтп нет.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий