Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt

Drakasmit
На сайте с 21.05.2008
Offline
90
Drakasmit
354

На сайте есть чпу вида discussion/номер/заголовок, но запись так же доступна по адресу discussion/номер/

Номер идет порядковый, всегда разный

Заголовок всегда разный

Как запретить для индексации discussion/номер/, но при этом разрешить индексировать discussion/номер/заголовок

Торт
kimberlit
На сайте с 13.03.2007
Offline
370
kimberlit
#1

У первого нет закрывающего слеша, а у второго есть?

Drakasmit
На сайте с 21.05.2008
Offline
90
Drakasmit
#2

kimberlit, Доступны как с закрывающими слешами так и без них

тоесть страницы можно смотреть хоть так

discussion/номер/заголовок

discussion/номер

хоть так

discussion/номер/заголовок/

discussion/номер/

cheredov
На сайте с 07.04.2011
Offline
125
cheredov
#3
Drakasmit:
На сайте есть чпу вида discussion/номер/заголовок, но запись так же доступна по адресу discussion/номер/
Номер идет порядковый, всегда разный
Заголовок всегда разный
Как запретить для индексации discussion/номер/, но при этом разрешить индексировать discussion/номер/заголовок

Наверняка можно придумать такое выражение, но не проще ли склеить эти урлы принудительно?

Иван Чередов (http://ivan.cheredov.com/about/)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий