robots.txt

I
На сайте с 01.03.2010
Offline
32
425

Контент на сайте структурирован следующим образом:

/honda/civic/

/honda/

/vw/passat/

/vw/polo/

Так как очень много позиций по разделу /honda/ - работает пейджинг.

Выглядит это так: /honda/page/1 , /honda/page/2 и так далее.,

то же самое с подразделами /honda/civic/page/1/ , /honda/civic/page/2/

Реализация пейджинга не самая грамотная, но переделать возможности быстро нет, из-за

технических особенностей сайта.

Как закрыть от индексации /page/, /page/1/, /page/2/ средствами robots.txt?

siv1987
На сайте с 02.04.2009
Offline
427
#1

Disallow: /*/page/

I
На сайте с 01.03.2010
Offline
32
#2

siv1987, спасибо.

A2
На сайте с 17.11.2009
Offline
52
#3

для страниц типа

/honda/civic/page/1/

будет вот так

Disallow: /*/*/page/

siv1987
На сайте с 02.04.2009
Offline
427
#4

asmakovec2, в данном случае это не важно, т.к. * - содержит любые символы в том числе и /

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий