Маленький вопрос про robots.txt

FeSSik
На сайте с 19.09.2008
Offline
127
407

У меня такой вопрос: есть сайт, на котором нужно запретить для индексации страницу вида

/katalog/

Проблема в том, что у этой страницы есть некоторое количество подстраниц, например:

/katalog/dolche_luna/

/katalog/elit/

/katalog/vip/

И так далее. Подскажите пожалуйста, можно ли запретить для индексации только страницу /katalog/ и, чтобы все её подстраницы были доступны для индексации?

Заранее спасибо.

Все региона мобильных прокси. Есть забугор. https://goo.su/G5nhch
Scooby
На сайте с 07.09.2007
Offline
32
#1

/katalog/ - это не страница, а папка. запретите в этой папке индексацию нужной/ых Вам страниц(ы) и все.

женский бойцовский клуб (http://www.w-f-c.net) WFC
ИМ
На сайте с 04.03.2009
Offline
32
#2
FeSSik:

И так далее. Подскажите пожалуйста, можно ли запретить для индексации только страницу /katalog/ и, чтобы все её подстраницы были доступны для индексации?
Заранее спасибо.

можно, но только не из роботса а в коде. Так проще будет.

Если

/katalog/dolche_luna/

/katalog/elit/

/katalog/vip/

это не страницы, а разделы со страницами, тогда будет легче перечислить их в роботс.

27.11.2009. Перебираюсь на ПМЖ в другую страну, поэтому появляюсь очень редко. По всем вопросам пишите sergmak190@yandex.ru
K
На сайте с 31.01.2001
Offline
737
#3

Disallow: /katalog/$

Работает для всех основных поисковиков.

Ну неужели так трудно залезть в справку Яндекса, а? Вам нравится тут штрафы собирать?

Scooby:
/katalog/ - это не страница, а папка.

Это не только папка, но и URL документа.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
ИМ
На сайте с 04.03.2009
Offline
32
#4
Scooby:
/katalog/ - это не страница, а папка. запретите в этой папке индексацию нужной/ых Вам страниц(ы) и все.

не всегда, может быть настроено так, что и страница отображается.

FeSSik
На сайте с 19.09.2008
Offline
127
#5

Может я не совсем понятно написал вопрос. Можно ли запретить для индексации /katalog/, но разрешить для индексации /katalog/1.html и /katalog/2.html?

FeSSik добавил 18.06.2009 в 18:06

Kost, большое спасибо, извиняюсь, что не нашел этого, хотя я искал не на Яндексе, а на других сайтах. Впредь буду разумнее. =) Спасибо ещё раз.

K
На сайте с 31.01.2001
Offline
737
#6

FeSSik, см. пост выше и справку Яндекса.

А также правила раздела, которые прямо запрещают задавать вопросы, на которые там есть ответы. Тем более так упорно.

P.S. Точно такой же синтаксис и в Гугле, и в Яхе.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий