про robots.txt

P
На сайте с 21.06.2011
Offline
21
312

подскажите, пожалуйста,

нужно запретить:

http://site.ru/catalog/direktoria1/

но остальной: http://site.ru/catalog/ должен индексироваться

если я пропишу Disallow: /catalog/direktoria1/ он же и каталог не будет индексировать..

может здесь еще allow использовать??

kimberlit
На сайте с 13.03.2007
Offline
370
#1

http://yandex.ru/yandsearch?text=robots.txt+%D1%8F%D0%BD%D0%B4%D0%B5%D0%BA%D1%81&lr=11436

=>

http://help.yandex.ru/webmaster/?id=996567

planetaryi:
если я пропишу Disallow: /catalog/direktoria1/ он же и каталог не будет индексировать

Почему?

P
На сайте с 21.06.2011
Offline
21
#2

Allow: /

Allow: /catalog/

Disallow: /catalog/direktoria1

или можно без первого Allow: /catalog/ обойтись?

извините, может и глупый вопрос..но что-то туплю(

kimberlit
На сайте с 13.03.2007
Offline
370
#3

Disallow: /catalog/direktoria1 закрывает все урл, которые начинаются с /catalog/direktoria1. Каким образом он закроет /catalog/?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий