Каталог продукции и robots.txt

sokolenko
На сайте с 06.06.2010
Offline
67
322

Здравствуйте, друзья! Подскажите пожалуйста по такой проблеме:

На сайте есть каталог продукции, адреса вида:

/cataloge/tovar1/nazvanie1/

/cataloge/tovar2/nazvanie2/ и т.д.

Мне необходимо временно закрыть сами товары от индексации в robots.txt, а раздел /cataloge/ оставить открытым.

Каталог большой и постоянно пополняется, поэтому ручное перечисление разделов с товарами в robots.txt невозможен. По этой же причине сложно работать с тэгами <meta name=“robots” content=“noindex,nofollow”> на страницах, также шаблоны на сайте для внутренних страниц одинаковые и таким тегом я буду закрывать и раздел /cataloge/.

Я пробовал применить конструкцию типа Disallow: /cataloge/*, но в таком случае Google закрывает и раздел /cataloge/

Есть ли какие-нибудь способы закрыть страницы с товарами, не закрывая корневые страницы каталога? Прошу у Вас совета, а то я окончательно запутался, не могу сообразить.

kimberlit
На сайте с 13.03.2007
Offline
370
#1
K
На сайте с 31.01.2001
Offline
737
#2
sokolenko:
не закрывая корневые страницы каталога?

Их что, много?

Если одна, то:

Allow: /cataloge/$

Disallow: /cataloge/

И чтение FAQ никто не отменял.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
sokolenko
На сайте с 06.06.2010
Offline
67
#3

kimberlit, Kost, спасибо - вопрос исчерпан.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий