Robots.txt и ПС вообще не радуют

DH
На сайте с 20.10.2010
Offline
28
291

Добрый день.

CMS Wordpress.

ссылки на рубрики "site.ru/category/category_name" закрыты директивой

Disallow: /category для User-agent: Yandex

но по аналогичным ссылкам "site.ru/category_name" яша проиндексировал рубрики

поставил через плагины WP для страниц категорий noindex, nofollow, но яша отказался их убирать с индекса (так как они не отдавали 404 и были разрешены в robots.txt)

тогда я запретил все 18 категорий в robots.txt

Disallow: /category_name_1

..

Disallow: /category_name_18

подумав, что решил все проблемы, забыл про robots.txt

но после апа, который идет сейчас, понял, что при

Disallow: /category_name

закрываются все статьи рубрики, имеющие адрес "site.ru/category_name/article_name"

в итоге все страницы были убраны из индекса ПС

Это плохо. Ощущение, что я идиот также не может радовать :mad:

в итоге как поступить?

нужно, чтоб в индексе были только статьи, а рубрики - нет

спасибо

siv1987
На сайте с 02.04.2009
Offline
427
#1

Disallow: /category$

И в помощь http://webmaster.yandex.ru/robots.xml

DH
На сайте с 20.10.2010
Offline
28
#2
siv1987:
Disallow: /category$

И в помощь http://webmaster.yandex.ru/robots.xml

Спасибо. Помогло.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий