вопрос по robots.txt

AK
На сайте с 24.04.2010
Offline
8
517

Всем привет. Подскажите наилучший вариант robots.txt для блога wordpress. И ещё один вопрос, есть например рубрика site.ru/category/123category123. Как исключить категорию 123category123 из индекса роботом? Выложите пожалуйста готовый robots.txt. Заранее благодарен!!

D
На сайте с 30.09.2008
Offline
107
#1

User-Agent: *

Disallow: /category/123category123

alexj69
На сайте с 05.06.2007
Offline
88
#2
artem_ka:
И ещё один вопрос, есть например рубрика site.ru/category/123category123. Как исключить категорию 123category123 из индекса роботом?

Вы, наверное там линкопомойку хотите там разместить? Так этот номер у вас не пройдет, каталоги проверяют, не запрещен ли в robots.txt доступ к обраткам.

OPTIMER
На сайте с 05.01.2006
Offline
486
#3

artem_ka, лучший вариант - это поюзать поиск.

оО Раскрутка сайтов без абон. платы, единоразово от 100.000 руб.
S0meT1me
На сайте с 07.06.2008
Offline
109
#5

линкопомойку лучше не размещать, запрет индексации де даёт запрет на стук и не даёт гарантии что ПС не надут её в автоматическом режиме

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий