Как правильно настроить robots.txt в таком случае?

Д
На сайте с 05.12.2011
Offline
56
338

Есть сайт на Вордпресс и на нем установлено ЧПУ вида: site.ru/2012/03/nazvanie-statti/

Как в роботсе закрыть директивы с дублями /2011/, /2012/, /2012/02/ и т.д. но при этом чтоб статьи индексировались.

Если не роботсом, то каким способом это можно сделать?

El_grapaduro
На сайте с 01.09.2008
Offline
287
#1

Помимо файла роботса вы можете использовать следующие мета:

<meta name="robots" content="NOINDEX,NOFOLLOW" />

Бесплатный курс по SEO продвижению и аудиту сайтов ( http://webimho.ru/topic/11569/ )
Д
На сайте с 05.12.2011
Offline
56
#2

Как в моем случае это правильно использовать? Был бы вам очень благодарен.

Stasmotion
На сайте с 16.11.2011
Offline
153
#3

Дубли следует закрывать через ЧПУ, т.к. у вас их там как я понимаю слишком много. Поройтесь в настройках ЧПУ там есть менюшки для удаления дублей.

Комплексное SEO продвижение сайтов, полная отчетность Настройка и ведение Яндекс.Директ

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий