Подскажите как убрать дубли через Роботс

TAMALUKU
На сайте с 28.10.2011
Offline
146
412

Вот последнее время яндекс стал плодить в индексе такие страницы samosoverhenstvovanie.ru/category/health/medicine/natural-medicine/page/3

То есть чтобы сами категории остались в индексе мне надо, но при этом надо чтобы все page/... были не в индексе. Вручную все категории закинуть в индекс нереально из уже больше 300 наверно на сайте, как можно это оформить в роботсе граматно?

то есть мне надо что бы дальше не индексировалось чем samosoverhenstvovanie.ru/category/health/medicine/natural-medicine но категорий таких куча и они все разные)

Петр Лях
На сайте с 23.02.2013
Offline
148
#1

Disallow: /page

Результативное продвижение сайта ( https://searchengines.guru/ru/forum/964018 ) Услуги по seo и usability ( http://windakolit.com )
IBakalov
На сайте с 05.10.2011
Offline
218
#2

Если доступны и samosoverhenstvovanie.ru/category/health/medicine/natural-medicine/page и samosoverhenstvovanie.ru/category/health/medicine/natural-medicine/page/, то:

Disallow: */page/
Disallow: */page$

Если доступна только samosoverhenstvovanie.ru/category/health/medicine/natural-medicine/page/, то достаточно:

Disallow: */page/
K
На сайте с 30.07.2008
Offline
135
#3

Короче:)

Disallow: *page

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий