Закрытие индексации

G
На сайте с 30.03.2010
Offline
26
288

Добрый день.

Есть сайт на wp. Решил проверить индексацию его страниц. При вводе в ПС фрагментов текста со статей ссылки выдает на метки, архивы и рубрики , но никак не на целевую статью.

Скажите, это нормально, или нужно закрывать от индексации все лишние Ссылки? И если да, то как это сделать в роботс txt

Заранее спасибо)

Д
На сайте с 13.03.2010
Offline
18
#1

метки, архивы и рубрики лучше закрывать от индексации для избежания подобных ситуаций и возникновения дублированного контента.

в роботсе надо прописать:

Disallow: /tag

Disallow: /category

Disallow: /archive

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий