как прописать в роботс отдельные правила для поиска по блогам

A
На сайте с 10.01.2005
Offline
106
420

У меня есть раздел на вордпресс, feed не закрывал, в том числе и для комментариев, т.к основной робот Яндекса их не индексировал (ошибка -нераспознаваемый формат), а робот поиска по блогам - индексировал, что давало трафик (маленький), а главное -страницы быстро влетали в индекс.

В последний ап фиды влетели в проиндексированные (по вебмастеру). Вопросы: что нужно предпринять:

1. закрыть в роботс и прописать отдельные правила для бота, ищущего по блогам -тогда как?

2. ничего не делать в надежде, что Я не будет считать новостную ленту за дубль?

Заранее спасибо

Сайты для людей - не выдумка, а быль. Если считать архитекторов и дизайнеров людьми:)Целевая реклама для целевой группы.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий