Вопрос по robots.txt и запрету индексации ссылок на сайте

Это будет ошибкой, знак решетки для ботов означает начало комментария.

Например, если попытаться сделать так

Disallow: /*.html#comment

будут запрещены все страницы c окончанием .html, а "comment" будет просто проигнорировано.

Да после знака # робот несмотрит т.е. он видит только http://www.сайт.ru/dop.htm а это получаются дубли страницы

---------- Добавлено 05.12.2012 в 13:19 ----------

Попробуйте тегом noindex в коде скрыть

Получается вариант только rel="nofollow"?

Это огромный объём ручной работы. Сотни страниц, с несколькими ссылками на каждой.

---------- Добавлено 05.12.2012 в 12:29 ----------

Весь сайт построен на .htm, Disallow: /*.htm#comment - будет запрет на весь сайт

Эсли шаблоный сайт на ЦМС то это в 1 файле

Или попробуйте

Disallow: /*#comment

А в кабинете Явебмастер есть тестер robots.txt - сделали изменения и смотрите какие страницы запрешены а какие нет

Шаблонный и на ЦМС, но ссылки в контенте. Редактировать нужно каждую страницу.

Если в контенте то можно ява скриптом (например jquery) ловить их и прописывать свой атрибут

Цитата:

Миф: ссылка с «якорем» типа http://www.site.ru/page.html#якорь создает дублированный контент для поисковиков.

Это утверждение неверно, т.к. данный якорь всего лишь позиционирует страницу в окне браузера при переходе по ссылке и не является динамическим параметром. Поисковики давно уже научились отличать «якоря» от динамических параметров ссылок. Поэтому использование ссылок «Читать далее» более чем безопасно.

К сожалению с jquery я не знаком. Вообще, этот вариант выплывающего окна уже работает на jquery.

<a class="dop" onclick="return hs.htmlExpand(this, { objectType: 'ajax'} )" href="dop.htm#якорь">ссылка</a>

А там библиотека jqгery подключена? и какой класс или айди блока где статьи - я Вам код дам сейчас

Если я Вас правильно понял:

jquery.tools 1.0.2