борьба с дублями

Допиши в движок автоматическую выдачу канонического адреса.

Тогда гугл даст тебе все страницы которые дублирует, как неканонические

Ставить "tag nofollow" и rel="nofollow" для внутренних ссылок, ИМХО, лишнее. От дублей они не уберегут, ведь они, по идее, только на распределение веса влияют.

И станицы (пейджинг) закрывать от индексации не надо. Ведь содержание их, как правило, различается. Лучше просто в титлах и дискрипшинах дописывать соответствующий номер страницы. Хотя, конечно, Вам виднее.

Гугл сам "перетряхнет/переиндексирует"

Disallow: /kcaptcha/

Так и поступил неделю назад и проставил канонические адреса. И вот вчера в ВМТ пришло письмо с примерами дубликатов. Сегодня по этому списку расставил rel="nofollow" и rel="tag nofollow"

---------- Добавлено 08.11.2012 в 12:39 ----------

именно так и было сделано и вот здесь и появилась серьезная проблема в рамках реализации сайта-пациента.

Например есть торговая марка у которой 1000 продуктов. Каждый продукт имеет свою отдельную страницу и на этой странице кроме остновного описания есть еще список с пейджинатором на все остальные продукты от этого производителя.В итоге получилась арифметическая прогрессия страниц, то есть кол-во продуктов перемножилось на кол-во страниц с пейджингом. Ну и дальше все ушло в сопли и распылило вес.

---------- Добавлено 08.11.2012 в 14:23 ----------

Подскажите еще пожалуйста по mod_rewrite:

как заставить все урл на сайте принудительно завершаться на слеш "/" ? Это существенная проблема когда доступны оба варианта(со слешом и без него) или гугл на это не обращает внимание ?

Так же в robots.txt я бы хотел закрыть все страницы которые как часть своего урл имеют параметр:

"/?dp="

например:

/catalog/item/some-product-name/?dp=7#developer

как правильно указать маску для всех таких страниц в robots.txt ?