как избавиться от дублей страниц в интернет-магазине ?

Покажите страницы которые вы считаете дублями.

И такой вопрос: нахрена закрывать в роботсе все страницы с товарами?

Например:

_shoes-kids.com.ua/uggs-australia,drugie-proizvoditeli,xkuhu-kids,wink_

_shoes-kids.com.ua/bkg-kids,demar,biku-kids,zdl-zdilong_

_shoes-kids.com.ua/demar,biku-kids,bkg-kids,ddf-kids,madaxi_

и таких 130000 страниц с одинаковым (description)

С отдельными товарами я не собираюсь закрывать. Там все мета теги и контент уникальные. Нужно закрыть только те, которые возникают при комбинациях фильтра товаров и страниц.

Сейчас в роботсе закрыты страницы пагинации и разделы некоторых брендов (пример Disallow: /*/bona*). Страницу брендов непонятно зачем закрывать, как и пагинацию, если у вас каноникал настроен.

У вас идет неправильное формирование урла категорий из-за фильтра. Допустим, я выбрал бренд Super Gear. Потом решил выбрать другой бренд, например, Bona. Вместо того, чтобы выдать мне урл http://shoes-kids.com.ua/bona, мне выдается http://shoes-kids.com.ua/supergear,bona. Не думаю, что пользователям интересно просматривать товары сразу несколько брендов, но если вы так считаете, настройте добавление знака & вместо запятой при выборе нескольких брендов - в роботсе эти страницы должны исключиться как содержащие знак "&" при текущих настройках роботса

Спасибо, не заметил.

Будем убирать комбинации брендов так, чтобы не было возможности добавления в фильтр нескольких брендов. Плюс еще заменили "canonical" на "noindex,follow"

Что еще нужно сделать, чтобы избавиться от страниц дублей?

Напрасно вы это сделали. Комбинация "noindex, follow" может привести к серьезным проблемам с индексацией вложенных документов, т.к. Яндекс и Google не переходят по ссылкам с таких страниц.

Подробнее вот тут: http://bakalov.info/eksperiment-kak-poiskovye-sistemy-uchityvayut-meta-namerobots.html

IBakalov, Основная проблема для сайта сейчас избавится от страниц дублей. Их генерируется миллионы из за изначально не правильной структуры сайта. Есть задумка вообще обрубить комбинации по фильтрам и оставить только возможность выбора только одной категории или одного бренда товара. Что думаете по этому поводу? Как отреагирует поисковая система на резкое уменьшение количества страниц с одной стороны, но отсутствием дублированных метаописаний с другой ?

Не очень понятно вы описали проблему, да и нет желания за бесплатно вникать в чужую головную боль :)

Тоже не понял, зачем каноникал убрали и вместо него ноидекс сделали. Если фильтр настроили нормально, ждите и дубли уйдут

Поступил так по рекомендации людей с форума так как каноникал - это только рекомендация для поисковой системы. Несколько дней с каноникал результатов не дали,количество страниц продолжало расти. С "noindex, follow" рост прекратился, даже вроде немного пошло на спад. Но в вебмастере идут по прежнему новые сообщения о дублях в мететегах на страницах получаемых из комбинаций фильтра товара. Это потому что берутся страницы из кэша поисковика ? Или "noindex, follow" не работает.

Как отразится на индексации основных проиндексированных страниц 1-го уровня ( главные разделы сайта, статьи и товарные позиции), если в фильтре выбора товара запретить возможность одновременного выбора нескольких брендов?

Пока урлы брендов не настроите ничего не будет. Я вас не понимаю, просите совета, а когда вам их дают, не делаете, причем никаких полседствий от этого ну никак и нигде не предвидится. Смысл спрашивать?

Интересно получается - каноникал это рекомендация, а ноиндекс нет? Надо больше времени чтобы каноникал дал эффект