Поиск дублей.

Добрый день.

Вопрос у меня про дубликаты страниц, точнее про те страницы, которые яндекс может посчитать дублями (одинаковый тайтл у товаро в интернет магазине например, ну и схожее описание тех товаров).

Как вы их ищите ?

Допустим приходит новый проект, вы начинаете его полный анализ. В гугле допустим 400 страниц, в яндексе многим меньше, допустим 70.

Я для этого смотрю вручную индекс по гуглу, ищу одинаковые тайтлы, и если этих страниц нету в яшке то закрываю раздел в robots.txt.

Есть ли какие-то сервисы или программы, которые могут намекнуть на дубли страниц ?

ps Пользуюсь так же програмкой erida - но она не всегда почему-то загружает все страницы, да и врет с тем что проиндексировано, а что нет.

Буду признателен, если поделитесь опытом.

Если вопрос нубский - прошу простить :)