Самый быстрый способ - это удалить через вебмастер Гугла и Яндекса.
А чтобы дубли не возникали вновь, соблюдать меры перечисленные выше.
Проанализируйте конкурентов.
- Вполне возможно, что они по этим запросам продвигают не главные страницы, а внутренние
- может они продвигаются по данному запросу через биржи ссылок или статей, тогда как вы работаете без бюджета