Проблема с удалением страниц, запрещённых в robots.txt

я раскручиваю определённые страницы сайта... по своей оплошности не заметил, что у этих страниц есть ПОЛНЫЕ дубли на этом же сайте, причём яндекс эти дубли яндекс уже распознал как основные страницы, а мои страницы исключил из поиска как "слишком похожие"

Програмисты меня заверили, что удалить дубли нельзя так как "это одна страница, просто имеет разные адреса", ну да хрен с ними, запретил индексацию дублей в robots.txt строкой

Disallow: /products/fire

Сначала они выпали, мои страницы проиндексировались, но с этим АПом всё вернулось обратно...

Пытаюсь удалить дубль через удаление URL он пишет что "страница не существует" ввожу тот же самый адрес через url="" - находит! Пытаюсь добавить эту страницу - пишет "не был внесен в базу Яндекса, так как он запрещен к индексации в файле robots.txt"

Скажите мне пожалуйста, если яндекс видит, что урл запрещён - какого хрена страницы присутсвуют в поиске?

И если они присутвуют, то почему я не могу их удалить?