Двойной контент и robot.txt

В моей CMS, как и во всех других существуют альтернативные ЮРЛ адреса (я работаю с kooboo очень доволен)

Например

Нормальный юрл

www.mysite.com /page1

Альтернативный юрл

www.mysite.com/dev~proj/page1

Я понимаю, что это двойной контент для поисковиков, Почему тогда с этим ничего не делают

Например

Если я в robot.txt заблокирую каталог

Disallow: /dev~proj/

Вопрос! Это нормальная практика или нет? Если да тогда почему это не делают все