Дублирование страниц в поиске

Может кто то просто подскажет как закрыть от индексации страницы в robots.txt в которых более двух нижних подчерквианий? Как составить такую строку Disallow

CMS сайта надо изучать. Это она формирует урлы. Запрет в роботс не поможет.

cms сайта самописная, она не менялась а сбои начали происходить, так же стали в адресах строк появляться ++++ такие знаки и индексироваться яндексом, а может быть проблема связанная с сервером или хостингом, может кто сталкивался?

Нет, скорее всего с уязвимостями и взломом в таком случае.

мне кажется самый простой способ просто прописать canonical на /montazh-demontazh_reklamnyh_konstrukcij_alpinisty_9645 и все вопросы будут решены

ну и соот-но на всех страницах по аналогии

Там нереально переписать, страниц тысячи, причем на этих страницах вновь появившихся canonical появляется автоматически, соответственно с этим же новым кривым адресом в строке canonical то есть ситуация хуже некуда.

Это как же нужно написать код что и каноникал на новых страницах тоже будет меняться? ! Вы уверены?

На ПХП? Могли устареть версии. Есть какое то управление? Урлы страниц создаются автоматически?

Как вариант, что то похожее видел, когда система создает доп символ в урле, чтобы не было дубликатов у урла. Ищите программиста который и разберется с системой. Писать в форум бесполезно. Вам никто код не посмотрит, а дело в нем.

"Это как же нужно написать код что и каноникал на новых страницах тоже будет меняться? ! Вы уверены?" - не уверен а точно знаю.

Урл создается автоматом. Спасибо всем за ответы, буду просить на фрилансерах чтобы исправили.

---------- Добавлено 27.03.2017 в 18:36 ----------

Нашел ошибку это в строке RewriteRule ^advert/.+_([0-9]+)$ /?adv_id=$1&%{QUERY_STRING} [L,QSA,NC]

как раз эти лишние __ и ++++ создаются в адресе строк, гуру подскажите пожалуйста как правильно изменить эту строку?

От структуры скрипта зависит конечно куда это добавить но если точка входа одна - то попробуйте добавить в index.php в самое начало.

<?php

$new_url = str_replace('__','_',$_SERVER['REQUEST_URI']);

if(urldecode($_SERVER['REQUEST_URI'])!=$new_url){

header("Location:".$new_url);

die();

}