Как правильно закрыть дубли..????

Такое решение не подойдёт?

Allow: /2012/12/24/evangelionicons1-0.html 
Allow: /2012/12/23/evangelionicons1-0.html 
Dissallow: /201*/

Можно использовать спецсимвол '$', например:

Disallow: /2012/$

# запрещает '/2012/',

# но не запрещает 'httр://мой_сайт/2012/12/24/evangelionicons1-0.html'

Спасибо .... думал об этом но не был уверен

---------- Добавлено 26.09.2013 в 16:01 ----------

Allow: /2012/12/24/evangelionicons1-0.html 

Allow: /2012/12/23/evangelionicons1-0.html 

Dissallow: /201*/

Такое решение не подойдёт, таких страниц много и все они разные, так что разрешать каждую в "robots.txt" физически невозможно, их не одна тысяча

Продолжение вопроса :)

Как ПРАВИЛЬНО разрешить:

http://мой_сайт/gadgets/

и запретить :

http://мой_сайт/gadgets/gadgets_games1/
http://мой_сайт/gadgets/gadgets_games2/
http://мой_сайт/gadgets/gadgets_games5/

.....

Думаю так можно, на всякий случай проверьте в Яндекс вебмастере:

Disallow: /gadgets/gadgets_games*/$

К сожалению не подойдет.

Наверное я не точно сформулировал вопрос, таких страниц МНОГО и они все РАЗНЫЕ, типа:

http://мой_сайт/gadgets/gadgets_games1/
http://мой_сайт/gadgets/guter/
http://мой_сайт/gadgets/mitter/

....

Возможна ли такая конструкция..??

http://мой_сайт/gadgets$/*

Тогда через robots.txt не получится, можно в движке выдавать метатег "robots".

Тогда следующий вопрос ...

Как правильно метатег составить и имеет ли значение на каком движке сайт???

Конечно, все зависит от движка и от того, что надо закрывать от индексации. Проверяете например, находимся ли мы в нужном разделе-категории и если да - вставляем в блок метатегов <meta name="robots" content="noindex,nofollow" />.

дле

Http://alaev.info/blog/post/3900

Вп

Http://alaev.info/blog/post/4143