Robots.txt в Joomla

XX
На сайте с 07.09.2011
Offline
26
458

Всем доброго времени суток, хочу поднять старую но актуальную для себя тему о robots.txt.

Собственно правильно ли я создал !robots.txt - нужно запретить все динамичесские страницы... а то ОЧЕНЬ много дубляжей. Хотелось оставить иключительно лишь страницы материалов, разделов и категорий. Есть ли еще способы убрать дубли кроме роботс? Заранее признателен за ответы.

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /forums/

Disallow: /forum/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /umor/

Disallow: /jdownloads/

Disallow: /*.php$

Disallow: /content/$

Disallow: /index2.php$

Disallow: /index.php$

Disallow: /*itemid*

Disallow: /*view*

Disallow: /*task*

Disallow: /*id*

Disallow: /*option=*

Disallow: /*component*

Disallow: /*letter*

Disallow: /*threaded*

Disallow: /*replyto*

Disallow: /*catid*

Disallow: /*func=*

Disallow: /*bot.html$

Disallow: /*AdsManagerTab*

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий