Форум в директории с сайтом. Роботс.

S7
На сайте с 18.02.2012
Offline
27
322

У меня есть сайт, в корне его лежит папка forum с установленным форумным движком - site.ru/forum

Заметил, что начались индексироваться системные файлы форума. Мне это не нужно.

Вопрос: Для сайта и форума, лежащего в диретории сайта делать разные robots.txt или

запрет на индексацию файлов форума прописывать в кореном роботсе сайта?

Так правильно будет?

User-agent: *

Disallow: /engine/go.php
Disallow: /engine/download.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm
Disallow: /forum/attachments/
Disallow: /forum/birthdays/
Disallow: /forum/find-new/
Disallow: /forum/forums/*/?direction
Disallow: /forum/forums/*/?order
Disallow: /forum/forums/*/page-*?order
Disallow: /forum/help/
Disallow: /forum/login/
Disallow: /forum/lost-password/
Disallow: /forum/members/
Disallow: /forum/misc/
Disallow: /forum/online/
Disallow: /forum/posts/
Disallow: /forum/recent-activity/
Disallow: /forum/register
Disallow: /forum/search/
Disallow: /forum/search.php
Disallow: /forum/threads/*/poll
Disallow: /forum/WhoHasVisited/
P
На сайте с 14.06.2012
Offline
22
#1
или
запрет на индексацию файлов форума прописывать в кореном роботсе сайта?

этот вариант.

Надежные и быстрые VDS для сайта. Всего от 149 рублей. (http://goo.gl/pQcDi)
E
На сайте с 21.09.2009
Offline
283
#2

Snickers777, в хелпах гугла написанно что роботс должен быть один и в корне сайта.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий