robots.txt для ipb 3.1.4

V
На сайте с 23.04.2012
Offline
14
1477

Привет!

Сколько не искал в инете везде разные robots.txt

Вот мой:


User-agent: *
Disallow: /forum/admin/
Disallow: /forum/cache/
Disallow: /forum/converge_local/
Disallow: /forum/hooks/
Disallow: /forum/ips_kernel/
Disallow: /forum/retail/
Disallow: /forum/public/style_captcha/
Disallow: /forum/index.php?app=core&module=task
Disallow: /forum/index.php?app=core&module=usercp&tab=forums&area=forumsubs
Disallow: /forum/index.php?app=core&module=usercp&tab=forums&area=watch&watch=topic
Disallow: /forum/index.php?app=forums&module=extras&section=forward
Disallow: /forum/index.php?app=members&module=messaging
Disallow: /forum/index.php?app=members&module=chat
Disallow: /forum/index.php?app=members&module=search
Disallow: /forum/index.php?app=members&module=search&do=active
Disallow: /forum/index.php?&unlockUserAgent=1
Disallow: /*app=core&module=usercp
Disallow: /*app=core&module=usercp
Disallow: /*app=members&module=messaging
Disallow: /*&p=
Disallow: /*&pid=
Disallow: /*&hl=
Disallow: /*&start=
Disallow: /*view__getnewpost$
Disallow: /*view__getlastpost$
Disallow: /*view__old$
Disallow: /*view__new$
Disallow: /*view__getfirst$
Disallow: /*view__getprevious$
Disallow: /*view__getnext$
Disallow: /*view__getlast$
Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=old$
Disallow: /*&view=new$
Disallow: /*&view=getfirst$
Disallow: /*&view=getprevious$
Disallow: /*&view=getnext$
Disallow: /*&view=getlast$
Disallow: /*?s=
Disallow: /*&s=
Disallow: /forum/index.php?app=core&module=global&section=login&do=deleteCookies
Disallow: /forum/index.php?app=forums&module=extras&section=rating
Disallow: /forum/index.php?app=forums&module=forums&section=markasread

По возможности дайте нормальный robots.txt ну или объясните как настроим мой и что в нем не хватает..

Индексируется даже это http://chit-games.ru/forum/uploads/ ну а зачем мне эта страница в поиске?

Короче помогите разобраться..

V
На сайте с 23.04.2012
Offline
14
#1

Ну что есть варианты?

siv1987
На сайте с 02.04.2009
Offline
427
#2

По умолчанию в дистрибутиве уже есть настроенный вариант роботс-а. Надо переименовать файл из robotstxt.txt в robots.txt (да да, кэп) и закинуть в корень домена (!). http://robotstxt.org.ru/

V
На сайте с 23.04.2012
Offline
14
#3

Я конечно плохо понимаю ну не на столько я дуб.. Я сразу же переименовал robotstxt.txt в robots.txt так так у меня есть сайты на Joomla и DLE..

Я всего лишь навсего попросил скинуть правильный robots.txt если кто знает..

siv1987
На сайте с 02.04.2009
Offline
427
#4
Я всего лишь навсего попросил скинуть правильный robots.txt если кто знает..

Какой еще правильный нужен, если он входит в дистрибутиве? Лучше бы запретили листинг файлов на своем сервере, и прочитали где должен располагаться сам файл.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий