Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Помогите из robots.txt в ДЛЕ 9.2

B3
На сайте с 27.01.2012
Offline
10
bog35
421

Если кому-то не сложно сбросите пример рабочего robots.txt

Просто я подуглил этот вопрос, на мой взгляд там бред

к примеру

Disallow: /tags/

это запрет на индексацию облака тегов, но умнея половина силок у выдаче из облака!

Помогите?

4
На сайте с 03.02.2009
Offline
25
4ipa
#1

User-agent: *

Disallow: /engine/go.php

Disallow: /user/

Disallow: /newposts/

Disallow: /statistics.html

Disallow: /*subaction=userinfo

Disallow: /*subaction=newposts

Disallow: /*do=lastcomments

Disallow: /*do=feedback

Disallow: /*do=register

Disallow: /*do=lostpassword

Disallow: /*do=addnews

Disallow: /*do=stats

Disallow: /*do=pm

B3
На сайте с 27.01.2012
Offline
10
bog35
#2
User-agent: *
Disallow: /engine/go.php
Disallow: /user/
Disallow: /newposts/
Disallow: /statistics.html
Disallow: /*subaction=userinfo
Disallow: /*subaction=newposts
Disallow: /*do=lastcomments
Disallow: /*do=feedback
Disallow: /*do=register
Disallow: /*do=lostpassword
Disallow: /*do=addnews
Disallow: /*do=stats
Disallow: /*do=pm

согласен но про index.php у твоем варианте нечего не сказано

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий