Помогите с оформлением Роботс

K3
На сайте с 07.09.2012
Offline
0
340

Хочу оформить Robots.txt так чтобы его индексировал только робот гугла, как это правильно оформить? я сделал так:

User-agent: Googlebot

Disallow: /user/

Disallow: /tags/

Disallow: /newposts/

Disallow: /lastnews/

Disallow: /favorites/

Disallow: /2008/

Disallow: /2009/

Disallow: /2010/

Disallow: /2011/

Disallow: /2012/

Disallow: /*page/

Disallow: /statistics.html

Disallow: /*subaction=userinfo

Disallow: /*subaction=newposts

Disallow: /*do=lastcomments

Disallow: /*do=feedback

Disallow: /*do=register

Disallow: /*do=lostpassword

Disallow: /*do=addnews

Disallow: /*do=stats

Disallow: /*do=pm

Disallow: /*do=search

Disallow: /engine/go.php

Disallow: /engine/download.php

Disallow: /*print:

Sitemap: http://xxx/sitemap.xml

User-agent: *

Disallow: /

pauk
На сайте с 26.01.2005
Offline
543
#1

Умопомрачительно :) Только вот ясновидящих тут нет...

http://robotstxt.org.ru/ в помощь

Hi!
K3
На сайте с 07.09.2012
Offline
0
#2

Спасибо, нашел

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий