Вопрос по robots.txt

A
На сайте с 28.04.2010
Offline
41
348

Здравствуйте, нужно закрыть от индексации некоторые страницы. Часть страниц закрыть о яндекса, а часть от google. Для этого написал в файле:

User-agent: Yandex

Disallow: /2..........

Disallow: /*9....

Host: site.ru

Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot

Disallow: /8..........

Disallow: /*3....

Host: site.ru

Sitemap: http://site.ru/sitemap.xml

Правильная ли структура robots.txt или что-то лишнее написал??

Размещение вечных ссылок не дорого!! Большое количество сайтов. (/ru/forum/733698)
A2
На сайте с 17.11.2009
Offline
52
#1

User-agent: Yandex

Disallow: /2..........

Disallow: /*9....

Host: site.ru

Sitemap: http://site.ru/sitemap.xml

User-agent: Googlebot

Disallow: /8..........

Disallow: /*3....

Sitemap: http://site.ru/sitemap.xml

RM
На сайте с 21.06.2011
Offline
77
#2

В гугл(ну или в Яндекс, у них тоже есть) веб мастере можете проверить там вам все и скажут.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий