robots.txt

[Удален]
198

Скажите пожалуйста правильно ли у меня прописан robots.txt

User-Agent: *

Allow: /wp-content/uploads/

Disallow: /wp-

Disallow: /cgi-bin

Disallow: /author/

Disallow: /xmlrpc.php

Disallow: /tag/

Disallow: /page/

Disallow: /archive/

Disallow: /*?tag=

Disallow: /*?cat=

Disallow: /*?paged=

Disallow: /*?m=

Disallow: /*feed

Disallow: /*comments

Disallow: /*trackback

Disallow: /*comment-page

Disallow: /*cpage=

Disallow: /*?s=

Disallow: /*&s=

Crawl-delay: 3

User-agent: Yandex

Allow: /wp-content/uploads/

Disallow: /wp-

Disallow: /cgi-bin

Disallow: /author/

Disallow: /xmlrpc.php

Disallow: /tag/

Disallow: /page/

Disallow: /archive/

Disallow: /*?tag=

Disallow: /*?cat=

Disallow: /*?paged=

Disallow: /*?m=

Disallow: /*feed

Disallow: /*comments

Disallow: /*trackback

Disallow: /*comment-page

Disallow: /*cpage=

Disallow: /*?s=

Disallow: /*&s=

Crawl-delay: 3

Host: zenschina.ru

Sitemap: http://zenschina.ru/sitemap.xml

А то у меня сегодня исключил робот 6 страниц, или надо еще что то настроить

---------- Добавлено 04.09.2012 в 17:32 ----------

А то он сегодня исключил ну и помойму в роботс были проблемы я удалил строчку

Disallow: /category, вот или еще что то надо в яндексе настраивать

P
На сайте с 29.05.2012
Offline
2
#1

Все верно. Не чего настраивать не нужно. Прописали robots и все.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий