Форум Сайтостроение Веб-строительство

Правильный robots.txt для wordpres?!

HUTOR
На сайте с 21.09.2005
Offline
102
HUTOR
963

Доброго всем,

Тем по форуму накидано много, в основном образно говорится о роботсе ,но все же, каким должен быть правильный файл robots.txt для Wordpress?

Закрыть админ папку, файлы логина, настройки, конфига... легче наверное будет написать, что нужно обязательно оставить открытым... может кто покажет в качестве примера свой роботс на вордпрессе, думаю многие скажут спасибо.

D
На сайте с 04.02.2006
Offline
139
Dozor
#1

Пожалуйста:

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: /feed

Disallow: /comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: wp-login.php

Disallow: xmlrpc.php

User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: /feed

Disallow: /comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: wp-login.php

Disallow: xmlrpc.php

Host: www.site.ru

HUTOR
На сайте с 21.09.2005
Offline
102
HUTOR
#2

Dozor, Спасибо,

...а Яше обязательно индивидуально нужно разжевать?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий