Форум Практика оптимизации Любые вопросы от новичков по оптимизации

robots.txt для WP

12
O
На сайте с 29.05.2008
Offline
195
ortegas
#11

Host:

User-agent: *

Disallow: /bots/

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /merchant/

Disallow: /tag

Disallow: /wp-content/plugins/

Disallow: /category/*/*

Disallow: */trackback

Disallow: */comments

Disallow: /ddos.php

Disallow: /ddos2.php

Disallow: /xmlrpc.php

Sitemap:

W
На сайте с 24.01.2009
Offline
42
whitik
#12

Я себе вот какой robots сделал:

User-agent: *

Disallow: /redirect/

Disallow: /tag

Disallow: */tag/

Disallow: /?tag

Disallow: /tag/*/page

Disallow: /?p

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /wp-admin/

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/hyper-cache

Disallow: /wp-content/backup-0cdcf

Disallow: /wp-content/themes

Disallow: /trackback/

Disallow: /archives/

Disallow: /category/

Disallow: /category/*/*

Disallow: */trackback/

Disallow: */feed/

Disallow: /*feed

Disallow: /feed

Disallow: /?feed=

Disallow: /?s=

Disallow: */comments

Disallow: /*comment-page-*

Disallow: /*?*

Disallow: /*?

Disallow: /?*

Disallow: /xmlrpc.php

Disallow: /obo-mne/

Disallow: /2010/

Host: whitik.ru

Sitemap: http://whitik.ru/sitemap.xml

Вроде без ошибок да?

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий