Форум Сайтостроение Веб-строительство

Проверьте пожалуйстa robots.txt для wordpress

akksimo
На сайте с 06.01.2011
Offline
117
akksimo
448

Вот мой robots.txt

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /xmlrpc.php

Disallow: /wp-settings.php

Disallow: /wp-app.php

Disallow: /*wp-

Disallow: /wp-admin/

Disallow: /wp-includes/

Disallow: /wp-content/

Disallow: /cgi-bin/

Disallow: /tmp/

Disallow: /cgi-bin

Disallow: /tmp

Disallow: /trackback

Disallow: /trackback/

Disallow: */trackback

Disallow: */trackback/

Disallow: *trackback

Disallow: /comments

Disallow: */comments

Disallow: /comments/

Disallow: *comments

Disallow: */comments/

Disallow: /feed

Disallow: */feed

Disallow: */feed/

Disallow: /?feed=

Disallow: *feed

Disallow: /feed/

Disallow: /date

Disallow: */date

Disallow: */date/

Disallow: /date/

Disallow: *date

Disallow: /page

Disallow: /page/

Disallow: *page

Disallow: /category

Disallow: */category

Disallow: /category/

Disallow: */category/

Disallow: *category

Disallow: /tag

Disallow: /tag/

Disallow: /?s=

Disallow: /*?*

Disallow: /*?

Allow: /wp-content/uploads/

какие из низ дублируют друг друга чтобы можно было их сократить (убрать?) для наиболее оптимизированного robots.txt для wordpress 3.3.1

facegrodno
На сайте с 02.05.2009
Offline
45
facegrodno
#1

дофига дублей, от которых можно избавиться

почитайте мануал от яндекса, который найдете на странице с вашим robots на Я.Вебмастер webmaster.yandex.ru/site/robots.xml

просто смотрите, что скушал робот и экспериментируйте на этой же странице. все что нужно там есть

Партнерка кино и развлекательное (http://u.to/BrgYAQ) Новая Кинопартнерка (http://goo.gl/tXuaC) NEW Май 2012
Яндекс: 301-й редирект полностью Платон Щукин об успешной Robots.txt создать, заполнить, запретить

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий