Robots.txt для worpdress

Оптимизация robots.txt для WordPress на блоге dimok.ru

Спасибо, но хотелось бы увидеть пример, для закрытия технических категорий wp-admin и других.

Хорошая статейка.

Спасибо, но хотелось бы увидеть пример, для закрытия технических категорий wp-admin и других. У димка мне кажется не полный список.

По-моему у Димка там описано все, что только можно закрыть :)

Вы это имели ввиду?

Disallow: /wp-login.php

Disallow: /wp-register.php

Disallow: /xmlrpc.php

Disallow: /template.html

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content

Вот нашел такой подойдет или подскажите,что нужно изменить?

Это забыл указать в wp настроены страницы ЧПУ

И существует ли allow?

Ну так это ж Димков и есть :)

Смотря какой у Вас блог, для сапы или для людей :) Будете ли Вы перекрывать теги?

Блог для людей, не для сапы)

Тогда, имхо, Вам такой роботс подойдет :)

Спасибо большое, за помощь.