Форум Практика оптимизации Любые вопросы от новичков по оптимизации

Robots.txt для WordPress под Яндекс

S
На сайте с 17.12.2008
Offline
295
strefapl
364

В общем, никогда не использовал Robots.txt для WordPress, синтаксиса не знаю ((

Прошу помочь.

Нужен толковый роботс, который сможет сделать следующее:

закрыть от индексации всякий мусор по типу wp-login и т.д.

закрыть от индексации /page/1, /page/2

Категории и метки закрываю с помощью плагина All In One Seo.

В сети очень много, но толкового не нашел. Если кто использует - дайте свой, короче, суть в том, что хочу, чтобы в индекс попадали только страницы постов безо всяких рубрик и категорий.

Ссылки бот будет находить попадя на карту сайта, которая в одном клике от главной.

strefapl добавил 22.10.2009 в 19:41

Разобрался, сам составил.

Зацените, сойдет?

User-agent: *
Disallow: /xmlrpc.php
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/
Disallow: /tag/
Disallow: /?s=
Disallow: /trackback/
Disallow: /feed/
Disallow: /page/
Disallow: /comments/
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Allow: /wp-content/uploads/
15 жирных вечных ссылок с трастовых сайтов с высоким ТИЦ ( https://goo.gl/zd62Qa ) Найдем и устраним SEO-ошибки Вашего сайта, которые мешают продвижению ( https://goo.gl/gHsx1U ) Высококачественный рерайтинг: 50 р. / 1000 знаков ( https://goo.gl/5xDmhE )

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий