Лучший Robots.txt для сателлитов на ВП

User-agent: All SE

About: i'm satellite

PS: i'm the best from the best robots.txt for WP

С чего вы взяли что мы что-то предлагаем?

Хорошо, перефразируем: Какой роботс.тхт вы посоветуете для сателлита?

Роботс тхт не спасет от бана сателлита, если таковой будет, а вообще для ВП:

по хорошему ещё тёги, архивы и категории запретить... + результаты поиска... так до кучи...

User-agent: *

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: /feed

Disallow: /tag/*

Disallow: /category/*

Disallow: /comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: /?s=*

Sitemap: http://сайт.ru/sitemap.xml



User-agent: Yandex

Disallow: /cgi-bin

Disallow: /wp-admin

Disallow: /wp-includes

Disallow: /wp-content/plugins

Disallow: /wp-content/cache

Disallow: /wp-content/themes

Disallow: /trackback

Disallow: /feed

Disallow: /tag/*

Disallow: /category/*

Disallow: /comments

Disallow: */trackback

Disallow: */feed

Disallow: */comments

Disallow: /?s=*

Host: сайт.ru

Sitemap: http://сайт.ru/sitemap.xml

mandalay, вот именно "по хорошему".

А многие сателлиты этими категориями и тегами набирают себе страници второго уровня вложенности )

И дублированный контент...

А это так страшно, что краткая версия контента со страницы входит в контент на тэге?

ты даже не представляешь насколько...когда тегов несколько а сидят на них одни и те же записи.

Ну, на моем блоге бывают посты без ката вообще... так что дублирование полное получается... Хотя когда категории и теги были открыты... в индексе они без проблем держались... так что не думаю что это страшно... 🚬