Я имею ввиду именно ссылочный индекс. Про прямой и обратный легко найти сходу.
Тема, кстати, обсуждалась не раз. Может кто то посоветует что почитать о том, как устроен ссылочный индекс ПС?
Ясно все...
Вы вовремя поправились, насчет глупого. Но, если проследите свою логику, то поймете что она не верна. Конечно, проиндексированная ссылка будет в кэше, но не наоборот. Тому в косвенное подтверждение ваши слова "и то через некоторое время".
Приведите пример страницы в кэше, где удалены ссылки, ценность которых "для поисковых систем нулевая"
Попадание ссылки в кэш не есть гарантия ее индексации.
Плагин, конечно, очень полезный и удобный, но индексацию исходящих ссылок он не показывает.
В вебмастере акцептора она должна появиться в входящих внешних.
Может так?
RewriteCond %{HTTP_USER_AGENT} ^Google.* [OR]
RewriteCond %{HTTP_USER_AGENT} ^Yandex.*
RewriteCond %{HTTP_HOST} ^site2\.site1\.ru.*$
RewriteRule ^.*$ – [F]
Mellifleur, Вы скажите какую цель преследуете? А то ничего не понятно. Если у вас структура такая:
site1.ru/site2.ru/ и вы в site1.ru/robots.txt закрыли папку /site2.ru/, то роботы не проиндексируют site2.ru.
Если поддомены в разных каталогах, то каждому свой robots.txt, если же они в одном, то можно запретить через htaccess.
