.htaccess и Яндекс не видит robots.txt

Дак в htaccess почему наоборот?

RewriteCond %{HTTP_HOST} ^mysite.ru$ [NC]

RewriteRule ^(.*)$ http://www.mysite.ru/$1 [R=301,L]

потому что основной домен без www, так было, пока не был поставлен 301 редирект (ошибка - не был прописан Host в robots.txt), после чего яндекс посчитал домен с www главным и именил его в панели, следствие - вылет всех страниц из индекса.

поэтому я прописал в роботс директиву Host, объясняющую ему, какой домен основной, но при наличии 301 редиректа он роботс не видит.

а без 301 редиректа страницы с www, которые яндекс считает правильными, из веб не видно

Spartak добавил 10.12.2010 в 11:49

поменял я

RewriteCond %{HTTP_HOST} ^www.mysite.ru$ [NC]

RewriteRule ^(.*)$ http://mysite.ru/$1 [R=301,L]

на

RewriteCond %{HTTP_HOST} ^mysite\.ru$ [NC]

RewriteRule ^(.*)$ http://www.mysite.ru/$1 [R=301,L]

в итоге :

но роботс виден яндексу

Spartak добавил 10.12.2010 в 12:35

в итоге, я совсем убрал 301 редирект, но на запрос домена без www выдается 500 ошибка, что может быть причиной этому?

RewriteEngine On

RewriteCond %{HTTP_HOST} ^website.com$

RewriteRule ^(.*)?$ "http\:\/\/www\.website\.com\/$1" [R=301,L]

RewriteCond %{REQUEST_FILENAME} !-f

RewriteCond %{REQUEST_FILENAME} !-d

RewriteRule ^.*$ /index.php [L,QSA]

О, то, что доктор прописал!

единственно - на гугле отрицательно не отразится? часть страниц без www там уже в топе

если не отразится, то получается, теперь директива Host: site.ru уже и не нужна? или все-таки ее стоит оставить, чтобы после переклейки зеркальщиком страницы вернулись в индекс?