с www и без www что пишем в robots?

Sportmas
На сайте с 20.08.2008
Offline
271
515

При такой формулировке в .htaccess

RewriteEngine on

RewriteCond %{HTTP_HOST} ^site.ru.ru$ [OR]

RewriteCond %{HTTP_HOST} ^www.site.ru$

RewriteRule ^(.*)$ http://site.ru/$1 [R=301,L]

Что необходимо прописать в robots?

Я прописал одну строчку:

host: http://www.site.ru

Всё верно?

webrock
На сайте с 05.04.2010
Offline
261
#1
Sportmas:

host: http://www.site.ru

Всё верно?

протокол указывается, есть только зеркало доступно по https.

а так... правильнее:

Host: www.site.ru

Полный аудит сайтов. (/ru/forum/765361)
Sportmas
На сайте с 20.08.2008
Offline
271
#2

А если это в роботс не прописано какая разница?

mramor
На сайте с 22.09.2011
Offline
53
#3

всякие склейки/дубли мубли

в общем надо прописывать главный домен

выше правильно написали, так надо -

Host: www.site.ru

Что-то хотел написать и забыл
alaev
На сайте с 18.11.2010
Offline
855
#4
Sportmas:
А если это в роботс не прописано какая разница?

Тема специально для вас :

/ru/forum/828288

Создание и продвижение сайтов - https://alaev.net , аудиты сайтов, контекстная реклама
Sportmas
На сайте с 20.08.2008
Offline
271
#5

Увидел спасибо, дабы там всё заново не описывать тут чуть продолжу.

Добавил запись в роботс и яндекс вебмастер пишет

Файл robots.txt не будет учтён роботом Яндекса, т.к. при запросе выполняется перенаправление.

alaev
На сайте с 18.11.2010
Offline
855
#6

Директива host имеет меньший приоритет нежели 301 редирект.

Ждите апдейта зеркальщика, домен подклеится.

Я вот просто не понимаю зачем вы это затеяли? :)

Sportmas
На сайте с 20.08.2008
Offline
271
#7

14.09 яндекс наложил фильтр за рекламу которой нет и фильтр не снят до сих пор, с 60000 в день посетителей стало 1000 вот и делаю всё вообще

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий