Опять роботс и зеркала

A
На сайте с 22.04.2009
Offline
72
250

Доброго времени суток.

Стоит задача разместить один и тот же сайт на 3х доменах, один будет главным и будет индексироваться, два других будут закрыты от поисковиков и работать автономно, подскажите, пожалуйста, как правильно организовать это.

Главный домен:


robots.txt

User-Agent: *
Disallow:
Host: www.main-site.ru

Два клона:


robots.txt

User-Agent: *
Disallow: /
Host: www.main-site.ru , т.е. указать урл главного домена, или эту строчку вообще убрать?

На клонах, помимо роботса, вписать в кодах страниц:

<meta name="robots" content="noindex, nofollow">

Что упустил? :)

ganz
На сайте с 30.05.2006
Offline
166
#1
anbura:
Доброго времени суток.
Стоит задача разместить один и тот же сайт на 3х доменах, один будет главным и будет индексироваться, два других будут закрыты от поисковиков и работать автономно, подскажите, пожалуйста, как правильно организовать это.

Главный домен:

robots.txt

User-Agent: *
Disallow:
Host: www.main-site.ru


Два клона:

robots.txt

User-Agent: *
Disallow: /
Host: www.main-site.ru , т.е. указать урл главного домена, или эту строчку вообще убрать?


На клонах, помимо роботса, вписать в кодах страниц:
<meta name="robots" content="noindex, nofollow">


Что упустил? :)

Все верно.

Делайте на клонах так.

User-Agent: *

Disallow: /

Host: www.main-site.ru

A
На сайте с 22.04.2009
Offline
72
#2
ganz:
Все верно.

Делайте на клонах так.

User-Agent: *
Disallow: /
Host: www.main-site.ru

Спасибо большое. Вот интересно, если клоны в роботсе и коде страниц закрыты от индексации, зачем в роботсе указывать главное зеркало? По идее мы все клоны просто спрятали и поисковики трогать их не должны, значит и главное зеркало им как бы и не важно должно быть...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий