Форум Поисковые системы Яндекс

robots.txt домены третьего уровня

PM
На сайте с 16.08.2006
Offline
1
purple_m
1050

Друзья, подскажите. Есть к примеру сайт www.site.ru. На нём есть домены третьего уровня вида domain1.site.ru и domain2.site.ru. В robots.txt на основном сайте прописано www.site.ru. Какой хост прописывать на доменах третьего уровня - Host: domain1.site.ru или Host: www.site.ru?

Спасибо за помощь!

SZ
На сайте с 17.08.2005
Offline
63
SergoZD
#1

А вы знаете, для чего прописывают Host?

AVV
На сайте с 31.07.2006
Offline
84
AVV
#2

Поддомен 3-го уровня - это отдельный сайт. В каждом может быть, если нужен, отдельный файл роботс.тхт

Никакого отношения эти домены к домену второго (!!!) уровня site.ru не имеют.

Если есть домены 4-го уровня (зеркала), например, WWW.domain2.site.ru, то для доменов domain2.site.ru и www.domain2.site.ru в роботс нужно указать основное зеркало, напрмер, Host: www.domain2.site.ru

то же самое и для domain1.site.ru и WWW.domain1.site.ru

если у вас нет зеркал 4-го уровня, таких как www.domain2.site.ru

то Host: для доменов 3-го уровня domain2.site.ru указывать не надо.

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие
PM
На сайте с 16.08.2006
Offline
1
purple_m
#3

AVV, очередной раз огромное спасибо!

C
На сайте с 19.09.2001
Offline
120
Cherny
#4

1. У кахдого поддомена должен быть свой robots.txt по адресу http://subdomain.site.ru/robots.txt

2. Для поддомена можно указывать Host, где следует указывать поддомен:

Host: subdomain.site.ru

С уважением, Владимир Чернышов. (не)?путевые заметки (http://chernyshov.kiev.ua/)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий