особенности настройки robots.txt для сайтов в одном аккаунте хостинга

[Удален]
533

Есть ли какие-либо особенности настройки robots.txt для сайтов, находящихся в одном аккаунте виртуального хостинга?

В частности, файлы одного из сайтов физически находятся в папке другого таким образом:

/www/site1/

/www/site1/www/htdocs/site2

john2007
На сайте с 26.03.2007
Offline
173
#1

robots.txt управляюший индексацией домена должен быть доступен по адресу:

domain.ru/robots.txt

(www.domain.ru/robots.txt)

robots.txt управляюший индексацией поддомена домена должен быть доступен по адресу:

subdomain.domain.ru/robots.txt

Каждый домен или поддомен для управления индексацией должен иметь свой собственный robots.txt

При соблюдении вышесказанного особенности расположения доменов и поддоменов по папкам, в общем случае, роли не играют.

Совершая ошибки, мы не только учимся их не повторять, но и учимся прощать такие же ошибки другим... (с)
[Удален]
#2

Это не поддомен. Это два самостоятельных домена второго уровня, размещенные таким образом в рамках одного аккаунта виртуального хостинга.

Возможно в robots.txt условно основного (того, в котором размещен второй) стоит сделать следующую запись:

"Disallow: /site2/"

???

Shtogrin
На сайте с 02.11.2006
Offline
95
#3

Если хотите что бы страницы не дублировались, то можете написать. Но судя по структуре

Disallow: /www/htdocs/site2/

www.shtogrin.com (http://www.shtogrin.com/). Канцтовары (http://www.invit.com.ua/). 1С Бухгалтерия (http://account.kiev.ua/).

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий