Запрет индексации поддоменов???

vlamant
На сайте с 16.11.2006
Offline
129
1990

Такой вот Вопрос.

Есть сайт: www.site.ru

Если в корневую папку данного сайта вложить Robots.txt в котором будет прописано:

User-agent: *

Disallow: http://www.test.site.ru/

Disallow: http://test.site.ru/

http://test.site.ru/ будет запрещен к индексации или же нет?? Правильно ли я все сделал????

PS Искал на форуме, ответа не нашел....

Если Яндекс ищет ответ на ваш запрос больше минуты - ждите... Он гуглит... Покупаем ссылки. Дорого!! (http://www.sape.ru/r.fe6e659f65.php) Покупаем и продаем статьи!!! (http://articles.sape.ru/r.fe6e659f65.php)
O
На сайте с 02.06.2006
Offline
67
#1

Поддомен появляется на хостинге не как отдельный сайт

а как отдельная папка в папах основного домена.

http://test.site.ru/ появится в папке сайта site.ru как папка test

отсюда и роботс

User-agent: *

Disallow: /test

Хотя конечно могут и нюансы быть.

можно в папку поддомена свой роботс уложить

User-agent: *

Disallow: /

vlamant
На сайте с 16.11.2006
Offline
129
#2
oldvovk:
Поддомен появляется на хостинге не как отдельный сайт
а как отдельная папка в папах основного домена.

http://test.site.ru/ появится в папке сайта site.ru как папка test

отсюда и роботс

User-agent: *
Disallow: /test

А если например партнерка?? ну например Лове планет.... и не какая папка не создается??? я просто создаю поддомен через редактирование DNS основного домена?

vlamant
На сайте с 16.11.2006
Offline
129
#3

я так и не понял.... Помогите плиз..

K
На сайте с 31.01.2001
Offline
737
#4

Где лежит / поддомена? Туда и кладите robots.txt .

Запрещающие строчки должны идти с / и никаких дурацких http.

User-agent: *

Disallow: /

vlamant:
я просто создаю поддомен через редактирование DNS основного домена

Это я не понимаю. Поддомен = сайт. У него должна быть корневая папка. Если не знаете, где она находится, у вас ничего не выйдет.

Выделенные полосы в Москве (http://www.probkovorot.info) привели к снижению скорости до 23%.
S
На сайте с 28.10.2005
Offline
296
#5

Ну, ребятишки, щас вы тут насоветуете

Ложите свой роботс в корень каждого поддомена

john2007
На сайте с 26.03.2007
Offline
173
#6
vlamant:
А если например партнерка?? ну например Лове планет.... и не какая папка не создается??? я просто создаю поддомен через редактирование DNS основного домена?

Если все поддомены это одно и то же, и папка одна, и запрещать разные подпапки нужно, то только динамически для каждого поддомена содержимое robots.txt отдавать. В robots.txt название хостов в Disallow не указывается, только папки "текущего" хоста.

Совершая ошибки, мы не только учимся их не повторять, но и учимся прощать такие же ошибки другим... (с)
vlamant
На сайте с 16.11.2006
Offline
129
#7
john2007:
Если все поддомены это одно и то же, и папка одна, и запрещать разные подпапки нужно, то только динамически для каждого поддомена содержимое robots.txt отдавать. В robots.txt название хостов в Disallow не указывается, только папки "текущего" хоста.

и как же запретить мне к индексации поддомены???

ну пускай будет love.site.ru (партнерка лове планет) и test.site.ru (партнерка тестов агавы)

K
На сайте с 31.01.2001
Offline
737
#8
john2007:
Если все поддомены это одно и то же

Так это что, зеркала чтоли?

Тогда делается обработкой robots.txt через SSI или PHP. Для разных HTTP_HOST отдается разный robots.txt. Для основного хоста выдается пустой, а для всех остальных (поддоменов) - запрещающий, который уже приводили. Работает для всех поисковиков как автомат Калашникова - безотказно.

vlamant:
пускай будет love.site.ru (партнерка лове планет) и test.site.ru (партнерка тестов агавы)

Не понимаю я в партнерках. Если сайты разные, значит у них и корни разные, по моему, так. Где у сайта корень, туда и кладите robots.txt . Спросите у хостера, если не знаете.

john2007
На сайте с 26.03.2007
Offline
173
#9
vlamant:
и как же запретить мне к индексации поддомены???

ну пускай будет love.site.ru (партнерка лове планет) и test.site.ru (партнерка тестов агавы)

Сам не использовал, вот тут рекомендации:

/ru/forum/comment/976955

/ru/forum/comment/1382977

dr.AMik
На сайте с 06.09.2006
Offline
154
#10

какаято совершенно тупая тема, вам не кажется?

запрет индексации поддоменов делается также, как и обычных доменов, вот вам и ответ!

в крайнем случае, если ну уж никак нельзя добавить в корень поддомена файл robots.txt, всегда же можно обратится к файлу прав, и в нем легким движением руки сделать чтобы любой файл грузился так, как будто берется с корня.

да бы не напрягать мозги, кому не надо, синтаксис файла прав дам только тому, кому это надо

☑ Естеств. ссылки (крауд, вопросники, отзовники, блоги) от 45р./шт. ( http://bit.ly/webcrowd2021 ) / ☑ Отчеты Serpstat/Ahrefs по 40р./сайт. @seogikua / ☑ https://bit.ly/IndexYaGoo Ускорение индексации NEW!

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий