Как сделать, чтобы Яндекс не индексировал поддомены?

W
На сайте с 11.06.2006
Offline
18
1245

Как сделать, чтобы Яндекс не индексировал поддомены?

Поясню: есть сайт, к нему прикреплены еще 10 сайтов (на хостинге они размещены в разных папках)

Так вот, какой то умник добавляет в адурилку любой выдуманный поддомен, например werew.moisite.ru и Яндекс его тупо индексит, отнимая тем самым посетителей с сайта moisite.ru

Как запретить индексацию поддоменов?

В robots у меня прописано

User-Agent: *

Disallow: /cgi-bin/

Disallow: /tsbsub/

Disallow: /test/

Disallow: /catalog/admin/

Host: www.moisite.ru

По идее ведь запрещена индексация всех поддоменов, верно?

Почему же тогда он индексирует их...(((

renek
На сайте с 22.08.2007
Offline
40
#1

Чтобы запретить доступ робота к некоторым частям сайта или сайту целиком, используйте директиву 'Disallow' в robots.txt. Примеры:

User-agent: Yandex

Disallow: / # блокирует доступ ко всему сайту

User-agent: Yandex

Disallow: /cgi-bin # блокирует доступ к страницам начинающимся с '/cgi-bin'

http://help.yandex.ru/webmaster/?id=996567#996571

rmikel
На сайте с 25.05.2007
Offline
142
#2
werton:
Почему же тогда он индексирует их...

Поисковый робот ещё не добрался... нужно подождать.

- Здесь (http://www.sape.ru/r.fa62530507.php) становятся богатыми буратинами... и здесь (http://www.mainlink.ru/?partnerid=11422) тоже. ;) - "В жизни нет ничего такого, ради чего стоило бы спешить" (c)то-то сказал.
torg33
На сайте с 05.12.2007
Offline
12
#3
rmikel:
Поисковый робот ещё не добрался... нужно подождать.

у меня это ожедание тянулось почти два месяца =(

дизы для вашего сайта =) (/ru/forum/189798)
Dmitry V___v
На сайте с 07.12.2006
Offline
286
#4
torg33:
у меня это ожедание тянулось почти два месяца =(

Гейт создайте на народе.

ТОлько потом, как пройдется, не забудте удалить... :)

А то будет виден по анкору с гейта и надписью "найден по ссылке" :)

Создание и ведение кампаний Google/Bing/Twitter/FB Ads под USA, Canada, United Kingdom and Australia ( https://searchengines.guru/ru/forum/1028286 ) + жирный линкбилдинг под бурж ( https://searchengines.guru/ru/forum/1028282 )
R
На сайте с 18.06.2007
Offline
67
#5
werton:
По идее ведь запрещена индексация всех поддоменов, верно?
Почему же тогда он индексирует их...(((

Этот роботс на www.moisite.ru, верно ? По-моему в роботс нельзя запретить индексацию ПОДДОМЕНОВ, или я ошибаюсь ? Потому что роботс относится лишь к тому домену, где он расположен.

Во-первых, чтобы яндекс не индексил поддомен, он либо должен выдавать ошибку 404, либо у КАЖДОГО поддомена должен быть роботс с Disallow: /

torg33
На сайте с 05.12.2007
Offline
12
#6
Pall:
Гейт создайте на народе.
ТОлько потом, как пройдется, не забудте удалить... :)
А то будет виден по анкору с гейта и надписью "найден по ссылке" :)

Спасибо Вам большое, но так как совсем не спец в сео, а всеглишь неуч и чуть чуть умею дизайнерить, то я мало что понял из Вашего высказывания =(

пйоду чиать словарь слэнга, благго я его тут уже нашел =)

W
На сайте с 11.06.2006
Offline
18
#7
Rifka:
Этот роботс на www.moisite.ru, верно ? По-моему в роботс нельзя запретить индексацию ПОДДОМЕНОВ, или я ошибаюсь ? Потому что роботс относится лишь к тому домену, где он расположен.
Во-первых, чтобы яндекс не индексил поддомен, он либо должен выдавать ошибку 404, либо у КАЖДОГО поддомена должен быть роботс с Disallow: /

На поддоменах ничего нельзя прописать - они виртуальные -отображают содержимое основного сайта, понимаете. Набираешь абракадабру в браузере:12312sdsdsdsds.moisite.ru и вуаля показывается сайт 12312sdsdsdsds.moisite.ru Вот про что я говорю.

I
На сайте с 02.12.2005
Offline
99
#8

хостеру напишите кляузу ибо это не дело

Динамика изменения курса евро и бакса (http://valuta.itemp.ru/)
I
На сайте с 02.12.2005
Offline
99
#9

хотя чуем чую что можно через .htaccess решить проблему.но могу ошибаться

V
На сайте с 15.02.2007
Offline
117
#10

Ну да, было подобное, решил через mod_rewrite, в каждой папке суб...

Прописал примерно такое:

#

RewriteCond %{HTTP_HOST} ^sub-site.site.ru$ [OR]

RewriteCond %{HTTP_HOST} ^www.sub-site.site.ru$

RewriteRule ^(.*)$ http://www.site.ru/ [R=301,L]

#

Ну и ждал где-то с месяц результата, теперь вроде все ок...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий