robots.txt

I
На сайте с 01.03.2010
Offline
32
366

Добрый день!

Суть проблемы :

1. Имеем сайт www.site.com, установлен основной домен как www.site.com,

настроен редирект с site.com на www.site.com, но в индекс успел попасть site.com

2. В структуре сайта предполагаются поддомены domen1.site.com domen2.site.com и так далее.

Так же установлены редиректы с www.domen1.site.com на domen1.site.com , но опять же в индекс

залетел www.domen1.site.com . Нужно чтобы в индексе находились www.site.com и domen1.site.com.

Как добиться этого? Интуиция подсказывает, что ситуация решается через robots.txt и вебмастер тулз google и yandex. Но как?

PS понимаю, что нужно было вначале правильно настроить редиректы, а уже потом открывать сайт для индексирования, но увы поздно спохватились:gm:

Прошу помощи.

kimberlit
На сайте с 13.03.2007
Offline
370
#1
A7
На сайте с 22.10.2010
Offline
77
#2

В роботе пишется Host: www.sait.ru

А вот лет 100 назад, предложение "получите ссылку", мягко говоря напрягало.
I
На сайте с 01.03.2010
Offline
32
#3

насколько я понял директива Host: актуальная для Яндекса, а как быть с Google?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий