Бердятина от яши...

ну с тех пор-то - да ))))

Опять же на этапе создания это не принципиально было... 2000ый год, какой там поисковый траф...

и потом - почему поддержал ТС - robots.txt как-бэ для того и создан, чтоб рассказать поисковикам о задумке вебмастера... Как же яндекс не причём-то? Завтра он и дизаллоу игнорировать начнёт...

даж если там "Юзер-агент: Яндекс; Послать: нах!"... очень даже причём...

это товарный знак.

в корне сайта в файл .htaccess

RewriteEngine on

RewriteCond %{HTTP_HOST} ^(www\.)?([^\.]+)\.site.ru$

RewriteRule ^(.*)$ http://site.ru/$1 [R=301,L]

почему завтра? он и сейчас игнорит

о_О "мне триста лет, я выполз из тьмы"(с)

попользовался всеми поисками... доказанных примеров не нашёл. Можно малюсенький примерчик?

Т.е. завтра он и агента подделывать под МСИЕ начнёт? (или... уже не завтра?) И публичные прокси пользовать?

Не, ну мне-то скрывать нечего... но всё-таки.

можно - сделайте экспериментик :) в своих сетках я показывать не буду

только в последнюю неделю добился чтобы по .htaccess отдуплить ненужных ботов.

Ага, 301 прописывал, сайт вообще не индексился :)

руки виноваты, я так думаю, т.к. ни у кого не встречал таких проблем

По ссылке не приводится примеров. Ну а фраза

просто улыбнула. т.е. брутфорсят сайт по соседним протоколам, сливают к себе копию и потом уже индексят? Или, всё-таки, там что-то не то написано?

экспериментик сложновато сделать - всё, что за всё время работы было заключено в дизаллоу - в нём и осталось... не смотря на внешние ссылки даже (естественные).

ну старый вылетит - понятно. А новый-то почему нет? Даже если не основное - ну так нажмите "удалить старый сайт". 100% Поможет. Или под "вообще не индексился" имеется в виду "целый месяц"?

так мы, повторюсь, месяцев 5-6 обратно (уже с новым адресом) влетали...

Я думаю наврятле, эт чтоб 301 криво прописать еще постараться надо :) Яша не смог понять, какое основное зеркало, убрал 301 и все ок ;)

да хоть заулыбайтесь :) я привел результаты работы ботов - несколько месяцев отбивался от них, только в последнюю неделю начало отбивать частично их, хотя далеко не всех.

А про дисалоу - видит и индексит, частенько появляется в индексе.

наверное - настолько ультра-мега-супер-СДЛ, что ПС готовы были рукой ген.дира (минимум, а то и учредителя) пожертвовать, лишь-бы его себе в индекс вогнать ))) не передрались между собой - и то хорошо ))

один раз было? м/б просто совпадение... если нет - не очень хорошо... скорее всего всё-таки добавили редирект "задним числом", и пока последняя с зеркала из индекса не выпала - новые не влетали по причине "это неосновное зеркало, а основное отдаёт ошибку".