"Host" в файле robots.txt - пропадание сайта из Яндекса

таким образом потерял индекс аж по пяти сайтам, мне тоже так и не ответили в Я, а когда я проверил роботс через:

http://kako.yandex.ru/cgi-bin/test-robots?host=вставить свой домен

то Я выдал "ресурс запрещен к индексированию" ВО КАК!!! парадокс или глюк ... или им ****** на все

semibratov,

привидите пример своего роботса,

и скажите чего вы хотите: какой сайт объявить зеркалом, а какой поставить на индексацию?

я по незнанию все первый раз перепутал, потом разобрался и все встало на свои места, яндекс проиндексировал и через два апдейта сразу в топе

Так что Яндекс работает отлично в данном направлении

У меня тоже сайт выпал из Яндекса, как я добавил в robots - host

Главный сайт - http://prus.ru

robots.txt:

User-Agent: *

Host: prus.spb.ru

User-Agent: *

Host: www.prus.spb.ru

User-Agent: *

Host: spb.prus.ru

User-Agent: *

Host: www.spb.prus.ru

User-Agent: *

Disallow: /cgi-bin/

Disallow: /nonsystem/

Disallow: /services/phantom/

Disallow: /forum/posting.php

Disallow: /i/

Disallow: /im/

Disallow: /images/

Disallow: /inc/

Disallow: /lib/

Disallow: /template/

Disallow: /forum/

Дайвер,

вот ваша и ошибка, если главный сайт то его именно хостом нужно прописывать:

User-Agent: *

Host: prus.ru

и на те сайты все залей этот же роботс

тогда Яндекс сразу разберется что к чему всех склеит и выведет только http://prus.ru

вот и все

удачи вам в продвижении проекта

Дело в том, что у меня один сайт.

Просто на него несколько доменов.

Разве мне не надо указывать другие домены?

А если надо, то как выделить главным prus.ru?

Именно так, как написал Kostya. И больше ничего не надо (ну еще Disallow, они у вас вроде правильно написаны).

User-Agent: *

Disallow: /cgi-bin/

Disallow: /nonsystem/

Disallow: /services/phantom/

Disallow: /forum/posting.php

Disallow: /i/

Disallow: /im/

Disallow: /images/

Disallow: /inc/

Disallow: /lib/

Disallow: /template/

Disallow: /forum/

Host: prus.ru

---------------------

Спасибо.

Господа, рассейте мои сомнения...

User-Agent: *

Disallow: /cgi-bin

Host: barrens.ru

это прописано у меня в роботсе... кто писал - не знаю.

http://kako.yandex.ru/cgi-bin/test-robots?host=

без www выдает 302 ошибку

с www говорит что:

Запрещена индексация всех URL, начинающихся с указанных префиксов:

/

Индексация сервера www.barrens.ru:80 запрещена полностью.

Это нормально? Первый раз в этот вопрос сунулся

файл robots.txt такой:

User-Agent: *

Disallow: /cgi-bin

Host: www.radiosystem.ru

Адрес сайта выбранного яндексом: www.axitel.ru

Сегодня я через AddURL добавил www.radiosystem.ru в яндекс. Он (яндекс) мне сказал, что это новый адрес и будет скоро проиндексирован. Хотя по старому адресу он был проиндексирован полность.

Теперь про адрес www.axitel.ru он говорит, что это зеркало radiosystem и к индексации не принимает.