Robots.txt, зеркала и яндекс.

L7
На сайте с 23.04.2005
Offline
195
874

Допустим есть 10 совершенно одинаковых сайтов. Все одинаковое, кроме доменов естественно.

Если на каждом из 10 поставить robots.txt и прописать директиву host соответствующую домену, то яндекс эти сайты не зазеркалит и будет считать разными? Или все таки зазеркалит?

Проверка добытых беклинков, мастхэв для сеошников ( https://prozavr.ru/ ) | Массовая проверка Яндекс ИКС ( https://prozavr.ru/tools/massovaya_proverka_iks.php ) | Скачивалка фото из ВК и Пинтереста ( https://prozavr.ru/tools/parser_kartinok.php ), для получения тонн картинок для ваших проектов.
I
На сайте с 25.01.2005
Offline
37
#1

он будет считать сайт под хостом - главным и держать его в индексе, а остальные - зеркалами

D
На сайте с 21.11.2003
Offline
65
#2

Зазеркалит конечно.

Сайт про Индию (http://bharat.ru).
[Удален]
#3

Он же по содержанию смотрит, если оно идентично, какой ему смысл в индексе держать несколько документов, всё равно зазеркалит по своему усмотрению.

L7
На сайте с 23.04.2005
Offline
195
#4

Или я Вас не так понял или вы меня.

Ситуация такая:

Есть 10 разных доменов(домен1,домен2,домен3,домен4,домен5,домен6,домен7,домен8,домен9,домен10), но сайты на них полностью идентичны.

на каждом домене лежит роботс в котором написано host: домен1(для первого), host: домен2(для второго) и т.д. Т.е. в каждом роботсе как бы указывается, что этот домен главный из десяти. Как яндекс на это отреагирует? Все таки все 10 сайтов будут разными, или 9 штук станут зеркалами?

З.Ы. Пока я писал этот пост, еще два ответа появиось. Все, что тут написано относится к первому ответу.

З.З.Ы. Значит все таки зазеркалит значит... это плохо... где контента бы набрать не ворованного на 10 то сайтов... книги чтоли посканировать...

I
На сайте с 25.01.2005
Offline
37
#5
Как писал LDA777
на каждом домене лежит роботс в котором написано host: домен1(для первого), host: домен2(для второго) и т.д.

Тот же эффект будет, если ничего не писать

лучше из всех доменов указать один

Sergey Petrenko
На сайте с 23.10.2000
Offline
482
#6

Если я не ошибаюсь, то эту директиву робот учитывает так - если она есть, то тот сайт, в robots.txt которого она указана, является зеркалом указанного в host. Т.е. домен может объявить себя зеркалом, но попытка объявить себя основным сайтом учтена не будет.

Вроде так ребята в Яндексе объясняли, когда ее вводили. Так что идея бессмысленна.

[Удален]
#7

В Host: указывается главное зеркало. Но наличие этой директивы не влияет на принятие решения о склейке, оно влияет только на выбор главного зеркала при склейке.

L7
На сайте с 23.04.2005
Offline
195
#8

Спасибо, теперь все яснее некуда. :-) Придется значит все таки к помощи сканера прибегнуть...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий