2 тэга Host в robots.txt

Мишган · 2007-08-24T14:36:46.0000000Z

Если в роботс 2 тэга Host какой из них будет использоваться?

222

Ctulhu

29 августа 2007, 13:32

#21

Мишган:
Ctulhu, Я не говорю что я пропишу два раза хост. Я говорю про сайт на котором это МОЖЕТ быть сделано и мне интересно какие это может иметь последствия.

Давайте вы себе выстрелите в ногу, какие будут последствия? 😂

https://atabekov.business

229

Елистратов

29 августа 2007, 13:52

#22

Мишган:
Вообщем нашел и почитал документацию на сайте. Оказалось все очень просто. Из всех зеркал обнаруженных зеркальщиком индексируются только те которые указаны в директивах Host. То есть если есть 5 зеркал site1.ru ... site5.ru и на каждом такой robots.txt


User-Agent: Yandex

Disallow:

Host: site1.ru

Host: site2.ru

то яндекс будет индексировать только зеркала site1.ru и site2.ru из которых он сам выберет основное. Если бы мы указали одно зеркало то выбора у него не было бы.

Источник информации? Вообще Яндекс понимает только одну директиву Host...

C уважением, Евгений. Покупаю аккаунты AdSense ()

222

Ctulhu

29 августа 2007, 14:13

#23

Мишган:
то яндекс будет индексировать только зеркала site1.ru и site2.ru из которых он сам выберет основное. Если бы мы указали одно зеркало то выбора у него не было бы.

Можно разделить зеркала на две группы и у каждой группы прописать свой host1 и host2 при том, что зеркала host1 и host2 не являются зеркалами ;) Яндекс с содним хостом не справляется, а вы его еще больше запутать хотите...

И +1 к источнику.

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие

222

-=Илья=-

29 августа 2007, 14:31

#24

Костя Джипег:
-=Илья=-это так
но, все же, прописка хоста не помешает
имхо кнчн.

Хе. В 2004-м, сезон точный не помню, зеркальщик сходил с ума и основным зеркалом мог подставить что угодно, например, непрокачанный домен, на котором когда-то размещалась копия сайта. Общим в этом сумасшествии было то, что проблемы были строго у сайтов с правильно прописанным хостом.

96

BigBrother

29 августа 2007, 17:33

#25

Ну что вы спорите?

Вам же уже из достоверного источника все сказали:

melkov:
решил зайти :)

1. Правила robots.txt:
Любая неизвестная директива просто игнорируется и никак не влияет на парсинг остальных директив в секции. И до, и после неизвестной директивы.

2. Яндекс-индексирующий робот:
Директива Host сейчас не используется. Хотя, вообще говоря (на случай, если вдруг будет использоваться), валидны все директивы Host.

3. Яндекс-робот-заркальщик:
Используется первая директива Host из встретившихся.

:)

So many kings, but few jokers!

М

73

Мишган

29 августа 2007, 17:57

#26

BigBrother:
Ну что вы спорите?

Вам же уже из достоверного источника все сказали:

:)

http://webmaster.yandex.ru/faq.xml?id=508490#wrongname

А как же это? Кстати моя позиция не противоречит позиции melkova

Cервис для оптимизаторов Optimizer Desktop (http://jdev.ru/od/?utm_source=forum.se.ru&utm_medium=signature): мониторинг позиций, учет ссылок. Программа для оптимизаторов и вебмастеров OptiSuit (http://optisuit.ru/?utm_source=forum.se.ru&utm_medium=signature): Optimizer Desktop на Вашем компьютере

54

Костя Джипег

31 августа 2007, 10:41

#27

Ctulhu:
Давайте вы себе выстрелите в ногу, какие будут последствия? 😂

это пять о)) - *BEER*

:::no spam (http://saddat.ru):::

54

Костя Джипег

31 августа 2007, 10:42

#28

-=Илья=-:
Хе. В 2004-м, сезон точный не помню, зеркальщик сходил с ума и основным зеркалом мог подставить что угодно, например, непрокачанный домен, на котором когда-то размещалась копия сайта. Общим в этом сумасшествии было то, что проблемы были строго у сайтов с правильно прописанным хостом.

++ (info)

##############

Что делать, чтобы попасть в ответы Google Bard

Open AI тестирует память для ChatGPT