robot.txt

Да.

Это хрень. Надо так:

Сайтмап не обязателен. А хост желателен, пишется без хттп.

А разве сейчас Яндекс директиву Host учитывает? Они же вроде писали, что необязательно ее упоминать.

robots.txt

Месяц назад читал, что да, учитывает и он нужен. В Яндекс блоге читал.

Сейчас посмотрел, нашел только вот это https://webmaster.yandex.ru/blog/301-y-redirekt-polnostyu-zamenil-direktivu-host

Тарасов Роман, посмотрел, спасибо. Но лично мне лень на всех сайтах править роботс.тхт и мало того ещё и разбираться и делать 301 редирект или чего-то ещё там.

---------- Добавлено 14.07.2018 в 02:28 ----------

Яндекс как всегда в своём репертуаре, сначала долго и нудно ныли, что нужна эта директива, а теперь взяли и бац отказались.

Я тоже не правил, и не заметил ухудшения посещаемости. А на одном сайте траф Яндекса вообще в два раза вырос за последние три месяца. Значит наличие host не влияет, ну или пока не влияет.

Но, вот тут новый сайт запустили, там уже без этой директивы robots делал.

Яше все равно на хост, гоша читает, майл кажется до сих пор копирует гошу

С точностью до наоборот.

host - это директива robots.txt для Яндекса (была). Google её не воспринимает и в спецификации о ней нет ни слова.

Возможно. .Но в спецификации есть синтаксис а не 'операторы' допустимые в роботсе.

Синтаксис и полный перечень "операторов" это разное.

Буду признателен если просветите в вопросе: Коль хост гоше не нужен, то как гоше скармливаем основной домен сайта?

Во всем самоучка, поэтому ваше заявление интересно мне

Да и еще момент

Говорил об отношении Яши на данный момент......