Прошу потдвердить. Или опровергнуть.

Да, все верно.

Все верно, вроде бы. А в чем Ваши сомнения?

Даже не могу объяснить... Вроде, в сети обычно адреса с префиксами www, а я как-то совсем от них ушел. Подумалось, не нарушаю ли ненароком каких-либо сетевых правил.

Сейчас занялся первым в своей жизни коммерческим сайтом, вот и провожу ревизию по всем статьям. Решил и об этом спросить, чтобы не мучиться сомнениями.

Спасибо!

Вот вам интересная статья про роботс http://www.softdevelop.ru/articles3.html

В вашем случае я бы написал так:

User-agent: *

Disallow:

Host: site.ru

Соблюдаются две основные директивы.

Нет, не правильно.

Во-первых, вы написали неверно User-Agent.

Во-вторых, директива Disallow обязательно должна присутствовать.

Ну а в-третьих, раз уж вам угодно прописывать Host, учтите, что работает это только для Яндекса, остальные могут игнорировать блок. Поэтому стоит заменить * на Yandex.

В итоге получаем:

User-Agent: Yandex

Disallow:

Host: www.site.ru

С директивами ясно, а вот с хостом я теперь совсем запутался. Если мне нужно, чтобы мой сайт адресовался без префикса, как я это указал в теме, то мне надо сделать роботс таким:

User_Agent: Yandex

Disallow:

Host: site.ru

Верно?

Верно, только не User_Agent, а User-Agent

Верно. User-Agent - я виноват, я опечатался, а вы успели скопировать до того как я исправил ;) Правильно - через дефис, а не через подчеркивание.

Уважаю. Жаль, что зеленый шар не лезет в лузу. Примите одобрение на словах.

Подскажите, а стоит ли прописывать в роботс указанное выше?

Какие от этого плюсы и какие минусы?

Спасибо.