Вот подскажите, что в robots.txt не так

Bekker, вы смотрели через панель вебмастера?

дубль.....

Str256, склонен больше верить проверке через панель вебмастера. Той ссылкой активно пользовался пока панели не было, не раз обманывался.

Для проверки роботса существует http://www.yandex.ru/cgi-bin/test-robots?host

Нет, не стал, но у вас же написано в первом посту:

здесь у него, видимо, другая формулировка.

Bekker, оно указывает на это как на ошибку.

ИМХО добавил 10.04.2008 в 12:52

Плюнул, написал

User-Agent: Yandex

Allow: /

Host: www.mysite.ru

User-Agent: *

Disallow:

Не хотел использовать директиву Allow, так как фича у яндекса относительно новая, глюканет еще. Ругаться перестало.

Можно и нужно писать пустую директиву Disallow: для всех роботов - User-agent: *.

Возможно Яндекс "выпендрился" подразумевая, чтобы писали Allow:

Недавно кстати я платону про этот глюк их панели написал - пока еще не дождался ответа.

Получил такой ответ, кому интересно:

Здравствуйте!

Это не ошибка, приводится к сведению, что директива Disallow не содержит

запрещающих правил.

--

С уважением, Платон Щукин

Служба поддержки Яндекс.Ру

http://help.yandex.ru/

> Почему анализ http://www.site.ru/robots.txt

> Пишет: Обнаружено пустое правило Disallow:

> Подскажите в чем ошибка?

а дает что нибудь эта строчка вверху роботса? щас на sedo.com обнаружил такой роботс и в топе яши у пару сайтов такая строчка:

# /robots.txt file for http://www.sedo.de/

User-agent: *

Disallow: /datenbank

Disallow: /logs

Disallow: /img

Disallow: /cgi-bin