запрет символа для robots.txt

Подойдет.

На будущее пользуйтесь Яндексовским анализатором роботса: http://webmaster.yandex.ru/robots.xml

Полезная и удобная штука :)

А вообще робот текст обязателен?у меня пока его нет

fantom771, а это зависит от Вашего желания. В нем описываются диррективы для роботов поисковых систем. По большому счету роботы сами разберутся с ненужными страницами, типа админки, авторизации и т.п. Но намного корректнее, когда веб-мастер сам определяет, какие страницы индексировать, а какие нет. Какую скорость сканирования задать с целью оптимизации работы сервера и какой сайт назначить основным зеркалом.

Он просто на такую запись предупреждение выдает, поэтому решил уточнить:)

Всем спасибо за ответы!