Вопрос по robots.txt

Ну да, вот полностью весь:

User-agent: *

Disallow: /administrator/

Disallow: /cache/

Disallow: /components/

Disallow: /images/

Disallow: /includes/

Disallow: /installation/

Disallow: /language/

Disallow: /libraries/

Disallow: /media/

Disallow: /modules/

Disallow: /plugins/

Disallow: /templates/

Disallow: /tmp/

Disallow: /xmlrpc/

Disallow: /registration/

Disallow: /export/

Disallow: /download/

Disallow: /price-sheet/

Disallow: /the-contact-information/

Disallow: /index.php?option



Host: http://xn--32-mlclohlho.xn--p1ai/

Sitemap: http://xn--32-mlclohlho.xn--p1ai//index.php?option=com_xmap&sitemap=1&view=xml

Синтаксис неправильный. Правильно Host указывать только для робота Яндекса:

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /registration/
Disallow: /export/
Disallow: /download/
Disallow: /price-sheet/
Disallow: /the-contact-information/
Disallow: /index.php?option

User-agent: Yandex
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Disallow: /registration/
Disallow: /export/
Disallow: /download/
Disallow: /price-sheet/
Disallow: /the-contact-information/
Disallow: /index.php?option
Host: http://xn--32-mlclohlho.xn--p1ai/

Sitemap: http://xn--32-mlclohlho.xn--p1ai/index.php?option=com_xmap&sitemap=1&view=xml

А на Sitemap не ругается?

Кстати, я думаю, роботы не поймут такую кодировку. Лучше задавать русские буквы в 16-ричном виде. Прекрасный пример - ЧПУ википедии.

Да в том то и дело, что нет ;)

Magnificent-Seo добавил 09.02.2011 в 15:00

Дак всё таки как правильно будет?

Структура правильная, как я указал выше. Ну, а насчет того, как правильно кодировать кириллицу в роботс, точно сказать не могу. Я бы попробовал в 16-ричном виде...

P.S. Спросите у домейнеров, они должны быть в курсе.

Абалдеть, почти по человечески. у меня сначала был разрыв шаблона.

Не понял, что вы имеете ввиду? 🚬

23: Host: http://xn--32-mlclohlho.xn--p1ai/     Некорректное имя главного зеркала сайта

А в Яндекс.Вебмастер сказано, что "параметр директивы Host обязан состоять из одного корректного имени хоста и допустимого номера порта".

Может попытаться убрать протокол http?

Щас только попробовал сделать как вы предложили. Ошибка осталась :(

23: Host: xn--32-mlclohlho.xn--p1ai/ Некорректное имя главного зеркала сайта

Слеш в конце уберите

Да и правда помогло, ошибка ушла!

    *
      Используемые секции
	Строка	
	1-21	
User-agent: *
Disallow: /administrator/
...
Disallow: /index.php?option

23-24	
Host: xn--32-mlclohlho.xn--p1ai
Sitemap: http://xn--32-mlclohlho.xn--p1ai//index.php?option=com_xmap&sitemap=1&view=xml

🍿Благодарю!