Ликбез по зеркалу для Яндекса

User-agent: *
Disallow: /administrator/
Disallow: /cache/
Disallow: /components/
Disallow: /images/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /libraries/
Disallow: /media/
Disallow: /modules/
Disallow: /plugins/
Disallow: /templates/
Disallow: /tmp/
Disallow: /xmlrpc/
Host: www.site.ru

Disallow: /installation/ эту директорию вообще можно удалить...

Не нужно забывать что роботс открыт для доступа не только ботам но и людям.

много лишнего указано... в запрете скажем так личного)))

открыть для доступа

Disallow: /media/

Disallow: /images/

основной хост указали верно...

Host: www.site.ru

Оставил вот так. Правильно путь к sitemap указан? С www?

User-agent: *

Disallow: /cache/

Disallow: /tmp/

Host: www.site.ru

Sitemap: http://www.site.ru/sitemap.xml

не парьте мозг таким, и больше не будет проблем

Простите, что вы имели в виду этой фразой? :)

Seomizer - классный вопрос, это ваш роботс, а искать смысл уже дело чужое? :-)

Судя по всему (по содержимому роботс) у вас движок джумла или джустина - поэтому нахрена индексировать то, что потом будет на страницах сайта..лишние страницы скармливать не надо.

У меня вопрос по поводу зеркала, помимо того, что прописать host обязательным ли условием является то, что сайт должен быть один в один? или они могут быть разными по содержанию??.