robots.txt правильные инструкции

Всё что ненужно запретите по средству Disallow. Я всегда так делал и никаких проблем.

Тоесть мне категории только путем перечисления можно запретить нужные?

Urbanus47, у вас несколько устаревшие сведения из устаревшего и неавторитетного источника :).

http://help.yandex.ru/webmaster/?id=996567#996571 - изучайте.

anto111ka, Allow надо сверху поставить. Учитывается первая директива.

Спасибо. Изучил, уже поправил свой пост.

Делал как раз по инструкции яндекса...

Надеюсь не ваши догадки... Окэй поправил.

upd1: Прочитал инструкцию яндекса, да, видимо верно подмечено. Спасибо.

Читай матчасть. Это в той инструкции, "по которой ты делал".

"Если для данной страницы сайта подходит несколько директив, то выбирается первая в порядке появления в выбранном User-agent блоке."

И перед Хостом строку убери...

Спасибо, все поправил, ждем апа выдачи...