Как запретить индексацию по принципу "все кроме"

Задача стоит запретить индексацию всеми роботами всего содержимого

http://my-host.com/dir001/

и

http://my-host.com/dir002/

.....

и.т.д.

за исключением!

http://my-host.com/dir001/index.htm

и

http://my-host.com/dir002/index.htm

...

т.е. запретить всё кроме индекса.

Роботс как я понял такого финта не позволяет, а просто перечислить по

800 документов для каждого /dir00/

мягко говоря ... не получится.

Посоветуйте плиз, как решить проблему?