Проблема с индексацией, пожалуйста помогите.

Уважаемые форумчане помогите пожалуйста разобраться с индексацией сайта. У меня корневой каталог сайта прекрасно индексируется всеми поисковиками, а вот внутренние каталоги (сайт.ru/articles/),(сайт.ru/catalog/) ни как не индексируются (это продолжается уже как 4 месяца). Единственный поисковик который видит все каталоги этот гугл, но меня больше интересует яндекс.

В файле robots.txt прописал:

# robots.txt for www.сайт.ру

User-agent: *

Disallow: /cgi-bin/

Sitemap: http://сайт.ру/Sitemap.xml

Host: www.сайт.ру

Если запехнуть все страницы из (сайт.ru/articles/) или ),(сайт.ru/catalog/) просто в корень сайт.ру, то они все проиндексируются. Писал в яндекс, ответили что все нормально с индексацией, но на деле это не так. Прошу вас помочь разобраться. URL сайта могу кинуть в личку.

Всем заранее спасибо.