Почему так?

blek+++:
Пара вопросов:

1)У многих по отзывам, ред батон, при генерации создаёт 100-200 "лишних" страниц с названием
index1 , indrex2, index3, почем так, и зачем?
2) Последнее время, после неких манипуляций загона дора в индекс, гугл есть только 100-200 страниц, и дальше никак. Тоесть он тупо переходит по 100-200 ссылкам на карте дора, и дальше никак не хочет идти. Уже доров 20 у меня таких, у которых в индексе не больше 200 страниц.
Опять же, из за чего такое? Что сделать что бы гугл, ходил по большему количеству станиц.

3) Яндекс - красавела. Он вообще не парится, заходит на дор, смотрит что robots.txt - 404 выдаёт, и просто тупо уходит.
Прокоментируйте эти ситуации.

P.S. это просто я логи наконец то у доров посмотрел =)) Лучше поздно чем никогда)