У меня точно такая проблема. google проиндексировал только три мои страницы и показывает только URL сайта. Но так как сайт еще неготов, тоисть имеются слепые URL, то я думаю что в этом и есть проблема. По мойму если google находит слишком много 404 ошибок или несуществуещих страниц то он просто незаносит сайт в базу. Или заносит но невыдает в поиске.
да примерно так и сделано. А слышали вы что Пауки вполне хорошо маскируются под посетителей, и могут просканировать все дублирующиеся страницы. Так что robots.txt в данном случае не дает гарантий. Что вы по этому поводу?
а что google ??? тоже клоакинг.
хорошо но так ведь небудет никакого ефекта от Doorways если на них небудут ввести ссылки. как быть в этом случае?
