У вас заливаются не все страницы, потому что хостинг режет вам ресурсы, пару раз вы нагрузили серв, в след раз принимаются меры, например исполнение одного процесса не более 30 секунд.
Ты главное причину укажу для чего это тебе требуется, чтобы уж наверняка! :)))
http://www.egorych.com/seo/13-sposobov-spryatat-tekst-na-veb-stranitse/
онотолей роздавит авто своим интеллектом
Вот так авитоминоз начинает поражать людей.
А иногда ещё случается, что в ап выпадают страницы, которые были выставлены быстроботом, но за место них приходят новые :)
А чего им возвращаться то?
адалт-траф, вот на трафик лил, там до 25 уе выходит с кила, но там тока русский, а вот остатки от этого трафика туда и сливал
тоже бот..
Роботса нету, за его ненужностью. А по поводу того, что он не посещает новые ресурсы, так это неправда, всегда посещал, а тут заглох :)