"Левые" обращения к серверу и как с этим бороться.

Самое надежное - не использовать "публичные" скрипты. Или хотя бы прятать их в такие папки, на которые у ботов фантазии не хватит (например,nimdaymphp).

Это сложно. У меня сегодня даже Гугль искал вслепую файл

которого у меня отродясь не было. Вроде sitemap-генератор какой-то :)

поисковых ботов случайно так не побаньте))))

не стесняюсь банить такие запросы, можно их обнаружить парсером логов по regexp-у плюс четко настроить Snort и файрвол, главное написать pattern (шаблон) по которому их находить в логах и периодически обновлять его, еще стоит подточить .htaccess либо httpd.conf на предмет дропа левых запросов и позакрывать доступ на админки для не-админских айпишников

Заметил, что граберы часто приходят с ip Keyweb. В этом датацентре есть что-нибудь, что может быть использовано обычными людьми, или можно всю сетку побанить?

Кста, на несуществующих страницах лучше отдавать 404

Не обязательно это кто-то вручную специально для вас.

Может затрояненый комп, каких полно, обычного юзера.

Файрволить.

Ничего делать не надо. Просто не обращать внимания.

Причем на очень легкую html страничку!