Используйте либо 1 либо 2, вместе бессмысленно
User-agent: Yandex Disallow: Order: Go to me!
В роботсе не запрещайте старые страницы
Типа *антекризесное* повышение частотности запросов, бгг
Конечно отсутствуют, откуда им там взяцо? http://www.theregister.co.uk/2009/04/16/new_ibotnet_analysis/ ;D
Даун! Даун! Даун! ;D
Может каку на сайте потереть, да песьмо покаянное чиркнут в Гугел?
Предлагаю слово "кризис" считать нецензурным, сколько можно-то уже?
Может боту где-нибудь попалась ссылка с ID чьейто сессии?
Отличный бюджетный вариант потешить паранойю,
только некоторых все равно не спасет ;D