Вы сначала уточните, про какой именно вид ботов идет речь.
Любые. Яндекс, гугл, бинг, ахрефс, чекеры всякие, пинг админы и так далее.
Абсолютно все.
