Джава или тхт?

Закрытся для чего? что бы в выдаче не были? Тогда txt хватит. :) Месяца два назад по ошибке один очень известный сайт при переносе с тестовой площадки перенес вместе с txt. Вылетел из индекса уже через 4 часа. :) Правда и вернулся потом быстро. :)

Речь о полном закрытии.

То есть даже чтобы в логах не было.

Может вопрос немного не по теме, да и странный он у меня - просто любопытно :) А можно ли в robots.txt закрыть сам robots.txt? :) Будет ли читаться дальнейшая часть роботса? :)

Сам понимаю, вопрос странный... наверное переработал :)

Не понял.. В чьих логах? В ваших? Ну он там иногда будет все-таки. По крайней мере D-робот. Например если на сайт извне стоят ссылки.

Насчет тотального закрытия - даже не знаю. :)) Выдавать Яндексу 404 или 403.

epr, Смысла нет - поисковики не индексируют этот файл. :)

Чтоб надёжно - только серверная реализация. Или ПХП (или чё там есть ещё) или Реврайт.

Посмотри он на форбиддены и нотфаунды и свалит по идее.

Нет, он продолжит. Я не хочу по IP закрываться.

Нежелательно.

ТХТ хорошь, но он может не послушаться. Просто 2 запроса в секунду - слишком даже для моей ангельской выдержки.

Я не хочу, чтобы кто то отлуп из пользователей получил.