Спрятать от паука и от людей

KatrinCa, зачем такой изврат? дропбокс поставь себе и не насилуй сайт.

Если правильно понимаю, то речь идет про использование shareable link? Думаю перенастройка системы для работы с Dropbox займет больше времени. У вас были опыты над объединением клиентской (видимой) части на хостинге с удаленной системной частью на Dropbox или предложение теоретическое?

Наивный какой :)

Плюнь в глаз тому, кто тебе такую глупость сказал. А ещё лучше внимательно читай мануалы.

Правильных и надёжных способа только 2:

1. Не выкладывать на хостинг (вариант: класть вне доступа по http)

2. Закрыть каталоги паролем.

Как грубо. Если вы о том, что к robots.txt поисковые системы относятся как к рекомендуемому и не дают 100% гарантии, то здесь все в курсе и мануалы читают хорошо. Если не поняли сарказм, то удивляюсь, как можно вообще совмещать "спать спокойно" и поисковая система.

За ваши варианты спасибо.