Спрятать от паука и от людей

12
KC
На сайте с 09.08.2012
Offline
82
639

Здравствуйте.

Хочу запретить индексировать поисковыми системами некоторых страниц и папок. Понятное дело, что это можно сделать через robots.txt и спать спокойно, но ведь всякий любопытный человек может просмотреть этот файл и самостоятельно полазить по этим папкам. Есть ли способ закрыть папки и страницы для поисковых систем и одновременно спрятать то, что закрыта от любознательных? И еще такой вопрос. Поисковый робот может как-то просканировать папки и файлы на хостинге, если на них не ведут ссылки?

Спасибо.

Proofer
На сайте с 04.11.2011
Offline
291
#1

KatrinCa, а что мешает поставить на них пароль?

igrinov
На сайте с 09.01.2009
Offline
134
#2

KatrinCa, если спрятать вообще от пауков и людей, то проще не выкладывать их на хостинг :)

Персональный VPN/Socks сервер (https://cp.inferno.name/aff.php?aff=2419)
KC
На сайте с 09.08.2012
Offline
82
#3
Proofer:
KatrinCa, а что мешает поставить на них пароль?

Это крайние меры на ровне с блокировкой всех кроме определенных IP при этом структуру мы не скроем. Интересует возможность реализации именно поставленной задачи.

igrinov:
KatrinCa, если спрятать вообще от пауков и людей, то проще не выкладывать их на хостинг :)

А еще проще вообще ничего не делать :-) Файлы системные и ценности для поисковых систем и людей не несут, но необходимы для работы.

igrinov
На сайте с 09.01.2009
Offline
134
#4
KatrinCa:
Файлы системные и ценности для поисковых систем и людей не несут

если файлы не несут ценности для людей, то зачем же их прятать? или все же есть в них ценность? дайте больше информации если хотите получить конкретные ответы для вашей ситуации

Denxx
На сайте с 30.01.2011
Offline
49
#5

создай в корне папки файл index.html с содержанием

<html><body bgcolor="#FFFFFF"></body></html>

Папку скрой от индексации.

Посмотреть содержимое можно будет только по прямой ссылке, если не будешь их палить, никто не узнает что у тебя там в папках.

igrinov
На сайте с 09.01.2009
Offline
134
#6
Denxx:
создай в корне папки файл index.html с содержанием

Папку скрой от индексации.
Посмотреть содержимое можно будет только по прямой ссылке, если не будешь их палить, никто не узнает что у тебя там в папках.

если смотреть в этом направлении то можно просто в эту папку закинуть файл .htaccess со следующим содержимым

Options -Indexes
тогда и файл index.html создавать не надо
KC
На сайте с 09.08.2012
Offline
82
#7
igrinov:
если файлы не несут ценности для людей, то зачем же их прятать? или все же есть в них ценность? дайте больше информации если хотите получить конкретные ответы для вашей ситуации

Ценность в них "но необходимы для работы". Не понимаю, что даст вам дополнительная информация, чтобы ответить на вопрос, можно ли запретить к индексации некоторые файлы, но не через robots.txt, чтобы не раскрывать структуру файлов. Возможно я понимаю к чему вы ведете, закрывайте страницы обычным методом, а системные файлы шифруйте или переносите выше http папки на хостинге, но вопрос задан иначе.

KC
На сайте с 09.08.2012
Offline
82
#8

Метод с index.html или index.php хороший и априори такой файл забрасывается в ту же папку images. Так как хостинги настроены по разному и могут выдать полный список всех файлов. Но мы так не решаем главный вопрос, а именно в http://domen/papka папка с именем papka будет видна, что она вообще есть.

igrinov
На сайте с 09.01.2009
Offline
134
#9
KatrinCa:
Но мы так не решаем главный вопрос, а именно в http://domen/papka папка с именем papka будет видна, что она вообще есть.

запретите папку с именем papka для индексации, а в ней создайте еще одну papka1 индексироваться она не будет и в файле роботс ее тоже не будет

KatrinCa:
Поисковый робот может как-то просканировать папки и файлы на хостинге, если на них не ведут ссылки?

да, может, если они не запрещены к индексации

KC
На сайте с 09.08.2012
Offline
82
#10
igrinov:
запретите папку с именем papka для индексации, а в ней создайте еще одну papka1 индексироваться она не будет и в файле роботс ее тоже не будет

Спасибо. На данный момент это самое лучшее решение. Появятся еще идеи пишите, буду весьма признательна :-)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий