Какие есть способы чтобы закрыть сайт от индексации?

12
Dmitriy_2014
На сайте с 01.07.2014
Offline
329
#11

kt-life,

Спасибо!

Вот это уже интересней, значит я могу случайно заблокировать через robots.txt, файл htaccess, в настройках админ панели WordPress, возможно через какие то плагины для этого предназначенные.

А вот интересно как бы его назвать тег или свойство <!--NOINDEX--> которое можно указать в исходном коде, если весь сайт обернуть, это тоже может спровоцировать не индексировать сайт поисковиками.

kt-life
На сайте с 25.02.2018
Offline
18
#12
Dmitriy_2014:
kt-life,
А вот интересно как бы его назвать тег или свойство <!--NOINDEX--> которое можно указать в исходном коде, если весь сайт обернуть, это тоже может спровоцировать не индексировать сайт поисковиками.

Тут вопрос скорее не индексации, потому что закрытый в данный "тег" контент все равно индексируется, а вопрос влияния на ранжирования и релевантность документа, потому что закрытый в тег контент не оценивается. Исходя из этого, документ будет ранжироваться только по открытому контенту. Таким образом можно закрывать ненужные для роботов блоки например или части текста, чтобы они случайно не попали в сниппет.

Dmitriy_2014
На сайте с 01.07.2014
Offline
329
#13

kt-life,

Понятно, а вот еще атрибут noffolow для ссылок, который вроде как препятствует переходу по этим ссылкам поисковых роботов и передачи веса страниц. Если весь сайт будет состоять из таких ссылок это тоже может препятствовать индексации сайта.

kt-life
На сайте с 25.02.2018
Offline
18
#14
Dmitriy_2014:
kt-life,

Понятно, а вот еще атрибут noffolow для ссылок, который вроде как препятствует переходу по этим ссылкам поисковых роботов и передачи веса страниц. Если весь сайт будет состоять из таких ссылок это тоже может препятствовать индексации сайта.

Я если честно, в принципе не понимаю причин к столь радикальному запрету :) возможно, если Вы более детально объяснили на примере чем вызвана эта необходимость, было бы проще понять и что-то посоветовать.

Dmitriy_2014
На сайте с 01.07.2014
Offline
329
#15
kt-life:
Я если честно, в принципе не понимаю причин к столь радикальному запрету :) возможно, если Вы более детально объяснили на примере чем вызвана эта необходимость, было бы проще понять и что-то посоветовать.

Ничего такого, просто любознательность :-), у меня складывается впечатление что это какая-то запретная информация и я решил её использовать против кого-то, только почему непонятно. Это же форум тут можно вроде любые вопросы обсуждать. Это обычные технические моменты, которые могут возникнуть на сайте у любого администратора, на вроде борьбы со спамом или с ДОС атаками или забыл, а этим брутфорс атакой и т.д. и т.п.

kt-life
На сайте с 25.02.2018
Offline
18
#16
Dmitriy_2014:
Ничего такого, просто любознательность :-), у меня складывается впечатление что это какая-то запретная информация и я решил её использовать против кого-то, только почему непонятно. Это же форум тут можно вроде любые вопросы обсуждать. Это обычные технические моменты, которые могут возникнуть на сайте у любого администратора, на вроде борьбы со спамом или с ДОС атаками или забыл, а этим брутфорс атакой и т.д. и т.п.

При ddos-атаках, брутфорсе и другими методами атак, применяются совсем другие технические способы и средства защиты, а не полный запрет на индексацию, что при атаках не поможет вовсе ;)

Dmitriy_2014
На сайте с 01.07.2014
Offline
329
#17
kt-life:
При ddos-атаках, брутфорсе и другими методами атак, применяются совсем другие технические способы и средства защиты, а не полный запрет на индексацию, что при атаках не поможет вовсе ;)

Но если у вас перестанет ни с того ни с сего индексироваться ваш веб-сайт, то это тоже не очень маленькая проблема, может даже и наравне с ddos-атаками и брутфорсом который нагружает сервер, а может и хуже.

Вот представите: кто-то взломал ваш сайт, и он перестал индексироваться, допустим вы сменили пароли и устранили дыру. А что же еще мог сделать хакер для блокировки индексации. Самое простое это запретить его в robots.txt, и вот что я хотел узнать собственно а что еще он мог сделать кроме этого. (Чисто теоретически)

kt-life
На сайте с 25.02.2018
Offline
18
#18
Dmitriy_2014:
Но если у вас перестанет ни с того ни с сего индексироваться ваш веб-сайт, то это тоже не очень маленькая проблема, может даже и наравне с ddos-атаками и брутфорсом который нагружает сервер, а может и хуже.

Вот представите: кто-то взломал ваш сайт, и он перестал индексироваться, допустим вы сменили пароли и устранили дыру. А что же еще мог сделать хакер для блокировки индексации. Самое простое это запретить его в robots.txt, и вот что я хотел узнать собственно а что еще он мог сделать кроме этого. (Чисто теоретически)

Не нужно забивать голову лишней информацией, которая в теории может и не пригодиться вовсе, лучше смотрите в сторону улучшения оптимизации и вывода в топ, а по мере надобности изучите эту сторону вопроса, хотя я не думаю что кому-нибудь будет необходимо "ломать" Вас, для вывода Вашего сайта из строя таким способом. В любом случае, если Вами займется определенный круг людей, обезопасить себя полностью Вы не сможете.

Это тоже самое, как взять справочник по болезням и начать искать в нем подходящее под себя заболевание :) пока "Вы не болеете, не нужно искать как лечиться"

Dmitriy_2014
На сайте с 01.07.2014
Offline
329
#19
kt-life:
Не нужно забивать голову лишней информацией, которая в теории может и не пригодиться вовсе, лучше смотрите в сторону улучшения оптимизации и вывода в топ, а по мере надобности изучите эту сторону вопроса, хотя я не думаю что кому-нибудь будет необходимо "ломать" Вас, для вывода Вашего сайта из строя таким способом. В любом случае, если Вами займется определенный круг людей, обезопасить себя полностью Вы не сможете.
Это тоже самое, как взять справочник по болезням и начать искать в нем подходящее под себя заболевание :) пока "Вы не болеете, не нужно искать как лечиться"

Я с вами полностью согласен. Но все-таки это же интересный вопрос.

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий