Какие есть способы чтобы закрыть сайт от индексации?

12
Dmitriy_2014
На сайте с 01.07.2014
Offline
276
622

Всем привет!

Подскажите какие есть способы, закрывающие сайт от индексации поисковых систем. А по сути полностью блокирующие индексирование вашего сайта со стороны поисковиков. Как это могут сделать недруги, так сказать со стороны недоброжелателей, получивших доступ к сайту.

Я знаю только один способ – это прописать директиву в robots.txt с корнем сайта /, и тогда поисковые роботы не должны просматривать ваш сайт (но это не точно). Еще вроде есть настройка в виде галочки в CMS WordPress с просьбой не индексировать сайт. А есть ли еще какие-то хитрые способы?

Заранее всем спасибо за ответы!

altezzik
На сайте с 06.11.2011
Offline
247
#1

А вам зачем?

Vladimir SEO
На сайте с 19.10.2011
Offline
1740
#2

валом -например мета тег ноиндекс , на серваке можно запретить роботов гугла в вебмастере удалить сайт

---------- Добавлено 28.03.2018 в 13:03 ----------

altezzik:
А вам зачем?

ну как -он не продвинул сайт и клиент не хочет платить - теперь жаждет мести в виде "наложить под дверь и гавном ручки и двери облепить"

Эксперт по продуктам Google https://support.google.com/profile/58734375 ᐈ Продвижение коммерческих сайтов https://kulinenko.com/
Dmitriy_2014
На сайте с 01.07.2014
Offline
276
#3

altezzik, xVOVAx,

Это не для каких-то сверхсекретных атак и тем более я не занимаюсь продвижением или обслуживанием клиентов, а для информированности в целях безопасности и возможно сам себе где-то что-то прописал и забыл.

kt-life
На сайте с 25.02.2018
Offline
18
#4

В таком случае на сервере делаете не blacklist для запрета доступа к сайту по определенным ip, а делаете whitelist для нужных ip, остальные под запрет. Или Вам только от индексации закрыть его нужно, а не от всех? Если от индексации, как говорилось выше, файл robots или файл htaccess

Dmitriy_2014
На сайте с 01.07.2014
Offline
276
#5

kt-life,

Меня интересует больше только вопрос про индексацию и не для того чтобы закрыть, а как бы это сказать – для примера: допустим прошел месяц, а новые материалы перестали индексироваться, в чем может быть причина, что не так мог сделать я, что могли сделать допустим хакеры-шутники. Поэтому меня и интересуют какие бывают все способы.

Alex Klo
На сайте с 15.06.2006
Offline
304
#6
Dmitriy_2014:
Поэтому меня и интересуют какие бывают все способы.

есть только один способ - и он универсальный - нерадивый администратор сайта.

Проверка и мониторинг позиций сайта ( http://www.topvisor.ru/?inv=1520 ) Продвигаю сайты http://climat-nw.ru/conditioner-installation/ http://www.aircom-spb.ru/service/montaj/
fliger
На сайте с 17.09.2015
Offline
107
#7
Dmitriy_2014:
Как это могут сделать недруги, так сказать со стороны недоброжелателей, получивших доступ к сайту.

...а для информированности в целях безопасности...

...прошел месяц, а новые материалы перестали индексироваться, в чем может быть причина, что не так мог сделать я, что могли сделать допустим хакеры-шутники...

"В огороде бузина, а в Киеве дядька".

Сегодня что? 1 апреля?

Dmitriy_2014
На сайте с 01.07.2014
Offline
276
#8
fliger:
"В огороде бузина, а в Киеве дядька".
Сегодня что? 1 апреля?

Это все к примеру, не конкретно, для абстракции. А первое апреля через три дня, кстати! Быстрей бы снег растаял.

Расскажите лучше про способ через файл htaccess – это файл настроек от веб сервера Apache, как я понимаю, он для создания редиректов и других настроек.

kt-life
На сайте с 25.02.2018
Offline
18
#9
Dmitriy_2014:

Расскажите лучше про способ через файл htaccess – это файл настроек от веб сервера Apache, как я понимаю, он для создания редиректов и других настроек.

SetEnvIfNoCase User-Agent "^Googlebot" search_bot

SetEnvIfNoCase User-Agent "^Yandex" search_bot

для каждой поисковой системы прописываете свою строку

Lazy Badger
На сайте с 14.06.2017
Offline
231
#10
Dmitriy_2014:
Расскажите лучше про способ через файл htaccess

Элементарно - "никак". Запрет индексации - это robots, RTFM

Производство жести методом непрерывного отжига
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий