Форум Сайтостроение Веб-строительство

Запрет индексации сайта .htaccess

Hixon10
На сайте с 21.08.2010
Offline
125
Hixon10
2487

Добрый день. Требуется запретить индексировать сайт, который создан для разработки других сайтов с помощью htaccess. В интернете нашёл 2 варианта: 

RewriteEngine On

RewriteCond %{REQUEST_URI} !^/403.php$

RewriteCond %{HTTP_USER_AGENT} .*Googlebot*

RewriteCond %{HTTP_USER_AGENT} .*Yandex*

RewriteRule .* /403.php [F] 


RewriteEngine on

RewriteCond %{HTTP_USER_AGENT} ^Google.* [OR]

RewriteCond %{HTTP_USER_AGENT} ^Yandex.*

RewriteRule ^.*$ – [F]

Какой-то вариант из этих рабочий? Если нет, то предложите, пож-та, рабочий вариант.

Спасибо.

Веду свой невзрачный блог (http://hixon.ru/).
[Удален]
#1

А почему Disallow: / в robots.txt не устраивает?

S
На сайте с 28.10.2005
Offline
319
semenov
#2

Второй, но лучше в роботс

P
На сайте с 08.11.2009
Offline
28
paradoxtm
#3
Freon:
А почему Disallow: / в robots.txt не устраивает?

Так он, вроде, просто в выдачу не выдает данные. А сайт индексируется.

Или путаю?

[Удален]
#4
paradoxtm:
Так он, вроде, просто в выдачу не выдает данные. А сайт индексируется.
Или путаю?

Так Вам что нужно, чтобы робот по сайту не ходил или в индексе его не было? Если первое, то боты всё-равно законспирируются и заглянут с другим user-agent, ip и т.д. Замучаетесь их вычислять. Если второе, то robots.txt достаточно. В выдаче сайтов не будет. На счёт внутреннего индекса - никто наверняка не скажет. Скорее всего для себя поисковики что-то запомнят.

Если хотите гарантированно - открывайте доступ только для известных ip или по паролю.

Добавить свой сайт в В Яндекс Вебмастере появится Инструмент проверки мобильных страниц
Hixon10
На сайте с 21.08.2010
Offline
125
Hixon10
#5

Спасибо за идею, открою доступ на сайт только своим Ипам. Нужно, чтобы контент был уникальным для пс, поэтому открытие сайта для моих адресов идеально подходит.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий