Забанить Google

12
M
На сайте с 11.06.2007
Offline
120
1626

Здравствуйте. Как можно забанить Гугла, чтоб мой сайт вообще не сканировал? В robots.txt я его закрыл, но он все равно сканирует сайт. Я так понимаю это нужно в .htaccess делать. Что там нужно прописать, чтоб сразу закрыть доступ всем ботам Гугла, а не прописывать по одному ip.

Mikescan
На сайте с 09.07.2002
Offline
95
#1

User-agent: Googlebot

Disallow: /

Красивые домены в аренду. Обращайтесь в личные сообщения.
angr
На сайте с 11.05.2006
Offline
413
#2

у меня тоже интересная ситуация произошла с гуглом...

Существовал заброшенный форум (phpbb) на поддомене основного сайта, был настроен на премодерацию, так что постов спамных не было, в профилях пользователей убраны строки с адресом сайта, но по любому автоматом за два года зарегистрировалось более 18к зверей.

В индексе Яндекса находилось ~160 страниц, в Гугле до сотни.

Так вот - с месяц назад решил полностью закрыть его от индексации, так как заметил переходы на него по именам пользователей (использовали порно имена).

13 февраля в роботсе прописал запрет для всех поисковиков, через несколько дней убрал все ссылки с основного сайта на форум.

На сегодняшний день в индексе Яндекса - 1 страница (морда) что и понятно, а вот в индексе Гугла - 22 500 страниц!

И вот что это означает - хоть стреляйте, не понимаю.

P.S. рунет...

Требуется СЕО-Специалист в Кишиневе, в офис. ()
[Удален]
#3

в .htaccess пропиши

<IfModule mod_setenvif.c>

SetEnvIf User-Agent “Googlebot$” x_tag=yes

order allow,deny

allow from all

deny from env= x_tag

</IfModule>

M
На сайте с 11.06.2007
Offline
120
#4
DarkDante:
в .htaccess пропиши

<IfModule mod_setenvif.c>
SetEnvIf User-Agent “Googlebot$” x_tag=yes

order allow,deny
allow from all
deny from env= x_tag
</IfModule>

А эта штука точно только для гугла? Просто я только Гугл забанить хочу, а остальные поисковики мне нужны :-)) Sorry за ламерский вопрос...

Mikescan
На сайте с 09.07.2002
Offline
95
#5

angr, Google не всегда показывает все проиндексированное.

[Удален]
#6

можно в суд подать на него....))) уже кто то из голивуда делал:) помогло, забанен.

angr
На сайте с 11.05.2006
Offline
413
#7
Mikescan:
Google не всегда показывает все проиндексированное.

я это прекрасно знаю, вопрос в том почему он вдруг вывалил такое количество страниц в индекс именно после полного запрета индексации поддомена?

M
На сайте с 11.06.2007
Offline
120
#8
DarkDante:
в .htaccess пропиши

<IfModule mod_setenvif.c>
SetEnvIf User-Agent “Googlebot$” x_tag=yes

order allow,deny
allow from all
deny from env= x_tag
</IfModule>

Прописал, но Гугл всеравно гуляет и, сука, сервер грузит

mamonic добавил 14.03.2009 в 14:51

Mikescan:
User-agent: Googlebot
Disallow: /

Это тоже сделал

SS
На сайте с 03.05.2008
Offline
101
#9

попробуй через панель вебмастера удалить сайт из результатов выдачи.

должно сработать.

E
На сайте с 22.09.2007
Offline
22
#10

mamonic, есть еще один вариант с помошью .htaccess, у меня работает без проблем:


<IfModule mod_rewrite.c>
RewriteEngine On
RewriteBase /
RewriteCond %{HTTP_USER_AGENT} Googlebot
RewriteRule .* - [F,L]
</IfModule>

Если не работает, значит mod_rewrite отсутствует или не включен.

"Imagination is more important than knowledge" Albert Einstein
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий