как забанить yahoo и msn

B

5

bakker

30 декабря 2005, 11:42

1180

подскажите как забанить yahoo и msn с помощью .htaccess

по их рефам

153

Коля Дубр

30 декабря 2005, 19:34

#1

Банить надо публично, с размахом, чтоб другим неповадно было -)

А почему нельзя в robots.txt просто закрыть?

Если очень хочется через htaccess, используйте mod_rewrite, что-то вроде этого (спьяну могу накосячить, это общая мысль, а не рабочий пример) :

RewriteCond %{HTTP_USER_AGENT} ^msnbot.*

^.*$ [F]

Как-то так. Вот мануал:

Разрабатываю общую шину (http://habrahabr.ru/company/floxim/blog/268467/) помаленьку. ...а еще у меня есть бложек (http://www.blogovo.ru/).

eTarget 2011:Панельная дискуссия «Стратегия eTarget 2011: Круглый стол Могут ли «плохие» входящие

B

5

bakker

31 декабря 2005, 06:28

#2

я добавил такой robots на несколько сайтов google выкинул из выдачи несколько сайтов с других новую ссылку в течении недели не проиндексировал

User-agent: *

Disallow: /

Usage-agent: GoogleBot

Disallow:

A

82

Asher

4 января 2006, 00:24

#3

2Коля Дубр: все-таки накосячил :)

RewriteCond %{HTTP_USER_AGENT} ^.*Slurp.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*msnbot.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*googlebot.* [NC,OR]

RewriteCond %{HTTP_USER_AGENT} ^.*Yandex.* [NC,OR]

...

RewriteCond %{HTTP_USER_AGENT} ^.*forum.searchengines.ru.* [NC] :)

RewriteRule ^(.*)$ - [F]

и так далее по образцу и подобию (последняя директива без OR)