Форум Практика оптимизации Doorways & Cloaking

Запрет поисковых ботов через .htaccess (part 2)

[Удален]
1016

Вижу в инете 3 варианта записей:

1) RewriteCond %{HTTP_USER_AGENT} ^Alexibot [OR]

2) RewriteCond %{HTTP_USER_AGENT} ^Alexibot.* [OR]

3) RewriteCond %{HTTP_USER_AGENT} .*Alexibot.* [OR]

И на самом сайте http://htaccess.net.ru, такой вариант:

RewriteCond %{HTTP_USER_AGENT} !^Alexibot.* [NC,OR]

Вопрос: какой из них рабочий и самый полный/правильный? Или на каждом сервере будет свой код ? Чем можно проверить правильность работы таких записей ?

FL
На сайте с 30.12.2008
Offline
23
FaLL3N
#1

^ = начало строки (верно: 1) Alexibot )

.* = любой символ (верно: 2) Alexibot, 2) Alexibot1234, 2) Alexibot 123..., 3) 123Alexibot123 )

это условие (!^Alexibot.*) означает: для любого ЮА, кроме всего что начинается на Alexibot


Чем можно проверить правильность работы таких записей ?

Любым скриптом/программой которая поддерживает подмену ЮА

Я бы делал так:


RewriteCond %{HTTP_USER_AGENT} .*Alexibot.*
RewriteRule .* http://nahuy.com [L]

Но, таким способом ты не отсеешь ботов которые маскируются под реальных пользователей, тут нужен более глубокий анализ

KillBot - новые методы Яндекс.Метрика улучшает алгоритм определения SEO: почему мы делаем

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий