- Поисковые системы
- Практика оптимизации
- Трафик для сайтов
- Монетизация сайтов
- Сайтостроение
- Социальный Маркетинг
- Общение профессионалов
- Биржа и продажа
- Финансовые объявления
- Работа на постоянной основе
- Сайты - покупка, продажа
- Соцсети: страницы, группы, приложения
- Сайты без доменов
- Трафик, тизерная и баннерная реклама
- Продажа, оценка, регистрация доменов
- Ссылки - обмен, покупка, продажа
- Программы и скрипты
- Размещение статей
- Инфопродукты
- Прочие цифровые товары
- Работа и услуги для вебмастера
- Оптимизация, продвижение и аудит
- Ведение рекламных кампаний
- Услуги в области SMM
- Программирование
- Администрирование серверов и сайтов
- Прокси, ВПН, анонимайзеры, IP
- Платное обучение, вебинары
- Регистрация в каталогах
- Копирайтинг, переводы
- Дизайн
- Usability: консультации и аудит
- Изготовление сайтов
- Наполнение сайтов
- Прочие услуги
- Не про работу
Тренды маркетинга в 2024 году: мобильные продажи, углубленная аналитика и ИИ
Экспертная оценка Адмитад
Оксана Мамчуева
Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий
Бот представляется "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)" и использует прокси сервера. Как от него избавиться?
__________________Все посетители живые, не боты. (http://livesurf.ru/promo/80271)
Бот представляется "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)" и использует прокси сервера. Как от него избавиться?
Т.е. забанить всех с браузера?)
А фильтровать можно даже через nginx.
Т.е. забанить всех с браузера?)
Всех, с таким юзерагентом.
Sower, Точнее, всех с браузером... Firefox.
Sower, Точнее, всех с браузером... Firefox.
Там кроме браузера, в скобках, ни каких дополнительных параметров нет?
Sower, Мда... У вашего бразера какой юзер-агент? У моей мозиллы по дефолту именно такой. Не задавайте таких вопросов, а то я в людях разочаруюсь ;).
Sower, Мда... У вашего бразера какой юзер-агент?
"Mozilla/5.0 (Windows; U; Windows NT 5.1; rv:1.9.2.12)"
Отличий нет?
При посещаемости более 5K живых посетителей, 99% от числа общих обращений к страницам на сервере, с таким юзерагентом как я указал выше, идёт с одних и тех же прокси адресов со скоростью несколько страниц в секунду.
Допускаю, что могут постадать еденичные посетители (капля в море), что не принципеально.
Вопрос в другом, возможно ли банить посетителей по точному вхождению юзерагента.
одних и тех же прокси адресов со скоростью несколько страниц в секунду.
Побанить прокси не судьба?
Вопрос в другом, возможно ли банить посетителей по точному вхождению юзерагента.
Я уже написал, что можно, если используется nginx к примеру.
В NGINX есть такая возможность забанить по юзерагенту.
Но может лучше банить бота не по юзерагенту, а по факту превышения им лимита на количестово запросов, коннектов?
Sower, Мда... У вашего бразера какой юзер-агент? У моей мозиллы по дефолту именно такой. Не задавайте таких вопросов, а то я в людях разочаруюсь ;).
Можно как Himiko сказал, можно банально грепать и в табличку ipfw или чегото другого..
На подобии:
cat /var/log/nginx-access.log | grep "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)" | awk '{print $1}' | cut -d. -f1 -f2 -f3 | sort -n | uniq -c | sort -n | awk '{if ($1>10){print "ipfw table 1 add "$2".0/24"}}' | sh
--
или без if ($1>10), если всех подряд, или без .0/24.. было бы желание :)