Те кто с блокировщиками - те более молодые (и бедные) юзеры, но при этом более интернет продвинутые, они кроме вашего сайта могут загуглить и найти более выгодное предложение.
Jet D., после успешного уже закончившегося переноса доменов из старой панели в новую - в старой домены остались. Косяк?
tanir23, саму на себя во фрейме не пробовал, но просто с страницы 1 на 2, с 2 на 3 и так до бесконечности - бесконечно и завиливал обращениями гугл и некоторые хитроботы яндекса, которые ходят как браузер с яндексовых ипов.
хитроботы передают реферер правильно, они и с яндекса по ключам норм переходят.
tanir23, сейчас хитроботы не жмут умышленно на кнопки и формы.
зацикливание от фрейма особо нету ни в браузерах, ни у большинства ботов, гуглобот индексатор скорее вам сервер повалит таким зацикливанием, я проверял, он тоже поддерживает фреймы.
plab, это просто нововведение, нельзя однозначно сказать плохое оно или хорошее. доры на amp страницах в буржуйнете на ура делают и не плачут, находя в этом и немалые плюсы.
Twickbot, собиралось все что физически можно было собрать: whois, юзерагент, язык браузера и все параметры браузера которые можно собрать на php и js, включая доступные расширения, размеры окна, монитора, ставились куки, етэг, ластмодифиед, вся цепочка ip (кроме remote adr еще х-форвардер и все остальные говорящие о прокси), весь лог и путь посещений, инфа был ли сделан клик и в какой области страницы он был сделан, сколько времени провел на странице, сработал ли от его клика кликандер, была ли мобильная подписка, скрытые от юзера ссылки по которым может пройти только бот и еще куча всего... пару месяцев логирования, миллионы строк логов.
И в итоге однозначно пришел к выводу, что статический анализ всех этих данных ничего определить не может, любой ip "домашнего" российского инет провайдера (и набор REMOTE_ADDR + HTTP_CLIENT_IP, HTTP_FORWARDED etc) будет признан как ботом, совершающим аномальные автоматические действия, так и человеком, совершающим осмысленные и живые действия.
Однозначно можно смело считать человеком тех, кто ходит оперой мини с турбо режимами.
Кто те полуботы ходящие в больших количествах на сайт это уже решайте сами, в зависимости от своей веры в разные теории заговора, моя религия и субъективные наблюдения подсказывают, что эти боты связаны с яндексом, мейлом, ркн, касперским, и прочими "спасителями всея рунета от мирового зла" которых развелось как собак нерезанных.
Теперь моя лучшая защита от автоматизированных ботов, это примерно такая форма:
<form action="/post.php" method="post"> <button type="submit" class="btn btn-success">Я не робот!</button> <input type="hidden" name="id" value="testrandomid"> тут еще набор скрытых стилями полей против хрумера </form>
при этом она должна занимать маленькую площадь пространства страницы, чтоб минимизировать случайный рандомный клик по странице. пробивается (т.е. пытается пробиться) такая защита только хрумером, но набор скрытых полей решает эту проблему на 99%, да и попадание хрумера на скрытый контент (рекламу) в общем-то не вредит.
Да тизеры не повесить будет. Но текст о том что малышева советует + ссылка на реальный платник и рекламу и в этих amp страницах никто не запрещает размещать )))
Просто эти нововведения и адблоки приведут к тому, что реклама станет частью контента и ее уже будет никак не вырезать.
Про клоакинг по ip, я тоже себе пытался пилить клоакинг с базой плохих/хороших ипов. Но потом на анализе больших подробнейших собранных объемов логов и параметров понял что база получилась ниочем.
В итоге получил огромное количество ипов, в особенности российских, в особенности билайна и мтс, особенно мобильных, которые вели себя то как бот, то как человек делающий подписки.
Обычных поисковых ботов по whois собрать не проблема. А именно Яндексовых и прочих российских хитроботов, непонятно на кого работающих не собрать.
Для себя нашел идеальный в плане фильтрации вариант - просто form с button (размеров как для людей, а не занимающий большую часть экрана) отправляющий пост запрос. Если нажал, значит юзер и ему можно показать всякий стрем.
При этом полумера, типа онклик на любую область экрана или прозрачного дива 100%х100% экрана не спасает, хитроботы делают рандомные клики в разных местах сайта.
JungleBox, ловить ботов по ip ))) удачи в этом бесполезном деле.
globalmoney, столько интересного узнал из этой темы. А как спамхаус технически может повлиять на днс? есть интернет провайдеры которые не будут обращаться к заблокированным днс? 0_о
