У меня главная проблема от ботов, которые идут из ПС. С прямыми заходами я сам справился.
Прежде чем передавать данные к счетчику, напишите:
1)Как вы отличите бота, который перешел из ПС?
2)Как вы его заблокируете? Там же 1000 разных IP и сотни AS сетей.
В том, что не возможно отличить бота от юзера через Cloudflare. Можно только по кривым ключам, слишком высокому CTR, вебвизору и другим вещам, которые нельзя на автомате проверять.
Вы напишите в двух словах или хотя бы принцип по которому вы отфильтруете, и я вам метрику скину и заплачу сколько нужно. Просто какой смысл терять мое и ваше время, если у вас в конечном итоге ничего не выйдет.
Просто выдайте гостевой доступ. Ваше время я не займу, предоставлю правила на основе метрики и вы попробуете, в замен ничего не прошу)
С ростелекома еще куча разных сетей, со всех регионов РФ.
Боты в основном идут на список определенных страниц блога (сайт коммерческий), около 30. На популярные у ботов в среднем (50-60) визитов в сутки, на какие то 5-15. Бывает на какие то страницы перестают ходить, начинают идти на другие, потом возвращаются. Их логику я понять не могу.
Причем если на популярную у ботов страницу поставить капчу, то все равно добьют среднее за последние дни количество визитов, обходя капчу. Т.е терять ресурсы обходя капчу видимо не затрудняет.
Причем тут прямые заходы? Я кажется несколько раз уже писал, что боты идут из поиска Яндекса и Гугла.
Даже если якобы с поиска, в чем проблема это фильтрануть? Покажите метрику, пока мы играем с воздухом и догадками. (я предложу Вам варианты пути решения проблемы, сайт Ваш не съем).
Если внимательно посмотреть метрику, с Ростелекома идут не только из этой сети, есть еще 2 сети, одна прям называется Краснодар. Эти боты идут на определенный URL`ы и каждый день посещают одно и тоже, делаете фильтровку в метрике (прямые заходы, местоположение краснодарский край, можете еще отказы добавить, что у Вас получилось? Покажите скриншот?)Тоже самое с другими сетями, ну покажите метрику, на крайний случай в напишите лично (не кусаюсь) и я гляну, подскажу.
Теперь анализируйте эти сети, где хостинги, где провайдеры. Потом анализируйте метрику, отказы и другие данные. Я же Вам условно не дам набор правил, который будет идеален для всех. Да есть общие гайды, общий набор. Но условно: Вы блочите бегет, а на этом бегете у Вас сео сервис, которыми Вы пользуетесь. Тоже самое можно сказать про платежные системы. А крупных провайдеров и не нужно блокировать полностью, изучите метрику с вебвизором и поймете куда ходят боты крупных провайдеров.
Все автоматизировано и не рандомно, у всего есть свой порядок, изучайте свой сайт.
Хотите помощи? Бесплатно? Дайте больше данных, сайт в студию, открытый доступ к метрике, Вам подскажут. То что Вы нашли 100 ASN спамных, толку то?Вы не знаете какими правилами их блокировать, а мы не знаем что за ресурс у Вас и какой вид ботов.
Кто в здравом уме будет тратить время на анализ Вашего сайта и логов - бесплатно? Только Вы. Поэтому изучайте форум. Уникальной таблетки для всех нет.Все ломается, все обходится. Сегодня заблокали одних, завтра пришли другие. Это бизнес.
вот посмотрите.. гугл и янд...
совершенно разные выдачи.. гугла ни о чем... янд сразу то что нужно в первых строчках...
я довольно быстро нашел нужные страницы о родственнике...
В mail.ru поищите, я без шуток (там режим соц.сети был вроде). А в Bing можно искать данные по ФИО, можно эксель файлы интересные найти)
Подскажите, можно ли прикрутить какую то дополнительную проверку в CF на бесплатном тарифе.
Все проверки Cloudflare ПФ боты достаточно легко проходят..., самая эффективная Interactive Challenge пропускает 12-15%.
На платном тарифе точно можно сделать так, у меня реализовано две капчи (гугл, потом клауда) на некоторых проектах.На бесплатном скорее всего тоже можно, условно сделать через PHP проверку только в обратку, условно сначала капча клауда, потом проверять редирект (у клауда есть URL который после успешного решения появляется), и вот на этом этапе отловить переход и выводить гугл капчу. Но это только теория.Лучше конечно разобраться в Ваших правилах и предложить другие варианты защиты тем же клаудом.
Боты из поиска смотрятся по анализу метрики и логов сайта - сопоставляете отказы, сети, вебвизор и блочите.
Какой смысл тогда в вашем предыдущем сообщении? Типа: я знаю способ, но никому-ничего об этом не скажу, сами мучайтесь.
Сделайте первый шаг, внесите что то полезное, возможно и другие подключаться - общими силами какое то эффективное решение получится сделать.
Я в ноябре 2022, когда озадачился борьбой с ботами, нашел на vc инструкцию от Зимина по настройке CF, начал на нее ссылки тут отставлять, после этого уже появились темы по настройке CF.
До этого тут на форуме многие советовали настроить CF, но как это сделать самому никто, никакого примера не оставлял.
Потом это растаскивается под видом уникального продукта другими людьми и все, труд обесценивается. Здесь как минимум на форуме есть три ветки по ботам, клауд и не клауд, все блочится на анлизе данных, почитайте ветки полностью, да это долго и скучно, но если хотите сами обучиться, то так.
Итак, у ISPmanager очередной приступ жадности. Терпеть уже это не хочется - за нормальный VPS я плачу 600р в месяц, а за никчемную панель уже больше 50% от этого - 350р.
Отличная альтернатива - и бесплатная - FastPanel. Но простого способа миграции не существует. Или я не прав? Найти не удалось. Может кто поделится рабочими способами? Я пока вижу для себя только один: заводим второй VPS, запускаем там FP, настраиваем, переносим сайт(ы) на тестовый домен, проверяем, перекидываем боевые домены и прихлопываем счастливо VPS и ISP...
Но может существуют скрипты какие для упрощения процесса?
Не знаю предлагали или нет, но в чем проблема написать в ТП Fastpanel у них же свой хост, они делают бесплатный перенос. По крайней мере так было очень давно. Но все равно после переноса нужно все проверять.У меня есть проекты и на ISP и на FastPanel - конечно для меня ISP лучше, вкус у всех разный.
Цена у ISP нормальная, если судить так: ничего не падает, сайт себя окупает. Но вот почему если лицензия на 10 сайтов, то я могу использовать ее внутри одного айпи? Условно у меня есть 1 сайт на 1 VPS и туда кидать второй сайт из-за нагрузки и в целях безопасности не вариант. Остается 9 сайтов по лицензии, к которым я не могу подключить свои сайты, ну тогда действительно FastPanel проще, ибо не миллионер я))
В день. Стоит только написать новый материал, как вашфрилансер лезет под впн на сайт и пытается сплагиатить. Его в дверь, а он в окно.Это же по описаниям кворков и многому другому. Повторяю еще раз. Свои мелочные обидки и ужимки оставьте за пределами форума. Под одним ником дела не пошли, так быстро переобулся и под новой личиной человек работает. Что здесь на форуме, что на кворке. А профиль WantNight почему везде забросили? Кредиторы негативят?Если есть вопросы, пишите в личке, а не плачьтесь здесь что вам места мало нужно подвинуть конкурентов, которые чуть дольше и глубже разбираются в теме.
Я с Вами на "ты" не переходил, а лишь обозначил факт копипаста, у нужных людей есть глаза и архив. Стиль Вашего общения оставьте друзьям - Ваш "тестовый сайт" (догадываетесь о чем речь) и основной показал много общего. Ники в телеграм как перчатки не меняю, открыт для всех, чего и Вам советую. Я за адекватную конкуренцию, и если Вы лучше, представляйте и доказывайте это делом. Дальнейшую дискуссию ввести смысла не вижу.
Привет! Собирал материал для игровой статейки и нашёл аж 4 сайта, которые подозрительно похожи между собой (1, 2, 3, 4). Шли буквально рядом в поиске, шаблон один, тема статьи одна, текста не прочитал, но возможно, что один и тот же текст прогнан через рерайтер/нейронку. Единственное, что года публикации разные стоят, но это подделывается элементарно.
Зачем это делается? Косят под друг друга? - Вряд ли. Если у сайтов один владелец, то к чему одно и то же на всех сайтах постить, конкуренцию самому себе создавать. Или тут что-то другое?
Владелец сайтов скорее всего один. Я знаю Владельцев подобных проектов. Берут количеством, да еще могут один текст мусолить по разному каждый день и в целом живут нормально, но это больше под гугл идет с ссылками. Это все на автомате работает. Хотя и в яндексе теперь в первых местах много мусора, но новые сайты стало легче двигать и залетать в индекс.