У кого сайт с Cloudflare

N8
На сайте с 26.11.2008
Offline
137
#611

Добрый день
Скажите, плиз, отключение ipv6 в cloudflare сказывается как-то на реальном трафике?
Кто-то отключал? Какой эффект?

Заранее спасибо!

Анти ДДОС
На сайте с 14.03.2020
Offline
113
#612
Kazimus #:
Спала нагрузка на сервер  Было с CF более 600-800 а стало 100-300.

Судя по описанию, у хостера не было AAAA записи домена, а с подключением Cloudflare она у сайта появляется, начинает сыпаться просто вал разных начальных ботов, есть ботофермы которые только на IPV6 качают.

Т.е. вы не разобрались, подключили сами не поняли что и зачем, накосячили, а виноватым назначен кто-то другой )

Наверное, самая распространенная ошибка, по наблюдениям: многие по какой-то причине считают, что оно работает все само, из коробки. Стоит только нажать волшебную кнопку смены NS и загуглить пару волшебных таблеток плацебо для WAF.

PS. Потом, кстати, в темах по Cloudflare начинают в том числе неадекваты появляться, с уязвленным самомнением и раздутым эго, фекалиями бросаются. Которым давно уже пора операцию делать, руки не из того места растут.

Защита сайта от ботов, настройка Cloudflare, поведенческие факторы, АнтиБот, DDoS - https://antiddos24.ru
[Удален]
#613
Анти ДДОС #:

Наверное, самая распространенная ошибка, по наблюдениям: многие по какой-то причине считают, что оно работает все само, из коробки. Стоит только нажать волшебную кнопку смены NS и загуглить пару волшебных таблеток плацебо для WAF.

Совершенно верно. Так оно и работает.

1. меняем DNS на DNS клоудфлейра

2. по аналогии как написано в этой статье https://vc.ru/seo/477451-nastraivaem-cloudflare-dlya-filtracii-botov самостоятельно и бесплатно настраиваем клоуд

3. боты отсечены. если пойдут ещё, то добавляем их подсети либо ip адреса в правила фильтрации клоуда.

4. готово. всё делается буквально за 3 минуты и не нужно платить ни копейки таким товарищам, как этот, который пытается настраивать клоуд за деньги и заливает здесь что обладает какими то знаниями тонкой настройки о которых ещё не написали в статьях  😂

Все правила фильтрации ботов доступны в открытом доступе.

Вот моё правило фильтрации, которого достаточно, что бы на сайт не ломились боты для проекта под ру + отрезал ненужные мне страны.  Накрутчиков с ip россии давно не видел уже ни на одном сайте.

(http.user_agent contains "Abonti") or (http.user_agent contains "AspiegelBot") or (http.user_agent contains "aggregator") or (http.user_agent contains "AhrefsBot") or (http.user_agent contains "Aport") or (http.user_agent contains "asterias") or (http.user_agent contains "Baiduspider") or (http.user_agent contains "BDCbot") or (http.user_agent contains "bidswitchbot") or (http.user_agent contains "Birubot") or (http.user_agent contains "BLEXBot") or (http.user_agent contains "BUbiNG") or (http.user_agent contains "BuiltBotTough") or (http.user_agent contains "Bullseye") or (http.user_agent contains "BunnySlippers") or (http.user_agent contains "Butterfly") or (http.user_agent contains "ca-crawler") or (http.user_agent contains "CamontSpider") or (http.user_agent contains "CCBot") or (http.user_agent contains "Cegbfeieh") or (http.user_agent contains "CheeseBot") or (http.user_agent contains "CherryPicker") or (http.user_agent contains "coccoc") or (http.user_agent contains "CopyRightCheck") or (http.user_agent contains "cosmos") or (http.user_agent contains "crawler") or (http.user_agent contains "Crescent") or (http.user_agent contains "CyotekWebCopy/1.7") or (http.user_agent contains "CyotekHTTP/2.0") or (http.user_agent contains "DataForSeoBot") or (http.user_agent contains "DeuSu") or (http.user_agent contains "discobot") or (http.user_agent contains "DittoSpyder") or (http.user_agent contains "DnyzBot") or (http.user_agent contains "DomainCrawler") or (http.user_agent contains "DotBot") or (http.user_agent contains "Download Ninja") or (http.user_agent contains "EasouSpider") or (http.user_agent contains "EmailCollector") or (http.user_agent contains "EmailSiphon") or (http.user_agent contains "EmailWolf") or (http.user_agent contains "EroCrawler") or (http.user_agent contains "Exabot") or (http.user_agent contains "ExtractorPro") or (http.user_agent contains "Ezooms") or (http.user_agent contains "FairShare") or (http.user_agent contains "Fasterfox") or (http.user_agent contains "FeedBooster") or (http.user_agent contains "Foobot") or (http.user_agent contains "Genieo") or (http.user_agent contains "GetIntent Crawler") or (http.user_agent contains "Gigabot") or (http.user_agent contains "gold crawler") or (http.user_agent contains "GrapeshotCrawler") or (http.user_agent contains "grub-client") or (http.user_agent contains "Harvest") or (http.user_agent contains "hloader") or (http.user_agent contains "httplib") or (http.user_agent contains "HTTrack") or (http.user_agent contains "humanlinks") or (http.user_agent contains "HybridBot") or (http.user_agent contains "ia_archiver") or (http.user_agent contains "ieautodiscovery") or (http.user_agent contains "Incutio") or (http.user_agent contains "InfoNaviRobot") or (http.user_agent contains "InternetSeer") or (http.user_agent contains "IstellaBot") or (http.user_agent contains "Java") or (http.user_agent contains "Java/1.") or (http.user_agent contains "JamesBOT") or (http.user_agent contains "JennyBot") or (http.user_agent contains "JS-Kit") or (http.user_agent contains "k2spider") or (http.user_agent contains "Kenjin Spider") or (http.user_agent contains "Keyword Density/0.9") or (http.user_agent contains "kmSearchBot") or (http.user_agent contains "larbin") or (http.user_agent contains "LexiBot") or (http.user_agent contains "libWeb") or (http.user_agent contains "libwww") or (http.user_agent contains "Linguee") or (http.user_agent contains "LinkExchanger") or (http.user_agent contains "LinkextractorPro") or (http.user_agent contains "linko") or (http.user_agent contains "LinkScan/8.1a Unix") or (http.user_agent contains "LinkWalker") or (http.user_agent contains "LinkpadBot") or (http.user_agent contains "lmspider") or (http.user_agent contains "LNSpiderguy") or (http.user_agent contains "ltx71") or (http.user_agent contains "lwp-trivial") or (http.user_agent contains "lwp-trivial") or (http.user_agent contains "magpie") or (http.user_agent contains "Mata Hari") or (http.user_agent contains "MaxPointCrawler") or (http.user_agent contains "MegaIndex")

Настраиваем CloudFlare для фильтрации ботов — SEO на vc.ru
Настраиваем CloudFlare для фильтрации ботов — SEO на vc.ru
  • 2022.08.08
  • Иван Зимин
  • vc.ru
В этой статьей рассмотрим детальную настройку сервиса CloudFlare для защиты сайта от всевозможных роботов, ботов, парсеров.
M3
На сайте с 09.02.2022
Online
90
#614
Hatta #:

Совершенно верно. Так оно и работает.

1. меняем DNS на DNS клоудфлейра

2. по аналогии как написано в этой статье https://vc.ru/seo/477451-nastraivaem-cloudflare-dlya-filtracii-botov самостоятельно и бесплатно настраиваем клоуд

3. боты отсечены. если пойдут ещё, то добавляем их подсети либо ip адреса в правила фильтрации клоуда.

4. готово. всё делается буквально за 3 минуты и не нужно платить ни копейки таким товарищам, как этот, который пытается настраивать клоуд за деньги и заливает здесь что обладает какими то знаниями тонкой настройки о которых ещё не написали в статьях  😂

Все правила фильтрации ботов доступны в открытом доступе.

Вот моё правило фильтрации, которого достаточно, что бы на сайт не ломились боты для проекта под ру + отрезал ненужные мне страны.  Накрутчиков с ip россии давно не видел уже ни на одном сайте.

блокировки плохих ASN не хватает, конечно
а так да, все верно, настраивается легко,
в интернете полно информации

Анти ДДОС
На сайте с 14.03.2020
Offline
113
#615
Hatta #:
Все правила фильтрации ботов доступны в открытом доступе.

Ну я так и подумал, когда вы начали про настройку за 3 минуты рассказывать. Кофе еще в перерывах попивали.
В приеме таблеток из тёртого мела главное верить, а остальное само наладится.

Неужели вы думаете что все те, кто профессионально занимаются Cloudflare, делают клиентам вот то что расписал когда-то давно Зимин, передрав еще более старую инструкцию у Акулова? Не стоит судить о других по себе 🤣

Под ботами, вы каких ботов имеете в виду? Поведенческих? И какими же фильтрами из представленного набора вы их фильтруете? Никакими, предполагаю. С большего, это набор для фильтрации сканирующих ботов и парсеров по состоянию на 2019-2020 год.

Открываем ваш супер список из юзерагентов ботов.
Находим юзерагент с версией. Это CyotekWebCopy/1.7. Пробиваем дату выхода. Апрель 2019 года.
Java/1. бьется в обсуждениях за 2017-2019 год.
Keyword Density/0.9 - 2018 год.
Нормально там, ничего не смутило? В календарь давно смотрели?
Понимаю, запорожец машина хорошая, надежная, в ней тоже 4 колеса. Но как-бы время идет, все меняется вокруг.

Аналогично, например, с самым важным правилом от Зимина. (http.user_agent contains "Mail.RU_Bot")
Если не поставить бота маилру в исключение, то трафика не будет 😭

А ничего что на маилру уже давно поиск яндекса стоит? Откуда во всех наборах вот таких вот знатоков под кофе одни и те же элементы из карго-культа?

Опять же, главное верить, не рефлексировать, распространять. 

В целом, у меня по каждому пункту из ваших божественных волшебных гомеопатических таблеток по борьбе со всем и ни о чем целая статья на сайте расписана, подробнейшая.
А фекалиями кидаться в тех, кто занимается Cloudflare именно на профессиональной основе, а не в перерывах между кофе -
это как выучить букву A в алфавите, и орать что те кто преподают математику в 9 классе - шарлатаны. Потому что в книжке за 9 класс те же самые буквы, что и в букваре 🔥

[Удален]
#616
Анти ДДОС #:
Аналогично, например, с самым важным правилом от Зимина. (http.user_agent contains "Mail.RU_Bot")
Если не поставить бота маилру в исключение, то трафика не будет 😭

В предыдущем сообщении я написал одно из правил, так что первым делом я пропускаю хороших ботов.

Анти ДДОС #:
кто занимается Cloudflare именно на профессиональной основе

))) 

Анти ДДОС
На сайте с 14.03.2020
Offline
113
#617
Hatta #:

В предыдущем сообщении я написал одно из правил, так что первым делом я пропускаю хороших ботов.

Вот после таких пропускальщиков, которые даже не удосужились тему по Cloudflare здесь на форуме полистать, я уже даже не заикаюсь про такой космос как документация, на сайты набегают Амазонботы Клаудиботы и проч из списка из 200 хороших ботов по версии Cloudflare, в запущенных случаях сайт еле открывается. Как раз в первом правиле такие и ставят правило Skip.

Откройте уже наконец свой букварь и дойдите хотя-бы до середины. Раз уж обделались по полной со своим архивным Зиминым и не готовы это признать.

M3
На сайте с 09.02.2022
Online
90
#618
Анти ДДОС #:
списка из 200 хороших ботов по версии Cloudflare

у них нет списка хороших ботов, есть список известных/узнаваемых ботов

Delysid
На сайте с 27.05.2019
Offline
257
#619
master32 #:
у них нет списка хороших ботов, есть список известных/узнаваемых ботов

У них есть точные списки IP адресов легитимных ботов.

M3
На сайте с 09.02.2022
Online
90
#620
Delysid #:

У них есть точные списки IP адресов легитимных ботов.

а это получается хорошие боты?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий