значит вот такое решение для тех сайтов, которые юзают cloudflare cdn и не хотят, чтобы их дёргала всякая школота через прокси из сети клауда я придумал:
1 - настраиваем передачу уникального заголовка в настройках cdn, который будет передавать cloudflare защищаемому сайту
(rules - > overview -> createrule->request header transform rule->all incoming requests->set static header)
2 - если пришли из сети cloudflare и нет этого уникального заголовка, показываем 403
не благодарите
Выкладываем свои результаты.
Окау
Ваш квартальный отчётПодготовили для вас отчёт по вашим топовым площадкам за четвёртый квартал 2025 года. Анализируйте эффективность монетизации, сравнивайте свои результаты с похожими площадками и находите новые возможности для роста через наши персональные рекомендации.
172.69.22.72 [-][US][-][US][San Jose][13335:CloudFlare Inc] - [11/Mar/2026:14:32:02 +0000] [host] 404 "637cb0c2f13616f64579488771957950|-" "GET /sitemap.xml HTTP/1.1" "-" "CloudflareBrowserRenderingCrawler/1.0"172.71.159.74 [-][US][-][US][San Jose][13335:CloudFlare Inc] - [11/Mar/2026:14:32:01 +0000] [host] 404 "5d2e36f383e4fadd0abb95e31bec4893|-" "GET /robots.txt HTTP/1.1" "-" "CloudflareBrowserRenderingCrawler/1.0"172.71.155.26 [-][US][-][US][San Jose][13335:CloudFlare Inc] - [11/Mar/2026:14:31:59 +0000] [host] 200 "bfff50d73c1494e81c1f6c26eb237a66|-" "HEAD / HTTP/1.1" "-" "-"