postindustrialman

Рейтинг
5
Регистрация
29.06.2022
Насколько я понял, финальное решение выглядит так: порыбачить и выловить всех подозрительных ботов, поставить запрет через .htaccess. Если не поможет - снести Метрику.

Предлагаю добавить поддомены в exclude


Vladimir #:

Все правильно, нет накрутки и роботность полный ноль

Хотите сказать, что кто-то крутит в минус? Тогда почему реальные люди для Яндекса тоже ботами стали? В плюс не кручу.

Bookvatik #:

В htaccess добавьте блок:

SetEnvIfNoCase User-Agent "Abonti|AspiegelBot|aggregator|AhrefsBot|Aport|asterias|Baiduspider|BDCbot|bidswitchbot|Birubot|BLEXBot|BUbiNG|BuiltBotTough|Bullseye|BunnySlippers|Butterfly|ca\-crawler|CamontSpider|CCBot|Cegbfeieh|CheeseBot|CherryPicker|coccoc|CopyRightCheck|cosmos|crawler|Crescent|CyotekWebCopy/1\.7|CyotekHTTP/2\.0|DataForSeoBot|DeuSu|discobot|DittoSpyder|DnyzBot|DomainCrawler|DotBot|Download Ninja|EasouSpider|EmailCollector|EmailSiphon|EmailWolf|EroCrawler|Exabot|ExtractorPro|Ezooms|FairShare|Fasterfox|FeedBooster|Foobot|Genieo|GetIntent\ Crawler|Gigabot|gold\ crawler|GrapeshotCrawler|grub\-client|Harvest|hloader|httplib|HTTrack|humanlinks|HybridBot|ia_archiver|ieautodiscovery|Incutio|InfoNaviRobot|InternetSeer|IstellaBot|Java|Java/1\.|JamesBOT|JennyBot|JS-Kit|k2spider|Kenjin Spider|Keyword Density/0\.9|kmSearchBot|larbin|LexiBot|libWeb|libwww|Linguee|LinkExchanger|LinkextractorPro|linko|LinkScan/8\.1a Unix|LinkWalker|LinkpadBot|lmspider|LNSpiderguy|ltx71|lwp-trivial|lwp\-trivial|magpie|Mata Hari|MaxPointCrawler|MegaIndex|memoryBot|Microsoft URL Control|MIIxpc|Mippin|Missigua Locator|Mister PiX|MJ12bot|MLBot|moget|MSIECrawler|msnbot|msnbot-media|NetAnts|NICErsPRO|Niki\-Bot|NjuiceBot|NPBot|Nutch|Offline Explorer|OLEcrawler|Openfind|panscient\.com|PostRank|ProPowerBot/2\.14|PetalBot|ProWebWalker|ptd-crawler|Purebot|PycURL|python-requests|Python\-urllib|QueryN Metasearch|RepoMonkey|Riddler|RMA|Scrapy|SemrushBot|serf|SeznamBot|SISTRIX|SiteBot|sitecheck\.Internetseer\.com|SiteSnagger|Serpstat|Slurp|SnapPreviewBot|Sogou|Soup|SpankBot|spanner|spbot|Spinn3r|SpyFu|suggybot|SurveyBot|suzuran|SWeb|Szukacz/1\.4|Teleport|Telesoft|The Intraformant|TheNomad|TightTwatBot|Titan|toCrawl/UrlDispatcher|True_Robot|ttCrawler|turingos|TurnitinBot|UbiCrawler|UnisterBot|Unknown|uptime files|URLy Warning|User-Agent|VCI|Vedma|Voyager|WBSearchBot|Web Downloader/6\.9|Web Image Collector|WebAuto|WebBandit|WebCopier|WebEnhancer|WebmasterWorldForumBot|WebReaper|WebSauger|Website Quester|Webster Pro|WebStripper|WebZip|Wotbox|wsr\-agent|WWW\-Collector\-E|Yeti|YottosBot|Zao|Zeus|ZyBORG" bad_bot

Deny from env=bad_bot

# END Bad Bot Blocker

Спасибо

У меня это вот как выглядит

Годовой график почти такой же. То есть роботов не было как минимум год, потом резко весь трафик стал ботами. Какая-то необъяснимая лажа от Яндекса.

Нашел похожий кейс: https://searchengines.guru/ru/forum/1061388 

Как я понимаю, единственный способ не допустить медленной смерти сайта - снести метрику?😅

neutomim30 #:

Рекламный с РСЯ? Почему у нас Громов тут не пишет ничего...Очень интересно было бы прочесть его мнение (кроме "напишите номер счетчика, передам")

Он, наверное, это и напишет. Но выглядит ситуация весьма паршиво.

sebek #:

Повлечет. На то и расчет у них.

Какой трафик ботный? С тизерок, с Гугла и тп.

Какой не ботный? С Яндекс РСЯ.

Соотвественно, цель - перетягивание бюджетов снова к себе.

Рекламный тоже в боты отъехал. Было 4-5к до ботов, стало 1,5-2к.

danmaster #:

какой хост? наш? их?

наш

sebek #:

Клиент говорит, что это роботность такая то! стала??

Я говорю мол - звонят меньше? Покупают меньше?

Он -нет.

В том-то и дело. Просто Метрика, по ходу, зависала во враги народа часть реальных людей. Мне интересно, не повлечет ли это негативных последствий.

1 234
Всего: 40