yalol

yalol
Рейтинг
256
Регистрация
12.12.2007
леонид1161 #:
ну просто у тебя такие вопросы, хоть стой хоть падай... один лучше другого и они не заканчиваются, потоком прям....
Ну ты постой и попадай) Что я могу сделать с твоим состоянием...
леонид1161 #:
интересно, что ты раньше делал на форуме? у тебя профиль 2007 года, а такое спрашиваешь

Терпеть не могу такие вопросы. Вот и что с того, что профиль зареген в 2007 году? Я должен был каждый день изучать форум?

Я все это время создавал контент, постоянно улучшая его.  Развивался в профильной автомобильной тематике.

Vladimir SEO #:
а чем боты вредят ? 
Подключаюсь к вопросу. Но пишут, что ухудшают поведенческие показатели (что в итоге приводит к падению позиций), снижают стоимость рекламы и создают нагрузку на сервер.
alaev #:
Я бы не советовал убивать geo и аео. 
В смысле по странам блокировать? И ИИ блокировать не стал бы? Почему?
Анти БОТ #:
Пример сайта, который у всех на слуху
https://сбой.рф

А Chatgpt стоит ли блокировать?

ChristmasNet #:
Даже нагрузка на сервер не упала?
Нет, она была невысокой! всего 10 % загрузки процессора
Антоний Казанский #:
Уверенно переходите к следующему этапу.

Только с этими строками надо разобраться. Оставить как есть или что-то убрать? 

if ($http_user_agent ~* (360Spider|80legs\.com|AhrefsBot|AcoonBot|Acunetix|BaiduSpider|Barkrowler|Bytespider|CCBot|ClaudeBot|CensysInspect|CommonCrawler|crawler4j|DataForSeoBot|DotBot|Exabot|ExaSearchBot|HTTrack|InternetMeasurement|MJ12bot|MegaIndex|PerplexityBot|pycurl|Scrapy|SemrushBot|SeekportBot|Screaming|SISTRIX|Slurp|TurnitinBot|WebCopier|WebReaper|WPScan|YisouSpider|ZmEu|Amazonbot|GeedoProductSearch|meta-externalagent|FriendlyCrawler|BacklinksExtendedBot|ChatGLM-Spider|tphotobot|ElevenlabsCrawler|ShapBot|QlyzeBot|meta-webindexer|LinkupBot|weborama-fetcher|ImagesiftBot|matlistan|BLEXBot|coccocbot-web|PetalBot|Reflectionbot|SeznamBot)) {

    return 444;

}

Например, где-то прочитал, что ExaSearchBot можно не убирать. Но хз

Антоний Казанский #:

Вам сразу сказали не заниматься попытками блокирования по названиям.  Но вы не слушаете.


Я вам несколько страниц назад об этом сказал.

Всё что вы пытаетесь сделать, уже реализовано в наработках сервиса. 

Благодарю. Просто программист сделал это, плюс внес кучу ботов, а я разбираюсь сижу в этом списке.

Он думает, что кроме Яндекса и Гугла не существует больше ничего. Но самое главное, это не дает результатов по отказам и роботности - все остается на прежнем уровне.

Mik Foxi #:
все, и начать добавлять то, что идет в реале к тебе массово.

сократил так: if ($http_user_agent ~* (360Spider|80legs.com|AhrefsBot|AcoonBot|Acunetix|BaiduSpider|Barkrowler|Bytespider|CCBot|ClaudeBot|CensysInspect|CommonCrawler|crawler4j|DataForSeoBot|DotBot|Exabot|ExaSearchBot|HTTrack|InternetMeasurement|MJ12bot|MegaIndex|PerplexityBot|pycurl|Scrapy|SemrushBot|SeekportBot|Screaming|SISTRIX|Slurp|TurnitinBot|WebCopier|WebReaper|WPScan|YisouSpider|ZmEu|Amazonbot|GeedoProductSearch|meta-externalagen|FriendlyCrawler|BacklinksExtendedBot|ChatGLM-Spider|tphotobot|ElevenlabsCrawler|ShapBot|QlyzeBot|meta-webindexer|LinkupBot|weborama-fetcher|ImagesiftBot|matlistan|BLEXBot|coccocbot-web)) {
return 444;
}

Все. пора завязывать с блокировкой ботов. Пора уже заняться созданием контента, а то я увяз буквально в этом бесполезном деле.

Надо будет какой-нить сервис подключить просто и все.

Подскажите, что из этого стоит убрать из списка?

if ($http_user_agent ~* (360Spider|80legs.com|Abonti|AcoonBot|Acunetix|adbeat_bot|AddThis.com|adidxbot|ADmantX|AhrefsBot|AngloINFO|Antelope|BaiduSpider|BeetleBot|billigerbot|binlar|bitlybot|BlackWidow|BLP_bbot|BoardReader|Bolt\ 0|BOT\ for\ JCE|Bot\ mailto\:craftbot@yahoo\.com|casper|CazoodleBot|CCBot|checkprivacy|ChinaClaw|chromeframe|Clerkbot|Cliqzbot|clshttp|CommonCrawler|comodo|CPython|crawler4j|Crawlera|CRAZYWEBCRAWLER|Curious|Custo|CWS_proxy|Default\ Browser\ 0|diavol|DigExt|Digincore|DIIbot|DISCo|discobot|DoCoMo|DotBot|Download\ Demon|DTS.Agent|EasouSpider|eCatch|ecxi|EirGrabber|Elmer|EmailCollector|EmailSiphon|EmailWolf|Exabot|ExaleadCloudView|ExpertSearch|ExpertSearchSpider|Express\ WebPictures|extract|ExtractorPro|EyeNetIE|Ezooms|F2S|FastSeek|feedfinder|FeedlyBot|FHscan|finbot|Flamingo_SearchEngine|FlappyBot|FlashGet|flicky|Flipboard|g00g1e|genieo|Genieo|GetRight|GetWeb\!|GigablastOpenSource|Go\-Ahead\-Got\-It|Go\!Zilla|GozaikBot|grab|GrabNet|Grafula|GrapeshotCrawler|GT\:\:WWW|GTB5|Guzzle|harvest|heritrix|HMView|HomePageBot|HTTP\:\:Lite|HTTrack|HubSpot|ia_archiver|icarus6|id\-search|IDBot|IlseBot|Image\ Stripper|Image\ Sucker|Indigonet|Indy\ Library|integromedb|InterGET|Internet\ Ninja|InternetSeer\.com|IRLbot|ISC\ Systems\ iRc\ Search\ 2\.1|jakarta|JetCar|JobdiggerSpider|JOC\ Web\ Spider|Jooblebot|Jorgee|kanagawa|KINGSpider|kmccrew|larbin|LeechFTP|libwww|Lingewoud|LinkChecker|linkdexbot|LinksCrawler|LinksManager\.com_bot|linkwalker|LinqiaRSSBot|LivelapBot|ltx71|LubbersBot|lwp\-trivial|Mass\ Downloader|masscan|maverick|Maxthon$|Mediatoolkitbot|megaindex|MegaIndex|MegaIndex|MFC_Tear_Sample|Microsoft\ URL\ Control|microsoft\.url|MIDown\ tool|miner|Missigua\ Locator|Mister\ PiX|mj12bot|Mozilla.*Indy|Mozilla.*NEWT|MSFrontPage|msnbot|Navroad|NearSite|Net\ Vampire|NetAnts|netEstate|NetSpider|NetZIP|NextGenSearchBot|nutch|Octopus|Offline\ Explorer|Offline\ Navigator|OpenindexSpider|OpenWebSpider|OrangeBot|Owlin|PageGrabber|PagesInventory|panopta|panscient\.com|Papa\ Foto|pavuk|pcBrowser|PECL\:\:HTTP|PeoplePal|Photon|PHPCrawl|planetwork|PleaseCrawl|PNAMAIN.EXE|PodcastPartyBot|prijsbest|proximic|psbot|purebot|pycurl|QuerySeekerSpider|R6_CommentReader|R6_FeedFetcher|RealDownload|ReGet|Riddler|Rippers\ 0|rogerbot|RSSingBot|rv\:1.9.1|RyzeCrawler|SafeSearch|SBIder|Scrapy|Scrapy|Screaming|search_robot|search.goo.ne.jp|SearchmetricsBot|Semrush|SemrushBot|SentiBot|SEOkicks|SeznamBot|ShowyouBot|SightupBot|SISTRIX|sitecheck\.internetseer\.com|siteexplorer.info|SiteSnagger|skygrid|Slackbot|Slurp|SmartDownload|Snoopy|Sogou|Sosospider|spaumbot|Steeler|sucker|SuperBot|Superfeedr|SuperHTTP|SurdotlyBot|Surfbot|tAkeOut|Teleport\ Pro|TinEye|TinEye-bot|Toata\ dragostea\ mea\ pentru\ diavola|Toplistbot|trendictionbot|turnit|TurnitinBot|Twenga|TwengaBot|URI\:\:Fetch|urllib|Vagabondo|Vagabondo|vikspider|VoidEYE|VoilaBot|WBSearchBot|Web\ Image\ Collector|Web\ Sucker|webalta|WebAuto|WebBandit|WebCollage|WebCopier|WebFetch|WebGo\ IS|WebLeacher|WebReaper|WebSauger|Website\ eXtractor|Website\ Quester|WebStripper|WebWhacker|WebZIP|Wells\ Search\ II|WEP\ Search|WeSEE|Widow|WinInet|woobot|woopingbot|worldwebheritage.org|Wotbox|WPScan|WWW\-Mechanize|WWWOFFLE|Xaldon\ WebSpider|XoviBot|yacybot|Yahoo|YisouSpider|zermelo|Zeus|zh-CN|ZmEu|ZumBot|ZyBorg|Amazonbot|GeedoProductSearch|SeekportBot|meta-externalagen|Barkrowler|ClaudeBot|CensysInspect|Bytespider) ) {
return 444;
}
Всего: 948