Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 23.10.2019, 16:45   #1
Кредит в сбербанке
 
Регистрация: 29.02.2016
Сообщений: 32
Репутация: 1436

По умолчанию Что за поисковик sveta.online

Месяц назад стал ддосить бот "поисковика" sveta.online
**************.ru 185.255.135.79 - - [23/Oct/2019:00:32:51 +0300] "GET / HTTP/1.1" 403 285 "-" "Mozilla/5.0 (compatible; svetabot/1.0; +http://svetabot.online/index.php" 16087 13333:0

По всем сайтам на аккаунте с утра до вечера долбит тысячи запросов на главную.
У кого нибудь есть такой бот?
__________________
гид по кредитам Кредит в сбербанке, кредитный калькулятор
flash12320 вне форума   Ответить с цитированием

Реклама
Старый 23.10.2019, 16:46   #2
-= Serafim =-
Moderator
 
Регистрация: 10.12.2006
Сообщений: 22,364
Репутация: 2047915

По умолчанию Re: Что за поисковик sveta.online

Обычный бот - стучат на уязвимости или парсят что-то. Тысячи таких.
-= Serafim =- вне форума   Ответить с цитированием
Старый 23.10.2019, 16:59   #3
vickodin
Студент
 
Регистрация: 16.08.2016
Сообщений: 28
Репутация: -5633

По умолчанию Re: Что за поисковик sveta.online

Цитата:
Сообщение от flash12320 Посмотреть сообщение
Месяц назад стал ддосить бот "поисковика" sveta.online
**************.ru 185.255.135.79 - - [23/Oct/2019:00:32:51 +0300] "GET / HTTP/1.1" 403 285 "-" "Mozilla/5.0 (compatible; svetabot/1.0; +http://svetabot.online/index.php" 16087 13333:0

По всем сайтам на аккаунте с утра до вечера долбит тысячи запросов на главную.
У кого нибудь есть такой бот?
Тоже есть такое, однако, если присмотреться к запросам, то он предварительно также спрашивает и /robots.txt, соответственно, можно попробовать "попросить" его так не делать. Я думаю, раз robots запрашивает, то и правила, там указанные, должен соблюдать.

P.S. Сам не проверял, т.к. пока неудобств не доставляет.
vickodin вне форума   Ответить с цитированием
Старый 23.10.2019, 17:45   #4
FoxCloud
Хостинг компания FoxCloud
 
Аватар для FoxCloud
 
Регистрация: 08.11.2016
Сообщений: 428
Репутация: -6545
Социальные сети

По умолчанию Re: Что за поисковик sveta.online

Добрый день.
Рекомендуем заблокировать данного бота, а также заблокировать ряд других вредоносных ботов.
Блокировка вашего бота находится строчке: RewriteCond %{HTTP_USER_AGENT} "^svetabot" [NC,OR]

[Блокировка ботов небольшая инструкция. 95% хостингов данная инструкция отработает хорошо]
- Зайдите в свой аккаунт через FTP или SSH.
- Создайте файл .htaccess в корневой директории /data для применения ограничений ко всем сайтам или в корне сайта, в таком случае ограничения будут только к одному сайту.
- Внесите в файл блокировки описанные ниже.


RewriteEngine on
# Начало блокировкам ботов
RewriteCond %{HTTP_USER_AGENT} "^svetabot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Mozilla.*Indy" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Mozilla.*NEWT" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^$" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Maxthon$" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^SeaMonkey$" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Acunetix" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^binlar" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^BlackWidow" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Bolt 0" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^BOT for JCE" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Bot mailto\:craftbot@yahoo\.com" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^casper" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^checkprivacy" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^ChinaClaw" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^clshttp" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^cmsworldmap" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Custo" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Default Browser 0" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^diavol" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^DIIbot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^DISCo" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^dotbot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Download Demon" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^eCatch" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^EirGrabber" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^EmailCollector" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^EmailSiphon" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^EmailWolf" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Express WebPictures" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^extract" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^ExtractorPro" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^EyeNetIE" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^feedfinder" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^FHscan" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^FlashGet" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^flicky" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^g00g1e" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^GetRight" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^GetWeb\!" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Go\!Zilla" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Go\-Ahead\-Got\-It" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^grab" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^GrabNet" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Grafula" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^harvest" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^HMView" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Image Stripper" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Image Sucker" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^InterGET" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Internet Ninja" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^InternetSeer\.com" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^jakarta" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Java" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^JetCar" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^JOC Web Spider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^kanagawa" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^kmccrew" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^larbin" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^LeechFTP" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^libwww" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Mass Downloader" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^microsoft\.url" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^MIDown tool" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^miner" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Mister PiX" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^MSFrontPage" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Navroad" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^NearSite" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Net Vampire" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^NetAnts" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^NetSpider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^NetZIP" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^nutch" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Octopus" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Offline Explorer" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Offline Navigator" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^PageGrabber" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Papa Foto" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^pavuk" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^pcBrowser" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^PeoplePal" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^planetwork" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^psbot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^purebot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^pycurl" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^RealDownload" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^ReGet" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Rippers 0" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^sitecheck\.internetseer\.com" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^SiteSnagger" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^skygrid" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^SmartDownload" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^sucker" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^SuperBot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^SuperHTTP" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Surfbot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^tAkeOut" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Teleport Pro" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Toata dragostea mea pentru diavola" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^turnit" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^vikspider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^VoidEYE" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Web Image Collector" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebAuto" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebBandit" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebCopier" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebFetch" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebGo IS" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebLeacher" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebReaper" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebSauger" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Website eXtractor" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Website Quester" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebStripper" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebWhacker" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WebZIP" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Widow" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WPScan" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WWW\-Mechanize" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^WWWOFFLE" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Xaldon WebSpider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^Zeus" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "^zmeu" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "360Spider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "CazoodleBot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "discobot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "EasouSpider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "ecxi" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "GT\:\:WWW" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "heritrix" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "HTTP\:\:Lite" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "HTTrack" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "ia_archiver" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "id\-search" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "IDBot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Indy Library" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "IRLbot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "ISC Systems iRc Search 2\.1" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "LinksCrawler" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "LinksManager\.com_bot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "linkwalker" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "lwp\-trivial" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "MFC_Tear_Sample" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Microsoft URL Control" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Missigua Locator" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "MJ12bot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "panscient\.com" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "PECL\:\:HTTP" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "PHPCrawl" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "PleaseCrawl" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "SBIder" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "SearchmetricsBot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Snoopy" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Steeler" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "URI\:\:Fetch" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "urllib" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Web Sucker" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "webalta" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "WebCollage" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "Wells Search II" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "WEP Search" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "XoviBot" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "YisouSpider" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "zermelo" [NC,OR]
RewriteCond %{HTTP_USER_AGENT} "ZyBorg" [NC,OR]
# Конец блокировкам ботов
# Начало блокировки по HTTP запросам
RewriteCond %{HTTP_REFERER} "^https?://(?:[^/]+\.)?semalt\.com" [NC,OR]
RewriteCond %{HTTP_REFERER} "^https?://(?:[^/]+\.)?kambasoft\.com" [NC,OR]
RewriteCond %{HTTP_REFERER} "^https?://(?:[^/]+\.)?savetubevideo\.com" [NC]
# Конец блокировки по HTTP запросам
RewriteRule ^.* - [F,L]
__________________
FoxCloud размещение в Европе / Америке / России. Услуги для любого проекта.
FoxCloud вне форума   Ответить с цитированием
Старый 23.10.2019, 17:47   #5
-= Serafim =-
Moderator
 
Регистрация: 10.12.2006
Сообщений: 22,364
Репутация: 2047915

По умолчанию Re: Что за поисковик sveta.online

Любому боту можно поставить любой юзер-агент.
-= Serafim =- вне форума   Ответить с цитированием
Сказали спасибо:
Старый 24.10.2019, 17:05   #6
Zenlink
Представитель
 
Аватар для Zenlink
 
Регистрация: 09.02.2016
Сообщений: 52
Репутация: 6825
Отправить сообщение для Zenlink с помощью Skype™

По умолчанию Re: Что за поисковик sveta.online

Вспомнилось из свежего "Yesterday"
Русский поисковик))
Изображения
 
__________________
Самое естественное продвижение на https://zenlink.ru/
Zenlink вне форума   Ответить с цитированием
Сказали спасибо 4 пользователей:
Старый 25.10.2019, 15:11   #7
Jet D.
regway.cом, домены от 59¢
 
Аватар для Jet D.
 
Регистрация: 08.12.2008
Сообщений: 5,355
Репутация: 583751
Социальные сети

По умолчанию Re: Что за поисковик sveta.online

flash12320, на удивление, похоже на реальный поисковик. Может студенты какие под диплом написали
__________________
Домены от $0.59! 500+ доменных зон, 20+ способов оплаты.
Регистрация и продление доменов .RU и .РФ от 150 ₽! Доступен реселлинг и API!
Jet D. вне форума   Ответить с цитированием
Старый 03.11.2019, 22:05   #8
flash12320
Кредит в сбербанке
 
Регистрация: 29.02.2016
Сообщений: 32
Репутация: 1436

ТопикСтартер Re: Что за поисковик sveta.online

Решил его запретить на одном сайте через robots.txt
Через неделю ни одного захода, только на всех 20 сайтах
А долбился бот по 1000 запросов на каждый)))
Чудеса
flash12320 вне форума   Ответить с цитированием
Старый 03.11.2019, 23:36   #9
donc
Филипп Филиппович
 
Аватар для donc
 
Регистрация: 16.01.2007
Сообщений: 7,480
Репутация: 1209303
Социальные сети

По умолчанию Re: Что за поисковик sveta.online

Эх молодежь... Грубый век, грубые нравы, романтизьма нету...
Может это какой влюбленный в честь своей девушки поисковик сделал и назвал.
donc вне форума   Ответить с цитированием
Сказали спасибо:
Старый 06.11.2019, 02:45   #10
Pall
Linkbuilding/SEM/PPC 4 US
 
Аватар для Pall
 
Регистрация: 07.12.2006
Адрес: Málaga, España
Сообщений: 3,429
Репутация: 269143
Отправить сообщение для Pall с помощью Skype™
Социальные сети Аккаунт в Telegram

По умолчанию Re: Что за поисковик sveta.online

Цитата:
Сообщение от Zenlink Посмотреть сообщение
Вспомнилось из свежего "Yesterday"
Русский поисковик))
Да-да-да, тоже люто ржал.

---------- Добавлено 06.11.2019 в 02:47 ----------

Цитата:
Сообщение от Jet D. Посмотреть сообщение
flash12320, на удивление, похоже на реальный поисковик. Может студенты какие под диплом написали
Скорее всего
Выдача подозрительно похожа на Sphynx.
Pall вне форума   Ответить с цитированием
Ответ



Опции темы

Быстрый переход


Регистрация Справка Календарь Поддержка Все разделы прочитаны