Вернуться   Форум об интернет-маркетинге > >
Ответ
 
Опции темы
Старый 31.03.2020, 20:55   #1
Абитуриент
 
Регистрация: 31.03.2020
Сообщений: 1
Репутация: 10

По умолчанию sveta.online как заблокировать?

Подскажите, кто знает, как заблокировать бота sveta.online? Есть возможность только через robots.txt корректировать, но Disallow не помогает. Гонит таких же ботов на сайт и с каждым днем все больше.
LeonoraH вне форума   Ответить с цитированием

Реклама
Старый 31.03.2020, 23:01   #2
Pavel A
Профессор
 
Регистрация: 15.02.2018
Сообщений: 526
Репутация: 21351

По умолчанию Re: sveta.online как заблокировать?

А диапазон айпи забанить не вариант?
__________________
Почти дедик дешево|Мои VDS быстрее твоих (промокод 648194016 - скидка 25% на первый месяц)|Продаю хостинг
Pavel A вне форума   Ответить с цитированием
Старый 31.03.2020, 23:45   #3
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 02.03.2011
Адрес: Budva
Сообщений: 10,827
Репутация: 1135371
Социальные сети Аккаунт в Telegram

По умолчанию Re: sveta.online как заблокировать?

Забанить по рефереру или как он там у вас в статистике палится.
foxi вне форума   Ответить с цитированием
Старый 01.04.2020, 17:16   #4
Jet D.
regway.cом, домены от 59¢
 
Аватар для Jet D.
 
Регистрация: 08.12.2008
Сообщений: 5,746
Репутация: 635833
Социальные сети

По умолчанию Re: sveta.online как заблокировать?

LeonoraH, юзер-агент кстати там какой?
__________________
Домены от $0.59! 500+ доменных зон, 20+ способов оплаты и 10 лет стабильной работы
Регистрация и продление доменов .RU и .РФ от 150 ₽! Доступен реселлинг и API!
Jet D. вне форума   Ответить с цитированием
Старый 02.04.2020, 10:59   #5
TDSko
dragoweb.ru
 
Аватар для TDSko
 
Регистрация: 02.02.2015
Адрес: Краснодар
Сообщений: 346
Репутация: 29198
Отправить сообщение для TDSko с помощью ICQ Отправить сообщение для TDSko с помощью AIM Отправить сообщение для TDSko с помощью MSN Отправить сообщение для TDSko с помощью Yahoo Отправить сообщение для TDSko с помощью Skype™
Социальные сети Профиль в ВКонтакте Профиль на Хабрахабре Аккаунт в Telegram

По умолчанию Re: sveta.online как заблокировать?

Цитата:
Сообщение от LeonoraH Посмотреть сообщение
Подскажите, кто знает, как заблокировать бота sveta.online? Есть возможность только через robots.txt корректировать, но Disallow не помогает. Гонит таких же ботов на сайт и с каждым днем все больше.
Просто заблокируйте через user-agent, в логах его отчетливо видно: svetabot

Пример из логов:

[02/04/2020:00:32:51 +0300] "GET / HTTP/1.1" 403 285 "-" "Mozilla/5.0 (compatible; svetabot/1.0; +http://svetabot.online/index.php" 16087 13333:0
TDSko вне форума   Ответить с цитированием
Старый 02.04.2020, 20:36   #6
Semiure
Аспирант
 
Регистрация: 21.03.2020
Сообщений: 229
Репутация: 11108

По умолчанию Re: sveta.online как заблокировать?

Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?
Semiure вне форума   Ответить с цитированием
Старый 04.04.2020, 13:52   #7
aleksandrbol
Сын турецкоподда
 
Аватар для aleksandrbol
 
Регистрация: 17.07.2009
Сообщений: 2,909
Репутация: 158026

По умолчанию Re: sveta.online как заблокировать?

Цитата:
Сообщение от Semiure Посмотреть сообщение
Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?
может он сайт ложит
aleksandrbol вне форума   Ответить с цитированием
Старый 04.04.2020, 17:09   #8
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 02.03.2011
Адрес: Budva
Сообщений: 10,827
Репутация: 1135371
Социальные сети Аккаунт в Telegram

По умолчанию Re: sveta.online как заблокировать?

Цитата:
Сообщение от Semiure Посмотреть сообщение
Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?
Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.
foxi вне форума   Ответить с цитированием
Сказали спасибо 2 пользователей:
Старый 04.04.2020, 17:24   #9
-= Serafim =-
Moderator
 
Регистрация: 10.12.2006
Сообщений: 22,791
Репутация: 2070581

По умолчанию Re: sveta.online как заблокировать?

Цитата:
Сообщение от foxi Посмотреть сообщение
Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.
Бинг, ahrefs и mail.ru надо смело в блок сразу. Нереальное число запросов делают.
-= Serafim =- вне форума   Ответить с цитированием
Старый 04.04.2020, 17:34   #10
aleksandrbol
Сын турецкоподда
 
Аватар для aleksandrbol
 
Регистрация: 17.07.2009
Сообщений: 2,909
Репутация: 158026

По умолчанию Re: sveta.online как заблокировать?

Цитата:
Сообщение от foxi Посмотреть сообщение
Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.
Особенно делая это грубо и неуклюжа. Если б они парсили себе аккуратно, то никто и слова бы им не сказал, а то придёт такой горе бот и давай по 100 запросов в секунду делать. Причём ломится по несуществующим адресам, налетая на 404 ошибку, которую достаточно сложно закешировать.
aleksandrbol вне форума   Ответить с цитированием
Ответ



Опции темы

Быстрый переход


Регистрация Справка Календарь Поддержка Все разделы прочитаны