sveta.online как заблокировать?

12
LH
На сайте с 31.03.2020
Offline
0
2744

Подскажите, кто знает, как заблокировать бота sveta.online? Есть возможность только через robots.txt корректировать, но Disallow не помогает. Гонит таких же ботов на сайт и с каждым днем все больше.

PA
На сайте с 15.02.2018
Offline
65
#1

А диапазон айпи забанить не вариант?

Дедик, VDS, Бекап ( https://is.gd/urIVYq) дешево | Мои VDS ( https://is.gd/vds100 ) быстрее твоих | Продаю хостинг
Mik Foxi
На сайте с 02.03.2011
Offline
924
#2

Забанить по рефереру или как он там у вас в статистике палится.

Антибот защита сайта от накрутки поведенческих, от спама, взлома и поиска xss, от хит и клик ботов, от парсинга и кражи контента, снижение нагрузки на сервер - https://antibot.cloud/ Вам все еще конкуренты генерят отказы?
JD
На сайте с 08.12.2008
Offline
409
#3

LeonoraH, юзер-агент кстати там какой?

Домены от $0.59! ( https://regway.com ) 500+ доменных зон, 20+ способов оплаты и 10 лет стабильной работы Регистрация и продление доменов .RU и .РФ от 150 ₽! ( /ru/forum/377815 ) Доступен реселлинг и API!
TDSko
На сайте с 02.02.2015
Offline
75
#4
LeonoraH:
Подскажите, кто знает, как заблокировать бота sveta.online? Есть возможность только через robots.txt корректировать, но Disallow не помогает. Гонит таких же ботов на сайт и с каждым днем все больше.

Просто заблокируйте через user-agent, в логах его отчетливо видно: svetabot

Пример из логов:

[02/04/2020:00:32:51 +0300] "GET / HTTP/1.1" 403 285 "-" "Mozilla/5.0 (compatible; svetabot/1.0; +http://svetabot.online/index.php" 16087 13333:0

Регистрация/продление доменов .RU и .РФ по 170 рублей. ( https://domenland.ru/?utm_source=searchengines&utm_medium=podpis_tdsko&utm_campaign=refer ) Кредитная карта ТИНЬКОФФ - до 300 000 руб. без справок и визита в банк ( https://dragoweb.ru/r/?tinkoff ) VPS/VDS с бесплатной поддержкой и низкими ценами! ( https://dragoweb.ru/r/?vdska )
S
На сайте с 20.03.2020
Offline
23
#5

Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?

Хостинг от 119р в месяц | VPS от 170р в месяц |Быстрая поддержка (https://fas.st/Ha9Wc)
Александр
На сайте с 17.07.2009
Offline
369
#6
Semiure:
Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?

может он сайт ложит

Сайты на WordPress тут просто летают! (https://vk.cc/atAGUU)
Mik Foxi
На сайте с 02.03.2011
Offline
924
#7
Semiure:
Зачем таких ботов блокируют? Никогда подобным не занимался. Ну заходит на сайт - и пусть себе заходит. Какой смысл таких блокировок?

Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.

-S
На сайте с 10.12.2006
Offline
Модератор1220
#8
foxi:
Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.

Бинг, ahrefs и mail.ru надо смело в блок сразу. Нереальное число запросов делают.

Александр
На сайте с 17.07.2009
Offline
369
#9
foxi:
Потому что именно боты в большинстве случаев грузят сервер. Когда проблема: "у меня вордпресс тормозит, хостер с сервера гонит, а у меня всего 10 человек в день" - проблема часто в том, что такие псевдо-поисковики, ахрефсы, маджестики и прочая не нужная сайту срань делает большинство запросов, создавая нагрузку.

Особенно делая это грубо и неуклюжа. Если б они парсили себе аккуратно, то никто и слова бы им не сказал, а то придёт такой горе бот и давай по 100 запросов в секунду делать. Причём ломится по несуществующим адресам, налетая на 404 ошибку, которую достаточно сложно закешировать.

Mik Foxi
На сайте с 02.03.2011
Offline
924
#10

Пример сайта, на 3,2к запросов людей и 1,2к белых ботов (гугл, яндекс, мейл, бинг) больше 6к запросов (failed+blocked) говноботов. Это при том что говноботы стопаются и не видят 100500 ссылок по сайту, по которым бы они пошли, если их не остановить.

И многие прикидываются гуглом, это самые любители влупить кучу потоков без задержек:

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий