Нужно забанить ботов htaccess

1 234
MB
На сайте с 24.02.2009
Online
172
#31
Ко мне вот такой стал захаживать, сегодня 12000 заходов
facebookexternalhit/1.1 (+http://www.facebook.com/externalhit_uatext.php)

Банить смело или он него есть какой то толк?
ranking factor
На сайте с 01.12.2017
Offline
164
#32
Mister_Black #:
Банить смело или он него есть какой то толк?

Банить, это бот ИИ,  никакого отношения к соцсети не имеет, бот обнаруживает разметку и собирает базу контента для коммерческого использования, затем начнутся заходы trafilatura/1.8.1 (github.com/adbar/trafilatura), который обрабатывает и очищает от лишнего кода, затем это используется для монетизации.

1 234

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий