Включать стоит, но он не работает против поведенческих ботов.
Тогда зачем включать, если он не работает?)
Ставить защиту. На форуме множество бесплатных вариантов способов защиты, посмотрите соседний топик.
Посмотрите логи сервера, поставьте клауд, отфильтруйте прямые заходы, заблокайте спамные сети а там потихоньку и вычистите и нагрузку снизите.Да, сервер может как тормозить так и падать. У клиента было вот так, чисто боты, самое интересное сайт долго терпел, а человек блокировал через iptables (без успеха).
Как включить там защиту, которая бы отсекала ботов? Включал - i'm under attack, но там он жестко фильтрует и чтобы зайти на сайт надо пройти проверку. Есть ли еще способы настройки
Cloudflare вам в помощь. Отсекает 80-90% спама.
Сами не можете или не хотите, можете кого-то нанять.
Меня нельзя, дорого 😀
cloudflare подключен, но я знаю только, как включать защиту - Under Attack Mode. Что включить, чтобы таких ботов отрезать?
Сейчас в любой конкуренткой рубрике, у коммерческого сайта есть трафик поведенческих ботов из поисковых систем. Где то он перекрывает реальный трафик, но в любом случае это не менее 30% от всего трафика из ПС.
Отличить можно по кривым ключам и накрученному CTR.
Единственное условие - на коммерческом сайте должны быть информационные разделы: новости, статьи и тд. Туда буду посылать ботов на прокачку.
У меня информационный сайт) А как боты прокачиваются? Что это значит?
Поведенческие боты не представляются как боты, поэтому явно по имени их заблокировать невозможно.
Все ли представленные сайты и IP не имеют ценности? Может лишнего кого заблокировал?
Изучать настройки CF и блочить ботов.Либо изучать логи и точечно блочить через .htaccess (но это совсем частный случай и действовать надо аккуратно).Либо написать свой скрипт по борьбе с ботами.Либо на аутсорс передать борьбу с ботами.Либо каких-нибудь антиботов установить - но тут тоже надо аккуратно действовать, можно наплужить и сайт на дно опустить.
Такие заблокированы:
Список заблокированных ботов:open-kabinet.ru|Bytespider|MJ12bot|Amazonbot|SemrushBot|AhrefsBot|DotBot|MegaIndex|weborama|halvakabinet.ru|nmo-lk.ru|domrf-lk.ru|ik-megafon.ru
какая комиссия была?
О блин, не следил - ну, туда им и дорога с их методами.
А чего не пять-шесть? )))
У вас там даже видео-реклама, вы вес страницы смотрели вообще?
видео-реклама в РСЯ?
Не смотрел, а какой он?
Спасибо