Борьба с роботностью

Самый простой вариант: записать в правило все айпи нужных ботов поисковых систем, а остальным выкатывать капчу.

Aнти BOT пишет толковые и правильные вещи, но временами многословно и сильно ударяясь в эмоции.

Я скажу так.

Существует несколько уровней в решении этой проблемы (в этом я с Aнти БОТ-ом согласен), можно реализовать правила в том же htaccess в виде бана очевидных спам подсетей и на этом до удовлетворительного состояния исчерпать проблему.

Можно пойти дальше и пилить свою защиту фактически не пуская подозрительный трафик в Метрику. 

Я сам (с программистом конечно) делал такой модуль и он до сих пор работает (кстати, показывал рабочие скриншоты, когда объяснял логику его работы).

Но! Всё принципиально меняется когда накрутчики освоили мобильные и резидентные прокси т.е. ключевой момент настал тогда, когда из одних и тех же подсетей идёт и живой трафик, и роботизированный. И следующий уровень в логике работе - это фильтрация по программным слепкам и наваять такой сервис - это уже задачка на порядок выше.

- ИТОГО - 

TC, смотрите в сторону KIllbot-а, вы во-первых, сможете бесплатно попробовать его функционал, во-вторых, за вполне вменяемые деньги получит вполне достойное решение.

Не разберетесь, попросите/наймите Aнти BOT настроить вам защиту. Он на этом как раз специализируется.

Не тратьте время, переходите уже к действиям.

p.s. Бан ботов по именам роботов - точно не сработает.

Заметил, что если посмотреть по странам, то из Китая приходят пустышки - 0 времени на сайте. Попробую заблокировать их через брандмауэр

А еще из Бразилии и США. Но США блокировать не вариант, там гугл. Пока заблочил Китай

Это хостер предоставляет защиту ddos довольно недорого. там можно через них заблокировать до 10 стран. Я так в свое время сделала. Кстати в этом списке и Китай, Бразилия. США. Это не мешает Гуглу индексить ваш сайт.

Как-то раз через cloudflare заблокировал США (блокировал не я) и гугл не мог зайти на сайт.

Вы уверены, что если заблочить США, то гуглу это не помешает?

скорее всего помешает. при таких блокировках всегда надо сначала разрешать нужное, потом блочить ненужное.

Тоже думаю, тем более опыт был уже. Поэтому пока Китай. Бразилию тоже можно добавить туда

Интересовался у firstvds этим вопросов в свое время. Они сказали, что их поставщик ddos guard каким-то образом поисковые роботы не блокирует.  Детали не уточнял. Вроде проблем не наблюдаю.

свежий сайт, все эти мусорные для рунета регионы можно банить. сайт за антиддосом, но это не ддос, потому без проблем проходят.