У меня стояло такое правило, пришлось отключить. Большая часть переходов отображается как внутренние. Плюс из-за этого я не вижу поисковых фраз, по которым зашли люди. В соседней ветке у человека возникала такая же проблема.
Это потому что они (в основном люди) заходят через капчу. Ничего страшного, а ключевики яндекс все равно не все показывает
С чего вы решили, что это правило для блокировки ботов?
Это правило используют вкупе с другими, блокирующими, а создано оно для того, чтобы не заблокировать ботов из белого списка, при использовании иных блокирующих правил.
Если это правило поставить до правил блокировки то это правило их пропускает
Просачивались по этому набору правил, точнее
Разрешите Known Bots - в самом верху расположите правило Allow и там разрешите - там уже все - и яша и гоша и бинг и прочее (с недавних пор даже mail.ru )
По этой дыре говноботы тоже валят
Только учитывайте что после того как закроете ботов из прямых заходов, они пойдут с refer Яндекса и будут отображаться в метрике как переход из поиска. Из всего что пробовал, пока спасало отключение IPv6, но как понимаю это тоже не совсем хорошо.
А если не полная блокировка заходов ipv6 а капча или js анализ ? Поможет?
Нет, base64 иногда используется и в секюрити целях
В большинстве ботов есть поддержка и куки и js
