Я судя по всему в своем правиле тоже не учел, что будут блокироваться хорошие боты.
Почему Known Bots надо ставить зеленой? В таком случае правило ведь будет работать так:
Если заход на указанную группу страниц + если прямой заход + заход от известных ботов = капча. То есть правило же будет работать только для известных ботов и им показывать капчу.
Делайте так, я уже проверил. Все работает как часики.
правило Allow создайте и там включите Known Bots зеленым - на картинке у Вас block (внизу)
Спасибо. Нашел.
Решено.
Разрешите Known Bots - в самом верху расположите правило Allow и там разрешите - там уже все - и яша и гоша и бинг и прочее (с недавних пор даже mail.ru )
Спасибо Вам огромное. Правда не нашел я где этот Allow в самом верху. Но сделал так, вроде это одно и тоже.
Если рефер пустой и ботов не знаем - блочим
Получился такой компот. Это конечно костыль, но вроде роботов поисковых систем пропускает.
Тестирую. Может есть чем дополнить/исправить?
Поставьте запрет на посещения сайта без поддержки Куки и ,JS
Спасибо. Попробую. Пока фильтр поставил на
Если referer пустой И в user-agent нет слова yandex, google, bing и mail
Проблема как раз в этом.
Тогда нужно пропускать роботов яндекс, гугл, bing, mail
Вот что первое пришло в голову
When incoming requests match… Referer equals Value (пустое) - block
AND
User-Agent DOES NOT CONTAIN "yandex"
User-Agent DOES NOT CONTAIN "google"
Поставил такой фильтр. Роботы яндекса нормально заходят, роботы гугла вроде тоже.Сейчас узнаю что в user-agent у bing и mail и тоже добавлю.
Настроил через clodFlare
Ну еще защитил /wp-admin и /wp-login.phpWhen incoming requests match…URI equals /wp-admin - челендж капча
When incoming requests match…URI equals /wp-login.php - челендж капча
Больше в голову ничего не приходит. Может посоветуете что? Спасибо.
Вобщем яндекс метрика пишет что сайт недоступен, а яндекс директ что остановил показы.
Отключил: When incoming requests match… Referer equals Value (пустое) - block
почти час ночи - сижу не знаю что делать. Пойду спать.
У меня так убили 1 сайт. Прямыми заходами валили. 30% поиска, 70% боты. Вылетел весь из поиска Яндекс. Гуглу пофиг - позиции наоборот выросли.
Я не пишу description.
300 страниц.
В вебмастере яша не доволен. Но я не заметил негатива.
Вообще прописывание description кроме как на главной странице - не вижу смысла.
Отдельную страницу?
Я думал в хедере и футере сделать перелинковку анкорной ссылкой Москву и Санкт-Петербург.
По поводу текстов - спасибо за совет. Склонялся к нему - но нужен был пинок.
Все-таки придется открывать кошелек. Бесплатно - можно, но долго и не всегда качественно.
