Посмотрите, с каких IP эти заходы. Сейчас то же самое у многих (есть темы на этом форуме) идёт с диапазонов:
31.173.80.0/21 (31.173.80.0 - 31.173.87.255) - Russian Federation Metropolitan branch of OJSC MegaFon AS25159
213.87.128.0/19 (213.87.128.0 - 213.87.159.255) Mobile subscribers pool - mtu.ru
213.87.160.0/22 (213.87.160.0 - 213.87.163.255) Mobile subscribers pool
176.59.96.0/19 (176.59.96.0 - 176.59.127.255) Нижний Новгород Tele2 Russia IP Network (NIN)
188.170.64.0/19 (188.170.64.0 - 188.170.95.255) Санкт-Петербург North-West Branch of OJSC MegaFon Network, 2017-03-23.
Версии, что этими заходами пытаются добиться, разные: есть и "накрутки поведенческих", и "скликивание рекламы", и пр.
Лично я частично заблокировал доступ на сайт с некоторых этих IP
.
Банить — не очень решение, действительно.
Хорошая идея озвучена у Cloudflare:
"Cloudflare включила в качестве бесплатной функции для всех аккаунтов, будет определять ботов и давать им намеренно сложные вычислительные задачи.
Пока бот будет пытаться решить головоломку, его сервер максимизирует свою вычислительную мощность, что приведёт к увеличению потребления облачных ресурсов и повышению расходов для оператора бота.
В результате использование ботов станет более затратным в долгосрочной перспективе, и их активность снизится, считают в Cloudflare." (/ru/news/2031993)
Отсюда парачка вопросов:
1. Подскажите сайт, который ОЧЕНЬ тяжелый для ботов, и можно будет перенаправлять их туда.
2. Подскажите правильный код для редиректа.
Пробовал вот такие два кода:
RewriteEngine On
RewriteCond expr "! -R '8.8.8.8'"
RewriteRule .* https://www.site.ru/ [R=301,L]
или
RewriteCond %{REMOTE_ADDR} 8.8.8.8
RewriteRule .* https://www.site.ru/ [R,L]
но редирект идёт только при заходе на Главную страницу. А нужно - со всех.
•
А нет решения, чтобы под заданный диапазон IP (скажем, с которых ходят эти боты или накрутчики) подсовывать каптчу? То есть чтобы каптчу можно было поставить на весь сайт и задать для неё черный список, кому показываться. Я не нашел.
Просто какая-то козлятина рефспамит по счётчикам. На сайты не заходит даже.
Алексей, если не секрет, через какое время были видны отчетливые изменения рост/падение?
В Вебмастере Гугл последнее сканирование показано за 8 апреля 2019 года. В эти дни был технический сбой в Гугле и часть страниц не попала в индекс Google. Вот новость - /ru/news/2022963 После этого, 12.04. была новость, что "Google решил проблему деиндексации страниц. Инженеры работали над этим вопросом 6 дней." - /ru/news/2023139
У меня такая же картинка в Вебмастере. Теперь будем ждать, пока придёт в норму.
Дошли руки, настроил политику CSP. Но в разрешениях для скриптов пришлось разрешить ‘unsafe-inline’. Исходящие переходы продолжаются (в отчетах счетчика liveinternet). Может это потому, что, как пишут, ‘unsafe-inline’ это дыра в безопасности, и вирусы или плагины, которые встраивают рекламу в браузеры пользователей, делают это через скрипт. А может это действительно какой-то бешеный рефспам. Не знаю, может действительно забить.
У меня было.
Несколько лет назад зарегистрировал домен, потом узнал, что это дроп.
Гугл полюбил сайт сразу и любит до сих пор — почти любой материал можно вывести в топ, если чуть поддержать ссылками.
А вот с яндексом всё сложно. Было совсем плохо, но я писал Платонам с вопросом типа "Не под фильтром ли сайт?", мне завуалированно ответили, что сейчас с сайтом всё нормально и через несколько обновлений выдачи позиции сайта могут улучшиться. В итоге чуть улучшилось, но не кардинально. Но тут у меня загвоздка может быть ещё и в том, что сайт не .ru, а другая зона.
Ну, хз, я дилетант в этих делах ) Я через плагин на вордпресс попробовал в тестовом режиме подключить CSP, но как-то сразу резко возросла нагрузка на CPU хостинга, и хостинг, по правилам, отдачу сайта начал притормаживать. Решил отключить плагин и отложить этот вопрос до худших времен )
У меня счетчик liveinternet стоит, такая же фигня — последнее время в разделе "Переходы без ссылки (на мой сайт)" появились переходы с очень странных сайтов, а в разделе "Переходы на сайты (чужие)" появилось много переходов на посторонние сайты. Исходящих ссылок с сайта нет. Вирусов нет. Всё проверено несколько раз различными методами. Плюс, доступ к сайту с "ненужных" IP заблокирован наглухо.
Сначала подумал это рефспам. Но переходов слишком много, на рефспам не похоже. Начал искать дальше и нашел инфу, что к этому могут быть причастны сервисы типа "...система автоматической раскрутки сайтов" (redsurf, livesurf и пр.) или рекламные системы типа Surfearner ("Реклама и задания демонстрируются через расширение, установленное в браузер,
и показываются на всех сайтах, которые посещает пользователь").
В случае redsurf, livesurf и пр. сайт в эту систему мог добавить "доброжелатель". А в случае Surfearner — "Пользователи сами устанавливают расширение SurfEarner в свои браузеры"
Вот что пишет один вебмастер в своей статье за 2013 год (у него был мусорный входящий трафик):
"Были предположения, что трафик идет с систем, подобных redsurf.ru , livesurf.ru . Я зарегистрировался в них и задал вопрос через службу поддержки о наличии кампании на мой блог. В первой системе его не было. Он оказался во второй. После некоторой верификации в системе закрыли возможность создания кампании на адрес моего блога. "Странный трафик" ушел."
Лично я пока забил и будем посмотреть, т.к. если настраивать CSP, у меня сайт начинает тормозить. Ну, и информации нужно больше.