PROCESSING

PROCESSING
Рейтинг
38
Регистрация
03.10.2015

Посмотрите, с каких IP эти заходы. Сейчас то же самое у многих (есть темы на этом форуме) идёт с диапазонов:

31.173.80.0/21 (31.173.80.0 - 31.173.87.255) - Russian Federation Metropolitan branch of OJSC MegaFon AS25159

213.87.128.0/19 (213.87.128.0 - 213.87.159.255) Mobile subscribers pool - mtu.ru

213.87.160.0/22 (213.87.160.0 - 213.87.163.255) Mobile subscribers pool

176.59.96.0/19 (176.59.96.0 - 176.59.127.255) Нижний Новгород Tele2 Russia IP Network (NIN)

188.170.64.0/19 (188.170.64.0 - 188.170.95.255) Санкт-Петербург North-West Branch of OJSC MegaFon Network, 2017-03-23.

Версии, что этими заходами пытаются добиться, разные: есть и "накрутки поведенческих", и "скликивание рекламы", и пр.

Лично я частично заблокировал доступ на сайт с некоторых этих IP

.

Банить — не очень решение, действительно.

Хорошая идея озвучена у Cloudflare:

"Cloudflare включила в качестве бесплатной функции для всех аккаунтов, будет определять ботов и давать им намеренно сложные вычислительные задачи.

Пока бот будет пытаться решить головоломку, его сервер максимизирует свою вычислительную мощность, что приведёт к увеличению потребления облачных ресурсов и повышению расходов для оператора бота.

В результате использование ботов станет более затратным в долгосрочной перспективе, и их активность снизится, считают в Cloudflare." (/ru/news/2031993)

Отсюда парачка вопросов:

1. Подскажите сайт, который ОЧЕНЬ тяжелый для ботов, и можно будет перенаправлять их туда.

2. Подскажите правильный код для редиректа.

Пробовал вот такие два кода:

RewriteEngine On

RewriteCond expr "! -R '8.8.8.8'"

RewriteRule .* https://www.site.ru/ [R=301,L]

или

RewriteCond %{REMOTE_ADDR} 8.8.8.8

RewriteRule .* https://www.site.ru/ [R,L]

но редирект идёт только при заходе на Главную страницу. А нужно - со всех.

А нет решения, чтобы под заданный диапазон IP (скажем, с которых ходят эти боты или накрутчики) подсовывать каптчу? То есть чтобы каптчу можно было поставить на весь сайт и задать для неё черный список, кому показываться. Я не нашел.

Просто какая-то козлятина рефспамит по счётчикам. На сайты не заходит даже.

Алексей Питерский:
Аналитикс ставьте - Гуглу ПФ тоже нужны! На коммерческих сайтах был рост после установки, и падение когда сносили из за смены дизайна, а потом рост когда обратно прикручивали аналитикс.

Алексей, если не секрет, через какое время были видны отчетливые изменения рост/падение?

В Вебмастере Гугл последнее сканирование показано за 8 апреля 2019 года. В эти дни был технический сбой в Гугле и часть страниц не попала в индекс Google. Вот новость - /ru/news/2022963 После этого, 12.04. была новость, что "Google решил проблему деиндексации страниц. Инженеры работали над этим вопросом 6 дней." - /ru/news/2023139

У меня такая же картинка в Вебмастере. Теперь будем ждать, пока придёт в норму.

Дошли руки, настроил политику CSP. Но в разрешениях для скриптов пришлось разрешить ‘unsafe-inline’. Исходящие переходы продолжаются (в отчетах счетчика liveinternet). Может это потому, что, как пишут, ‘unsafe-inline’ это дыра в безопасности, и вирусы или плагины, которые встраивают рекламу в браузеры пользователей, делают это через скрипт. А может это действительно какой-то бешеный рефспам. Не знаю, может действительно забить.

alter44:

У кого было так на практике?

У меня было.

Несколько лет назад зарегистрировал домен, потом узнал, что это дроп.

Гугл полюбил сайт сразу и любит до сих пор — почти любой материал можно вывести в топ, если чуть поддержать ссылками.

А вот с яндексом всё сложно. Было совсем плохо, но я писал Платонам с вопросом типа "Не под фильтром ли сайт?", мне завуалированно ответили, что сейчас с сайтом всё нормально и через несколько обновлений выдачи позиции сайта могут улучшиться. В итоге чуть улучшилось, но не кардинально. Но тут у меня загвоздка может быть ещё и в том, что сайт не .ru, а другая зона.

Оптимизайка:
С чего ему тормозить, от дополнительного http-заголовка-то?

Ну, хз, я дилетант в этих делах ) Я через плагин на вордпресс попробовал в тестовом режиме подключить CSP, но как-то сразу резко возросла нагрузка на CPU хостинга, и хостинг, по правилам, отдачу сайта начал притормаживать. Решил отключить плагин и отложить этот вопрос до худших времен )

У меня счетчик liveinternet стоит, такая же фигня — последнее время в разделе "Переходы без ссылки (на мой сайт)" появились переходы с очень странных сайтов, а в разделе "Переходы на сайты (чужие)" появилось много переходов на посторонние сайты. Исходящих ссылок с сайта нет. Вирусов нет. Всё проверено несколько раз различными методами. Плюс, доступ к сайту с "ненужных" IP заблокирован наглухо.

Сначала подумал это рефспам. Но переходов слишком много, на рефспам не похоже. Начал искать дальше и нашел инфу, что к этому могут быть причастны сервисы типа "...система автоматической раскрутки сайтов" (redsurf, livesurf и пр.) или рекламные системы типа Surfearner ("Реклама и задания демонстрируются через расширение, установленное в браузер,

и показываются на всех сайтах, которые посещает пользователь").

В случае redsurf, livesurf и пр. сайт в эту систему мог добавить "доброжелатель". А в случае Surfearner — "Пользователи сами устанавливают расширение SurfEarner в свои браузеры"

Вот что пишет один вебмастер в своей статье за 2013 год (у него был мусорный входящий трафик):

"Были предположения, что трафик идет с систем, подобных redsurf.ru , livesurf.ru . Я зарегистрировался в них и задал вопрос через службу поддержки о наличии кампании на мой блог. В первой системе его не было. Он оказался во второй. После некоторой верификации в системе закрыли возможность создания кампании на адрес моего блога. "Странный трафик" ушел."

Лично я пока забил и будем посмотреть, т.к. если настраивать CSP, у меня сайт начинает тормозить. Ну, и информации нужно больше.

Всего: 65