Всплеск переходо по ссылкам

S
На сайте с 12.10.2012
Offline
207
#61
GuruSite24 #:

И будет не рабочее. Это сбивается не специально нацеленными на рефспам правилами, а комплексом различных фильтров, в целом против ботов. Естественно, есть основное ядро правил, а есть постоянно дорабатываемые строчки в них, которые добавляются по мере развития боторынка. Задумывался как-то на эту тему, почему оно работает и какое из правил режет рефспам. Потом плюнул - работает и работает.

Если на сайт прут боты с поддельными реферами, то как остальной набор правил поможет отфильтровать данный тафик?

Напишите правило или опишите принцип по которому вы блокируете-фильтруете спам переходы, в которых реферальный сайт подделывается. (В метрике такой трафик в переходы по ссылкам попадает).

Антоний Казанский
На сайте с 12.04.2007
Online
670
#62
GuruSite24 #:
а комплексом различных фильтров, в целом против ботов.

Опишите пожалуйста их логику, чтобы было понятно, как можно применить ваш совет с демонстрацией такого результативного скриншота.


sagamorr #:

Если на сайт прут боты с поддельными реферами, то как остальной набор правил поможет отфильтровать данный тафик?

Напишите правило или опишите принцип по которому вы блокируете-фильтруете спам переходы, в которых реферальный сайт подделывается. (В метрике такой трафик в переходы по ссылкам попадает).

Можете привести конкретные рабочие примеры, чтобы их можно было спроецировать на другие рабочие случаи?

√ SEO продвижение https://akazansky.ru - экспертный аудит сайтов ( https://akazansky.ru/audit-sajtov ), внедрение эффективных решений цифрового маркетинга.
Анти ДДОС
На сайте с 14.03.2020
Offline
81
#63
Антоний Казанский #:

Опишите пожалуйста их логику, чтобы было понятно, как можно применить ваш совет с демонстрацией такого результативного скриншота.

Если совсем вкратце, то баним и фильтруем все то, что здесь и так обсуждается в теме. Только в более расширенном составе, не отдельными несвязанными кусочками. Не 5-10 строчек, как когда-то было на VC и преподносится обычно прямо как Грааль, а 150.

- сканеры, парсеры, спамеры и проч, в том числе то что пропускает клауд через белый список, но в наших широтах не нужно
- все что имеет поддельный юзерагент, включая тех кто притворяется ботами поисковиков
- все что обращается туда, куда человек не обращается
- все что выходит за паттерн запроса человеком
- явные (битерика энд компани) и неявные подсети, хостеры и проч
- явные боты
- различные ддос паттерны атак

Сами паттерны, естественно, нарабатываются только практикой решения той или иной задачки, для разных цмс, плюс постоянно появляется/добавляется что-то новое, по мере развития боторынка. Который растет не по дням, а по часам.

Ну и опять же, на графике четко видно, что и поиск можно подрихтовать. Припали не только прямые заходы, реферальные заходы, но и та часть что через поиск пробирается. Это не подсовывая людям капчу.
Остальное дошлифовывается до устраивающего результата более тонкой настройкой. С изучением логов сервера и метрики, логов клауда.

клауд

Настройка Cloudflare, поведенческие факторы, АнтиБот, ДДОС, Biterika Rostelecom прямые переходы https://antiddos24.ru
S
На сайте с 12.10.2012
Offline
207
#64
GuruSite24 #:

Если совсем вкратце, то баним и фильтруем все то, что здесь и так обсуждается в теме. Только в более расширенном составе, не отдельными несвязанными кусочками. Не 5-10 строчек, как когда-то было на VC и преподносится обычно прямо как Грааль, а 150.

- сканеры, парсеры, спамеры и проч, в том числе то что пропускает клауд через белый список, но в наших широтах не нужно
- все что имеет поддельный юзерагент, включая тех кто притворяется ботами поисковиков
- все что обращается туда, куда человек не обращается
- все что выходит за паттерн запроса человеком
- явные (битерика энд компани) и неявные подсети, хостеры и проч
- явные боты
- различные ддос паттерны атак

Сами паттерны, естественно, нарабатываются только практикой решения той или иной задачки, для разных цмс, плюс постоянно появляется/добавляется что-то новое, по мере развития боторынка. Который растет не по дням, а по часам.

Ну и опять же, на графике четко видно, что и поиск можно подрихтовать. Припали не только прямые заходы, реферальные заходы, но и та часть что через поиск пробирается. Это не подсовывая людям капчу.
Остальное дошлифовывается до устраивающего результата более тонкой настройкой. С изучением логов сервера и метрики, логов клауда.


Юзер агенты у ботов такие же как у живых пользователей, AS сети тоже могут быть какие угодно, запросы тоже как правило - просто url страницы без доп атрибутов.

Для фильтрации-блокировки прямых заходов проверяют пустого реферера.

Для фильтрации реф спама (который определятся в метрике Другая реклама: определено по меткам) нужно проверять URI на вхождение utm.

Если знаете как бороться с ботами, у которых поддельный сайт в реферере - напишите что то конкретное.

А то пока просто воду льете.

Анти ДДОС
На сайте с 14.03.2020
Offline
81
#65
sagamorr #:

Юзер агенты у ботов такие же как у живых пользователей,

Я писал вот про такие случаи. Ну или когда пустой юзерагент, либо юзерагент из списка автоматических запросов, наподобие Wpscan или Screaming Frog. 

клауд

png 2260_1.png
Анти ДДОС
На сайте с 14.03.2020
Offline
81
#66
sagamorr #:
Для фильтрации реф спама (который определятся в метрике Другая реклама: определено по меткам) нужно проверять URI на вхождение utm.

Не вводите в заблуждение. Рефспам отдельно в метрике - переходы с сайтов.
Как вариант - смотреть логи посещений сервера, сравнивать по времени с метрикой, определять айпи и подсеть откуда заход по конкретному переходу якобы с сайта, чтобы вычислить паттерн.
А отчет переходов по рекламе  (?utm_source=) - отдельно.

В топике речь про переходы с сайтов.

Требовать конкретное волшебное решение, на конкретный случай - глупо.
Я вроде четко показал, что все возможно, если подходить к вопросу в комплексе.
клауд

S
На сайте с 12.10.2012
Offline
207
#67
GuruSite24 #:

Я писал вот про такие случаи. Ну или когда пустой юзерагент, либо юзерагент из списка автоматических запросов, наподобие Wpscan или Screaming Frog. 


Я про ботов, у которых реф сайт поддельный. Там юзер агент какой угодно может быть, по юзер агенту такой траф не отфильтровать.
S
На сайте с 12.10.2012
Offline
207
#68
GuruSite24 #:

Не вводите в заблуждение. Рефспам отдельно в метрике - переходы с сайтов.

А что я не так написал? Поддельные utm метки - это не рекламный реферер?

GuruSite24 #:

Как вариант - смотреть логи посещений сервера, сравнивать по времени с метрикой, определять айпи и подсеть откуда заход по конкретному переходу якобы с сайта, чтобы вычислить паттерн.

Я писал выше, что по IP и AS num такие визиты не вычистить, т.к сети и IP могут быть какие угодно.

GuruSite24 #:

Требовать конкретное волшебное решение, на конкретный случай - глупо.
Я вроде четко показал, что все возможно, если подходить к вопросу в комплексе.

В смысле требовать волшебное решение? Вы же в этой ветке написали, что знаете рабочий способ.

Показал четко - это графики метрики? У меня тоже был наплыв трафика с переходов по ссылкам 2-3 мес, потом сам пропал. Так, что такие графики могу и я выложить.

Пока вы никого конкретного решения не предложили, уверен что у вас его нет.

Просто пытаетесь в очередной раз прорекламировать свою платную услугу по настройке CF, которая ничем не отличается от инструкция, которая есть на vc.ru

Анти ДДОС
На сайте с 14.03.2020
Offline
81
#69
sagamorr #:

У меня тоже был наплыв трафика с переходов по ссылкам 2-3 мес, потом сам пропал. Так, что такие графики могу и я выложить.

"У него был триппер, а потом пропал". 
Да я понял, что забалтывать уводить тему в сторону вы умеете.  Все время вспоминая те гральные начальные неск строчек с VC. Просто ничего другого лично вы и не видели, поэтому и льете воду. 

Для всех остальных еще раз повторю. Волшебных методов не бывает, но если подходить комплексно, то вполне реально зацепить подрезать и то, что вроде как напрямую не подрезать.

TheVS
На сайте с 27.12.2006
Offline
431
#70
sagamorr #:

Просто пытаетесь в очередной раз прорекламировать свою платную услугу по настройке CF, которая ничем не отличается от инструкция, которая есть на vc.ru

Так и есть, от него никакой информации кроме "вы все не разбираетесь, а у меня комплексный подход" нет. Его чудесный и секретный способ максимум в том, чтобы перебанить то, что по сути и не мешает + половину московского региона вместе с нормальными пользователями.

У меня тоже есть "секретный" способ, который за неделю на одном из сайтов дал снижение роботности по метрике с 5% до 0%, но по факту боты просто переключились на заходы с Яндекса.

🍄 Финансовая партнёрская программа для вебмастеров и блогеров: https://bit.ly/finance_pp

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий