sagamorr

Рейтинг
204
Регистрация
12.10.2012
11

Что то писанины развернули на 11 страниц😁

Согласен с NoMoreContent, что все боты работают по типовым сценариям. Чуть поменять свою форму от типовой и проблема со спамом пропадет.

Не вникал во все детали, но даже мне понятно, что боту такую кнопку никогда не найти 𝑜т𝓃𝓅𝒶в𝓊т, если его специально под поиск ее не программировать.

fillonon #:
Что это за списки?) надо как то поподробнее, а то так и нужное можно заблокировать 

Это видимо список спам IP, который собрал Xubart.

В этой ветке есть список Битерики, но он покороче - https://searchengines.guru/ru/forum/1048352/page4

# Biterika - AS35048
Deny from 2.59.50.0/24
Deny from 5.183.130.0/24
Deny from 31.40.203.0/24
Deny from 45.11.20.0/23
Deny from 45.15.72.0/23
Deny from 45.15.236.0/23
Deny from 45.81.136.0/23
Deny from 45.84.176.0/23
Deny from 45.86.0.0/23
Deny from 45.87.252.0/23
Deny from 45.89.16.0/22
Deny from 45.90.196.0/24
Deny from 45.134.180.0/22
Deny from 45.134.252.0/23
Deny from 45.135.32.0/23
Deny from 45.139.125.0/24
Deny from 45.139.176.0/23
Deny from 45.140.52.0/22
Deny from 45.142.252.0/23
Deny from 45.144.36.0/24
Deny from 45.145.116.0/22
Deny from 45.147.192.0/23
Deny from 45.151.145.0/24
Deny from 46.8.10.0/23
Deny from 46.8.14.0/23
Deny from 46.8.16.0/23
Deny from 46.8.22.0/23
Deny from 46.8.56.0/23
Deny from 46.8.106.0/23
Deny from 46.8.110.0/23
Deny from 46.8.154.0/23
Deny from 46.8.156.0/23
Deny from 46.8.192.0/23
Deny from 46.8.212.0/23
Deny from 46.8.222.0/23
Deny from 77.83.84.0/24
Deny from 77.83.148.0/23
Deny from 77.94.1.0/24
Deny from 84.54.53.0/24
Deny from 91.188.244.0/24
Deny from 92.119.193.0/24
Deny from 94.158.190.0/24
Deny from 95.182.124.0/22
Deny from 109.248.12.0/22
Deny from 109.248.48.0/23
Deny from 109.248.54.0/23
Deny from 109.248.128.0/23
Deny from 109.248.138.0/23
Deny from 109.248.142.0/23
Deny from 109.248.166.0/23
Deny from 109.248.204.0/23
Deny from 176.53.186.0/24
Deny from 185.181.244.0/22
Deny from 185.181.247.0/24
Deny from 188.130.128.0/23
Deny from 188.130.136.0/23
Deny from 188.130.142.0/23
Deny from 188.130.184.0/22
Deny from 188.130.188.0/23
Deny from 188.130.210.0/23
Deny from 188.130.218.0/23
Deny from 188.130.220.0/23
Deny from 192.144.31.0/24
Deny from 193.53.168.0/24
Deny from 193.58.168.0/23
Deny from 194.32.229.0/24
Deny from 194.32.237.0/24
Deny from 194.34.248.0/24
Deny from 194.35.113.0/24
Deny from 194.156.92.0/24
Deny from 194.156.96.0/23
Deny from 194.156.123.0/24
Deny from 212.115.49.0/24
Deny from 213.226.101.0/24
Xubart #:
Order Deny,Allow
Deny from 192.144.31.0/24
Deny from 46.8.193.0/24
Deny from 2a0e:cd40::/32
Deny from 45.89.16.0/23
Deny from 45.145.116.0/23
Deny from 185.181.245.0/24
Deny from 45.15.237.0/24
Deny from 2a07:ca07::/32
Deny from 188.130.137.0/24
Deny from 188.130.211.0/24
Deny from 45.81.136.0/24
Deny from 188.130.128.0/24
Deny from 45.140.54.0/23
Deny from 109.248.138.0/23
Deny from 46.8.212.0/23
Deny from 45.84.177.0/24
Deny from 2a0e:cd45::/32
Deny from 77.83.148.0/24
Deny from 109.248.54.0/23
Deny from 2a0f:d002::/32
Deny from 95.182.126.0/23
Deny from 46.8.14.0/23
Deny from 2a0e:8141::/32
Deny from 188.130.187.0/24
Deny from 109.248.142.0/24
Deny from 46.8.111.0/24
Deny from 109.248.166.0/23
Deny from 84.54.53.0/24
Deny from 194.156.123.0/24
Deny from 2a0e:cd47::/32
Deny from 46.8.106.0/23
Deny from 46.8.222.0/23
Deny from 95.182.124.0/23
Deny from 45.87.253.0/24
Deny from 45.89.16.0/22
Deny from 109.248.54.0/24
Deny from 212.115.49.0/24
Deny from 2a06:d647:8000::/33
Deny from 109.248.142.0/23
Deny from 46.8.212.0/24
Deny from 185.181.247.0/24
Deny from 2a0e:cd44::/32
Deny from 2a0f:d000::/32
Deny from 46.8.157.0/24
Deny from 45.139.176.0/24
Deny from 194.34.248.0/24
Deny from 109.248.128.0/24
Deny from 45.135.32.0/23
Deny from 92.119.193.0/24
Deny from 109.248.205.0/24
Deny from 2a0e:cd43::/32
Deny from 2a0e:cd46::/32
Deny from 2a07:ca07::/33
Deny from 109.248.129.0/24
Deny from 2a0f:d000::/29
Deny from 46.8.56.0/23
Deny from 45.134.252.0/23
Deny from 45.15.73.0/24
Deny from 2a0e:cd42::/32
Deny from 45.81.136.0/23
Deny from 2a0e:cd41::/32
Deny from 194.156.96.0/23
Deny from 45.15.72.0/24
Deny from 193.58.169.0/24
Deny from 45.147.193.0/24
Deny from 45.87.252.0/24
Deny from 45.139.125.0/24
Deny from 46.8.156.0/24
Deny from 193.58.168.0/23
Deny from 2a0e:8147::/32
Deny from 2a0a:5684::/32
Deny from 45.145.118.0/23
Deny from 45.147.192.0/23
Deny from 109.248.14.0/24
Deny from 194.32.229.0/24
Deny from 45.147.192.0/24
Deny from 193.58.168.0/24
Deny from 109.248.55.0/24
Deny from 109.248.143.0/24
Deny from 2a0e:8142::/32
Deny from 95.182.126.0/24
Deny from 2a0e:8140::/32
Deny from 109.248.13.0/24
Deny from 188.130.136.0/23
Deny from 45.86.1.0/24
Deny from 2a0e:8146::/32
Deny from 46.8.16.0/23
Deny from 109.248.204.0/24
Deny from 2a0e:cd40::/29
Deny from 45.11.21.0/24
Deny from 45.135.33.0/24
Deny from 188.130.219.0/24
Deny from 46.8.192.0/24
Deny from 45.90.196.0/24
Deny from 46.8.11.0/24
Deny from 5.183.130.0/24
Deny from 45.142.253.0/24
Deny from 45.11.20.0/24
Deny from 188.130.143.0/24
Deny from 77.83.148.0/23
Deny from 45.134.253.0/24
Deny from 77.83.84.0/24
Deny from 31.40.203.0/24
Deny from 46.8.156.0/23
Deny from 188.130.186.0/23
Deny from 45.135.32.0/24
Deny from 193.53.168.0/24
Deny from 46.8.56.0/24
Deny from 188.130.218.0/24
Deny from 45.84.176.0/24
Deny from 45.134.252.0/24
Deny from 194.32.237.0/24
Deny from 185.181.246.0/23
Deny from 194.35.113.0/24
Deny from 2a07:ca07:8000::/33
Deny from 188.130.184.0/23
Deny from 45.139.177.0/24
Deny from 109.248.204.0/23
Deny from 188.130.142.0/24
Deny from 2a0a:b387::/33
Deny from 188.130.210.0/23
Deny from 185.181.244.0/24
Deny from 109.248.48.0/24
Deny from 2a06:d647::/33
Deny from 45.15.236.0/23
Deny from 46.8.15.0/24
Deny from 176.53.186.0/24
Deny from 194.156.92.0/24
Deny from 188.130.185.0/24
Deny from 188.130.220.0/24
Deny from 91.188.244.0/24
Deny from 46.8.10.0/24
Deny from 46.8.192.0/23
Deny from 94.158.190.0/24
Deny from 2a0b:2d87::/33
Deny from 46.8.17.0/24
Deny from 77.94.1.0/24
Deny from 45.140.52.0/23
Deny from 45.142.252.0/24
Deny from 188.130.220.0/23
Deny from 188.130.188.0/24
Deny from 2a0f:d005::/32
Deny from 109.248.15.0/24
Deny from 46.8.110.0/24
Deny from 109.248.139.0/24
Deny from 2a0b:2d87:8000::/33
Deny from 2a0f:d001::/32
Deny from 2a0a:5686::/32
Deny from 109.248.48.0/23
Deny from 46.8.154.0/23
Deny from 45.134.180.0/23
Deny from 2a0f:d003::/32
Deny from 2a0e:8144::/32
Deny from 2.59.50.0/24
Deny from 188.130.184.0/24
Deny from 45.139.176.0/23
Deny from 46.8.22.0/24
Deny from 109.248.49.0/24
Deny from 109.248.12.0/23
Deny from 109.248.138.0/24
Deny from 45.11.20.0/23
Deny from 2a0f:d004::/32
Deny from 188.130.129.0/24
Deny from 46.8.57.0/24
Deny from 45.86.0.0/23
Deny from 2a0e:8140::/29
Deny from 2a06:d647::/32
Deny from 46.8.23.0/24
Deny from 45.145.116.0/22
Deny from 188.130.128.0/23
Deny from 45.134.180.0/22
Deny from 185.181.244.0/23
Deny from 2a0e:8143::/32
Deny from 2a0a:5685::/32
Deny from 46.8.10.0/23
Deny from 46.8.107.0/24
Deny from 46.8.222.0/24
Deny from 109.248.128.0/23
Deny from 95.182.124.0/24
Deny from 2a0a:5680::/32
Deny from 2a0f:d006::/32
Deny from 45.142.252.0/23
Deny from 188.130.189.0/24
Deny from 188.130.136.0/24
Deny from 46.8.14.0/24
Deny from 46.8.106.0/24
Deny from 46.8.22.0/23
Deny from 46.8.16.0/24
Deny from 188.130.188.0/23
Deny from 185.181.246.0/24
Deny from 45.15.72.0/23
Deny from 45.151.145.0/24
Deny from 45.81.137.0/24
Deny from 2a0a:b387:8000::/33
Deny from 194.156.96.0/24
Deny from 46.8.154.0/24
Deny from 46.8.223.0/24
Deny from 109.248.167.0/24
Deny from 77.83.149.0/24
Deny from 46.8.213.0/24
Deny from 95.182.125.0/24
Deny from 2a0a:5680::/29
Deny from 45.86.0.0/24
Deny from 109.248.12.0/24
Deny from 2a0a:5687::/32
Deny from 188.130.221.0/24
Deny from 45.84.176.0/23
Deny from 188.130.186.0/24
Deny from 2a0e:8145::/32
Deny from 45.144.36.0/24
Deny from 188.130.218.0/23
Deny from 188.130.142.0/23
Deny from 46.8.155.0/24
Deny from 2a0a:b387::/32
Deny from 45.140.52.0/22
Deny from 188.130.210.0/24
Deny from 109.248.166.0/24
Deny from 2a0f:d007::/32
Deny from 194.156.97.0/24
Deny from 109.248.14.0/23
Deny from 2a0b:2d87::/32
Deny from 95.182.127.0/24
Deny from 213.226.101.0/24
Deny from 45.134.182.0/23
Deny from 45.15.236.0/24
Deny from 45.87.252.0/23

Это Битерика?
Toyvo Glumov #:

да, щас перепроверл, мерзкая гуглопочта отправила в папку промоакций.

все равно дерут слишком дорого, учитывая что это один из самых крупных хостингов.

кстати, на 2 года вперед цена такая же как на год, значит в след. году скорее всего опять повысят.

После рассылки писем о повышении тарифов, была возможность еще в течении 2 недель оплатить хостинг по старым ценам, что я и сделал.

По лимитам кстати тоже нормально проапгрейдиили, мой тариф пересчитали, так что теперь превышения нет.

У меня вопросов к Бегету больше нет. Техподдержка конечно сильно испортилась, все отвечают шаблонами, но ждать "человеческих" ответов уже не приходится, с тенденцией развития нейросетей, скоро весь саппорт на чат-ботов переключат.

Сегодня по одной рекламной компании в РСЯ был клик на 128.51 руб, при макс установленной в 60 руб.

Решил посмотреть, что это за крутой сайт, на котором цены клика стоила.

Вот - бухта-удачи.рф 

ГС собирающий лиды, по какому то дому отдыху, в каком то жопинске.

Назрело 2 вопроса:

-Как такой ГС прошел в РСЯ?

-Как строится ценообразование в директе. Сколько получит владелец этого ГС? Я думаю руб 5 макс, поправьте если не прав.

montiorko #:
Я в managed Challenge отправил: (http.request.uri contains "utm")

В CF знаю как блокировать, я писал про htaccess.

Кстати лучше сразу в правило где Block отправляйте такие переходы, т.к половина пройдут Managed challenge и окажутся во внутренних переходах.

GuruSite24 #:

"У него был триппер, а потом пропал". 
Да я понял, что забалтывать уводить тему в сторону вы умеете.  Все время вспоминая те гральные начальные неск строчек с VC. Просто ничего другого лично вы и не видели, поэтому и льете воду. 

Для всех остальных еще раз повторю. Волшебных методов не бывает, но если подходить комплексно, то вполне реально зацепить подрезать и то, что вроде как напрямую не подрезать.

Забалтываете как раз вы, т.к я и другие форумчане попросили у вас выложить пример правила или описать логику блокировки.

У вас просто нет решения, поэтому вместо конкретного ответа - вы льете воду про паттерны и супер секретные настройки, наработанные годами.
GuruSite24 #:
Очень удобно обсуждать / осуждать то, чего в глаза не видели, на своем собственном неудачном опыте. 
Готовые наборы правил вам никто не выложит, так что намеки на метод "не верю, покажи" можете забыть, это только в детстве прокатывает.

Что вы тогда на этом форуме спамите? Покупайте себе коммерческую ветку и там расхваливайте свои супер рабочие методы.

GuruSite24 #:

Не вводите в заблуждение. Рефспам отдельно в метрике - переходы с сайтов.

А что я не так написал? Поддельные utm метки - это не рекламный реферер?

GuruSite24 #:

Как вариант - смотреть логи посещений сервера, сравнивать по времени с метрикой, определять айпи и подсеть откуда заход по конкретному переходу якобы с сайта, чтобы вычислить паттерн.

Я писал выше, что по IP и AS num такие визиты не вычистить, т.к сети и IP могут быть какие угодно.

GuruSite24 #:

Требовать конкретное волшебное решение, на конкретный случай - глупо.
Я вроде четко показал, что все возможно, если подходить к вопросу в комплексе.

В смысле требовать волшебное решение? Вы же в этой ветке написали, что знаете рабочий способ.

Показал четко - это графики метрики? У меня тоже был наплыв трафика с переходов по ссылкам 2-3 мес, потом сам пропал. Так, что такие графики могу и я выложить.

Пока вы никого конкретного решения не предложили, уверен что у вас его нет.

Просто пытаетесь в очередной раз прорекламировать свою платную услугу по настройке CF, которая ничем не отличается от инструкция, которая есть на vc.ru

GuruSite24 #:

Я писал вот про такие случаи. Ну или когда пустой юзерагент, либо юзерагент из списка автоматических запросов, наподобие Wpscan или Screaming Frog. 


Я про ботов, у которых реф сайт поддельный. Там юзер агент какой угодно может быть, по юзер агенту такой траф не отфильтровать.
GuruSite24 #:

Если совсем вкратце, то баним и фильтруем все то, что здесь и так обсуждается в теме. Только в более расширенном составе, не отдельными несвязанными кусочками. Не 5-10 строчек, как когда-то было на VC и преподносится обычно прямо как Грааль, а 150.

- сканеры, парсеры, спамеры и проч, в том числе то что пропускает клауд через белый список, но в наших широтах не нужно
- все что имеет поддельный юзерагент, включая тех кто притворяется ботами поисковиков
- все что обращается туда, куда человек не обращается
- все что выходит за паттерн запроса человеком
- явные (битерика энд компани) и неявные подсети, хостеры и проч
- явные боты
- различные ддос паттерны атак

Сами паттерны, естественно, нарабатываются только практикой решения той или иной задачки, для разных цмс, плюс постоянно появляется/добавляется что-то новое, по мере развития боторынка. Который растет не по дням, а по часам.

Ну и опять же, на графике четко видно, что и поиск можно подрихтовать. Припали не только прямые заходы, реферальные заходы, но и та часть что через поиск пробирается. Это не подсовывая людям капчу.
Остальное дошлифовывается до устраивающего результата более тонкой настройкой. С изучением логов сервера и метрики, логов клауда.


Юзер агенты у ботов такие же как у живых пользователей, AS сети тоже могут быть какие угодно, запросы тоже как правило - просто url страницы без доп атрибутов.

Для фильтрации-блокировки прямых заходов проверяют пустого реферера.

Для фильтрации реф спама (который определятся в метрике Другая реклама: определено по меткам) нужно проверять URI на вхождение utm.

Если знаете как бороться с ботами, у которых поддельный сайт в реферере - напишите что то конкретное.

А то пока просто воду льете.

Всего: 1624