vashfreelancer

vashfreelancer
Рейтинг
28
Регистрация
24.10.2023
Владелец крупных зарубежных сайтов с большим опытом администрирования. Не болит голова, выполняю услуги в срок. Обратились раз, обратитесь два.
ageev123 #:

Ребята, привет! Прошу помощи.

Сайт коммерческий, висит на клауде, чтоб отбиваться от ботов. Сейчас есть желание попробовать гнать аудиторию из инстаграмма, но не могу понять как верно сделать, чтобы она до сайта доходила. 

  Сайт нацелен на пользователей из РФ. Есть правило на блок по гео "(ip.geoip.country ne "RU" and ip.geoip.country ne "KZ" and ip.geoip.country ne "AZ" and ip.geoip.country ne "BY" and ip.geoip.country ne "UA" and ip.geoip.country ne "GE" and ip.geoip.country ne "AM" and ip.geoip.country ne "UZ")". 

В размещенной ссылке в инстаграмме указал ютм метку, которая содержит "instagram", но она не передается при переходе на следующие страницы сайта. Одно из правил есть на логирование (skip), чтобы видеть пользователей из поисковиков, в него же добавил (http.request.uri contains "utm_source=instagram") or (http.user_agent contains "Instagram"). После перехода из шапки, если все делать во встроенном браузере инсты, то все ок, визит не блочится. Но если перейти в "сторонний" браузер, то на страницу по ссылке из шапки пускает, так как там метка, но при переходе на следующие страницы сайта прилетает блок по правилу с гео.

Как правильно сделать, чтобы пользователей из инстаграмма клауд пускал по-любому? Мб как-то через реферрер, но не вижу какое значение передает инстаграм.

Вот пример перехода по ссылке из инсты, с шапки, перешел по ссылке, открыл консоль разработчика, ввел document.referrer и посмотрел какой реферер.

Если у Вас referer передается(не знаю где ссылка, да и инсты нет), то делаете самый простой вариант (SKIP) и куда нить в самый вверх.

(http.referer contains "instagram")

ageev123 #:
но при переходе на следующие страницы сайта прилетает блок

в таком случае и это скорее не поможет, у Вас какое то обновление страницы происходит и значение теряется. Реферер так же потеряется. Покажите реферер, который будет когда блок появится. Вообще нужно смотреть, в слепую мало что понятно.

LevShliman :
Заметил по сайтам на вордпресс, где установлены темы из серии 

Newsmag и от того же производителя newsитд везде сидит вирус  редиректа. Сносите их.


Загуглите - Newsmag exploit и почитайте.


Weblady #:

Несмотря на более чем 1600 страниц, обсуждение падения дохода у небольшого количества вебмастеров.  А партнеров у РСЯ огромное количество. 

У меня предположение, что на какие-то сайты были наложены фильтры вроде недавнего МПК, только в РСЯ. Может такое быть? Просто не сходится то, что только у небольшого числа мастеров резкое падение дохода. Если бы это было массово, наверняка было бы множество новых регистраций и +1 от каждого в этой теме.

А что обсуждать? не все вебмастеры сидят на форуме, есть слой вебмастеров, которые в тг сообществах так же обсуждают (без всяких регистраций), есть просто те кто не силен в этом всем, но сайты держат через помощников. Нет никакого мпк на рся, все мои знакомые сняли рся, теперь им пишут (сотрудники яндекса) мол поможем увеличить доход. смешно, да?) Вы же видите что яндекс монополист, интересно читать, как день изо дня люди тут пороги повышают, думая что будут существенные изменения.

Наблюдаю что новые страницы теперь опять индексируются быстророботом, доход сегодня вроде как будет выше чем в тот ПН, наблюдаю. Не хочу давать надежд, но кажется ворачивается как было.
Не знаю совпадение или нет, но в серч консоли в разделе sitemap у меня ошибки от 7 и 8 марта, то есть больше сайтмапы тип не обновлялись, почистил кэш и отправил заново, все успешно, буду наблюдать - мб пере обойдёт. Ну вообще раньше всегда быстроробот был и на sitemap было фиолетово.
Odimidorius #:
Да клиенту может не понравится капча, всё будет зависеть от него

Как от него если Вы на переход с поиска делаете капчу, лучше для рекламы сделать UTM метки - логировать их и потом блокировать ботов на основе логов. Как вообще можно такими действиями помочь со скликом?
Если юзер не дошел до сайта, то яндекс в директе не списывает деньги? Мне всегда казалось что со скликом должен бороться яндекс, ибо переход идет от них. Но логирование UTM и анализ логов всегда решал проблему с фейк переходами по рекламе.


Odimidorius #:
но есть один косяк, хз как решат

я на платном тарифе делаю двойную капчу (типо гугла, потом клауда), там можно кастомный HTML выводить (там же и переадресация). И в целом если там сделать проверку, тип если уже есть нужная страница, то при обновлении, следующее правило сделает проверку и пропустит. Тип если страница /test и сеть не из спама, то проходи уже. Попробуйте как нибудь.

Odimidorius #:
Вкладка Tools ещё существует не просто так, и всё что ты там банишь будет в бане не обращая на другие правила

Да, так можно, но Вы не увидите логи. К тому же условно другие бесполезные сео сервисы Вы так не забаните, так как они меняют сетки. Первым правилом блокировки всего бесполезного в WAF будет вернее.

Odimidorius #:
Всмысле зачем?

Перечитайте внимательно что Вы пишите.

Odimidorius #:
Ну догадайся, например от скликивания рекламы.

С Вами на ты не переходил. Откуда Вы знаете у клиента есть реклама или нет и почему Вы решили что реклама не через UTM метки? Нормальная директ компания, это компания с UTM метками. Кажется Вы думаете только так, что если у меня так, то и у всех так. Клиент просто с поиска уйдет и не будет решать капчу. Нет смысла делать капчу на referer yandex. С таким же успехом можно вообще капчу повесить для всего.

Odimidorius #:
Делаем страницу на своём сайте.

Полезная фишка, надо попробовать. Спасибо что показали.

Odimidorius #:
Первое правило, пускаем белых ботов

Уже неверно. 

vitaliy11 #:
Ещё флара пускает в белых ботах amason, semrash, эти сети нужно отдельно забанить в последней вкладке.

Второй раз неверно. Если Вы разрешаете первым правилом (Known Bots - белых ботов) их, то правилом ниже вы не забаните (тот же семраш). В клауде важен порядок. Не предоставляйте неверную информацию.

Odimidorius #:
Исключая тех кто содержит в названии Bot,bot,BOT,Spyder,Spider,spider,spyder,crawl,Crawl,python,Python

Зачем исключать? По-моему вы троллите.

Odimidorius #:
показываем всем кто пришёл из поисковых систем, то бишь рефер например yandex.ru/kz/by

Зачем капча для заходов из поиска? Вы хотите чтобы у человека вообще клиентов небыло?

Odimidorius #:
можно перенаправить их на страницу, на которой будет инфа "выключи ВПН

На бесплатном тарифе нельзя делать кастомный HTML или редирект, как вы собираетесь перенаправлять?

На одном из сайта (автоперевод) вижу, что страницы идут в индекс. Смотрю заголовок одной записи (гуглю) нет в выдачи. но по site: адрес сайта страница есть в выдачи. То есть страница проиндексирована но по запросу ее нет. Магия..) Хочется уже чтобы апдейт закончился и что бы понимать, или все - конец, или будет еще борьба.. на 1 фильтранутый сайт, будет новых 10..
BingoS #:

У меня такое вот условие на блокировку ботов  OJSC Rostelecom Macroregional Branch South. 

Вся суть что боты все равно проходят. Что я делаю не так ? почему боты все равно проходят. Хотя условие стоит : Block

Так же и с некоторыми другими сетями.

У Ростелеком ботов две сети ( 12389 25490 ), да и referer может быть как - (черточка), это тоже пустой реферер и прямой заход. А может быть еще referer (адрес сайта).
Вы своим правилом блочите все прямые заходы с этой сети, что не хорошо.  В яндексе или в гугле вбейте ojsc rostelecom macroregional branch south боты - там есть материал подробный про этих ботов и как заблокировать. Изучайте, настраивайте. Ссылку не кидаю, ибо сочтут за рекламу.. А писать одно и тоже сюда не вижу смысла. Все бесплатно и доступно..)


Всего: 338