Приветствую всех. С 30-го марта в отчетах метрики начало фиксироваться огромное количество ботов, чуть ли не треть от посетителей всех сайтов. Хотя позиции сайты имеют, идет органический траф из выдачи. Не могу понять - это реально боты, или яндексоиды опять выкатили новый алгоритм и тестируют?
Кому не сложно - можете пожалуйста проверить у себя в отчетах - поиск по отчетам > "роботы" - вывод по месяцам - статистику ботов с 30-го марта. Очень хочется узнать - что реально происходит.
"яндексоиды" - сто пудов, со своими кривыми алгоритмами, являются источником неточной информации о посещении сайта роботами.
У меня на всех сайтах работает скрипт-планировщик, который соответственно посетителю зашедшему на сайт, подключает к web-странице те или иные модули и формы.
В планировщике можно создавать разные условия. Есть и условие "Посещение роботом".
Я специально настроил так планировщик, что Роботам не подгружается, ни реклама, ни счетчики. Только чистый контент и ничего более.
Соответственно, когда настоящий робот заходит на web-страницу, он не трогает ни какие яндекс-скрипты. По идеи, в такой ситуации яндекс не может фиксировать посещения роботов вообще.
Так вот.
В Метрике, с умным видом, "яндексоиды" фиксируют "Роботность".
Похоже, что "яндексоиды" время просмотра web-страницы менее какого-то значения - считают "посещением робота".
По сути это их ошибка. Или специальный инструмент принудительной пессимизации неугодных ресурсов.
К примеру. Ресурс, перестал соответствовать какому ни будь спорному условию - зачем вдаваться в детали и в своих обоснованиях выглядеть глупо.
Перевёл параметр времени посещения с 2-х на 20-ть секунд и вуаля - всё законно. "Роботы, роботы - ваш ресурс исключен из РСЯ..."
И это не конспирология.
На сайте, который у меня в конце марта был исключен из РСЯ, именно за повышенную роботность, Можно наблюдать следующее:
в отчетах - "количество роботов", волшебным образом, соответствует значению "количество визитов от 10 до 29 секунд". А "количество отказов" - 0. :)
Не проверял, но на сайте QIWI есть следующая информация:
Как перевести деньги с QIWI на другую иностранную карту (не Беларуси/Казахстана)?Прямые переводы на иностранные карты Visa и Mastercard ограничены.Но вы можете отправлять деньги в некоторые страны через систему Contact (список стран постоянно меняется – проверяйте возможность отправки в форме перевода). Обратите внимание – получить деньги за границей можно только наличными в отделениях партнеров. https://www.contact-sys.com/where
На карте показано много пунктов. В том числе и в США
Надо смотреть настройки сайта. Файлы .htaccess robots.txt. Что там написано? Какая CMS? Как настроены nginx apache?
Может файлы txt кэшируются и в кэше хранятся 7 дней. Симптомы, могут указывать на это.
Какой из пунктов соглашения ваш? Там есть очень тяжелые пункты. А то, может и бог с ними с этими деньгами... Хорошо, что деньгами взяли.
4.21.8. Клиент не вправе использовать Кошелек для злоупотребления предоставленными Клиенту НКО или третьими лицами правами, совершать любые действия, направленные на недобросовестное использование сервиса, а также совершать массовую регистрацию Кошельков, в том числе:4.21.8.1. для использования ошибок, неточностей и допущений, имеющихся в функционале и описании различных сервисов, в том числе в целях получения выгоды;4.21.8.2. для осуществления противоправных действий (имеющих определяемые по исключительному усмотрению НКО признаки состава преступления, административного правонарушения, неисполнения гражданско-правовых обязательств перед НКО или любыми третьими лицами, легализации (отмывания) доходов, полученных преступным путем, или финансирования терроризма);4.21.8.3. для совершения операций с использованием нестандартных или необычно сложных схем их проведения, отличающихся от обычного порядка операций, характерных для Клиентов НКО, для совершения операций, не имеющих действительной цели оплаты товаров, работ, услуг в ТСП, и/или совершаемых для увеличения количества операций / регистраций / привязки Кошелька/выпущенной к нему Карты в конкретном торгово-сервисном предприятии для получения бонусов или иных преимуществ, предлагаемых данным торгово-сервисным предприятием, для систематического аккумулирования и дальнейшего распределения денежных средств среди нескольких получателей/систематического перевода на собственные реквизиты/получения наличных денежных средств/иных операций, имеющих признаки транзита;4.21.8.4. для предоставления или сбора денежных средств для финансирования организованной группы, незаконного вооруженного формирования, преступного сообщества (преступной организации);4.21.8.5. для совершения операций оплаты/получения оплаты в отношении объектов, изъятых из оборота или ограниченных в обороте;4.21.8.6. с целью хищения/сокрытия чужих денежных средств;4.21.8.7. для совершения любых операций, связанных с распространением информации, товаров, работ, услуг, пропагандирующих ненависть, насилие, расовую или религиозную нетерпимость, нацистскую или сходную атрибутику и/или символику, побуждающих к свержению органов власти и изменению государственного строя, к незаконному уничтожению собственности, мятежу, массовым беспорядкам, осуществлению иной экстремистской деятельности;4.21.8.8. для совершения любых операций, прямо или косвенно связанных с финансированием терроризма;4.21.8.9. в целях совершения любых операций, нарушающих или посягающих на нарушение любых интеллектуальных прав;
Что пропадает-то?
Файл ads.txt пропадает? Типа был был и его не стало?
Если файл периодически пропадает, то его содержимое можно не проверять и не тестировать на наличие орфографических ошибок.
Причиной пропадания файлов может быть автоматическое обновление CMS или запрет правилами хостинга на размещение ads.txt .
Вообще, На своей странице посмотрите, ваши ли баннеры висят? :)
Так то, это общепринятая практика - воровство баннеров.
Наверно, отладка Google-рекламы на пустой странице не верное решение. Я вспомнил.
Каждый раз после появления новой страницы Google -рекламы нет до тех пор пока её не посетит робот Google Partner. И если страница пустая, то реклама там не появится ни когда.
Ещё. У меня отключены всякие эксперименты и автоматические объявления. Чистый адаптив.
И да. На сайте настроена Content Security Policy (CSP).
Практически все интернет провайдеры подсовывают свою рекламу и свои стили, иногда полностью заменяя вашу рекламу своей. CSP обламывает их в этом. Может в этом секрет.
Надо экспериментировать через Tor.
Чтобы выяснить причину появления неожиданных стилей, надо исключить все подключаемые стили. Для этого создайте тестовую страницу
<html><head></head><body>...</body></html>
Проверьте, будет ли код работать как надо. После этого можно будет дальше разбираться.
У Яndex как-то всё хитро. Есть какой-то интересный параметр ePCM, алгоритм формирования которого неизвестен. Но я подозреваю, что он таки как-то связан с количеством кликов.
В статистике создайте отчёт и посмотрите как от ePCM зависит доход и как ePCM зависит от количества кликов и видимых показов.
Зависимость дохода и ePCM прямая - это явно. А остальные зависимости - в тумане.
В своей ежедневной статистике я вижу примерно одинаковые значения показов и кликов, а ePCM имеет очень большую волатильность.
Можете показать весь код? Скройте id на блоках рекламы и выложите
Там у Адсенса могут быть разные настройки, может они влияют, а то что-то не очень получается...
Может не получаться по той причине, что Google иногда не просто создаёт DIV с нулевой высотой, а ещё и внешний DIV делает "display:none;", тем самым скрывает всё, что в нём находится. В том числе и Яndex рекламу. По типу "Так не доставайся же ты никому".
Это исправляется, изолированием рекламного кода с помощью DIV googlebanner и yandexbanner
Попробуйте так: пример блока для рекламы 340x250 (для адаптивных блоков размеры должны быть определены заранее)
<div style="background-color: transparent; margin: 0; height: 340px; width: 250px; overflow: hidden;"><div id="googlebanner"><script async src="//pagead2.googlesyndication.com/pagead/js/adsbygoogle.js"></script><!-- Адаптивный --><ins class="adsbygoogle" style="display:block" data-ad-client="XXX" data-ad-slot="XXX" data-ad-format="auto"></ins><script>(adsbygoogle = window.adsbygoogle || []).push({});</script></div><div id="yandexbanner"><!-- Yandex.RTB --><script>window.yaContextCb=window.yaContextCb||[]</script><script src="https://yandex.ru/ads/system/context.js" async></script><!-- Yandex.RTB --><div id="XXX"></div><script>window.yaContextCb.push(()=>{ Ya.Context.AdvManager.render({ renderTo: 'XXX', blockId: 'XXX' })})</script></div></div>
Тоже, поначалу хотел на сайте реализовать анализ страны посетителя.
По логике, всё правильно.
Но после секундного раздумья, придумал следующее решение
Смысл в следующем:
Код Google размещается в DIV. Сейчас, для посетителей из России рекламы нет. Это выглядит так, что высота Google-DIV равна 0.
В то же время Яndex-DIV заполнен html элементами. Пользователь из России видит Яndex- баннер. Кликает его и вам наступает счастье.
Когда на сайт заходит посетитель из иной части мира, то для него Google-DIV заполнен html элементами и высота его не равна 0.
В то же время Яndex-DIV сдвигается вниз на 250px и становится невидимым, а посетитель видит только Google-баннер.
Что и требовалось.
Для пущей важности, с помощью javascript можно придумать анализатор высоты Google-DIV, который при ненулевой высоте, будет очищать Яndex-DIV.
:)
