Только что обнаружил по трафику 150 000 просмотров в сутки от бота mail.ru
Юзерагент у всех: Mozilla/5.0 (compatible; Linux x86_64; Mail.RU_Bot/Fast/2.0; +http://go.mail.ru/help/robots)
Сотни ip адресов типа от 95.163.255.187, 95.163.255.158 и.т.д до 2500 просмотров с каждого ip адреса .
Все эти ip принадлежат подсети 95.163.254.0/23 от mail.ru, но пробивая каждый ip например 95.163.255.187 получаем Limited Liability Company Data Center M","domain":"ztomy.com с кучей жалоб на спам на cleantalk
от 95.163.255.0 - 95.163.255.149 в whois указано mail.ru
от 95.163.255.150 - 95.163.255.255 типо боты от mail.ru, но в whois указано ztomy.com
SP Limited Liability Company Data Center M
Usage Type Data Center/Web Hosting/Transit
Hostname(s) fetcher16-1.go.mail.ru
Domain Name ztomy.com
Country Germany
City Frankfurt am Main, Hessen
Может с этим связан фильтр adsense так как этот диапазон у меня был в доверенных я думал, что вся подсеть принадлежит mail.ru роботам и только я сейчас обнаружил этот трафик причем по всем сайтам где пропала реклама.
P.S. Короче ложная тревога, по неизвестной причине зарубежные сервисы cleantalk и abuseipdb показывают неверную информацию о ip.
Реклама появляется на странице только после посещения бота adsense, остальные клики от дешевых сетей типо rtb house платящие 0,001-0,005 цента которые крутятся без проблем с учетом фильтра.
Не знаю точно ли с этим связана пропажа рекламы на сайте, но нашел очень странное совпадение начиная с июня количество кликов в adsense и аналитике начало очень сильно отличатся.
Июнь adsense - 2951 | analytics - 3844 | разница - 893
Июль adsense - 3165 | analytics - 4172 | разница - 1007
Август adsense - 3481 | analytics - 5042 | разница - 1561
Сентябрь adsense - 2820 | analytics - 7015 | разница - 4195
Октябрь adsense - 3216 | analytics - 9390 | разница - 6174
Ноябрь (реклама пропала) adsense - 336 | analytics - 2 343 | разница - 2007
Декабрь (рекламы нет, почистил трафик) adsense - 474 | analytics - 818 | разница - 344
Январь (рекламы до сих пор нет) adsense - 473 | analytics - 945 | разница - 472
Сейчас наблюдаю на странице был 1 показ в аналитике засчитано 3 клика, а в adsense 0.
Где по ip, а где пришлось блокировать целые подсети например PSOD, OVH, Linode, азиатские страны такие как Китай, Корея, Таиланд и остальные. Только все блокировки нужно делать аккуратно так как блокируя целую подсеть можно заблокировать реальных пользователей. После блокировок трафик не пострадал, а вот всяких ботов стало на порядок меньше.
У меня тоже самое
Сентябрь adsense 2 820 кликов в аналитике 4 712 кликов
Октябрь adsense 3 216 кликов в аналитике 6 390 кликов
1 Ноября споймал фильтр и пропала вся реклама и до сих пор нет. Прошел месяц как почистил трафик количество кликов почти совпадает разница +-50-100.
Скорее всего плохой трафик и склик аналитика клики считает, а adsense считает их недействительными и не засчитывает.
К слову фильтр еще висит уже прошло больше месяца трафик стараюсь мониторить каждый час.
У меня в общем реклама не показывается 2 месяца и примерно месяц после чистки трафика и фильтр пока держится хотя на низко-посещаемых страницах объявления есть на всех страницах.
У каждого разные ситуации я недели 2 анализировал логи, чтобы разобраться, что к чему и написал собственный скрипт по отслеживанию и блокировки трафика.
Кто в курсе через сколько примерно дней снимается фильтр после чистки трафика?
У меня тоже периодически то на месяц пропадала реклама, потом появилась на неделю потом опять отключилась на недели 2 и так на разных сайтах. Начал записывать и отслеживать логи посещений и обнаружил кучу различных ботов и около 5000 различных ip адресов с разных стран и подсетей посещавших одни и те же страницы сайта свыше тысячи раз в сутки. Заблокировать каждый ip и даже подсеть просто невозможно. Сообщений на аккаунт не получал, но уверен, еще чучуть и прилетело бы подобное сообщение. На другом сайте вообще из китая около 50000 посещений в сутки с разных ip по 1 странице. Пришлось на время закрыть доступ к сайтам из китая и другим странам кроме СНГ и поисковых ботов гугла и яши.
Можно не запрещать, а просто скрыть блоки adsense тем кто переходит с facebook с помощью HTTP_REFERER и показывать им например yandex direct
ну или через htaccess отправить на 404 или другую страницу
RewriteCond %{HTTP_REFERER} ^http://(www\.)?facebuk\.com/ [NC]
RewriteRule ^.*$ http://вашсайт.com/404.html [R,L]
В .htaccess прописать, например
RewriteCond %{HTTP_USER_AGENT} "^trendictionbot"
RewriteCond %{HTTP_USER_AGENT} "^serpstatbot"
RewriteRule ^.* - [F,L]
и.т.д
