У бота проверяльщика фринома раньше был юзерагент AppEngine-Google; (+http://code.google.com/appengine; appid: s~gce-spider)
Сейчас давно уже этого бота в своих логах не вижу. Но есть другая активная фигня с PTR *.bc.googleusercontent.com, но с не примечательным юзер-агентом: Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.67 Safari/537.36 которая идет только на морды фринома из закладок и только на http, не заходя на https.
Похоже это он в новой реинкарнации?
geoip или sxgeo подключить и всех перебанить.
Выключите свой сервер и увидите сообщение клауда, в котором будет указан ближайший к юзеру сервер, ничего левыми кругами ну ходит.
Яндекс бот продуманный. Он на таймаут интересно реагирует. Когда клаудфлар перестал отвечать - яндекс бот пошел через ipv6 на сайт и успешно по сайтам шарился.
Я в своей тизерке слежение за юзером это решил с помощью etag и last-modified 🍿
когда сафари не хотел принимать куки, файловый кеш юзеры не чистят, чтоб быстрее сайты работали 🤣
Еще можно уломать яндекс запилить функционал с парковкой своих субдоменов через cname на сервер метрики, тогда ж тоже по идее все будет работать и фиг какие адблоки порежут.
ну под порнуху есть же, и порно доргены вроде гдето встречал и сиджи...
РКН тут не причем был, на недоступность сайтов в твиттере жаловались и чехи или типа того, судя по языку.
billypelegrini, да в принципе они все не привередливые. Если они видят кей, т.е. то что собственно искали, то дальше кликают, я по эссей делал такие же. Набивая "рекомендациями" на каком сайте лучше заказать работу, переходили и заказывали нормально.
Это не дор уже по сути, а огрызок одностраничный, просто ботоферма для ссылок на остатках доменов от старых доров.
Но шаблон такого вида конвертится норм )) а в темах где юзеры менее прошаренные в интернете , типа довланда, так вообще топ конверт говорят.
cscope, дорген любой. Дальше клоакинг, я делаю клоаку антиботом, и получается вот такой дор https://betteressay.site/ т.е. для людей шаблон форума и типа осуждение, а поисковым ботам 4 поисковиков там говнотексты и т.п. дорвейное.---------- Добавлено 13.03.2020 в 19:54 ----------https://betteressay.site/tpl.txt собственно юзерский шаблон, кодировка файла utf-8, если вдруг в браузере будут крокозябры.