"фантомные" боты

Вы сильно не обращайте на них внимание. Ваш сайт обходит headless browser PhantomJS, это как простой браузер Chrome только без графической оболочки. Когда на вашем сайте контент отдается по JS и его нельзя вытянуть обычным парсером, тянут страницу вот такими шутками, как PhantomJS. А уже поменять юзерагенты и прочее, это вообще не проблема.

Ваш сайт(или доры) парсят, вот и все. Можете со смелой душой их блокировать и голову ними не забивать.

спасибо капитан

я знаю что такое фантом (хинт, я это даже в заголовок топика вынес)

и мне совершенно не интересно, что он у меня на дорах делает и кто его владелец/владельцы

кэп, не поделитесь ли как отличать фантома, с измененным юзерагентом и прочим стафом от реального пользователя?

Повесить на страницу какое-нибудь событие типа onmouseover/onclick. Вообще тема широкая.

Угу и забраковать точскрин юзеров :)

Если честно я не совсем понимаю ТС'а.

Как он вычислил, что это именно боты на PhantomJS если там разные юзерагенты?

Или там в каждом юзерагенте, прописано вот, что-то типо такого "PhantomJS/2.1.1" как в приведём им примере?

Тогда в этом случае не понимаю, в чём проблема забинить их?

я ради прикола сливал таких ботов в некоторые PPC партнерки, чтоб посмотреть насколько хорошо они их ловят

часть партнерок принимает и засчитывает.

а вот, к примеру, promoheads сказали 100% боты... не отрабатываю они какой-то их хитрожопый js

ТС, а ты ни у кого не заказывал на свои доры ссылок проставить? может в той сетке хитбот живет?

а я не утверждаю что там все боты работают на фантоме. я делаю предположение, основываясь на нескольких переходах, которые принесли этот юзерагент.

да и собственно говоря, мне без разницы на чем работают эти самые боты. меня интересует средство борьбы с ними.

Тут смотрел? https://habrahabr.ru/post/303378/

Варианты есть тут

https://github.com/ikarienator/phantomjs_hide_and_seek

Но 100% рабочего нету вообще.