Скликивают поведенческие? Как бороться?

MH
На сайте с 22.07.2009
Offline
57
2828

Доброго времени суток!

Есть пара нулевых по посещаемости сайтов, разных тематик - коммерческий и информационный, лежат на одном хостинге.

На прошлой неделе заметил по я-метрике увеличение числа прямых заходов.

Заходы ежедневные, группами по несколько заходов с разных ip за раз, с перерывами примерно 2-4 часа, на разные страницы. Длительность примерно 0-3 секунды, отказы - 100%

В логах это выглядит вот так:

176.195.177.20 - - [28/Mar/2016:17:32:02 +0300] "GET /адрес_страницы1/ HTTP/1.1" 200 13499 "http://yandex.ru/clck/jsredir?from=yandex.ru%3Bsearch%3Bweb%3B%3B&text=&etext=1007.Guhpq-FnluXDynwhPrbeu8cqCLQkQwae719gR9yV3x-31hpqiaPnG64sH59s6drx8nZQP_f5dNYrPV9Pg1PcDcFkRbt4NlOqr5Jllcyh2F-jOLwi-u7jls5v2mSCZfF6ab0oON6c38j4PEaszT2FedEJYAYJ48rEBZCZAOd1Y81TC01hBmqHKrMkNeaukK8e.
646917433486d0be82d127eae2a559b302d9f1bb&uuid=&state=AiuY0DBWFJ4ePaEse6rgeAjgs2pI3DW9J0KiE5XNXd0dp0ZMwFHoviUoYa6nzP7MFsomso
uu4qciBxvJQBfb3NpTnGZyYYAsPF0BE_kVHwkYxwJVXH8poV5nyZoF8r8sJGNG0OnrGtsTOF-CDAVdg5j-ljeCtyr6feSPT3uO2c4awh14urgeZgblEo1rwPe6IsuCMXcWEtxrTX5Sa8qVCw&data=UlNrNmk5WktYejR0eWJFYk1LdmtxdVd2WmJBMGZlV2dzOE56UzVhWGptdXFnSlY1VW5hRTJ
rRUhJVjJNUnJvcldjVVdyWVhYNkhCeUpSN3VSWmV6MUFiYzlOb2ZCZVV6bjQtd2FUaFFnd3JNMFVnbjJ
sYllFbkJyTDRZWl9Eb2Y&b64e=2&sign=7220558be554e9cec2916d738d3ac036&keyno=0&l10n=ru&cts=1459173270476&mc=4.50671289495" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0)"

5.228.19.152 - - [28/Mar/2016:17:32:04 +0300] "GET /адрес_страницы2/ HTTP/1.1" 200 13436 "http://yandex.ru/clck/jsredir?from=yandex.ru%3Bsearch%3Bweb%3B%3B&text=&etext=1007.5uB5Y7qsYu87dpQ_E2h3eVBcvhA6PClk2o8Ax6lGLFplQ8GxCrLSUvVkgrcXjk-880ew1bLwLOT2mFOOt-C_YmKrlnsdpvhOTzam9rr_GEZo0RdXroY9c6Kbac4XQhL9gUfpfhB81TFDlYx1PzIjdg.98b5d16ad7e
c2a5feafc1daf49e0ae6199b2d478&uuid=&state=AiuY0DBWFJ4ePaEse6rgeAjgs2pI3DW9J0KiE5XNXd0dp0ZMwFHoviUoYa6nzP7MFsomso
uu4qfYa3T82ZwFk1gxcZ9F5cb6VEjH_s3ouU4ujMKgY8x9-dQ-c8N7LsEICByWdPamj9qv9_V7BYxwREeGBn7rBQyvC-7jYfihel0Aonr7FSM5h4bwSbrm5PwTxl6o2xgAcabqunLq9G__gA&data=UlNrNmk5WktYejR0eWJFYk1LdmtxdVd2WmJBMGZlV2dzOE56UzVhWGptdXFnSlY1VW5hRTJ
oM0VLX0c1dDRucUw2UXZ3TXYzYlY1dTNHSGhCM0ZwMHU4b3VtQndNamx1Vzdtcl9OTHV6R1NmYWlKc0p
XUWM5ZUdpWm9pQmlMejBpV3FpNW0tRDVlLUtraTdaYWtiRWJn&b64e=2&sign=c1c35459f5c8545d121393a36bf281c5&keyno=0&l10n=ru&cts=1459173270476&mc=6.1523887404" "Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1; Trident/4.0)"

и.т.д.

Ну и попутно они запрашивают составляющее содержимое этих страниц.

Если открыть эти ссылки вида "http://yandex.ru/clck/jsredir?from=yandex.ru%...", перекидывает на какую-то "левую" страницу яндекса.

Что происходит? Конкуренты пытаются ухудшить поведенческие показатели сайта? Но нафига пакостить нулевому информационному сайту...?

Можно ли как-то автоматически с этим бороться? Через .htaccess или ещё как-то? не каждый же IP вручную банить...

http://yandex.ru/clck/jsredir?from=yandex.ru%3Bsearch%

- такая строка должна быть в логе при нормальном переходе живого пользователя из яндекса или это признак этих злодеев?

Заранее благодарю за ответы!

C
На сайте с 26.01.2016
Offline
1
#1

Какой смысл скликивать сайт без посещаемости? Это боты скорее всего

MH
На сайте с 22.07.2009
Offline
57
#2
Craftman:
Какой смысл скликивать сайт без посещаемости? Это боты скорее всего

У ботов user-agent соответсвущий - yandexbot, googlebot и.т.п., а тут ничего такого нет, самый обычный агент указан

Может парсеры...

Вопрос - как заблокировать их?

C
На сайте с 26.01.2016
Offline
1
#3
MadHatter77:
У ботов user-agent соответсвущий - yandexbot, googlebot и.т.п., а тут ничего такого нет, самый обычный агент указан

Может парсеры...

Вопрос - как заблокировать их?

хотя, это наврядли боты, т.к. если метрика их засекла, значит они поддерживают javascript. я пробил эти 2 айпишника по whois, это российские интернет-провайдеры, поэтому лучше не блокировать. не будете же блокировать всех юзеров, кто дальше главной страницы не пошел, да и блокировка не только не помешает скликивать, но и увеличит кол-во отказов :)

C
На сайте с 26.10.2013
Offline
54
#4

С этим топиком не связано? Возможно опять активизировались.

Услуги по парсингу данных (/ru/forum/939826), единоразовый и регулярный сбор данных. Любые объемы. Скрипты на PHP, создание и доработка, решение проблем с сайтами Пишите в личные сообщения или скайп
E
На сайте с 02.07.2006
Offline
74
#5
MadHatter77:
У ботов user-agent соответсвущий - yandexbot, googlebot и.т.п.,

не всегда, справедливости ради

у яндекса есть свои подсети

MH
На сайте с 22.07.2009
Offline
57
#6
colorito:
С этим топиком не связано? Возможно опять активизировались.

Фиг знает. Тут показывает просто как "прямые заходы"

ELar:
не всегда, справедливости ради
у яндекса есть свои подсети

Может я чего не знаю, но мне кажется маловероятным, чтобы за один день заходило два десятка неопознанных ботов яндекса с ip из разных диапазонов

E
На сайте с 02.07.2006
Offline
74
#7
MadHatter77:
Фиг знает. Тут показывает просто как "прямые заходы"

все таки попробуйте фильтрами отследить в логах айпишники

Не думаю, что их бесконечно много

Может, анализ что-то и даст.

А кроме конкурентов есть и куча сервисов..типа advodka

MH
На сайте с 22.07.2009
Offline
57
#8
Craftman:
я пробил эти 2 айпишника по whois, это российские интернет-провайдеры, поэтому лучше не блокировать. не будете же блокировать всех юзеров, кто дальше главной страницы не пошел, да и блокировка не только не помешает скликивать, но и увеличит кол-во отказов :)

Да, в метрике все эти заходы помечены как из "Москвы и Мос. области"

http://yandex.ru/clck/jsredir?from=yandex.ru%3Bsearch% - такой фрагмент должен или нет отражаться в логе сервера, если на сайт заходит реальный посетитель с яндекса ?

разве блокировка их по ip не снизит показатель отказов в статистике?

все таки попробуйте фильтрами отследить в логах айпишники
Не думаю, что их бесконечно много

Может, анализ что-то и даст.
А кроме конкурентов есть и куча сервисов..типа advodka

Не бесконечно много, но десятка два только при анализе данных за один день насобирал. Если ip сменят или они динамические, то толку блокировать по ip мало.

Благодарю за отклик!

Vgb
На сайте с 11.09.2013
Offline
100
Vgb
#9

кому может понадобиться сливать нулевой сайт?

VKSolo.ru (https://vksolo.ru/) - Бесплатные лайки в Instagram для всех и каждого
Роман Морозов
На сайте с 23.11.2003
Offline
168
#10

Никак , санкций за такое не будет .

Блог о социальных и поведенческих факторах (http://seonly.ru/) Юзератор - сервис продвижения с помощью поведенческих факторов (http://clck.ru/3QxJ)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий