Упал доход

and2005
На сайте с 21.05.2005
Offline
187
#26301
Vitalik174 #:
AI-агент же )) Claude например и все такое. 
Я решил, что вы про что-то  специализированное говорите
F
На сайте с 06.02.2012
Offline
146
#26302
Vitalik174 #:
AI-агент же )) Claude например и все такое. 
Да, типа того. Сын установил мне в помощь. Видит, как я мучаюсь кодами. Он программист в IT компании работает, сам пользуется, но какими-то дорогими.
RUFP Desktop - это ярлык на рабочем столе. 2 тыс. руб в месяц это минимальный тариф у меня, для пенсионера годится..
Роботность постепенно снижается, сейчас 58%. 
Сегодня не включал его совсем.
F
На сайте с 06.02.2012
Offline
146
#26303

Агент AI не виноват. Подключил его к решению проблемы, включил ему логи на сайте, он посмотрел, отчитался...


Amazonbot, Reflectionbot, LinkupBot, TokenFoundryBot, SEO-краулеры и другие...  сейчас это 71 % всего трафика — за 40 минут ночью 3395 запросов с 3674 разными адресами, до 200 запросов в минуту. Самое важное: часть этих роботов маскируется под Chrome и умеет исполнять JavaScript — на каждой открытой странице у них срабатывает счётчик Метрики. Метрика честно считает такие визиты роботами — отсюда 60-80 % роботности. Для РСЯ это выглядит как бот-трафик на сайте, твоё решение выключить рекламу до разбора — правильное.

.......................... В общем выяснил причину их активности, написал пока им правила в robots.txt в надежде на их порядочность..............................

Чего ждать. Не мгновенно: роботы перечитывают robots.txt по своим расписаниям, нагрузка начнёт спадать в ближайшие дни, роботность в Метрике — за несколько дней после этого. РСЯ советую не включать, пока роботность не вернётся к привычным единицам процентов.
TB
На сайте с 16.01.2009
Offline
317
#26304
fordzon #:
В общем выяснил причину их активности, написал пока им правила в robots.txt в надежде на их порядочность.
плевать они хотели на ваш robots.txt. их надо блокировать  через htaccess или настройки NGINX
AR
На сайте с 21.03.2016
Offline
135
#26305
fordzon #:
В общем выяснил причину их активности, написал пока им правила в robots.txt в надежде на их порядочность..............................

Бесполезно это все, ставьте антибота и не мучайтесь. А так рано или поздно вас забанят в РСЯ.

Анти БОТ
На сайте с 14.03.2020
Online
152
#26306
fordzon #:
надежде на их порядочность
Из всего выше перечисленного только Амазонбот теперь соблюдает роботс, и то не по своей воле. Остальным на него - плевать.
Защита сайта от поведенческих ботов, промокод на месяц без обязательств - https://antibot24.ru/baza/promo
F
На сайте с 06.02.2012
Offline
146
#26307

Да, понятно теперь, откуда боты. Агент тоже уже понял, что роботс им не указ. 
Написал мне, что антибота пока рано ставить, отпугнёт посетителей.  Попробует пободаться с ними.

Пишет сейчас  для них блокировки в htaccess, посмотрим, что получится...

Спасибо, парни, за понимание и участие!

AR
На сайте с 21.03.2016
Offline
135
#26308
fordzon #:
Написал мне, что антибота пока рано ставить, отпугнёт посетителей. 
Отпугнет он как раз ботов, а не пользователей 🤣
F
На сайте с 06.02.2012
Offline
146
#26309
Так антибот посетителям капчу выдаст.  А это всегда неприятный момент. Или как?
TB
На сайте с 16.01.2009
Offline
317
#26310
fordzon #:
Так антибот посетителям капчу выдаст.  А это всегда неприятный момент. Или как?

Ваш AI сам может написать антибота, так как антибот - это по сути php-код, который подгружается в самом начале при открытии вашего сайта