Анти БОТ

Анти БОТ
Рейтинг
129
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам

Да уже все давно забыли. Как в свое время про ICQ или Скайп.

Так что актуально в этом тописке только то, через сколько последним 2 пользователям вебманей надоест обсуждать былые славные времена, и через сколько тема уйдет в архив.

Ирина Рина #:
Так, перенесла сайт и базу данных на новый сервер, теперь вот такая ошибка, что я не так сделала?

Есть подозрение, что если машина не едет, дело не в машине, а в том, кто между рулем и сиденьем.

Почему-то никому в наше время не приходит в голову ставить себе на компьютер Windows 3.1. Но при этом весту ставят. И не смущает например, что единственный апдейт за последние годы они родили в 22 году. А в RU части их форума за 5 месяцев этого года написано одно сообщение. 
А потом рождаются вот такие вот странные темы.

Вы же не системный администратор, чтобы пытаться разобраться в таком древнем устаревшем софте.
Поставьте на VPS более современную панель управления, которая будет работать из коробки.

i.lisovenko #:
А если на сайте есть просто прямые заходы, явно бота кто то чему то учит, как таких запретить?

Так и загуглите: нагул профиля поведенческими ботами.

dataworld #:
При этом в Cloudflare в логах WAF я не вижу этих посещений на эту страницу (кроме своих)

Они есть в access логах сервера?

yalol #:

а как проверить доступен ли сайт для них?

В логах access сервера можно посмотреть, что в итоге приходит на сайт.
Если бы читали ветку про Cloudflare, то там обсуждалось это. Выше Skip ставится правило с блоком.

boobi #:


Одна из базовых настроек для CF чтобы ПС Я/Г боты сканировали сайт.

Таким образом не только боты поисковиков будут иметь доступ к сайту, но и целая толпа полезных с точки зрения Клауда ботов: Амазонбот, Ашрефсбот, Клаудибот, Маджестик и прочее, что забьет сервер пачкой бесполезных подключений.

tripsik #:
пока это рекоммендация но скоро станет обязательной и ркн всех российских хостеров легко заставит ее исполнять

Это не рекомендация. Это выдернутое журналистами ради хайпа мнение какого-то собеседника о том, что в списке ботов есть ИИ бот Гугла. О блокировке поисковых ботов Гугла там и рядом не стояло. Мнение собеседника основано на том, что в этом эксперименте Гугла пока что нет возможности как-то отключить этого бота, и в целом запрет на его использование в роботс ни разу не приводит к тому, что поисковик перестает использовать контент сайта для обучения своего ИИ.

А сам список - это список ботов какого-то чувака из ЮАР с Гитхаб.

Развели флуда на 12 страниц.

Токен Google-Extended для файла robots.txt указывает сканерам Google включить сайт в поиск, но не разрешает использовать сайт для обучения системам ИИ, подобным тем, которые лежат в основе чат-бота Bard и Vertex AI, в том числе и для будущих поколений ИИ-моделей компании.
Kaavain #:

Да нет, многие пришли по моим фразам. Даи карточки товаров у меня конкретные - все написано с картинками. 

Давно уже ботофермы и через поиск гуляют.

seonick :
Были показатели от 80 и выше по мобильной версии и до 99 по десктопу.

У вас там полотно с перечислением ошибок что с телефона что с компа такое, что в экран не влазит.

Может, до этого работал какой-то супер кэш от битриксов (с быстрой подгрузкой первого экрана, а остальной тормоз уже тормозил фоном), и оно так не бросалось в глаза. Потом оно отвалилось, и оказалось что сайт - еле шевелится.

Например, в мобильной версии в окошко 200*300 в главном экране (главный баннер) грузится футбольное поле разрешением 1500*1000. И весом 1 мб. А есть изображения разрешением 3500px и весом 2.5 мб.
Картинки вообще в jpg.
Опять же, в главном экране еще и слайдер, как понимаю с целой кучей таких же тяжелых тормознутых изображений, управляемых тормозящим скриптом. Полный вес главной - около 20 мб. Основные тормоза из-за большого количества скриптов, стилей и проч, общей запущенности и неоптимизированности сайта.


Ну и далее по списку, из разряда если бы это была лошадь дешевле было бы ее пристрелить.

sergv #:
p.s. проблемы далеко не у всех. У кого-то никаких изменений, у кого-то пропажи.

Спорить не буду, могу говорить только за себя. Лично у меня ни один сайт не пропал из вебмастера. Но у меня все прописано именно в ДНС, причем не хостерском, а от Cloudflare.

Всего: 1326