Резкий всплеск прямых заходов. Как бороться?

alaev
На сайте с 18.11.2010
Offline
822
#861
softerra #:
Вот такой бот.

***.ru 5.255.231.128 - - [31/Oct/2023:07:57:20 +0300] "GET /  HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Перебирает сайт, не знаю, хорошо это или плохо.

Стоит Платону написать.

Может быть ещё такое, что с сайта выдернуты ссылки картинок и тегом img вставлены в какой-нить говносайт, который качают ботами.

Вставку картинок можно поискать поиском по картинкам.

Создание и продвижение сайтов - https://alaev.net , аудиты сайтов, контекстная реклама
softerra
На сайте с 02.10.2023
Offline
99
#862
alaev #:

Стоит Платону написать.

И что им сказать? Пожаловаться на бот Яндекса?

Вот 3 подряд прихода на одну страницу. Даже интересно стало, то Ябота ждем, а то не знаю как прогнать его (как собаку).

***.ru 5.255.231.129 - - [31/Oct/2023:10:03:37 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
***.ru 5.255.231.179 - - [31/Oct/2023:10:14:16 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
***.ru 5.255.231.105 - - [31/Oct/2023:10:24:27 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

How to check that a robot belongs to Yandex - Webmaster. Help
  • yandex.com
Some robots can disguise themselves as Yandex robots by indicating the relevant User Agent. You can check the authenticity of a robot using reverse DNS lookup. Just follow these steps: Check whether the host belongs to Yandex. All Yandex robot names end in , or . If the host name has a different ending, the robot does not belong to Yandex. Make...
alaev
На сайте с 18.11.2010
Offline
822
#863
softerra #:

И что им сказать? Пожаловаться 

Я жаловался. Вот прям на бота. Было такое.

softerra
На сайте с 02.10.2023
Offline
99
#864
alaev #:

Я жаловался. Вот прям на бота. Было такое.

Спасибо, подожду немного, была ошибка в роботсе, может поэтому Ябота заклинило.
A
На сайте с 13.10.2023
Offline
1
#865
Добрый день. Не подскажите, в правиле RewriteCond %{REMOTE_ADDR} нужно экранировать двоеточие :  ?
softerra
На сайте с 02.10.2023
Offline
99
#866
GRAFLEKX #:

Заблокируйте его да и всё - делов то...

Пусть пыхтит баклан и получает по морде 403 =)

Ябот приходит через каждые 10 минут, по несколько раз на 1 url, потом так же на другой url и тд. Не знаю, хорошо это, или плохо. С Яндевких айпих.

Он не живой - значит не баклан )

ЗЫ В принципе 1 раз в 10 минут не напрягает, даже как бы радует.

GRAFLEKX
На сайте с 05.11.2010
Offline
219
#867
softerra #:
Ябот приходит через каждые 10 минут, по несколько раз на 1 url

РСЯ не стоит на сайте?

Мы поможем в поиске работы: стабильная работа для вас ( https://www.rabota.ru ), вакансии и резюме.
softerra
На сайте с 02.10.2023
Offline
99
#868
GRAFLEKX #:

РСЯ не стоит на сайте?

Нет никакой рекламы. Айпи Ябота разные, может боты тоже разные, а юзернейм одинаковые?

***.ru 87.250.224.232 - - [31/Oct/2023:14:36:41 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

***.ru 213.180.203.54 - - [31/Oct/2023:14:46:59 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

How to check that a robot belongs to Yandex - Webmaster. Help
  • yandex.com
Some robots can disguise themselves as Yandex robots by indicating the relevant User Agent. You can check the authenticity of a robot using reverse DNS lookup. Just follow these steps: Check whether the host belongs to Yandex. All Yandex robot names end in , or . If the host name has a different ending, the robot does not belong to Yandex. Make...
Анти ДДОС
На сайте с 14.03.2020
Offline
110
#869
softerra #:

Нет никакой рекламы. Айпи Ябота разные, может боты тоже разные, а юзернейм одинаковые?

***.ru 87.250.224.232 - - [31/Oct/2023:14:36:41 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

***.ru 213.180.203.54 - - [31/Oct/2023:14:46:59 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Да забанить оба диапазона, в чем проблема? Пусть зря жгут электричество, бакланы. И получают по морде 403 error 🔥

Защита сайта от ботов, настройка Cloudflare, поведенческие факторы, АнтиБот, DDoS - https://antiddos24.ru
softerra
На сайте с 02.10.2023
Offline
99
#870
GuruSite24 #:

Да забанить оба диапазона, в чем проблема? Пусть зря жгут электричество, бакланы. И получают по морде 403 error 🔥

Это то же сам Яндекс )

Немного бакланов идет с моб операторов, их блочить не стоит.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий