Аномальные всплески бота гугл

12
iccup
На сайте с 01.05.2016
Offline
209
1235

ЧТо-то не пойму, я от жизни отстал? 400к запросов картинок в сутки, что за бред

kimsufi.com ( https://www.kimsufi.com ) очень дешевые и качественные дедики https://clck.ru/gvF9p - антибот, использую уже 3 года.
L
На сайте с 25.12.2013
Offline
440
#1
И что удивительного, если у тебя десятки тысяч картинок на сайте?
Недорогой, надежный и отзывчивый VPS хостинг ( https://vk.cc/cSd09I ) Проверенная пуш партнерка с ежедневными выплатами ( https://vk.cc/9wLSrL )
Mik Foxi
На сайте с 02.03.2011
Offline
1218
#2
значит есть много чего для индексации.
Антибот, антиспам, веб фаервол, защита от накрутки поведенческих: https://antibot.cloud/ (8 лет на защите сайтов). Форум на замену серчу: https://foxi.biz/
S
На сайте с 28.10.2005
Offline
319
#3
Точно настоящий Гугл?
iccup
На сайте с 01.05.2016
Offline
209
#4
да понятно что много картинок, но почему все за 1 день делает? не проще ли растянуть на месяц? Так то это куева куча запросов в секунду и не хило так грузит канал и диск
iccup
На сайте с 01.05.2016
Offline
209
#5
semenov #:
Точно настоящий Гугл?
хааха, ну точно, из консоли гугла скриншот
S
На сайте с 28.10.2005
Offline
319
#6
iccup #:
да понятно что много картинок, но почему все за 1 день делает? не проще ли растянуть на месяц? Так то это куева куча запросов в секунду и не хило так грузит канал и диск
А может быть такое, что график загрузки гуглботом - это зеркальный график загруженности вашего сервера?
iccup
На сайте с 01.05.2016
Offline
209
#7
semenov #:
А может быть такое, что график загрузки гуглботом - это зеркальный график загруженности вашего сервера?
не понял, это типа гуглбот в другие дни не может сканировать из-за проблем на стороне моего сервера? Проблем нет, да и удивляет четкая периодичность сканирования
K4
На сайте с 29.01.2020
Offline
83
#8
iccup :

ЧТо-то не пойму, я от жизни отстал? 400к запросов картинок в сутки, что за бред

Бывает, отдавай 304 код гугл ботам.


D
На сайте с 23.11.2018
Offline
55
#9
Kykapa4a #:

Бывает, отдавай 304 код гугл ботам.


Вот-вот, здравый совет, на картинках точно нужно, особенно когда их много. Нагрузка и на канал, и на диск минимальная будет

S
На сайте с 28.10.2005
Offline
319
#10
Kykapa4a #:

Бывает, отдавай 304 код гугл ботам.


Только если бот присылает If-Modified-Since, по идее сервер должен такое по умолчанию обрабатывать, либо не шлёт, либо сервер дату не отдаёт
12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий