Огромная нагрузка на хостинг из за ботов

12 3
TpaBkuH
На сайте с 21.07.2007
Offline
132
436
Добрый день!
Есть информационный сайт (на WP), с ~20000 поискового трафа в сутки.

Сайт хостится на бегет (вип тариф). В последние месяца, возросла во много раз нагрузка (по статистике бегета), особенно в последние пару дней.

Установил AWStats (вот какие данные):

Статистика-1

Статистика-2

В тех.поддержки хостинга говорят что много запросов идут с разных IP на разные страницы (возможно даже DDoS-атака). Посоветовали через .htaccess их заблокировать. Блокировка не помогла (IP постоянно меняются).

Так же по статистике заметил что очень много шуршит яндекс бот. В вебмастере уже поставил скорость обхода 0,6 запросов в секунду.

Вообщем не знаю что уже делать. Нагрузка на хостинге огромная и превышает все лимиты (боюсь что рано или поздно выкинут).

Может кто-то знает и разбирается в теме и может помочь (за вознаграждения соответственно).

P.S Поможет ли в этом случае cloudflare? И есть ли русские аналоги?

Первые 7735$ я заработал здесь (http://www.sape.ru/r.ec23dcd379.php)
Mik Foxi
На сайте с 02.03.2011
Offline
904
#1
Только увеличивать тариф хостинга или яндекс бота забанить, другие варианты вам не помогут.
Антибот защита сайта от накрутки поведенческих, от спама, взлома и поиска xss, от хит и клик ботов, от парсинга и кражи контента, снижение нагрузки на сервер - https://antibot.cloud/ | Защита яндекс метрики от ботов: https://wmsn.biz/m.php?p=144236 (инструкция по защите от порчи поведенческих факторов).
S1
На сайте с 22.09.2011
Offline
195
#2
Если сайт не типа там какие то сериалы или трансляции матчей то можно еще больше яндекс ботов ограничить по обходу. очевидно же.
Хостинг для твоего сайта 😈 https://beget.com/p946067 - Бесплатные SSL. А здесь 👽 http://allpositions.ru/redirect/169497 можно проверить позиции сайта в Яндексе и Гугле.
SILL
На сайте с 10.09.2018
Offline
55
#3
А позиции просели у вас?
skapunker
На сайте с 15.01.2014
Offline
176
#4

поставь VPS и не парься, боты есть на каждом сайте

cloudflare если только платный тариф, там за 20ку есть

если бы была DDOS атака, то бегет загнулся бы сразу, так что это маловероятно, потому что твой сайт никому не сдался

Я единственный СЕО гуру на этом сайте. Царь и король веб-мастеринга.
maximka77
На сайте с 15.10.2011
Offline
192
#5
skapunker #:

если бы была DDOS атака, то бегет загнулся бы сразу, так что это маловероятно, потому что твой сайт никому не сдался

Это верно. Если бы ддосили, уже бы сайт лежал мертвым грузом

- Ваш платежный брокер в Европе ( https://ecommerce-broker.com/ ) - Mnogo-Kreditov.ru – финансовый портал ( https://mnogo-kreditov.ru/ ) - Интернет-магазин мебели, освещения и электроники ( https://comfortium.ru/ )
TpaBkuH
На сайте с 21.07.2007
Offline
132
#6
skapunker #:

поставь VPS и не парься, боты есть на каждом сайте

cloudflare если только платный тариф, там за 20ку есть

если бы была DDOS атака, то бегет загнулся бы сразу, так что это маловероятно, потому что твой сайт никому не сдался

Про DDOS мне тоже показалось маловероятным (к тому же при большой нагрузке, сайт открывается очень шустро).

По поводу VPS, никогда не имел с ним дело. Если на вип шаред хостинге такая нагрузка, перейдя на VPS она же ни куда не денется? Или VPS справится с таким потоком ботов?

serp_1 #:
Если сайт не типа там какие то сериалы или трансляции матчей то можно еще больше яндекс ботов ограничить по обходу. очевидно же.

Как больше ограничить ботов яндекса, если в вебмастере стоит уже скорость обхода минимум!? Crawl-delay вроде бы яндекс уже не учитывает.

SILL #:
А позиции просели у вас?

Нет, не просели.

IS
На сайте с 16.08.2006
Offline
129
#7
Ну мне и бесплатный тариф  cloudflare как то помог после того как хостер отключил сайт среднего  тарифа из-за превышения нагрузки
B
На сайте с 27.05.2018
Offline
45
#8
Igor-san #:
Ну мне и бесплатный тариф  cloudflare как то помог после того как хостер отключил сайт среднего  тарифа из-за превышения нагрузки

Чем он помог?  Если он не пропускает ботов в том случае, и если задать правила. По умолчанию от клоуда нет смысла 

adouz
На сайте с 28.03.2018
Offline
34
#9

У меня в конце декабря была появилась же ситуация на двух сайтах, с посещалкой в районе 13 тыс. у каждого, хотя они уже 3-й год работают нормально.

Каждые 20 минут проц. грузился на 100%, сайты лежали минут по 5. Использование процессорного времени достигало 300+ минут в сутки. Переезжал с тарифа на тариф, докупал лимиты итд. Вобщем проблема решилась заменой плагина кеширования. С wp super cache на Lite speed cache. Теперь нагрузка на проц. едва достигает 3-7%, а процессорное время за сутки - 5-10 минут, вместо 300+.

Ну и ботов Яндекса ограничил до 9 запросов в секунду на всякий пожарный.

Jack SparroW
На сайте с 06.12.2012
Offline
156
#10
Мне бегет сразу предложили "доплатить" за доп нагрузку. Доплатил, пог года все ок, никто не жалуется. Тоже ВИП тариф.
Самый удобный хостинг (https://beget.com/p646145).
12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий