HELP: грузит диск на вдс

12 3
T e c h n o
На сайте с 09.01.2012
Offline
115
1512

Всем привет. Есть вдска, на которой расположены сайты/доры/сателлиты (~10к) - все на голом html. Посоветуйте, какие меры предпринять для уменьшения нагрузки на диск? :confused: В администрировании дуб-дубом :)

Параметры VDS:

CPU: 2 х Intel Xeon E5-2650 v4 (6 Cores)

RAM: 10GB DDR4

HDD: 4TB SATA

Bandwidth: 1Gbps 10TB

Virtualization: KVM

atop: https://c2n.me/3WQggnf

htop: https://c2n.me/3WQgm8Z

Заранее спасибо!

Оптимизайка
На сайте с 11.03.2012
Offline
396
#1

Поменяйте HDD на SSD или переезжайте на выделенный сервер.

⭐ BotGuard (https://botguard.net) ⭐ — защита вашего сайта от вредоносных ботов, воровства контента, клонирования, спама и хакерских атак!
T e c h n o
На сайте с 09.01.2012
Offline
115
#2
Оптимизайка:
Поменяйте HDD на SSD или переезжайте на выделенный сервер.

Это крайние меры, следующий этап будет именно таким, но с данным случаем и сайтами нужно что-то сделать для более-менее стабильной работы )

access log отключены, левые боты тоже

Оптимизайка
На сайте с 11.03.2012
Offline
396
#3

T e c h n o, а какой характер нагрузки? Видео раздаете? Какой объем файлов? Вынести "сайты" на RAM-диск не вариант, а то у вас памяти много?

LEOnidUKG
На сайте с 25.11.2006
Offline
1723
#4

10K это что? 10 000 сайтов? А посещалка какая у них общая?

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/
S
На сайте с 11.05.2018
Offline
7
#5

Зависит от характера нагрузки, если у вас там просто много HTML файлов, то нагрузку на диск можно запросто снизить в разы просто настроив кеширование в веб сервере, а если у вас там раздаются какие-то объемные файлы, например видео, то зависит от их количества, если 1 видео качает много людей, то можно его закешировать, а вот если у вас там все качают разные видео, то уже так сильно не получится кешировать ибо памяти не хватит на все популярные видео, но все равно эффект от кеширования будет даже в этом случае, хоть и не такой сильный

GoRSS
На сайте с 29.07.2013
Offline
138
#6

1. Минимизация кода

2.

Функция пакования сниппетов в ZIP-архивы. Для примера, txt файл весит 27 кб, а запакованный уже 3 кб. Экономия места в 9 раз.

В первом случае что-то можно поделать, во втором нужен php-обработчик. Вы же генерите доры чьим-то ПО? У разработчика и спросите.

https://commersoft.ru - софт: Google Indexing [индексация в Гугле по API] - Webcontrol [мониторинг сайтов и доменов]
T e c h n o
На сайте с 09.01.2012
Offline
115
#7

Да, на вдс 10 000 сайтов. Просто очень много html файлов, ничего не раздается 😕

просто много HTML файлов, то нагрузку на диск можно запросто снизить в разы просто настроив кеширование в веб сервере

Можно подробнее? Тут или в телеге (написал).

baas
На сайте с 17.09.2012
Online
161
#8
T e c h n o:
Да, на вдс 10 000 сайтов. Просто очень много html файлов, ничего не раздается 😕



Можно подробнее? Тут или в телеге (написал).

Интересно как вы их мониторите/управляете?

10 тыс сайтов, жуть, сума сойти можно.

Ну так может включить сжатие в вашем вэб серевре.

Настройка BSD систем. (https://www.fryaha.ru) Знание сила, незнание Рабочая сила!
LEOnidUKG
На сайте с 25.11.2006
Offline
1723
#9

Какая посещалка идёт на них в общей сложности? Вы просто физически можете упираться в работу HDD. Так же из-за такого количества сайтов, придёт 1 бот, например бинг и убьёт всё. Может быть ддос у вас идёт. Вы настраивали nginx ограничение на количество подключений?

Кстати скрины не работают из первого поста.

T e c h n o
На сайте с 09.01.2012
Offline
115
#10
LEOnidUKG:
Какая посещалка идёт на них в общей сложности? Вы просто физически можете упираться в работу HDD. Так же из-за такого количества сайтов, придёт 1 бот, например бинг и убьёт всё. Может быть ддос у вас идёт. Вы настраивали nginx ограничение на количество подключений?

Кстати скрины не работают из первого поста.

Так вот приходит гуглбот и всё убивает. Да, всё упирается в нагрузку диска 😒 Как мне объяснили - random read и кеширование не помогает.

Посещаемости нет как таковой, так как гуглбот даже не может нормально ничего проиндексировать :(

atop: https://c2n.me/3WR9ROP

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий