Попробуйте добавить в mysql-optimizer gzip - Администрирование серверов

Нужен коллективный разум - высокая нагрузка

Dram · 2015-06-12T06:17:54.0000000Z

Переехал с такого сервера Intel® Xeon™ E3-1245, 32 GB DDR3 RAM ECC, 2 x 3 TB 6 Gb/sec 7200 RPM HDD SATA3 На такой Intel® Core™ i7-4770 , 32 ГБ DDR3, 2 x 2 ТБ SATA 6 Гбит/с 7200 об/м Сайты на Джумле. Сейчас минимум трафика, праздники + выходные, но проц загружен на 90% и LA под 20. На старом сервере была связка Дебиан + Nginx + php-апач + еаксилератор нагрузка в пик + был еще один сайт была не более 60% - а в выходные 20%, LA обычно 2-4 На новом пробовали: Дебиан + Nginx + php-апач + opcache Дебиан + Nginx + php-fm + opcache Дебиан + Nginx + php-fm + еаксилератор Дебиан + Nginx (кеш включен) + php-апач + еаксилератор - это сейчас работает. Переключение режимов ниче не давало, нагрузка не уменьшается. вот вывод top Сервер настраивал админ из этой ветки. Я так понял у него идеи закончились и причины нагрузки ему не понятны Что посоветуете?

78

WebGomel

13 июня 2015, 20:46

#91

Как бы немножно из другой оперы, это иногда помогает при сложных запросах, но всё же могу предложить попробовать добавить:

optimizer_search_depth = 0

в my.cnf и ребутнуть MySQL. А вдруг поможет?

Удалённый системный администратор ( https://remadmin.com )

[Удален]

14 июня 2015, 06:40

#92

По optimizer_search_depth - 0 слишком кардинальное решение - https://www.percona.com/blog/2012/04/20/joining-many-tables-in-mysql-optimizer_search_depth/

D

1114

Dram

14 июня 2015, 07:20

#93

Всем спасибо - переезжаю назад. Хотел сэкономить на сервере 40 евро в месяц, а в итоге потратил денег на несколько месяцев работы севера :( + кучу нервов и пару бессонных ночей.

Перенес основные сайты на старый сервер - и они летают там, нагрузка мизер... В общем чудеса.

Новый фильтр Яндекса? гигабитный сервер в Европе/России Кто по какому принципу

N

419

netwind

14 июня 2015, 08:34

#94

Dram, я так сложно пишу или что? почему бы не проделать описанные мной манипуляции ?

Кнопка вызова админа ()

D

1114

Dram

14 июня 2015, 08:42

#95

netwind:
Dram, я так сложно пишу или что? почему бы не проделать описанные мной манипуляции ?

Уже нет сил на эксперименты - завтра трафик увеличится на 50% и уже нет времени на тесты.

P.S. сервер смотрели 3 админа с серча - снизить нагрузку не удалось. А старый сервер - ее особо не замечает.

N

419

netwind

14 июня 2015, 09:36

#96

Dram, так сервер все равно вы купили на месяц. И предлагаемые мной тесты очень простые.

А почему упоминание о pt-summary пропустили ? Это просто программа . Запустить один раз.

Раз gzip так тормозит, то можно сжатием больших файлов gzip и протестировать . С максимальным сжатием с ключем -9 .

1

Можно ли выкрутить gzip_comp_level Сжимать или нет файлы Очень медленно загружается сайт

D

1114

Dram

14 июня 2015, 09:50

#97

Как запустить / установить pt-summary ? не нашел мануала в сети

N

419

netwind

14 июня 2015, 10:32

#98

Dram,

запустить следующие команды

wget http://percona.com/get/pt-summary

bash ./pt-summary

вывод в виде текста скопировать на форум.

1

D

1114

Dram

14 июня 2015, 10:34

#99

Новый (проблемный сервер) - сейчас уже без нагрузки, сайты перенес обратно

# Percona Toolkit System Summary Report ######################
Date | 2015-06-14 10:32:58 UTC (local TZ: MSK +0300)
Hostname | srv.********.ru
Uptime | 14:09, 1 user, load average: 0.01, 0.07, 0.12
System | # SMBIOS implementations newer than version 2.7 are not
Service Tag | # SMBIOS implementations newer than version 2.7 are not
Platform | Linux
Release | Debian-based version 7.8 (wheezy)
Kernel | 3.2.0-4-amd64
Architecture | CPU = 64-bit, OS = 64-bit
Threading | NPTL 2.13
SELinux | No SELinux detected
Virtualized | No virtualization detected
# Processor ##################################################
Processors | physical = 1, cores = 4, virtual = 8, hyperthreading = yes
Speeds | 8x800.000
Models | 8xIntel(R) Core(TM) i7-4770 CPU @ 3.40GHz
Caches | 8x8192 KB
# Memory #####################################################
Total | 31.4G
Free | 252.6M
Used | physical = 31.1G, swap allocated = 32.0G, swap used = 200.0k, virtual = 31.1G
Buffers | 343.2M
Caches | 27.6G
Dirty | 784 kB
UsedRSS | 4.5G
Swappiness | 60
DirtyPolicy | 20, 10
DirtyStatus | 0, 0
Locator Size Speed Form Factor Type Type Detail
========= ======== ================= ============= ============= ===========
ChannelA-DIMM0 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelA-DIMM1 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelB-DIMM0 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelB-DIMM1 8192 MB 1600 MHz DIMM DDR3 Synchronous
# Mounted Filesystems ########################################
Filesystem Size Used Type Opts Mountpoint
/dev/disk/by-uuid/85880bfd-d46d-4cb8-b6c3-46ca5afbaffa 1.8T 26% ext4 rw,relatime,user_xattr,barrier=1,data=ordered,usrquota,grpquota /
/dev/md1 496M 7% ext3 rw,relatime,errors=continue,user_xattr,acl,barrier=1,data=ordered /boot
tmpfs 13G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/shm
tmpfs 13G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run/shm
tmpfs 13G 0% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run/shm
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run/lock
udev 10M 0% devtmpfs rw,relatime,size=10240k,nr_inodes=4108136,mode=755 /dev
# Disk Schedulers And Queue Size #############################
md0 | 128
md1 | 128
md2 | 128
sda | [cfq] 128
sdb | [cfq] 128
# Disk Partioning ############################################
Device Type Start End Size
============ ==== ========== ========== ==================
/dev/md0 Disk 34342830080
/dev/md1 Disk 536543232
/dev/md2 Disk 1965363757056
/dev/sda Disk 2000398934016
/dev/sda1 Part 2048 67110912 34359738368
/dev/sda2 Part 67112960 68161536 536870912
/dev/sda3 Part 68163584 3907027120 1965498130432
/dev/sdb Disk 2000398934016
/dev/sdb1 Part 2048 67110912 34359738368
/dev/sdb2 Part 67112960 68161536 536870912
/dev/sdb3 Part 68163584 3907027120 1965498130432
# Kernel Inode State #########################################
dentry-state | 86303 66805 45 0 0 0
file-nr | 5056 0 50000
inode-nr | 130347 59685
# LVM Volumes ################################################
Unable to collect information
# LVM Volume Groups ##########################################
Unable to collect information
# RAID Controller ############################################
Controller | No RAID controller detected
# Network Config #############################################
Controller | Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 06)
FIN Timeout | 60
Port Range | 65000
# Interface Statistics #######################################
interface rx_bytes rx_packets rx_errors tx_bytes tx_packets tx_errors
========= ========= ========== ========== ========== ========== ==========
lo 3500000000 1750000 0 3500000000 1750000 0
eth0 700000000 4500000 0 10000000000 8000000 0
# Network Devices ############################################
Device Speed Duplex
========= ========= =========
eth0 1000Mb/s Full
# Network Connections ########################################
Connections from remote IP addresses
74.121.199.234 2
79.172.111.50 3
88.198.8.4 2
Connections to local IP addresses
88.198.8.4 7
Connections to top 10 local ports
14495 1
22 3
4574 1
57830 1
81 1
States of connections
ESTABLISHED 3
LISTEN 25
TIME_WAIT 4
# Top Processes ##############################################
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
6576 root 20 0 23236 1576 1100 R 12.1 0.0 0:00.02 top
1 root 20 0 10648 820 680 S 0.0 0.0 0:01.76 init
2 root 20 0 0 0 0 S 0.0 0.0 0:00.00 kthreadd
3 root 20 0 0 0 0 S 0.0 0.0 0:56.05 ksoftirqd/0
6 root rt 0 0 0 0 S 0.0 0.0 0:00.97 migration/0
7 root rt 0 0 0 0 S 0.0 0.0 0:00.26 watchdog/0
8 root rt 0 0 0 0 S 0.0 0.0 0:00.22 migration/1
9 root 20 0 0 0 0 S 0.0 0.0 0:01.63 kworker/1:0
10 root 20 0 0 0 0 S 0.0 0.0 0:54.31 ksoftirqd/1
# Notable Processes ##########################################
PID OOM COMMAND
3008 -17 sshd
# Simplified and fuzzy rounded vmstat (wait please) ##########
procs ---swap-- -----io---- ---system---- --------cpu--------
r b si so bi bo ir cs us sy il wa st
1 0 0 0 500 900 15 70 20 13 64 2
0 0 0 0 80 0 2000 2250 3 4 93 0
0 0 0 0 0 0 125 225 0 0 100 0
1 0 0 0 0 700 700 600 7 2 90 1
0 0 0 0 0 1 700 500 6 5 89 0
# The End ####################################################

D

1114

Dram

14 июня 2015, 10:36

#100

Старая боевая лошадка (сейчас под нагрузкой)

# Percona Toolkit System Summary Report ######################
Date | 2015-06-14 10:34:56 UTC (local TZ: MSK +0300)
Hostname | srv.********.ru
Uptime | 16 days, 14:35, 1 user, load average: 1.11, 1.08, 1.20
System | System manufacturer; System Product Name; vSystem Version (Desktop)
Service Tag | System Serial Number
Platform | Linux
Release | Debian-based version 7.8 (wheezy)
Kernel | 3.2.0-4-amd64
Architecture | CPU = 64-bit, OS = 64-bit
Threading | NPTL 2.13
SELinux | No SELinux detected
Virtualized | No virtualization detected
# Processor ##################################################
Processors | physical = 1, cores = 4, virtual = 8, hyperthreading = yes
Speeds | 7x1600.000, 1x3401.000
Models | 8xIntel(R) Xeon(R) CPU E3-1245 V2 @ 3.40GHz
Caches | 8x8192 KB
# Memory #####################################################
Total | 31.4G
Free | 6.7G
Used | physical = 24.7G, swap allocated = 16.0G, swap used = 15.6M, virtual = 24.7G
Buffers | 585.4M
Caches | 21.3G
Dirty | 8820 kB
UsedRSS | 2.0G
Swappiness | 60
DirtyPolicy | 20, 10
DirtyStatus | 0, 0
Locator Size Speed Form Factor Type Type Detail
========= ======== ================= ============= ============= ===========
ChannelA-DIMM0 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelA-DIMM1 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelB-DIMM0 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelB-DIMM1 8192 MB 1333 MHz DIMM DDR3 Synchronous
# Mounted Filesystems ########################################
Filesystem Size Used Type Opts Mountpoint
/dev/disk/by-uuid/b5d534de-3107-4b14-b5d7-86f74ad6e836 2.7T 10% ext4 rw,relatime,user_xattr,barrier=1,data=ordered,usrquota,grpquota /
https://webdav.yandex.ru 16G 44% fuse rw,nosuid,nodev,relatime,user_id=0,group_id=0,allow_other,max_read=16384 /mnt/yandex.disk
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run/lock
tmpfs 9.5G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/shm
tmpfs 9.5G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run/shm
tmpfs 9.5G 0% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run/shm
udev 10M 0% devtmpfs rw,relatime,size=10240k,nr_inodes=4112901,mode=755 /dev
# Disk Schedulers And Queue Size #############################
md0 | 128
md1 | 128
sda | [cfq] 128
sdb | [cfq] 128
# Disk Partioning ############################################
Device Type Start End Size
============ ==== ========== ========== ==================
/dev/md0 Disk 17171349504
/dev/md1 Disk 2983276576768
/dev/sda Disk 3000592982016
/dev/sda1 Part 1 4294967295 2199023254528
/dev/sdb Disk 3000592982016
/dev/sdb1 Part 1 4294967295 2199023254528
# Kernel Inode State #########################################
dentry-state | 517692 510279 45 0 0 0
file-nr | 4832 0 50000
inode-nr | 513021 11677
# LVM Volumes ################################################
Unable to collect information
# LVM Volume Groups ##########################################
Unable to collect information
# RAID Controller ############################################
Controller | No RAID controller detected
# Network Config #############################################
Controller | Intel Corporation 82574L Gigabit Network Connection
FIN Timeout | 60
Port Range | 65000
# Interface Statistics #######################################
interface rx_bytes rx_packets rx_errors tx_bytes tx_packets tx_errors
========= ========= ========== ========== ========== ========== ==========
lo 450000000000 150000000 0 450000000000 150000000 0
eth0 90000000000 450000000 9 700000000000 700000000 0
# Network Devices ############################################
Device Speed Duplex
========= ========= =========
eth0 1000Mb/s Full
# Network Connections ########################################

(тут удалил - много айпи)

Connections to local IP addresses
2a01 25
144.76.163.226 1250
Connections to top 10 local ports
22 3
6595 1
6696 1
6708 1
6724 1
6778 1
6796 1
6803 1
80 700
81 600
States of connections
CLOSING 3
ESTABLISHED 200
FIN_WAIT1 15
FIN_WAIT2 90
LAST_ACK 8
LISTEN 20
SYN_RECV 2
SYN_SENT 1
TIME_WAIT 1000
# Top Processes ##############################################
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
22443 www-data 20 0 888m 163m 27m R 98.2 0.5 0:15.06 apache2
22429 www-data 20 0 140m 9.8m 5164 S 6.5 0.0 0:01.10 nginx
1 root 20 0 10648 676 628 S 0.0 0.0 0:09.04 init
2 root 20 0 0 0 0 S 0.0 0.0 0:00.01 kthreadd
3 root 20 0 0 0 0 S 0.0 0.0 1:04.15 ksoftirqd/0
6 root rt 0 0 0 0 S 0.0 0.0 0:09.69 migration/0
7 root rt 0 0 0 0 S 0.0 0.0 0:04.53 watchdog/0
8 root rt 0 0 0 0 S 0.0 0.0 0:13.68 migration/1
10 root 20 0 0 0 0 S 0.0 0.0 0:13.46 ksoftirqd/1
# Notable Processes ##########################################
PID OOM COMMAND
2493 -17 sshd
# Simplified and fuzzy rounded vmstat (wait please) ##########
procs ---swap-- -----io---- ---system---- --------cpu--------
r b si so bi bo ir cs us sy il wa st
2 1 0 0 30 100 1 1 18 5 76 1
2 0 0 0 10 300 4000 7000 16 4 78 2
3 0 0 0 0 60 4500 6000 32 11 57 0
0 0 0 0 0 125 3000 2500 15 4 81 0
2 0 0 0 0 25 2250 2500 7 5 88 0
# The End ####################################################

Маркетинг для шоколадной фабрики. На 34% выше средний чек

Google: E-E-A-T не является фактором ранжирования

Нужен коллективный разум - высокая нагрузка