Dram

Рейтинг
1115
Регистрация
28.06.2008
Нужен коллективный разум - высокая нагрузка
Оптимизайка:
Еще раз настоятельно прошу показать вывод команды
cat /proc/mdstat
на вашем "тупящем" сервере

Синхронизация была и закончилась еще до того, как я перенес на новый серв 1 сайт

root@srv ~ # cat /proc/mdstat

Personalities : [raid1]

md2 : active raid1 sda3[0] sdb3[1]

1919300544 blocks super 1.2 [2/2] [UU]

md1 : active raid1 sda2[0] sdb2[1]

523968 blocks super 1.2 [2/2] [UU]

md0 : active raid1 sda1[0] sdb1[1]

33537920 blocks super 1.2 [2/2] [UU]

unused devices: <none>

Нужен коллективный разум - высокая нагрузка

Похоже netwind прав, не знаю как на это не обратили внимание те 3 админа.

Вот же мунин все рисовал.

Так чей это все так косяк - хедзнера или админа, настроившего серв с нуля?

png cpuspeed-day.png
Нужен коллективный разум - высокая нагрузка

Старая боевая лошадка (сейчас под нагрузкой)

# Percona Toolkit System Summary Report ######################
Date | 2015-06-14 10:34:56 UTC (local TZ: MSK +0300)
Hostname | srv.********.ru
Uptime | 16 days, 14:35, 1 user, load average: 1.11, 1.08, 1.20
System | System manufacturer; System Product Name; vSystem Version (Desktop)
Service Tag | System Serial Number
Platform | Linux
Release | Debian-based version 7.8 (wheezy)
Kernel | 3.2.0-4-amd64
Architecture | CPU = 64-bit, OS = 64-bit
Threading | NPTL 2.13
SELinux | No SELinux detected
Virtualized | No virtualization detected
# Processor ##################################################
Processors | physical = 1, cores = 4, virtual = 8, hyperthreading = yes
Speeds | 7x1600.000, 1x3401.000
Models | 8xIntel(R) Xeon(R) CPU E3-1245 V2 @ 3.40GHz
Caches | 8x8192 KB
# Memory #####################################################
Total | 31.4G
Free | 6.7G
Used | physical = 24.7G, swap allocated = 16.0G, swap used = 15.6M, virtual = 24.7G
Buffers | 585.4M
Caches | 21.3G
Dirty | 8820 kB
UsedRSS | 2.0G
Swappiness | 60
DirtyPolicy | 20, 10
DirtyStatus | 0, 0
Locator Size Speed Form Factor Type Type Detail
========= ======== ================= ============= ============= ===========
ChannelA-DIMM0 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelA-DIMM1 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelB-DIMM0 8192 MB 1333 MHz DIMM DDR3 Synchronous
ChannelB-DIMM1 8192 MB 1333 MHz DIMM DDR3 Synchronous
# Mounted Filesystems ########################################
Filesystem Size Used Type Opts Mountpoint
/dev/disk/by-uuid/b5d534de-3107-4b14-b5d7-86f74ad6e836 2.7T 10% ext4 rw,relatime,user_xattr,barrier=1,data=ordered,usrquota,grpquota /
https://webdav.yandex.ru 16G 44% fuse rw,nosuid,nodev,relatime,user_id=0,group_id=0,allow_other,max_read=16384 /mnt/yandex.disk
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run/lock
tmpfs 9.5G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/shm
tmpfs 9.5G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=9937100k /run/shm
tmpfs 9.5G 0% tmpfs rw,nosuid,noexec,relatime,size=3291664k,mode=755 /run/shm
udev 10M 0% devtmpfs rw,relatime,size=10240k,nr_inodes=4112901,mode=755 /dev
# Disk Schedulers And Queue Size #############################
md0 | 128
md1 | 128
sda | [cfq] 128
sdb | [cfq] 128
# Disk Partioning ############################################
Device Type Start End Size
============ ==== ========== ========== ==================
/dev/md0 Disk 17171349504
/dev/md1 Disk 2983276576768
/dev/sda Disk 3000592982016
/dev/sda1 Part 1 4294967295 2199023254528
/dev/sdb Disk 3000592982016
/dev/sdb1 Part 1 4294967295 2199023254528
# Kernel Inode State #########################################
dentry-state | 517692 510279 45 0 0 0
file-nr | 4832 0 50000
inode-nr | 513021 11677
# LVM Volumes ################################################
Unable to collect information
# LVM Volume Groups ##########################################
Unable to collect information
# RAID Controller ############################################
Controller | No RAID controller detected
# Network Config #############################################
Controller | Intel Corporation 82574L Gigabit Network Connection
FIN Timeout | 60
Port Range | 65000
# Interface Statistics #######################################
interface rx_bytes rx_packets rx_errors tx_bytes tx_packets tx_errors
========= ========= ========== ========== ========== ========== ==========
lo 450000000000 150000000 0 450000000000 150000000 0
eth0 90000000000 450000000 9 700000000000 700000000 0
# Network Devices ############################################
Device Speed Duplex
========= ========= =========
eth0 1000Mb/s Full
# Network Connections ########################################

(тут удалил - много айпи)

Connections to local IP addresses
2a01 25
144.76.163.226 1250
Connections to top 10 local ports
22 3
6595 1
6696 1
6708 1
6724 1
6778 1
6796 1
6803 1
80 700
81 600
States of connections
CLOSING 3
ESTABLISHED 200
FIN_WAIT1 15
FIN_WAIT2 90
LAST_ACK 8
LISTEN 20
SYN_RECV 2
SYN_SENT 1
TIME_WAIT 1000
# Top Processes ##############################################
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
22443 www-data 20 0 888m 163m 27m R 98.2 0.5 0:15.06 apache2
22429 www-data 20 0 140m 9.8m 5164 S 6.5 0.0 0:01.10 nginx
1 root 20 0 10648 676 628 S 0.0 0.0 0:09.04 init
2 root 20 0 0 0 0 S 0.0 0.0 0:00.01 kthreadd
3 root 20 0 0 0 0 S 0.0 0.0 1:04.15 ksoftirqd/0
6 root rt 0 0 0 0 S 0.0 0.0 0:09.69 migration/0
7 root rt 0 0 0 0 S 0.0 0.0 0:04.53 watchdog/0
8 root rt 0 0 0 0 S 0.0 0.0 0:13.68 migration/1
10 root 20 0 0 0 0 S 0.0 0.0 0:13.46 ksoftirqd/1
# Notable Processes ##########################################
PID OOM COMMAND
2493 -17 sshd
# Simplified and fuzzy rounded vmstat (wait please) ##########
procs ---swap-- -----io---- ---system---- --------cpu--------
r b si so bi bo ir cs us sy il wa st
2 1 0 0 30 100 1 1 18 5 76 1
2 0 0 0 10 300 4000 7000 16 4 78 2
3 0 0 0 0 60 4500 6000 32 11 57 0
0 0 0 0 0 125 3000 2500 15 4 81 0
2 0 0 0 0 25 2250 2500 7 5 88 0
# The End ####################################################
Нужен коллективный разум - высокая нагрузка

Новый (проблемный сервер) - сейчас уже без нагрузки, сайты перенес обратно

# Percona Toolkit System Summary Report ######################
Date | 2015-06-14 10:32:58 UTC (local TZ: MSK +0300)
Hostname | srv.********.ru
Uptime | 14:09, 1 user, load average: 0.01, 0.07, 0.12
System | # SMBIOS implementations newer than version 2.7 are not
Service Tag | # SMBIOS implementations newer than version 2.7 are not
Platform | Linux
Release | Debian-based version 7.8 (wheezy)
Kernel | 3.2.0-4-amd64
Architecture | CPU = 64-bit, OS = 64-bit
Threading | NPTL 2.13
SELinux | No SELinux detected
Virtualized | No virtualization detected
# Processor ##################################################
Processors | physical = 1, cores = 4, virtual = 8, hyperthreading = yes
Speeds | 8x800.000
Models | 8xIntel(R) Core(TM) i7-4770 CPU @ 3.40GHz
Caches | 8x8192 KB
# Memory #####################################################
Total | 31.4G
Free | 252.6M
Used | physical = 31.1G, swap allocated = 32.0G, swap used = 200.0k, virtual = 31.1G
Buffers | 343.2M
Caches | 27.6G
Dirty | 784 kB
UsedRSS | 4.5G
Swappiness | 60
DirtyPolicy | 20, 10
DirtyStatus | 0, 0
Locator Size Speed Form Factor Type Type Detail
========= ======== ================= ============= ============= ===========
ChannelA-DIMM0 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelA-DIMM1 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelB-DIMM0 8192 MB 1600 MHz DIMM DDR3 Synchronous
ChannelB-DIMM1 8192 MB 1600 MHz DIMM DDR3 Synchronous
# Mounted Filesystems ########################################
Filesystem Size Used Type Opts Mountpoint
/dev/disk/by-uuid/85880bfd-d46d-4cb8-b6c3-46ca5afbaffa 1.8T 26% ext4 rw,relatime,user_xattr,barrier=1,data=ordered,usrquota,grpquota /
/dev/md1 496M 7% ext3 rw,relatime,errors=continue,user_xattr,acl,barrier=1,data=ordered /boot
tmpfs 13G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/shm
tmpfs 13G 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run/shm
tmpfs 13G 0% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run/shm
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run
tmpfs 3.2G 1% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=5120k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,nodev,noexec,relatime,size=13283320k /run/lock
tmpfs 5.0M 0% tmpfs rw,nosuid,noexec,relatime,size=3287872k,mode=755 /run/lock
udev 10M 0% devtmpfs rw,relatime,size=10240k,nr_inodes=4108136,mode=755 /dev
# Disk Schedulers And Queue Size #############################
md0 | 128
md1 | 128
md2 | 128
sda | [cfq] 128
sdb | [cfq] 128
# Disk Partioning ############################################
Device Type Start End Size
============ ==== ========== ========== ==================
/dev/md0 Disk 34342830080
/dev/md1 Disk 536543232
/dev/md2 Disk 1965363757056
/dev/sda Disk 2000398934016
/dev/sda1 Part 2048 67110912 34359738368
/dev/sda2 Part 67112960 68161536 536870912
/dev/sda3 Part 68163584 3907027120 1965498130432
/dev/sdb Disk 2000398934016
/dev/sdb1 Part 2048 67110912 34359738368
/dev/sdb2 Part 67112960 68161536 536870912
/dev/sdb3 Part 68163584 3907027120 1965498130432
# Kernel Inode State #########################################
dentry-state | 86303 66805 45 0 0 0
file-nr | 5056 0 50000
inode-nr | 130347 59685
# LVM Volumes ################################################
Unable to collect information
# LVM Volume Groups ##########################################
Unable to collect information
# RAID Controller ############################################
Controller | No RAID controller detected
# Network Config #############################################
Controller | Realtek Semiconductor Co., Ltd. RTL8111/8168B PCI Express Gigabit Ethernet controller (rev 06)
FIN Timeout | 60
Port Range | 65000
# Interface Statistics #######################################
interface rx_bytes rx_packets rx_errors tx_bytes tx_packets tx_errors
========= ========= ========== ========== ========== ========== ==========
lo 3500000000 1750000 0 3500000000 1750000 0
eth0 700000000 4500000 0 10000000000 8000000 0
# Network Devices ############################################
Device Speed Duplex
========= ========= =========
eth0 1000Mb/s Full
# Network Connections ########################################
Connections from remote IP addresses
74.121.199.234 2
79.172.111.50 3
88.198.8.4 2
Connections to local IP addresses
88.198.8.4 7
Connections to top 10 local ports
14495 1
22 3
4574 1
57830 1
81 1
States of connections
ESTABLISHED 3
LISTEN 25
TIME_WAIT 4
# Top Processes ##############################################
PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
6576 root 20 0 23236 1576 1100 R 12.1 0.0 0:00.02 top
1 root 20 0 10648 820 680 S 0.0 0.0 0:01.76 init
2 root 20 0 0 0 0 S 0.0 0.0 0:00.00 kthreadd
3 root 20 0 0 0 0 S 0.0 0.0 0:56.05 ksoftirqd/0
6 root rt 0 0 0 0 S 0.0 0.0 0:00.97 migration/0
7 root rt 0 0 0 0 S 0.0 0.0 0:00.26 watchdog/0
8 root rt 0 0 0 0 S 0.0 0.0 0:00.22 migration/1
9 root 20 0 0 0 0 S 0.0 0.0 0:01.63 kworker/1:0
10 root 20 0 0 0 0 S 0.0 0.0 0:54.31 ksoftirqd/1
# Notable Processes ##########################################
PID OOM COMMAND
3008 -17 sshd
# Simplified and fuzzy rounded vmstat (wait please) ##########
procs ---swap-- -----io---- ---system---- --------cpu--------
r b si so bi bo ir cs us sy il wa st
1 0 0 0 500 900 15 70 20 13 64 2
0 0 0 0 80 0 2000 2250 3 4 93 0
0 0 0 0 0 0 125 225 0 0 100 0
1 0 0 0 0 700 700 600 7 2 90 1
0 0 0 0 0 1 700 500 6 5 89 0
# The End ####################################################
Нужен коллективный разум - высокая нагрузка

Как запустить / установить pt-summary ? не нашел мануала в сети

Нужен коллективный разум - высокая нагрузка
netwind:
Dram, я так сложно пишу или что? почему бы не проделать описанные мной манипуляции ?

Уже нет сил на эксперименты - завтра трафик увеличится на 50% и уже нет времени на тесты.

P.S. сервер смотрели 3 админа с серча - снизить нагрузку не удалось. А старый сервер - ее особо не замечает.

Нужен коллективный разум - высокая нагрузка

Всем спасибо - переезжаю назад. Хотел сэкономить на сервере 40 евро в месяц, а в итоге потратил денег на несколько месяцев работы севера :( + кучу нервов и пару бессонных ночей.

Перенес основные сайты на старый сервер - и они летают там, нагрузка мизер... В общем чудеса.

Нужен коллективный разум - высокая нагрузка

Пол дня меня не было - админ че то колодовал, щас приезал, админа в сети нет - нагрузка опять зашкаливает....

Что за напасть такая!!!

Нужен коллективный разум - высокая нагрузка

Возможно новый серв добил включенный гзип?

Нужен коллективный разум - высокая нагрузка

Проблемные запросы переписали - нагрузка упала. Так же в данный момент сильно грузит проц GZIP, а на старом сервере был модуль ГЗИПстатик, который отдавал уже сжатые файлы, что лежат на сервере

1... 366367368369370371372373374 ...693
Всего: 6928