apache сошел с ума! Помогите

FD
На сайте с 12.05.2017
Offline
59
331

Друзья! Нужна помощь, сломал голову. Имеем один хайлоад проект. Буквально позавчера Apache сошел сума, постоянно создаются (или делаются активными) процессы apache которые на протяжении 4-8 секунд создают нагрузку на процессор в размере 100%. Машинка оч мощная, 128г оперативки, 24 ядра проц. LA - 40-60 в штатном режиме. До этого было 13-15 в пике нагрузки. в server-status все ок, процесы эти выловить не получается, ощущение что их там нет. Режим работы apache - mpm prefork! Ngnix пристуствует! На сервере стоит debian Помогите, уже не знаем куда копать =(

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
26853 mysql 20 0 98.5g 69.2g 19432 S 181.4 54.9 434:34.91 mysqld
2522 instagr+ 20 0 1167320 16976 8544 R 97.7 0.0 0:09.24 apache2
2719 instagr+ 20 0 1167320 16976 8544 R 97.3 0.0 0:08.40 apache2
3215 instagr+ 20 0 1167320 16976 8544 R 97.3 0.0 0:06.62 apache2
3323 instagr+ 20 0 1167320 16976 8544 R 97.0 0.0 0:06.13 apache2
3444 instagr+ 20 0 1167328 16620 8160 R 97.0 0.0 0:05.57 apache2
3794 instagr+ 20 0 1167320 16976 8544 R 97.0 0.0 0:04.29 apache2
3035 instagr+ 20 0 1167320 16976 8544 R 96.7 0.0 0:07.26 apache2
4050 instagr+ 20 0 1167320 16976 8544 R 96.7 0.0 0:03.32 apache2
2772 instagr+ 20 0 1167320 16976 8544 R 96.3 0.0 0:08.14 apache2
2770 instagr+ 20 0 1167320 16976 8544 R 96.0 0.0 0:08.18 apache2
3782 instagr+ 20 0 1167320 17032 8624 R 96.0 0.0 0:04.31 apache2
3183 instagr+ 20 0 1167320 16976 8544 R 95.7 0.0 0:06.62 apache2
3471 instagr+ 20 0 1167320 17032 8624 R 95.3 0.0 0:05.38 apache2
2487 instagr+ 20 0 1167884 26960 17880 S 91.4 0.0 0:09.19 apache2
4261 instagr+ 20 0 1167320 16964 8532 R 90.0 0.0 0:02.71 apache2
4319 instagr+ 20 0 1167320 15424 7092 R 83.4 0.0 0:02.51 apache2
4380 instagr+ 20 0 1167320 16976 8544 R 77.7 0.0 0:02.34 apache2
5087 instagr+ 20 0 1167320 17032 8624 R 16.6 0.0 0:00.50 apache2
5094 instagr+ 20 0 1167320 15364 7028 R 15.3 0.0 0:00.46 apache2
15788 www-data 20 0 34452 29832 5144 S 15.3 0.0 29:14.75 nginx
5110 instagr+ 20 0 1167320 16976 8544 R 14.0 0.0 0:00.42 apache2
15789 www-data 20 0 17448 12476 5104 S 2.7 0.0 3:02.40 nginx
445 root 20 0 0 0 0 S 1.0 0.0 4:31.15 jbd2/md2-8
2656 instagr+ 20 0 1168508 28484 18792 S 0.7 0.0 0:00.03 apache2
112 root 20 0 0 0 0 S 0.3 0.0 0:03.50 ksoftirqd/20
1128 root 20 0 235240 31244 23664 S 0.3 0.0 0:01.17 php-fpm7.3
1140 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:03.87 apache2
1330 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.34 apache2
1331 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.01 apache2
1333 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.06 apache2
1534 www-data 20 0 1167028 11376 3092 S 0.3 0.0 0:04.57 apache2
1620 instagr+ 20 0 1168512 28464 18800 S 0.3 0.0 0:00.01 apache2
1712 www-data 20 0 1167028 11376 3092 S 0.3 0.0 0:04.52 apache2
1820 instagr+ 20 0 1168520 28312 18672 S 0.3 0.0 0:00.01 apache2


НАКРУТКА INSTAGRAM (https://instagram777.ru) - Смешные цены!
HOSTER_BOMBA
На сайте с 08.06.2020
Offline
6
#1
FrancisDarroze :

Друзья! Нужна помощь, сломал голову. Имеем один хайлоад проект. Буквально позавчера Apache сошел сума, постоянно создаются (или делаются активными) процессы apache которые на протяжении 4-8 секунд создают нагрузку на процессор в размере 100%. Машинка оч мощная, 128г оперативки, 24 ядра проц. LA - 40-60 в штатном режиме. До этого было 13-15 в пике нагрузки. в server-status все ок, процесы эти выловить не получается, ощущение что их там нет. Режим работы apache - mpm prefork! Ngnix пристуствует! На сервере стоит debian Помогите, уже не знаем куда копать =(

PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
26853 mysql 20 0 98.5g 69.2g 19432 S 181.4 54.9 434:34.91 mysqld
2522 instagr+ 20 0 1167320 16976 8544 R 97.7 0.0 0:09.24 apache2
2719 instagr+ 20 0 1167320 16976 8544 R 97.3 0.0 0:08.40 apache2
3215 instagr+ 20 0 1167320 16976 8544 R 97.3 0.0 0:06.62 apache2
3323 instagr+ 20 0 1167320 16976 8544 R 97.0 0.0 0:06.13 apache2
3444 instagr+ 20 0 1167328 16620 8160 R 97.0 0.0 0:05.57 apache2
3794 instagr+ 20 0 1167320 16976 8544 R 97.0 0.0 0:04.29 apache2
3035 instagr+ 20 0 1167320 16976 8544 R 96.7 0.0 0:07.26 apache2
4050 instagr+ 20 0 1167320 16976 8544 R 96.7 0.0 0:03.32 apache2
2772 instagr+ 20 0 1167320 16976 8544 R 96.3 0.0 0:08.14 apache2
2770 instagr+ 20 0 1167320 16976 8544 R 96.0 0.0 0:08.18 apache2
3782 instagr+ 20 0 1167320 17032 8624 R 96.0 0.0 0:04.31 apache2
3183 instagr+ 20 0 1167320 16976 8544 R 95.7 0.0 0:06.62 apache2
3471 instagr+ 20 0 1167320 17032 8624 R 95.3 0.0 0:05.38 apache2
2487 instagr+ 20 0 1167884 26960 17880 S 91.4 0.0 0:09.19 apache2
4261 instagr+ 20 0 1167320 16964 8532 R 90.0 0.0 0:02.71 apache2
4319 instagr+ 20 0 1167320 15424 7092 R 83.4 0.0 0:02.51 apache2
4380 instagr+ 20 0 1167320 16976 8544 R 77.7 0.0 0:02.34 apache2
5087 instagr+ 20 0 1167320 17032 8624 R 16.6 0.0 0:00.50 apache2
5094 instagr+ 20 0 1167320 15364 7028 R 15.3 0.0 0:00.46 apache2
15788 www-data 20 0 34452 29832 5144 S 15.3 0.0 29:14.75 nginx
5110 instagr+ 20 0 1167320 16976 8544 R 14.0 0.0 0:00.42 apache2
15789 www-data 20 0 17448 12476 5104 S 2.7 0.0 3:02.40 nginx
445 root 20 0 0 0 0 S 1.0 0.0 4:31.15 jbd2/md2-8
2656 instagr+ 20 0 1168508 28484 18792 S 0.7 0.0 0:00.03 apache2
112 root 20 0 0 0 0 S 0.3 0.0 0:03.50 ksoftirqd/20
1128 root 20 0 235240 31244 23664 S 0.3 0.0 0:01.17 php-fpm7.3
1140 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:03.87 apache2
1330 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.34 apache2
1331 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.01 apache2
1333 www-data 20 0 1167028 11396 3112 S 0.3 0.0 0:04.06 apache2
1534 www-data 20 0 1167028 11376 3092 S 0.3 0.0 0:04.57 apache2
1620 instagr+ 20 0 1168512 28464 18800 S 0.3 0.0 0:00.01 apache2
1712 www-data 20 0 1167028 11376 3092 S 0.3 0.0 0:04.52 apache2
1820 instagr+ 20 0 1168520 28312 18672 S 0.3 0.0 0:00.01 apache2



похоже на ддос атаку или ботов. Анализируйте access логи nginx/apache.
Там будет ответ.
Больше о процессе можно узнать через strace/lsof по PID. Оттуда и копать.

Европейский хостинг провайдер в Эстонии - https://iphoster.net/ - дешевые KVM VPS в Польше, Франции и Германии от 1.95$. Дешевые IP по цене 0,5$ за 1 IPv4. Дешевый shared хостинг от 1$ с панелями Cpanel, ISPManager, DirectAdmin. https://wiki.iphoster.net/ - статьи на тему хостинга и размещение сайтов.
keepersheet
На сайте с 21.06.2016
Offline
57
#2

"Процессы создаются", но "выловить не получается"; вам самому-то не смешно заявлять подобное?

Ограничьте префорк апача, "атака клонов" в исполнении ботов - дело обычное. 

/ets/httpd/conf.modules.d/00-mpm.conf

Поэкспериментируйте с цифирьками-то от дефолтного. Странный, имхо, подход к стандартной проблеме у админов "хайлоад проекта".

Веб-разработка на ruby и php (https://masterpro.ws/)
WapGraf
На сайте с 30.09.2009
Offline
455
#3
keepersheet #:

"Процессы создаются", но "выловить не получается"; вам самому-то не смешно заявлять подобное?

Ограничьте префорк апача, "атака клонов" в исполнении ботов - дело обычное. 

Поэкспериментируйте с цифирьками-то от дефолтного. Странный, имхо, подход к стандартной проблеме у админов "хайлоад проекта".

Ну вы то сделали как нужно.


EuroHoster.org ( https://eurohoster.org/link.php?id=42 ) - территория быстрых серверов. Скидка 70% на VPS и 10% на выделенные серверы в Нидерландах (https://eurohoster.org/index.php?rp=/announcements/330/Скидки.html)
keepersheet
На сайте с 21.06.2016
Offline
57
#4
WapGraf #:

Ну вы то сделали как нужно.

тебе нехер заняться, девочка? ну пословоблудь еще.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий