Dotaz: Vysoke zatizeni

[cx0]

Ahoj,

pouzivam dedic jako lamp server, nemyslim si, ze tam proudi moc pozadavku ale zda se mi vcelku zatizeny.

CPU load averages 4.39 (1 min) 3.14 (5 mins) 2.81 (15 mins) CPU usage 6% user, 3% kernel, 14% IO, 77% idle

r b swpd free buff cache si so bi bo in cs us sy id wa 0 0 764 232476 1252300 2534548 0 0 123 133 3 22 7 3 81 9 Processor information Intel(R) Xeon(R) CPU E31230 @ 3.20GHz, 8 cores Real memory 7.78 GB total, 3.99 GB used

Tuning apache i mysql mam za sebou, ale stale nejsem spokojeny. Loadavg by to chtelo ustalit nize.

Me napada ze 8gb ram je malo a chtelo by 12-16gb, muze to mit zasadni vliv? Pripadne co doporucite?

dekuji vam!

Odpovědi

[cx0]

Jeste dodam:

procs -----------memory---------- ---swap-- -----io---- -system-- ----cpu---- r b swpd free buff cache si so bi bo in cs us sy id wa 1 0 764 241264 1239060 2533528 0 0 123 133 4 23 7 3 81 9 0 0 764 243284 1239096 2533776 0 0 64 0 1979 1479 2 1 95 2 1 0 764 242676 1239120 2533820 0 0 32 968 2227 3365 5 3 89 4 2 0 764 241148 1239124 2533872 0 0 4 0 565 801 5 3 92 0 0 0 764 245076 1239140 2533892 0 0 36 0 1910 1257 6 3 90 1 0 0 764 247608 1239172 2533924 0 0 56 0 1062 1506 2 1 95 2 1 0 764 232884 1239268 2548452 0 0 200 0 1810 1804 10 3 84 3 1 4 764 168856 1239356 2602404 0 0 56 60984 1620 1759 4 3 76 18 0 4 764 184564 1239412 2591588 0 0 32 0 973 26740 2 3 78 17 1 1 764 244168 1239468 2534248 0 0 92 776 5405 7359 8 3 76 12 1 0 764 243412 1239488 2534360 0 0 36 0 1043 861 9 2 88 1 0 0 764 247332 1239508 2534416 0 0 32 0 814 1421 5 4 90 1 0 0 764 252292 1239528 2534464 0 0 44 936 1078 1256 2 1 92 5 2 0 764 254344 1239544 2534512 0 0 36 0 982 2476 12 4 82 1

Dle top 50% cpu +- zabira mysqld, ale kdyz se do pma podivam do procesu, tak je prazdno.

[poky74]

Málo informací...

koukni do iotop

[cx0]

Total DISK READ: 466.93 K/s | Total DISK WRITE: 342.42 K/s
  PID USER      DISK READ  DISK WRITE   SWAPIN    IO>    COMMAND
 1336 root           0 B/s  299.61 K/s  0.00 % 95.23 % [kjournald]
12544 www-data       0 B/s       0 B/s  0.00 % 74.60 % apache2 -k start
11689 mysql     190.66 K/s    7.78 K/s  0.00 % 29.71 % mysqld --basedir=/usr --datadir=/var/lib/mysql --user=mysql
11368 mysql      70.04 K/s       0 B/s  0.00 % 15.37 % mysqld --basedir=/usr --datadir=/var/lib/mysql --user=mysql
10905 mysql      73.93 K/s       0 B/s  0.00 % 13.41 % mysqld --basedir=/usr --datadir=/var/lib/mysql --user=mysql
12575 www-data    7.78 K/s       0 B/s  0.00 % 13.18 % apache2 -k start
12512 www-data       0 B/s    3.89 K/s  0.00 %  9.84 % apache2 -k start
11365 mysql      38.91 K/s       0 B/s  0.00 %  8.31 % mysqld --basedir=/usr --datadir=/var/lib/mysql --user=mysql
12572 www-data       0 B/s    3.89 K/s  0.00 %  7.94 % apache2 -k start
12589 www-data   11.67 K/s    3.89 K/s  0.00 %  5.43 % apache2 -k start
12506 www-data   15.56 K/s    3.89 K/s  0.00 %  5.38 % apache2 -k start
11087 mysql      31.13 K/s    7.78 K/s  0.00 %  4.38 % mysqld --basedir=/usr --datadir=/var/lib/mysql --user=mysql
12556 www-data    3.89 K/s       0 B/s  0.00 %  3.81 % apache2 -k start
12346 www-data    3.89 K/s       0 B/s  0.00 %  2.19 % apache2 -k start
12566 www-data    3.89 K/s    3.89 K/s  0.00 %  1.98 % apache2 -k start
12547 www-data    3.89 K/s       0 B/s  0.00 %  1.83 % apache2 -k start
12582 www-data    3.89 K/s    3.89 K/s  0.00 %  1.43 % apache2 -k start
12551 www-data    3.89 K/s    3.89 K/s  0.00 %  1.00 % apache2 -k start
12478 www-data    3.89 K/s       0 B/s  0.00 %  0.57 % apache2 -k start
 1024 root           0 B/s       0 B/s  0.00 %  0.00 % [scsi_eh_4]
    1 root           0 B/s       0 B/s  0.00 %  0.00 % init [2]
    2 root           0 B/s       0 B/s  0.00 %  0.00 % [kthreadd]
    3 root           0 B/s       0 B/s  0.00 %  0.00 % [migration/0]
    4 root           0 B/s       0 B/s  0.00 %  0.00 % [ksoftirqd/0]
    5 root           0 B/s       0 B/s  0.00 %  0.00 % [watchdog/0]
    6 root           0 B/s       0 B/s  0.00 %  0.00 % [migration/1]
    7 root           0 B/s       0 B/s  0.00 %  0.00 % [ksoftirqd/1]
    8 root           0 B/s       0 B/s  0.00 %  0.00 % [watchdog/1]
    9 root           0 B/s       0 B/s  0.00 %  0.00 % [migration/2]

[poky74]

Máte na apachi zapnutý server-status ?  Co píše on?

[cx0]

Server uptime: 3 hours 35 minutes 22 seconds
Total accesses: 234909 - Total Traffic: 399.2 MB
CPU Usage: u13.08 s4.2 cu0 cs0 - .134% CPU load
18.2 requests/sec - 31.6 kB/second - 1781 B/request
23 requests currently being processed, 15 idle workers
_KWKK_W__K_K_W.K___KK._._.W.W.K...K.........K_..._K_.........W._
.....K..W..W...............KK...................................
................................................................
................................................................

ten je v klidu, žádné zacyklení nic.

[cx0]

 17:16:43 up 1 day,  7:50,  1 user,  load average: 2.45, 4.20, 5.44

[mysqld]
log-slow-queries = /var/log/mysql/slow
skip-innodb
myisam-recover=backup,force
user		= mysql
pid-file	= /var/run/mysqld/mysqld.pid
socket		= /var/run/mysqld/mysqld.sock
port		= 3306
basedir		= /usr
datadir		= /var/lib/mysql
tmpdir		= /tmp
language	= /usr/share/mysql/english
skip-external-locking
skip_locking
ft_min_word_len = 2
bind-address		= 127.0.0.1
max_connections                   = 140
back_log = 128
max_connect_errors                = 1000
connect_timeout                   = 2
wait_timeout                      = 360
interactive_timeout					 = 360
max_allowed_packet                = 32M
net_buffer_length                 = 8K
#binlog_format                     = row
#log-bin	= /var/log/mysql/binlog
log-bin=mysql-bin
max_binlog_size = 1G
expire_logs_days = 10
binlog_cache_size                 = 2M
table_cache                       = 4096
open_files_limit 						 = 12288
join_buffer_size                  = 4M
tmp_table_size                    = 64M
sort_buffer_size                  = 8M
thread_cache_size                 = 64
thread_stack                      = 192K
#query_cache_size                  = 0
query_cache_type                  = 1
query_cache_limit                 = 16M
query_cache_size						 = 16M
thread_concurrency					 = 16
#key_buffer_size                   = 256M
key_buffer_size                   = 2300M
read_buffer_size                  = 2M
read_rnd_buffer_size              = 8M
myisam_sort_buffer_size           = 128M
bulk_insert_buffer_size           = 64M
myisam_max_sort_file_size         = 4G
myisam_repair_threads             = 2
#myisam_recover_options           = DEFAULT
max_heap_table_size					 = 65M

[cx0]

dle webminu 50% cpu žere mysql.

Slow queryes az na 2 zanedbatelne, prazdny.

Je tento config v poradku ? Dekuji.

[MMMMMMMMM]

zkus si spustit mysqltuner, prozradí něco o konfiguraci mysql serveru a vhodně nastavených parametrech

[ikarr]

Jo , ještě - asi tam máte velké diskové pole a kjournald nestíhá. Kdysi na novelu bylo v návodu, na jak velké pole je potřeba kolik paměti. Žádný systém neutáhne 50 TB pole s jedním gigem ramky. Viz můj příspěvek níže.

[cx0]

je tam 1TB v hw raidu pouze.

[ikarr]

Jo. Já tam mám taky hw raid.

[ikarr]

Řešil jsem podobný problém se serverem s 8 CPU Xeonem a 8 MB paměti a 10 TB diskovým polem. Dal jsem do něj tedy 32 GB RAM, ale zátěž byla snad ještě horší. Tak jsem v zoufalství přešel z kernel-PAE na 64-bit a ejhle, systém se zrychlil snad 1000x. Od té doby drží a šlape jako raketa, žádné OOM-kills jako předtím. Vytěžuje kolem 16 GB paměti, takže by možná stačilo i těch 16, o kterých uvažujete.

[cx0]

Je tam

Operating system Debian Linux 5.0 Webmin version 1.550 Kernel and CPU Linux 2.6.26-2-amd64 on x86_64

Nestrašte

[ikarr]

Na Intelu Xeony máte amd64 kernel? Já na ně mám tedy x86_64 na x86_64

Nevím, já bych tedy přidal paměť a sehnal si kernel, který na ten procesor patří.

[cx0]

Při základní instalaci klasického debianu to vzalo amd64. Když jsem to instaloval sám, na druhém když to instaloval přímo správce, tak je tam taky amd64 kernel.

Může to být problém tedy?

Jinak samozřejmě děkuji za váš čas!

[ikarr]

No já nevím jak Debian, nikdy jsem ho nikde neměl, ale instalátor Fedory mi tam taky původně nacpal kernel-PAE. teď tam je bezproblémový :2.6.35.13-92.fc14.x86_64 #1 SMP Sat May 21 17:26:25 UTC 2011 x86_64 x86_64 x86_64 GNU/Linux

Další věc je nastavení žurnálu a parametrů souborového systému, jestli je připojen jako noatime a podobně. Když pracuje pomalu fs (málo paměti ,...), tak se hromadí nevyřízené požadavky ve frontě serveru a situace se zhoršuje.

[cx0]

Tak tedy každopádně zařídím navýšení ram. Zajímavé je, že na tom druhém stroji, je těch 16gb ram, 5x vyšší zátěž a třetinový load.

Schválně jsem zkusil najít:

mail:~# uname -r
2.6.26-2-amd64
mail:~# apt-cache search linux-image
alsa-base - ALSA driver configuration files
linux-image-2.6-amd64 - Linux 2.6 image on AMD64
linux-image-2.6-openvz-amd64 - Linux 2.6 image on AMD64, OpenVZ support
linux-image-2.6-vserver-amd64 - Linux 2.6 image on AMD64, Linux-VServer support
linux-image-2.6-xen-amd64 - Linux 2.6 image on AMD64, oldstyle Xen support
linux-image-amd64 - Linux image on AMD64
linux-image-openvz-amd64 - Linux image on AMD64, OpenVZ support
linux-image-vserver-amd64 - Linux image on AMD64, Linux-VServer support
linux-image-xen-amd64 - Linux image on AMD64, oldstyle Xen support
rt2400-source - source for rt2400 wireless network driver
rt2500-source - source for rt2500 wireless network driver
rt2570-source - source for rt2570 wireless network driver
linux-headers-2.6.26-1-amd64 - Header files for Linux 2.6.26-1-amd64
linux-headers-2.6.26-1-openvz-amd64 - Header files for Linux 2.6.26-1-openvz-amd64
linux-headers-2.6.26-1-vserver-amd64 - Header files for Linux 2.6.26-1-vserver-amd64
linux-headers-2.6.26-1-xen-amd64 - Header files for Linux 2.6.26-1-xen-amd64
linux-headers-2.6.26-2-amd64 - Header files for Linux 2.6.26-2-amd64
linux-headers-2.6.26-2-openvz-amd64 - Header files for Linux 2.6.26-2-openvz-amd64
linux-headers-2.6.26-2-vserver-amd64 - Header files for Linux 2.6.26-2-vserver-amd64
linux-headers-2.6.26-2-xen-amd64 - Header files for Linux 2.6.26-2-xen-amd64
linux-image-2.6.26-1-amd64 - Linux 2.6.26 image on AMD64
linux-image-2.6.26-1-openvz-amd64 - Linux 2.6.26 image on AMD64, OpenVZ support
linux-image-2.6.26-1-vserver-amd64 - Linux 2.6.26 image on AMD64, Linux-VServer support
linux-image-2.6.26-1-xen-amd64 - Linux 2.6.26 image on AMD64, oldstyle Xen support
linux-image-2.6.26-2-amd64 - Linux 2.6.26 image on AMD64
linux-image-2.6.26-2-openvz-amd64 - Linux 2.6.26 image on AMD64, OpenVZ support
linux-image-2.6.26-2-vserver-amd64 - Linux 2.6.26 image on AMD64, Linux-VServer support
linux-image-2.6.26-2-xen-amd64 - Linux 2.6.26 image on AMD64, oldstyle Xen support
linux-tree-2.6.26 - Linux kernel source tree for building Debian kernel images

[kyytaM]

NIE. AMD64 zname x86-64. Kernel je spravny.

[trekker.dk]

amd64 a x86_64 je totéž

[pavlix]

Na Intelu Xeony máte amd64 kernel?

A Intel Xeon snad není amd64?