Dotaz: Jak postavit o nejrychlejsi mysql server

[Honza Lunek]

Ahoj! Prosim o radu. Chystam upgrade CentOs serveru (Celeron 220 ;) ) ktery nestiha (tada mu to hrozne trva)provadet sql dotazy (jednou denne import cca 1-4M radku do mysql + mnohokrat denne hodne dotazu na cteni z te sql..) Sousacny disk ma 32MB cache a mysql/my.cnf jsem zoptimalizoval az beda.

Takze ted mam nekolik otazek.. jak za relativne maly peniz postavit slusny pocitac pro mysql. Mam zainvestovat vic do CPU s vetsi cache? Dvoujadro? Levne ctyrjadro? Nebo mam koupit SATA/SAS radic s co nejvice cache? (256MB cache je ok?) Disky uvazuju 10k otackove. A jeste jednu otazku: write back cache je pro sql asi hodne dulezita ze? (takze mam koupit radic s baterkou?)

Diky za kazdy vas nazor .. :) A jeste jednou dik :)

Odpovědi

[cronin]

Najviac mas investovat do disku, ehm, lepsie povedane do diskov, ktore spojis do raid0, raid10 alebo ak ich bude viac ako 5 tak trebars aj do raid5, rozhodne nemas setrit na pamati a ci treba alebo netreba vykonny alebo viacjadrovy procesor, zalezi od konkretnych selectov a patternov zataze.

Skus http://forum.dbsvet.cz/.

[Mti.]

ehm... mohl bych se zeptat, proc raid5 az od vice jak 5ti disku?

[cronin]

RAID5 je sice mozne postavit na minimalne troch diskoch, ale RAID5 na malo diskoch je skor performance bottleneck; vykonostne zacina byt zaujimavy na priatich, siestich, viacerych diskoch. Autor otazky kladol doraz prave na performance, takze ak ma mat dva alebo styri disky, je RAID0 pre neho jasna volba (samozrejme, so vsetkymi dosledkami; ale o failover ci high-availability poziadavkach sa nezmienil).

[JF]

Mam jeden napad, co nic nestoji. Zkompiluj si kernel s -O3. Dela to nekdy treba 5% zrychleni. Ja jsem si zeditoval makefile a zamenil -O2 na -O3.

A take vyhazet z kernelu zbytecne ovladace, ale to uz tolik nepomuze, pouze snad na cache pamet.

[Zdeněk Burda]

O jak velký objem dat se jedná? Co provádějí dotazy, nějaké náročné operace nebo přenášejí velké množství dat...? Kolik dotazů zároveň ta DB zpracovává a co znamená "mnohokrat denne hodne dotazu na cteni"?

[honzalunek]

Kazdy den se importuje se cca 1GB dat. (stara jsou smazana) Kazdy den se provadi zaloha ostatnich sql dat cca 2GB. Bezny provoz znamena prumerne 20 sql dotazu za vterinu. Kazdou hodinu se provadeji scripty ktere generuji aktualni reporty. Hlavne pri tom importu a generovani sestav dochazi k velkemu zpomaleni ostatniho provozu. Proto bych rad aby nove zelezo ty pravidlene importy exporty co nejvic zkratilo aby to pak tolik nekolidovalo s beznym provozem..

[Filip Jirsák]

Myslím, že jediné, co v tomhle případě pomůže, je hodně RAM a vyladit cache – jak MySQL, tak diskové. V druhé řadě pak rychlé disky a rychlá sběrnice.

[cronin]

Ak je spomalenie sposobene davkovymi operaciami s velkym mnozstvom udajov, tak RAM a cachovanie pomoze len minimalne, lebo tie udaje sa do cache tak ci tak nezmestia. Preto by som v prvom rade vsadil na upgrade diskoveho subsystemu.

Btw, co sa da zistit pomocou nastrojov ako vmstat, iostat, systat, top, ... ?

[Filip Jirsák]

4 miliony řádků by se třeba do 4 GB RAM vejít mohly… A nejde jen o to, že by se to vešlo do RAM celé, ale do RAM se můžou natáhnout indexy, hlavičky atd., vedle se vejde ještě kus dat, a na harddisk se to pak bude zapisovat po velkých souvislých blocích. Což je rozhodně rychlejší, než když hlavička musí lítat pořád sem a tam.

[happy barney]

disky zober 15k otáčkové
write back je dobrý nápad, to ale rovno dva zdroje, ups

btw, máš na tej tabuľke indexy ?

[happy barney]

a este jedna vec ... tie "dolezite exporty", ak sú statické, tak ich radšej priprav do pomocnej tabuľky (popr časti po hodinách)

[Honza Lunek]

Tak jsem se probral netem a co mi vyšlo je asi toto: Koupim 2x 7200ot disky na system do raid1 + 2x 15000 ot disky na data taky do raid 1 Koupim hodne RAM a radic asi ADAPTEC 3405 (128mb cache)

Utratim za to sice o fous vic nez jsem puvodne chtel, ale snad to bude mit smysl a snad se mi ty penize vratej :) Tak diky!

[radim]

myslim ze RAID vubec nepotrebujes, a tim padem radic take ne, zalohovat se da i jinak ... Misto redundantnich disku bych investoval do vice pameti 2-8GB+ a solidni 1-2x Ctyrjadro se serverovou deskou, neznam presnou konfiguraci co ti na tom bezi ale do 50k se vejdes a vykonu habadej i do budoucna :) R.