abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

dnes 09:22 | Komunita

The Document Foundation vyhlásila soutěž o maskota svobodného kancelářského balíku LibreOffice. Návrhy lze předložit do 31. srpna. Autoři prvních tří návrhů získají věcné ceny (Slimbook KATANA Intel i5, Nextcloud box with Raspberry Pi 3 a Nitrokey Pro 3) [reddit].

Ladislav Hagara | Komentářů: 0
dnes 08:00 | Nová verze

Byla vydána nová verze 8.0.0 svobodného toolkitu pro počítačovou 3D grafiku, zpracování obrazu a vizualizaci VTK (Visualization Toolkit, Wikipedie). Z novinek vývojáři zdůrazňují VTK-m přinášející podporu mnohojádrových procesorů. Na vývoji VTK 8.0.0 se podílelo 79 vývojářů.

Ladislav Hagara | Komentářů: 0
dnes 00:11 | Nová verze

Eclipse Foundation oznámila vydání nové verze vývojového prostředí Eclipse. Eclipse 4.7 s kódovým označením Oxygen vychází rok po vydání verze 4.6 s kódovým označením Neon (zprávička) a přináší celou řadu novinek. Jejich představení také na YouTube.

Ladislav Hagara | Komentářů: 2
včera 23:33 | Zajímavý software

Před týdnem Lennart Poettering představil casync, tj. nástroj pro distribuci obrazů systémů. Dnes oficiálně představil mkosi, tj. nástroj pro generování těchto obrazů. Zdrojové kódy mkosi jsou k dispozici na GitHubu pod licencí LGPL-2.1.

Ladislav Hagara | Komentářů: 2
včera 16:00 | Bezpečnostní upozornění

Ve správci systému a služeb systemd, konkrétně v systemd-resolved, byla nalezena bezpečnostní chyba CVE-2017-9445. Útočník může vzdáleně shodit server nebo spustit libovolný příkaz.

Ladislav Hagara | Komentářů: 26
27.6. 11:33 | Pozvánky

Konference LinuxDays 2017 proběhne o víkendu 7. a 8. října v Praze v Dejvicích v prostorách FIT ČVUT. Konference OpenAlt 2017 proběhne o víkendu 4. a 5. listopadu na FIT VUT v Brně. Organizátoři konferencí vyhlásili CFP (LinuxDays, OpenAlt). Přihlaste svou přednášku nebo doporučte konference známým.

Ladislav Hagara | Komentářů: 1
27.6. 06:00 | Nová verze

Byla vydána verze 1.3.0 odlehčeného desktopového prostředí Lumina (Wikipedie, GitHub) postaveného nad toolkitem Qt. Z novinek lze zmínit nový motiv ikon nahrazující Oxygen (material-design-[light/dark]) nebo vlastní multimediální přehrávač (lumina-mediaplayer).

Ladislav Hagara | Komentářů: 2
26.6. 17:33 | Bezpečnostní upozornění

Před šesti týdny byly publikovány výsledky bezpečnostního auditu zdrojových kódů OpenVPN a nalezené bezpečnostní chyby byly opraveny ve verzi OpenVPN 2.4.2. Guido Vranken minulý týden oznámil, že v OpenVPN nalezl další čtyři bezpečnostní chyby (CVE-2017-7520, CVE-2017-7521, CVE-2017-7522 a CVE-2017-7508). Nejzávažnější z nich se týká způsobu, jakým aplikace zachází s SSL certifikáty. Vzdálený útočník může pomocí speciálně

… více »
Ladislav Hagara | Komentářů: 1
26.6. 06:55 | Zajímavý projekt

V Edici CZ.NIC vyšla kniha Průvodce labyrintem algoritmů. Kniha je ke stažení zcela zdarma (pdf) nebo lze objednat tištěnou verzi za 339 Kč (připojení přes IPv4) nebo 289 Kč (připojení přes IPv6).

Ladislav Hagara | Komentářů: 12
26.6. 06:33 | Zajímavý software

Byla vydána verze 2.2.0 svobodného správce hesel KeePassXC (Wikipedie). Jedná se o komunitní fork správce hesel KeePassX s řadou vylepšení.

Ladislav Hagara | Komentářů: 0
Chystáte se pořídit CPU AMD Ryzen?
 (7%)
 (31%)
 (1%)
 (9%)
 (44%)
 (9%)
Celkem 859 hlasů
 Komentářů: 65, poslední 1.6. 19:16
    Rozcestník

    Dotaz: KVM performance penalty + dotazy k virtualizaci obecne

    18.1.2013 11:51 Lukas
    KVM performance penalty + dotazy k virtualizaci obecne
    Přečteno: 1094×
    Dobrý den,

    chtěl jsem se zeptat na dvě věci:

    1) zda má z důvodu bezpečnosti smysl dělat na každou službu samostatný virtuální stroj - jednalo by se o mailserver, fileserver, dns/vpn a webserver?

    2) jaká bude performance penalty, pokud bych použil KVM s tím, že by virtuály byly nainstalované do samostaných LVM oddílů?

    Jedná se o nepříliš vytížené systémy, které budou po většinu doby idle, z hlediska bezpečnosti bych zase ale nejradši oddělil webserver do samostatného virtuálu. Na webserveru ale zas potřebuju sql a to je prý ve virtuálech největší problém, protože to sežere strašně moc i/o na disku a prý se tam nejvíc projeví performance penalty VM.

    Takže otázka zní - má ta virtualizace smysl nebo ne, popř. co virtualizovat a co nechat na nativní mašině?

    Odpovědi

    18.1.2013 16:05 PanZvedavy
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne

    1. to zalezi o jakou uroven bezpecnosti usiluji. Verejne sluzby versus sluzby pro firemni zamestanace versus domaci uzivatele versus ...

    2. to je snad dane rezii LVM. KVM je z hlediska LVM jeden velky soubor, nic vic.

    Rozdeleni instalaci je opet o bezpecnosti. Pokud bude web i email verejny, tak muze bezet dohromady. Pokud ocekavam problemy s provozovanymi www aplikacemi, ci se u nich casto vyskytuji bezpecnostni problemy, tak tomu venuji extra virtual a nebudu to michat s ostatnima sluzbama. Pokud tech sql serveru nebude na jednom diskovem poli 5, tak v tom nevidim problem. Pokud ocekavam velkou zatez u databaze, tak se virtualizaci sql serveru velkym obloukem vyhnu protoze i/o. Virtualizace samo smysl ma a to nemaly, ale ne vsude a za kazdou cenu.

    18.1.2013 19:21 CandySan | skóre: 9 | blog: bonzacek
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    K bodu 2 moje zkusenosti (provozuju virtualizace jiz delsi dobu a mam zasadne kazdy server virtualizovany, protoze si tim setrim spousty casu - kdyz se deje cokoliv a cokoliv se hryzne, nebo jakkoliv prestane reagovat, tak vzdy muzu udelat aspon restart virtualky).

    Na zaklade testu nekoho dalsiho (k dohledani na netu) ukladam virtualky ve formatu raw a bez cache. Testoval jsem vliv souborovych systemu a dospel jsem k tomu, ze image by mely lezet na FS XFS a uvnitr virtualek se mi z daleka nejlepe osvedcil jfs (nevytezuje cpu a je extremne rychly i pri praci s adresari s mnoha a mnoha soubory - obcas se vsak zamkne a je read only a je potreba jej odpojit a pripojit; mel jsem z pocatku vsude reiserfs a virtualky byly znatelne pretizene a hostitel taky, tak jsem zkousel vliv ruznych FS a tak jsem dospel k teto kombinaci u ktere setrvavam).

    Dulezite je, aby se nikde neswapovalo, takze vsichni (i hostitel) maji zakazan swap.

    Provozuju takto celkem vytizene web servery, sql servery, mail servery (pozor na to aby byl cachujici) a i windows servery a vse ma vykonu dost.

    Provozuju to zasadne nad sw raid, coz samozrejme neni oproti hw raid z daleka tak vykonne (mam kazdy server s hw raid, ale nepouzivam je a nevim jiste zda jsou tak vyznamne rychlejsi, ale rika se to), ale pro mne je z daleka nejdulezitejsi at je vse vsude stejne (sablonovite) dokud "na to mam" (prostredky, vykon atd...).

    U sw raidu mam nastaveno, ze resynchronizace probiha jen malou rychlosti (dev.raid.speed_limit_min=100) at to nikoho (disk) nezatezuje (je to jen read only operace, takze neni kam spechat a pole jsou po celou dobu v poradku).

    Dokonce se ukazuje, ze si (zatim) muzu vsude dovolit zalohovat pomoci lvm snapshotu (zalohujicimu procesu nastavuju nejnizsi nice a ionice), takze rezervy mam velke. Ocekavam vsak, ze az budu moct pouzivat napr. btrfs, tak to bude uplne jina pohadka.

    Jeste doplnim, ze u hostitele je vhodne doplnit do /etc/sysctl.conf kernel.panic = 10 a kernel.panic_on_oops = 10 (tedy ze v obou pripadech do 10 s bude hostitel restartovan) a nainstalovat watchdog (tam, kde neni hw watchdog, tak lze pouzit softdog a funguje skvele!).

    Zasadne dulezite je mit vic jader. 2 jadra jsou pri napr. ctyrech virtualkach hodne vytizena, ale 4 jadra snesou i celkem dost virtualek a stale to jde. Tenhle popis je sice tezko uchopitelny, ale nema zadny smysl vtytvaret virtualizacni server na pocitaci s mene nez 4 jadry. Musi to byt fyzicka jadra a ne HT! Nevim cim to je - mozna maji jen jednu spolecnou frontu..?

    snad ti to helpne
    18.1.2013 19:22 CandySan | skóre: 9 | blog: bonzacek
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Jeste doplnim, ze LVM samotne nepredstavuje vubec zadnou rezii navic (nemluvim vsak o snapshotech - ty jsou narocne velmi).
    18.1.2013 20:19 Šangala | skóre: 56 | blog: Dutá Vrba - Wally
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    …ale nema zadny smysl vtytvaret virtualizacni server na pocitaci s mene nez 4 jadry
    spolu v dotazu uvedeném
    Jedná se o nepříliš vytížené systémy, které budou po většinu doby idle
    mám poznámku, že mám 3× VM (XEN) a používám i fyzického hostitele (což je blbost) vše na jedno-jádru Athlon LE-1640.
    To, že trpíš stihomamem, ještě neznamená, že po tobě nejdou. ⰞⰏⰉⰓⰀⰜⰉ ⰗⰞⰅⰜⰘ ⰈⰅⰏⰉ ⰒⰑⰎⰉⰁⰕⰅ ⰏⰉ ⰒⰓⰄⰅⰎ ·:⁖⁘⁙†
    19.1.2013 10:16 CandySan | skóre: 9 | blog: bonzacek
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Jo to je fakt. Kdyz se po nich nic moc nechce, tak to v pohode pobezi i na jednojadru. V okamziku, kdy prijde zatez, tak az tehdy poleti load nahoru a zadejchaji se vsechny virtualky najednou. Nechal jsem se unest a popsal jsem spis jen svoji sablonu.
    21.1.2013 11:56 trekker.dk | skóre: 71
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    mam kazdy server s hw raid, ale nepouzivam je a nevim jiste zda jsou tak vyznamne rychlejsi, ale rika se to
    Jsou a o dost*. Nevýhodou je, že člověk svěřuje data černé krabičce a doufá, že se nic nevys...

    * pokud se nebavíme o levném řadiči s "hardwarovým" ve skutečnosti softwarovém raidem
    Quando omni flunkus moritati
    pavlix avatar 21.1.2013 12:35 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Je nějaký důvod, proč by měly být rychlejší? A nějaká data? Já nevím ani o jednom.
    21.1.2013 12:55 Lazar
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Nemůže například non-volatile pamět na takovém řadiči umožnit dosažení vyššího výkonu (volbou cache-policy) při zachování spolehlivosti (případné dodatečné propsání dirty blocks po obnovení provozu)?
    29.1.2013 04:04 trekker.dk | skóre: 71
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Nemůže například non-volatile pamět na takovém řadiči umožnit dosažení vyššího výkonu
    Samozřejmě, zejména pokud je ta non-volatile paměť RAM zálohovaná baterií. Rozdíl výkonu oproti softwarovému raidu je znát opravdu hodně.

    Ale klid, pavlix se zřejmě jenom dlouho s nikým nepohádal, tak to zkouší...
    Quando omni flunkus moritati
    29.1.2013 10:41 Ivan Vecera | skóre: 8
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Ja pouzivam jako nahradu HW-RAID s cache a baterii kombinaci MD-RAID, flashcache & UPS. Flashcache nemam nad SSD ale nad ramdiskem. Zkousel jsem i bcache, ale s flashcache jsem mel lepsi vykon. Ted jsem kdesi vyhrabal projekt eprd (http://www.lessfs.com/wordpress/?p=699) a ten se mi docela libi.
    29.1.2013 12:57 trekker.dk | skóre: 71
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Tohle řešení má (asi relativně malé) riziko, že jádro zhavaruje dřív, než se všechna data z ramdisku překopírují na pevné úložiště.

    Já jsem před nějakou dobou na flashcache i bcache koukal. Bohužel flashcache je out-of-tree projekt a nejnovější jádro, na kterém to testovali, je 2.6.32, což mi nestačí. A podle toho, co jsem četl o bcache, tak tam velká šance na začlenění taky není...
    Quando omni flunkus moritati
    29.1.2013 14:16 Ivan Vecera | skóre: 8
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Tohle řešení má (asi relativně malé) riziko, že jádro zhavaruje dřív, než se všechna data z ramdisku překopírují na pevné úložiště.
    Tak tohle riziko ma asi jakekoliv reseni... HW-RAID s baterkou ma taky riziko, ze jadro zhavaruje driv, nez se data z pagecache/bufferu prekopiruji do non-volatile pameti na radici.

    Já jsem před nějakou dobou na flashcache i bcache koukal. Bohužel flashcache je out-of-tree projekt a nejnovější jádro, na kterém to testovali, je 2.6.32, což mi nestačí. A podle toho, co jsem četl o bcache, tak tam velká šance na začlenění taky není...
    Staci vzit flashcache z jeho gitu, pokud vim tak nova jadra jsou take podporovana (3.6.x urcite). U bcache se mi nelibi, ze musis pripravit (naformatovat) nejen cache zarizeni (RAM disk/SSD) ale i backend, coz je na prd. Ted zrovna testuju ten EPRD a nevypada to vubec spatne.
    29.1.2013 14:37 trekker.dk | skóre: 71
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Tak tohle riziko ma asi jakekoliv reseni... HW-RAID s baterkou ma taky riziko, ze jadro zhavaruje driv, nez se data z pagecache/bufferu prekopiruji do non-volatile pameti na radici.

    To je sice pravda, ale rozdíl tu přece jenom je. Pokud nějaká aplikace použije systémové volání sync(), to volání se nevrátí, dokud se data nepřenesou alespoň do té baterkou zálohované paměti (a pak už je to jedno, ten řadič si udělá svoje, i když jádro spadne.) Tzn. pokud se mi vrátí sync(), mám jistotu, že data jsou na stabilním úložišti.

    Pro tvoje řešení tohle neplatí, sync() se vrátí, když se data uloží do cache v ramdisku, přestože existuje možnost, že se na stabilní úložiště nedostanou (za předpokladu, že flashcache při sync() nečeká, až se data dostanou až na disk, ale to by asi docela zabíjelo výkon.)
    Staci vzit flashcache z jeho gitu, pokud vim tak nova jadra jsou take podporovana (3.6.x urcite)
    Spíš si počkám, až bude něco v mainline
    Quando omni flunkus moritati
    pavlix avatar 29.1.2013 11:45 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Ale klid, pavlix se zřejmě jenom dlouho s nikým nepohádal, tak to zkouší...
    Myslím, že je naprosto zřejmé, kdo se tu zkouší hádat ;).
    pavlix avatar 29.1.2013 11:44 pavlix | skóre: 54 | blog: pavlix
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Nemůže například non-volatile pamět na takovém řadiči umožnit dosažení vyššího výkonu (volbou cache-policy) při zachování spolehlivosti (případné dodatečné propsání dirty blocks po obnovení provozu)?
    Jo to zní docela rozumně.
    kozzi avatar 19.1.2013 13:39 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne

    1) jak jiz bylo receno zalezi na tom co se od systemu ocekava. Jinak obecne je lespi to mit vse zvlast virtualizovane

    2) co se tyka ztrat na vykonu tak  rezie u KVM co se vykonu cpu tyce je nekde okolo 5-10%, coz neni nijak moc, tam problm neni

    co se tyce jiz zminovaneho problemu IO operaci, tak zde hodne zalezi na nastaveni a jak si stim clovek pohraje a zda ma podporu IOMMU,

    pokud hostitel podporuje IOMMU jak CPU tak i deska, pak bych se nebal virtualizovat i ten databazovi server. Dale jeste zalezi na veliosti RAM, pokud ty databaze nebudou nejak extra velke a da se rict ze DB server si je dokaze nacachovat v podstate cele do operacni pameti, tak pak zytraty na vykonu IO nebudou zas tak markantni.

    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    19.1.2013 17:20 Šangala | skóre: 56 | blog: Dutá Vrba - Wally
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    A je nějaký problém, pro DB nedělat virtuální disk, ale připojit fyzickou partition, nebo to problém neřeší (nevím, tak se se ptám)?
    To, že trpíš stihomamem, ještě neznamená, že po tobě nejdou. ⰞⰏⰉⰓⰀⰜⰉ ⰗⰞⰅⰜⰘ ⰈⰅⰏⰉ ⰒⰑⰎⰉⰁⰕⰅ ⰏⰉ ⰒⰓⰄⰅⰎ ·:⁖⁘⁙†
    kozzi avatar 19.1.2013 19:20 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne

    Pripojit fyzickou partisnu samozrejme muzes a teoreticky si tim pomuzes, ale presto si nemyslim ze by to byl takovy rozdil, chtelo by to provest testy

    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    19.1.2013 19:57 Šangala | skóre: 56 | blog: Dutá Vrba - Wally
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Takže problém „IO“ je jen, že DB server má velké zatížení „IO“ a tím pádem, zatíží fyzický HW a pak to má vliv na ostatní VM?
    Ale to by přece nemělo vadit, pokud ostatní stroje pracují převážně s pamětí, ne?
    To, že trpíš stihomamem, ještě neznamená, že po tobě nejdou. ⰞⰏⰉⰓⰀⰜⰉ ⰗⰞⰅⰜⰘ ⰈⰅⰏⰉ ⰒⰑⰎⰉⰁⰕⰅ ⰏⰉ ⰒⰓⰄⰅⰎ ·:⁖⁘⁙†
    kozzi avatar 20.1.2013 13:59 kozzi | skóre: 55 | blog: vse_o_vsem | Pacman (Bratrušov)
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne

    Jde o to ze jakmile se pretizi IO subsystem tak to pak jde vetsinou cele do haje, je to jak domino

    Linux je jako mušketýři "jeden za všechny, všichni za jednoho"
    19.1.2013 23:53 TomM
    Rozbalit Rozbalit vše Re: KVM performance penalty + dotazy k virtualizaci obecne
    Ad 2) zkoušel jsem oboje a nepozoroval jsem rozdíl.
    Jen bych měl poznámku - u virtuálního disku si v "advanced options/performance options" zapnout "IO mode" "native". Dokud jsem měl "default" (což je asi totéž, co "threads"), dokázala například aktualizace guesta hostovi nehorázně zatopit. Přišlo mi to, jako by se na každý celistvý na disk zapisovaný blok dat vyrobil thread a tu jich máš hoste 50 paralelně a opíchej se z toho... Stačilo pustit aktualizaci dvou guestů souběžně a LAV hosta byl v desítkách (a odezva...jo, přesně tam).
    Keš bych zkusil asi jen na partition, jinak se o to postara host. Takže vypnout.
    Ad /proc/sys/dev/raid/speed_limit_min - pokud je check ve čtvrtek na 47%, je třeba zpozornět :-)
    RHEL6 @ HP Proliant ML110G7, SW RAID 1, SATA disky

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.