abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 13:00 | Komunita

Do 30. října se lze přihlásit do dalšího kola programu Outreachy (Wikipedie), jehož cílem je přitáhnout do světa svobodného a otevřeného softwaru lidi ze skupin, jež jsou ve světě svobodného a otevřeného softwaru málo zastoupeny. Za 3 měsíce práce, od 4. prosince 2018 do 4. března 2019, v participujících organizacích lze vydělat 5 500 USD.

Ladislav Hagara | Komentářů: 38
21.9. 22:22 | Komunita

Společnost Purism představila kryptografický token Librem Key. Koupit jej lze za 59 dolarů. Token byl vyvinut ve spolupráci se společností Nitrokey a poskytuje jak OpenPGP čipovou kartu, tak zabezpečení bootování notebooků Librem a také dalších notebooků s open source firmwarem Heads.

Ladislav Hagara | Komentářů: 8
21.9. 20:33 | Nová verze

Společnost NVIDIA oficiálně vydala verzi 10.0 toolkitu CUDA (Wikipedie) umožňujícího vývoj aplikací běžících na jejich grafických kartách. Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
21.9. 20:00 | Upozornění

Příspěvek Jak přežít plánovanou údržbu DNS na blogu zaměstnanců CZ.NIC upozorňuje na historicky poprvé podepsání DNS root zóny novým klíčem dne 11. října 2018 v 18:00. Software, který nebude po tomto okamžiku obsahovat nový DNSSEC root klíč, nebude schopen resolvovat žádná data. Druhým důležitým datem je 1. února 2019, kdy významní výrobci DNS softwaru, také historicky poprvé, přestanou podporovat servery, které porušují DNS standard

… více »
Ladislav Hagara | Komentářů: 6
21.9. 15:55 | Pozvánky

Spolek OpenAlt zve příznivce otevřených řešení a přístupu na 156. brněnský sraz, který proběhne v pátek 21. září od 18:00 v restauraci Na Purkyňce na adrese Purkyňova 80.

Ladislav Hagara | Komentářů: 0
21.9. 13:22 | Nová verze

Alan Griffiths z Canonicalu oznámil vydání verze 1.0.0 display serveru Mir (GitHub, Wikipedie). Mir byl představen v březnu 2013 jako náhrada X serveru a alternativa k Waylandu. Dnes Mir běží nad Waylandem a cílen je na internet věcí (IoT).

Ladislav Hagara | Komentářů: 0
20.9. 22:00 | Nasazení Linuxu
Stabilní aktualizace Chrome OS 69 (resp. Chromium OS), konkrétně 69.0.3497.95, přináší mj. podporu linuxových aplikací. Implementována je pomocí virtualizace, a proto je tato funkce také omezena na zařízení s dostatkem paměti a podporou hardwarové akcelerace, tudíž nejsou podporovány chromebooky s 32bitovými architekturami ARM, či Intel Bay Trail (tzn. bez Intel VT-x).
Fluttershy, yay! | Komentářů: 5
20.9. 21:32 | Zajímavý projekt

Došlo k uvolnění linuxové distribuce CLIP OS, vyvíjené francouzským úřadem pro kybernetickou bezpečnost ANSSI, jako open source. Vznikla za účelem nasazení v úřadech, kde je potřeba omezit přístup k důvěrným datům. Je založená na Gentoo.

Fluttershy, yay! | Komentářů: 1
20.9. 16:00 | Komerce

Zjistěte více o bezpečné a flexibilní architektuře v cloudu! IBM Cloud poskytuje bezpečné úložiště pro Vaše obchodní data s možností škálovatelnosti a flexibilitou ukládání dat. Zároveň nabízí prostředky pro jejich analýzu, vizualizaci, reporting a podporu rozhodování.

… více »
Fluttershy, yay! | Komentářů: 12
20.9. 12:22 | Nová verze

V dubnu letošního roku Mozilla představila webový prohlížeč pro rozšířenou a virtuální realitu Firefox Reality (GitHub). V úterý oznámila vydání verze 1.0. Ukázka na YouTube. Firefox Reality je k dispozici pro Viveport, Oculus a Daydream.

Ladislav Hagara | Komentářů: 2
Na optické médium (CD, DVD, BD aj.) jsem naposledy vypaloval(a) data před méně než
 (13%)
 (14%)
 (21%)
 (23%)
 (25%)
 (4%)
 (1%)
Celkem 390 hlasů
 Komentářů: 33, poslední 16.9. 11:55
Rozcestník

Šesnáctijádro s HT a škálování při kompilaci a OpenSSL

18.2.2014 10:10 | Přečteno: 1886× | Hardware | Výběrový blog | poslední úprava: 18.2.2014 14:58

Po dlouhé době tady mám opět dostatečně zajímavý počítač, který stojí za otestování. Dvouprocesorový stroj jsem tady sice už měl. Za čtyři a tři čtvrtě roku se toho ovšem dost změnilo. Nebo ne? Počet jader se jen zdvojnásobil, IPC trochu stouplo. Nejzásadnější změnou pro víceprocesorové sestavy je přemístění řadiče paměti do procesoru. Tím vzniká taková NUMA v malém měřítku (přístup k lokální paměti je o 20 % rychlejší) a Linux se opravdu dle numactl podle toho chová. Poslední změnou je, že v roce 2008 se dala pořídit dvouprocesorová pracovní stanice s 16GiB paměti za sto tisíc. Dnes to stoji čtvrt milionu. Pravda- je v ní 128 GiB ale to není o nic větší overkill, než 16 GiB před pěti léty. Pojďme se tedy podívat, jak se změnila situace v praxi.

Testovací sestava

2x Intel Xeon E5 2687W v2, 128GB (8x16GB) DDR3 1600MHz ECC Registered a omáčka okolo: Supermicro X9DAi, GeForce GTX780 Ti, 2x Nzxt Kraken X40, 2x Samsung 840 EVO 500GB, Cooler Master Cosmos II, Seasonic 1kW zdroj, DVD

Software

Aktuální Ubuntu Server LTE 12.04.4, gcc 4.6.3, jádro 3.11, x86_64, openSSL 1.0.1 d bn(64,64), p7zip 9.20, Truecrypt 7.1a

Metodika

Překládám vanilkové 3.2.9 s implicitním .config (lze získat pomocí make defconfig). HT vypínám v BIOSu, jádra vypínám přes zápis do /sys/devices/system/cpu/cpuN/online. Celý proces kompilace probíhá v ramdisku. Měřím pomocí time make -jN resp. openssl speed rsa2048 -multi N. Všechna měření dělám dvakrát a výsledky průměruju. V případě kompilace dávám do grafu počet kompilací za 10 minut. To dává lepší představu rozdílů a také z důvodu, který bude zřejmý později. Zásadním rozdílem oproti minulým měřením je, že u současných Xeonů se nedá žádným rozumným způsobem hýbat s frekvencí. Proto není zafixovaná ale nechávám v činnosti turbo. To v praxi znamená, že frekvence je 3.6-4 GHz podle počtu zatížených jader

Výsledky

Kompilace Real time

Výsledky vypadají poměrně neuspokojivě. Šesnáctijádro je jen 3.2x rychlejší než čtyřjádro a 1.8x rychlejší než osmijádro. Přínos HT je 20 % jinými slovy 16-jádro s HT podává asi takový výkon jako 19.2-jádro bez HT. Zřejmě tady narážíme na nějaký problém. Vyzkoušel jsem prototomu "pomoct" spuštěním dvou kompilací současně.

Kompilace Real time - dvě separátní kompilace současně

Výsledky vypadají o něco lépe. 16-jádro je 3.57x rychlejsí neč 4-jádro a 1.94x tychlejší než 8-jádro. Přínos HT je opět 20 % což je očekávaná hodnota (podobnou jsme naměřili při testu desktopového šestijádra). Na druhou stranu v takovém případě by bylo nesrovnatelně levnější pořídit prostě dva stroje. Pokud si chcete srovnat výsledky, tak jedna kompilace trvá 31.9 vteřiny a dvě souběžné kompilace pak 55.85 vteřiny.

Signs/s pro 2048bit rsa

Fyzická jádra škálují takřka ideálně. 16-jádro je 3,93x rychlejší než 4-jádro a 2x rychlejší než 8-jádro. Přínos HT je pouze 2 %. To je je hodně překvapivý výsledek (minule jsme naměřili 12 %. Nedokážu vysvětlit, proč tomu tak je.

7-Zip benchmark

7-Zip [64] 9.20  Copyright (c) 1999-2010 Igor Pavlov  2010-11-18
p7zip Version 9.20 (locale=en_US.UTF-8,Utf16=on,HugeFiles=on,32 CPUs)

RAM size:   128908 MB,  # CPU hardware threads:  32
RAM usage:   6804 MB,  # Benchmark threads:     32

Dict        Compressing          |        Decompressing
      Speed Usage    R/U Rating  |    Speed Usage    R/U Rating
       KB/s     %   MIPS   MIPS  |     KB/s     %   MIPS   MIPS

22:   66908  2455   2651  65088  |   934560  3164   2662  84248
23:   69559  2630   2695  70872  |   926326  3171   2671  84715
24:   67018  2663   2705  72058  |   900990  3141   2660  83565
25:   64159  2746   2668  73254  |   884276  3131   2655  83140
----------------------------------------------------------------
Avr:         2623   2680  70318              3152   2662  83917
Tot:         2888   2671  77118

Truecrypt benchmark

Geekbench 32bit

Geekbench spušěný ve Windows (ubuntu server odmítl spolupracovat s 32bit verzí).

Závěr

Tento kousek budu mít ještě nějakou chvíli doma, můžu tedy něco vyzkoušet, pokud o to bude zájem.

       

Hodnocení: 100 %

        špatnédobré        

Obrázky

Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 1 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 2 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 3 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 4 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 5 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 6 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 7

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

Komentáře

Vložit další komentář

18.2.2014 10:29 gsnak | skóre: 20 | blog: gsnak
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Daj si facku za neoznačené osi grafov
DOGE: DE7q1kxqvoFek7UGWBWBt47QWJTRBqVNLL
18.2.2014 10:54 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Řekl jsem si, že bude přínosnější to opravit než se fackovat ;-)
18.2.2014 10:50 Dr. Eddy | skóre: 9 | blog: glog | České Budějovice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Takze jdou na tom online hry ve Flashi plynule?
18.2.2014 12:59 kotrcka | skóre: 23 | blog: Onééé 2 | Praha
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
nie, má tam slabú grafiku + linux, takže podpora flashu je taká aká je :-)
You son of a bit.. coin
18.2.2014 11:45 goldenfish | skóre: 38 | blog: aqarium | Praha
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
zdravim,

moc diky za zapisek. Velmi zajimave.

Vlasnim sestijadro, naprosta spokojenost a clovek uvazuje o tom, co si koupit dale. Asi se to da navysit na 8 jader s vetsi frekvenci za rozumnou cenu. O cem ale uvazuju, ze si koupim pocitac jako vyrobni prostredek za odpovidajici cenu. Cilize 2x16 jader v Opteronu. Clovek zvazuje, zda tech padesat tisic casem vyda.

Hodne je pro me zajimave, jak se to projevi na kompilacich(C++/Java) a unit/integracnich testech (radkove 100-vky testu).

gf
Pavel Kysilka - www.linuxsoft.cz
18.2.2014 11:59 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Díky za potvrzení, že "moduly" u AMD Bulldozer/Piledriver se při reálné zátěži chovají úplně jinak než hyperthreading. Sice jsem to očekával, ale někteří hardcore fans se snažili naznačovat opak.
18.2.2014 12:47 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
To rozhodně, jádra v modulu sdílejí mnohem menší část než dva virtuální jádra v HT.

Na druhou stranu- to je jen akademická záležitost. Podstatný je výsledný výkon (případně výkon/W nebo výkon/$). Existují praktické aplikace, kde porazí 2Njádro od AMD intelácké Njádro s HT a jsou aplikace, kde tomu je naopak. Nechci vyvolávat flame tak se zdržím komentáře kterých je víc ;-)
18.2.2014 14:58 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Přidal jsem geekbench
18.2.2014 15:34 Bhua
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Ja jsem prave koupil server s 24 fyzickyma CPU a 32 GB RAM za 800 euro, jako pracovni masinu na vyvoj a testovani. Cekam ze si na tom uziju podobne :-)
18.2.2014 22:03 citanus | skóre: 11 | Cork (Ireland)
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL

co to je za stroj? kolik to zere : )

22.2.2014 21:48 ovoce
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Jestli to má jen 32 GB RAM, tak asi myslel dva procesory-dvanáctijádra. Dvacetičtyř*procesorový* stroj, jo, to už by byla haluz.
Jendа avatar 19.2.2014 02:27 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Pochopil bych takový server nebo výpočetní node, ale desktop?! To provozuješ Firefox?
Heron avatar 19.2.2014 09:53 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Kde vidíš desktop? Píše tam pracovní stanice.
Jendа avatar 19.2.2014 10:17 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Původně jsem chtěl napsat, že má slabou grafiku, takže třeba na stříhání videa to nepůjde, ale koukám, že jsem se nechal zmást komentářem výše (v číslování NV se nevyznám, na zobrazování používám Intel a na výpočty ATI).

Jak se liší workstation a desktop? Já říkám desktop všem počítačům, na kterých uživatel přímo lokálně pracuje.
19.2.2014 11:26 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Wikipedia dnes nejede? ;-) http://cs.wikipedia.org/wiki/Pracovn%C3%AD_stanice

Moje osobní definice je: ECC (naprosto nutná podmínka) a buďto 2 procesory nebo profi grafická karta nebo XeonPhi nebo něco podobného.

Jinak ten počítač bude sloužit pro vývoj a simulaci nějakých clusterových aplikací. Grafická karta tam jě taková kvůli paření her.
Heron avatar 19.2.2014 11:33 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Asi nejkratší odpověď: Na pracovní stanici se pracuje, desktop je Gatesova vize z devadesátých let.
Já říkám desktop všem počítačům, na kterých uživatel přímo lokálně pracuje.

A co je potom terminál?

19.2.2014 14:05 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
If train station is a place where a train stops, what the hell is a workstation? :-)
Heron avatar 21.2.2014 09:40 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Z train station ty vlaky taky odjíždějí :-) Takže workstation je místo, kam práce přijede, chvíli tam stojí a občas odjede (ujede?). :-D Aneb práce, která se nevyřeší sama, nezasluhuje vaši pozornost.
22.2.2014 21:51 ovoce
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
If train station is a place where a train stops, what the hell is a workstation? :-)
Spíš desktop, kde je každá komponenta až řádově dražší, protože "profíci" za to zaplatěj. U některých to má logiku (serverový HW jiných výkonnostních kategorií než v desktopu), u jiných ne.
Jendа avatar 19.2.2014 21:01 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Na pracovní stanici se pracuje, desktop je Gatesova vize z devadesátých let
Hurá, mám workstation! :)
A co je potom terminál?
Hm. To je, když uživatelské aplikace běží jinde, a na terminál se posílá jenom vykreslená grafika.
20.2.2014 11:14 gsnak | skóre: 20 | blog: gsnak
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Čiže niečo ako cloud?
DOGE: DE7q1kxqvoFek7UGWBWBt47QWJTRBqVNLL
Jendа avatar 20.2.2014 21:33 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Ne. Cloud je infrastruktura, která se platí podle zatížení a lze realtime škálovat.
Heron avatar 21.2.2014 09:38 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Hurá, mám workstation! :)

Vítej do klubu :-D

Založit nové vláknoNahoru

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.