abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 02:22 | Nová verze

Byla vydána verze 11.8 open source alternativy GitHubu, tj. softwarového nástroje s webovým rozhraním umožňujícího spolupráci na zdrojových kódech, GitLab (Wikipedie). Představení nových vlastností i s náhledy v příspěvku na blogu. Zdůraznit lze například SAST (Static Application Security Testing) testování JavaScriptu.

Ladislav Hagara | Komentářů: 2
dnes 02:00 | Zajímavý projekt

Neziskové technologické konsorcium Linux Foundation oznámilo, že nejnovějším oficiálním projektem konsorcia se stává ELISA (Enabling Linux In Safety Applications). Clem projektu je usnadnit společnostem vývoj a certifikaci kritických aplikací a systémů postavených na Linuxu, tj. aplikací a systémů, jejichž selhání může vést ke ztrátě lidských životů, k významným škodám na majetku nebo škodám na životním prostředí.

Ladislav Hagara | Komentářů: 1
včera 14:55 | Zajímavý projekt

Vyšlo piate číslo Magazínu KPI — webového časopisu Katedry počítačov a informatiky Technickej univerzity v Košiciach. V čísle sú články o vizualizácii dát v jazyku Python, nástroji Docker, a použití protokolu MQTT.

sergejx | Komentářů: 3
včera 10:44 | Nová verze

Po dvou a půl měsících vývoje od vydání verze 5.0 byla vydána nová verze 5.1 svobodného open source redakčního systému WordPress. Kódové označením Betty bylo vybráno na počest americké jazzové zpěvačky Betty Carter.

Ladislav Hagara | Komentářů: 0
21.2. 16:11 | Bezpečnostní upozornění

V Linuxu byla nalezena bezpečnostní chyba CVE-2019-8912. Jedná se o vážnou (CVSS v3.0: 9.8) bezpečnostní chybu typu CWE-416: Use After Free v crypto/af_alg.c. Chyba byla nalezena pomocí detektoru chyb při práci s pamětí KASAN (Kernel Address Sanitizer).

Ladislav Hagara | Komentářů: 5
21.2. 11:11 | Komunita

Mozilla.cz informuje, že další vydání SeaMonkey se zdrží. Infrastruktura projektu SeaMonkey prochází mnoha změnami. Důvodem je požadavek na nezávislost na infrastruktuře Firefoxu do konce roku, protože jeho vývoj nebude SeaMonkey následovat ve stejném tempu a rozdíly jsou moc veliké. Bohužel se při těchto přesunech nepodařilo udržet vše ve funkčním stavu a tak není možné sestavovat a vydávat nové verze SeaMonkey.

Ladislav Hagara | Komentářů: 0
20.2. 16:55 | Bezpečnostní upozornění

V Drupalu byla nalezena vysoce kritická zranitelnost PSA-2019-02-19. Podrobnosti a opravy 8.5.x a 8.6.x budou zveřejněny dnes mezi 19:00 a 23:00.

Ladislav Hagara | Komentářů: 1
20.2. 16:33 | Zajímavý projekt

Mozilla.cz informuje o stavu češtiny v projektu Common Voice. Projekt Common Voice sbírá hlasová data, na základě kterých bude možné trénovat modely a software pro rozpoznávání řeči. Aktuálně je nutné rozšířit počet vět v datové sadě a alespoň 5 tisíc vět musí být ručně ověřených několika lidmi.

Ladislav Hagara | Komentářů: 0
20.2. 16:22 | Nová verze

Byla vydána nová vývojová verze datového formátu a souvisejících nástrojů Relational pipes. Hlavní novinkou verze v0.10 je nástroj relpipe-tr-guile, který díky GNU Guile umožňuje filtrovat a transformovat relační data pomocí výrazů jazyka Scheme.

xkucf03 | Komentářů: 0
20.2. 00:33 | Bezpečnostní upozornění

CSIRT.CZ upozorňuje na kritickou zranitelnost ve WordPressu umožňující vzdálené spuštění libovolného kódu. Prakticky se jedná o kombinací dvou různých zranitelností (Directory Traversal a Local File Inclusion), pro jejichž úspěšné zneužití musí útočník získat v rámci instance WordPressu alespoň oprávnění autora.

Ladislav Hagara | Komentářů: 2
Máte v desktopovém prostředí zapnutou zvukovou znělku po přihlášení se do systému?
 (8%)
 (1%)
 (90%)
 (2%)
Celkem 398 hlasů
 Komentářů: 13, poslední dnes 18:27
Rozcestník

Šesnáctijádro s HT a škálování při kompilaci a OpenSSL

18.2.2014 10:10 | Přečteno: 1925× | Hardware | Výběrový blog | poslední úprava: 18.2.2014 14:58

Po dlouhé době tady mám opět dostatečně zajímavý počítač, který stojí za otestování. Dvouprocesorový stroj jsem tady sice už měl. Za čtyři a tři čtvrtě roku se toho ovšem dost změnilo. Nebo ne? Počet jader se jen zdvojnásobil, IPC trochu stouplo. Nejzásadnější změnou pro víceprocesorové sestavy je přemístění řadiče paměti do procesoru. Tím vzniká taková NUMA v malém měřítku (přístup k lokální paměti je o 20 % rychlejší) a Linux se opravdu dle numactl podle toho chová. Poslední změnou je, že v roce 2008 se dala pořídit dvouprocesorová pracovní stanice s 16GiB paměti za sto tisíc. Dnes to stoji čtvrt milionu. Pravda- je v ní 128 GiB ale to není o nic větší overkill, než 16 GiB před pěti léty. Pojďme se tedy podívat, jak se změnila situace v praxi.

Testovací sestava

2x Intel Xeon E5 2687W v2, 128GB (8x16GB) DDR3 1600MHz ECC Registered a omáčka okolo: Supermicro X9DAi, GeForce GTX780 Ti, 2x Nzxt Kraken X40, 2x Samsung 840 EVO 500GB, Cooler Master Cosmos II, Seasonic 1kW zdroj, DVD

Software

Aktuální Ubuntu Server LTE 12.04.4, gcc 4.6.3, jádro 3.11, x86_64, openSSL 1.0.1 d bn(64,64), p7zip 9.20, Truecrypt 7.1a

Metodika

Překládám vanilkové 3.2.9 s implicitním .config (lze získat pomocí make defconfig). HT vypínám v BIOSu, jádra vypínám přes zápis do /sys/devices/system/cpu/cpuN/online. Celý proces kompilace probíhá v ramdisku. Měřím pomocí time make -jN resp. openssl speed rsa2048 -multi N. Všechna měření dělám dvakrát a výsledky průměruju. V případě kompilace dávám do grafu počet kompilací za 10 minut. To dává lepší představu rozdílů a také z důvodu, který bude zřejmý později. Zásadním rozdílem oproti minulým měřením je, že u současných Xeonů se nedá žádným rozumným způsobem hýbat s frekvencí. Proto není zafixovaná ale nechávám v činnosti turbo. To v praxi znamená, že frekvence je 3.6-4 GHz podle počtu zatížených jader

Výsledky

Kompilace Real time

Výsledky vypadají poměrně neuspokojivě. Šesnáctijádro je jen 3.2x rychlejší než čtyřjádro a 1.8x rychlejší než osmijádro. Přínos HT je 20 % jinými slovy 16-jádro s HT podává asi takový výkon jako 19.2-jádro bez HT. Zřejmě tady narážíme na nějaký problém. Vyzkoušel jsem prototomu "pomoct" spuštěním dvou kompilací současně.

Kompilace Real time - dvě separátní kompilace současně

Výsledky vypadají o něco lépe. 16-jádro je 3.57x rychlejsí neč 4-jádro a 1.94x tychlejší než 8-jádro. Přínos HT je opět 20 % což je očekávaná hodnota (podobnou jsme naměřili při testu desktopového šestijádra). Na druhou stranu v takovém případě by bylo nesrovnatelně levnější pořídit prostě dva stroje. Pokud si chcete srovnat výsledky, tak jedna kompilace trvá 31.9 vteřiny a dvě souběžné kompilace pak 55.85 vteřiny.

Signs/s pro 2048bit rsa

Fyzická jádra škálují takřka ideálně. 16-jádro je 3,93x rychlejší než 4-jádro a 2x rychlejší než 8-jádro. Přínos HT je pouze 2 %. To je je hodně překvapivý výsledek (minule jsme naměřili 12 %. Nedokážu vysvětlit, proč tomu tak je.

7-Zip benchmark

7-Zip [64] 9.20  Copyright (c) 1999-2010 Igor Pavlov  2010-11-18
p7zip Version 9.20 (locale=en_US.UTF-8,Utf16=on,HugeFiles=on,32 CPUs)

RAM size:   128908 MB,  # CPU hardware threads:  32
RAM usage:   6804 MB,  # Benchmark threads:     32

Dict        Compressing          |        Decompressing
      Speed Usage    R/U Rating  |    Speed Usage    R/U Rating
       KB/s     %   MIPS   MIPS  |     KB/s     %   MIPS   MIPS

22:   66908  2455   2651  65088  |   934560  3164   2662  84248
23:   69559  2630   2695  70872  |   926326  3171   2671  84715
24:   67018  2663   2705  72058  |   900990  3141   2660  83565
25:   64159  2746   2668  73254  |   884276  3131   2655  83140
----------------------------------------------------------------
Avr:         2623   2680  70318              3152   2662  83917
Tot:         2888   2671  77118

Truecrypt benchmark

Geekbench 32bit

Geekbench spušěný ve Windows (ubuntu server odmítl spolupracovat s 32bit verzí).

Závěr

Tento kousek budu mít ještě nějakou chvíli doma, můžu tedy něco vyzkoušet, pokud o to bude zájem.

       

Hodnocení: 100 %

        špatnédobré        

Obrázky

Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 1 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 2 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 3 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 4 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 5 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 6 Šesnáctijádro s HT a škálování při kompilaci a OpenSSL, obrázek 7

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

Komentáře

Vložit další komentář

18.2.2014 10:29 gsnak | skóre: 20 | blog: gsnak
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Daj si facku za neoznačené osi grafov
DOGE: DE7q1kxqvoFek7UGWBWBt47QWJTRBqVNLL
18.2.2014 10:54 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Řekl jsem si, že bude přínosnější to opravit než se fackovat ;-)
18.2.2014 10:50 Dr. Eddy | skóre: 9 | blog: glog | České Budějovice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Takze jdou na tom online hry ve Flashi plynule?
18.2.2014 12:59 kotrcka | skóre: 23 | blog: Onééé 2 | Praha
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
nie, má tam slabú grafiku + linux, takže podpora flashu je taká aká je :-)
You son of a bit.. coin
18.2.2014 11:45 goldenfish | skóre: 38 | blog: aqarium | Praha
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
zdravim,

moc diky za zapisek. Velmi zajimave.

Vlasnim sestijadro, naprosta spokojenost a clovek uvazuje o tom, co si koupit dale. Asi se to da navysit na 8 jader s vetsi frekvenci za rozumnou cenu. O cem ale uvazuju, ze si koupim pocitac jako vyrobni prostredek za odpovidajici cenu. Cilize 2x16 jader v Opteronu. Clovek zvazuje, zda tech padesat tisic casem vyda.

Hodne je pro me zajimave, jak se to projevi na kompilacich(C++/Java) a unit/integracnich testech (radkove 100-vky testu).

gf
18.2.2014 11:59 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Díky za potvrzení, že "moduly" u AMD Bulldozer/Piledriver se při reálné zátěži chovají úplně jinak než hyperthreading. Sice jsem to očekával, ale někteří hardcore fans se snažili naznačovat opak.
18.2.2014 12:47 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
To rozhodně, jádra v modulu sdílejí mnohem menší část než dva virtuální jádra v HT.

Na druhou stranu- to je jen akademická záležitost. Podstatný je výsledný výkon (případně výkon/W nebo výkon/$). Existují praktické aplikace, kde porazí 2Njádro od AMD intelácké Njádro s HT a jsou aplikace, kde tomu je naopak. Nechci vyvolávat flame tak se zdržím komentáře kterých je víc ;-)
18.2.2014 14:58 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Přidal jsem geekbench
18.2.2014 15:34 Bhua
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Ja jsem prave koupil server s 24 fyzickyma CPU a 32 GB RAM za 800 euro, jako pracovni masinu na vyvoj a testovani. Cekam ze si na tom uziju podobne :-)
18.2.2014 22:03 citanus | skóre: 11 | Cork (Ireland)
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL

co to je za stroj? kolik to zere : )

22.2.2014 21:48 ovoce
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Jestli to má jen 32 GB RAM, tak asi myslel dva procesory-dvanáctijádra. Dvacetičtyř*procesorový* stroj, jo, to už by byla haluz.
Jendа avatar 19.2.2014 02:27 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Pochopil bych takový server nebo výpočetní node, ale desktop?! To provozuješ Firefox?
Heron avatar 19.2.2014 09:53 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Kde vidíš desktop? Píše tam pracovní stanice.
Jendа avatar 19.2.2014 10:17 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Původně jsem chtěl napsat, že má slabou grafiku, takže třeba na stříhání videa to nepůjde, ale koukám, že jsem se nechal zmást komentářem výše (v číslování NV se nevyznám, na zobrazování používám Intel a na výpočty ATI).

Jak se liší workstation a desktop? Já říkám desktop všem počítačům, na kterých uživatel přímo lokálně pracuje.
19.2.2014 11:26 miho | skóre: 22 | blog: Mihovy_sochory | Orlová
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Wikipedia dnes nejede? ;-) http://cs.wikipedia.org/wiki/Pracovn%C3%AD_stanice

Moje osobní definice je: ECC (naprosto nutná podmínka) a buďto 2 procesory nebo profi grafická karta nebo XeonPhi nebo něco podobného.

Jinak ten počítač bude sloužit pro vývoj a simulaci nějakých clusterových aplikací. Grafická karta tam jě taková kvůli paření her.
Heron avatar 19.2.2014 11:33 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Asi nejkratší odpověď: Na pracovní stanici se pracuje, desktop je Gatesova vize z devadesátých let.
Já říkám desktop všem počítačům, na kterých uživatel přímo lokálně pracuje.

A co je potom terminál?

19.2.2014 14:05 Michal Kubeček | skóre: 71 | Luštěnice
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
If train station is a place where a train stops, what the hell is a workstation? :-)
Heron avatar 21.2.2014 09:40 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Z train station ty vlaky taky odjíždějí :-) Takže workstation je místo, kam práce přijede, chvíli tam stojí a občas odjede (ujede?). :-D Aneb práce, která se nevyřeší sama, nezasluhuje vaši pozornost.
22.2.2014 21:51 ovoce
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
If train station is a place where a train stops, what the hell is a workstation? :-)
Spíš desktop, kde je každá komponenta až řádově dražší, protože "profíci" za to zaplatěj. U některých to má logiku (serverový HW jiných výkonnostních kategorií než v desktopu), u jiných ne.
Jendа avatar 19.2.2014 21:01 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Na pracovní stanici se pracuje, desktop je Gatesova vize z devadesátých let
Hurá, mám workstation! :)
A co je potom terminál?
Hm. To je, když uživatelské aplikace běží jinde, a na terminál se posílá jenom vykreslená grafika.
20.2.2014 11:14 gsnak | skóre: 20 | blog: gsnak
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Čiže niečo ako cloud?
DOGE: DE7q1kxqvoFek7UGWBWBt47QWJTRBqVNLL
Jendа avatar 20.2.2014 21:33 Jendа | skóre: 75 | blog: Výlevníček | JO70FB
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Ne. Cloud je infrastruktura, která se platí podle zatížení a lze realtime škálovat.
Heron avatar 21.2.2014 09:38 Heron | skóre: 51 | blog: root_at_heron | Olomouc
Rozbalit Rozbalit vše Re: Šesnáctijádro s HT a škálování při kompilaci a OpenSSL
Hurá, mám workstation! :)

Vítej do klubu :-D

Založit nové vláknoNahoru

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.