Šestnáctijádro a škálování při kompilaci a OpenSSL (diskuse)

[User682]

zdravim,

diky za test. Zajimavy stroj.

Mam Ryzen 1800X a za rok uvazuju o necem lepsim rekneme ze do 100 tisic. Zatim nevim, zda to bude 16 jadro ThreadRipper nebo 14-18 jadro Intel i9. Oboji vypada zajimave. Vcelku je to hodne pokrok delat na vice nez 4 jadrech, nez jsem delal doposavad. Na nejake unit-testy a Jenkins CI se to bude hodit.

Do 100 litru bych se rad vesel i s 32 Eizo. Zvukovka(PCIE-neco profi okolo 10 tisic) asi do te castky nedam. Snad pujdou ceny o trochu dolu.

Pokud chcete neco testovat, tak zkuste cisty build LibreOffice a poslete cas. Nekde bude mozna docker image. Delam to za 26 minut. Pokud jsou vetsi aktualizace v git tak okolo 35-40 minut.

gf

[Blaazen]

Zvukovka je lepší externí, kvůli rušení.

[alkoholik]

On snad nejaky audiofil taha z kompu analog? Dnes je zajimave jenom jestli zvukovka ma Dolby Digital Live! nebo DTS Connect.

[Blaazen]

Měl jsem na mysli nějaký externí DAC se sluchátkovým zesilovačem, třeba toto.

[janc1c1]

minule som na toto fulla-2 cital dobru recenziu

[User682]

Mam E-MU 1616m a rad bych koupil neco podobneho. Minimalne, co se tyce propojeni boxu s kartou.

gf

[cthulhu]

BTW bavil jsem se s člověkem z velkého zahraničního datacentra a ten mi tvrdil, že případů, kdy modul, který není vadný (projde memtestem) a zároveň je detekována opravitelná chyba je extrémně málo.

a co z této informace vyvozujete? Pokud mohu hovořit z vlastní zkušenosti v serverech (SDRAM - DDR4), čím novější ("méně nm" a větší kapacita per modul) tím horší. Extrém 16GB DDR3 moduly, odcházelo to šíleným tempem (tj. servisní modul označil DIMM jako vadný po X soft/hard chybách). V této cenové hladině se neočekává, že budete co týden testovat moduly Memtestem (a generovat nežádoucí výpadky), proto bych v pracovní stanici / serveru za 100k na ECC trval.

[pc2005]

Jinými slovy při zátěži pod nebo na počtu fyzických jader HT zpomaluje. Scheduler Linuxu zřejmě není pro tuhle zátěž optimální.

To snad ani nejde. Jedině že by ten plánovač vypínal HT per CPU, ale to nevím zda to vůbec jede. To čekání je způsobeno na úrovni instrukcí (třeba obě vlákna potřebujou násobičku) a tam kernel neplánuje.

[mimi.vx]

jj, nejak tak .. HT jen znamena ze casti fyzickeho jadra muzou byt vyuzity zaroven., Ale pokud oba dva procesy/thready potrebuji stejne prostredky , jeden musi cekat :) a U testu jako kompilace jadra se to da ocekavat celkem casto:)

 

Plus jedna mala.. cim vice jader, tim mensi mnozstvi RAM a propustnost pameti na jadro. a U 16 jader to jde uz dost znat

[miho]

Jenze tady jde o pripad kdy je pocet threadu zateze stejny nebo mensi nez pocet fyzickych jader takze teoreticky by na "ht jadra" nemuselo byt nic schedulovano.

[pc2005]

A jsou to thready nebo procesy? V případě threadů by mohlo být pro plánovač efektivní ty vlákna sdružovat na jedno jádro a sdílet řádky cache.

BTW u procesů i vláken můžeš sledovat obsazení logického CPU v /proc/PID/task/SPID/stat ... ale který číslo to je ti teďka z hlavy neřeknu . Tipoval bych na nějaký v druhý polovině . Nejspíš na to bude nějakej perf nástroj.

Přes cgroups/cpuset můžeš každýmu procesu přikázat logický procesor, na kterém má běžet.

Linuxovej plánovač hlavně řeší efektivitu na jednom logickém procesoru. Přesun na jinej řeší balancer a přesun je dost nákladná operace. Tady je pojednání, že má linuxovej plánovač dost nevyužitý potenciál.

Jinak další logické procesory budou zpracovávat jiné úlohy OS a třeba věci jako přerušení (/proc/interrupts).

[miho]

Jsou to jednothreadove procesy (gcc je jednothreadova zalezitost, make jich akorat spusti vice soucasne podle parametru -j).

Dalsi ulohy OS by mely byt vzhledem k podminkam (shozena Xka, shozeny cron) naprosto zanedbatelne a nemely by ovlivnit test (coz ukazuje i cinebench a openssl) o vice nez procento a uz vubec ne o 15 %. Na 16 jadru je vytizeni 15 % opravdu solidni zatez - to nedokaze ani naprosta vetsina novych her takhle tomu procesoru "zatopit"

[pc2005]

Jo tak samotné procesy jsou na per cpu navázat naprosto lehko. Takže pokud skáče proces sem a tam po HT, tak by to pak blokovalo cache apod. Ale nezdá se mi teda že by byl linux scheduler tak blbej že by ani nepochopil rozdíl mezi per cpu ale na stejným HT jádru vs mezi jádry. Máš v kernelu zapnutou volbu "CONFIG_SCHED_SMT - SMT (Hyperthreading) scheduler support" ?

[Cabrón]

64GB 2666GHz RAM

Zpomal paměť a já změnším rybu

[Bedňa]

Intel je 32bit šmeďárna, ktorá zlepila 64bit a multi processing. AMD to zvláda ďaleko lepšie už celé roky, na Intel nasrať.

[pc2005]

Nn to by chtělo IBM POWER9 na talosu (1 jádro = 4 HT vlákna)

[mimi.vx]

j, power, na papire krasne procaky .. jinak uplne na dve veci

[pc2005]

Tak kdyby byly levný, tak pohoda (levnejch tretek tu mám ), ale ta cena u talosu (!).

[Bedňa]

Hoci som ten komentár písal s promile, tak si za tým stojím a nejaké papierové čísla ma nepresvedčia A čo ten spyware ktorý dávajú do procesorov, ja by som im nedal ani kačku, teda ani nedám. Nehovorím, že v AMD také veci nemôžu byť, len sa zatiaľ, pokiaľ viem, nič nenašlo.

AMD mi sympatickejšie stále viac aj vďaka prepisovaniu ovládačov na grafiky do open source, to je proste investícia do budúcnosti. Ja viem aj Intel to robí, ale proste mi to príde taká napol odfláknutá práca.

[pc2005]

Však jo u mě to byl [joke] .. i když teda x86-64 maj od AMD

[trekker.dk]

Navíc materiál mezi čipem a rozváděčem tepla je volen s ohledem na trvanlivost a nikoliv na tepelné vlastnosti.

Materiál je volen s ohledem na výrobní cenu.

A že by letování vydrželo kratší dobu než pasta šedivka, to se mi taky nezdá.

[Berber]

Přesně tak. Jo kdyby Intel dával na CPU záruku 10+ let tak možná.

Tvrdit, že ECC je k ničemu a pasta je lepší jen kvůli tomu, že výrobce chce ovci oholit na kost, to už je na diagnózu.

[miho]

Nic takoveho, ze ECC je k nicemu jsem nepsal. To jste si tam dovafubloval sam.

[Berber]

No jo pravda. Pak jste si mohl odpustit to uplivnutí směrem k AMD místo logického směru na Intel. Ale chápu, že se tím snažíte ospravedlnit nákup záměrně zkripleného CPU za 44 000 Kč.

[miho]

Tezko rict proc nepouzivaji letovani, mozna tam je nejaky technologicky duvod. TIM z duvodu ceny volen neni. Usetrenych 20Kc za superkvalitni (z hlediska prenosu tepla) TIM pri prodejni cene 44 000Kc by za to Intelu stalo jen sotva, tohle si muze myslet s prominutim jen milovnik konspiracni teorii

[pc2005]

Tak snažili se šetřit na pinech na CPU. Zmenšili tloušťku toho PCB na CPU. Člověk by se nedivil kdyby chtěli uspořit těch 20MKč na milionu vyrobených procesorů.

[miho]

A co se tak nad tim alespon na vterinu zamyslet nez zacnete takove veci pronaset? Intel mel v 2016 cisty zisk po zdaneni 10,31 miliardy USD. Vami zminena castka je 0,01 % z teto castky. Naprosto mimo rozslisovaci schopnost teto firmy.

[trekker.dk]

Jenže "firma" ty procesory nevyrábí a neprodává - to dělá nějaká její část, kterou samozřejmě někdo sleduje odděleně (stejně jako ostatní části) a u které už to procento bude přece jenom o něco zajímavější. Stejně jako absolutní částka.

[miho]

I kdyby procesorova divize generovala jen 10 % zisku, tak to porad bude jen 1 promile. To se naprosto a zcela ztrati v zaokrouhleni i v te "oddelne sledovane castce".

Tahle teorie je jeste tak asi 100x mene pravdepodobna nez jina, ale take srandovni (pac by se to dalo zaridit jinak snadneji a nenapadneji), ze to je kvuli tomu, aby ty procesory neslo prilis dobre taktovat.

[trekker.dk]

Ano, nějaká náhodně zvolená částka skutečně bude jen 1 promile. Kolik stojí přiletování vs. zaplácnutí levnou pastou ale ve skutečnosti nevíme, že ne...

[Agent]

Mě by vážně zajímalo, jestli jsi opravdu tak mimo nebo to jen hraješ. Za jedno, ona i ta divize se dále dělí na různé úseky a provozy které mají své rozpočty.

Za druhý, těch zlepšováků i "zlepšováků" můžou být desítky, stovky v rámci celé firmy. A počítá se každé ušetření a ve výsledku korunka ke korunce a na konci už to může hodit ne uplně bezvýznamnou částku.

A za další, roli hrajou i odměny jednotlivým ať už manažerům nebo jakýmkoliv lidem, kteří ten zlepšovák případně "zlepšovák" prosadili. Chodívá to třeba tak, že ten manažer dostane nějaké procento z těch ušetřených peněz. Takže kdyby dostal dejme tomu 1%, tak z ušetřených 20M bude mít na výplatnici o 200K více, což jako odměna pro jednoho člověka asi není zrovna zanedbatelná částka.

BTW by mě zajímalo, jestlis vůbec někdy byl zaměstnán v nějaké firmě. Tebe bych jako manažera nebo vedoucího zrovna nechtěl vidět. Jakýkoliv zlepšovák bys shodil ze stolu jen proto, že je to dle tebe bezvýznamná částka. Ale že třeba za 10 let to mohou být desítky až stovky zlepšováků, které dohromady ušetří už solidní částku, tě absolutně netankuje.

[miho]

Jasne, maji tam oddeleni, ktera si hrajou na vlastnim pisecku a delaji rozhodnuti jak se jim zlibi a neni tam nikdo, kdo by se podival na vec s nadhledem. Ty mas teda predstavy... kdyby takhle fungoval korporat, tak by zadny podnik s vice jak stovkou zamestnancu neexistoval. Ja bych zase nechtel managera, ktery by za naprosto marginalni usetreny peniz ohrozil dobre jmeno firmy. Ale asi mame kazdy jine priority

Jeden druheho nepresvedcime takze nema cenu v tomhle dale pokracovat, uz se na toto tema nebudu vyjadrovat.

[Agent]

To je škoda. Já bych třeba rád, kdybys mi vysvětlil, jak je možný, že kvalita všeho jde postupně do hajzlu? Asi proto, že se všichni chovaj hrozně zodpovědně, že. Je vidět, že si vážně v korpu nedělal.

Jinak já byc htakovýho manažera taky nechtěl, ale jestli si myslíš, že zvrchu všechno uhlídáš, tak jseš na omylu. A pokud mu příde nějaká kontrola, tak záleží na tom podřízeném, jak si to obhájí.

Ty mas teda predstavy... Spíš ty a hodně naivní, ale já vycházím z toho co vidím. Abych uvedl konkrétní příklad co se stal u nás. Jeden technolog přes nástroje se rozhodl, aby se ušetřilo na nástrojích, tak že se budou třídit použité plátky a ty které vypadají ještě jakž takž, tak se budou dávat zpátky do nástrojů, takže ti přišel nástroj, kde půlka plátků byla starých jetých a půlka nových. Samozřejmě, že takový nástroj nevydržel celou plánovanou životnost, ale to bylo buřt, hlavně, že se "ušetřilo".

I jsme si na to stěžovali, ale nepomohlo to. on si to před vedením obhájil a ještě se smál... Protože ve vední nejsou technici, kteří by rozumněli technický stránce a dá se im lecos nakukat.

A takových WTF případů tam bylo mraky.

kdyby takhle fungoval korporat, tak by zadny podnik s vice jak stovkou zamestnancu neexistoval - To by ses divil

[Agent]

uz se na toto tema nebudu vyjadrovat. - Došly argumenty?

[Matlák]

Mno, já si myslím že korporátů které jsou řízené chaoticky je hodně a čím větší korporát tím horší. Managera co by za marginální ušetřený peníz si vedení pochvaluje, protože se usmívá a ukazuje barevné grafy ze kterých je hned vidět jak to pěkně roste.

Nějaké hluboké znalosti jsou u managerů přítěží. Manager se zkušenostmi z praxe taky může ve firmě skončit, protože lidem pod sebou rozumí ale lidem nad sebou ne. Lidi s opačnými vlastnostmi jsou cenění ačkoliv celou firmu vedou do pozlaceného hajzlu.

[pc2005]

Tak pokud mě ojebali jednou (zrušení PLL násobiče nastavitelné z OS někde okolo PIII, u athlonu to šlo těma můstkama a prej po nastavení jinýho můstku se athlon hodil do mobilního módu, kterej to dal i softwarově - ale to bych musel zkusit). Čtyřikrát změnili socket u mobilního c2d jen kvůli umělé nekompatibilitě (2x u P2-P3). ... tak mám statisticky důvod věřit, že mě ojebali i teď.

Každopádně klidně se přihlásím o těch 20MKč, pokud je teda nepotřebujou :-P.

[trekker.dk]

Usetrenych 20Kc za superkvalitni (z hlediska prenosu tepla)

Jenže ta pasta není superkvalitní, právě naopak - i kdybych odhlédl od porovnání s letováním, tak lidi, co tu Intel pastu dali pryč a koupili si svojí, snížili teplotu těch procesorů o několik stupňů.

[Berber]

Jo kdyby jen o několik stupňů. Ono je to klidně i o 30 stupňů.

[Ovocníček]

Navíc materiál mezi čipem a rozváděčem tepla je volen s ohledem na trvanlivost a nikoliv na tepelné vlastnosti.

Přesně, IMHO je tohle blbost, respektive PR kec, kterým se to snaží nějak omluvit. Spíš si myslím, že neví o čem mluví ti lidi, kteří opakují ty kecy o tom, že pasta je spolehlivější a že letování nefunguje nebo přestalo fungovat z toho nebo onoho důvodu. Tohle nikdy nikdo předtím netvrdil, dokud nevyvstala potřeba dělat damage control. A "doložené" je to jedním pofidérním blogem, kde tu údajnou špatnou životnost pájení otestoval AMATÉR tak, že nějaké CPU připájel vlastnoručně(!) a pak se divil, že mu to popraskalo. Když to chladil kapalným dusíkem. To jako fakt?

Pájelo se patnáct let, problémy nebyly. Tyhle velké a žravé Xeony byly připájené stejně tak dlouhé a dlouhé roky, a kde jsou ty reporty o tom, že odcházejí? Jak může někdo tvrdit, že pasta, která se na ně začala používat tenhle rok, je spolehlivější? :D

[Ovocníček]

Nebo možná takhle, aby nevznikl flejm. Je téměř jisté, že četnost problémů s případným porušením té pájky je minimální a tedy i ten efekt na poruchovost je zanedbatelný. IMHO to určitě nebude tak významné, aby to vyvážilo provozní nevýhody pájky (snazší a levnější výroba pro Intel nás nezajímá, to ignorujme).

Na druhou stranu pasta má vliv na provozní vlastnosti v každém procesoru, protože při té 200W spotřebě Skylake-X/Skylake-W vyšší teplota měřitelně zvyšuje spotřebu, což negativně ovlivňuje všechny provozovatele serverů v datacentrech.

[archen]

nice, ja si postavil ted podobnou sestavu za 40000. nejdrazsi byla 2*32gb ecc, skoro pulka. jinak 1tb evo, asrock x99ac miniitx, je to mobilni server,mini case do batohu.

procesor Intel Xeon Processor QH26 E5-2697 V4 ES 2.2GHz CPU 18-Core LGA 2011-3 za 13000 korun, ma nizsi takty, max 3ghz a musel jsem disablovat jedno jadro kvule nefunkcnimu cpu broadcastu, takze mam ve vyaledku 34 threadu. zkusim to napravit nahranim intel mikrokodu, ale bezi stabilne.

[User682]

zdravim,

tak jsem neodolal v listopadu a pod stolem mam:

AMD Threadripper 1950X - 16-jadro

64GB RAM.

MB: ASRock Taichi X399.

Zvukovku jsem koupil Optoma Nuforce uDAC 5 (USB). Na doma mam FIIO E10K zvukovku do USB.

Po 13 letech jsem si koupil i novou skrin...(ostuda)

Vykon masiny je super. Dost casto az naddimenzovane. Hodne veci je neuveritelne plynulych. Zejmena vyvojova prostredi.

Kompilace kernelu asi 37s. LibreOffice kompilace 8-16 minut-zalezi podle zmen.

gf

[lizbee]

thanks for sharing this! great help! sioux falls laser hair removal