Program time a cas user > real? (diskuse)

[_]

Běh na více jádrech třeba?

[JS1]

Nejsem expert na Linux, ale je mozne, ze za to muze multiprocessing nebo hyperthreading? User se meri jako skutecny spotrebovany CPU cas na vsech procesorech, zatimco celkovy cas se meri jako cas realny, po ktery proces bezel a vyuzival procesor (byl dispatchovan).

(Bohuzel knizku, v ktere by to mohlo byt, mam v praci a tam ted nemuzu.)

[|🇵🇸]

(Bohuzel knizku, v ktere by to mohlo byt, mam v praci a tam ted nemuzu.)

libgen?

[JS1]

Jo, vidis, to je napad.

Nekoukal jsem do ni, ale je to Systems Performance od Brendana Gregga.

[marbu]

Přesně tak:

$ time stress-ng --cpu 2
stress-ng: info:  [8790] defaulting to a 86400 second run per stressor
stress-ng: info:  [8790] dispatching hogs: 2 cpu
^Cstress-ng: info:  [8790] successful run completed in 4.92s

real	0m4.934s
user	0m9.807s
sys	0m0.012s

[JS1]

Vlastne jsem to napsal ne uplne presne (v manualu pro time je to trochu vysvetlene), real je wall-clock time, coz znamena, ze i jakekoli cekani procesu (kdy nevyuziva CPU) by do nej melo byt zahrnuto.

[Michal Kubeček]

Když místo "time" (což je builtin bashe) použijete "/usr/bin/time", tak tam místo "real" bude "elapsed", což je možná trochu názornější.

mike@unicorn:~> time sleep 3

real    0m3,002s
user    0m0,001s
sys     0m0,000s
mike@unicorn:~> /usr/bin/time sleep 3
0.00user 0.00system 0:03.00elapsed 0%CPU (0avgtext+0avgdata 2016maxresident)k
0inputs+0outputs (0major+98minor)pagefaults 0swaps

[z_sk]

Vedel by si to dat iba so zakadnymi nastrojmi v systeme?

[z_sk]

Vedel by si to dat iba so zakladnymi nastrojmi v systeme?

[Gilhad]

# cd /usr/src/linux;time make -j26
  DESCEND  objtool
  CALL    scripts/atomic/check-atomics.sh
  CALL    scripts/checksyscalls.sh
  CHK     include/generated/compile.h
  Building modules, stage 2.
  MODPOST 36 modules
Kernel: arch/x86/boot/bzImage is ready  (#9)

real	0m2.157s
user	0m11.164s
sys	0m5.057s

[Josef Kufner]

Základní nástroje snad všechny jsou jednovláknové a na každou blbost spouští nové procesy. V tom se bude něco takového hledat těžko.

[Michal Kubeček]

Především by se muselo definovat, co jsou to "základní nástroje". Můžu udělat třeba

  mike@unicorn:~> yes aes-128-cbc | head -24 | time xargs -P 24 -n 1 openssl speed
  ...
  431.96user 0.02system 0:18.02elapsed 2397%CPU (0avgtext+0avgdata 5420maxresident)k
  0inputs+0outputs (0major+7052minor)pagefaults 0swaps

ale je to dost "základní"?

[z_sk]

hm,

$ yes aes-128-cbc | head -24 | time xargs -P 24 -n 1 openssl speed
bash: time: príkaz nenájdený

Vsetko co pojde v normalne vychodiskovom nainstalovanom systeme alebo LIVE.

[JS1]

No kdyz tam nemas "time" tak ho asi nepustis. Leda ze bys to nejak nahradil tim "time" uvnitr bashe.

[z_sk]

$ type time
time je kľúčové slovo shellu
$ which time
$ 

[Michal Kubeček]

Já ho tu mám:

  mike@lion:~> type time
  time is a shell keyword
  mike@lion:~> which time
  /usr/bin/time
  mike@lion:~> rpm -qf `which time`
  time-1.9-lp152.3.5.x86_64

Abych pravdu řekl, příkaz time jsem vždycky bral jako jednu ze zcela základních utilit (podobně jako třeba true, false nebo test, které má bash také jako builtin) a nenapadlo mne, že by někde mohl nebýt.

[Michal Kubeček]

…takže mne trochu překvapilo, že je to samostatný balíček a ne třeba součást coreutils nebo něčeho takového.

[Josef Kufner]

xargs -P je hezký příklad.

Gratuluji, našel jsi výjimku, kterou jsem naznačil tím "snad".

[Michal Kubeček]

Takový make taky umí paralelizovat docela pěkně. :-)

[Jendа]

Nikdo ti nebrání pustit si v (sub)shellu třeba deset yes>/dev/null současně.

/usr/bin/time bash -c "yes > /dev/null& yes > /dev/null& yes > /dev/null"

[kvr]

xargs -P není vyjímka, pořád je "základní" a pořád jednovláknový.

Ano, všechny "základní" nástroje jsou sice jednovláknové, ale dokážou spouštět podprocesy paralelně (i když ty mohou být pořád jednovláknové. I základní shell shell umí pouštět podprocesy na pozadí a pak na ně počkat. A time reportuje čas včetně dětí. Možná i obyčejné true | true bude mít větší user time, záleží na overhead...

[Jendа]

A time reportuje čas včetně dětí.

Proč tedy ten můj příklad s openssl dole time nereportuje?

[Michal Kubeček]

Pravděpodobně kvůli tomuhle: (je to citát z times(2)):

Times for terminated children (and their descendants) are added in at the moment wait(2) or waitpid(2) returns their process ID. In particular, times of grandchildren that the children did not wait for are never seen.

Podle strace to vypadá, že rodičovský openssl proces wait() ani waitpid() na potomky nezavolá.

[Jendа]

Jinak openssl umí tohle samo

openssl speed -multi 4 aes-128-cbc

ale samozřejmě si za openssl může dosadit něco co považuje za „základní“

[z_sk]

Ani nie:

$ time  openssl speed -multi 4 aes-128-cbc
Forked child 0
Forked child 1
Forked child 2
Forked child 3
+DT:aes-128 cbc:3:16
+DT:aes-128 cbc:3:16
+DT:aes-128 cbc:3:16
+DT:aes-128 cbc:3:16
+R:4880758:aes-128 cbc:3.000000
+DT:aes-128 cbc:3:64
+R:4901158:aes-128 cbc:3.000000
+DT:aes-128 cbc:3:64
+R:4908932:aes-128 cbc:3.010000
+DT:aes-128 cbc:3:64
+R:5261213:aes-128 cbc:3.020000
+DT:aes-128 cbc:3:64
^C

real	0m3,953s
user	0m0,010s
sys	0m0,001s