Datová průchodnost unixových příkazů 1 (diskuse)

[Michal Kubeček]

… bufíku … swapíku … abysme … dévédé …

WtF?

i myš se přestala hýbat!

kontrolka harddisku vrhá stíny na 4 metry - až do kuchyně

Ještě bych pochopil, že autor chce projev zpestřit, ale opravdu je nutné podobné poznámky psát do tabulek s hodnotami?

Data kernel mezi tím cachuje v nepoužité polovodičové pamětí - říká se tomu tuším buffery.

Ne, říká se tomu page cache.

Čili aby se zápisová a čtecí pomalost před člověkem rozvinula ve své plné kráse, je třeba zkusit větší blok a nebo data, na která jsme předtím nepřistupovali.

Nebo, lépe, zajistit, že se bude opravdu číst (flushnutím cache) a zapisovat (synchronním zápisem).

Může se tak snadno stát, že při zpracování velkých logů nás tato zařízení budou brzdit víc, než samotné zpracující nástroje

Jen za předpokladu, že se data, která budou příkazy zpracovávat, budou číst z disku nebo na něj zapisovat, což se, doufám, dít nebude.

Ale už v tomto dílu mám určité pochybnosti o metodice některých testů. Sice jsme se dozvěděli, že kontrolka svítí až do kuchyně, ale nevíme, jestli se např. poslední test prováděl v runlevel 1 (a bezprostředně po sync), aby se zajistilo, že ve skutečnosti neměříme flushnutí úplně nesouvisejících dat. Nebo že test CD/DVD se prováděl dvakrát za sebou, aby se potlačil vliv toho, že se mechanika nejdřív musí roztočit.

a hard disky: můj notebookový SATA 5400 rpm a desktopový SATA 7200 rpm

Neznamená to, doufám, že se každý měřil na jiném systému?

[pavele]

Pokud se ti to nelíbí, napiš svůj článek, porovnáme. Kritizovat umí každý.

Díky za článek.

[Michal Kubeček]

Kritizovat umí každý.

To je hluboký omyl.

[nobody]

ovsem pravda je taka, ze ten kdo kritizuje, si vetsinou mysli ze to umi a take si mysli ze je nedocenen a ostatni nechapou jak je v te kritice genialni ;) tedy nic to ovsem nerika o (ne)kvalite te tve... neboli nekdo umi kritizovat, nekdo umi WtFuckovat a reagovat pohorsene na hovore vyrazy acronymem je trochu alibisticke ne ? ;)

[TM]

No ale ten článek je opravdu divný...

[Michal Kubeček]

nekdo umi kritizovat, nekdo umi WtFuckovat

Je trochu škoda, že jste se v mém komentáři dostal jen k první připomínce.

a reagovat pohorsene na hovore vyrazy acronymem je trochu alibisticke ne?

Alibistické? Jestli myslíte pokrytecké, tak možná trochu, ale myslím, že je celkem normální, že očekávaná úroveň projevu je trochu jiná v článku na odborném webu a trochu jiná v diskusi. Nemluvě o tom, že kdyby byl článek napsán odpovídajícím stylem, nemyslím, že bych v komentáři použil "WtF".

[2X4B-523P]

jaky je rozdil mezi komunitnim a odbornym webem?

[Wartburg]

Klid, Kubeček je prostě hysterický pozér, který trochu (ale ne moc) rozumí linuxu, a točí se kolem toho celý jeho život.

[podchaljuzin]

Napsal clovek, ktery svou neschopnost dokoncit jakoukoliv vysokou skolu vyresil tim, ze se prihlasil na chov krav na hnojarne s 90% propustnosti, kterou da kazdy blbec co si mezi tim nenajde nejaky jiny obor, ktery ma opravdu smysl za ten investovany cas.

[kyknos]

Jestli mluvis o mne, tak ja Wartburg nejsem (i kdyz to tedy bylo me prvni auto) :)

ze se prihlasil na chov krav na hnojarne

ne neprihlasil jsem se na chov krav, neschopnost rozpoznat rybu od colka a kravy je i na pomery jednostranne zamerenych fachidiotu docela pruser :)

s 90% propustnosti

tak to asi mluvis o nejake hnojarne v albanii nebo kde - v suchdole je propustnost od imatrikulace ke statnicim na bc studiu asi 10% v regulernim case a dalsich cca 10% jsou uspesni opakovaci rocniku, rozkladaci apod :) - coz je mimochodem vyrazne mene, nez v podobnem oboru na UK

kterou da kazdy blbec

skoda, ze si se blbce nepodepsal, mohl sis zkusit treba nejakou tu genetiku, obavam se, ze bys neuspel :)

jiny obor, ktery ma opravdu smysl za ten investovany cas

to je ktery? podle tveho projeveneho IQ mas na mysli zrejme ekonomii :D

[podchaljuzin]

ze se prihlasil na chov krav na hnojarne

ne neprihlasil jsem se na chov krav, neschopnost rozpoznat rybu od colka a kravy je i na pomery jednostranne zamerenych fachidiotu docela pruser :)

A kvuli tomu jsi studoval vysokou skolu? Tak to jsi frajer.

s 90% propustnosti

tak to asi mluvis o nejake hnojarne v albanii nebo kde - v suchdole je propustnost od imatrikulace ke statnicim na bc studiu asi 10% v regulernim case a dalsich cca 10% jsou uspesni opakovaci rocniku, rozkladaci apod :) - coz je mimochodem vyrazne mene, nez v podobnem oboru na UK

No jasne. Protoze se na to pak vsichni vyserou a jdou studovat neco, co jim opravdu k necemu bude.

Blekotal jsi neco, ze jsi psal dokumentaci. Nejsem si jisty co jsi dokumentoval (a jak tak ctu ty tve vylevy, tak ani ty ne), ale rozmnozovani rybicek v akvarku to asi nebylo. Ale jestli jsi chtel mit na stara kolena taky konecne nejaky titul a bylo ti jedno z ceho, tak chapu, ze jsi delal tohle, kdyz v Plzni uz fofrstudium zatrhli.

kterou da kazdy blbec

skoda, ze si se blbce nepodepsal, mohl sis zkusit treba nejakou tu genetiku, obavam se, ze bys neuspel :)

Hlavne ze ty ses podepsal pod vsemi svymi vyroky. Plna huba kecu a nic. Ale nevadi, my uz si tu na to, ze jsi jenom velkohuby jouda, zvykli.

Jestli jsi to dal ty, tak uz to da kde kdo. A dvakrat.

jiny obor, ktery ma opravdu smysl za ten investovany cas

to je ktery? podle tveho projeveneho IQ mas na mysli zrejme ekonomii :D

Tu jsem zrovna nemyslel, ale proti te tvoji saskarne je to furt luxus. Budes studovat jeste neco? Treba Francouzskou literaturu 18. stoleti nebo Gender Studies? To bude asi stejny level. Klesat uz nemas kam.

[kyknos]

Ano já se pod své výroky podepisují a jestli mas ty pocit, že bys vystudoval biologii, já ten pocit nemám, protože to skutečně není obor pro idioty. Přírodní vědy jsou asi jediný obor, který se nedá okecat :)

A jestli mas nějaký problém s tím, že jsi studoval školu k ničemu, je mi té líto, ale já si vybral obor, který mě zajímá a který potřebují :)

[podchaljuzin]

Ano já se pod své výroky podepisují

No jasne. A je to tvoje krestni jmeno nebo prijmeni? Ja jenom, ze tvuj podpis ma stejnou vahu jako muj.

a jestli mas ty pocit, že bys vystudoval biologii, já ten pocit nemám, protože to skutečně není obor pro idioty.

Jsi zivoucim dukazem toho, ze je. Bohuzel.

Přírodní vědy jsou asi jediný obor, který se nedá okecat :)

Nevim, jak jsou na tom jine obory, ja je nestudoval, ale uplne jisty bych si tvym tvrzenim nebyl.

A jestli mas nějaký problém s tím, že jsi studoval školu k ničemu, je mi té líto

Nemusi, nemam. Ne kazdy je zoufalec aby studoval nejakou ptakovinu a jeste si musel namlouvat jak super tezkou skolu a uzitecny obor vystudoval a jeste to vytruboval do sveta.

ale já si vybral obor, který mě zajímá a který potřebují :)

No, ted uz asi bude muset. Jenom by me zajimalo, ktery zamestnavatel prahne po tom, mit v tymu nekoho jako ty.

[nobody]

stejna vaha? nejak nevidim nikde tvoji fotku, rok narozeni, nemas na abc zadnou histori, zadne blogy... ale je pravda ze chovani jako arogantni hovado mas, nicmene to ma na vaze hodnotu mouchy na slonim trusu ;)

[kyknos]

Teď si zase chudák bude myslet, že jsem mu to napsal já :)

[nobody]

takovej chudak snad neni, aby nepoznal ze se jedna o 2 rozdilne osoby rozborem textu, kterej mu vypadne pri zadani do google "nobody site:abclinuxu.cz" nebo i bez toho kdyz pise tak jako by tu byl jako doma uz nejaky cas i presto ze vyskyt jeho nick tu je mene nez napocita na prstech prumernej drevorubec :)

[kyknos]

Nemusi, nemam. Ne kazdy je zoufalec aby studoval nejakou ptakovinu a jeste si musel namlouvat jak super tezkou skolu a uzitecny obor vystudoval a jeste to vytruboval do sveta.

ptakovinu si zjevne vystudoval ty, pokud z ni mas takovy komplex

navazet se do prirodnich ved, potazmo biologie, ktera te drzi pri zivote (ano, pravdepodobne chodis k lekari, beres leky, nebo je brat budes, a zcela jiste jis) muze jen naprosty frustrat :) ja bych si nedovolil shazovat ani francouzskou literaturu, prestoze se mi ten jazyk vubec nelibi - ale pokud to nekdo studuje, zrejme ho to zajima a lepsi duvod ke studiu neexistuje :)

[podchaljuzin]

ptakovinu si zjevne vystudoval ty, pokud z ni mas takovy komplex

Jenom toliko k tvemu IQ.

navazet se do prirodnich ved, potazmo biologie, ktera te drzi pri zivote (ano, pravdepodobne chodis k lekari, beres leky, nebo je brat budes, a zcela jiste jis) muze jen naprosty frustrat :)

Tak to jsem v pohode. Protoze ja se do ni nenavazel. Ale to jsi samozrejme nepochopil. Zadne prekvapeni.

[kyknos]

pak jsou tve vyjadrovaci schopnosti opravdu zalostne :)

[podchaljuzin]

To ani ne.

Spis ty kdybys byl jeste hloupejsi, tak te budou muset 2x tydne zalevat.

[nobody]

jestli tohle neni navazeni, tak nejsi ubozak ;)

- kdyz chce nekdo titul jedno z ceho 
- obor co nema smysl
- da to kazdy blbec
- k nicemu to neni
- je to saskarna
- uzitecny obor(z kontextu ironicky)

btw: kteremu oboru se venujes ty ?

[podchaljuzin]

Nazor nejakeho prizdisrace na moji osobu me vazne nevzrusuje. Stejne jako jeho chyby v logice srovnatelne snad jenom s faily, ktere tu predvadi kyknos. Ale jinak dobre, panove, vy me bavite. Se zeleninou se nehadam moc casto.

[Jakub Galgonek]

Ale na otázku, jakému oboru se věnuješ, jsi odpovědět mohl.

[kyknos]

evidentne se jedna o neuspesneho pestitele zeleniny, nedaval holt pozor na hodinach prirodopisu

[nobody]

Tak tebe nezajima nazor nikoho, ty se povazujes za nadrazenou bytost, pritom jsi jen arogantni zamindrakovanec ;)

[Petr Tomášek]

Pravda. Treba ty to neumis.

[Michal Kubeček]

Nebylo by v tom případě lepší místo takového obecného plácnutí rozporovat ty konkrétní věcné připomínky, se kterými nesouhlasíte?

[pavlix]

Nebylo by v tom případě lepší místo takového obecného plácnutí rozporovat ty konkrétní věcné připomínky, se kterými nesouhlasíte?

Jediný důvod, proč by to nemělo jít vztáhnout na následující?

To je hluboký omyl.

[Michal Kubeček]

Třeba ten, že jsem tou větou rozporoval zcela konkrétní tvrzení, které považuji za nepravdivé?

Víš, co je opravdu smutné? Že k tomuto článku bylo do této chvíle napsáno 22 komentářů a z nich se jeden vyjadřuje ke konkrétním technickým záležitostem z jeho obsahu (a abychom nebyli úplně nespravedliví, jeden děkuje za zmínku o utilitě pv). To není moc pěkné skóre.

[pavlix]

Oba jsme součástí toho skóre.

[Michal Kubeček]

Jistě. Ale tak nějak nemám pocit, že by beze mne bylo lepší. Můžeš říct totéž?

[pavlix]

Mně tvoje příspěvky nijak nevadí, ale jejich vnitřní rozpor mi přijde natolik zajímavý, že mi stojí za komentář. Ani jsem to nebyl já, kdo si stěžuje na kvalitu diskuze, takže nevidím jediný důvod se vyjadřovat k tvým náznakům. Pokud mi chceš sdělit něco osobního, neváhej a napiš to přímočaře.

[.,..]

Kritika je oprávněná, tu poznámku o stínech jsem taky nepochopil (mimo článek prosím), zřejmě autor četl před rychlé šípy. Nicméně pro mě zajímavé psaní.

[some fun for this friday]

Jakoze to blikalo jak krava, ze by to poznal i hluchej ajtak podle zmeny frekvence zvuku vo vydava dyfmbachie nachodbe prechazejici skokove z fotosyntezy na nocni flakani se. Takove to uff aah co delaji kvitka po setmeni.

[Tany]

Kritika je oprávněná, ale to nemění nic na tom, že ten článek je pěkný.

[Jindřich Makovička]

S tím v zásadě souhlasím, jediné, co mu chybí, je tag "humor".

[Fluttershy, yay!]

Už nechybí. ^_^

[Michal Kubeček]

To je dost kruté… Jakkoli mám dost zásadní výhrady k věcné stránce, autor IMHO potřebuje spíš vysvětlit, co dělá špatně, aby pochopil, že udělat užitečný benchmark není žádná legrace.

[Fluttershy, yay!]

Štítky AFAIK může editovat kdokoliv a mám pocit, že je stejně skoro nikdo nepoužívá. Pokud používá, neočekával jsem, že se tam ten štítek ohřeje dlouho. (Mimochodem, taky mi jeden nějaký vtipálek přiřadil.)

autor IMHO potřebuje spíš vysvětlit, co dělá špatně, aby pochopil

Není autorem náhodou jistý Clock? No to jsem tedy zvědav…

[.,..]

takže msta někomu za někoho

[Fluttershy, yay!]

wat.

[Jashin]

Technik se vyjadřuje přesně a s minimální redundací.

[ty debile]

flusnutí cache,no super

[Integral]

+1

Náš administrátor shledal tento komentář závadným.

vulgární

Zobrazit komentář

[archen]

Good job, + o pipe viewer jsem nevedel, dik za tip. Taky si zkusim test s ruznymi velikostmi bloku.

[trubicoid]

krome pv je jeste pipebench, kdyz jsem to kdysi zkousel, tak se mi pipebench libil vic, uz si nevzpomenu proc :)

pro nechapave: asize stiny/svetlo mu vrha silna dioda HDD, az na 4 metry, ale to zrejme nema na vykon rostlinare zadny vliv :)

[qk_]

Obecne clanky, ktere delaji benchmarky mam celkem rad, protoze to pomaha bojovat s ruznymi myty a take ukazuji ruznou efektivitu. K tomuto clanku bych mel par tipu, jak priste sklidit lepsi ohlas:

- pojmout clanek seriozneji, takhle ma spise uroven blogu

- pri zmince o matfyzu by se hodilo i presne popsat metodiku testovani ( tedy pocet opakovani, vypocet odchylek, postup jak zamezit interakcim s okolim atd. ), coz jeste, kdyz sem tam studoval, se ucilo

- veci jako "asi rika", "nejspis" atd. nepatri do clanku, kdyz uz venujete cas napsani clanku, tak overit informace je mensi cast casu

- nechat si ten clanek precist nekym dalsim velmi pomaha

- v clanku mi chybi zmereni zpomaleni zpusobene samotnym pv a tim jak to ovlivnuje zbyle testy, coz samo o sobe zanasi pomerne velkou chybu

- pri testovani ruznych medii by bylo zajimavy vyzkouset i SSD disk

[GeorgeWH]

ale ved to v podstate zhrnul MK v prvom komente. clanok nema ziadnu vypovednu hodnotu. po jeho precitani mam pocit, ze to pisal niekto, kto sa tomu vobec nerozumie. zmiesane pocity. niektory text je nepochopitelny. miestami mam pocit, ze autor sa uskrna. v perexe pise o spracovani textovych dat, ale test bol o uplne niecom inom.

imho

verzi Ubuntu jsem zjistl tak, že jsem do google zadal how to figure out ubuntu version a pak jsem klikal na věci, které vypadaly jako ty v tom návodu

hovori za vsetko. po prve, taketo info je uplne irelevantne voci danej teme, po druhe, vypoveda to o urcitej vedomostnej urovni autora...

[alenotak]

Souhlasim. Mluvi to za vse. Vono zjistit klikanim podle obrazku konfiguraci Ubuntu na stroji

"Měření jsem prováděl na netbooku s Intel Atomem, 2x1.6 GHz, 1 GB DDR2 RAM, 512 KiB L2, harddiskem 5400 rpm a podomácku kompilovaným Linuxem LFS/BLFS s CFLAGS -march=atom -O2."

mi prijde jako dobrej vykon.

[some fun for this friday]

Dobry clanek , dik za to!

Na ajtackouakademickofundamentalistickou kritiku kaslete, tihleto lidi vidi jen sve ja pak jeste sve ja dlouho nic a pak duvody proc je jejich ja jedno z nejlepsich nasvete.

Pak se divej ze jsou mezi zbytkem lidi za trouby a jsou schopni sbalit akorat tak nejakou barbinu.

[GeorgeWH]

by som povedal, ze je to presne naopak. a aj mozno prave preto nepise kazdy taketo clanky :)

[JZD]

Zajímavé počteníčko. Největší prča jsou některé komenty diskutujících.

[natiku]

Realny vykon pv zalezi na velikosti bufferu

Kdysi jsem si s tim docela hral:

Mapping possible Space and Time savings by using SMP aware (threaded) compression Utilities ?

[kyknos]

+1

[hdm]

"Zdá se mi, že tu platí 2 fyzikální zákony...:"

pod pojmem fyzikalni zakon si opravdu predstavuji neco vyrazne fundamentalnejsiho nez ledabyle odpozorovana "pravidla" jak kdysi kdosi cosi naprogramoval...

a vtipne mi to take neprijde. Asi se nekdo s nizkym sebevedomim snazi dodat svemu chabemu snazeni vyssi vaznost parazitovanim na vedeckych terminech.

Tak jeste trochu pridat, a bude to tu skoro jak pri mavani ruznymi "energiemi" a "magnetismy" na esoterickych webech.

[anonym]

Jen pro porovnani sem zkusil ten dd test na trochu modernejsim HW (xeon 1650v3, 128G DDR4)

bs=1 6.1MB/s
bs=10 61MB/s
bs=100 594MB/s
bs=1k 4.9GB/s
bs=10k 18.7GB/s
bs=100k 24.2GB/s
bs=1M 20.9GB/s
bs=10M 21.1GB/s
bs=100M 10.4GB/s
bs=1G 10.4GB/s
bs=10G 10.5GB/s
bs=100G 10.5GB/s

bohuzel podle pohledu na htop se dd zastavi na 2GB bufferu, coz vysvetluje proc rychlost neklesa. pokud mu ale reknu bs= vic nez je celkem RAM tak primo odmitne pracovat.