abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 17:00 | Nová verze

Byl vydán Docker 1.13. Přehled novinek na YouTube a v poznámkách k vydání na GitHubu. Docker umožňuje běh aplikací v softwarových kontejnerech (Wikipedia).

Ladislav Hagara | Komentářů: 3
včera 15:51 | Komunita

Mozilla.cz informuje, že nástroje pro webové vývojáře se možná oddělí od Firefoxu a stanou doplňkem. Nástroje pro webové vývojáře prošly velkým přepisem a tým, který se stará o jejich vývoj, by uvítal možnost jejich častějších aktualizacích nezávisle na vydávání nových verzí Firefoxu.

Ladislav Hagara | Komentářů: 5
včera 07:00 | Humor

Čtenářům AbcLinuxu vše nejlepší k dnešnímu Dni zvýšení povědomí o tučňácích (Penguin Awareness Day).

Ladislav Hagara | Komentářů: 0
včera 06:00 | Komunita

Bylo spuštěno hlasování o přednáškách a workshopech pro letošní InstallFest, jenž proběhne o víkendu 4. a 5. března v Praze. Současně byla oznámena změna místa. InstallFest se letos vrací zpět na Karlovo náměstí do budovy E.

Ladislav Hagara | Komentářů: 0
včera 02:48 | Komunita

Greg Kroah-Hartman potvrdil, že Linux 4.9 je jádrem s prodlouženou upstream podporou (LTS, Long Term Support). Podpora je plánována do ledna 2019. Aktuální jádra s prodlouženou podporou jsou tedy 3.2, 3.4, 3.10, 3.12, 3.16, 3.18, 4.1, 4.4 a 4.9.

Ladislav Hagara | Komentářů: 0
včera 00:11 | Zajímavý článek

Výrobce síťových prvků, společnost Netgear, spustila nový program, který slibuje vývojářům, expertům, ale i běžným uživatelům vyplacení finanční odměny za nalezení bezpečnostních chyby v jejich produktech. Za nalezení zranitelnosti v hardware, API nebo mobilní aplikaci nabízí odměnu od 150 do 15 tisíc dolarů (dle závažnosti).

Michal Makovec | Komentářů: 0
včera 00:08 | Pozvánky

V sobotu 18. 2. se v Praze v prostorách VŠE uskuteční od 9:30 již 4. ročník největší české konference o open source redakčním systému WordPress (WP) - WordCamp Praha 2017.

… více »
smíťa | Komentářů: 0
19.1. 23:58 | Komunita

Kryptoměnová komunita zahájila nový rok spuštěním projektu Blockchain.cz, jehož cílem je kolektivně nalézt ideální překlad pro čím dál frekventovanější slovo „blockchain“. Přispět návrhem může kdokoli. Sběr bude trvat až do konce září 2017. Následně bude probíhat dvoutýdenní veřejné hlasování, které bude zakončeno výběrem toho nejlepšího návrhu.

xHire | Komentářů: 9
19.1. 15:55 | Bezpečnostní upozornění

Společnost Oracle vydala čtvrtletní bezpečnostní aktualizaci svých softwarových produktů (CPU, Critical Patch Update). Opraveno je celkově 270 bezpečnostních chyb. V Oracle Java SE je například opraveno 17 bezpečnostních chyb. Vzdáleně zneužitelných bez autentizace je 16 z nich. V Oracle MySQL je opraveno 27 bezpečnostních chyb. Vzdáleně zneužitelných bez autentizace je 5 z nich.

Ladislav Hagara | Komentářů: 0
19.1. 02:48 | Nová verze

Po půl roce od vydání verze 9.0 (zprávička) byla vydána verze 10.0 zvukového serveru PulseAudio. Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 36
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (10%)
 (2%)
 (73%)
 (3%)
 (11%)
Celkem 350 hlasů
 Komentářů: 25, poslední dnes 13:34
    Rozcestník
    Reklama

    Dotaz: ZFS pomaly zapis

    25.12.2014 19:33 dnes je 1.sviatok vianočný
    ZFS pomaly zapis
    Přečteno: 720×
    Ahojte, mam tu storage ktory sa sklada zo 4x SATA2 HDD. Tieto HDD su v RAID10 ktory je softverovy cez mdadm. Ako filesystem je pouzite ZFS.

    Riesim problem so ZFS. Zapis mi ide cca 100MB/s a zhruba po minute klesne na 20-30MB/s. Pozeram sa na to cez iotop. Zapis testujem cez dd if=/dev/zero of=test.img . Storage ma 32GB RAM. Nic ine sa tam nezapisuje. checksum, atime a relatime su off. xattr mam nastavene na sa, primarycache metadata, secondarycache all.

    Ak dam zapis priamo na /dev/mdX tak sa zapis drzi, taktiez ak to preformatujem napr na ext4. Z toho usudzujem, ze sa jedna o problem na filesysteme.

    Odpovědi

    25.12.2014 21:30 vskutku
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Bohužel přímo na Vaší otázku odpověď neznám... a trochu se obávám, že kdo ji zná (pokud někdo), nemluví česky a pracuje pro Oracle, takže by to stejně (alespoň veřejně) neřekl nebo minimálně říkat neměl...

    Ovšem přesto jedna praktická poznámka, proč si to komplikovat kombinací různých technologií (softraid + ZFS), když vlastností RAID10 dokážete (prakticky) dosáhnout i pomocí samotného ZFS? Viz např.: http://www.zfsbuild.com/2010/06/03/howto-create-striped-mirror-vdev-pool/.

    Přímo k Vaší otázce, takhle z voleje mě napadá, že ZFS míval (a z podstaty v alespoň v nějaké míře zřejmě ještě má) problémy s hledáním vhodného místa k zápisu. Obvykle se to projevovalo po určitě době používání (fragmentace) a při vyšším zaplnění disku (vhodných kandidátů pro další zápis už nebylo tolik). Vzhledem k tomu, že tady vyrábíte jeden gigantický soubor pořád pryč, jestli se tam podobný mechanismus řešení kam s ním nespustí.

    Nicméně nevím, k čemu přesně to uložiště má sloužit, ale pokud tam zrovna neukládáte proudy dat z průmyslových kamer nebo něco takového, tak podobný test nemusí být z hlediska praktického výkonu moc užitečný.
    25.12.2014 22:07 PanZvedavy
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    ZFS na linuxovem md? Tak to je pravdepodobne nejhustoznejsi kameňák tohoto roku...a ja myslel, ze uz me nic nemuze prekvapit :)
    25.12.2014 23:45 dnes je 1.sviatok vianočný
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Historia ... raz niekto vykopiroval data, zformatoval to a nakopiroval ich na novy filesystem :)
    26.12.2014 00:43 lertimir | skóre: 59 | blog: Par_slov
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    To je nesmysl, sofistikované FS potřebují znát HW na kterém běží. btrfs a zfs se musí provozovat přímo na HW. A když tam můžete mít ext4 tak bud je tam nechat a nebo dát přímo ZFS. Navíc díky tomu že ZFS jeden na FUSE tak ztráta výkonu bude znatelná i tak.
    Jendа avatar 26.12.2014 01:49 Jendа | skóre: 73 | blog: Výlevníček | JO70FB
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Navíc díky tomu že ZFS jeden na FUSE…
    Nejede.
    „To jsem nedávno zjistil, že naše televize jde ovládat po síti. Docela mě to překvapilo.“ „Jo? A kdo vám ji ovládal?“
    26.12.2014 16:00 lertimir | skóre: 59 | blog: Par_slov
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Aha. Díky. To mne přibližuje tomu to někdy s ním zkusit.
    26.12.2014 03:21 shshshsh
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Takze my chces povedat, ze sofistikovany filesystem nemozem spustit na sofistikovanom hardware ktory neumoznuje passthrough diskovych zariadeni - cize HW je nemozne pouzit?
    Jendа avatar 26.12.2014 03:52 Jendа | skóre: 73 | blog: Výlevníček | JO70FB
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Nebudeš mít funkce jako jsou checksumy per-zařízení a možná to zhorší výkon.
    „To jsem nedávno zjistil, že naše televize jde ovládat po síti. Docela mě to překvapilo.“ „Jo? A kdo vám ji ovládal?“
    26.12.2014 12:10 Tribicoid
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Sem to zkusil a na mym zfs z-1 nad 4 diskama, na kterych je jeste dmcrypt to zapisuje 600MB/s, akurat já mam zapnutou kompresi lz4 :)

    Jeste nevim, proc koukas na iotop, jde to treba i takto: dd if=/dev/zero bs=1M | pipebench > bigfile

    bez toho bs=1M to jede asi jen polovicni rychlosti, a to nemam 4k disky, ty asi jo

    No a jestli mas vypnuty checksums, nepouzivas kompresi a jde ti jen o rychlost zapisu, tak proc tam vlastne mas zfs? Jinak souhlasím s názorem zfs nad mdadm = masochismus :)
    26.12.2014 12:23 Tribicoid
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Co rika zpool get all a zfs get all?
    26.12.2014 12:41 DIK
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    ...komprimovat nuly se dá i rychleji,že? :-) DIK
    26.12.2014 12:52 Tribicoid
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Na blbej benchmark chytrej workaround :)
    26.12.2014 13:47 DIK
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    ...zkus if=/dev/random bs=1M | pipebench > bigfile a nahoď výsledky. Celkem by mě to zajímalo... DIK
    26.12.2014 15:53 Trubicoid
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Tak to je jeste vetsi blbost, nebot random i urandom jsou o dost pomalejsi nez disk, za domaci ukol si to zkus sam.
    26.12.2014 12:40 DIK
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Tupuji, že FS ze začátku vše pere do cache (proto 100MB/s) a pak mu dojde volná pamět a je nucen vše zapisovat přímo na železo (pokles na 20-30MB/s.) ZFS není zrovna rychlík na velké datové toky. DIK
    26.12.2014 19:18 beny
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    100 MB/s je na 4 HDD bida taky. Co ukazuje iostat -x 10, kdyz to pise 100 i kdyz to pise 20-30?
    28.12.2014 18:53 venda
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Z praktického provozu:
    FreeBSD, později FreeNAS server. 2 pole, každé raidz1 (raid 5), serverová deska, 16 GB ECC ram

    první pole 3x serverový SATA Seagate Constellation ES.3: každý disk samostatně dá zápis cca 150 MB/s, v poli je zápis maximálně 100 MB/s

    druhé pole 4x nějaký NAS disky 5900 rpm + jeden serverový western digital jako zápisová cache (bez ní to jelo průměrně 15 MB/s a strašně se to kousalo a spousta programů při zápisu díky tomu timeoutovala), teď zápis maximálně 60 MB/s, mazání velkého souboru (cca 500 GB) způsobí "zatuhnutí" pole na cca 10 minut, rovněž rychlost tohoto pole je ovlivněna teplotou serveru/disků, čím nižší, tím lepší
    29.12.2014 11:22 beny
    Rozbalit Rozbalit vše Re: ZFS pomaly zapis
    Stripe ze dvou mirroru (pro ctyri disky) bych cekal nekde na urovni samotneho disku, dokonce neco rychlejsi pro velke bloky.

    raidz je jiny pripad.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.