abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    včera 20:44 | Nová verze

    Svobodný a otevřený multiplatformní editor EPUB souborů Sigil (Wikipedie, GitHub) byl vydán ve verzi 2.5.0. Stejně tak doprovodný vizuální EPUB XHTML editor PageEdit (GitHub).

    Ladislav Hagara | Komentářů: 0
    včera 12:22 | IT novinky

    Na základě národního atribučního procesu vláda České republiky označila Čínskou lidovou republiku za zodpovědnou za škodlivou kybernetickou kampaň proti jedné z neutajovaných komunikačních sítí Ministerstva zahraničních věcí ČR. Tato škodlivá aktivita, která trvala od roku 2022 a zasáhla instituci zařazenou na seznam české kritické infrastruktury, byla provedena kyberšpionážní skupinou APT31, veřejně spojovanou se zpravodajskou službou Ministerstvo státní bezpečnosti (MSS).

    Ladislav Hagara | Komentářů: 21
    včera 00:11 | Nová verze

    Google Chrome 137 byl prohlášen za stabilní. Nejnovější stabilní verze 137.0.7151.55 přináší řadu novinek z hlediska uživatelů i vývojářů. Podrobný přehled v poznámkách k vydání. Opraveno bylo 11 bezpečnostních chyb. Vylepšeny byly také nástroje pro vývojáře.

    Ladislav Hagara | Komentářů: 0
    27.5. 19:22 | Nová verze

    Byl vydán AlmaLinux OS 10 s kódovým názvem Purple Lion. Podrobnosti v poznámkách k vydání. Na rozdíl od Red Hat Enterprise Linuxu 10 nadále podporuje x86-64-v2.

    Ladislav Hagara | Komentářů: 0
    27.5. 15:11 | Nová verze

    Byl vydán Mozilla Firefox 139.0. Přehled novinek v poznámkách k vydání a poznámkách k vydání pro vývojáře. Řešeny jsou rovněž bezpečnostní chyby. Nový Firefox 139 je již k dispozici také na Flathubu a Snapcraftu.

    Ladislav Hagara | Komentářů: 9
    27.5. 10:44 | Komunita

    Byly publikovány výsledky průzkumu mezi uživateli Blenderu uskutečněného v říjnu 2024. Zúčastnilo se více než 7000 uživatelů. Téměř 93 % z nich například používá uživatelské rozhraní v angličtině.

    Ladislav Hagara | Komentářů: 22
    26.5. 23:55 | Zajímavý článek

    Lukáš Růžička v článku RamaLama aneb vyháníme lamy na vlastní louku na MojeFedora.cz představuje open source nástroj RamaLama umožňující spouštět jazykové modely v izolovaných OCI kontejnerech, a to bezpečně, bez potřeby mít root přístup k počítači, s podporou GPU či CPU a bez zbytečných obtížností kolem.

    Ladislav Hagara | Komentářů: 0
    26.5. 22:55 | Nová verze

    Byl vydán Sublime Text 4 Build 4200. Sublime Text (Wikipedie) je proprietární multiplatformní editor textových souborů a zdrojových kódů. Ke stažení a k vyzkoušení je zdarma. Pro další používání je nutná licence v ceně 99 dolarů. Spolu se Sublime Merge je cena 168 dolarů.

    Ladislav Hagara | Komentářů: 0
    26.5. 18:00 | Nová verze

    Multiplatformní open source voxelový herní engine Luanti byl vydán ve verzi 5.12.0. Podrobný přehled novinek v changelogu. Původně se jedná o Minecraftem inspirovaný Minetest v říjnu loňského roku přejmenovaný na Luanti.

    Ladislav Hagara | Komentářů: 0
    26.5. 16:11 | Nová verze

    Armbian, tj. linuxová distribuce založená na Debianu a Ubuntu optimalizovaná pro jednodeskové počítače na platformě ARM a RISC-V, ke stažení ale také pro Intel a AMD, byl vydán ve verzi 25.5. Přehled novinek v Changelogu.

    Ladislav Hagara | Komentářů: 0
    Jaký je váš oblíbený skriptovací jazyk?
     (55%)
     (32%)
     (8%)
     (3%)
     (0%)
     (0%)
     (3%)
    Celkem 154 hlasů
     Komentářů: 12, poslední včera 18:42
    Rozcestník

    Dotaz: btrfs compress

    6.1.2018 15:07 chinook | skóre: 28
    btrfs compress
    Přečteno: 974×
    Mám pár nejasností u komprese na btrfs
    Jak udělat compress pouze na subvolume? Jestli jsem to dobře pochopil, je možné komprimovat pouze adresář. Tzn. subvolume nomountuji na nějaký adresář s parametrem compress.
    Jaké jsou podmínky, aby mně to fungovalo jen na subvolume? Musím mít nenamauntovaný volume?
    Tedy
    umount /data
    mount -o compress,subvol=vmail /data/vmail
    Co když jsem vytvořil BTRFS na / Mohu zkomprimovat pouze adresář? Pokud ne, je možnost bez reinstalace systému vytvořit ze subvolume volume?
    A jakou kompresy volit pro maily? Maily mně to moc nekomprimuje :( To je tím, že tam je málo textu? Jestli to dobře chápu, je uspora místa nějakých 10GB
    Nejdříve jsem zkusil zlib a pak lzo
    /dev/vdb on /data/vmail type btrfs (rw,relatime,compress-force=zlib,space_cache,subvolid=257,subvol=/vmail)
    btrfs filesystem df /data/vmail/
    Data, single: total=657.01GiB, used=646.47GiB
    System, DUP: total=8.00MiB, used=96.00KiB
    Metadata, DUP: total=6.00GiB, used=3.41GiB
    GlobalReserve, single: total=512.00MiB, used=0.00B
    mount | grep mail
    /dev/vdb on /data/vmail type btrfs (rw,relatime,compress-force=lzo,space_cache,subvolid=257,subvol=/vmail)
    btrfs filesystem defragment -c /data/vmail/
    btrfs filesystem df /data/vmail/
    Data, single: total=662.01GiB, used=647.68GiB
    System, DUP: total=8.00MiB, used=96.00KiB
    Metadata, DUP: total=4.50GiB, used=3.20GiB
    GlobalReserve, single: total=512.00MiB, used=38.06MiB

    Řešení dotazu:


    Odpovědi

    6.1.2018 17:59 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: btrfs compress
    Čti.

    Komprimují se extenty, tj. datové bloky a v reálném čase vždy, pokud to procesor stíhá a nemáš to implicitně zakázané. Kompresní poměr se mění v závislosti na tom jak je procesor zatížený. Pokud nestíhá, nebo by byla komprese neefektivní, nekomprimuje vůbec. Vždy můžeš kompresi aplikovat dodatečně.

    Já mám kupř. kompresi implicitně zakázanou. Komprimuji extenty jedině v případě že potřebuji nutně uvolnit místo a nevím co smazat. Komprese, i dekomprese extentů snižuje reálný výkon a já si tak tímto způsobem vědomě vytvářím únikový prostor.
    6.1.2018 19:25 Trubicoid2
    Rozbalit Rozbalit vše Re: btrfs compress
    S tím zatíženým CPU to je fakt? Já myslel, že se automaticky vypne komprese pokud první MB nejde komprimovat. Což je blbý, pokud soubor začíná nekomprimovatelně a pak komprimovatelný je.

    Jinak aplikovat určitou kompresi jde jen tím defrag? To není zrovna šetrné k ssd. A komprimuje se i soubor, který defragmentovat nepotřebuje?
    6.1.2018 20:11 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: btrfs compress
    Jak to přesně interně funguje nepovím, protože to pro mne není podstatné. Pokud jde o to CPU, tak je vcelku logické že si komprese a dekomprese něco vezme. Ale jak jsem uvedl. Pokud nestíhá, nekomprimuje.

    U ssd ta komprese dává smysl opravdu jen v situaci kdy je třeba získat nějaké místo. Zkomprimovaný extent se nemění. Nový se mi zapíše jako nekomprimovaný.
    7.1.2018 12:26 petr
    Rozbalit Rozbalit vše Re: btrfs compress
    dle jejich wiki pokud pocatek souboru se spatne komprimuje, tak ostatni data nekomprimuji... IMHO zase < ironie >nesporne vyhody tohodle alfa fs< /ironie >.
    8.1.2018 10:22 Sten
    Rozbalit Rozbalit vše Re: btrfs compress
    Tohle dělá i ZFS ;-) V Btrfs se ta detekce dá vypnout pomocí „compress-force“.
    7.1.2018 12:24 petr
    Rozbalit Rozbalit vše Re: btrfs compress
    "Komprese, i dekomprese extentů snižuje reálný výkon" - u btrfs je to evidentne pravda, ale treba u ZFS ma komprese, dekomprese mozna negativni vykon na CPU, ale v pripade IO ma spise pozitivni vykon.
    7.1.2018 13:41 Want
    Rozbalit Rozbalit vše Re: btrfs compress
    Ty tomu teda ale fakt rozumíš. Nechceš dělat prezidenta hospodářské komory?
    7.1.2018 14:41 petr
    Rozbalit Rozbalit vše Re: btrfs compress
    Tak evidentne vice nez ty. Kolik mas diskovych poli s vice nez 150TB dat? Ja 6. U zapisu je diky kompresi potrebnych min IO, u cteni dostanes do ram vice dat rychlejc. Kdyby jsi porad mel pochybnosti, zkus pouzit google a hledej treba zfs compression performance impact. Ze to btrfs neumi je jina vec.
    8.1.2018 09:14 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: btrfs compress
    A na kolika z těch tvých polí máš Btrfs, že jsem tak smělý?
    8.1.2018 12:22 j
    Rozbalit Rozbalit vše Re: btrfs compress
    A to musi fs umet? Skoro bych rek, ze to ja tak nejak vlastnost od prirody - ze se komprimovanych dat zapisuje a cte min. Pokud mas stroj vyhrazenej jako uloziste, tak te asi CPU nepali, ale pokud to ma jeste neco delat, tak by te to palit mohlo, protoze ono trebas komprimovat Gbit onfly uz da kour ledacemus.
    8.1.2018 23:49 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Mám tam nastaveno compress-force, takže CPU by na to mít vliv nemělo.
    7.1.2018 18:00 trubicoid2
    Rozbalit Rozbalit vše Re: btrfs compress
    ... Jestli to dobře chápu, je uspora místa nějakých 10GB
    Nejdříve jsem zkusil zlib a pak lzo
    /dev/vdb on /data/vmail type btrfs (rw,relatime,compress-force=zlib,space_cache,subvolid=257,subvol=/vmail)
    btrfs filesystem df /data/vmail/
    Data, single: total=657.01GiB, used=646.47GiB
    System, DUP: total=8.00MiB, used=96.00KiB
    Metadata, DUP: total=6.00GiB, used=3.41GiB
    GlobalReserve, single: total=512.00MiB, used=0.00B
    mount | grep mail
    /dev/vdb on /data/vmail type btrfs (rw,relatime,compress-force=lzo,space_cache,subvolid=257,subvol=/vmail)
    btrfs filesystem defragment -c /data/vmail/
    btrfs filesystem df /data/vmail/
    Data, single: total=662.01GiB, used=647.68GiB
    System, DUP: total=8.00MiB, used=96.00KiB
    Metadata, DUP: total=4.50GiB, used=3.20GiB
    GlobalReserve, single: total=512.00MiB, used=38.06MiB
    no uspora 10GB oproti cemu? ja vidim, ze lzo zabere o 1GB vic nez zlib (koukej na data used, total je vzdy vic a da se zmensit viz. -duasge), ale asi by to melo byt o vic? je potreba zkusi taky bez komprese a uvedomit si, ze komprese jako mount parametr nezmeni jiz ulozene soubory, jen nove zapsane tedy je potreba bud tam vse dat znovu, nebo pouzit btrfs filesystem defragment -r -v -clzo /data/vmail
    8.1.2018 23:51 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Aha, já ten parametr used blbě chápal. Celkově to zabírá:
    690G /data/vmail/
    Takže nějaká úspora tam je, i když jsem čekal větší.

    Díky za vysvětlení.
    9.1.2018 08:42 trubicoid2
    Rozbalit Rozbalit vše Re: btrfs compress
    ja bych myslel, ze neni vsechno komprimovano, bych to jeste prejel tim compress -clzo a pak -czlib a pak by se videlo
    9.1.2018 22:13 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Dal jsem:
    btrfs filesystem defragment -r -clzo /data/vmail
    Výsledek:
    
    btrfs filesystem df /data/vmail/
    Data, single: total=639.01GiB, used=634.95GiB
    System, DUP: total=8.00MiB, used=96.00KiB
    Metadata, DUP: total=4.50GiB, used=3.32GiB
    GlobalReserve, single: total=512.00MiB, used=0.00B
    root@imap2:/# du -sh /data/vmail
    687G    /data/vmail
    
    
    9.1.2018 22:57 trubicoid2
    Rozbalit Rozbalit vše Re: btrfs compress
    Tak trochu to pomohlo, ale ne moc. Asi posilaji moc nekomprimovatlenych priloh :)
    9.1.2018 23:01 Kit | skóre: 45 | Brno
    Rozbalit Rozbalit vše Re: btrfs compress
    Určitě by to bylo zajímavější, kdyby se ty přílohy daly deduplikovat. Jenže to je příliš sci-fi.
    Komentáře označují místa, kde programátor udělal chybu nebo něco nedodělal.
    10.1.2018 19:04 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Evidentně v tomto případě je komprese k ničemu. Jak to tedy rozšifruji?
    10.1.2018 19:35 trubicoid2
    Rozbalit Rozbalit vše Re: btrfs compress
    rozsifrovat jako rozkompresovat? tim defrag to pry neni zatim podporovany, takze smazat a nakopirovat znova, kdyz bude primountovany bez komprese

    je potreba kopirovat jakoby z jineho fs, protoze jinak se udela jen reflink a dekomprese neprobehne

    a deduplikace by asi sla, zkus duperemove -dr --hashfile=/var/tmp/dupe.sqlite /cesta
    8.1.2018 12:29 j
    Rozbalit Rozbalit vše Re: btrfs compress
    2chinook: Volume nebo subvolume je sumak, chova se to prakticky stejne. Zpusobem primountovani jen rozhodujes o tom, jestli se aktualni mountpoint pro !nove zapisy! bude komprimovat. A samozrejme ze maily s prilohama, ktery sou prevazne uz komprimovany, se moc nezkomprimujou, to je logicky ne?

    Pokud bys chtel zkomprimovat to co uz neni, musel bys to v ramci toho disku kopirovat (= ne reflink). Pripadne na to mozna je nejakej tool kterej to vynuti, ale vysledek bude stejnej - komprimuje se jen pri zapisu. Ne pri namountovani. Stejne tak samozrejme prectes veskery data i pokud mount je bez komprese. Ale zase se "samo" nic nedekomprimuje.
    8.1.2018 12:50 Vantomas | skóre: 32 | Praha
    Rozbalit Rozbalit vše Re: btrfs compress
    No ty soubory, které jsou plné base64 docela zkomprimovat půjdou...
    8.1.2018 23:52 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Hmmm. Když namountuju volume s compress, tak jsou i subvolume. Ale pokud chci jen subvolume s compress, tak to ten parameter ignoruje. Nebo jak to ověřím? POkud vypíšu mount, tak tam comress nevidím.
    9.1.2018 00:12 Sten
    Rozbalit Rozbalit vše Re: btrfs compress
    Parametry se použijí při prvním namountování pro všechny subvolume a při dalším mountování se ignorují. Pokud chcete komprimovat jen jeden subvolume, tak musíte použít atribut c.
    9.1.2018 22:13 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Kde použít atribut c?
    9.1.2018 22:50 Sten
    Rozbalit Rozbalit vše Re: btrfs compress
    Na soubory a adresáře toho subvolume.
    10.1.2018 08:52 chinook | skóre: 28
    Rozbalit Rozbalit vše Re: btrfs compress
    Můžeš prosím napsat příkaz? Vůbec nevím co myslíš. Je to volba u mount, nebo defragment nebo kde?
    Řešení 1× (chinook (tazatel))
    10.1.2018 11:30 Sten
    Rozbalit Rozbalit vše Re: btrfs compress
    chattr +c -R /mount/point
    10.1.2018 15:50 Vantomas | skóre: 32 | Praha
    Rozbalit Rozbalit vše Re: btrfs compress
    Jak je to u těchto atributů, když se vytvoří podadresář? Zdědí se to z nadřazeného nebo se to ztratí?

    mkdir /mount/point/subdir
    10.1.2018 15:56 Vantomas | skóre: 32 | Praha
    Rozbalit Rozbalit vše Re: btrfs compress
    Vyzkoušel jsem si to sám. Ano, zdědí se to.

    vantomas@tomova-bedynka ~/tmp $ mkdir test ------------------- ./test vantomas@tomova-bedynka ~/tmp $ chattr +c test vantomas@tomova-bedynka ~/tmp $ lsattr --------c---------- ./test vantomas@tomova-bedynka ~/tmp $ cd test/ vantomas@tomova-bedynka ~/tmp/test $ mkdir test2 vantomas@tomova-bedynka ~/tmp/test $ lsattr --------c---------- ./test2 vantomas@tomova-bedynka ~/tmp/test $ cd test2/ vantomas@tomova-bedynka ~/tmp/test/test2 $ touch testfile vantomas@tomova-bedynka ~/tmp/test/test2 $ lsattr --------c---------- ./testfile vantomas@tomova-bedynka ~/tmp/test/test2 $
    10.1.2018 23:10 Sten
    Rozbalit Rozbalit vše Re: btrfs compress
    A tedy ještě pozor na to, že ani tohle nezmění data již zapsaná na disku, pouze nově zapsané bloky.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.