abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

dnes 19:33 | Zajímavý článek Marek Stopka | Komentářů: 0
dnes 17:55 | Nová verze

Bylo oznámeno vydání nové verze 3.0.0 a krátce na to opravných verzí 3.0.1 a 3.0.2 nástroje mitmproxy určeného pro vytváření interaktivních MITM proxy pro HTTP a HTTPS komunikaci. Přehled novinek v příspěvku na blogu. Přispělo 56 vývojářů. Aktualizována byla také dokumentace [Hacker News].

Ladislav Hagara | Komentářů: 0
dnes 01:11 | Nová verze

Byla vydána nová major verze 3.0 svobodného multiplatformního geografického informačního systému QGIS (Wikipedie). Její kódové jméno je Girona, dle názvu města, ve kterém proběhlo 15. setkání vývojářů QGISu. Přehled novinek i s náhledy a animacemi v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
včera 20:33 | Zajímavý článek

Nadace Raspberry Pi vydala sedmašedesáté číslo (pdf) anglicky psaného časopisu MagPi věnovanému Raspberry Pi a projektům postaveným na tomto jednodeskovém počítači a čtvrté číslo (pdf) časopisu pro kutily HackSpace věnovanému navíc 3D tisku, pájení, řezání nebo i elektronice a IoT.

Ladislav Hagara | Komentářů: 0
včera 18:33 | Komunita

Morevna Project, který stojí za řadou svobodného softwaru pro animátory (např. Synfig Studio, RenderChan nebo Papagayo-NG) a svobodnými (CC-BY-SA) animovanými filmy/komiksy Morevna (3. díl) a Pepper&Carrot: The Potion Contest (6. díl), sbírá do 1. března příspěvky na 4. díl svého animovaného filmu Morevna. Mezi odměnami přispěvatelům lze najít např. i videokurzy animace v Synfigu či Blenderu.

xHire | Komentářů: 0
včera 12:22 | Bezpečnostní upozornění

Ve středu vydaná "npm@next" verze 5.7.0 správce balíčků pro JavaScript npm (Wikipedie, Node Package Manager) přinesla řadě uživatelů Linuxu nečekanou nepříjemnost. V závislosti na způsobu instalace a ve spojení s příkazem sudo mohlo dojít ke změně vlastníka u systémových souborů, také například /. Chyba je opravena v před několika hodinami vydané verzi npm 5.7.1 [reddit].

Ladislav Hagara | Komentářů: 10
včera 10:00 | Nová verze

Byla vydána verze 10.5 open source alternativy GitHubu, tj. softwarového nástroje s webovým rozhraním umožňujícího spolupráci na zdrojových kódech, GitLab (Wikipedie). Představení nových vlastností v příspěvku na blogu. Zdůraznit lze integrovanou podporu Let's Encrypt.

Ladislav Hagara | Komentářů: 0
22.2. 12:33 | Komunita

Příspěvek na blogu Signalu (Wikipedie) informuje o založení neziskové nadace Signal Foundation, jež bude zastřešovat další vývoj tohoto svobodného bezpečného komunikátoru běžícího také na Linuxu (Signal Desktop). Brian Acton, spoluzakladatel WhatsAppu, věnoval nadaci 50 milionů dolarů [Hacker News].

Ladislav Hagara | Komentářů: 1
22.2. 05:55 | Zajímavý článek

Článek na Fedora Magazine krátce představuje programovací jazyk Rust a několik zajímavých v Rustu naprogramovaných terminálových aplikací. Jedná se o alternativu k příkazu grep ripgrep, moderní barevnou alternativu k příkazu ls exa, příkazem cloc inspirovaný tokei a zvířátko v terminálu ternimal.

Ladislav Hagara | Komentářů: 0
21.2. 23:55 | Zajímavý projekt

Byl spuštěn Humble Classics Return Bundle. Za vlastní cenu lze koupit hry Broken Sword 5 - The Serpent's Curse, Shadowrun Returns a Shadowrun: Dragonfall - Director's Cut. Při nadprůměrné platbě (aktuálně 8,48 $) také Shadowrun: Hong Kong - Extended Edition, Wasteland 2: Director's Cut - Standard Edition, Age of Wonders III a Xenonauts. Při platbě 15 $ a více lze získat navíc Torment: Tides of Numenera a Dreamfall Chapters: The Final Cut Edition.

Ladislav Hagara | Komentářů: 0
Který webový vyhledávač používáte nejčastěji?
 (2%)
 (28%)
 (62%)
 (2%)
 (3%)
 (0%)
 (1%)
 (1%)
Celkem 447 hlasů
 Komentářů: 35, poslední 21.2. 19:51
    Rozcestník

    Dotaz: Blesková duplikace souboru

    1.1.2013 20:09 q
    Blesková duplikace souboru
    Přečteno: 521×
    Hoj, chtěl bych se prosím pěkně zeptat, zdali by mi mohl někdo dát tip na filesystem, který by mi umožnil okamžitě udělat dočasnou kopii většího (třeba 1GB) souboru, pracovat s ním nezávisle na původním (do obou R/W) a pak ho smazat.

    Modelová situace. Mám na vývojovém serveru soubor, který pravidelně synchronizuji s produkčním serverem - zapisuji si jen změny. Je dost velký. Jsou v něm data. Občas potřebuji na vývojovém vytvořit za účelem testování na čerstvých datech duplicitu tohoto souboru, což jelikož vývojový je pomalejší, chvilku trvá, než se to gigo přepíše z disku na disk. Někdy neúměrně tomu jak dlouho trvá otestování drobného detailu, na který jsou ale čerstvá data nezbytná.

    No a já bych potřeboval aby při duplikaci se vytvořil soubor pouze virtuálně (ne fyzicky kopií bajtů z místa na místo), něco jako snapshot s tím, že by do obou šlo psát i z nich číst a chovaly navenek se oba jako nezávislé soubory. Data, která by byla zapsána do nového by byla zapsána do nového, data čtená z nového ale existující pouze virtuálně by byla čtena ze starého pokud se nezměnila, data ve starém, která se mají tendenci změnit by byla před změnou zapsána do nových souborů aby byly v nových k dispozici. Pak by měl takový filesystem mít něco na vytvoření reálného fyzicky zapsaného souboru z takového virtuálního - jakože udělat v tom výsledném zmatku pořádek.

    Nevím jestli to někdo pochopí co hledám. Třeba jo:) A nebo se naučím programovat souborové systémy v userspace a naprogramuju si to sám :) Ovšem jestli je něco už hotového ... ? Ví někdo ?

    Řešení dotazu:


    Odpovědi

    Max avatar 1.1.2013 20:21 Max | skóre: 66 | blog: Max_Devaine
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    btrfs a rw snapshot?
    Zdar Max
    Měl jsem sen ... :(
    1.1.2013 20:33 q
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    dekuju, mrknu, vyzkousim.
    2.1.2013 12:17 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    Snapshot je pro jeden soubor kanón na vrabce. Stačí cp --reflink.

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
    2.1.2013 13:33 dustin | skóre: 61 | blog: dustin
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    Hezké, díky za tip
    1.1.2013 21:16 hrusak
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    a musí to být rovnou filesystem? Já bych tohle asi řešil gitem.
    2.1.2013 08:28 dusan
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    Ak jediný nástroj ktorý máš k dispozícii je kladivo, všetko vyzerá ako kliniec.
    2.1.2013 14:33 Franta
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    +1 :-D
    pepe_ avatar 1.1.2013 21:38 pepe_ | skóre: 47
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    A co soubor nakopírovat do ramdisku , vytvořit jeho link kde má bejt a pak zase do ramdisku dělat kopie ?

    na 32Gb ram to jistě nebude problém a rychlost je jinde ...

    pepe_ avatar 2.1.2013 12:48 pepe_ | skóre: 47
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    Jen test , vytvořil sem 8GB ramdisk v /tmp

    pepe@PC-Pepe-Linux:/tmp$ dd if=/dev/zero of=soubor bs=1024 count=1000000
    1000000+0 vstoupivších záznamů
    1000000+0 vystoupivších záznamů
    1 024 000 000 bajtů (1,0 GB) zkopírováno, 1,70849 s, 599 MB/s
    pepe@PC-Pepe-Linux:/tmp$ time cp soubor soubor.bak

    real    0m0.649s
    user    0m0.006s
    sys     0m0.619s
    pepe@PC-Pepe-Linux:/tmp$ ls so* -l
    -rw-rw-r-- 1 pepe pepe 1024000000 led  2 12:46 soubor
    -rw-rw-r-- 1 pepe pepe 1024000000 led  2 12:46 soubor.bak

    takže nevidim důvod patlat se se snapshoty .

    2.1.2013 13:02 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    Já tedy důvod rozhodně vidím. Kdyby se soubor a soubor.bak lišily například v jednom bloku, je lepší mít obsazenou kapacitu v rozsahu velikost souboru plus jeden blok než dvakrát velikost souboru. Kromě toho žádný opravdový snapshot není potřeba, u Btrfs stačí cp --reflink.

    Většinou není nutné ramdisk vytvářet takto explicitně, protože při dostatečně velké RAM se beztak používá disková cache a na disk se zapisuje až s relativně velkým zpožděním. Použití standardního filesystému tedy nemusí být až tak nevýhodné. Naopak jeho velkou výhodou je, že má člověk o něco menší šanci přijít o data.

    Já používám cp --reflink zejména pro třídění fotek. Stáhnu například 10 GB fotografií a videa rovnou ze zrcadlovky. Zkopíruju pak příslušný adresář pomocí cp --reflink, což je hotovo z lidského hlediska „okamžitě“. Pak můžu v kopii libovolně mazat (což je nejčastější operace), zkracovat, editovat, upravovat a tak podobně, aniž bych potřeboval kopírovat velký objem dat naráz.

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
    2.1.2013 09:53 Ivan
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru
    NTFS, VxFS

    2.1.2013 12:14 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    NTFS nemá přímý ekvivalent toho, co dělá cp --reflink na Btrfs. Navíc není úplně jasné, jaký smysl má v rubrice „linuxová poradna“ zmínka o jakémsi obskurním filesystému, který tazatelem požadovanou funkčnost vůbec nenabízí.

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
    2.1.2013 11:52 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    cp --reflink je příkaz, který hledáš. Funguje například na Btrfs. Druhou možností je vytvořit si subvolume a z něj pak snapshoty (také na Btrfs), ale jde-li jen o jeden soubor, pak nejspíš cp rulezzz.

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
    2.1.2013 12:04 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    Ještě bych doplnil, že Copy-on-Write udělá soubor, který vypadá po všech stránkách naprosto „reálně“ a není na něm vůbec nic „virtuálního“. Není tedy absolutně žádný důvod ho po úpravách nějak explicitně znovu kopírovat a konvertovat. Prostě některé bloky můžou zůstat sdílené mezi soubory a některé (ty pozměněné) třeba zase sdílené nebudou. Na tom není nic špatně a je to úplně normální stav. ZFS a Btrfs jsou filesystémy, které něco takového podporují.

    Například ZFS dokonce podporuje deduplikaci, tedy automaticky vyhledává bloky, které jsou v několika souborech stejné, a zajistí jejich sdílení, aby byly na disku jen jednou.

    Při použití CoW samozřejmě nemusí platit, že by součet velikostí souborů musel být menší nebo roven celkovému obsazenému prostoru. (Ale komu to vadí?)

    Kdybys chtěl za každou cenu zkopírovat soubor bez Copy-on-Write a obsadit si tak zbytečně místo na disku duplicitními daty, stačí použít cp be --reflink.

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ
    2.1.2013 12:19 Andrej | skóre: 44 | blog: Republic of Mordor | Zürich
    Rozbalit Rozbalit vše Re: Blesková duplikace souboru

    s/cp be --reflink/cp bez --reflink/

    ǑǦŹǓǕǙǞǺǨȞȬḔḦḰḾṊṎṸẄẌỖ

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.