Archivace a změna filesystemu s fsarchive.

7.12.2011 12:49 | Přečteno: 1365× | Linuxové drobty

Udělal jsem chybu pri instalaci serveru na fash disk. A nechal jsem implicitní volbu file systému ext4. To pro flash disky není optimální filesystém, protože množství zápisl na něm je výrazně vyšší než u ext2 a tím pádem "poškozuje" flash disk více než file systém, který tolik nezapisuje. Protože jsem na to přišel trochu pozdě, byl už nainstalován celý server včetně konfigurace služeb nebylo moc účelné začít znovu. Přece jen v tom bylo pár hodin práce.

Hledal jsem na netu jak provést konverzi, nástrojů je asi více. Klasický tar, nástroje které používá clonezilla jako partimage a partclone. U taru jsem si nebyl zcela jist, jak pracuje s obrazem celého filesystému včetně všech hard a soft linků. (možná lichá obava), nástroje s clonezilly, co vím, neumožňují změnu filesystému.

Nakonec jsem našel v jedné diskusi program s názvem fsarchiver. Moje konverze proběhla pomocí dvou příkazů:

Rohan:~ # fsarchiver -j3 -o savefs server.fsa /dev/sdb1
Statistics for filesystem 0
* files successfully processed:....regfiles=66657, directories=6841, symlinks=7034, hardlinks=4853, specials=28
* files with errors:...............regfiles=0, directories=0, symlinks=0, hardlinks=0, specials=0

provedlo zabalení filesystému do archivu (-j3 je paralelní komprese na 3 jádrech). A

Rohan:~ # fsarchiver restfs server.fsa id=0,dest=/dev/sdb1,mkfs=ext2
Statistics for filesystem 0
* files successfully processed:....regfiles=66657, directories=6841, symlinks=7034, hardlinks=4853, specials=28
* files with errors:...............regfiles=0, directories=0, symlinks=0, hardlinks=0, specials=0

provedlo nahrání FS společně s dekompresí a vytvořením ext2 filesystému.

Pokud to někoho zajímá tak dokumentace je na http://www.fsarchiver.org/Main_Page 'Program byl součástí repozitářů pro opensuse        

Komentáře

[Radek Podgorny]

neco podobneho jsem resil zrovna dnes v noci. vyresil jsem to ale vypnutim journalu (na ext4), cizm je z toho efektivne neco jako ext2 s bonus features...

[Václav Kramář]

Narazil jsem na doporučení mkfs.ext4 -O ^has_journal... Navíc bych při instalaci na flashku očekával read-only. Nebo je to SSD? Pak by kvůli trim byl možná lepší ext4 (mount option discard).

[lertimir]

je to jen fash disk, ne SSD. není sice RO, ale je obsazena jen asi z 1/5 a nebude se na ni nijak pracovat. vlastní práce s daty bude na raidu 4 disků, ale ty chci aby mi usínaly když nejsou potreba.

[GeoRW]

niekde som cital, ze journalovanie SSD disky v skutocnosti neposkodzuje alebo len absolutne minimalne a najlepsia volba je ext4 s aktivovanym TRIMom (discard option v fstab). Tak to mam na SSD disku ja, teda ak tym flash diskom myslis SSD

[polymorf]

Ja som nedavno skusal vfat, ext2, ext3 a reiserfs na usb kluci a bol som prekvapeny ze najrychlejsi bol vfat (asi 2x rychlejsi ako ext2, testoval som zapis 400MB suboru). Na ext2 mi to ale nepovolilo vytvorit 512B bloky takze som musel pouzit 2k bloky (musel by som prekompilovat kernel, mkfs alebo take nieco), mozno by to bolo rychlejsie.

[Bedňa]

vfat je najrýchlejší, pretože nič nerieši rovnako ako keď zapisuješ do /dev/null

[petr_p]

Někteří výrobci optimalizují svoje flashové paměti pro VFAT – začátek zařízení, kde leží FAT, ke kterým se často přistupuje, používá jiný typ paměti a jinou strategii uvolňování bloků vhodnou pro náhodný přístup, než zbytek zařízení, který je z cenových důvodů vyroben levnější technologií, která při sekvenčním přístupu tolik nebolí.

[nyan]

To pro flash disky není optimální filesystém, protože množství zápisl na něm je výrazně vyšší než u ext2 a tím pádem "poškozuje" flash disk více než file systém, který tolik nezapisuje.

Nevim kde ste vzali tudle informaci, ale je trochu zjednodusena a nepresna.

To jestli bude ext2 rychlejsi nebo pomalejsi, zavisi na "usage pattern". Je treba si uvedomit 2 veci:

• Journal by default uklada jenom metadata, ktere jsou pomerne male.
• ext2 neumi extenty

Tudiz, pokud vase pouziti zahrnuje mazani/presun/vytvareni spousty malych souboru, ano, ext2 bude min zapisovat. Ale pokud delate s velkymi soubory, ext4 bude min zapisovat.

[lertimir]

nejde o rychlost. jde o zápisy. nezávisle na množství zapsaných dat flash (který je defakto jen zdokonalená EEPROM pamět) zapisuje tak, že musí přečíst svuj blok paměti změnit (byť jen malou část) vymazat původní blok paměti a data zapsat. vzhledem k tomu, že blok je o velikosti 512k, tak častý zápis malých dat je z hlediska flash nejvice zničující, protože stejně se přepisuje a opotřebovává to půl mega.

A jak jsem psal to není disk na kterém se bude pracovat.