Dotaz: OMV jako domaci NAS: rozdeleni disku a vyber FS

[JiK]

Rad bych se ze zeptal zkusenejsich, chci mit NAS pro domaci sit (Lin, Mac, win zarizeni, raspberry, kodi box k televizi, kindly, tablety, telefony, roku, normalni heterogenni smesice...) tak aby na to mohlo pristupovat vetsina zarizeni. Server je dell optiplex mikro (7040m). Protoze moc nezere a moc nehuci. Je tam 120GB ssd na system (debian-openmediavault) a 2 TB ssd nvme na data. Jeden kus. Takze zadne raid nebudou.

Jak byste rozpartitionovali ten vetsi datovy disk a jake filesystemy byste zvolili? Proc? Ja pracovne uvazuju o nejakych 600 GB na timemachine backups, 900 GB na media (filmy, malinko mozna hudba a knizky) a zbytek (~400 GB) jako sandbox na kraviny typu docker, sifrovany FS, uceni se novych veci, etc...jake fs zvolit?

Je to rozumne? je to nesmysl? proc? mam zkusit jit do nejakych tech flexibilnich veci (lvm) co se daji zvetsovat a zmensovat? Neni to zbytecne slozite, s jednim fyz. diskem?

Jaka jsou nejzasadnejsi rizika? Asi vypadek elektriky pri primountovanych diskach a zapisu. Ktery FS se s tim nejlip vyporada a da se snadno opravit? Prehledl jsem neco?

Jak to mate vy? a proc prave tak? Jake velikosti a fs byste doporucili?

Odpovědi

[Copper]

A má smysl to rozdělovat? Použij co alespoň trochu znáš a budeš si vědět s opravou pokud se náhodou něco pokazí. Já používám všude ZFS a nedám na něj dopustit.

[X]

Ted tu jeden takovy byl.. Osobne, dej tam to cemu sam rozumis, zvladnes spravovat a dokazes se vyporadat s problemy.

[X]

Edit: Pokud tomu nerozumis, nebo to neresis, dej tam to co nabizi software ktery budes instalovat jako vychozi. Je tam vetsi sance, ze to vydrzi dele nez nahodny experiment.

[JiK]

prave ze tam nic vychoziho neni ale zato pytel moznosti... BTRFS, Ext3, Ext4, f2FS, JFS, XFS a myslim, ze kdybych to delal primo z toho debianu, tak tech moznosti bude jeste vic.

[X]

Muzes zacit treba tady.

[JiK]

mne zajima praxe. co lidi pouzivaji a cemu se vyhnout. odzita zkusenost. prakticky to vypada, ze ma smysl uvazovat o ext4 a xfs, s tim, ze ext4 by melo byt vic pouzivane, a ochotne se nechat resizovat na vetsi i mensi velikost. vetsi userbase znamena, ze az se to posere, bude vic lidi kteri to uz resili a snadneji najdu navod jak z toho ven. Papirove a teoreticky by pro ssd asi mel byt bezva i f2fs. bavime se o jednom 2TB nvme disku, vic jich nebude protoze ve skrini mikro formatu na to neni misto. tzn nemusim resit raid etc. jeden disk. domaci server. bez ups. elektrika vypadne tak 3x za rok v lete pri bourkach.

[X]

Kdyz ti nekdo napise EXT4 je na nic, pouzivam vsude XFS tak ho tam proste das? "Dam tam XFS protoze Max to doporucuje". To vazne? Az se to rozbije udelas co?

[frufru]

Co se do mne navážíš? Jedině Max bez arogance a dehonestace poradil a napsal svou zkušenost. Prostě když radí, tak to má hlavu a patu. Na otázku co dát do pc na 1x HDD bez raidu a UPS jste odpověděli btrfs a jestli nechci záruku na 10 let. Další rovnou vlákno zamknout. Je jasné, že důchodci nemají zbytečné peníze na UPS, aby se linux stačil korektně vypnout. Takže když nemáte co dodat k otázce, tak držte hubu a šoupejte nohama pane X. Úplně od vás slyším arogantní heslo městských gaučáků: "Praha a laska musi zvitězit nad vsí a nenávistí."

[Vtipnéř]

Řekl bych, že pokud by se i rozproudila diskuse, moc Ti to nepomůže, takových už jsem tu sledoval víc (poslední velká začala asi před dvěma měsíci), ale žádný jednoznačný závěr z nich nikdy neplynul. Jsou lidé, co nedají dopustit např. na brtfs, jiní tomu nemůžou přijít na jméno.

Myslím, že u každého řešení může nastat situace, kdy si řekneš: "Měl jsem to tehdy radši udělat jinak." To je ale v životě se vším. V každém případě nezapomínej opravdu důležitá data zálohovat.

Jirka

[AraxoN]

S ext4 nič nepokazíš. Používam ho roky (aj) na domácom serveri.

Ale RAID k serveru tak nejak patrí. Buď by som nahradil ten 120G disk za ďalší 2TB (hoci aj z druhej ruky, rotačný, mdadm viď --write-mostly), alebo spravil RAID1 aspoň na tých 120G, kde bude systém a swap. Dáta môžu byť bez RAIDu, ak máš zálohy. Z mojej skúsenosti je obnoviť dáta zo zálohy bezbolestná operácia, ale preinštalovať celý systém od nuly je stres na niekoľko dní.

[lertimir]

Jen pár poznámek. Lidi asi používají vše, co jsi napsal. Třeba moje odžitá zkušenost je btrfs všude a maximální spokojenost. f2fs je nesmysl, protože ten je vyvinut pro flash/chipy bez řadičů např paměťová karta. V nvme ti řadič vše překryje.

vetsi userbase znamena, ze az se to posere, bude vic lidi kteri to uz resili a snadneji najdu navod jak z toho ven.

Jak "posere"? Z hlediska závažné chyby v HW nemáš šanci, protože SSD/Nvme při HW chybě padnou jako celek. Nepotkal jsem situaci, kdy je v poruše jen něco na SSD. A z hlediska SW je lepší používat to, co znáš a umíš adminovat. Tak se vyhneš chybě lépe než radou "používej tohle".

[Aleš Kapica]

Je tam 120GB ssd na system (debian-openmediavault) a 2 TB ssd nvme na data. Jeden kus. Takze zadne raid nebudou. … Je to rozumne? je to nesmysl?

V prvé řadě je to zbytečná práce. Úložiště, kde nejsou replikovaná data, a ke všemu na SSD discích. Do to jde jenom blázen.

[lukve]

Ja som kupil z bazaru DS115j za 50ecka mam tam normalny disk a je to lepsie nez ssd aspon ak je disk ok. synology ma par vychytavok pred tym som mal nazdielany disk cez raspberry. taktiez mam aj DS120j v alze ho maju za nieco 11Oecka a nic clovek nemusi riesit a vela zavisi od disku cosa tyka kvality ale z bazaru sa neolati to skor ten z alzy ds120j kedze ten ma napr moznost nastavit cas zapnutia a vypnutie nasky cosa hodi ak to ma byt nadoma

[JiK]

Uvažoval jsem o tomtéž. Ale 1/ ten dell mikro už jsem koupil. 2/ budu si moct hrát i s různými self hosted službami a dockerem

[lertimir]

Minimálně bych k tomu přidal HDD na USB a na něm měl zálohu (duplikát).

[Ruža Becelin]

Z OptiPlex bych udelal server a na NAS koupil Synology, napr. DS923+ a k tomu APC UPS treba typ Smart nebo i Back.

[Andrej]

Jak byste rozpartitionovali ten vetsi datovy disk…

Nijak. Doporučuji nepoužívat ani GPT; nemá to žádný smysl. Přímo na disk dát LUKS. Do toho souborový systém.

…a jake filesystemy byste zvolili?

Btrfs.

Proc?

Protože je bezkonkurenčně nejlepší. Nejlepší spolehlivost, výkonnost, flexibilita a k tomu portfolio vlastností, které nic jiného (přímo v kernelu) nemá.

Který souborový systém se dá například po přidání dalšího disku bez mrknutí oka a bez odmountování zkonvertovat z jednoho disku na RAID1? Ano, jedině Btrfs.

Jedině Btrfs umí skutečné zálohy s inkrementálními (rozdílovými) a atomickými snapshoty, které se dají posílat mezi originálním a zálohovacím souborovým systémem.

Ja pracovne uvazuju o nejakych 600 GB na timemachine backups, …

Nejlepší timemachine je Btrfs. 100%. Zásada číslo 1: Nedělit, nedělit, nedělit.

…900 GB na media (filmy, malinko mozna hudba a knizky)…

Co když bude dočasně potřeba 901 GB? Co když bude u výše jmenovaného oddílu dočasně potřeba 601 GB? Nedělit, nedělit, nedělit.

…a zbytek (~400 GB) jako sandbox na kraviny typu docker, sifrovany FS,…

Šifrované má být 100% všechno, 100% všechno v LUKS. Neexistuje důvod, aby to tak nebylo. Hardwarově akcelerované šifrování je dnes zdarma. I béčkový procesor dokáže šifrovat s propustností, kterou skoro žádné SSD nedá (snad kromě těch PCIe extrémů za $10k+). V nehorším případě (typu krádež NASu) se pak aspoň k datům nikdy nikdo nedostane.

…uceni se novych veci, etc...jake fs zvolit?

Btrfs.

Je to rozumne? je to nesmysl? proc?

Jakékoliv zbytečné dělení je nerozumné. Připravit se o klíčové výhody Btrfs (pod mylným dojmem, že jsou za každou cenu potřeba zastaralé FS) je nerozumné.

…mam zkusit jit do nejakych tech flexibilnich veci (lvm) co se daji zvetsovat a zmensovat?

Ne. LVM je v tomto kontextu dokonale obsolete. Btrfs dokáže všechno to zvětšování a zmenšování nesrovnatelně lépe — díky tomu, že nic takového nepotřebuje.

Neni to zbytecne slozite, s jednim fyz. diskem?

Je. Jeden fyzický disk, dva fyzické disky i deset fyzických disků nejlépe využije Btrfs.

Jaka jsou nejzasadnejsi rizika? Asi vypadek elektriky pri primountovanych diskach a zapisu. Ktery FS se s tim nejlip vyporada a da se snadno opravit?

Btrfs.

A hlavně, když už se vlivem hardwaru předstírajícího bariéry přece jen něco semele, Btrfs to (na rozdíl od zastaralých filesystémů) díky svým checksumům zjistí a oznámí, místo aby vracel náhodně zničená data.

Jak to mate vy? a proc prave tak? Jake velikosti a fs byste doporucili?

Takhle to mám na jednom ze strojů. Velikosti: Vždy 100%. FS: Vždy Btrfs.

• Systém: 2 SSD, Btrfs RAID1 (data i metadata) na LUKS kontejnerech, bez oddílů (tj. bez GPT). (Bootuje se z redundantních flashdisků; není tedy důvod mít na „provozních“ discích GPT.)
• Data: 8 SSD, Btrfs RAID6 (data) + RAID1C3 (metadata, dočasně) na LUKS kontejnerech, bez GPT. (RAID6 metadata (vzdor rozšířeným nesmyslným pověrám) by byla pořád nesrovnatelně jistější než mdadm / dmraid AID6 může být, zatímco RAID1C3 je ještě o řád + galaxii jinde. Plánuju v budoucnu rebalance na (také) RAID6 metadata. (Jinak RAID6 metadata jsem měl mezi lety 2015 a 2020; bez problémů, jen jsem se pak zalekl pověr, které zmiňují write hole, jenom zapomínají dodat, že všechno ostatní (!) má mnohem horší write hole.))

Tahle↑↑↑ konfigurace už zachránila moje data asi desetkrát. Byla na 6 discích. 2 selhaly. Ustála to. Pak na 8 discích. Další 2 selhaly. Vyměnil jsem je jako žárovky; žádný problém. Pak jsem si konečně připustil, jak hrozná sračka je SMR a že 5 TB v 2,5" formátu za tu nespolehlivost nestojí. Následovala (postupná) výměna všech 8 disků za SSD. Za provozu. Bez odmountování. Pak za rok selhalo jedno SSD. Katastrofálně. Odpojovalo se a vracelo se, několik hodin. Vracelo nesmyslná data. Během toho se na pole zálohovalo. Hrůza! Jenže Btrfs všechno bravurně ustál. SSD jsem pak vyměnil jako žárovku. Život jde dál. Btrfs rocks + rulezzz.

[xxl]

Můžu se zeptat, jak řešíš disky pro virtuální stroje? Na hostu tedy výhradně btrfs, takže pro VM musí být nějaké image, tj. soubory uložené na btrfs hosta. Ve VM by jeden taky chtěl mít btrfs, jenže výkon btrfs nad btrfs by měl jít rapidně dolů. Mít image disků v hostu jako nocow se mi nelíbí a nemít ve VM btrfs se mi taky nelíbí. Takže to řeším btrfs nad btrfs, tj. host i guest mají btrfs a všechno je cow. Výkonnostně to jde, ale pořád si říkám, jestli někdy někde nenarazím.

[Vtipnéř]

Byl jsem zvědav, jestli se Andrej zapojí . Jeho odpověď se mi, na rozdíl od některých dřívějších reakcí v diskusích, poměrně zamlouvá.

Jirka