Dotaz: BTRFS raid a boot z vice disku

[MP]

Zdravim,

potreboval bych nastrel, jak vhodne udelat boot z btrfs v pripade, ze je cele btrfs slozeno do raidu z vice disku. Doted jsem to nemusel resit (single HDD, ci HW raid). Vim, ze u mdadm se casto ddckuje zacatek disku, ale tuhle variantu bych tady nechtel zrovna pouzit. Zatim se mi to nepodarilo dohledat - vetsinou se resi multiple OS, nez boot z vice disku a jeden OS.

Cili otazka: jakym zpusobem sestavit btrfs tak, aby bylo schopne bootovat z libovolneho disku v raidu, aniz by se musela delat nejaka magie pri vymene disku z hlediska samotneho bootovani?

Diky,MP.

Odpovědi

[Sten]

ddčkování je nesmysl i u mdadm. Tohle si má vyřešit zavaděč, tedy GRUB. Stačí spustit grub-install na každý disk v poli.

[j]

Coz je taky peknej nesmysl ... protoze grub bys mel instalovat na pole a vyresit by si to mel sam.

[dustin]

Pokud máš pole přes partišny (což je dost časté), není MBR disků nijak zrcadlený a musíš si nainstalovat grub na jednotlivé disky. Je to triviální, funguje, mnohokrát ověřeno.

[Andrej]

RAID 1 je bez nejmenších problémů — prostě nainstaluješ GRUB (grub-install) na každý disk zvlášť.

Jiné RAIDy záleží na tom, jak se chová BIOS/EFI a případně firmware řadiče při bootu. Bohužel často zpřístupní pro GRUB (v režimu dostatečně primitivním, aby ho GRUB viděl) jen jeden bootovací disk, což je u RAID 0, 5 a 6 celkem k ničemu a GRUBu se pak nepodaří filesystém seskládat. Tohle je ale (nerad to říkám) většinou potřeba vyzkoušet na konkrétním hardwaru metodou pokus/omyl. Někde mívají servery v setupu volbu pro zpřístupnění všech disků v režimu vhodném pro GRUB, jinde zpřístupní jen 1 disk a na nic se neptají. (A při selhání bootu z disku třeba zkusí další, ale zase jenom jeden!)

Já jsem tento problém nakonec vyřešil ošklivým, leč spolehlivě funkčním způsobem: Na každém disku jsou 2 oddíly. První je malý, třeba 1 GB, je v Btrfs RAID 1 přes všechny disky a je na něm /boot. Druhý oddíl jde přes celý zbytek každého disku a je v RAID 5 nebo RAID 6 přes všechny disky. Tím pádem to nabootuje z kteréhokoliv disku a nevadí, že GRUB vidí jenom jeden disk. Kořenový filesystém je už pak už normálně na RAID 5 nebo RAID 6, tj. využívá ostatní diskový prostor efektivněji než RAID 1.

Udržování /boot/efi oddílu ve správně replikované podobě je další kousek voseru, protože jeho filesystém (vfat) samozřejmě nemá vestavěný RAID a musí tam přijít ke slovu mdraid nebo dmraid nastavený tak, aby oddíl vypadal jako běžný vfat oddíl a aby se metadata RAIDu skrývala až na konci oddílu.

[Andrej]

Udržování /boot/efi oddílu ve správně replikované podobě je další kousek voseru…

Tím jsem rozhodně nechtěl říct, že by to byl až tak zásadní problém nebo že by to nešlo. V pohodě to jde. Spousta RAID konfigurací funguje tak, že každá RAID 1 replika vypadá, jako by tam prostě byl filesystém menší než celý oddíl, začínající na začátku oddílu, a metadata pro softwarový RAID jsou až za filesystémem. Takže se dá klidně vyrobit oddíl, do kterého se dá zapisovat replikovaně z operačního systému, když na to přijde (a na to přijde jen při instalaci GRUBu, v podstatě), a který zároveň stále bude normálně čitelný pro EFI firmware jako vfat filesystém, z kterékoliv z RAID 1 replik.

Každopádně je to nepříjemná komplikace při instalaci systému a rozhodně bych si uměl představit mnohem lepší podporu EFI firmwaru pro bootování z různých (softwarových) RAIDů a podobných složitějších konfigurací. No, třeba existuje, jen o ní nevím — pak mě jistě někdo opraví.