abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 11:55 | IT novinky

    Ministerstvo průmyslu a obchodu propaguje Microsoft. Ten ve spolupráci s Ministerstvem průmyslu a obchodu spouští AI National Skilling Plan v ČR. "Iniciativa Microsoftu přináší konkrétní a praktickou podporu právě tam, kde ji nejvíc potřebujeme – do škol, firem i veřejné správy.", říká ministr průmyslu a obchodu Lukáš Vlček.

    Ladislav Hagara | Komentářů: 10
    dnes 10:55 | Zajímavý projekt

    Jste český ISP? Vyplněním krátkého dotazníku můžete pomoci nasměrovat vývoj nové generace routerů Turris Omnia [𝕏].

    Ladislav Hagara | Komentářů: 4
    dnes 01:33 | IT novinky

    Celkové tržby společnosti Canonical za rok 2024 byly 292 milionů dolarů (pdf). Za rok 2023 to bylo 251 milionů dolarů.

    Ladislav Hagara | Komentářů: 1
    dnes 01:22 | Nová verze

    Byla vydána verze 1.88.0 programovacího jazyka Rust (Wikipedie). Podrobnosti v poznámkách k vydání. Vyzkoušet Rust lze například na stránce Rust by Example.

    Ladislav Hagara | Komentářů: 0
    dnes 01:11 | Nová verze

    Distribuce Tails specializující se ochranu online soukromí uživatele byla vydána ve verzi 6.17. Mimo jiné aktualizuje Tor Browser (14.5.4) a opravuje několik chyb.

    Fluttershy, yay! | Komentářů: 0
    včera 21:11 | Nová verze Ladislav Hagara | Komentářů: 0
    včera 13:11 | IT novinky

    Město Lyon posiluje svou digitální suverenitu a postupně nahrazuje software od společnosti Microsoft bezplatnými alternativami, zejména OnlyOffice pro kancelářské aplikace a Linux a PostgreSQL pro systémy a databáze.

    Ladislav Hagara | Komentářů: 9
    včera 11:44 | Zajímavý projekt

    Evropská občanská iniciativa Stop Destroying Videogames se snaží o to, aby vydavatelé, kteří spotřebitelům v Evropské unii prodávají videohry nebo na ně udělují licence, měli povinnost tyto hry ponechat ve funkčním (hratelném) stavu i po ukončení podpory ze své strany. Podpořit podpisem tuto iniciativu můžete v Systému pro online sběr podpisů.

    trekker.dk | Komentářů: 5
    včera 11:22 | Komunita

    Mozilla oficiálně ukončila svůj již několik let mrtvý projekt DeepSpeech pro převod řeči na text.

    Ladislav Hagara | Komentářů: 2
    včera 05:22 | Komunita

    Krátce po oficiálním oznámení forku X.Org Xserveru s názvem XLibre Xserver byl ve Fedoře předložen návrh, aby byl X.Org Xserver nahrazen tímto XLibre Xserverem. Po krátké ale intenzivní diskusi byl návrh stažen.

    Ladislav Hagara | Komentářů: 25
    Jaký je váš oblíbený skriptovací jazyk?
     (58%)
     (28%)
     (7%)
     (2%)
     (0%)
     (1%)
     (3%)
    Celkem 320 hlasů
     Komentářů: 16, poslední 8.6. 21:05
    Rozcestník

    Dotaz: Větší disky do SW RAID1

    30.6.2016 09:08 hw | skóre: 23 | blog: Digital Design
    Větší disky do SW RAID1
    Přečteno: 523×
    Potřebuji nahradit stávající disky v Linux RAID1 za větší. Napadají mě dvě hlavní možnosti jak to udělat:

    1. Skutečně nahradit disky v RAIDu. Takže postupně pro oba disky třeba mdadm --fail, mdadm --remove, mdadm --add, mdadm --grow a nakonec resize2fs. Nebo asi bezpečněji nejdříve přidat nové disky a pak teprve odebrat staré. Tam ale bude třeba asi ještě několikrát mdadm --grow navíc.

    2. Vytvořit úplně nový RAID1 a překopírovat na něj data ze starého. Jsem přitom schopný zajistit, aby se během kopírování na RAID nesahalo odjinud.

    Zajímalo by mě, která metoda bude rychlejší. Čím kopírovat v případě druhé varianty (cp, rsync, dd, ...)?

    Odpovědi

    30.6.2016 11:23 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Pokud máš volné sloty a porty, pak je samozřejmě možnost 2) rychlejší, protože jedou oba disky najednou. Ale je s tím víc ruční práce. Pokud je obsazeno jen málo prostoru, použil bych cp -a, jinak dd + fs resize. V případě dd zůstane uuid, tudíž se nemusí měnit definice ve fstabu. Samozřejmě je potřeba nové pole přidat do /etc/mdadm/mdadm.conf a případně rebuildnout initramfs, aby se tam změněný konfig nakopíroval.

    Osobně dávám přednost cestě A), protože je s tím míň práce (ale trvá to déle).
    30.6.2016 13:00 GeorgeWH | skóre: 42
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    s tym dd, resp. aj s moznostou (a), to nemusi byt take jednoduche. pokial je na starych diskoch mbr a nove disku budu vacsie ako 2tb, tak to nepojde, a bude musiet vytvorit nove pole a data skpirovat.
    30.6.2016 13:06 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Jistě, je potřeba vědět, co se dělá.

    V každém případě jsem nemyslel dd na celý disk, ale na partišnu na ručně vyrobeném/nastartovaném mdraidu - tedy dd filesystému, ne raidu.
    30.6.2016 13:10 GeorgeWH | skóre: 42
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    ako sa dd-ckuje filesystem?
    30.6.2016 13:30 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    dd if=/dev/md1 of=/dev/md2 bs=1M
    + následný resize fs
    30.6.2016 13:41 GeorgeWH | skóre: 42
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    hmm toto som nikdy neskusal, ale asi to bude podobne, ako zalohovanie a obnova virtualu na lvm pomocou dd.
    30.6.2016 14:01 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Je to standardní kopie blokového zařízení, funguje na cokoliv.
    cezz avatar 30.6.2016 11:33 cezz | skóre: 24 | blog: dm6
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Myslim, ze to velmi zalezi od povahy dat. Ak mas sucasny raid takmer plny a je tam kopec malych suborov, tak bude asi rychlejsi celodiskovy sync (cize 1. moznost), naopak ak je tych dat stale relativne malo, je to zopar velkych suborov, tak rsync medzi dvomi RAID bude zrejme rychlejsi.

    Ja osobne by som na to siel tym 2. sposobom tak ci tak. Pride mi to bezpecnejsie, zaroven si defragmentujes filesystem a teoreticky to nebude zas tak o moc pomalsie.

    Od istej doby md raid a vymene diskov za iny typ za behu az tak moc neverim - viz napriklad tento wontfix bug, ktory sa mi podarilo zreprodukovat nad dost dolezitymi datami, ktore sme sa snazili odzalohovat. (data prezili, ale bolo to peknych par hodin roboty) A to sme ani nepouzili USB ale loopback.

    Nech ma niekto neberie zle, md raid mam rad (ono ten problem je beztak v spolupraci roznych vrstiev nad tym) ale vsetko ma svoje limity. Ak mas dostupne zalohy, tak smelo do toho.

    Ale zas ak mas zalohy tak by som sa len uistil, ze su odzalohovane posledne zmeny, stopol stary raid, vymenil disky, vytvoril novy raid a obnovil data zo zalohy - ako bonus si pri tom otestujes ci ti tie zalohy naozaj funguju a ako fallback mozes stale pripojit ten stary raid a urobit rsync.
    Computers are not intelligent. They only think they are.
    30.6.2016 12:31 hw | skóre: 23 | blog: Digital Design
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Zatím díky všem za praktické rady. Doplnil bych další informace.

    Současný RAID1 je 1TB zaplněný na 98%. Z toho nějakých 18% jsou různé FPGA/PCB/SW projekty plné malých souborů. 80% RAIDu zabírají archivy s instalacemi všech verzí vývojových systémů, které používáme za posledních 10-12 let. To jsou většinou velké (jednotky GB) TAR archivy.

    Volné porty a sloty pro přidání disků mám, takže s přidáním do pole a grow problém není stejně jako s vytvořením nového pole.

    Asi bych tedy zvolil druhou variantu (nový RAID a zkopírovat). Nemám moc rád resize2fs apod., takže bych kopíroval buď cp nebo rsync. Bude mezi nimi rozdíl v rychlosti?
    30.6.2016 13:08 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Použil bych cp -a, při kopírování na prázdný fs nemá rsync přidanou hodnotu.
    Jendа avatar 30.6.2016 13:29 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    cp -a zbytečně seekuje, když to má skoro plné, kopírovat FS sekvenčně bude mnohem rychlejší.
    30.6.2016 13:33 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Jak sekvenčně bez resize fs? To by se docela občas hodilo, díky
    Jendа avatar 30.6.2016 13:43 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    No zkopíruješ přímo blockdevice a pak uděláš resize2fs (např.), což jenom nafoukne místo, ale soubory nerozhazuje.
    30.6.2016 13:49 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Jasně, ale resize právě tazatel dle svých slov nechce, proto ten cp
    30.6.2016 14:12 hw | skóre: 23 | blog: Digital Design
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Tak ono je toho víc, ale myslím, že cp bude stejně nejlepší:
    • přecházím z MBR na GPT (původní disky 1TB, nové 4TB)
    • na starém poli je LVM, na novém ho nechci, protože mi pro tohle konkrétní využití nic nepřináší
    • líbí se mi přirozená defragmentace souborů při kopírování
    • možná dokonce hodím na nové pole jiný FS (i když tím si nejsem jistý, protože to běží na CentOS 6, takže zůstat u EXT4 bude asi nejbezpečnější - na CentOS 7 bych použil asi XFS)
    30.6.2016 14:21 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Jasně, vždy záleží na konkrétních potřebách.
    Ruža Becelin avatar 30.6.2016 15:30 Ruža Becelin | skóre: 40 | blog: RuzaBecelinBlog
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Na CentOS 6 funguje XFS taky
    30.6.2016 19:06 humming elephant
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Tak kdyz tam mas LVM, tak bych to resil prave pomoci pvmove, ne? Downtime jen kvuli instalaci noveho a vyjmuti stareho zeleza (pokud vubec) a nemusis u toho sedet a cekat. Prej nic neprinasi.
    30.6.2016 15:20 hw | skóre: 23 | blog: Digital Design
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Tak super. Dal jsem nové disky do serveru, vytvořil jsem nové pole a během resyncu najednou log plný tohohle:
    Jun 30 14:57:29 server kernel: ata5.00: exception Emask 0x0 SAct 0x40 SErr 0x0 action 0x0
    Jun 30 14:57:29 server kernel: ata5.00: irq_stat 0x40000008
    Jun 30 14:57:29 server kernel: ata5.00: failed command: READ FPDMA QUEUED
    Jun 30 14:57:29 server kernel: ata5.00: cmd 60/08:30:58:64:d8/00:00:32:00:00/40 tag 6 ncq 4096 in
    Jun 30 14:57:29 server kernel:         res 41/40:00:58:64:d8/00:00:32:00:00/40 Emask 0x409 (media error) < F >
    Jun 30 14:57:29 server kernel: ata5.00: status: { DRDY ERR }
    Jun 30 14:57:29 server kernel: ata5.00: error: { UNC }
    Jun 30 14:57:30 server kernel: ata5.00: configured for UDMA/133
    Jun 30 14:57:30 server kernel: ata5: EH complete
    
    Může to být kabelem, řadičem nebo bude v pytli úplně nový disk? Ze smartu to nevypadá.
    Jendа avatar 30.6.2016 15:42 Jendа | skóre: 78 | blog: Jenda | JO70FB
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Když to řeklo přímo media error, tak to asi bude v disku. Problém je, že když to není ve smartu (disk možná ve smartu kecá), tak se to bude blbě reklamovat.
    30.6.2016 16:10 hw | skóre: 23 | blog: Digital Design
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1

    Tak to vypadá na reklamaci:

    SMART Self-test log structure revision number 1
    Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
    # 1  Short offline       Completed: read failure       90%         2         849846108
    # 2  Short offline       Completed: read failure       90%         2         849846110
    # 3  Extended offline    Completed: read failure       90%         2         849846104
    
    30.6.2016 16:26 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    To asi jo
    1.7.2016 09:58 Zdenda
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    Klasický DOA. Nějaká 3TB?
    1.7.2016 10:53 hw | skóre: 23 | blog: Digital Design
    Rozbalit Rozbalit vše Re: Větší disky do SW RAID1
    4TB WD Red

    A to jsem ještě chvíli přemýšlel vytvořit to nové pole s --assume-clean. Naštěstí jsem to neudělal, takže se mrtvola projevila hned.

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.