abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 07:00 | Nová verze

Dnes odpoledne vyjde Mozilla Firefox 75.0. Oficiální verze ve formátu Flatpak je již k dispozici na Flathubu. Přehled novinek bude zveřejněn v poznámkách k vydání a na stránce věnované vývojářům.

Ladislav Hagara | Komentářů: 1
včera 18:44 | IT novinky

Paul Cormier je novým prezidentem a CEO společnosti Red Hat. Jim Whitehurst je prezidentem IBM.

Ladislav Hagara | Komentářů: 7
včera 17:22 | Humor

Lukáš Churý připravil malou pátrací hru. Je určená hlavně pro webaře. Zahrát si ji ale může každý, kdo má alespoň základní ponětí o HTML.

Ladislav Hagara | Komentářů: 29
včera 08:00 | Zajímavý software

Byla vydána verze 0.5.0 jednoduchého a uživatelsky přívětivého Jabber/XMPP klienta Kaidan postaveného na Kirigami a QtQuick. Zdrojové kódy jsou k dispozici na GitLabu.

Ladislav Hagara | Komentářů: 0
včera 07:00 | Nová verze

Aplikace pro čtení elektronických knih Foliate, založená na knihovně Epub.js, vyšla ve verzi 2.0, která přináší přepracované uživatelské rozhraní a řadu drobných vylepšení.

Fluttershy, yay! | Komentářů: 11
4.4. 18:44 | Bezpečnostní upozornění

Twitter upozornil, že pokud se uživatel Twitteru přihlašoval ve Firefoxu na sdíleném nebo veřejném počítači, tak po odhlášení se z Twitteru mohla na disku zůstat nakešovaná citlivá data, a proto toto kešování pro Firefox zakázal. Reakce Mozilly: Twitter by měl prostě dodržovat standardy.

Ladislav Hagara | Komentářů: 4
4.4. 17:44 | Zajímavý článek

Článek na Jitsi je věnován bezpečnosti a soukromí uživatelů při používání videokonferenčního softwaru Jitsi Meet. Doporučuje se zamyslet nad názvem místnosti. Upozorňuje, že místnost existuje, pouze pokud se v ní někdo nachází. V případě nastavení hesla, je toto heslo s ukončením místnosti zapomenuto a při opětovném použití místnosti je nutno jej opět zadat.

Ladislav Hagara | Komentářů: 2
4.4. 06:00 | IT novinky

Na Indiegogo byla spuštěna kampaň na podporu chytrého telefonu a kapesního počítače Astro Slide 5G Transformer od společnosti Planet Computers. Požadovaná částka 180 000 eur byla vybrána během 4 hodin. Stejně jako u předchozích zařízení Gemini PDA a Cosmo Communicator od této společnosti je slíbená podpora Linuxu.

Ladislav Hagara | Komentářů: 18
3.4. 19:22 | Zajímavý software

CryptPad je svobodný online kancelářský balík. Zdrojové kódy jsou k dispozici na GitHubu pod licencí AGPL-3.0. Oficiální instance nově nabízí 1 GB prostoru. Mozilla Foundation tento týden věnovala projektu 10 000 $.

Ladislav Hagara | Komentářů: 2
3.4. 18:22 | Nová verze

Byla vydána finální beta verze Ubuntu 20.04 LTS s kódovým názvem Focal Fossa. Přehled novinek v poznámkách k vydání. Dle plánu by Ubuntu 20.04 mělo vyjít 23. dubna 2020.

Ladislav Hagara | Komentářů: 6
Chodíte do práce?
 (27%)
 (1%)
 (4%)
 (3%)
 (47%)
 (14%)
 (5%)
Celkem 188 hlasů
 Komentářů: 4, poslední 2.4. 14:20
Rozcestník

www.AutoDoc.Cz

Dotaz: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks

31.12.2017 08:25 Deryl | skóre: 8
Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Přečteno: 254×
Ahoj,

mám různé množství starých HDD, které bych rád využil na duplicitní zálohy počítačů v domácí LAN.

Tedy: připojím 1 až 4 disky na SATA řadič (+ externí napájení), pustím skript, který podle UUID identifikuje příslušný zálohovací profil (velikost pole, seznam počítačů k zalohování), zeptá se mne na heslo či klíč ke cryptsetup a dál už to jede samo:

* pomocí WoL vzbudí ostatní počítače

* pustí případné pre-backup skripty (dump SQL, definice exclude a include dirs, podporuje-li to fs, tak vytvoří dočasný snapshot pro lepší konzistenci dat)

* inkrementálně zazálohuje (stačí rsync s hard links)

* pustí případný post-backup skript (smazání SQL dumo, fs snapshotu)

Asi bych to zvládl naskriptovat v Bashi, ale nerad bych vynalézal kolo. Počítače jsou jen linuxové.

Neexistuje něco podobného, co bych mohl přiohnout?

Odpovědi

31.12.2017 08:56 Rr
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Koukni na "dirvish" umi rsync inkrementalni zalohy s hardlinky. Je to jedna cast toho co ocekavas.
31.12.2017 09:38 Re
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
31.12.2017 12:00 Deryl | skóre: 8
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Ano, vypadá to použitelně, lze mít samostatné konfigurace pro jednotlivé klienty, pomocné skripty a přitom na klienty není třeba nic extra instalovat. Jen dodělat doskriptovat připojení úložiště pro zálohy.

Jen ještě řeším, jak na sparse files (diskové img):

* Rsync si s nimi rozumí (tedy nealokuje nulové bajty), ale to je k ničemu v případě --link-dest. Jakákoliv změna souboru povede k nové kopii celého souboru.

* Z toho mi vychází, že oproti původnímu předpokladu s hard-links by bylo lepší použít rsync jen na synchronizaci a dělat snapshoty na úrovni fs (bloků) - takže buď univerzální LVM (tedy disky -> cryptsetup -> LVM raid0 -> nějaký fs) nebo zfs či brtfs.

Takže zkusím pohledat nějakou automatizaci v tomto směru
31.12.2017 12:44 MP
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
borg
4.1.2018 19:39 Deryl | skóre: 8
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
nakonec jsem se rozhodl pro borg, tu automatizaci stejně musím naskriptovat.

jednoduché ovládání, jak zfs. škoda, že ještě přímo nepodporují "pull mode" backup, jen push.
31.12.2017 13:02 Deryl | skóre: 8
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Tak částečně beru zpět: rsync sice podporuje sparse files, ale to se vylučuje s volbou --inplace.

Tedy i na blokové úrovni to budou nová data a soubor se s každou synchronizací bude duplikovat i po změně jednoho bajtu...

Z toho tedy plyne nějaká z možností:

* Mít na všech klientech úložiště podporující zálohování snapshotů na úrovni bloků (lvm + běžný fs; zfs; btrfs). To je neflexibilní, takže asi slepá cesta.

* Zůstat u rsyncu, ale jen pro synchronizaci bez snapshotů (hardlinks) s volbou --inplace (mění se jen změněné bloky) a oželet volbu --sparse. Zbytečně zabrané místo neefektivně uloženými sparse soubory částečně vyřešit kompresí na úrovni fs (xfs, btrfs). Snapshoty řešit na úrovni fs či LVM.

ZFS by byla na správu volba nejjednodušší, ale je potíž s nedostatečnou podporou napříč distribucemi (dodatečná kompilace spl, zfs modulů). Takže pro případ obnovy ze záloh nic moc.

Z toho asi plyne nejjednodušší řešení: disky -> cryptsetup -> btrfs non-striped raid0 s kompresí a podporou snapshotů.

Alternativně použít třeba xfs (komprese) + navíc práce s LVM (raid0, snapshots).

Trochu jsem googlil a našel patche pro dirvish + btrfs. Tak se na to zkusím podívat.
4.1.2018 21:22 pavele
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
rsnapshot, rdiff-backup.

Pokud půjdeš do btrfs, měl bys použít co nejnovější linuxovou distribuci,protože tento progresivní fs je v bouřlivém vývoji. Myslím, že pěkně zpracované to má Heron, hledej heron btrfs. Ovšem jestli se nepletu, btrfs se nehodí pro snapshoty img disků.
k3dAR avatar 5.1.2018 01:46 k3dAR | skóre: 58
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
sem za rdiff-backup a k tomu rdiff-backup-fs, udelal sem fork kde sou aplikovane najake patche z ubuntu, pro fungovani nad samba, opravene casove pasmo atd..
porad nemam telo, ale uz mam hlavu... nobody

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.