abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
dnes 01:00 | IT novinky

Bylo vydáno RFC 8484 řešící posílání DNS dotazů a získávání DNS odpovědí přes protokol HTTPS (DoH, DNS over HTTPS). V aktuálních verzích Firefoxu je DoH ve výchozím nastavení zakázáno. Povolit jej lze v about:config změnou hodnoty network.trr.mode (Trusted Recursive Resolver). V srpnu zveřejnila Mozilla výsledky experimentu s DNS přes HTTPS ve Firefoxu Nightly.

Ladislav Hagara | Komentářů: 1
19.10. 13:00 | Komunita

Při prvním spuštění Ubuntu 18.04 LTS (Bionic Beaver) je spuštěn nástroj Ubuntu Report. Pokud uživatel souhlasí, jsou pomocí tohoto nástroje odeslány do Canonicalu informace o daném počítači (doba instalace, počet procesorů, rozlišení displeje, velikost paměti, časová zóna, ...). V červnu byly zveřejněny první statistiky. Podrobnější statistiky jsou nově k dispozici na samostatné stránce.

Ladislav Hagara | Komentářů: 11
19.10. 01:00 | Pozvánky

O víkendu probíhá v Košicích pravidelné setkání příznivců otevřených technologií OSS Víkend. Na programu je řada zajímavých přednášek a workshopů.

Ladislav Hagara | Komentářů: 0
19.10. 00:11 | Nová verze

Byla vydána nová verze 1.3 otevřeného, licenčními poplatky nezatíženého, univerzálního ztrátového formátu komprese zvuku Opus (Wikipedie) a jeho referenční implementace libopus. Vylepšena byla například detekce, zda se jedná o řeč nebo o hudbu. Přidána byla podpora prostorového zvuku (immersive audio) dle plánovaného RFC 8486. Podrobnosti a zvukové ukázky na demo stránce.

Ladislav Hagara | Komentářů: 0
18.10. 22:33 | Nová verze

Bylo vydáno Ubuntu 18.10 s kódovým názvem Cosmic Cuttlefish (Kosmická sépie). Ke stažení jsou Ubuntu Desktop a Server, Ubuntu Cloud Images, Ubuntu Netboot, Kubuntu, Lubuntu a Lubuntu Alternate, Ubuntu Budgie, Ubuntu Kylin, Ubuntu MATE, Ubuntu Studio a Xubuntu. Podrobnosti v poznámkách k vydání.

Ladislav Hagara | Komentářů: 2
18.10. 18:33 | Nová verze

Byl vydán PostgreSQL ve verzi 11.0. Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
18.10. 17:33 | IT novinky

Nadace Raspberry Pi představila na svém blogu Raspberry Pi TV HAT, tj. rozšíření jednodeskového počítače Raspberry Pi umožňující příjem televizního vysílání DVB-T a DVB-T2. Cena rozšíření je 21,50 $.

Ladislav Hagara | Komentářů: 8
18.10. 17:07 | Nová verze

Vychází OpenBSD 6.4. Z řady novinek namátkou: podpora dalších architektur (arm64 např. dostal z Linuxu vypůjčený ovladač radeondrm), hypervizor vmm podporuje i qcow2 disky a šablony, jádro dokáže automaticky přepínat mezi dostupnými bezdrátovými sítěmi, sítě pracují o něco efektivněji, z bezpečnosti „přísaha byla doplněna odhalením“ (pledge(2) lze vhodně doplnit pomocí unveil(2)), SMT je ve výchozím stavu vypnutý, ale lze jej zapnout. Syntaxe nastaveni OpenSMTPD se změnila. S vydáním vychází také nová verze LibreSSL - 2.8.2.

Daniel Čižinský | Komentářů: 5
17.10. 23:15 | IT novinky

Firma Raptor Computing Systems, která stojí také za pracovní stanicí Talos II, představila levnější desku Blackbird s podporou jednoho 4-/8jádrového CPU POWER9 Sforza a formátem microATX; bližší specifikace jsou ve wiki výrobce.

Fluttershy, yay! | Komentářů: 30
17.10. 22:11 | Zajímavý projekt

Byla vydána verze 1.0 svobodné federalizované platformy pro sledování a sdílení videí, alternativy YouTube s podporou P2P, PeerTube (Wikipedie). Za vývojem PeerTube stojí nezisková organizace Framasoft snažící se mimo jiné nahradit svými svobodnými Frama službami služby společnosti Google (De-google-ify Internet).

Ladislav Hagara | Komentářů: 1
Přispíváte osobně k vývoji svobodného softwaru?
 (39%)
 (43%)
 (25%)
 (22%)
 (11%)
 (36%)
Celkem 267 hlasů
 Komentářů: 13, poslední včera 16:39
Rozcestník

Dotaz: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks

31.12.2017 08:25 Deryl | skóre: 3
Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Přečteno: 241×
Ahoj,

mám různé množství starých HDD, které bych rád využil na duplicitní zálohy počítačů v domácí LAN.

Tedy: připojím 1 až 4 disky na SATA řadič (+ externí napájení), pustím skript, který podle UUID identifikuje příslušný zálohovací profil (velikost pole, seznam počítačů k zalohování), zeptá se mne na heslo či klíč ke cryptsetup a dál už to jede samo:

* pomocí WoL vzbudí ostatní počítače

* pustí případné pre-backup skripty (dump SQL, definice exclude a include dirs, podporuje-li to fs, tak vytvoří dočasný snapshot pro lepší konzistenci dat)

* inkrementálně zazálohuje (stačí rsync s hard links)

* pustí případný post-backup skript (smazání SQL dumo, fs snapshotu)

Asi bych to zvládl naskriptovat v Bashi, ale nerad bych vynalézal kolo. Počítače jsou jen linuxové.

Neexistuje něco podobného, co bych mohl přiohnout?

Odpovědi

31.12.2017 08:56 Rr
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Koukni na "dirvish" umi rsync inkrementalni zalohy s hardlinky. Je to jedna cast toho co ocekavas.
31.12.2017 09:38 Re
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
31.12.2017 12:00 Deryl | skóre: 3
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Ano, vypadá to použitelně, lze mít samostatné konfigurace pro jednotlivé klienty, pomocné skripty a přitom na klienty není třeba nic extra instalovat. Jen dodělat doskriptovat připojení úložiště pro zálohy.

Jen ještě řeším, jak na sparse files (diskové img):

* Rsync si s nimi rozumí (tedy nealokuje nulové bajty), ale to je k ničemu v případě --link-dest. Jakákoliv změna souboru povede k nové kopii celého souboru.

* Z toho mi vychází, že oproti původnímu předpokladu s hard-links by bylo lepší použít rsync jen na synchronizaci a dělat snapshoty na úrovni fs (bloků) - takže buď univerzální LVM (tedy disky -> cryptsetup -> LVM raid0 -> nějaký fs) nebo zfs či brtfs.

Takže zkusím pohledat nějakou automatizaci v tomto směru
31.12.2017 12:44 MP
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
borg
4.1. 19:39 Deryl | skóre: 3
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
nakonec jsem se rozhodl pro borg, tu automatizaci stejně musím naskriptovat.

jednoduché ovládání, jak zfs. škoda, že ještě přímo nepodporují "pull mode" backup, jen push.
31.12.2017 13:02 Deryl | skóre: 3
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
Tak částečně beru zpět: rsync sice podporuje sparse files, ale to se vylučuje s volbou --inplace.

Tedy i na blokové úrovni to budou nová data a soubor se s každou synchronizací bude duplikovat i po změně jednoho bajtu...

Z toho tedy plyne nějaká z možností:

* Mít na všech klientech úložiště podporující zálohování snapshotů na úrovni bloků (lvm + běžný fs; zfs; btrfs). To je neflexibilní, takže asi slepá cesta.

* Zůstat u rsyncu, ale jen pro synchronizaci bez snapshotů (hardlinks) s volbou --inplace (mění se jen změněné bloky) a oželet volbu --sparse. Zbytečně zabrané místo neefektivně uloženými sparse soubory částečně vyřešit kompresí na úrovni fs (xfs, btrfs). Snapshoty řešit na úrovni fs či LVM.

ZFS by byla na správu volba nejjednodušší, ale je potíž s nedostatečnou podporou napříč distribucemi (dodatečná kompilace spl, zfs modulů). Takže pro případ obnovy ze záloh nic moc.

Z toho asi plyne nejjednodušší řešení: disky -> cryptsetup -> btrfs non-striped raid0 s kompresí a podporou snapshotů.

Alternativně použít třeba xfs (komprese) + navíc práce s LVM (raid0, snapshots).

Trochu jsem googlil a našel patche pro dirvish + btrfs. Tak se na to zkusím podívat.
4.1. 21:22 pavele
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
rsnapshot, rdiff-backup.

Pokud půjdeš do btrfs, měl bys použít co nejnovější linuxovou distribuci,protože tento progresivní fs je v bouřlivém vývoji. Myslím, že pěkně zpracované to má Heron, hledej heron btrfs. Ovšem jestli se nepletu, btrfs se nehodí pro snapshoty img disků.
k3dAR avatar 5.1. 01:46 k3dAR | skóre: 51
Rozbalit Rozbalit vše Re: Zálohovací sw: raid0 + cryptsetup + rsync hardlinks
sem za rdiff-backup a k tomu rdiff-backup-fs, udelal sem fork kde sou aplikovane najake patche z ubuntu, pro fungovani nad samba, opravene casove pasmo atd..
porad nemam telo, ale uz mam hlavu... nobody

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.