Dotaz: Jak archivovat data v domácích podmínkách

[paul2no]

Chtěl bych se zeptat, jakým způsobem archivujete v domácích podmínkách data "na věčné časy", případně jaký postup doporučíte? V mém případě se jedná o fotky, a ročně to dělá několik desítek GB.

Budu vděčný za vaše tipy a návrhy.

Odpovědi

[Heron]

Fotky? Na papír. Myslím to vážně. 100+ let staré fotky si prohlídnete i dneska. Možná prošly nějakou chemickou degradací, ale většina z nich stále nese tu informaci.

Jinak několik desítek GB ročně není moc. Takže DVD / BR mechaniku a vypalovat to na kvalitní média (třeba na 3 různé druhy). Moje CDR vypálená v roce 1999 jsou stále čitelná. Pro větší jistotu lze investovat do různých archivních médií (M-Disc).

[paul2no]

Máte zkušenost s těmi M-Disc? Hlavně jaká je kompatibilita. Mám sice BD vypalovačku, ale hodně starou (LG BH10LS30), tak jestli by vůbec byla schopna ta média nahrát.

[Heron]

Já ne, já fotky tisknu. O BR vypalovačce uvažuju několik let, média jsou prý velmi spolehlivá a velikost je pořád více než dostatečná na běžné dokumenty, ale zatím používám hdd.

[xkucf03]

I moje 5¼palcové diskety z roku 1990 (1991?) jsou stále čitelné :-)

Jak to děláš s těmi optickými disky? Pravidelně je kontroluješ nebo jim věříš natolik, že je můžeš někam na dvacet let odložit a víš, že je pak přečteš? Já mám většinu dat živých, takže je udržuji na klasických pevných discích, které průběžně kontroluji a občas obměním, ale nějaký propracovaný systém v tom nemám. Akorát ty fotky jsou takové, že jen přibývají, takže ty starší ročníky lze odzálohovat a už se měnit nebudou – ty jsem kdysi na nějaké DVD vypálil, ale teď už jich mám 230 GB a to se mi moc pálit nechce. Nicméně nějaký lepší systém bych si v tom měl udělat…

Nezvažoval jsi páskovou mechaniku? I když cenově to asi pro domácí použití nedává smysl.

[Heron]

I moje 5¼palcové diskety z roku 1990 (1991?) jsou stále čitelné

Gratuluji. Já jsem několikrát přemýšlel, jestli bych si taky neměl nechávat starý HW z nostalgických důvodů, ale ne, raději vše porozdávám a doma mám jen aktuální HW + několik záložních kousků ve skříních (nedávno jsem objevil desku s cpu a vůbec nevím, odkud ji mám, to se mi stává pravidelně - nedávno jsem ve skříni objevil 1.5TB enterprise storage disk a i kdyby mě týden vyslýchali, tak fakt nevím, jak se to tam dostalo ). Nejstarší stroj, o kterém vím že mám na starém bydlišti ve sklepě, je Athlon XP cosi ještě s Win 2000. Jsem zvědav, jestli to ještě nastartuje.

Já mám většinu dat živých

Já mám všechna data živá. I dokumenty ze střední školy mám na aktivním úložišti. Ano, mám je i na CD z té doby. Ale ty CD prakticky nepotřebuju.

ty jsem kdysi na nějaké DVD vypálil, ale teď už jich mám 230 GB a to se mi moc pálit nechce

Jasně, mám to podobně. 25GB BR už ale tak malý není, takže by stačilo jen 10 disků na zálohu. To je nic. V dobách, kdy se ještě běžně vypalovalo, jsem vypálil stovky disků. Tak si říkám, že obětovat jeden BR měsíčně pro aktuálního zálohu aktivních projektů není nic strašného. I kdyby se to nikdy nečetlo.

Nezvažoval jsi páskovou mechaniku?

Ne. Spíš bych uvažoval "něco jako" FreeNET, kdy by každý poskytl prostor na svém disku pro síť a lidé zapojení do sítě by si tam umístovali svá data. Síť by měla nějakou redundanci, takže data by se nahrávala na více nodů v síti. Tj třeba někdo by chtěl zálohovat 1TB dat. poskytl by 3TB disk pro "všechny ostatní". Redundance by byla o to vyšší, o co by tam bylo účastníků. Bohužel neznám žádný dlouhodobě úspěšný projekt tohoto typu. FreeNET vždycky jen paběrkoval a bylo to velmi pomalé. Nedávno jsem slyšel o projektu IPFS, ale je to jen protokol. Nevím o tom, že by existovala nějaká větší síť.

[Max]

Fotky? Vybrat ty nej, neutápět se v kvantitě, ale kvalitě. A pak nechat vytisknout na papír. Dával bych si pak pozor na kvalitu tisku. Dřív, když se fotky vyvolávaly, tak nebyl problém, ani když se dali na hřbitov za sklo. Dnes, když tam dá člověk něco vytištěného, za pár let z toho zbyde skoro čistě bílý papír.
Na druhou stranu, pokud budou v knize, nebo někde, kde se nesvítí, tak by to neměl být problém. Možná, když člověk pohledá, tak narazí na nějaké technologie tisku / laku, co to zakonzervují a bude to odolné vůči UV aj. způsobům degradace.

Pokud jde o digitální uchovávání, tak několik kopií na DVD, nebo BlueRay. Mno a po 20 letech přepalovat na nové.
Nebo použít nějaké kvalitnější DVD/BD určené k dlouhodobé archivaci.

Další možnost jsou LTO pásky, ale to vyjde o něco dráž a udávaná životnost bývá 50 let.

Nicméně u každé z uvedených technologií asi bude tak jako tak nutné je po třeba 30 letech přearchivovávat na něco jiného (kvůli technologickému pokroku a zastarávání současných technologií).
Zdar Max

[paul2no]

Nemyslím, že bych se utápěl v kvantitě, ale chci kromě zpracovaných a hotových fotek archivovat i původní RAW soubory.

No a například z letošní Expedice Beograd, která trvala týden mám asi 250 fotek a několik videí. Celkem asi 11 GB včetně RAWů. Je to moc?

[Peter Golis]

Štvrť stovky fotiek za týždeň je niečo ako 36 políčkový kinofilm denne. Nejak moc na dnešnú dobu to nie je. Ale z pohľadu dovolenky z čias keď digiťáky neexistovali to tiež nie málo.

Odporučil by som vybrať tie najlepšie, dať vyvolať chemickým procesom, a napchať do fyzického albumu.

[Kit]

Na to by se hodil jeden BD, jedna fleška a jako třetí pro jistotu bych použil cloud. Tři technologie, dvě lokality.

[Heron]

Je to moc?

Není. Tohle nafotím za jedno odpoledne, když chci udělat panorama. Některé projekty mají klidně 50GB v rawu.

Nemluvě o videu, lidi se strašně diví, proč někdo potřebuje 144TB storage pro osobní použití. Odpověď je triviální. Zkuste si sestříhat z třeba jen 6hodin materiálů půlhodinové video. Jen na tempy potřebujete několik TB. Protože mezivýsledky se pochopitelně ukládají nekomprimovaně (lossless). Až výsledek se možná encóduje do malého h265 2GB souboru.

Ale jak už tu někdo psal. Pokud je to takto uzavřená věc, jeden výlet, tak vypálit na placku, raději více a je to. Na toto je to, řekl bych, ideální.

[xkucf03]

Já do RAWu fotím jen něco nebo je pak promazávám, jinak bych se v tom utopil – stejně vím, že u většiny fotek nebudu mít čas si s tím hrát a „vyvolávat“ je. S videem je to podobné – zabírá spoustu místa, ale toho zajímavého, u čeho by mne fakt mrzelo o to přijít, je jen malá část.

Asi by to chtělo nějakou klasifikaci dat podle toho, jak jsou pro člověka postradatelná/vzácná a na základě toho pak zálohovat. Tzn. ty nenahraditelné věci mít ve více kopiích na různých médiích a místech, zatímco ty nahraditelné třeba jen na disku v RAIDu 1 nebo jen s jednou záložní kopií. Na tohle by se docela hodily rozšířené atributy souborů… vlastně to není tak složité, mohl bych si na to napsat skript, který by vybral soubory určité kategorie a zazálohoval je.

[Heron]

Já do RAWu fotím jen něco nebo je pak promazávám, jinak bych se v tom utopil – stejně vím, že u většiny fotek nebudu mít čas si s tím hrát a „vyvolávat“ je.

Já fotím do rawu všechno. To záleží na workflow. Nedávno jsem na žádost fotil jisté gymnastické představení a nafotil jsem přes 500 fotek. Import do lightroomu, potom si zvolím na jedné fotce základní úpravu (vyvážení bílé a alespoň nějaké základní křivky podle osvětlení a úpravu barev) a toto potom aplikuju na všechny fotky. Tím mám "automaticky vyvolané" všechny fotky během 10 minut práce. Potom si vyberu ty k dalšímu zpracování. Tj nastavím jim hodnocení (číselné skóre). Při procházení stačí stisknou příslušnou číslici na numpadu. Tím mám jedním průchodem vybrané fotky s ponechanou "automatickou úpravou" (skore 3), a ty, kterým se budu věnovat víc (skore 5) (a odpad se skore 0). No a v dalších dvou hodinách upravím těch vybraných 50 fotek. Jde to fakt rychle. Ale toto je o programu, v LightRoomu mám celé portfolio, mám k disposici všechny fotky naráz a mohu se kdykoliv podívat na úpravy z jiných akcí. Vůbec si nedovedu představit, že bych to dělal fotku po fotce. Ne, pracuje se s 500 / 50 současně. Individuální retuše se týkají skutečně jen těch několika málo.

Asi by to chtělo nějakou klasifikaci dat podle toho, jak jsou pro člověka postradatelná/vzácná a na základě toho pak zálohovat. Tzn. ty nenahraditelné věci mít ve více kopiích na různých médiích a místech, zatímco ty nahraditelné třeba jen na disku v RAIDu 1 nebo jen s jednou záložní kopií. Na tohle by se docela hodily rozšířené atributy souborů… vlastně to není tak složité, mohl bych si na to napsat skript, který by vybral soubory určité kategorie a zazálohoval je.

Já na toto mám osvědčenou metodu: bordel.

Mám asi 15 zálohovacích HDD, na které to sypu, sem tam koupím další. Kdykoliv jsem v minulosti chtěl řešit co smazat a co nechat, tak jsem vždy smazal něco, co jsem potom později chtěl mít. Takže zálohuju všechno a i když nějakou zálohu smažu jako nepotřebnou, tak díky bordelu mám celkem jistotu, že to ještě na nějakém jiném disku bude. Takto jsem byl i několikrát rád za ta stará CDR. Z živých dat jsem to smazal a o rok, dva později opět vytahovat z CD.

[Jendа]

Mnoho harddisků, v jiných počítačích i nezapojených vyndaných, a občas kontrolovat že neumřely.

[Max]

Drahé a nespolehlivé.
Než to řešit takto, to už vyjdou cenově i technicky lépe ty LTO pásky.
Zdar Max

[otasomil]

Zdravim
Pokud trvate na digitalni podobe tak bych to videl na starsi HDD v nekolika kopiich. Takove HDD cca 80 GB jsou za cenu odpadu ale stale funkcni, spolehlive. fotky do papirove podoby, uskladnit v tme a je to na veky.

[R]

Myslis, ze budu niekoho tie desiatky GB fotiek o 20 rokov zaujimat? Nebudu. Niekolko najlepsich si daj urobit na papier.

[Max]

Za 20 let by mohl autor ještě žít, takže je možné, že budou zajímat jeho. To, zda budou zajímat někoho za 100 let je otázkou, nicméně osobně si myslím, že v 99,99% případů nikoho zajímat nebudou. A to ani v případě apokalypsy za 1000 let, protože dnešní doba je teprve v rozjezdu a už je internet přesycený vším možným.
Zdar Max
PS: také by mohlo jít o kompromitující materiál, který bude časem získávát na ceně, takže by to mohlo za těch 20 let zajímat více lidí, než jen špiona paul2no
PPS: pokud máš někde foto Gotta, jak se pokecal při jedení Hambáče, tak je z finančního hlediska asi nejlepší čas to pusti ven

[paul2no]

Tak zrovna já fotím dost železnici a tramvaje, takže myslím že i za těch 100 let by to další generaci šotoušů mohlo zajímat.

V tomhle oboru jsou už dnes velmi hodnotné i fotky např. z 90. let, což přitom bylo relativně před chvílí.

[Max]

Myslím, že by se ti u nás líbilo. Já pracuji v šotoušovské firmě, ale sám šotouš nejsem.
Stává se, že si šéfíci vypravují vlastní vlaky, buď v rámci nějaké akce firmy, nebo v rámci osobních akcí (svatba apod.).
Zdar Max
PS: Mašínfírou by jsi nechtěl být? Nebo se bojíš přejíždět lidi? (myšleno vážně, kdo se nedokáže srovnat s tím, že jako mašinfíra někoho rozšmelcuje na přejezdu aj. místech, tak to dělat nemůže, score na železnici je opravdu velké)

[paul2no]

Strojvedoucího bych nechtěl/nemohl dělat z jednoho důvodu - nutnost nástupu do práce v jakoukoli denní či noční hodinu (např výjezd z depa v 4:00 nebo konec v 1:00) a nutnost okamžitého podání 100% výkonu. Na chození do práce na šestou (vstávání v 4:45/4:55) jsem si zvyknul, ale tohle bych asi nedal.

[S.]

Pokud "v domácích podmínkách" neznamená, že vše musí fyzicky zůstat pouze doma, z vlastní zkušenosti bych doporučil NAS a zálohu cenných složek do cloudu. Za pár desítek eur ročně seženete 1TB. Do Amazonu můžete zálohovat zdarma, platit budete až při obnově (stahování dat).

Vaše cenná data tak budou v PC, NASu a šifrovaná v cloudu, tedy v duchu správného zálohování. To dává prostor pro pokrytí poruchy PC/NB i NASu nebo ransomware.

[xkucf03]

Do Amazonu můžete zálohovat zdarma, platit budete až při obnově (stahování dat)

Zajímavý byznys model. Tady se přímo nabízí otázka, na čem vydělávají a co je motivuje k tomu, aby ostatním zadarmo skladovali jejich data… Pevné disky a provoz serverů nejsou zadarmo.

V lepším případě to funguje jako hazard a ten, kdo má tu smůlu, že potřebuje data obnovit, zaplatí i za všechny ostatní, kteří se vezli zadarmo. V horším případě poskytovatel nějak zpeněží data, která si u něj ostatní ukládají (přeci jen hodně lidí je asi nešifruje).

[Kit]

Data nahrávaná na Glacier ukládají na pásky, které jsou výrazně levnější. Obnova pak nějakou dobu trvá.

Zpeněžení dat bych se nebál, poškození pověsti by pro ně bylo hodně drahé.

[Gilhad]

Tak silne zalezi na zpusobu zpenezneni - vytahnout cisla karet a piny a vybrat prachy by asi PR problem byl, stejne jako zacit prodavat fotky slecny dcerusky, jak pase konicky, nebo v opalovackach pozuje pred bazenem. Ale prohnat ty fotky nejakou AI (spolecne s miliony dalsich fotek) a ziskat data podle regionu a prijmu, kdy nabizet plysove medvidky, kdy pradelko Victoria Secret a kdy slevy na pleny a kocarky - to muze prinest velmi zajimave penize z dobre cilene reklamy a vy se ani nedovite, ze se to trenovalo i na vasi rodine. Stejne jako nakupni zvyklosti, pouzivany slovnik v obchodni a soukrome korespondenci, reakce na ruzne podnety (zda ma politik radsi hladit male deti, nebo stare babicky), zda investovat do kosmetiky, automobilu, elektroniky, nebo hypotecniho bussnessu, zda prijde recese ci deprese a jak asi velka ... aby ty vysledky k necemu byly, tak potrebuji projit a korelovat strasnou spoustu dat a tady jim je lidi hrnou v primem prenosu.

Nerikam, ze delaji zrovna tohle, ale podobnych scenaru, jak zbohatnout na cizich datech, aniz by firme prokazali zproneveru, je spousta.

[Jendа]

Vždycky, když někdo napíše něco takového, tak si vzpomenu na těch 15 velkých firem, které do svého produktu přidali naprosto úmyslný backdoor + tu spoustu dalších co prostřednictvím DRM nebo naprosté nekompetence už zákazníky nějak oscamovali, a na to, co se jim asi tak stalo.

[Jendа]

On to napsal blbě, zdarma je AFAIK nahrávání ve smyslu ingress trafficu. Za skladování se platí.

[S.]

Je to tak, popletl jsem to. Platí se i za skladování.

[Gilhad]

Z fotaku do pocitace (adresare NEW), spocist kontrolni soucty, z nej na zalozni "server" s RAID5 (kdyz odejde jeden disk, tak se dopocita) a na druhy zalozni "server" opet s RAID5. Nacez jdou na pocitaci do OLD (kde se muze pripadne mazat, neb to je zalohovane) a timestamp. Kdyz udelam nejakou zmenu, jde to zase do NEW a tak dokola. Cas od casu projeti tech zaloznich serveru, zda sedi checksumy - pokud se na jednom rozejdou, postavit novy a nahrat tam spravna data ((to se mi zatim nestalo).

Kdysi jsem vypaloval na CD, ale ac byly uchovany v temnu a celkem chladnu, tak po par letech asi tretina nesla precist a na zbytku bylo bost chybnych souboru, takze jsem toto medium opustil (diskety jsem opustil uz driv, flasky se vylozene neosvedcily - klidne nektere potichu odejdou behem par mesicu a nezachranis nic)

Navic teda mam pocitac a NB, takze spousta trochu aktualniho je i tam - takze archivy na dvou mistech s raidem, poloaktualni data na 4, aktualni na 5 az 6 (OLD i NEW).

(Ten raid ma vyhodu, ze pokud odejde jeden disk, tak se tam da novy a dopocita se to, takze s trochou stesti se takhle budou disky rotovan na vecne casy. Samozrejme je SW, takze nezalezi na tom, jestli odejde zakladovka s HW radicem, pujde rozchodit na cemkoli)