Dotaz: Jak „zálohovat“ pod rukama?

[Petr Tomášek]

Zdravím!

Pro určité adresáře bych potřeboval provést přibližně toto:

• mít démona/program, který pravidelně (cca 10min) kontroluje obsah nějakého adresáře
• pokud najde soubory, které se v mezičase změnily, zkopíruje je někam (může být i do skrytého - „tečkového“ - podadresáře) tak, že ke jménu nějakým způsobem (nejlépe prefixem) připojí datum a čas
• toto dělá tak dlouho, dokud se daný soubor mění (tj. je editován)
• uložené mezisoubory starší řekněme 14 dní to vymaže

Poslední bod je jasný, to lze vyřešit jednoduše v cronu, ale co to ostatní? Existuje na to nějaké udělátko, příp. lze tohle nějak jednoduše ubastlit s pomocí standardních nástrojů (např. rsync, či tak nějak)? Někdo nějaký nápad.

---

---

Odpovědi

[Carth_Onasi]

Napadá mi Git, SVN nebo jiný verzovací systém a pak vše řešit v cronu.

[Jendа]

while true; do
  for i in `find "$TMPDIR" -mmin +1 -mmin -10 -type f`; do
    # mmin je tady kvůli tomu, abych nesebral soubory, do kterých je ještě zapisováno a tedy mohou být pouze částečné
    cp "$i" "$DESTDIR"/"$i".`date +%s`
  done
  sleep 5m
done

Lepší by bylo kontrolovat, že ten soubor již nemám, pomocí sha1sum `ls dir/soubor.*|tail -n 1` a porovnáním se souborem z $i.

[Petr Tomášek]

Díky, tak jsem mezitím sesmolil tohle:

#!/bin/bash
DIRS="$HOME"

for D in $DIRS;
do
 Z="$D/.auto_zaloha"
 mkdir -p "$Z"
 if test -f "$Z/.stamp" ;
 then
   rm -f $Z/.stamp.prev
   mv $Z/.stamp $Z/.stamp.prev
   touch $Z/.stamp
   DT=`date +%Y.%m.%d-%H:%M:%S`
   (
     cd $D
     find * -maxdepth 0 -type f ! -iname ".*" -size -7M -newer "$Z/.stamp.prev" -exec cp {} $Z/$DT-{} \; 
   )

   # clear files older than 15 days...
   find $Z -type f ! -iname ".*" -mtime +14 -exec rm {} \; 2>/dev/null
 else
   touch $Z/.stamp
 fi
done

Je tam pár detailů šitých na míru (velikost souboru pod 7M) atd...

[Josef Kufner]

Koukni na incrond. Ten umí poslouchat události na souborech a následně spouštět příkazy. Výhodou je, že to nežere výkon, pokud se soubory nemění a když se změní, reaguje okamžitě.

[pavlix]

Co jsem reagoval na dotazy a zkušenosti jiných, tak je incrond dost neschopný nástroj, který se nezvládá vyrovnat s tím, že předměty sledování můžou i mizet a objevovat se. Máš nějaké jiné informace?

[chrono]

Keď sa sleduje adresár a nie konkrétny súbor, tak by s tým problém nemal byť (rovnako, ako pri všetkých nástrojoch používajúcich inotify).

[pavlix]

Keď sa sleduje adresár a nie konkrétny súbor, tak by s tým problém nemal byť

To zní jakoby se adresáře nemohly vytvářet a mazat.

rovnako, ako pri všetkých nástrojoch používajúcich inotify

Problém není v inotify, nýbrž v incrond.

[PEE]

A co tohle?

http://www.ictspecialista.cz/archives/824

[pavlix]

To jsem taky našel, když se minule tenhle problém někde řešil...

[PEE]

a to nestačí?

[pavlix]

Já myslel, že na to už ses ptal :). Netuším.

[PEE]

:)))

[JimiK]

co použít rdiff-backup

[Josef Kufner]

rdiff-backup je líná herka jakmile dojde na obnovování z historie. Radši rsync a nechat ho vytvářet hardlinky do adresáře s předchozí verzí. Už dlouho se chystám na tohle přejít z rdiff-backup...

[j]

Vymejslite kolo ... pouzij fs, kterej umi delat snapy. Je to standardni reseni, co vic, melo by to zajistit i konzistentni data (protoze odkopirovanej soubor, kterej zrovna menis, je ti zcela naprd), protoze se da rict systemu/aplikacim, ze maj pozastavit zapis a ulozit konzistentni stav.

[pavlix]

protoze se da rict systemu/aplikacim, ze maj pozastavit zapis a ulozit konzistentni stav.

Jak řekneš všem aplikacím, aby uložily konzistentní stav a řekly ti, až to budou mít?

[j]

To resi OS (mel by).

[pavlix]

Tak se rozmysli. Řeší nebo by měl? A umí na to všechny běžné klíčové aplikace reagovat?

[omg]

SIGFANTASYCHECKPOINT

a inotify na /..

[Ivan]

A co pripojit NetApp pres NFS? Pokud se nemylim, tak tohle umi Wafl FS nativne.

[mrtn]

co třeba rsnapshot, i když ten dělá kopii celého adresáře, ne jen jednotlivých změněných souborů