Zálohovanie na Amazon Glacier pomocou taru

29.8.2012 00:41 | Přečteno: 828× | poslední úprava: 30.8.2012 12:05

Zatiaľ neotestované (proof of concept), ale teoreticky by to fungovať malo.

Status quo sú denné nešifrované backupy robené pomocou rdiff-backupu na externý disk. Predstava je rozdeliť (vzhľadom na model platieb služby Amazon Glacier, ale i praktičnosť prípadného restoru) tieto zálohy na mnoho tar súborov (multi-volume tar), každý súbor pred odoslaním skomprimovať, zašifrovať a po odoslaní vymazať (kvôli šetreniu miesta na disku).

Vytvoril som súbor /bin/glacier-helper.sh s nasledovným obsahom:

#!/bin/bash
echo "Now processing $TAR_ARCHIVE.."
sequence=$(echo $TAR_ARCHIVE | sed 's/archive0*\([0-9]*\)\.tar/\1/')
echo "Contents of tar file with index $sequence (${TAR_ARCHIVE})" >> list.files
tar tvf ${TAR_ARCHIVE} 2>/dev/null >> list.files
gzip -9 "${TAR_ARCHIVE}"
#gnupg "${TAR_ARCHIVE}".gz
glaciercmd.py upload myvault "${TAR_ARCHIVE}".gz &>>glacier.log && rm "${TAR_ARCHIVE}".gz
printf 'archive%05d.tar' $((sequence+1)) >&${TAR_FD}

Potom napr. pre 10MB archívy (pred komprimáciou) spustiť:

tar -M -L 10240 -F /bin/glacier-helper.sh -cf archive00001.tar /my/rdiff-backups

Posledný súbor treba spracovať manuálne, keďže helper skript sa spúšťa len vtedy, keď je potrebná výmena pásky.

Pri obnove časti archívu zistiť názvy potrebných tar-fileov zo súboru list.files a tar -xvf ...

Ak máte niekto nejaký iný/lepší nápad, prosím komentujte.        

Komentáře