abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
včera 17:25 | IT novinky

Do prodeje (Farnell) se dostal jednodeskový počítač Tinker Board (unboxing). Jedná se o konkurenci Raspberry Pi 3 od společnosti Asus. Porovnání (jpg) těchto počítačů například na CNXSoft. Cena Tinker Boardu je 55 £.

Ladislav Hagara | Komentářů: 7
včera 14:44 | Zajímavý projekt

Byla zveřejněna pravidla hackerské soutěže Pwn2Own 2017, jež proběhne od 15. do 17. března v rámci bezpečnostní konference CanSecWes ve Vancouveru. Soutěžit se bude o více než milion dolarů v pěti kategoriích. Letos se bude útočit i na Ubuntu. Jedná se již o 10. ročník této soutěže.

Ladislav Hagara | Komentářů: 1
včera 13:33 | Nová verze

Po sedmi měsících vývoje od vydání verze 5.7 byla vydána verze 5.8 (YouTube) toolkitu Qt. Z novinek lze zmínit například Qt Lite pro vestavěná zařízení. Nově jsou plně podporovány moduly Qt Wayland Compositor (YouTube) a Qt SCXML (YouTube). Současně byla vydána verze 4.2.1 integrovaného vývojového prostředí (IDE) Qt Creator.

Ladislav Hagara | Komentářů: 1
včera 11:52 | Pozvánky

Lednový Prague Containers Meetup se koná ve čtvrtek 26. ledna 2017 od 18:00 v Apiary, Pernerova 49, Praha 8. Přijďte se podívat na přednášky o Enterprise Kubernetes a Jenkins as a code.

little-drunk-jesus | Komentářů: 0
včera 11:40 | Pozvánky

Program letošního ročníku konference Prague PostgreSQL Developer Days, která se koná již 15. a 16. února 2017 na ČVUT FIT, Thákurova 9, Praha 6, byl dnes zveřejněn. Najdete ho na stránkách konference včetně anotací přednášek a školení. Registrace na konferenci bude otevřena zítra (24. ledna) v brzkých odpoledních hodinách.

TomasVondra | Komentářů: 0
22.1. 02:20 | Zajímavý článek

David Revoy, autor open source webového komiksu Pepper&Carrot nebo portrétu GNU/Linuxu, upozorňuje na svém blogu, že nový Inkscape 0.92 rozbíjí dokumenty vytvořené v předchozích verzích Inkscape. Problém by měl být vyřešen v Inkscape 0.92.2 [reddit].

Ladislav Hagara | Komentářů: 0
22.1. 02:02 | Komunita

Øyvind Kolås, hlavní vývojář grafických knihoven GEGL a babl, které využívá grafický program GIMP, žádá o podporu na Patreonu. Díky ní bude moci pracovat na vývoji na plný úvazek. Milník 1000 $, který by stačil na holé přežití, se již téměř podařilo vybrat, dalším cílem je dosažení 2500 $, které mu umožní běžně fungovat ve společnosti.

xkomczax | Komentářů: 12
21.1. 23:54 | Pozvánky

DevConf.cz 2017, již devátý ročník jedné z největších akcí zaměřených na Linux a open source ve střední Evropě, proběhne od pátku 27. ledna do neděle 29. ledna v prostorách Fakulty informačních technologií Vysokého učení technického v Brně. Na programu je celá řada zajímavých přednášek a workshopů. Letos je povinná registrace.

Ladislav Hagara | Komentářů: 0
21.1. 22:11 | Nová verze

Byla vydána verze 1.0.0 emulátoru terminálu Terminology postaveného nad EFL (Enlightenment Foundation Libraries). Přehled novinek v poznámkách k vydání.

Ladislav Hagara | Komentářů: 0
20.1. 17:00 | Nová verze

Byl vydán Docker 1.13. Přehled novinek na YouTube a v poznámkách k vydání na GitHubu. Docker umožňuje běh aplikací v softwarových kontejnerech (Wikipedia).

Ladislav Hagara | Komentářů: 7
Jak se stavíte k trendu ztenčování přenosných zařízení (smartphony, notebooky)?
 (11%)
 (2%)
 (73%)
 (3%)
 (10%)
Celkem 387 hlasů
 Komentářů: 31, poslední včera 19:19
Rozcestník
Reklama

Dotaz: Dva NASy, dve lokality, pomala linka a externi disk

13.6.2014 20:49 petrfm
Dva NASy, dve lokality, pomala linka a externi disk
Přečteno: 367×

Ahoj, kuriozni problem, ktery ma mozna snadne reseni. Mam dva nasy v ruznych lokalitach, na kterych bych mel rad stejny obsah. Fungovalo by to zaroven jako zaloha v jine geograficke lokalite. Jeden NAS je doma, druhy v praci.

V praci mam rychlou linku, takze stahuju hudbu, filmy, fotky, nekdy tam stahuju videa z kamery, atd.

Doma bude taky NAS s linuxem, ale hooodne pomala linka - wifi, jen cca 4Mb/s, takze nehrozi ty rozdily tahat po netu.

Jak synchronizovat ty dva NASy, aby mely stejny obsah? Rad bych jednou za cas (1x tydne) pripojil 1TB externi disk a udelal ten prenos offline. Napadlo mne, linkovat novinky do slozky - ZALOHOVAT a pak je jen mezi sebou zkopirovat, proste nahrat na druhy NAS.

Jenomze to je pakarna a bude mne to bavit 2x, navic kdo ma furt delat ty symlinky a pak je mazat, atd. Proto by to chtelo chytrejsi reseni, automaticke, nejakym zalohovacim nastrojem, ktery by si vyexportoval seznam souboru a jednoduse by mi po pripojeni disku nakopiroval to, co se lisi od obsahu druheho NASu. Pak bych ten disk vzal, pripojil k druhemu nasu, ten by si SAM nasel nove soubory a ulozil je do slozek.

Uplne idealni by bylo, kdyby to dokazalo treba male zmeny <1GB synchronizovat samo, pres net a vetsi soubory nachystat na prenos pres disk.

Resili jste nekdy takovou situaci? jak a cim?

Odpovědi

13.6.2014 21:50 NN
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Obycejny rsync a rozdilove kopirovani?
13.6.2014 22:11 petrfm
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk

Tomu bych rozumel, kdybych ty data posilal po siti. Ale jak to dostat na externi disk a potom z nej na cilovem nasu ty rozdily nacist?

Tohle asi moc lidi neresi, ani google moc neporadil :-( Dalsi reseni by bylo, mit 1:1 kopii na tom externim disku. Jenze NAS by mel mit 4TB a externi disk jen 1TB - cili potreboval bych, aby to skutecne ukladalo jen rozdily a aby si to idealne porovnavalo ty soubory budto primym spojenim mezi temi nasyy - to by slo zaridit, nebo pomoci nejakeho souboru, ulozeneho na webu.

13.6.2014 22:34 pavele
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
unison
13.6.2014 23:40 dustin | skóre: 60 | blog: dustin
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Přesně tak, unison zvládá synchronizovat i po docela pomalých linkách, používáme je pro tyto účely spoustu let. Je i překvapivě rychlý, stovky GB mezi souborovými servery na filiálkách synchronizujeme každých 10 minut a stíhá (samozřejmě změny jsou v běžném rozsahu kancelářských souborů a trochu videí). Jen je potřeba sledovat jeho logy a ručně řešit případné konflikty.
14.6.2014 08:48 NN
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Odkdy funguje rsync pouze po siti?
13.6.2014 23:17 Jan Kratochvíl | skóre: 12
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Já bych to řešil rsyncem, nějak bych omezil rychlost (shaper), aby ti to nezabilo tu wifinu a i kdybys to jel na 1Mbit, tak za tejden to přenese 60Giga...
16.6.2014 09:48 chsajarsa | skóre: 16 | blog: V_hlouby_destneho_pralesa | Lovosice(Praha)
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
rsync ma prepinac --bwlimit na omezeni rychlosti i v sobe. Tento prepinac funguje i pokud pustite rsync jako daemona.
~ QED ~
16.6.2014 11:46 petrfm
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk

Mozna by to bylo reseni. Dokaze si to ale poradit s vypadky site? Navazat samo spojeni, atd? Ta wifi je fakt dost nestabilni, nekdy to jede, nekdy ne, nekdy to vypadne uplne a to posledni, co bych chtel delat, neustale nahazovat spojeni na nejakem zalohovacim bazmeku.

Jinak je fakt, ze kdyby se to nastavilo trvale, s tim, ze by to v noci, treba od 1-6h prikourilo rychlost na 4Mb, tak by to mozna i stacilo. Velke zmeny bych si pamatoval / ukladal rucne do nejakeho extra adresare a prenasel na disku no a ty male zmeny by se kopirovaly samy.

Rychlost jsem v nejhorsim schopny omezit na routeru - bude na obou bodech mikrotik.

16.6.2014 12:47 dustin | skóre: 60 | blog: dustin
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Díval ses na ten unison? Ten je přímo určen k oboustranné synchronizaci velkých úložisť, udržuje si na obou stranách databázi o svých souborech. S rsyncem budeš bojovat, protože není primárně určený pro oboustranné změny. Jinak unison pro vlastní přenos změn používá algoritmus rsyncu, takže je to stejně efektivní.

Tenhle skript spouštíme na jedné straně v cronu:

if ! pkill -0 -x unison; then
	# unison nebezi
	# odstranime pripadne zamky
	rm -f /root/.unison/lk*
	/usr/bin/unison -ignore "Name Thumbs.db" -group -contactquietly -xferbycopying -rsync  -batch   /var/data/share/ ssh://remote.adresa.cz//srv/samba/share/  2>&1 | tee -a /root/sync.log | egrep -i '<-\?->|failed:|has been modified' | grep -vi '^props'
fi
Je samozřejmě potřeba, aby se root přihlásil přes ssh pod rootem na druhé straně klíčema. Nemusí to běžet pod rootem, pokud nepotřebuješ nastavovat i práva (což mi potřebujeme). Nejlépe přes nějakou vpnku, pak lze místo ssh volat nešifrovaný unison server rovnou po síti a je to možná i trochu rychlejší. Tutoriál např. http://www.markus-gattol.name/ws/unison.html

Omezení přenášeného pásma pomocí trickle např. http://pauldreik.blogspot.cz/2012/08/bandwidth-limit-ssh.html
16.6.2014 14:09 petrfm
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk

VPNka tam jede, asi bych nelajznul pustit SSH na verejne IP. Nemam tam defakto nic pristupneho z venku, mimo 80tky a te VPNky. Cili bych si asi vytvoril extra konto jen pro ten nas.

Jak rikam, na obou stranach bude mikrotik, takze mozna bude jednodussi omezovat rychlost na nem. (da se defakto priskrtit konkretni ucet na VPNce) navic to pujde jednoduse merit, zobrazovat v grafu, apod.

Jinak na unison jsem koukal a ano, asi pujdu do nej.

16.6.2014 15:05 zly clovek
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Tahleta obava poustet SSH ne verejne IP adrese je dost komicka. Zvlaste, kdyz tam bezi neco urcite okamzite zaplatovane na portu 80. Nebojite se treba, ze nekdo umi poslat takova data, ze pri prutoku skrz AX procesor zesili, nenapadne vybehne zadem bedny a ukousne obsluze p..el?
16.6.2014 15:13 dustin | skóre: 60 | blog: dustin
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
OK. Při komunikaci přes vpn (tedy již šifrované) se mi osvědčilo přes (x)inetd spouštět unison --server (např. http://www.cis.upenn.edu/~bcpierce/unison/download/resources/xinetd-chroot-howto.txt ), místo dalšího šifrovaného spojení v rámci vpnky přes ssh. Samozřejmě to pak chce ten port firewallem omezit na IP adresu primárního serveru atd...
15.6.2014 23:55 kdave
Rozbalit Rozbalit vše Re: Dva NASy, dve lokality, pomala linka a externi disk
Na to by se dal pouzit btrfs send/receive, ten umi ulozit seznam zmen mezi dvema stavy filesystemu (zaznamenanymi jako snapshot) tak, aby se jeho aplikaci na cilovem filesystemu dostahlo stejneho obsahu. A ten seznam zmen je binarni stream, da se ulozit do souboru (i kdyz se spis casteji pouziva pres pipe/sit).

Po prvnim prenosu, kdy je potreba prenest v podstate cely filesystem, se uz pocitaji jen inkrementalni zmeny. Na zdroji i cili je potreba vzdy udrzovat alespon posledni snapshot. Pri prenosu se udela snapshot soucasneho stavu, mezi nimi se udela send. Na cili se provede receive, coz vyrobi snapshot se stejnym obsahem jako ma zdroj. Po prenosu se muzou stare snapshoty smazat.

Nevim, jestli je na to nejaky hotovy tool, ale neni to nic sloziteho na naskriptovani.

Predpoklada to pouziti btrfs (nebo zfs, umi totez, nezkousel jsem), coz muze byt problem s prekonvertovanim dat z jineho filesystemu, kdyz pominu otazky stability a neduvery k novemu filesystemu.

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.