Dotaz: Virtual pre storage

[Petr]

Zdravim,

Hledam virtual do ktereho si mohu nainstalovat OS jaky chci ja a pripojeny storage o kapacite rekneme do 50TB, v idealnim pripade do 200TB (chci ho sifrovat). V klidu mi staci jeden core a 4gb ram, podminkou je misto za rozumnou cenu a konektivita alespon 1mbit do internetu. Nechci zadny warez doupe, mam data ktere potrebuji mit ve vicero lokalitach. Ma nekdo nejakou cenove rozumnou zkusenost? Amazon jiz pouzivam.

Odpovědi

[Petr]

Tim virtualem myslim nejakeho poskytovatele virtualni masiny a storage prostoru...

[Petr]

Jedním megabitem tam těch 50 TB budeš cpát 12 let :)

[petr]

Tak vetsina poskytovatelu co jsem se koukal ma moznost nakopirovat data offline, 50TB se ani po gbitu nekopiruje rychle

[ES]

A az ty data budou potreba, pocka se na ne 12let? nebo se opet vemou disky do "kabely" a pojede se do DC.

Tomu se rikalo "kabelovy" prenos.

[petr]

jde jenom o to aby ty data byli nekde jeste ulozeny, na zmeny staci ten 1mbit vpohode. Kdyby nahodou ty data bylo potreba, znovu se da jet do DC a prelit je. Ano, je to neprakticke, hlavne vozit rack s diskama, ale resit a mesicne platit nevyuzitou konektivitu jenom kvuli prvotnimu a pripadne poslednimu syncu je financne narocnejsi. Pokud by nekde byla treba gigabit konektivita v cene a ta cena by byla konkurencni, tak to samozrejme vyuziju. Jak ale rikam, konektivita je nepodstatna. Nejedna se o internetovy system, jedna se o storage dat na dalsim miste, ve 2 lokalitach jiz fyzicky rack s potrebnym HW mam, kopie je i v amazonu, presto chci jeste dalsi lokalitu bez nutnosti kupovat dalsi HW.

[Max]

A smím se zeptat, kolik ten Amazon měsíčně stojí? Protože 50TB je celkem pěkný objem dat.
Zdar Max

[GeorgeWH]

podla kalkulacky cca 1330$/mesiac na povodnom type s3, 640$/mesiac na s3 infrequent access a 200$/mesiac na glacier. ale to je cisto data bez r/w operacii.

[Petr]

Jj, amazon je jenom jako zaloha, takze ty data jsou deduplikovana a komprimovana, dve ruzne lokality na dvou kontinentech na glacier. Naklady jsou dle cenniku, kolik zabira ta zaloha netusim, mam tam i jine veci.

[Vantomas]

OT: A už jste z Glacieru někdy něco obnovovali? Cenovou politiku jsem nikdy přesně nestudoval, ani to nikdy nepočítal v případě nějakého nasazení, ale v hlavě mi utkvěl článek pána, co si stěžoval, že za 60GB zaplatil $150 a jen při prostém vynásobení vychází naprosto WTF částka.

https://medium.com/@karppinen/how-i-ended-up-paying-150-for-a-single-60gb-download-from-amazon-glacier-6cb77b288c3e

[Petr]

Uz jsem obnovoval v ramci testu a vyuzil jsem free tier a druha zkusenos s obnovou me stala asi 30$. Data co mam na glacier pouziju jenom v pripade ze dalsi 3 lokality selzou. Nepredpokladam ze se to stane.

[Jendа]

Ano, je to neprakticke, hlavne vozit rack s diskama

50 TB je 12 disků (15 protože asi RAID). To je v pohodě do batohu.

[Petr]

Tech disku je podstatne vice (jsou mensi) a ano, jsou tam zfs raid-z2 a raid-z3 pole. Do batohu se to nevejde.

[Max]

Tyhle počty jsou nebezpečný . 50TB v RAID-Z3 bych poskládal sice ze 4TiB hdd,ale počet by byl :
2xpole 12x 4TiB RAID-Z3 (= 2x 9x4 = 2x 27TB = 54TB)
Výsledkem tedy je minimálně 24disků + případně jeden nebo dva jako spare.
To už má docela váhu, k tomu ještě šasi a další věci a je to věc, co v rukách sotva udržíš.
Zdar Max

[Käyttäjä 11133]

Proč by si dělal dvě RAID skupiny?

[Max]

Pokud by mi hooodně záleželo na datech, tak bych to tak udělal. Sice 4TB WD RE4 jedou jako drak a jsou spolehlivý, ale člověk nikdy neví, těch pár disků navíc člověka v takové cenové nezabije.
Zdar Max
PS: jinak mám v jobu jak NetApp (běží na tom všechny servery ve firmě), tak BSD se ZFS, kde mám jak RAID-Z2, tak i obdobu RAID10
PPS: u 50TB bych se asi možná nebál provozovat 16x 4TB + 1x spare, to je ještě únosný počet sata disků v jedné skupině

[Petr]

Ja vsadil na sas disky. Cena je pekelna, hlavne kdyz si clovek secte pocet disku a lokalit.

[Petr]

Maxi, jdes na to spravne, tech disku je vice nez 24 z duvodu navrhu. Tech poli je tam taky vicero, nejhorsi je raidz2, nejbezpecnejsi je raidz3 se 3 kopiema. vahu to ma takovou ze se s tim da jezdit jenom posunem po koleckach.

[Kandidat vied]

Este ostava moznost ze toho roku budu uvedene USB kluce o velkosti 10 TB ... :)

[R]

Na AliExpresse su uz mozno teraz.

[lertimir]

No když bych něco takového měl řešit, tak bych především si udělal kalkulaci jeslti mě podobné řešení nevyjde levněji na vlastním HW umístěném v nějakém datacentru. Ale to chce primárně procesní analůzu co se s daty bude dít. Protože když bych to poskytovoual jako službu tak si samozřejmě musím započítat jak opotřebení disku tak rozumný zisk.

[Petr]

Nasledkem takove analyzy vznikla potreba najit externiho dodavatele storage as service za urcitou cenu. Pokud nenajdu dodavatele s ocekavanymi sluzbami pod uvedenou cenu, bude dalsi HW.

[Kandidat vied]

Pouzi MEGA.co.nz. Davaju 50GB na ucet a kazdych 6 hodin trafik az do 15 GB. To znamena ze na 50TB ti bude stacit iba 1000 emailovych kont a mas to zadarmo...

[petr]

Ja to nechci zadarmo, kdybych to chtel zdarmo tak si to nahraji naxtisic gmailovych schranek. Ja hledam seriozni komercni reseni, zatim nejlepsico jsem nasel je kolem 1200$ mesicne ale nesplnuje me pozadavky na zabezpeceni dat - maji raid6 a "nejak" to spojuji do celkovyho storgae space co me nestaci jako garance ze to budou vedet obnovit.