Dotaz: Jaký rychlý levný NAS s podporou rsync?

[martin]

Ahoj ma někdo reálnou zkušenost s nějakým NAS serverem co umí standartne rsync?

Potřebuju sehnat zařízení do kterého

- se vejdou dva SATA disky (raid1)

- má Gbits síťovku

- dosahuje při kopírování reálně 100+ mbit/s

a hlavně podporuje rsync?

Děkuju za případné tipy

Odpovědi

[frr]

Těch 100 MBps je dřina i se stolním peckem. Rozhodně doporučuji mountnout datový oddíl s opšnou "noatime". Pak byste se tomu při sekvenčním zápisu (skrz FS) mohl přiblížit.

Zrovna včera jsem po dlooouhé době instaloval Debian na takovou mašinku poskládanou "co dům dal" - a docela jsem žasnul, jak snadno a přítulně se Lenny nechal nainstalovat tím textovým instalátorem (jenom to po mně chtělo znovu rozdělit disky, když už jsem to měl jednou za sebou - drobnost). Volbou "základní systém" se mi podařilo nainstalovat čistého text-mode linucha bez jakýchkoli Xkových knihoven - to je dneska docela unikát (jasně, já vim, Slackware by to asi uměl taky).

Pokud se týče kompu: poměrně levná deska Intel DG53EC (onboard Intel Gigabit), do toho nějaký Celeron 430, dva velké SATA disky na data (mirror) + vysloužilej notebookovej na systém (že jsem zmlsanej). Ve zdroji jsem snížil otáčky ventilátoru (napájení -> 5V), z boxovaného chladiče CPU jsem odmontoval původní ventilátor a nahradil jsem ho 12cm lenochodem (úplně stačí). Na všech třech discích jsem hdparmem nastavil usínání, nakonec jsem "noatime" přidal i mountpointu / . Ještě jsem příkazem "setterm" nastavil, aby se po minutě vypnula obrazovka - jestli to Linux dělá přes BIOS, s trochou štěstí to uspí i VGA subsystém integrovaný v northbridgi.

Jasně, je to sice zticha, ale pořád to za jízdy žere nějaké nízké desítky wattů (neměřil jsem). Nějaký MIPSový levný NAS se může umět uspat pod 10W. Ale zas nedá 100MBps ze sítě. Škoda že se do NASů nepustila taková Areca (mají nanejvýš iSCSI/AoE). To je výrobce, u kterého bych hledal 100 MBps out of the box. Oni se zřejmě drží své "blokové vrstvy" - mají svůj vlastní vytuněný firmware a nemusí řešit licencování "půjčeného" open-source softwaru, který by pro NAS byl patrně potřeba...

[dustin]

Souhlasím, přijde mi to nejjednodušší řešení pro takovéto výkony. RAID1 docela často používáme a rychlejší disky (Seagate 7200.12) dají sekvenční čtení/zápis (dd) běžně přes 100MB/s samy i v mirroru. Spíše bývá problém se na běžné integrované síťovce dostat nad 500Mbps, asi to chce poladit MTU a tak.

[frr]

[patologický detailismus] Je rozdíl, jestli děláte dd na holé blokové zařízení (třeba /dev/sda), nebo do souboru ve filesystému - FS jakýkoli sekvenční payload do jisté míry rozdrobí a přidá si svoje seeky na režijní data, což snižuje průchodnost. Barracuda posledních třech generací (holá = jako blokové zařízení) dá na začátku disku (při vnějším okraji) cca 100 - 150 MBps sekvenčně, při vnitřním okraji tak děleno 2 až 3. A nějakých 60-75 random IOps (náhodné seeky po celé ploše). Reálně skrz Ext3 pak bez "noatime" (tzn. access time se aktualizuje) dosáhnete třeba jenom 30 MBps při čtení - ale přidáte "noatime" a vyletí to přes 80 MBps. Jo a mirror znamená statisticky až dvojnásobný počet IOps při čtení, protože jsou k dispozici dvě hlavy, z nichž každá může seeknout jinam (zápis vyjde cca nastejno jako u jednotlivého disku). [/patologický detailismus]

[dustin]

100MBps na filesystému na dvou běžných discích mě ani nenapadlo

[kyytaM]

Integrovana nVidia nForce (pci express) s reverse-engineered driverom dava uplne v klude > 90 MB/s.

[dustin]

Při čtení jak velkých souborů na jakém FS? Při čtení blokového zařízení to samozřejmě není problém stíhat.

[Honza Vrana]

Krasny den,

No ja bych vam doporucil zamerit svuj zrak jeste misto rsyncu na lftp http://lftp.yar.ru/

Rsync je na cilove zarizeni velmi narocny protoze se na nem spusti a zatizi mu procesor pocitanim kontrolnich souctu.

Coz napriklad u meho WD My Book World Edition bylo ze jsem dokazal na sitovce mit datovej tok okolo 17Mbs(pokud me pamet neklame) pouzil jsem lftp kterej dela jednoduchou sysnchronizaci pomoci FTP protokolu. A na gigove siti delam bezne 150Mbs

Rychlosti jsou mereny iftopem na sitovce ntb.

Honza Vrana

[a1bert]

no a ja bych zase nic nedoporucoval, protoze nevim co presne bude tazatel prenaset ;) kazdopadne i rsync lze pouzit bez kontrolnich souctu a o prenosu rozhodovat jen podle velikosti a data modifikace souboru....

[martin]

Tazatel to bude pouzivat na zalohovani nekolika serveru v internetu s radove 1-5 miliony souboru. (prirustky ale v max desitkach MB denne) Je to zalohovadlo zalozni a pro jistotu. Zalohuje se jeste jinak.

Ted mi to bezi doma na starem notebooku, ktery mi dneska nechtel po vypnuti nastartovat. Pro zajimavost je to nejaka sunka s PentiumM 1,7Ghz, 120Gb diskem a nejakou historickou fedorou. S vypnutym LCD a zaplym diskem si to bere kontinualne 13W a na 100Mbits rozhrani zvlada pres ssh kopirovat rychlosti 10-11Mbyte/s coz je pomerne hezke. Proto bych rad reseni, ktere je generacne lepsi (proto 1Gbits), jistejsi (proto ten raid1) a pohodlnejsi (proto nejaky instatni NAS)

Uvazoval jsem o necem s Atomem, ale ten je imho pomalejsi nez to me soucasne PentiumM. Nerad bych skoncil, tak ze obrecim RAID1 a budu behat po Alze s wattmetrem kolem levnych notebooku(ja vim asi by se mnou vybehli)

Takze asi tak..proste nevim jak na to :/

[frr]

Hehe... uplně náhodou mi zrovna přišel SPAM od německého distributora CTT, který prodává QNAP. Tahle značka se dá samozřejmě koupit i tady. Třeba takovej QNAP TS259 Pro+ má podle mého přesně požadované parametry.

http://www.qnap.com/pro_detail_feature.asp?p_id=161

[frr]

rsync -W

[maddoxik]

Mám doma etrayz a celkem spokojenost. Běží na tom linux, rychlost přes nfs okolo 14MB/s s RAID 1, samba je pomalejší - do 10MB/s. Nedávno vyšel nový firmware, tak je možný že ty hodnoty budou zasejc lepčí:) rsync by na tom taky mohl běžět (nemám ozkoušeno).

Jediný co, tak to má hlučnější větráček a nedá se u toho spát. Někde na netu jsem už ale zahlídnul, že se to dá poladit:)