abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×

včera 16:55 | Nová verze

Byla vydána verze 1.0 klienta F-Droid určeného pro instalaci aplikací do Androidu ze softwarového repozitáře F-Droid (Wikipedie), alternativy k Google Play, nabízející pouze svobodný a otevřený software. Podrobnosti v přehledu změn [Hacker News].

Ladislav Hagara | Komentářů: 5
včera 00:55 | Nová verze

Po téměř 13 měsících vývoje od verze 0.11.0 byla vydána verze 0.12.0 hardwarově nenáročného desktopového prostředí LXQt (Lightweight Qt Desktop Environment, Wikipedie) vzniklého sloučením projektů Razor-qt a LXDE. Přehled novinek v příspěvku na blogu.

Ladislav Hagara | Komentářů: 9
21.10. 12:33 | Zajímavý software

Článek ne Medium představuje nejnovější stabilní verzi 2.0 svobodné decentralizované mikroblogovací platformy a sociální sítě podobné Twitteru Mastodon (Wikipedie). Detailní přehled novinek na GitHubu [Hacker News].

Ladislav Hagara | Komentářů: 0
21.10. 06:00 | Komunita

V Praze na půdě Elektrotechnické fakulty ČVUT dnes probíhá RT-Summit 2017 – setkání vývojářů linuxového jádra a uživatelů jeho real-time verze označované jako preempt-rt. Přednášky lze sledovat online na YouTube.

Ladislav Hagara | Komentářů: 0
20.10. 14:33 | Zajímavý projekt

Blender Animation Studio zveřejnilo první epizodu z připravovaného animovaného seriálu The Daily Dweebs o domácím mazlíčkovi jménem Dixey. Ke zhlédnutí také ve 3D s rozlišením 8K.

Ladislav Hagara | Komentářů: 0
20.10. 12:34 | Komunita

Aktualizovanou počítačovou hru Warhammer 40,000: Dawn of War III v ceně 39,99 eur běžící také na Linuxu lze o víkendu na Steamu hrát zdarma a případně ještě v pondělí koupit s 50% slevou. Do soboty 19:00 lze na Humble Bundle získat zdarma Steam klíč k počítačové hře Sid Meier's Civilization® III v ceně 4,99 eur běžící také ve Wine.

Ladislav Hagara | Komentářů: 0
20.10. 00:22 | Nasazení Linuxu

Společnost Samsung oznámila, že skrze dokovací stanici DeX a aplikaci Linux on Galaxy bude možno na Samsung Galaxy S8 a S8+ a Galaxy Note 8 provozovat Linux. Distribuce nebyly blíže upřesněny.

Phantom Alien | Komentářů: 19
19.10. 23:55 | Komunita

Společnost Purism na svém blogu oznámila, že její notebooky Librem jsou nově dodávány se zrušeným (neutralized and disabled) Intel Management Engine (ME). Aktualizací corebootu na již prodaných noteboocích lze Management Engine také zrušit. Více v podrobném článku.

Ladislav Hagara | Komentářů: 2
19.10. 21:44 | Nová verze

Organizace Apache Software Foundation (ASF) na svém blogu slaví páté výročí kancelářského balíku Apache OpenOffice jako jejího Top-Level projektu. Při této příležitosti byl vydán Apache OpenOffice 4.1.4 (AOO 4.1.4). Podrobnosti v poznámkách k vydání. Dlouhé čekání na novou verzi tak skončilo.

Ladislav Hagara | Komentářů: 8
19.10. 19:22 | Pozvánky

Již příští týden - 26. a 27. října se v Praze v hotelu Olšanka odehraje OpenWRT Summit. Na webu konference naleznete program a možnost zakoupení lístků - ty stojí 55 dolarů. Čtvrtek bude přednáškový a v pátek se budou odehrávat převážně workshopy a meetingy.

Miška | Komentářů: 1
Jak se vás potenciálně dotkne trend odstraňování analogového audio konektoru typu 3,5mm jack z „chytrých telefonů“?
 (10%)
 (0%)
 (0%)
 (1%)
 (75%)
 (13%)
Celkem 206 hlasů
 Komentářů: 8, poslední včera 23:02
    Rozcestník

    Databáze přes NFS

    16. 4. 2010 | Marek Stopka | Sítě | 5905×

    Stále vyšší tlak zákazníků na cenu, dostupnost a kvalitu vede společnosti k implementaci různých řešení. Fibre Channel sítě jsou drahé, vyžadují více kvalifikovaných lidí (málo administrátorů ethernetových sítí má znalosti o FC fabric) a vybudování separátní storage sítě (či dokonce použití produkční nebo záložní sítě k přenosu storage dat) může poskytnout mnoho úspor.

    Obsah

    Mám nějaké zkušenosti s implementací databázových systémů po NFS (převážně SAP nad Oracle databází, nicméně i jiné), a proto bych se s vámi o ně chtěl podělit.

    Proč centralizové uložiště?

    link

    V „domácím“ prostředí, kde se pro databáze používá DAS (Direct Attached Storage), dokáže spolehlivé centralizované úložiště přinést mnoho výhod, centralizaci úložných kapacit, zjednodušené kapacitní plánování, zjednodušenou údržbu a vyšší výkon. Na druhou stranu samozřejmě centralizované úložiště přináší nový single point of failure (bod selhání); pokud přijdete o síťové připojení k úložišti, nebo dokonce o celé úložiště, máte problém. Proto je při návrhu úložného systému potřeba dbát na patřičný redundantní návrh, například se inspirovat návrhem Zdeňka Burdy, případně se obrátit na nějakého spolehlivého distributora úložných řešení.

    Proč ne FC/SAN?

    link

    Peníze, flexibilita a ještě jednou peníze, to je cena za použití FC/SAN centralizovaného storage řešení. SAN (Storage Attached Network) infrastruktura nabídne skvělý výkon, nicméně náklady na její vybudování jsou vysoké (jen takové jedno FC HBA stojí 10 000, ale potřebujete dvě, protože si nemůžete dovolit ztratit přístup ke svému úložišti jen kvůli závadě na HBA, a kvalitní FC fabric switche jsou dražší než kvalitní ethernetové switche). Stejně tak vysoké jsou i náklady na údržbu takovéto sítě. Jak již jsem uvedl v úvodu článku, pro správu FC fabric potřebujete většinou další lidi, protože běžní síťoví administrátoři nemají o FC sítích potuchy.

    Prostě vysoká spolehlivost něco stojí a ne každý si to může/chce v dnešní době dovolit. Navíc za stejnou cenu, za kterou dokážete vybudovat FC/SAN síť, dokážete také vybudovat vysoce spolehlivou ethernetovou síť se srovnatelným výkonem, kterou navíc můžete použít i na něco více než jen storage traffic. Používat jako centralizované úložiště něco na bázi FC/SAN je mimo finanční možnosti většiny malých společností, přestože by jim centralizace úložných kapacit pro jejich data velice prospěla.

    Proč NFS?

    link

    Důvod, proč byl zvolen protokol NFS, je poměrně prostý: NFS je protokol jednoduchý na implementaci a podporují jej všichni vendoři podnikového NAS (Network Attached Storage) hardwaru. Jedná se také o léty ověřený protokol, který na druhou stranu umí v ledasčem zklamat a překvapit. Stejně jako každý nástroj i tento by se měl používat s rozvahou. V prostředí malých společností je NFS (případně iSCSI) asi jediná možnost, kterou se společnost může vydat v případě, že by chtěla své úložné kapacity centralizovat.

    V podnikovém prostředí se však cestou NFS vydávají také a mnohdy jej preferují oproti Fibre Channel SAN (Storage Attached Network), i když už mají SAN infrastrukturu vybudovanou. Nemají zatím dostatečnou důvěru v FCoE a investiční náklady do 8Gb/s FC fabric by byly obrovské, proto si je chtějí odpustit alespoň pro ty méně kritické systémy. Ať už jsou důvody jakékoli, děje se to, a proto by byla škoda o tom nic nevědět.

    Jmenuji se Network File System, těší mě

    link

    NFSv1 a NFSv2

    link

    Protokol NFS vyvinula společnost Sun Microsystems v roce 1984, aby umožnila uživatelům přístup k datům na síťovém úložišti stejným způsobem, jakým k nim přistupují v případě lokálních disků. První verze NFSv1 nikdy nespatřila světlo světa mimo Sun Microsystems, sloužila pouze k interním experimentálním účelům. Druhá verze NFS – NFSv2 se objevila v březnu 1984 v podobě RFC 1094 a na transportní vrstvě podporovala jen UDP (User Datagram Protocol) – fungovala tedy zcela bezstavově. Stejně tak maximální velikost souboru byla 2^31 bytů (používal se signed 32 bit offset), tedy 2 GB a maximální velikost READ/WRITE operace byla 8 kB.

    NFSv3

    link

    NFSv3 přišla na svět v červnu roku 1995 v podobě RFC 1813 a novinkou byla podpora větší velikosti souborů (offset je nyní unsigned 64 bit int) a velikost největšího souboru tak (pokud se spokojíme s 2^64) nyní záleží na serveru a na tom, jaký používá souborový systém. NFSv3 také přichází s podporou asynchronních zápisů na straně serverů, což zvyšuje výkon při zápisu. Nejdůležitější změna však byla pravděpodobně podpora pro protokol TCP na transportní vrstvě. Tímto začalo být možné NFSv3 více používat i například v prostředí sítí WAN (Wide Area Network). Nicméně, dovolil bych si podotknout, že někteří distributoři nabídli podporu pro TCP i pro NFSv2, nikoliv však SUN, ten přidal podporu pro TCP u NFSv2 až s přidáním podpory pro TCP s NFSv3.

    Protokol NFSv3 je v současné době pravděpodobnější nejpoužívanější implementace NFS. A to i v případě databázových aplikací, přestože se stále jedná o bezstavový protokol (i nad stavovou transportní vrstvou TCP).

    NFSv4

    link

    V listopadu 2000 byl představen protokol NFS ve své čtvrté verzi, a to v podobě RFC 3010, který byl následně revidován v dubnu 2003 prostřednictvím RFC 3530. Jeho vývoj byl značně ovlivněn existencí jiných síťových protokolů, jako je CIFS (Common Internet File System) od Microsoftu (který na Linuxu implementuje projekt SAMBA). NSFv4 je první verze, kterou vydala Internet Engineering Task Force, poté co ji SUN předal kontrolu nad protokolem. V této verzi NFS může být protokol již plně stavový. Nicméně ještě nedávno většina implementací NFSv4 nebyla zrovna… no, spolehlivá. Nicméně časy se mění a NFSv4 vidím jako budoucnost pro databázové i jiné aplikace, které vyžadují dobrý poměr cena/(výkon+spolehlivost).

    Co na to distributoři databází?

    link

    Minimálně společnost Oracle si uvědomuje význam NFS v databázových prostředích, a proto je ve verzi Oracle 11g k dispozici vlastní implementace Oracle DirectNFS (dNFS), ostatně tento přístup je pro Oracle běžný. Když byla důležitá správa paměti, Oracle šel na to cestou „tak mi dejte stránky paměti a já se o ně budu starat sám“. Nyní, když je důležitý výkon NFS, Oracle chce čistý TCP/IP socket, on už se o vygenerování optimálního NFS requestu postará sám. Ostatní databáze tuto myšlenku až tak nepodporují, nicméně většina z nich umí více či méně dobře po NFS fungovat.

    Oracle DirectNFS (dNFS)

    link

    Důvodů pro vývoj Direct NFS bylo několik, předně se instalace databáze Oracle s NFS začaly rozšiřovat, na což musel Oracle nějak zareagovat. Jeden z problémů při použití kernelového NFS je, že spousta administrátorů neví, jak vlastně NFS pro dobrý výkon v databázových aplikacích nastavit, což vede k nežádoucímu dopadu na výkon i spolehlivost. Dále pak neuspokojivá implementace NFS ve Windows a odstranění dvojitého cachování dat. Při použití kernelového NFS dochází ke cachování informací jak v prostoru kernelu, tak v uživatelském prostoru v samotné databázi. Pokud je NFS a databáze více provázaná, k dvojitému cachování již nedochází, což vám umožňuje dát databázi k dispozici více paměti.

    Konfigurace dNFS se ukládá v souboru $ORACLE_HOME/dbs/oranfstab nebo si ji dNFS umí načíst přímo ze souboru /etc/mtab. Syntaxe konfiguračního souboru oranfstab je následující:

    server: jméno serveru
    path: první ip adresa/fqdn
    path: druhá ip adresa/fqdn
    export: /vol/oradata mount: /mnt/oradata
    

    Položka server určuje jméno serveru, položky path určují, na kterých IP adresách je možné daný server najít. dNFS umí i bez využití bondingu/port allocation/etherchannelu využít více redundantních linek k přístupu ke storage systému a zvýšit tak síťovou propustnost. Takovýchto cest ke storage systému můžete mít až 4 – slouží jak pro zvýšení výkonu, tak ke zvýšení odolnosti proti výpadkům (za předpokladu dobrého síťového návrhu). Položka export určuje zdrojovou cestu, položka mount ji doplňuje o cíl, kam má být zdroj v hierarchii souborového systému připojen.

    Ve výchozí konfiguraci není Oracle Direct NFS zapnuto, jeho zapnutí provedete jednoduše pomocí příkazů:

    cd $ORACLE_HOME/lib
    mv libodm11.so libodm11.so_stub
    ln -s libnfsodm11.so libodm11.so
    

    Více podrobných informací, včetně výkonnostních benchmarků, naleznete v Oracle Whitepaper – Oracle Database 11g Direct NFS Client (PDF).

    Příště

    link

    V dokončení článku popíšu postřehy z implementace databáze Oracle přes NFS.

           

    Hodnocení: 67 %

            špatnédobré        

    Nástroje: Tisk bez diskuse

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    Komentáře

    Vložit další komentář

    16.4.2010 06:22 Ondřej Surý | skóre: 14
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    No to je fujtajfl. Proc misto FC nepouzit iSCSI? Podle me je NFS na ukladani souboru databaze naprosto nevhodne, coz jde IMHO videt i z toho, ze Oracle obchazi klientskou implementaci a masti sito sami (pravdepodobne proto, ze NFS pouzivaji nejakym specifickym zpusobem, aby zajistili synchronizaci dat).
    Nehledejte zlý úmysl tam, kde je dostatečným vysvětlením hloupost.
    okbob avatar 16.4.2010 07:24 okbob | skóre: 30 | blog: systemakuv_blog | Benešov
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Minimálně pro PostgreSQL se NFS nedoporučuje - pokud někdo nechce přijít o data.
    16.4.2010 07:42 danysek
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Pripadne existuji (draft) standardy a implementace FC over ethernet ... napr. www.open-fcoe.org.
    Marek Stopka avatar 16.4.2010 09:36 Marek Stopka | skóre: 57 | blog: Paranoidní blog | London, United Kingdom
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    FCoE už není draft, ale jak dlouho, že? :)
    18.4.2010 21:14 Andrej
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Preco miesto FC nepouzit iSCSI? Jeden dovod ma napada hned - iSCSI = block device, NFS = file sharing. Takze ak chcem vyuzit vyhodu zdielaneho uloziska pre N Oracle serverov a nechcem konfiguraciu komplikovat uloziskom typu Oracle ASM (mimochodom jediny certifikovany clusterfilesystem v pripade 2 nodoveho RAC clustra s licenciou Standard Edition) a samozrejme Oracle Clusterware (ASM vyzaduje beziace Cluster Synchronization Services), NFS mi pripada ako velmi jednoduche riesenie.
    16.4.2010 07:38 Xerces
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Moje první reakce byla WTF!? A snad proto jsem se pustil do čtení. Ale každopádně článek mi příjde zajímavej. Alespoň je vidět, že cesty boží jsou nevyspytatelný a praxe je holt praxe. :-)
    16.4.2010 07:56 pasmen | skóre: 45 | blog: glob | Praha
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Pro Oracle starší než 11g to není? Já jen že jsem ještě neviděl SAP nad 11g...
    Marek Stopka avatar 16.4.2010 09:36 Marek Stopka | skóre: 57 | blog: Paranoidní blog | London, United Kingdom
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Ne, pro starší než 11g to není, ale to přece neznamená, že nemůžeš použít kernelové NFS, že... ;-)
    16.4.2010 12:16 miky
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    No, vzhledem k tomu, ze Oracle 9i a 10g ma pri pouziti NFS problemy docela problemy pri zalohovani (recovery database pres rman na NFS vetsinou nedopadne dobre - a bohuzel to chovani neni moc deterministicke), takze bych s NFS byl hooodne opatrnej. Osobne si myslim, ze iSCSI je mnohonasobne vhodnejsi nez NFS a jeho implementace funguje dobre. A z osobni zkusenosti vim, ze cokoliv Oracle nasadi jako zhavou novinku, tak to zacne fungovat az v dalsi verzi (rman, streams ...).
    16.4.2010 13:46 Ivan
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    jj, rman a NFS je dobre leda tak na odzkouseni si disaster recovery scenaru :)
    16.4.2010 13:44 Ivan
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Pro starsi Oracle muzete pouzit kernel NFS, ale: musite ho namountovat s flagy ktere jsou pro Oracle dulezite. Mezi nimi je i noac, ktery hodne degraduje vykon. Abyste ale mohli pouzit NFS jako uloziste musite musime mit "certifikovany" NFS server. A NFS server implementovany v linux kernelu certifikovany neni. Takze si ten NetApp stejne musite koupit.
    16.4.2010 16:21 xobot
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    ani ja, ale od 31.3. 2010 je oficialna podpora SAPu pre Oracle 11.2 (UNIX/linux).
    Ostatne OS do konca roka 2010.

    BTW: Oracle predlzilo support 10.2-ky do konca jula/cervence(?) 2011. Viac v note 1339724
    16.4.2010 17:02 pasmen | skóre: 45 | blog: glob | Praha
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    OK dík. Navíc jsem se dočetl (1398634) že 11g je podporována i pro R/3 kernel 6.40. To jsem teda netušil, měl jsem za to že max. 10gR2.
    16.4.2010 08:49 mrak
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Zajimavy posun neb myslim, ze predchozi verze Oracle nechteli mit s daty ulozenymi na nfs nic spolecneho(aspon co se podporovanych konfiguraci tyce).

    No ale vetsinou kdyz mate na Oracle, tak mate i na ty FC legrace okolo.
    16.4.2010 09:01 nazdarek
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    http://www.gluster.com/ (glusterfs)
    16.4.2010 17:37 snajpa | skóre: 20 | blog: snajpuv_blocek | Brno
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Má s tím někdo zkušenost? Hlavně co se děje při výpadku master nodů - jestli se to nerozpadá a funguje to spolehlivě?
    --- vpsFree.cz --- Virtuální servery svobodně
    16.4.2010 09:08 Peppa1
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    IMHO malá firma nepotřebuje rozsáhlou FC infrastrukturu. Takže když si koupí plně redundantní sadu SAN + FC switch + 4 FC karty + kabely tak to nebude stát nějaké neuvěřitelné peníze. A vzhledem ke spolehlivosti nepotřebuje prakticky žádnou obsluhu natož pak "více kvalifikovaných lidí".
    koulinek avatar 16.4.2010 10:54 koulinek | skóre: 19 | blog: koulonet
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Též myslim, firma to nastaví a prostě to funguje :) storage experty si pro pripadne rekonfigurace outsourcuji. Nekdy se fakt divim jak málo jsou nektere firmy ochotny vynalozit na zabezpeceni a ochranu dat, a jak hodne se pak divi kdyz o ty data prijdou.
    Motto: "Lépe býti dvanácti souzený, než šesti nesený."
    16.4.2010 12:52 Mordae
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Ani ten switch neni treba. Kdyz mate 2 nodovy Oracle cluster, tak si bohate vystacite s porty primo na poli.
    20.4.2010 08:50 Ondřej Surý | skóre: 14
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    A máte představu, kolik stojí 2 FC switche, dva řadiče do pole (+ to pole), 4 FC karty a kabely? Pro malou firmu můžou být neuvěřitelné peníze i půl mega až mega, co tahle sranda bude stát.
    Nehledejte zlý úmysl tam, kde je dostatečným vysvětlením hloupost.
    Marek Stopka avatar 20.4.2010 21:22 Marek Stopka | skóre: 57 | blog: Paranoidní blog | London, United Kingdom
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    No jenom ty switche budou stát majlant (2x 130k zhruba i za ty hrozné HP StorageWorksy - katalogovka jasně)
    houska avatar 16.4.2010 16:53 houska | skóre: 41 | blog: HW
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    kdyz uz jsme u matiky a fyziky vite jakou energii dokaze vyvinout Hvezda Smrti na zniceni planety? odpoved zde

    rekl bych ze kdysi jsem to videl i na cswu.cz, ale uz jsem to nenasel

    houska avatar 16.4.2010 16:56 houska | skóre: 41 | blog: HW
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    jejda vedle :D
    16.4.2010 17:38 ..... Izak ..... | skóre: 14
    Rozbalit Rozbalit vše Re: Databáze přes NFS - NetApp
    No treba na NetAppu to chodi dobre.

    No a u NFS se doporucuje nevyuzivat UDP, ale TCP ... pry timeouty dojde k okamzitemu spojeni, napr starsi NetAppy s tim mely problem a se solarisem to pres UDP trvalo az 30sec.

    Jinak DB navadi, ze disk pise pomalu, pokud rychle cte, na zapis ma cache a logy ... ty je naopak dobre mit na rychlem disku pro zapis ... a hlavne fyzicky jinem disku a to v polich (cekani na hlavicky)
    xkucf03 avatar 19.4.2010 11:54 xkucf03 | skóre: 46 | blog: xkucf03
    Rozbalit Rozbalit vše SAN
    Jen drobnost:
    to je cena za použití FC/SAN centralizovaného storage řešení. SAN (Storage Attached Network) infrastruktura nabídne skvělý výkon
    Mělo být spíš Storage area network, ne?
    Mám rád, když se lidé přou, znamená to, že vědí, co dělají, a že mají směr. Frantovo.cz, SQL-Výuka.cz, Nekuřák.net
    stybla avatar 27.4.2010 13:59 stybla | skóre: 28 | Praha
    Rozbalit Rozbalit vše Re: Databáze přes NFS
    Proč centralizové uložiště?


    Nemelo by zde byt take "ú"?

    Založit nové vláknoNahoru

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.