abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
    dnes 10:22 | Upozornění

    Ze systému Slavia pojišťovny uniklo přibližně 150 gigabajtů citlivých dat. Jedná se například o pojistné dokumenty, lékařské záznamy nebo přímou komunikaci s klienty. Za únik může chyba dodavatelské společnosti.

    Ladislav Hagara | Komentářů: 3
    dnes 10:11 | IT novinky

    Sněmovna propustila do dalšího kola projednávání vládní návrh zákona o digitální ekonomice, který má přinést bezpečnější on-line prostředí. Reaguje na evropské nařízení DSA o digitálních službách a upravuje třeba pravidla pro on-line tržiště nebo sociální sítě a má i víc chránit děti.

    Ladislav Hagara | Komentářů: 19
    dnes 09:33 | IT novinky

    Meta převezme sociální síť pro umělou inteligenci (AI) Moltbook. Tvůrci Moltbooku – Matt Schlicht a Ben Parr – se díky dohodě stanou součástí Meta Superintelligence Labs (MSL). Meta MSL založila s cílem sjednotit své aktivity na poli AI a vyvinout takovou umělou inteligenci, která překoná lidské schopnosti v mnoha oblastech. Fungovat by měla ne jako centralizovaný nástroj, ale jako osobní asistent pro každého uživatele.

    Ladislav Hagara | Komentářů: 0
    dnes 00:22 | Nová verze

    Byla vydána betaverze Fedora Linuxu 44 (ChangeSet), tj. poslední zastávka před vydáním finální verze, která je naplánována na úterý 14. dubna.

    Ladislav Hagara | Komentářů: 0
    včera 12:11 | IT novinky

    Open source router Turris Omnia NG Wired je v prodeji. Jedná se o Turris Omnia NG bez Wi-Fi. Je připraven pro zamontování do racku.

    Ladislav Hagara | Komentářů: 6
    včera 11:44 | Pozvánky

    Sníh roztál a roztávají i bastlíři. Žene se na nás celá řada konferencí a seminářů technického rázu. Zajímá vás, jaké? Pak se připojte k 60. Virtuální Bastlírně, tedy k veřejné diskuzi bastlířů, techniků, učitelů i vědců. Jako vždy přijde na přetřes spousta novinek ze světa hardwaru, softwaru i bizáru. Na začátek lze očekávat hardwarová témata, tedy například nový KiCAD 10, nové akcelerátory LLM s nízkou spotřebou, nejvíce fosforeskující

    … více »
    bkralik | Komentářů: 1
    včera 11:22 | Zajímavý článek

    IuRe (Iuridicum Remedium) v rámci programu Digitální svobody zveřejnila analýzu dopadů a efektivity systémů ověřování věku v digitálním prostoru, která srovnává implementace ověřování věku v Austrálii, Velké Británii a Evropské unii.

    |🇵🇸 | Komentářů: 1
    včera 04:22 | Nová verze

    Multiplatformní emulátor terminálu Ghostty byl vydán ve verzi 1.3 (𝕏, Mastodon). Přehled novinek a vylepšení v poznámkách k vydání.

    Ladislav Hagara | Komentářů: 0
    včera 03:55 | Nová verze

    Byla vydána nová verze 14.4 svobodného unixového operačního systému FreeBSD. Podrobný přehled novinek v poznámkách k vydání.

    Ladislav Hagara | Komentářů: 5
    9.3. 23:22 | Nová verze

    Databáze DuckDB (Wikipedie) byla vydána ve verzi 1.5.0. S kódovým názvem Variegata (husice rajská). Přináší řadu vylepšení, včetně nového ergonomičtějšího CLI klienta nebo podporu pro typ VARIANT a vestavěný typ GEOMETRY.

    Ladislav Hagara | Komentářů: 0
    Které desktopové prostředí na Linuxu používáte?
     (16%)
     (6%)
     (0%)
     (11%)
     (29%)
     (2%)
     (5%)
     (2%)
     (13%)
     (25%)
    Celkem 1053 hlasů
     Komentářů: 25, poslední 3.2. 19:50
    Rozcestník

    Dotaz: Vhodný FS pro web-cluster

    17.6.2014 19:37 LuRy | skóre: 12
    Vhodný FS pro web-cluster
    Přečteno: 428×
    Zdravim, poradil by nekdo jaky zvolit FS pro sdílený souborový systém mezi servery? Co napr. drbd nebo glusterfs? Pro a proti? Servery jsou mezi sebou spojeny 2x 1gbit linkou v bondingu.

    Diky LuRy

    Odpovědi

    18.6.2014 07:33 1john2 | skóre: 35 | blog: jo12hn | zlín, brno
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Jaky cluster/na cem postaveny?

    Kolik nodu?

    Jakou komunikaci cekate?

    Nebylo by lepsi se ptat spis na komunikaci na backend servery(databaze) ap?
    18.6.2014 10:06 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    3 uzle 1. (RAID 10 8x 146GB SAS) 2. 1x 160GB SATA 3. (RAID 5 3x 1TB SATA)

    Linux debian 7.5

    Momentalne je NFS na 1. a mysql cluster (percona-cluster) z 3 uzlu na kazdem z nich Loadbalancer pomoci proxy na kazdem servru nginx+fpm Nicmene mysql cluster se mi nestiha vcas replikovat mezi vsechny 3 uzle takze se stava ze se zaznamy predbihaji oproti realnym casum protoze casto nastava situace kdy se provede klidne 10 insertu v jeden moment.
    18.6.2014 10:24 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    DRBD není FS. Je to v podstatě síťový RAID 1 a clusterový souborový systém (OCFS2 nebo GFS2) nad ním musí být tehdy, pokud je do něj chcete zapisovat současně na obou nodech (musí být v režimu primary/primary).

    FS jako glusterfs, apod. mají význam pouze tehdy, pokud je těch nodů větší počet.
    18.6.2014 10:35 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Funkci drbd chapu, slo mi spis o sirsi pojeti moji otazky (tj aspon 2 redundantni uloziste a co nejvetsi rychlost respektive lepsi parametry nez ma momentalni nasazene ext4 pro tyto ucely)
    18.6.2014 10:55 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Doukd jsem používal DRBD v režimu primary/primary, míval jsem OCFS2, teď pro primary/secondary používám Btrfs - tam kde se pracuje přímo se soubory a ext3 tam kde jsou velké soubory s virtuálními disky.
    18.6.2014 11:08 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Jake je realne vyuziti drbd v pri/sec krom redundance?
    18.6.2014 11:46 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Poněkud nechápu dotaz. Jaké využití? Objem obsazených dat? Nebo jak často se na ně zapisuje? Nebo jak rychle?
    18.6.2014 11:49 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Velikost dat mě netrápí spíše zvýšení iops a rychlosti čtení a zápisu
    18.6.2014 11:47 dustin | skóre: 63 | blog: dustin
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Asi žádné, redundance sama o sobě je dost klíčová.

    Používáme drbd již roky, ale podezřívám je, že drbd modul občas (párkrát do roka) způsobuje zásek jádra (ping jede, ale nic jiného). Vždy se současně zasekly oba servery na drbd napojené. Podezříval jsem server hosting z mžikových výpadků energie, napojili jsme to na jinou větev a dělalo to pořád.

    Po odstranění drbd z druhého serveru (tj. na prvním je drbd jen z historických důvodů, nenavázané na sekundár), k občasným zásekům dochází jen na prvním s drbd. Nevím, jádra jsou tam starší 2.6.32, možná že tam opravdu byly nějaké bugy.
    19.6.2014 00:37 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster

    Jak nad tim cim dal vice premyslim tak zjistuju ze je to vice problemu do sebe a jsem z toho trochu nestastny..
    Zkoumal jsem zpusoby replikace mysql protoze zjevne na jednom serveru dostavala sodu, tak jsem rozchodil percona-xtradb-cluster multi-master replikaci mezi 3 uzly kdy kazdy z uzlu ma vlastni php do kteryho zapisuje ale pri doreplikaci mezi vsechny uzly se to trochu zamichava respektive neni to vlozeny (AI+primary) ve stejnym poradi jako to bylo inicializovany php skriptem.
    Proto me napadla myslenka mit napr 2 uzle na jednech datech skrz drbd+ocfs2 ale narazil jsem tady na abclinuxu na vlakno kde to bylo oznaceny jako hloupost, ono ve svy podstate asi je to hloupost nicmene ocfs2 se kasá moznosti paralelniho pristupovani k stejnym datum z vice uzlu .. Pripadne jeste jestli to ocfs2 nebude chodit pro tenhle ucel lepe nez ext4.

    Kdyz na to koukam zpetne tak uvazuji k navratu na jeden single uzel pripadne zkusit pokus mysql-proxy 1 master (insert/update) + 2 slave (select/show)..

    Ted mi chybi nejaky kamarad ktery by mi rekl "Jo tohle uz jsem zkousel chodilo to takhle a takhle, zkus tohle" bohuzel vsichni "spoluzaci" nakonec delaji uplne neco jineho nez mel obor skoly nabizet a kdyz uz delaji v oboru tak delaji neco jako "IT technika" na financnim urade..

    19.6.2014 07:00 PanZvedavy
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    zatizeni a velikost te DB?
    19.6.2014 15:44 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster

    Zatizeni ~200-400 qps podle spicky na 1 uzel


    Udaje za 17h behu
    Reads / Writes: 76% / 24% (na nejvytizenejsim uzlu)
    Velikost db je momentalne 3-4GB v buffer poolu je 2,7GB nicmene velikost db se neustale navysuje (neni konstantni), hodne tabulek  nektere maji 1M a vice zaznamu
    Query cache efficiency: 42.0% (2M cached / 6M selects)
    Table cache hit rate: 97% (604 open / 621 opened)

    19.6.2014 16:57 PanZvedavy
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    db je mala, zaznamu hodne. Pri teto velikosti by to ale melo bejt vsechno v pameti a tudiz nelimitovano šméčkovým iops na sata discich, coz se puvodne jevilo jako slabe misto. Co takhle audit aplikace nebo navrhu db? Pres milion zaznamu na tabulku je pomerne dost nicmene nejsem profik pres sql...
    19.6.2014 17:02 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Zaznamy v db musi byt minimalne po 6 mesicu, podle me se jako problem jevi velke mnozstvi paralelnich updatu / insertu. Cela aplikace je pomerne dost vytizena, ve spicce podle google analytics je 1000-1700 hitu na stranky za minutu. Signle mysql chodila obecne lepe nez tenhle cluster koncept proto mi to prijde zvlastni (Sedela na raid 10 z 8mi SAS 146gb 10krpm)
    19.6.2014 17:26 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    jinak abych tu nemlzil, neni problem s vykonosti, ta je dobra, query cache jede vcelku dobre a overload nebyva ani na jednom z uzlu, 6-7 sql dotazu z query cache zvladnu za 0,6-1ms problem je s tou doreplikaci do ostatnich uzlu
    19.6.2014 07:09 Aleš Kapica | skóre: 52 | blog: kenyho_stesky | Ostrava
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Sice nejsem tvůj kamarád, ale můžu ti napsat, že jsem to takhle míval, ale nakonec se to ukázalo zbytečně choulostivé řešení. Lepší je oddělit databázový server z virtualu a databáze replikovat na úrovni dumpu. V podstatě úplně nejlepší je ho mít na jiném clusteru, tak abys nemusel řešit datové i databázové soubory, když je něco blbě.
    19.6.2014 16:26 LuRy | skóre: 12
    Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
    Co se tyka replikace tak to resi percona pres xtrabackup-v2 tvrdi se ze to je spolehlivejsi nez mysqldump protoze to nejak resi i zamky respektive je mozny delat skrz to backup i na bezicim uzlu bez nejakych problemu.. ale cim dal vic mi pripada ze bych mel zalozit 5 vlaken najednou :D

    Založit nové vláknoNahoru

    Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

    ISSN 1214-1267   www.czech-server.cz
    © 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.