abclinuxu.cz AbcLinuxu.cz itbiz.cz ITBiz.cz HDmag.cz HDmag.cz abcprace.cz AbcPráce.cz
AbcLinuxu hledá autory!
Inzerujte na AbcPráce.cz od 950 Kč
Rozšířené hledání
×
eParkomat, startup z ČR, postoupil mezi finalisty evropského akcelerátoru ChallengeUp!
Robot na pivo mu otevřel dveře k opravdovému byznysu
Internet věcí: Propojený svět? Už se to blíží...
včera 21:21 | Nová verze Ladislav Hagara | Komentářů: 0
včera 11:44 | Zajímavý projekt

Na Indiegogo byla spuštěna kampaň na podporu herní mini konzole a multimediálního centra RetroEngine Sigma od Doyodo. Předobjednat ji lze již od 49 dolarů. Požadovaná částka 20 000 dolarů byla překonána již 6 krát. Majitelé mini konzole si budou moci zahrát hry pro Atari VCS 2600, Sega Genesis nebo NES. Předinstalováno bude multimediální centrum Kodi.

Ladislav Hagara | Komentářů: 0
včera 00:10 | Nová verze

Byla vydána verze 4.7 redakčního systému WordPress. Kódové označením Vaughan bylo vybráno na počest americké jazzové zpěvačky Sarah "Sassy" Vaughan. Z novinek lze zmínit například novou výchozí šablonu Twenty Seventeen, náhledy pdf souborů nebo WordPress REST API.

Ladislav Hagara | Komentářů: 1
6.12. 12:00 | Zajímavý projekt

Projekt Termbox umožňuje vyzkoušet si linuxové distribuce Ubuntu, Debian, Fedora, CentOS a Arch Linux ve webovém prohlížeči. Řešení je postaveno na projektu HyperContainer. Podrobnosti v často kladených dotazech (FAQ). Zdrojové kódy jsou k dispozici na GitHubu [reddit].

Ladislav Hagara | Komentářů: 24
6.12. 11:00 | Bezpečnostní upozornění

Byly zveřejněny informace o bezpečnostní chybě CVE-2016-8655 v Linuxu zneužitelné k lokální eskalaci práv. Chyba se dostala do linuxového jádra v srpnu 2011. V upstreamu byla opravena minulý týden [Hacker News].

Ladislav Hagara | Komentářů: 2
5.12. 22:00 | Komunita

Přibližně před měsícem bylo oznámeno, že linuxová distribuce SUSE Linux Enterprise Server (SLES) běží nově také Raspberry Pi 3 (dokumentace). Obraz verze 12 SP2 pro Raspberry Pi 3 je ke stažení zdarma. Pro registrované jsou po dobu jednoho roku zdarma také aktualizace. Dnes bylo oznámeno, že pro Raspberry Pi 3 je k dispozici také nové openSUSE Leap 42.2 (zprávička). K dispozici je hned několik obrazů.

Ladislav Hagara | Komentářů: 6
5.12. 06:00 | Zajímavý software

OMG! Ubuntu! představuje emulátor terminálu Hyper (GitHub) postavený na webových technologiích (HTML, CSS a JavaScript). V diskusi k článku je zmíněn podobný emulátor terminálu Black Screen. Hyper i Black Screen používají framework Electron, stejně jako editor Atom nebo vývojové prostředí Visual Studio Code.

Ladislav Hagara | Komentářů: 50
5.12. 06:00 | Zajímavý článek

I letos vychází řada ajťáckých adventních kalendářů. QEMU Advent Calendar 2016 přináší každý den nový obraz disku pro QEMU. Programátoři se mohou potrápit při řešení úloh z kalendáře Advent of Code 2016. Kalendáře Perl Advent Calendar 2016 a Perl 6 Advent Calendar přinášejí každý den zajímavé informace o programovacím jazyce Perl. Stranou nezůstává ani programovací jazyk Go.

Ladislav Hagara | Komentářů: 10
3.12. 16:24 | Nová verze

Byla vydána Mageia 5.1. Jedná se o první opravné vydání verze 5, jež vyšla v červnu loňského roku (zprávička). Uživatelům verze 5 nepřináší opravné vydání nic nového, samozřejmě pokud pravidelně aktualizují. Vydání obsahuje všechny aktualizace za posledního téměř půldruhého roku. Mageia 5.1 obsahuje LibreOffice 4.4.7, Linux 4.4.32, KDE4 4.14.5 nebo GNOME 3.14.3.

Ladislav Hagara | Komentářů: 17
3.12. 13:42 | Pozvánky

V Praze probíhá konference Internet a Technologie 16.2, volné pokračování jarní konference sdružení CZ.NIC. Konferenci lze sledovat online na YouTube. K dispozici je také archiv předchozích konferencí.

Ladislav Hagara | Komentářů: 0
Kolik máte dat ve svém domovském adresáři na svém primárním osobním počítači?
 (32%)
 (24%)
 (29%)
 (8%)
 (5%)
 (3%)
Celkem 785 hlasů
 Komentářů: 50, poslední 29.11. 15:50
Rozcestník
Reklama

Dotaz: Vhodný FS pro web-cluster

17.6.2014 19:37 LuRy | skóre: 12
Vhodný FS pro web-cluster
Přečteno: 318×
Zdravim, poradil by nekdo jaky zvolit FS pro sdílený souborový systém mezi servery? Co napr. drbd nebo glusterfs? Pro a proti? Servery jsou mezi sebou spojeny 2x 1gbit linkou v bondingu.

Diky LuRy

Odpovědi

18.6.2014 07:33 1john2 | skóre: 35 | blog: jo12hn | zlín, brno
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Jaky cluster/na cem postaveny?

Kolik nodu?

Jakou komunikaci cekate?

Nebylo by lepsi se ptat spis na komunikaci na backend servery(databaze) ap?
18.6.2014 10:06 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
3 uzle 1. (RAID 10 8x 146GB SAS) 2. 1x 160GB SATA 3. (RAID 5 3x 1TB SATA)

Linux debian 7.5

Momentalne je NFS na 1. a mysql cluster (percona-cluster) z 3 uzlu na kazdem z nich Loadbalancer pomoci proxy na kazdem servru nginx+fpm Nicmene mysql cluster se mi nestiha vcas replikovat mezi vsechny 3 uzle takze se stava ze se zaznamy predbihaji oproti realnym casum protoze casto nastava situace kdy se provede klidne 10 insertu v jeden moment.
18.6.2014 10:24 Aleš Kapica | skóre: 45 | blog: kenyho_stesky | Ostrava
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
DRBD není FS. Je to v podstatě síťový RAID 1 a clusterový souborový systém (OCFS2 nebo GFS2) nad ním musí být tehdy, pokud je do něj chcete zapisovat současně na obou nodech (musí být v režimu primary/primary).

FS jako glusterfs, apod. mají význam pouze tehdy, pokud je těch nodů větší počet.
18.6.2014 10:35 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Funkci drbd chapu, slo mi spis o sirsi pojeti moji otazky (tj aspon 2 redundantni uloziste a co nejvetsi rychlost respektive lepsi parametry nez ma momentalni nasazene ext4 pro tyto ucely)
18.6.2014 10:55 Aleš Kapica | skóre: 45 | blog: kenyho_stesky | Ostrava
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Doukd jsem používal DRBD v režimu primary/primary, míval jsem OCFS2, teď pro primary/secondary používám Btrfs - tam kde se pracuje přímo se soubory a ext3 tam kde jsou velké soubory s virtuálními disky.
18.6.2014 11:08 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Jake je realne vyuziti drbd v pri/sec krom redundance?
18.6.2014 11:46 Aleš Kapica | skóre: 45 | blog: kenyho_stesky | Ostrava
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Poněkud nechápu dotaz. Jaké využití? Objem obsazených dat? Nebo jak často se na ně zapisuje? Nebo jak rychle?
18.6.2014 11:49 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Velikost dat mě netrápí spíše zvýšení iops a rychlosti čtení a zápisu
18.6.2014 11:47 dustin | skóre: 60 | blog: dustin
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Asi žádné, redundance sama o sobě je dost klíčová.

Používáme drbd již roky, ale podezřívám je, že drbd modul občas (párkrát do roka) způsobuje zásek jádra (ping jede, ale nic jiného). Vždy se současně zasekly oba servery na drbd napojené. Podezříval jsem server hosting z mžikových výpadků energie, napojili jsme to na jinou větev a dělalo to pořád.

Po odstranění drbd z druhého serveru (tj. na prvním je drbd jen z historických důvodů, nenavázané na sekundár), k občasným zásekům dochází jen na prvním s drbd. Nevím, jádra jsou tam starší 2.6.32, možná že tam opravdu byly nějaké bugy.
19.6.2014 00:37 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster

Jak nad tim cim dal vice premyslim tak zjistuju ze je to vice problemu do sebe a jsem z toho trochu nestastny..
Zkoumal jsem zpusoby replikace mysql protoze zjevne na jednom serveru dostavala sodu, tak jsem rozchodil percona-xtradb-cluster multi-master replikaci mezi 3 uzly kdy kazdy z uzlu ma vlastni php do kteryho zapisuje ale pri doreplikaci mezi vsechny uzly se to trochu zamichava respektive neni to vlozeny (AI+primary) ve stejnym poradi jako to bylo inicializovany php skriptem.
Proto me napadla myslenka mit napr 2 uzle na jednech datech skrz drbd+ocfs2 ale narazil jsem tady na abclinuxu na vlakno kde to bylo oznaceny jako hloupost, ono ve svy podstate asi je to hloupost nicmene ocfs2 se kasá moznosti paralelniho pristupovani k stejnym datum z vice uzlu .. Pripadne jeste jestli to ocfs2 nebude chodit pro tenhle ucel lepe nez ext4.

Kdyz na to koukam zpetne tak uvazuji k navratu na jeden single uzel pripadne zkusit pokus mysql-proxy 1 master (insert/update) + 2 slave (select/show)..

Ted mi chybi nejaky kamarad ktery by mi rekl "Jo tohle uz jsem zkousel chodilo to takhle a takhle, zkus tohle" bohuzel vsichni "spoluzaci" nakonec delaji uplne neco jineho nez mel obor skoly nabizet a kdyz uz delaji v oboru tak delaji neco jako "IT technika" na financnim urade..

19.6.2014 07:00 PanZvedavy
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
zatizeni a velikost te DB?
19.6.2014 15:44 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster

Zatizeni ~200-400 qps podle spicky na 1 uzel


Udaje za 17h behu
Reads / Writes: 76% / 24% (na nejvytizenejsim uzlu)
Velikost db je momentalne 3-4GB v buffer poolu je 2,7GB nicmene velikost db se neustale navysuje (neni konstantni), hodne tabulek  nektere maji 1M a vice zaznamu
Query cache efficiency: 42.0% (2M cached / 6M selects)
Table cache hit rate: 97% (604 open / 621 opened)

19.6.2014 16:57 PanZvedavy
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
db je mala, zaznamu hodne. Pri teto velikosti by to ale melo bejt vsechno v pameti a tudiz nelimitovano šméčkovým iops na sata discich, coz se puvodne jevilo jako slabe misto. Co takhle audit aplikace nebo navrhu db? Pres milion zaznamu na tabulku je pomerne dost nicmene nejsem profik pres sql...
19.6.2014 17:02 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Zaznamy v db musi byt minimalne po 6 mesicu, podle me se jako problem jevi velke mnozstvi paralelnich updatu / insertu. Cela aplikace je pomerne dost vytizena, ve spicce podle google analytics je 1000-1700 hitu na stranky za minutu. Signle mysql chodila obecne lepe nez tenhle cluster koncept proto mi to prijde zvlastni (Sedela na raid 10 z 8mi SAS 146gb 10krpm)
19.6.2014 17:26 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
jinak abych tu nemlzil, neni problem s vykonosti, ta je dobra, query cache jede vcelku dobre a overload nebyva ani na jednom z uzlu, 6-7 sql dotazu z query cache zvladnu za 0,6-1ms problem je s tou doreplikaci do ostatnich uzlu
19.6.2014 07:09 Aleš Kapica | skóre: 45 | blog: kenyho_stesky | Ostrava
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Sice nejsem tvůj kamarád, ale můžu ti napsat, že jsem to takhle míval, ale nakonec se to ukázalo zbytečně choulostivé řešení. Lepší je oddělit databázový server z virtualu a databáze replikovat na úrovni dumpu. V podstatě úplně nejlepší je ho mít na jiném clusteru, tak abys nemusel řešit datové i databázové soubory, když je něco blbě.
19.6.2014 16:26 LuRy | skóre: 12
Rozbalit Rozbalit vše Re: Vhodný FS pro web-cluster
Co se tyka replikace tak to resi percona pres xtrabackup-v2 tvrdi se ze to je spolehlivejsi nez mysqldump protoze to nejak resi i zamky respektive je mozny delat skrz to backup i na bezicim uzlu bez nejakych problemu.. ale cim dal vic mi pripada ze bych mel zalozit 5 vlaken najednou :D

Založit nové vláknoNahoru

Tiskni Sdílej: Linkuj Jaggni to Vybrali.sme.sk Google Del.icio.us Facebook

ISSN 1214-1267   www.czech-server.cz
© 1999-2015 Nitemedia s. r. o. Všechna práva vyhrazena.