Nová verzia Danube Cloud Community Edition 2.4 (diskuse)

[snajpa]

To vypada pekne; akorat mi neni jasne, jakou pridanou hodnotu to ma oproti tomu, co vyviji primo Joyent. O co lepsi support muzou tomu reseni poskytnout, kolik core Illumos vyvojaru Danube Cloud zamestnava? ;)

[dano]

Danube Cloud sa oproti Joyent Triton snazi byt jednoduchsi. Mame integrovany monitoring (Zabbix), VM off-site backupy a replikaciu, co Triton AFAIK nema. Joyent ma zas Mantu (object storage) to sa vsak snazime nahradit v nasadeniach pomocou LeoFS. Core illumos vyvojarov nemame, ale mame adminov, ktori zvladaju pouzit dtrace, kstat a pod. :)

[snajpa]

Diky; mel bys nejake vase prispevky do upstreamu, kterymi bys se mohl pochlubit? Hodne to ukaze a rekne o vasi schopnosti to reseni podporovat. Jsem totiz velmi skepticky, z mnoha duvodu - par adminu sice DTrace pouzit naucis, ale uz ti pak nikdo nepomuze, kdyz se ti treba bude resetovat sitovka, protoze je tam nedoladeny driver.

[dano]

Na projekte Danube Cloud (povodne Erigones SDDC) robime od roku 2012. Do core illumos nemame ziadne vyzname prispevky. Skor mensie veci, na ktorych robili nasi byvali kolegovia. Taktiez niekedy riesime issues v SmartOS live, kedze Danube Cloud pouziva SmartOS.

Nasou primarnou domenou nie je hypervisor/kernel, ten skor preberame taky aky je, ale orientujeme sa na veci blizsie k userovi, kde vidime nasu najvacsiu pridanu hodnotu. Napriklad sa v sucasnosti pohravame skor s myslienkou upgradnut Qemu v SmartOS-e.

Inak suhlasim s nazorom, v pripade nejakych problemov s drivermi by sme zrejme komunikovali problem dalej do upstreamu. Pre Enterprise Edition vacsinou odporucame konkretny zoznam hardware, ktory mame otestovany. Pri Community Edition a neotestovaom HW sme odkazani na komunitu.

[snajpa]

Tohle je single biggest threat pri nasazovani Illumos based reseni. Budto je clovek zvlada odsupportovat, tj. ma zaludek, skill a dost nervu ponorit se do pripadnyho kernel problemu sam, nebo to proste nemuze byt na zadne serioznejsi nasazeni. My bychom ve vpsFree nad Illumosem klidne staveli, ale ja na to teda nemam odvahu, preklopit 1100+ lidi nad neco, cemu rozumi par lidi na planete a ti jsou turbo-busy vlastnimi problemy...

Uz jsem si uzil reseni par Illumos kernel problemu, takze mluvim z vlastni zkusenosti. Premyslel jsem nad tim fakt dlouho, i kdyz je Illumos technologicky pro datacentra daleko vhodnejsi fit, nez Linux, sel bych do toho az teprv v momente, kdy bych mel okolo sebe dostatek upstream vyvojaru - cili krok #1 je sehnat nekoho (idealne ne jednoho, protoze SPOF), kdo bude mit zajem to delat a dat mu hodne prostoru a casu, aby si mohl udelat jmeno, aby do toho mohl proniknout. Pak az teprv bych mel koule na prodavani neceho nad Illumosem, cemu reknu "Enterprise Edition"

[snajpa]

Totiz, otestovany HW je jenom jedna cast problemu. Ruzne bugy typu memory leaky, race conditiony, dead locky a podobne problemy jsou neco, co v zivote nechytite sebelepsim QA, pokud vas zakaznik provozuje svoje aplikace nad tim resenim a nenakupuje je od vas taky v jednom bundlu - pak nastava takova varieta, co nema sanci QAckovat ani Chuck Norris. Potom jsou proste potreba in house vyvojari, co tomu rozumi a neda se to okecat. Mel jsem tak uz problemy s NFS serverem (race condition), ZFS (memleak) a zazil jsem i divne chovani systemu pri DTracovani (ale neresil dal).

[snajpa]

Btw, mohli byste si takovy nekonkurenceschopny veci, prosim, skladat za svoje penize? To se to podnika z europenez, to se to pak vyvijeji nesmysly. Datalan v referencich je potom posledni tresnicku na dorte. Brrr ani trimetrovou tyci.

[dano]

Tak, ako kazdy, kto stavia na Linuxe nepotrebuje okamzite mat core kernel vyvojarov, tak to nepotrebuje ani ten, kto robi na inych OS. Taktiez aj pri konkurencnych rieseniach nie je vacsinou kernel zdroj problem.

illumos ako pokracovatel OpenSolarisu je velmi stabilny OS. Okrem velkych spolocnosti ako Joyent (Samsung) a Nexenta (ktore teda maju tych core vyvojarov), ho pouziva aj kopec mensich firiem po celom svete. Komunita vyvojarov je velmi prijemna a napr. na IRC vacsinou pohotovo pomahaju riesit problemy. V minulosti sa ukazalo, ze v pripade vacsich problemov (kernel panic) Joyent velmi rychlo reaguje a pohotovo vydava novy release SmartOS-u. Pravdupovediac som sa ja stretol s kernel panicom len raz cca. pred 3-4 rokmi, ale islo o nieco co bolo v novom release uz opravene.

Bezia nam na nom bez problemov stovky produkcnych VM a zon + za ten cas sme otestovali tisicky dalsich VMs a zon. Plus zakaznicke nasadenia. Avsak ako som uz spominal, nase riesenie je hlavne o automatizacii velkych serverovych fariem a infrastruktur. Kazdy vytvoreny server ma automaticky nastaveny monitoring, DNS, zapisany do IP planu a pod. Par klikmi je mozne nastavit pravidelne backupy, snapshoty a replikaciu. Sme open source firma, takmer vsetok kod, vratane komplexneho buildovacieho nastroja sme zverejnili na GitHub-e kde aktivne dalej vyvijame. K tomu treba priratat rozsiahlu dokumentaciu, VM image, atd.

Nasi admini poznaju Solaris, vzdelavaju sa o illumose a sleduju jeho vyvoj. Napr. obnoveny LX brand momentalne stale este nemozeme povazovat za 100% stable a jeho integraciu do nasho systemu pripravujeme postupne.

A samozrejme velka cast nasej prace je zalozena na podpore kde riesime nasim zakaznikom kopec dalsich problemov a to co popisujete je naozaj len mala cast toho.

Ak toto vsetko povazujete za vyhodene peniaze (btw, do projektu sme pred investiciou vlozili kopec vlastnych financii), tak Vas prosim, aby ste sa este raz pozreli na nas software, GitHub alebo dokumentaciu predtym, nez sa znizite k dalsim utokom.

Verim, ze ak by sme Vam nas system ukazali alebo sa rozpravali osobne, tak by takato debata z Vasej strany nebola vedena takto negativne. Ak budete mat kedykolvek cestu okolo Bratislavy tak prosim nevahajte a zastavte sa, alebo nas pokojne oslovte na nejakej konferencii - budeme napr. na najblizsom PyCon SK.

[snajpa]

Jak Joyent, tak Nexenta vyvojare maji, proto jsou akceschopni.

Vy je nemate a jste tak zbytku ekosystemu na milost.

Kdo stavi na Linuxu nepotrebuje mit okamzite core kernel vyvojare, protoze je jich obecne dostatek. O Illumosu tohle neplati. Ja provozuju ty systemy na hranici moznosti, narazim pravidelne na situace, kdy si kernel musim podporovat sam - i Linux. A z vlastni zkusenosti vidim, ze je mnohem prijemnejsi resit problemy s Linuxem, nez s Illumosem ;) Kdyz je produkcni masina dole, tvuj problem je nevygooglitelnej a nikdo z Illumos vyvojaru zrovna neni online/nereaguje, to pak muzes akorat premitat o tom, jak je okolo Illumosu skvela komunita. Zazil jsem tu situaci nekolikat a dobrovolne uz si nedam ;) Leda fakt s kernel vyvojarem po ruce.

Ja jsem tak nejak zvyklej na to, ze vetsina lidi vyhlasuje, ze jim neco funguje, ale moc to neznamena. Podivej se na grafy vytizeni vpsFree masin, porovnej to s poctama kontejneru na nich a pak mi rekni, jestli mate aspon zhruba podobnou zatez nad Illumosem ;)

Grafy tady a pocty kontejneru tady. Porovnavej pocet procesu, CPU load, otevreny file deskriptory, obsazenou RAM - tj. indikatory, jak moc jsou procesy rozlezly po tom systemu.

[snajpa]

Jinac, z negativniho tonu si nic nedelej (klidne mi taky prosim tykej). Ja jsem hodne predzaujaty, pkkud vidim firmu, co dela pro tunelare, financovana je z europenez a z opensource ekosystemu akorat bere a neprispiva zpatky (Illumos si to extra zaslouzi a kdybyste za ty europrachy ten ekosystem aspon kousek tlacili dal, budu se mracit o dost min).

[snajpa]

Na druhou stranu, obchod do zahranici na SK nikdo delat neumi a krom tech tunelaru tam v podstate neni nikdo, komu byste to jinymu mohli prodat. To samy s investorama, vzdycky v tom na slovakistane je neco necistyho. Jedinou sanci jsou tak mozna penize a distribucni sit od TSystems, ale na to taky musi mit clovek spravny kamarady (nebo delat neco, co je jasna vyhra, co ale tenhle projekt pri jeho rizikovosti neni - to i ta ubersracka OpenStack je jistejsi investice). Mozna uz se situace zlepsila, ale cca dva roky zpatky tohle sedi na 100%, uzil jsem si to z prvni ruky (a firmu radsi nez prijmout europrachy, pani, zavrel, protoze svedomi mi to nedovoli).

[snajpa]

Asi to neni uplne jasny, ale ja Illumos based snaham fandim. Ale tady vidim spoustu veci, do kterych musim zarejpat a videt reakci, nez tu vasi vec nekomu doporucim. Kdyby mi to bylo burt, tak se komentovanim ani nezdrzuju ;)

[dano]

Nesuhlasim s tym, ze komunite nic nevraciame naspat. Prave naopak, jednak sme opensourcovali takmer vsetko co sme vytvorili (a je toho imho dost) a do illumosu a SmartOSu nasi byvali kolegovia prispievali male veci. Teraz sme vo faze ked sa viacej sustredime na obchod a riesenie povazujeme za stabilne. Ale mame plany a jeden z nich je aj to, ze aspon jedneho kernel developera zamestname ked vyrastieme (make kopec napadov, ktore by sme do illumosu chceli implementovat :)).

Co sa tyka podnikania, tak prave tu je Danube Cloud velmi dobre na tom, pretoze umoznuje setrit organizaciam naklady na IT. Konkurecne riesenia maju bud drahe licencie alebo sa predrazuju pri navrhu, spravovani a podpore. Nase riesenie moze chytit do ruky bezny admin a vie si s nim ulahcit kopec prace. A to nehovorim o tom, ze sme schopni rychlo dorobit funkcionalitu podla potrieb zakaznika...

Diskusia je uz imo dost offtopic a preto ju navrhujem presunut inde. Urcite by nas zaujimalo viacej technickych skusenosti napr. z vpsFree, preto moje pozvanie na pivo do Bratislavy stale plati :)

[snajpa]

Az budu mit cestu, dam vedet (to by melo byt nekdy pristi mesic). Skoda, ze uz tam nezastihnu xen0la, s nim bych velmi rad pokecal ;)

[snajpa]

A jinak, koukejte se s tim nacpat na vsechny CZ/SK OSS konfery, popularizujte Illumos reseni a treba se tu komunita zvetsi z minusu na nejaky malicky kladny cislo ;) Kdyby bylo potreba, napiste mi maila a poradim.