KOMIX - Na exkurzi v Cloudflare

24.11. 13:46 | Přečteno: 1103× | KOMIX

Padá Cloudflare, něco si přejte. Třeba aby to co nejrychleji znovu nahodili, nebo alespoň aby někoho vyhodili .

       

Komentáře

[crusy crust]

nejvitpěnjší je že to přepsali do rustu protože bezpečnost, a celý jim to spadlo rust = 60 miliard dolarů škody.

[dsdfgsdfg]

Presne. A pak se jeste fanaticti rustkokoti vymlouvaji jakoze "aaah, hur dur, za to rust nemuze". Njn, Pokud by nebyla snaha za kazdou cenu vsechno okamzite prepsat do novyho jeste ne stabilniho jazyka jenom protoze je zrovna cool, tak by se to nestalo.

[Radovan]

Ale Rust za to opravdu nemůže, můžou za to Rustoví fanatici, kteří ho cpou i tam, kam se prostě nehodí

[kralyk z abclinuxu]

Jakožto člověk, který dělá s Rustem >11 let to považuju za obrovský úspěch.

Dřív by z toho byl nějakej C/C++ RCE nebo Javovský stack trace o 791 položkách nebo Pythonní TypeError nebo něco podobného. Vidět na takovém místě Rust unwrap/panic ... slza ukápla :)

[crusy crust]

a stejne to resili celej den

[plostenka]

Samozrejme lepsi memdump nez silent data corruption, ale Rustem porusili uz zakladni pravidlo "kdyz to v C[OBOLu] funguje, nesahej na to" :)

[Max]

Hláška: "když to funguje, nesahej na to", je pro téměř všechno (existují hodně vzácné výjimky) chybná a vlastně v překladu znamená: "Když na to sereš, technologický dluh tě dožene v té nejhorší chvíli".
Zdar Max

[plostenka]

Technologicky dluh se ale neresi neustalym prepisovanim do PraveTedModniJazyk, pripadne PraveTedModniKnihovna (v pripade Rustu dokonce NovaVerzeKompilatoru), ale diskusi architektu nad tim, jak se od davneho zacatku vyvoje zmenily pozadavky (funkce, data,...) a co komu naslibovali obchodaci, a az na zaklade toho se prgaji nove, algoritmicky lepsi, moduly ktere zase vydrzi dlouhe roky.

To neustale prepisovaci kolecko ktere generuje python, nodejs a rust je jen a pouze bullshit aby se juniori v praci nenudili a v gitu pribyvaly commity.

[Max]

Myslím to obecně. Každopádně ty jsi zjevně ten článek vůbec nečetl, protože přesně to oni udělali. Měli technologický dluh, věci se koplikovaly atd., posadili se nad tím, navrhli novou architekturu a řešení, překopali to a postavili to modulárně nad produktem v rustu.
Zdar Max

[Q]

Neznám tu kauzu do detailů, ale z toho blogu plyne, že rustem nahradili PHP. Jak by se v tomhle případě zachovalo PHP nedokážu říct, 20 let sem v tom nic nedělal.

[Max]

Mně spíše zajímá, proč se tu vůbec řeší rust. Neviděl jsem nikde info, že by Cloudlfare informoval, že chyba nastala kvůli rustu. Chyba nastala změnou oprávnění nad databází, ze které se pak generovaly šroty a koncové systémy to nežraly.
Zdar Max

[crusty rusty]

a ten unwrap tam přidala databáze?

[Max]

Nemám křišťálovou kouli. Tady někdo přišel s tím, že rust mohl za ten problém. Já ten kód té app neznám, neznám ani styl vývoje (zda jedou db first, code first atd.).
Zdar Max

[crusty rusty]

no spíš se o to nezajímáš, diskutuje se o přejmenování unwrap kvůli tomu, na něco ve stylu unwrap_or_panic, aby bylo do očí že se to nemá volat jen tak

[kralyk z abclinuxu]

To je blbost, ten unwrap() je jen technický detail, ne příčina problému. Jasně, ideálně by se měl nahradit nějakým hezčím errorem / propagací erroru s lepším logováním atd., ale to by nijak nezabránilo tomu problému, že prostě tu službu nějaký proces generování konfiguráků blbě nakonfiguroval nad povolené limity, tam je ten problém.

[crusty rusty]

jasně, ideálně, což se nestalo a zbořilo to internet. 10/10

[kralyk z abclinuxu]

Ne, nezbořilo, internet zbořila chybná konfigurace.

[crusty rusty]

ne, konfigurace ipso facto nic rozbít nemůže, jen její konzument - program v rustu

[Max]

Takže podle této filozofie, když si vytvořím vadný konfigurák, nahraju ho do switche a odstřihnu celou pobočku od sítě, tak to nakonec není moje chyba? Oh, díky, tebe bych chtěl mít za šéfa :DDDD
Zdar Max

[crusty rusty]

ty jsi čisý patlal konfiguráků, to je trochu něco jinýho. kdybys měl vytvořit program co konfigurák parsuje, a ten ti všechno odstřelil, tak jo, je to tvoje chyba.

[Max]

Ale kdybych tu aplikaci na parsování napsal v rustu, tak to moje chyba nebude, ne? :D
Zdar Max

[crusty rusty]

podle některých (jako králík) to bude tvoje chyba když ji napíšeš v céčku, v případě rustu je chyba vždycky někde jinde (v KonFIguRaCi). tak si vyber.

[Max]

To z té komunikace s kralikem nějak nevzešlo, to jsi si asi vymyslel.
Každopádně já vím, co je to osobní odpovědnost a za mně to bude vždy chyba odpovědné osoby / teamu, co to dělala. Svalovat vinu na jazyk mi přijde dětinské.
Zdar Max

[crusty rusty]

žiješ v úplně jinym světě

[kralyk z abclinuxu]

podle některých (jako králík) to bude tvoje chyba když ji napíšeš v céčku

Nic takového jsem nenapsal. Ekvivalentem v C v tomto případě by byl pád na assertu. Což by taky nebylo ideální z hlediska error handlingu, ale opět to není root cause problému.

[crusty rusty]

já hlavně doufám že nepíšeš komerční software, protože optimisticky předpokládat validní konfiguraci je demence největší. tohle má ten program ustát, programming 101

[kralyk z abclinuxu]

protože optimisticky předpokládat validní konfiguraci je demence největší

Nic takového jsem tady nenavrhoval.

Napiš co teda měl podle tebe ten program udělat, jak to měl "ustát".

(A ano, já vim, že jen trolíš )

[crusty rusty]

měl by to ustát tak, aby velká část internetu nepřestala fungovat třeba, a nezpůsobila miliardové škody. kdyby tam nebyl unwrap, tak minimálně propagovat chybu a reportovat, mít nějaký fallback. crashnout a "tím je to vyřešeno" je fakt fivehead move.

ty nenavrhuj nic, akorát bys všechno zesral ve velkym měřítku.

[kralyk z abclinuxu]

kdyby tam nebyl unwrap, tak minimálně propagovat chybu a reportovat, mít nějaký fallback

Jaký fallback? Vysvětli.

[crusty rusty]

v tomhle případě s prvními 200 záznamy a ohlásit chybu. to by zdaleka nebyl takový průser a hned by se na to přišlo

[kralyk z abclinuxu]

To v podstatě znamená vzít nějakou náhodou část konfigurace a tu naslepo použít a doufat, že se nic nějak neposere. To je za mě hovězí nápad.

Vim žes mi to zatrhnul , ale navrhoval bych, aby nějaká věc nad tou službou nebo vedle ní (nevim co maj za prostředí) držela nakešovanou předchozí konfiguraci, a když update konfigurace způsobí, že ta služba padne na hubu (jakýmkoli způsobem), tak revertne konfiguraci na předchozí stav + ohlásí problém / alerty atd. V takovým případě by tam i klidně mohl být i ten unwrap(), byť stále souhlasim, že to není správně.

[kralyk z abclinuxu]

ne, konfigurace ipso facto nic rozbít nemůže

Samozřejmě že může. Chybná konfigurace -> služba nenastartuje - to je to, co se stalo.

Co podle tebe měla ta služba teda udělat? Nastartovat s vadnou konfigurací?

[crusty rusty]

jako jestli se spoléháš na to že konfigurace nemůže být špatně, tak jsi opravdu amatérský bastlič

[kralyk z abclinuxu]

Nic takového jsem nenapsal.

[Aleš Kapica]

Do konfigurace se samozřejmě může vloudit chyba. Ovšem vyčerpání defaultního limitu samo o sobě chyba není. Chyba je, že se taková konfigurace začne deployovat na další zařízení. Tzn. že máslo na hlavě má ten, kdo to vymyslel a nedomyslel důsledky. Jenže ten už tam beztak dávno nedělá.

[Max]

faster and more secure.
Vtipný i bylo, že nikdo nevolal, že něco nejde. Uživatelé se to asi všichni dočetli z netu. Jen asi dva volali, že si nemohou nakoupit na alze :D
Zdar Max

[Q]

More secure určitě. C/C++ program by z trochou štěstí nespadl, ale jen si přepsal paměť a vracel by nesmysly Víc bezpečný jazyky by při překročení maximální paměti crashli úplně stejně. Obecně kvalita vývoje a provozu na webu je tristní asi všude (chybějící testy, monitoring, přetížení lidí z důvodu podstavu, tlak na rychlost místo kvality atd.). V tom žádný jazyk nepomůže. Proč by to taky bylo jinak, když nikdo nemá reálnou zodpovědnost za chyby (pochybuju, že kvůli tomuhle incidentu cloudflare ztratí finance nebo reputaci).

[foki]

"Smooth restarts - keeping the Internet flowing"

[Max]

Pobavilo :)
Zdar Max

[Want]

Dnes to opět vypadá na pěkně dlouhou frontu u záchoda.