Nedostupnost serveru kvůli havárii disku

Dnešní nedostupnost abclinuxu.cz byla zapříčiněna havárií disku. Omlouváme se čtenářům a fanouškům - stejně jako vy doufáme, že jsme si všechnu smůlu už vybrali.

11.5.2007 22:48 | Vlastimil Ott | Upozornění

Komentáře

[trekker.dk]

Hlavní stránku do žíly a absťák je pryč

[Bohdan Koleček]

Souvisí to, že tu nemůžu ode dneška vkládat příspěvky jako neregistrovaný uživatel, také s havárií disku?

[David Ježek]

disku? jako jednoho? na kolika discich pripadne jakem RAIDu vlastne abc bezi? (sorry, pokud to je zakopano v nejakem clanku).

[Max]

Přimlouvám sek dotazu. RAID je RAID, ne? Nechce se mi věřit, že by abíčko běželo jen na jednom HDD :). Sabotáž od jednoho disku je normálka, od dvou je to hodně blbý a víc jak dva, to už je mega velká náhoda.
Prostě a jednoduše řečeno, s takovým krátkým nicmoc neříkajícím odůvodněním se prostě nedá spokojit :)
Zdar Max

[kavol]

Sabotáž od jednoho disku je normálka, od dvou je to hodně blbý a víc jak dva, to už je mega velká náhoda.

ta "mega velká náhoda" se ovšem stává poměrně často - typická situace: server běží několik let nonstop, pak se odstaví, a po novém spuštění se několik disků neroztočí ...

[Max]

Ano, to vím, prostě vyschnou ložiska, ale většinou těch několik let býva cca 5. A to bych řekl, že neběží, když server pro ábíčko je celkem mlaďoch (cca 2roky starý?) ...
Zdar Max

[houska]

pokud vim tak abicko bezi na x2100 co dostali od slunicka takze ani dva roky ne

[Dalibor Smolík]

No, pokud jsou disky v RAIDu od jednoho výrobce či dokonce stejné výrobní řady, mohou klidně odejít dva disky najednou. To se už známému stalo
btw, nabíhání abíčka jde dneska dost pomalu

[Michal Fecko]

Zeby synchronizacia RAIDu?

[Dan Ohnesorg]

Taky uz jsem zazil, ze SCSI disk odhorel tak nestastne, ze zablokoval SCSI sbernici a dokud jej obsluha nevytahla, tak byl mrtvy cely kanal.

U IDE disku na PATA to byvalo pravidlem, tam vypadek mastru znamenal automaticky nedostupnost slave.

Dalsi problem byva, ze protoze zatez disku v raidu prece jen neni symetricka, tak se zavada na tom druhem projevi navenek az kdyz prvni disk klekne a druhy se dostane pod plnou zatez.

Proste RAID dostupnost jen zvysuje, ale 100% negarantuje.

[pupu]

Napodobne, akorat na Fibre Channelu. Neprejte si vedet, co to delalo za bordel. Navic se ten disk zvenku ani netvaril nemocne, blikal normalne... ale odrovnal cely brick. Servisak rikal, ze se to obcas stava :-[

[xxx]

A na #linux.cz meli osklive narazky na mysql

[Prcek]

Tak me napada, nevite nekdo, jestli ma abclinuxu.cz nejakou mistnost na jabber groupchatu? Jen tak ze zvedavosti . Kdyz byl ten vypadek, tak jsem hledal kde by se o tom mohlo mluvit, tak jsem zkusil na jabber.cz par mistnosti o linuxu, ale kde nic tu nic...

[xkucf03]

Tak můžeme se domluvit, že tam začneme chodit. Já jsem tam taky párkrát nakouknul a moc to tam nežilo. Teď vysedávám jen ve dvou místnostech, ale ani jedna není linuxová. Tak možná přidám i třetí Tak teď, schválně jestli se tam objeví i nějaký další abíčkař

linux@conf.netlab.cz

[Prcek]

No ja nevysedavam vetsinou v zadne (bohate mi staci diskuze tady na abicku ), jenom kdyz treba nejde ICQ transport, tak sleduju jabber@conf.netlab.cz a prave me napadlo pri vypadku abicka mrknout do par mistnosti, jestli nekdo neco nevi, ale jak rikas, bylo tam celkem mrtvo.

[anicka]

No ja nevim, ja jsem tesne pred vypadkem videla stranku plnou vyjimek na tema "neuspesne spojeni s mysql," takze se narazky rozhodne mely na cem zakladat

Ale co, taky jsem se naucila strkat do raidu ruzne stare disky z ruznych serii az casem

[Věroš]

Já to dělám podobně - objednávám si jen disk půl roku napřed a druhej stejnej těsně před tím než ho potřebuju.

Jenom by mne zajímalo, jestli to je urban myth nebo to opravdu nějak zvýší pravděpodobnost umření obou disků najednou...

[Michal Fecko]

Já to dělám podobně - objednávám si jen disk půl roku napřed a druhej stejnej těsně před tím než ho potřebuju.

Mozno tie dva disky spolu lezali niekde na sklade akurat jeden druhy opustil pol roka skor

[Věroš]

Neboj, ten o půl roku starší nějakou tu tisícovku hodin natočí, než jde do pole.

Nechat doma ležet disk ladem je skoro tak špatné jako nechat zkazit víno.

[Dan Ohnesorg]

Ono casto bohate postaci, kdyz posledni cast cesty prepravni sluzbou absolvuje kazdy disk jiny den nebo jinou spolecnosti.

[Filip Jirsák]

Ono taky asi není na Abíčku nic moc jiného, co by potřebovalo číst z disku, než ta MySQL. JVM+Jetty bude hádám celé v paměti, takže MySQL asi byla první, kdo na problémy s diskem narazil

[Michal Fecko]

[podrypnutie]Odkedy bezi ABCLinuxu na "slniecku" tak problem za problémom [/podrypnutie]

Ale nie, samozrejme prajem aby na dlhu dobu (naposledy to bola tusim databaza a prud ) bol od vypadkov pokoj...
K raidu: Zrejme RAID1.. (2 disky) (???)

[CIJOML]

Tak to me pobavilo - kdyz jsem to adminil ja, tak sme sice taky meli problem s diskem, ale RAID to ustal a zadny ctenar nedostupnost nezazil krom vypnuti/vymeny vadneho/zapnuti, coz ale byla predem ohlasena akce a trvala asi 15 minut :D Holt kdyz dva delaji totez, neni to totez ;)))

[Käyttäjä 11133]

Seš prostě luxusní frajer...

[trekker.dk]

A proč už to neadminíš? Protože jsi byl tak nesnesitelný k ostatním, že tě radši poslali někam do pryč?

[freshmouse]

No jo. Vezmeš si mě?

[J. M.]

Ta patička, to je parodie? Vzhledem k tomu, že tam tu hotentotskou hatmatilku velmi vzdáleně připomínající angličtinu i přes upozornění máš v nezměměné podobě už tolik let, předpokládám, že asi ano.

[Kyosuke]

Když je člověk jednou superšpičkovým adminem, tak už nemá čas na přiblblé jazyky, you insensitive clod!

[J. M.]

Na druhou stranu, právě ti, kteří na přiblblé jazyky nemají čas, se s jejich "znalostmi" nejvíc chlubí. Je letitým pozorováním stokrát ověřený fakt, že čím hůř lidi umí anglicky, tím víc dělají machry a v českých diskusích chrlí "frajerské" anglické věty, samozřejmě s gramatickou úrovní pračlověka. Naproti tomu člověk, který anglicky umí, píše v českých diskusích česky. Asi to souvisí s charakterem - lidi, kteří umí, nepotřebují frajeřit, ti, kteří jsou shnilí něco umět, si to kompenzují tím, že (velmi neuměle) frajeří.

[thingie]

Jak se taková shnilost něco umět projevuje?

[J. M.]

Myslím, že z mého popisu to vyplývá jasně. Jedna věc je neumět něco, co nepotřebuji nebo nemám čas na to se to naučit. Ale když něco hrdě používám a přitom se to odmítám aspoň na úplně nejzákladnější úrovni naučit, pak je to ta shnilost. Kombinovaná s tupostí, exhibicionismem a přehnaným sebevědomím.

[thingie]

Je to takové nezvyklé až divné spojení.

[CIJOML]

Vic nez parodie tak pohodlnost a tradice. Stejne jako uz 10 let pouzivam vsude stejnou ikonu, tak cca 9 let pouzivam stejny slogan. Ze je spatne? No a co? Zil jsem s nim driv a muzu i nadale. Dnes bych napsal asi neco jako: "I am linux/unix user only. I like it, because linux is like..." ale nemam potrebu to menit na asi 15ti mistech, kde jsem to mezitim zaregistroval. Driv jsem anglicky tolik nevladnul, dnes jiz ano, ale proc menit neco co me problem nedela a ostatni to drazdi ;)

[Jiří Němec]

Nejsou tento týden nějaké e(/ko)rupce na slunci? Prvně asi 2 dny nešel hdbits, par dnu jsem se nemohl přihlásit na vodafone, pak abclinuxu a teď se mi nedaří dostat na roota.

[Käyttäjä 11133]

Kořen mi jede...

[Jiří Němec]

Už mi jde, asi mi opera opět něco blbě nacachovala a drzela se toho.

[Věroš]

Myslíš www.koren.cz?

Tak tam byl poslední výpadek půl hodiny cca před měsícem kvůli umřelé síťovce.

[Käyttäjä 11133]

jak může kvůli tomuhle někdo platit doménu :)

[Prcek]

Asi neco jako www.unix.cz . A jsou tam navic celkem dobry pisnicky .

[Filip Jirsák]

Na internetu existují i jiné protokoly, než HTTP…

[Věroš]

Kdo tvrdí, že to co je na titulní stránce je jediný obsah webu?

A kdo tvrdí, že to co je na www.koren.cz je jediné, k čemu se ta doména používá?

Nepropadejte panice...

[Pavel Beníšek]

Treba prave docetl Douglese Adamse a pripravuje alfa verzi Pruvodce po galaxii :)

[Jirka]

Hlavní je, že to je validní.

[Dalibor Smolík]

A k tomu ještě navrch, mně nechutnalo pivo.

[houska]

myslis ze to bylo taky diskama?

[tezkatlipoka]

spíš pyskama

[Leoš Literák]

Ja nejsem dostatecne kvalifikovan, abych presne popsal pricinu. Zacalo to tim, ze mysql prestalo prijimat pozadavky. Pak jsme zjistili, ze souborovy system je jen ke cteni. Load vylezl na nekolik set (bezne 0,3). Po restartu byla objevena porucha jednoho disku, pokracovali jsme tedy jen s druhym a vse rozjeli. Jenze za ctvrt hodiny se situace zopakovala. Admini pak museli tvrde pracovat, aby system dostali do konzistentniho stavu. Pochopitelne porucha se projevila v nejmene vhodny okamzik, holt Murphyho zakony Vsem ctenarum se omlouvame.

[CIJOML]

A pritom je to tak jednoduche. Mit dva disky od dvou ruznych vyrobcu kazdy pripojeny na vlastni radic - i kdyz to stoji vic penez, clovek si alespon neutrhne ostudu a navic vypadek jednoho zarizeni ve vetvi nemuze poskodit druhou zcela nezavislou vetev.

[Dan Ohnesorg]

Akorat ze tady zrejme nastalo neco jineho nez HW porucha.

Tady doslo primarne k nejake chybe filesystemu, takze ten se premountoval do ro rezimu. To zastavilo mysql a nasledoval raketovy narust loadu, coz je bezny stav kazdeho apache nebo tomcat stroje po vypadku databaze.

To ze po rebootu kleknul disk bych videl jako skrytou zavadu, ktera se projevila jak uz to byva pri kalibraci disku po resetu.

Stroj na kterem bezi abicko pravdepodobne nema dva nezavisle scsi kanaly a objednat u sunu dva scsi disky od ruznych dodavatelu je uz tuplem utopie. Navic abicko prece jen neni aplikace na rizeni letoveho provozu, ze. A milion za den take nevydela.

[CIJOML]

A proto jsem to provozoval na obycejnem Pentiu 4 ;) Ruzne disky mohou byt klidne od stejne firmy, jen nesmi byt stejne rady a kapacity. I kdyz ja sam davam prednost jinemu vyrobci. Kolik ten server stoji/stal a jake ma naklady na provoz to si mel provozovatel spocitat predtim nez poridil znackove zelezo. Pro potreby takovehoto projektu je proste znackovy stroj absolutne zbytecny.

[Robert Krátký]

Značkové železo Sun daroval. Kromě toho je v této situaci lhostejné, jestli abíčko běží nebo neběží na značkovém hardwaru - stejný problém mohl nastat i na Pentiu.

[CIJOML]

Znackovy stroj, znackove ceny, znackove problemy. Neznackovy stroj, dalsi radic a disky za par supu, zadne poniceni prestize :)

[d.f.h]

Přesně tohle se mi stalo před několika týdny, úplně stejné příznaky i vývoj situace. Měli jsme podezření na "násilné vniknutí" , ale nepotvrdilo se... Asi to bude opravdu něco s mysql.