Server pro VPS hosting - III. (diskuse)

[Max]

Ještě bych doplnil, že iLO verze 1 a 2 jsou trochu tragické, co se týče rychlosti a remote desktopu, který se musel dokupovat (+ šel použít 60day trial key). V nových verzích 3 a 4 je remote(vzdálený monitor) dostupný po nějakou dobu, poté dodje k odpojení a můžete se znovu připojit. Je to tedy trochu jinak pojatý trial, ale pro drobné zásahy plně dostačující.
Taktéž rychlost a funkcionalita je u iLO 3 a 4 úplně někde jinde.
Zdar Max

[VSi]

Můžu potvrdit. Jinak u iLO 3 bez extra licence na KVM se hodí příkaz TEXTCONS, který umožňuje zobrazit a ovládat VGA konzoli v textovém VGA módu, což je o dost lepší než obyčejná sériová konzole. Co můžu srovnat, tak nejnovější DELL iDRAC 7 (Express verze) se mi zdá o dost lepší a s více možnostmi než iLO.

[Honza Jaroš]

No nevím, nevím. Na mém ML310e to píše tohle:

iLO 4 Standard 1.20 at  Feb 01 2013
Server Name: host is unnamed
Server Power: On

</>hpiLO-> TEXTCONS

status=2
status_tag=COMMAND PROCESSING FAILED
error_tag=COMMAND ERROR-UNSPECIFIED
Thu Sep 12 14:28:48 2013

iLO Advanced License required for this functionality.

[Dundee5]

Narazil jsem teď na dost nepříjemnou věc:

Nevím jestli je to jen chyba tohohle kusu, ale po vypnutí a úplném odpojení napájení se iLo už nevzpamatuje. Musím ho pak resetovat do factory nastavení a znovu nahrát konfiguraci, aby začalo opět fungovat. Máte někdo podobnou zkušenost?

[Max]

Rozhodně žádnou takovou podobnou zkušenost nemám a takto by se to rozhodně nemělo chovat. Běžně se nám stává, že na pobočkách občas odstřihnou proud apod. a nikdy se nestalo, že by se iLO neprobudilo. Stejně tak, když přenášíme servery.
Jinak, co to znamená, že se nevzpamatuje? Jaké má v sobě nastavení (po tom odpojení z napájení)?
Zdar Max

[Dundee5]

Nastavení má v sobě správné (alespoň to tak vypadá), ale nepřipojí se na sdílený port. Firmware mám aktuální...

[Max]

Takže spíš stále problém s nastavením sdíleného portu. To bych spíš zkusil HP forum.
Zdar Max

[Dundee5]

Máš pravdu, zakopaný pes byl opravdu jen v tom nastavení sdíleného portu.

Ta konfigurace, co je uvedena v článku, totiž sdílený port nenastavuje a fail je, že když jí člověk přes hponcfg nahraje, začne iLo dočasně fungovat, přestože by imho vůbec nemělo.

[Dundee5]

Tak ještě jeden postřeh: nenastavujte iLo přes rozhraní Intelligent Provisioning, píše to tam občas bludy.

[Dundee5]

Hm, tak najednou to začalo fungovat všechno správně. Jediné, co jsem přitom udělal byl factory reset v iLo setupu...Přitom factory reset jsem předtím dělal několikrát a nic se neměnilo. Zajímavé :)

[Kvakor]

Pokud by o to šlo, tak je možné provozovat SSD tak, že se na něj nebude vůbec zapisovat, i když není připojené jako readonly - stačí použít device mapper v režimu snapshotu (hezky popsané tady). Pro /root, kam se zapisuje jen málo a většinou na ta samá místa (stavové soubory v /etc jako /etc/mtab), by to bylo perfektní, ale je třeba device maper, blokové zařízení pro snapshot a netriviální nastavení při bootování.

[PetrHL]

Já si s iLo o víkendu "hrál" více než jsem chtěl. Na serveru mám verzi, myslím, 1.20 a už je novější a ta podporuje i IPV6. Stáhl jsem tedy image ze stránek HP, vypálil na DVD a chtěl aktualizovat firmaware. Po nabootování naběhl program na flashování, ale byl v grafice. To by tak nevadilo, kdyby písmo nebylo velké asi 1mm a bylo k přečtení. Vyzkoušel jsem dva monitory, dopadl jsem vždy stejně. Co za blba to napadlo? Tomu by bohatě stačil textový režim!!

Jak už se asi dá očekávat, aktualizace se nepovedla, kromě červeného křížku na obrazovce jsem nevyčetl nic . Po restartu server funěl jak turbína a při bootu mě poslal do háje, že iLo neodpovídá. No super. Trápil jsem googla asi hodinu nebo dvě, zkoušel různé restarty, znovu update firmware, řádkovou utilitu pro upgrade a nic. Nakonec jsem se naštval a zkusil to vypnout fyzicky ze zásuvky a chvilky nechat. iLo se vzpamatovalo, ale furt tam mám starou verzi.

Je to mé úplně první setkání se serverovým HW. Překvapilo mne několik věcí. Třeba myš v balení. Jsem si říkal, na co proboha. Utilita pro nastavování HW RAIDU je v grafice . V BIOSu jsem HW RAID vypl, používám SW RAID 10.

Po přihlášení do iLo je tam položka Remote console, která vyžaduje Javu. OK, přežiju to. Co je horší, po asi 20 sekundách se Remote console ukončí s tím, že si mám koupit licenci. Cože?? Já měl za to, že je to už v ceně.

Můj server má dvě síťovky, jedna z nich je společná pro iLo i OS. Podle toho, co jsem našel v Googlu, nelze mít pro OS i iLo stejnou IP adresu. Nevím dostanu-li v místě připojení dvě IP adresy, proto jsem chtěl podporu IPV6 protože tam dostanu /64 a budu to moct nastavit. Je to pravda?

Prosím, uveďte mé domněnky pravou míru. Je to poprvé, co jsem měl v ruce serverový HW, doteď jsem měl čest pouze se skládačkami. Díky!

[Dundee5]

Zkus iLo aktualizovat pomocí scexe souboru přímo z Linuxu, to mi prošlo na první pokus.

Myš mě taky pobavila :)

Remote console je bohužel jen v iLo advanced, za které se musí připlatit, no...

S IPv6 se obávám, že moc nepochodíš, aspoň mě iLo 4 píše (firmware verze 1.20): Shared Network Port currently does not support IPv6.

[PetrHL]

Aktualizaci jsem zkoušel, scexe mě pošle někam. Prý nemůže udělat downgrade. Že by se ten upgrade firmware povedl? Nevím. Fakt to nebylo k přečtení.

Kolik to iLo advanced stojí? Ten můj stroj je HP ProLiant ML310e tower, mám to na své hobby projekty. Na samotný server to bude vydělávat tak tři roky . Sice je na stránkách HP nějaký ceník, ale absolutně se v něm nevyznám.

Nevím je-li to normální, ale hledání čehokoliv na stránkách HP je naprosto šílené. Něco najít je za trest. To raději přes Google než se proklikávat tím webem.

Bohužel tu hlášku o nepodpoře IPV6 tam mám taky . Já ten stroj kupoval hlavně kvůli tomu vzdálenému přístupu když se podělá OS. Stroj bude ode mne relativně daleko ... .

[Dundee5]

Ona se ta konzole zavře až po chvíli a dá se pak znovu otevřít, takže na nějaké záchranné práce to snad stačí.

BTW: Jak jsi nastavil ze kterého disku to má bootovat? Přidal jsem teď další disky a nenašel jsem jak vybrat, ze kterého to má číst...Je tam jen výběr mezi CDčkem, HDD a USB, ale konkrétní disky tam nikde nejsou...

[PetrHL]

Přidal jsem tam dva disky. V BIOSu se někde dalo vybrat bootování z disku C:. Opravdu to tam taky bylo pojmenováno. Zřejmě se snaží o boot z /dev/sda. Více jsem zatím nezkoušel. Až přijdu večer domů, zkusím vykoumat více a dám vědět. K dalšímu testování, jak se to bude chovat při smrti jednoho disku, jsem se zatím nedostal.

Ano, všiml jsem si toho. Jen je to neustálé zavírání a otevírání dosti otravné. Něco se podělat a já takto muset strávit třeba půl hodiny ... .

[Dundee5]

Přesně takhle to tam mám pojmenované taky. Systém ale nemám na 1. disku, takže to nic nenajde...

[Dundee5]

Prošel jsem manuál a prolezl celý BIOS a zdá se, že při použití AHCI opravdu nelze změnit pořadí bootování disků. To je teda trošku fail :)

Ten jejich faik HW RAID ale rozhodně použít nechci, takže jsem holt přešoupal disky.

[Honza Jaroš]

Ten jejich HW RAID je u tohohle modelu zaplaťpříroda natolik inteligentní, že když pro každý disk nastavím samostatný RAID0 přes celou velikost disku, jsou disky z Linuxu vidět jako by byly pověšené na AHCI a jde se k nim dostat i přes smartctl.

Zjistil jsem to náhodou - zdá se, že se nemá rád originální firmware WDC RE4, AHCI chipset v tomhle serveru a linuxové ovladače z aktuálního OpenVZ jádra. Originální disky dodané se serverem (které mají také nálepku WDC RE4, ale na SMARTu se hlásí jinak) mají očividně jiný firmware, který tu chybu nedělá, ale u dokoupeného čistého RE4 mi při plném zatížení disku (synchronizace RAIDu) a současném spuštění "smartctl -t long /dev/sdc" začal řadič hlásit chyby NCQ. Vypnutí NCQ sice pomohlo, ale práce s diskem se rapidně zpomalila.

Hrál jsem si s tím a když jsem zkusmo v BIOSu zapnul ten jejich HWRAID a udělal nad každým diskem RAID0 volume, chyby zmizely, smartctl funguje naprosto normálně a jádro se tváří, jako by žádný RAID0 nebyl a k diskům se přistupovalo přes normální AHCI. Navíc se při přepnutí ani neztratila data z disku (pozor, při pokusném zrušení RAID0 v tom nastavovacím klikátku to data zlikvidovalo). Takže v případě nutnosti klidně jejich HW RAID použijte.

Nezkoušel jsem, co se stane, když udělám RAID0 jen nad částí disku nebo nad více disky současně. To radši nechám jiným, já tam už teď mám ostrá data...

[Dundee5]

Díky za super postřeh!

Trochu jsem se bál když jsem zakládal ty logické disky, ale opravdu to tak je :) Rychlost čtení také zůstala stejná.

[PetrHL]

Díky! Jen jsem nepochopil jak pak zařídím to bootování, když umře jeden disk. Bude už pak při startu na výběr odkud bootovat?

Systém mám už nainstalovaný a nastavený, ostrá data tam ještě nemám, ale nerad bych to instalovat znovu.

[Dundee5]

Přes iLo se dá stále změnit jen USB/CS/HDD, což mi ale zrovna vyhovuje, protože mám zálohu na SD kartě. Jinak ale přes remote consoli můžeš otevřít to klikátko a tam se bootovací disk už zvolit dá.

[PetrHL]

Rozumím. Ale ten disk se dá zvolit pouze pokud budu mít aktivní ten RAID, že? Sakra práce. Asi si nahraju grub na flasku a budu bootovat z ní, grub pak spustí systém na disku podle volby v menu. To bude asi nejjednodušší.

[Honza Jaroš]

Zkoušeli jste někdo co se stane, když se prostě první disk vyndá? Kdybych ten server měl u sebe, zkusil bych to, ale do brněnského datacentra to mám trošku z ruky. I to vzdálené přepnutí HW RAIDu byl celkem adrenalinový zážitek: nabootuje - nenabootuje...

[Dundee5]

Ten jejich HW RAID si se změnami poradí dobře, projde všechny disky a změní svojí konfiguraci podle toho.

Přehodil jsem bootovací disk z první pozice na šestou a on to jen zahlásil a normálně z něj nabootoval.

[PetrHL]

Večer to doma vyzkouším. Mám tam teď 4 disky, zkusím jeden odpojit a uvidíme co to udělá. Odpojím rovnou ten první, grub by měl být zapsán na všech.

[Dundee5]

JJ, musí tam být ten RAID0. Vzhledem k tomu, že o data nepřijdeš, tak asi není potřeba se toho bát a můžeš to vyzkoušet. Smart array se pak dá vždycky zase vypnout.

[PetrHL]

Bohužel se mi vůbec nedaří. Nevím, kde v BIOSu nastavit aby se snažil bootovat přímo z pole a ne z disku C:. Pořadí jak bootovat mám na řadiči nastaveno.

Boot se nepodaří, skončí to na chybě grubu no such disk nebo tak nějak. Už jsem to zkusil i přeinstalovat ale problém přetrvává.

V Boot controler order nejde nic změnit, je tam jen jedna volba. Můžeš mne, prosím, nakopnout co s tím? Díky!

[PetrHL]

Pokud vypnu HW raid v biosu, system normalne nabehne :(.

[Dundee5]

Odkud se ma bootovat se nastavuje primo v konfiguraci RAIDu (ACU). Kdyz kliknes na cely ten controller, tak je tam nejaka volba boot order nebo tak neco.

[PetrHL]

Jak jsem psal v tom postu, to samozřejmě nastavené mám. Jedná se mi o Boot order IPL v BIOSu. Tam je stále na výběr pouze disk C:.

Pokud nechám RAID zaplý, systém nenabootuje s chybou No such disk. Tedy napíše to grub. Pokud to pole vypnu, systém normálně nabootuje. Tak nevím .

[Dundee5]

Boot order IPL v BIOSU jen rika ze ktereho typu zarizeni se bude bootovat. Takze kdyz tam das jako prvni disk C:, tak to vlastne znamena ze se bude bootvat z HW RAIDu.

[PetrHL]

Takze to mam spravne. Jen to nebootuje .

[Dundee5]

A mas opravdu v HW RAIDU vybrany ten jeden logicky oddil jako prvni bootovaci?

[PetrHL]

Ano, mam. Jde tam vybrat primarni a sekundarni. Ono to nabootuje ale skonci to hlaske grubu no such disk. To budu vecer resit, proc vlastne se to stalo.

[Dundee5]

Aha, zajimave. Mne to identifikaci disku nijak nezmenilo. Zustalo stejne UUID i sdaX.

[PetrHL]

Příloha:

• grub_error.png (5959 bytů)

Tak toto jsem dostal po zadani ls do konzole grubu. Pri tom vytvareni RAID 0, menil jsi tam nejake parametry?

[Dundee5]

Vsechno jsem nechal vychozi.

[PetrHL]

Ja prave taky. Asi budu muset udelat oddeleny boot.

[PetrHL]

Jaky tam mas OS? Ja jsem tam nainstaloval Ubuntu 12.04. Mozna se s tim nemuze popasovat a Tobe to funguje, protoze tam mas neco jineho.

[PetrHL]

Uz asi vim, kde bude problem. Ja to mam na RAID 10, ale bootovat grub asi zvladne jen z RAID 1. Takze si udelam /boot jen RAID 1, zbytek jako raid 10 a bude. Do /boot se tak casto nezapisuje, nebude to brzdit. Vecer zkusim.

[Dundee5]

Mam tam Debian 6, Ubuntu asi bude dost podobne.

Ja mam /boot uplne bez SW RAIDu, je jen na tom "RAID0" nastavenem v BIOSu.

[Honza Jaroš]

Nevím jak dvojkový GRUB, ale jedničkový k tomu - pokud vím - vůbec nepřistupuje jako k RAIDu, prostě vezme první disk a čte z něj. Stačí se podívat na výpis při zápisu MBR (v tomto případě na třetí disk, je potřeba to udělat nad všemi, aby to v případě výpadku bootovalo z náhradního):

grub> device (hd0) /dev/sdc
device (hd0) /dev/sdc
grub> root (hd0,0)
root (hd0,0)
 Filesystem type is ext2fs, partition type 0xfd
grub> setup (hd0)
setup (hd0)
 Checking if "/boot/grub/stage1" exists... no
 Checking if "/grub/stage1" exists... yes
 Checking if "/grub/stage2" exists... yes
 Checking if "/grub/e2fs_stage1_5" exists... yes
 Running "embed /grub/e2fs_stage1_5 (hd0)"...  27 sectors are embedded.
succeeded
 Running "install /grub/stage1 (hd0) (hd0)1+27 p (hd0,0)/grub/stage2 /grub/grub.conf"... succeeded
Done.
grub> 

U RAID10 s tímhle přístupem samozřejmě pohoří...