Dotaz: interface order

[drunkezz]

Nazdar, potreboval by som poradit ohladom interface orderingu

Situacia je nasledovna

pride server s 6 interfejsmi klasicky 4gigabitove porty + 2 10 gigove

setup je taky ze 1 a 3 tvoria produkcny/mgmt bond0, port 2 a 4 bond1 pre backup trafficv a z 10Gig je spraveny bonding pre interkonekt povedzme

porblem nastava pri boote a kickstarte, anakonda/udev to naseka to systemu rozne inak

Oracle linux 6.8 jadro 3.8.13-68.3.4.el6uek.x86_64

Ako teda forsnut kernel aby ich systemu podhodil v spravnom poradi?

dakujem

Odpovědi

[Michal Kubeček]

Můžete si napsat vlastní pravidla pro udev.

[drunkezz]

ide o to ze potrebujeme spravny order uz pri prvom boote/prvej instalacii a mac adresy nevieme.

Mozno by siel spravit nejaky hook v kickstarte..., lenze aj tam uz moze byt discovernute poradie interfejsov zle, najlepsie vychadza fakt ten order podla pozicie v systeme stare rhel jadro este s tym pracuje spravne

D.

[1john2]

Je problem udelat boot z live cd a oscanovat hw?

Zjistil bych si vendor/device id a nazklade toho mapoval. Iface v ramci karty budou ocislovane vzdy stejne, takze by se s tim melo dat pracovat.

[drunkezz]

jj je

ked sa jedna o mnozstvo serverov tak jee to proste cas navyse...take HP 380G7+ boottuje 10+ minut

ako ak  nebuude ina moznost tak nic ine nam neostava, ale ak byy bol nejaky elegantny hook/parameter tak by to bolo skvele

D.

[Peter Golis]

A je nejaký problém to inštalovať cez iLO kartu, a nakonfigurovať tú sieť ručne? Ajtak tam budeš pripájať inštalačné médium cez iLO a nepredpokladám že by si mal tých servrov nahodiť viac ako sto za deň.

[drunkezz]

presne o to ide ze to nie je rucna instalacia

je to kompletne unattended instalacia (pxe, kickstart a potom orchestratorom riesene post install akcie), nerieste prosim ako to spravit inak, ak viete alebo mate nejaky napad ako riesit to poradie interfacov to by bolo vitane

vdaka

D>

[Peter Golis]

Technicky vzaté, toto je jeden z dôvodov prečo sa pred rokmi začalo prechádzať na značenie sieťoviek enp7s0. PCI pozícia sedem, ... To sa málokedy mení.

Ale vidím v tom dva problémy. Prvý je vo význame vety v ktorej sú slová "to naseka to systemu rozne inak", je nezmyselná. Druhý je v tom, že si stále nevyskúšal za vyše šesť hodín ako sa tie sieťovky podpisujú keďže jeden boot trvá cez 10 minút.

Tretí problém nerozoberám keďže neviem či je tých strojov tak veľa že by si všetkým tým strojom ten bonding za ten čas po inštalácii sám ručne nenastavil. Automatizácia je totižto veľmi pekná vec, ale pri malosériovkách sa nemusí oplatiť.

[drunkezz]

ano strojov je vela

stroje vyzaduju aby boli sietovky pomenovane eth<X> a to podla poradia ako ich HP osadza a oznacuje.

rhel 6.x s jadrom 2.6.32.XXX udev natiahne a vytvori pravidla pre interfaces v tom istom poradi.

je to velky overhead aby sa kazdy server pustal s livecd a zaznacovali sa vsetky mac adresy (co by riesenie bolo podhodit mac adres do kickstartu), kedze ILO vidi len mac adresy onboard interfejsov (WWN a MAC pci kariete ilo nevie detekovat(vraj gen10 uz bude)

D.

[Peter Golis]

Mohol by si rozviesť čo si predstavuješ pod významom vety stroje vyzaduju aby boli sietovky pomenovane eth<X> a to podla poradia ako ich HP osadza a oznacuje.? Pokiaľ viem, strojom je jedno ako sa volá zariadenie, ak nedojde ku kolízii. A ak už vieš ako tie sieťovky HP osádza a označuje, tak už predsa máš kľúč. Stačí si ho overiť počas desať minútového bootu.

[drunkezz]

nj moja velka chyba :) vela slangu

aplikacie a automatizacia (dfacto je jedno co) vyzaduje aby LOM1=eth0 LOM2=eth1 atd.

Servery maju oznacne interfaces

http://www.slickcircuits.com/assets/images/dl380pgen8%20rear.jpg

port vpravo je LOM1 (je pri nom 1) port vlavo je LOM4 je pri nom 4

otazka je ako zabezpecit aby vzdy LOM1=eth0 LOM2=eth1 atd bez toho aby sa stroj musel startovat a zaznamenavali sa mac adresy rucne

D.

[Peter Golis]

Slang ktorý používa len jeden jedinec je nepoužiteľný mimo monológu.

Ohľadne tvojho upresnenia, že potrebuješ mať pripravené plne funkčné riešenie ešte pred tým ako budeš mať tie stroje k dispozícii, tak to je typická požiadavka na platenú podporu. Môžeš skúsiť Oracle, veď k ich OS máš predsa podporu. Ten ich OS nie je free.

[maros]

Pozicia coho?

Naposledy mi na Centose 7 po pridani PCI VGA karty system precisloval 4-portovu NIC: enp5s0f0, enp5s0f1, enp6s0f0, enp6s0f1 na enp4s0f0, enp4s0f1, enp5s0f0, enp5s0f1.

[Peter Golis]

Pozícia slotu v ktorom je tá karta. Pokiaľ je to pravda, tak si mal reklamovať zlú funkčnosť UEFI.

[NN]

Tady se resi neco podobneho a dole je ten PXE templete..

[pavlix]

je to kompletne unattended instalacia (pxe, kickstart a potom orchestratorom riesene post install akcie)

Jo, to je jasné a vůbec bych neřešil lidi, co si myslí, že je praktické to řešit neautomatizovaně. Spíš by to chtělo jednou zjistit, jestli se ty interfaces dají nějak rozumně identifikovat, třeba podle fyzického umístění.

[drunkezz]

nasiel som nieco v podobe podhodenia prerusenia  nieco v style
kernel /boot/vmlinuz netdev=irq=24,name=eth0
otestujem a dam vediet

D.

[k3dAR]

a zkousel si ten kernel parametr: net.ifnames=0
ten prave pojmenovava klasicky ethX tak treba to bude i v tom pozadovanem poradi ;)

[Peter Golis]

Pokiaľ je pravda čo písal už v úvodnej časti otázky, teda že sa mu pomieša poradie kariet už pri štarte, tak to skúšal i keď iným spôsobom. Poradie iniciácie HW je asynchrónne. Teda pokiaľ to nie je jedna onboard 4x1G karta, tam sa mu môže len predbehnúť 10G a 1G. Ale to pomiešanie 1 a 10G riešia názvy zodpovedajúce pozícii na PCI zbernici.

[abc123]

riesil som uplne rovnaky problem. Nejakym zazrakom system 10gbit karty inicializoval skor ako onboard, alebo 1gbit pridavne sietovky, cize servre ktore mali 10gbit mali uplne ine ale zas konzistentne poradie interfacov ako stroje bez 10gbit kariet. 

U nas to bolo male mnozstvo servrov tak sme to rucne pofixovali. Riesenim tvojho problemu bude regex v kickstarte ktory urci co je onboard a co je extra karta. Kazdy vendor ma specificku MAC, vsimni si ze to vyzera nejak nasledovne:

onboard porty:
XX:XX:XX:XX:XX:XA
XX:XX:XX:XX:XX:XB
XX:XX:XX:XX:XX:XC
XX:XX:XX:XX:XX:XD

10gbit karta:
YY:YY:YY:YY:YY:YA
YY:YY:YY:YY:YY:YB