Dotaz: Bonding, rôzne režimy

[qwertysimo]

Dobrý deň,

prečítal som si v tomto fóre asi 10 príspevkov, ktoré sa naozaj týkali témy bonding, ale chcem sa spýtať na pár detailov.

Riešil som problém s pomalým downloadom cez sambu a jeho vyriešenie spočívalo v použití kvalitnej sieťovej karty zn. Intel. Aktuálny stav je taký, že upload cez sambu mi ide cca 55 MB/s a download cca 35 MB/s. Napadlo mi, že keď kvalitná sieťovka zvýšila download o 75 %, či by ho ešte nebolo možné zvýšiť pomocou bondingu s dvomi sieťovkami.

Konkrétne, mám 2-portovú serverovú sieťovku Intel (link) a gigabitový switch SMC (link), ktorý podľa manuálu podporuje port trunking (alebo link aggregation - raz píšu tak, raz onak). Oba porty sieťovky som zapojil do prvých dvoch portoch na switchi, oba porty priradil na switchi do trunku a začal testovať.

• Bonding s "mode=0" spravil to, že klesol download cez sambu cca na 20 MB/s!
• Bonding s "mode=1 primary=eth1" sa tvári úplne neaktívne. Nedokážem pingovať hostiteľov v sieti. Pohľad do /proc/net/bonding/bond0 uvádza stav "up", eth1 ako primárny slave.
• Bonding s "mode=2" dáva normálny dowload cez sambu
• Bonding s "mode=3" dáva o niečo menší ako normálny download cez sambu
• Bonding s "mode=4" - od neho som očakával najviac. Už pri aktivácii píše:

  Warning: No 802.3ad response from the link partner for any adapters in the bond

  Po aktivovaní tiež nedokážem pingovať hostiteľov. V /proc/net/bonding/bond0 je uvedené:

  Bonding Mode: IEEE 802.3ad Dynamic link aggregation
  Transmit Hash Policy: layer2 (0)
  MII Status: up
  MII Polling Interval (ms): 100
  Up Delay (ms): 0
  Down Delay (ms): 0
  
  802.3ad info
  LACP rate: slow
  Active Aggregator Info:
          Aggregator ID: 1
          Number of ports: 1
          Actor Key: 17
          Partner Key: 1
          Partner Mac Address: 00:00:00:00:00:00
  
  Slave Interface: eth1
  MII Status: up
  Link Failure Count: 0
  Permanent HW addr: 00:15:17:6f:a1:b4
  Aggregator ID: 1
  
  Slave Interface: eth2
  MII Status: up
  Link Failure Count: 0
  Permanent HW addr: 00:15:17:6f:a1:b5
  Aggregator ID: 2

  Problém je zrejme v prvej časti, nulová MAC adresa partnera. Vie niekto, čo to znamená? Že switch nepodporuje 802.3ad?

V tejto chvíli sa javí ako najpoužiteľnejší režim 2. Dal som z dvoch PC downloadovať cez sambu na serveri, každé PC komunikovalo cez samostatný port (sledoval som podľa blikania LED pri kopírovaní), funguje aj redundancia (odpojil som jeden kábel), ale, download v súčte na oboch PC bol stale okolo 35 MB/s. Určite to nie je limit čítania z disku, pretože to testujem na RAID 0 s čítaním 300 MB/s (hdparm) a pri kopírovaní v rámci disku je rýchlosť cez 120 MB/s).

Dokáže mi niekto z vás poradiť, ako rozchodiť režim 4, resp. či je možné z toho vyťažiť viac ako tých 35 MB/s cez bonding? Ďakujem

qwertysimo

Odpovědi

[miso]

A ako mas nastaveny ten switch?

Specialne pri mode 4 sa pise:

Most switches will require some type of configuration to enable 802.3ad mode.

[qwertysimo]

/Documentation/networking/bonding.txt som čítal. "Konfiguráciu switchu" som chápal ako priradenie portov do trunku, nakoľko nič iné sa v nastaveniach switchu spraviť nedá.

[Petr Kočvara]

No problém je v tom, že ty porty na switchi by neměly být do trunku nastaveny natvrdo v jeho konfiguraci, jen by na nich mělo být povoleno LACP, které automaticky zajistí jeho vytvoření pokud je to potřeba. Druhá věc je, zdali to ten switch vůbec umí.

[qwertysimo]

Našiel som PDF od SMC, v ktorom sa píše, že áno, ten switch podporuje 802.3ad, v krásnej tabuľke s "fajkou" na riadku "Link Aggregation (802.3ad)", rovnako ako enterprise modely...

O chvíľu neskôr som našiel na 20. strane iného 50-stranového PDF od SMC, že tento model podporuje len statické 802.3ad...

Vďaka za váš čas. Teším sa na ďalšie marketingovo-orientované PDFká.

[Petr Kočvara]

Koukal jsem na ten link, který jsi uvedl v prvním příspěvku a ten switch dynamickou agregaci opravdu neumí. Nicméně ten mód 2 je v podstatě to stejné jen pro statickou agregaci. Výkonnostní rozdíl v tom nebude žádný. Výhoda bondingu se stejně projeví až ve chvíli kdy s tím počítačem bude komunikovat více klientů najednou.

[qwertysimo]

Áno, režim 2 resp. 4 sa odlišujú v spôsobe konfigurácie, staticky resp. dynamicky. Podľa bonding.txt využívajú defaultne rovnakú politiku hašovania na určenie linky vo zväzku, ktorou pôjdu von údaje. Ešte raz vďaka.