Dotaz: Server Supermicro Debian Bookworm, nedaří se nahodit 10Gb SFP fibre interface

[fatman]

Zdravím vás, prosím o pomoc, možná mně někdo posune k řešení, abych měl Link detected: yes na rozhraní karty? Síťová karta:

Ethernet controller: Intel Corporation 82599 10 Gigabit Network Connection (rev 01)

SFP pro tuto síťovou kartu mi doporučil jako kompatibilní prodejce serveru, ethtool -m enp1s0 vidí:

Transceiver type                          : 10G Ethernet: 10G Base-SR
Laser wavelength                          : 850nm
Vendor name                               : Intel Corp
Vendor PN                                 : FTLX8574D3BCV-I5

Zkompiloval jsem a zavedl ovladač:
https://downloadmirror.intel.com/856156/ixgbe-6.1.4.tar.gz
Protější strana je switch, SFP Linktel, taky 850nm. Po příkazu ip link set up dev enp1s0, se rozsvítí kontrolka portu na switchi:

show interfaces xe-0/2/2
Physical interface: xe-0/2/2, Enabled, Physical link is Up

Na serveru kontrolka portu nesvítí a ethtool říká Link detected: no.
Obě SFP jsou nové, multimod kabel taky. Když přechodím pořadí vláken, port na switchi se nerozsvítí.
modinfo ixgbe:

filename:       /lib/modules/6.1.0-37-amd64/updates/drivers/net/ethernet/intel/ixgbe/ixgbe.ko
version:        6.1.4
license:        GPL
description:    Intel(R) 10GbE PCI Express Linux Network Driver

dmesg:

ixgbe 0000:01:00.0 0000:01:00.0 (uninitialized): ixgbe_check_options: FCoE Offload feature enabled
ixgbe 0000:01:00.0 0000:01:00.0 (uninitialized): allow_unsupported_sfp Enabled
ixgbe 0000:01:00.0: Multiqueue Enabled: Rx Queue count = 8, Tx Queue count = 8 XDP Queue count = 0
ixgbe 0000:01:00.0: 32.000 Gb/s available PCIe bandwidth (5.0 GT/s PCIe x8 link)
ixgbe 0000:01:00.0 eth0: MAC: 2, PHY: 20, SFP+: 5, PBA No: 0210FF-0FF
ixgbe 0000:01:00.0: ac:1f:6b:ac:06:fa
ixgbe 0000:01:00.0 eth0: Enabled Features: RxQ: 8 TxQ: 8 FdirHash
ixgbe 0000:01:00.0 eth0: Intel(R) 10 Gigabit Network Connection
ixgbe 0000:01:00.0 enp1s0: renamed from eth0
ixgbe 0000:01:00.0: registered PHC device on enp1s0
ixgbe 0000:01:00.0 enp1s0: detected SFP+: 5
ixgbe 0000:01:00.0 enp1s0: detected SFP+: 5
ixgbe 0000:01:00.0: removed PHC on enp1s0
ixgbe 0000:01:00.0: registered PHC device on enp1s0
ixgbe 0000:01:00.0 enp1s0: detected SFP+: 5

Odpovědi

[X]

Dej sem jeste vystup ethtool.

[včera 09:55 fatman]

přikládám níže, negotation vypnout nelze:

ethtool -s enp1s0 speed 10000 duplex full autoneg off
netlink error: link settings update failed
netlink error: Invalid argument

ethtool enp1s0
Settings for enp1s0:
        Supported ports: [ FIBRE ]
        Supported link modes:   1000baseT/Full
                                10000baseT/Full
        Supported pause frame use: Symmetric
        Supports auto-negotiation: Yes
        Supported FEC modes: Not reported
        Advertised link modes:  1000baseT/Full
                                10000baseT/Full
        Advertised pause frame use: Symmetric
        Advertised auto-negotiation: Yes
        Advertised FEC modes: Not reported
        Speed: Unknown!
        Duplex: Unknown! (255)
        Auto-negotiation: on
        Port: FIBRE
        PHYAD: 0
        Transceiver: internal
        Supports Wake-on: d
        Wake-on: d
        Current message level: 0x00000007 (7)
                               drv probe link
        Link detected: no

[včera 11:42 X]

Link detected: no

Fyzicky problem? Mas to korektne zapojene/zacvaknute? Prepinac sviti? Vidis laser na kabelu? Stav linky na prepinaci je jaky? Tu protistranu mas odzkousenou jako funkcni?

[včera 18:20 fatman]

řekl bych, že fyzický problém to asi nebude, lasery svítí, diagnostika SFP na serveru ukazuje:

Receiver signal average optical power     : 0.5585 mW / -2.53 dBm

diagnostika SFP na switchi ukazuje:

Laser receiver power                      :  0.5339 mW / -2.73 dBm

Dívám se na správné rozhraní, ověřeno shozením rozhraním a opětovnou diagnostikou. Doufám, že někde nedělám nějakou školáckou chybu. Skoro se mi to jeví jako HW závada karty, nebo SW bug karty, či BIOS.

[včera 18:53 X]

Myslel jsem ethtool -i, kvuli verzi firmware. Ono prodejce doporucil kartu, ale ja ji na seznamu nevidim.

[včera 19:03 X]

Myslim ten modul. Plus kometare jako:

If your 82599-based Intel(R) Network Adapter came with Intel optics, it only supports Intel optics.

nebo, Co vypis 'ip link show'?

[včera 22:08 fatman]

prodejce dodal server s kartou, později jsem objednal ten SFP. Na straně switche tedy musí být taky SFP Intel?

ip link show
enp1s0: <NO-CARRIER,BROADCAST,MULTICAST,UP > mtu 1500 qdisc mq state DOWN mode DEFAULT group default qlen 1000