2. NVIDIA网络平台硬件认知
在数据中心网络验收与工程交付中,硬件认知是第一步。如果连设备型号、接口类型和兼容性边界都判断不清,后续的布线、上电、配置和验收都会埋下隐患。NVIDIA的网络平台主要由四类硬件构成:Spectrum 交换机、BlueField DPU、ConnectX 网卡,以及线缆与光模块。本节围绕“怎么认、怎么配、怎么选”展开,帮助你在现场快速完成型号识别与选型判断。
一、Spectrum 交换机:从型号读出端口能力
Spectrum 系列是 NVIDIA 的数据中心以太网交换机芯片与整机平台,常见整机品牌包括 SN2000、SN3000、SN4000、SN5000 等系列。型号命名通常包含几个关键信息:芯片代际、端口速率、端口数量和形态。例如 SN4600 中的“4”代表 Spectrum-4 芯片代际,“600”对应 64 个 200G 端口或等效的 400G 端口组合。现场识别时,先看前面板端口丝印,再看铭牌上的 SKU,最后核对管理口与 Console 口位置。
Spectrum 交换机的接口类型主要有三类:QSFP28(100G)、QSFP56(200G)、QSFP-DD/OSFP(400G/800G)。QSFP28 和 QSFP56 物理尺寸相同,但 QSFP56 支持 PAM4 调制,可跑 200G;QSFP-DD 采用双密度设计,向下兼容 QSFP。验收时要特别注意:端口速率是否与线缆、光模块、对端网卡匹配,否则会出现链路降速或无法 UP。
二、BlueField DPU:识别形态与接口
BlueField DPU 是“数据中心基础设施处理器”,把网络、存储、安全卸载到独立处理器上。常见型号有 BlueField-2(BF2)和 BlueField-3(BF3)。识别要点:BF2 通常为 PCIe Gen4 x16,带两个 100G/200G 以太网或 InfiniBand 端口;BF3 升级到 PCIe Gen5 x16,支持 400G 端口,并集成更强的 Arm 核与加密引擎。
DPU 的接口分为三类:主机侧 PCIe 接口、网络侧以太网/IB 接口、管理侧带外接口(如 1G RJ45 或 BMC)。现场验收时,先确认 DPU 是否被主机 BIOS 识别为 PCIe 设备,再确认网络侧端口能否与交换机建链。若 DPU 工作在 DPU 模式而非 NIC 模式,主机侧可能只看到一个管理设备,这是正常现象,不要误判为故障。
三、ConnectX 网卡:速率与协议识别
ConnectX 系列是服务器侧智能网卡,常见型号有 ConnectX-5、ConnectX-6、ConnectX-6 Dx、ConnectX-7。型号中的数字越大,代际越新、速率越高。ConnectX-5 支持 100G,ConnectX-6 支持 200G,ConnectX-6 Dx 增加加密与卸载能力,ConnectX-7 支持 400G 并面向 PCIe Gen5。
识别网卡时,重点看三个信息:PCIe 代数与通道数(决定主机侧带宽上限)、网络端口类型(QSFP28/QSFP56/QSFP-DD)、支持的协议(Ethernet、InfiniBand 或 VPI 双模)。例如 ConnectX-6 VPI 卡既能跑以太网也能跑 IB,选型时要根据组网协议决定固件模式。验收时可用 lspci | grep Mellanox 确认设备存在,再用 ibstat 或 ethtool 查看链路速率与协议状态。
四、线缆与光模块:兼容性矩阵的核心
线缆与光模块是兼容性问题最集中的环节。常见类型包括:DAC 直连铜缆(无源/有源)、AOC 有源光缆、光模块 + 光纤跳线。DAC 成本低、时延小,适合机柜内短距离(通常 3 米以内);AOC 适合 5~30 米;光模块加光纤适合更长距离和跨机柜场景。
光模块按速率和封装分为:100G QSFP28、200G QSFP56、400G QSFP-DD/OSFP。选型时必须核对三项:封装匹配(端口物理形态一致)、速率匹配(两端速率一致或支持降速)、协议匹配(以太网模块不能插到 IB 端口上直接使用,除非是 VPI 双模)。此外,NVIDIA 交换机对光模块有兼容性列表,非认证模块可能无法识别或报错,验收时应优先使用官方认证或明确兼容的模块。
五、选型依据与现场验收要点
选型不是“越贵越好”,而是“匹配场景”。机柜内服务器到交换机,优先选 DAC,成本低、时延小;跨机柜或距离超过 5 米,选 AOC 或光模块。交换机端口是 400G QSFP-DD,对端网卡是 200G QSFP56,可以用 400G 端口拆分为 2×200G 的方式连接,但需要交换机支持 breakout 配置。DPU 场景下,要确认 DPU 的网络端口速率与交换机端口一致,同时确认主机侧 PCIe 带宽不会成为瓶颈。
现场验收时,建议按以下顺序核对:第一,看铭牌和 SKU,确认型号与采购清单一致;第二,看端口丝印,确认封装类型和速率;第三,插模块或线缆,观察链路指示灯和交换机日志;第四,用命令查看链路速率、协议状态和误码计数。若链路无法 UP,先查封装是否匹配,再查速率是否一致,最后查协议模式是否正确。兼容性问题往往不是“坏了”,而是“配错了”。
掌握这四类硬件的型号规律、接口类型和兼容性判断方法,就能在验收现场快速定位问题,避免因选型错误导致返工。下一阶段将进入上电与初始配置环节,届时会用到本节识别出的端口和模块信息。