4. 全闪存存储网络接入设计

全闪存阵列的时延已经压到亚毫秒级，如果前端网络仍停留在传统以太网或低速率FC，存储控制器的性能会被网络直接“截断”。因此，接入设计不是简单的“接上线、划个Zone”，而是要在协议、速率、收敛比、交换机端口能力和主机侧多路径之间做一次完整的匹配。本节围绕FC、iSCSI、NVMe-oF over FC与NVMe-oF over RoCE四条路径，说明选型依据和交换机侧的关键配置点。

一、四种接入方式的定位差异

FC（Fibre Channel）是块存储最成熟的接入方式，采用专用交换网络，帧级流控和信用机制使其在稳定时延和确定性上表现最好，适合Oracle RAC、核心数据库等对抖动敏感的业务。iSCSI把SCSI命令封装进TCP/IP，复用现有以太网，成本低、运维门槛低，但TCP协议栈和拥塞控制会引入额外时延与CPU开销，适合虚拟化、文件服务、备份等对时延不极端敏感的场景。

NVMe-oF是把NVMe命令直接映射到网络上的协议，目标是保留NVMe的低队列深度、高并发特性。它有两种主流承载：NVMe-oF over FC沿用FC物理层与交换网络，把NVMe命令封装进FC帧，主机侧通常通过FC-NVMe HBA接入，兼容既有SAN布线；NVMe-oF over RoCE则运行在无损以太网上，依赖PFC（优先级流控）和ECN（显式拥塞通知）构建无损域，单端口速率可达100GbE甚至400GbE，带宽密度和单位成本优于FC，但对网络配置的精确性要求最高。

二、选型判断：从业务时延目标反推协议

选型的第一步不是看交换机型号，而是明确业务能接受的时延上限和IOPS密度。可以用一个简单的判断链：若业务要求稳定在0.3ms以内且对抖动极敏感，优先FC或NVMe-oF over FC；若要求高吞吐、单主机多队列并发，且机房已具备25/100GbE无损网络能力，选NVMe-oF over RoCE；若预算有限、团队只有以太网经验，iSCSI是务实起点，但应规划未来向NVMe-oF迁移的路径。

以某数据库集群为例：8台数据库服务器，每台需要约15万IOPS、平均时延目标0.5ms。若采用32Gbps FC，单端口理论带宽约3200MB/s，按70%有效利用率约2240MB/s，8台主机通过双端口HBA接入两台FC交换机，存储侧配置8个32Gbps目标端口，收敛比接近1:1，可满足需求。若改用25GbE iSCSI，单端口约2500MB/s，但TCP开销和中断处理会使实际有效带宽下降约15%~25%，在同等IOPS下时延可能升至0.8~1.2ms，需要更多端口或更高主频CPU来补偿。

三、SAN交换机配置要点

FC交换机配置的核心是Zone划分与端口绑定。推荐使用单initiator单target的Zone，避免多主机共享同一Zone导致RSCN风暴和误路径。Zone成员优先使用WWN硬绑定，而不是基于物理端口，这样更换HBA或端口后无需重配。对于NVMe over FC，还需在交换机上启用NVMe相关特性，并确认固件支持FC-NVMe；主机侧使用nvme-cli发现目标：

# 发现NVMe over FC目标
nvme discover -t fc -a nn-0x1000000000000001:pn-0x1000000000000001
# 连接子系统
nvme connect -t fc -a nn-0x1000000000000001:pn-0x1000000000000001 \
  -n nqn.2019-08.com.pure:array01
# 查看已连接控制器
nvme list-subsys

对于iSCSI，交换机侧重点是VLAN隔离、MTU 9000端到端一致、以及STP或MLAG的收敛时间。存储与主机应处于同一二层域或通过路由可达，但建议独立VLAN，避免广播干扰。主机侧使用iscsiadm登录：

iscsiadm -m discovery -t sendtargets -p 10.10.20.11:3260
iscsiadm -m node -T iqn.2019-08.com.pure:array01 -p 10.10.20.11:3260 -l
iscsiadm -m session -P 3

RoCE配置的关键在三处：一是PFC，为存储流量分配独立优先级（如Priority 3），并在所有上行链路和主机端口启用PFC；二是ECN，在交换机上对存储队列设置ECN阈值，配合主机DCQCN实现拥塞控制；三是DSCP标记，主机侧将NVMe/RoCE流量标记为DSCP 26或类似值，交换机映射到对应优先级队列。任何一处不一致，都可能导致丢包后重传，时延反而高于FC。

四、多路径与冗余设计

无论哪种协议，主机到存储至少要有两条物理独立路径，分别经过两台交换机、两块HBA/NIC、两个存储控制器端口。ALUA模式下，存储会标记主动/被动路径，主机多路径软件应配置为“最短队列”或“故障切换”策略。对于NVMe-oF，原生多路径（native multipath）由主机内核管理，需确认内核版本支持；对于iSCSI，建议启用CHAP双向认证，并设置合理的noop超时和队列深度。

五、配置检查清单

最后，接入设计完成后应做一次路径故障演练：拔掉一条链路，观察主机多路径是否在秒级切换、业务是否出现超时。FC通常切换在1~2秒内，iSCSI取决于超时参数，RoCE则要确认PFC和ECN在单链路故障时不会引发全局暂停。只有验证过切换行为，接入设计才算真正闭环。