1. 课程导入与EPYC集群设计总览

欢迎进入《AMD EPYC企业服务器集群架构设计》课程。在开始讨论具体的主板选型、内存通道分配、NUMA绑定或Infinity Fabric拓扑之前，我们需要先建立一张"全局地图"：EPYC处理器家族到底覆盖哪些定位，企业集群架构设计要同时考虑哪些层次，以及哪些硬性约束会直接决定后续所有设计决策。本章不涉及具体命令操作，但会给出贯穿全课程的判断框架——后续每一章的参数选择、拓扑设计和调优手段，都可以回溯到本章的原则与约束上。

一、学习目标

完成本课程后，你应当能够独立完成以下任务：根据业务负载特征（高并发Web、内存数据库、HPC、虚拟化密度、AI推理等）选择合适的EPYC代际与SKU；设计从单路/双路节点到机架、再到集群互联的分层架构；正确规划NUMA域、内存通道、PCIe通道与GPU/NVMe的配比；识别并规避常见的架构陷阱，例如跨NUMA访问导致的延迟抖动、PCIe通道不足导致的加速卡降速、以及机架级供电与散热瓶颈。这些目标不是孤立的知识点，而是一条从"芯片特性"到"集群交付"的完整链路。

二、AMD EPYC处理器家族定位

理解EPYC的家族定位，关键不是背型号，而是理解AMD用"代际+核心密度+缓存+内存通道+PCIe代数"这几个维度来划分产品。第一代Naples（7001系列）确立了"单路即多路"的核心理念，用32核和8通道DDR4打破了传统双路才能堆核的格局；Rome（7002系列）引入chiplet设计，把计算芯粒与I/O芯粒分离，使核心数跃升至64核，并首次支持PCIe 4.0；Milan（7003系列）在相同平台上提升IPC与缓存效率，成为企业虚拟化和数据库的主力；Genoa（9004系列）将核心数推到96核，支持DDR5与PCIe 5.0，并引入CXL内存扩展；Bergamo（9754等）则针对云原生高密度场景，用Zen 4c核心换取更高的每机架吞吐；Siena（8004系列）面向边缘与低功耗场景，控制TDP与成本。对于集群设计者而言，代际决定了平台能力上限（内存类型、PCIe代数、CXL支持），而具体SKU决定了核心数、频率、缓存与TDP的平衡点。

三、企业服务器集群架构设计全景图

企业集群架构可以自上而下分为五层：业务层（应用与SLA）、调度层（Kubernetes、Slurm、vSphere等）、节点层（EPYC服务器本身）、互联层（以太网、InfiniBand、Infinity Fabric片内互联）、基础设施层（供电、散热、机架与机房）。很多设计失败并非因为选错了CPU，而是因为层与层之间的约束没有对齐——例如调度层按逻辑核分配任务，但节点层存在NUMA域，导致跨域内存访问；又如互联层按25G网卡规划，但节点层PCIe通道被GPU占满，网卡只能降速运行。因此，全景图的价值在于提醒我们：任何单点优化都必须放回整条链路中验证。

四、核心设计原则与约束

原则一：以负载定SKU，而非以核心数定SKU。核心数多不等于性能好。对于高频交易或单线程敏感型负载，Milan 7003系列中高频率的16~32核SKU往往优于96核的Genoa低频率型号；对于虚拟化密度场景，Genoa 9004系列的96核配合大容量DDR5才能发挥优势；对于云原生无状态服务，Bergamo的Zen 4c核心在每瓦性能上更具竞争力。选型时应先明确负载的"瓶颈维度"——是核心数、内存带宽、缓存容量还是PCIe吞吐。

原则二：NUMA是第一约束，不是可选项。EPYC的每个CCD（Core Complex Die）通过Infinity Fabric连接到IOD（I/O Die），内存控制器分布在IOD上。以双路Genoa为例，系统会呈现多个NUMA节点，跨节点访问延迟可达到本地访问的1.5~2倍。因此，集群设计从第一天起就要决定：是让调度器感知NUMA并做绑定，还是通过BIOS设置将系统呈现为单一NUMA域（NPS=1）以简化调度但牺牲部分带宽。这个决策会直接影响后续的Kubernetes拓扑管理器配置和数据库部署方式。

原则三：PCIe通道是稀缺资源，必须提前分配。以Genoa单路为例，128条PCIe 5.0通道中，一部分用于CPU间互联（双路时），一部分用于板载设备，剩余才可供扩展槽使用。如果计划插入4块GPU（每块x16）、2块NVMe（每块x4）和1块100G网卡（x16），总需求为64+8+16=88条，看似充裕，但实际主板布局、BMC、USB和SATA控制器会占用额外通道。设计时必须查阅主板手册的通道分配表，避免"插得进去但跑不满"的情况。

原则四：基础设施层决定集群上限。一台满载Genoa 9654的双路服务器，CPU TDP合计可达720W，加上内存、GPU和NVMe，整机功耗可能超过2000W。如果机架按每机柜10kW规划，则每机架最多放置4~5台这样的节点。散热方面，高密度节点通常需要液冷或强制高风压风扇，传统风冷机房可能无法承载。这些约束必须在采购前与机房条件对齐，否则再好的节点设计也无法落地。