📚 课程目录第1章 CPU亲和性基础概念

CPU亲和性配置脚本：DPDK多核任务绑定与迁移控制 - 第1节

1.1 什么是CPU亲和性

CPU亲和性（CPU Affinity）是指将进程或线程绑定到特定CPU核心（或一组核心）上运行的机制。在Linux系统中，亲和性通过CPU掩码（cpumask）实现，每个核心对应掩码中的一个bit位。当掩码中某位置1时，表示允许该任务在此核心上运行。

  核心价值：亲和性让开发者能够精确控制任务在哪些CPU上执行，从而避免操作系统随意迁移线程带来的缓存污染和上下文切换开销。

亲和性分为两种类型：

软亲和性（Soft Affinity）：调度器尽量将任务保持在已分配的核心上，但不强制。当负载均衡需要时，仍可能迁移任务。
硬亲和性（Hard Affinity）：通过系统调用（如 sched_setaffinity）强制任务只能在指定核心上运行，调度器不得违反此约束。

在DPDK场景中，通常使用硬亲和性，以确保数据面线程独占核心，避免任何非预期的迁移。

1.2 SMP与NUMA架构简介

1.2.1 SMP（对称多处理）

SMP架构中，所有CPU核心通过共享总线连接到统一的内存控制器，每个核心访问内存的延迟和带宽相同。这种架构简单，但随着核心数增加，共享总线成为瓶颈，扩展性受限。

特性	SMP	NUMA
内存访问模型	所有核心共享统一内存	每个节点拥有本地内存
访问延迟	均匀（UMA）	本地快，远程慢
扩展性	受限于总线带宽，通常≤8核	可扩展到数百核
典型场景	嵌入式、低核心数服务器	高性能计算、数据中心

1.2.2 NUMA（非统一内存访问）

NUMA将CPU核心和内存划分为多个节点（Node），每个节点包含一组核心和本地内存。核心访问本地内存延迟低（通常60-100ns），访问远程节点内存延迟高（通常120-200ns）。跨节点访问还会消耗QPI/UPI总线带宽，影响整体性能。

DPDK关键认知：在NUMA系统中，DPDK数据面线程必须绑定到与网卡所在NUMA节点相同的核心上，否则每次数据包处理都会触发跨节点内存访问，性能可能下降30%-50%。

1.3 亲和性在DPDK中的重要性

DPDK通过轮询模式驱动（PMD）绕过内核网络栈，直接在用户态处理数据包。这种高性能模型对CPU亲和性有极强的依赖，主要体现在以下三个层面：

缓存局部性：数据面线程绑定到固定核心后，L1/L2/L3缓存中的热数据（描述符、mbuf、流表）不会被其他线程冲刷，缓存命中率可从60%提升至95%以上。
避免TLB抖动：DPDK使用大页内存（2MB/1GB），TLB覆盖范围大。线程迁移会导致TLB刷新，重新建立地址映射，增加数百个周期的开销。
NUMA感知：网卡DMA数据直接写入本地内存，绑定线程在本地核心处理数据，避免跨节点内存访问。跨节点访问延迟增加2-3倍，带宽下降50%。

性能指标	无亲和性绑定	有亲和性绑定（同NUMA）	性能提升
数据包吞吐量（Mpps）	8.2	14.7	+79%
平均延迟（μs）	12.5	6.8	-46%
L2缓存命中率	62%	97%	+35%
TLB缺失率	4.3%	0.8%	-81%

常见误区：部分开发者认为只要将线程绑定到任意核心即可。实际上，在NUMA系统中，如果线程绑定到与网卡不同节点的核心，性能甚至可能比无绑定更差——因为跨节点访问的惩罚超过了缓存局部性带来的收益。必须使用 lspci -vvv 和 lstopo 确认网卡所在的NUMA节点。

1.4 亲和性设置基础命令

在Linux系统中，亲和性操作主要通过以下工具和系统调用完成：

taskset：命令行工具，用于设置或查询进程的CPU亲和性。例如 taskset -c 0-3 ./dpdk_app 将进程绑定到核心0-3。
sched_setaffinity / sched_getaffinity：系统调用，C程序中直接操作 cpu_set_t 结构体。
/proc/<pid>/status：查看进程的Cpus_allowed掩码，确认当前亲和性设置。

# 查看进程PID=1234的当前CPU亲和性
taskset -p 1234

# 将进程绑定到核心2和核心3
taskset -p -c 2,3 1234

# 启动DPDK应用并绑定到核心0-3（物理核心）
taskset -c 0-3 ./build/app/dpdk-testpmd -l 0-3 -n 4 -- -i

生产环境建议：在DPDK的EAL参数中使用 -l 或 --lcores 指定核心列表，比外部使用taskset更可靠，因为EAL会同时设置线程的亲和性和内存分配策略。