3、调度域标志位详解：SD_BALANCE_NEWIDLE、SD_BALANCE_EXEC、SD_BALANCE_FORK、SD_BALANCE_WAKE等
调度域标志位（SD_flags）是控制跨CPU域迁移与负载均衡行为的核心开关。每个调度域在初始化时通过一组位掩码定义其允许的负载均衡触发时机与策略。理解这些标志位的语义与协同关系，是调试跨域迁移行为、优化系统响应延迟与吞吐量的前提。
3.1 标志位分类与触发时机
Linux内核将负载均衡的触发点分为四类：空闲、执行、创建、唤醒。每个触发点对应一个独立的标志位，控制调度器是否在该事件发生时尝试跨域迁移任务。
| 标志位 | 触发事件 | 典型场景 | 默认开启域 |
|---|---|---|---|
SD_BALANCE_NEWIDLE |
CPU变为空闲时 | 空闲CPU主动拉取其他域的任务 | 所有域 |
SD_BALANCE_EXEC |
任务通过exec()加载新程序时 | 新程序启动时重新选择最优CPU | NUMA域及以上 |
SD_BALANCE_FORK |
任务通过fork()创建子进程时 | 父子进程分散到不同CPU/域 | NUMA域及以上 |
SD_BALANCE_WAKE |
任务从睡眠状态被唤醒时 | 唤醒路径的负载均衡与缓存亲和性 | MC域及以上 |
SD_BALANCE_EXEC、SD_BALANCE_FORK 和 SD_BALANCE_WAKE，而底层的SMT域通常只开启 SD_BALANCE_NEWIDLE。
3.2 各标志位深度解析
3.2.1 SD_BALANCE_NEWIDLE — 空闲拉取
当CPU进入空闲状态且本地运行队列为空时，调度器触发newidle平衡。该标志位控制调度器是否允许从当前域的其他CPU或下级域迁移任务到本CPU。
- 作用域：所有调度域（SMT/MC/NUMA）默认开启。
- 行为特征：属于被动拉取，只在CPU无事可做时执行，对延迟敏感。
- 调试关注点：若关闭该标志位，空闲CPU将不会从其他域拉取任务，可能导致CPU利用率不均。
sd->max_newidle_lb_cost 控制扫描代价。
3.2.2 SD_BALANCE_EXEC — 执行时重选
当任务调用 execve() 加载新程序时，调度器认为任务的执行特征发生根本变化，需要重新评估最优CPU。该标志位控制是否允许跨域迁移。
- 作用域：通常只在NUMA域及以上开启。
- 行为特征：exec路径会清除之前的CPU亲和性缓存，重新执行select_task_rq选择目标CPU。
- 调试关注点：若关闭，新程序可能继续运行在fork时的CPU上，忽略NUMA距离变化。
3.2.3 SD_BALANCE_FORK — 创建时分散
当父进程通过 fork() 创建子进程时，调度器尝试将子进程放置到与父进程不同的CPU上，以利用多核并行能力。该标志位控制是否允许跨域分散。
- 作用域：通常只在NUMA域及以上开启。
- 行为特征：子进程优先选择父进程所在域内负载最轻的CPU，若域内无空闲CPU，则考虑跨域迁移。
- 调试关注点：在NUMA系统中，关闭此标志位可能导致父子进程扎堆在同一NUMA节点，浪费远端内存带宽。
3.2.4 SD_BALANCE_WAKE — 唤醒时亲和
当任务从睡眠状态被唤醒时，调度器需要决定将其放置到哪个CPU。该标志位控制是否允许跨域唤醒迁移。
- 作用域：MC域及以上默认开启，SMT域通常关闭。
- 行为特征：唤醒路径优先考虑缓存亲和性（wake_affine），若目标CPU负载过高，则允许跨域迁移。
- 调试关注点：关闭此标志位会强制任务只能在唤醒源CPU所在域内调度，可能加剧负载不均。
3.3 标志位协同与优先级
当多个标志位同时生效时，调度器遵循固定的优先级顺序处理负载均衡请求。下图展示了四个标志位在调度路径上的触发顺序与协同关系。
3.4 标志位组合策略与调试建议
不同工作负载对标志位组合的需求差异显著。下表总结了典型场景下的推荐配置与调试切入点。
| 场景 | 推荐标志位组合 | 调试关注点 |
|---|---|---|
| 高吞吐计算（HPC） | 开启所有标志位 | 监控跨NUMA迁移频率，避免缓存抖动 |
| 低延迟实时系统 | 关闭 SD_BALANCE_NEWIDLE，保留其他 |
使用 trace_sched_migrate_task 跟踪迁移路径 |
| NUMA敏感数据库 | 开启 SD_BALANCE_WAKE，关闭 SD_BALANCE_EXEC |
检查 /proc/sys/kernel/numa_balancing 配合使用 |
| 容器密集部署 | 仅开启 SD_BALANCE_NEWIDLE + SD_BALANCE_WAKE |
使用 cpuset 隔离域，减少跨域迁移开销 |
3.5 内核代码中的标志位定义
标志位在 include/linux/sched/topology.h 中定义，每个标志位对应一个位掩码。以下是关键定义片段：
/* 调度域标志位定义 */
#define SD_BALANCE_NEWIDLE 0x0001 /* 空闲时平衡 */
#define SD_BALANCE_EXEC 0x0002 /* exec时平衡 */
#define SD_BALANCE_FORK 0x0004 /* fork时平衡 */
#define SD_BALANCE_WAKE 0x0008 /* 唤醒时平衡 */
#define SD_WAKE_AFFINE 0x0010 /* 唤醒亲和性 */
#define SD_SHARE_CPUCAPACITY 0x0020 /* 共享CPU容量（SMT） */
#define SD_SHARE_PKG_RESOURCES 0x0040 /* 共享封装资源（LLC） */
#define SD_NUMA 0x0080 /* NUMA域 */
#define SD_ASYM_PACKING 0x0100 /* 非对称封装（大小核） */SD_BALANCE_EXEC 和 SD_BALANCE_FORK 在NUMA域中默认开启，但在MC域中默认关闭。若在单NUMA节点内需要更激进的负载分散，可以通过 sched_domain_topology 回调函数手动修改标志位。
3.6 实战：通过 /proc/schedstat 观察标志位效果
使用 /proc/schedstat 可以观察每个调度域的负载均衡触发次数，间接验证标志位是否生效。以下是一个解析示例：
# 查看域0（MC域）的newidle平衡统计
cat /proc/schedstat | grep "domain0" | head -1
# 输出格式说明：
# domain0 <span_level> <nr_balance> <nr_failed> <nr_imbalance> <nr_forced>
# 其中 nr_balance 表示该域触发的平衡次数
# 若 SD_BALANCE_NEWIDLE 关闭，nr_balance 将始终为0通过对比不同标志位组合下的 nr_balance 和 nr_imbalance 数值，可以量化评估标志位对负载均衡行为的影响程度。
3.7 小结
调度域标志位是控制跨CPU域迁移粒度的核心机制。四个主要标志位分别对应空闲、执行、创建、唤醒四种触发时机，通过组合配置可以实现从“严格域内调度”到“全局自由迁移”的连续控制。在实际调试中，应结合 /proc/schedstat 统计、trace_sched_migrate_task 跟踪以及域拓扑结构，逐步调整标志位组合，找到延迟与吞吐的最佳平衡点。