PREEMPT_RT性能调优 中断延迟与调度延迟测量工具链 - 第1节
1. 课程导论
实时操作系统（RTOS）的核心在于确定性：系统必须在可预测的时间范围内对外部事件做出响应。Linux 内核最初为通用分时系统设计，其调度器与中断处理机制追求吞吐量最大化，而非最差情况延迟最小化。PREEMPT_RT 补丁集正是为了将 Linux 改造为硬实时内核而诞生。
关键认知： 通用 Linux 的“软实时”能力无法满足工业控制、航空航天、机器人等场景的微秒级确定性要求。PREEMPT_RT 通过内核抢占性改造、中断线程化、高精度定时器三大支柱，将最差情况延迟从毫秒级压缩至数十微秒级。
1.1.1 实时系统分类
| 类型 | 延迟容忍度 | 典型场景 | Linux 支持程度 |
|---|---|---|---|
| 硬实时 | 零容忍，超时即灾难 | 飞行控制、心脏除颤器、工业 PLC | 需 PREEMPT_RT 补丁 |
| 软实时 | 可容忍少量超时 | 音视频播放、游戏引擎 | 标准内核 + SCHED_FIFO/RR |
| 固实时 | 超时导致服务质量下降 | 电信基站、金融交易系统 | PREEMPT_RT 或专用内核 |
调优视角： 本课程聚焦硬实时场景。即使你的应用属于软实时，PREEMPT_RT 的测量工具链同样能帮助你发现调度瓶颈。
1.1.2 PREEMPT_RT 演进路线
1.2 中断延迟：定义与测量维度
中断延迟（Interrupt Latency）是指从硬件中断信号到达 CPU 引脚，到中断服务程序（ISR）第一条指令开始执行之间的时间间隔。这是实时系统中最关键的延迟指标之一。
1.2.1 中断延迟的组成
1.2.2 中断延迟测量指标
| 指标 | 定义 | 典型值（PREEMPT_RT） | 测量工具 |
|---|---|---|---|
| 最小延迟 | 无竞争时的最佳情况 | 1-3 µs | cyclictest |
| 平均延迟 | 统计均值 | 5-15 µs | cyclictest / ftrace |
| 最大延迟 | 最差情况（Worst-Case） | 30-100 µs | cyclictest / hwlatdetect |
| 抖动 | 延迟的方差 | < 10 µs | cyclictest 直方图 |
常见误区： 平均延迟低不代表实时性好。硬实时系统必须关注最大延迟（Worst-Case Latency）。PREEMPT_RT 调优的核心目标就是压缩最大延迟的尾部。
1.3 调度延迟：任务响应时间
调度延迟（Scheduling Latency）是指一个高优先级任务变为可运行状态，到它真正获得 CPU 开始执行之间的时间间隔。与中断延迟不同，调度延迟涉及调度器的决策过程。
1.3.1 调度延迟的构成
1.3.2 中断延迟 vs 调度延迟
| 对比维度 | 中断延迟 | 调度延迟 |
|---|---|---|
| 触发源 | 硬件中断信号 | 软件事件（wake_up、定时器） |
| 测量起点 | 中断引脚电平变化 | 任务变为 TASK_RUNNING |
| 测量终点 | ISR 第一条指令 | 任务上下文切换完成 |
| 主要影响因素 | 关中断时间、中断优先级 | 抢占点密度、调度策略 |
| PREEMPT_RT 优化 | 中断线程化、spinlock 替换 | 全抢占内核、rt_mutex |
| 典型测量工具 | cyclictest, hwlatdetect | cyclictest, ftrace, trace-cmd |
1.4 延迟测量工具链概览
本课程将围绕以下核心工具构建测量与调优闭环：
- cyclictest — 实时延迟测量的黄金标准，测量线程唤醒延迟
- hwlatdetect — 硬件延迟检测器，识别不可屏蔽中断（NMI）和 SMI 干扰
- ftrace / trace-cmd — 内核跟踪框架，定位延迟来源的具体函数
- perf — 性能计数器分析，识别缓存未命中、分支预测错误等微架构因素
- rt-tests 套件 — 包含 cyclictest、pi_stress、signaltest 等实时测试工具
课程路线图： 第 2-5 章深入每个工具的安装与基础用法；第 6-10 章讲解延迟数据采集与可视化；第 11-15 章聚焦内核参数调优；第 16-20 章覆盖多核隔离、中断亲和性、CPU 频率调控等高级主题；第 21-25 章实战案例分析；第 26-30 章自动化测试与持续集成。
1.5 本章小结
- 实时系统的核心是确定性，PREEMPT_RT 将 Linux 从软实时改造为硬实时
- 中断延迟 = 硬件信号到 ISR 执行的时间，受关中断段影响最大
- 调度延迟 = 任务就绪到获得 CPU 的时间，受抢占点和调度策略影响
- 测量工具链以 cyclictest 为核心，辅以 ftrace、hwlatdetect、perf
- 调优目标：压缩最大延迟尾部，而非仅优化平均值