4. perf 基础使用：perf stat、perf record/report、perf top、perf annotate 的基本用法与输出解读

perf 是 Linux 内核提供的性能剖析工具集，基于 perf_event_open 系统调用与硬件 PMU（Performance Monitoring Unit）交互。在低延迟驱动场景中，perf 用于定位中断处理耗时、临界区竞争、缓存未命中与分支预测错误。本章覆盖四个核心子命令：perf stat（计数）、perf record/report（采样与可视化）、perf top（实时热点）与 perf annotate（指令级分析）。

4.1 perf stat：事件计数与程序级性能摘要

perf stat 以计数模式运行目标程序或附加到运行进程，输出周期数、指令数、缓存未命中、分支预测错误等硬件事件总数。驱动开发者常用它对比不同实现路径的 CPI（每指令周期数）与缓存行为。

4.1.1 基本用法

# 运行命令并统计
perf stat ./driver_test

# 附加到已运行的 PID（如中断处理线程）
perf stat -p $(pgrep ksoftirqd/0) sleep 5

# 指定自定义事件组
perf stat -e cycles,instructions,cache-misses,branch-misses ./driver_test

4.1.2 输出解读

4.1.3 事件计数流程

4.2 perf record / report：采样剖析与热点定位

perf record 以固定频率（默认 4000 Hz）采样 CPU 程序计数器（PC），生成 perf.data 文件。perf report 将采样数据符号化，按热点函数排序。驱动开发者用它定位中断处理函数中哪一行代码消耗最多 CPU 时间。

4.2.1 基本用法

# 采样驱动测试程序，频率 1000 Hz
perf record -F 1000 -g -- ./driver_test

# 采样内核驱动模块（需 root）
perf record -F 1000 -a -g -- sleep 10

# 生成报告
perf report -i perf.data

-g 启用调用链（callchain）记录，显示热点函数的完整调用路径，对驱动中断上下文分析至关重要。

4.2.2 输出解读

4.2.3 采样与报告流程

4.3 perf top：实时热点监控

perf top 类似 top 命令，但按 CPU 采样事件排序显示当前最热的函数。驱动调试时，可实时观察中断处理函数、锁竞争、内存拷贝等热点变化。

4.3.1 基本用法

# 实时显示内核与用户态热点
perf top

# 仅显示内核态（驱动模块）
perf top -k vmlinux

# 指定事件：缓存未命中
perf top -e cache-misses

# 显示调用链
perf top -g

4.3.2 输出解读

4.4 perf annotate：指令级热点分析

perf annotate 将热点函数反汇编，并标注每条指令的采样命中数（采样周期数）。驱动开发者可精确识别哪条指令导致缓存未命中、分支预测失败或高延迟内存访问。

4.4.1 基本用法

# 对 perf.data 中热点函数进行反汇编标注
perf annotate -i perf.data

# 指定具体函数
perf annotate -i perf.data --symbol ixgbe_clean_rx_irq

# 显示源码与汇编对照（需编译时加 -g）
perf annotate -i perf.data --source

4.4.2 输出解读

Percent |  Source code & Disassembly of ixgbe.ko
-----------------------------------------------
        │  while (rx_desc->wb.upper.status_error & IXGBE_RXD_STAT_DD) {
  0.12   │  mov    0x10(%rdi),%eax
 23.45   │  test   $0x1,%eax
        │  ↓ je     70
        │      skb = build_skb(rx_desc->data, ...)
  0.08   │  mov    %r12,%rdi
 15.32   │  call   build_skb
        │      napi_gro_receive(napi, skb)
  0.05   │  mov    %r13,%rdi
 10.87   │  call   napi_gro_receive
        │  }

4.4.3 指令级热点分析流程

4.5 驱动调优实战：perf 四步法

1. perf stat 全局评估：测量驱动路径的 CPI、cache-misses、branch-misses，建立基线。
2. perf record/report 热点定位：采样驱动中断或线程上下文，找出 overhead 最高的 3 个函数。
3. perf top 实时验证：在施加网络流量或 I/O 压力时，确认热点是否与预期一致。
4. perf annotate 指令级优化：对热点函数反汇编，识别高延迟指令（如 cache miss 的 load、分支预测失败的 test/je），针对性调整代码布局或数据结构。