Linux内核性能问题排查：从perf到火焰图 - 第4节

4.1 perf record 的采样原理

perf record 是 Linux 性能剖析的核心工具，它基于事件驱动采样（Event-Based Sampling, EBS）机制工作。与传统的代码插桩不同，采样不会修改被监控程序的指令流，而是通过硬件性能计数器或内核跟踪点，在事件触发时记录当前执行上下文。

4.1.1 采样工作流程

1. 事件配置：用户指定采样事件（如 cpu-cycles、cache-misses）和采样频率。
2. 内核注册：perf 子系统将事件注册到 PMU（Performance Monitoring Unit）或 ftrace 框架。
3. 溢出触发：当硬件计数器达到预设阈值（如每 10000 个周期），PMU 触发 NMI（非屏蔽中断）。
4. 上下文捕获：中断处理程序保存当前 CPU 的寄存器状态、指令指针（IP）和调用链。
5. 数据写入：采样记录被写入内核缓冲区，最终由 perf record 进程读取并落盘到 perf.data 文件。

4.1.2 采样模式对比

4.1.3 采样原理 SVG 图

4.2 perf report 的交互式界面

perf report 是 perf.data 的解析和展示工具，提供交互式 TUI（Text-based User Interface）和纯文本输出两种模式。TUI 模式下，用户可以通过键盘快捷键进行导航、排序、展开调用链等操作。

4.2.1 启动与基本操作

# 启动交互式界面
perf report

# 纯文本输出（适合脚本处理）
perf report --stdio

# 指定排序字段
perf report -s pid,comm,dso,symbol

4.2.2 TUI 界面布局

4.2.3 常用快捷键

• Enter：展开选中符号的调用链
• E：展开所有调用链
• C：折叠所有调用链
• +/-：增加/减少采样计数阈值过滤
• d：切换显示采样计数或百分比
• t：切换线程/进程视图
• h：显示帮助页面

4.3 理解采样报告中的符号与调用链

4.3.1 符号解析机制

采样记录中的指令指针（IP）是内存地址，需要转换为可读的函数名（符号）。perf report 通过以下方式解析符号：

1. ELF 符号表：从可执行文件和共享库的 .symtab/.dynsym 节读取。
2. 调试信息：如果编译时添加 -g 选项，可获取更精确的行号信息。
3. /proc/kallsyms：内核符号表，用于解析内核地址。
4. JIT 符号：通过 perf inject 注入 JIT 运行时生成的符号。

4.3.2 调用链的两种模式

4.3.3 调用链 SVG 图

4.3.4 符号解析常见问题

4.3.5 调用链分析实战示例

# 采集 10 秒，记录调用链（FP 模式）
perf record -F 99 -g -- ./myapp

# 查看报告，按自顶向下排序
perf report -g graph,0.5,caller

# 输出示例（纯文本模式）
# Overhead  Command  Shared Object      Symbol
#   45.2%  myapp    myapp              [.] handle_request
#   25.1%  myapp    libc-2.31.so       [.] __strlen_avx2
#   15.3%  myapp    myapp              [.] parse_input
#   10.0%  myapp    libc-2.31.so       [.] __memcpy_avx_unaligned
#    4.4%  myapp    [kernel.kallsyms]  [k] do_syscall_64

4.3.6 调用链过滤与缩放

perf report 提供多种过滤方式，帮助聚焦热点：

• 百分比阈值：--percent-limit 5 只显示开销 ≥5% 的符号
• DSO 过滤：--dsos libc-2.31.so 只显示指定库的符号
• 进程过滤：--pid 1234 只分析指定进程
• 调用链深度：--max-stack 32 限制调用链最大深度