1. 性能分析基础：Linux性能分析概述、性能指标与工具栈

性能分析是系统运维与内核开发的基石。本章从宏观视角建立性能分析的思维框架，定义核心指标，并梳理从底层内核到上层应用的完整工具栈。理解这些基础概念，是后续使用 perf 工具进行精准调优的前提。

1.1 性能分析的核心思想

性能分析的本质是 量化资源利用率 与 识别瓶颈。我们关注系统在单位时间内能完成多少工作（吞吐量），以及完成这些工作需要多长时间（延迟）。一个健康的系统应处于资源充分利用但不过载的状态。

1.2 核心性能指标

性能指标是衡量系统健康度的“仪表盘”。我们将指标分为四大类：CPU、内存、I/O 和网络。下表总结了关键指标及其含义：

1.3 性能分析工具栈全景

Linux 提供了丰富的工具，覆盖从硬件到应用的不同层级。下图展示了经典的工具栈架构，帮助您理解不同工具在系统中的定位。

1.4 工具分类与选择策略

面对众多工具，如何选择？我们根据分析场景将工具分为三类：

• 监控类 (Monitoring)：用于长期、持续地观察系统状态，发现异常趋势。
  • top / htop：实时查看进程资源占用。
  • vmstat：报告进程、内存、分页、块 I/O 和 CPU 活动。
  • iostat：监控 CPU 和 I/O 设备的负载。
  • sar：系统活动报告，可收集历史数据。
• 剖析类 (Profiling)：用于深入分析特定性能问题，定位热点代码路径。
  • perf stat：统计硬件事件（如 CPU 周期、缓存未命中）。
  • perf record / perf report：采样并生成火焰图，分析 CPU 热点。
  • perf top：实时显示消耗 CPU 最多的函数。
  • perf trace：类似 strace，但开销更低，支持更多事件。
• 追踪类 (Tracing)：用于捕获特定事件的发生序列，理解系统行为。
  • strace：追踪系统调用和信号。
  • ftrace：内核内置的追踪器，用于调试延迟和调度问题。
  • eBPF / bcc：动态插桩，可编写自定义脚本追踪任意内核或用户态函数。

1.5 性能分析流程示例

以下是一个典型的性能分析工作流，展示了如何结合不同工具逐步深入：

1. 发现问题：用户反馈应用响应缓慢。
2. 全局监控：运行 top 查看 CPU 和内存占用；运行 vmstat 1 观察上下文切换和 I/O 等待。
3. 定位瓶颈：假设发现 iowait 很高，运行 iostat -x 1 查看具体磁盘的 %util 和 await。
4. 深入剖析：使用 perf stat -e block:block_rq_issue,block:block_rq_complete -a sleep 10 统计块 I/O 请求。
5. 精准追踪：使用 perf record -e block:block_rq_complete -ag -- sleep 5 采样，然后通过 perf report 或生成火焰图，找出发起 I/O 的进程和内核路径。