4. 情景分析框架：情景定义、假设条件、基线建立、对比维度

在 Champion / Challenger 压力测试中，情景分析框架是确保实验可重复、可量化、可归因的核心骨架。一个严谨的框架能够将模糊的“谁更优”问题，拆解为可执行的对比实验。本章将详细阐述框架的四个支柱：情景定义、假设条件、基线建立与对比维度。

4.1 情景定义 (Scenario Definition)

情景定义是框架的起点，它明确了“测试什么”以及“在什么条件下测试”。每个情景必须包含唯一的标识、明确的变更对象以及可量化的负载描述。

• Champion 情景 (A)：当前生产环境运行的稳定版本或配置。
• Challenger 情景 (B)：待验证的新版本、新算法或新配置。
• 负载模型：并发用户数、吞吐量（TPS/QPS）、数据规模、思考时间等。
• 环境约束：硬件规格、操作系统版本、中间件配置、网络拓扑。

4.2 假设条件 (Assumptions)

假设条件明确了测试的边界与前提，防止结果被误读。任何未被验证的假设都可能导致错误的结论。

4.3 基线建立 (Baseline Establishment)

基线是 Champion 情景在稳定状态下的性能快照，是所有对比的参考零点。建立基线需要遵循“三稳定”原则：负载稳定、指标稳定、时间稳定。

1. 预热阶段：运行 Champion 情景 5-10 分钟，让 JIT、缓存、连接池达到稳态。
2. 采样阶段：在稳态下持续采集至少 5 分钟的数据，采样粒度 ≤ 1 秒。
3. 基线计算：取采样阶段各指标的 P50 / P90 / P99 以及 平均值，形成基线向量。
4. 基线验证：重复运行 Champion 情景 2-3 次，确认基线波动在 ±5% 以内。

4.4 对比维度 (Comparison Dimensions)

对比维度是衡量 Champion 与 Challenger 差异的标尺。本框架聚焦三个核心维度：性能、稳定性、资源消耗。

4.4.1 性能维度

• 吞吐量 (TPS/QPS)：单位时间内成功处理的事务数。
• 延迟 (Latency)：P50（中位数）、P90、P99 延迟，反映不同百分位的用户体验。
• 错误率 (Error Rate)：HTTP 5xx、超时、业务异常的比例。

4.4.2 稳定性维度

• 波动系数 (CV)：延迟或吞吐量的变异系数，衡量指标抖动程度。
• 长尾延迟：P99.9 或 P99.99 延迟，反映极端情况下的表现。
• 恢复时间：在突发负载后，系统恢复到基线水平所需的时间。

4.4.3 资源消耗维度

• CPU 使用率：平均与峰值使用率，以及用户态/内核态占比。
• 内存占用：堆内存、非堆内存、RSS 的稳态值与增长趋势。
• I/O 与网络：磁盘读写速率、网络带宽占用、连接数。