2. 可用性测试指标体系总览
在DVT阶段，可用性测试指标体系是评判产品是否达到用户可接受水平的核心工具。本章总览核心指标、辅助指标、通过/不通过标准以及指标优先级排序，并按照流程SOP结构组织，确保测试团队在实操中有据可依。
本章定位：为后续章节的指标定义、数据采集、结果分析提供顶层框架。所有指标必须可度量、可复现，并与DVT阶段的验证目标对齐。
适用场景
- 产品完成DVT工程样机阶段，需进行用户可用性验证的测试前规划。
- 测试团队需要建立统一的指标口径和判定规则，避免跨角色理解偏差。
- 当测试需求包含多个用户任务、多个交互路径时，需优先排序以聚焦高优先级指标。
前置条件
- 已明确DVT阶段测试目标（如：关键任务完成率≥90%、平均错误率≤5%等）。
- 已定义测试任务清单和用户画像。
- 已完成测试环境搭建和仪器校准（如眼动仪、录屏软件、日志采集工具）。
- 测试团队已确认角色分工（测试工程师、数据标注员、产品经理）。
操作步骤
- 定义核心指标——从任务完成率、任务时间、错误率、偏离率中选取至少2个作为必须观测项。
- 定义辅助指标——如满意度评分、易学性（首次尝试成功率）、操作遗效率等，用于补充核心指标的信息不足。
- 设定通过/不通过标准——为每个指标制定阈值（例如：任务完成率≥85%为通过，<85%为不通过）。
- 设定指标优先级排序——按照任务关键度、用户风险、业务影响将指标分为P0（必须通过）、P1（建议通过）、P2（可接受）三级。
- 编制指标体系文档——将上述内容录入标准模板，经产品经理和测试组长评审后生效。
输入输出物
| 类别 | 输入物 | 输出物 |
|---|---|---|
| 文档 | 测试计划、任务列表、用户画像 | 《可用性测试指标体系表》 |
| 数据 | 历史测试数据（如有） | 指标优先级矩阵 |
| 工具 | 指标登记模板（Excel/GitLab Issue） | 已定义的指标配置项 |
责任边界
- 测试工程师：负责指标定义、阈值设定、优先级排序初稿。
- 产品经理：确认指标与用户核心场景的对应关系，审核通过/不通过标准。
- 研发代表：确认指标是否可通过日志或埋点采集，避免不可度量指标。
- 测试组长：终审批复，并监督指标在测试执行中的落地。
记录材料
- 《可用性测试指标体系表》（包含指标名称、类别、定义、度量公式、阈值、优先级、责任人、备注）
- 优先级排序评审会议纪要
- 异常处理记录（如指标冲突、阈值争议）
异常处理
- 指标冲突：当核心指标之间出现矛盾（如任务完成率很高但错误率也很高），需按优先级P0指标优先，并作加权分析。
- 标准不合理：若首次测试发现所有任务均通过或均失败，需复盘阈值是否过于宽松/严格，经评审后修订。
- 优先级争议：召开三方评审（测试、产品、研发），以用户安全与核心业务流为最高原则裁决。
验收标准
- 指标体系表经三方签字确认，包含至少2个核心指标、至少1个辅助指标。
- 每个指标均附带明确的可计算定义和阈值。
- 优先级排序已标注P0/P1/P2，且P0指标不超过3个。
- 所有异常处理记录已闭环归档。