第3章 评分标准制定:各维度1-10分的典型描述与锚定示例
为什么需要锚定示例?
没有锚定的评分标准会导致不同评估者对同一维度理解偏差,造成评分一致性低。本章为 Reach、Impact、Confidence、Effort 四个维度提供1-10分的典型描述与具体场景锚定,使团队在量化时具备共同“标尺”。
没有锚定的评分标准会导致不同评估者对同一维度理解偏差,造成评分一致性低。本章为 Reach、Impact、Confidence、Effort 四个维度提供1-10分的典型描述与具体场景锚定,使团队在量化时具备共同“标尺”。
3.1 适用场景
本评分标准适用于以下场景:
- 团队启动 RICE 量化评分前,需要统一各维度分值定义。
- 历史项目评分出现明显分歧(同一功能评分差≥3分)时,使用锚定示例校准。
- 新成员加入评估小组,通过典型锚定快速建立评分共识。
- SOP 审计阶段,对比实际评分与锚定示例的偏移量。
3.2 前置条件
- 已完成用户分群与事件定义(章节2)。
- 团队已就“目标用户周期(日/周/月)”达成一致。
- 至少3名评估者参与评分校准讨论。
3.3 操作步骤
步骤1:熟读各维度1-10分典型描述(见3.6 核心锚定表)。
步骤2:选取3个历史功能作为“校准样本”,每位评估者独立打分。
步骤3:对照锚定示例比对偏差,对分差≥2分的维度进行讨论校准。
步骤4:输出团队版“本地锚定示例”并归档。
关键逻辑: 具体分值对应的不是“绝对用户数”或“工时”,而是相对的“影响范围”和“解决效率”。例如 Reach 的7分代表“覆盖当月活跃用户15%”,而非“5000用户”。
3.4 输入输出物
| 阶段 | 输入物 | 输出物 |
|---|---|---|
| 步骤1-2 | 历史功能列表(含用户量、耗时、置信度说明) | 独立评分表(每人) |
| 步骤3-4 | 独立评分表 + 本章锚定示例 | 团队校准后的《RICE 评分标准 v1.0》 |
3.5 责任边界
- 产品经理(PM): 组织校准会,确保每轮讨论不超过30分钟。
- 数据分析师: 提供历史功能真实数据(用户覆盖数、置信区间),辅助锚定示例本地化修正。
- 评估者(所有打分人): 独立完成打分,不得在步骤2前讨论。
3.6 记录材料:核心锚定示例表
| 维度 | 分值 | 典型描述 | 具体锚定示例(以月活50万的B2C工具为例) |
|---|---|---|---|
| Reach (覆盖) |
1-3 | 仅影响极少数内部/外部用户 | 后台日志优化:影响运维3人,月触达可忽略 |
| 4-7 | 影响日常活跃用户5%-20% | 首页弹窗调整:覆盖月活约2.5万-10万人 | |
| 8-10 | 影响大部分核心用户(>30%) | 登录方式改版:影响90%月活用户,约45万人 | |
| Impact (影响) |
1-3 | 体验微微改善,无明显转化提升 | 按钮颜色微调:预估无CTR变化 |
| 4-7 | 预计转化率提升3%-10% | 简化注册流程:预估注册完成率提高5% | |
| 8-10 | 核心指标提升>15%或开创全新路径 | 增加AI推荐模块:预估人均使用时长上升20% | |
| Confidence (信心) |
1-3 | 纯直觉/没有数据支持 | “我觉得用户会喜欢”——无调研无AB实验 |
| 4-7 | 有间接数据/小规模实验 | 竞品已上线且正向;或50人内测CTR↑8% | |
| 8-10 | 高置信度AB实验/大规模定性验证 | 全量1%分流实验P值<0.01;或200人可用性测试 | |
| Effort (工作量) |
1-3 | 少于一人的周工作量(≤5天) | 文案修改/简单图片替换:1人1-2天 |
| 4-7 | 一人月工作量(10-20天) | 新增表单页面含前后端校验:1人约12天 | |
| 8-10 | 多名工程师,开发≥1个月 | 重构支付模块:3人×5周=15人周 |
3.7 异常处理
常见评分偏移与纠正:
- 偏移1——Impact 和 Reach 混淆: 评估者给 Impact 高分仅因为“覆盖很多人”。
纠正:Impact 聚焦转化率/行为的改变程度,而非覆盖人数。当出现混淆时,应强制分别列出两者数据来源。 - 偏移2——Confidence 与 Effort 负相关错觉: 认为“工作量大的功能更容易有数据支撑”。
纠正:Confidence 严格基于证据强度,与工作量无关。引入“证据清单”如:竞品数据√ 无AB实验×。 - 偏移3——锚定依赖偏差: 团队过度依赖本章提供的通用锚定,忽略自身产品特殊性。
纠正:每个季度使用最新实际用户数更新锚定示例中的数值(如 Reach 的“5%”需换算为本地月活绝对数)。
3.8 验收标准
- 团队校准后的评分标准中,每个维度至少包含2个本地化锚定案例。
- 使用3个历史功能进行盲测,不同评估者之间的评分标准差≤2(同一维度)。
- 完成《RICE 评分标准 v1.0》文档归档,且包含异常处理备忘。
3.9 评分对照SVG:1-10分锚定刻度
3.10 记录材料:团队校准会议模板
每次评分标准校准后,需填写下表并归档至 docs/RICE/calibration_log_v{version}.md:
| 维度 | 原始锚定 | 本地化修正 | 修正理由 | 责任人 |
|---|---|---|---|---|
| Reach | 8分=30%月活 | 8分=25%周活 | 产品为周活跃驱动型 | PM |
| Impact | 5分=转化↑5% | 5分=转化↑3% | 历史均值偏低 | 数据分析 |