第1章 估算目标与适用场景

适用场景

本章适用于以下三类具体场景,任何涉及模型训练或数据标注的资源投入估算任务均需先确认场景归属:

场景类别 典型触发事件 估算用途
场景A:新项目立项 业务方提出模型训练需求,尚未确定技术方案 为项目预算申请、资源采购提供人力/算力填报依据
场景B:迭代优化 已有模型效果不达标,需要补充标注或微调 评估增量投入是否在剩余预算/周期内可行
场景C:外部合作或交付 与标注团队、云厂商或外包方签订SLA 在合同中明确工作量上下限和计费模式
提示:若项目同时涉及“新模型训练”和“数据清洗”,应拆为两个独立估算子项,分别对应场景A和场景B的逻辑。

前置条件

开始本章估算前,必须完成以下准备,否则估算结果可能偏离实际:

  1. 已取得模型训练目标的书面描述(如业务指标、精度要求、推理延迟约束)。
  2. 已确认数据集初步来源:自有标注库、公开数据集、需要从头采集。若为从头采集,需明确数据获取渠道和合规审批状态。
  3. 已识别至少一名关键干系人(算法负责人或项目经理),用于后续责任边界确认。
  4. 已有历史相似项目的effort数据(可选但强烈建议)。
注意:若前置条件中缺少“数据集来源”的确定性结论,估算时必须按“从零采集+全量标注”方案给出上界,并在输出物中标记为“保守估算”。

操作步骤

本章核心操作共四个步骤,每个步骤的输出将作为后续章节的输入。

步骤编号 步骤名称 操作细节 产出物
1.1 确定估算对象 区分“训练effort”与“标注effort”;若两者均涉及,分别列出 估算对象清单(含类型标记)
1.2 定位项目阶段 明确当前属于数据准备期、训练调优期还是部署验证期 阶段标签及阶段边界文档
1.3 识别团队角色 列出参与该effort估算的所有角色(算法、工程、标注管理、PM) 角色责任矩阵(RACI)
1.4 初步关联外部依赖 确认需要依赖的标注平台、算力供应商或数据合规审核团队 外部依赖列表(含联系人与SLA)
关键产出物示例:
估算对象清单(示例)
- 项目名称:客服意图识别模型V2
- 估算对象1:模型训练(GPU时长 + 算法人力)
- 估算对象2:数据标注(文本分类标注 + 质量抽检)
- 当前阶段:数据准备期(标注阶段)
- 外部依赖:标注平台「LabelHub」、GPU云服务商「星云算力」
  

输入输出物

类型 名称 格式要求 获取/提交方
输入物 项目立项文档 / 迭代需求说明 PDF 或共享文档,含业务目标和验收标准 业务方或产品经理
输入物 历史effort记录(可选) 内部Wiki或表格 算法团队或PMO
输出物 估算对象清单 Markdown表格(标准化模板) 估算负责人
输出物 角色责任矩阵(RACI) Excel或共享画板 估算负责人

责任边界

  • 算法工程师:提供模型训练基线信息(预估参数量、训练轮次、单次数据量),并对“训练effort”的估算结果负技术责任。
  • 标注项目经理:提供标注单价、标注熟练度系数、质检比例,并对“标注effort”的合理性负责。
  • AI工程效能专家(估算负责人):整合以上信息,输出最终估算文档,并组织评审。
  • PM:审核估算结果是否与项目时间线匹配,协调外部依赖。

关键规则:任何角色在估算预评审阶段若不同意估算假设,必须在24小时内书面提出异议,否则默认同意。

记录材料

本章产生的所有记录材料应归档至项目共享目录,命名规范为:

{项目代号}_Ch1_估算目标_版本号_日期.xxxx
例如:CRM_V2_Ch1_估算目标_v1.0_20250325.md

必须记录的内容:

  • 估算对象确认会议纪要(含与会者签字或邮件确认)
  • 外部依赖清单(含联系方式、SLA摘要)
  • 角色责任矩阵截图

异常处理

异常编号 异常现象 处理措施 升级路径
E1-01 估算对象无法明确区分训练和标注 暂停估算,要求业务方提供更细粒度需求 → AI效能专家与PM确认
E1-02 项目阶段跨两个阶段(如数据准备+训练并行) 按“主要工作量”判定阶段,并在输出物中注明“混合阶段” → 标记为特殊方案,后续章节需分阶段进行effort估算
E1-03 关键干系人拒绝提供角色责任确认 发送书面通知并设置24小时截止时间;过期视为默认 → 升级至PMO

验收标准

  1. 已输出估算对象清单,且类型(训练/标注)标记无误,与业务需求一一对应。
  2. 已输出角色责任矩阵(RACI),至少包含算法、标注管理、PM、外部供应商四个角色。
  3. 外部依赖列表已包含至少一个有效联系人及SLA摘要(若无依赖则注明“无外部依赖”)。
  4. 所有异常处理均已在记录材料中体现处理结论,且无未关闭的异常。
  5. 本章所有记录材料已完成归档,命名符合规范,版本号正确。
验收检查表:建议使用以下自检项进行快速验证。
✔ 估算对象清单存在且符合模板
✔ 角色责任矩阵可通过RACI四象限查看
✔ 异常记录中不得有“待处理”状态
✔ 输出物版本号与项目当前冲刺版本一致
第1章 估算目标与适用场景 结构图 估算目标 估算对象 模型训练 数据标注 项目阶段 数据准备期 训练调优期 部署验证期 团队角色 算法工程师 标注项目经理 估算目标 = 估算对象 + 项目阶段 + 团队角色