3. 推演目标设定:明确推演范围、设定关键质量指标、定义成功标准
沙盘推演不是漫无目的的“数据体检”,而是一场有明确靶心的攻防演练。在进入数据准备与规则配置之前,必须完成三项基础工作:划定推演的业务边界、锁定可量化的质量指标、定义推演结束的判定标准。这三者共同构成推演的“作战地图”,确保后续所有动作不偏离核心目标。
3.1 推演范围:信贷与反欺诈的双域模型
本次沙盘推演覆盖风控领域最核心的两个业务域——信贷审批与反欺诈。两个域的数据特征、质量敏感点、失败后果存在显著差异,因此需要分别设定推演范围。
| 维度 | 信贷审批域 | 反欺诈域 |
|---|---|---|
| 核心数据对象 | 客户收入、负债、征信报告、多头借贷 | 设备指纹、IP 地址、行为序列、关联网络 |
| 质量敏感点 | 字段缺失、数值异常、逻辑冲突 | 时效性延迟、数据篡改、关联断裂 |
| 推演数据时间窗口 | 近 6 个月申请样本 | 近 30 天实时事件流 |
| 涉及系统边界 | 核心信贷系统、征信网关、决策引擎 | 埋点 SDK、实时计算平台、黑名单库 |
| 推演角色 | 数据产品、模型开发、审批策略 | 反欺诈分析师、安全运维、数据治理 |
推演范围校准原则:范围不宜过宽,否则推演资源被稀释;也不宜过窄,否则无法暴露跨域数据质量问题。建议以“一个完整决策链路”为最小推演单元,例如信贷域从“申请提交”到“授信结果返回”的全链路数据质量。
3.2 关键质量指标(KQI)体系
KQI 是推演过程中用于衡量数据质量水平的量化标尺。不同于日常监控的 DQ 维度(完整性、准确性等),推演 KQI 必须与业务影响直接挂钩。本次推演设定 6 项核心 KQI,分为 基础质量类 和 业务影响类 两个层级。
3.2.1 基础质量类 KQI
- 字段完整性率(FCR):关键字段非空比例,目标 ≥ 99.5%。
- 数据时效性偏差(TLD):数据从产生到可用的时间差,信贷域 ≤ 2h,反欺诈域 ≤ 30s。
- 逻辑一致性通过率(LCR):跨表/跨系统逻辑校验通过比例,目标 ≥ 98%。
3.2.2 业务影响类 KQI
- 因数据质量导致的误杀率(FDR):因数据错误被错误拒绝的申请占比,目标 ≤ 0.5%。
- 因数据质量导致的漏过率(FAR):因数据缺失或延迟未被拦截的风险事件占比,目标 ≤ 0.1%。
- 数据修复成本率(DCR):修复数据问题所需人天与总处理人天的比值,目标 ≤ 5%。
KQI 设定要点:每个 KQI 必须附带明确的 计算口径、数据来源、采集频率 和 阈值。例如 FCR 的计算口径为“非空记录数 / 总记录数 × 100%”,数据来源为“申请主表 + 征信解析表”,采集频率为“每小时统计一次”。
3.3 成功标准定义
成功标准是推演结束的“终局判定”。本次推演采用 三级通过制,只有同时满足以下所有条件,才判定推演通过。
- 一级标准(数据层):所有基础质量类 KQI 连续 3 个统计周期达标,且无新增严重数据质量问题。
- 二级标准(业务层):业务影响类 KQI 达标,且因数据质量导致的策略误判率下降 ≥ 40%(与推演前基线对比)。
- 三级标准(流程层):数据问题平均修复时间(MTTR)缩短 ≥ 30%,且数据质量告警响应率达到 100%。
以下 SVG 图展示了从推演范围到成功标准的完整目标设定链路,帮助理解各要素之间的层级与依赖关系。
3.4 范围与指标的映射矩阵
为了确保每个推演范围都有对应的 KQI 覆盖,避免出现“盲区”,我们建立以下映射矩阵。该矩阵在推演过程中将作为检查清单使用。
| 推演范围 | 核心 KQI | 数据源示例 | 推演验证方式 |
|---|---|---|---|
| 信贷审批 - 收入字段 | FCR, LCR | 申请主表、银行流水解析 | 模拟缺失场景,观察策略降级 |
| 信贷审批 - 征信报告 | TLD, FDR | 征信网关接口日志 | 注入延迟数据,计算误杀率 |
| 反欺诈 - 设备指纹 | TLD, FAR | 埋点 SDK 上报日志 | 模拟设备指纹丢失,观察漏过 |
| 反欺诈 - 关联网络 | LCR, DCR | 图数据库、关系表 | 破坏关联边,计算修复成本 |
常见误区:推演目标设定阶段最容易犯的错误是“指标堆砌”——列出十几个 KQI 却没有优先级。建议将 KQI 数量控制在 5~7 个,并明确标注哪些是“一票否决项”(如 FDR 超标直接判定推演失败),哪些是“观察项”(如 DCR 仅做参考)。
以下 SVG 图展示推演目标设定完成后,各要素之间的依赖关系与数据流向,帮助团队在推演执行前建立全局视角。
完成推演目标设定后,团队应输出一份《推演目标说明书》,包含范围定义、KQI 清单、成功标准、映射矩阵和检查清单。这份文档将作为后续数据准备、规则配置、推演执行与结果评估的唯一基准,所有偏离都必须经过变更控制流程审批。