3. 推演目标设定:明确推演范围、设定关键质量指标、定义成功标准

沙盘推演不是漫无目的的“数据体检”,而是一场有明确靶心的攻防演练。在进入数据准备与规则配置之前,必须完成三项基础工作:划定推演的业务边界、锁定可量化的质量指标、定义推演结束的判定标准。这三者共同构成推演的“作战地图”,确保后续所有动作不偏离核心目标。

3.1 推演范围:信贷与反欺诈的双域模型

本次沙盘推演覆盖风控领域最核心的两个业务域——信贷审批与反欺诈。两个域的数据特征、质量敏感点、失败后果存在显著差异,因此需要分别设定推演范围。

维度 信贷审批域 反欺诈域
核心数据对象 客户收入、负债、征信报告、多头借贷 设备指纹、IP 地址、行为序列、关联网络
质量敏感点 字段缺失、数值异常、逻辑冲突 时效性延迟、数据篡改、关联断裂
推演数据时间窗口 近 6 个月申请样本 近 30 天实时事件流
涉及系统边界 核心信贷系统、征信网关、决策引擎 埋点 SDK、实时计算平台、黑名单库
推演角色 数据产品、模型开发、审批策略 反欺诈分析师、安全运维、数据治理
推演范围校准原则:范围不宜过宽,否则推演资源被稀释;也不宜过窄,否则无法暴露跨域数据质量问题。建议以“一个完整决策链路”为最小推演单元,例如信贷域从“申请提交”到“授信结果返回”的全链路数据质量。

3.2 关键质量指标(KQI)体系

KQI 是推演过程中用于衡量数据质量水平的量化标尺。不同于日常监控的 DQ 维度(完整性、准确性等),推演 KQI 必须与业务影响直接挂钩。本次推演设定 6 项核心 KQI,分为 基础质量类 和 业务影响类 两个层级。

3.2.1 基础质量类 KQI

  • 字段完整性率(FCR):关键字段非空比例,目标 ≥ 99.5%。
  • 数据时效性偏差(TLD):数据从产生到可用的时间差,信贷域 ≤ 2h,反欺诈域 ≤ 30s。
  • 逻辑一致性通过率(LCR):跨表/跨系统逻辑校验通过比例,目标 ≥ 98%。

3.2.2 业务影响类 KQI

  • 因数据质量导致的误杀率(FDR):因数据错误被错误拒绝的申请占比,目标 ≤ 0.5%。
  • 因数据质量导致的漏过率(FAR):因数据缺失或延迟未被拦截的风险事件占比,目标 ≤ 0.1%。
  • 数据修复成本率(DCR):修复数据问题所需人天与总处理人天的比值,目标 ≤ 5%。
KQI 设定要点:每个 KQI 必须附带明确的 计算口径、数据来源、采集频率 和 阈值。例如 FCR 的计算口径为“非空记录数 / 总记录数 × 100%”,数据来源为“申请主表 + 征信解析表”,采集频率为“每小时统计一次”。

3.3 成功标准定义

成功标准是推演结束的“终局判定”。本次推演采用 三级通过制,只有同时满足以下所有条件,才判定推演通过。

  1. 一级标准(数据层):所有基础质量类 KQI 连续 3 个统计周期达标,且无新增严重数据质量问题。
  2. 二级标准(业务层):业务影响类 KQI 达标,且因数据质量导致的策略误判率下降 ≥ 40%(与推演前基线对比)。
  3. 三级标准(流程层):数据问题平均修复时间(MTTR)缩短 ≥ 30%,且数据质量告警响应率达到 100%。

以下 SVG 图展示了从推演范围到成功标准的完整目标设定链路,帮助理解各要素之间的层级与依赖关系。

推演目标设定链路图 推演范围 信贷审批域 + 反欺诈域 数据时间窗口 信贷: 近6月 | 反欺诈: 近30天 关键质量指标(KQI)体系 基础质量类:FCR / TLD / LCR 业务影响类:FDR / FAR / DCR 计算口径 · 数据来源 · 采集频率 · 阈值 成功标准(三级通过制) 一级(数据层): 基础KQI连续达标 二级(业务层): 误判率下降≥40% 三级(流程层): MTTR缩短≥30%

3.4 范围与指标的映射矩阵

为了确保每个推演范围都有对应的 KQI 覆盖,避免出现“盲区”,我们建立以下映射矩阵。该矩阵在推演过程中将作为检查清单使用。

推演范围 核心 KQI 数据源示例 推演验证方式
信贷审批 - 收入字段 FCR, LCR 申请主表、银行流水解析 模拟缺失场景,观察策略降级
信贷审批 - 征信报告 TLD, FDR 征信网关接口日志 注入延迟数据,计算误杀率
反欺诈 - 设备指纹 TLD, FAR 埋点 SDK 上报日志 模拟设备指纹丢失,观察漏过
反欺诈 - 关联网络 LCR, DCR 图数据库、关系表 破坏关联边,计算修复成本
常见误区:推演目标设定阶段最容易犯的错误是“指标堆砌”——列出十几个 KQI 却没有优先级。建议将 KQI 数量控制在 5~7 个,并明确标注哪些是“一票否决项”(如 FDR 超标直接判定推演失败),哪些是“观察项”(如 DCR 仅做参考)。

以下 SVG 图展示推演目标设定完成后,各要素之间的依赖关系与数据流向,帮助团队在推演执行前建立全局视角。

推演目标依赖与数据流向图 推演范围 信贷审批域 反欺诈域 时间窗口 KQI 体系 FCR / TLD / LCR FDR / FAR / DCR 阈值与口径 成功标准 一级: 数据层 二级: 业务层 三级: 流程层 推演目标设定检查清单 ☐ 信贷域与反欺诈域的范围边界是否清晰? ☐ 每个 KQI 是否都有明确的计算口径和阈值? ☐ 成功标准是否覆盖数据、业务、流程三个层级? ☐ 范围与 KQI 之间是否存在未被覆盖的盲区? ☐ 是否已与业务方对齐推演目标并签字确认?

完成推演目标设定后,团队应输出一份《推演目标说明书》,包含范围定义、KQI 清单、成功标准、映射矩阵和检查清单。这份文档将作为后续数据准备、规则配置、推演执行与结果评估的唯一基准,所有偏离都必须经过变更控制流程审批。