1. 回放对比评审概述
1.1 回放对比评审的定义
回放对比评审(Replay Comparison Review, RCR)是一种基于历史决策日志与实时业务数据进行双向比对的风控质量评估方法。其核心操作是将当前风控系统对某笔交易或行为的评分、规则命中、模型输出等结果,与同一笔业务在历史时间节点上的决策记录进行逐字段回放与差异分析,从而发现策略偏移、模型衰减、数据异常或规则冲突等问题。
关键特征:回放对比评审不是简单的“事后复盘”,而是通过时间轴对齐与决策字段级比对,实现风控决策链路的可追溯、可量化、可复现。
1.2 在风控体系中的定位
回放对比评审在风控体系中处于策略运营与质量保障的中间层,连接着策略开发与线上监控两大环节。其定位可用下表概括:
| 风控层级 | 典型活动 | 回放对比评审角色 |
|---|---|---|
| 策略设计层 | 规则编写、模型训练、阈值设定 | 提供历史决策基线,验证新策略的预期效果 |
| 策略运营层 | 策略部署、AB测试、冠军/挑战者 | 作为评审工具,对比新旧策略的决策差异 |
| 监控告警层 | 实时指标、离线报表、异常检测 | 补充字段级差异分析,定位监控告警根因 |
| 审计合规层 | 监管报送、内部审计、模型解释 | 提供可审计的决策回放记录与差异报告 |
回放对比评审在风控体系中的具体定位如下图所示:
1.3 与传统评审的区别
传统风控评审通常依赖静态报表、人工抽样和事后统计,而回放对比评审引入了动态回放与字段级差异分析机制。两者的核心区别如下:
| 对比维度 | 传统评审 | 回放对比评审 |
|---|---|---|
| 数据基础 | 聚合统计报表、离线样本 | 全量历史决策日志、实时业务字段 |
| 分析粒度 | 整体通过率、拒绝率等宏观指标 | 单笔交易/行为的逐字段决策链路 |
| 时间维度 | 固定时间窗口(T+1/周/月) | 支持任意时间点回放与时间轴对齐 |
| 评审方式 | 人工抽样、经验判断 | 自动化比对、差异标记、可视化呈现 |
| 发现能力 | 宏观趋势异常、明显错误 | 策略偏移、模型衰减、字段异常、规则冲突 |
| 可追溯性 | 难以定位到具体决策节点 | 完整记录决策路径,支持逐层下钻 |
核心差异总结:传统评审回答“发生了什么”,回放对比评审回答“为什么发生”以及“如果换一种策略会怎样”。后者具备假设推演与根因定位的双重能力。
回放对比评审与传统评审在流程上的差异如下图所示:
实践注意:回放对比评审对数据质量与日志完整性要求较高。如果历史决策日志缺失关键字段或时间戳不准确,回放结果可能产生误导。建议在实施前先完成数据质量基线评估。