2. Champion 模型定义
在风控模型迭代体系中,Champion 模型(冠军模型) 是指当前生产环境中表现最稳定、经过充分验证且正在全量服务线上决策的模型。它是风控系统的“主力模型”,承担着绝大多数流量(通常为 90%–100%)的评分与决策任务。
2.1 Champion 模型的定义
Champion 模型并非“最新”或“最复杂”的模型,而是经过严格离线评估、在线 A/B 测试、业务验证后,被正式部署到生产环境并承担主要决策责任的模型。其核心特征包括:
- 生产级稳定:已在生产环境运行至少一个完整业务周期(如 30 天),评分分布、拒绝率、逾期率等关键指标无异常波动。
- 全量或高比例流量:承担 90%–100% 的线上决策流量,剩余流量用于 Challenger 模型测试或灰度验证。
- 可追溯与可回滚:模型版本、特征逻辑、决策阈值均有完整记录,支持一键回滚至上一 Champion 版本。
- 业务对齐:模型决策逻辑与当前风控策略、业务目标(如坏账率 ≤ 2.5%、通过率 ≥ 60%)保持一致。
关键认知:Champion 模型不是“最好”的模型,而是“当前最安全、最可靠”的模型。在风控领域,稳定性优先于极致性能。
2.2 Champion 模型的选择标准
从候选模型晋升为 Champion 模型,需通过以下四个维度的严格评估:
| 评估维度 | 核心指标 | 通过标准 | 说明 |
|---|---|---|---|
| 区分能力 | KS / AUC / Gini | KS ≥ 0.35,AUC ≥ 0.80 | 在验证集与测试集上均达标,且与 Champion 差异 ≤ 5% |
| 稳定性 | PSI / 特征稳定性 | PSI ≤ 0.10(总体),特征 PSI ≤ 0.05 | 跨时间窗口(如 T-30 与 T-1)评分分布无显著偏移 |
| 业务效果 | 坏账率 / 通过率 / FPR | 坏账率 ≤ 当前 Champion ± 0.3% | 在 A/B 测试中,业务指标不显著劣于当前 Champion |
| 可解释性 | 特征重要性 / SHAP / 决策路径 | Top 10 特征可解释,无黑箱逻辑 | 满足监管与业务审查要求,支持人工复核 |
实践建议:选择 Champion 模型时,建议采用“加权评分卡”方式,将区分能力、稳定性、业务效果、可解释性分别赋予 40%、30%、20%、10% 的权重,综合得分最高者晋升为 Champion。
2.3 生产环境中的角色定位
Champion 模型在生产环境中承担以下核心角色:
- 决策主力:为 90%–100% 的申请单提供信用评分、风险等级、拒绝/通过建议。
- 基准锚点:所有 Challenger 模型的性能评估均以 Champion 模型为基准,计算相对提升(如 Lift、KS 增量)。
- 监控基线:生产监控系统以 Champion 模型的评分分布、拒绝率、逾期率作为基线,一旦 Challenger 模型偏离基线超过阈值,自动触发告警。
- 回滚目标:当 Challenger 模型上线后出现异常(如评分漂移、坏账率飙升),系统自动回滚至 Champion 模型,保障业务连续性。
- 合规锚点:监管审计时,Champion 模型的决策逻辑、特征使用、阈值设定作为合规审查的基准版本。
2.4 Champion 模型的生命周期管理
Champion 模型并非一成不变,其生命周期包含以下阶段:
- 部署期:模型通过离线评估与 A/B 测试后,正式部署为 Champion,开始全量服务。
- 稳定期:模型在生产环境稳定运行,持续监控 PSI、KS、坏账率等指标,通常持续 3–6 个月。
- 衰退期:由于客群漂移、政策变化、数据源变更等原因,模型性能开始下降(如 KS 下降 ≥ 0.05 或 PSI ≥ 0.15)。
- 替换期:新的 Challenger 模型经过充分验证后,替换当前 Champion,原 Champion 降级为历史版本存档。
注意:Champion 模型替换时,必须保留至少 2 个历史 Champion 版本,并记录替换原因、时间、性能对比数据,以备监管审查与回溯分析。
2.5 Champion 模型与 Challenger 模型的协作关系
在生产环境中,Champion 模型与 Challenger 模型形成“主-备-测”三层协作体系:
| 模型角色 | 流量占比 | 核心职责 | 更新频率 |
|---|---|---|---|
| Champion | 90%–100% | 主力决策、基准锚点、监控基线 | 每 3–6 月评估一次 |
| Challenger | 0%–10% | 新模型验证、性能对比、策略测试 | 每 1–2 月迭代一次 |
| Shadow(影子) | 0%(旁路评分) | 离线评估、不参与决策、积累样本 | 按需部署 |
这种分层架构确保风控系统在追求模型性能提升的同时,始终保持生产环境的稳定性与安全性。