3. Champion 模型定义

在风控模型迭代管理中,Champion 模型(冠军模型)是指当前在生产环境中稳定运行、被正式用于风险决策的评分模型。它是模型治理的基准锚点,所有新开发的 Challenger 模型都必须与之进行严格的对比评估,才能决定是否替换上线。

核心定义:Champion 模型 = 当前生产环境中“正在服役”的模型,是模型评估与迭代的参照系。

3.1 Champion 模型的选取标准

一个模型要成为 Champion,不能仅凭离线表现,必须通过一套量化指标的综合评审。下表列出最核心的选取标准:

指标 含义 Champion 准入阈值 说明
AUC ROC 曲线下面积,衡量模型整体排序能力 ≥ 0.75(消费信贷场景) 越高越好,代表模型对好坏客户的区分能力
KS Kolmogorov-Smirnov 统计量,衡量模型最大区分度 ≥ 0.30 KS 过高(>0.60)需警惕过拟合
PSI 群体稳定性指标,衡量模型分数分布随时间的变化 < 0.10 PSI < 0.10 表示稳定;0.10–0.25 需监控;>0.25 需重建
Gini 基尼系数,与 AUC 等价但更直观 ≥ 0.50 Gini = 2×AUC – 1
Lift 提升度,衡量模型在 top 分箱中的捕获能力 ≥ 2.0(top 10% 分箱) 用于业务决策,如拒绝策略的精准度
实战建议:Champion 模型选取时,AUC 和 KS 是“能力指标”,PSI 是“稳定性指标”。能力再强,如果 PSI 超过 0.25,模型在线上已经发生本质偏移,必须降级或重建。

3.2 Champion 模型的部署状态

Champion 模型在生产环境中通常处于以下三种部署状态之一:

  • 全量上线(Production):模型 100% 流量用于实时决策,是默认的评分引擎。
  • 影子模式(Shadow Mode):模型并行运行但不影响决策,仅用于收集分数分布和监控稳定性,常见于 Champion 模型初上线或 Challenger 模型对比期。
  • 金丝雀发布(Canary Release):模型仅对 5%–10% 的流量生效,用于小范围验证线上效果,逐步放量至全量。

下表总结了三种部署状态的关键差异:

部署状态 流量占比 是否影响决策 典型用途
全量上线 100% 是 正式生产决策
影子模式 100%(旁路) 否 稳定性监控、Challenger 对比
金丝雀发布 5%–10% 是(小范围) 新模型灰度验证

3.3 Champion 模型的生命周期与评估流程

Champion 模型并非一成不变,它需要定期接受评估。下图展示了 Champion 模型从选取到退役的完整生命周期:

Champion 模型生命周期流程图 Champion 模型生命周期 模型开发 离线评估(AUC/KS/PSI) 影子模式(旁路监控) 金丝雀发布(5%–10% 流量) 全量上线(Champion) 持续监控(PSI/月) 退役 / 降级 生命周期关键点 1. 离线评估通过后进入影子模式 2. 影子模式稳定后进入金丝雀发布 3. 全量上线后每月监控 PSI
注意:Champion 模型一旦进入全量上线状态,必须建立月度 PSI 监控看板。如果连续两个月 PSI > 0.25,模型需要立即降级为影子模式,并启动 Challenger 模型紧急替换流程。

3.4 Champion 模型与 Challenger 模型的关系

Champion 模型不是终点,而是迭代的起点。在 Champion/Challenger 框架中,Champion 模型承担以下职责:

  • 基准锚点:所有 Challenger 模型的 AUC、KS、PSI 必须与 Champion 模型进行配对检验。
  • 稳定性基线:Champion 模型的 PSI 历史曲线作为判断模型偏移的参考线。
  • 决策对照:在影子模式中,Champion 模型与 Challenger 模型同时评分,对比分数分布和拒绝率。

下图展示了 Champion 与 Challenger 在评估流程中的对比关系:

Champion vs Challenger 对比评估 Champion vs Challenger 对比评估 Champion 模型(生产) AUC=0.78 | KS=0.35 | PSI=0.05 Challenger 模型(候选) AUC=0.81 | KS=0.38 | PSI=0.08 对比评估 Challenger 替换 Champion 的条件 ✅ AUC 提升 ≥ 0.02(配对检验 p < 0.05) ✅ KS 提升 ≥ 0.03 ✅ PSI < 0.10(与 Champion 训练集对比)
实战经验:Challenger 模型即使 AUC 高于 Champion,如果 PSI 超过 0.15,说明分数分布已经发生较大偏移,上线后可能引发拒绝率突变,建议先进入影子模式观察 2–4 周再决定是否全量替换。