VIP20
本课程属于：064-风控数据质量收益沙盘推演 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Champion Challenger实战：风控模型评估

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
Champion Challenge… · 在风控模型评估中的核心价值 · 课程整体学习路径
课程导论Champion
02
风控模型基础回顾
评分卡模型 · 机器学习模型（XGBoost/Lig… · 深度学习模型在风控中的应用场景
风控模型基础回顾评分卡模型
03
Champion模型定义
什么是Champion模型 · Champion模型的选取标准（如A… · KS
Champion模型定义
04
Challenger模型定义
什么是Challenger模型 · Challenger模型的开发动机（… · 特征更新
Challenger模型定义
05
评估指标体系（上）
区分度指标——AUC · KS · Gini系数
评估指标体系AUC
06
评估指标体系（中）
稳定性指标——PSI（群体稳定性指标… · CSI（特征稳定性指标） · 监控频率与阈值设定
评估指标体系PSI
07
评估指标体系（下）
校准度指标——校准曲线 · Brier Score · Hosmer-Lemeshow检验
评估指标体系校准度指标
08
离线评估流程
数据划分（训练/验证/测试集） · 时间外样本（OOT）设计 · 回测时间窗口选择
离线评估流程数据划分
09
在线评估流程
A/B测试设计 · 流量切分策略（50/50 · 动态分流）
线评估流程A/B
10
Champion vs Challenger对比框架
构建对比矩阵（性能 · 稳定性 · 可解释性
Championvs
11
PSI实战计算
PSI公式推导 · 分箱方法（等频/等距） · Python代码实现PSI计算
PSI实战计算
12
KS与AUC实战
KS曲线绘制 · AUC计算（sklearn） · 模型区分能力对比
KSAUC
13
校准曲线实战
可靠性图（Reliability D… · Brier Score计算 · 模型概率校正（Platt Scali…
校准曲线实战Reliability
14
特征重要性对比
SHAP值计算 · 特征重要性排序 · Champion与Challenge…
特征重要性对比SHAP
15
时间稳定性测试
滚动窗口PSI监控 · 特征分布漂移检测（KS检验/卡方检验… · 模型衰减预警
时间稳定性测试PSI
16
业务指标映射
模型分数与业务决策（通过率 · 核准率 · 坏账率）的映射关系
业务指标映射模型分数
17
Challenger模型上线决策
综合评分卡（性能分+稳定性分+可解释… · 决策矩阵 · 灰度发布策略
Challenger模型上线决策
18
冠军模型回退机制
回退触发条件（PSI超阈值 · AUC骤降） · 回退流程设计
冠军模型回退机制PSI
19
多Challenger并行评估
同时评估多个候选模型 · 多重比较校正（Bonferroni） · 最佳Challenger选择
Challenger并行评估
20
自动化评估流水线
Airflow/Pipeline调度 · 定时触发离线评估 · 自动生成评估报告（PDF/HTML）
自动化评估流水线Airflow/Pipe…
21
评估报告模板
报告结构（摘要 · 性能对比 · 稳定性对比
评估报告模板报告结构
22
案例实战（一）
信用评分卡Champion vs 新…
案例实战Champion
23
案例实战（二）
信用评分卡Champion vs 新…
案例实战Champion
24
案例实战（三）
反欺诈模型Champion vs G…
案例实战Champion
25
案例实战（四）
反欺诈模型Champion vs G…
案例实战Champion
26
模型监控平台设计
实时监控仪表盘（Grafana） · 指标告警规则 · Champion/Challenge…
模型监控平台设计Grafana
27
模型治理与合规
模型文档（Model Card） · 监管审计要求 · 模型版本管理（MLflow）
模型治理合规
28
常见陷阱与避坑指南
样本选择偏差 · 幸存者偏差 · 过度拟合OOT
常见陷阱避坑指南
29
进阶话题
强化学习在Champion/Chal… · 元学习自动选择Challenger
进阶话题Champion/Cha…
30
课程总结与展望
Champion Challenge… · 联邦学习下的模型评估 · AutoML与持续模型优化
课程总结Champion