VIP20

本课程属于：047-实时交易风控人群切片复盘 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Champion Challenger风控效果评估教程

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

Champion Challenger概念

Champion Challenge… · 在风控领域的核心价值 · 与传统A/B测试的区别

ChampionChallenger

风控模型评估基础

混淆矩阵 · 准确率 · 精确率

风控模型评估基础混淆矩阵

KS统计量的含义与计算 · AUC的几何意义 · KS与AUC在风控中的适用场景

PSI群体稳定性指标

PSI的定义 · 计算公式 · PSI在模型监控中的作用

PSI群体稳定性指标

Champion Challenger实验设计

实验组与对照组划分 · 随机化原则 · 样本量计算

ChampionChallenger

流量分流策略

流量切分比例设计 · 分层分流 · 用户ID哈希分流

流量分流策略流量切分比例设计

离线评估与在线评估

离线回测方法 · 在线实时评估 · 离线与在线指标差异分析

离线评估线评估

模型效果对比框架

Champion模型基线建立 · Challenger模型效果对比 · 统计显著性检验

模型效果对比框架Champion

假设检验基础

零假设与备择假设 · 第一类错误与第二类错误 · p值含义

假设检验基础零假设

t检验与z检验

单样本t检验 · 双样本t检验 · z检验适用条件

卡方检验与McNemar检验

卡方检验用于分类效果对比 · McNemar检验用于配对样本 · 适用场景

McNemar卡方检验

置换检验与Bootstrap

置换检验原理 · Bootstrap重抽样方法 · 非参数检验在模型评估中的应用

Bootstrap置换检验

多重比较校正

Bonferroni校正 · FDR校正 · Holm-Bonferroni方法

多重比较校正Bonferroni

业务指标评估

通过率 · 坏账率 · 逾期率

业务指标评估通过率

收益成本分析

模型带来的坏账减少 · 审批成本变化 · 收益提升计算

收益成本分析模型带来的坏账减…

时间序列稳定性评估

模型效果随时间衰减检测 · PSI趋势图 · 滚动窗口评估方法

时间序列稳定性评…模型效果随时间衰…

分群效果评估

按客群分层评估 · 不同分群下的KS/AUC对比 · 分群稳定性分析

分群效果评估按客群分层评估

拒绝推断的必要性 · 硬截断法与软截断法 · 拒绝推断对Champion Chal…

拒绝推断拒绝推断的必要性

样本外测试

时间外样本测试 · 跨时间窗口验证 · 样本外测试的评估指标

样本外测试时间外样本测试

交叉验证在模型对比中的应用

K折交叉验证 · 分层交叉验证 · 交叉验证下的Champion Cha…

交叉验证模型对比

模型可解释性对比

SHAP值对比 · 特征重要性对比 · LIME解释

模型可解释性对比SHAP

决策阈值优化

阈值对评估指标的影响 · 最优阈值搜索方法 · 阈值在Champion Challe…

决策阈值优化阈值对评估指标的…

模型监控仪表盘

实时监控指标设计 · 告警规则 · 仪表盘可视化

模型监控仪表盘实时监控指标设计

自动化评估流程

自动化回测流水线 · 定时评估任务 · 自动生成评估报告

自动化评估流程自动化回测流水线

信贷风控Champion Chall… · 评估指标选择 · 结果解读与决策

案例实战Champion

反欺诈Champion Challe… · 实时评估 · 误杀率与漏杀率平衡

案例实战Champion

营销响应Champion Chall… · 转化率对比 · 成本收益分析

案例实战Champion

常见陷阱与误区

数据泄露 · 样本偏差 · 多重比较陷阱

常见陷阱误区

最佳实践总结

实验设计规范 · 评估流程标准化 · 文档记录要求

最佳实践总结实验设计规范

未来趋势与进阶

AutoML在Champion Ch… · 联邦学习下的模型对比 · 因果推断在模型评估中的前沿

未来趋势进阶