VIP20
本课程属于：029-产品机会评分模型 产品经理与需求分析 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

机会评分模型复盘优化实战

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
复盘启动准备
明确复盘目标 · 组建团队 · 制定时间计划
复盘启动准备明确复盘目标
02
模型历史数据收集
提取建模样本 · 线上评分日志 · 特征数据
模型历史数据收集提取建模样本
03
模型文档与版本梳理
收集模型设计文档 · 参数配置 · 版本变更记录
模型文档版本梳理
04
业务环境与政策变化核对
梳理业务调整 · 客群漂移 · 政策法规变更对模型的影响
业务环境政策变化核对
05
评分卡稳定性评估（PSI分析）
计算总体PSI · 分档PSI · 识别评分分布偏移程度
PSI评分卡稳定性评估
06
特征稳定性评估（CSI分析）
计算各特征CSI · 定位导致评分漂移的关键特征
CSI特征稳定性评估
07
区分度评估（KS/AUC/Gini）
计算当前样本上的KS · AUC · Gini
KS/AUC/Gini区分度评估
08
校准度评估（校准曲线与HL检验）
绘制校准曲线 · 计算Hosmer-Lemeshow统…
HL校准度评估
09
排序能力交叉验证（分档坏账率排序）
按评分分档统计坏账率 · 检查单调性
排序能力交叉验证分档坏账率排序
10
拒绝推断效果复盘
回顾拒绝推断方法 · 假设校验 · 推断样本表现
拒绝推断效果复盘回顾拒绝推断方法
11
模型过拟合诊断
对比训练集/验证集/线上样本的KS差… · 特征系数稳定性
模型过拟合诊断KS
12
特征有效性复盘
计算各特征IV变化 · 缺失率变化 · 业务逻辑合理性
特征有效性复盘IV
13
模型可解释性检查
SHAP值分析 · 特征重要性排序 · 业务方反馈
模型可解释性检查SHAP
14
模型部署一致性校验
离线与在线评分对比 · 分数偏差百分比 · 重复性测试
模型部署一致性校…离线
15
样本外测试集表现复盘
在最新样本外数据集上重新评估全部指标
样本外测试集表现…最新样本外数据集…
16
问题根因定位流程
建立问题树 · 分层排查（数据层/特征层/模型层/部…
问题根因定位流程建立问题树
17
数据质量问题排查清单
检查缺失值异常 · 异常值 · 数据管道错误
数据质量问题排查…检查缺失值异常
18
特征工程问题排查清单
检查特征构造错误 · 变换失效 · 分箱不合理
特征工程问题排查…检查特征构造错误
19
模型参数调优方向确定
根据复盘结果选择调优目标（提升区分度…
模型参数调优方向…根据复盘结果选择…
20
特征筛选与重构
基于IV/相关性/业务逻辑剔除无效特…
特征筛选重构
21
模型再训练与交叉验证
制定训练/验证/测试集划分策略 · 执行多折交叉验证
模型再训练交叉验证
22
评分卡刻度调整（分数校准）
调整分数映射使坏账率对标业务目标
评分卡刻度调整分数校准
23
模型集成或融合策略
投票法 · Stacking · 分数加权融合方案设计
模型集成或融合策…投票法
24
阈值优化与业务校准
根据业务损失矩阵确定最优决策阈值
阈值优化业务校准
25
优化后模型效果验证
全指标复测（KS · 校准 · PSI
优化后模型效果验…KS
26
A/B测试方案设计
流量分配 · 实验组/对照组 · 最小样本量计算
A/B测试方案设计
27
模型上线部署SOP
代码评审 · 灰度发布 · 监控告警配置
SOP模型上线部署
28
模型监控看板与持续迭代机制
关键指标看板 · 触发阈值 · 定期复盘会议
模型监控看板持续迭代机制
29
复盘报告撰写模板
问题摘要 · 数据事实 · 根因分析
复盘报告撰写模板问题摘要
30
复盘优化全流程验收清单
检查每步输出物是否齐全 · 责任签字 · 归档与知识沉淀
复盘优化全流程验…检查每步输出物是…