VIP20
本课程属于：072-模型风险管理异常波动复盘 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

MRM模型漂移监控异常复盘指南

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
MRM模型漂移概述
什么是模型漂移 · 漂移的类型（数据漂移 · 概念漂移
MRM模型漂移概述
02
MRM监控体系架构
MRM监控平台的整体架构 · 数据采集层 · 指标计算层
MRM监控体系架构
03
数据漂移检测原理
PSI（群体稳定性指标）的计算方法 · 阈值设定 · PSI的优缺点
数据漂移检测原理PSI
04
概念漂移检测原理
DDM（漂移检测方法） · ADWIN（自适应窗口算法） · Page-Hinkley方法
概念漂移检测原理DDM
05
模型性能退化监控
准确率 · 精确率 · 召回率
模型性能退化监控准确率
06
特征分布漂移监控
单特征分布对比（KS检验 · 卡方检验） · 多特征联合分布漂移检测
特征分布漂移监控KS
07
预测结果分布漂移监控
模型输出概率分布的变化 · 预测类别分布的变化 · 置信度漂移
预测结果分布漂移…模型输出概率分布…
08
实时监控与离线监控
实时流式监控架构（Kafka+Fli… · 离线批量监控架构（Spark+定时任…
实时监控离线监控
09
告警规则配置
告警级别定义（P0/P1/P2） · 告警触发条件（阈值 · 持续时长
告警规则配置P0/P1/P2
10
告警通知渠道
邮件告警 · 企业微信/钉钉机器人 · 短信告警
告警通知渠道邮件告警
11
异常复盘流程总览
异常发现→告警确认→影响评估→根因分…
异常复盘流程总览异常发现→告警确…
12
异常发现阶段
监控看板巡检 · 告警通知接收 · 异常初步分类（数据问题/模型问题/基…
异常发现阶段监控看板巡检
13
告警确认与定级
确认告警真实性 · 排除误报 · 评估影响范围（用户量/交易量/业务收…
告警确认定级
14
影响评估方法
回溯受影响时间段 · 统计受影响样本量 · 评估业务指标下降幅度
影响评估方法回溯受影响时间段
15
根因分析-数据层面
上游数据源变更 · 数据缺失 · 数据延迟
根因分析数据层面
16
根因分析-模型层面
模型版本回滚 · 训练数据分布变化 · 超参数漂移
根因分析模型层面
17
根因分析-基础设施层面
服务器资源不足 · 网络延迟 · 模型服务部署错误
根因分析基础设施层面
18
根因分析工具与方法
对比分析（正常时段vs异常时段） · A/B测试 · 特征重要性分析
根因分析工具vs
19
修复措施制定
紧急回滚方案 · 数据修复方案 · 模型重训练方案
修复措施制定紧急回滚方案
20
修复措施执行与验证
灰度发布 · A/B测试验证 · 监控指标恢复确认
修复措施执行验证
21
复盘报告撰写
异常时间线 · 根因结论 · 影响范围
复盘报告撰写异常时间线
22
改进跟踪与闭环
改进项优先级排序 · 改进任务分配 · 改进进度跟踪
改进跟踪闭环
23
漂移监控指标看板设计
关键指标展示（PSI · AUC · 准确率
漂移监控指标看板…PSI
24
漂移监控自动化
自动化漂移检测脚本 · 自动化告警生成 · 自动化根因分析报告生成
漂移监控自动化自动化漂移检测脚…
25
漂移监控最佳实践
多维度监控（数据/特征/模型/业务） · 监控频率选择 · 阈值动态调整
漂移监控最佳实践多维度监控
26
常见漂移案例1-数据漂移
用户画像数据源变更导致特征分布偏移 · 复盘过程详解
常见漂移案例1数据漂移
27
常见漂移案例2-概念漂移
电商大促期间用户行为模式变化导致模型… · 复盘过程详解
常见漂移案例2概念漂移
28
常见漂移案例3-模型退化
模型长期未更新导致性能逐渐下降 · 复盘过程详解
常见漂移案例3模型退化
29
MRM漂移监控工具选型
开源工具（Evidently AI · WhyLabs · Alibi Detect）
MRM漂移监控工具选型
30
课程总结与展望
MRM漂移监控的未来趋势 · 自动化运维（AIOps） · 可解释AI在漂移监控中的应用
课程总结MRM