VIP20
本课程属于：074-授信决策引擎批次偏移诊断 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

LightGBM模型上线后批次偏移排查指南

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
批次偏移概述
什么是批次偏移 · 为什么LightGBM模型容易受批次… · 偏移的常见类型（协变量偏移
批次偏移概述什么是批次偏移
02
排查前置准备
模型元数据记录要求 · 特征存储规范 · 线上日志采集标准
排查前置准备模型元数据记录要…
03
特征分布监控体系
连续特征统计量监控（均值 · 方差 · 分位数）
特征分布监控体系连续特征统计量监…
04
PSI（群体稳定性指标）计算与解读
PSI公式推导 · 分箱策略 · 阈值设定（0.1/0.2）
PSI群体稳定性指标
05
特征重要性漂移分析
LightGBM内置特征重要性类型（… · split · cover）
特征重要性漂移分…LightGBM
06
SHAP值偏移检测
SHAP值计算原理 · 基线SHAP与当前SHAP对比 · 特征SHAP分布偏移的可视化方法
SHAP值偏移检测
07
预测分布监控
模型输出概率分布对比 · KS统计量 · 预测值分位数漂移
预测分布监控模型输出概率分布…
08
数据质量告警机制
基于规则告警（阈值触发） · 基于统计告警（3-sigma · IQR）
数据质量告警机制基于规则告警
09
特征工程链路追溯
特征计算逻辑版本管理 · 特征依赖血缘图 · 特征计算异常时的回滚策略
特征工程链路追溯特征计算逻辑版本…
10
数据源变更检测
上游数据表Schema变更监控 · 数据源延迟监控 · 数据源空值率突变检测
数据源变更检测Schema
11
时间特征偏移排查
特征时间戳有效性校验 · 特征时效性衰减检测 · 时间窗口特征（滑动平均）的偏移
时间特征偏移排查特征时间戳有效性…
12
类别特征新值检测
训练集未见类别出现 · 低频类别频次突变 · 类别编码映射表维护
类别特征新值检测训练集未见类别出…
13
数值特征异常值检测
Z-score方法 · IQR方法 · 基于LightGBM叶子节点的异常值…
数值特征异常值检…Z-score
14
特征交叉偏移分析
二阶特征交叉统计量变化 · 高维稀疏特征交叉后的分布变化 · 树模型对特征交叉的敏感性
特征交叉偏移分析二阶特征交叉统计…
15
模型版本对比实验
A/B测试设计 · 冠军/挑战者模型对比 · 离线回测与在线效果一致性验证
模型版本对比实验A/B
16
数据采样偏差排查
训练数据采样策略回顾 · 线上真实分布与训练分布对比 · 样本权重偏移检测
数据采样偏差排查训练数据采样策略…
17
标签泄漏检测
时间穿越特征排查 · 未来信息引入检测 · 特征与标签相关性突变分析
标签泄漏检测时间穿越特征排查
18
特征共线性漂移
特征间相关系数变化 · VIF（方差膨胀因子）监控 · 树模型对共线性的鲁棒性分析
特征共线性漂移特征间相关系数变…
19
模型校准度偏移
可靠性曲线（Reliability… · 期望校准误差（ECE） · 最大校准误差（MCE）监控
模型校准度偏移Reliability
20
业务规则变更影响
业务策略调整对特征分布的影响 · 规则引擎变更记录 · 特征与业务规则耦合度分析
业务规则变更影响业务策略调整对特…
21
数据管道故障排查
ETL任务失败检测 · 特征计算超时监控 · 数据管道重试机制与数据一致性保障
数据管道故障排查ETL
22
特征存储与读取一致性
特征存储格式（Parquet/ORC… · 特征读取时的精度损失 · 特征对齐校验工具
特征存储读取一致性
23
模型热启动与增量更新
增量训练数据分布检查 · 模型参数热更新风险 · 增量更新后的偏移回滚方案
模型热启动增量更新
24
多环境一致性验证
开发/测试/生产环境特征一致性 · 环境差异导致的隐式偏移 · 环境配置版本管理
多环境一致性验证开发
25
离线回测框架搭建
回测数据划分策略 · 回测评估指标（PSI · KS
离线回测框架搭建回测数据划分策略
26
自动化偏移报告生成
定时任务调度 · 报告模板设计（包含PSI · 特征分布图
自动化偏移报告生…定时任务调度
27
偏移根因定位方法论
假设驱动分析 · 控制变量实验 · 特征扰动测试
偏移根因定位方法…假设驱动分析
28
模型回滚与紧急止血
模型回滚触发条件 · 回滚版本管理 · 回滚后数据修复流程
模型回滚紧急止血
29
模型重训与迭代策略
重训数据窗口选择 · 重训频率决策 · 重训后验证流程
模型重训迭代策略
30
批次偏移治理最佳实践
组织流程建设 · 监控体系成熟度模型 · 案例复盘与知识库沉淀
批次偏移治理最佳…组织流程建设