首页
›
金融科技风控与量化工程
›
079-金融知识图谱特征缺失巡检
›
《LightGBM特征缺失巡检应用教程》
VIP20
本课程属于:079-金融知识图谱特征缺失巡检
金融科技风控与量化工程 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
LightGBM特征缺失巡检应用教程
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导论
特征缺失对模型的影响 · LightGBM处理缺失值的优势 · 巡检的意义与目标
课程导论
特征缺失对模型的…
02
环境准备
Python环境 · LightGBM库安装 · Pandas与NumPy安装
环境准备
Python
03
数据加载与初步探索
使用Pandas读取CSV/Exce… · 查看数据形状与列名 · 数据类型概览
数据加载
初步探索
04
缺失值可视化基础
使用Matplotlib/Seabo… · 缺失值条形图
缺失值可视化基础
Matplotlib/S…
05
缺失值统计指标
计算每列缺失率 · 缺失值总数 · 缺失值分布模式
缺失值统计指标
计算每列缺失率
06
LightGBM原生缺失值处理机制
学习LightGBM的‘缺失值方向’…
LightGBM
原生缺失值处理机…
07
特征缺失模式识别
识别随机缺失(MCAR) · 非随机缺失(MNAR) · 完全随机缺失(MAR)
特征缺失模式识别
MCAR
08
基于LightGBM的缺失值重要性排序
利用模型训练后的特征重要性(gain…
LightGBM
基于
09
缺失值填充策略概览
均值/中位数/众数填充 · 前向/后向填充 · KNN填充
缺失值填充策略概…
均值
10
均值/中位数填充实践
对数值型特征进行均值/中位数填充 · 并对比填充前后模型性能
均值
位数填充实践
11
类别特征缺失填充
众数填充 · 使用‘缺失’作为新类别 · 基于LightGBM叶子节点填充
类别特征缺失填充
众数填充
12
时间序列特征缺失填充
前向填充(ffill) · 后向填充(bfill) · 插值法(线性/多项式)
时间序列特征缺失…
ffill
13
基于LightGBM的缺失值预测填充
将缺失列作为目标 · 用其他特征训练LightGBM模型预…
LightGBM
基于
14
缺失值指示器特征
创建二进制指示列(is_missin… · 增强模型对缺失模式的感知
缺失值指示器特征
is
15
特征缺失与目标变量关联分析
计算缺失率与目标变量的相关性 · 分组统计缺失组与非缺失组的标签分布
特征缺失
目标变量关联分析
16
缺失值对特征重要性的影响
对比填充前后LightGBM特征重要… · 识别被掩盖的重要特征
缺失值对特征重要…
LightGBM
17
缺失值对模型性能的影响评估
使用交叉验证对比不同填充策略下的AU…
缺失值对模型性能…
AU
18
自动化缺失巡检脚本设计
编写Python脚本自动扫描数据集 · 生成缺失报告(JSON/CSV)
自动化缺失巡检脚…
Python
19
缺失巡检报告解读
报告包含缺失率 · 缺失模式 · 建议填充策略
缺失巡检报告解读
报告包含缺失率
20
大规模数据缺失巡检优化
使用Dask或Modin处理超大数据… · 分块计算缺失统计
大规模数据缺失巡…
Dask
21
缺失值与异常值联合检测
结合IQR/孤立森林识别异常缺失模式
缺失值
异常值联合检测
22
LightGBM超参数对缺失处理的调优
调整min_data_in_leaf · lambda_l1/l2 · missing_direction等…
LightGBM
超参数对缺失处理…
23
多数据集缺失一致性巡检
对比训练集与测试集缺失模式差异 · 防止数据漂移
多数据集缺失一致…
对比训练集
24
缺失值对特征分箱的影响
在LightGBM分箱过程中缺失值如… · 以及如何自定义分箱策略
缺失值对特征分箱…
LightGBM
25
基于缺失模式的样本权重调整
对缺失严重的样本赋予更低权重 · 减少噪声影响
基于缺失模式的样…
对缺失严重的样本…
26
缺失值在特征工程中的高级应用
缺失率作为新特征 · 缺失组合模式编码
缺失值
特征工程
27
实时数据流缺失巡检
使用StreamingLightGB…
实时数据流缺失巡…
StreamingLig…
28
缺失巡检可视化仪表板
使用Plotly/Dash构建交互式…
缺失巡检可视化仪…
Plotly/Dash
29
案例实战
金融风控场景缺失巡检——从数据探索到…
案例实战
金融风控场景缺失…
30
课程总结与最佳实践
常见陷阱 · 推荐工作流 · 未来方向(自动机器学习与缺失处理)
课程总结
最佳实践
所属VIP或分类
同VIP:实体解析中的特征缺失检测教程
同VIP:特征漂移drift监控实战案例
同VIP:特征漂移PSI监控与告警阈值设定教程