VIP20
本课程属于：006-模型风险管理特征筛选清单 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

XGBoost模型特征筛选实战手册

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
特征筛选在机器学习中的重要性 · XGBoost模型概述 · 本课程的学习目标与适用人群
课程导论特征筛选
02
XGBoost基础回顾
梯度提升树原理 · XGBoost的核心优势（正则化 · 并行化
XGBoost基础回顾
03
特征筛选方法论总览
过滤法 · 包裹法 · 嵌入法三大类别的原理与优缺点对比
特征筛选方法论总…过滤法
04
XGBoost内置特征重要性（Feature Importance）
三种重要性指标（weight · gain · cover）的数学定义与业务含义
XGBoostFeature
05
特征重要性可视化实战
使用plot_importance绘… · 解读重要性排序 · 识别冗余特征
特征重要性可视化…plot
06
基于权重的特征筛选（Weight）
原理讲解 · 代码实现：筛选出权重排名前K的特征 · 构建简化模型
Weight基于权重的特征筛…
07
基于信息增益的特征筛选（Gain）
原理讲解 · 代码实现 · 对比weight筛选结果
Gain基于信息增益的特…
08
基于覆盖度的特征筛选（Cover）
原理讲解 · 代码实现：利用cover值筛选特征 · 理解其在树模型中的意义
Cover基于覆盖度的特征…
09
多指标综合排序筛选
将weight · gain · cover归一化后加权求和
多指标综合排序筛…weight
10
递归特征消除（RFE）与XGBoost
RFE原理 · 使用XGBoost作为基模型进行RF…
RFEXGBoost
11
递归特征消除交叉验证（RFECV）
RFECV原理 · 自动确定最优特征子集数量 · 代码实战与结果解读
RFECV递归特征消除交叉…
12
基于排列重要性（Permutation Importance）的筛选
原理（打乱特征破坏关联） · 使用eli5或sklearn实现 · 与内置重要性对比
PermutationImportance
13
SHAP值特征筛选（上）
SHAP理论简介（Shapley值） · SHAP值的可加性与一致性 · 计算XGBoost模型的SHAP值
SHAP值特征筛选
14
SHAP值特征筛选（下）
基于SHAP值绝对值均值排序 · 绘制SHAP摘要图（beeswarm… · 筛选Top特征
SHAP值特征筛选
15
基于SHAP交互值的特征筛选
计算SHAP交互值 · 识别特征间的二阶交互作用 · 筛选具有强交互效应的特征对
SHAP基于
16
单变量特征选择（SelectKBest）与XGBoost
使用卡方检验 · 互信息等方法预筛选 · 再输入XGBoost训练
SelectKBestXGBoost
17
基于模型稳定性的筛选
使用交叉验证多次计算特征重要性 · 筛选方差小 · 均值高的稳定特征
基于模型稳定性的…使用交叉验证多次…
18
基于特征共线性（多重共线性）的筛选
计算特征间相关系数/VIF · 结合XGBoost重要性剔除高度相关…
基于特征共线性多重共线性
19
基于特征缺失率的筛选
设定缺失率阈值 · 结合XGBoost对缺失值的处理能力 · 筛选高缺失率但重要的特征
基于特征缺失率的…设定缺失率阈值
20
基于特征分箱与WOE的筛选
对连续特征分箱 · 计算WOE/IV值 · 筛选高IV特征
WOE基于特征分箱
21
基于特征聚类（Feature Clustering）的筛选
使用层次聚类或K-Means对特征聚… · 从每类中选取代表性特征
FeatureClustering
22
基于L1正则化（Lasso）的预筛选
使用Lasso回归进行特征选择 · 将筛选结果作为XGBoost的输入特…
L1Lasso
23
基于随机森林特征重要性的对比筛选
训练随机森林获取重要性 · 与XGBoost重要性取交集或并集 · 提升鲁棒性
基于随机森林特征…训练随机森林获取…
24
基于LightGBM/CatBoost的交叉验证筛选
训练多个梯度提升模型 · 取特征重要性共识 · 筛选跨模型稳定的特征
LightGBM/Cat…基于
25
自动化特征筛选Pipeline构建
使用sklearn Pipeline… · 实现一键式流程
Pipeline自动化特征筛选
26
特征筛选后的模型评估与调优
对比全特征模型与筛选后模型的性能（A… · LogLoss · 训练时间）
特征筛选后的模型…调优
27
过拟合与特征筛选
特征筛选如何缓解过拟合 · 使用早停（early stoppin…
过拟合特征筛选
28
大规模数据集下的特征筛选策略
内存优化 · 分批计算重要性 · 使用XGBoost的GPU加速进行特…
大规模数据集下的…内存优化
29
实战案例一
金融风控评分卡特征筛选（含代码与结果…
实战案例一金融风控评分卡特…
30
实战案例二
电商用户购买预测特征筛选（含代码与结… · 课程总结与进阶学习路径
实战案例二电商用户购买预测…