VIP20
本课程属于：071-金融特征缺失巡检 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

金融特征PSI缺失巡检实战教程

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
PSI概念与金融意义
PSI（群体稳定性指标）的定义 · 在风控模型监控中的核心价值 · 特征分布漂移对模型性能的影响
PSI概念
02
缺失率概念与金融意义
缺失率定义 · 缺失数据产生原因（系统故障 · 用户不填
缺失率概念金融意义
03
PSI与缺失率联合巡检的必要性
为什么不能只看PSI或缺失率单一指标 · 联合巡检发现数据质量与分布漂移的协同…
PSI缺失率联合巡检的…
04
巡检系统架构设计
整体巡检流程架构图（数据采集层 · 计算层 · 告警层
巡检系统架构设计整体巡检流程架构…
05
数据源接入与预处理
从Hive/ClickHouse/M… · 数据清洗 · 时间窗口划分（训练期/观察期/报告期…
数据源接入预处理
06
特征分箱策略
等距分箱 · 等频分箱 · 决策树分箱
特征分箱策略等距分箱
07
PSI计算公式详解
PSI = Σ ( (实际占比 -… · 公式推导 · 边界情况处理（占比为0时加微小常数）
PSI计算公式详解
08
缺失率计算公式与统计口径
缺失率 = 缺失样本数 / 总样本数 · 按行缺失率 · 按列缺失率
缺失率计算公式统计口径
09
PSI阈值设定与业务解读
PSI 0.25（重大漂移） · 不同业务场景下的阈值调整建议
PSI阈值设定
10
缺失率阈值设定与业务解读
缺失率阈值（如5% · 10% · 20%）
缺失率阈值设定业务解读
11
Python环境与依赖库准备
Python版本要求 · 安装pandas/numpy/sci… · 虚拟环境配置
Python环境
12
核心函数实现
计算PSI的Python函数（def… · 计算缺失率的Python函数（def… · 输入输出规范
核心函数实现PSI
13
批量特征巡检脚本编写
读取特征列表 · 循环计算每个特征的PSI和缺失率 · 结果汇总到DataFrame
批量特征巡检脚本…读取特征列表
14
时间窗口滑动计算
实现滚动窗口（如近7天 vs 近30… · 窗口参数化配置
时间窗口滑动计算vs
15
异常检测与告警逻辑
基于阈值矩阵判断异常等级（正常/警告… · 生成告警消息（包含特征名 · 当前值
异常检测告警逻辑
16
告警消息推送集成
集成企业微信机器人 · 钉钉机器人 · 邮件SMTP
告警消息推送集成集成企业微信机器…
17
巡检结果可视化
使用matplotlib/plotl… · 缺失率趋势图 · PSI与缺失率联合散点图
巡检结果可视化matplotlib/p…
18
巡检报告自动生成
使用Jinja2模板生成HTML报告 · 包含概览统计表 · 异常特征明细表
巡检报告自动生成Jinja2
19
定时任务调度
使用crontab（Linux）或A… · 日志记录与重试机制
定时任务调度crontab
20
特征维度扩展
从单特征巡检扩展到特征组（如收入类 · 年龄类） · 特征组PSI聚合计算
特征维度扩展从单特征巡检扩展…
21
样本维度扩展
支持按客群分层（新客/老客 · 高/低风险） · 分层计算PSI和缺失率
样本维度扩展支持按客群分层
22
数据漂移根因分析
当PSI或缺失率异常时 · 自动分析漂移来源（哪个分箱变化最大 · 缺失集中在哪些客群）
数据漂移根因分析PSI
23
历史数据回溯与基线管理
存储历史PSI和缺失率快照 · 自动更新基线（如取近90天中位数） · 基线版本管理
历史数据回溯基线管理
24
性能优化与大数据量处理
使用pandas chunk · dask · spark进行分布式计算
性能优化大数据量处理
25
单元测试与集成测试
编写pytest测试用例（测试PSI… · 缺失率计算 · 告警逻辑）
单元测试集成测试
26
监控大盘与Dashboard
使用Grafana或Superset… · 展示特征健康度评分 · 异常特征排行榜
Dashboard监控大盘
27
案例实战一
信贷评分卡特征巡检 · 负债 · 查询次数）的PSI与缺失率巡检全流程…
案例实战一信贷评分卡特征巡…
28
案例实战二
反欺诈模型特征巡检 · IP归属地 · 行为序列）的缺失与漂移巡检
案例实战二反欺诈模型特征巡…
29
案例实战三
营销响应模型特征巡检 · 转化率 · 用户画像）的PSI与缺失率联合监控
案例实战三营销响应模型特征…
30
课程总结与最佳实践
巡检体系落地经验 · 常见踩坑点（分箱不一致 · 时间窗口错位
课程总结最佳实践