4. PSI监控体系搭建：监控频率、监控维度、监控报表设计

PSI监控体系是模型稳定性的“预警雷达”。一套完整的监控体系需要回答三个核心问题：多久看一次（频率）、看哪些切片（维度）、怎么看结果（报表）。本章从实战角度，系统搭建可落地的PSI监控框架。

4.1 监控频率：分层设定，避免“过度监控”与“监控真空”

监控频率并非越密越好。频率过高会导致噪声干扰、运维成本激增；频率过低则可能错过风险窗口。建议按模型应用场景和业务节奏，采用三层频率策略：

4.2 监控维度：从“单一总分”到“立体切片”

仅监控整体PSI（Population Stability Index）远远不够。一个“正常”的整体PSI可能掩盖了某个子客群的剧烈偏移。必须从多个维度进行切片监控，才能精准定位问题源头。

推荐至少覆盖以下五大核心维度：

• 时间维度：按日、周、月、季度滚动计算PSI，观察趋势变化。
• 客群维度：按渠道来源（如线上/线下、APP/网页）、客户等级（新客/老客、优质/次级）、地域（省份/城市）进行切片。
• 特征维度：对模型入模的每个特征（如年龄、收入、负债率）单独计算PSI，识别是哪个特征驱动了分布变化。
• 分数段维度：将模型输出分数划分为若干区间（如每50分一段），监控每个分数段内的样本占比变化。
• 决策维度：按模型决策结果（通过/拒绝/人工）进行切片，评估不同决策路径下的客群稳定性。

4.3 监控报表设计：从“数据堆砌”到“决策驱动”

报表是监控体系的最终输出。好的报表能让风控人员3秒内定位问题，差的报表则让读者迷失在数字海洋中。建议设计三层报表体系：

4.3.1 第一层：驾驶舱仪表盘（Daily/Weekly）

面向监控值班人员，核心是“一眼看清整体健康状况”。

• 核心指标：整体PSI、各维度PSI最大值、告警模型数量。
• 展示形式：折线图（PSI趋势）、热力图（维度×时间）、红绿灯告警标识。
• 更新频率：每日自动刷新。

4.3.2 第二层：异常下钻分析表（Ad-hoc）

当驾驶舱出现告警时，分析师需要快速下钻到具体维度。

• 核心内容：异常维度的详细PSI分解、特征贡献度排序、分箱分布对比。
• 展示形式：表格（对比基期与报告期的分箱占比）、柱状图（特征PSI贡献度）。
• 关键字段：特征名称、分箱区间、基期占比、报告期占比、分箱PSI、累计PSI。

4.3.3 第三层：深度归因报告（Monthly/Quarterly）

面向模型验证专家和业务决策层，用于模型版本迭代或业务策略调整。

• 核心内容：PSI异常的根本原因分析（业务原因 vs 数据原因 vs 模型原因）、影响评估、建议行动。
• 展示形式：结构化文档 + 归因分析树 + 行动清单。
• 输出物：模型稳定性评估报告（含PSI、CSI、特征稳定性等综合指标）。

4.4 PSI监控体系架构总览

下图展示了从数据采集到报表输出的完整PSI监控体系架构，帮助理解各模块之间的协作关系。

4.5 报表核心字段与计算逻辑

为保障报表的可读性和分析效率，建议统一规范核心字段的定义与计算逻辑：

4.6 监控体系落地检查清单

在搭建或优化PSI监控体系时，建议对照以下清单进行自检：

• 频率合理性：是否覆盖了所有模型层级？高频监控是否配置了自动化告警？
• 维度完整性：是否至少覆盖五大核心维度？是否支持交叉下钻？
• 报表可用性：驾驶舱是否能在3秒内识别异常？下钻报表是否包含特征贡献度排序？
• 数据时效性：从数据产生到报表展示的延迟是否在可接受范围内（如T+1）？
• 告警闭环：告警触发后是否有明确的处理流程（如确认、分析、升级、归档）？