4、监控指标体系总览：PSI、CSI、特征重要性变化、模型性能衰减、定价偏差率
额度定价漂移监控并非依赖单一指标，而是需要构建一个多维度、相互印证的指标体系。本章将系统介绍五大核心监控维度：群体稳定性（PSI）、特征稳定性（CSI）、特征重要性变化、模型性能衰减以及定价偏差率。这五个维度从数据分布、模型行为到业务结果，形成了完整的监控闭环。
4.1 五大监控维度全景图
下表概括了每个维度的监控对象、核心问题与典型触发阈值，便于快速建立全局认知。
| 监控维度 | 监控对象 | 核心问题 | 典型阈值 |
|---|---|---|---|
| PSI（群体稳定性指标） | 模型评分（Score）分布 | 客群整体信用风险是否发生偏移？ | PSI < 0.1 稳定；0.1-0.25 需关注；> 0.25 漂移 |
| CSI（特征稳定性指标） | 单个特征分布 | 哪个具体特征导致了客群变化？ | CSI > 0.1 需排查 |
| 特征重要性变化 | 模型权重/贡献度 | 模型决策逻辑是否发生结构性改变？ | Top3 特征排名变动 > 1 位 |
| 模型性能衰减 | 区分度（KS/AUC） | 模型预测能力是否下降？ | KS 下降 > 0.05 或 AUC 下降 > 0.03 |
| 定价偏差率 | 实际利率 vs 模型建议利率 | 业务执行是否偏离了模型定价策略？ | 偏差率 > 5% 需干预 |
监控优先级建议：建议将 PSI 和模型性能衰减作为一级预警指标，一旦触发立即启动 CSI 和特征重要性变化的根因分析，最后用定价偏差率评估业务影响。
4.2 监控指标体系架构图
下图展示了五大指标之间的数据流转与逻辑关系，从原始数据输入到最终业务决策，形成完整的监控链路。
4.3 指标联动分析逻辑
五大指标并非孤立存在，它们之间存在明确的因果传导关系。理解这种联动逻辑，是高效定位漂移根因的关键。
- 触发层（PSI + 模型性能衰减）：当 PSI 超过 0.25 或 KS 下降超过 0.05 时，启动全面漂移排查流程。
- 定位层（CSI + 特征重要性变化）：通过 CSI 找出分布变化最大的特征，结合特征重要性变化判断模型是否过度依赖已漂移特征。
- 评估层（定价偏差率）：最终评估漂移对实际业务定价的影响程度，决定是否需要调整定价策略或触发模型重训。
典型案例：某消费金融产品在 2024 年 Q2 监控到 PSI 从 0.08 升至 0.31，同时 KS 从 0.42 降至 0.35。进一步分析 CSI 发现，“近 3 个月查询次数”特征 CSI 高达 0.28，且该特征在模型中的重要性排名从第 2 位升至第 1 位。最终定价偏差率显示，实际利率较模型建议利率平均高出 8.2%，说明模型已无法准确评估当前客群风险，需立即干预。
4.4 各指标计算与解读要点
下表汇总了每个指标的计算公式核心要素与解读注意事项，避免常见误判。
| 指标 | 计算核心 | 常见误判 |
|---|---|---|
| PSI | Σ (实际占比 - 预期占比) × ln(实际占比 / 预期占比) | 分箱数过少会掩盖局部漂移；分箱数过多会导致指标过于敏感 |
| CSI | 同 PSI 公式，但应用于单个特征 | 类别型特征需确保训练期与监控期类别一致；连续型特征需关注分位点变化 |
| 特征重要性 | SHAP 值 / 增益 / 分裂次数 | 不同算法（树模型 vs 逻辑回归）的重要性定义不同，不可直接对比 |
| 模型性能 | KS = max(TPR - FPR)；AUC = ROC 曲线下面积 | KS 对样本量敏感，样本量过小时需使用 Bootstrap 置信区间 |
| 定价偏差率 | (实际利率 - 建议利率) / 建议利率 × 100% | 需区分系统偏差（模型问题）与策略偏差（人工干预） |
4.5 监控频率与报告机制
不同指标的监控频率应根据其变化敏感度和业务影响程度差异化设置。
- 日监控：PSI、CSI（针对高频特征如查询次数、负债率）
- 周监控：模型性能衰减（KS/AUC）、特征重要性变化
- 月监控：定价偏差率、全量特征 CSI 扫描
- 季度复盘：五大指标联合分析报告，评估模型重训必要性
注意：监控频率并非越高越好。过于频繁的监控（如每小时计算 PSI）会引入大量噪声，导致误报率上升。建议根据业务量级设置最小样本量门槛（如至少 1000 笔有效样本），低于门槛时不触发预警。
4.6 指标体系落地检查清单
在搭建监控体系时，建议对照以下清单逐项确认，确保无遗漏。
- 是否已为每个指标设定明确的触发阈值和预警等级？
- 是否建立了指标之间的联动分析规则（如 PSI 触发后自动计算 CSI）？
- 是否区分了“数据质量漂移”与“真实客群漂移”？
- 是否保留了足够长的历史基线（至少 3-6 个月）用于计算预期分布？
- 是否设计了人工复核流程，避免完全自动化决策导致误判？
- 定价偏差率是否区分了“模型建议利率”与“最终成交利率”？
通过以上五大维度的系统性监控，风控团队能够从数据分布、模型行为到业务结果，全面掌握额度定价模型的健康状态，在漂移造成实质性损失之前及时干预。