4. MRM 模型监控框架:监管要求、监控生命周期与 PSI 定位
模型风险管理(MRM)框架是金融机构确保模型有效性与合规性的核心机制。本章从监管要求出发,梳理模型监控的完整生命周期,并明确群体稳定性指标(PSI)在其中的关键定位。
4.1 核心监管要求
全球主要监管机构(如巴塞尔委员会、美联储 SR 11-7、中国银保监会《商业银行模型风险管理指引》)均要求建立覆盖模型全生命周期的 MRM 框架。核心要求可归纳为以下五个维度:
| 监管维度 | 关键要求 | 对监控的影响 |
|---|---|---|
| 模型识别与分级 | 按风险影响程度对模型分级(如 Tier 1/2/3) | 高等级模型需更高频、更严格的监控 |
| 开发与验证 | 独立验证机制,确保开发过程规范 | 监控指标需与开发假设对齐 |
| 持续监控 | 建立监控指标体系,定期评估模型表现 | PSI 作为分布稳定性核心指标被强制要求 |
| 变更管理 | 模型变更需经过审批、测试与记录 | PSI 异常触发变更评估流程 |
| 文档与报告 | 完整记录监控结果与应对措施 | PSI 告警阈值需在文档中明确 |
关键提示: SR 11-7 明确指出,监控频率应与模型风险等级匹配。对于高风险模型,建议至少每月计算一次 PSI,并设置双阈值(预警/告警)。
4.2 模型监控生命周期
模型监控并非一次性活动,而是一个持续迭代的闭环过程。完整的监控生命周期包含以下六个阶段:
- 指标定义: 根据模型类型与业务场景,确定监控指标(如 PSI、KS、AUC、Lift 等)及其计算口径。
- 阈值设定: 基于历史数据与风险偏好,设定预警阈值(如 PSI > 0.1)与告警阈值(如 PSI > 0.25)。
- 数据采集: 定期从生产环境抽取模型输入、输出及实际表现数据,确保数据质量。
- 指标计算: 按预设频率(日/周/月)计算 PSI 及其他监控指标。
- 异常判定: 将计算结果与阈值比较,判定是否触发预警或告警。
- 响应与处置: 根据异常等级执行对应措施(如重新训练、模型回退、人工复核)。
4.3 PSI 在 MRM 框架中的定位
群体稳定性指标(PSI)是模型监控体系中衡量“模型输入/输出分布随时间变化”的核心指标。它在 MRM 框架中承担以下关键角色:
- 分布漂移探测器: PSI 量化了模型评分或关键特征在时间维度上的分布变化,是模型退化的早期信号。
- 监控指标体系的核心: 在 MRM 监控仪表盘中,PSI 通常与 KS、AUC、Lift 等指标并列,构成“稳定性 + 区分力 + 准确性”三维监控矩阵。
- 触发变更管理的关键阈值: 当 PSI 超过告警阈值时,自动触发模型变更评估流程,包括重新验证、数据审查或模型重建。
- 监管合规的强制要求: 多数监管指引明确要求对模型进行稳定性监控,PSI 是最广泛接受的量化标准。
实践建议: 在 MRM 框架中,建议将 PSI 作为“第一道防线”指标。当 PSI 正常时,可降低对其他指标的监控频率;当 PSI 异常时,立即启动全指标深度分析。
4.4 PSI 与监控指标体系的协同关系
PSI 并非孤立存在,它与其他监控指标形成互补关系。下表展示了 PSI 与常见指标在 MRM 框架中的协同定位:
| 指标 | 衡量维度 | 与 PSI 的协同关系 | 典型监控频率 |
|---|---|---|---|
| PSI | 分布稳定性 | — | 月/周 |
| KS | 区分能力 | PSI 异常时 KS 可能下降 | 月 |
| AUC | 整体准确性 | PSI 漂移可能导致 AUC 衰减 | 月 |
| Lift | 提升效果 | PSI 异常时 Lift 曲线可能偏移 | 季 |
| 特征重要性 | 特征稳定性 | PSI 可分解到各特征,定位漂移源 | 月 |
注意: PSI 虽然强大,但并非万能。它只能检测分布变化,无法解释变化原因。在 MRM 框架中,PSI 必须与特征重要性分析、业务逻辑审查等手段结合,才能形成完整的模型健康评估。