3. PSI 阈值设定标准

PSI(Population Stability Index)阈值是判断特征或模型分数分布是否发生显著漂移的临界值。阈值设定过严会导致大量误报,增加人工核查成本;阈值设定过宽则会漏掉真实风险,削弱监控的有效性。本章从行业通用标准、业务场景调整策略和监管要求三个维度,系统讲解 PSI 阈值的设定方法。

3.1 行业通用阈值:0.1 与 0.25

在信用风控领域,PSI 阈值通常采用以下三级判定标准:

PSI 区间 漂移等级 建议动作
PSI < 0.1 无显著漂移 无需干预,持续监控
0.1 ≤ PSI < 0.25 轻度漂移 触发预警,排查原因,准备模型或特征调整
PSI ≥ 0.25 严重漂移 立即告警,暂停模型使用,启动重训或回退
关键说明: 0.1 和 0.25 这两个阈值来源于统计学中卡方分布的经验分位数,并被 FICO、SAS 等机构在信用评分卡实践中广泛采用。0.1 对应分布发生“可察觉变化”的临界点,0.25 对应“显著变化”的临界点。

在实际应用中,0.1 通常作为预警阈值,0.25 作为告警阈值。预警阈值触发后,风控团队应在 24 小时内完成初步排查;告警阈值触发后,应立即启动模型回退或人工审批流程。

3.2 不同业务场景下的阈值调整策略

通用阈值并非放之四海而皆准。不同业务场景对漂移的容忍度差异很大,需要根据风险等级、业务周期和样本量进行针对性调整。

3.2.1 按业务风险等级调整

业务场景 风险等级 推荐预警阈值 推荐告警阈值 调整理由
信用卡审批 高 0.05 0.15 审批模型直接影响坏账率,对分布变化极度敏感
消费分期 中 0.10 0.25 通用标准,兼顾风险与运营成本
小额现金贷 低 0.15 0.35 客群波动大,样本量小,过严阈值导致频繁误报
存量客户提额 中高 0.08 0.20 存量客户行为数据稳定,但提额决策影响大

3.2.2 按业务周期调整

  • 促销/大促期间: 客群结构临时变化,PSI 自然升高。建议将预警阈值上浮 30%-50%(如从 0.1 调至 0.15),避免大促期间频繁告警干扰运营。
  • 政策调整期: 如监管要求收紧准入标准,预期分布会发生结构性偏移。此时应临时关闭 PSI 告警,改用人工审核过渡,待新政策稳定后再恢复监控。
  • 模型上线初期: 前 1-2 个月 PSI 波动较大,建议使用 0.15/0.30 作为过渡阈值,待分布稳定后回归通用标准。

3.2.3 按样本量调整

PSI 对样本量敏感。小样本场景下,随机波动容易导致 PSI 虚高。建议采用以下修正策略:

  • 样本量 < 1000: 不单独计算 PSI,合并多期数据或使用滑动窗口计算。
  • 样本量 1000-5000: 预警阈值上调至 0.15,告警阈值上调至 0.30。
  • 样本量 > 5000: 使用通用阈值 0.1/0.25。
实战建议: 在搭建监控系统时,不要只设置一套固定阈值。建议为每个特征和模型配置独立的阈值参数,并支持按业务场景动态切换。例如,在配置中心中维护一个阈值矩阵,包含特征 ID、业务线、周期类型、预警阈值、告警阈值五个字段。

3.3 监管要求

监管机构对模型稳定性有明确要求,PSI 阈值设定需要满足以下合规要点:

监管维度 具体要求 PSI 阈值对应策略
模型持续监控 要求建立模型性能监控机制,定期评估模型稳定性 PSI 监控频率不低于月度,阈值设定需有书面依据
阈值合理性 阈值不能随意设定,需有统计或业务依据 保留阈值调整的决策文档,包括调整原因、审批记录
告警响应 触发告警后需在规定时间内完成排查和处置 预警阈值 24 小时内响应,告警阈值 4 小时内响应
模型回退 严重漂移时需有模型回退或人工审批预案 告警阈值触发后自动触发回退流程,记录回退日志
审计追溯 所有监控记录需保存不少于 2 年 PSI 计算日志、阈值变更记录、告警处置记录全部归档
合规红线: 监管检查中,如果发现 PSI 阈值设定无依据、告警后未及时处置、或模型漂移后仍继续使用,可能面临暂停业务、罚款甚至吊销牌照的风险。阈值设定不是技术问题,而是合规问题。

3.4 PSI 阈值决策流程

下图展示了从阈值设定到告警处置的完整决策流程:

PSI 阈值决策与告警处置流程 输入特征/分数分布 计算 PSI 值 PSI 阈值判定(0.1 / 0.25) PSI < 0.1 持续监控 0.1 ≤ PSI < 0.25 预警:24h 内排查 PSI ≥ 0.25 告警:4h 内处置 归档监控日志

3.5 阈值设定实践清单

在项目中落地 PSI 阈值时,建议按以下步骤操作:

  1. 初始设定: 以 0.1/0.25 为起点,配置到监控系统中。
  2. 历史回测: 使用过去 6-12 个月的数据计算 PSI,观察阈值是否与实际漂移事件匹配。
  3. 业务校准: 与业务方确认误报容忍度,调整预警阈值。
  4. 分层配置: 按特征重要性、模型风险等级、业务线分别配置阈值。
  5. 动态调整: 每季度评估一次阈值效果,根据业务变化和监管要求更新。
  6. 文档留痕: 所有阈值调整需记录调整原因、审批人、生效日期,以备监管检查。
核心原则: 阈值是工具,不是规则。好的阈值设定能让监控系统在“不漏报”和“不误报”之间找到平衡点。始终以业务风险为导向,以监管合规为底线,以数据回测为依据。