1. 坏样本定义与精算场景
1.1 什么是坏样本
在精算建模中,坏样本(Bad Sample)是指那些在特定业务场景下触发负面结果、产生经济损失或偏离正常风险预期的观测个体。坏样本的定义直接决定了模型的目标变量(Target),是特征工程与模型训练的起点。
不同精算场景下的坏样本定义存在显著差异,下表归纳了三种核心场景的坏样本特征:
| 场景 | 坏样本定义 | 典型表现 | 损失类型 |
|---|---|---|---|
| 欺诈检测 | 故意提供虚假信息或利用系统漏洞获取不当利益的行为 | 身份冒用、伪造材料、团伙骗保 | 直接赔付损失 + 调查成本 |
| 信用违约 | 借款人未能按合同约定履行还款义务 | 逾期 90 天以上、核销、破产 | 本金损失 + 催收费用 |
| 理赔欺诈 | 投保人或受益人故意制造或夸大保险事故以骗取赔款 | 虚构事故、夸大损失、延迟报案 | 超额赔付 + 法律风险 |
关键认知:坏样本不是静态标签。同一笔业务可能同时涉及欺诈与违约,精算模型需要根据业务目标明确"坏"的归因方向,避免标签混淆导致模型失效。
1.2 精算模型中的坏样本归因目标
坏样本归因的核心目标是:从大量业务数据中识别出导致样本变"坏"的关键驱动因素,并将其转化为可量化的特征变量,提升模型的区分能力与业务可解释性。
归因目标可拆解为三个层次:
- 识别层:准确标记坏样本,区分"真坏"与"误伤"(如因系统故障导致的逾期)。
- 解释层:量化各特征对坏样本的贡献度,回答"为什么变坏"。
- 预测层:将归因结果转化为特征,提升模型对潜在坏样本的预警能力。
业务价值公式:
坏样本归因价值 = 减少的损失成本 + 提升的审批效率 + 降低的误拒率
坏样本归因价值 = 减少的损失成本 + 提升的审批效率 + 降低的误拒率
1.3 坏样本归因的业务价值
坏样本归因不是纯技术动作,它直接服务于精算业务的三个核心环节:
- 风险定价:通过归因识别高风险子群体,实现差异化定价,避免"一刀切"导致的逆选择。
- 核保核赔:归因特征可嵌入决策引擎,自动拦截高风险案件,降低人工审核成本。
- 产品设计:归因结果反哺产品条款设计,从源头减少道德风险与逆向选择。
以下 SVG 展示了坏样本归因在精算模型中的整体定位与价值链路:
1.4 坏样本归因的常见陷阱
在实际项目中,精算师容易陷入以下误区,需在特征工程阶段提前规避:
| 陷阱 | 表现 | 后果 | 应对策略 |
|---|---|---|---|
| 标签污染 | 将"未逾期"样本全部标记为好样本,忽略其中潜在的欺诈行为 | 模型低估欺诈风险 | 引入多标签体系,区分违约与欺诈 |
| 幸存者偏差 | 仅使用已结案理赔数据建模,忽略未决案件 | 坏样本率被低估 | 纳入截断数据,使用生存分析框架 |
| 时间穿越 | 用未来信息(如最终赔付金额)定义当前坏样本 | 特征与目标因果倒置 | 严格按时间窗口划分特征与标签 |
| 归因混淆 | 将相关关系直接当作因果关系 | 特征可解释性差,业务无法落地 | 引入因果推断方法辅助归因 |
实战提醒:坏样本定义阶段至少需要业务方、风控方、建模方三方对齐。定义文档必须包含:标签窗口长度、排除规则、特殊标记逻辑。任何定义变更都需要版本控制,否则后续特征工程将失去基准。
1.5 坏样本归因的量化指标
在特征工程阶段,我们需要用指标衡量归因效果。以下三个指标是精算建模中的常用基准:
- 坏样本率(Bad Rate):坏样本数 / 总样本数。反映整体风险水平,通常作为模型训练的基准分布。
- 提升度(Lift):模型识别出的坏样本比例 / 随机抽取的坏样本比例。Lift > 2 表示归因特征有实际区分价值。
- 群体稳定性指标(PSI):衡量归因特征在不同时间窗口的分布偏移。PSI > 0.25 提示特征需要重新校准。
以下 SVG 展示了坏样本归因特征工程的核心流程,从原始数据到可建模特征:
1.6 本章小结
坏样本定义是精算建模的"地基工程"。定义错误,后续所有特征工程与模型训练都会偏离业务目标。本章明确了欺诈、违约、理赔欺诈三种场景下的坏样本特征,建立了归因目标的三层结构,并通过量化指标与流程图为后续章节的特征工程实战打下基础。
下一阶段准备:在进入特征工程之前,请确保你的坏样本定义文档已包含:标签窗口长度、排除规则、特殊标记逻辑、版本号。这是所有特征工程工作的唯一基准。