3. 评分卡开发流程回顾:数据采集、特征工程、模型训练、拒绝推断、刻度化、cutoff设定
在进入 Champion 对照实验设计之前,有必要系统回顾标准评分卡开发的完整流程。每个环节的决策质量直接影响最终评分卡的区分能力、稳定性和业务可解释性。以下按开发顺序逐一拆解关键步骤与常见陷阱。
3.1 数据采集与预处理
数据是评分卡的基础。采集阶段需要覆盖 好客户 与 坏客户 的完整样本,同时确保时间窗口对齐,避免幸存者偏差。
| 数据源类型 | 典型字段 | 采集要求 |
|---|---|---|
| 申请数据 | 年龄、收入、职业、学历、婚姻状况 | 完整、无缺失、逻辑校验 |
| 征信数据 | 逾期次数、负债率、查询次数、信贷历史 | 时间窗口一致,至少覆盖 12 个月 |
| 行为数据 | 交易频次、余额波动、还款习惯 | 连续记录,剔除异常值 |
| 外部数据 | 多头借贷、黑名单、社保公积金 | 合规授权,数据源稳定 |
关键原则: 样本观察期与表现期必须严格定义。通常观察期取申请前 6–12 个月,表现期取贷后 12–24 个月。表现期不足会导致坏样本定义失真。
3.2 特征工程
特征工程是将原始数据转化为预测变量的过程。在评分卡场景中,WOE 编码 与 IV 筛选 是核心手段。
- 粗分类: 对连续变量分箱(等距、等频、决策树分箱),对分类变量合并稀疏类别。
- WOE 计算: 每个分箱的 WOE = ln(坏占比 / 好占比),反映该分箱的风险区分能力。
- IV 筛选: IV = Σ(坏占比 - 好占比) × WOE,IV < 0.02 剔除,0.02–0.1 弱预测力,0.1–0.3 中等,> 0.3 强预测力。
- 相关性检查: 剔除高相关变量(|r| > 0.7),避免多重共线性。
避坑提示: 分箱数量建议控制在 3–6 箱,每箱好/坏样本数均不低于 30。单箱样本过少会导致 WOE 波动剧烈,影响模型稳定性。
3.3 模型训练
评分卡最常用的算法是 逻辑回归,因其可解释性强、系数稳定、易于刻度化。训练阶段需关注以下要点:
- 样本划分: 训练集 60%、验证集 20%、测试集 20%,保持好坏比例一致。
- 变量筛选: 逐步回归(向前/向后/双向),结合业务经验保留核心变量。
- 系数稳定性: 检查变量系数的符号是否符合业务逻辑(如收入越高,系数应为正)。
- 模型评估: KS、AUC、Gini 系数、PSI 稳定性指标。
常见问题: 逻辑回归对异常值敏感,训练前需对 WOE 变量做标准化或截尾处理。同时避免变量过多导致过拟合,建议最终模型变量数控制在 8–15 个。
3.4 拒绝推断
拒绝推断用于修正 样本选择偏差。建模样本仅包含通过审批的客户,而拒绝客户的风险分布未知。若不处理,模型会高估整体信用水平。
| 方法 | 原理 | 适用场景 |
|---|---|---|
| 简单扩充法 | 将拒绝样本全部标记为坏客户 | 拒绝率极低,保守策略 |
| 模糊扩充法 | 按模型预测概率分配好坏标签 | 拒绝样本较多,需概率校准 |
| 两阶段法 | 先训练申请评分模型,再推断拒绝样本标签 | 数据量充足,流程规范 |
| Heckman 校正 | 用逆米尔斯比率修正选择偏差 | 学术研究,业务落地较少 |
建议: 在 Champion 对照实验中,拒绝推断方法应作为实验变量之一。对比“不做拒绝推断”与“模糊扩充法”对最终评分卡排序能力的影响。
3.5 刻度化
刻度化将逻辑回归的 对数几率 转换为直观的分数。标准评分卡公式如下:
Score = Offset + Factor × ln(Odds)
其中:
Odds = p / (1 - p),p 为违约概率
Offset = 基准分数 - Factor × ln(基准Odds)
Factor = PD / ln(2),PD 为翻倍分数
常用设定:
基准分数 = 600,基准Odds = 50:1,PD = 20
即 Odds 翻倍时,分数增加 20 分
每个变量的每个分箱对应一个分数:
变量分箱分数 = Factor × (WOE × β + α/n)
其中:
β = 逻辑回归系数
α = 模型截距
n = 变量个数
刻度化验证: 刻度化后需检查分数分布是否合理,好坏客户分数重心是否分离。通常好客户平均分应比坏客户高 80–120 分。
3.6 Cutoff 设定
Cutoff 是评分卡的决策阈值,决定哪些申请通过、哪些拒绝。设定方法包括:
- 业务目标法: 根据目标通过率或坏账率反推 cutoff。
- 利润最大化法: 计算不同 cutoff 下的预期利润,选择最优值。
- KS 最优法: 选择使 KS 统计量最大的分数点。
- 交叉验证法: 在验证集上测试多个 cutoff,选择泛化能力最强的。
重要提醒: Cutoff 不是一成不变的。在 Champion 对照实验中,应对比不同 cutoff 策略下的通过率、坏账率、利润表现,选择最稳健的决策阈值。同时需监控 cutoff 附近的样本分布,避免大量申请堆积在临界点。
3.7 流程总览
以下表格汇总了评分卡开发各环节的核心产出与质量检查点:
| 阶段 | 核心产出 | 质量检查点 |
|---|---|---|
| 数据采集 | 原始数据集、数据字典 | 缺失率 < 5%,时间窗口对齐 |
| 特征工程 | WOE 变量、IV 排序表 | WOE 单调性、IV > 0.02 |
| 模型训练 | 逻辑回归模型、系数表 | KS > 0.3,AUC > 0.75,PSI < 0.1 |
| 拒绝推断 | 修正后样本集 | 好坏比例合理,分布平滑 |
| 刻度化 | 评分卡分数表 | 分数分布合理,好坏分离度 > 80 分 |
| Cutoff 设定 | 决策阈值、通过率/坏账率曲线 | 利润最优或业务目标达成 |