VIP20
本课程属于：049-金融特征平台回放对比评审 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

金融特征回放评审A B测试案例

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
金融特征回放评审与A/B测试的定义 · 在风控模型迭代中的核心价值 · 课程整体学习路径图
课程导论A/B
02
特征工程基础回顾
特征类型（数值/类别/时序） · 特征重要性评估方法（IV · SHAP）
特征工程基础回顾特征类型
03
特征回放概念
什么是特征回放（Feature Re… · 回放的目的（验证特征有效性 · 发现数据漂移）
特征回放概念Feature
04
特征评审流程
特征从开发到上线的标准评审流程 · 评审委员会角色 · 评审Checklist模板
特征评审流程特征从开发到上线…
05
A/B测试基础
A/B测试的统计学原理（假设检验 · 置信区间 · p值）
A/B测试基础
06
金融场景A/B测试特殊性
样本偏差（幸存者偏差） · 时间窗口选择 · 多臂老虎机与固定比例分流对比
A/B金融场景
07
案例背景设定
某消费信贷平台“收入稳定性”特征上线… · 现有模型AUC=0.78 · 业务目标：降低逾期率5%
案例背景设定某消费信贷平台“…
08
特征开发阶段
基于用户银行流水构建“收入波动率”特… · 特征工程代码实现（Python/pa… · 特征分布可视化
特征开发阶段基于用户银行流水…
09
离线回放评审（一）
回放数据集构建（历史T+30标签） · 回放计算逻辑 · 回放结果指标（KS
离线回放评审T+30
10
离线回放评审（二）
回放结果分析报告生成 · 特征稳定性（PSI<0.1）验证 · 特征缺失率与异常值处理
离线回放评审回放结果分析报告…
11
评审会议模拟
特征Owner汇报回放结果 · 评审委员提问（业务可解释性 · 计算成本
评审会议模拟Owner
12
A/B测试方案设计
分流策略（用户ID hash分流） · 实验组（新特征模型）vs对照组（旧模… · 核心指标定义（逾期率
A/B测试方案设计
13
样本量计算
基于历史逾期率10% · 最小提升效果2% · 显著性水平0.05
样本量计算基于历史逾期率1…
14
实验平台搭建
实验配置中心设计 · 分流服务架构（Redis+一致性哈希… · 埋点与日志采集规范
实验平台搭建实验配置
15
A/B测试执行
灰度发布策略（1%→5%→10%→5… · 实时监控看板搭建（Grafana） · 异常熔断机制
A/B测试执行
16
数据收集与清洗
实验期间数据ETL流程 · 用户ID去重 · 时间窗口对齐
数据收集清洗
17
统计分析（一）
描述性统计（实验组/对照组样本量 · 均值 · 标准差）
统计分析描述性统计
18
统计分析（二）
置信区间计算 · 效应量（Cohen's d）计算 · 结果解读（统计显著性与业务显著性）
统计分析置信区间计算
19
多维度下钻分析
按用户分层（新客/老客 · 高/低额度） · 按时间维度（日/周趋势）
多维度下钻分析按用户分层
20
稳健性检验
PSM（倾向性得分匹配）验证 · DID（双重差分）验证 · 敏感性分析（改变时间窗口）
稳健性检验PSM
21
结果评审与决策
A/B测试结果报告模板 · 统计显著且正向→全量上线 · 统计不显著→回退或迭代
结果评审决策
22
全量上线监控
上线后PSI实时监控 · 模型AUC衰减预警 · 业务指标（逾期率）日环比监控
全量上线监控PSI
23
案例复盘
本次A/B测试成功经验（特征有效 · 样本量充足） · 失败教训（分流不均匀
案例复盘A/B
24
常见陷阱与避坑指南
多重比较问题（Bonferroni校… · 早停问题（Peeking） · 新奇效应（Novelty Effec…
常见陷阱避坑指南
25
自动化工具链
特征回放自动化Pipeline（Ai… · A/B测试自动化报告生成（Jupyt…
自动化工具链Pipeline
26
合规与伦理
用户隐私保护（数据脱敏） · 公平性检验（不同群体间效果差异） · 监管报备要求
合规伦理
27
进阶话题
多臂老虎机（Multi-Armed… · 贝叶斯A/B测试
进阶话题Multi-Armed
28
跨团队协作流程
数据工程团队（特征计算） · 算法团队（模型训练） · 业务团队（策略落地）
跨团队协作流程数据工程团队
29
课程总结
特征回放评审与A/B测试核心知识图谱 · 常见面试题解析 · 推荐学习资源（书籍/论文/开源项目）
课程总结A/B
30
实战作业
给定模拟数据集 · 完成特征回放报告+A/B测试方案设计… · 输出完整文档与代码
实战作业给定模拟数据集