VIP20
本课程属于：060-支付风控实验评估 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

支付风控A/B测试效果评估实战指南

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
A/B测试基础概念
什么是A/B测试 · A/B测试在支付风控中的核心价值 · A/B测试与灰度发布的区别
A/B测试基础概念
02
支付风控场景特殊性
高并发 · 低延迟 · 资金安全
支付风控场景特殊…高并发
03
实验假设与指标设计
零假设与备择假设 · 核心指标（通过率 · 误杀率
实验假设指标设计
04
实验分组策略
随机分流 · 分层抽样 · 用户ID哈希分桶
实验分组策略随机分流
05
样本量计算
统计功效 · 显著性水平 · 最小可检测效应量
样本量计算统计功效
06
实验周期确定
流量预估 · 日活用户数 · 周内/月内周期性波动
实验周期确定流量预估
07
数据埋点与采集
风控决策日志 · 用户行为日志 · 支付结果回传
数据埋点采集
08
数据预处理
缺失值处理 · 异常值检测 · 时间窗口对齐
数据预处理缺失值处理
09
指标计算与聚合
每日/每小时通过率 · 误杀率 · 欺诈损失率
指标计算聚合
10
假设检验方法
Z检验 · T检验 · 卡方检验
假设检验方法Z检验
11
多重比较问题
Bonferroni校正 · FDR控制 · 在多个风控策略指标同时评估时的应用
多重比较问题Bonferroni
12
AA测试
什么是AA测试 · AA测试的目的 · 如何通过AA测试验证实验平台可靠性
AA测试
13
AA测试结果分析
预期结果 · 常见偏差原因 · 重复AA测试的稳定性评估
AA测试结果分析
14
实验效果评估框架
统计显著性 · 实际显著性 · 业务影响评估
实验效果评估框架统计显著性
15
通过率指标分析
实验组与对照组通过率差异 · 置信区间 · P值解读
通过率指标分析实验组
16
误杀率指标分析
误杀率定义 · 误杀率变化对用户体验的影响 · 误杀率与通过率的权衡
误杀率指标分析误杀率定义
17
欺诈损失率指标分析
欺诈损失率计算 · 欺诈金额与欺诈笔数 · 长期与短期效果评估
欺诈损失率指标分…欺诈损失率计算
18
辅助指标分析
响应时间变化 · 系统稳定性 · 用户投诉率
辅助指标分析响应时间变化
19
实验效果可视化
折线图展示指标趋势 · 柱状图对比组间差异 · 箱线图展示分布
实验效果可视化折线图展示指标趋…
20
Python实战
使用scipy进行假设检验 · 使用statsmodels计算置信区… · 使用matplotlib/seabo…
Pythonscipy
21
实验报告撰写
报告结构 · 关键发现 · 数据支撑
实验报告撰写报告结构
22
实验决策与落地
统计显著但业务不显著的处理 · 统计不显著但业务显著的处理 · 实验结论的沟通与推动
实验决策落地
23
实验后监控
长期效果跟踪 · 指标回退 · 模型退化检测
实验后监控长期效果跟踪
24
常见陷阱与误区
早停实验 · 多次查看结果 · 忽略新奇效应
常见陷阱误区
25
新奇效应与学习效应
新奇效应识别 · 学习效应衰减 · 实验周期延长策略
新奇效应学习效应
26
网络效应与干扰
用户间干扰 · 实验组与对照组相互影响 · 隔离实验设计
网络效应干扰
27
多臂老虎机在风控中的应用
动态分配流量 · 减少实验成本 · 与A/B测试的对比
多臂老虎机风控
28
风控模型A/B测试
模型版本对比 · 特征重要性变化 · 模型稳定性评估
A/B风控模型
29
规则策略A/B测试
规则阈值调整 · 规则组合优化 · 规则优先级测试
A/B规则策略
30
综合案例实战
从实验设计到报告输出的完整流程 · 常见问题复盘 · 最佳实践总结
综合案例实战从实验设计到报告…