VIP20
本课程属于：054-量化因子研究阈值分层试验 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Champion Challenger实战教程

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
Champion Challenger概念
什么是Champion Challe… · 核心思想 · 与传统A/B测试的区别
ChampionChallenger
02
应用场景
Champion Challenge… · 风控模型 · 广告投放
应用场景Champion
03
实验设计原则
随机化 · 样本量计算 · 最小可检测效应
实验设计原则随机化
04
Champion模型定义
如何定义和部署当前最优模型（Cham… · 模型版本管理与基线建立
Champion模型定义
05
Challenger模型开发
Challenger模型的候选来源 · 特征工程改进 · 算法迭代
Challenger模型开发
06
流量分割策略
均匀分割 · 分层分割 · 动态流量调整
流量分割策略均匀分割
07
离线评估与在线验证
离线指标（AUC · LogLoss）与在线指标（CTR · 转化率）的关联与差异
离线评估线验证
08
实验指标体系
核心指标（业务KPI） · 辅助指标（模型性能） · 护栏指标（系统稳定性
实验指标体系KPI
09
统计检验方法
t检验 · 卡方检验 · Mann-Whitney U检验
统计检验方法t检验
10
多Challenger并行实验
同时测试多个Challenger时的… · FDR）
Challenger并行实验
11
实验周期与样本量
如何确定实验运行时长 · 样本量计算工具（Python sta…
实验周期样本量
12
数据收集与埋点
实验数据采集规范 · 事件日志设计 · 用户ID与实验分组标识
数据收集埋点
13
实时监控与告警
实验期间实时监控指标波动 · 设置告警阈值 · 异常检测方法
实时监控告警
14
决策机制
如何判断Challenger胜出 · 平局处理 · 自动切换与人工审核流程
决策机制Challenger
15
模型回滚策略
Champion Challenge… · 灰度发布与渐进式放量
模型回滚策略Champion
16
Python实战
使用Python搭建Champion… · 指标计算 · 统计检验）
PythonChampion
17
模拟数据生成
生成模拟实验数据（用户ID · 分组 · 指标值）
模拟数据生成ID
18
统计检验代码实现
用Python实现t检验 · 卡方检验 · 贝叶斯A/B测试
统计检验代码实现Python
19
多臂老虎机（MAB）集成
将Epsilon-Greedy · UCB · Thompson Sampling与…
MAB多臂老虎机
20
实验平台架构设计
Champion Challenge… · 服务层 · 决策引擎）
实验平台架构设计Champion
21
特征存储与模型服务
特征平台（Feast/Tecton）…
特征存储模型服务
22
案例
推荐系统Champion Chall… · 设计实验 · 评估指标
案例Champion
23
案例
风控模型Champion Chall… · 关注坏账率 · 通过率
案例Champion
24
案例
广告竞价Champion Chall… · 优化eCPM · 点击率
案例Champion
25
案例
定价策略Champion Chall… · 测试不同定价模型对转化率和收入的影响
案例Champion
26
结果可视化
使用Matplotlib/Plotl… · 置信区间图 · 累积收益图
结果可视化Matplotlib/P…
27
实验报告自动化
自动生成Champion Chall… · 包含统计结论与业务建议
实验报告自动化Champion
28
常见陷阱与误区
样本量不足 · 新奇效应 · 时间效应
常见陷阱误区
29
组织与流程
数据团队 · 产品团队 · 工程团队在Champion Chal…
组织流程
30
未来趋势
AutoML与Champion Ch… · 强化学习在线学习 · 因果推断与实验的融合
未来趋势AutoML