VIP20
本课程属于：036-告警降噪阈值策略 DevOps、SRE 与可观测性工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

告警降噪阈值策略的A B测试：基于历史数据的阈值验证

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
告警疲劳的现状与A/B测试在阈值优化…
课程导论A/B
02
核心概念
告警降噪 · 阈值策略 · A/B测试的基本定义与关系
核心概念告警降噪
03
历史数据基础
告警时间序列数据的采集 · 清洗与存储格式
历史数据基础告警时间序列数据…
04
数据预处理
异常值剔除 · 缺失值填充与数据归一化方法
数据预处理异常值剔除
05
特征工程
从历史告警中提取波动率 · 频率 · 持续时间等关键特征
特征工程从历史告警
06
基线阈值设定
基于百分位数 · 均值+标准差等统计方法的初始阈值计算
基线阈值设定基于百分位数
07
实验假设构建
零假设与备择假设在阈值对比中的具体表…
实验假设构建零假设
08
实验指标设计
告警准确率 · 误报率 · 漏报率
实验指标设计告警准确率
09
对照组与实验组
保持其他条件不变 · 仅改变阈值参数的实验设计原则
对照组实验组
10
随机化与分层
按服务 · 地域或告警类型进行分层抽样的A/B分…
随机化分层
11
样本量计算
基于统计功效与效应量的最小样本量估算…
样本量计算基于统计功效
12
实验周期确定
考虑业务周期（日/周/月）的最小运行…
实验周期确定考虑业务周期
13
历史回测框架
利用历史数据模拟A/B实验的离线验证…
历史回测框架A/B
14
回测引擎实现
Python代码实现基于时间序列的回…
回测引擎实现Python
15
阈值验证指标
回测中如何计算新阈值下的降噪率与告警…
阈值验证指标回测
16
统计显著性检验
t检验与Mann-Whitney U…
统计显著性检验Mann-Whitney
17
多重比较校正
Bonferroni与FDR校正避免…
多重比较校正Bonferroni
18
结果可视化
使用折线图 · 箱线图 · 混淆矩阵展示A/B组差异
结果可视化使用折线图
19
阈值收敛策略
基于回测结果动态调整阈值的迭代优化流…
阈值收敛策略基于回测结果动态…
20
业务影响评估
阈值变化对MTTR · 工单量 · 值班压力的量化分析
业务影响评估MTTR
21
异常场景注入
在历史数据中模拟突发流量与故障 · 验证阈值鲁棒性
异常场景注入历史数据
22
冷启动问题
无历史数据的新服务如何设定初始阈值并…
冷启动问题无历史数据的新服…
23
多维度交叉验证
按告警级别 · 组件 · 时间段分别验证阈值效果
多维度交叉验证按告警级别
24
实验监控看板
实时展示A/B组告警数量 · 误报率等指标的仪表盘设计
实验监控看板A/B
25
决策门限
基于成本效益分析确定是否全量切换新阈…
决策门限基于成本效益分析…
26
灰度发布策略
从10%流量逐步放量至100%的阈值…
灰度发布策略从10%流量逐步…
27
回滚机制
当A/B测试发现负面效果时的快速回退…
回滚机制A/B
28
案例实战一
某电商平台CPU告警阈值从80%调整…
案例实战一CPU
29
案例实战二
某数据库连接数告警基于历史数据的分时…
案例实战二某数据库连接数告…
30
课程总结
A/B测试在告警治理中的最佳实践与常…
课程总结A/B