首页
›
DevOps、SRE 与可观测性工程
›
048-Prometheus告警自愈
›
《MTTR优化:Exporter数据采集异常自愈剧本设计》
VIP20
本课程属于:048-Prometheus告警自愈
DevOps、SRE 与可观测性工程 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
MTTR优化:Exporter数据采集异常自愈剧本设计
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
MTTR基础概念
MTTR定义 · MTTR与MTBF/MTTF的关系 · MTTR在SRE中的重要性
MTTR
基础概念
02
Exporter生态概览
Prometheus Exporte… · 常见Exporter类型(Node… · Blackbox Exporter
Exporter
生态概览
03
数据采集异常分类
Exporter进程挂掉 · 端口不可达 · 指标数据延迟
数据采集异常分类
Exporter
04
自愈剧本设计原则
幂等性 · 原子性 · 可观测性
自愈剧本设计原则
幂等性
05
剧本引擎选型
Ansible vs StackSt…
剧本引擎选型
Ansible
06
健康检查探针设计
HTTP探针 · TCP探针 · gRPC探针
健康检查探针设计
HTTP
07
异常检测触发机制
基于Prometheus Alert… · 基于定时任务Cron触发 · 基于日志关键字触发
异常检测触发机制
Prometheus
08
自愈动作库设计
重启Exporter · 重新加载配置 · 回滚Exporter版本
自愈动作库设计
Exporter
09
剧本状态机设计
初始状态 · 检测状态 · 诊断状态
剧本状态机设计
初始状态
10
Python自愈剧本框架
使用Python asyncio实现… · 使用subprocess执行系统命令 · 使用requests调用API
Python
自愈剧本框架
11
Node Exporter自愈实战
检测node_exporter进程是… · 检测/metrics端点是否返回20… · 自动重启并发送告警恢复
Node
Exporter
12
Blackbox Exporter自愈实战
检测blackbox_exporte… · 检测ICMP/TCP探测是否正常 · 自动回滚配置文件
Blackbox
Exporter
13
Custom Exporter自愈实战
检测自定义Exporter的数据库连… · 检测业务指标是否归零 · 自动重启Exporter并预热缓存
Custom
Exporter
14
告警抑制与降噪
自愈执行期间自动屏蔽重复告警 · 使用Alertmanager的inh… · 自愈成功自动Resolved
告警抑制
降噪
15
剧本日志与审计
结构化日志输出(JSON格式) · 日志级别动态调整 · 审计轨迹记录(谁
剧本日志
审计
16
自愈剧本的单元测试
使用pytest模拟Exporter… · 使用unittest.mock模拟系… · 测试状态机转换
自愈剧本的单元测…
pytest
17
自愈剧本的集成测试
使用Docker Compose搭建… · 模拟网络分区 · 模拟进程OOM
自愈剧本的集成测…
Docker
18
自愈剧本的灰度发布
金丝雀发布策略 · 自愈动作的开关控制(Feature… · 逐步扩大自愈范围
自愈剧本的灰度发…
金丝雀发布策略
19
自愈剧本的监控与告警
监控自愈执行成功率 · 监控自愈执行耗时 · 自愈剧本自身异常告警
自愈剧本的监控
告警
20
自愈剧本的SLA保障
自愈超时控制 · 自愈重试策略(指数退避) · 自愈熔断机制(Circuit Bre…
SLA
自愈剧本的
21
多Exporter协同自愈
依赖关系管理(如先恢复Node Ex… · 分布式锁防止并发自愈
Exporter
协同自愈
22
自愈剧本的配置管理
使用YAML/JSON配置文件定义自… · 支持热加载配置 · 配置版本管理
自愈剧本的配置管…
YAML/JSON
23
自愈剧本的安全加固
最小权限原则(使用专用Service… · 命令注入防护 · 敏感信息加密(Vault集成)
自愈剧本的安全加…
Service
24
自愈剧本的混沌工程
主动注入Exporter故障(Cha… · 验证自愈剧本是否按预期执行 · 混沌实验自动化
自愈剧本的混沌工…
Exporter
25
自愈剧本的容量规划
评估自愈并发数对系统资源的影响 · 限制自愈并发数 · 自愈队列管理
自愈剧本的容量规…
评估自愈并发数对…
26
自愈剧本的文档与Runbook
自动生成自愈Runbook · 自愈步骤可视化 · 自愈历史记录查询
Runbook
自愈剧本的文档
27
自愈剧本的版本管理
GitOps模式管理剧本代码 · 自愈剧本版本与Exporter版本对… · 回滚到历史版本
自愈剧本的版本管…
GitOps
28
自愈剧本的跨团队协作
自愈通知到On-Call人员 · 自愈审批流程(高风险动作需人工确认) · 自愈结果反馈到工单系统
自愈剧本的跨团队…
On-Call
29
自愈剧本的演进与优化
基于历史数据优化自愈策略 · 引入机器学习预测Exporter异常 · 自愈剧本的A/B测试
自愈剧本的演进
优化
30
综合实战
构建一个完整的Exporter自愈系… · 代码实现 · 测试部署到生产运维的全流程
综合实战
Exporter
所属VIP或分类
同VIP:Exporter数据采集异常自愈剧本自动恢复方案
同VIP:Jaeger链路监控与Prometheus告警联动实践
同VIP:MTTR优化实践:自愈剧本中Exporter异常自愈