首页
›
DevOps、SRE 与可观测性工程
›
048-Prometheus告警自愈
›
《MTTR优化:自愈剧本中Exporter链路故障自愈》
VIP20
本课程属于:048-Prometheus告警自愈
DevOps、SRE 与可观测性工程 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
MTTR优化:自愈剧本中Exporter链路故障自愈
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导论
MTTR的定义与重要性 · Exporter链路故障的典型场景 · 自愈剧本的价值
课程导论
MTTR
02
Exporter链路基础
Prometheus Exporte… · 数据采集流程 · 常见Exporter类型(Node…
Exporter
链路基础
03
故障模式分析
Exporter进程崩溃 · 端口监听失效 · 指标数据延迟
故障模式分析
Exporter
04
自愈剧本设计原则
幂等性 · 可观测性 · 回滚机制
自愈剧本设计原则
幂等性
05
环境准备
Prometheus + Grafa… · Exporter安装与配置
环境准备
Prometheus
06
剧本开发语言选型
Python vs Shell vs… · 为什么选择Python进行自愈剧本开…
剧本开发语言选型
Python
07
Python基础回顾
异常处理 · 日志记录 · subprocess模块
Python
基础回顾
08
健康检查脚本编写
使用HTTP探活 · TCP端口扫描 · 进程PID检查三种方式检测Expor…
健康检查脚本编写
HTTP
09
故障检测逻辑
基于Alertmanager Web… · 解析告警标签 · 判断故障类型
故障检测逻辑
Alertmanager
10
自愈动作一
进程级恢复——重启崩溃的Export…
自愈动作一
Export
11
自愈动作二
配置级恢复——重新加载Exporte…
自愈动作二
Exporte
12
自愈动作三
网络级恢复——重启网络服务或调整ip…
自愈动作三
ip
13
自愈动作四
数据级恢复——清理Exporter缓… · 重置指标计数器
自愈动作四
Exporter
14
自愈动作五
依赖服务恢复——重启上游服务(如Re…
自愈动作五
Re
15
自愈剧本状态机设计
定义状态(检测中 · 恢复中 · 验证中
自愈剧本状态机设…
定义状态
16
超时与重试机制
设置单次动作超时 · 全局超时 · 指数退避重试策略
超时
重试机制
17
幂等性保障
通过锁文件 · 数据库记录 · Redis分布式锁防止重复执行
幂等性保障
通过锁文件
18
回滚与降级
当自愈失败时 · 自动回滚到上一个稳定状态 · 并触发人工告警
回滚
降级
19
日志与审计
结构化日志输出 · 关键操作记录到数据库 · 支持事后审计
日志
审计
20
自愈剧本的测试
单元测试(Mock Exporter… · 集成测试(Docker Compos… · 混沌工程
自愈剧本的测试
Mock
21
集成Alertmanager
配置Webhook Receiver · 自定义告警路由 · 抑制重复告警
Alertmanager
集成
22
集成Grafana
自愈事件可视化面板 · MTTR趋势图 · 自愈成功率仪表盘
Grafana
集成
23
集成CMDB
从CMDB获取Exporter实例元… · 端口 · 版本
CMDB
集成
24
集成告警平台
将自愈结果回写到告警平台(如Page… · Opsgenie) · 更新告警状态
集成告警平台
Page
25
高级场景一
多实例Exporter批量自愈——使…
高级场景一
Exporter
26
高级场景二
Exporter配置变更自愈——Gi… · 自动回滚错误配置
高级场景二
Exporter
27
高级场景三
Exporter版本升级自愈——自动… · 执行滚动升级
高级场景三
Exporter
28
生产部署与运维
剧本容器化部署 · Kubernetes CronJob… · 健康检查与自监控
生产部署
运维
29
MTTR效果评估
自愈前后MTTR对比 · SLA达成率分析 · 持续优化建议
MTTR
效果评估
30
课程总结与最佳实践
常见踩坑点 · 安全注意事项 · 未来演进方向(AIOps与自动修复)
课程总结
最佳实践
所属VIP或分类
同VIP:Exporter数据采集异常自愈剧本自动恢复方案
同VIP:Jaeger链路监控与Prometheus告警联动实践
同VIP:MTTR优化实践:自愈剧本中Exporter异常自愈