首页
›
DevOps、SRE 与可观测性工程
›
047-OpenTelemetry Runbook
›
《OpenTelemetry告警联动Runbook诊断恢复》
VIP20
本课程属于:047-OpenTelemetry Runbook
DevOps、SRE 与可观测性工程 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
OpenTelemetry告警联动Runbook诊断恢复
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导论
什么是Runbook · 什么是OpenTelemetry · 为什么需要故障闭环
课程导论
Runbook
02
可观测性基础
Metrics · Logs · Traces三大支柱的定义与关系
可观测性基础
Metrics
03
OpenTelemetry架构
Collector · Exporter · Processor
OpenTelemetr…
架构
04
OpenTelemetry Collector部署
Docker部署 · Kubernetes DaemonS… · 配置文件结构(receivers/p…
OpenTelemetr…
Collector
05
自动 instrumentation
Java/Python/Go应用自动… · 环境变量配置 · 常见陷阱
instrumentat…
自动
06
手动 instrumentation
创建Span · 添加Attributes · 设置Span Status
instrumentat…
手动
07
Metrics采集
Counter · Histogram · Gauge
Metrics
采集
08
Logs集成
OpenTelemetry Logs… · 与现有日志框架(Log4j/Logr… · 日志与Trace关联
Logs
集成
09
Runbook定义与结构
Runbook的组成部分(触发条件 · 诊断步骤 · 恢复步骤
Runbook
定义
10
Runbook自动化引擎
Ansible Tower/AWX · StackStorm · 自定义Python脚本引擎的选型与对…
Runbook
自动化引擎
11
故障检测与告警
Prometheus Alertma… · 基于SLI/SLO的告警规则 · 告警去重与分组
故障检测
告警
12
告警到Runbook的触发
Webhook接收器设计 · Alertmanager webho… · 事件上下文传递(TraceID/Se…
Runbook
告警到
13
OpenTelemetry与告警联动
在告警中嵌入TraceID · 通过TraceID查询完整调用链 · 快速定位故障根因
OpenTelemetr…
告警联动
14
故障诊断Runbook实战(一)
高CPU/内存故障——通过OTel… · 通过Profiling(pprof/…
Runbook
故障诊断
15
故障诊断Runbook实战(二)
慢查询/数据库故障——通过OTel… · 通过Exemplar关联Metric…
Runbook
故障诊断
16
故障诊断Runbook实战(三)
网络超时/连接池耗尽——通过OTel… · 通过Prometheus连接池指标
Runbook
故障诊断
17
故障恢复Runbook实战(一)
自动扩缩容——基于OTel Metr… · KEDA ScaledObject配…
Runbook
故障恢复
18
故障恢复Runbook实战(二)
服务重启/回滚——通过Kuberne… · Ansible Playbook执行
Runbook
故障恢复
19
故障恢复Runbook实战(三)
缓存预热/限流降级——通过Redis… · Sentinel限流规则动态下发
Runbook
故障恢复
20
故障闭环验证
恢复后自动检测(Health Che… · Metrics回归基线 · 告警自动关闭
故障闭环验证
Health
21
Runbook版本控制与CI/CD
Git存储Runbook · GitOps模式 · Runbook变更审批流程
Runbook
CI/CD
22
OpenTelemetry Collector高级配置
批处理(Batch Processo… · 采样(Tail Sampling) · 内存限制(Memory Limite…
OpenTelemetr…
Collector
23
多集群/多环境部署
OTel Collector Fed… · Runbook环境变量替换 · 告警路由(环境标签)
多集群
多环境部署
24
安全与权限
OTel Collector TLS… · Runbook执行权限最小化(RBA… · 敏感信息管理(Vault)
安全
权限
25
故障演练与混沌工程
Chaos Mesh/Litmus注… · 验证Runbook有效性 · MTTR指标跟踪
故障演练
混沌工程
26
Runbook市场与复用
内部Runbook仓库 · 社区Runbook模板(如Aweso… · 标准化标签体系
Runbook
市场
27
OpenTelemetry与Runbook的集成平台
Grafana OnCall · PagerDuty · Opsgenie的联动配置
OpenTelemetr…
Runbook
28
案例研究(一)
电商大促——流量突增导致数据库连接池… · 从告警到自动扩容再到恢复的完整闭环
案例研究
电商大促
29
案例研究(二)
微服务雪崩——一个服务超时引发级联故… · 通过OTel Trace定位根因并自…
案例研究
微服务雪崩
30
课程总结与未来展望
AIOps与Runbook自动化 · OpenTelemetry未来的发展… · 持续学习资源推荐
课程总结
未来展望
所属VIP或分类
同VIP:Context-Propagation在RPC框架中的集成
同VIP:Context-Propagation跨服务链路标记实践
同VIP:Loki日志标签与OpenTelemetry链路关联优化