VIP20
本课程属于：028-发布工程MTTR复盘 DevOps、SRE 与可观测性工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Kubernetes节点异常MTTR复盘口径与自动恢复策略

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
MTTR基础概念
MTTR定义 · MTTR在Kubernetes中的重… · MTTR与MTBF/MTTF的区别
MTTR基础概念
02
节点异常分类
硬件故障（CPU/内存/磁盘） · 软件故障（kubelet/cri/d… · 网络故障（CNI/DNS/带宽）
节点异常分类CPU
03
MTTR复盘口径定义
故障发现时间(TTD) · 故障确认时间(TTI) · 故障定位时间(TTF)
MTTR复盘口径定义
04
MTTR数据采集方法
Prometheus指标采集 · Event事件采集 · kubectl get events
MTTR数据采集方法
05
MTTR计算模型
加权平均法 · 分位数法（P50/P90/P99） · 时间窗口滑动平均法
MTTR计算模型
06
节点异常检测策略
基于阈值的检测 · 基于机器学习的异常检测 · 基于Prometheus Rule的…
节点异常检测策略基于阈值的检测
07
节点健康检查机制
Node Condition · Node Problem Detec… · Kubelet健康检查
节点健康检查机制Node
08
自动恢复策略设计原则
最小化人工干预 · 幂等性 · 回滚能力
自动恢复策略设计…最小化人工干预
09
节点自动恢复之Pod驱逐策略
PodDisruptionBudge… · 优先级调度 · 优雅终止
Pod节点自动恢复之
10
节点自动恢复之节点自愈
kubelet自愈 · systemd服务自愈 · 节点重启策略
节点自动恢复之节…kubelet
11
节点自动恢复之资源调度
污点(Taint)与容忍(Toler… · 节点亲和性 · Pod反亲和性
节点自动恢复之资…Taint
12
节点自动恢复之存储恢复
PV/PVC重新挂载 · 本地存储数据恢复 · 分布式存储（Ceph/Longhor…
节点自动恢复之存…PV/PVC
13
节点自动恢复之网络恢复
CNI插件重启 · Pod IP重新分配 · Service Endpoint更新
节点自动恢复之网…CNI
14
节点自动恢复之集群自愈
控制平面组件高可用 · etcd备份与恢复 · kube-controller-ma…
节点自动恢复之集…控制平面组件高可…
15
自动恢复策略之灰度发布
金丝雀发布 · 蓝绿部署 · 滚动更新
自动恢复策略之灰…金丝雀发布
16
自动恢复策略之熔断与限流
HPA（水平Pod自动伸缩） · VPA（垂直Pod自动伸缩） · Cluster Autoscaler
自动恢复策略之熔…限流
17
自动恢复策略之故障注入测试
Chaos Mesh · LitmusChaos · Gremlin
自动恢复策略之故…Chaos
18
MTTR复盘报告模板
故障时间线 · 影响范围 · 根因分析
MTTR复盘报告模板
19
MTTR复盘之根因分析
5Why分析法 · 鱼骨图 · 因果图
MTTR复盘之根因分析
20
MTTR复盘之数据可视化
Grafana仪表盘 · 时间线图 · 热力图
MTTR复盘之数据可视化
21
MTTR复盘之自动化工具
Kubernetes Dashboa… · K9s · kubectl-aliases
MTTR复盘之自动化工具
22
MTTR复盘之团队协作
Slack/钉钉告警通知 · Jira工单系统 · PagerDuty值班
MTTR复盘之团队协作
23
MTTR复盘之持续改进
SLO/SLI定义 · 错误预算 · 告警疲劳管理
MTTR复盘之持续改进
24
节点异常之常见案例
OOMKiller · 磁盘空间不足 · kubelet证书过期
节点异常之常见案…OOMKiller
25
节点异常之高级案例
内核死锁 · 内存泄漏 · 网络分区
节点异常之高级案…内核死锁
26
自动恢复策略之代码实现
Operator模式 · Custom Controller · Webhook
自动恢复策略之代…Operator
27
自动恢复策略之测试验证
单元测试 · 集成测试 · e2e测试
自动恢复策略之测…单元测试
28
自动恢复策略之安全考虑
RBAC权限控制 · Pod安全策略 · 网络策略
自动恢复策略之安…RBAC
29
MTTR复盘之成本优化
资源预留 · Spot实例 · 节点池管理
MTTR复盘之成本优化
30
课程总结与最佳实践
MTTR复盘流程 · 自动恢复策略清单 · 常见陷阱
课程总结最佳实践