1. 课程导论:什么是节点池、为什么需要健康联动与巡检、课程目标与适用场景

1.1 什么是节点池(Node Pool)

节点池是云原生环境下对一组具有相同配置、标签、污点及资源规格的工作节点(Node)的逻辑抽象与管理单元。在 Kubernetes 集群中,节点池通常由云厂商的托管集群(如 AKS、EKS、GKE)或自建集群的节点管理组件提供,允许运维人员将节点按机型、可用区、付费类型或业务用途进行分组。

维度 说明 典型场景
资源规格 CPU/内存/GPU 型号与比例 在线服务用 8C16G,离线任务用 4C8G
可用区 节点所属物理区域 多 AZ 部署实现高可用
付费类型 按量、包年包月、竞价实例 稳定负载用包年包月,弹性负载用竞价
业务标签 节点标签与污点(Taint) 前端 Pod 调度到前端节点池
核心概念:节点池 ≠ 节点集合。节点池具备自动扩缩容、升级策略、故障域隔离等集群级管理能力,是 Deployment 等工作负载实现弹性与稳定性的基础设施单元。

1.2 为什么需要健康联动与巡检

当 Deployment 部署到节点池后,节点与 Pod 的健康状态并非独立存在。节点池中单个节点的故障、内核升级、资源耗尽或网络抖动,会直接引发 Pod 的重新调度、驱逐甚至服务中断。传统被动告警模式存在以下痛点:

  • 信息孤岛:节点指标、Pod 状态、Deployment 副本数、节点池扩缩容事件分散在多个监控系统,无法关联分析。
  • 响应滞后:节点故障后,Pod 进入 CrashLoopBackOff 或 Pending 状态,运维人员往往在用户投诉后才介入。
  • 巡检低效:手动登录节点执行 kubectl get nodes、kubectl describe pod 无法覆盖大规模集群,且缺乏历史基线对比。
  • 联动缺失:节点池自动修复(如节点替换)与 Deployment 的 PDB(PodDisruptionBudget)策略、HPA(水平自动扩缩)策略之间缺少健康状态联动,导致修复动作反而加剧服务抖动。
一句话总结:健康联动与巡检是将节点池、节点、Pod、Deployment 四个层面的健康信号统一采集、关联分析、自动处置,实现从“被动救火”到“主动预防”的运维范式转变。

1.3 课程目标

完成本课程后,学员将具备以下能力:

  1. 理解节点池健康模型:掌握节点池层面、节点层面、Pod 层面、Deployment 层面的关键健康指标与故障模式。
  2. 搭建健康联动体系:基于 Prometheus + Alertmanager + 自定义 Operator 实现节点池故障自动感知与 Deployment 副本联动调整。
  3. 设计巡检自动化:编写巡检脚本与定时任务,覆盖节点池容量、节点状态、Pod 分布、内核参数、存储挂载等核心检查项。
  4. 构建巡检报告与看板:使用 Grafana 展示节点池健康评分、巡检通过率、历史趋势,并支持导出 PDF 报告。
  5. 落地生产级最佳实践:结合 PDB、HPA、节点池自动修复、污点容忍等机制,形成可复用的健康联动巡检模板。

1.4 适用场景与受众

角色 适用场景 预期收益
Kubernetes 运维工程师 管理 50+ 节点、多节点池的生产集群 减少故障发现时间(MTTD)与恢复时间(MTTR)
SRE / 平台工程师 建设内部容器平台,提供节点池健康自愈能力 提升平台 SLA,降低人工介入频次
DevOps 工程师 负责微服务部署与发布,关注 Pod 调度稳定性 提前发现节点池隐患,避免发布期间异常
架构师 设计多云/混合云节点池统一管理方案 形成标准化健康联动巡检规范,跨团队复用

1.5 节点池健康联动核心架构

下图展示了节点池、节点、Pod、Deployment 四层之间的健康信号采集与联动路径:

节点池健康联动核心架构 节点池 自动扩缩容 / 升级 节点 CPU / 内存 / 磁盘 / 网络 Pod 状态 / 重启 / 就绪探针 Deployment Prometheus 采集 节点 / Pod 指标 健康联动 Operator 故障感知 + 联动决策 巡检引擎 定时检查 / 基线对比 告警与自愈 Alertmanager / 自动修复 Grafana 看板 健康评分 / 巡检报告 说明 箭头方向表示 健康信号采集与联动流向

1.6 课程内容概览

本课程共 30 章,分为以下五个模块:

模块 章节范围 核心内容
基础篇 第 1-5 章 节点池概念、Deployment 调度原理、健康检查机制、Prometheus 基础
健康联动篇 第 6-14 章 节点池故障模式、联动 Operator 开发、PDB/HPA 联动策略、自动修复
巡检自动化篇 第 15-22 章 巡检脚本设计、定时任务、基线管理、巡检报告生成
可视化与告警篇 第 23-27 章 Grafana 看板、健康评分模型、告警规则、PDF 导出
实战与进阶篇 第 28-30 章 多云节点池统一巡检、大规模集群优化、故障演练与复盘
前置要求:学员需具备基本的 Kubernetes 操作经验(熟悉 kubectl、Pod、Deployment、Service 概念),了解 Prometheus 基础指标类型。本课程不从头讲解 Kubernetes 入门知识。