1. 课程导论：搜索索引在K8s中的挑战、分片与副本的核心概念、课程目标与学习路径
1.1 搜索索引在Kubernetes中的核心挑战
将Elasticsearch、Solr或OpenSearch等搜索系统部署在Kubernetes集群中，虽然获得了弹性伸缩与声明式运维的优势，但也引入了传统物理机或虚拟机部署中不常见的索引管理难题。以下是在K8s环境下管理搜索索引时最突出的四个挑战：
| 挑战维度 | 具体问题 | 影响后果 |
|---|---|---|
| 节点漂移与数据本地性 | Pod重建或调度后，索引分片可能落在与之前不同的Node上，导致缓存失效、磁盘I/O倾斜 | 查询延迟抖动、写入吞吐下降 |
| 资源争抢与动态限流 | 搜索Pod与业务Pod共享CPU/内存/网络带宽，缺乏有效的QoS保障 | 高并发下索引合并阻塞、查询超时 |
| 分片再平衡与滚动重启 | K8s节点升级、Pod滚动更新时，分片迁移策略不当会触发大量跨节点数据拷贝 | 集群负载飙升、写入拒绝率上升 |
| 存储卷绑定与故障域 | StatefulSet + PVC模式下，分片副本可能被调度到同一故障域（同一Node或同一可用区） | 单点故障导致数据丢失、集群不可用 |
关键洞察： 在K8s中，搜索索引的稳定性不再只取决于搜索软件本身的配置，而是由“K8s调度策略 + 存储拓扑 + 索引分片策略”三者共同决定。本课程将围绕这一三角关系展开调优方法。
1.2 分片与副本的核心概念
在深入调优之前，必须统一对以下基础概念的理解。这些术语在后续所有章节中反复出现：
- 索引（Index）： 搜索数据的逻辑容器，相当于关系数据库中的“表”。
- 分片（Shard / Primary Shard）： 索引的物理数据子集。每个分片是一个完整的Lucene实例，负责存储一部分文档。分片数量在索引创建时确定，创建后不可更改（除非重建索引）。
- 副本（Replica / Replica Shard）： 主分片的完整拷贝。副本用于提高查询吞吐和故障容错。副本数量可以动态调整。
- 分片分配（Shard Allocation）： 将分片分配到集群中具体数据节点的过程。K8s环境下，分配策略需要与Pod拓扑约束协同。
经验法则： 分片大小建议控制在10GB~50GB之间。过小（<5GB）会导致分片数量过多，增加管理开销；过大（>100GB）会延长故障恢复时间。在K8s中，分片大小还受限于PVC的IOPS上限。
1.3 课程目标与学习路径
本课程旨在帮助搜索架构师和K8s运维人员掌握一套可落地、可验证的索引分片与副本调优方法论。完成本课程后，你将能够：
- 诊断现有K8s搜索集群的分片分布健康度，识别热点节点和资源瓶颈。
- 设计符合业务SLA的分片策略（数量、大小、路由规则），并与K8s调度策略（PodAntiAffinity、拓扑分布约束）对齐。
- 调整副本数量与分配规则，在查询性能与存储成本之间找到最佳平衡点。
- 自动化通过Operator或自定义控制器实现分片再平衡与滚动重启的优雅编排。
课程按照“基础→诊断→策略→实战”的递进路径组织，共30章：
| 阶段 | 章节范围 | 核心产出 |
|---|---|---|
| 基础篇 | 第1~5章 | 理解分片/副本原理、K8s调度基础、存储卷拓扑约束 |
| 诊断篇 | 第6~12章 | 监控指标体系、热点分析工具、分片不平衡检测脚本 |
| 策略篇 | 第13~22章 | 分片预分配、副本弹性伸缩、故障域反亲和、滚动更新策略 |
| 实战篇 | 第23~30章 | Operator开发、CI/CD集成、压测与调优报告、生产案例复盘 |
前置要求： 本课程假设你已经具备基本的Kubernetes操作能力（Pod、Deployment、StatefulSet、Service）以及至少一种搜索引擎（推荐Elasticsearch 7.x+）的使用经验。如果你对上述内容尚不熟悉，建议先完成K8s入门课程或阅读官方文档。