1. 课程导论：Kafka堆积与Redis缓存击穿的关系，课程目标与学习路径
1.1 问题背景：从消息堆积到缓存雪崩的连锁反应
在分布式系统中，Kafka 作为高吞吐消息中间件，Redis 作为高性能缓存层，两者常被组合用于“削峰填谷”与“热点加速”。然而，当上游生产速率远超下游消费能力时，Kafka 会发生消息堆积；堆积数据一旦被批量回放，极易引发 Redis 的缓存击穿，进而导致数据库压力激增甚至系统雪崩。
下图展示了 Kafka 堆积 → 缓存击穿 → 数据库过载的典型故障链路：
关键认知：Kafka 堆积本身不是灾难，灾难在于堆积数据回放时对下游缓存和数据库的“瞬时冲击”。本课程的核心就是阻断这条故障链路。
1.2 Kafka 堆积与缓存击穿的关联矩阵
下表从触发条件、影响范围、恢复难度三个维度对比两种异常，帮助建立清晰的问题边界：
| 对比维度 | Kafka 消息堆积 | Redis 缓存击穿 |
|---|---|---|
| 触发条件 | 生产速率 > 消费速率；消费者宕机或阻塞 | 热点 Key 过期 + 大量并发请求同时到达 |
| 影响范围 | 消息延迟增大，磁盘占用上升，消费 Lag 持续增长 | 单 Key 失效导致数据库瞬间高负载，可能引发雪崩 |
| 恢复难度 | 中等：需扩容消费者或调整分区策略 | 较高：需预热、互斥锁或永不过期策略 |
| 两者关联 | 堆积回放 → 并发请求集中 → 热点 Key 失效概率剧增 → 击穿风险放大 | |
1.3 课程目标
完成本课程后，你将具备以下能力：
- 诊断能力：通过 Kafka Lag 监控、Redis 命中率、DB 慢查询日志，快速定位堆积与击穿的关联根因。
- 预防能力：设计 Kafka 消费限流、Redis 热点 Key 自动发现与永不过期策略，从源头降低击穿概率。
- 治理能力：在堆积已发生时，通过分级回放、缓存预热、分布式锁等手段，平滑回放流量，保护数据库。
- 调优能力：调整 Kafka 分区数、消费线程池、Redis 内存淘汰策略、连接池参数，提升系统整体吞吐与稳定性。
1.4 学习路径与章节地图
课程按“问题识别 → 原理剖析 → 方案设计 → 实战调优”四阶段组织，共 30 章。下图展示了核心知识模块与学习顺序：
学习路径提示：如果你当前正面临 Kafka 堆积 + Redis 击穿的生产事故，建议直接从阶段三（第13章）开始，快速获取止血方案；事后补学阶段一和阶段二，完善监控与原理认知。
1.5 前置知识与环境要求
为获得最佳学习效果，建议你具备以下基础：
- 熟悉 Kafka 基本概念（Topic、Partition、Consumer Group、Offset）
- 了解 Redis 常用数据结构（String、Hash、List、Set）及过期策略
- 掌握至少一种编程语言（Java / Python / Go），用于阅读和运行示例代码
- 本地或测试环境已部署 Kafka 2.8+ 和 Redis 6.x+