VIP20
本课程属于：024-微服务架构中间件接入链路 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

微服务链路中Kafka消息丢失的故障排查方案

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
消息丢失概述
微服务链路中消息丢失的常见场景与影响
消息丢失概述微服务链路
02
Kafka基础架构回顾
Producer · Broker · Consumer
Kafka基础架构回顾
03
消息丢失的根因分类
生产端丢失 · Broker端丢失 · 消费端丢失
消息丢失的根因分…生产端丢失
04
生产端丢失原因1
acks参数设置不当（acks=0）
生产端丢失原因1acks
05
生产端丢失原因2
网络超时与重试机制失效
生产端丢失原因2网络超时
06
生产端丢失原因3
消息过大导致发送失败
生产端丢失原因3消息过大导致发送…
07
生产端丢失原因4
异步发送未处理回调异常
生产端丢失原因4异步发送未处理回…
08
生产端排查工具
Producer Metrics · 日志分析 · 抓包
生产端排查工具Producer
09
生产端最佳实践
acks=all · 幂等性 · 事务性Producer
生产端最佳实践acks
10
Broker端丢失原因1
unclean.leader.ele…
Broker端丢失原因1
11
Broker端丢失原因2
min.insync.replica…
Broker端丢失原因2
12
Broker端丢失原因3
磁盘故障与日志段损坏
Broker端丢失原因3
13
Broker端丢失原因4
日志保留策略（retention.m…
Broker端丢失原因4
14
Broker端排查工具
kafka-log-dirs · kafka-replica-veri… · JMX监控
Broker端排查工具
15
Broker端最佳实践
副本因子≥3 · ISR机制 · 日志保留策略调优
Broker端最佳实践
16
消费端丢失原因1
自动提交offset导致数据未处理完…
消费端丢失原因1offset
17
消费端丢失原因2
消费者组再均衡导致重复消费或丢失
消费端丢失原因2消费者组再均衡导…
18
消费端丢失原因3
消费线程异常退出未处理
消费端丢失原因3消费线程异常退出…
19
消费端丢失原因4
消息处理逻辑幂等性不足导致业务丢失
消费端丢失原因4消息处理逻辑幂等…
20
消费端排查工具
Consumer Lag监控 · 日志 · offset管理命令
消费端排查工具Consumer
21
消费端最佳实践
手动提交 · 幂等消费 · 死信队列
消费端最佳实践手动提交
22
全链路监控方案
Prometheus + Grafa…
全链路监控方案Prometheus
23
消息轨迹与链路追踪
OpenTelemetry + Ja…
消息轨迹链路追踪
24
消息丢失的应急处理流程
发现 · 定位 · 止损
消息丢失的应急处…发现
25
案例实战1
生产端acks=0导致订单消息丢失
案例实战1acks
26
案例实战2
Broker端unclean选举导致…
案例实战2Broker
27
案例实战3
消费端自动提交导致支付结果丢失
案例实战3消费端自动提交导…
28
案例实战4
磁盘故障导致分区数据不可用
案例实战4磁盘故障导致分区…
29
消息丢失的预防体系
配置规范 · 监控告警 · 定期演练
消息丢失的预防体…配置规范
30
课程总结与最佳实践清单
从架构 · 配置 · 运维三个维度保障消息不丢失
课程总结最佳实践清单