VIP20
本课程属于：060-数据库迁移版本GC停顿定位 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Kafka消息积压与数据库迁移GC停顿关联诊断

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
Kafka消息积压与GC停顿的关联性… · 课程目标与学习路径
课程导论Kafka
02
Kafka基础架构回顾
Producer · Broker · Consumer
Kafka基础架构回顾
03
消息积压的定义与度量
Lag指标 · Consumer Group状态 · 监控面板解读
消息积压的定义度量
04
消息积压的常见原因（上）
Consumer处理能力不足 · 网络延迟 · 分区分配不均
消息积压的常见原…Consumer
05
消息积压的常见原因（下）
Broker端瓶颈 · 磁盘IO饱和 · 副本同步延迟
消息积压的常见原…Broker
06
JVM垃圾回收（GC）基础
堆内存结构 · Young GC · Old GC
JVMGC
07
GC停顿（Stop-The-World）原理
安全点 · 安全区域 · 停顿时间对应用线程的影响
GCStop-The-Wor…
08
数据库迁移场景引入
全量迁移 · 增量迁移 · 双写策略
数据库迁移场景引…全量迁移
09
迁移过程中的典型压力模型
高并发写入 · 大事务 · 索引重建
迁移过程典型压力模型
10
GC停顿如何导致Kafka消费端停顿
消费线程被冻结 · 心跳超时 · Rebalance触发
GCKafka
11
GC停顿如何导致Kafka生产端阻塞
缓冲区满 · 元数据请求超时 · 重试风暴
GCKafka
12
GC停顿如何加剧数据库迁移延迟
连接池耗尽 · 事务超时 · 主从延迟扩大
GC停顿如何加剧数据…
13
案例一
Full GC导致消费端Lag飙升的…
案例一Full
14
案例二
CMS并发模式失败引发生产端阻塞与数…
案例二CMS
15
案例三
G1 GC的Humongous Al…
案例三G1
16
诊断工具链（上）
jstat · jmap · jstack
诊断工具链jstat
17
诊断工具链（下）
GCeasy · MAT · Arthas
诊断工具链GCeasy
18
Kafka端优化策略
调整fetch.min.bytes · max.poll.records · session.timeout.ms
Kafka端优化策略
19
JVM端优化策略
堆大小设置 · GC算法选择（G1 vs ZGC） · GC参数调优
JVM端优化策略
20
数据库迁移端优化策略
分批迁移 · 限流 · 异步化
数据库迁移端优化…分批迁移
21
预防性设计
优雅降级 · 熔断 · 背压机制在迁移中的应用
预防性设计优雅降级
22
自动化告警与根因定位
基于Lag · GC Pause · DB延迟的关联告警规则
自动化告警根因定位
23
混沌工程实验
模拟GC停顿观察Kafka积压与迁移…
混沌工程实验GC
24
性能压测方法论
构建包含Kafka+DB迁移的全链路…
性能压测方法论Kafka+DB
25
GC日志分析与Lag时间序列对齐
使用Python脚本进行关联分析
GCLag
26
Kafka Broker端GC调优
Page Cache与JVM堆的平衡 · Direct Memory监控
KafkaBroker
27
Consumer端GC调优
减少对象分配 · 使用堆外缓存 · 批量处理
ConsumerGC
28
数据库迁移工具选型与GC友好设计
DataX · Canal · Debezium的GC表现对比
GC数据库迁移工具选…
29
综合实战演练
从告警触发到根因定位再到修复的完整S…
综合实战演练从告警触发到根因…
30
课程总结与最佳实践清单
架构设计 · 监控 · 应急响应的Checklist
课程总结最佳实践清单