VIP20
本课程属于：051-消息队列任务索引选择复盘 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Kafka索引与消息压缩：消息队列任务网络带宽优化

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
Kafka概述
Kafka的起源 · 核心概念（Topic · Partition
Kafka的起源
02
Kafka架构深度解析
Producer · Consumer · Consumer Group
Kafka架构深度解析
03
消息存储机制
日志分段（Log Segment）与…
消息存储机制Log
04
索引文件原理（上）
偏移量索引（Offset Index…
索引文件原理Offset
05
索引文件原理（下）
时间戳索引（Timestamp In…
索引文件原理Timestamp
06
索引文件配置与优化
log.index.size.max… · log.index.interval…
索引文件配置优化
07
稀疏索引与密集索引
Kafka为何采用稀疏索引 · 以及其对内存和性能的影响
稀疏索引密集索引
08
消息压缩概述
压缩的必要性 · 压缩在Producer/Broker…
消息压缩概述压缩的必要性
09
压缩算法对比（上）
Gzip压缩算法原理 · 优缺点及在Kafka中的适用场景
压缩算法对比Gzip
10
压缩算法对比（下）
Snappy · LZ4 · Zstandard压缩算法原理
压缩算法对比Snappy
11
Producer端压缩配置
compression.type参数… · 如何为不同Topic设置不同压缩算法
Producer端压缩配置
12
Broker端压缩行为
Broker如何处理来自Produc… · 以及compression.type…
Broker端压缩行为
13
Consumer端解压
Consumer自动解压机制 · 解压对消费性能的影响
Consumer端解压
14
批处理与压缩的协同
batch.size · linger.ms与压缩率的权衡 · 如何配置以最大化带宽节省
批处理压缩的协同
15
消息格式演进
V1与V2消息格式对比 · V2格式如何通过可变长整数和记录批处…
消息格式演进V1
16
网络带宽瓶颈分析
如何识别Kafka集群中的网络瓶颈 · 监控指标（Network Bytes…
网络带宽瓶颈分析Kafka
17
带宽优化策略总览
压缩 · 批处理 · 分区均衡
带宽优化策略总览压缩
18
副本同步与带宽消耗
Leader与Follower之间的… · 如何通过调整replica.fetc…
副本同步带宽消耗
19
生产端带宽优化实战
调整max.request.size · acks · enable.idempotence…
生产端带宽优化实…max.request.…
20
消费端带宽优化实战
调整fetch.min.bytes · fetch.max.wait.ms · max.partition.fetc…
消费端带宽优化实…fetch.min.by…
21
分区重分配与带宽均衡
分区重分配（Reassignment… · 避免集群震荡
分区重分配带宽均衡
22
限流机制（Quota）
Client Quota与Repli…
Quota限流机制
23
磁盘I/O与网络带宽的权衡
Page Cache · 刷盘策略（flush.ms）对读写性…
I/O磁盘
24
Kafka监控与告警
JMX指标 · Prometheus+Grafana…
Kafka监控
25
实战案例一
日志收集场景下的压缩与索引优化 · 降低50%带宽消耗
实战案例一日志收集场景下的…
26
实战案例二
金融交易系统低延迟场景 · 如何选择压缩算法与索引配置
实战案例二金融交易系统低延…
27
实战案例三
跨数据中心数据同步 · 利用压缩与批处理最大化带宽利用率
实战案例三跨数据
28
Kafka与云原生
在Kubernetes中部署Kafk… · 网络带宽与存储的弹性伸缩策略
Kafka云原生
29
未来趋势
Kafka 4.0新特性预告 · 分层存储（Tiered Storag…
未来趋势Kafka
30
课程总结与最佳实践
索引配置 · 压缩算法选择 · 带宽优化的综合决策树
课程总结最佳实践