首页
›
Web后端与企业应用开发
›
051-消息队列任务索引选择复盘
›
《OpenAPI异步任务:消息队列索引与性能调优实战》
VIP20
本课程属于:051-消息队列任务索引选择复盘
Web后端与企业应用开发 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
OpenAPI异步任务:消息队列索引与性能调优实战
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
消息队列基础
消息队列核心概念(生产者 · 消费者 · 主题
消息队列基础
消息队列核心概念
02
主流消息队列对比
RabbitMQ · Kafka · RocketMQ
主流消息队列对比
RabbitMQ
03
索引原理入门
什么是索引 · 为什么消息队列需要索引 · B-Tree与LSM-Tree索引结…
索引原理入门
什么是索引
04
Kafka索引机制
Kafka日志分段(LogSegme… · 偏移量索引(OffsetIndex) · 时间戳索引(TimeIndex)文件…
Kafka
索引机制
05
Kafka索引文件解析
.index文件与.timeinde… · 稀疏索引原理 · 索引条目大小计算
Kafka
索引文件解析
06
Kafka索引构建过程
消息写入时索引追加 · 索引文件滚动 · 索引压缩与清理策略
Kafka
索引构建过程
07
Kafka索引查询流程
根据偏移量查找消息 · 根据时间戳查找消息 · 二分查找在索引中的应用
Kafka
索引查询流程
08
Kafka索引性能瓶颈
索引文件过大导致内存压力 · 磁盘IO瓶颈 · 索引查找延迟分析
Kafka
索引性能瓶颈
09
RocketMQ索引机制
ConsumeQueue与Index… · 哈希索引实现 · 消息Key索引原理
RocketMQ
索引机制
10
RocketMQ索引文件详解
IndexFile的哈希槽与索引条目… · 索引冲突处理 · 索引文件刷盘策略
RocketMQ
索引文件详解
11
RocketMQ索引查询流程
根据消息Key查找消息 · 根据时间范围查找消息 · 索引命中率优化
RocketMQ
索引查询流程
12
Pulsar索引机制
Apache Pulsar Ledg… · BookKeeper索引结构 · 分层存储索引
Pulsar
索引机制
13
消息队列性能指标
吞吐量(TPS) · 延迟(P99/P999) · 消息堆积能力
消息队列性能指标
TPS
14
性能调优方法论
性能测试工具(Kafka自带的性能测… · RocketMQ的Benchmark… · 性能分析流程
性能调优方法论
Kafka
15
操作系统层面调优
文件系统选择(XFS vs Ext4… · 页缓存(Page Cache)调优 · 磁盘调度算法
操作系统层面调优
XFS
16
JVM层面调优
堆内存分配 · GC策略选择(G1 vs CMS) · 直接内存配置
JVM
层面调优
17
Kafka生产者性能调优
批量发送(batch.size) · 压缩算法(gzip/snappy/l… · acks配置
Kafka
生产者性能调优
18
Kafka消费者性能调优
拉取大小(fetch.min.byt… · 会话超时 · 分区分配策略
Kafka
消费者性能调优
19
Kafka Broker性能调优
副本同步机制 · ISR配置 · 日志刷盘策略(flush.ms/fl…
Kafka
Broker
20
Kafka索引专项调优
索引间隔(log.index.int… · 索引文件大小(log.index.s… · 索引缓存优化
Kafka
索引专项调优
21
RocketMQ生产者性能调优
发送方式(同步/异步/单向) · 批量发送 · 消息体大小控制
RocketMQ
生产者性能调优
22
RocketMQ消费者性能调优
消费线程数 · 消费模式(集群/广播) · 顺序消费与并发消费
RocketMQ
消费者性能调优
23
RocketMQ Broker性能调优
文件存储结构优化 · 刷盘方式(同步/异步) · TransientStorePool
RocketMQ
Broker
24
RocketMQ索引专项调优
IndexFile数量控制 · 索引刷盘频率 · 索引文件预热
RocketMQ
索引专项调优
25
Pulsar性能调优
BookKeeper写入优化 · Ledger滚动策略 · Deduplication去重机制
Pulsar
性能调优
26
消息队列监控与告警
关键监控指标(消息积压 · 消费延迟 · 磁盘使用率)
消息队列监控
告警
27
消息队列故障排查
消息丢失排查 · 消息重复排查 · 消费停滞排查
消息队列故障排查
消息丢失排查
28
实战案例一
电商订单系统消息队列性能调优(高并发… · 索引优化 · 吞吐量提升3倍)
实战案例一
电商订单系统消息…
29
实战案例二
日志采集系统消息队列性能调优(海量小… · 索引文件膨胀问题 · 磁盘IO优化)
实战案例二
日志采集系统消息…
30
课程总结与展望
消息队列索引技术演进趋势(云原生 · Serverless · 存算分离)
课程总结
消息队列索引技术…
所属VIP或分类
同VIP:KafkaMQ索引分析慢查询分析
同VIP:Kafka慢查询分析
同VIP:Kafka时间戳索引:性能调优与故障排查工程实践