VIP20

本课程属于：091-Confluent Kafka实时数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Confluent实时数据平台性能优化与容量规划

共计 30 章节

可可资料掘金营 · 点击在线试看

Confluent平台性能优化全景

目标=明确Broker · Topic · Partition

Confluent平台性能优化全景

性能瓶颈定位方法论

目标=学习分层排查思路 · 从客户端 · 网络

性能瓶颈定位方法…目标=学习分层排…

关键性能指标与监控体系

目标=掌握吞吐量 · 延迟 · ISR收缩

关键性能指标监控体系

Broker硬件与操作系统调优

目标=围绕CPU · 内存 · 磁盘

Broker JVM与堆内存优化

目标=分析G1/CMS/ZGC选择 · 堆大小 · GC日志

Topic与Partition规划

目标=根据吞吐目标 · 消费者并行度 · 顺序性要求

副本与ISR性能权衡

目标=理解acks · min.insync.replica… · unclean.leader.ele…

Producer性能调优

目标=优化batch.size · linger.ms · compression.type

Producer性能调优

Producer分区与消息路由优化

目标=分析默认分区器 · 自定义分区器 · 粘性分区

Consumer性能调优

目标=优化fetch.min.byt… · fetch.max.wait.ms · max.partition.fetc…

Consumer性能调优

消费组与Rebalance优化

目标=掌握分区分配策略 · 静态成员 · 增量协作再均衡

Rebalance消费组

消费积压诊断与处理

目标=通过Lag · 消费速率 · 分区倾斜

消费积压诊断处理

磁盘与存储层优化

目标=比较HDD · SSD · NVMe

磁盘存储层优化

网络与跨机房性能优化

目标=分析网络带宽 · RTT · TCP参数

网络跨机房性能优化

页缓存与零拷贝机制

目标=理解Kafka依赖页缓存 · sendfile · 零拷贝的读写路径

页缓存零拷贝机制

日志压缩与清理性能

目标=针对compact和delet… · 优化清理频率 · 段大小

日志压缩清理性能

Schema Registry性能与容量

目标=评估Schema数量 · 版本 · 兼容性检查

Kafka Connect性能调优

目标=优化worker · task并行度 · offset刷新

ksqlDB与Kafka Streams性能优化

目标=分析状态存储 · 窗口 · join

Confluent Control Center与监控容量

目标=规划监控数据保留 · 指标采集频率 · 告警阈值与大规模集群下的可观测性成本

ConfluentControl

多租户与配额管理

目标=使用client quotas · user/ip quotas · 请求限流

多租户配额管理

集群扩容与缩容实战

目标=制定Broker扩容 · 分区迁移 · 副本重分配

集群扩容缩容实战

容量规划模型

目标=基于消息速率 · 平均消息大小 · 副本数

容量规划模型目标=基于消息速…

峰值与弹性容量设计

目标=分析业务峰值 · 突发流量 · 季节性波动

峰值弹性容量设计

性能压测与基准测试

目标=使用kafka-produce… · kafka-consumer-per… · Trogdor及自定义负载验证吞吐

性能压测基准测试

故障场景下的性能保持

目标=模拟Broker宕机 · 网络分区 · 磁盘故障

故障场景下的性能…Broker

升级与迁移中的性能保障

目标=规划Confluent Pla… · ZK到KRaft迁移 · 集群迁移与客户端升级的性能验证

成本优化与资源效率

目标=在满足SLA前提下 · 通过压缩 · 分层存储

成本优化资源效率

端到端性能调优综合实战

目标=给定实时数据管道场景 · 完成指标采集 · 瓶颈定位

端到端性能调优综…目标=给定实时数…

容量规划与性能治理持续运营

目标=建立容量基线 · 趋势预测 · 变更评审

容量规划性能治理持续运营