VIP20

本课程属于：091-Confluent Kafka实时数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Confluent Kafka性能优化与容量治理

共计 30 章节

可可资料掘金营 · 点击在线试看

性能优化与容量治理全景

目标=Confluent Kafka… · 性能瓶颈分类 · 容量治理目标与关键指标

性能优化容量治理全景

基准测试与性能度量

目标=端到端延迟 · 吞吐量 · P99/P999

基准测试性能度量

Topic与Partition规划

目标=分区数估算 · 分区分布策略 · 分区热点识别与再平衡对性能的影响

生产者性能调优

目标=acks · linger.ms · batch.size

生产者性能调优acks

生产者幂等与事务性能

目标=enable.idempote… · transactional.id · 事务超时

生产者幂等事务性能

消费者性能调优

目标=fetch.min.bytes · fetch.max.wait.ms · max.partition.fetc…

消费者性能调优fetch.min.by…

消费者组再平衡优化

目标=Cooperative Sti… · 静态成员 · session.timeout.ms

消费者组再平衡优…Cooperative

Broker端线程模型

目标=num.network.thr… · num.io.threads · num.replica.fetche…

Broker端线程模型

Broker JVM与操作系统调优

目标=堆内存 · GC选择 · 页缓存

日志存储与清理策略

目标=log.segment.byt… · log.retention · log.cleanup.policy

日志存储清理策略

副本同步与ISR治理

目标=replica.lag.tim… · min.insync.replica… · unclean.leader.ele…

ISR副本同步

分区Leader均衡与迁移

目标=自动Leader均衡 · 优先副本选举 · 分区重分配与跨机架感知的容量治理

网络与机架感知

目标=listeners · advertised.listene… · replica.selector.c…

网络机架感知

Tiered Storage分层存储

目标=远程存储配置 · 本地保留策略 · 冷热数据分离与容量扩展实战

Schema Registry性能

目标=Avro/Protobuf/J… · 兼容性策略 · 缓存

Kafka Connect性能

目标=Source/Sink任务并行… · offset管理 · 批量写入

ksqlDB与流处理性能

目标=查询并行度 · 状态存储 · 窗口聚合

ksqlDB流处理性能

Confluent Control Center与监控

目标=JMX指标 · Metrics Reporter · Prometheus/Grafana

ConfluentControl

容量规划方法论

目标=基于业务增长 · 峰值吞吐 · 保留周期

容量规划方法论目标=基于业务增…

集群扩展与缩容

目标=Broker扩容 · 分区迁移 · 数据再平衡

集群扩展缩容

多租户与配额治理

目标=user/client quo… · 带宽配额 · 请求配额

多租户配额治理

性能故障排查

目标=高延迟 · 低吞吐 · ISR频繁收缩

性能故障排查目标=高延迟

压测与容量验证

目标=使用kafka-produce… · kafka-consumer-per… · Trogdor进行全链路压测与瓶颈定…

压测容量验证

安全与性能平衡

目标=SSL/SASL · ACL · 加密开销

安全性能平衡

跨集群复制与MirrorMaker 2

目标=复制吞吐 · topic过滤 · offset同步

MirrorMaker跨集群复制

Confluent Cloud容量治理

目标=集群类型选择 · CKU/弹性伸缩 · 网络出口

自动化运维与弹性

目标=Ansible/Terrafo… · Cruise Control · 自动扩缩容

自动化运维弹性

数据生命周期与成本优化

目标=保留策略 · 压缩 · 去重

数据生命周期成本优化

目标=电商大促场景下Confluen…

真实案例Confluen

目标=从监控发现瓶颈到调优 · 扩容 · 验证与治理闭环的端到端项目演练

综合实战目标=从监控发现…