VIP20
本课程属于：088-金融压力测试异常波动复盘 金融科技风控与量化工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Kafka实时流场景下的压力测试技巧

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
Kafka压力测试概述
什么是Kafka压力测试 · 为什么需要压力测试 · 压力测试的核心目标与衡量指标
Kafka压力测试概述
02
Kafka核心架构回顾
Producer · Broker · Consumer
Kafka核心架构回顾
03
压测环境准备
硬件选型建议 · 操作系统参数调优（文件句柄 · 网络参数）
压测环境准备硬件选型建议
04
Kafka自带压测工具介绍
kafka-producer-per…
Kafka自带压测工具介绍
05
Producer压测基础
消息大小 · acks设置 · batch.size
Producer压测基础
06
Consumer压测基础
消费线程数 · fetch.min.bytes · max.poll.records对消…
Consumer压测基础
07
压测指标详解
吞吐量（TPS/MBps） · 延迟（p50/p99/p999） · CPU使用率
压测指标详解TPS/MBps
08
单分区与多分区压测对比
分区数对Producer吞吐量的影响 · 分区数对Consumer并行消费能力…
单分区多分区压测对比
09
消息大小对性能的影响
小消息（100B） · 中等消息（1KB） · 大消息（1MB）的压测策略与结果分析
消息大小对性能的…小消息
10
acks参数深度压测
acks=0 · acks=1 · acks=all 在不同场景下的吞吐…
acks参数深度压测
11
压缩算法压测对比
gzip · snappy · lz4
压缩算法压测对比gzip
12
批量发送参数调优
batch.size与linger.… · 如何平衡延迟与吞吐量
批量发送参数调优batch.size
13
缓冲内存与阻塞机制
buffer.memory与max.…
缓冲内存阻塞机制
14
Consumer拉取参数调优
fetch.min.bytes · fetch.max.wait.ms · max.partition.fetc…
Consumer拉取参数调优
15
消费组与再平衡压测
消费者数量变化时对消费延迟的影响 · 再平衡时间对实时性的冲击
消费组再平衡压测
16
磁盘性能压测
顺序读写与随机读写对Kafka日志刷… · Page Cache的作用
磁盘性能压测Kafka
17
网络带宽压测
千兆与万兆网络下Kafka的吞吐瓶颈 · 网卡多队列与RSS配置
网络带宽压测Kafka
18
CPU密集型压测
序列化/反序列化 · 压缩/解压缩对CPU的消耗 · 如何通过调整参数降低CPU负载
CPU密集型压测
19
内存与堆配置压测
JVM堆大小 · GC策略（G1 vs CMS）对Ka…
内存堆配置压测
20
多Topic压测场景
不同Topic数量 · 不同分区数混合压测时的资源竞争与隔离…
Topic压测场景
21
事务与幂等性压测
开启enable.idempoten…
事务幂等性压测
22
SSL/TLS加密压测
启用SSL加密后对吞吐量的下降比例 · 证书与密码套件的选择建议
SSL/TLS加密压测
23
SASL认证压测
PLAIN · SCRAM · Kerberos认证机制对性能的影响…
SASL认证压测
24
跨数据中心压测
异地多活场景下的网络延迟对Kafka…
跨数据心压测
25
压测脚本自动化
使用Python + conflue… · 实现参数化与结果采集
压测脚本自动化Python
26
压测结果可视化
使用Prometheus + Gra…
压测结果可视化Prometheus
27
压测报告编写
如何整理压测数据 · 绘制性能曲线图 · 给出调优建议
压测报告编写如何整理压测数据
28
常见瓶颈排查
CPU飙高 · 内存溢出 · 磁盘IO等待
常见瓶颈排查CPU
29
生产环境压测注意事项
避免影响线上业务 · 灰度压测策略 · 回滚方案
生产环境压测注意…避免影响线上业务
30
综合实战案例
模拟双十一实时日志采集场景 · 从0开始设计压测方案 · 执行
综合实战案例模拟双十一实时日…