VIP20
本课程属于：020-云原生日志平台组件拓扑图 云原生架构与平台工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

云原生日志平台通信架构与性能调优

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
日志平台在微服务架构中的核心价值 · 常见痛点（数据丢失 · 延迟高
课程导论日志平台
02
日志生命周期全景
从产生 · 采集 · 传输
日志生命周期全景从产生
03
采集端拓扑设计
Filebeat vs Fluent… · Sidecar模式与DaemonSe…
采集端拓扑设计Filebeat
04
传输层协议选型
TCP vs UDP vs HTTP… · 可靠性 · 吞吐量与背压机制
传输层协议选型TCP
05
缓冲层策略
内存缓冲 vs 磁盘缓冲 vs 混合… · Kafka作为核心缓冲层的分区与副本…
缓冲层策略vs
06
Kafka拓扑调优
Partition数量与Consum… · Replication Factor…
Kafka拓扑调优
07
流处理引擎拓扑
Logstash vs Flink… · 有状态处理与无状态处理的架构差异
流处理引擎拓扑Logstash
08
存储层架构选型
Elasticsearch vs C… · 索引策略与压缩算法对比
存储层架构选型Elasticsearc…
09
Elasticsearch集群拓扑
Master-Data-Coordi… · 分片分配策略与冷热架构
Elasticsearc…集群拓扑
10
查询层拓扑设计
Kibana vs Grafana… · 查询路由与缓存层架构
查询层拓扑设计Kibana
11
端到端通信机制（一）
生产者-消费者模型中的异步 · 同步 · 批量发送与确认机制
端到端通信机制生产者
12
端到端通信机制（二）
背压（Backpressure）原理 · 滑动窗口协议与限流算法在日志管道中的…
端到端通信机制Backpressure
13
端到端通信机制（三）
重试机制 · 幂等性保证与死信队列（DLQ）的拓扑…
端到端通信机制重试机制
14
网络拓扑优化
跨机房/跨云日志传输的专线 · 公网 · 代理与压缩策略
网络拓扑优化跨机房
15
数据压缩与序列化
Snappy · Zstd · Gzip压缩对比
数据压缩序列化
16
高可用拓扑设计
单点故障消除 · 多副本采集 · 多活数据中心日志同步架构
高可用拓扑设计单点故障消除
17
弹性伸缩机制
基于吞吐量的自动扩缩容（HPA） · Kafka分区重平衡与Consume…
弹性伸缩机制HPA
18
监控与可观测性
日志管道自身的Metrics（延迟 · 吞吐 · 错误率）
监控可观测性
19
安全通信拓扑
TLS/mTLS加密传输 · RBAC权限模型 · 审计日志与网络隔离策略
安全通信拓扑TLS/mTLS
20
成本控制拓扑
日志采样 · 降采样 · 冷热数据分离
成本控制拓扑日志采样
21
实战案例一
电商大促场景下日志平台拓扑的容量规划…
实战案例一电商大促场景下日…
22
实战案例二
金融核心交易系统日志的零丢失拓扑设计…
实战案例二金融核心交易系统…
23
实战案例三
IoT海量设备日志的轻量级采集拓扑与…
实战案例三IoT
24
拓扑可视化工具
使用C4模型 · PlantUML · Draw.io绘制日志平台组件拓扑图…
拓扑可视化工具C4
25
性能压测方法
使用JMeter · Locust · Kafka自带的性能工具对日志管道进…
性能压测方法JMeter
26
调优方法论
从瓶颈分析（CPU · 内存 · IO
调优方法论CPU
27
常见故障排查
日志丢失 · 重复 · 乱序
常见故障排查日志丢失
28
未来趋势
eBPF在日志采集中的应用 · OpenTelemetry统一观测拓… · Serverless日志架构
未来趋势eBPF
29
课程总结
日志平台拓扑设计的黄金法则 · 通信机制调优的Checklist
课程总结日志平台拓扑设计…
30
综合大作业
设计一个日处理10TB日志的高可用 · 低成本 · 可观测的日志平台拓扑
综合大作业TB