VIP20
本课程属于：020-云原生日志平台组件拓扑图 云原生架构与平台工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Fluent Bit数据管道设计：组件拓扑中采集链路优化

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
Fluent Bit概述
Fluent Bit的诞生背景 · 核心设计理念 · 与Fluentd的对比
FluentBit
02
核心架构解析
事件驱动模型 · 插件体系结构 · 内部数据流（Input→Parser…
核心架构解析事件驱动模型
03
采集链路全景
从数据源到目标存储的完整路径 · 各阶段延迟来源分析 · 端到端链路追踪思路
采集链路全景从数据源到目标存…
04
Input插件优化（上）
CPU_Polling vs Eve… · tail插件性能调优（inotify… · systemd/journald采集…
Input插件优化
05
Input插件优化（下）
MQTT/TCP/UDP输入优化 · Prometheus Scrape输… · 自定义Input插件开发要点
Input插件优化
06
Parser解析器优化
正则表达式性能陷阱 · LTSV/JSON/CSV解析器选择 · 多行解析（Multiline）最佳实…
Parser解析器优化
07
Filter过滤器优化
Grep/Lua/Throttle/… · 过滤器链顺序对吞吐量的影响 · 条件过滤与数据降噪
Filter过滤器优化
08
Buffer与内存管理
内存缓冲区（Memory Buffe… · 存储层（Storage Layer）… · filesystem与memory模…
Buffer内存管理
09
Routing路由策略
Tag匹配规则优化 · 动态路由（Dynamic Routi… · 多Output并行分发与负载均衡
Routing路由策略
10
Output插件优化（上）
Elasticsearch批量写入优… · Kafka生产者参数调优 · S3上传并发控制
Output插件优化
11
Output插件优化（下）
HTTP/Splunk/OpenTe… · 重试与背压（Backpressure… · Output失败处理策略
Output插件优化
12
多线程与并发
Fluent Bit线程模型 · worker数量调优 · 协程（Coroutine）在I/O密…
多线程并发
13
数据压缩与序列化
gzip/zstd/snappy压缩… · MessagePack vs JSO… · 压缩对网络带宽的影响
数据压缩序列化
14
网络传输优化
TLS/SSL握手优化 · Keepalive连接复用 · TCP_NODELAY与Nagle算…
网络传输优化TLS/SSL
15
配置最佳实践
配置文件组织（include机制） · 环境变量注入 · 动态配置重载（Reload）与热更新
配置最佳实践include
16
监控与可观测性
内置Metrics暴露（/api/v… · Prometheus集成 · Grafana仪表板设计
监控可观测性
17
日志采集实战（一）
Kubernetes容器日志采集 · 多行日志（Stack Trace）处… · 命名空间隔离
日志采集实战Kubernetes
18
日志采集实战（二）
系统日志（Syslog/Journa… · Windows Event Log采… · 边缘设备日志采集
日志采集实战Syslog/Journ…
19
指标采集实战
Node Exporter指标采集 · 自定义业务指标采集 · 高基数（High Cardinali…
指标采集实战Node
20
Trace数据采集
OpenTelemetry协议集成 · Trace与Log关联 · 采样策略（Head-based vs…
Trace数据采集
21
高可用与容错
主备切换（Active-Standb… · 数据持久化与重放 · 多副本采集去重
高可用容错
22
性能基准测试
使用flb-bench工具 · 吞吐量（Throughput）与延迟… · 性能瓶颈定位
性能基准测试flb-bench
23
内存泄漏排查
Valgrind/ASAN工具使用 · 内存池（Memory Pool）分析 · 常见泄漏模式与修复
内存泄漏排查Valgrind/ASA…
24
CPU优化
火焰图（Flame Graph）生成… · 热点函数优化 · 减少不必要的字符串拷贝
CPU优化
25
大规模部署
Ansible/SaltStack自… · 配置模板管理 · 灰度发布与回滚策略
大规模部署Ansible/Salt…
26
安全加固
最小权限原则 · 敏感信息脱敏（Masking） · 输入验证与防止注入
安全加固最小权限原则
27
自定义插件开发（C语言）
插件生命周期 · 回调函数实现 · 内存管理注意事项
自定义插件开发C语言
28
自定义插件开发（Go/Wasmer）
Go SDK使用 · Wasm插件沙箱机制 · 与原生C插件性能对比
Go/Wasmer自定义插件开发
29
案例研究（一）
某电商平台日志采集链路优化——从10…
案例研究某电商平台日志采…
30
案例研究（二）
某金融系统Trace采集链路优化——…
案例研究Trace