VIP20
本课程属于：020-云原生日志平台组件拓扑图 云原生架构与平台工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

云原生日志平台采集存储链路架构与部署

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
云原生日志平台的重要性 · 整体架构概览 · 从采集到存储的端到端流程
课程导论云原生日志平台的…
02
日志采集基础
日志格式标准（JSON · Syslog · 多行日志）
日志采集基础JSON
03
Fluentd 核心组件
Input · Parser · Filter
Fluentd核心组件
04
Fluent Bit 轻量采集
Fluent Bit 架构 · 与 Fluentd 的对比 · 在 Kubernetes 中的 Da…
FluentBit
05
Logstash 采集与处理
Logstash 的 Pipelin… · Input/Filter/Outpu… · 性能调优
Logstash采集
06
Vector 新一代采集器
Vector 的架构 · Transform 概念 · 与 Fluentd/Logstash…
Vector新一代采集器
07
Kubernetes 日志采集方案
DaemonSet 模式 · Sidecar 模式 · Node 级 vs Pod 级采集
Kubernetes日志采集方案
08
日志传输与缓冲
Kafka 作为日志缓冲层 · Topic 设计 · 分区策略
日志传输缓冲
09
消息队列选型
Kafka vs RabbitMQ…
消息队列选型Kafka
10
日志聚合与路由
基于 Logstash/Fluent… · 多租户隔离 · 标签与元数据注入
日志聚合路由
11
日志清洗与结构化
Grok 解析 · 正则提取 · JSON 解析
日志清洗结构化
12
日志过滤与脱敏
敏感信息检测 · 字段脱敏 · 丢弃低级别日志
日志过滤脱敏
13
日志存储引擎选型
Elasticsearch 基础 · OpenSearch · Loki
日志存储引擎选型Elasticsearc…
14
Elasticsearch 集群架构
节点角色（Master/Data/I… · 分片与副本 · 索引生命周期管理
Elasticsearc…集群架构
15
Loki 日志存储
Loki 架构 · Chunk 存储 · Index 设计
Loki日志存储
16
ClickHouse 日志存储
ClickHouse 表引擎选择（M… · 物化视图 · 高性能写入优化
ClickHouse日志存储
17
日志索引与检索
全文搜索 · 字段查询 · 聚合分析
日志索引检索
18
日志压缩与归档
索引压缩算法 · 冷热分层存储 · S3/OSS 归档策略
日志压缩归档
19
日志可视化与仪表盘
Kibana 基础 · Grafana 日志面板 · Loki 查询语言 LogQL
日志可视化仪表盘
20
日志告警与通知
ElastAlert · Grafana Alerting · 基于日志指标的告警规则
日志告警通知
21
日志平台高可用设计
多副本采集 · Kafka 集群 · ES 跨集群搜索
日志平台高可用设…多副本采集
22
日志平台安全
TLS 加密传输 · RBAC 权限控制 · 审计日志
日志平台安全TLS
23
日志平台监控与运维
采集器健康检查 · Kafka 消费者滞后 · ES 集群状态监控
日志平台监控运维
24
日志成本优化
日志采样 · 降采样 · 保留策略
日志成本优化日志采样
25
多集群日志统一管理
联邦采集 · 全局索引 · 跨集群查询
多集群日志统一管…联邦采集
26
云原生环境下的日志采集挑战
Sidecar 资源开销 · 日志丢失 · 时间戳乱序
云原生环境下的日…Sidecar
27
日志平台与可观测性体系
Metrics · Traces · Logs 三支柱关联
日志平台可观测性体系
28
实战案例一
基于 Fluent Bit + Ka…
实战案例一Fluent
29
实战案例二
基于 Logstash + Kafk…
实战案例二Logstash
30
课程总结与展望
云原生日志平台未来趋势 · eBPF 日志采集 · AI 日志分析
课程总结云原生日志平台未…