VIP20

本课程属于：091-Confluent Kafka实时数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Confluent Kafka数据平台可观测性工程

共计 30 章节

可可资料掘金营 · 点击在线试看

可观测性工程导论

目标=可观测性定义 · 三大支柱（指标 · 日志

可观测性工程导论目标=可观测性定…

Confluent Kafka平台架构与可观测性触点

目标=Broker · Controller · Connect

监控指标体系设计

目标=基于JMX · Metrics API · Confluent Metrics…

监控指标体系设计JMX

日志采集与结构化

目标=使用Filebeat/Flue… · Connect · ksqlDB日志

日志采集结构化

分布式追踪集成

目标=在Kafka客户端与Confl… · 实现端到端消息流转追踪

分布式追踪集成Kafka

Confluent Control Center可观测性功能

目标=利用C3监控集群健康 · 消费延迟 · 连接器状态与流处理应用

ConfluentControl

Prometheus与Grafana监控栈

目标=部署JMX Exporter · Kafka Exporter · 配置Prometheus抓取与Gra…

PrometheusGrafana

关键Broker指标深度解析

目标=ActiveControlle… · UnderReplicatedPar… · OfflinePartitions

Topic与Partition级别可观测性

目标=消息速率 · 字节速率 · 分区Leader分布

Consumer Group延迟监控

目标=消费滞后 · 提交偏移量 · Rebalance频率

Connect集群可观测性

目标=连接器状态 · 任务失败 · Worker指标

Connect集群可观测性

Schema Registry可观测性

目标=Schema注册/兼容性检查指… · 请求延迟 · 错误率与存储后端监控

ksqlDB与流处理可观测性

目标=查询延迟 · 处理吞吐 · 状态存储指标

ksqlDB流处理可观测性

日志聚合与告警

目标=使用Elasticsearch… · 配置基于日志模式的告警（如Broke… · 认证失败）

日志聚合告警

分布式追踪实战

目标=使用Jaeger/Tempo可… · 定位跨服务延迟瓶颈

分布式追踪实战Jaeger/Tempo

SLO与错误预算

目标=为Kafka平台定义可用性 · 延迟 · 持久性SLO

SLO错误预算

告警策略与降噪

目标=设计多级告警（Warning/… · 抑制规则 · 分组与路由

告警策略降噪

容量规划与趋势分析

目标=基于历史指标预测磁盘 · 网络 · CPU需求

容量规划趋势分析

安全与审计可观测性

目标=监控认证失败 · ACL变更 · 审计日志

安全审计可观测性

多集群与跨数据中心可观测性

目标=监控Cluster Linki… · Replicator · MM2的复制延迟与数据一致性

多集群跨数据

Kubernetes环境下的可观测性

目标=Confluent for K… · Pod日志 · 服务发现与动态扩缩容监控

Kubernetes环境下的可观测性

性能调优与可观测性闭环

目标=利用指标定位瓶颈（如网络线程 · 磁盘IO） · 调整配置并验证效果

性能调优可观测性闭环

故障排查案例

目标=Broker宕机 · 分区不可用 · 消费者滞后激增

故障排查案例Broker

可观测性数据管道

目标=使用Kafka自身作为可观测性… · 采集 · 转换并路由指标/日志/追踪到后端

可观测性数据管道Kafka

成本优化与可观测性

目标=监控资源使用效率 · 识别闲置Topic · 过度分区

成本优化可观测性

自动化与自愈

目标=基于可观测性事件触发Lambd… · 扩容Broker）

自动化自愈

可观测性即代码

目标=使用Terraform · Ansible · GitOps管理监控配置

可观测性即代码Terraform

数据质量与血缘可观测性

目标=监控消息内容异常 · Schema演化影响 · 追踪数据血缘与影响分析

数据质量血缘可观测性

混沌工程与可观测性验证

目标=注入故障（如网络延迟 · Broker Kill）验证监控覆盖…

混沌工程可观测性验证

可观测性成熟度模型与持续改进

目标=评估当前成熟度 · 制定演进路线图 · 建立反馈循环与复盘机制

可观测性成熟度模…持续改进