VIP20
本课程属于：091-Confluent Kafka实时数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Confluent实时数据管道与流处理平台工程

共计 30 章节
可可资料掘金营 · 点击在线试看
01
实时数据管道与流处理概览
目标=理解事件流 · 实时数据管道与流处理的核心概念 · 明确Confluent平台在其中的定…
实时数据管道流处理概览
02
Confluent平台架构与核心组件
目标=掌握Confluent Pla… · 理解Broker · Controller
Confluent平台架构
03
Kafka主题与分区工程实践
目标=学习主题创建 · 分区规划 · 副本配置
Kafka主题
04
生产者与消费者客户端开发
目标=掌握Kafka Produce… · 序列化机制 · 批量发送
生产者消费者客户端开发
05
Schema Registry与数据契约
目标=理解Avro · Protobuf · JSON Schema的演进规则
SchemaRegistry
06
Kafka Connect实现数据集成
目标=学习Source与Sink连接… · 使用JDBC · Debezium
KafkaConnect
07
ksqlDB流处理基础
目标=掌握ksqlDB的流与表抽象 · 查询语言 · 持续查询与物化视图
ksqlDB流处理基础
08
Kafka Streams核心API开发
目标=学习Topology构建 · KStream与KTable · 状态存储
KafkaStreams
09
流处理时间语义与窗口计算
目标=深入事件时间 · 处理时间与摄入时间 · 掌握滚动窗口
流处理时间语义窗口计算
10
Exactly-Once语义与事务
目标=理解至少一次 · 至多一次与精确一次语义 · 配置幂等生产者与事务生产者
Exactly-Once语义
11
Confluent Schema演进与兼容性治理
目标=实践向后兼容 · 向前兼容与完全兼容模式 · 使用Schema Registry的…
ConfluentSchema
12
实时数据管道监控与可观测性
目标=使用Confluent Con… · JMX指标 · Prometheus与Grafana…
实时数据管道监控可观测性
13
Confluent平台安全与访问控制
目标=配置SASL · SSL · ACL
Confluent平台安全
14
多数据中心与集群链接
目标=学习Confluent Rep… · Cluster Linking与Mi… · 设计跨地域复制
多数据集群链接
15
流处理应用性能调优
目标=分析生产者批处理 · 压缩 · 消费者拉取
流处理应用性能调…目标=分析生产者…
16
Kafka Streams状态存储与容错
目标=掌握RocksDB状态存储 · 变更日志主题 · 待机副本与恢复流程
KafkaStreams
17
实时数据管道中的错误处理与死信队列
目标=设计重试 · 退避 · 死信主题与人工干预流程
实时数据管道错误处理
18
Confluent Cloud工程实践
目标=在Confluent Clou… · 主题 · 连接器与ksqlDB应用
ConfluentCloud
19
使用ksqlDB构建实时物化视图与API
目标=通过ksqlDB创建持久化查询 · 物化视图与Pull Query · 结合REST API对外提供实时数据…
ksqlDBAPI
20
Kafka Streams与外部系统集成
目标=使用Kafka Streams… · 缓存与微服务 · 处理异步请求与背压
KafkaStreams
21
实时数据管道的数据质量与校验
目标=在流处理中实施数据质量规则 · 模式校验 · 空值检测与异常值过滤
实时数据管道的数…校验
22
事件驱动微服务与CQRS
目标=基于Confluent平台实现… · 事件溯源与CQRS模式 · 使用Kafka主题作为事件存储与命令…
CQRS事件驱动微服务
23
流处理中的连接与丰富
目标=掌握KStream-KTabl… · KTable-KTable · KStream-KStream Jo…
流处理连接
24
Confluent平台容量规划与集群运维
目标=学习Broker硬件选型 · 磁盘规划 · 分区分布
Confluent平台容量规划
25
实时数据管道CI/CD与基础设施即代码
目标=使用Terraform · Ansible · GitOps与Confluent C…
CI/CD实时数据管道
26
流处理测试策略
目标=掌握TopologyTestD… · 嵌入式Kafka · Testcontainers与集成测…
流处理测试策略TopologyTest…
27
Confluent平台故障排查实战
目标=通过日志 · 指标 · 线程转储与Kafka工具诊断Brok…
Confluent平台故障排查实战
28
实时数据管道成本优化
目标=分析Confluent Clo… · 优化分区 · 保留策略
实时数据管道成本…Confluent
29
行业实时数据管道案例
目标=剖析金融风控 · 物联网 · 电商实时推荐与物流追踪等场景
行业实时数据管道…目标=剖析金融风…
30
综合项目
目标=构建端到端实时数据管道 · Schema治理 · 流处理转换
综合项目目标=构建端到端…