VIP8
本课程属于：085-工业数据平台与时序数据工程 智能机器人、自动化与智能装备工程 · 共 8 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Kafka工业数据流与消息管道

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=工业数据流与消息管道的定义 · Kafka在工业场景中的价值 · 课程学习目标与整体知识框架
课程导入目标=工业数据流
02
Kafka基础概念
目标=主题 · 分区 · 副本
Kafka基础概念
03
Kafka架构与生态
目标=ZooKeeper与KRaft… · Kafka Connect · Kafka Streams
Kafka架构
04
环境搭建与快速入门
目标=单机与集群部署 · Docker安装 · 命令行工具使用
环境搭建快速入门
05
生产者核心机制
目标=消息发送流程 · 分区策略 · 序列化器
生产者核心机制目标=消息发送流…
06
消费者核心机制
目标=消费者组 · 分区分配策略 · 位移提交
消费者核心机制目标=消费者组
07
主题与分区管理
目标=主题创建与配置 · 分区扩容 · 副本分配
主题分区管理
08
Kafka存储与性能
目标=日志分段 · 索引文件 · 页缓存
Kafka存储
09
高可用与数据一致性
目标=副本同步机制 · ISR · Leader选举
高可用数据一致性
10
消息可靠性与幂等性
目标=至少一次 · 至多一次 · 精确一次语义
消息可靠性幂等性
11
Kafka监控与运维
目标=JMX指标 · Prometheus与Grafana… · 日志管理
Kafka监控
12
Kafka安全机制
目标=SSL/TLS加密 · SASL认证 · ACL授权
Kafka安全机制
13
Kafka Connect与数据集成
目标=Source与Sink连接器 · CDC变更捕获 · 数据库与工业协议数据接入
KafkaConnect
14
Kafka Streams流处理
目标=拓扑构建 · KStream与KTable · 窗口操作
KafkaStreams
15
工业数据采集与接入
目标=OPC UA · Modbus · MQTT等工业协议数据通过Kafka…
工业数据采集接入
16
工业数据管道设计模式
目标=数据采集 · 缓冲 · 清洗
工业数据管道设计…目标=数据采集
17
实时数据处理案例
目标=设备状态监控 · 异常检测 · 预测性维护
实时数据处理案例目标=设备状态监…
18
Kafka与大数据生态集成
目标=与Hadoop · Spark · Flink
Kafka大数据生态集成
19
Kafka与云原生及容器化
目标=Kubernetes部署 · Strimzi Operator · Helm Chart
Kafka云原生
20
性能调优与压测
目标=生产者与消费者参数调优 · Broker配置优化 · 基准测试工具与容量规划方法
性能调优压测
21
常见问题与故障处理
目标=消息丢失 · 重复消费 · 消费延迟
常见问题故障处理
22
数据治理与Schema管理
目标=Avro · Protobuf · JSON Schema
Schema数据治理
23
工业数据管道实战项目一
目标=从PLC到Kafka的实时数据…
工业数据管道实战…PLC
24
工业数据管道实战项目二
目标=基于Kafka Streams…
工业数据管道实战…Kafka
25
工业数据管道实战项目三
目标=Kafka与Flink集成的实…
工业数据管道实战…Kafka
26
工业数据管道实战项目四
目标=跨工厂数据同步与云边协同的消息…
工业数据管道实战…目标=跨工厂数据…
27
Kafka在工业物联网中的最佳实践
目标=主题命名 · 分区规划 · 数据保留
Kafka工业物联网
28
Kafka新特性与版本演进
目标=KRaft · Tiered Storage · KIP演进
Kafka新特性
29
综合架构设计
目标=面向工业场景的端到端数据流与消…
综合架构设计目标=面向工业场…
30
课程总结与进阶路线
目标=核心知识回顾 · 能力自评 · 进阶学习资源与工业项目落地建议
课程总结进阶路线