VIP20
本课程属于：022-数据湖仓一体：Delta Lake、Apache Iceberg与Apache Hudi AI与大模型 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Apache Hudi 写入模式与增量查询速览

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 核心概念 · 整体框架
课程导入学习目标
02
Hudi 基础
数据湖与 Hudi 简介 · 表格式 · 核心特性
Hudi数据湖
03
写入模式概览
COW 与 MOR 模式的区别 · 适用场景
写入模式概览COW
04
COW 模式详解
写时复制原理 · 文件布局 · 写入流程
COW模式详解
05
MOR 模式详解
写时合并原理 · 列式与行式文件 · 压缩机制
MOR模式详解
06
写入操作类型
插入 · 更新 · 删除
写入操作类型插入
07
写入方式
Spark 批量写入 · Flink 流式写入 · DeltaStreamer
写入方式Spark
08
写入配置
表名 · 路径 · 分区
写入配置表名
09
索引机制
Hudi 索引类型 · 布隆过滤器 · HBase 索引
索引机制Hudi
10
写入流程
数据加载 · 索引查找 · 文件写入
写入流程数据加载
11
增量查询基础
增量查询概念 · 时间旅行 · 读取优化查询
增量查询基础增量查询概念
12
增量查询实现
Spark 增量查询 · Flink 增量查询 · Hive 同步
增量查询实现Spark
13
增量查询配置
beginInstantTime · endInstantTime · read.streaming
增量查询配置beginInstant…
14
增量查询实战
使用 Spark 读取增量数据 · 处理 CDC
增量查询实战Spark
15
时间旅行查询
使用时间戳查询历史快照
时间旅行查询使用时间戳查询历…
16
读取优化查询
MOR 表读取优化 · 合并列式文件
读取优化查询MOR
17
写入模式选择
根据场景选择 COW 或 MOR · 权衡
写入模式选择COW
18
性能调优
写入并行度 · 文件大小 · 压缩策略
性能调优写入并行度
19
常见问题
写入失败 · 数据不一致 · 查询延迟
常见问题写入失败
20
案例实战
电商订单表写入与增量查询
案例实战电商订单表写入
21
案例实战
日志数据流式写入与增量消费
案例实战日志数据流式写入
22
案例实战
CDC 数据同步与增量处理
案例实战CDC
23
与 Spark 集成
DataFrame 写入 · SQL 写入 · 读取
Spark集成
24
与 Flink 集成
DataStream 写入 · Table API · CDC
Flink集成
25
与 Hive 集成
同步 Hive 表 · 查询
Hive集成
26
与 Presto/Trino 集成
查询 Hudi 表
Presto/Trino集成
27
运维管理
表维护 · 清理 · 归档
运维管理表维护
28
监控与调优
指标 · 日志 · 性能分析
监控调优
29
综合实战
构建实时数据湖管道
综合实战构建实时数据湖管…
30
总结与展望
Hudi 生态 · 未来趋势 · 学习路径
Hudi生态