VIP20
本课程属于：022-数据湖仓一体：Delta Lake、Apache Iceberg与Apache Hudi AI与大模型 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Delta Lake 数据版本管理精讲

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 课程大纲 · Delta Lake 在数据湖架构中…
课程导入学习目标
02
Delta Lake 基础
核心概念 · ACID 事务 · 数据版本管理的重要性
DeltaLake
03
环境搭建
安装 Spark · 配置 Delta Lake · 创建第一个 Delta 表
环境搭建Spark
04
数据写入与版本生成
INSERT · OVERWRITE · MERGE 等操作如何产生新版本
数据写入版本生成
05
时间旅行查询
使用 VERSION AS OF 和…
时间旅行查询VERSION
06
版本管理操作
查看历史版本 · 版本元数据 · 版本清理策略
版本管理操作查看历史版本
07
数据更新与删除
UPDATE · DELETE 操作对版本的影响及实现…
数据更新删除
08
合并操作（MERGE）
UPSERT 场景下的版本管理
MERGE合并操作
09
模式演化
ALTER TABLE 操作与版本兼…
模式演化ALTER
10
事务日志详解
Delta Log 的结构 · 提交信息 · 检查点
事务日志详解Delta
11
并发控制
多写入者冲突处理 · 乐观并发 · 隔离级别
并发控制多写入者冲突处理
12
版本回滚
如何回滚到指定版本 · 注意事项
版本回滚如何回滚到指定版…
13
数据恢复
误删数据恢复 · 使用时间旅行恢复
数据恢复误删数据恢复
14
性能优化
版本管理对查询性能的影响 · 优化策略
性能优化版本管理对查询性…
15
清理策略
VACUUM 命令 · 保留期设置 · 清理与时间旅行的权衡
清理策略VACUUM
16
与 Spark 集成
DataFrame API · SQL 操作中的版本管理
Spark集成
17
与 Flink 集成
流式写入与版本管理
Flink集成
18
与 Presto/Trino 集成
查询 Delta 表的历史版本
Presto/Trino集成
19
案例实战
电商订单数据版本管理
案例实战电商订单数据版本…
20
案例实战
金融交易数据审计与回滚
案例实战金融交易数据审计
21
案例实战
实时数据湖中的版本管理
案例实战实时数据湖
22
常见问题
版本膨胀 · 日志过大 · 清理失败等
常见问题版本膨胀
23
常见问题
时间旅行查询失败 · 版本不存在等
常见问题时间旅行查询失败
24
常见问题
并发写入冲突 · 数据一致性
常见问题并发写入冲突
25
最佳实践
版本管理策略 · 保留期设置 · 监控
最佳实践版本管理策略
26
最佳实践
数据治理与合规性 · 审计
最佳实践数据治理
27
高级主题
Delta Sharing 与版本管…
高级主题Delta
28
高级主题
Delta Lake 与数据网格
高级主题Delta
29
综合实战
构建支持版本管理的数据管道
综合实战构建支持版本管理…
30
课程总结
核心要点回顾 · 学习路径建议 · 未来趋势
课程总结核心要点回顾