首页
›
AI与大模型
›
022-数据湖仓一体:Delta Lake、Apache Iceberg与Apache Hudi
›
《Delta Lake事务机制与实战精讲》
VIP20
本课程属于:022-数据湖仓一体:Delta Lake、Apache Iceberg与Apache Hudi
AI与大模型 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
Delta Lake事务机制与实战精讲
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导入
学习目标 · 课程大纲 · Delta Lake在数据湖架构中的…
课程导入
学习目标
02
Delta Lake基础
核心概念(表 · 事务日志 · 快照)
Delta
Lake
03
环境搭建
安装配置Spark与Delta La… · 创建第一个Delta表
环境搭建
Spark
04
事务机制核心
ACID事务特性 · 事务日志(Delta Log)的结构…
事务机制核心
ACID
05
事务日志深入
日志条目类型(commit · checkpoint) · 如何记录每次操作
事务日志深入
commit
06
并发控制
乐观并发控制原理 · 版本冲突检测与解决策略
并发控制
乐观并发控制原理
07
时间旅行
利用事务日志实现数据版本查询 · 回滚与历史审计
时间旅行
利用事务日志实现…
08
数据写入操作
INSERT · UPDATE · MERGE等写操作的事务性保证
数据写入操作
INSERT
09
数据读取操作
快照隔离 · 读取一致性 · 流式读取与增量处理
数据读取操作
快照隔离
10
Schema演变
自动演进 · 约束与数据质量保证
Schema
演变
11
表维护
VACUUM清理旧版本 · OPTIMIZE优化文件布局
表维护
VACUUM
12
性能调优
事务日志压缩 · Z-Ordering · 分区修剪等优化技巧
性能调优
事务日志压缩
13
案例实战
使用Delta Lake实现数据湖的…
案例实战
Delta
14
案例实战
构建实时数据管道 · 利用Delta Lake的流式读写
案例实战
构建实时数据管道
15
案例实战
处理慢变更维度(SCD)类型2 · 使用MERGE实现
案例实战
SCD
16
常见问题
事务冲突处理 · 日志膨胀 · 并发写入失败等
常见问题
事务冲突处理
17
常见问题
与Hive · Parquet等传统格式的对比与迁移
常见问题
Hive
18
常见问题
Delta Lake与数据湖方案(如… · Iceberg)的比较
常见问题
Delta
19
高级特性
Change Data Feed(C…
高级特性
Change
20
高级特性
动态分区覆盖 · 生成列与约束
高级特性
动态分区覆盖
21
高级特性
Delta Lake在Databri…
高级特性
Delta
22
综合实战
设计一个基于Delta Lake的湖…
综合实战
Delta
23
综合实战
实现数据回滚与审计 · 满足合规要求
综合实战
实现数据回滚
24
综合实战
多表事务与跨表一致性处理
综合实战
多表事务
25
综合实战
使用Delta Lake进行机器学习…
综合实战
Delta
26
综合实战
监控与运维Delta Lake表
综合实战
Delta
27
综合实战
与数据目录(如Hive Metast…
综合实战
Hive
28
综合实战
Delta Lake在云环境(AWS · Azure · GCP)上的实践
综合实战
Delta
29
综合实战
性能基准测试与调优实战
综合实战
性能基准测试
30
课程总结
核心要点回顾 · 最佳实践 · 学习路径建议
课程总结
核心要点回顾
所属VIP或分类
同VIP:Apache-Hudi-写入模式与增量查询速览
同VIP:Apache-Iceberg-表格式入门必修课
同VIP:Delta-Lake-Iceberg-Hudi-三剑客初探