VIP12
本课程属于：040-金融湖仓与列式数据工程 智能金融与金融工程 · 共 12 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Iceberg快照、Time Travel与版本回溯实战

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=Iceberg快照 · Time Travel与版本回溯的学… · 核心价值
课程导入Iceberg
02
数据湖演进与Iceberg定位
目标=从Hive表到数据湖 · Iceberg诞生背景 · 核心特性
Iceberg数据湖演进
03
Iceberg表结构基础
目标=元数据文件 · 清单列表 · 清单文件
Iceberg表结构基础
04
快照核心概念
目标=什么是快照 · 快照的生成时机 · 快照ID
快照核心概念目标=什么是快照
05
快照生成机制
目标=写入 · 追加 · 覆盖
快照生成机制目标=写入
06
Time Travel基础
目标=时间旅行查询的语法 · 按快照ID查询 · 按时间戳查询
TimeTravel
07
版本回溯基础
目标=版本回溯与Time Trave… · 回滚表到指定快照 · 回滚到指定时间点
版本回溯基础Time
08
快照管理命令实战
目标=使用Spark SQL · Flink SQL · Iceberg Java API查看…
快照管理命令实战Spark
09
元数据表详解
目标=snapshots · history · manifests
元数据表详解snapshots
10
Time Travel查询实战
目标=按快照ID查询历史数据 · 按时间戳查询历史数据 · 跨快照对比数据变化
TimeTravel
11
版本回溯操作实战
目标=回滚到指定快照 · 回滚到指定时间戳 · 回滚后验证数据一致性
版本回溯操作实战目标=回滚到指定…
12
快照过期与清理
目标=快照过期策略 · 过期快照删除 · 孤儿文件清理
快照过期清理
13
分支与标签
目标=Iceberg分支 · 标签 · WAP模式
分支标签
14
增量读取与变更数据捕获
目标=基于快照的增量读取 · 变更数据捕获 · 流式读取与版本回溯结合
增量读取变更数据捕获
15
快照与分区演化
目标=分区演化如何影响快照 · Time Travel查询跨分区演化… · 版本回溯后的分区布局
快照分区演化
16
快照与Schema演化
目标=Schema演化如何影响快照 · Time Travel查询跨Sche… · 版本回溯后的Schema状态
Schema快照
17
快照与隐藏分区
目标=隐藏分区对快照的影响 · Time Travel查询的剪枝优化 · 版本回溯后的分区裁剪
快照隐藏分区
18
快照与排序
目标=Z-order排序 · 排序策略对快照的影响 · Time Travel查询性能优化
快照排序
19
快照与合并
目标=小文件合并 · 位置删除与等值删除 · 合并操作对快照的影响
快照合并
20
快照与并发控制
目标=乐观并发 · 冲突解决 · 快照隔离级别
快照并发控制
21
快照与事务
目标=ACID事务 · 多语句事务 · 事务中的快照生成
快照事务
22
快照与流式写入
目标=Flink流式写入Iceber… · 快照生成频率 · Time Travel查询流式数据
快照流式写入
23
快照与批处理
目标=Spark批处理写入Icebe… · 快照生成策略 · Time Travel查询批数据
快照批处理
24
快照与数据质量
目标=基于快照的数据校验 · 版本回溯修复数据错误 · Time Travel对比数据质量变…
快照数据质量
25
快照与审计
目标=基于快照的审计日志 · 版本回溯追踪数据变更 · Time Travel满足合规要求
快照审计
26
快照与机器学习
目标=特征存储版本管理 · Time Travel重现训练数据 · 版本回溯修复特征数据
快照机器学习
27
快照与数据共享
目标=跨团队数据共享 · Time Travel提供历史视图 · 版本回溯解决数据争议
快照数据共享
28
常见问题与排查
目标=快照丢失 · Time Travel查询失败 · 版本回溯失败
常见问题排查
29
性能优化
目标=快照查询性能优化 · Time Travel查询加速 · 版本回溯操作优化
性能优化目标=快照查询性…
30
综合实战与最佳实践
目标=端到端案例 · 快照管理策略 · Time Travel与版本回溯最佳…
综合实战最佳实践