VIP20
本课程属于：023-数据湖仓一体：Delta Lake、Apache Iceberg与Apache Hudi AI与大模型 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Delta Lake VACUUM数据清理与安全策略

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 课程结构 · Delta Lake简介及VACUU…
课程导入学习目标
02
Delta Lake基础
表格式 · 事务日志 · 时间旅行与版本控制概念
DeltaLake
03
VACUUM命令概述
功能 · 语法 · 参数及适用场景
VACUUM命令概述
04
数据清理原理
VACUUM如何删除旧版本文件 · 保留策略与清理机制
数据清理原理VACUUM
05
安全策略基础
数据保留 · 合规性要求与VACUUM的关联
安全策略基础数据保留
06
配置保留期
设置spark.databricks…
配置保留期spark.databr…
07
VACUUM执行前检查
确认表状态 · 事务日志完整性及未提交事务
VACUUM执行前检查
08
执行VACUUM
使用SQL和DataFrame AP…
VACUUM执行
09
VACUUM的dry run模式
预览将删除的文件 · 避免误删
VACUUMdry
10
清理后验证
检查表历史 · 文件系统及数据完整性
清理后验证检查表历史
11
常见错误与异常
处理VACUUM失败 · 权限问题及并发冲突
常见错误异常
12
与时间旅行集成
VACUUM对时间旅行查询的影响及如…
时间旅行集成VACUUM
13
案例实战
模拟数据累积 · 执行VACUUM并观察效果
案例实战模拟数据累积
14
安全策略设计
制定基于业务需求的保留策略
安全策略设计制定基于业务需求…
15
自动化清理
使用调度任务定期执行VACUUM
自动化清理VACUUM
16
监控与告警
跟踪VACUUM运行状态及存储回收
监控告警
17
性能优化
调整VACUUM并行度与批处理大小
性能优化VACUUM
18
与其他Delta功能的协同
OPTIMIZE · ZORDER与VACUUM配合使用
Delta其他
19
数据恢复与备份
在VACUUM后如何恢复数据或使用备…
数据恢复备份
20
权限与安全
控制VACUUM执行权限 · 防止误操作
权限安全
21
多环境管理
开发 · 测试 · 生产环境的VACUUM策略差异
多环境管理开发
22
成本管理
VACUUM对存储成本的影响及优化
成本管理VACUUM
23
常见问题解答
VACUUM后文件仍存在 · 清理不彻底等
常见问题解答VACUUM
24
高级主题
处理流式写入表 · 并发写入下的VACUUM
高级主题处理流式写入表
25
案例实战
设计一个完整的VACUUM安全策略
案例实战VACUUM
26
综合练习
模拟真实场景 · 执行VACUUM并制定安全策略
综合练习模拟真实场景
27
课程总结
关键要点回顾 · 最佳实践与常见陷阱
课程总结关键要点回顾
28
考核与评估
测试理解与应用能力
考核评估
29
扩展学习
Delta Lake其他特性与VAC…
扩展学习Delta
30
结业项目
为给定业务场景设计并实施VACUUM…
结业项目VACUUM