VIP20
本课程属于：022-数据湖仓一体：Delta Lake、Apache Iceberg与Apache Hudi AI与大模型 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Delta Lake存储层故障根因定位与修复

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 课程结构 · Delta Lake存储层故障概述
课程导入学习目标
02
Delta Lake基础回顾
表格式 · 事务日志 · 存储层架构
DeltaLake
03
故障分类与诊断方法
常见故障类型 · 诊断工具与日志分析
故障分类诊断方法
04
环境准备与实验设计
搭建测试环境 · 模拟故障场景
环境准备实验设计
05
存储层配置与优化
文件大小 · 分区策略 · 压缩与缓存
存储层配置优化
06
事务日志故障
日志损坏 · 丢失 · 不一致的检测与修复
事务日志故障日志损坏
07
数据文件损坏
校验和错误 · 文件缺失 · 格式错误的处理
数据文件损坏校验
08
并发写入冲突
隔离级别 · 冲突检测与解决策略
并发写入冲突隔离级别
09
元数据存储问题
Hive Metastore · Catalog同步故障
元数据存储问题Hive
10
存储系统故障
S3 · ADLS · HDFS等底层存储异常
存储系统故障S3
11
网络与权限问题
连接超时 · 访问被拒 · 凭证失效
网络权限问题
12
版本兼容性
Delta Lake版本升级 · Spark版本兼容性
版本兼容性Delta
13
性能问题定位
慢查询 · 高延迟 · 资源瓶颈分析
性能问题定位慢查询
14
数据倾斜与文件膨胀
小文件问题 · 数据分布不均
数据倾斜文件膨胀
15
事务冲突与重试机制
Optimistic Concurr…
事务冲突重试机制
16
Checkpoint与VACUUM
清理机制 · 恢复点管理
CheckpointVACUUM
17
时间旅行与版本管理
历史版本查询 · 回滚操作
时间旅行版本管理
18
故障根因分析框架
从现象到根因的系统化方法
故障根因分析框架从现象到根因的系…
19
案例实战
事务日志损坏导致表不可用
案例实战事务日志损坏导致…
20
案例实战
数据文件丢失导致查询失败
案例实战数据文件丢失导致…
21
案例实战
并发写入导致数据不一致
案例实战并发写入导致数据…
22
案例实战
存储桶权限配置错误
案例实战存储桶权限配置错…
23
案例实战
小文件过多导致性能下降
案例实战小文件过多导致性…
24
案例实战
元数据不一致导致表无法读取
案例实战元数据不一致导致…
25
监控与告警
设置关键指标 · 日志监控 · 告警规则
监控告警
26
预防与最佳实践
备份策略 · 定期维护 · 配置建议
预防最佳实践
27
自动化修复工具
编写脚本 · 使用Delta Lake API
自动化修复工具编写脚本
28
常见问题速查
故障现象 · 可能原因 · 快速解决方案
常见问题速查故障现象
29
综合实战
端到端故障模拟与修复演练
综合实战端到端故障模拟
30
课程总结
核心要点回顾 · 学习路径建议 · 参考资料
课程总结核心要点回顾