VIP20

本课程属于：022-数据湖仓一体：Delta Lake、Apache Iceberg与Apache Hudi AI与大模型 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Apache Iceberg 表格式入门必修课

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

了解Apache Iceberg的定… · 解决的核心问题 · 适用场景

课程导入Apache

理解表格式（Table Format… · Iceberg的元数据层 · 数据文件组织

核心概念Table

学习如何安装和配置Iceberg · 包括与Spark · Flink

环境搭建Iceberg

表创建与DDL操作

掌握使用SQL或API创建Icebe… · 定义分区 · 设置表属性等DDL操作

学习如何向Iceberg表写入数据 · 包括INSERT · MERGE

数据写入Iceberg

数据读取与查询

掌握使用Spark · Flink等引擎查询Iceberg表 · 理解快照隔离和时间旅行查询

数据读取查询

表维护与优化

学习如何执行Compaction · Expire Snapshots · Remove Orphan File…

表维护优化

了解Iceberg对Schema演进… · 包括添加 · 删除

模式演进Iceberg

学习Iceberg的分区机制 · 以及如何动态更新分区策略 · 无需重写历史数据

分区演进Iceberg

掌握Iceberg的隐藏分区特性 · 自动处理分区值 · 简化查询和写入

隐藏分区Iceberg

理解Iceberg如何提供ACID事… · 支持并发读写和隔离级别

学习乐观并发控制机制 · 以及如何处理写入冲突和保证数据一致性

并发控制学习乐观并发控制…

深入掌握时间旅行功能 · 如何查询历史快照 · 回滚数据

时间旅行深入掌握时间旅行…

了解如何通过Iceberg的增量读取… · 实现流式处理或变更数据捕获（CDC）

增量读取Iceberg

详细讲解Spark读写Iceberg… · 优化和常见操作

学习Flink如何作为流批一体引擎与… · 实现实时写入和读取

与Trino/Presto集成

掌握Trino查询Iceberg表的…

Trino/Presto集成

了解如何通过Hive访问Iceber… · 以及与传统Hive表的迁移

数据湖架构

理解Iceberg在数据湖架构中的角… · 与Hudi · Delta Lake的对比

数据湖架构Iceberg

学习文件布局 · 小文件治理 · 统计信息

性能优化学习文件布局

监控与调优

掌握如何监控Iceberg表的健康状… · 诊断性能瓶颈

电商订单数据湖 · 实现实时写入和查询

案例实战电商订单数据湖

用户行为分析 · 进行时间旅行分析和增量处理

案例实战用户行为分析

CDC数据同步

案例实战CDC

解决Iceberg使用中的常见错误 · 如元数据不一致 · 权限问题等

常见问题Iceberg

总结Iceberg在生产环境中的最佳… · 包括表设计 · 分区策略

最佳实践Iceberg

从Hive或其他表格式迁移到Iceb…

迁移指南Hive

介绍Iceberg与数据目录（如Hi… · AWS Glue） · 数据质量工具等的集成

生态工具Iceberg

构建一个完整的数据湖解决方案 · 结合Spark · Flink和Iceberg

综合项目构建一个完整的数…

回顾核心知识点 · 展望Iceberg的未来发展 · 提供进一步学习资源

课程总结回顾核心知识点