VIP20

本课程属于：088-Databricks Lakehouse数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Databricks Lakehouse企业数据平台建设

共计 30 章节

可可资料掘金营 · 点击在线试看

Lakehouse架构与企业数据平台演进

目标=从数据仓库 · 数据湖到Lakehouse的驱动力 · 核心特征

Lakehouse架构

Databricks工作区与计算资源规划

目标=工作区部署 · 集群类型 · 池化

Databricks工作区

Delta Lake存储层设计

目标=ACID事务 · Schema演进 · 时间旅行

Unity Catalog元数据与权限治理

目标=Catalog · Schema · Table

数据接入与批量摄取

目标=从关系数据库 · 文件系统 · 对象存储到Delta表的批处理管道设…

数据接入批量摄取

流式数据摄取与结构化流

目标=Kafka · Event Hubs · 自动加载器

流式数据摄取结构化流

数据转换与Medallion架构

目标=Bronze · Silver · Gold分层建模

Medallion数据转换

Spark SQL与DataFrame API高效开发

目标=查询优化 · Catalyst · 自适应查询执行

Delta Live Tables声明式管道

目标=期望约束 · 流式表 · 物化视图

工作流编排与调度

目标=Databricks Jobs · 任务依赖 · 参数传递

工作流编排调度

企业级数据建模与性能调优

目标=星型模型 · 维度建模 · 文件布局

企业级数据建模性能调优

数据质量与可观测性

目标=数据剖析 · 异常检测 · 质量指标

数据质量可观测性

安全与合规

目标=网络隔离 · Private Link · 密钥管理

成本管理与资源优化

目标=集群策略 · 自动终止 · Spot实例

成本管理资源优化

机器学习与Lakehouse集成

目标=特征存储 · MLflow · 模型训练

Lakehouse机器学习

BI与SQL分析工作负载

目标=Databricks SQL仓… · 查询缓存 · 结果缓存

数据共享与协作

目标=Delta Sharing · 市场 · 跨工作区/跨云共享与安全交换协议

数据共享协作

多环境与基础设施即代码

目标=Terraform · Databricks Asset B… · 环境隔离与配置管理

多环境基础设施即代码

数据工程CI/CD与测试

目标=单元测试 · 集成测试 · 数据契约

CI/CD数据工程

灾难恢复与业务连续性

目标=跨区域复制 · 备份策略 · 故障转移演练与RTO/RPO设计

灾难恢复业务连续性

性能基准与容量规划

目标=工作负载特征分析 · 集群规模估算 · 并发调优与存储吞吐优化

性能基准容量规划

数据治理与合规运营

目标=数据分类 · 保留策略 · 访问审查

数据治理合规运营

实时分析与低延迟场景

目标=流式聚合 · 水印 · 状态存储

实时分析低延迟场景

数据虚拟化与联邦查询

目标=Lakehouse Feder… · 外部表 · 跨源查询与性能权衡

数据虚拟化联邦查询

非结构化与半结构化数据处理

目标=JSON · Parquet · Avro

非结构化半结构化数据处理

数据网格与领域驱动设计

目标=在Databricks上实现数… · 领域所有权与自助服务模式

数据网格领域驱动设计

AI辅助与自动化运维

目标=Databricks Assi… · 自动调优 · 异常根因分析与智能告警

目标=金融风控Lakehouse建设 · 合规审计与高可用架构实战

行业案例Lakehouse

目标=零售客户360与供应链分析 · 实时库存与个性化推荐管道

行业案例目标=零售客户3…

目标=端到端Lakehouse平台交… · 架构设计 · 实施部署到运维优化的完整项目

综合实战Lakehouse