VIP20

本课程属于：088-Databricks Lakehouse数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Databricks企业数据湖仓建模与开发

共计 30 章节

可可资料掘金营 · 点击在线试看

课程导入与Databricks湖仓全景

目标=学习目标 · Lakehouse架构核心价值 · Databricks平台组件地图

Databricks课程导入

Databricks工作区与开发环境配置

目标=Workspace · Repos · Notebook

Databricks工作区

Delta Lake存储层核心机制

目标=Delta表结构 · ACID事务 · 事务日志

Unity Catalog统一治理体系

目标=Metastore · Catalog · Schema

企业数据湖仓分层建模方法论

目标=Bronze/Silver/G… · 数据质量逐层提升 · 维度建模与Data Vault在湖仓…

企业数据湖仓分层…Bronze/Silve…

原始数据接入与Bronze层构建

目标=批量文件接入 · Auto Loader流式接入 · JDBC/云存储连接

Bronze原始数据接入

数据清洗与Silver层标准化

目标=去重 · 空值处理 · 类型转换

Silver数据清洗

Gold层维度建模实战

目标=星型模型设计 · 事实表与维度表构建 · 代理键生成

Gold层维度建模实战

PySpark DataFrame与Spark SQL建模开发

目标=DataFrame API · Spark SQL · 窗口函数

PySparkDataFrame

Delta Live Tables声明式管道

目标=DLT概念 · 流式表与物化视图 · 期望与数据质量

工作流编排与调度

目标=Databricks Jobs · 任务类型 · 依赖关系

工作流编排调度

数据质量与可观测性体系

目标=数据质量维度 · 期望与约束 · 数据剖析

数据质量可观测性体系

性能优化与成本治理

目标=分区策略 · Z-Order · Liquid Clustering

性能优化成本治理

流批一体湖仓开发

目标=Structured Stre… · Auto Loader · 流式Delta表

流批一体湖仓开发Structured

机器学习与特征工程在湖仓中的集成

目标=Feature Store · MLflow实验跟踪 · 模型训练与注册

机器学习特征工程

BI与SQL分析层开发

目标=Databricks SQL… · SQL编辑器 · Dashboard

数据安全与合规

目标=行级与列级安全 · 动态数据脱敏 · GDPR/CCPA合规

数据安全合规

数据共享与跨组织协作

目标=Delta Sharing · Marketplace · 跨云跨区域共享

数据共享跨组织协作

CI/CD与DevOps for Lakehouse

目标=Databricks Asse… · Repos与Git集成 · 环境隔离

企业级湖仓项目实战一

目标=需求分析与架构设计——从业务问… · 技术选型与治理策略

企业级湖仓项目实…目标=需求分析

企业级湖仓项目实战二

目标=数据接入与Bronze/Sil… · DLT和PySpark完成原始数据接…

企业级湖仓项目实…Bronze/Sil

企业级湖仓项目实战三

目标=Gold层建模与指标开发——构… · 业务宽表 · 关键指标与Databricks SQ…

企业级湖仓项目实…Gold

企业级湖仓项目实战四

目标=调度 · 质量与运维——配置Jobs/DLT管… · 数据质量期望

企业级湖仓项目实…目标=调度

企业级湖仓项目实战五

目标=安全 · 共享与CI/CD——实施Unity… · Delta Sharing

企业级湖仓项目实…目标=安全

湖仓性能调优进阶

目标=深入Spark执行计划 · AQE · Join策略

湖仓性能调优进阶Spark

湖仓成本管理与资源优化

目标=集群策略 · 自动伸缩 · Spot实例

湖仓成本管理资源优化

数据建模进阶

目标=Data Vault 2.0与… · 维度建模对比 · 历史追踪

数据建模进阶Data

AI辅助湖仓开发

目标=Databricks Assi… · AI函数 · 自然语言查询

AI辅助湖仓开发

湖仓架构演进与生态集成

目标=Lakehouse与数据网格 · Data Fabric · 与Kafka

湖仓架构演进生态集成

课程总结与综合项目答辩

目标=知识体系回顾 · 综合项目成果展示 · 常见面试与实战问题解析

课程总结综合项目答辩