首页
›
后端、数据与云原生工程
›
088-Databricks Lakehouse数据平台工程
›
《Databricks数据质量与治理体系设计》
VIP20
本课程属于:088-Databricks Lakehouse数据平台工程
后端、数据与云原生工程 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
Databricks数据质量与治理体系设计
共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入与体系总览
目标=Databricks数据质量与… · 业务价值 · 整体架构与学习路径
课程导入
体系总览
02
Databricks平台治理能力全景
目标=Unity Catalog · Delta Lake · Lakehouse监控
Databricks
平台治理能力全景
03
数据质量维度与治理指标设计
目标=完整性 · 准确性 · 一致性
数据质量维度
治理指标设计
04
Unity Catalog元数据体系设计
目标=Catalog · Schema · Table
Unity
Catalog
05
数据资产盘点与业务目录构建
目标=在Databricks中识别关… · 建立业务术语表与数据字典
数据资产盘点
业务目录构建
06
数据分类分级与敏感数据识别
目标=基于Unity Catalog… · 函数与动态视图实现敏感数据发现与分级
数据分类分级
敏感数据识别
07
访问控制与权限治理设计
目标=Unity Catalog权限… · 行级/列级安全 · 动态视图与最小权限落地
访问控制
权限治理设计
08
数据血缘与影响分析
目标=利用Unity Catalog… · 系统表与API追踪表级/列级依赖 · 支撑变更影响评估
数据血缘
影响分析
09
Delta Lake表质量约束设计
目标=NOT NULL · CHECK · 主键/外键约束
Delta
Lake
10
数据质量规则引擎设计
目标=在Databricks中构建可… · 规则执行框架与结果存储模型
数据质量规则引擎…
Databricks
11
基于Spark与SQL的质量检查任务开发
目标=编写可复用的质量检查Noteb… · 作业与参数化规则模板
Spark
SQL
12
Lakehouse监控与数据质量仪表板
目标=使用Databricks SQ… · 告警与系统表监控质量趋势
Lakehouse
监控
13
数据剖析与异常检测实战
目标=利用Databricks Pr… · 统计分析与时间序列方法发现数据异常
数据剖析
异常检测实战
14
流式数据质量治理
目标=Structured Stre… · 死信队列 · 水位线与Exactly-Once语义…
流式数据质量治理
Structured
15
数据管道中的质量门禁设计
目标=在ETL/ELT流程中嵌入质量… · 阻断策略与自动回滚机制
数据管道
质量门禁设计
16
数据修复与清洗工作流
目标=在Databricks中设计标… · 去重 · 补全
数据修复
清洗工作流
17
数据版本管理与时间旅行治理
目标=Delta Lake时间旅行 · 版本回溯 · 恢复策略与审计追溯
数据版本管理
时间旅行治理
18
数据生命周期与保留策略
目标=基于Unity Catalog… · 保留 · 删除与合规销毁
数据生命周期
保留策略
19
数据共享与交换治理
目标=Delta Sharing · Clean Rooms与外部位置中的…
数据共享
交换治理
20
审计、合规与监管报告
目标=利用Databricks审计日… · 系统表与Unity Catalog权…
审计
合规
21
数据质量事件管理与告警运营
目标=事件分类 · 告警路由 · 值班响应
数据质量事件管理
告警运营
22
数据治理组织与流程设计
目标=数据所有者 · 数据管理员 · Steward角色在Databric…
数据治理组织
流程设计
23
数据质量度量与KPI体系
目标=定义质量评分卡 · 趋势指标 · 业务影响指标与持续改进闭环
KPI
数据质量度量
24
自动化治理与CI/CD集成
目标=使用Databricks As… · Terraform · Git与CI/CD流水线管理治理配置
CI/CD
自动化治理
25
机器学习与AI中的数据质量治理
目标=特征表质量 · 模型输入监控 · 偏差检测与MLflow集成
AI
机器学习
26
多环境与多租户治理设计
目标=开发/测试/生产环境隔离 · 跨工作区治理与元数据同步策略
多环境
多租户治理设计
27
性能与成本治理
目标=质量检查任务优化 · 集群策略 · Photon与Delta优化对治理工…
性能
成本治理
28
端到端实战
目标=设计一个零售业务Lakehou… · 覆盖采集 · 加工
端到端实战
Lakehou
29
故障排查与治理体系演进
目标=常见治理问题诊断 · 反模式识别 · 体系迭代与成熟度评估
故障排查
治理体系演进
30
课程总结与治理路线图
目标=关键能力回顾 · 实施优先级 · 组织落地建议与持续学习资源
课程总结
治理路线图
所属VIP或分类
同VIP:Databricks-Lakehouse企业数据平台建设
同VIP:Databricks-Lakehouse项目验收与工程交付
同VIP:DatabricksDataOps持续交付与发布