VIP20
本课程属于：006-数据质量工程 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

数据仓库完整性校验与质量控制

📚 共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
第01章
数据校验概述
为什么需要数据校验，数据质量维度（完整性、准确性、一致性、及时性），数仓中数据校验的挑战。
完整性准确性一致性
第02章
数据校验核心概念
记录数校验、空值校验、重复值校验、业务规则校验、跨表关联校验。
空值重复值跨表
第03章
数据校验工具与框架
Great Expectations、Deequ、Apache Griffin、dbt test、自定义Python脚本。
Great ExpectationsDeequdbt
第04章
数据校验策略设计
分层校验策略（ODS、DWD、DWS、ADS），增量校验与全量校验，离线校验与实时校验。
分层增量实时
第05章
数据校验自动化与监控
调度系统集成（Airflow/DolphinScheduler），告警通知（钉钉/邮件/短信），校验报告生成。
Airflow告警报告
第06章
数据校验最佳实践
数据血缘与校验联动，数据回滚与修复机制，校验规则版本管理。
血缘回滚版本管理
第07章
数据校验案例实战
电商数仓数据校验、金融数仓数据校验、日志数仓数据校验。
电商金融日志
第08章
数据校验进阶
数据质量SLA、数据质量度量与评分、数据质量治理体系。
SLA度量治理
第09章
数据校验与数据治理
元数据管理、数据标准、数据安全与校验的关系。
元数据标准安全
第10章
数据校验未来趋势
AI辅助数据校验、数据可观测性、Data Mesh下的数据校验。
AI可观测性Data Mesh
第11章
数据校验概述
为什么需要数据校验，数据质量维度（完整性、准确性、一致性、及时性），数仓中数据校验的挑战。
完整性准确性一致性
第12章
数据校验核心概念
记录数校验、空值校验、重复值校验、业务规则校验、跨表关联校验。
空值重复值跨表
第13章
数据校验工具与框架
Great Expectations、Deequ、Apache Griffin、dbt test、自定义Python脚本。
Great ExpectationsDeequdbt
第14章
数据校验策略设计
分层校验策略（ODS、DWD、DWS、ADS），增量校验与全量校验，离线校验与实时校验。
分层增量实时
第15章
数据校验自动化与监控
调度系统集成（Airflow/DolphinScheduler），告警通知（钉钉/邮件/短信），校验报告生成。
Airflow告警报告
第16章
数据校验最佳实践
数据血缘与校验联动，数据回滚与修复机制，校验规则版本管理。
血缘回滚版本管理
第17章
数据校验案例实战
电商数仓数据校验、金融数仓数据校验、日志数仓数据校验。
电商金融日志
第18章
数据校验进阶
数据质量SLA、数据质量度量与评分、数据质量治理体系。
SLA度量治理
第19章
数据校验与数据治理
元数据管理、数据标准、数据安全与校验的关系。
元数据标准安全
第20章
数据校验未来趋势
AI辅助数据校验、数据可观测性、Data Mesh下的数据校验。
AI可观测性Data Mesh
第21章
数据校验概述
为什么需要数据校验，数据质量维度（完整性、准确性、一致性、及时性），数仓中数据校验的挑战。
完整性准确性一致性
第22章
数据校验核心概念
记录数校验、空值校验、重复值校验、业务规则校验、跨表关联校验。
空值重复值跨表
第23章
数据校验工具与框架
Great Expectations、Deequ、Apache Griffin、dbt test、自定义Python脚本。
Great ExpectationsDeequdbt
第24章
数据校验策略设计
分层校验策略（ODS、DWD、DWS、ADS），增量校验与全量校验，离线校验与实时校验。
分层增量实时
第25章
数据校验自动化与监控
调度系统集成（Airflow/DolphinScheduler），告警通知（钉钉/邮件/短信），校验报告生成。
Airflow告警报告
第26章
数据校验最佳实践
数据血缘与校验联动，数据回滚与修复机制，校验规则版本管理。
血缘回滚版本管理
第27章
数据校验案例实战
电商数仓数据校验、金融数仓数据校验、日志数仓数据校验。
电商金融日志
第28章
数据校验进阶
数据质量SLA、数据质量度量与评分、数据质量治理体系。
SLA度量治理
第29章
数据校验与数据治理
元数据管理、数据标准、数据安全与校验的关系。
元数据标准安全
第30章
数据校验未来趋势
AI辅助数据校验、数据可观测性、Data Mesh下的数据校验。
AI可观测性Data Mesh
专注课程资料整理