VIP20

本课程属于：027-数据仓库建模 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数仓数据血缘追踪与链路治理

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据血缘概述

什么是数据血缘、为什么需要数据血缘、数据血缘的核心价值与挑战。

数据血缘的元数据基础

元数据分类、元数据采集、元数据存储选型。

元数据存储

数据血缘的解析原理

SQL解析、ETL脚本解析、存储过程解析。

字段级血缘分析

字段映射、表达式解析、函数依赖推导。

字段级细粒度

表级血缘分析

表依赖关系、视图依赖、物化视图血缘。

跨系统血缘追踪

Hive到MySQL、Kafka到HDFS、数据湖与数据仓库的血缘打通。

跨系统集成

血缘数据的存储与查询

图数据库选型（Neo4j、JanusGraph）、关系型存储方案。

存储图数据库

血缘可视化技术

D3.js、G6、Cytoscape.js 在前端血缘展示中的应用。

可视化前端

血缘分析在数据治理中的应用

数据质量影响分析、数据变更影响评估。

治理影响分析

血缘驱动的数据发现

数据目录构建、数据资产地图、数据热度分析。

数据发现资产地图

血缘与数据安全

敏感数据追踪、数据脱敏影响分析、合规审计。

血缘在数据开发中的实战

数据链路调优、冗余数据识别、数据生命周期管理。

自动化血缘采集框架设计

调度器设计、增量采集、全量采集策略。

自动化采集

血缘数据的质量保障

血缘准确性校验、血缘覆盖率监控、血缘数据回填。

大规模血缘系统的性能优化

解析引擎优化、存储优化、查询优化。

血缘分析在实时数据流中的应用

Flink血缘解析、Kafka Streams血缘追踪。

实时流处理

血缘与数据建模

维度建模中的血缘、Data Vault中的血缘、湖仓一体中的血缘。

建模湖仓一体

血缘在AI/ML场景中的应用

特征血缘追踪、模型训练数据溯源、特征漂移分析。

血缘与数据版本管理

数据版本控制、回滚影响分析、数据快照血缘。

血缘在数据中台中的落地实践

中台数据资产目录、中台数据服务血缘。

血缘与数据标准管理

标准映射血缘、标准落标影响分析。

血缘在数据迁移中的应用

迁移影响评估、迁移后血缘重建、迁移验证。

血缘与数据成本治理

存储成本归因、计算成本归因、冷热数据识别。

血缘在数据合规中的应用

GDPR数据溯源、CCPA数据映射、数据删除影响分析。

血缘与数据SLA管理

SLA影响链路分析、SLA违约根因定位。

血缘在数据测试中的应用

测试数据准备、回归测试影响范围、测试覆盖率分析。

血缘与数据文档自动化

自动生成数据字典、自动生成数据流图、自动生成数据报告。

自动化文档

血缘系统的开放生态

OpenLineage标准、Marquez、Apache Atlas集成。

血缘分析平台的架构设计

微服务架构、插件化解析引擎、多租户支持。

架构微服务

血缘分析实战案例

某电商平台数据链路治理、某金融公司数据合规血缘建设、某互联网公司数据中台血缘落地。