VIP20

本课程属于：007-元数据与数据目录 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据血缘采集与问题溯源平台建设

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据血缘基础

什么是数据血缘、为什么需要血缘分析、血缘分析的核心价值。

血缘元数据模型

表级血缘、字段级血缘、ETL过程血缘、血缘的粒度与层次。

血缘采集技术

SQL解析、日志采集、API对接、埋点技术、手动录入。

血缘存储与索引

图数据库选型（Neo4j vs JanusGraph）、血缘关系存储结构、索引优化策略。

血缘可视化

DAG图渲染、力导向图、层级布局、交互式探索、性能优化。

血缘分析应用

影响分析、溯源分析、全链路追踪、数据质量根因定位。

血缘与数据治理

数据地图、数据目录、元数据管理平台集成、合规审计。

血缘自动化运维

血缘变更检测、血缘一致性校验、血缘质量监控、告警机制。

血缘在实时数仓中的应用

Flink血缘采集、Kafka消息血缘、实时链路追踪。

血缘在AI/ML场景中的应用

特征血缘、模型血缘、训练数据溯源、实验追踪。

血缘安全与权限

血缘数据脱敏、访问控制、审计日志、隐私合规。

血缘性能优化

大规模血缘查询优化、缓存策略、预计算、分区设计。

血缘与数据湖

Lakehouse血缘、Delta Lake血缘、Iceberg血缘、Hudi血缘。

数据湖Lakehouse

血缘与数据网格

数据产品血缘、数据域边界、跨域血缘追踪。

血缘标准与规范

OpenLineage标准、Marquez、Atlas、DataHub对比。

标准OpenLineage

血缘工具选型

开源工具对比（Atlas、DataHub、Amundsen、Marquez）、商业工具评估。

血缘项目实战（一）

需求分析、技术选型、架构设计、POC验证。

血缘项目实战（二）

采集层搭建、存储层搭建、API层开发。

血缘项目实战（三）

可视化前端开发、交互设计、性能调优。

前端可视化

血缘项目实战（四）

集成测试、灰度发布、上线运维。

血缘与数据质量

数据质量六维度、血缘驱动的质量检测、异常传播分析。

血缘与数据SLA

SLA定义、血缘驱动的SLA监控、故障定位与恢复。

血缘与成本优化

数据冗余检测、冷热数据识别、存储成本优化。

血缘与数据合规

GDPR合规、数据删除溯源、数据生命周期管理。

血缘与数据迁移

迁移影响评估、迁移验证、回滚方案设计。

血缘与数据版本管理

数据版本控制、回滚分析、时间旅行查询。

版本时间旅行

血缘与数据测试

测试数据生成、测试覆盖率分析、回归测试。

测试覆盖率

血缘与数据文档

自动文档生成、文档与血缘联动、知识图谱构建。

文档知识图谱

血缘与数据协作

团队协作流程、血缘评审机制、知识沉淀。

血缘未来趋势

AI驱动血缘、主动元数据、数据编织、DataOps融合。