VIP20

本课程属于：026-数据湖治理 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据湖基于血缘分析的智能问题溯源

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

血缘分析概述

什么是数据血缘、血缘分析的价值、血缘分析在问题溯源中的角色。

数据血缘核心概念

数据源、数据节点、数据流、转换逻辑、依赖关系。

血缘元数据模型

元数据定义、实体关系模型、属性与标签设计。

血缘采集技术

日志解析、SQL解析、API采集、埋点技术。

血缘存储方案

图数据库选型（Neo4j、JanusGraph）、关系型存储、混合存储架构。

血缘解析引擎

SQL Parser原理、AST抽象语法树、自定义解析规则。

血缘关系构建

上下游关系推导、字段级血缘、表级血缘、任务级血缘。

血缘可视化

D3.js力导向图、层次布局、交互式探索、性能优化。

问题溯源基础

问题定义、影响范围分析、根因定位方法论。

基于血缘的根因分析

反向追溯算法、正向影响分析、剪枝策略。

智能溯源算法

图遍历算法（BFS/DFS）、最短路径、社区发现。

异常检测与血缘

数据质量监控、异常传播路径、告警关联。

血缘变更影响分析

Schema变更、ETL变更、下游影响评估。

实时血缘追踪

流式数据处理、实时解析、延迟优化。

血缘数据治理

血缘完整性、准确性、一致性保障。

血缘安全与权限

数据脱敏、访问控制、审计日志。

血缘在数据仓库中的应用

分层血缘、模型血缘、报表血缘。

血缘在数据湖中的应用

湖仓一体、多引擎血缘、跨平台追踪。

数据湖跨平台

血缘在机器学习中的应用

特征血缘、模型血缘、训练数据溯源。

血缘在实时计算中的应用

Flink血缘、Kafka血缘、实时链路追踪。

实时计算Flink

血缘在数据中台中的应用

全域血缘、数据地图、资产盘点。

血缘在合规审计中的应用

GDPR合规、数据溯源、监管报告。

血缘系统架构设计

微服务架构、高可用设计、水平扩展。

血缘API设计

RESTful API、GraphQL接口、批量查询优化。

血缘数据质量评估

覆盖率、准确率、时效性指标。

血缘自动化测试

解析测试、链路测试、回归测试。

测试自动化

血缘性能优化

索引策略、缓存机制、查询优化。

血缘与数据目录集成

元数据同步、标签管理、搜索增强。

血缘案例分析

金融风控场景、电商推荐场景、医疗数据场景。

血缘未来趋势

AI驱动血缘、主动溯源、自适应血缘网络。