VIP14
本课程属于：021-工程数据平台与AI知识智能 企业数字化与管理工程 · 共 14 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

看板数据血缘追溯与问题定位在工程分析平台中的方案

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
数据血缘追溯的背景与价值 · 看板问题定位的痛点 · 本课程目标与适用人群
课程导论数据血缘追溯的背…
02
数据血缘基础概念
什么是数据血缘 · 血缘与数据地图/数据目录的区别 · 血缘的粒度（字段级/表级/任务级）
数据血缘基础概念什么是数据血缘
03
工程分析平台概述
平台典型架构（数据采集层 · 计算层 · 存储层
工程分析平台概述平台典型架构
04
看板数据流全景
从数据源到看板展示的完整链路 · ETL/ELT流程 · 实时与离线场景差异
看板数据流全景从数据源到看板展…
05
血缘元数据模型设计
节点（表/字段/任务/看板） · 边（依赖关系） · 属性（时间戳/版本/操作类型）
血缘元数据模型设…节点
06
血缘采集技术方案一
SQL解析法——解析SparkSQL… · 提取输入输出表
血缘采集技术方案…SQL
07
血缘采集技术方案二
日志埋点法——在调度系统/数据同步工…
血缘采集技术方案…日志埋点法
08
血缘采集技术方案三
运行时钩子法——利用Spark/Fl…
血缘采集技术方案…Spark/Fl
09
血缘存储选型
图数据库（Neo4j/JanusGr…
血缘存储选型Neo4j/JanusG…
10
血缘图构建与更新策略
增量构建 · 全量重建 · 版本管理
血缘图构建更新策略
11
看板字段级血缘追溯
从看板上的一个指标（如“日活用户数”…
看板字段级血缘追…从看板上的一个指…
12
看板数据质量问题的根因定位
当看板数据异常时 · 如何利用血缘图快速定位是上游表变更 · 任务失败还是逻辑错误
看板数据质量问题…当看板数据异常时
13
影响分析（Impact Analysis）
当某个底层表或ETL任务需要修改时 · 如何通过血缘图评估受影响的所有看板
ImpactAnalysis
14
血缘可视化展示技术
D3.js/G6/Vis.js实现交… · 节点折叠/展开 · 路径高亮
血缘可视化展示技…D3.js/G6/Vis…
15
血缘搜索与过滤
按表名/字段名/看板名/任务名搜索 · 按时间范围过滤 · 按层级过滤
血缘搜索过滤
16
血缘与数据治理集成
血缘与数据质量规则 · 数据安全标签 · 数据生命周期管理的联动
血缘数据治理集成
17
看板问题定位实战案例一
指标突增/突降——利用血缘图排查上游…
看板问题定位实战…指标突增
18
看板问题定位实战案例二
看板加载失败——利用血缘图检查依赖任… · 数据是否延迟
看板问题定位实战…看板加载失败
19
看板问题定位实战案例三
数据口径不一致——利用字段级血缘对比…
看板问题定位实战…数据口径不一致
20
血缘数据一致性校验
如何确保采集到的血缘与实际执行计划一… · 血缘数据本身的准确性保障
血缘数据一致性校…如何确保采集到的…
21
血缘性能优化
大规模血缘图（百万节点）的查询优化 · 索引策略 · 缓存机制
血缘性能优化大规模血缘图
22
血缘API设计
对外提供RESTful API用于查… · 获取影响范围 · 获取字段路径
API血缘
23
血缘与CI/CD集成
在数据管道发布前自动进行影响分析 · 防止未通知的变更破坏看板
CI/CD血缘
24
多环境血缘管理
开发/测试/生产环境的血缘隔离与同步 · 环境间血缘对比
多环境血缘管理开发
25
血缘安全与权限控制
哪些角色可以查看全量血缘 · 哪些只能查看自己负责的看板血缘
血缘安全权限控制
26
血缘数据生命周期
血缘数据的过期策略 · 归档策略 · 清理策略
血缘数据生命周期血缘数据的过期策…
27
开源血缘工具对比
Apache Atlas · DataHub · Amundsen
开源血缘工具对比Apache
28
自研血缘系统架构设计
模块划分（采集模块 · 存储模块 · 查询模块
自研血缘系统架构…模块划分
29
血缘系统部署与运维
容器化部署 · 监控告警 · 高可用设计
血缘系统部署运维
30
课程总结与展望
数据血缘的未来趋势（主动元数据 · AI辅助根因分析） · 落地建议与常见误区
课程总结数据血缘的未来趋…