VIP20
本课程属于：022-生物样本元信息治理 生物信息学与 AI 制药工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

元数据治理Pipeline构建与审计监控

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
元数据治理概述
定义 · 重要性 · 应用场景
元数据治理概述定义
02
数据治理与元数据管理的关系
数据治理与元数据管理的关系 · 核心概念 · 实践要点
数据治理元数据管理的关系
03
元数据模型
技术元数据 · 业务元数据 · 操作元数据
元数据模型技术元数据
04
元数据采集
手动采集与自动采集
元数据采集手动采集
05
元数据存储
关系型数据库与图数据库
元数据存储关系型数据库
06
元数据治理工具选型
Apache Atlas · DataHub · Amundsen 等
元数据治理工具选…Apache
07
管道（Pipeline）概念与类型
ETL · ELT · 流式管道
Pipeline管道
08
管道配置基础
调度引擎（Airflow · Dagster · Prefect）
管道配置基础Airflow
09
元数据集成
将元数据写入管道
元数据集成将元数据写入管道
10
管道配置实战
使用Apache Atlas集成Hi…
管道配置实战Apache
11
管道配置实战
使用DataHub开放API注册数据…
管道配置实战DataHub
12
管道血缘分析
配置数据血缘自动捕获
管道血缘分析配置数据血缘自动…
13
管道元数据质量校验
数据质量规则定义
管道元数据质量校…数据质量规则定义
14
管道元数据版本控制
快照与变更记录
管道元数据版本控…快照
15
管道元数据安全
访问控制与加密
管道元数据安全访问控制
16
管道元数据监控与告警
Prometheus + Grafa…
管道元数据监控告警
17
管道元数据审计
审计日志配置
管道元数据审计审计日志配置
18
多数据源元数据统一管理
Hive · HDFS · S3
多数据源元数据统…Hive
19
元数据检索与发现
搜索引擎集成
元数据检索发现
20
元数据标签与分类自动配置
元数据标签与分类自动配置 · 核心概念 · 实践要点
元数据标签分类自动配置
21
管道元数据导出与备份
管道元数据导出与备份 · 核心概念 · 实践要点
管道元数据导出备份
22
管道元数据恢复与迁移
管道元数据恢复与迁移 · 核心概念 · 实践要点
管道元数据恢复迁移
23
管道配置自动化
CI/CD与基础设施即代码
管道配置自动化CI/CD
24
管道配置模板化
YAML/JSON模板设计
管道配置模板化YAML/JSON
25
管道配置参数化
变量与环境管理
管道配置参数化变量
26
管道配置错误处理
重试 · 超时 · 异常通知
管道配置错误处理重试
27
管道配置性能优化
并行度 · 资源分配
管道配置性能优化并行度
28
实战案例
某电商数据平台元数据治理管道搭建
实战案例某电商数据平台元…
29
实战案例
金融风控数据血缘追踪管道配置
实战案例金融风控数据血缘…
30
总结与展望
元数据治理未来趋势
元数据治理未来趋…总结与展望