VIP20
本课程属于：022-生物样本元信息治理 生物信息学与 AI 制药工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

跨系统元数据接入与质量治理项目

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
元数据治理概述
什么是元数据 · 为什么需要治理 · 治理的挑战与价值
元数据治理概述什么是元数据
02
项目背景
某互联网公司数据平台现状 · 元数据混乱问题描述
项目背景某互联网公司数据…
03
治理目标
实现元数据标准化 · 自动化采集 · 血缘追踪
治理目标实现元数据标准化
04
技术选型
Apache Atlas vs Da…
技术选型Apache
05
架构设计
元数据治理平台整体架构 · 包括采集层 · 存储层
架构设计元数据治理平台整…
06
元数据模型设计
技术元数据 · 业务元数据 · 管理元数据分类与关系
元数据模型设计技术元数据
07
数据源接入
Hive · HBase · Kafka
数据源接入Hive
08
实时采集引擎
基于Kafka Connect +…
实时采集引擎Kafka
09
血缘解析
SQL解析引擎选型与实现 · 支持SparkSQL · HiveQL
血缘解析SQL
10
血缘存储
使用JanusGraph图数据库存储… · 查询优化
血缘存储JanusGraph
11
元数据质量检测
完整性 · 一致性 · 准确性
元数据质量检测完整性
12
告警与修复
元数据异常自动告警 · 人工修复流程与自动化修复策略
告警修复
13
数据目录构建
面向业务人员的搜索 · 浏览 · 分类功能设计
数据目录构建面向业务人员的搜…
14
标签管理
自动标签生成（基于数据内容 · 使用频率 · 敏感级别等）
标签管理自动标签生成
15
数据血缘可视化
基于D3.js/G6的血缘图交互展示…
数据血缘可视化D3.js/G6
16
权限与安全
元数据访问控制 · 敏感数据脱敏与审计
权限安全
17
与数据质量平台集成
将元数据质量指标接入统一监控大屏
数据质量平台集成将元数据质量指标…
18
与数据开发平台集成
在数据开发IDE中嵌入元数据查询与血…
数据开发平台集成IDE
19
治理流程规范
元数据变更审批流程 · 版本管理 · 回滚机制
治理流程规范元数据变更审批流…
20
落地实施策略
分阶段推进 · 从核心系统开始 · 逐步覆盖全平台
落地实施策略分阶段推进
21
项目管理
团队组织 · PMO管理 · 关键里程碑与风险控制
项目管理团队组织
22
遇到的第一大坑
历史数据量过大 · 初始采集导致系统崩溃 · 如何优化
遇到的第一大坑历史数据量过大
23
第二大坑
血缘解析不准确 · SQL解析歧义与函数处理 · 解决方案
第二大坑血缘解析不准确
24
第三大坑
业务元数据缺失 · 手工录入成本高 · 如何利用AI自动提取
第三大坑业务元数据缺失
25
治理效果评估
定义KPI · 治理前后对比数据（覆盖率 · 查询效率
治理效果评估KPI
26
用户反馈与迭代
收集开发 · 分析师 · 运维的反馈
用户反馈迭代
27
技术债务清理
原有不合理元数据字段废弃 · 模型重构经验
技术债务清理原有不合理元数据…
28
跨团队协作
数据治理委员会成立 · 推动组织级治理文化
跨团队协作数据治理委员会成…
29
经验教训总结
哪些做对了 · 哪些做错了 · 未来改进方向
经验教训总结哪些做对了
30
展望未来
元数据治理与AI结合 · 自动数据发现 · 数据网格下的治理新挑战
展望未来AI