VIP20
本课程属于:043-OLAP分析引擎 数据工程与实时数据平台 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

OLAP数据目录与元数据管理

📚 共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
数据目录概述
什么是数据目录、核心价值,以及与数据字典的差异。建立全域数据资产地图的第一步。
概念入门
02
元数据基础
元数据定义、业务/技术/操作三种类型,以及元数据管理对数据治理的关键作用。
元数据分类
03
数据目录架构设计
分层架构、核心模块设计,以及关系型与图数据库的存储选型对比。
架构存储
04
元数据采集与接入
采集策略、JDBC/API方式、日志采集与实时同步,构建自动化元数据管道。
采集集成
05
数据血缘分析
血缘概念、字段级解析、血缘图构建与可视化,追踪数据流转全链路。
血缘可视化
06
数据资产盘点
资产分类、登记流程与质量评估,形成企业级数据资产目录。
资产治理
07
数据目录搜索与发现
Elasticsearch选型、索引设计及搜索优化策略,实现秒级数据发现。
搜索ES
08
数据标签与分类
标签体系设计、自动打标算法与分类管理,提升数据组织效率。
标签自动化
09
数据权限与安全
元数据权限模型、数据脱敏策略与审计日志,保障数据安全合规。
权限安全
10
数据目录API设计
RESTful设计原则、元数据查询与批量操作接口,开放目录能力。
API接口
11
数据目录与数据治理
目录在治理中的角色,与数据质量平台的集成实践。
治理集成
12
元数据版本管理
版本控制策略、变更追踪与历史回溯,保证元数据可追溯。
版本追溯
13
数据目录的自动化运维
健康检查、采集任务调度与异常告警,降低运维成本。
运维自动化
14
数据目录与数据湖/仓
与Hive、Iceberg、Delta Lake的集成实践,统一湖仓元数据。
数据湖集成
15
数据目录与BI工具
与Tableau、Power BI、Superset的元数据同步,赋能分析。
BI同步
16
国际化与多语言
多语言元数据管理、国际化标签体系,支撑全球业务。
国际化i18n
17
扩展性设计
插件机制、自定义元数据模型与扩展点,灵活适配场景。
扩展插件
18
元数据质量监控
完整性检查、一致性校验与异常检测,保障元数据可信。
质量监控
19
冷热数据管理
元数据生命周期、归档策略与存储优化,降低总体成本。
冷热存储
20
数据目录与AI/ML
元数据在特征存储、模型元数据管理中的应用,赋能AI。
AIML
21
数据目录的实时化
实时采集、流式血缘与近实时搜索,迈向实时目录。
实时流式
22
数据目录的合规性
GDPR/CCPA支持、数据溯源与隐私标签,满足监管要求。
合规隐私
23
协作功能
评论、注解、审批流程与团队协作,提升数据民主化。
协作审批
24
指标体系
元数据覆盖率、采集延迟、搜索命中率等核心指标度量。
指标度量
25
部署与运维
K8s容器化、高可用设计与灾备方案,生产级部署。
部署K8s
26
测试策略
单元、集成、性能测试与元数据模拟,保障质量。
测试质量
27
演进路线
从单机到分布式、从被动采集到主动发现,规划目录未来。
演进架构
28
行业实践
金融、电商、医疗等行业数据目录案例与最佳实践。
行业案例
29
选型指南
Apache Atlas、Amundsen、DataHub等开源方案对比。
选型开源
30
未来趋势
数据网格、主动元数据、AI驱动的数据目录前沿展望。
趋势前沿