VIP20

本课程属于：007-元数据与数据目录 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

企业元数据目录搭建与治理应用

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

元数据基础

理解元数据的本质，区分业务、技术、操作三种类型，掌握元数据在数据治理中的核心角色与价值。

概念分类治理

元数据模型

学习实体-关系模型与属性定义方法，了解Dublin Core、ISO 11179等元数据标准及其应用场景。

建模标准设计

元数据采集

对比手动与自动采集策略，掌握JDBC/ODBC采集数据库元数据及API采集的技术要点。

元数据存储

探索关系型数据库与图数据库（Neo4j）存储方案，进行元数据存储选型对比分析。

存储Neo4j选型

元数据血缘

深入字段级与表级血缘分析，学习血缘可视化展示技术，追踪数据流转路径。

血缘可视化追踪

元数据质量

建立完整性检查与一致性校验机制，设计元数据质量评分体系保障数据可信。

质量校验评分

元数据安全

实施基于RBAC的访问控制，掌握敏感元数据脱敏与审计日志记录方法。

安全RBAC脱敏

元数据版本管理

制定版本号策略，记录变更历史，实现元数据回滚机制确保可追溯。

版本变更回滚

元数据搜索

实现全文检索与标签搜索，配置高级过滤与排序功能提升查找效率。

搜索全文检索过滤

元数据API设计

遵循RESTful原则设计查询、批量导入导出接口，构建标准化元数据服务。

数据目录概念

明确数据目录定义，辨析其与数据字典的区别，掌握数据目录的核心功能与定位。

概念对比功能

数据目录架构

设计分层架构，探索微服务在数据目录中的应用，构建高可扩展系统。

架构微服务分层

数据目录数据模型

定义资产模型、关系模型与标签模型，为数据目录提供结构化基础。

建模资产标签

数据目录采集引擎

设计插件化采集框架，制定调度策略与增量采集方案，高效同步元数据。

采集插件调度

数据目录分类系统

构建业务、技术及自定义分类体系，实现数据资产的多维度组织。

分类业务技术

数据目录标签管理

掌握标签定义、自动打标与标签传播机制，提升数据发现效率。

标签自动传播

数据目录搜索与发现

集成Elasticsearch实现搜索排序与推荐算法，优化数据发现体验。

数据目录权限管理

管理数据资产与目录访问权限，设计审批流程保障数据安全。

权限审批安全

数据目录数据质量

配置质量规则，生成质量报告与看板，持续监控数据健康度。

质量规则看板

数据目录血缘可视化

通过DAG图展示血缘关系，进行影响分析与溯源分析，厘清数据脉络。

血缘DAG溯源

数据目录协作功能

集成评论、收藏、订阅与通知功能，促进团队数据协作与共享。

协作订阅通知

数据目录API网关

构建统一API网关，实现限流、鉴权与监控，保障服务稳定性。

网关限流鉴权

数据目录与数据湖集成

同步Hive与Delta Lake元数据，实现数据湖资产的统一管理。

数据湖HiveDelta Lake

数据目录与数据仓库集成

同步Snowflake与Redshift元数据，打通数据仓库资产目录。

数据仓库SnowflakeRedshift

数据目录与BI工具集成

对接Tableau、Power BI、Superset，同步BI报表与数据源元数据。

BITableauPower BI

数据目录与ETL工具集成

集成Airflow、dbt、Informatica，同步ETL任务与数据血缘信息。

数据目录实战：从零搭建

进行需求分析、技术选型与架构设计，开启数据目录系统搭建之旅。

实战需求架构

数据目录实战：核心模块开发

开发采集、存储、搜索、血缘等核心模块，构建完整数据目录功能。

开发模块实现

数据目录实战：部署与运维

实现容器化部署，配置监控告警与性能优化，保障系统稳定运行。

部署容器运维

数据目录实战：运营与推广

开展用户培训，培育数据文化，推动数据目录持续迭代与广泛采用。

运营培训文化