VIP20

本课程属于：047-湖仓元数据治理 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

跨平台Catalog元数据互通与同步

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

元数据基础

什么是元数据，技术元数据、业务元数据、管理元数据的分类，以及元数据在数据治理中的核心价值。

元数据标准与模型

DCAT、Dublin Core、Common Warehouse Metamodel (CWM) 等主流元数据标准与模型详解。

元数据存储与序列化

关系型数据库存储方案，JSON、XML、YAML序列化格式对比及适用场景。

存储序列化

跨平台元数据同步策略

事件驱动同步、定时批量同步、CDC（变更数据捕获）机制的原理与实现。

元数据血缘分析

字段级与表级血缘追踪，基于SQL解析的血缘分析技术及工具链。

血缘SQL解析

元数据质量与治理

完整性校验、一致性检查、版本管理，构建可信任的元数据治理体系。

元数据API设计

RESTful API设计原则，GraphQL在元数据查询中的灵活应用。

元数据安全与权限

基于角色的访问控制（RBAC），元数据脱敏策略与安全最佳实践。

元数据搜索与发现

基于Elasticsearch的全文检索，标签与分类体系助力元数据发现。

搜索Elasticsearch

元数据与数据目录

构建企业级数据目录（Data Catalog）的实践方法与架构设计。

元数据与数据湖/仓

Lakehouse架构中元数据的管理与同步，Delta Lake、Iceberg集成。

LakehouseDelta Lake

元数据与AI/ML

特征存储（Feature Store）中的元数据管理，模型元数据追踪与版本化。

Feature StoreMLflow

元数据与数据网格

领域驱动的元数据所有权，联邦治理在Data Mesh中的落地。

Data Mesh联邦治理

元数据与数据合规

GDPR、CCPA等法规下的元数据审计、溯源与合规策略。

元数据与实时流处理

Kafka Schema Registry、Avro/Protobuf Schema管理与演化。

Schema RegistryAvro

元数据与数据虚拟化

虚拟化层中的元数据映射、查询下推与异构数据源统一。

虚拟化查询下推

元数据与数据质量平台

元数据驱动的数据质量规则生成、监控与告警闭环。

数据质量规则引擎

元数据与数据编排

Apache Airflow / DolphinScheduler中的元数据传递与任务依赖。

AirflowDolphinScheduler

元数据与数据版本控制

基于Git的数据仓库版本管理，dbt、LakeFS实现数据版本化。

元数据与数据交换格式

Apache Arrow、Parquet、ORC中的元数据嵌入与优化。

元数据与云原生

Kubernetes Operator管理元数据服务，云厂商元数据服务对比。

元数据与数据测试

基于元数据自动生成数据测试用例，提升数据质量验证效率。

测试自动化

元数据与数据恢复

利用元数据实现时间旅行查询与数据回滚，保障数据可恢复性。

时间旅行回滚

元数据与数据压缩

基于元数据选择最优压缩算法与编码策略，降低存储成本。

元数据与数据分片

基于元数据的水平分片（Sharding）策略与智能路由。

元数据与数据加密

列级加密、字段级加密的元数据标记与密钥管理。

元数据与数据脱敏

动态数据脱敏（DDM）中的元数据规则引擎与策略配置。

元数据与数据生命周期

冷热数据分层、归档策略的元数据驱动，自动化生命周期管理。

生命周期分层

元数据与数据成本

基于元数据的存储与计算成本归因分析，优化资源分配。

元数据与数据文化

元数据驱动的数据民主化与自助分析实践，构建数据驱动组织。

数据文化自助分析