VIP20

本课程属于：023-数据血缘与目录 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据目录驱动资产盘点实战

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

课程导论与数据目录基础

什么是数据目录？为什么需要数据目录？数据目录与资产盘点的关系。

数据目录核心概念

元数据、数据血缘、数据分类、数据分级。

元数据血缘分类分级

主流数据目录工具对比

Apache Atlas、DataHub、Alation、Collibra 选型分析。

数据目录架构设计

分层架构、存储选型、索引策略。

架构存储索引

元数据采集引擎设计

基于事件驱动 vs 定时轮询的架构选择。

采集事件驱动轮询

数据源接入实战：关系型数据库

MySQL、PostgreSQL 元数据采集。

MySQLPostgreSQLJDBC

数据源接入实战：大数据组件

Hive、HBase、Kafka 元数据采集。

数据源接入实战：云原生数据仓库

Snowflake、Redshift 元数据采集。

SnowflakeRedshift云原生

数据血缘解析技术

SQL Parser 原理与 Calcite 实践。

血缘SQL ParserCalcite

数据血缘解析实战

字段级血缘的构建与存储。

字段级血缘构建存储

数据分类与分级策略

基于规则 vs 基于机器学习的分类方法。

分类分级机器学习

数据目录搜索与发现

Elasticsearch 索引设计与搜索优化。

搜索Elasticsearch索引

数据目录 API 设计

RESTful API 与 GraphQL 接口实践。

APIRESTfulGraphQL

资产盘点流程设计

从数据源发现到资产注册的全链路。

盘点流程资产注册

资产盘点自动化

基于数据目录的自动资产扫描与更新。

自动化扫描更新

资产盘点质量评估

完整性、准确性、时效性指标设计。

质量指标评估

数据目录与数据治理的集成

与数据质量、数据安全平台的联动。

治理数据质量安全

数据目录权限模型

RBAC、ABAC 在数据目录中的实现。

数据目录可视化

知识图谱与血缘图的 SVG 绘制技术。

可视化知识图谱SVG

数据目录变更管理

元数据版本控制与变更通知机制。

变更版本控制通知

数据目录性能优化

大规模元数据下的查询与写入优化。

性能优化大规模

数据目录高可用设计

多活架构与容灾策略。

高可用多活容灾

数据目录与数据湖/仓一体架构的融合实践

湖仓一体场景下的元数据管理。

数据湖仓一体融合

数据目录在数据中台中的角色与落地案例

中台架构中数据目录的定位与实战。

数据中台落地案例

数据目录在金融行业的应用

监管报送与数据资产盘点。

金融监管报送

数据目录在电商行业的应用

用户行为数据资产盘点。

电商用户行为盘点

数据目录在制造业的应用

IoT 数据资产盘点。

制造IoT资产盘点

数据目录运营

如何让业务团队用好数据目录。

运营业务推广

数据目录 ROI 评估

如何量化数据目录的价值。

ROI价值量化

课程总结与未来展望

数据目录与 AI 的融合趋势。