VIP20
本课程属于：047-湖仓元数据治理 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Lakehouse数据资产目录与元数据管理

📚 共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
第1章
数据资产目录概述
什么是数据资产，目录定义与核心价值，元数据、数据血缘、数据标准等基础概念。
元数据数据血缘数据标准
第2章
数据资产目录建设方法论
从0到1的建设路径，成熟度评估模型，组织架构与角色分工设计。
建设路径成熟度角色分工
第3章
元数据采集与接入
技术元数据、业务元数据、管理元数据分类，JDBC/API/日志解析采集方式，Atlas与DataHub工具。
元数据分类采集方式AtlasDataHub
第4章
数据血缘解析
表级与字段级血缘粒度，SQL解析与日志解析原理，手动与自动构建策略。
血缘粒度SQL解析自动构建
第5章
数据标准与质量
命名规范与类型规范定义，完整性、准确性、一致性质量规则，监控与告警机制。
数据标准质量规则监控告警
第6章
数据资产目录平台设计
搜索、浏览、详情、血缘功能模块划分，存储/索引/前端技术选型，API设计原则。
功能模块技术选型API设计
第7章
数据资产目录平台开发实战
Spring Boot后端核心实现，React/Vue前端展示，Elasticsearch搜索集成。
Spring BootReactElasticsearch
第8章
数据资产目录运营
资产注册与发布，版本管理，生命周期管理，细粒度权限控制。
资产注册版本管理权限控制
第9章
数据资产目录与数据治理
与数据湖/数据仓库集成，数据脱敏与加密安全结合，数据中台协同。
数据湖数据安全数据中台
第10章
数据资产目录案例实战
金融、电商、制造业三大行业数据资产目录建设实践与经验。
金融电商制造业
第11章
数据资产目录的自动化运维
自动化采集脚本，血缘更新策略，元数据变更通知机制。
自动化血缘更新变更通知
第12章
数据资产目录的搜索与推荐
基于标签与语义的搜索，个性化推荐算法与实现。
标签搜索语义搜索推荐
第13章
数据资产目录的API生态
开放API设计，与Tableau、PowerBI等BI工具集成，ETL工具对接。
开放APIBI集成ETL
第14章
数据资产目录的监控与审计
操作日志审计，数据访问审计，性能监控与告警。
审计监控性能
第15章
数据资产目录的国际化与多租户
多语言支持方案，多租户隔离架构，租户级权限设计。
国际化多租户隔离
第16章
数据资产目录的冷热数据管理
数据分级分类，归档策略，存储优化与成本控制。
冷热数据归档存储优化
第17章
数据资产目录的实时更新
基于CDC的实时采集，基于消息队列的实时血缘构建。
CDC消息队列实时血缘
第18章
数据资产目录的图数据库应用
使用Neo4j存储血缘关系，图查询优化与可视化展示。
Neo4j图查询可视化
第19章
数据资产目录的AI赋能
自动标签生成，智能数据发现，异常数据检测。
AI自动标签异常检测
第20章
数据资产目录的合规性
GDPR合规要求，数据分类分级，数据保留策略。
GDPR分类分级保留策略
第21章
数据资产目录的测试策略
单元测试、集成测试、性能测试与混沌工程实践。
单元测试性能测试混沌工程
第22章
数据资产目录的部署与运维
Docker化部署，Kubernetes编排，CI/CD流水线搭建。
DockerKubernetesCI/CD
第23章
数据资产目录的灾备与高可用
多活架构设计，数据备份策略，故障切换机制。
灾备高可用故障切换
第24章
数据资产目录的成本优化
存储成本、计算成本、人力成本分析与优化方法。
成本优化存储计算
第25章
数据资产目录的社区与生态
Apache Atlas、DataHub等开源项目贡献，社区最佳实践。
开源AtlasDataHub社区
第26章
数据资产目录的演进路线
从目录到市场，从被动到主动，从工具到平台演进。
演进主动元数据平台化
第27章
数据资产目录的度量与KPI
资产覆盖率、血缘完整度、用户活跃度、搜索命中率等关键指标。
KPI覆盖率活跃度
第28章
数据资产目录的培训与推广
内部培训体系搭建，文档建设，用户反馈闭环。
培训文档反馈闭环
第29章
数据资产目录的常见问题与解决方案
数据孤岛、血缘断裂、元数据不一致等典型问题及应对。
数据孤岛血缘断裂不一致
第30章
数据资产目录的未来趋势
Data Mesh、Data Fabric、主动元数据、数据编织等前沿方向。
Data MeshData Fabric主动元数据