VIP20

本课程属于：027-数据仓库建模 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

企业级数据集市建模与建设

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据集市概述

什么是数据集市、为什么需要数据集市、数据集市与数据仓库的区别、典型应用场景解析。

需求调研与范围界定

业务部门访谈技巧、核心指标梳理、数据源盘点、项目范围与里程碑规划。

技术选型与架构设计

OLAP vs OLTP、MPP数据库选型、Lambda与Kappa架构对比、数据分层设计。

数据模型设计（上）

维度建模理论、事实表与维度表设计，涵盖星型模型、雪花模型及多种事实表类型。

数据模型设计（下）

缓慢变化维实战、总线矩阵、一致性维度与事实，以及模型设计评审要点。

ETL架构与调度设计

全量与增量抽取、CDC技术选型、调度框架对比、任务依赖与重跑机制。

数据质量保障体系

数据质量六维度、质量监控规则配置、异常告警与修复流程。

元数据管理

技术元数据与业务元数据、血缘关系解析、数据字典建设、平台工具选型。

元数据治理

数据安全与权限管控

数据分级分类、脱敏策略、行列级权限控制、审计日志。

数据开发规范

命名规范、代码规范、版本控制策略、Code Review流程。

数据测试策略

单元测试、集成测试、回归测试、性能测试方案与压测实践。

数据服务接口设计

API网关选型、同步/异步查询接口、数据导出服务、限流与降级。

数据可视化与报表开发

BI工具选型、报表设计原则、大屏设计技巧、自助分析能力建设。

实时数据集市建设

实时数仓架构、实时ETL开发、维度表关联与实时指标计算。

数据湖与数据集市融合

Lakehouse架构、湖仓一体实践、数据入湖规范、跨引擎查询。

数据湖融合

性能优化实战（上）

SQL优化技巧、索引设计、物化视图应用、数据倾斜处理。

性能优化实战（下）

查询引擎调优、数据压缩算法、冷热分层存储、查询缓存策略。

数据治理与运营

数据资产盘点、标准制定、生命周期管理、运营指标体系。

项目管理与敏捷交付

Scrum在数据项目中的应用、用户故事拆分、迭代规划与回顾总结。

数据迁移与升级

跨集群迁移方案、版本升级评估、灰度发布与回滚策略。

成本控制与资源优化

计算资源评估、存储成本优化、查询成本治理、Spot实例利用。

数据产品化

数据产品定义、指标平台建设、数据门户设计、SLA管理。

AI与数据集市结合

特征工程平台、模型特征存储、实时特征计算、ML特征回填。

多租户与资源隔离

租户隔离方案、资源组配置、配额管理、计费逻辑。

多租户隔离

数据备份与容灾

备份策略、异地容灾方案、RPO/RTO指标、灾备演练流程。

合规与审计

GDPR/个人信息保护法合规、数据出境评估、审计日志留存、合规检查清单。

团队建设与人才培养

数据团队角色定义、技能矩阵、培训体系、知识沉淀。

案例实战（一）：电商

电商数据集市建设，涵盖用户画像、订单分析、商品推荐场景。

案例实战（二）：金融

金融数据集市建设，风控指标、交易流水、客户360度视图。

案例实战（三）：制造业

制造业数据集市建设，设备OEE、质量追溯、供应链协同。