VIP20

本课程属于：001-批处理数据仓库架构 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据仓库SCD类型管理与拉链表开发

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

SCD 概念与背景

什么是缓慢变化维、为什么需要处理 SCD、SCD 在数据仓库中的位置。

保留原始值、适用场景、实现方式。

覆盖更新、适用场景、实现方式（SQL UPDATE）。

增加新行、适用场景、实现方式（有效日期、当前标志）。

增加新列、适用场景、实现方式（原值/现值列）。

微型维度、适用场景、实现方式（高频变化属性分离）。

SCD 类型 5、6、7

混合类型简介、何时使用混合类型。

SCD 类型选择决策矩阵

如何根据业务需求选择 SCD 类型。

SCD 实现之代理键

自然键 vs 代理键、代理键生成策略。

代理键设计

SCD 实现之有效日期管理

开始日期、结束日期、当前标志位设计。

SCD 实现之拉链表

什么是拉链表、拉链表的设计与查询。

拉链表历史

SCD 实现之增量加载

如何识别新增与变更数据（CDC 技术）。

SCD 实现之全量加载

全量快照表的设计与使用场景。

SCD 与缓慢变化事实

事实表中的外键如何处理历史变化。

事实表外键

SCD 与维度退化

将维度属性退化到事实表的场景与权衡。

SCD 与雪花模型

SCD 在雪花模型中的实现差异。

SCD 性能优化

索引策略、分区策略、查询优化。

SCD 与数据质量

数据一致性检查、重复记录处理、空值处理。

SCD 与历史追溯

如何查询某个时间点的维度快照。

SCD 与缓慢变化维度合并

多源数据合并时的 SCD 处理。

SCD 在 Kimball 模型中的最佳实践

Kimball 对 SCD 的经典建议。

Kimball最佳实践

SCD 在 Inmon 模型中的最佳实践

Inmon 模型下 SCD 的差异。

Inmon最佳实践

SCD 在 Data Vault 模型中的实现

Hub、Link、Satellite 与 SCD 的关系。

Data VaultSatellite

SCD 在实时数仓中的挑战

实时流处理中的 SCD 实现难点。

实时流处理

SCD 在云数仓中的实践

Snowflake、BigQuery、Redshift 中的 SCD 实现。

云数仓Snowflake

SCD 自动化工具与框架

dbt、Apache Spark、Airflow 中的 SCD 处理。

SCD 测试策略

如何测试 SCD 逻辑的正确性。

SCD 案例实战一：客户维度 SCD 类型 2

从建表到查询，完整实现客户维度历史跟踪。

SCD 案例实战二：产品维度混合实现

产品维度 SCD 类型 1 与类型 3 混合实现。

SCD 总结与展望

SCD 的未来趋势、课程回顾、常见面试题。