VIP20
本课程属于：051-数据平台FinOps 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Schema变更对存储成本的影响与治理

📚 共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
Schema变更基础
什么是Schema变更、常见的Schema变更类型（新增列、修改列类型、删除列、新增索引）、Schema变更的生命周期。
基础概念生命周期
02
存储成本模型
云存储计费模式（按量付费、预留空间）、存储分层（热数据、温数据、冷数据）、数据压缩与编码对成本的影响。
计费模式分层存储
03
新增列对存储的影响
新增NULLABLE列与NOT NULL列的成本差异、默认值对存储空间的影响、新增列后的数据页分裂问题。
列类型页分裂
04
修改列类型对存储的影响
VARCHAR长度扩展与收缩的成本、INT到BIGINT的存储膨胀、DECIMAL精度变化带来的空间变化。
类型转换空间膨胀
05
删除列与数据回收
DROP COLUMN的物理与逻辑删除区别、数据碎片与空间回收机制、ALTER TABLE ... DROP COLUMN后的实际空间释放时机。
碎片回收空间释放
06
索引变更对存储的影响
新增索引的额外存储开销、复合索引的列顺序与存储效率、删除索引释放的空间是否立即生效。
索引开销复合索引
07
分区表Schema变更
分区表新增/删除分区的成本、分区键变更的代价、分区裁剪与存储优化。
分区管理裁剪优化
08
Online DDL与存储成本
Online DDL的原理（以MySQL/PostgreSQL为例）、Online DDL期间的临时表空间占用、Online DDL失败后的回滚成本。
Online DDL临时空间
09
大表Schema变更策略
pt-online-schema-change工具原理、gh-ost工具的使用、大表变更的流量控制与成本控制。
工具链流量控制
10
Schema变更与数据压缩
变更后压缩率的变化、列式存储（如Parquet/ORC）的Schema演进成本、压缩字典重建的开销。
压缩率列式存储
11
分布式数据库的Schema变更
TiDB/CockroachDB的Schema变更机制、分布式环境下的存储一致性成本、变更对Region分裂的影响。
分布式Region分裂
12
NoSQL数据库的Schema变更
MongoDB的柔性Schema与存储膨胀、Cassandra的ALTER TABLE成本、HBase的列族变更。
NoSQL柔性Schema
13
数据湖Schema变更
Delta Lake/ Apache Iceberg的Schema演进、Hive分区变更的元数据成本、数据湖存储（S3/OSS）的版本管理成本。
数据湖版本管理
14
Schema变更的监控与告警
如何监控变更前后的存储增长、设置合理的存储成本告警阈值、使用CloudWatch/Prometheus监控存储指标。
监控告警阈值
15
Schema变更的成本预估模型
建立变更前的基线、预估新增存储空间的公式、使用EXPLAIN ANALYZE评估变更代价。
成本预估基线
16
变更回滚与成本
Schema变更回滚的存储代价、快照与备份在回滚中的作用、回滚失败的数据恢复成本。
回滚数据恢复
17
多环境Schema变更管理
开发/测试/生产环境的存储成本差异、蓝绿部署中的Schema变更成本、灰度发布与存储成本控制。
多环境灰度发布
18
Schema版本控制与存储
数据库迁移工具（Flyway/Liquibase）的存储开销、版本表的设计与存储膨胀、迁移历史清理策略。
版本控制迁移工具
19
数据归档与Schema变更
归档表的Schema设计、冷热数据分离的存储成本、归档后Schema变更的复杂性。
归档冷热分离
20
Schema变更与数据生命周期管理
TTL（Time-To-Live）与Schema变更的交互、数据过期删除策略对存储的影响、生命周期策略的成本优化。
TTL生命周期
21
跨区域复制的Schema变更
主从复制中的Schema变更延迟、跨区域同步的存储成本、多活架构下的Schema一致性成本。
跨区域多活
22
Schema变更的自动化与成本优化
使用Terraform管理Schema变更、CI/CD流水线中的成本检查、自动化回滚策略。
自动化CI/CD
23
Schema变更的审计与合规
审计日志的存储成本、Schema变更的合规要求（如GDPR）、数据保留策略与存储成本。
审计合规
24
云原生数据库的Schema变更
Aurora/Cloud Spanner的Schema变更特性、Serverless数据库的存储计费模式、自动扩缩容对成本的影响。
云原生Serverless
25
Schema变更的性能与成本权衡
变更期间的IOPS与吞吐量影响、性能下降导致的额外计算成本、变更窗口选择与成本优化。
性能IOPS
26
数据仓库的Schema变更
Snowflake的Zero-Copy Cloning与Schema变更、Redshift的列编码变更成本、BigQuery的Schema自动检测与存储。
数据仓库Zero-Copy
27
Schema变更的测试与验证
在测试环境模拟存储成本、使用数据生成工具评估变更影响、变更前后的存储快照对比。
测试快照对比
28
Schema变更的文档与知识库
记录变更前后的存储成本变化、建立Schema变更的成本基线库、团队知识传承与成本意识培养。
知识库基线库
29
Schema变更的灾难恢复
变更失败后的数据恢复策略、备份存储的成本优化、跨区域备份的Schema一致性。
灾难恢复备份
30
Schema变更的未来趋势
Schema-on-Read与Schema-on-Write的成本对比、AI驱动的Schema优化、自动Schema演进与成本控制。
未来趋势AI优化