首页
›
后端、数据与云原生工程
›
019-实时OLAP分析平台工程
›
《OLAP平台容量与成本优化》
VIP10
本课程属于:019-实时OLAP分析平台工程
后端、数据与云原生工程 · 共 10 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
OLAP平台容量与成本优化
共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入与成本认知
目标=OLAP平台成本构成 · 容量与成本的关系 · 优化目标与核心指标(单位查询成本
课程导入
成本认知
02
OLAP平台架构与资源模型
目标=MPP架构 · 存算分离与存算一体 · 计算资源(CPU/内存)
OLAP
平台架构
03
容量规划方法论
目标=基于业务增长预测 · 峰值与均值负载分析 · 容量水位设定
容量规划方法论
目标=基于业务增…
04
成本度量与分摊体系
目标=成本中心划分 · 标签体系 · 按业务/租户/查询分摊成本
成本度量
分摊体系
05
数据存储成本优化
目标=冷热数据分层 · 压缩编码选择 · 列式存储与索引
数据存储成本优化
目标=冷热数据分…
06
计算资源成本优化
目标=弹性伸缩 · 资源队列与隔离 · CPU/内存配比调优
计算资源成本优化
目标=弹性伸缩
07
查询性能与成本平衡
目标=查询重写 · 物化视图 · 预聚合
查询性能
成本平衡
08
数据模型与分区设计优化
目标=星型/雪花模型选择 · 分区键与分桶策略 · 数据倾斜处理
数据模型
分区设计优化
09
索引与统计信息优化
目标=位图索引 · Bloom Filter · Zone Map
索引
统计信息优化
10
物化视图与预计算
目标=物化视图选型 · 刷新策略 · 命中率提升
物化视图
预计算
11
缓存与结果复用
目标=查询结果缓存 · 算子缓存 · Alluxio/Redis等缓存层
缓存
结果复用
12
资源调度与弹性伸缩
目标=YARN/K8s调度 · 动态资源分配 · 自动扩缩容策略
资源调度
弹性伸缩
13
多租户与资源隔离
目标=租户资源配额 · cgroup隔离 · 优先级调度
多租户
资源隔离
14
数据压缩与编码
目标=压缩算法对比(ZSTD · LZ4 · Snappy)
数据压缩
编码
15
冷热分层与存储介质
目标=SSD/HDD/对象存储选型 · 分层策略 · 数据迁移与缓存预热
冷热分层
存储介质
16
数据生命周期管理
目标=数据归档 · 删除策略 · 合规保留
数据生命周期管理
目标=数据归档
17
小文件治理
目标=小文件产生原因 · 合并策略 · Compaction调优
小文件治理
目标=小文件产生…
18
查询优化器与执行计划
目标=CBO/RBO · Join Reorder · 谓词下推
查询优化器
执行计划
19
SQL审核与查询治理
目标=慢查询识别 · SQL规范 · 资源消耗预估
SQL
审核
20
工作负载管理与隔离
目标=ETL与Ad-hoc隔离 · 批流分离 · 资源组划分
工作负载管理
隔离
21
监控与可观测性
目标=关键指标(CPU · 内存 · IO
监控
可观测性
22
容量与成本预测
目标=时间序列预测 · 回归模型 · 业务驱动预测
容量
成本预测
23
成本优化实验与A/B测试
目标=实验设计 · 指标定义 · 灰度发布
A/B
成本优化实验
24
自动化成本优化
目标=规则引擎 · 自动调优 · 基于ML的参数推荐
自动化成本优化
目标=规则引擎
25
云原生OLAP成本优化
目标=云上存算分离 · Spot实例 · Serverless
OLAP
云原生
26
开源OLAP引擎成本优化
目标=ClickHouse · Doris · StarRocks
OLAP
开源
27
商业OLAP平台成本优化
目标=Snowflake · BigQuery · Redshift等云数仓的成本模型与…
OLAP
商业
28
成本优化组织与流程
目标=FinOps文化 · 跨团队协作 · 成本责任制
成本优化组织
流程
29
综合实战
目标=从容量规划到成本优化全流程 · 完成容量评估 · 成本分析
综合实战
目标=从容量规划…
30
课程总结与前沿展望
目标=核心知识点回顾 · 优化方法论总结 · 未来趋势(AI优化
课程总结
前沿展望
所属VIP或分类
同VIP:Apache-Doris实时数仓工程
同VIP:Apache-Druid实时分析工程
同VIP:Apache-Pinot实时OLAP工程