VIP20

本课程属于：088-Databricks Lakehouse数据平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Databricks性能优化与容量治理

共计 30 章节

可可资料掘金营 · 点击在线试看

课程导入与性能治理全景

目标=Databricks性能优化与… · 关键挑战 · 整体方法论与学习路径

课程导入性能治理全景

Databricks架构与性能影响要素

目标=Lakehouse架构 · 控制面与数据面 · 计算资源类型

Databricks架构

工作区与集群配置优化

目标=集群模式选择 · 自动伸缩 · Spot实例

工作区集群配置优化

Spark执行模型与作业生命周期

目标=DAG调度 · Stage与Task划分 · Shuffle机制

Spark执行模型

数据布局与文件格式优化

目标=Delta Lake表设计 · 分区策略 · Z-Order

数据布局文件格式优化

Delta Lake性能特性深入

目标=事务日志 · 缓存 · 数据跳过

查询优化与SQL性能调优

目标=Spark SQL执行计划分析 · 谓词下推 · 连接策略

SQL查询优化

Photon引擎与向量化执行

目标=Photon适用场景 · 启用方式 · 性能对比

缓存与持久化策略

目标=Delta缓存 · Spark缓存 · 磁盘缓存

缓存持久化策略

数据倾斜诊断与治理

目标=倾斜识别方法 · 加盐 · 分桶

数据倾斜诊断治理

Shuffle性能优化

目标=Shuffle分区数 · 序列化 · 压缩

Shuffle性能优化

连接与聚合性能优化

目标=Sort-Merge Join · Broadcast Hash Joi… · Shuffle Hash Join

连接聚合性能优化

I/O与存储层优化

目标=云存储访问模式 · 缓存层 · Parquet/ORC读取优化

I/O存储层优化

Databricks SQL Warehouse性能调优

目标=SQL Warehouse类型 · 规模 · 自动停止

作业与工作流性能治理

目标=Job集群 · 工作流调度 · 任务并行

作业工作流性能治理

结构化流与实时性能优化

目标=流处理触发模式 · 状态管理 · 水位线

结构化流实时性能优化

ML与AI工作负载性能优化

目标=特征工程 · 分布式训练 · GPU集群

成本与容量治理框架

目标=DBU计费模型 · 成本归因 · 标签策略

成本容量治理框架

集群策略与治理

目标=集群策略 · 实例池 · 权限控制

集群策略治理

系统表与可观测性

目标=系统表查询 · 查询历史 · 作业运行指标

系统表可观测性

性能监控与告警体系

目标=关键指标定义 · 监控工具集成 · 告警规则

性能监控告警体系

容量规划与弹性伸缩

目标=工作负载预测 · 集群规模估算 · 自动伸缩策略

容量规划弹性伸缩

多租户与工作区治理

目标=工作区隔离 · 计算资源隔离 · 配额管理

多租户工作区治理

数据生命周期与存储治理

目标=热温冷数据分层 · 保留策略 · Vacuum

数据生命周期存储治理

性能问题诊断实战

目标=从慢查询到根因分析 · Spark UI解读 · 日志排查

性能问题诊断实战目标=从慢查询到…

容量治理实战

目标=成本超支分析 · 资源利用率优化 · 闲置资源回收

容量治理实战目标=成本超支分…

典型行业案例

目标=金融 · 零售 · 制造等场景下的Databricks性…

典型行业案例目标=金融

性能优化与治理自动化

目标=自动化调优脚本 · CI/CD集成 · 基础设施即代码

性能优化治理自动化

前沿趋势与生态集成

目标=Lakehouse Feder… · Unity Catalog · Delta Live Tables

前沿趋势生态集成

课程总结与持续治理

目标=知识体系回顾 · 治理成熟度模型 · 持续改进计划与认证路径

课程总结持续治理