VIP14
本课程属于：022-现代数据平台、Mesh与联邦查询工程 后端、数据与云原生工程 · 共 14 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

数据平台工程与自助服务生产实践与性能优化

共计 30 章节
可可资料掘金营 · 点击在线试看
01
数据平台工程与自助服务导论
目标=数据平台的核心定义 · 自助服务能力模型 · 生产实践与性能优化的关系
数据平台工程自助服务导论
02
数据平台架构与核心组件
目标=典型数据平台分层架构 · 数据存储与计算引擎选型 · 元数据与权限体系
数据平台架构核心组件
03
自助服务数据消费模式
目标=数据目录 · 数据发现 · 即席查询
自助服务数据消费…目标=数据目录
04
数据建模与自助分析友好设计
目标=维度建模 · 宽表与星型模型 · 指标语义层
数据建模自助分析友好设计
05
数据摄取与集成工程实践
目标=批流一体摄取 · CDC · 消息队列
数据摄取集成工程实践
06
数据存储格式与表管理
目标=列式存储 · Parquet/ORC · 湖仓表格式
数据存储格式表管理
07
查询引擎与执行优化基础
目标=SQL解析与优化器 · 执行计划分析 · 算子级性能诊断
查询引擎执行优化基础
08
自助查询性能优化实战
目标=查询重写 · 物化视图 · 结果缓存
自助查询性能优化…目标=查询重写
09
数据平台资源管理与隔离
目标=YARN/K8s资源调度 · 多租户隔离 · 队列配额
数据平台资源管理隔离
10
数据平台元数据与数据治理
目标=元数据采集 · 血缘追踪 · 数据质量规则
数据平台元数据数据治理
11
数据安全与权限自助化
目标=行列级权限 · 动态脱敏 · 统一认证
数据安全权限自助化
12
数据平台可观测性建设
目标=指标 · 日志 · 链路追踪
数据平台可观测性…目标=指标
13
数据平台SLA与容量规划
目标=SLA定义与度量 · 容量评估方法 · 弹性扩缩容
SLA数据平台
14
自助服务门户与开发者体验
目标=数据门户设计 · SQL编辑器 · Notebook集成
自助服务门户开发者体验
15
数据管道编排与调度优化
目标=DAG设计 · 依赖管理 · 调度延迟优化
数据管道编排调度优化
16
批处理作业性能调优
目标=Spark/Flink作业参数… · 数据倾斜处理 · Shuffle优化
批处理作业性能调…Spark/Flink
17
流处理与实时自助服务
目标=实时数仓架构 · 流批一体 · 实时OLAP
流处理实时自助服务
18
OLAP引擎与交互式分析优化
目标=ClickHouse/Dori… · 索引与预聚合 · 并发查询优化
OLAP引擎
19
数据湖与湖仓一体性能实践
目标=数据湖存储优化 · 湖仓表格式的查询加速 · 增量处理
数据湖湖仓一体性能实践
20
数据平台成本优化与自助服务
目标=存储成本 · 计算成本 · 查询成本归因
数据平台成本优化自助服务
21
数据平台工程化与CI/CD
目标=数据管道代码化 · 测试与发布 · 环境隔离
CI/CD数据平台工程化
22
数据质量与自助服务信任
目标=数据质量监控 · 异常检测 · 数据契约
数据质量自助服务信任
23
数据平台故障排查与性能诊断
目标=常见性能问题分类 · 诊断工具与方法 · 根因分析
数据平台故障排查性能诊断
24
自助服务中的SQL审核与优化建议
目标=SQL规范 · 自动审核 · 优化建议引擎
SQL自助服务
25
数据平台多租户与工作负载管理
目标=工作负载分类 · 资源池设计 · 查询优先级
数据平台多租户工作负载管理
26
数据平台缓存与加速层设计
目标=缓存策略 · 分布式缓存 · 结果集缓存
数据平台缓存加速层设计
27
数据平台性能测试与基准
目标=基准测试设计 · TPC-DS/TPC-H等基准 · 压力测试
数据平台性能测试基准
28
数据平台自动化运维与AIOps
目标=自动化巡检 · 异常告警 · 智能调优
AIOps数据平台自动化运…
29
数据平台自助服务最佳实践
目标=大型互联网公司案例 · 自助服务成熟度模型 · 组织与流程配套
数据平台自助服务…目标=大型互联网…
30
课程综合实战与未来展望
目标=综合项目设计与实现 · 性能优化全流程演练 · 平台工程与自助服务趋势
课程综合实战未来展望