VIP14
本课程属于：022-现代数据平台、Mesh与联邦查询工程 后端、数据与云原生工程 · 共 14 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

现代数据架构与平台演进生产实践与性能优化

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入与全景认知
目标=现代数据架构的定义 · 演进驱动力 · 平台化核心能力
课程导入全景认知
02
数据架构演进主线
目标=从单体数据库 · 数据仓库 · Lambda/Kappa 到湖仓一体…
数据架构演进主线目标=从单体数据…
03
现代数据平台参考架构
目标=分层设计 · 控制面与数据面 · 元数据与血缘
现代数据平台参考…目标=分层设计
04
数据存储选型与生产实践
目标=行存 · 列存 · 对象存储
数据存储选型生产实践
05
数据湖与湖仓一体生产实践
目标=开放表格式 · ACID 事务 · Schema 演进
数据湖湖仓一体生产实践
06
批处理平台架构与性能优化
目标=分布式计算引擎 · 任务调度 · Shuffle 机制
批处理平台架构性能优化
07
流处理平台架构与性能优化
目标=事件时间 · 水位线 · 状态管理
流处理平台架构性能优化
08
消息与数据管道生产实践
目标=Kafka/Pulsar 等消… · 分区设计 · 副本与 ISR
消息数据管道生产实践
09
数据集成与 ETL/ELT 演进
目标=批流一体集成 · CDC 捕获 · 数据同步
ETL/ELT数据集成
10
元数据管理与数据治理平台
目标=技术元数据 · 业务元数据 · 血缘追踪
元数据管理数据治理平台
11
数据建模与数仓分层实践
目标=维度建模 · Data Vault · 宽表与指标层设计
数据建模数仓分层实践
12
OLAP 查询引擎与加速实践
目标=MPP 架构 · 向量化执行 · CBO 优化
OLAP查询引擎
13
实时 OLAP 与交互式分析
目标=实时写入 · 主键更新 · 并发查询
OLAP实时
14
数据平台计算资源管理
目标=YARN/K8s 调度 · 队列与配额 · 弹性伸缩
数据平台计算资源…YARN/K8s
15
数据平台存储性能优化
目标=分区与分桶 · 文件格式与压缩 · 列裁剪与谓词下推
数据平台存储性能…目标=分区
16
数据平台网络与 I/O 优化
目标=Shuffle 网络 · 远程读 · 数据本地性
I/O数据平台网络
17
数据平台高可用与容灾
目标=多副本 · 多活 · 故障转移
数据平台高可用容灾
18
数据安全与合规生产实践
目标=认证授权 · 行列级权限 · 脱敏加密
数据安全合规生产实践
19
数据质量与可观测性体系
目标=质量规则 · 异常检测 · SLA/SLO
数据质量可观测性体系
20
数据平台性能测试与基准
目标=TPC 类基准 · 压测方法 · 负载建模
数据平台性能测试基准
21
大数据作业性能诊断实战
目标=Spark/Flink 等作业… · GC 分析 · 内存与 CPU 调优
大数据作业性能诊…Spark/Flink
22
数据平台成本优化实践
目标=存算成本拆解 · 资源画像 · 弹性策略
数据平台成本优化…目标=存算成本拆…
23
云原生数据平台演进
目标=容器化 · Serverless · 存算分离
云原生数据平台演…目标=容器化
24
数据网格与去中心化架构
目标=领域数据产品 · 数据契约 · 联邦治理
数据网格心化架构
25
AI 与数据平台融合实践
目标=特征平台 · 向量数据库 · 湖仓上的机器学习
AI数据平台融合实践
26
数据平台 DevOps 与 DataOps
目标=CI/CD · 基础设施即代码 · 环境管理
DevOpsDataOps
27
大规模数据迁移与平台升级
目标=迁移评估 · 双写与灰度 · 数据校验
大规模数据迁移平台升级
28
典型行业生产案例拆解
目标=互联网 · 金融 · 零售
典型行业生产案例…目标=互联网
29
平台演进中的组织与流程
目标=团队拓扑 · 平台产品化 · 服务目录
平台演进组织
30
课程综合实战与未来展望
目标=端到端数据平台方案设计 · 性能优化演练 · 架构评审要点
课程综合实战未来展望