VIP10

本课程属于：019-实时OLAP分析平台工程 后端、数据与云原生工程 · 共 10 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Doris实时数仓搭建全流程

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

Doris实时数仓概述

什么是实时数仓、Doris的核心特性、Doris与传统数仓的对比、Doris在实时数仓中的定位。

Doris架构与原理

Doris整体架构、FE与BE角色详解、数据分片与副本机制、Doris的查询引擎。

Doris环境部署

硬件与软件要求、集群规划、源码编译与二进制部署、集群启动与验证。

Doris基础表模型

明细模型、聚合模型、更新模型、主键模型的选择与使用场景。

Doris数据导入基础

Stream Load、Broker Load、Routine Load、Insert Into的对比与使用。

Doris数据分区与分桶

分区策略设计、分桶策略设计、动态分区、分区裁剪优化。

Doris数据模型与索引

前缀索引、ZoneMap索引、BloomFilter索引、Bitmap索引的使用。

Doris查询优化

查询计划解析、Join优化策略、谓词下推、物化视图的使用。

Doris实时数仓分层设计

ODS层设计、DWD层设计、DWS层设计、ADS层设计。

Doris与Kafka集成

Kafka数据接入配置、JSON解析与字段映射、Exactly-Once语义保证。

Doris与Flink集成

Flink Doris Connector配置、实时写入Doris、维表关联与状态管理。

Doris与Spark集成

Spark Doris Connector配置、批量读取与写入、ETL任务开发。

Doris数据导出

Export导出、Select Into Outfile、数据备份与恢复。

Doris权限与安全管理

用户与角色管理、权限模型、数据脱敏与审计。

Doris监控与告警

Prometheus+Grafana监控搭建、关键指标解读、告警规则配置。

Doris运维与调优

集群扩缩容、数据均衡、内存管理、磁盘IO优化。

Doris实时数仓案例

电商实时大屏、用户行为分析、实时报表系统。

Doris数据一致性保证

事务机制、两阶段提交、数据校验与修复。

一致性事务

Doris SQL进阶

窗口函数、UDF/UDAF开发、SQL优化技巧。

Doris数据治理

数据质量监控、元数据管理、生命周期管理。

Doris多租户与资源隔离

资源组配置、查询队列、负载管理。

多租户资源

Doris冷热数据分层

存储策略配置、冷热数据迁移、存储成本优化。

Doris跨集群复制

CCR原理与配置、灾备方案、数据同步延迟监控。

Doris与数据湖集成

Hive外表、Iceberg外表、Hudi外表、数据湖分析。

数据湖集成

Doris向量化执行引擎

向量化原理、性能对比、配置优化。

Doris物化视图进阶

物化视图创建策略、自动刷新、查询改写。

物化视图优化

Doris数据压缩与编码

压缩算法选择、编码方式、存储空间优化。

Doris JDBC数据源

JDBC外表配置、实时同步MySQL、数据联邦查询。

Doris最佳实践

Schema设计规范、查询优化 checklist、常见问题排查。

最佳实践规范

Doris实时数仓项目实战

需求分析、架构设计、开发实现、上线运维全流程。

项目全流程