VIP14

本课程属于：022-现代数据平台、Mesh与联邦查询工程 后端、数据与云原生工程 · 共 14 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

企业级实时OLAP解决方案实战

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

OLAP基础与实时数仓概述

OLAP概念、OLAP vs OLTP、实时数仓演进、Lambda架构与Kappa架构对比。

ClickHouse核心原理

列式存储、向量化执行引擎、MergeTree引擎家族、分区与排序键设计。

ClickHouse安装与部署

单机部署、集群部署（分片+副本）、ZooKeeper/Keeper配置、常见部署问题排查。

ClickHouse数据类型与DDL

基础数据类型、Nullable、LowCardinality、Array、Tuple、Nested、表引擎选择策略。

ClickHouse DML与查询优化

INSERT/UPDATE/DELETE、SELECT语法、JOIN优化、子查询优化、GLOBAL优化。

ClickHouse高级函数

聚合函数、窗口函数、数组函数、字符串函数、日期函数、条件函数、JSON函数。

ClickHouse物化视图与投影

物化视图原理、创建与管理、数据一致性、投影（Projection）机制与实战。

ClickHouse数据同步方案

Kafka引擎表、MaterializedMySQL、JDBC表引擎、自研同步工具设计思路。

Doris核心原理

MPP架构、向量化引擎、分区与分桶、Rollup与物化视图、数据模型（Dup/Agg/Uniq）。

Doris安装与部署

FE/BE架构、集群部署、扩缩容、高可用配置、常见运维问题。

运维高可用

Doris数据导入实战

Stream Load、Broker Load、Routine Load、Insert Into、DataX、Flink CDC。

Doris查询优化

执行计划分析、Join优化（Colocate/Shuffle/Bucket）、Bitmap精确去重、Runtime Filter。

优化执行计划

StarRocks核心特性

与Doris的异同、CBO优化器、Pipeline执行引擎、主键模型、物化视图。

StarRocks部署与运维

存算一体 vs 存算分离、资源组管理、弹性伸缩、监控告警（Grafana+Prometheus）。

实时数据采集

Flink CDC原理、Debezium配置、ChunJun/TiDB CDC、日志采集（Filebeat+Kafka）。

实时ETL与数据清洗

Flink SQL实时清洗、维表关联（Async IO）、状态管理、Checkpoint调优。

实时数仓分层设计

ODS/DWD/DWS/ADS分层、宽表设计、数据一致性保障、数据回溯方案。

OLAP性能调优实战

硬件选型、操作系统优化、查询超时设置、内存控制、并发控制、慢查询治理。

OLAP安全与权限管理

用户管理、RBAC权限模型、行级权限、数据脱敏、审计日志。

OLAP监控与告警

系统表解读、Query Profile分析、慢查询日志、自定义监控指标、告警规则配置。

OLAP数据备份与恢复

ClickHouse冷热分离、Doris/StarRocks备份恢复、跨集群复制、数据迁移方案。

OLAP与数据湖集成

Hudi/Iceberg/Delta Lake集成、Paimon实时湖仓、Trino/Presto联邦查询。

数据湖联邦

OLAP大屏与BI集成

Superset/Grafana/Tableau连接、JDBC/ODBC驱动、大屏实时刷新方案。

OLAP在用户画像场景实战

标签存储设计、人群圈选优化、Bitmap交并差运算、实时画像更新。

OLAP在实时报表场景实战

多维度聚合、预聚合策略、异步物化视图、报表缓存设计。

OLAP在日志分析场景实战

全文检索方案、日志采样、时序聚合、异常检测、告警联动。

OLAP在实时风控场景实战

特征计算、规则引擎集成、实时指标计算、毫秒级响应优化。

OLAP选型对比与架构设计

ClickHouse vs Doris vs StarRocks vs Druid vs Kylin、混合架构设计。

OLAP实战项目一：实时用户行为分析平台

需求分析、架构设计、数据流设计、代码实现、效果验证。

项目行为分析

OLAP实战项目二：实时数据中台建设

数据治理、元数据管理、数据质量、数据服务化、运维保障。