VIP20

本课程属于：043-OLAP分析引擎 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

ClickHouse慢查询定位与故障排查

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

课程导论与核心排查思路

建立系统化排查框架，掌握从现象到根因的通用方法论，为后续章节奠定基础。

方法论入门

数据模型设计对查询性能的影响

星型、雪花型模型选择，宽表与范式设计如何左右查询效率与存储开销。

SQL查询语句的优化技巧

谓词下推、子查询改写、聚合优化等实战技巧，让慢SQL提速数倍。

索引策略与物化视图的使用

合理运用索引与物化视图，以空间换时间，加速聚合与过滤查询。

索引物化视图

数据分区与分桶策略

通过分区裁剪与分桶局部性，大幅减少扫描数据量，提升并发能力。

存储格式与压缩算法的选择

Parquet、ORC、列式存储与压缩算法对IO和CPU的权衡分析。

资源管理与并发控制

CPU、内存、IO资源隔离与查询队列配置，防止资源争抢导致性能抖动。

内存管理与GC调优

JVM/进程内存分配、GC策略选择，减少Full GC引发的查询延迟。

网络延迟与数据倾斜问题

数据分布不均、网络拓扑瓶颈的定位与缓解方案。

查询计划分析与执行引擎调优

读懂执行计划，识别慢算子，调整引擎参数获得最佳执行路径。

执行计划引擎

缓存策略与预计算技术

结果缓存、数据预聚合、物化缓存等降低重复计算开销的手段。

缓存预计算

数据导入与ETL性能优化

批量导入、实时写入调优，减少导入对查询资源的冲击。

实时OLAP与离线OLAP的差异

对比Lambda/Kappa架构，剖析实时与离线场景下的性能侧重点。

ClickHouse常见性能问题排查

MergeTree引擎调优、分区过多、Too many parts等典型问题解决。

ClickHouse实战

Doris常见性能问题排查

Colocation Join、Bucket shuffle、Compaction调优等核心技巧。

StarRocks常见性能问题排查

CBO优化器、向量化执行、主键模型与明细模型的选择策略。

StarRocks实战

Greenplum常见性能问题排查

数据分布策略、Segment倾斜、资源队列与VACUUM管理。

Greenplum实战

Apache Druid常见性能问题排查

Segment大小调优、查询粒度选择、Historical/Broker参数优化。

Elasticsearch在OLAP场景下的优化

聚合性能调优、字段类型设计、分片策略与滚动索引管理。

Elasticsearch实战

Hive/Spark SQL的OLAP优化

CBO、向量化、动态分区裁剪、Shuffle调优与AQE特性利用。

Presto/Trino查询加速技巧

Join策略选择、内存池配置、数据源连接池与谓词下推增强。

Kylin多维分析性能调优

Cube设计、层级维度优化、字典编码与查询并发控制。

监控与告警体系搭建

Prometheus+Grafana监控查询延迟、资源使用率，设置智能告警规则。

慢查询日志分析与诊断

慢日志采集、解析与可视化，快速定位高频慢查询模式。

硬件与操作系统层面的优化

CPU绑定、NUMA感知、磁盘调度、网络参数调优等底层优化。

云原生环境下的OLAP性能挑战

对象存储性能、容器资源限制、弹性伸缩与存算分离架构适配。

云原生架构

数据一致性对查询性能的影响

强一致与最终一致性在读写延迟、查询可见性上的权衡。

一致性事务

大规模集群的运维与调优

节点扩缩容、数据再平衡、滚动升级与参数批量管理。

实战案例一：电商大促报表查询优化

从数据模型、SQL改写、缓存策略到资源隔离的全链路优化实录。

实战案例二：金融风控实时看板优化

毫秒级实时聚合、窗口计算优化、数据新鲜度与性能平衡方案。