首页
›
后端、数据与云原生工程
›
022-现代数据平台、Mesh与联邦查询工程
›
《Trino联邦查询与数据服务生产实践与性能优化》
VIP14
本课程属于:022-现代数据平台、Mesh与联邦查询工程
后端、数据与云原生工程 · 共 14 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
Trino联邦查询与数据服务生产实践与性能优化
共计 30 章节
可可资料掘金营 · 点击在线试看
01
Trino联邦查询生产环境全景
目标=课程目标 · Trino在数据服务中的定位 · 联邦查询典型场景与挑战
Trino
联邦查询生产环境…
02
Trino架构与联邦查询原理
目标=Coordinator/Wor… · Connector机制 · Split调度
Trino
架构
03
生产集群部署与配置基线
目标=集群规划 · 节点角色 · JVM与内存配置
生产集群部署
配置基线
04
多数据源Connector接入实战
目标=Hive · Iceberg · MySQL
Connector
多数据源
05
联邦查询SQL编写与优化
目标=跨源JOIN · UNION · 子查询
SQL
联邦查询
06
跨源查询性能瓶颈定位
目标=使用EXPLAIN/EXPLA… · Query Plan · Stage统计
跨源查询性能瓶颈…
EXPLAIN/EXPL…
07
内存管理与溢出调优
目标=Query内存池 · Worker内存池 · Spill to Disk
内存管理
溢出调优
08
并发与资源组生产实践
目标=资源组配置 · 队列管理 · 并发查询控制
并发
资源组生产实践
09
数据源统计信息与CBO优化
目标=统计信息收集 · Hive/Iceberg统计 · CBO规则
CBO
数据源统计信息
10
分区裁剪与文件级优化
目标=分区表设计 · 分区裁剪生效条件 · 文件格式与大小
分区裁剪
文件级优化
11
跨源数据交换与网络优化
目标=Exchange类型 · 网络传输压缩 · 序列化
跨源数据交换
网络优化
12
物化视图与结果缓存
目标=物化视图创建 · 刷新策略 · 查询重写
物化视图
结果缓存
13
Trino数据服务化与API网关
目标=通过JDBC/ODBC · REST API · Gateway暴露查询服务
Trino
API
14
安全与权限体系
目标=认证(LDAP/Kerbero… · 授权(系统访问控制 · 文件级
安全
权限体系
15
生产监控与告警体系
目标=JMX指标 · Prometheus/Grafana… · 慢查询日志
生产监控
告警体系
16
查询队列与工作负载管理
目标=查询排队 · 准入控制 · 资源组配额
查询队列
工作负载管理
17
Trino on Kubernetes与弹性伸缩
目标=容器化部署 · Operator使用 · Worker自动扩缩容
Trino
on
18
联邦查询中的数据类型与函数兼容
目标=跨源类型映射 · 隐式转换 · 日期时间处理
联邦查询
数据类型
19
事务与一致性权衡
目标=跨源事务限制 · Hive ACID · Iceberg快照
事务
一致性权衡
20
大查询拆分与分页优化
目标=大结果集分页 · 游标 · 流式读取
大查询拆分
分页优化
21
Trino与数据湖联邦查询实战
目标=Hive/Iceberg/De… · 元数据同步 · 分区演进
Trino
数据湖联邦查询实…
22
Trino与关系型数据库联邦查询实战
目标=MySQL/PostgreSQ… · 下推优化 · 索引利用
Trino
关系型数据库联邦…
23
Trino与NoSQL/消息系统联邦查询实战
目标=Kafka · Elasticsearch · MongoDB
Trino
NoSQL
24
查询性能基准测试与压测
目标=TPC-H/TPC-DS基准 · 自定义压测方案 · 指标采集
查询性能基准测试
压测
25
生产故障排查与应急处理
目标=常见错误(OOM · 超时 · 连接失败
生产故障排查
应急处理
26
数据倾斜与热点处理
目标=识别倾斜 · 动态过滤 · 分桶
数据倾斜
热点处理
27
Trino版本升级与兼容性
目标=版本选择 · 升级路径 · Connector兼容
Trino
版本升级
28
成本优化与资源效率
目标=计算资源利用率 · 查询成本分析 · 存储格式优化
成本优化
资源效率
29
生产案例
目标=构建跨源统一查询平台:需求分析 · 架构设计 · Connector选型
生产案例
目标=构建跨源统…
30
生产案例
目标=高并发联邦查询性能优化 · 资源组调优 · CBO统计到缓存与物化视图的综合优化…
生产案例
目标=高并发联邦…
所属VIP或分类
同VIP:Trino数据开发实战100例
同VIP:Trino统一查询层高可用工程
同VIP:Trino联邦查询架构工程