VIP11
本课程属于：036-Tick与Level2行情数据工程 智能金融与金融工程 · 共 11 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Tick数据分区、索引与冷热分层实战

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=Tick数据在量化交易与金融分… · 课程学习目标 · 整体知识框架与实战路线图
课程导入Tick
02
Tick数据基础
目标=Tick数据的定义 · 字段结构 · 时间戳精度
Tick数据基础
03
Tick数据挑战
目标=数据量级估算 · 高频写入与查询压力 · 存储成本
Tick数据挑战
04
分区核心概念
目标=分区定义 · 分区键选择 · 时间分区与哈希分区
分区核心概念目标=分区定义
05
时间分区实战
目标=按天/小时/分钟分区策略 · 分区命名规范 · 分区裁剪原理
时间分区实战目标=按天
06
复合分区与二级分区
目标=交易所+日期 · 标的+日期等复合分区设计 · 二级分区实现
复合分区二级分区
07
索引基础
目标=索引原理 · B+树与LSM树对比 · 稠密索引与稀疏索引
索引基础目标=索引原理
08
Tick数据索引设计
目标=时间戳索引 · 标的代码索引 · 组合索引
Tick数据索引设计
09
索引实战优化
目标=索引选择性分析 · 覆盖索引 · 索引下推
索引实战优化目标=索引选择性…
10
冷热分层概念
目标=数据温度定义 · 冷热分层目标 · 成本与性能权衡
冷热分层概念目标=数据温度定…
11
冷热分层策略
目标=基于时间 · 访问频率 · 数据价值的冷热判定规则
冷热分层策略目标=基于时间
12
存储介质选型
目标=内存 · SSD · HDD
存储介质选型目标=内存
13
热层存储实战
目标=内存数据库 · Redis · Kafka
热层存储实战目标=内存数据库
14
温层存储实战
目标=列式存储 · Parquet · ORC
温层存储实战目标=列式存储
15
冷层存储实战
目标=对象存储 · S3 · HDFS
冷层存储实战目标=对象存储
16
数据迁移与同步
目标=冷热层间数据迁移策略 · 双写 · 异步复制
数据迁移同步
17
查询路由与联邦查询
目标=统一查询入口 · 路由层设计 · 跨层查询
查询路由联邦查询
18
分区与索引协同
目标=分区裁剪与索引选择 · 分区内索引设计 · 全局索引与本地索引的取舍
分区索引协同
19
性能测试与基准
目标=Tick数据写入吞吐 · 查询延迟 · 分区与索引效果评估
性能测试基准
20
监控与运维
目标=分区健康度 · 索引膨胀 · 冷热迁移进度
监控运维
21
案例一
目标=单机时序数据库Tick数据分区…
案例一Tick
22
案例二
目标=基于ClickHouse的Ti…
案例二ClickHouse
23
案例三
目标=基于Kafka+Spark+H…
案例三Kafka+Spark+…
24
案例四
目标=云原生对象存储+数据湖的Tic…
案例四Tic
25
常见问题一
目标=分区过多导致元数据爆炸 · 小文件问题 · 分区键选择错误
常见问题一目标=分区过多导…
26
常见问题二
目标=索引失效 · 索引过多导致写入慢 · 冷热迁移中的数据一致性
常见问题二目标=索引失效
27
常见问题三
目标=查询跨多分区性能差 · 冷数据查询超时 · 存储成本失控
常见问题三目标=查询跨多分…
28
综合实战一
目标=设计一个支持高频写入与低延迟查…
综合实战一目标=设计一个支…
29
综合实战二
目标=实现Tick数据从热到冷的自动…
综合实战二Tick
30
课程总结与进阶
目标=知识体系回顾 · 最佳实践清单 · 未来趋势
课程总结进阶