VIP20
本课程属于：036-搜索服务缓存一致性闭环 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

聚合查询缓存一致性治理架构原理与场景应用解析

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
聚合查询的定义 · 缓存一致性的挑战 · 闭环架构的核心思想
课程导论聚合查询的定义
02
缓存基础回顾
缓存穿透 · 缓存击穿 · 缓存雪崩的定义与常见解决方案
缓存基础回顾缓存穿透
03
聚合查询场景分析
多维度聚合 · 跨表聚合 · 实时聚合与离线聚合的区别
聚合查询场景分析多维度聚合
04
缓存一致性问题的根源
数据源更新与缓存更新之间的时间窗口 · 并发写冲突
缓存一致性问题的…数据源更新
05
闭环架构总览
闭环架构的三大核心组件（监听器 · 计算引擎 · 缓存管理器）及其协作流程
闭环架构总览闭环架构的三大核…
06
事件监听机制
基于数据库Binlog（如Canal…
事件监听机制Binlog
07
变更事件标准化
将原始数据库变更转化为统一的事件格式… · 表名 · 主键
变更事件标准化将原始数据库变更…
08
聚合查询依赖分析
如何通过元数据或SQL解析提取聚合查…
聚合查询依赖分析SQL
09
依赖关系图构建
构建表与聚合查询之间的有向无环图（D… · 用于精准触发更新
依赖关系图构建构建表
10
增量计算引擎
基于事件驱动的增量聚合计算模型 · 避免全量重算
增量计算引擎基于事件驱动的增…
11
缓存更新策略
先更新缓存还是先更新数据库？旁路缓存…
缓存更新策略先更新缓存还是先…
12
闭环一致性保证
通过“事件-计算-更新”闭环确保最终… · 并引入版本号或CAS机制防止脏写
闭环一致性保证通过“事件
13
分布式锁在闭环中的应用
在缓存更新关键路径上使用分布式锁（R…
分布式锁闭环
14
缓存预热与冷启动
系统启动时如何从数据库全量加载聚合结… · 并建立事件监听
缓存预热冷启动
15
延迟与吞吐量权衡
闭环架构对查询延迟的影响 · 以及如何通过异步批处理提升吞吐量
延迟吞吐量权衡
16
异常处理与补偿机制
事件处理失败时的重试策略 · 死信队列 · 以及人工补偿接口设计
异常处理补偿机制
17
监控与可观测性
闭环架构的关键指标（事件处理延迟 · 缓存命中率 · 一致性偏差）
监控可观测性
18
场景一
电商大屏实时销售额聚合——订单表变更…
场景一电商大屏实时销售…
19
场景二
社交平台Feed流聚合——用户发帖/…
场景二Feed
20
场景三
物联网设备数据聚合——设备上报数据触…
场景三物联网设备数据聚…
21
场景四
金融风控实时指标聚合——交易事件触发…
场景四金融风控实时指标…
22
场景五
内容平台文章阅读量聚合——阅读事件批…
场景五内容平台文章阅读…
23
架构选型对比
闭环架构 vs 传统定时任务全量刷新…
架构选型对比vs
24
闭环架构的局限性
事件丢失风险 · 计算复杂度高 · 对Binlog的强依赖
闭环架构的局限性事件丢失风险
25
基于Redis Streams的闭环实现
利用Redis Streams作为事… · 结合RedisGears进行流式计算
RedisStreams
26
基于Kafka+Flink的闭环实现
Kafka作为事件管道 · Flink进行增量聚合 · 结果写入Redis
Kafka+Flink基于
27
基于Canal+自研Worker的闭环实现
Canal监听MySQL Binlo… · Worker进行依赖解析与缓存更新
Canal+Worker
28
闭环架构的测试策略
如何模拟事件丢失 · 乱序 · 重复
闭环架构的测试策…如何模拟事件丢失
29
性能调优实战
减少事件处理链路长度 · 批量合并更新 · 缓存分片与本地缓存结合
性能调优实战减少事件处理链路…
30
课程总结与未来展望
闭环架构的最佳实践总结 · 以及未来向Serverless · 边缘缓存演进的趋势
课程总结未来展望