首页
›
Web后端与企业应用开发
›
051-消息队列任务索引选择复盘
›
《Redis索引与任务去重:消息队列热Key治理实践》
VIP20
本课程属于:051-消息队列任务索引选择复盘
Web后端与企业应用开发 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
Redis索引与任务去重:消息队列热Key治理实践
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
热Key问题概述
什么是热Key · 热Key产生的业务场景 · 热Key对Redis集群的危害
Key
问题概述
02
热Key的发现与监控
客户端统计 · 代理层监控 · Redis自带命令(hotkeys
Key
的发现
03
热Key的常见治理策略
本地缓存 · 读写分离 · Key拆分
Key
的常见治理策略
04
Redis索引基础
Redis中索引的概念 · Hash与Sorted Set实现简… · 索引的存储与查询开销
Redis
索引基础
05
二级索引设计
基于Set的标签索引 · 基于Sorted Set的范围索引 · 基于Hash的字段索引
二级索引设计
Set
06
索引与热Key的关系
索引访问频率不均导致的热Key · 索引热点对写入性能的影响
Key
索引
07
任务去重场景分析
消息队列中的重复消费问题 · 幂等性设计 · 去重对系统稳定性的意义
任务去重场景分析
消息队列
08
基于Redis实现任务去重
利用Set的SADD/SCARD实现… · 利用String的SETNX实现分布…
Redis
基于
09
去重Key的热点问题
去重Key被高频访问时的性能瓶颈 · 单Key热点导致Redis实例CPU…
Key
去重
10
去重Key的拆分策略
按业务ID哈希分片 · 按时间窗口分片 · 多Key轮询写入
Key
去重
11
布隆过滤器原理
布隆过滤器的数据结构 · 误判率与空间权衡 · 在去重场景中的适用性
布隆过滤器原理
布隆过滤器的数据…
12
Redis布隆过滤器模块
RedisBloom插件的安装与使用 · BF.RESERVE/BF.ADD/…
Redis
布隆过滤器模块
13
布隆过滤器与热Key治理
布隆过滤器如何降低去重Key的访问频… · 减少单Key热点
Key
布隆过滤器
14
本地缓存+布隆过滤器组合
Caffeine本地缓存过滤大部分请… · 布隆过滤器兜底 · Redis最终校验
本地缓存+布隆过…
Caffeine
15
消息队列消费端去重架构
消费前先去重 · 消费中幂等处理 · 消费后标记完成
消息队列消费端去…
消费前先去重
16
基于Redis Stream的消息去重
Stream的消费者组与消息ID · 利用XACK与Pending列表实现…
Redis
Stream
17
热Key的自动发现与动态治理
基于RedisTimeSeries的… · 阈值触发自动扩容或拆分
Key
的自动发现
18
Redis Cluster下的热Key分布
Slot与Key的映射关系 · 热Key导致的数据倾斜 · reshard的局限性
Redis
Cluster
19
读写分离架构缓解热Key
主节点写 · 从节点读 · 从节点负载均衡
Key
读写分离架构缓解…
20
多级缓存架构
CDN缓存 · Nginx本地缓存 · Redis缓存
多级缓存架构
CDN
21
热Key的限流与降级
Sentinel/Redis限流 · 客户端熔断 · 降级返回默认值
Key
的限流
22
索引与去重的性能测试
基准测试工具(redis-bench… · memtier_benchmark) · 热点场景压测
索引
去重的性能测试
23
实战案例一
电商秒杀场景的热Key治理——商品库…
实战案例一
Key
24
实战案例二
社交Feed流中的热Key——用户时…
实战案例二
Feed
25
实战案例三
消息队列去重——订单消息的布隆过滤器…
实战案例三
消息队列去重
26
实战案例四
实时排行榜热Key——利用Local…
实战案例四
Key
27
热Key治理的运维最佳实践
慢查询日志分析 · 内存碎片整理 · 持久化策略对热Key的影响
Key
治理的运维最佳实…
28
Redis 7.0新特性与热Key治理
Function脚本 · Sharded Pub/Sub · ACL对热Key治理的帮助
Redis
Key
29
未来趋势
Redis on Flash · 持久内存(PMem)对热Key的硬件… · Serverless Redis的自…
未来趋势
Redis
30
课程总结与知识图谱
热Key治理方法论回顾 · 索引与去重设计原则 · 推荐阅读与工具链
课程总结
知识图谱
所属VIP或分类
同VIP:KafkaMQ索引分析慢查询分析
同VIP:Kafka慢查询分析
同VIP:Kafka时间戳索引:性能调优与故障排查工程实践