VIP20

本课程属于：014-大数据计算优化 数据工程与实时数据平台 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

缓存与序列化联合优化方案

📚 共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

缓存与序列化概述

为什么需要联合优化？缓存的基本原理、序列化的核心作用、联合优化的价值与挑战。

序列化技术选型

JSON、XML、Protobuf、MessagePack、Avro、Thrift对比分析。

缓存策略基础

LRU、LFU、FIFO、TTL、W-TinyLFU算法详解。

内存模型与对象开销

Java/Python对象内存布局、序列化后体积对比、指针压缩技术。

高性能序列化实践

Protobuf编码原理、Varint与ZigZag、字段标签设计。

缓存穿透与序列化陷阱

空值序列化问题、默认值处理、反序列化漏洞。

联合优化架构设计

缓存层与序列化层解耦、通用序列化缓存中间件设计。

压缩算法集成

Gzip、Snappy、LZ4、Zstd在缓存场景下的选择与实测。

零拷贝技术

堆外内存、DirectBuffer、FileChannel在序列化缓存中的应用。

分布式缓存一致性

序列化版本号、兼容性设计、滚动升级策略。

分布式一致性

缓存预热与序列化预计算

启动加速、预序列化对象池、懒加载优化。

多级缓存架构

本地缓存（Caffeine）+ 分布式缓存（Redis）联合序列化策略。

多级缓存Caffeine

Redis序列化方案

String vs Hash vs 模块化序列化、内存节约技巧。

数据库查询缓存序列化

ORM二级缓存、查询结果集序列化、失效策略。

微服务间缓存共享

gRPC序列化、HTTP序列化、Dubbo序列化对比。

序列化安全

反序列化攻击防御、白名单机制、HMAC校验。

性能基准测试

JMH/Go test实战、吞吐量、延迟、内存占用对比。

基准测试JMH

垃圾回收与序列化

对象创建频率、逃逸分析、TLAB对缓存的影响。

大对象缓存策略

分片序列化、增量序列化、引用缓存模式。

大对象分片

向前向后兼容、字段弃用、枚举值变更处理。

缓存序列化监控

指标采集（序列化耗时、缓存命中率）、Prometheus+Grafana。

监控Prometheus

语言互操作性

跨语言序列化（C++/Java/Go/Python）、共享Schema仓库。

跨语言互操作

边缘计算场景

轻量级序列化、有限内存缓存、离线优先策略。

边缘计算轻量

实时流处理缓存

Flink/Kafka Streams状态后端序列化优化。

机器学习模型缓存

模型序列化格式（ONNX/PMML）、特征缓存加速。

移动端缓存序列化

FlatBuffers、Wire、Kryo在Android/iOS上的实践。

移动端Android

云原生环境

K8s Sidecar缓存代理、Envoy序列化过滤、Service Mesh集成。

序列化CPU开销 vs 缓存命中率收益、硬件加速（QAT/GPU）。

成本硬件加速

序列化异常定位、缓存数据损坏恢复、慢查询分析。

GraalVM Native Image、Project Valhalla、Lilliput序列化、持久化内存缓存。