首页
›
数据工程与实时数据平台
›
035-Flink状态管理
›
《Savepoint原理与生产级迁移》
VIP20
本课程属于:035-Flink状态管理
数据工程与实时数据平台 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
Savepoint原理与生产级迁移
📚 共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
第1章
Savepoint基础概念
什么是Savepoint、与Checkpoint的区别、适用场景解析
概念
对比
第2章
Savepoint工作原理
状态快照机制、Barrier对齐原理、异步状态持久化
机制
核心
第3章
Savepoint文件结构
元数据文件、状态文件、Mapping关系解析
存储
格式
第4章
Savepoint生命周期管理
创建、触发、清理、过期策略全流程
管理
运维
第5章
Savepoint与状态后端
RocksDB、FsState、内存状态后端适配方案
后端
集成
第6章
Savepoint的触发方式
手动触发、自动触发、外部API触发详解
触发
API
第7章
Savepoint的存储策略
本地、HDFS、S3、OSS存储方案对比
存储
策略
第8章
Savepoint的恢复机制
Exactly-Once语义、状态重分配、并行度变更处理
恢复
一致性
第9章
Savepoint的兼容性
Flink版本兼容、算子UID变更、状态Schema演进
兼容
演进
第10章
Savepoint迁移概述
迁移场景分类、风险评估、策略选择
迁移
规划
第11章
同集群迁移
作业升级、并行度调整、代码逻辑变更迁移
同集群
升级
第12章
跨集群迁移
网络打通、数据中转、跨地域迁移方案
跨集群
网络
第13章
跨版本迁移
Flink小版本/大版本升级、跨大版本兼容性处理
版本
升级
第14章
状态兼容性处理
状态类型变更、名称变更、序列化兼容
状态
兼容
第15章
算子UID管理
UID重要性、生成规则、冲突处理
UID
算子
第16章
迁移前的准备工作
作业状态评估、资源预估、回滚方案设计
准备
评估
第17章
迁移执行流程
停止旧作业、创建Savepoint、启动新作业、验证一致性
流程
操作
第18章
迁移中的常见问题
Savepoint加载失败、状态不匹配、数据倾斜
问题
排查
第19章
迁移后的验证
数据完整性校验、延迟监控、性能对比
验证
监控
第20章
生产级迁移案例一
实时ETL作业迁移(Flink 1.12到1.16)
案例
ETL
第21章
生产级迁移案例二
复杂CEP作业迁移(跨集群+跨版本)
案例
CEP
第22章
生产级迁移案例三
大状态作业迁移(TB级状态+并行度调整)
案例
大状态
第23章
Savepoint与容灾
异地容灾备份、主备切换、灾难恢复演练
容灾
备份
第24章
Savepoint与CI/CD
自动化Savepoint创建、流水线集成、灰度发布
CI/CD
自动化
第25章
Savepoint监控与告警
创建耗时监控、存储空间监控、失败告警
监控
告警
第26章
Savepoint性能优化
异步快照优化、增量Checkpoint、RocksDB调优
优化
性能
第27章
Savepoint安全策略
访问控制、加密存储、审计日志
安全
加密
第28章
Savepoint最佳实践
命名规范、存储策略、生命周期管理
实践
规范
第29章
Savepoint常见故障排查
状态损坏修复、元数据丢失恢复、存储故障处理
故障
排查
第30章
Savepoint未来展望
Flink 2.0新特性、云原生Savepoint、Serverless适配
展望
趋势
所属VIP或分类
同VIP:Delta-Lake-状态存储新范式
同VIP:Flink状态与Iceberg集成实战
同VIP:Flink状态管理从入门到实战