VIP20

本课程属于：061-密码服务高可用SDK接入改造 密码学工程与数据安全 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

数据迁移双写同步案例

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

数据迁移概述

定义 · 背景 · 常见场景与挑战

数据迁移概述定义

双写模式介绍

双写概念 · 为什么需要双写 · 双写的核心优势

双写模式介绍双写概念

数据一致性基础

强一致性 · 最终一致性 · 如何保证双写数据一致

数据一致性基础强一致性

CAP理论在迁移中的应用

理解CAP · 取舍策略 · 双写中的权衡

常见数据迁移工具概览

DataX · Canal · Debezium

常见数据迁移工具…DataX

同步 vs 异步双写

实现方式 · 优缺点 · 适用场景

双写冲突处理策略

基于版本号 · 基于时间戳 · 基于业务主键的冲突解决

双写冲突处理策略基于版本号

双写中的事务问题

分布式事务 · TCC · 本地消息表方案

双写事务问题

双写性能优化

批量写入 · 异步合并 · 连接池调优

双写性能优化批量写入

双写监控与报警

埋点设计 · 指标采集 · 告警规则

双写监控报警

数据校验机制

全量校验 · 增量校验 · 校验工具选型

数据校验机制全量校验

双写回滚方案

回滚触发条件 · 回滚流程 · 数据修复

双写回滚方案回滚触发条件

基于消息队列的双写实现

生产端 · 消费端 · 顺序性保障

基于消息队列的双…生产端

Kafka在双写中的应用

Kafka作为缓冲层 · 分区策略 · 重试机制

Canal实现MySQL增量同步

Canal原理 · 配置 · 与Kafka集成

DataX全量迁移实战

DataX安装 · Job配置 · 性能调优

DataX全量迁移实战

双写代码框架设计（Java/Python）

分层架构 · 扩展点 · 异常处理

Java/Python双写代码框架设计

双写数据源配置管理

多数据源路由 · 动态切换 · 连接池管理

双写数据源配置管…多数据源路由

双写单元测试与集成测试

Mock技术 · 测试环境搭建 · 断言技巧

双写单元测试集成测试

双写灰度发布方案

灰度策略 · 流量比例控制 · 回滚能力

双写灰度发布方案灰度策略

双写数据丢失处理

丢失原因分析 · 补偿机制 · 重推策略

双写数据丢失处理丢失原因分析

双写延迟问题分析

延迟来源 · 监控方法 · 优化手段

双写延迟问题分析延迟来源

双写数据一致性校验工具

Diff工具使用 · 自动化校验脚本

双写数据一致性校…Diff

双写切换方案（从旧库切到新库）

切换时机 · 切换步骤 · 切换后验证

双写切换方案从旧库切到新库

双写中的异常处理

网络超时 · 数据库死锁 · 业务逻辑异常

双写异常处理

MySQL迁移到TiDB：迁移规划 · 数据校验 · 性能对比

双写案例MySQL

MySQL迁移到PolarDB · 双写验证 · 上线经验

双写案例MySQL

Oracle迁移到MySQL · 自增字段处理 · 存储过程迁移

双写案例Oracle

MongoDB迁移：文档模型适配 · 双写策略 · 索引迁移

双写案例MongoDB

双写总结与最佳实践

常见坑点 · 团队协作 · 持续优化方向

双写总结最佳实践