VIP10
本课程属于：037-Kafka与Flink金融实时数据工程 智能金融与金融工程 · 共 10 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

Flink CDC金融主数据同步实战

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=金融主数据同步的业务背景 · 核心挑战 · 学习目标与整体课程框架
课程导入目标=金融主数据…
02
金融主数据概述
目标=主数据定义 · 金融行业主数据分类 · 数据治理要求与同步价值
金融主数据概述目标=主数据定义
03
CDC技术原理
目标=变更数据捕获概念 · 基于日志的CDC · 触发器与快照对比
CDC技术原理
04
Flink CDC核心概念
目标=Flink CDC架构 · Source与Sink · Exactly-Once语义
FlinkCDC
05
Flink CDC环境搭建
目标=Flink集群部署 · CDC连接器依赖 · MySQL/Oracle等数据库配置
FlinkCDC
06
金融主数据源端准备
目标=源库权限 · Binlog/Redo日志开启 · 数据表结构设计与约束
金融主数据源端准…目标=源库权限
07
Flink CDC DataStream API
目标=SourceFunction · DataStream转换 · 事件时间与水位线
FlinkCDC
08
Flink SQL CDC
目标=CREATE TABLE语法 · 连接器参数 · 维表关联
FlinkSQL
09
主数据同步流程设计
目标=全量+增量同步 · 断点续传 · 数据一致性校验
主数据同步流程设…目标=全量+增量…
10
金融主数据清洗与转换
目标=数据脱敏 · 格式标准化 · 字段映射
金融主数据清洗转换
11
目标端写入实战
目标=写入Kafka · Hudi · JDBC数据库
目标端写入实战Kafka
12
Exactly-Once与事务保障
目标=两阶段提交 · Checkpoint机制 · 幂等写入
Exactly-Once事务保障
13
金融主数据同步案例一
目标=客户主数据从Oracle到Ka…
金融主数据同步案…Oracle
14
金融主数据同步案例二
目标=产品主数据从MySQL到Hud…
金融主数据同步案…MySQL
15
金融主数据同步案例三
目标=机构主数据从DB2到Elast…
金融主数据同步案…DB2
16
多源异构主数据融合
目标=多表关联 · Union · 双流Join
多源异构主数据融…目标=多表关联
17
性能调优
目标=并行度设置 · 反压处理 · 内存管理
性能调优目标=并行度设置
18
监控与告警
目标=Metrics指标 · 延迟监控 · 数据质量监控
监控告警
19
数据安全与合规
目标=传输加密 · 访问控制 · 审计日志
数据安全合规
20
常见问题排查
目标=连接失败 · 数据丢失 · 重复消费
常见问题排查目标=连接失败
21
Schema演进处理
目标=新增字段 · 修改类型 · 删除字段
Schema演进处理
22
高可用与容灾
目标=Flink HA配置 · ZooKeeper/Kubernet… · 跨机房同步
高可用容灾
23
金融主数据同步综合项目
目标=需求分析 · 架构设计 · 开发实施
金融主数据同步综…目标=需求分析
24
项目部署与运维
目标=CI/CD集成 · 容器化部署 · 版本升级
项目部署运维
25
综合提升一
目标=Flink CDC与数据湖仓一…
综合提升一Flink
26
综合提升二
目标=实时主数据服务与API网关集成
综合提升二API
27
综合提升三
目标=基于Flink CDC的金融数…
综合提升三Flink
28
综合提升四
目标=AI辅助的数据质量异常检测与自…
综合提升四AI
29
课程总结
目标=核心知识点回顾 · 最佳实践归纳 · 学习路径建议
课程总结目标=核心知识点…
30
课程答疑与扩展
目标=常见学员问题解答 · 进阶学习资源 · 社区与生态工具推荐
课程答疑扩展