VIP14
本课程属于：076-银行对账与差错处理 智能金融与金融工程 · 共 14 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

大规模对账任务并行与性能优化实战

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=大规模对账任务的业务背景 · 学习目标 · 核心挑战与整体课程框架
课程导入目标=大规模对账…
02
对账基础概念
目标=对账定义 · 分类 · 常见场景
对账基础概念目标=对账定义
03
大规模对账的典型架构
目标=数据源 · 计算引擎 · 存储选型
大规模对账的典型…目标=数据源
04
对账任务并行化基础
目标=并行计算模型 · 任务拆分策略 · 数据分片与负载均衡
对账任务并行化基…目标=并行计算模…
05
对账数据预处理
目标=数据清洗 · 格式转换 · 去重
对账数据预处理目标=数据清洗
06
对账核心算法与并行实现
目标=哈希对账 · 排序归并对账 · 窗口对账的并行化设计
对账核心算法并行实现
07
分布式计算框架选型
目标=MapReduce · Spark · Flink 在对账场景中的适用性与对…
分布式计算框架选…MapReduce
08
任务调度与资源管理
目标=YARN · Kubernetes · Mesos 等资源调度器在对账任务中…
任务调度资源管理
09
对账任务并行度调优
目标=分区数 · 并发数 · 批大小与内存配置的权衡方法
对账任务并行度调…目标=分区数
10
数据倾斜问题与解决方案
目标=倾斜检测 · 加盐 · 重分区
数据倾斜问题解决方案
11
对账性能瓶颈分析
目标=CPU · 内存 · 磁盘 I/O
对账性能瓶颈分析CPU
12
对账性能优化方法
目标=缓存 · 压缩 · 序列化
对账性能优化方法目标=缓存
13
增量对账与实时对账
目标=流式处理 · 微批处理 · 状态管理与 Exactly-Once…
增量对账实时对账
14
对账结果一致性保障
目标=事务 · 幂等 · 去重
对账结果一致性保…目标=事务
15
对账任务容错与重试
目标=故障检测 · 检查点 · 断点续跑与自动恢复机制
对账任务容错重试
16
对账数据质量监控
目标=完整性 · 准确性 · 及时性指标与告警体系
对账数据质量监控目标=完整性
17
对账任务性能测试
目标=基准测试 · 压力测试 · 容量规划与性能回归
对账任务性能测试目标=基准测试
18
对账任务调优实战案例一
目标=电商订单与支付流水对账的并行优…
对账任务调优实战…目标=电商订单
19
对账任务调优实战案例二
目标=银行海量交易对账的分布式计算优…
对账任务调优实战…目标=银行海量交…
20
对账任务调优实战案例三
目标=跨境支付多币种对账的实时流处理…
对账任务调优实战…目标=跨境支付多…
21
对账任务调优实战案例四
目标=物流运费与结算对账的批流一体优…
对账任务调优实战…目标=物流运费
22
对账任务常见问题与排查
目标=数据不一致 · 任务超时 · 内存溢出
对账任务常见问题排查
23
对账任务自动化与运维
目标=CI/CD · 任务编排 · 版本管理与灰度发布
对账任务自动化运维
24
对账系统安全与合规
目标=数据脱敏 · 权限控制 · 审计日志与隐私保护
对账系统安全合规
25
对账任务成本优化
目标=资源利用率 · 弹性伸缩 · 存储分层与计算成本控制
对账任务成本优化目标=资源利用率
26
对账任务的可观测性
目标=日志 · 指标 · 链路追踪与可视化 dashboard
对账任务的可观测…目标=日志
27
对账任务性能优化高级技巧
目标=代码生成 · JIT 优化 · 零拷贝与异步 I/O
对账任务性能优化…目标=代码生成
28
对账任务与机器学习
目标=异常检测 · 智能对账与预测性对账的探索
对账任务机器学习
29
对账任务综合实战项目
目标=从需求分析 · 架构设计到性能调优的全流程演练
对账任务综合实战…目标=从需求分析
30
课程总结与进阶
目标=知识体系回顾 · 最佳实践 · 未来趋势与持续学习路径
课程总结进阶