VIP20
本课程属于：012-任务调度DAG边界 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

服务边界视角下DAG任务调度数据传输机制设计

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
DAG任务调度背景 · 服务边界概念 · 数据传输机制的重要性
课程导论DAG
02
DAG基础
有向无环图定义 · 顶点与边 · 拓扑排序
DAG有向无环图定义
03
服务边界定义
服务边界的内涵 · 服务粒度 · 服务间依赖关系建模
服务边界定义服务边界的内涵
04
任务模型
任务类型（计算型 · I/O型 · 混合型）
任务模型任务类型
05
数据传输模型
数据依赖 · 数据量 · 传输延迟
数据传输模型数据依赖
06
调度目标
最小化完工时间 · 负载均衡 · 数据局部性
调度目标最小化完工时间
07
静态调度算法
列表调度（HEFT · CPOP） · 基于优先级的调度
静态调度算法HEFT
08
动态调度算法
在线调度 · 事件驱动调度 · 自适应调度
动态调度算法线调度
09
数据感知调度
数据位置感知 · 数据复制策略 · 数据预取
数据感知调度数据位置感知
10
服务边界划分
基于图划分的服务边界确定 · 最小割算法 · 社区发现
服务边界划分基于图划分的服务…
11
跨边界数据传输
跨服务边界的数据传输协议 · 序列化与反序列化开销
跨边界数据传输跨服务边界的数据…
12
数据流中间件
消息队列（Kafka · RabbitMQ） · 数据流引擎（Apache Flink…
数据流间件
13
数据一致性
最终一致性 · 强一致性 · 因果一致性在DAG调度中的权衡
数据一致性最终一致性
14
容错机制
任务重试 · 数据副本 · 检查点与恢复
容错机制任务重试
15
性能建模
DAG调度性能模型 · 数据传输开销模型 · 资源利用率模型
性能建模DAG
16
仿真平台搭建
DAG任务生成器 · 调度器仿真 · 性能指标采集
仿真平台搭建DAG
17
实验设计
对比实验 · 参数敏感性分析 · 统计显著性检验
实验设计对比实验
18
案例研究1
大数据ETL管道中的DAG调度与数据…
案例研究1ETL
19
案例研究2
微服务架构中请求链路的DAG调度
案例研究2DAG
20
案例研究3
机器学习训练工作流（如TensorF…
案例研究3TensorF
21
优化技术1
数据压缩与编码（Snappy · Zstandard）在传输中的应用
优化技术1Snappy
22
优化技术2
数据流水线与重叠（overlap）计…
优化技术2overlap
23
优化技术3
基于强化学习的调度策略
优化技术3基于强化学习的调…
24
优化技术4
图神经网络辅助的调度决策
优化技术4图神经网络辅助的…
25
安全与隐私
跨服务边界数据传输的加密 · 访问控制 · 差分隐私
安全隐私
26
边缘计算场景
边缘-云协同DAG调度 · 带宽受限下的数据传输
边缘计算场景DAG
27
异构计算场景
CPU-GPU混合DAG调度 · 异构数据传输优化
异构计算场景CPU-GPU
28
开源工具
Airflow · DolphinScheduler · Argo Workflows的调度机…
开源工具Airflow
29
前沿趋势
Serverless DAG调度 · 数据网格 · 数据编织
前沿趋势Serverless
30
课程总结与展望
核心知识点回顾 · 未来研究方向 · 推荐阅读
课程总结核心知识点回顾