VIP20
本课程属于：033-认证授权平台异步任务编排 Web后端与企业应用开发 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

基于OpenTelemetry的异步任务编排数据传输优化

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导论
异步任务编排与数据传输优化的背景 · 挑战与目标
课程导论异步任务编排
02
OpenTelemetry概述
项目起源 · 核心组件（API · SDK
OpenTelemetr…项目起源
03
可观测性三大支柱
Trace · Metric · Log在异步任务场景下的作用与区别
可观测性三大支柱Trace
04
异步任务编排基础
任务依赖 · DAG（有向无环图）模型 · 执行引擎概念
异步任务编排基础任务依赖
05
数据传输优化概述
序列化 · 压缩 · 批处理
数据传输优化概述序列化
06
OpenTelemetry Trace核心概念
Span · Trace · Context Propagatio…
OpenTelemetr…Trace
07
异步任务中的Context传播
如何跨线程 · 跨进程传递Trace上下文
Context异步任务
08
OpenTelemetry SDK配置
Python/Java SDK初始化 · Exporter配置 · 采样策略
OpenTelemetr…SDK
09
任务编排中的Span设计
为每个任务节点创建Span · 父子Span关系建模
Span任务编排
10
数据传输序列化优化
Protocol Buffers v…
数据传输序列化优…Protocol
11
数据压缩策略
gzip · Snappy · Zstandard在传输管道中的选择…
数据压缩策略gzip
12
批处理与合并
将多个小Span合并为批次发送 · 减少网络开销
批处理合并
13
零拷贝技术
使用共享内存 · mmap · Kafka零拷贝提升数据传输效率
零拷贝技术使用共享内存
14
OpenTelemetry Collector
架构 · Pipeline（Receiver/… · 部署模式
OpenTelemetr…Collector
15
Collector Processor实战
Batch Processor · Memory Limiter · Attributes Process…
CollectorProcessor
16
异步任务编排框架选型
Celery · Airflow · Prefect
异步任务编排框架…Celery
17
集成OpenTelemetry到Celery
自动Instrumentation · 自定义Span · 任务链路追踪
OpenTelemetr…Celery
18
集成OpenTelemetry到Airflow
DAG级别Trace · Task Instance Span · 日志关联
OpenTelemetr…Airflow
19
集成OpenTelemetry到Temporal
Workflow与Activity的… · 重试追踪
OpenTelemetr…Temporal
20
数据传输管道优化
基于gRPC Stream vs H…
数据传输管道优化gRPC
21
背压与流控
在Collector与SDK端实现背… · 防止数据丢失
背压流控
22
采样策略优化
Head-based · Tail-based · 概率采样在异步场景下的权衡
采样策略优化Head-based
23
自定义Exporter开发
基于gRPC/HTTP编写高性能Ex… · 支持异步批量发送
Exporter自定义
24
任务编排中的错误处理与重试
Span状态标记 · 异常链路可视化 · 重试策略
任务编排错误处理
25
数据一致性保证
使用OpenTelemetry Ba… · 确保端到端一致性
数据一致性保证OpenTelemetr…
26
性能监控与瓶颈分析
利用OpenTelemetry Me… · 处理延迟 · 吞吐量
性能监控瓶颈分析
27
实战案例一
构建一个基于Celery+Redis… · 集成OTel并优化传输
实战案例一Celery+Redis
28
实战案例二
构建一个基于Temporal的工作流… · 实现数据传输压缩与批处理
实战案例二Temporal
29
大规模部署与运维
Collector水平扩展 · Kubernetes部署 · 资源调优
大规模部署运维
30
课程总结与未来展望
OpenTelemetry发展趋势 · eBPF集成 · AI辅助可观测性
课程总结未来展望