首页
›
数据工程与实时数据平台
›
005-数据流水线编排
›
《Prefect任务重试与故障恢复策略设计》
VIP20
本课程属于:005-数据流水线编排
数据工程与实时数据平台 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
Prefect任务重试与故障恢复策略设计
📚 共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
第1章
Prefect重试机制概述
为什么需要重试 · 核心概念 · 重试与工作流可靠性的关系
基础
可靠性
第2章
基础重试配置
@task装饰器中的retries参数 · retry_delay_seconds · 简单重试示例
配置
入门
第3章
指数退避策略
exponential_backoff参数 · 退避因子 · 最大延迟限制 · 应用场景
策略
退避
第4章
重试条件控制
retry_condition · 自定义条件 · 基于异常/返回值的重试
条件
灵活
第5章
重试延迟策略
固定/随机延迟 · 自定义延迟函数 · 组合延迟策略
延迟
高级
第6章
重试状态与上下文
重试次数追踪 · 上下文对象 · 获取当前重试信息
上下文
状态
第7章
重试与任务依赖
对下游任务的影响 · 数据传递 · 缓存与超时交互
依赖
数据流
第8章
重试与Flow
Flow级别重试 · 与Task重试区别 · 最佳实践
Flow
编排
第9章
重试与通知
失败通知 · Slack/邮件集成 · 自定义处理器 · 告警阈值
通知
告警
第10章
重试与日志
日志记录 · 级别控制 · 结构化输出 · 分析与调试
日志
可观测
第11章
重试与监控
Prometheus指标 · 重试次数/成功率监控 · 自定义指标
监控
Prometheus
第12章
重试与并发
并发重试行为 · 并发限制 · 资源竞争 · 锁机制
并发
锁
第13章
重试与持久化
状态持久化 · 历史记录 · 恢复机制 · 数据库交互
持久化
恢复
第14章
重试与测试
单元测试重试逻辑 · 模拟场景 · 测试条件与延迟
测试
模拟
第15章
重试与异常处理
Prefect异常类型 · 自定义异常 · 异常链 · 最佳实践
异常
健壮性
第16章
重试与超时
超时与重试交互 · 超时后重试策略 · 示例与注意事项
超时
策略
第17章
重试与重试策略组合
多种策略组合 · 优先级 · 冲突解决 · 复杂场景设计
组合
高级
第18章
重试与任务优先级
优先级设置 · 优先级队列 · 调度 · 与重试次数关系
优先级
调度
第19章
重试与资源管理
资源分配 · 释放策略 · 连接池 · 线程池
资源
池化
第20章
重试与分布式系统
分布式重试 · 分布式锁/事务 · 挑战与方案
分布式
锁
第21章
重试与幂等性
幂等设计原则 · 幂等与重试关系 · 实现幂等重试
幂等
设计
第22章
重试与断路器模式
断路器介绍 · 与重试结合 · 状态管理 · 实现示例
断路器
容错
第23章
重试与重试队列
队列设计 · 优先级 · 持久化 · 消费策略
队列
异步
第24章
重试与背压机制
背压概念 · 与重试关系 · 控制策略 · 实现示例
背压
流控
第25章
重试与健康检查
健康检查与重试 · 策略 · 任务调度 · 示例
健康
可用性
第26章
重试与版本兼容性
版本升级影响 · API变更 · 向后兼容 · 迁移指南
兼容
迁移
第27章
重试与安全
安全考虑 · 敏感信息 · 认证与授权
安全
认证
第28章
重试与性能优化
性能开销 · 优化策略 · 减少不必要重试 · 性能测试
性能
优化
第29章
重试与最佳实践
常见模式 · 反模式 · 生产配置 · 团队规范
最佳实践
规范
第30章
重试实战案例
电商订单 · 数据管道 · API调用 · 文件处理 · 综合案例
实战
案例
所属VIP或分类
同VIP:Airflow-Dataset-Trigger数据驱动调度实战
同VIP:Airflow与Dagster调度体系对比及选型
同VIP:Airflow自定义Operator与插件开发