VIP19
本课程属于：025-系统化实战技能 AI与大模型 · 共 19 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

AI训练数据流水线自动化构建

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 课程结构 · 数据流水线在AI项目中的重要性
课程导入学习目标
02
数据流水线基础
数据流水线的定义 · 组成 · 生命周期及自动化优势
数据流水线基础数据流水线的定义
03
数据采集自动化
数据源类型 · 采集策略 · API调用与爬虫自动化
数据采集自动化数据源类型
04
数据清洗自动化
清洗规则 · 缺失值处理 · 异常值检测与自动化脚本
数据清洗自动化清洗规则
05
数据标注自动化
标注工具 · 预标注模型 · 主动学习与人工审核流程
数据标注自动化标注工具
06
数据增强自动化
图像/文本增强技术 · 自动化增强库与策略
数据增强自动化图像
07
数据版本管理
数据版本控制工具（如DVC） · 数据血缘与可追溯性
数据版本管理DVC
08
流水线编排工具
Apache Airflow · Prefect · Kubeflow Pipelines…
流水线编排工具Apache
09
流水线配置管理
配置文件 · 环境变量 · 参数化与模板化
流水线配置管理配置文件
10
流水线调度与监控
定时触发 · 事件驱动 · 日志监控与告警
流水线调度监控
11
数据质量检查
数据质量维度 · 自动化校验规则与报告生成
数据质量检查数据质量维度
12
数据隐私与安全
脱敏技术 · 访问控制 · 合规性检查自动化
数据隐私安全
13
案例实战
图像分类数据流水线自动化构建
案例实战图像分类数据流水…
14
案例实战
自然语言处理数据流水线自动化构建
案例实战自然语言处理数据…
15
案例实战
时间序列数据流水线自动化构建
案例实战时间序列数据流水…
16
流水线测试与调试
单元测试 · 集成测试 · 调试技巧与日志分析
流水线测试调试
17
性能优化
并行处理 · 分布式计算 · 缓存与资源管理
性能优化并行处理
18
错误处理与重试机制
异常捕获 · 重试策略 · 死信队列
错误处理重试机制
19
数据流水线与CI/CD集成
持续集成 · 持续交付 · 模型训练自动化
CI/CD数据流水线
20
数据流水线与MLOps
MLOps概念 · 模型生命周期管理 · 端到端自动化
MLOps数据流水线
21
常见问题与解决方案
数据倾斜 · 数据漂移 · 依赖管理等问题
常见问题解决方案
22
最佳实践
设计模式 · 代码规范 · 文档与协作
最佳实践设计模式
23
工具深入
Apache Airflow实战 · 调度与扩展
工具深入Apache
24
工具深入
Prefect实战：流程定义 · 状态管理与云部署
工具深入Prefect
25
工具深入
Kubeflow Pipelines… · 容器化与Kubernetes集成
工具深入Kubeflow
26
数据流水线评估
效率指标 · 成本分析 · ROI评估
数据流水线评估效率指标
27
综合项目
构建一个端到端的自动化数据流水线（从…
综合项目构建一个端到端的…
28
前沿趋势
数据自动化新工具 · AutoML与数据流水线的融合
前沿趋势数据自动化新工具
29
课程总结
核心知识点回顾 · 学习路径建议与资源推荐
课程总结核心知识点回顾
30
结业测试
综合测试题与项目答辩指导
结业测试综合测试题