VIP20
本课程属于：009-AI+DevOps AI与大模型 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

企业级数据管道与模型训练协同优化

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 课程结构 · 数据管道与模型训练协同优化的背景与价…
课程导入学习目标
02
数据管道基础
数据管道定义 · 组件 · ETL与ELT流程
数据管道基础数据管道定义
03
模型训练基础
机器学习模型训练流程 · 数据需求 · 特征工程
模型训练基础机器学习模型训练…
04
协同优化概述
协同优化的概念 · 目标 · 挑战与收益
协同优化概述协同优化的概念
05
数据管道架构设计
Lambda架构 · Kappa架构 · 数据湖与数据仓库
数据管道架构设计Lambda
06
数据采集与接入
数据源类型 · 采集工具（Kafka · Flume等）
数据采集接入
07
数据清洗与预处理
数据质量 · 清洗规则 · 缺失值处理
数据清洗预处理
08
特征工程与存储
特征提取 · 特征变换 · 特征存储（Feature Store…
特征工程存储
09
数据管道调度与编排
工作流调度（Airflow · Dagster） · 依赖管理
数据管道调度编排
10
模型训练环境
分布式训练框架（TensorFlow · PyTorch） · GPU集群
模型训练环境TensorFlow
11
数据管道与训练协同
数据版本管理 · 数据一致性 · 训练数据流水线
数据管道训练协同
12
数据管道监控与告警
监控指标 · 日志收集 · 告警策略
数据管道监控告警
13
模型训练监控
训练指标跟踪 · 模型性能监控 · 早停与检查点
模型训练监控训练指标跟踪
14
数据管道性能优化
并行处理 · 分区优化 · 缓存策略
数据管道性能优化并行处理
15
模型训练性能优化
混合精度训练 · 梯度累积 · 模型并行与数据并行
模型训练性能优化混合精度训练
16
数据管道与训练的资源协同
动态资源分配 · 弹性伸缩 · 成本控制
数据管道训练的资源协同
17
数据管道与训练的故障处理
常见故障 · 容错机制 · 恢复策略
数据管道训练的故障处理
18
数据安全与合规
数据加密 · 访问控制 · 隐私保护（GDPR等）
数据安全合规
19
模型版本管理与回滚
模型注册 · 版本控制 · 模型部署与回滚
模型版本管理回滚
20
端到端案例实战
构建一个完整的协同优化流水线（从数据…
端到端案例实战构建一个完整的协…
21
常见问题与解决方案
数据延迟 · 数据漂移 · 训练不稳定等
常见问题解决方案
22
自动化与CI/CD
持续集成/持续部署在数据管道与模型训…
CI/CD自动化
23
数据管道与模型训练的测试
数据质量测试 · 模型验证 · A/B测试
数据管道模型训练的测试
24
云原生与容器化
Docker · Kubernetes在数据管道与训练…
云原生容器化
25
数据管道与模型训练的日志与审计
日志规范 · 审计追踪 · 合规要求
数据管道模型训练的日志
26
团队协作与流程优化
角色分工 · 协作工具 · 流程改进
团队协作流程优化
27
前沿技术
实时机器学习 · 特征流 · 在线学习
前沿技术实时机器学习
28
综合项目
设计一个企业级数据管道与模型训练协同…
综合项目设计一个企业级数…
29
课程总结
核心要点回顾 · 最佳实践 · 学习路径建议
课程总结核心要点回顾
30
结业考核
综合测试与项目答辩
结业考核综合测试