VIP20

本课程属于：082-AWS数据工程与分析平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

AWSDataOps持续交付与发布

共计 30 章节

可可资料掘金营 · 点击在线试看

DataOps与持续交付导论

目标=理解DataOps核心原则 · 持续交付与发布在数据管道中的意义 · AWS服务在DataOps中的角色定…

DataOps持续交付导论

AWS DataOps技术栈概览

目标=熟悉CodeCommit · CodeBuild · CodeDeploy

数据管道版本控制策略

目标=掌握数据管道代码 · 配置 · SQL脚本

数据管道版本控制…目标=掌握数据管…

基础设施即代码入门

目标=使用AWS CDK或Cloud… · 实现数据湖 · ETL集群

基础设施即代码入…AWS

构建持续集成流水线

目标=配置CodeBuild项目 · 对数据管道代码进行单元测试 · 集成测试

构建持续集成流水…CodeBuild

数据管道自动化测试

目标=设计针对ETL逻辑 · 数据质量 · Schema演进的自动化测试套件

数据管道自动化测…ETL

持续交付流水线设计

目标=使用CodePipeline编… · 包括构建 · 测试

持续交付流水线设…CodePipeline

多环境部署策略

目标=实现开发 · 测试 · 预生产

多环境部署策略目标=实现开发

数据管道部署模式

目标=对比蓝绿部署 · 金丝雀发布 · 滚动更新在数据管道中的适用场景与实现…

数据管道部署模式目标=对比蓝绿部…

使用CodeDeploy部署数据应用

目标=配置CodeDeploy应用与… · 实现Lambda · ECS

CodeDeploy使用

Step Functions在数据编排中的持续交付

目标=将状态机定义纳入版本控制 · 通过CI/CD自动更新和回滚数据工作…

AWS Glue作业的持续交付

目标=使用Glue Studio · CDK和CodePipeline实现…

Amazon Redshift与数据仓库变更管理

目标=通过数据库迁移工具和CI/CD… · 视图和存储过程

数据湖与Lake Formation的持续交付

目标=自动化部署S3数据湖结构 · Lake Formation权限 · 分区管理和数据目录

流式数据管道的持续交付

目标=针对Kinesis · MSK · Flink应用的CI/CD实践

流式数据管道的持…Kinesis

容器化数据应用的交付

目标=使用ECS · EKS和ECR构建容器化数据服务的持… · 扫描与部署流水线

容器化数据应用的…ECS

无服务器数据管道的持续交付

目标=使用Lambda · Step Functions · EventBridge构建事件驱动数…

无服务器数据管道…Lambda

数据质量与可观测性集成

目标=在交付流水线中嵌入数据质量检查 · CloudWatch监控 · X-Ray追踪和告警配置

数据质量可观测性集成

安全与合规的持续交付

目标=在CI/CD中集成IAM策略 · KMS加密 · Secrets Manager

安全合规的持续交付

多账号与跨区域交付策略

目标=使用AWS Organizat… · Control Tower和跨账号角…

多账号跨区域交付策略

回滚与故障恢复机制

目标=设计数据管道部署失败时的自动回… · 版本回退 · 数据一致性保障策略

回滚故障恢复机制

发布审批与变更管理

目标=配置手动审批 · 变更日历 · ITSM集成

发布审批变更管理

指标驱动的持续改进

目标=收集DORA指标 · 管道成功率 · 部署频率

指标驱动的持续改…DORA

目标=构建端到端数据管道CI/CD · 完成一个完整数据管道的自动化交付流水…

CI/CD目标=构建端到端…

目标=数据管道蓝绿部署

目标=数据管道蓝…重点

目标=多环境参数化部署

目标=多环境参数…重点

目标=数据质量门禁集成 · 阻止低质量数据进入生产

目标=数据质量门…阻止低质量数据进…

目标=跨账号数据管道交付 · 实现从工具账号到生产账号的自动化部署

目标=跨账号数据…实现从工具账号到…

DataOps流水线性能优化

目标=优化构建缓存 · 并行测试 · 制品复用和部署速度

DataOps流水线性能优化

课程总结与演进路线

目标=回顾核心实践 · 规划从手动运维到全自动DataOps…

课程总结演进路线