VIP20
本课程属于：082-AWS数据工程与分析平台工程 后端、数据与云原生工程 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

AWS数据平台可观测性工程

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入与可观测性全景
目标=明确AWS数据平台可观测性的定… · 目标与边界 · 梳理日志
课程导入可观测性全景
02
AWS数据平台架构与可观测性挑战
目标=剖析典型AWS数据平台（如S3 · Glue · EMR
AWS数据平台架构
03
可观测性数据采集策略设计
目标=针对AWS数据平台各层（存储 · 计算 · 编排
可观测性数据采集…AWS
04
日志采集与结构化处理实战
目标=使用CloudWatch Lo… · Kinesis Firehose · Lambda转换
日志采集结构化处理实战
05
指标采集与自定义指标工程
目标=利用CloudWatch自定义… · Prometheus exporte… · CloudWatch Embedde…
指标采集自定义指标工程
06
分布式追踪在数据管道中的落地
目标=基于AWS X-Ray与Ope… · Glue · Step Functions
分布式追踪数据管道
07
数据平台SLO与错误预算设计
目标=为数据新鲜度 · 数据质量 · 管道可用性
SLO数据平台
08
告警与事件管理工程
目标=使用CloudWatch Al… · EventBridge · SNS
告警事件管理工程
09
可观测性数据存储与成本优化
目标=对比CloudWatch Lo… · S3 · OpenSearch
可观测性数据存储成本优化
10
可视化与仪表盘设计
目标=利用CloudWatch Da… · Grafana · OpenSearch Dashboa…
可视化仪表盘设计
11
数据质量可观测性
目标=集成AWS Glue Data… · Deequ · Great Expectations…
数据质量可观测性AWS
12
数据血缘与影响分析
目标=利用AWS Glue Data… · Lake Formation · OpenLineage等追踪数据血缘
数据血缘影响分析
13
批处理管道可观测性实战
目标=以AWS Glue/EMR作业… · 采集作业运行日志 · 指标
批处理管道可观测…AWS
14
流处理管道可观测性实战
目标=针对Kinesis Data… · Managed Streaming… · Flink
流处理管道可观测…Kinesis
15
无服务器数据平台可观测性
目标=针对Lambda · Step Functions · EventBridge
无服务器数据平台…Lambda
16
数据仓库与查询可观测性
目标=监控Redshift · Athena · EMR上的Spark SQL查询性能
数据仓库查询可观测性
17
数据湖可观测性
目标=针对S3数据湖 · 监控对象数量 · 分区健康
数据湖可观测性S3
18
编排与调度可观测性
目标=以MWAA（Managed W… · Step Functions为例 · 监控DAG运行状态
编排调度可观测性
19
安全与合规可观测性
目标=利用CloudTrail · GuardDuty · Security Hub
安全合规可观测性
20
多账户与跨区域可观测性
目标=设计集中式可观测性账户 · 使用CloudWatch跨账户观测 · OpenSearch跨集群复制
多账户跨区域可观测性
21
可观测性即代码（Observability as Code）
目标=使用Terraform · CloudFormation · AWS CDK定义告警
Observabilit…as
22
根因分析与故障排查方法论
目标=结合日志 · 指标 · 追踪
根因分析故障排查方法论
23
性能调优与容量规划的可观测性驱动
目标=基于历史指标与追踪数据 · 识别数据平台瓶颈（如Glue DPU… · Kinesis分片热
性能调优容量规划的可观测…
24
数据平台混沌工程与可观测性验证
目标=设计混沌实验（如模拟Glue作… · Kinesis限流 · 网络延迟）
数据平台混沌工程可观测性验证
25
机器学习与AI可观测性
目标=监控SageMaker训练作业 · 推理端点 · 特征存储
AI机器学习
26
可观测性数据管道自身的可观测性
目标=监控日志采集 · 指标转发 · 追踪收集管道（如Fluent Bit
可观测性数据管道…目标=监控日志采…
27
成本可观测性与FinOps
目标=利用AWS Cost Expl… · Budgets · 成本分配标签
FinOps成本可观测性
28
可观测性成熟度模型与演进路线
目标=定义从基础监控到高级可观测性的… · 评估当前数据平台状态 · 制定分阶段演进路线图与关键里程碑
可观测性成熟度模…演进路线
29
组织与协作
目标=构建数据平台可观测性文化 · SRE · 安全
组织协作
30
综合实战
目标=端到端可观测性平台构建 · 为一个模拟的AWS数据平台（包含S3 · Glue
综合实战目标=端到端可观…