1. 课程导论：值班自动化基线核验的定义、平台工程在其中的角色、课程目标与学习路径
1.1 什么是值班自动化基线核验？
在大型分布式系统中，值班团队每天面对数十次数据管道告警、同步延迟、校验失败等事件。值班自动化基线核验是指：通过平台工程构建的自动化测试与校验体系，在数据传输链路上持续执行预设的基线检查，从而在值班人员介入前自动发现、定位甚至修复数据异常。
其核心要素包括：
- 基线定义：对数据完整性、时效性、一致性、格式合规性设定可量化的阈值与规则。
- 自动化执行：无需人工触发，由平台定时或事件驱动执行核验任务。
- 值班联动：核验结果自动分级告警，并关联值班排班系统与故障处理流程。
关键指标： 引入自动化基线核验后，典型团队的数据异常平均发现时间（MTTD）从 45 分钟降至 3 分钟，平均修复时间（MTTR）降低 62%。
1.2 平台工程在其中的角色
平台工程不是简单的工具堆叠，而是通过构建内部开发者平台（IDP），将数据核验能力以服务化、自助化的方式交付给值班团队。其角色体现在三个层面：
| 层面 | 平台工程提供的核心能力 | 对值班核验的价值 |
|---|---|---|
| 基础设施层 | 统一的数据源连接管理、计算资源编排、网络策略自动化 | 核验任务无需关心底层环境差异，一次定义，随处运行 |
| 测试编排层 | 基线规则引擎、测试用例模板库、分布式执行调度 | 值班人员通过声明式配置即可新增核验场景，无需编写代码 |
| 可观测与反馈层 | 统一告警网关、自动化故障诊断、值班看板集成 | 核验结果自动关联值班事件，减少人工信息拉取时间 |
平台工程思维转变： 从“值班人员自己写脚本核验”到“平台提供核验即服务（Verification as a Service）”，核心是降低认知负载，让值班聚焦于异常决策而非工具适配。
1.3 课程目标
完成本课程后，学员将具备以下能力：
- 定义基线：针对不同数据传输场景（实时流、批量、CDC），设计可量化的核验基线。
- 构建平台：使用平台工程方法论，搭建自动化基线核验的内部开发者平台。
- 集成值班：将核验结果无缝接入值班告警、排班、故障自愈流程。
- 持续演进：通过数据驱动的方式优化基线规则，减少误报与漏报。
1.4 学习路径与章节地图
课程共 30 章，分为四个阶段：
- 阶段一（第 1-6 章）：基础与概念 — 基线核验理论、平台工程基础、数据传输链路剖析。
- 阶段二（第 7-16 章）：平台构建 — 规则引擎设计、测试编排、执行调度、结果聚合。
- 阶段三（第 17-24 章）：值班集成 — 告警分级、自动化诊断、值班看板、故障自愈。
- 阶段四（第 25-30 章）：进阶与实战 — 大规模性能优化、多租户隔离、混沌工程与基线、案例复盘。
1.5 课程适用角色与前置要求
| 适用角色 | 前置技能要求 | 课程收益 |
|---|---|---|
| SRE / 值班工程师 | 熟悉 Linux 基础、了解数据管道基本概念 | 掌握自动化核验方法，减少重复性人工检查 |
| 测试开发工程师 | 有自动化测试经验，了解 CI/CD 流程 | 将测试思维扩展到数据传输领域，构建基线体系 |
| 平台工程师 | 熟悉 Kubernetes、微服务架构、API 设计 | 学习如何将核验能力平台化、服务化 |
| 数据工程师 | 了解 Kafka、Flink、Spark 等数据组件 | 获得数据质量保障的系统性工程方法 |
注意： 本课程不教授基础编程语法或 Linux 操作。学员应具备至少一种脚本语言（Python/Go/Shell）的读写能力，并了解基本的数据传输概念（如消息队列、批处理、CDC）。