1. 课程导入与海洋观测数据质量概览

海洋观测数据是认识海洋、预报海洋、管理海洋的基础。浮标、潜标、调查船、岸基雷达、卫星遥感、水下滑翔机等平台持续不断地把温度、盐度、海流、波浪、溶解氧、叶绿素等要素送回数据中心。然而,真实数据从来不是"干净"的:传感器会漂移,通信会中断,供电会耗尽,生物附着会污染探头,冰情会遮挡卫星像元,人为录入也会出错。于是,一份海洋观测数据在进入分析、同化或决策之前,必须先回答两个问题——哪些值是缺测的,以及哪些值虽然存在但不可信。这正是本课程要系统训练的核心能力。

学习目标

完成本课程后,学习者应当能够:理解缺测与质量标记在海洋观测数据链条中的位置与作用;识别常见的缺测类型(完全缺失、时段缺失、要素缺失、编码缺失)与质量问题的来源;掌握质量控制标记的基本体系(如通过、可疑、错误、缺失、未检验等状态)及其含义;能够针对温度、盐度、海流等典型要素设计并实施基础质控流程;能够对质控结果进行统计、复核与追溯,并写出可交付的数据质量说明。课程强调"看得懂数据、说得清问题、做得出处理",而不是停留在概念记忆。

缺测与质量标记为何处于核心地位

可以把海洋观测数据链想象成一条从传感器到应用的信号链:传感器输出原始计数,经标定转换为物理量,再经平台打包、通信传输、解码入库,最后进入质控、产品制作与再分析。缺测与质量标记贯穿这条链的每一环。缺测决定了样本的时空覆盖,直接影响平均、插值、谱分析和同化权重的合理性;质量标记则决定了"哪些样本可以参与计算"。一个未被标记的异常值,可能比一个明确的缺测更危险——缺测会被算法自动跳过,而错误值会被当作真值使用,进而污染统计结果和预报初值。

举个具体例子。某浮标温度序列中,第 120 至 135 个采样点因通信中断没有到达,入库时被填为 -999.0;第 300 个采样点传感器瞬时跳变,记录为 38.6 ℃,而邻近时刻均在 27 ℃ 左右。若不做处理直接求日均值,前者会把均值拉低,后者会把均值抬高,两者叠加后日均值可能偏离真值 1 ℃ 以上。若在入库时把 -999.0 标记为缺失、把 38.6 ℃ 标记为可疑并剔除,日均值就能回到合理范围。这个例子说明:缺测处理与质量标记不是数据处理的"附加步骤",而是数据可用性的前提。

海洋观测数据信号链:缺测与质量标记的作用位置 传感器 原始计数/电压 标定转换 物理量 平台打包 报文/时间戳 通信传输 卫星/岸站 解码入库 原始数据库 质量控制 标记/剔除 产品与应用 统计/同化/预报 质量反馈 复核/追溯 缺测:通信中断 时段缺失 缺测:传感器故障 要素缺失 异常:瞬时跳变 标记为可疑 异常:传感器漂移 趋势检验 缺测:填充值 -999.0 未识别 关键认识: 缺测发生在链上任意环节(传感器、通信、编码),质量异常多源于传感器漂移、生物附着、环境干扰与录入错误; 质控环节负责把"缺失"与"可疑/错误"显式标记出来,产品与应用只能使用通过检验的样本,质量反馈再回溯到平台与传感器维护。

课程框架与真实数据问题引入

本课程共 30 章,整体按"概念—方法—实操—复盘"推进。前段建立缺测类型、质量标记体系、质控层级(实时质控与延时质控)等基础概念;中段围绕温度、盐度、海流、波浪等典型要素,讲解范围检验、跳变检验、持续性检验、气候极值检验、空间一致性检验等具体方法,并给出参数设置与判定阈值的思路;后段进入实操,包括质控标记的写入规范、质控报告编制、异常样本复核与追溯,以及面向再分析和数值同化的数据可用性评估。课程不追求覆盖所有标准文本,而是让学习者建立"看到数据能判断、拿到问题能定位、处理之后能说明"的完整能力。

为了让学习从一开始就贴近真实场景,这里给出一个贯穿课程的示例数据集设定(属于教学示例,非实测数据):某近岸浮标每 10 分钟采样一次,一天 144 条记录,要素包括海表温度、盐度、有效波高和风速。数据中存在四类典型问题:一是夜间通信中断导致连续 18 条记录缺失;二是盐度传感器因生物附着出现缓慢正漂移;三是风速在某个时刻出现单点尖峰;四是部分缺失记录被错误填为 -999.0 而非标准缺失码。后续章节将围绕这份示例数据,逐步演示如何识别、标记、统计和复核这些问题。

学习建议:每读到一个质控方法,先问三个问题——它针对哪类问题、需要什么输入、判定结果如何表达。把这三个问题写下来,比记住具体阈值更有长期价值。

需要强调的是,质量标记不是"打标签就结束"。标记必须可追溯:谁在什么时间、用什么规则、对哪条记录打了什么标记,都应当有记录。这样当产品出现异常时,才能回溯到具体样本和具体规则,判断是数据问题还是方法问题。本课程后续会给出标记字段的设计示例与复核流程,帮助学习者把"标记"变成可管理、可审计的数据资产,而不是散落在脚本里的临时判断。