3. 缺测的成因与分类
在海洋观测中,"缺测"并不只是"数据没有传回来"这么简单。一个被标记为缺测的记录,背后可能是传感器本身失效、通信链路中断、供电系统掉电、生物附着遮挡探头、恶劣海况导致平台失稳,也可能是人为的参数配置错误或维护操作中断。不同成因造成的缺测在时间分布、空间分布和统计特征上差异很大,而缺测分类正是连接"成因诊断"与"后续处理方法"的桥梁。本节先梳理六类典型成因的作用机理,再给出完全随机缺测、连续块状缺测、周期性缺测三种分类的判别方法。
一、六类典型成因及其数据表现
传感器故障是最直接的缺测来源。以温盐深仪(CTD)为例,电导率探头污染或电极老化会导致输出值漂移,当漂移超出量程或自检阈值时,数据采集器会将该通道置为无效;若探头彻底断路,则输出恒定值或空值。这类缺测往往表现为单参数、单通道的缺失,同一平台的其他传感器可能仍正常输出,因此具有明显的"通道选择性"。
通信中断常见于浮标、潜标通过卫星或岸基无线回传数据的场景。铱星链路在恶劣天气下丢包率上升,或岸站接收机故障,会造成整条报文缺失。其特点是整帧丢失——同一时刻所有参数一起消失,且缺测边界与通信会话周期对齐,而不是与物理量变化对齐。
供电异常多发生于太阳能供电的漂流浮标。连续阴天导致蓄电池电压低于欠压保护阈值时,系统会主动关闭部分传感器以保通信,形成"低压期间整段缺测、电压恢复后自动恢复"的模式。这类缺测通常成块出现且与时间相关,并可能伴随电压、电流等辅助参数的异常记录。
生物附着对光学和电化学传感器影响显著。叶绿素荧光计、溶解氧光学探头表面被藻类或藤壶覆盖后,读数逐渐偏离真值,质控系统依据与邻近站点的偏差或信号稳定性判据将其标记为可疑直至无效。生物附着造成的缺测具有渐进性:先出现零星可疑值,再发展为连续无效段,且随投放时间增长而加剧。
恶劣海况会通过平台运动影响观测。波浪导致浮标剧烈倾斜时,ADCP的波束可能超出有效测量范围,或风速仪因横摇过大而触发质量门限。此类缺测与海况过程强相关,往往在风暴事件期间集中出现,风暴过后迅速恢复。
人为操作包括维护时拔插传感器、修改采样配置、校准期间暂停采集等。这类缺测通常有明确的起止时刻,可与维护日志逐条比对,是六类成因中最容易通过元数据核实的一类。
二、三种缺测分类的判别方法
把上述成因映射到数据层面,工程上通常按缺测在时间轴上的分布形态分为三类,这一分类直接决定了后续插补策略的选择。
完全随机缺测指缺测点独立、无规律地散布在时间序列中,单个缺测段长度很短(常为1~3个采样点),且缺测位置与观测值本身无关。其典型来源是偶发丢包或瞬时干扰。判别时可统计缺测间隔的分布:若缺测段长度近似服从几何分布、且缺测发生率在各时间段基本平稳,则可判为随机缺测。这类缺测对均值估计影响较小,线性插值或基于邻近点的回归插补通常足够。
连续块状缺测指缺测以较长连续段出现,段内所有采样点均缺失,段长从数小时到数天不等。供电异常、通信长时间中断、传感器彻底失效都会产生这种形态。判别关键是计算缺测段长度分布:若存在明显超过随机预期的长段(例如段长超过采样间隔的20倍),且段边界与维护记录、电压记录或风暴事件时间吻合,即可归为块状缺测。块状缺测不能简单插值,需要结合成因决定是标记为不可插补、还是用同源备份数据或邻近站点做条件重建。
周期性缺测指缺测按固定时间规律重复出现,例如每天固定时段因太阳能供电不足而停机、或每个潮周期内某相位因平台遮挡而失测。判别方法是做缺测指示序列的周期分析:将缺测标记为0/1序列,计算其自相关函数或功率谱,若在日周期、半日周期或潮周期处出现显著峰值,则判为周期性缺测。这类缺测的插补应利用周期结构,例如用同日相的历史数据或谐波模型估计。
三、从分类到处理:一个可操作的判别流程
实际工作中,建议按以下顺序处理一段待检序列。第一步,把每个采样时刻标记为有效或无效,得到0/1缺测指示序列。第二步,统计缺测段长度直方图:若绝大多数段长为1~2且长尾很短,倾向随机缺测;若出现明显长段,进入第三步。第三步,对长段逐一核对元数据——查维护日志、供电电压曲线、通信会话记录、海况观测,确定成因并判断该段是否可插补。第四步,对剩余缺测做周期分析,用自相关函数在滞后24小时、12小时及潮周期处的取值判断是否存在周期结构。第五步,按分类结果选择插补方法,并在数据文件中保留原始缺测标记与成因代码,避免"插补后无法追溯"。
综上,缺测成因决定了缺测在时间轴上的形态,而形态又决定了分类与处理策略。掌握"成因—形态—判别—处理"这条链条,才能在面对一段残缺的海洋观测序列时,既不盲目插补,也不轻易丢弃,而是做出有依据的质量决策。