3. 缺失原因分析：上游数据源异常、ETL处理错误、业务逻辑变更、存储故障

金融特征缺失并非随机发生，其背后通常对应着明确的技术或业务根因。将缺失原因归纳为四大类——上游数据源异常、ETL处理错误、业务逻辑变更、存储故障——有助于巡检人员快速定位问题域，避免在无关环节浪费时间。

3.1 上游数据源异常

上游数据源是特征生产的起点。当源系统（如核心银行、风控决策引擎、第三方征信接口）出现故障或配置变更时，下游特征必然出现缺失。

3.2 ETL处理错误

ETL（抽取-转换-加载）是特征加工的核心环节。脚本逻辑缺陷、依赖表缺失、数据类型转换失败等，都会导致特征在加工过程中被置空或丢弃。

• Join 键值不匹配： 主表与维表关联时，因数据格式不一致（如字符串含空格、大小写差异）导致关联失败，特征值为 NULL。
• 聚合函数空值传播： 使用 SUM()、AVG() 等聚合函数时，若未提前处理 NULL，结果可能被传播为 NULL。
• 分区/分桶错位： 跑批脚本读取了错误的分区（如读取昨天的分区而非今天），导致特征全量缺失。
• 依赖任务失败： 上游ETL任务未成功完成，下游任务仍继续执行，读取到空表或部分数据。

-- 示例：Join键值不匹配导致特征缺失
-- 问题SQL：关联条件未做trim处理
SELECT
    a.user_id,
    b.credit_score
FROM transaction a
LEFT JOIN user_profile b
  ON a.user_id = b.user_id;  -- 若b.user_id含前导空格，关联失败

-- 修复SQL：统一清洗关联键
SELECT
    a.user_id,
    b.credit_score
FROM transaction a
LEFT JOIN user_profile b
  ON TRIM(a.user_id) = TRIM(b.user_id);

3.3 业务逻辑变更

业务规则的调整往往不会同步通知数据团队，导致特征计算逻辑与当前业务状态脱节，产生意料之外的缺失。

3.4 存储故障

存储层故障虽然发生频率较低，但一旦出现往往造成大面积、持续性的特征缺失，需要基础设施团队协同排查。

• 磁盘损坏/文件系统错误： 导致HDFS或分布式存储中的特征文件损坏，读取时返回空值或报错。
• 表/分区被误删除： 运维操作或脚本Bug导致特征表或分区被意外drop，后续查询全部为空。
• 存储配额不足： 特征表所在存储空间写满，新数据无法写入，旧数据被部分覆盖。
• 数据库连接池耗尽： 特征写入时无法获取数据库连接，导致写入失败，特征缺失。

3.5 缺失原因快速定位矩阵

在实际巡检中，可根据缺失特征的表现模式，对照下表快速缩小排查范围：