3. 规则冲突定义：什么是数据治理中的规则冲突

在数据治理与数据质量工程中，规则冲突是指两条或多条数据质量规则在同一数据实体、同一处理环节或同一时间窗口内，对数据的判定标准、处理动作或保留策略产生不可同时满足的矛盾。规则冲突是导致 PSI（Population Stability Index）漂移的隐蔽根因之一——冲突规则会使数据分布在不同批次间发生非预期的结构性变化，从而触发 PSI 报警。

3.1 规则冲突的本质

规则冲突的本质是规则优先级缺失或规则作用域重叠。当多条规则同时作用于同一数据集，且未定义明确的执行顺序、覆盖条件或互斥逻辑时，冲突便会产生。冲突的结果通常表现为：

• 数据记录被重复处理（如同时被去重和保留两条规则命中）
• 数据记录被异常删除（一条规则要求保留，另一条规则要求删除）
• 数据字段被不一致修改（一条规则要求填充默认值，另一条规则要求保留原始空值）
• 数据分布发生偏移（冲突导致部分记录被错误过滤或保留，改变整体分布）

3.2 规则冲突的典型场景

以下表格列出了数据治理实践中最常见的四类规则冲突场景，每类场景均可能直接引发 PSI 漂移：

3.3 去重规则与保留规则冲突详解

在所有规则冲突场景中，去重规则与保留规则的冲突是导致 PSI 漂移最常见、最隐蔽的案例。该冲突的典型表现如下：

• 去重规则：基于主键或业务键，删除重复记录，仅保留第一条或最新一条。
• 保留规则：要求保留所有历史版本，包括重复记录，用于审计或回溯分析。
• 冲突点：两条规则同时作用于同一数据表，去重规则删除了保留规则需要保留的记录。
• PSI 漂移机制：去重操作导致某些类别的记录数量减少，类别占比发生变化，PSI 值超过阈值。

3.4 规则冲突的层次结构

规则冲突并非单一平面问题，而是具有清晰的层次结构。理解这一结构有助于系统化排查冲突根因：

3.5 规则冲突的判定方法

在实际数据治理平台中，判定两条规则是否存在冲突，可遵循以下三步流程：

1. 检查规则作用域：确认两条规则是否作用于同一数据表、同一字段或同一记录范围。若作用域无交集，则不存在冲突。
2. 检查规则动作：对比规则的处理动作（删除、保留、填充、转换等）。若动作方向相反（如一条删除、一条保留），则存在冲突。
3. 检查规则优先级：查看平台是否定义了规则执行顺序或优先级。若未定义，则冲突必然存在；若已定义，则按优先级执行，冲突被消除。

3.6 规则冲突与 PSI 漂移的关联路径

规则冲突并非直接导致 PSI 漂移，而是通过以下路径间接引发：

3.7 规则冲突的治理建议

为从根源上减少规则冲突导致的 PSI 漂移，建议在数据治理平台中实施以下措施：

• 建立规则注册中心：所有数据质量规则在发布前，需在注册中心登记其作用域、动作类型、优先级和执行顺序。
• 实施规则冲突检测：在规则部署阶段，自动检测新规则与已有规则是否存在冲突，并生成冲突报告。
• 定义规则优先级矩阵：为常见规则冲突场景（如去重 vs 保留）预定义优先级，避免运行时随机处理。
• 记录规则执行日志：每条规则执行时，记录其处理记录数、删除记录数、修改记录数，便于事后追溯。
• 定期审计规则组合：每季度对活跃规则进行组合审计，识别因业务变化而产生的新冲突。