2、ISP基础：ISP流水线（RAW域、RGB域、YUV域）各模块功能，以及座舱摄像头ISP的特殊需求

座舱摄像头ISP（Image Signal Processor）调优，本质上是在与一条高度复杂的信号处理链打交道。无论是低照度下的噪点抑制、逆光场景的宽动态还原，还是红外补光下的黑白成像，最终画质的上限由传感器决定，而下限和风格则由ISP流水线塑造。理解ISP在RAW域、RGB域、YUV域各自承担的任务，是进行任何有效调优的前提。本章将拆解这条流水线，并聚焦座舱场景对ISP提出的独特约束。

2.1 核心原理：ISP三大域的分工逻辑

ISP流水线并非简单的顺序处理，而是按照信号从物理世界到数字显示的映射关系，划分为三个逻辑域。每个域处理的数据格式、算法目标和评价指标截然不同。

• RAW域（Bayer原始数据）：直接来自CMOS传感器的原始数据，每个像素只包含R、G、B中的一个分量。此阶段的核心任务是“修复物理缺陷”——传感器制造带来的坏点、暗电流、镜头光学特性导致的亮度不均等。RAW域处理必须保持数据的线性特性，任何非线性操作都会影响后续色彩还原的准确性。
• RGB域（全彩图像）：经过去马赛克后，每个像素都拥有完整的RGB三通道信息。此阶段的核心任务是“还原真实色彩”——通过白平衡校正光源色温影响，通过颜色校正矩阵（CCM）修正传感器光谱响应与人眼视觉的差异。RGB域是色彩精度的关键，也是座舱内人脸肤色还原的核心控制点。
• YUV域（亮度色度分离）：将RGB转换为Y（亮度）和UV（色度）分量，符合人眼对亮度更敏感的特性。此阶段的核心任务是“优化视觉观感”——降噪、边缘增强、对比度调整都在此进行。YUV域处理直接影响最终显示效果和编码效率。

2.2 各域核心模块功能详解

2.2.1 RAW域：信号完整性修复

RAW域调优的核心原则是“最小干预”。座舱摄像头通常使用卷帘快门传感器，在低照度下RAW域噪声水平较高，此时应优先通过BLC和LSC的精确标定来提升信噪比，而非依赖后续的强降噪。

2.2.2 RGB域：色彩科学还原

RGB域是座舱ISP调优中最需要“场景化”思考的环节。以AWB为例，座舱内光源复杂——阳光、LED氛围灯、仪表盘背光、红外补光混合存在，色温范围可能从2500K（暖黄）到7500K（冷白）甚至更高。固定色温映射表无法应对这种动态变化。

// AWB增益计算示意（简化）
// 统计RAW域R/G/B通道均值
float R_avg = getAverage(R_channel);
float G_avg = getAverage(G_channel);
float B_avg = getAverage(B_channel);

// 计算增益（以G为基准）
float R_gain = G_avg / R_avg;
float B_gain = G_avg / B_avg;

// 座舱特殊处理：限制增益范围，防止红外串扰导致偏色
R_gain = clamp(R_gain, 0.8f, 2.5f);
B_gain = clamp(B_gain, 0.8f, 2.5f);

CCM（颜色校正矩阵）的调优需要结合座舱内人脸肤色的目标色度值。通常使用24色卡（如X-Rite ColorChecker）进行标定，但座舱场景应额外关注肤色色块（第11-13色块）的还原精度。

2.2.3 YUV域：感知质量优化

YUV域的降噪（NR）和边缘增强（Edge Enhancement）是座舱低照度调优的主战场。降噪算法分为空域（如双边滤波）和时域（如多帧降噪），座舱场景推荐采用“空域+时域混合”策略：静态区域使用时域降噪提升信噪比，动态区域用空域降噪避免拖影。

2.3 座舱摄像头ISP的特殊需求分析

与行车记录仪或自动驾驶摄像头不同，座舱摄像头ISP面临四大特殊约束：

1. 红外兼容性：夜间使用850nm或940nm红外补光时，ISP必须能自动切换至黑白模式，并抑制红外光在彩色模式下的串扰（表现为红紫色偏色）。这要求ISP支持独立的红外通道增益配置。
2. 人脸识别优先：驾驶员监控系统（DMS）和乘客监控系统（OMS）需要清晰的人脸特征（眼睛、嘴巴、面部轮廓）。ISP调优需在降噪和细节保留之间找到平衡点——过度降噪会抹平眼部纹理，导致活体检测失败。
3. 宽动态范围（WDR）：逆光场景（如阳光从侧窗射入）下，人脸区域可能欠曝，而窗外背景过曝。座舱ISP需支持局部色调映射（LTM）或多帧HDR，但受限于功耗和实时性，通常采用单帧LTM方案。
4. 隐私保护：座舱摄像头涉及个人隐私，ISP需支持ROI（感兴趣区域）加密或模糊处理，这要求ISP在YUV域输出前提供区域掩码接口。

2.4 实战案例：座舱红外模式切换的ISP调优闭环

背景与约束：某车型座舱摄像头采用IMX390传感器，ISP为Qualcomm SA8155内置ISP。夜间场景需自动切换至红外模式（940nm LED补光），但实际测试发现切换后画面出现明显偏色（暗部偏紫）和细节丢失。

初始现象与目标：彩色模式切换至红外模式后，画面整体偏紫，人脸边缘模糊。目标是在1秒内完成切换，且黑白画面细节清晰、无偏色。

关键参数与日志：

// 切换前彩色模式参数
AWB: R_gain=1.8, B_gain=1.2
CCM: [1.2 -0.3 -0.1; -0.2 1.4 -0.2; -0.1 -0.3 1.3]

// 切换后红外模式参数（异常）
AWB: R_gain=2.5, B_gain=0.8  // 明显偏红
CCM: 未切换，仍使用彩色矩阵

分析判断过程：问题根源在于ISP的AWB统计模块未识别红外模式，仍按可见光色温计算增益。940nm红外光在R通道响应较高，导致R_gain被错误拉高。同时，CCM矩阵未切换至黑白模式专用矩阵，进一步放大了偏色。

实际操作步骤：

1. 在ISP驱动中增加红外模式检测：通过GPIO读取红外LED状态，或通过AWB统计中R/B通道比值判断（R/B > 3.0时判定为红外模式）。
2. 红外模式下强制设置AWB增益为1.0（R=G=B），并禁用AWB自动调整。
3. 增加黑白模式专用CCM矩阵：[0.3 0.6 0.1; 0.3 0.6 0.1; 0.3 0.6 0.1]（亮度系数），确保RGB三通道输出一致。
4. 调整YUV域降噪参数：红外模式下时域降噪强度降低20%，避免拖影；边缘增强强度提高15%，补偿红外图像的细节损失。
5. 增加切换平滑逻辑：在彩色→红外切换过程中，用3帧渐变过渡，避免画面闪烁。

结果对比：切换后画面无偏色，人脸边缘清晰度提升约30%（MTF50从0.35提升至0.45），切换时间从1.2秒缩短至0.8秒。

风险与代价：强制AWB增益为1.0会牺牲混合光源（红外+少量可见光）下的色彩准确性，但座舱夜间场景以红外为主，此代价可接受。复盘经验：ISP调优必须建立“场景-参数”映射表，不同模式（彩色/红外/混合）应有独立的参数集，且切换逻辑需在RAW域提前介入。

2.5 常见误区与总结复盘