2. 光与图像基础
相机图像信号处理（ISP）的每一个环节，最终都服务于一个目标：让传感器捕获的物理光信号，转化为符合人眼视觉预期的高质量图像。因此，理解光的物理本质、颜色的形成机制以及人眼感知特性，是掌握 ISP 全流程的起点。本节从光子与光谱出发，逐步过渡到颜色感知模型与主观评价方法，为后续白平衡、色彩校正、色调映射等模块建立理论根基。
一、光子与光谱：图像的物理源头
光具有波粒二象性。从波动角度看，光是电磁波，可见光波长约在 380nm 至 780nm 之间；从粒子角度看，光由光子组成，单个光子的能量 E 与频率 ν 成正比：
E = h · ν = h · c / λ
h = 6.626×10⁻³⁴ J·s（普朗克常数）
c = 3×10⁸ m/s（光速）
λ 为波长，ν 为频率这意味着短波长的蓝紫光单个光子能量更高，长波长的红光光子能量更低。在图像传感器中，光子被光电二极管吸收后激发电子，形成电荷。光子数量决定亮度信号强度，而不同波长光子的比例分布则决定了场景的“光谱功率分布”（SPD）。ISP 中的白平衡、色彩校正矩阵等模块，本质上都是在处理不同 SPD 下的通道响应差异。
二、颜色感知：从三刺激值到色度空间
人眼视网膜上有三种视锥细胞，分别对短波（S，约 420nm）、中波（M，约 534nm）、长波（L，约 564nm）敏感。任何进入眼睛的光谱，都会被这三种细胞转换为三个刺激值，大脑据此产生颜色感知。这就是“三色学说”的基础。
CIE（国际照明委员会）在此基础上建立了 CIE XYZ 色彩空间，用三个理想化刺激值 X、Y、Z 描述人眼可见的所有颜色。其中 Y 代表亮度，X 和 Z 与色度相关。由 XYZ 可导出 CIE xyY 色度图，马蹄形边界代表光谱轨迹，边界上的点对应单色光，内部点对应混合光。色度图是理解色域、白点、色温等概念的核心工具。
在 ISP 中，常用色温描述光源的“冷暖”倾向。色温以开尔文（K）为单位，低色温（如 2700K）偏暖黄，高色温（如 6500K）偏冷蓝。白平衡的本质，就是估计场景光源色温，并通过增益调整使白色物体在图像中呈现为中性白。
三、人眼视觉特性：ISP 设计的隐形约束
人眼并非线性测量仪器，其响应具有显著非线性与自适应特性，这些特性直接影响了 ISP 中的 Gamma 校正、色调映射、锐化与降噪策略。
- 亮度非线性感知：人眼对亮度的感知近似遵循韦伯-费希纳定律，即感知强度与物理强度的对数成正比。因此图像编码普遍采用 Gamma 曲线，将线性光信号转换为感知均匀的信号。
- 同时对比与局部适应：人眼对某区域的亮度判断受周围区域影响。ISP 中的局部色调映射正是利用这一特性，在压缩动态范围的同时保持局部对比度。
- 颜色恒常性：在不同光源下，人眼仍能将熟悉物体感知为相同颜色。自动白平衡算法试图模拟这一能力，但受限于传感器与算法，常出现偏色。
- 空间频率敏感度：人眼对中频细节最敏感，对高频和低频敏感度下降。锐化与降噪的平衡点，往往依据对比敏感度函数（CSF）来设定。
- 视觉暂留与时间积分：人眼对快速变化的图像有积分效应，这影响了视频 ISP 中的时域降噪与运动补偿策略。
四、图像质量主观评价方法
客观指标（如 PSNR、SSIM）计算便捷，但与人的真实感受存在差距。因此，主观评价是图像质量评估的“金标准”。常见方法如下表所示：
| 方法 | 全称 | 核心操作 | 适用场景 |
|---|---|---|---|
| MOS | 平均主观意见分 | 观察者按 1–5 分打分，取平均 | 整体质量偏好 |
| DMOS | 差分平均主观意见分 | 与参考图对比后打分 | 压缩、增强效果对比 |
| PC | 成对比较 | 两两比较，选出更优者 | 细微差异排序 |
| 2AFC | 二选一强制选择 | 每次呈现两图，强制选一 | 阈值附近敏感度测试 |
| SAMVIQ | 单刺激多属性评价 | 对亮度、色彩、清晰度等分别打分 | ISP 模块级调优 |
主观评价实验需控制观察条件：标准光源、中性灰背景、固定观看距离与角度、足够数量的非专家观察者。对于 ISP 调优，常采用“参考图 vs 调优图”的成对比较，快速定位模块问题。
五、案例与常见误区
案例：某手机在室内暖光下拍摄白纸，图像明显偏黄。从光谱角度分析，暖光 SPD 中长波成分强，传感器 R 通道响应高于 B 通道。若白平衡增益未正确补偿，R 增益不足或 B 增益过大，就会偏黄。解决方法是提高 R 增益或降低 B 增益，使白纸三通道响应趋于一致。
误区一：认为“颜色是光的固有属性”。实际上颜色是大脑的感知结果，同一光谱在不同背景下可能被感知为不同颜色。
误区二：过度依赖客观指标。PSNR 高的图像可能因过度平滑而主观模糊，SSIM 高的图像也可能存在局部偏色。
误区三：忽略人眼非线性。在线性空间直接做锐化或对比度增强，容易导致暗部噪声放大或高光溢出，应先转换到感知均匀空间再处理。
总结来看，光子与光谱是图像的物理起点，三刺激值与色度空间是颜色的数学描述，人眼视觉特性是 ISP 算法设计的隐形约束，而主观评价则是检验最终效果的标尺。四者环环相扣，构成了从光到图像、从物理到感知的完整认知链条。掌握这条链条，才能在后续的白平衡、色彩校正、Gamma、色调映射等模块中做出有依据的工程决策。