1. 课程导论：AWB与HDR在ISP Pipeline中的位置与重要性
1.1 ISP Pipeline 全景概览
图像信号处理器（ISP）是数字成像系统的核心，负责将CMOS/CCD传感器输出的原始Bayer RAW数据，经过一系列算法模块处理，最终生成人眼可感知的高质量RGB或YUV图像。整个ISP Pipeline通常遵循“先恢复物理真实性，再增强视觉美观性”的流水线顺序。
下表列出了典型ISP Pipeline中的关键模块及其功能定位：
| 处理阶段 | 模块名称 | 核心功能 | 对最终图像的影响 |
|---|---|---|---|
| 前端（RAW域） | 坏点校正（DPC） | 检测并替换传感器死点/热点 | 消除固定噪声点 |
| 前端（RAW域） | 黑电平校正（BLC） | 减去光学黑电平偏移 | 恢复暗部细节，保证黑场纯净 |
| 前端（RAW域） | 镜头阴影校正（LSC） | 补偿镜头中心-边缘亮度衰减 | 均匀画面亮度分布 |
| 中端（RAW域） | 自动白平衡（AWB） | 估计光源色温并校正色偏 | 还原物体真实色彩 |
| 中端（RAW域） | 去马赛克（Demosaic） | 将Bayer模式插值成全彩色 | 决定色彩分辨率和锯齿伪像 |
| 中端（RGB域） | 色彩校正矩阵（CCM） | 将传感器色彩空间映射到标准色域 | 色彩准确度与饱和度 |
| 后端（RGB/YUV域） | 伽马校正（Gamma） | 非线性亮度映射，适配显示设备 | 对比度与亮度感知 |
| 后端（YUV域） | 边缘增强（Sharpening） | 提升高频细节对比度 | 图像清晰度与锐利感 |
| 后端（YUV域） | 高动态范围（HDR）融合 | 多帧曝光合成，扩展动态范围 | 保留高光与暗部细节 |
| 后端（YUV域） | 降噪（NR） | 抑制亮度和色度噪声 | 画面纯净度 |
关键认知：AWB位于RAW域处理的中段，直接操作未经插值的原始数据，其精度决定了后续所有色彩相关模块（CCM、Gamma）的输入质量。HDR融合则位于后端YUV域，在色彩和亮度映射基本完成后，通过多帧合成突破单帧传感器的动态范围极限。
1.2 AWB在ISP Pipeline中的位置与作用
自动白平衡（AWB）是ISP色彩管理链的“第一道关卡”。其核心任务是：估计场景中的光源色温，并通过对R/G/B通道施加独立增益，使原本偏色的RAW数据恢复为中性灰平衡。
AWB的输入是经过黑电平校正和镜头阴影校正后的RAW数据，输出是经过白平衡增益校正后的RAW数据。如果AWB估计错误，后续的CCM、Gamma、HDR融合都会在错误的色彩基座上叠加处理，导致难以挽回的色偏。
下图展示了AWB在ISP Pipeline中的具体位置及其与前后模块的数据流关系：
1.3 HDR融合在ISP Pipeline中的位置与作用
高动态范围（HDR）融合是解决单帧传感器动态范围不足（通常60-72dB）与真实场景动态范围（通常100-140dB）之间矛盾的关键技术。HDR融合位于ISP后端YUV域，通常在Gamma校正和色彩增强之后、最终输出之前执行。
HDR融合的典型输入是同一场景下不同曝光时间的多帧图像（短曝光保留高光细节，长曝光保留暗部细节），输出是一帧动态范围显著扩展的融合图像。
下图展示了HDR融合在ISP Pipeline中的位置及其与前后模块的协作关系：
1.4 AWB与HDR的耦合关系
在ISP调优工程中，AWB与HDR并非独立模块，它们之间存在显著的耦合效应：
- 色彩一致性：HDR融合的多帧输入必须具有一致的色彩表现。如果各帧的AWB增益不同（例如帧间色温波动），融合后会出现色彩斑块或色调分裂。
- 权重映射依赖：HDR融合的权重图通常基于亮度（Luma）计算，但AWB校正后的色彩通道增益会影响各通道的亮度贡献，进而影响权重分配的准确性。
- 暗部噪声放大：长曝光帧在AWB增益放大后，暗部噪声会被显著增强。HDR融合时需要针对不同曝光帧的噪声特性设计自适应降噪策略。
- 色调映射交互：色调映射（Tone Mapping）的曲线设计需要与AWB的目标色温对齐，否则在高对比度边缘会出现色相偏移。
调优经验：在实际工程中，建议先完成AWB的稳定收敛（帧间色温波动 < 200K），再进行HDR融合的权重和色调映射调优。AWB的不稳定是HDR融合出现色彩伪像的首要原因。
1.5 AWB与HDR的行业重要性
从产品竞争力角度看，AWB和HDR是ISP调优中用户感知最强烈的两个模块：
| 评估维度 | AWB | HDR融合 |
|---|---|---|
| 用户感知度 | 极高——色偏是人眼最敏感的图像缺陷 | 极高——高光过曝/暗部死黑直接影响可用性 |
| 算法复杂度 | 中等——色温估计+增益计算 | 高——多帧对齐+权重融合+色调映射 |
| 调优难度 | 高——多光源、混合光源场景难以覆盖 | 极高——运动场景、闪烁光源、噪声平衡 |
| 对硬件要求 | 低——纯算法，无需额外硬件 | 高——需要多帧缓存和高速DDR带宽 |
| 行业趋势 | AI AWB（基于CNN的色温估计） | 计算摄影（多帧HDR+超分融合） |