📚 课程目录第2章 RK ISP管线总体架构

2. RK ISP 管线总体架构：从 RAW 到 YUV 的完整路径

RK 平台的 ISP（图像信号处理器）是一条高度可配置的硬件管线，其核心任务是将 Sensor 输出的 RAW 数据，经过一系列降噪、校正、色彩处理与增强模块，最终转换为高质量的 YUV 图像。理解这条管线的总体架构，是进行参数调优与效果验证的基础。

下图展示了 RK ISP 管线从 RAW 输入到 YUV 输出的核心模块与数据流向。每个模块都承担着特定的图像处理任务，且模块间的顺序对最终图像质量有决定性影响。

每个 ISP 模块都有其特定的数学算法与硬件实现。下表总结了各模块在管线中的位置、主要功能以及调优关注点。

模块	全称	数据域	核心功能	调优关键参数
DPCC	Defect Pixel Cluster Correction	RAW	检测并校正坏点（亮点、暗点、簇状坏点）	检测阈值、校正强度、坏点表
BLC	Black Level Correction	RAW	减去光学黑电平，恢复像素真实响应	黑电平偏移量、通道独立偏移
LSC	Lens Shading Correction	RAW	补偿镜头边缘亮度衰减与颜色偏差	增益网格、色差校正系数
AWB	Auto White Balance	RAW	估计光源色温，调整 R/G/B 增益使白色还原	色温区间、增益上限、统计窗口
CCM	Color Correction Matrix	RGB	通过 3x3 矩阵校正传感器色彩串扰，还原真实色彩	矩阵系数、饱和度控制
Gamma	Gamma Correction	RGB	非线性映射，校正显示设备亮度响应，提升暗部细节	Gamma 曲线、查找表
GIC	Gradient Image Correction	RGB	抑制色彩渐变区域的伪色与噪声	梯度阈值、滤波强度
3DNR	3D Noise Reduction	YUV	利用多帧时域信息进行降噪，保留边缘	时域滤波强度、运动检测阈值
2DNR	2D Noise Reduction	YUV	空域降噪，去除残留噪声与色度噪声	空域滤波强度、边缘保护阈值
Sharp	Sharpness Enhancement	YUV	提升图像边缘锐度与纹理细节	锐化强度、过冲抑制、噪声门限

数据在 ISP 管线中的流动遵循严格的顺序。理解每个阶段的数据形态变化，有助于定位图像质量问题。

RAW 域预处理：Sensor 输出的 Bayer RAW 数据首先进入 DPCC 进行坏点校正，然后经过 BLC 去除黑电平偏移，最后通过 LSC 补偿镜头阴影。此阶段输出仍是 RAW 格式，但数据已更干净、均匀。
白平衡与色彩校正：校正后的 RAW 数据进入 AWB 模块，统计并调整 R/G/B 通道增益以匹配光源色温。随后经过 CCM 进行色彩空间转换与串扰校正，此时数据已从 RAW 转换为线性 RGB。
Gamma 与色彩增强：线性 RGB 数据通过 Gamma 模块进行非线性映射，以适配人眼视觉特性。接着 GIC 模块对色彩渐变区域进行平滑处理，减少伪色。
降噪与锐化：处理后的 RGB 数据转换为 YUV 格式。在 YUV 域，3DNR 利用多帧信息进行时域降噪，2DNR 进行空域降噪，最后 Sharp 模块增强边缘细节，输出最终的 YUV 图像。

  调优提示： 在调试过程中，建议按照数据流顺序从前向后逐步优化。先确保 RAW 域（DPCC/BLC/LSC）输出干净、均匀，再调整色彩（AWB/CCM），最后处理降噪与锐化。跳过前级直接调后级，往往会导致效果反复且难以收敛。

ISP 管线中的模块并非独立工作，前级模块的配置会直接影响后级模块的输入质量。下表总结了常见的依赖关系与调优建议。

常见误区： 不要试图一次性调整所有模块参数。建议采用“分阶段调优法”：先固定后级模块为默认值，从前级开始逐级优化，每级达到预期效果后再解锁下一级。这样可以避免参数间的相互干扰，提高调优效率。