2. RK ISP硬件架构

做 ISP 调优，如果不懂硬件架构，就像开车不看仪表盘——能跑，但心里没底。RK 的 ISP 模块集成在 SoC 内部，不同型号（如 RK3588、RK3568）的 ISP 版本略有差异，但核心框架是相通的。今天我就带你拆开这个黑盒子，看看里面到底有哪些东西。

ISP 内部模块一览

RK ISP 本质上是一条图像处理流水线。每个模块负责一个环节，数据按顺序流过。我个人习惯把模块分成三大类：前端处理、核心处理、后端输出。

数据流走向：从 Sensor 到显示

数据是怎么走的？我画了一张图，你看完就明白了。

数据从 Sensor 进来，先经过前端校正（坏点、黑电平、镜头阴影），然后去马赛克变成 RGB，接着做白平衡、曝光、对焦的统计计算，再经过颜色校正和伽马调整，最后锐化降噪后输出 YUV。嗯，这里要注意：AWB/AE/AF 是统计模块，它们不直接修改像素，而是计算参数反馈给前端。

关键性能指标

评估 ISP 硬件好不好，不能只看参数表。我列几个真正影响调优体验的指标：

• 最大分辨率与帧率：比如 RK3588 支持 48MP @ 30fps，RK3568 只到 24MP @ 30fps。你想想看，如果项目要求 4K 60fps，选错芯片就麻烦了。
• 处理位深：RK ISP 内部通常是 12-bit 或 14-bit 处理。位深越高，暗部细节保留越好。我曾经在低照度项目里吃过亏——用 10-bit 模式，暗部全是量化噪声。
• 3A 收敛速度：AWB/AE/AF 从场景变化到稳定输出的帧数。好的 ISP 能在 5-10 帧内收敛，差的可能要 30 帧以上。
• 动态范围：支持 HDR 合成（如 2 帧 / 3 帧 HDR）以及合成后的位宽。RK 的 HDR 方案在 120dB 场景下表现不错。
• MIPI 接口带宽：决定能接入多少路 Sensor。RK3588 有 4 路 MIPI CSI，每路 4-lane，总带宽足够接 4 个 4K 摄像头。

ISP 与 CPU/GPU 的协作

ISP 不是独立工作的。它通过 VICAP（Video Capture）模块从 Sensor 获取数据，处理完后通过 DDR 写入内存，然后 CPU 或 GPU 可以读取做进一步处理（比如 AI 识别、编码）。

我个人习惯把 ISP 看作一个硬件加速器——它把最重的图像处理任务（去马赛克、降噪、锐化）用硬件流水线完成，CPU 只负责控制参数和调度。这样既省电，又高效。