2. RK平台Camera子系统架构
在RK平台进行Sensor驱动开发，首先需要理解Camera子系统的整体架构。本章将深入剖析RK平台Camera系统的三大核心支柱：标准的V4L2视频驱动框架、专为图像质量优化的RKISP与RKAIQ模块，以及DVP与MIPI两种主流物理接口的差异。掌握这些知识是后续进行驱动移植、上电时序调试和图像质量调优的基础。
2.1 Camera子系统整体架构
RK平台的Camera子系统采用分层设计，从上到下依次为：应用层、框架层、内核驱动层和硬件层。这种分层架构保证了代码的可移植性和模块化。
架构核心思想： 上层应用通过标准的V4L2接口与内核驱动通信，无需关心底层硬件细节。RKISP和RKAIQ作为硬件抽象层，将复杂的ISP处理逻辑封装起来，向上提供统一的控制接口。
2.2 V4L2框架详解
Video for Linux Two (V4L2) 是Linux内核中视频设备驱动的标准框架。在RK平台上，它作为Camera子系统与用户空间交互的核心接口。
2.2.1 V4L2核心概念
- Video Device Node： 通常为
/dev/videoX，用于视频数据流和基本控制。 - Sub-device： 代表一个独立的硬件单元，如Sensor、ISP、MIPI D-PHY等。通过
/dev/v4l-subdevX访问。 - Media Controller： 用于描述硬件内部的数据流拓扑结构，通过
/dev/mediaX控制。 - Buffer Management： 使用
VIDIOC_REQBUFS、VIDIOC_QBUF、VIDIOC_DQBUF等ioctl进行内存管理。
2.2.2 RK平台V4L2驱动栈
在RK平台上，一个典型的Camera驱动栈包含以下层次：
- Sensor 驱动： 实现
v4l2_subdev_ops，负责Sensor的初始化、配置、流控和上电时序。 - MIPI D-PHY / CIO 驱动： 负责物理层信号转换和同步。
- RKISP 驱动： 作为主控，管理整个ISP管线，包括输入格式、裁剪、缩放、统计信息收集等。
- Video Node 驱动： 提供
/dev/videoX节点，用于输出最终的图像数据。
开发要点： Sensor驱动开发者主要关注
v4l2_subdev_ops 中的 s_power、s_stream、enum_mbus_code、s_fmt 等回调函数的实现。
2.3 RKISP与RKAIQ模块
RKISP (Rockchip Image Signal Processor) 是RK平台自研的ISP硬件IP，而RKAIQ (Rockchip Auto Image Quality) 是其配套的3A算法库。两者紧密结合，共同完成高质量的图像处理。
2.3.1 RKISP硬件管线
RKISP内部包含多个硬件模块，形成一条完整的图像处理管线：
| 模块 | 功能描述 | V4L2 Subdev 名称 |
|---|---|---|
| ISP Main | 主处理单元，负责Bayer处理、去马赛克、颜色校正等 | rkisp-isp-subdev |
| ISP Statistics | 收集图像统计信息（AE/AWB/AF）供3A算法使用 | rkisp-statistics-subdev |
| ISP Input | 接收来自Sensor的原始数据，进行格式转换 | rkisp-input-params |
| ISP Parameters | 接收用户空间下发的ISP配置参数 | rkisp-isp-params |
| DMA Engine | 负责图像数据的DMA传输，输出到内存 | rkisp-dma-engine |
2.3.2 RKAIQ 3A算法
RKAIQ运行在用户空间，通过V4L2的统计信息和参数接口与RKISP驱动交互。其核心算法包括：
- 自动曝光 (AE)： 根据统计信息调整Sensor的曝光时间和增益。
- 自动白平衡 (AWB)： 根据统计信息调整颜色增益，还原真实色彩。
- 自动对焦 (AF)： 根据统计信息驱动VCM马达，实现清晰对焦。
注意事项： RKAIQ的调优通常由IQ工程师完成，驱动开发者需要确保Sensor驱动能够正确上报
v4l2_ctrl（如曝光、增益、帧率等），并且ISP驱动能够正确传递统计信息给RKAIQ。
2.4 DVP与MIPI接口对比
DVP (Digital Video Port) 和 MIPI (Mobile Industry Processor Interface) 是两种最常见的Camera Sensor接口。在RK平台上，两者在物理层、协议层和驱动实现上存在显著差异。
2.4.1 接口特性对比
| 特性 | DVP 接口 | MIPI CSI-2 接口 |
|---|---|---|
| 信号线数量 | 多（约10-20根）：PCLK, HSYNC, VSYNC, DATA[0:N] | 少（2-4对差分线）：CLKP/N, DATAP/N[0:N] |
| 传输方式 | 并行传输，所有数据位同时传输 | 串行传输，高速差分信号 |
| 时钟频率 | 较低（通常 < 100MHz），受限于并行信号同步 | 很高（可达 1GHz+），使用DDR技术 |
| 最大带宽 | 较低（受限于时钟和位宽，如 100MHz x 8bit = 800Mbps） | 高（每通道可达 1.5Gbps，多通道聚合） |
| 抗干扰能力 | 弱，并行线间易产生串扰 | 强，差分信号共模抑制 |
| PCB Layout | 要求等长布线，难度较大 | 要求差分阻抗控制，等长布线 |
| 协议复杂度 | 简单，直接传输像素数据 | 复杂，包含包结构、ECC、CRC、长包/短包 |
| RK平台支持 | 通过 CIO (Camera IO) 模块接入 | 通过 MIPI D-PHY 接入 |
2.4.2 驱动实现差异
在驱动开发中，DVP和MIPI接口的主要差异体现在以下几个方面：
- 设备树配置： DVP需要配置PCLK、HSYNC、VSYNC的GPIO和时钟；MIPI需要配置D-PHY的lane数、速率和时钟。
- 上电时序： DVP对电源和时钟的时序要求相对宽松；MIPI对MCLK和MIPI时钟的稳定时间要求更严格。
- 初始化序列： DVP通常通过I2C配置寄存器后直接输出；MIPI需要先初始化D-PHY，建立LP/HS模式切换。
- 帧同步： DVP使用HSYNC和VSYNC硬件信号；MIPI使用帧起始包（FS）和帧结束包（FE）进行同步。
选型建议： 对于高分辨率（如 8M 以上）、高帧率（如 60fps 以上）的应用，优先选择MIPI接口。对于低分辨率、低成本的入门级应用，DVP接口仍然是一个成熟的选择。
2.5 本章小结
本章详细介绍了RK平台Camera子系统的三大核心组成部分：
- V4L2框架 提供了标准化的驱动接口，是驱动开发的基础。
- RKISP与RKAIQ 构成了图像质量的核心处理与调优闭环。
- DVP与MIPI接口 在物理特性和驱动实现上各有优劣，需要根据项目需求进行选择。