1. 课程导入与系统全景

在嵌入式视觉产品中，摄像头能否“拍得清、传得稳、算得快”，往往不取决于单一器件，而取决于从光学镜头到最终图像输出之间整条链路的协同。NXP i.MX 系列处理器（如 i.MX 8M Plus、i.MX 8M、i.MX 6 系列等）内置或配套了图像信号处理器（ISP）、MIPI CSI-2 接收接口、视频采集单元与显示/编码通路，构成了一个典型的“传感器—接口—ISP—内存—输出”软硬件协同系统。本课程的目标，是让学习者能够独立完成 i.MX 平台上摄像头子系统的方案选型、设备树与驱动配置、ISP 参数调试、图像质量评估与常见故障定位。

要理解这套系统，先要建立三个核心概念。第一是数据流：图像数据从 Sensor 的感光阵列读出，经 MIPI CSI-2 差分信号进入 SoC 的 CSI 接收控制器，再写入内存缓冲区，随后由 ISP 或 GPU/VPU 做处理，最终送到显示、编码或算法模块。第二是控制流：应用通过 V4L2 框架打开 /dev/videoX，用 ioctl 设置格式、申请缓冲区、启动流；驱动再通过 I2C 配置 Sensor 寄存器，通过 CSI/ISP 寄存器配置通路。第三是时钟与同步：MCLK 提供给 Sensor，Sensor 输出像素时钟与行场同步信号，CSI 接收端据此采样，任何时钟频率、极性或 lane 数不匹配都会导致无图或花屏。

下面这张图给出 i.MX 摄像头子系统的典型信号链与数据流全景。图中区分了控制路径（虚线，I2C/寄存器配置）与数据路径（实线，像素数据），并标出关键观察点：Sensor 输出、CSI 接收、内存缓冲、ISP 处理、最终输出。理解这张图，后续章节中遇到的“无图、绿屏、帧率不足、曝光异常”都能对应到具体环节。

典型应用场景决定了调试的侧重点。在智能门禁中，摄像头需要低照度下仍能输出可识别的面部图像，因此 ISP 的自动曝光、宽动态与降噪参数是重点；在工业质检中，要求图像几何失真小、色彩一致，ISP 的镜头阴影校正与白平衡稳定性更关键；在车载环视中，多路摄像头需同步采集并低延迟拼接，CSI 带宽、DMA 缓冲数量与同步信号是核心；在视频会议终端中，则更关注编码前的图像清晰度与帧率稳定性。同一套 i.MX 平台，面对不同场景，ISP 调参策略和驱动配置会有明显差异。

从工程实践角度，本课程会反复使用一条“最小可复现链路”作为教学示例：以 i.MX 8M Plus + OV5640（MIPI 接口，2 lane，1080p@30fps）为例，Sensor 由 24MHz MCLK 驱动，I2C 地址 0x3C，复位 GPIO 为 GPIO4_IO14。在设备树中，需要正确描述 csi、isi（图像传感器接口）、mipi_csi 与 Sensor 节点的连接关系，并配置 data-lanes = <1 2>、clock-lanes = <0>、link-frequencies 等参数。驱动加载后，用 v4l2-ctl --list-devices 确认设备节点，用 v4l2-ctl --set-fmt-video=width=1920,height=1080,pixelformat=YUYV 设置格式，再用 v4l2-ctl --stream-mmap --stream-count=10 --stream-to=frame.raw 抓取 10 帧原始数据。若抓到的文件大小恒为 0，说明数据流未启动；若大小正确但图像异常，则问题多半在 ISP 或 Sensor 寄存器配置。

本课程后续将围绕这条链路逐层展开：先讲 Sensor 与 MIPI CSI-2 的电气与协议基础，再讲 V4L2 与 media controller 的软件框架，然后深入 ISP 各处理模块的原理与调参方法，最后通过完整案例把采集、处理、显示与算法集成串起来。掌握系统全景，是后续每一章能够“对号入座”的前提。