1. 图像采集基础：摄像头工作原理、传感器类型与帧率概念
大家好，我是你们的老朋友。今天咱们聊聊图像采集最底层的那些事儿。说实话，很多做嵌入式视觉的工程师，上来就调驱动、配寄存器，结果图像出来偏色、拖影、帧率上不去，最后才发现是传感器选型就出了问题。嗯，这坑我踩过，所以今天咱们把基础打扎实。
1.1 摄像头是怎么“看见”世界的？
你想想看，摄像头本质上就是个“电子眼”。它把现实世界的光信号，转成电信号，再转成数字信号。整个过程分三步：
- 光电转换：镜头把光线聚焦到传感器上，每个像素点把光强转成电压。
- 模拟处理：这些微弱的电压信号经过放大、降噪，变成可量化的模拟信号。
- 模数转换（ADC）：模拟信号被量化成数字值，也就是我们常说的RAW数据。
我个人习惯把摄像头比作“人眼”：镜头是角膜，传感器是视网膜，ISP（图像信号处理器）就是大脑。没有大脑，眼睛看到的东西也是乱的。
核心要点：图像采集的瓶颈往往不在镜头，而在传感器和传输接口。我见过有人用2000万像素的传感器配了个USB 2.0接口，结果帧率只有5fps——这就是典型的“木桶效应”。
1.2 传感器类型：CCD vs CMOS
这是老生常谈的话题了，但每次面试我都会问。说白了，CCD和CMOS的底层区别在于读出方式。
| 特性 | CCD | CMOS |
|---|---|---|
| 读出方式 | 逐行转移，统一输出 | 每个像素独立读出 |
| 噪声水平 | 低（全局快门优势） | 较高（卷帘快门易产生果冻效应） |
| 功耗 | 高（需要多路电压） | 低（单电源即可） |
| 速度 | 慢（串行读出） | 快（并行读出） |
| 成本 | 高 | 低 |
| 典型应用 | 工业检测、天文摄影 | 手机、安防、车载 |
我在项目中遇到过一件事：用CMOS传感器拍高速旋转的齿轮，结果图像里的齿轮是弯的——这就是卷帘快门导致的果冻效应。后来换成全局快门的CCD，问题才解决。所以，选型时一定要搞清楚你的应用场景。
我的建议：如果做静态场景或低速运动，CMOS完全够用，性价比高。如果拍高速运动（比如流水线上的产品），优先考虑全局快门CMOS或CCD。
1.3 分辨率与帧率：一对“冤家”
分辨率决定“清不清楚”，帧率决定“流不流畅”。但这两者天生就是矛盾的——分辨率越高，单帧数据量越大，帧率自然就上不去。
为什么会这样？我们来算一笔账：
- 一张1080p（1920×1080）的图像，每帧数据量 = 1920 × 1080 × 3字节（RGB）= 约6.2MB
- 如果帧率是30fps，那么每秒数据量 = 6.2MB × 30 = 186MB/s
- USB 3.0的理论带宽是5Gbps（约625MB/s），但实际可用只有400MB/s左右
你看，光传输就快撑不住了。更别说还要做预处理、存储、显示。所以，实际项目中，我们往往需要在分辨率和帧率之间做权衡。
避坑指南：我曾经在一个项目中，客户要求“4K分辨率+60fps”，结果选了个便宜的MIPI接口传感器。调试时才发现MIPI只有4 lane，带宽根本不够。最后只能降到30fps，或者用YUV422格式压缩数据量。所以，选型前一定要算带宽。
1.4 知识体系总览
下面这张图是我自己画的，把本章的核心逻辑串起来了。你一看就明白：
1.5 实际项目中的选型思路
说了这么多理论，咱们来点实际的。假设你现在要做一个“智能门禁”项目，要求：
- 白天晚上都能看清人脸
- 帧率不低于15fps
- 成本控制在50元以内
你会怎么选？
我的思路是这样的：
- 传感器：选CMOS，因为成本低、功耗小。具体型号比如OV2640或GC032A。
- 分辨率：200万像素（1080p）足够，再高也没意义——门禁场景不需要4K。
- 帧率：15fps够用，但要注意低照度下的帧率会下降（因为曝光时间变长）。
- 接口：DVP或MIPI都行，但MIPI的线少，适合小型化设计。
小技巧：如果你不确定选哪个传感器，去查一下它的“量子效率”和“动态范围”。这两个参数比像素数更重要。我一般会先看datasheet里的“SNR曲线”，低于40dB的直接pass。
1.6 本章小结
嗯，今天的内容就到这里。总结一下：
- 摄像头工作的本质是“光→电→数”的转换
- CCD适合高画质、低噪声场景；CMOS适合低成本、高速度场景
- 分辨率和帧率是矛盾的，选型时要算带宽
- 实际项目中，先定场景，再定传感器，最后定接口
下一章咱们会深入聊聊“传感器驱动与寄存器配置”，到时候我会手把手教你调一个实际的CMOS传感器。今天就先消化这些基础吧。