📚 课程目录第3章图像传感器原理

3. 图像传感器原理

图像传感器是车载Camera ISP链路的最前端，它把镜头汇聚的光子转换为电信号，再经模拟前端与ADC变成数字像素。ISP后续的降噪、HDR合成、色彩还原、去雾与目标检测，都建立在传感器输出的原始数据质量之上。理解CMOS与CCD的差异、曝光与增益的物理含义、读出噪声与动态范围的来源，是进行车载摄像头选型与ISP调参的基础。

一、CMOS与CCD的工作原理差异

CCD（Charge-Coupled Device）在像素内完成光电转换后，把电荷逐行转移到同一读出节点，再统一转换为电压。其优势是读出路径一致、噪声低、填充因子高，早期在广播与科学成像中占主导。但CCD需要多路时钟与较高驱动电压，功耗大、难以集成外围电路，且逐行转移在强光下易出现Smear（拖影）。

CMOS（Complementary Metal-Oxide-Semiconductor）则在每个像素内集成源极跟随器与行选开关，电荷在像素内直接转为电压，再通过列总线并行读出。CMOS可采用标准逻辑工艺，易与ADC、时序控制、ISP接口集成，支持ROI、开窗、Binning与高帧率，功耗低、成本可控。车载场景几乎全部采用CMOS，原因正是其高集成度、宽温工作能力与多路输出能力。

关键结论：CCD是“电荷转移、集中读出”，CMOS是“像素内转换、列并行读出”。车载选型优先CMOS，但需关注其像素级噪声与列固定模式噪声（FPN）。

二、曝光、增益与读出噪声

曝光量由光照强度、光圈与积分时间共同决定。在车载相机中，光圈通常固定，曝光控制主要依靠调节曝光时间与模拟/数字增益。曝光时间决定光子积分时长，增益则对像素输出电压进行放大。增益分为模拟增益与数字增益：模拟增益在ADC前放大，可改善小信号的信噪比；数字增益在ADC后放大，会同时放大量化噪声，对SNR无实质提升。

读出噪声是像素信号读出过程中引入的随机噪声，主要包括复位噪声（kTC噪声）、源极跟随器热噪声与闪烁噪声、列ADC量化噪声等。读出噪声决定了传感器的暗部极限，通常以电子数（e-）表示。读出噪声越低，暗光下可分辨的信号越小，夜视能力越强。

典型车载CMOS参数示例：
像素尺寸：3.0 μm
满阱容量：约 8000 e-
读出噪声：约 2.5 e-
模拟增益范围：1x ~ 16x
数字增益范围：1x ~ 8x
ADC位宽：12 bit
最大信噪比：约 39 dB
动态范围（单帧）：约 70 dB
HDR模式（3帧合成）：约 120 dB

信噪比（SNR）与动态范围（DR）是衡量传感器成像能力的两个核心指标。SNR反映信号与噪声的比值，决定图像“干净”程度；DR反映最亮与最暗可分辨信号的比值，决定同一画面中能否同时看清隧道口与隧道内。单帧DR受满阱容量与读出噪声限制，车载场景常通过多帧曝光合成、DCG（双转换增益）或LOFIC（横向溢出积分电容）实现HDR。

三、动态范围与HDR实现路径

动态范围的计算可简化为：DR = 20 × log10(满阱容量 / 读出噪声)。要提升DR，要么提高满阱容量，要么降低读出噪声。车载前视与环视相机常面临隧道出入口、对向远光灯、地库出入口等极端场景，单帧DR往往不足，需要HDR合成。

多帧HDR：同一帧内依次输出长、中、短曝光，ISP按运动区域进行合成，成本低但运动物体易产生鬼影。
DCG：像素内提供高、低两个转换增益，高增益读暗部、低增益读亮部，单帧输出两路数据，运动伪影小。
LOFIC：在像素内增加溢出电容，强光下电荷溢出到电容中，等效提升满阱容量，适合高动态车载场景。
分割曝光/双转换：同一曝光内分区读出，兼顾暗部与亮部，但对像素设计提出更高要求。

ISP调参提示：HDR合成前需确认传感器输出的曝光比与增益比是否与ISP配置一致，否则会出现亮度跳变或色彩偏移。

四、车载传感器选型要点与场景案例

车载传感器选型不能只看分辨率，需要综合像素尺寸、动态范围、低照度性能、温度范围、接口类型、功能安全与成本。前视ADAS通常要求高动态与低读出噪声，环视更关注成本与广角一致性，舱内DMS则关注近红外响应与全局快门。

应用场景	推荐类型	关键指标	典型分辨率
前视ADAS	CMOS 卷帘/全局	DR≥120dB、读出噪声≤3e-	8MP
环视/泊车	CMOS 卷帘	成本、广角一致性、LFM抑制	2~3MP
舱内DMS	CMOS 全局快门	NIR响应、无运动畸变	2~5MP
电子后视镜	CMOS 全局快门	低延迟、高DR、LED闪烁抑制	2~3MP
侧后视盲区	CMOS 卷帘	宽温、防水、低成本	1~2MP

以隧道出入口场景为例：车辆从明亮环境驶入隧道，画面亮度在数百毫秒内骤降。若传感器单帧DR仅70dB，隧道内细节会丢失；采用3帧HDR后，短曝光保留隧道口天空，长曝光保留隧道内车辆与车道线，ISP再通过局部色调映射输出可视图像。若读出噪声偏高，隧道内暗部会出现明显噪点，影响车道线检测。

五、常见误区与复盘

误区一：只看分辨率，不看像素尺寸与读出噪声。高像素小像素在暗光下SNR更差。误区二：把数字增益当模拟增益用，导致暗部噪声被同步放大。误区三：HDR曝光比设置过大，合成后中间调出现断层。误区四：忽略温度对暗电流的影响，高温下暗部噪点显著增加。

复盘方法：在实验室用标准灯箱与灰阶卡测量SNR、DR与暗电流，再在实车隧道、地库、夜间道路场景采集RAW图，对比ISP输出。若暗部噪声大，优先检查模拟增益与读出噪声；若高光溢出，检查满阱容量与HDR曝光策略；若色彩偏移，检查黑电平与镜头阴影校正。只有把传感器物理特性与ISP处理链路对齐，才能获得稳定可靠的车载图像。