2. onsemi图像传感器选型与多摄配置
多摄像头同步与标定系统的性能上限,往往在选型阶段就已经被决定。传感器型号决定了接口带宽、触发方式、曝光控制精度和同步能力,而这些因素直接约束后续标定与融合算法的可实现性。本节围绕onsemi(安森美)主流车规与工业级图像传感器,梳理型号差异、接口类型、分辨率与帧率约束,并给出多摄组合的设计原则。
一、onsemi主流传感器型号与定位
onsemi的图像传感器产品线大致可分为三类:面向ADAS与自动驾驶的车规级前视/环视传感器、面向机器视觉的工业级全局快门传感器,以及面向舱内监控与DMS的RGB-IR传感器。
- AR0233AT:1/2.5英寸、230万像素、全局快门,支持LED闪烁抑制(LFM),常用于车规前视与机器视觉。输出接口为MIPI CSI-2,最高约60fps@1080p。
- AR0820AT:1/1.7英寸、830万像素、滚动快门,支持LFM与HDR,是当前主流的高分辨率前视传感器,MIPI CSI-2输出,30fps@3840×2160。
- AR0144AT:1/4英寸、100万像素、全局快门,体积小、功耗低,适合环视与短距感知,60fps@1280×800。
- AR0234CS:230万像素、全局快门,工业级版本,常用于工业相机与机器人视觉,最高120fps@1080p。
- AR0521:500万像素、滚动快门,工业级,常用于安防与工业检测,60fps@2592×1944。
- AR0234AT:车规级全局快门版本,支持外部触发与多摄同步,适合需要严格时间对齐的多摄系统。
选型时首先要区分全局快门与滚动快门。全局快门所有像素同时曝光,适合运动场景与多摄同步;滚动快门逐行曝光,成本低、分辨率高,但在高速运动或脉冲光源下会产生果冻效应与条带。车规前视常用滚动快门配合LFM,而环视与DMS更倾向全局快门。
二、接口类型与带宽约束
onsemi传感器主要提供三种输出接口:MIPI CSI-2、LVDS和并行接口。车规与工业级主流为MIPI CSI-2,部分老型号使用LVDS或HiSPi。
MIPI CSI-2的带宽由lane数与每lane速率决定。以AR0820AT为例,4 lane、每lane 1.5Gbps,总带宽约6Gbps。3840×2160@30fps、12bit RAW,单帧数据量约为3840×2160×12/8≈12.4MB,30fps需要约373MB/s,即约3Gbps,加上消隐与协议开销,4 lane配置留有合理余量。若提升到60fps,则需约6Gbps,接近4 lane上限,此时需考虑8 lane或降低位深。
多摄系统中,接口带宽是聚合瓶颈。例如4路AR0820AT同时输出30fps,总带宽约12Gbps,需要SoC具备足够的MIPI CSI-2输入端口与D-PHY/C-PHY通道。若SoC只有2个4 lane端口,则必须通过聚合芯片或降低帧率/分辨率来适配。
三、分辨率与帧率约束
分辨率与帧率并非独立参数,它们共同受限于传感器内部读出速度、接口带宽和曝光时间。以AR0234CS为例,全分辨率1920×1200@120fps时,单帧数据量约1920×1200×10/8≈2.88MB,120fps需要约345MB/s。若降到60fps,则带宽减半,可换取更长曝光时间或更低功耗。
在多摄同步场景中,帧率还受触发同步精度影响。若多路传感器共用同一外部触发信号,帧率由触发源决定,传感器内部帧率需设置为从模式。此时曝光时间必须小于帧周期减去读出时间,否则会出现帧重叠或丢帧。例如帧率30fps,帧周期33.3ms,AR0820AT读出时间约15ms,则最大曝光时间约18ms。若环境光照不足需要更长曝光,就必须降低帧率。
此外,HDR模式会进一步压缩可用帧率。以3曝光HDR为例,一帧内包含长、中、短三次曝光,总读出时间约为单次曝光的3倍,实际帧率可能降至单曝光的1/3。多摄系统中若部分相机开启HDR,需单独核算其时间预算,避免拖累整个同步组。
四、多摄组合设计原则
多摄组合不是简单堆叠相机,而是围绕同步组、视场互补和带宽预算三个维度设计。
- 同步组划分:需要严格时间对齐的相机(如前视+侧视用于BEV融合)应归入同一触发组,共用同一触发源。DMS与OMS若仅需松同步,可独立分组,降低触发布线复杂度。
- 视场互补:前视用高分辨率AR0820AT覆盖远距,环视用AR0144AT覆盖近距广角,DMS用RGB-IR传感器覆盖舱内。不同型号的快门类型与曝光策略不同,需在标定阶段分别处理。
- 带宽预算:先确定SoC可用CSI端口与总带宽,再分配各相机分辨率与帧率。例如总带宽12Gbps,可配置为2路AR0820AT@30fps + 4路AR0144AT@60fps,剩余带宽留给DMS。
- 触发与时钟一致性:同一同步组内所有传感器应共用同一参考时钟,避免因时钟漂移导致帧相位缓慢偏移。若无法共用时钟,需定期通过触发信号重同步。
- 曝光策略统一:同一同步组内若曝光时间差异过大,会导致运动模糊程度不一致,影响融合。建议同组内曝光时间差异控制在20%以内,或通过分组曝光补偿。
五、选型检查清单
在确定多摄方案前,建议逐项核对以下内容,避免后期返工:
| 检查项 | 判断依据 | 常见问题 |
|---|---|---|
| 快门类型 | 运动场景选全局快门,静态高分辨率选滚动快门 | 滚动快门在脉冲光源下出现条带 |
| 接口与lane数 | 单路数据率 ≤ 接口带宽×0.8 | lane数不足导致帧率不达标 |
| 聚合带宽 | 多路总带宽 ≤ SoC CSI总带宽 | 忽略消隐与协议开销,实际带宽超限 |
| 触发同步 | 同组共用触发源与参考时钟 | 时钟不同源导致帧相位漂移 |
| 曝光预算 | 曝光时间 < 帧周期 − 读出时间 | HDR模式下帧率骤降 |
| LFM能力 | 车规场景需支持LED闪烁抑制 | 交通灯识别失效 |
实际工程中,选型往往需要在分辨率、帧率、带宽和成本之间折中。一个可复用的方法是:先确定同步组划分与各组的帧率目标,再反推单路数据率与聚合带宽,最后在满足带宽的型号中挑选分辨率与快门类型匹配的传感器。这样可以在设计早期就暴露带宽瓶颈,避免硬件定型后才发现无法同步或丢帧。