第2章 感知技术栈概览与面试高频知识点

本章聚焦自动驾驶感知技术栈的全景视图,梳理从传感器输入到感知输出的完整链路,总结面试中最高频的技术概念与算法选型考点。掌握本章内容,你将建立系统化的感知知识框架,能够在面试中清晰阐述架构设计思路与技术选型逻辑。

感知技术栈是自动驾驶系统的“眼睛”与“大脑”,涵盖多传感器数据处理、特征提取、目标检测与分割、多目标跟踪、传感器融合等核心模块。面试官通常从“整体架构”切入,逐步深入到算法细节与工程实践。

感知技术栈全景图 传感器输入 Camera/LiDAR/Radar 特征提取 Backbone/Neck/FPN 感知算法 检测/分割/跟踪/融合 BEV感知 BEVFormer/LSS/OCC 感知输出 障碍物/FSD/轨迹 数据流方向:传感器 → 特征 → 算法 → BEV表示 → 下游输出 面试高频:各模块职责、数据流转、算法选型理由

感知技术栈核心分层

层次核心模块代表技术 / 算法面试考察重点
传感器层Camera / LiDAR / Radar / IMU时间同步、标定、触发控制传感器特性对比、失效处理
特征提取层Backbone / Neck / FPNResNet / Swin-T / FPN / BiFPN特征融合策略、计算效率
感知算法层检测 / 分割 / 跟踪 / 融合PointPillar / CenterPoint / DeepSORT / BEVFormer算法选型、精度-速度权衡
BEV感知层BEV特征构建 / OCCLSS / BEVFormer / Occupancy NetworkBEV优势、OCC与检测区别
输出应用层障碍物 / FSD / 轨迹预测ODD定义、下游规控接口输出格式、下游任务衔接

🎯 面试问答 1 · 感知模块架构

面试问题:请介绍自动驾驶感知模块的整体架构,包含哪些核心子模块?

面试官考察点:系统化思维 / 模块职责边界 / 数据流理解 / 工程视野

回答框架:分层展开 → 数据流串联 → 关键设计点 → 总结升华

示例回答:感知架构分三层:传感器层(Camera/LiDAR/Radar)完成数据采集;感知算法层包含检测、分割、跟踪、融合四大模块,输出障碍物属性与运动状态;输出层为规控提供结构化语义。核心设计在于多传感器时间同步与BEV特征统一表示。

可能追问:① BEV感知相比传统方法的优势?② 传感器失效时如何降级?③ 特征级融合与决策级融合如何选择?

避坑提醒:切忌只罗列算法名称而不讲模块间数据流转;务必提及工程落地中的延迟、资源、鲁棒性约束。

感知架构面试追问路径 感知模块架构 主问题 传感器融合策略 特征级 vs 决策级? BEV感知优势 统一视角 / 时序融合? 算法选型考量 精度 / 速度 / 部署权衡 长尾场景处理 Corner case / OOD?

🎯 面试问答 2 · 常用算法分类

面试问题:感知模块中常用的深度学习算法有哪些?请按任务分类说明。

面试官考察点:算法广度 / 任务理解深度 / 选型判断力 / 前沿追踪

回答框架:按任务分类(检测/分割/跟踪/融合)→ 每类2-3个代表算法 → 关键利弊 → 选型建议

示例回答:检测类:PointPillar(激光雷达实时检测)、CenterPoint(anchor-free高精度);分割类:RangeNet++(激光语义分割)、BEVSegFormer(统一BEV分割);跟踪类:DeepSORT(经典多目标)、MOTR(端到端);融合类:BEVFormer(特征级)、FUTR3D(query-based)。选型需权衡精度、延迟与算力。

可能追问:① Transformer相比CNN在感知中的优势?② 如何部署轻量化模型?③ 半监督/自监督在感知中的应用?

避坑提醒:避免只背模型名称;要结合场景说明“为什么选这个”,并体现你对速度-精度trade-off的认知。

🎯 面试问答 3 · 关键行业术语

面试问题:请解释几个关键的行业术语:BEV、Occupancy Network、端到端感知。

面试官考察点:概念理解深度 / 技术演进逻辑 / 对比分析能力 / 前沿视野

回答框架:每个术语独立解释 → 核心思想 → 与传统方法区别 → 适用边界

示例回答:BEV是鸟瞰视角特征表示,将多传感器特征投影至统一俯视图,解决多视角融合难题;Occupancy Network用体素网格表征场景,输出每个体素的占用/语义状态,能处理任意形状物体;端到端感知从传感器原始数据直接输出目标结果,规避手工特征与Pipeline误差累积。

可能追问:① OCC相比3D检测的优势与局限?② 端到端感知的可解释性如何保证?③ BEVFormer中cross-attention的计算开销?

避坑提醒:不要只背定义;要讲清楚“为什么需要这个技术”,以及它解决了传统方法的什么痛点。

📁 项目案例 · 城市NOA多传感器融合感知系统

项目名称城市NOA多传感器融合感知系统
业务背景L2+城市辅助驾驶,需在复杂城市场景(路口、施工区、雨雾)实现稳定感知,替代高精地图部分能力
规模指标10万公里测试数据 / 20+城市路测 / 感知精度>95% / 单帧延迟<80ms / ODD覆盖>98%
技术栈Camera+LiDAR+Radar / BEVFormer / Center