VIP20
本课程属于：057-ROS2机器人AI与边缘感知 嵌入式边缘AI与TinyML · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

7. ROS2多传感器融合：摄像头、雷达、IMU和里程计数据同步

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
多传感器融合在ROS2中的重要性 · 学习目标 · 课程整体框架与前置知识要求
课程导入ROS2
02
ROS2基础回顾
节点 · 话题 · 服务
ROS2基础回顾
03
传感器数据接口与消息类型
sensor_msgs/Image · sensor_msgs/PointC… · sensor_msgs/Imu
传感器数据接口消息类型
04
时间同步基础
ROS2中的时间概念（ROS时间 · 系统时间） · 时间戳的作用与同步的必要性
时间同步基础ROS2
05
消息过滤器（message_filters）
TimeSynchronizer · ApproximateTimeSyn… · Cache的使用方法与适用场景
messagefilters
06
精确时间同步与近似时间同步
原理 · 参数设置（slop · queue size）
精确时间同步近似时间同步
07
摄像头数据获取与处理
使用cv_bridge将ROS图像转… · 图像去畸变与特征提取基础
摄像头数据获取处理
08
激光雷达数据获取与处理
PointCloud2的读取 · 滤波（体素滤波 · 直通滤波）
激光雷达数据获取处理
09
IMU数据获取与处理
IMU消息解析 · 加速度与角速度的滤波（低通 · 互补滤波）
IMU数据获取
10
里程计数据获取与处理
轮式里程计消息解析 · 航迹推算（Dead Reckonin…
里程计数据获取处理
11
传感器坐标系标定
相机-雷达 · 相机-IMU · 雷达-IMU的外参标定方法（如Aut…
传感器坐标系标定相机
12
时间同步实战
编写一个ROS2节点 · 使用message_filters同… · 并可视化同步结果
时间同步实战ROS2
13
多传感器融合架构设计
松耦合与紧耦合融合的区别 · 集中式与分布式架构 · ROS2中的节点设计模式
多传感器融合架构…松耦合
14
数据预处理与特征级融合
图像特征（ORB · SIFT）与点云特征（FPFH）的提…
数据预处理特征级融合
15
基于卡尔曼滤波的融合
标准卡尔曼滤波 · 扩展卡尔曼滤波（EKF）在IMU+里…
基于卡尔曼滤波的…标准卡尔曼滤波
16
基于粒子滤波的融合
粒子滤波原理 · 在定位与融合中的应用（如AMCL）
基于粒子滤波的融…粒子滤波原理
17
视觉-惯性融合（VIO）
视觉惯性里程计原理 · 常用算法（如VINS-Mono · ORB-SLAM3）与ROS2集成
VIO视觉
18
激光-惯性融合（LIO）
LIO-SAM · FAST-LIO等算法原理与ROS2…
LIO激光
19
相机-雷达融合
目标检测与测距 · 点云投影到图像 · 图像语义信息辅助点云分割
相机雷达融合
20
多传感器融合中的时间延迟补偿
时间戳对齐 · 插值方法 · 动态延迟估计与补偿策略
多传感器融合时间延迟补偿
21
ROS2中的TF树与坐标变换
TF2的使用 · 静态变换与动态变换 · 多传感器坐标系的统一
ROS2TF
22
数据录制与回放
使用ros2 bag录制多传感器数据 · 时间同步回放 · 离线调试技巧
数据录制回放
23
实战项目一
基于摄像头+激光雷达的障碍物检测与距…
实战项目一基于摄像头+激光…
24
实战项目二
基于IMU+里程计的机器人定位（EK… · 并对比单一传感器效果
实战项目二IMU+
25
实战项目三
视觉-惯性-激光雷达三传感器融合的S…
实战项目三视觉
26
常见问题与调试技巧
时间戳不同步 · 消息丢失 · 坐标系错乱
常见问题调试技巧
27
性能优化
多传感器数据处理的实时性优化 · 使用GPU加速 · 多线程与进程内通信（intra-pr…
性能优化多传感器数据处理…
28
ROS2中的硬件接口与驱动
摄像头驱动（usb_cam） · 雷达驱动（velodyne · livox）
ROS2硬件接口
29
多传感器融合的评估方法
精度评估（ATE · RPE） · 时间同步质量评估
多传感器融合的评…ATE
30
课程总结与进阶方向
多传感器融合在自动驾驶 · 机器人导航中的前沿应用 · 推荐学习资源与开源项目
课程总结进阶方向