VIP20

本课程属于：013-MoveIt 机器人系统 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

MoveIt传感器数据融合与实战

📚 共计 30 章节

课程导论：MoveIt与传感器融合概述

课程目标与前置知识 · 开发环境与工具链介绍

ROS基础回顾

话题与服务通信 · TF坐标变换 · URDF模型加载 · Launch文件编写

MoveIt架构解析

MoveIt核心组件 · 规划场景 · 运动学插件 · 碰撞检测机制

架构规划场景

传感器数据基础

激光雷达点云 · RGB-D深度图 · IMU数据 · 传感器消息类型

点云深度图IMU

点云预处理

体素滤波降采样 · 直通滤波 · 统计滤波去离群点 · 法向量估计

深度图处理

深度图转点云 · 深度图滤波与修复 · 与RGB图像对齐

深度图对齐

传感器标定

相机内参标定 · 手眼标定 · 激光雷达与相机联合标定

多传感器坐标系管理 · 静态/动态TF · TF可视化与调试

规划场景更新

Collision Object · Attached Object · Octomap环境感知更新

规划场景Octomap

Octomap原理 · 基于点云生成 · 更新策略 · 可视化

碰撞检测进阶

FCL碰撞检测库 · 自碰撞/环境碰撞 · 碰撞矩阵配置

感知管道搭建

Perception Pipeline概念 · 点云到Octomap管道 · 实时感知更新

抓取规划基础

抓取位姿计算 · GraspGenerator插件 · 候选筛选 · 场景仿真

抓取规划实战

基于点云抓取位姿估计 · 吸盘与夹爪适配 · 成功率优化

运动规划约束

路径约束 · 位置/方向约束 · 关节空间约束

动态障碍物检测 · 实时避障重规划 · 速度/加速度约束 · 安全距离

多传感器融合定位

EKF融合IMU与里程计 · 点云配准(ICP/NICP) · 全局/局部定位

融合定位EKF

视觉伺服控制

Visual Servoing原理 · IBVS · PBVS

视觉伺服IBVS

力控与柔顺控制

力传感器数据读取 · 力控接口 · 柔顺运动控制

MoveIt与Gazebo联合仿真

Gazebo传感器仿真 · MoveIt驱动模型 · 仿真感知闭环

真实机器人部署

硬件接口配置 · 真实传感器驱动 · MoveIt通信 · 安全机制

点云处理加速(PCL GPU) · 规划时间优化 · 感知/规划频率匹配

调试与可视化

Rviz调试技巧 · 规划场景可视化 · 传感器数据可视化 · 日志分析

传感器数据丢失 · 规划失败重试 · 碰撞异常恢复 · 看门狗

案例一：桌面抓取系统

基于RGB-D相机的物体识别与抓取

案例二：移动操作臂

激光雷达导航与机械臂协同作业

案例移动操作

案例三：装配作业

基于力控的精密装配

案例四：动态环境避障

人机协作场景下的实时避障

传感器融合关键点回顾 · 常见陷阱与最佳实践 · 进阶学习路径

ROS命令速查 · MoveIt API参考 · 传感器驱动安装 · FAQ