首页
›
AI智能与边缘计算工程
›
143-PX4无人机AI与MAVLink联动
›
《PX4目标跟随项目》
VIP9
本课程属于:143-PX4无人机AI与MAVLink联动
AI智能与边缘计算工程 · 共 9 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
6. PX4目标跟随项目:目标检测、坐标转换和飞行控制
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导入
了解PX4目标跟随项目的整体目标 · 应用场景(如物流 · 巡检
课程导入
PX4
02
PX4与ROS2基础
掌握PX4飞控的基本架构 · MAVLink通信协议 · ROS2与PX4的桥接方式(如px4…
PX4
ROS2
03
开发环境搭建
配置Ubuntu · ROS2(Humble或Foxy) · PX4仿真环境(Gazebo或jMA…
开发环境搭建
Ubuntu
04
目标检测基础
学习目标检测的核心概念(边界框 · 类别 · 置信度)
目标检测基础
学习目标检测的核…
05
目标检测实战
使用预训练的YOLOv5或YOLOv… · 通过ROS2摄像头话题(如/came… · 车辆)
目标检测实战
YOLOv5
06
相机模型与标定
理解针孔相机模型 · 内参矩阵 · 畸变系数
相机模型
标定
07
图像坐标到相机坐标
学习如何将检测到的像素坐标(u · v)结合深度信息(深度相机或激光雷达… · Yc
图像坐标到相机坐…
学习如何将检测到…
08
相机坐标到机体坐标
掌握相机安装角度和位置的外参标定 · 通过旋转矩阵和平移向量将目标从相机坐…
相机坐标到机体坐…
掌握相机安装角度
09
机体坐标到世界坐标
理解机体坐标系(FRD或NED)与世… · 利用无人机姿态(四元数或欧拉角)和位…
机体坐标到世界坐…
FRD
10
坐标系转换综合
整合图像→相机→机体→世界的完整转换… · 编写ROS2节点实现实时目标位置解算 · 并验证在仿真环境中的精度
坐标系转换综合
整合图像→相机→…
11
PX4飞行控制基础
学习PX4的飞行模式(Offboar… · Position · Altitude)
PX4
飞行控制基础
12
Offboard模式控制
通过ROS2节点控制无人机进入Off… · 实现起飞 · 悬停
Offboard
模式控制
13
目标跟随控制策略
设计简单的比例控制器(P或PID) · 根据目标在世界坐标中的位置误差 · 生成无人机的速度指令(如水平速度
目标跟随控制策略
PID
14
偏航角控制
实现无人机机头始终对准目标 · 通过计算目标相对无人机的方位角 · 控制偏航角速度
偏航角控制
实现无人机机头始…
15
高度与距离保持
根据目标距离调整无人机高度或前后速度 · 保持安全距离 · 实现稳定跟随(如保持5米距离
高度
距离保持
16
仿真环境集成
在Gazebo中搭建包含目标(如移动… · 将目标检测 · 坐标转换和飞行控制节点集成
仿真环境集成
Gazebo
17
实机部署准备
了解从仿真到实机的差异 · 包括相机选型 · 机载计算机(如NVIDIA Jets…
实机部署准备
了解从仿真到实机…
18
目标检测优化
针对实时性要求 · 优化模型推理速度(TensorRT · ONNX Runtime)
目标检测优化
针对实时性要求
19
坐标转换精度提升
处理深度噪声 · 外参标定误差 · 姿态估计延迟
坐标转换精度提升
处理深度噪声
20
故障处理与安全机制
设计目标丢失 · 通信中断 · 电量低等异常情况下的安全策略(如悬停
故障处理
安全机制
21
常见问题排查
解决相机话题无数据 · 坐标转换结果跳变 · 无人机震荡
常见问题排查
解决相机话题无数…
22
实战项目
实现一个完整的目标跟随任务 · 检测并跟随一个移动目标(如遥控车) · 保持固定距离和朝向
实战项目
实现一个完整的目…
23
性能评估与调优
定义跟随精度(位置误差 · 延迟) · 稳定性(震荡幅度)等指标
性能评估
调优
24
多目标与目标切换
扩展系统以支持多目标检测 · 通过优先级或用户指令选择跟随目标 · 并实现平滑切换
多目标
目标切换
25
视觉伺服进阶
引入图像雅可比矩阵或IBVS(基于图… · 直接根据图像特征误差生成控制指令 · 减少坐标转换误差
视觉伺服进阶
IBVS
26
与PX4内部控制器结合
了解PX4的L1 · TECS等控制器 · 通过mavros设置位置/速度设定点
PX4
内部控制器结合
27
代码架构与模块化
设计可复用的ROS2包结构(如tar… · coordinate_transfo… · controller)
代码架构
模块化
28
仿真与实机一致性
分析仿真与实机在动力学 · 传感器噪声 · 延迟方面的差异
仿真
实机一致性
29
综合项目挑战
在复杂环境(如光照变化 · 目标遮挡 · GPS信号弱)下完成目标跟随
综合项目挑战
复杂环境
30
课程总结与展望
回顾整个项目的技术栈和关键难点 · 讨论未来改进方向(如深度学习端到端控… · 多机协同跟随)
课程总结
回顾整个项目的技…
所属VIP或分类
同VIP:PX4仿真:Gazebo仿真环境、视觉输入和控制策略验证
同VIP:PX4地面站联动
同VIP:PX4无人机AI交付