VIP20
本课程属于：020-多摄像头系统同步与融合技术 AI视觉与工业视觉 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

多模态融合与同步误差补偿方法

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
多模态融合概述
多模态数据定义 · 融合层次（数据级/特征级/决策级） · 典型应用场景（自动驾驶
多模态融合概述多模态数据定义
02
同步误差问题
时间戳对齐原理 · 硬件触发同步 · 软件插值同步
同步误差问题时间戳对齐原理
03
数据级融合方法
直接拼接法 · 加权平均法 · 主成分分析（PCA）降维融合
数据级融合方法直接拼接法
04
特征级融合方法
串联特征融合 · 并行特征融合 · 注意力机制特征融合
特征级融合方法串联特征融合
05
决策级融合方法
投票法 · 贝叶斯融合 · D-S证据理论融合
决策级融合方法投票法
06
时间戳同步技术
UTC时间同步 · PTP协议（IEEE 1588） · NTP协议在传感器网络中的应用
时间戳同步技术UTC
07
硬件同步方案
多传感器同步触发线设计 · FPGA硬件同步 · GPS脉冲同步（PPS）
硬件同步方案多传感器同步触发…
08
软件同步方案
线性插值同步 · 样条插值同步 · 卡尔曼滤波时间对齐
软件同步方案线性插值同步
09
异步传感器融合
异步卡尔曼滤波 · 粒子滤波在异步数据中的应用 · 时间延迟补偿
异步传感器融合异步卡尔曼滤波
10
同步误差建模
固定延迟模型 · 随机延迟模型 · 时变延迟模型
同步误差建模固定延迟模型
11
误差补偿策略
前馈补偿 · 反馈补偿 · 自适应补偿算法
误差补偿策略前馈补偿
12
基于深度学习的同步
端到端时序对齐网络 · Transformer时间对齐 · 时序注意力机制
基于深度学习的同…端到端时序对齐网…
13
多模态数据集构建
数据采集平台搭建 · 标注工具选择 · 数据增强策略
多模态数据集构建数据采集平台搭建
14
图像与激光雷达融合
点云投影到图像 · BEV（鸟瞰图）特征融合 · 目标检测中的融合
图像激光雷达融合
15
图像与雷达融合
毫米波雷达特征提取 · 雷达与图像空间对齐 · 多目标跟踪融合
图像雷达融合
16
视觉与惯性融合
VIO（视觉惯性里程计） · IMU预积分 · 紧耦合与松耦合
视觉惯性融合
17
语音与视觉融合
唇语识别 · 音视频说话人定位 · 多模态情感识别
语音视觉融合
18
触觉与视觉融合
触觉传感器数据编码 · 视觉引导的触觉感知 · 机器人抓取中的融合
触觉视觉融合
19
多模态Transformer
跨模态注意力机制 · 模态缺失处理 · 多模态预训练模型（如CLIP
Transformer多模态
20
图神经网络在多模态中的应用
多模态图构建 · 异构图融合 · 图注意力网络
图神经网络多模态
21
同步误差评估指标
时间偏移均方根误差（RMSE） · 融合精度（mAP） · 延迟抖动标准差
同步误差评估指标RMSE
22
实时融合系统设计
流水线架构 · 零拷贝数据传输 · 内存池优化
实时融合系统设计流水线架构
23
ROS2在多模态融合中的应用
ROS2时间机制 · 消息过滤器 · 多传感器同步节点设计
ROS2多模态融合
24
边缘计算中的融合
模型压缩 · 量化部署 · 端侧同步策略
边缘计算融合
25
联邦多模态融合
隐私保护下的融合 · 分布式同步 · 安全聚合
联邦多模态融合隐私保护下的融合
26
对抗性鲁棒融合
模态攻击类型 · 防御机制 · 鲁棒性评估
对抗性鲁棒融合模态攻击类型
27
多模态融合在自动驾驶中的应用
感知融合 · 预测融合 · 规划融合
多模态融合自动驾驶
28
多模态融合在医疗诊断中的应用
影像-文本融合 · 病理-基因融合 · 多模态手术导航
多模态融合医疗诊断
29
多模态融合在机器人中的应用
SLAM融合 · 人机交互融合 · 灵巧操作融合
多模态融合机器人
30
前沿趋势与挑战
大模型多模态 · 世界模型 · 因果融合
前沿趋势挑战