VIP11
本课程属于：024-智能座舱HMI与多模态交互 智能汽车与新能源汽车工程 · 共 11 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

智能座舱语音视觉多模态交互工程

共计 30 章节
可可资料掘金营 · 点击在线试看
01
课程导入
目标=智能座舱的定义 · 发展历程 · 多模态交互的价值
课程导入目标=智能座舱的…
02
智能座舱系统概述
目标=座舱电子架构 · 域控制器 · SOA
智能座舱系统概述目标=座舱电子架…
03
语音交互基础
目标=语音信号处理 · ASR · TTS
语音交互基础目标=语音信号处…
04
视觉交互基础
目标=计算机视觉 · 摄像头模型 · 人脸检测
视觉交互基础目标=计算机视觉
05
多模态交互核心概念
目标=模态 · 模态对齐 · 模态融合
多模态交互核心概…目标=模态
06
传感器与硬件平台
目标=麦克风阵列 · RGB/IR摄像头 · ToF
传感器硬件平台
07
数据采集与标注
目标=多模态数据同步采集 · 标注规范 · 数据清洗
数据采集标注
08
语音前端处理实战
目标=波束形成 · 回声消除 · 降噪
语音前端处理实战目标=波束形成
09
语音识别与合成实战
目标=ASR模型选型 · 领域自适应 · TTS音色定制
语音识别合成实战
10
视觉感知实战
目标=人脸检测与识别 · 驾驶员状态监测 · 视线估计
视觉感知实战目标=人脸检测
11
多模态融合方法
目标=早期融合 · 晚期融合 · 混合融合
多模态融合方法目标=早期融合
12
多模态对齐与同步
目标=时间戳对齐 · 跨模态嵌入 · 对比学习
多模态对齐同步
13
对话管理与交互策略
目标=多轮对话 · 意图理解 · 槽位填充
对话管理交互策略
14
场景化交互设计
目标=驾驶场景 · 娱乐场景 · 办公场景
场景化交互设计目标=驾驶场景
15
驾驶员监控与安全
目标=疲劳检测 · 分心识别 · 危险行为预警
驾驶员监控安全
16
乘客与后排交互
目标=后排娱乐 · 手势控制 · 语音分区
乘客后排交互
17
多模态大模型与座舱
目标=LLM · VLM · 端侧部署
多模态大模型座舱
18
实时性与性能优化
目标=端到端延迟 · 帧率 · 功耗
实时性性能优化
19
鲁棒性与可靠性
目标=噪声 · 光照 · 遮挡
鲁棒性可靠性
20
隐私与安全
目标=数据加密 · 本地处理 · 权限管理
隐私安全
21
测试与评估
目标=单元测试 · 集成测试 · 场景测试
测试评估
22
开发工具与平台
目标=ROS · AutoSAR · Android Automotive
开发工具平台
23
案例实战一
目标=语音+视觉融合的驾驶员疲劳监测…
案例实战一目标=语音+视觉…
24
案例实战二
目标=多模态手势+语音控制车载娱乐系…
案例实战二目标=多模态手势…
25
案例实战三
目标=基于多模态大模型的智能座舱助手…
案例实战三目标=基于多模态…
26
常见问题与排错
目标=唤醒率低 · 误唤醒 · 识别延迟
常见问题排错
27
项目流程与工程化
目标=需求分析 · 架构设计 · 迭代开发
项目流程工程化
28
综合提升一
目标=多模态交互体验设计原则 · 人因工程 · 认知负荷与可用性测试
综合提升一目标=多模态交互…
29
综合提升二
目标=前沿趋势 · 车路云协同 · 情感计算
综合提升二目标=前沿趋势
30
课程总结与结业项目
目标=知识体系回顾 · 结业项目选题 · 方案设计
课程总结结业项目