1. 课程导入
在智能座舱、工业HMI、医疗设备、机器人示教器等嵌入式产品中，用户对界面的期待已经从“能显示参数”升级为“能直观呈现空间关系与实时状态”。嵌入式3D可视化界面，是指在资源受限的嵌入式平台上，通过GPU或软件渲染管线，把三维模型、传感器数据与交互逻辑实时合成到屏幕上的软件系统。它同时受限于算力、内存、功耗与实时性，因此与桌面3D应用、Web 3D有本质区别。
一、核心原理：从数据到像素的信号链
理解嵌入式3D界面，最有效的方式是把它看成一条信号链：物理世界被传感器采样，数据经总线进入SoC，CPU完成场景图更新与业务逻辑，GPU执行顶点变换、光栅化与片元着色，最终通过显示控制器扫描输出到LCD或OLED。任何一环的带宽、延迟或精度不足，都会在最终画面上表现为卡顿、撕裂或穿模。
与通用3D开发相比，嵌入式侧有三个硬约束：其一，GPU多为移动端或车规级，着色器指令数、纹理单元、带宽有限；其二，内存常为LPDDR4/4X甚至片上SRAM，模型面数与纹理分辨率必须精打细算；其三，系统往往运行RTOS或Linux+RTOS双域，渲染线程要与控制线程共享CPU并满足确定性时延。
二、发展历程：从字符界面到空间计算
嵌入式界面大致经历四个阶段。第一阶段是字符与段码屏，用固定图标和数字表达状态，典型如早期空调面板与仪表。第二阶段是2D图形库，emWin、LVGL、Qt Widgets让界面具备图层、动画与触摸，但仍是平面表达。第三阶段是嵌入式3D加速，随着Mali、Adreno、PowerVR等GPU进入SoC，OpenGL ES成为标配，仪表、车机开始出现3D车模与转场。第四阶段是实时3D与空间交互，点云、SLAM、数字孪生与AR-HUD把真实世界与虚拟信息叠加，界面从“屏幕内”走向“空间中”。
| 阶段 | 典型技术 | 交互方式 | 代表场景 |
|---|---|---|---|
| 字符/段码 | 段码LCD、LED阵列 | 按键、旋钮 | 空调面板、老式仪表 |
| 2D图形 | emWin、LVGL、Qt Widgets | 电阻/电容触摸 | 工业HMI、智能家居 |
| 嵌入式3D | OpenGL ES、Qt 3D、Unity | 多点触摸、手势 | 数字仪表、车机 |
| 实时空间3D | Vulkan、点云、SLAM、AR | 语音、手势、眼动 | AR-HUD、机器人示教 |
三、典型应用场景与案例
智能座舱是最典型的场景：3D车模实时反映车门、灯光、胎压状态，导航地图以3D城市呈现，倒车影像与雷达点云融合。此类系统通常要求双屏异显、冷启动时间短、在-40℃~85℃可靠工作。工业HMI则更强调确定性：产线设备的三维剖视图、报警位置高亮、维护指引动画，必须与PLC周期同步，不能因渲染阻塞控制逻辑。
医疗与机器人场景对精度敏感：手术导航把CT重建模型与机械臂位姿叠加，机器人示教器用3D轨迹预览避免碰撞。此类应用常采用“安全核+渲染核”分离架构，渲染崩溃不能影响运动控制。
四、整体学习路线与常见误区
本课程后续将按“基础→渲染→交互→优化→实战”推进。建议学习路线如下：
- 平台与图形基础：理解SoC、GPU、显示通路，掌握OpenGL ES/Vulkan最小渲染循环。
- 三维数学与场景组织：矩阵变换、相机、光照、场景图与资源管理。
- 界面框架与交互：Qt 3D/Unity/自研引擎选型，触摸、手势与状态机。
- 性能与稳定性：帧率、内存、功耗、热设计，以及双域协同与看门狗。
- 综合项目：完成一个可运行的嵌入式3D仪表或HMI原型。
// 一个最小渲染循环的伪代码结构
while (running) {
updateSceneGraph(dt); // CPU：业务与动画
cullAndSort(); // 可见性裁剪与排序
gpuSubmit(); // 提交绘制命令
swapBuffers(); // 显示交换，注意垂直同步
sleepUntilNextFrame(); // 控制帧率与功耗
}