VIP20

本课程属于：019-Arm Ethos-U NPU模型部署 工业控制与工业互联网 · 共 20 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

Ethos-U人体检测模型摄像头输入管线优化

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

学习目标 · 课程结构 · Ethos-U与人体检测概述

课程导入学习目标

嵌入式AI与Ethos-U基础

Arm Ethos-U55/U65架… · NPU加速原理 · 与MCU的协同工作方式

人体检测模型基础

常见模型（如MobileNet SS… · YOLO轻量版） · 输入尺寸

人体检测模型基础MobileNet

摄像头输入管线组成

图像采集 · 格式转换 · 预处理

摄像头输入管线组…图像采集

摄像头硬件接口

DCMI · CSI-2 · 并行接口

摄像头硬件接口DCMI

图像采集优化

DMA传输 · 双缓冲 · 帧同步

图像采集优化DMA

图像格式与色彩空间

RGB · YUV · NV12

图像格式色彩空间

图像缩放与裁剪

双线性插值 · 最近邻 · 区域裁剪

图像缩放裁剪

像素格式对齐

内存对齐 · 行对齐 · padding对NPU推理效率的影响

像素格式对齐内存对齐

预处理加速

均值/方差归一化 · 通道交换 · 量化预处理在CPU或NPU上的实现

预处理加速均值

Ethos-U推理流程

使用Vela编译器优化模型 · 生成.vela文件 · 运行时API调用

Ethos-U推理流程

TensorFlow Lite for Microcontrollers

模型转换 · 量化（int8） · 部署到Ethos-U的步骤

摄像头驱动开发

初始化 · 配置分辨率/帧率 · 中断处理

摄像头驱动开发初始化

帧缓冲管理

环形缓冲 · 帧池 · 内存池设计

帧缓冲管理环形缓冲

流水线并行化

采集-预处理-推理-后处理多级流水线 · 使用双核或事件驱动

流水线并行化采集

性能分析工具

使用Arm Cycle模型 · Ethos-U NPU性能计数器 · CPU profiler定位瓶颈

性能分析工具Arm

内存带宽优化

减少数据搬运 · 使用内部SRAM · DMA与NPU直接交互

内存带宽优化减少数据搬运

低功耗优化

动态电压频率调整 · 睡眠模式 · 帧率自适应

低功耗优化动态电压频率调整

实时性保障

帧率控制 · 延迟预算 · 优先级调度

实时性保障帧率控制

常见问题与调试

图像花屏 · 帧丢失 · 推理结果错误

常见问题调试

基于STM32H7+Ethos-U5…

案例实战STM32H7+Etho…

使用OV2640摄像头 · 实现30FPS人体检测的完整代码解析

案例实战OV2640

多目标检测与跟踪 · 结合IOU跟踪算法优化输出

案例实战多目标检测

从模型训练到部署的端到端流程 · 包括数据增强和量化感知训练

案例实战从模型训练到部署…

使用NPU的硬件加速算子（如池化 · 激活）减少CPU负载

高级优化NPU

多摄像头输入融合 · 或动态分辨率切换以适应不同场景

高级优化多摄像头输入融合

与RTOS（如FreeRTOS）集成 · 任务划分与通信机制

系统集成RTOS

测试与验证

单元测试 · 集成测试 · 压力测试

设计一个完整的智能门禁系统 · 包含人体检测 · 人脸抓拍

综合项目设计一个完整的智…

课程总结与进阶

回顾关键知识点 · 探讨未来趋势（如Transforme… · NPU新特性）

课程总结进阶