VIP20
本课程属于：022-Edge AI摄像头ISP与推理链路 工业控制与工业互联网 · 共 20 门相关课程，组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录 咨询 / 购买

摄像头pipeline延迟优化：端侧AI实时推理实战课

共计 30 章节
点击此处阅读海量试读课程：100+行业、1000+细分领域
01
课程导入
学习目标 · 核心概念 · 整体框架
课程导入学习目标
02
摄像头pipeline基础
从传感器到显示的数据流 · 各阶段（采集 · ISP
pipeline摄像头
03
端侧AI推理基础
NPU/DSP/GPU架构差异 · 推理框架（TFLite · ONNX Runtime
AI端侧
04
延迟度量与剖析
常用性能分析工具（perf · trace · profiler）
延迟度量剖析
05
图像采集优化
传感器配置（曝光 · 帧率 · 分辨率）对延迟的影响
图像采集优化传感器配置
06
ISP与预处理优化
ISP管线参数调优 · 颜色空间转换 · 缩放
ISP预处理优化
07
内存与数据拷贝优化
零拷贝技术 · DMA直接传输 · 内存池管理
内存数据拷贝优化
08
并行化与流水线设计
多线程/多进程架构 · pipeline stage重叠执行 · 实现帧级并行
并行化流水线设计
09
AI模型轻量化
模型剪枝 · 量化（INT8/INT16） · 知识蒸馏
AI模型轻量化
10
推理引擎优化
算子融合 · 图优化 · 动态shape处理
推理引擎优化算子融合
11
帧率与延迟的权衡
动态帧率控制 · 跳帧策略 · 低延迟模式切换
帧率延迟的权衡
12
端到端延迟优化案例
人脸检测pipeline从100ms…
端到端延迟优化案…pipeline
13
多路摄像头场景优化
多路复用 · 分时调度 · 带宽管理
多路摄像头场景优…多路复用
14
操作系统与调度优化
CPU/GPU/NPU频率调节 · 实时线程优先级设置 · 中断与轮询机制
操作系统调度优化
15
缓存与预取优化
cache友好设计 · 数据预取 · 避免cache miss导致的延迟抖…
缓存预取优化
16
延迟抖动控制
分析抖动来源（调度 · 中断 · 内存分配）
延迟抖动控制分析抖动来源
17
硬件加速器协同
ISP与NPU的硬件直连 · 减少中间环节 · 利用硬件同步机制
硬件加速器协同ISP
18
视频编解码延迟优化
硬件编解码器配置 · 低延迟编码模式 · 关键帧间隔调整
视频编解码延迟优…硬件编解码器配置
19
显示与回显优化
显示刷新率匹配 · 双缓冲/三缓冲 · 减少显示路径延迟
显示回显优化
20
端云协同优化
边缘计算与云端推理的延迟权衡 · 模型分割与数据压缩传输
端云协同优化边缘计算
21
功耗与延迟的平衡
动态电压频率调整（DVFS） · 功耗约束下的延迟优化策略
功耗延迟的平衡
22
自动化延迟测试框架
构建持续集成中的延迟回归测试 · 自动化采集与分析延迟数据
自动化延迟测试框…构建持续集成
23
常见延迟问题排查
典型问题（如帧丢失 · 卡顿 · 延迟突增）的定位与修复方法
常见延迟问题排查典型问题
24
实战
目标检测pipeline优化
pipeline目标检测
25
实战
SLAM/AR场景优化：高帧率 · 低延迟的视觉惯性里程计pipelin…
SLAM/AR场景优化
26
实战
视频分析多任务并行：检测 · 跟踪 · 识别同时运行的延迟优化与资源分配
视频分析多任务并…检测
27
性能调优方法论
系统化调优流程（测量-分析-优化-验… · 避免过度优化
性能调优方法论系统化调优流程
28
前沿技术展望
事件相机 · 神经形态计算 · 可重构计算在低延迟pipeline中…
前沿技术展望事件相机
29
综合项目
设计一个端到端低延迟摄像头AI系统 · 从需求分析到实现与优化
综合项目AI
30
课程总结与进阶路径
核心知识回顾 · 推荐学习资源 · 实际项目中的最佳实践与常见误区
课程总结进阶路径