VIP5

本课程属于：150-NPU RTL与硬件加速设计 AI智能与边缘计算工程 · 共 5 门相关课程，组合学习更完整。

查看所属VIP全部课程 →

← 返回所属目录咨询 / 购买

NPU音视频流水线与硬件加速

共计 30 章节

点击此处阅读海量试读课程：100+行业、1000+细分领域

学习目标 · 课程结构 · NPU在音视频处理中的角色与价值

课程导入学习目标

音视频基础

采样 · 量化 · 编码格式（H.264/H.265/A…

音视频基础采样

NPU架构概览

NPU核心组件 · 内存层次 · 计算单元与专用硬件模块

NPU架构概览

流水线基础

流水线概念 · 阶段划分 · 吞吐量与延迟的权衡

流水线基础流水线概念

音视频流水线典型框架

采集 · 预处理 · 编码

音视频流水线典型…采集

硬件加速原理

NPU如何加速FFT · DCT · 运动估计

硬件加速原理NPU

视频编码硬件加速

H.264/H.265硬件编码器流程 · 码率控制与质量优化

视频编码硬件加速H.264/H.265

视频解码硬件加速

硬件解码器流程 · 参考帧管理 · 错误隐藏与容错

视频解码硬件加速硬件解码器流程

音频处理硬件加速

音频编解码 · 回声消除 · 降噪

音频处理硬件加速音频编解码

图像预处理加速

缩放 · 色彩空间转换 · 旋转

图像预处理加速缩放

视频后处理加速

去噪 · 锐化 · 超分辨率

视频后处理加速去噪

AI增强与NPU融合

基于NPU的AI超分 · 插帧 · 画质修复与实时性优化

流水线同步与缓冲管理

帧同步 · 环形缓冲 · 双缓冲/三缓冲机制

流水线同步缓冲管理

内存管理与数据搬运

DMA · 零拷贝 · 内存池

内存管理数据搬运

多路并发与调度

多路音视频流并发处理 · 任务调度 · 优先级与负载均衡

多路并发调度

性能分析与优化

Profiling工具 · 瓶颈定位 · 流水线平衡与优化策略

性能分析优化

低延迟设计

端到端延迟来源 · 低延迟编码 · 低延迟传输与播放优化

低延迟设计端到端延迟来源

功耗与散热优化

NPU功耗模型 · 动态电压频率调整 · 低功耗流水线设计

功耗散热优化

硬件抽象层与驱动

NPU驱动模型 · 用户态/内核态交互 · 硬件抽象接口设计

硬件抽象层驱动

主流NPU平台对比

华为昇腾 · 高通Hexagon · 联发科APU

开发环境搭建

NPU SDK安装 · 交叉编译 · 调试工具与仿真器使用

开发环境搭建NPU

基于NPU的实时视频通话流水线实现与…

案例实战NPU

基于NPU的智能安防视频分析流水线（…

案例实战NPU

基于NPU的直播推流流水线（采集+美…

案例实战NPU

基于NPU的音频会议系统（降噪+回声…

案例实战NPU

常见问题与调试

花屏 · 卡顿 · 音画不同步

常见问题调试

流水线测试与验证

单元测试 · 集成测试 · 压力测试

流水线测试验证

NPU+Transformer · 生成式AI与音视频结合 · 异构计算趋势

前沿趋势NPU+Transfor…

设计一个端到端NPU音视频处理系统 · 涵盖需求分析 · 架构设计

综合项目NPU

课程总结与进阶路径

核心知识回顾 · 常见误区 · 学习资源与职业发展建议

课程总结进阶路径