首页
›
工业控制与工业互联网
›
009-TinyML量化感知训练QAT
›
《QAT训练后BN freeze与导出前检查清单》
VIP20
本课程属于:009-TinyML量化感知训练QAT
工业控制与工业互联网 · 共 20 门相关课程,组合学习更完整。
查看所属VIP全部课程 →
← 返回所属目录
咨询 / 购买
📘
QAT训练后BN freeze与导出前检查清单
共计 30 章节
点击此处阅读海量试读课程:100+行业、1000+细分领域
01
课程导入
学习目标 · 适用人群 · 课程整体框架与学习路径
课程导入
学习目标
02
量化感知训练(QAT)基础
量化原理 · 伪量化节点 · 训练与推理差异
QAT
量化感知训练
03
BN层在QAT中的作用
BatchNorm原理 · 训练与推理行为差异 · 对量化误差的影响
BN
QAT
04
为什么需要BN freeze
QAT后BN统计量漂移 · 量化模型敏感性 · 精度下降原因
BN
freeze
05
BN freeze的时机
训练收敛判断 · 验证集监控 · 何时触发freeze
BN
freeze
06
BN freeze的标准流程
冻结BN参数 · 固定统计量 · 调整优化器与学习率
BN
freeze
07
BN freeze的代码实现
PyTorch/TensorFlow… · 注意事项
BN
freeze
08
BN freeze后的微调策略
继续训练 · 学习率调整 · 损失函数变化
BN
freeze
09
BN freeze的验证方法
验证集精度 · 校准集表现 · 量化模拟对比
BN
freeze
10
导出前检查清单总览
模型结构 · 权重 · BN状态
导出前检查清单总…
模型结构
11
检查模型结构完整性
层数 · 连接 · 算子类型
检查模型结构完整…
层数
12
检查BN层状态
running_mean/runni… · num_batches_tracke…
BN
检查
13
检查量化配置
量化后端 · 量化方案(per-tensor/pe… · 对称/非对称
检查量化配置
量化后端
14
检查校准数据
校准集大小 · 代表性 · 预处理一致性
检查校准数据
校准集大小
15
检查模型精度
量化前后精度对比 · BN freeze前后精度对比 · 目标精度阈值
检查模型精度
量化前后精度对比
16
检查模型大小与推理速度
模型文件大小 · 延迟 · 吞吐量
检查模型大小
推理速度
17
检查导出格式
ONNX · TorchScript · TensorRT
检查导出格式
ONNX
18
检查算子支持
目标推理引擎支持的算子列表 · 不支持的算子处理
检查算子支持
目标推理引擎支持…
19
检查动态范围与数值稳定性
激活值范围 · 权重分布 · 异常值检测
检查动态范围
数值稳定性
20
检查多批次一致性
不同batch size下的输出一致… · BN统计量影响
检查多批次一致性
batch
21
案例实战
基于PyTorch的QAT训练与BN…
案例实战
PyTorch
22
案例实战
基于TensorFlow的QAT与B…
案例实战
TensorFlow
23
案例实战
从QAT到ONNX导出并部署到Ten…
案例实战
QAT
24
常见问题
BN freeze后精度反而下降的原…
常见问题
BN
25
常见问题
导出后模型输出与原始模型不一致的排查…
常见问题
导出后模型输出
26
常见问题
量化模型在特定硬件上性能不佳的调优技…
常见问题
量化模型
27
综合提升
自动化检查脚本设计 · CI/CD集成 · 模型版本管理
综合提升
自动化检查脚本设…
28
综合提升
多模型 · 多硬件场景下的检查清单扩展与定制
综合提升
多模型
29
综合提升
QAT与BN freeze的最新研究…
综合提升
QAT
30
课程总结
核心要点回顾 · 常见误区 · 实践建议与后续学习资源
课程总结
核心要点回顾
所属VIP或分类
同VIP:Edge-AI项目QAT训练图构建与精度恢复流程
同VIP:FP32模型加入fake-quant进行QAT训练教程
同VIP:QAT-fake-quant节点插入与训练图构建资料