1. 课程导论

大家好,我是这门课的主讲。在工业视觉这行摸爬滚打了十几年,我见过太多项目因为「数据」这个环节出问题而翻车。今天咱们就来聊聊,为什么缺陷检测离不开高质量的数据集,以及这门课能带给你什么。

1.1 工业缺陷检测:不只是「找茬」那么简单

工业缺陷检测,说白了就是用机器视觉代替人眼,在生产线上找出产品表面的瑕疵。你想想看,一个手机屏幕上的划痕、一个轴承上的裂纹、一块电路板上的焊点不良——这些缺陷如果流到客户手里,轻则退货,重则召回,甚至可能引发安全事故。

我早期参与过一个项目,给某汽车零部件厂做检测系统。当时客户要求检测精度达到 0.1mm,也就是一根头发丝的直径。我们试了传统算法,试了模板匹配,效果都不理想。后来换了深度学习,但训练数据只有几百张,模型根本学不到东西。嗯,这就是典型的「有算法没数据」的困境。

核心认知:工业缺陷检测的本质是一个「小样本、高精度、实时性」的分类/分割问题。它和 ImageNet 那种海量图片分类完全不同,难点在于:

  • 缺陷种类多、形态多变(划痕、脏污、凹陷、气泡……)
  • 正负样本极度不均衡(良品占 99% 以上)
  • 对误检率要求极严(宁可过杀,不可漏杀)

所以,别指望随便找个预训练模型就能搞定。你得从数据源头开始,一步步把地基打牢。

1.2 数据集的重要性:数据决定模型的上限

这句话我经常跟团队讲:「模型是水,数据是桶。桶有多大,水才能装多少。」

为什么这么说?我拿一个真实案例来说明。去年有个做 PCB 板检测的客户,他们自己标注了 5000 张图片,用 YOLOv5 训练,mAP 只有 0.65。我看了他们的标注文件,发现三个问题:

  1. 标注框不贴合缺陷边缘——框大了,模型学到的背景噪声多;框小了,缺陷特征被截断。
  2. 缺陷类别混淆——把「划痕」标成了「擦伤」,模型根本分不清。
  3. 缺少难例样本——所有缺陷都是大而明显的,模型没见过微小的、模糊的缺陷。

后来我们重新标注,严格按规范来,又补充了 2000 张难例图片。同样的模型,mAP 直接跳到 0.87。你看,数据质量差 10 倍,模型效果差 20 个点。这就是数据集的威力。

数据集维度 对模型的影响 我踩过的坑
标注精度 直接影响定位/分割准确率 框不贴合导致模型学偏
类别一致性 决定分类准确率 混淆标注让模型「左右为难」
样本多样性 决定泛化能力 缺少难例,模型「眼高手低」
数据量 决定模型收敛上限 样本太少,模型「记不住」

避坑指南:我曾经接手过一个项目,客户说「我们有 10 万张图片,够了吧?」结果一看,10 万张全是良品,缺陷样本只有 200 张。这种数据集训练出来的模型,良品误检率高达 30%,根本没法用。记住:数据量 ≠ 有效样本量,缺陷样本的多样性和质量才是关键。

1.3 课程目标:从「会标」到「会建」

这门课的目标很明确:让你掌握一套完整的工业缺陷检测数据集构建与标注规范。不是零散的技巧,而是一套可落地、可复用的方法论。

具体来说,学完这门课,你应该能:

  • 独立设计标注方案——知道什么缺陷该用矩形框,什么该用多边形,什么该用语义分割。
  • 制定标注规范文档——让标注员一看就懂,减少返工。
  • 把控数据质量——能设计质检流程,发现并修正标注错误。
  • 处理数据不平衡——会用数据增强、难例挖掘、重采样等方法。
  • 搭建数据管理流程——从采集、清洗、标注到版本管理,形成闭环。

我的建议:别急着上手写代码。先花一周时间,把你手头项目的数据集拿出来,对照这门课的规范,一条条检查。你会发现,很多问题在标注阶段就能避免,根本不用等到训练时才发现。

1.4 学习路径:跟着我的节奏来

这门课一共 30 章,我把它分成了四个阶段。你按这个顺序学,效果最好:

  1. 基础篇(第 1-8 章):讲清楚缺陷检测的基本概念、数据集结构、标注工具选择。这部分是地基,别跳。
  2. 规范篇(第 9-18 章):详细讲解标注规范,包括不同缺陷类型的标注方法、边界情况处理、质检流程。这是核心,我会放大量案例。
  3. 进阶篇(第 19-25 章):讲数据增强、难例挖掘、半自动标注、数据版本管理。这部分能帮你提效。
  4. 实战篇(第 26-30 章):完整走一遍项目流程,从需求分析到数据集交付。我会拿一个真实的 PCB 检测项目做演示。

下面这张图,是我自己梳理的知识体系。你把它存下来,学完一章回来对照一下,就知道自己到哪了。

工业缺陷检测数据集构建与标注规范 · 知识体系 基础篇 (1-8章) 规范篇 (9-18章) 进阶篇 (19-25章) 实战篇 (26-30章) 缺陷检测概述 · 数据集结构 标注工具选择 · 格式转换 标注规范制定 · 边界处理 质检流程 · 返工机制 数据增强 · 难例挖掘 半自动标注 · 版本管理 需求分析 · 方案设计 · 交付 学习建议 按顺序学习,每章结束后对照知识体系图,标记已掌握的内容 遇到不懂的标注规范,先跳过,后面有大量案例帮你理解

嗯,这就是第一章的全部内容。记住一句话:数据集的构建不是体力活,而是技术活。后面 29 章,我会手把手带你把这套技术活练熟。