严重缺陷与总体准确率2026年8月23日
壹号国际质量:一个视觉模型总体准确率99.5%以后,为什么最严重的缺陷仍然可能被漏掉?
一份视觉检测模型的上线报告显示总体准确率达到99.5%,团队和管理层都对这个结果比较满意。几个月后,产线出现了一批因为某类严重缺陷流入下一环节而导致的客诉,回溯检测记录才发现,这类缺陷在模型的检测结果里,实际漏检率明显偏高,只是因为它在样本中出现的频率很低,没有明显拉低总体准确率这个平均数字。
这背后是Class Imbalance(类别不均衡)带来的典型陷阱:如果产线上99%以上的样本都是合格品,一个把几乎所有样本都判为"OK"的模型,总体准确率也能轻松超过99%,但这样的模型对真正需要关注的缺陷检测毫无意义。总体准确率是一个被大量正常样本"稀释"过的平均数字,很容易掩盖个别高风险缺陷类型的表现。
比总体准确率更值得关注的,是误判报废和漏检放行分别落在哪些缺陷类型和严重等级上。
按缺陷类型拆开看
一份更负责任的质量报告,应该把总体指标拆解成一张缺陷类型和严重程度的矩阵,分别列出每一类缺陷各自的Recall(查全率)和Precision(查准率),尤其要重点关注那些一旦漏检就可能影响功能或安全的严重缺陷类型,即便它们在样本中占比很小。这类缺陷的漏检率,理应比总体平均漏检率承受更严格的标准,而不是被平均数字稀释掉。
制造质量需要看错误发生在哪里,而不只是总体Accuracy。禁止把单一准确率数字当成质量AI表现的唯一证明——一个负责任的做法,是持续跟踪每一类缺陷各自的检出情况,尤其是高严重度类别,并把这份拆解后的报告,作为判断这套检测系统是否真正可用的依据,而不是那张看起来漂亮的总体准确率截图。
分布漂移2026年8月19日
壹号国际质量:摄像头、光源和AI模型都没有更换以后,为什么生产线换一种材料就可能让缺陷检测突然失准?
某条产线的视觉检测系统运行了很长一段时间,表现一直稳定。一次原材料供应商变更,产品表面的光泽度和反光特性发生了细微变化,检测系统的误判率在没有更换任何硬件、也没有修改模型参数的情况下突然明显上升,质量团队一时很难判断问题出在哪里。
模型本身没有变化,变化的是输入图像的分布——这就是Distribution Shift(分布漂移)。视觉检测模型学习到的,是训练数据集里那批材料、那种光泽度条件下的缺陷特征,一旦产品表面特性因为材料、供应商或工艺参数的调整发生变化,即便变化本身在人眼看来很细微,也可能落在模型此前从未充分学习过的图像区间,导致检测表现下降。
质量AI模型运行在现实工厂里,现实环境本身会变化,材料和工艺的正常调整都可能改变模型面对的输入分布。
把光学系统当成模型的一部分
这里容易被忽略的是:视觉检测系统的表现,从来不只取决于模型本身,相机型号、光源类型和亮度、镜头是否清洁、产品在传送带上的位置和角度,这些光学系统参数和模型是一个整体,任何一环发生变化,都可能影响最终的检测结果。质量团队在排查"模型为什么变差"之前,往往需要先确认光学系统本身是否稳定——镜头是否需要清洁、光源是否老化、产品摆放角度是否符合标准。
更长期的做法,是建立对输入数据分布的监控机制,跟踪图像特征、缺陷类型分布和产品变体是否随时间发生变化,一旦出现明显偏移,及时触发模型复核或重新训练,而不是被动等到误判率明显上升、造成实际质量问题之后才回头排查。质量AI模型不是一次训练、终身可用的静态系统,它需要和光学环境、材料工艺变化保持同步,这部分维护工作,和最初的模型训练同样重要。
预测质量与根因2026年8月15日
AI已经可以预测某批产品良率下降以后,怎样继续追到真正可能发生变化的工艺参数?
预测质量模型结合工艺参数和传感器数据,提前发出一条预警:接下来一批产品的良率可能出现下降趋势。这条预警本身很有价值,能让质量团队在成品下线之前就介入检查。但预警发出之后,团队面对的下一个问题往往更难:具体是哪个工艺参数出现了变化,导致这个风险信号。
良率预警只是第一步,真正需要做的是把这个信号和具体的工艺参数关联起来,形成可以核查的线索,而不是停留在"风险上升"这样一个笼统的结论上。相关性不能自动写成因果——模型可能观察到某个温度参数和良率下降在时间上同步出现,但这并不代表温度就是根因,也可能是两者共同受到另一个变量的影响。
预测质量给出的是需要关注的风险信号和可能相关的参数线索,根因确认仍然需要结合工艺知识和实验验证。
从风险信号到根因确认
比较务实的流程,是把预测质量模型输出的风险信号,作为触发过程排查的起点:先锁定几个和风险信号时间相关性较高的工艺参数,再结合工艺工程师的经验判断哪些参数在物理上确实可能影响这类缺陷;必要时通过小范围的对比试验,验证调整某个参数是否真的能让风险信号回落。这个过程需要模型提供的相关性线索,也需要工艺知识和实验验证共同完成,AI不能单独把"风险上升"直接翻译成"某个参数出了问题"。
预测质量不等于自动报废,它更准确的定位是Risk Flag(风险标记),触发的是过程检查和工艺排查,而不是直接对产品做出报废决定。把预测质量模型定位为"帮助工程师更早发现问题、更快缩小排查范围"的工具,而不是"自动诊断根因"的黑箱,这套流程才会真正被现场信任并长期使用下去。