LINGBANG · VisionAgent 实操

橡胶塑料制品
缺陷检测落地实录

黑色模塑件上的缩水、缺胶、多料——从语义分割少样本标注推训,到张量流、事件编排与状态推进,把外观缺陷变成可检出、可统计、可拦截的在线规则。

项目 0811-66 缺陷:缩水 / 缺胶 / 多料 语义分割 · 少样本推训 边缘运行监控

橡胶塑料模塑件的缺陷往往细而散:局部缺胶、缩水塌陷、飞边多料。难的不是拍一张清晰图,而是让模型在产线节拍里稳定标出缺陷区,并把结果接到放行 / 拦截。

本文依据现场检测结果视频与 VisionAgent 真实操作页,按标注推训 → 工作流 → 事件编排 → 状态机 → 参数配置 → 上线演示展开。界面截图按产品控件与文案样式生成,内容对齐视频中的黑色模塑件与 NG 标签。

E0 · NG
缩水
壁厚/冷却不均导致的局部凹陷、塌陷,影响密封与装配面。
E1 · NG1
缺胶
充型不足、缺料短射;分割掩膜标出缺胶区域,常见主缺陷。
E2 · NG3
多料
飞边、溢料、多余料块;面积阈值过滤误报,避免过杀。

外观抽检管不住细缺陷

缺胶与缩水靠人眼抽检容易漏,客诉与返工成本远高于产线多盯一帧。需要可复现的分割结果与 NG 统计。

01

语义分割:标注与推训

SEG

左右对照标注,少样本教会模型

语义分割 · 推训一体

打开「语义分割」:左侧原图、右侧结果图;顶栏缺陷类型选 NG1 缺胶。中间工具栏用多边形 / 笔刷圈出缺胶区,右侧可筛「已标注 / 未标」「良品 / 不良」。样本库可达数百张(界面可见已训练数百张量级),保存标注后走迁移 / 常规推理 / 加速推理 / 检测。

  • 缺陷字典与页面参数对齐:缺胶、漏水、多料(可按产线再增「缩水」);
  • 少样本即可开训,换料号补标几张微调,不必重写算法代码。
语义分割标注推训
截图加载中

▲ 语义分割:双栏标注 · 缺陷类型 NG1 缺胶(真实操作页样式)

标注即推训入口——工艺人员看得懂缺陷色块,质量工程师改得动类别。
02

工作流:五算子张量流

FLOW

拖拉拽搭出检测链路

算子库 · 零代码

新建项目「0811-66」,从左侧算子库拖出并连接:

工业相机 图像预处理 语义分割 事件预测 状态机
工业相机
俯拍模塑件全廓,覆盖孔位与边缘飞边区;支持多通道 / RTSP。
图像预处理
去噪、增强、归一化,稳定黑色高光与米色镶边对比。
语义分割
输出缺胶 / 漏水 / 多料等分割掩膜,样本效率与推理速度按产品标称加速。
事件预测
监测分割信号变化,触发缩水 / 缺胶 / 多料等标准事件。
状态机
FSM / PLC 调度:良品放行或 NG 拦截,并驱动状态监控勾选。
张量流画布
截图加载中

▲ 张量流:工业相机 → 预处理 → 语义分割 → 事件预测 → 状态机

流程图即程序本身——改缺陷策略不必停线等开发。
03

编排事件:GPU 事件编排器

EVENT

把缺陷变成可订阅信号

原语库 · 状态机事件

打开「GPU事件编排器」。右侧状态机列出本工位三类事件(与运行看板一致):

  • E0 缩水E1 缺胶E2 多料——各挂 1 个原语;
  • 从原语库拖入「物体存在 / 不存在」「数量 / 宽度」等,组合出判定逻辑;
  • 先在右侧选中事件,再在画布配置检测逻辑,保存配置后供状态机订阅。
GPU事件编排器
截图加载中

▲ GPU事件编排器:E0 缩水 · E1 缺胶 · E2 多料(真实操作页样式)

识别结果封装成事件,运行页右侧勾选与 NG 统计直接消费。
04

状态机:待检 → 良品 / NG

FSM

状态图锁定放行门禁

事件张量
  • 根状态 S0 待检;检出缩水 / 缺胶 / 多料分别进入对应 NG 态;
  • 全部关键事件通过则进入 良品放行;任一 NG 事件触发拦截分支;
  • 与运行界面「状态监控」三联勾选同源——缩水、缺胶先过,多料待检等。
状态图编辑器
截图加载中

▲ 状态图:待检分流至缩水 / 缺胶 / 多料 NG 或良品

缺陷策略由状态图强制约束,不再只靠人工判图习惯。
05

相机与参数配置

PARAMS

页面参数 · 缺陷字典与显示

参数配置

打开「参数配置」→ 页面参数。左侧缺陷统计与标注类别对齐:

  • 表列示例:NG1 缺胶NG2 漏水NG3 多料及数量;可添加 / 删除缺陷类型;
  • 检测结果显示:显示涂抹开、显示缺陷名称开、字体 40、线宽 2——与现场叠加层一致;
  • 模型参数页可配切图、训练轮次、置信度与面积阈值(如缺胶置信度 0.65、面积 500);
  • 工业相机节点配置通道、曝光与 ROI,保证模塑件全廓入镜。
参数配置页面
截图加载中

▲ 参数配置 · 页面参数:缺陷类型与检测显示设置

NG 字典、阈值与叠加样式一次配好,看板与报表共用。
06

上线演示:检测效果怎么看

RUN

同一屏看图、看事件、看结论

边缘运行 · 结果呈现

前面配好链路之后,最后就是上线看效果。左边是工业相机拍到的实时画面:浅色台面上放着黑色异形模塑件,米色镶边和孔位都看得清,粉色、橙色色块标出系统正在关注的位置。右边按缩水、缺胶、多料三项逐条核对——出现绿勾就表示这项过了;顶栏显示正在运行,下方是 Detection 检测状态。

  • :看实景和缺陷涂抹,对不对得上现场;
  • :三项事件逐步打勾,进度一目了然;
  • 结论:全过就放行;任一项出问题就判不良,并记入对应 NG。
运行监控画面
现场帧加载中

▲ 左边看实景,右边看事件勾选

检测结果帧
现场帧加载中

▲ 运行中:掩膜标出关注区域

▲ 实操视频:橡胶塑料制品缺陷检测结果呈现完整过程

配置、识别、事件勾选与 NG 结论集中在同一界面,现场可当天验收。
07

对照与体会

环节传统方式VisionAgent 橡塑检测
认缺陷人眼抽检语义分割实时标出缺胶 / 缩水 / 多料
定标准口头约定、纸质样件参数页 NG 字典 + 置信度 / 面积阈值
管放行靠熟练工习惯事件编排 + 状态机门禁
改料号等算法重训排期补标少样本推训 / 迁移即可
留记录纸质不良台账缺陷数量与过程轨迹自动留痕

贯穿始终的四个问题:系统看什么、什么叫缺陷、什么情况拦截、结果怎样进统计

写在最后

橡塑缺陷检测难的不是认出某一处缺胶,而是把标注推训 → 分割检出 → 事件上报 → 状态门禁 → NG 统计串成产线愿意用、质量经得起复核的链路。

一句话:语义分割负责认缺陷,事件编排负责报类型,状态机负责管放行,参数页负责管 NG 字典与显示——零代码把抽检工位变成在线缺陷判定。
I
Ivan
工业视觉解决方案专家 · 本文作者

硕士学历,自动化与机器视觉方向。深耕工业视觉检测十余年,早年主导传统 AOI 算法开发,近年专注视觉大模型在制造业的工程化落地。先后交付 3C 电子、家电、汽车零部件、橡胶塑料与新能源等行业的 30 余个视觉检测与过程监控项目。