智能体 · 医疗器械 SOP 监控
落地实录 · 视觉智能体

智能体在医疗器械行业 SOP 监控实录

医疗器械组件装配线,难的不是「拍清楚一块支架」,而是让每一件都按同一套顺序做完:放置纸垫 → 一遍涂胶 → 二遍涂胶 → 放置标签并计时,最后放行——漏涂胶或漏计时,都要当场拦住。

本文依据真实洁净车间装配过程监控视频与视觉智能体操作界面,按现场场景 → 工序时间线 → 工作流 / 事件 / 状态机展开。配置截图取自真实张量流画布,内容对齐视频中的装配动作。

视觉智能体长什么样

现场落地的核心硬件是边缘侧「视觉智能体」:集成算力与多路网络接口,可直接挂接工业相机,在工位旁完成采集、推理与 SOP 状态推进。

视觉智能体硬件外观
▲ 视觉智能体硬件外观点击查看

01|视频里的真实装配工位

▲ 实操视频:医疗器械装配 SOP 过程监控可点「放大观看」全屏查看

工位物料分区清晰:治具托盘上的承托支架对应涂胶对象;条码标签与电子计时器对应末道「放置标签并计时」。视觉系统要同时看清「人—物—治具」三者关系,而不是只做单帧外观判图。

02|四道工序:每一步在查什么

运行清单与状态图事件张量一致,按视频真实动作共四道顺序工序:

表格可左右滑动查看

事件 工序名称 视觉关注点
E0放置纸垫白色纸垫是否出现在台垫操作区
E1一遍涂胶底涂/首遍涂胶动作与治具上件状态
E2二遍涂胶第二遍涂胶是否执行,不可跳过
E3放置标签并计时标签到位 + 计时器启动,进入固化等待

过程漏项比外观瑕疵更贵

医疗器械装配中,漏一遍涂胶、或固化计时未启动,往往到可靠性测试或客户投诉时才暴露,召回与合规成本远高于当场拦截。过程监控要把「顺序 + 动作存在性 + 计时」锁死在工位侧。

03|工作流配置

检测链路:工业相机 → 图像预处理 → 语义分割 → 事件探测 → 状态机。点击图片可放大(原图像素,无压缩),单指拖动、双指或按钮自由缩放。

张量流画布:工业相机到状态机完整配置
▲ 张量流画布:工业相机 → 图像预处理 → 语义分割 → 事件探测 → 状态机点击放大(原图)

04|把「涂胶做完」变成标准信号

原语库 · 物体存在 / 动作发生 / 停留时长

打开事件编排器,按工序逐条配置。以「一遍涂胶」为例:

  • 「一遍涂胶 / 二遍涂胶」可叠加「涂胶工具出现 + 治具 ROI 内停留时长」;
  • 「放置标签并计时」可挂「标签存在 + 计时器读数变化 / 启动态」;
  • 「放置纸垫」可挂「纸垫出现在台垫操作区」。

状态机事件列表(示意)

表格可左右滑动查看

事件名称配置要点
E0放置纸垫纸垫出现在台垫中心操作区
E1一遍涂胶首遍涂胶动作完成
E2二遍涂胶二遍涂胶不可跳过,需独立事件
E3放置标签并计时标签到位且计时器已启动

漏做类步骤可挂「物体不存在」或「未达到停留时长」,驱动拦截分支。识别结果封装成事件,状态机与运行清单直接订阅。

05|NG 类型 / 显示参数

参数配置 · 页面参数

打开「参数配置」,将 NG 字典与四道工序对齐,便于按 NG 类型统计漏项:

表格可左右滑动查看

NG 类型名称说明
NG0纸垫未放操作区未见纸垫
NG1一遍涂胶缺失首遍涂胶未完成
NG2二遍涂胶缺失二遍涂胶跳过或未达停留时长
NG3未贴标或未计时标签缺失或计时器未启动

06|对照表与项目体会

表格可左右滑动查看

环节 传统装配工位 视觉 SOP 过程监控
认物料 / 治具班组长抽看语义分割实时识别纸垫 / 治具 / 标签等
管顺序靠习惯与纸质 SOP状态图 S0–S4 强制顺序
管涂胶签字确认,难复核事件「存在 + 区域出现 + 停留」逐步门禁
管计时依赖人自觉按计时器「标签 + 计时启动」双重确认
留记录纸质勾选事后补步骤轨迹、影像与 NG 自动留痕

落地要点

  • 业务要求:每件按四道工序做完,两遍涂胶、贴标计时不可漏;
  • 判定规则:当前状态只接受对应事件,齐套并计时启动后才允许「放行」。

写在最后

医疗器械装配监控难的不是认出一张纸垫或一只计时器,而是把识别入位 → 事件上报 → 状态推进 → NG 统计 → 放行留痕串成现场愿意用、质量与合规经得起复核的链路。

一句话:视觉智能体负责认工位目标,事件编排负责报工序,状态机负责管顺序,参数页负责管 NG 字典——把装配工位从「靠人盯」变成「系统逐步核对」。

作者简介

Ivan

工业视觉解决方案专家 · 本文作者

硕士学历,自动化与机器视觉方向。深耕工业视觉检测十余年,早年主导传统 AOI 算法开发,近年专注视觉大模型在制造业的工程化落地。先后交付 3C 电子、家电、汽车零部件、医疗等行业的 30 余个视觉检测与 SOP 过程监控项目。