VisionAgent · SOP 过程监控实操

SOP 检测实操手记:
AI 视觉大模型从架相机到上线的完整六步

以一个真实的 AC 盒包装工位为例,把相机、标注、工作流、状态机这几步大体怎么走,讲清楚、演给你看。

领邦智能 · 技术博客 约 6 分钟读完 实操流程 + 实拍视频
00

项目简介:一个 AC 盒包装工位的 SOP 监控

项目背景
电子组装无接触式工作台的 AC 盒包装工位,SOP 共 7 步:检查外观 → 扫码录入 → 放抗静电内衬 → 装 AC 主机 → 放配件与说明书 → 封箱贴标签 → 纸盒合盖密封人工巡检盯不住全过程,漏步、颠倒往往到终检才暴露。
项目目标
每一步做对没有,当场判定;漏步、步骤颠倒,当场告警并记录。
硬件配置
4 个 400 万像素 POE 相机(H.265 编码,吊装 2–3 米俯拍)+ 1 台边缘智能体(分析都在车间本地,视频不出厂)+ 工位看板,一屏四画面。
实施周期
当天部署,当天上线

整个落地过程就六步,这也是本文主线:

STEP 1
架相机
拍清楚
STEP 2
标样本
告诉 AI 看什么
STEP 3
训模型
数分钟出结果
STEP 4
搭流程
拖拉拽连线
STEP 5
配状态机
把 SOP 画进去
STEP 6
上线跑
异常当场报
01

第一步:架相机,拍清楚是前提

图像拍不好,再强的模型也只能猜。这一步就一件事:让画面清晰、稳定、看得见整个工位。

做什么怎么做
机位4 个相机吊在工位上方 2–3 米,俯拍台面,双手活动区和物料位全覆盖
清晰对焦到台面后锁定,快门调快(≥1/120s),手动起来不拖影
稳定曝光、白平衡测定后锁定,灯光波动画面也不闪
流畅30 FPS + H.265 编码,动作不丢帧,4 路并发不卡网

调完别急着收工——让操作员真实做一遍,回放确认不拖影、不反光、不遮挡,才算过关。

02

第二步:标样本,告诉 AI 看什么

视觉大模型提前"见过"1 亿+ 工业图,现场只需用 1–10 张样本图告诉它要看什么。

新建任务

填个任务名,行业选"工业制造",模型类型选"物体检测"。

截图上传

每个要检测的东西(内衬、主机、配件、说明书……)从相机画面截 1–10 张,不同角度、不同光线各来一点。

框一框、划个区

智能标注自动框选,手动微调;再把台面划成检测区域,区域外的画面不参与检测,误报自然少。保存即可。

03

第三步:训模型,数分钟出结果

保存标注即开始训练,数分钟完成,不需要算法工程师驻场。训练完看两个数就够:

看指标

召回率(不能漏)和误报率(不能乱报)。SOP 场景宁可误报、不可漏报。本项目演示界面数据:准确率 98.7%、误报率 0.8%、召回率 99.2%。

定阈值

置信度阈值设 0.85——模型"没把握"的结果不算数,只进日志。不合适就在现场边跑边调。

应用模型

点"应用深度分析模型",模型随时可以被拖进工作流使用,后续还能结合现场数据持续提升。

模型异常识别效果
模型应用后的识别效果:漏检、步骤颠倒自动识别并标注置信度(演示界面)
04

第四步:搭流程,算子拖一连就通

模型是"眼睛",工作流是"神经"。把算子从库里拖出来、按顺序连上线,不写一行代码

📷 相机
4 路通道
🧠 视觉大模型
逐帧识别
⚖️ 逻辑判断
阈值过滤
🔌 内置 PLC
红灯 + 蜂鸣
🖥 外设 / MES
上屏 + 上传
📤 输出
日志报表

连好后点"校验"、再点"发布",流程即刻生效,产线不用停。明天要改流程?拖一拖、重新发布就行。

工作流模型配置面板
支撑工作流运行的模型配置面板:检测区域、阈值、处理选项集中管理
05

第五步:配状态机,把 7 步 SOP 画进系统

工作流管"每一帧对不对",状态机管"整个流程对不对"。7 步 SOP 就是 7 个状态,每步挂一个"事件探测":动作做到了,才许跳下一步

1
检查 AC 盒外观
检测到 外观检查完成 → 跳下一步
2
扫码录入系统
检测到 扫码动作 → 跳下一步
3
放入抗静电内衬
检测到 内衬已放入 → 跳下一步
4
装入 AC 主机
检测到 主机就位 → 跳下一步
5
放置配件与说明书
检测到 配件说明书就位 → 跳下一步
6
封箱贴标签
检测到 封箱贴标完成 → 跳下一步
7
纸盒合盖密封
检测到 合盖完成 → 本件闭环,复位等下一件

再配三条异常规则,SOP 监控的价值就在这三条上:

漏步
上一步没触发、下一步先出现了——跳步了,报警。
步骤颠倒
顺序和定义不一致(比如先封箱后放配件),报警。
步骤超时
某一步停太久没动静,看板黄闪提醒。

调试也省事:点一下状态卡片就能切换检测状态,不用等操作员真做一遍,几分钟验证完全部规则——下面视频里就有演示。

任务配置界面
从新建任务开始,把 SOP 的每一步与检测对象配置进系统,全程可视化
06

第六步:上线跑,异常当场就报

发布即上线。这段 49 秒实拍录屏,就是工位跑起来的真实样子:左边实时监控,右边 7 步状态随作业翻绿,中间演示了点卡片切换状态。

00:017 步 SOP 全部就绪
00:12点选步骤卡片,状态随点随切
00:22装入 AC 主机,过程实时监控
00:32全部完成,状态全绿
95.5%
实时识别率
30 FPS
检测帧率
0.85
置信度阈值
6 / 1 / 0
完成 / 进行 / 异常
SOP 检查系统:步骤 7 进行中
步骤 7「纸盒合盖密封」进行中,每步用时实时统计
SOP 检查系统:步骤 3 进行中
步骤 3「放入抗静电内衬」进行中,完成情况一目了然

出异常怎么办?发生的当下就弹窗:异常类型、置信度、哪个工位哪个人,一键直达实时画面,处理完形成记录,结果随工单上传 MES——有据可查。

07

复盘:这套流程凭什么能复制

拖拉拽——改流程不等程序员

算子拖一拖、卡片点一点,当天改当天用,产线不停。

一拖多——一台智能体拖几十路相机

工位只留看板,算力集中在边缘智能体。某高速产线项目中,一台智能体驱动 80 台 4K 相机、覆盖 16 条产线,单台检测成本降约 70%

通用泛化——换场景照样能看

同一个底座,换场景 1–10 张样本图、数分钟配置。已跑过这些行业:

纺织布匹缺陷 冶金轧钢缺陷 电子元器件缺陷 锂电软包电池 汽车齿轮 · 油箱装配 家电空调装配 · 附件包装 3C电脑组装 · 手机盖板 医疗输液配药 · 设备包装
IV

Ivan

工业视觉解决方案专家 · 本文作者

硕士学历,自动化与机器视觉方向。深耕工业视觉检测十余年,早年主导传统 AOI 算法开发,近年专注视觉大模型在制造业的工程化落地。先后交付 3C 电子、家电、汽车零部件、医疗等行业的 30 余个视觉检测与 SOP 过程监控项目。

视觉大模型SOP 过程监控少样本建模状态机编排边缘部署
一 句 话 总 结

一台视觉智能体,就是产线上的"数字质检员":看得懂每一步动作,管得住整个 SOP 流程,一台拖得起几十路相机,换个新场景——几张样本图、数分钟,又能上岗。