CN114782415A - 一种基于机器视觉的灌装桶面异常状态实时监测方法 - Google Patents

一种基于机器视觉的灌装桶面异常状态实时监测方法 Download PDF

Info

Publication number
CN114782415A
CN114782415A CN202210677220.2A CN202210677220A CN114782415A CN 114782415 A CN114782415 A CN 114782415A CN 202210677220 A CN202210677220 A CN 202210677220A CN 114782415 A CN114782415 A CN 114782415A
Authority
CN
China
Prior art keywords
computer
barrel surface
image
abnormal state
filling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202210677220.2A
Other languages
English (en)
Inventor
霍箭东
王玲
刘峰
张宇航
张超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Lanzhou Technology Co ltd
Changchun Rongcheng Intelligent Equipment Manufacturing Co ltd
Original Assignee
Changchun Lanzhou Technology Co ltd
Changchun Rongcheng Intelligent Equipment Manufacturing Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Lanzhou Technology Co ltd, Changchun Rongcheng Intelligent Equipment Manufacturing Co ltd filed Critical Changchun Lanzhou Technology Co ltd
Priority to CN202210677220.2A priority Critical patent/CN114782415A/zh
Publication of CN114782415A publication Critical patent/CN114782415A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • G06T5/30Erosion or dilatation, e.g. thinning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/215Motion-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

本发明公开了一种基于机器视觉的灌装桶面异常状态实时监测方法,通过设置在灌装设备上的摄像机实时获取桶RGB图像,并将获取的图像传递给计算机;计算机通过预设的程序对接收的图像进行处理,并判断是否发生异常;若判断结果为发生异常,计算机自动通知控制系统,控制系统控制灌装机采取相应操作。本发明算法简单,检测速度快,可以对桶面进行实时监测,在发生异常的第一时间通知控制系统,控制系统停止灌装并发出警报,以达到保护人员安全、减少物料损失、减轻设备损坏的目的。

Description

一种基于机器视觉的灌装桶面异常状态实时监测方法
技术领域
本发明涉及灌装技术领域,特别是涉及一种基于机器视觉的灌装桶面异常状态实时监测方法。
背景技术
现在的灌装机一般只对灌装过程中桶面的异常状态(例如发生冒料以及桶面存在异物等)的发生做了预防,并没有对桶面异常事件本身做监控。
目前市面上的灌装机在灌装过程中,一般会通过称重保护、灌装超时等方式来预防冒料的发生,但是由于操作失误导致称台数据失效,或者人为设置补料灌装量超出容器剩余体积时,仍然无法避免冒料事件的发生。只能依靠车间的操作人员来发现,然后急停设备,防止损害的进一步发生。但是在灌装过程中,料枪的灌装是有一定速度的,冒料以及其他异常可能在一瞬间就发生了,仅靠人的肉眼是没有办法及时观测到冒料及其他异常的发生、并停止机器灌装的,如果灌装的是有害物料,冒料会对车间工作人员的身体健康造成伤害,同时也会污染环境,如果桶面存在其他异常,可能会影响灌装准确性甚至损坏设备。
发明内容
本发明的目的是提出一种基于机器视觉的灌装桶面异常状态实时监测方法,能够在灌装机灌装的过程中实时监控灌装情况,如果有异常现象发生,控制系统可以自动停止灌装操作,从而减少灌装过程中因发生异常而造成的损失,避免异常事故发生。
为实现上述目的,本发明提供如下技术方案:一种基于机器视觉的灌装桶面异常状态实时监测方法,包括:S10,通过设置在灌装设备上的摄像机实时获取桶RGB图像,并将获取的图像传递给计算机;S20,计算机通过预设的程序对接收的图像进行处理,并判断是否发生异常;S30,若判断结果为发生异常,计算机自动通知控制系统,控制系统控制灌装机采取相应操作。
进一步地,所述S20中的预设程序采用两种方法同时对是否发生异常进行判断,只要其中一种方法的判断结果为发生异常,则认为发生异常。
进一步地,所述S20中预设程序的一种判断方法为:通过计算机将接收到的实时获取的RGB图像转化为HSV空间图像;通过计算机对上一步得到的HSV空间图像进行掩膜覆盖;通过计算机对上一步得到的图像进行二值化,得到一个能表现出反射光线强弱分布的图像;通过计算机对上一步得到的图像进行腐蚀操作,处理掉光线较弱的区域;通过计算机对上一步得到的图像进行膨胀操作,增强光线较强的区域,弱化光线较弱的区域;通过计算机检测图像中白色像素点的个数,与预设的阈值区间进行比较,当白色像素点个数不在预设的阈值区间时,认为发生了异常。
进一步地,通过选定色调、饱和度、亮度的上下限对原图进行掩膜覆盖。
进一步地,通过更改所述阈值可以适应不同环境桶面的异常进行监测。
进一步地,所述S20中预设程序的另一种判断方法:通过计算机对接收到的实时RGB图像进行下采样,将得到的采样点像素值与环境图像集中图像的像素值均值进行比较,得到差值;通过计算机将上一步得到的差值按照预设的像素差阈值进行分割,用来减少噪音的影响;通过计算机统计差值大于预设的像素差阈值的采样点,得到整张图像的移动差值,如果移动差值的数量大于预设的采样点数量阈值的时候,认为发生了异常。
进一步地,通过计算机将移动差值用颜色标注进行标注,可以直观观察桶面异常情况。
进一步地,通过更改所述像素差阈值和采样点数量阈值可以对不同环境桶面的异常进行监测。
与现有技术相比本发明的有益效果是:本发明提供的一种基于机器视觉的灌装桶面异常状态实时监测方法,算法简单,检测速度快,可以对桶面状态进行实时监测,在发生异常的第一时间通知控制系统,控制系统停止灌装并发出警报,以达到保护人员安全、减少物料损失、减轻设备损坏的目的。
使用两种机器视觉方法同时判断异常现象的发生,增加异常监控结果的可靠性,同时异常结果可视化,便于直观观察。采用帧差法通过对视频图像序列中的相邻两帧作差分运算来获取运动目标轮廓的方法,可以很好地适用于存在多个运动目标和摄像机移动的情况。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明的一种基于机器视觉的灌装桶面异常状态实时监测方法流程图。
图2是本发明判断方法一的掩膜值设置UI界面示意图。
图3是本发明判断方法二的参数设置示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
图1示出了一种基于机器视觉的灌装桶面异常状态实时监测方法的流程图。
S10,通过设置在灌装设备上的摄像机实时获取桶RGB图像,并将获取的图像传递给计算机。
S20,计算机通过预设的程序对接收的图像进行处理,并判断是否发生异常。
为了增加冒料监控结果的可靠性,所述S20中的预设程序采用两种方法同时对是否发生异常进行判断,只要其中一种方法的判断结果为发生异常,则认为发生异常。
本实施例中优选的,所述S20中预设程序的判断方法一:灌装过程中如果桶面有液体或异物的情况下,照射到桶面上的光线会被散射,导致桶面的反光程度会比正常桶面反光程度弱一些,本发明利用这个原理提出了一种冒料监控方法。
通过计算机将接收到的实时获取的RGB图像转化为HSV空间图像。
通过计算机对上一步得到的HSV空间图像进行掩膜覆盖;HSV空间的图像由色调H,饱和度S和明度V组成,可以通过如图2所示的可视化界面通过选定色调、饱和度、亮度的上下限对原图进行掩膜覆盖。
首先可以通过调整HSV控件的最小值L(H,S,V)和最大值U(H,S,V)来确定来设置HSV掩膜,本实施例中将LH、LS、LV均设置为0,将UH、US、UV分别设置为180、255、255;然后可以通过调整ERODE的值来设置腐蚀操作窗口的大小,本实施例中ERODE值设置为1;最后通过调整DLATE的值来确定膨胀操作的窗口大小,本实施例中DLATE值设置为1。不同的灌装桶型,不同的设备可以根据实际灌装环境来设置不同掩膜值,如果灌装环境有变化,还可以使用图2的界面来修改已经设置好的掩膜值。
通过计算机对上一步得到的图像进行二值化,得到一个能表现出反射光线强弱分布的图像。
通过计算机对上一步得到的图像进行腐蚀操作,处理掉光线较弱的区域。
通过计算机对上一步得到的图像进行膨胀操作,增强光线较强的区域,弱化光线较弱的区域。
通过计算机检测图像中白色像素点的个数,与预设的阈值区间进行比较,当白色像素点个数不在预设的阈值区间时,认为发生了异常。经过HSV掩膜和二值化处理以后,正常图像和冒料图像的差异非常明显,正常图像上的白色像素点比较多,而冒料图像上的白色像素点比较少,再经过膨胀腐蚀运算以后,正常图像和冒料图像间的差异会变得更加明显,冒料图像上的白色像素的个数要远远小于正常图像上的白色像素的个数,因此只要选择一个合适的阈值,就可以把冒料图像和正常图像区分开,还可以通过更改所述阈值可以适应不同环境桶面的异常进行监测。不同图像的特征不一样,所以可以根据灌装桶型的不同对不同桶型设置不同的阈值,例如灌装IBC桶的时候,阈值区间可以设置为19000—20000,灌装铁桶的时候,阈值区间可以设置为49000—50000。
本实施例中优选的,所述S20中预设程序的另一种判断方法是基于帧差法的移动侦查对异常事件进行监控。通过对视频图像序列中的相邻两帧作差分运算来获取运动目标轮廓的方法,它可以很好地适用于存在多个运动目标和摄像机移动的情况。当监控场景中出现异常物体运动的时候,帧与帧之间会出现较为明显的差别,两帧相减,得到两帧图像亮度差的绝对值,判断它是否大于阈值来分析视频或图像序列的运动特征,从而确定图像序列中有无物体运动。
灌装机正常灌装时图像画面相对静止,两帧图像间的差值较小,但是当发生冒料或其他异常情况的时候,前后两帧图像的像素值会产生较大的差别,并且变化前后的差值会相差百倍以上,因此我们把这个差值作为判断冒料或其他异常情况发生的依据。
具体的:首先把最近采集的几帧图像保存到图像池中,用这些图像制作环境图像集。
如图3所示,通过计算机对接收到的实时RGB图像进行下采样,下采样倍数为10,将得到的采样点像素值与环境图像集中图像的像素值均值进行比较,得到差值。
通过计算机将上一步得到的差值按照预设的像素差阈值进行分割,用来减少噪音的影响。
通过计算机统计差值大于预设的像素差阈值的采样点,得到整张图像的移动差值,如果移动差值的数量大于预设的采样点数量阈值的时候,认为发生了异常。本实施例中预设的采样点数量阈值设置为10000,通过更改所述像素差阈值和采样点数量阈值可以对不同环境桶面的异常进行监测。
为了使操作人员能够直观观察,本实施例进一步地通过计算机将移动差值用颜色标注进行标注,并在图像中显示出来,操作人员可以直观地看到出现异常状态的区域。
S30,若判断结果为发生异常,计算机自动通知控制系统,控制系统控制灌装机采取相应停机操作并发出警报提示操作人员,以达到保护人员安全、减少物料损失、减轻设备损坏的目的。
以上对本发明所提供的一种基于机器视觉的灌装桶面异常状态实时监测方法进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (8)

1.一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,包括:
S10,通过设置在灌装设备上的摄像机实时获取桶RGB图像,并将获取的图像传递给计算机;
S20,计算机通过预设的程序对接收的图像进行处理,并判断是否发生异常;
S30,若判断结果为发生异常,计算机自动通知控制系统,控制系统控制灌装机采取相应操作。
2.根据权利要求1所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,所述S20中的预设程序采用两种方法同时对是否发生异常进行判断,只要其中一种方法的判断结果为发生异常,则认为发生异常。
3.根据权利要求2所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,所述S20中预设程序的一种判断方法为:
通过计算机将接收到的实时获取的RGB图像转化为HSV空间图像;
通过计算机对上一步得到的HSV空间图像进行掩膜覆盖;
通过计算机对上一步得到的图像进行二值化,得到一个能表现出反射光线强弱分布的图像;
通过计算机对上一步得到的图像进行腐蚀操作,处理掉光线较弱的区域;
通过计算机对上一步得到的图像进行膨胀操作,增强光线较强的区域,弱化光线较弱的区域;
通过计算机检测图像中白色像素点的个数,与预设的阈值区间进行比较,当白色像素点个数不在预设的阈值区间时,认为发生了异常。
4.根据权利要求3所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,通过选定色调、饱和度、亮度的上下限对原图进行掩膜覆盖。
5.根据权利要求3所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,通过更改所述阈值可以适应不同环境桶面的异常进行监测。
6.根据权利要求2所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,所述S20中预设程序的另一种判断方法:
通过计算机对接收到的实时RGB图像进行下采样,将得到的采样点像素值与环境图像集中图像的像素值均值进行比较,得到差值;
通过计算机将上一步得到的差值按照预设的像素差阈值进行分割,用来减少噪音的影响;
通过计算机统计差值大于预设的像素差阈值的采样点,得到整张图像的移动差值,如果移动差值的数量大于预设的采样点数量阈值的时候,认为发生了异常。
7.根据权利要求6所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,通过计算机将移动差值用颜色标注进行标注,可以直观观察桶面异常情况。
8.根据权利要求6所述的一种基于机器视觉的灌装桶面异常状态实时监测方法,其特征在于,通过更改所述像素差阈值和采样点数量阈值可以对不同环境桶面的异常进行监测。
CN202210677220.2A 2022-06-16 2022-06-16 一种基于机器视觉的灌装桶面异常状态实时监测方法 Withdrawn CN114782415A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210677220.2A CN114782415A (zh) 2022-06-16 2022-06-16 一种基于机器视觉的灌装桶面异常状态实时监测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210677220.2A CN114782415A (zh) 2022-06-16 2022-06-16 一种基于机器视觉的灌装桶面异常状态实时监测方法

Publications (1)

Publication Number Publication Date
CN114782415A true CN114782415A (zh) 2022-07-22

Family

ID=82420680

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210677220.2A Withdrawn CN114782415A (zh) 2022-06-16 2022-06-16 一种基于机器视觉的灌装桶面异常状态实时监测方法

Country Status (1)

Country Link
CN (1) CN114782415A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116026534A (zh) * 2023-03-29 2023-04-28 山东卫肤药业有限公司 一种基于物联网的灌装设备气密性检测系统
CN117474902A (zh) * 2023-12-25 2024-01-30 山东明佳科技有限公司 一种桶面料包的缺包检测方法、系统、设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101765025A (zh) * 2008-12-23 2010-06-30 北京中星微电子有限公司 一种监控摄像设备异常检测的系统及方法
CN110503017A (zh) * 2019-08-12 2019-11-26 北京交通大学 基于图像处理的智慧节能室内人数检测系统与方法
CN112149543A (zh) * 2020-09-16 2020-12-29 北京工业大学 一种基于计算机视觉的建筑扬尘识别系统与方法
CN113411573A (zh) * 2021-07-30 2021-09-17 广东电网有限责任公司东莞供电局 电网监控系统检测方法、装置、计算机设备及介质
CN114565882A (zh) * 2022-04-29 2022-05-31 深圳航天信息有限公司 基于多视频摄像头智能联动的异常行为分析方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101765025A (zh) * 2008-12-23 2010-06-30 北京中星微电子有限公司 一种监控摄像设备异常检测的系统及方法
CN110503017A (zh) * 2019-08-12 2019-11-26 北京交通大学 基于图像处理的智慧节能室内人数检测系统与方法
CN112149543A (zh) * 2020-09-16 2020-12-29 北京工业大学 一种基于计算机视觉的建筑扬尘识别系统与方法
CN113411573A (zh) * 2021-07-30 2021-09-17 广东电网有限责任公司东莞供电局 电网监控系统检测方法、装置、计算机设备及介质
CN114565882A (zh) * 2022-04-29 2022-05-31 深圳航天信息有限公司 基于多视频摄像头智能联动的异常行为分析方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116026534A (zh) * 2023-03-29 2023-04-28 山东卫肤药业有限公司 一种基于物联网的灌装设备气密性检测系统
CN116026534B (zh) * 2023-03-29 2023-06-23 山东卫肤药业有限公司 一种基于物联网的灌装设备气密性检测系统
CN117474902A (zh) * 2023-12-25 2024-01-30 山东明佳科技有限公司 一种桶面料包的缺包检测方法、系统、设备和存储介质
CN117474902B (zh) * 2023-12-25 2024-03-12 山东明佳科技有限公司 一种桶面料包的缺包检测方法、系统、设备和存储介质

Similar Documents

Publication Publication Date Title
CN114782415A (zh) 一种基于机器视觉的灌装桶面异常状态实时监测方法
KR102321765B1 (ko) 디스플레이 장치 품질 검사 방법, 장치, 전자 장치 및 저장 매체
CN112837302B (zh) 模具的状态监测方法、装置、工控机、存储介质及系统
CN108830824A (zh) 输液液面视觉检测报警系统及其检测方法
CN112215810B (zh) 一种疲劳测试裂纹监测方法及装置
CN112131951B (zh) 一种自动化识别施工中违规使用梯子行为的系统
CN111064870A (zh) 视觉机器人的镜头清洁方法、控制装置及存储介质
CN114881915A (zh) 一种基于对称性的手机玻璃盖板视窗区缺陷检测方法
CN114331997A (zh) 一种基于图像识别的导线缺陷监测方法
CN113808135B (zh) 图像亮度异常检测方法、电子设备及存储介质
CN105554494A (zh) 雪点图像检测方法和装置以及视频质量检测装置和系统
CN109579934A (zh) 水浸多重监测方法及系统
CN116778837A (zh) 一种多功能显示器故障检测平台
CN112581472B (zh) 一种面向人机交互的目标表面缺陷检测方法
CN116309307A (zh) 焊缝缺陷检测方法、装置、可读存储介质及电子设备
CN114757888A (zh) 一种基于纹理特征的挡风玻璃脏污检测方法
CN114219758A (zh) 缺陷检测方法、系统、电子设备和计算机可读存储介质
Usamentiaga et al. Jam detector for steel pickling lines using machine vision
CN111815705A (zh) 激光跟踪仪滤光保护镜片污染识别方法、装置及电子设备
CN101571768A (zh) 防止屏幕光标异常运动的方法
CN110309838A (zh) 基于指数变换的视频检测区物体轮廓检测预处理方法
CN117541615B (zh) 一种自动铺网装置的螺栓松动检测方法
CN117333483B (zh) 一种用于金属凹陷结构底部的缺陷检测方法及装置
CN118101924A (zh) 一种用于后厨画面质量分析的方法
CN109374255B (zh) 一种基于视觉的电梯控制柜中接触器故障实时检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20220722

WW01 Invention patent application withdrawn after publication