CN115291765B - 联排安瓿瓶识别系统及识别方法及储存介质 - Google Patents

联排安瓿瓶识别系统及识别方法及储存介质 Download PDF

Info

Publication number
CN115291765B
CN115291765B CN202211196372.7A CN202211196372A CN115291765B CN 115291765 B CN115291765 B CN 115291765B CN 202211196372 A CN202211196372 A CN 202211196372A CN 115291765 B CN115291765 B CN 115291765B
Authority
CN
China
Prior art keywords
ampoule
liquid level
row
bottle
bottles
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211196372.7A
Other languages
English (en)
Other versions
CN115291765A (zh
Inventor
唐仕秀
严玉玺
江志伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Puth Pharmaceutical Co ltd
Original Assignee
Chengdu Puth Pharmaceutical Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Puth Pharmaceutical Co ltd filed Critical Chengdu Puth Pharmaceutical Co ltd
Priority to CN202211196372.7A priority Critical patent/CN115291765B/zh
Publication of CN115291765A publication Critical patent/CN115291765A/zh
Application granted granted Critical
Publication of CN115291765B publication Critical patent/CN115291765B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/24Aligning, centring, orientation detection or correction of the image
    • G06V10/242Aligning, centring, orientation detection or correction of the image by image rotation, e.g. by 90 degrees
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/28Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • G16H20/17ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients delivered via infusion or injection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Medicinal Chemistry (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Primary Health Care (AREA)
  • Public Health (AREA)
  • Image Processing (AREA)

Abstract

本发明提供了联排安瓿瓶识别系统及识别方法及储存介质,涉及到一种计算机技术,由第一方面的联排安瓿瓶识别系统,第二方面的联排安瓿瓶识别方法,以及储存介质构组。其中识别系统的识别界面中具有用于将联排安瓿瓶照片展示的浏览窗口,显示虚拟联排瓶图像的示意图窗口,虚拟联排瓶设置液位参考线,液位参考线上方设置超液位警示线和下方设置低液位警示线,还具有图文标记用于标记联排安瓿瓶的所属种类。本发明通过在安瓿瓶支中查找的液面水平线和挂壁线之间的间距,与安瓿瓶支内腔左右间的宽度,计算间距与宽度的比例,得出属于哪一种内腔宽度的安瓿瓶支,以此对联排安瓿瓶进行识别并分类。

Description

联排安瓿瓶识别系统及识别方法及储存介质
技术领域
本发明涉及到一种计算机技术,尤其是一种联排安瓿瓶识别方法及系统及储存介质。
背景技术
塑料联排安瓿瓶常用于灌装小剂量一次性单支装滴眼液、护肤品或化妆品液剂,各类药剂。常规的灌装工艺是用原料成型,成为联排且可拆分为多支的安瓿瓶支然后灌装药液,然后封口完成。
生产中常将不同规格尺寸的安瓿瓶设计为相同外形(同外形但不同尺寸,类似等比例放大或缩小),因此使这些塑料联排安瓿瓶比例一样,形状一样,而尺寸不同,内部装药腔管径不同,因此具有不同的装药量。
当相同药剂但不同规格的塑料联排安瓿瓶从前端的生产线出来后,流转到后期的混合包装线(不同规格的塑料联排安瓿瓶在后端进行质量检查、贴标识、包外包装盒等),如何自动分识出联排安瓿瓶所属规格、联排安瓿瓶装药量是否正常,挤压成型时是否变形外胀或者内凹,这些工作,一般是由工作人员目视来进行辨识和分类,目前开发出相应的智能设备处理在处理相应工作时运用效果并不佳。
专利CN114565848A公开了一种复杂场景的药液液位检测方法及系统,是利用对联排安瓿瓶拍照后,通过大量训练样本进行训练后,获得识别出液位的高低的智能系统。但是该技术一方面是需要进行大量的样本训练,而且在运行时需要占用较大的计算机算力;二是相同外观(外形比例相同)但不同规格的塑料联排安瓿瓶不能分类识别出。
发明内容
为了解决上述问题,本发明提供了一种联排安瓿瓶识别方法及系统及储存介质,可以通过照片识别出其中的联排安瓿瓶具体属于何种类的联排安瓿瓶。本发明由第一方面的联排安瓿瓶识别系统,第二方面的联排安瓿瓶识别方法,以及储存介质组成。
其中,本发明第一方面的联排安瓿瓶识别系统,具有由存储器、处理器、显示器组成的计算机装置,存储器中存储有计算机程序,计算机程序被处理器执行时,向显示器推送识别界面。识别界面中:
(1)具有浏览窗口,用于按序将若干联排安瓿瓶照片进行显示。
(2)具有示意图窗口,用于显示若干示意图,示意图为由若干虚拟瓶构成的虚拟联排瓶图像,其中虚拟联排瓶与联排安瓿瓶一一对应,且虚拟瓶与安瓿瓶支一一对应。
虚拟联排瓶中部处设置有用于显示液位参考线的参考线区域,液位参考线上方设置超液位警示线和下方设置低液位警示线。
(3)具有图文标记,对浏览窗口中的每个联排安瓿瓶进行标记,标记内容为联排安瓿瓶的所属种类。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述的联排安瓿瓶照片具体为裁剪图像,联排安瓿瓶照片中具有呈直立状态的联排安瓿瓶,联排安瓿瓶由若干安瓿瓶支构成,且安瓿瓶支中装有液体,裁剪图像是对照片裁除背景保留的联排安瓿瓶的图像。
所述的联排安瓿瓶:以第一支安瓿瓶支所在方向为联排安瓿瓶的左侧,并以最后一支安瓿瓶支所在方向为右侧;以安瓿瓶支的瓶底为下边,相对应的瓶口为上边。
所述的直立状态为:以左侧、右侧、上边、下边四个方向包围构成的平面垂直于水平面。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述计算机装置具有输入装置。
所述界面中还设置有放大显示浮窗,放大显示浮窗通过显示与非显示的方式设置在界面中任意位置。
当输入装置点选任意裁剪图像时,界面弹出放大显示浮窗,并将被点选的裁剪图像投放到放大显示浮窗中,并放大显示。
当输入装置点选任意虚拟联排瓶时,界面弹出放大显示浮窗,将被点选的虚拟联排瓶对应的联排安瓿瓶的裁剪图像投放到放大显示浮窗中,并放大显示。
所述的输入装置为鼠标时:当鼠标处于放大显示浮窗内放大显示浮窗保持显示,当鼠标未处于放大显示浮窗内时放大显示浮窗在显示一段时间后自动关闭。
所述的输入装置为触摸屏时:当持续触摸于放大显示浮窗内时放大显示浮窗保持显示,当放弃触摸放大显示浮窗内时放大显示浮窗在显示一段时间后自动关闭。
输入装置点击关闭按键关闭放大显示浮窗。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述的浏览窗口按如下方式之一进行设置:
(1)所述的浏览窗口由若干按横向排列的显示格组成,将所述裁剪图像展示于显示格内;在每一个显示格下方对应一个用于显示示意图的示意格,所述的图文标记与示意图并列显示于示意格内;所述图文标记、示意图与裁剪图像同步对应显示。
(2)所述的浏览窗口为横向的流水播放窗口,用于流水播放裁剪图像。
示意图窗口设置在浏览窗口下方,同样为流水播放窗口,并用于流水播放示意图及图文标记;示意图以及所述图文标记与浏览窗口中的裁剪图像对应。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述界面中还具有:
(1)播放和停止播放按键,用于控制浏览窗口中裁剪图像以及示意图窗口中的示意图、图文标记在播放显示和定格显示中切换。
(2)浏览窗口布局切换按键,用于控制将浏览窗口在显示格和流水播放窗口之间进行切换;示意图窗口跟随浏览窗口相应切换。
(3)统计窗口,用于显示已识别联排安瓿瓶的统计数据。
(4)液位参考线切换按键,用于切换液位参考线的显示与非显示状态。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述液位参考线根据操作指令在参考线区域进行显示与非显示。
所述联排安瓿瓶的所属种类包括:属于第一种联排安瓿瓶,属于第二种联排安瓿瓶,属于第一类内腔宽度的安瓿瓶,属于第二类内腔宽度的安瓿瓶。
所述的超液位警示线、低液位警示线均在液位参考线上方和下方进行显示与非显示,具体为:
当联排安瓿瓶中所有安瓿瓶支的液面高度相同时,设为第一种联排安瓿瓶,否则为第二种联排安瓿瓶;当联排安瓿瓶为第二种联排安瓿瓶时,将液面高度高于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶的超液位警示线进行显示且低液位警示线非显示,将液面高度低于其余安瓿瓶支液面高度的安瓿瓶支所对应的虚拟瓶的低液位警示线进行显示且超液位警示线非显示。
当联排安瓿瓶为第一种联排安瓿瓶时超液位警示线、低液位警示线均为非显示。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述虚拟联排瓶上方、下方之一设置有指示于每一个虚拟瓶的液位异常指示图标,液位异常指示图标以显示与非显示状态设置;当联排安瓿瓶为第二种联排安瓿瓶时,将指示于液面高度不同于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶的液位异常指示图标进行显示;当联排安瓿瓶为第一种联排安瓿瓶时,所有液位异常指示图标为非显示。
在第一方面的联排安瓿瓶识别系统中,更进一步说明为,所述的虚拟瓶设置有警示颜色。
当联排安瓿瓶为第二种联排安瓿瓶时,将液面高度不同于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶展示警示颜色。
本发明第二方面为联排安瓿瓶识别方法,本发明的方法是通过第一方面的联排安瓿瓶识别系统中实现的,方法包括:
导入联排安瓿瓶照片。
在照片中查找到属于液面的图像,其中具有液面水平线以及高于液面水平线的并由液体挂壁现象生成的挂壁线。
当联排安瓿瓶中所有安瓿瓶支的液面高度相同时,设为第一种联排安瓿瓶,否则为第二种联排安瓿瓶;所述的高度为属于液面的图像在安瓿瓶支上下方向的位置。
针对第一种联排安瓿瓶:识别液面水平线与挂壁线之间的间距,识别安瓿瓶支内腔左右间的宽度,计算所述间距与宽度的比例;当所述比例低于设定阈值时,识别为由第一类内腔宽度的安瓿瓶支组成的联排安瓿瓶,当比例高于设定阈值时,识别为由第二类内腔宽度的安瓿瓶支组成的联排安瓿瓶。
上述第二方面的联排安瓿瓶识别方法,更进一步说明为,所述在照片中查找到属于液面的图像,方法如下:
S1:对照片进行裁剪并保留照片中的联排安瓿瓶,得到裁剪图像。
S2:将所述裁剪图像二值化处理后,并进行拉伸、旋转处理,使联排安瓿瓶上边、下边处于水平方向,左侧、右侧垂直于水平方向,得到整形图像。
S3:在所述整形图像上边与下边之间的中部处确定为扫描范围,将高度与扫描范围高度相同的像素列去除,并去除杂点,余下的多个连通域识别为每支安瓿瓶支的属于液面的图像。
所述安瓿瓶支内腔左右间的宽度,具体为:其中一支安瓿瓶支的属于液面的图像最左侧像素点所在的像素列与最右侧像素点所在像素列之间的距离。
上述第二方面的联排安瓿瓶识别方法,更进一步说明为,所述的液面水平线、挂壁线查找方法为:
将所有属于液面的图像组合,然后按S2步骤中旋转处理时旋转的角度整体进行反向旋转,使属于液面的图像回归到裁剪图像中的倾斜状态和相对位置。
在每一个属于液面的图像中,查找到最下方像素点所在的像素行是液面水平线,最上方像素点所在像素行是挂壁线。
上述第二方面的联排安瓿瓶识别方法,更进一步说明为,所述的第二种联排安瓿瓶为装液量不合格或组合式装液之一。
所述的第一种联排安瓿瓶为装液量合格或均量装液之一。
所述的第一类内腔宽度的安瓿瓶支的内腔宽度大于第二类内腔宽度的安瓿瓶支。
本发明的储存介质,存储有计算机程序,所述计算机程序被硬件执行以实现上述的联排安瓿瓶识别方法。
有益的技术效果:
本发明识别方法,是通过联排安瓿瓶的照片,可以更准确地识别出联排安瓿瓶中的每一个安瓿瓶支的装液量是否正常,以及联排安瓿瓶中其余安瓿瓶支装液量是否相同。
本发明通过在安瓿瓶支中查找的液面水平线和挂壁线之间的间距,与安瓿瓶支内腔左右间的宽度(这里是指照片中的宽度,它和实际的宽度不同),计算所述间距与宽度的比例,得出安瓿瓶支属于哪一种内腔宽度(安瓿瓶支实际的宽度)的安瓿瓶支,以此对联排安瓿瓶进行知识辨识并分类。本发明的液面水平线是液体表面自然形成的水平线;查找的挂壁线,是由于液体与瓶的内壁面的摩擦力和液体表面张力的作用下,出现的高于液面水平线并附着于安瓿瓶支内壁的液体。
本发明的识别联排安瓿瓶的系统操作方便,交互界面更为友好,能很好地将识别结果展示于用户,并接受用户的指令调用出识别结果,让展示的结果更直观。本发明的系统界面能很好地执行本发明的识别方法。
附图说明
为了更清楚地说明本申请实施例涉及到的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,然而,下面描述中的附图只是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以轻易根据这些附图获得其他的附图。
图1为本发明的联排安瓿瓶识别系统结构图;
图2为本发明的联排安瓿瓶识别系统界面示意图,其中的浏览窗口为横向排列的显示格组成;
图3为本发明的联排安瓿瓶识别系统界面另一示意图,其中的浏览窗口为流水播放窗口;
图4为本发明系统界面中的放大显示浮窗示意图;
图5为联排安瓿瓶结构图;
图6为虚拟联排瓶结构图;
图7为查找液面示意图;
图8为第一类内腔宽度的安瓿瓶和第二类内腔宽度的安瓿瓶液面高度相同,宽度不同示意图;
图9为本发明方法流程图;
图10为联排安瓿瓶分析流程图。
其中,显示屏1;浏览窗口2;示意图窗口3;统计窗口4;放大显示浮窗5;裁剪图像6;虚拟联排瓶7;图文标记10;液位异常指示图标11;播放和停止播放按键21;液位参考线切换按键22;浏览窗口布局切换按键23;安瓿瓶支61;属于液面的图像62;连接缝63;第一类内腔宽度的安瓿瓶支64;第二类内腔宽度的安瓿瓶支65;扫描范围66;液面水平线67;挂壁线68;虚拟瓶71;参考线区域72;液位参考线73;超液位警示线74;低液位警示线75;液面水平线与挂壁线之间的间距L1;安瓿瓶支内腔左右间的宽度L2
具体实施方式
以下是接合附图1-10对本发明的实现方式进行说明。
在对本发明的实施方式描述中,使用到了表达方位的或位置关系的“上”“下”“左”“右”“前”“后”等词汇,这些表达方位或位置的词汇的运用,仅是为了便于结合本发明的附图进行描述本发明,并利于简化描述,让本领域技术人员更容易理解本发明,而不是指示或暗示本发明的实现必须具有特定的方位或者是必须以特定的方位操作,因此不能理解这些表达方位的词汇是对本发明的限制。
示例一:
本发明的联排安瓿瓶识别方法,是通过计算机系统进行运行实现的,也就是通过本发明的联排安瓿瓶识别系统实现,将本发明的方法通过编程制作为系统后,安装于计算机中。因此,为支持本发明的系统及方法的实现,本发明的计算机硬件可以采用如下的设计。
本发明的联排安瓿瓶识别系统以计算机为基础进行构建,比如个人计算机(台式机或笔记本电脑)、平板电脑。
为了满足于本发明的识别系统,本发明的计算机(台式电脑、笔记本电脑、平板电脑)应当是具有如下结构:包括处理器、存储器、显示屏1、输入设备(在计算机为台式机或笔记本电脑的情况下,输入设备包括鼠标和键盘输入;在计算机为平板电脑的情况下,输入设备为触摸屏输入)。参考图1,计算机系统还具有总线02和通信接口03,其中,处理器01、通信接口03和存储器04通过总线02连接。这里的存储器04为:包含高速随机存取存储器(RAM),或者外部存储器(例如至少一个磁盘存储器、USB接口固态盘存储器)。这里的总线02可以是ISA总线、PCI总线或EISA总线等。总线02可以分为地址总线、数据总线、控制总线等。这里的处理器01为集成电路芯片,具有信号的处理能力。在实现过程中,本发明的识别方法的各步骤可以通过处理器01中的硬件的集成逻辑电路的指令完成。本发明的处理器01可以是通用处理器,例如中央处理器(CPU);还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。
示例二:
本示例提供了存储介质,在存储介质中,存储有计算程序,本发明的识别方法被编写为计算机程序存储为介质中,该计算机程序被硬件执行时,可以实现本发明的联排安瓿瓶识别方法。在一个示例中,本发明的存储介质为上述的存储器04,包含高速随机存取存储器(RAM),或者外部存储器(例如至少一个磁盘存储器、USB接口固态盘存储器、光盘)。
示例三:
本发明是通过上述示例一、二中的计算硬件对装有液体的联排安瓿瓶在直立状态下获取的照片进行图像处理,基于图像处理后获得本发明的需要的结果。因此,对于如何获得联排安瓿瓶的照片,本示例提供如下方法供参考:
1、联排安瓿瓶姿态是直立状态。
联排安瓿瓶是由若干支安瓿瓶支61构成,安瓿瓶支之间可拆分,因此安瓿瓶支之间具有明显的轮廓界线,其中,参考图5,本发明是以联排安瓿瓶中的第一支安瓿瓶支(图5左侧的那一支)所在方向为联排安瓿瓶的左侧,并以最后一支安瓿瓶支(图5右侧的那一支)所在方向为右侧,以此区别联排安瓿瓶左右。然后以安瓿瓶支的瓶底为下边,从而与下边相对应的为上边,也就是作为安瓿瓶支的瓶口方向。
这样一来,将联排安瓿瓶的左侧、右侧、上边、下边四个方向包围,可以构成一个虚拟的平面。联排安瓿瓶的直立状态为:以构成的虚拟的平面垂直于水平面。也就是,虚拟平面不可以向前面或后面倾斜。但不排除联联排安瓿瓶向可左侧或右侧的任意方向倾斜不超过30°。
2、获得照片的设备。
获得照片的设备为计算机外部硬件设备,具体为摄像头。例如海康威视的130万像素工业摄像头专用于视觉检测,可以满足本发明在生产线上获取照片使用。通过摄像头对生产线上的联排安瓿瓶抓取照片,然后传回计算装置,导入至本发明的识别联排安瓿瓶的系统进行处理。
3、获得照片的场景。
优选示例为生产线后端的混合包装处,例如同种药剂多种规格的联排安瓿瓶从灌装生产线出来后,预备进行分装,在分装前由本发明的系统参考进行规格的识别和分选,其目的是为了对质量进行检测和把控,剔除具有包装破损、鼓胀变形、内凹变形、药剂装药量超量或装量不足的联排安瓿瓶。
在混合包装处,联排安瓿瓶在生产线上流转传送时,经过摄像头处,通过传送带上的矫正挡片使其产生直立状态,在直立状态度下摄取照片。或者机械抓手让联排安瓿瓶产生直立状态,在直立状态下摄取照片。
4、获得照片的背景。
优选示例为通过分光板发白光,作为获得照片的背景,以提高系统对联排安瓿瓶的处理效率和准确率。在摄取照片时,直立状态的联排安瓿瓶前面尽量垂直于摄像头的中心轴线,为了获得更清晰的安瓿瓶支的液面图像,摄像机以距离不超过100mm的距离进行微距摄影,可以获得更为清晰的安瓿瓶支的液面图像。
示例四:
本发明的联排安瓿瓶识别系统以计算机为基础进行构建,计算机包括有输入设备、显示屏1。
其中,本发明的系统通过显示屏1与用户交互,并将本发明的功能展现于显示屏1中。包括在显示屏1中展示了识别界面,这里的识别界面中具有用于显示裁剪图像6的浏览窗口2、显示与裁剪图像对应的示意图的示意图窗口3、显示联排安瓿瓶被划分的种类的图文标记10。
在一个示例中,浏览窗口2按如下方式进行设置:
参考图2,浏览窗口由3-7个显示格按横向排列的方式组成,显示格与显示格之间通过共有边界分割,显示格采用白色的背景板,将经过裁剪后的裁剪图像6投放到显示格内,占据显示格大部分面积,显示格内的裁剪图像6是没有经过矫正的,也就是没有经过调色或拉伸、旋转的图像,仅通过裁剪去除部分背景,当然由于裁剪前不可能将背景去除干净,因此还存在部分背景像素,是被请允许的。这些裁剪图像中,有部分是在拍摄联排安瓿瓶照片时联排安瓿瓶处于左右倾斜状态,因此照片中的联排安瓿瓶也是左右倾斜状态,投放到显示格中的裁剪图像为左右倾斜状态是允许的,由于液面在任何状态下均是水平的,因此保持拍摄照片时的状态,有利于用户在裁剪图像中进一步观察到真实的液位。当用户认为某个联排安瓿瓶有异常时,可以定格显示该联排安瓿瓶,然后详细查看浏览窗口中认为有异常的联排安瓿瓶。
浏览窗口工作时,后端不断地获得新拍摄的照片,不断地对新拍摄的照片进行处理后,裁剪图像6不断地投放到浏览窗口中,浏览窗口按照片拍摄的先后顺序将每一个裁剪图像先后进行展示,当照片中的联排安瓿瓶为第一种联排安瓿瓶时,显示格仅对该裁剪图像展示较短时间,例如1s-3s;当照片中的联排安瓿瓶为第二种联排安瓿瓶时,这种需要引起用户的注意,显示格便对该裁剪图像展示较长时间,例如3s-10s,当然,其它展示的第一种联排安瓿瓶的显示格不必停止等侍,而是继续用较短时间展示,然后切换到下一裁剪图像。
参考图2,在每一个显示格下方对应一个用于显示示意图的示意格,示意格宽度同显示格,示意格之间也采用共有边界进行分格,一个示例中,把图文标记10与示意图并列显示于示意格内,每一个示意图的下方显示图文标记。示意图以及图文标记与浏览窗口中的裁剪图像同步对应显示,当一个显示格显示一张裁剪图像时,该显示格下方的示意格内显示虚拟联排瓶7,且所显示的虚拟联排瓶中展示的超液位警示线74、低液位警示线75、液位异常指示图标11均是根据对上方的显示格中所展示的这一张裁剪图像的来源照片进行处理获得的参数进行的展示,一个示例中,联排安瓿瓶A裁剪后获得裁剪图像并被投放到第一个显示格中,同时系统对联排安瓿瓶A获得属于液面的图像,并分析后得到联排安瓿瓶中第一支安瓿瓶支超出其余安瓿瓶支液位,因此将第一个显示格下方的第一示意格内显示的虚拟联排瓶的第一支虚拟瓶的超液位警示线74以及液位异常指示图标11点亮显示。
在一个示例中(图中未示出),将一排3-7个显示格和下方对应的示意格设置为一排工作窗口,在识别界面中展示上下共2-3排工作窗口,有效利用显示屏空间,以便能同时展示更多裁剪图像,并能使每一裁剪图像在显示格中可以显示更长的时间。
在另一个示例中,浏览窗口2按如下方式进行设置:
参考图3,所述的浏览窗口为横向的流水播放窗口,用于流水播放裁剪图像6;流水播放窗口从识别界面的左侧贯通至右侧,流水播放窗口同样采用白色的背景板,将经过裁剪后的裁剪图像投放到流水播放窗口内,如果投放到流水播放窗口内的裁剪图像为左右倾斜状态,这是允许的,有利于用户在裁剪图像进一步观察到真实的液位。当用户认为某个联排安瓿瓶有异常时,可以定格显示,即停止流水播放,然后详细查看浏览窗口中认为有异常的联排安瓿瓶。在流水播放窗口工作时,裁剪图像不断地投放到流水播放窗口中,流水播放窗口按照片拍摄的先后顺序而先后将每一个裁剪图像进行流水展示,裁剪好的裁剪图像从流水播放窗口一个接一个地从左侧向右侧滑过,流动的速度约为10mm/s-160mm/s。
当用户点击播放和停止播放按键21后,停止流水播放裁剪图像,并将正播放的裁剪图像定格显示;方便用户详细查看裁剪图像。
示意图窗口3设置在浏览窗口2下方,同样为流水播放窗口,用于流水播放示意图及图文标记10;示意图以及图文标记与浏览窗口中的裁剪图像对应。
在每一个正播放的裁剪图像6下方对应一个示意图,每一个示意图的下方显示图文标记。示意图以及图文标记与浏览窗口中的裁剪图像同步对应显示,并且以同样的速度从左到右依次滑过,裁剪图像下方显示虚拟联排瓶7,且虚拟联排瓶中展示的超液位警示线74、低液位警示线75、液位异常指示图标11均是根据对上方的这一张裁剪图像的来源照片进行处理获得的参数进行的展示,一个示例中,联排安瓿瓶A裁剪后获得裁剪图像从左到右流过,同时系统对联排安瓿瓶A获得属于液面的图像,并分析后得到联排安瓿瓶中第一支安瓿瓶支超出其余安瓿瓶支液位高度,因此将联排安瓿瓶A下方的虚拟联排瓶的第一支虚拟瓶显示超液位警示线74以及液位异常指示图标。
在一个示例中(图中未示出),将一个浏览窗口2和一个示意图窗口3设置为一排工作窗口,在识别界面中展示上下共2-3排工作窗口,有效利用显示屏空间,以便能同时展示更多裁剪图像,并降低裁剪图像流动速度,使每张裁剪图像能显示更长的时间。
参考图6,示意图示出了虚拟联排瓶和虚拟液面,虚拟联排瓶7由若干虚拟瓶71构成;虚拟联排瓶的中部处有参考线区域72,在安瓿瓶腹部(即瓶底与瓶颈之间)。所述的液位参考线73水平设置,并横向贯穿于虚拟联排瓶;液位参考线73根据操作指令以显示与非显示状态设置;当用户通过液位参考线切换按键22选择显示液位参考线后,系统开始通过整形图像计算液位参考线的投放位置。
例如:在整形图像中查找到每一个安瓿瓶支的属于液面的图像,查找到属于液面的图像最上方像素点所在像素行,或者查找到属于液面的图像最下方像素点所在像素行,或者中点所在的像素行(通过最上方像素点所在像素行和最下方像素点所在像素行的像素行位置索引,通过位置索引求中点,就是中点所在的像素行),将最上方像素点所在像素行或者最下方像素点所在像素行或者中点所在的像素行作为液面高度。上述查找液面高度的方法可以用于本发明中其它需要查找液面高度的实施例中。当联排安瓿瓶中具有超过一半数量的安瓿瓶支的液面高度为同一液面高度时,将这个液面高度视为液位参考线73。这里的同一液面高度并非要求这些安瓿瓶支液面高度在同一像素行,而是偏离在设定的像素行数量内,也视为同一液位高度,例如安瓿瓶支A1和安瓿瓶支A2中点所在的像素行相差3个像素行距离,也视为同一像素行。若偏离超过设定的像素行数量,则视为不在同一液面高度。
由于在联排安瓿瓶的生产中,同一类安瓿瓶(第一类内腔宽度的安瓿瓶支64组成的联排安瓿瓶,或者第二类内腔宽度的安瓿瓶支65组成的联排安瓿瓶)内装的液剂规格可能不同,例如同为1ml容量的安瓿瓶支组成的联排安瓿瓶中,有可能每一支安瓿瓶支装液量为0.2ml规格,有可能每一支安瓿瓶支装液量为0.8ml规格,通过这里的同一液面高度,即可得出同一类安瓿瓶内装的液剂规格,例如,当这里的同一液面高度处于安瓿瓶腹部(安瓿瓶腹部在瓶底与瓶颈之间)的中部以下处时,视为1ml容量的安瓿瓶支中内装的液剂规格0.2ml;当这里的同一液面高度处于安瓿瓶腹部中部以上处时,视为1ml容量的安瓿瓶支中内装的液剂规格0.8ml。同样,该方法也可以得出容量3ml安瓿瓶支中内装液量属于1ml还是属于2ml。
当这里的同一液面高度处于安瓿瓶腹部的中部以下处,或中部处,或中部以上处时,相应地将液位参考线73显示在虚拟联排瓶7的腹部的中部以下处,或中部处,或中部以上处。
当联排安瓿瓶中具有安瓿瓶支的液面高度不同于所述的同一液面高度时,认定联排安瓿瓶为第二种联排安瓿瓶。之后分析这支安瓿瓶支的液面高度是高于所述的同一液面高度还是低于所述的同一液面高度,当属于高于所述的同一液面高度时,将这支安瓿瓶支所对应的虚拟瓶71的超液位警示线74进行点亮显示;当属于低于所述的同一液面高度时,将这支安瓿瓶支所对应的虚拟瓶71的低液位警示线75进行点亮显示。当联排安瓿瓶中具有安瓿瓶支的液面高度为同一液面高度时,认定联排安瓿瓶为第一种联排安瓿瓶。
其中一个示例中,图文标记10内容包括:属于第一种联排安瓿瓶,属于第二种联排安瓿瓶,属于第一类内腔宽度的安瓿瓶,属于第二类内腔宽度的安瓿瓶。属于第一种联排安瓿瓶为液面高度正常,或者标液面高度为统一高度的联排安瓿瓶;属于第二种联排安瓿瓶具体为液面高度异常或者液面高度为非统一高度的联排安瓿瓶,属于第一类内腔宽度的安瓿瓶(例如容量为3ml安瓿瓶);属于第二类内腔宽度的安瓿瓶(例如容量为1ml安瓿瓶)。
虚拟联排瓶7上方或下方设置有指示于每一个虚拟瓶的液位异常指示图标11,液位异常指示图标以显示与非显示状态设置。例如将液位异常指示图标设置为虚拟安瓿瓶下方的圆点图案,参考图2,优选为将液位异常指示图标设置为指示在虚拟安瓿瓶支上方的箭头标志。当联排安瓿瓶为第二种联排安瓿瓶时,液面高度不同于上述的同一液面高度的安瓿瓶支所对应的虚拟瓶71的上方的箭头标志将进行显示,并最好填充为醒目的色彩(例如红色);方便提醒用户这一虚拟瓶对应的安瓿瓶支液面高度异常,由于虚拟瓶71上方就是对应的安瓿瓶支,因此用户可以很容易对应找到液面高度异常的安瓿瓶支。当联排安瓿瓶为第一种联排安瓿瓶时,所有液位异常指示图标为都不会显示。
液位异常指示图标11还可以采用虚拟瓶71设置有警示颜色的方式进行代替。当联排安瓿瓶为第二种联排安瓿瓶时,液面高度不同于上述的同一液面高度的安瓿瓶支所对应的虚拟瓶填充警示颜色(虚拟瓶的轮廓或内部填充为红色);方便提醒用户这一虚拟瓶对应的安瓿瓶支液面高度异常。当联排安瓿瓶为第一种联排安瓿瓶时,所有虚拟瓶均不填充警示颜色(虚拟瓶的轮廓或内部正常显示黑色/白色)。
参考图4,所述界面中还设置有放大显示浮窗5,通过鼠标点选任意联排安瓿瓶时,可以启动放大显示浮窗5,否则放大显示浮窗为隐藏状态。放大显示浮窗显示在界面中任意位置,可以是中部,也可以是两侧。一个示例中,点选裁剪图像后启动的放大显示浮窗显示在界面右侧。
将被点选的联排安瓿瓶的裁剪图像6投放到放大显示浮窗5中,并放大显示,放大显示浮窗中的图片大小约为显示格中的裁剪图像的2倍或以上,便于用户进一步详细查看裁剪图像的真实情况。
在操作放大显示浮窗时,如果用鼠标作为输入装置(台式电脑、笔记本电脑):当鼠标的光标放置在放大显示浮窗内时,放大显示浮窗将一直保持显示;当鼠标的光标未处于放大显示浮窗内时,放大显示浮窗在显示一段时间后(例如5s-10s)自动关闭。也可以点击关闭按键关闭。
如果采用触摸屏作为输入装置(平板电脑):当用户手指持续触摸于放大显示浮窗内时放大显示浮窗保持显示,当用户放弃触摸放大显示浮窗内时,放大显示浮窗在显示一段时间后(例如5s-10s)自动关闭。用户也可以点击关闭按键立即关闭。
参考图2、图3,在系统界面中,还应该布置:(1)播放和停止播放按键21,用于控制浏览窗口播放显示所述裁剪图像和定格显示所述裁剪图像,同时控制播放显示示意图、图文标记10,和定格显示示意图、图文标记。(2)浏览窗口布局切换按键23,用于控制将浏览窗口在显示格和流水播放窗口之间进行切换,当然,当浏览窗口被切换后,示意图窗口3跟随浏览窗口相应切换,浏览窗口从显示格切换到流水播放窗口之后示意图窗口也将跟随切换为流水播放窗口。(3)统计窗口4,用于显示已识别联排安瓿瓶的统计数据,展示的数据包括:这一工作时段检测的联排安瓿瓶总数,属于第二种联排安瓿瓶的数量,属于第二种联排安瓿瓶在总数中的比例。
示例五:
一个示例中,对于本系统在生产线上的运用,先是将每一个联排安瓿瓶进行识别后,区分出第一种联排安瓿瓶、第二种联排安瓿瓶,将第一种安瓿瓶又区分出第一类内腔宽度的安瓿瓶、第二类内腔宽度的安瓿瓶。
将识别结果数据发送到服务器,服务器可以将数据转用到生产线上,例如将第二种联排安瓿瓶视为装液量不合格的,则自动生产线自动剔除第二种联排安瓿瓶,包装破损、鼓胀变形可能会引起安瓿瓶支液位高度变低,内凹变形、药剂装药量超量会引起安瓿瓶支液位高度变高;或者将第二种联排安瓿瓶视为组合式装液的,则抓取到另一后期包装线上。到底第二种联排安瓿瓶视为装液量不合格还是组合式装液的,根据生产线的安排人为提前设定。
第一种联排安瓿瓶识别为装液量合格或均量装液。将第一类内腔宽度的安瓿瓶和第二类内腔宽度的安瓿瓶自动抓取到不同的后期包装线上贴不同的标识和包入不同的外包装盒。
示例六:
一个示例中,本发明的联排安瓿瓶识别方法,是通过在上述各示例中的联排安瓿瓶识别系统中运行。
参考图9、图10,本发明的联排安瓿瓶识别方法步骤如下:
S01:采用计算机外部设备拍摄联排安瓿瓶的照片,联排安瓿瓶由若干安瓿瓶支61构成,对联排安瓿瓶的照片拍摄的要求为:联排安瓿瓶姿态是直立状态,不可以向前面或后面倾斜,但不排除联排安瓿瓶向左侧或右侧的任意方向倾斜不超过30°,采用内透白光作为照片的背景,联排安瓿瓶前面尽量垂直于摄像头的中心轴线,摄像机以距离联排安瓿瓶40mm-100mm进行微距摄影。
为了便于理解本发明,本发明设定联排安瓿瓶的左侧、右侧、上边、下边、前方、后方具体为:参考图5,以第一支安瓿瓶支所在方向为联排安瓿瓶的左侧,并以最后一支安瓿瓶支所在方向为右侧;以安瓿瓶支的瓶底为下边,相对应的瓶口为上边;相应的,以左侧、右侧、上边、下边四个方向包围构成的平面,平面朝向摄像机一面为前面,摄像机不可见的另一面为背面。在获得的照片中,要求联排安瓿瓶为直立状态,这里的直立状态解释为:通过上述包围构成的平面垂直于水平面,也就是要保护联排安瓿瓶不向前面和背面倾斜。当然倾斜控制在一定的范围即可,例如控制倾斜角度不超过3°,不会影响图片后期的处理和分析识别。
02:将照片导入到系统中。
S03:在照片中查找到属于液面的图像62,方法如下(S031-S033):
S031:对照片进行裁剪,一个示例是直接用连通域查找的方法,查找到照片中长度等于照片长度并且宽度等于照片宽度的,且灰度值低于30%的连通域为白色背景,抠除白色背景,即可保留图片中的联排安瓿瓶,获得到裁剪图像6。另一个示例是:将照片转化为灰度图,从照片左侧向右侧逐列扫描,扫描到第一个具有灰度值大于30%的像素所在的像素列为裁剪图像6的左边;从照片右侧向左侧逐列扫描到第一个具有灰度值大于30%的像素所在的像素列为裁剪图像6的右边;从照片上方向下逐行扫描到第一个具有灰度值大于30%的像素所在的像素行为裁剪图像的上边;从照片下方向上逐行扫描到第一个具有灰度值大于30%的像素所在的像素行为裁剪图像的下边;裁除其余图像(白色背景)即可获得裁剪图像6。
S032:将裁剪图像二值化处理后,横向扫描每一行像素的最右侧终点像素点,将每一行像素的最右侧终点像素点连接起来,去除离散值后拟合直线得到右侧边界线,如果查找到多个疑似右侧边界线,则认定与像素列夹角最小的疑似右侧边界线为右侧边界线。以右侧边界线与裁剪图像最右侧像素列相交点为原点,并以最右侧像素列的上段为0刻度,计算右侧边界线与裁剪图像最右侧像素列的夹角,当夹角为大于90°时裁剪图像逆时针旋转,旋转的角度为夹角的角度;当夹角为小于90°时裁剪图像顺时针旋转,旋转的角度为180°减夹角的角度。
旋转后,以裁剪图像6最右侧像素列、最左侧像素列、最上像素行、最下方像素行构成标准框,将裁剪图像按标准框大小进行拉伸并平铺于标准框内,得到整形图像。
S033:在整形图像上边与下边之间的中部处确定为扫描范围66,将高度与扫描范围66高度相同的像素列去除,随后再去除杂点,这样将会余下的多个连通域,每一个连通域为联排安瓿瓶中的一支安瓿瓶支的属于液面的图像62;一个示例是,参考图5,从整形图像高度的3/5处至高度2/5处之间确定为扫描范围66。参考图7,将高度与扫描范围高度相同的像素列去除,因为高度与扫描范围的高度相同的像素列是安瓿 瓶支两则壁像素和安瓿 瓶支之间的连接缝63,将这一种像素整列去除后,余下的多个连通域,每一个连通域为联排安瓿瓶中每一支安瓿瓶支的属于液面的图像62,当然,这些连通域中,有可能还具有一些杂点和噪声,采用中值滤波算法去除。可以对这些连通域进行一下验证,查看每一个连通域横向占据的宽度,所有连通域宽度一致即验证通过,如果验证未能通过,则将所有横向占据的宽度大致一致的,并且在像素列上不具有交叉的,认为是各个安瓿瓶支的属于液面的图像62。将这些连通域进行编号标记,编号用于与虚拟瓶71一一对应,例如第一个连通域对应第一支虚拟瓶,在对超液位警示线74、低液位警示线75、警示颜色、液位异常指示图标11确定显状态时,均需要根据连通域的液位情况,确定是否显示还是非显示。
整形图像高度的3/5处至高度2/5处之间确定为扫描范围66,可以避开安瓿瓶支的瓶口和瓶颈或瓶底处的轮廓线条干扰,在白色的背景中,液面由于光线折射形成黑色像素,其余部分仅具有杂点(比如内壁的水珠、灰尘,去噪处理)。
S04:找到属于液面的图像后,计算安瓿瓶支内腔左右间的宽度。具体为步骤S033最后找到的任意一个属于液面的图像最左侧像素点所在的像素列与最右侧像素点所在像素列之间的距离,就是安瓿瓶支内腔左右间的宽度。
S05:对属于液面的图像62进行标记,将所有属于液面的图像组合,然后将图像组合按上述步骤(S032)旋转时的夹角进行反向旋转,例如步骤(S032)中,将裁剪图像向右旋转了5°,则本步骤中的图像组合向左旋转5°,使属于液面的图像回归到裁剪图像中的倾斜状态和相对位置,因为在这种状态中,液面才回归到真实物理状态。
在刚刚标记的属于液面的图像62中,查找到最下方像素点所在的像素行是设定为液面水平线67,最上方像素点所在像素行设定为是挂壁线68。液面水平线是由于液体重力以及液体的流动性形成的水平面,从安瓿瓶支的侧面透过瓶身可以看到;挂壁线68是由于由液体张力和粘性力作用下的挂壁现象生成的,并围绕在瓶内壁并高出液面。液面水平线和挂壁线均具有折射光线的效果,因此从像素上分析,灰度值大大高于透明瓶身和瓶内透明液体。
S06:分析识别:
S061:当至少一支安瓿瓶支的所述属于液面的图像,与其余安瓿瓶支的所述属于液面的图像高度不同时,识别为第二种联排安瓿瓶,根据设定,第二种联排安瓿瓶可以是液面高度为非统一高度的联排安瓿瓶,例如生产要求其中一支灌装液体含量不同于其它的液体含量。当然,优先示例是将属于第二种联排安瓿瓶认定为液面高度异常的不合格品,有可能是包装破损、鼓胀变形、内凹变形、药剂装药量超量或装量不足。
当联排安瓿瓶中,所有的安瓿瓶支内的液体液面高度一致时,识别为第一种联排安瓿瓶,具体可以为均量装液的联排安瓿瓶,当然,优先示例是将属于第一种联排安瓿瓶认定为装液量合格的合格品。
对于第一种联排安瓿瓶:
S062:参考图8,在属于液面的图像中,记录液面水平线67所在的像素行位置索引与挂壁线68所在的像素行位置索引,将两个位置索引差识别为液面水平线与挂壁线之间的间距。
S063:同样在属于液面的图像中,记录属于液面的图像最左侧像素列位置索引,记录属于液面的图像最右侧像素列位置索引,将两个位置索引差识别为安瓿瓶支内腔左右间的宽度。
S064:计算所述间距与宽度的比例,获得一个比例值:
Figure 2453DEST_PATH_IMAGE001
上式中:液面水平线与挂壁线之间的间距L1,安瓿瓶支内腔左右间的宽度L2,M为比例值。
例如容量1ml的安瓿瓶支在照片中,安瓿瓶支内腔左右间的宽度为800px,所述间距具有200px,则M=0.25;容量3ml的安瓿瓶支在照片中,安瓿瓶支内腔左右间的宽度为1160px,所述间距为200px,则M=0.17。
由于同一液体的张力和粘性力相同,因此在同一安瓿瓶材料中形成的挂壁线是相等的,因此液面水平线67与挂壁线68之间的间距不管是在第一类内腔宽度的安瓿瓶支64中还是第二类内腔宽度的安瓿瓶支65中均是相同的,根据上述比例值,即可得知照片中的安瓿瓶属于第一类内腔宽度的安瓿瓶支64还是第二类内腔宽度的安瓿瓶支65。
S065:具体为,将设定阈值设为0.21,则低于0.21识别为由第一类内腔宽度的安瓿瓶支64组成的联排安瓿瓶(容量3ml),当比例高于0.21时识别为由第二类内腔宽度的安瓿瓶支组成的联排安瓿瓶(容量1ml)。
当然,第一类内腔宽度的安瓿瓶支也可能是容量2ml,第二类内腔宽度的安瓿瓶支也可能是容量4ml,只要满足于第一类内腔宽度的安瓿瓶支的内腔宽度大于第二类内腔宽度的安瓿瓶支。在用于区别不同的安瓿瓶时,设定的设定阈值也不同。
当拍照时,当摄像头的位置与被拍摄物的距离不同,或者相机的广角镜头不一至,就会导致无法直接从照片中联排安瓿瓶占照片画幅(视觉的大小)的面积来确定联排安瓿瓶属于第一类内腔宽度的安瓿瓶支组成的联排安瓿还是第二类内腔宽度的安瓿瓶支组成的联排安瓿,但通过比例值则可以确定所属类别。
当然,第一类内腔宽度的安瓿瓶支和第二类内腔宽度的安瓿瓶支究竟是何容量,这要提前在电脑程序中预设定,例如将第一类内腔宽度的安瓿瓶支的容量设定为2ml,第二类容量设定为1ml,则计算机在获得比例低于设定阈值时将认为是容量2ml的安瓿瓶支,获得比例高于设定阈值时将认为是容量1ml的安瓿瓶支。
例如将第一类内腔宽度的安瓿瓶支的容量设定为4ml,第二类容量设定为3ml,则计算机在获得比例低于设定阈值时将认为是容量4ml的安瓿瓶支,获得比例高于设定阈值时将认为是容量3ml的安瓿瓶支。
以上为实施本发明列举的各个实施例。当然,上述示例中的各个实施例并非单一与孤立的实施例,在不违背本发明意图与发明目的时,各个实施例可以相互之间进行参照,并且结合完成本发明目的。当然,如果某一种结合可能会在本发明中得到与本发明目的相反效果,就不应当出现这种会得到相反效果的结合,但不影响其它可以获得本发明效果的各示例间的结合。

Claims (12)

1.联排安瓿瓶识别系统,具有由存储器、处理器、显示器组成的计算机装置,存储器中存储有计算机程序,其特征在于,
计算机程序被处理器执行时,向显示器推送识别界面,所述识别界面中:
(1)具有浏览窗口,用于按序将若干联排安瓿瓶照片进行显示;
(2)具有示意图窗口,用于显示若干示意图,示意图为由若干虚拟瓶构成的虚拟联排瓶图像,其中虚拟联排瓶与联排安瓿瓶一一对应,且虚拟瓶与安瓿瓶支一一对应;虚拟联排瓶中部处设置有用于显示液位参考线的参考线区域,液位参考线上方设置超液位警示线和下方设置低液位警示线;
(3)具有图文标记,对浏览窗口中的每个联排安瓿瓶进行标记,标记内容为联排安瓿瓶的所属种类;
计算机程序被处理器执行时,还运行联排安瓿瓶识别方法,包括:
导入联排安瓿瓶照片;
在照片中查找到属于液面的图像,其中具有液面水平线以及高于液面水平线的并由液体挂壁现象生成的挂壁线;
当联排安瓿瓶中所有安瓿瓶支的液面高度相同时,设为第一种联排安瓿瓶,否则为第二种联排安瓿瓶;所述的高度为属于液面的图像在安瓿瓶支上下方向的位置;
针对第一种联排安瓿瓶:识别液面水平线与挂壁线之间的间距,识别安瓿瓶支内腔左右间的宽度,计算所述间距与宽度的比例;当所述比例低于设定阈值时,识别为由第一类内腔宽度的安瓿瓶支组成的联排安瓿瓶,当比例高于设定阈值时,识别为由第二类内腔宽度的安瓿瓶支组成的联排安瓿瓶。
2.如权利要求1所述的联排安瓿瓶识别系统,其特征在于,所述的联排安瓿瓶照片具体为裁剪图像,联排安瓿瓶照片中具有呈直立状态的联排安瓿瓶,联排安瓿瓶由若干安瓿瓶支构成,且安瓿瓶支中装有液体,裁剪图像是对照片裁除背景保留的联排安瓿瓶的图像;
所述的联排安瓿瓶:以第一支安瓿瓶支所在方向为联排安瓿瓶的左侧,并以最后一支安瓿瓶支所在方向为右侧;以安瓿瓶支的瓶底为下边,相对应的瓶口为上边;
所述的直立状态为:以左侧、右侧、上边、下边四个方向包围构成的平面垂直于水平面。
3.如权利要求2所述的联排安瓿瓶识别系统,其特征在于,所述计算机装置具有输入装置;
所述界面中还设置有放大显示浮窗,放大显示浮窗通过显示与非显示的方式设置在界面中任意位置;
当输入装置点选任意裁剪图像时,界面弹出放大显示浮窗,并将被点选的裁剪图像投放到放大显示浮窗中,并放大显示;
当输入装置点选任意虚拟联排瓶时,界面弹出放大显示浮窗,将被点选的虚拟联排瓶对应的联排安瓿瓶的裁剪图像投放到放大显示浮窗中,并放大显示;
所述的输入装置为鼠标时:当鼠标处于放大显示浮窗内放大显示浮窗保持显示,当鼠标未处于放大显示浮窗内时放大显示浮窗在显示一段时间后自动关闭;
所述的输入装置为触摸屏时:当持续触摸于放大显示浮窗内时放大显示浮窗保持显示,当放弃触摸放大显示浮窗内时放大显示浮窗在显示一段时间后自动关闭;
输入装置点击关闭按键关闭放大显示浮窗。
4.如权利要求2所述的联排安瓿瓶识别系统,其特征在于,所述的浏览窗口按如下方式之一进行设置:
(1)所述的浏览窗口由若干按横向排列的显示格组成,将所述裁剪图像展示于显示格内;在每一个显示格下方对应一个用于显示示意图的示意格,所述的图文标记与示意图并列显示于示意格内;所述图文标记、示意图与裁剪图像同步对应显示;
(2)所述的浏览窗口为横向的流水播放窗口,用于流水播放裁剪图像;
示意图窗口设置在浏览窗口下方,同样为流水播放窗口,并用于流水播放示意图及图文标记;示意图以及所述图文标记与浏览窗口中的裁剪图像对应。
5.如权利要求4所述的联排安瓿瓶识别系统,其特征在于,所述界面中还具有:
(1)播放和停止播放按键,用于控制浏览窗口中裁剪图像以及示意图窗口中的示意图、图文标记在播放显示和定格显示中切换;
(2)浏览窗口布局切换按键,用于控制将浏览窗口在显示格和流水播放窗口之间进行切换;示意图窗口跟随浏览窗口相应切换;
(3)统计窗口,用于显示已识别联排安瓿瓶的统计数据;
(4)液位参考线切换按键,用于切换液位参考线的显示与非显示状态。
6.如权利要求1所述的联排安瓿瓶识别系统,其特征在于,
所述液位参考线根据操作指令在参考线区域进行显示与非显示;
所述联排安瓿瓶的所属种类包括:属于第一种联排安瓿瓶,属于第二种联排安瓿瓶,属于第一类内腔宽度的安瓿瓶,属于第二类内腔宽度的安瓿瓶;
所述的超液位警示线、低液位警示线均在液位参考线上方和下方进行显示与非显示,具体为:
当联排安瓿瓶中所有安瓿瓶支的液面高度相同时,设为第一种联排安瓿瓶,否则为第二种联排安瓿瓶;当联排安瓿瓶为第二种联排安瓿瓶时,将液面高度高于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶的超液位警示线进行显示且低液位警示线非显示,将液面高度低于其余安瓿瓶支液面高度的安瓿瓶支所对应的虚拟瓶的低液位警示线进行显示且超液位警示线非显示;
当联排安瓿瓶为第一种联排安瓿瓶时超液位警示线、低液位警示线均为非显示。
7.如权利要求6所述的联排安瓿瓶识别系统,其特征在于,
所述虚拟联排瓶上方、下方之一设置有指示于每一个虚拟瓶的液位异常指示图标,液位异常指示图标以显示与非显示状态设置;当联排安瓿瓶为第二种联排安瓿瓶时,将指示于液面高度不同于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶的液位异常指示图标进行显示;当联排安瓿瓶为第一种联排安瓿瓶时,所有液位异常指示图标为非显示。
8.如权利要求6所述的联排安瓿瓶识别系统,其特征在于,
所述的虚拟瓶设置有警示颜色;
当联排安瓿瓶为第二种联排安瓿瓶时,将液面高度不同于其余安瓿瓶支中液面高度的安瓿瓶支所对应的虚拟瓶展示警示颜色。
9.如权利要求1所述的联排安瓿瓶识别系统,其特征在于,所述在照片中查找到属于液面的图像,方法如下:
S1:对照片进行裁剪并保留照片中的联排安瓿瓶,得到裁剪图像;
S2:将所述裁剪图像二值化处理后,并进行拉伸、旋转处理,使联排安瓿瓶上边、下边处于水平方向,左侧、右侧垂直于水平方向,得到整形图像;
S3:在所述整形图像上边与下边之间的中部处确定为扫描范围,将高度与扫描范围高度相同的像素列去除,并去除杂点,余下的多个连通域识别为每支安瓿瓶支的属于液面的图像; 所述安瓿瓶支内腔左右间的宽度,具体为:其中一支安瓿瓶支的属于液面的图像最左侧像素点所在的像素列与最右侧像素点所在像素列之间的距离。
10.如权利要求9所述的联排安瓿瓶识别系统,其特征在于,所述的液面水平线、挂壁线查找方法为:
将所有属于液面的图像组合,然后按S2步骤中旋转处理时旋转的角度整体进行反向旋转,使属于液面的图像回归到裁剪图像中的倾斜状态和相对位置;
在每一个属于液面的图像中,查找到最下方像素点所在的像素行是液面水平线,最上方像素点所在像素行是挂壁线。
11.如权利要求9所述的联排安瓿瓶识别系统,其特征在于,
所述的第二种联排安瓿瓶为装液量不合格或组合式装液之一;
所述的第一种联排安瓿瓶为装液量合格或均量装液之一;
所述的第一类内腔宽度的安瓿瓶支的内腔宽度大于第二类内腔宽度的安瓿瓶支。
12.储存介质,存储有计算机程序,其特征在于,所述计算机程序被硬件执行,以运行权利要求1-11中任一项权利要求所述的联排安瓿瓶识别系统。
CN202211196372.7A 2022-09-29 2022-09-29 联排安瓿瓶识别系统及识别方法及储存介质 Active CN115291765B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211196372.7A CN115291765B (zh) 2022-09-29 2022-09-29 联排安瓿瓶识别系统及识别方法及储存介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211196372.7A CN115291765B (zh) 2022-09-29 2022-09-29 联排安瓿瓶识别系统及识别方法及储存介质

Publications (2)

Publication Number Publication Date
CN115291765A CN115291765A (zh) 2022-11-04
CN115291765B true CN115291765B (zh) 2022-12-20

Family

ID=83834895

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211196372.7A Active CN115291765B (zh) 2022-09-29 2022-09-29 联排安瓿瓶识别系统及识别方法及储存介质

Country Status (1)

Country Link
CN (1) CN115291765B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05322630A (ja) * 1992-05-22 1993-12-07 Daiwa Can Co Ltd 缶内液面検出装置
CN102393908A (zh) * 2011-06-29 2012-03-28 湖南大学 混合生产线上的基于机器视觉检测的三种瓶体识别方法
JP2013180067A (ja) * 2012-03-01 2013-09-12 Hitachi Aloka Medical Ltd 水薬調剤装置
CN106197612A (zh) * 2016-07-25 2016-12-07 江苏科技大学 一种基于机器视觉的透明瓶装液位检测方法
CN106546600A (zh) * 2016-10-26 2017-03-29 湖南大学 一种基于机器视觉的pet瓶多角度检测方法和装置
CN107764836A (zh) * 2017-11-22 2018-03-06 湖南正中制药机械有限公司 一种联排塑料安瓿质量自动检测机
CN113477556A (zh) * 2021-08-16 2021-10-08 山东新华医疗器械股份有限公司 一种塑料安瓿外观异物自动检测系统
CN113516702A (zh) * 2021-07-16 2021-10-19 中国科学院自动化研究所 自动配液安瓿瓶液位检测方法、系统及药液占比检测方法
CN114056519A (zh) * 2021-12-10 2022-02-18 陈诗凯 联排伺候马达式或电磁阀式水上智能救生装置
CN114396992A (zh) * 2021-12-06 2022-04-26 西安理工大学 基于机器视觉的液位测量与控制系统及方法
CN114565848A (zh) * 2022-02-25 2022-05-31 佛山读图科技有限公司 一种复杂场景的药液液位检测方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105334228B (zh) * 2015-10-15 2018-01-19 哈尔滨工程大学 基于图像处理的瓶装液体杂质及液位检测方法
CN115004244A (zh) * 2019-12-10 2022-09-02 N·V·努特里奇亚 用于检测容器内的液位的方法和系统

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05322630A (ja) * 1992-05-22 1993-12-07 Daiwa Can Co Ltd 缶内液面検出装置
CN102393908A (zh) * 2011-06-29 2012-03-28 湖南大学 混合生产线上的基于机器视觉检测的三种瓶体识别方法
JP2013180067A (ja) * 2012-03-01 2013-09-12 Hitachi Aloka Medical Ltd 水薬調剤装置
CN106197612A (zh) * 2016-07-25 2016-12-07 江苏科技大学 一种基于机器视觉的透明瓶装液位检测方法
CN106546600A (zh) * 2016-10-26 2017-03-29 湖南大学 一种基于机器视觉的pet瓶多角度检测方法和装置
CN107764836A (zh) * 2017-11-22 2018-03-06 湖南正中制药机械有限公司 一种联排塑料安瓿质量自动检测机
CN113516702A (zh) * 2021-07-16 2021-10-19 中国科学院自动化研究所 自动配液安瓿瓶液位检测方法、系统及药液占比检测方法
CN113477556A (zh) * 2021-08-16 2021-10-08 山东新华医疗器械股份有限公司 一种塑料安瓿外观异物自动检测系统
CN114396992A (zh) * 2021-12-06 2022-04-26 西安理工大学 基于机器视觉的液位测量与控制系统及方法
CN114056519A (zh) * 2021-12-10 2022-02-18 陈诗凯 联排伺候马达式或电磁阀式水上智能救生装置
CN114565848A (zh) * 2022-02-25 2022-05-31 佛山读图科技有限公司 一种复杂场景的药液液位检测方法及系统

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
"机器视觉检测-液位检测";华视光学;《https://www.bilibili.com/video/BV1oy4y1T74H/?spm_id_from=333.337.search-card.all.click&vd_source=fd688a4987f6957614050c14d7b2e101》;20210624;1-6 *
基于机器视觉的安瓿自动灯检平台;熊路等;《计算机测量与控制》;20110125(第01期);189-192 *
基于机器视觉的黄酒灌装品质检测;熊路等;《食品工业》;20130820(第08期);163-166 *
机器视觉技术在药液灌装量检测中的应用;孙怀远等;《计算机应用与软件》;20090615(第06期);253-254+270 *
瓶装啤酒的高速实时在线容量检测装置的研制;苑玮琦等;《酿酒科技》;20071218(第12期);59-62 *

Also Published As

Publication number Publication date
CN115291765A (zh) 2022-11-04

Similar Documents

Publication Publication Date Title
JP7238942B2 (ja) 薬剤判別ソフトウェア
CN104825127B (zh) 一种动态视敏度检测方法
CA2997931C (en) Visual counting system
US20170305589A1 (en) Inspection assistance system and tablet packaging device
CN112912964A (zh) 利用卷积神经网络对冻干药物产品的缺陷检测
AU2022203243B2 (en) Image Processing Program and Image Processing Apparatus
CN111126180B (zh) 一种基于计算机视觉的面瘫严重程度自动检测系统
CN106529365B (zh) 自动计价机
CN115291765B (zh) 联排安瓿瓶识别系统及识别方法及储存介质
CN111414124A (zh) 一种图像测量方法、装置、设备及存储介质
KR102576853B1 (ko) 알약 계수 이미지 프로세싱 방법
WO2017012473A1 (zh) 一种提供对象信息的方法和设备
US11393597B1 (en) Prescription label scanner
CN107479814A (zh) 控制方法及控制装置、移动终端和计算机可存储介质
CN101502420B (zh) 图像处理方法和设备
US20240161664A1 (en) Projection display method and apparatus, terminal, and non-transitory storage medium
WO2021214994A1 (ja) 検査システム
CN114674830A (zh) 一种高速生产线上瓶盖瑕疵检测模组
Kulyukin et al. An algorithm for mobile vision-based localization of skewed nutrition labels that maximizes specificity
TWI522888B (zh) 電子裝置及其影像檢視方法
TWI825633B (zh) 影像處理方法、影像處理裝置及影像處理系統
EP4038383A1 (en) Apparatus and method for monitoring and recording disintegration times for pharmaceutical products
TWI480809B (zh) Image feature extraction method and device
CN116758040B (zh) 镀铜板表面褶皱缺陷检测方法、装置、设备及存储介质
US20230235258A1 (en) Colony analysis apparatus for determining contamination level of food subject to microbial collection

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant