CN112184674A - 药品检测方法、装置、电子终端及存储介质 - Google Patents

Abstract

本发明提供一种药品检测方法、装置、电子终端及存储介质，该药品检测方法包括以下步骤：获取药品类型及对应的若干模板图片，模板图片包含药品类型对应药盒的一个外侧面；获取药盒图片，药盒图片中包含有多个药盒、且药盒相互之间不堆叠；生成药盒图片的前景图片，在确定任一模板图片与前景图片匹配时，药盒图片中包含有药品类型对应的药品。从而能够自动识别发药错误。

Description

药品检测方法、装置、电子终端及存储介质

技术领域

本发明涉及药品发放技术领域，尤其涉及一种药品检测方法、装置、电子终端及存储介质。

背景技术

在医院的药房中，通常都会设置有发药系统，该发药系统通常会设置有出药口，该发药系统会从该出药口送出预设类型的药品，可以理解的是，该发药系统有可能会出错，即该药品与该预设类型有可能不对应，在现有技术中，通常都是通过人工检查来纠正该错误，可以理解的是，该方法不仅耗费人力，且错误的概率也较大。

因此，设计一种能够进行错误纠正的药品检测方法，就成为一个亟待解决的问题。

发明内容

本发明的目的在于提供一种药品检测方法、装置、电子终端及存储介质。

为了实现上述发明目的之一，本发明一实施方式提供了一种药品检测方法，包括以下步骤：获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。

作为本发明一实施方式的进一步改进，还包括以下步骤：在确定任一模板图片与所述前景图片匹配时，从所述前景图片去除所述模板图片对应的图片区域。

作为本发明一实施方式的进一步改进，所述“生成所述药盒图片的前景图片”具体包括：获取背景图片，基于SURF算法获取所述背景图片中的若干第一特征点、以及药盒图片中的若干第二特征点，基于第一、第二特征点，生成所述药盒图片的前景图片。

作为本发明一实施方式的进一步改进，所述“确定任一模板图片与所述前景图片匹配”具体包括：持续从所述若干模板图片中选择出一个未处理模板图片，判断未处理模板图片与前景图片是否匹配，直至未处理模板图片与前景图片匹配或者所述若干模板图片均已经被处理。

作为本发明一实施方式的进一步改进，所述“判断未处理模板图片与前景图片是否匹配”具体包括：分别获取未处理模板图片的多个第一特征点、所述前景图片的多个第二特征点，从多个第一特征点和多个第二特征点中、获取未处理模板图片和前景图片中的最邻近的若干匹配特征点；基于所述若干匹配特征点、获取所述前景图片到所述未处理模板图片的变换矩阵，利用所述变换矩阵对所述前景图片进行处理，之后再进行投射变换处理，得到待匹配图片；判断待匹配图片与未处理模板图片是否匹配。

作为本发明一实施方式的进一步改进，所述“判断待匹配图片与未处理模板图片是否匹配”具体包括：从未处理模板图片中、选择外侧面对应的图像区域中的若干第一点；当存在任意的第一点在待匹配图片中不在对应的第二点时，则待匹配图片与未处理模板图片不匹配。

作为本发明一实施方式的进一步改进，在每个模板图片中，外侧面对应的图片区域呈矩形；待匹配图片中，若干第一点包含有：分别位于所述外侧面的四个边界上的多个点；

所述“判断待匹配图片与未处理模板图片是否匹配”还包括：从所述待匹配图片选择与若干第一点对应的若干第二点，当若干第二点构成第二矩形、若干第一点构成的第一矩形与第二矩形的面积之间的差值的绝对值≤预设差值时，确定待匹配图片与未处理模板图片匹配。

本发明实施例还提供了一种药品检测装置，包括以下模块：模板图片获取模块，用于获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；药盒图片获取模块，用于获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；处理模块，用于生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。

本发明实施例还提供了一种存储介质，存储有程序指令，所述程序指令被执行时实现上述的药品检测方法。

本发明实施例还提供了一种电子终端，包括处理器和存储器，所述存储器存储有程序指令，其特征在于，所述处理器运行程序指令实现上述的药品检测方法。

相对于现有技术，本发明的技术效果在于：本发明实施例提供一种药品检测方法、装置、电子终端及存储介质，该药品检测方法包括以下步骤：获取药品类型及对应的若干模板图片，模板图片包含药品类型对应药盒的一个外侧面；获取药盒图片，药盒图片中包含有多个药盒、且药盒相互之间不堆叠；生成药盒图片的前景图片，在确定任一模板图片与前景图片匹配时，药盒图片中包含有药品类型对应的药品。从而能够自动识别发药错误。

附图说明

图1是本发明实施例中的发药系统的一种结构示意图；

图2是本发明实施例中的药品检测方法的流程示意图。

具体实施方式

以下将结合附图所示的各实施方式对本发明进行详细描述。但这些实施方式并不限于本发明，本领域的普通技术人员根据这些实施方式所做出的结构、方法、或功能上的变换均包含在本发明的保护范围内。

本文使用的例如“上”、“上方”、“下”、“下方”等表示空间相对位置的术语是出于便于说明的目的来描述如附图中所示的一个单元或特征相对于另一个单元或特征的关系。空间相对位置的术语可以旨在包括设备在使用或工作中除了图中所示方位以外的不同方位。例如，如果将图中的设备翻转，则被描述为位于其他单元或特征“下方”或“之下”的单元将位于其他单元或特征“上方”。因此，示例性术语“下方”可以囊括上方和下方这两种方位。设备可以以其他方式被定向(旋转90度或其他朝向)，并相应地解释本文使用的与空间相关的描述语。

这里，该发药系统的具体结构可以如图1所示，包括：储药装置、传送带装置和发药装置，该储药装置设置有出药口且能够存储药品，当接收到多个药品类型，每个药品类型对应的欲取数量时，该储药装置从出药口送出若干药品，之后若干药品会掉落到传送带装置上，传送带装置能够将该药品传送到发药装置，之后发药装置就能够将药品分发出去。可以理解的是，从出药口送出的每个药品都对应到一个药品类型，并且如果按照药品类型进行统计，每个药品类型的欲取数量应该等于对应的药品的数量，但在实际中，有可能会出错，即，出药口送出的一个药品与若干药品类型均不对应的，或某个药品类型所对应的药品在该多个药品中不存在，或者某个药品类型的欲取数量不等于对应的药品的数量。

这里，该摄像头能够对出药口所送出的药品进行拍摄，例如，当若干药品被送出出药口时，会掉落到传动带装置上，此时，摄像头就能够进行拍摄了。可选的，该摄像头上设置有灯泡，在环境比较暗淡的时候，可以打开该灯泡；可选的，该传送带装置与出药口的连接处的正上方可以设置该摄像头，且摄像头中的镜头正对传送带装置，从而能够降低照片歪的概率。

本发明实施例一提供了一种药品检测方法，如图2所示，包括以下步骤：

步骤201：获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；这里，在实际中，一般的药品都是使用药盒来包装的，该药盒通常为方盒，具有六个外侧面，每个外侧面都印刷有图案或文字等信息，每个模板图片可以为拍摄一个外侧面所得到的照片；这里，在实际中，药品的药盒有可能会有多个不同的样式，因此，可以对所有样式的药盒中的每个侧面都拍照，然后，可以将得到的所有照片作为该药品的对应的模板图片

步骤202：获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；这里，该发药系统会在一次发药的过程中，从出药口送出多个药盒，且发药口处会设置有一个机械装置，该机械装置能够使得多个药盒相互不堆叠。可选的，该多个药盒出药口掉落时，会掉落在传送带装置上，此时，可以等药盒都静止之后，再控制摄像头拍摄药盒的外侧面的图片，

步骤203：生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。这里，为了提高准确性，首先从药盒图片中去除背景图片，从而得到前景图片，从而能够极大的降低噪音的干扰。之后，如果在前景图片中的某块区域与一个模板图片匹配了，就可以确认该药盒图片中包含有所述药品类型对应的药品，也即储药装置从出药口所送出的药品中包含有该药品类型对应的药品。

本发明实施例提供了，还包括以下步骤：在确定任一模板图片与所述前景图片匹配时，从所述前景图片去除所述模板图片对应的图片区域。这里，由于该药品图片中包含有多个药盒，当一个药盒被识别之后，需要在对下一个药盒进行识别，可以理解的是，为了防止出现错误，需要将已识别的药盒从前景图片中去除，然后在继续下一个药盒的识别。

本发明实施例中，所述“生成所述药盒图片的前景图片”具体包括：获取背景图片，基于SURF(Speed Up Robust Feature)算法获取所述背景图片中的若干第一特征点、以及药盒图片中的若干第二特征点，基于第一、第二特征点，生成所述药盒图片的前景图片。这里，背景图片可以摄像头事先拍摄的图片，在该图片中是不包含有药盒。

本发明实施例中，所述“确定任一模板图片与所述前景图片匹配”具体包括：持续从所述若干模板图片中选择出一个未处理模板图片，判断未处理模板图片与前景图片是否匹配，直至未处理模板图片与前景图片匹配或者所述若干模板图片均已经被处理。这里，由于该模板图片的数量可能为多个，因此，可以一个接着一个对该模板图片进行处理，如果有一个模板图片与药盒图片匹配，则述发药系统送出的多个药品中有预想中的药品；而如果，在对所有的模板图片都进行处理之后，仍然没法发现一个与药盒图片相匹配的模板图片，则表示发药系统送出的多个药品中不包含有预想中的药品。

本实施例中，所述“判断未处理模板图片与前景图片是否匹配”具体包括：分别获取未处理模板图片的多个第一特征点、所述前景图片的多个第二特征点，从多个第一特征点和多个第二特征点中、获取未处理模板图片和前景图片中的最邻近的若干匹配特征点；基于所述若干匹配特征点、获取所述前景图片到所述未处理模板图片的变换矩阵，利用所述变换矩阵对所述前景图片进行处理，之后再进行投射变换处理，得到待匹配图片；判断待匹配图片与未处理模板图片是否匹配。这里，第一、第二特征点分别为未处理模板图片和前景图片的图像特征，在实际中，模板图片和前景图片的拍摄角度和方位等有可能不相同，因此，可以使用SURF(Speed Up Robust Feature)算法进行相应的处理，从而能够对前景图片进行图形变换处理和投射变换处理，并得到待匹配图片，可以理解是，该待匹配图片与未处理模板图片的拍摄角度和方位是相同的，之后，可以获得这两个图片的特征描述子，然后根据描述子的相似程度对两幅图像的特征之间进行匹配。

可选的，可以使用openCV中的findHomography函数来得到转换矩阵，使用perspective Transform来进行投射变换处理。

本实施例中，所述“判断待匹配图片与未处理模板图片是否匹配”具体包括：从未处理模板图片中、选择外侧面对应的图像区域中的若干第一点；当存在任意的第一点在待匹配图片中不在对应的第二点时，则待匹配图片与未处理模板图片不匹配。这里，如果待匹配图片与未处理模板图片之间是匹配的，则在未处理模板图片中，外侧面对应的图像区域中的所有的点，在待匹配图片中，都应该存在对应的点，反之，如果存在任意的第一点在待匹配图片中不在对应的第二点时，则待匹配图片与未处理模板图片不匹配。

本实施例中，在每个模板图片中，外侧面对应的图片区域呈矩形；在待匹配图片中，若干第一点包含有：分别位于所述外侧面的四个边界上的多个点；所述“判断待匹配图片与未处理模板图片是否匹配”还包括：从所述待匹配图片选择与若干第一点对应的若干第二点，当若干第二点构成第二矩形、若干第一点构成的第一矩形与第二矩形的面积之间的差值的绝对值≤预设差值时，确定待匹配图片与未处理模板图片匹配。这里，由于若干第一点包含有位于所述外侧面的四个边界上的点，在若干第一点能够构成一个矩形，相应的，若干第二点也应该能够构成一个矩形，且这两个矩形的面积应该差不多，即有些误差，但差值的绝对值很小(即差值的绝对值≤预设差值，预设差值≥0)。可选的，所述“若干第一点构成的第一矩形与第二矩形的面积之间的差值的绝对值≤预设差值”可以包括：|第一矩形的面积-第二矩形的面积|/第一矩形的面积≤20％；或者|第一矩形的面积-第二矩形的面积|/第二矩形的面积≤20％。

可选的，所述“分别获取模板图片的多个第一特征点、所述前景图片对应的多个第二特征点”具体包括：基于SURF(Speed Up Robust Feature)算法，分别获取模板图片的多个第一特征点、所述前景图片对应的多个第二特征点。

可选的，所述“从多个第一、第二特征点中、获取模板图片和前景图片中的最邻近的若干匹配特征点”具体包括：基于KNN(K-Nearest Neighbor)算法，从多个第一、第二特征点中、获取模板图片和前景图片中的最邻近的若干匹配特征点。

本发明实施例二提供了一种药品检测装置，包括以下模块：

模板图片获取模块，用于获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；

药盒图片获取模块，用于获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；

处理模块，用于生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。

本发明实施例三提供了一种存储介质，存储有程序指令，所述程序指令被执行时实现实施例一中的药品检测方法。

本发明实施例四提供了一种电子终端，包括处理器和存储器，所述存储器存储有程序指令，所述处理器运行程序指令实现实施例一中的药品检测方法。

应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施方式中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。

上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施方式的具体说明，它们并非用以限制本发明的保护范围，凡未脱离本发明技艺精神所作的等效实施方式或变更均应包含在本发明的保护范围之内。

Claims (10)

1.一种药品检测方法，其特征在于，包括以下步骤：

获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；

获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；

生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。

2.根据权利要求1所述的药品检测方法，其特征在于，还包括以下步骤：

在确定任一模板图片与所述前景图片匹配时，从所述前景图片去除所述模板图片对应的图片区域。

3.根据权利要求1所述的药品检测方法，其特征在于，所述“生成所述药盒图片的前景图片”具体包括：

获取背景图片，基于SURF算法获取所述背景图片中的若干第一特征点、以及药盒图片中的若干第二特征点，基于第一、第二特征点，生成所述药盒图片的前景图片。

4.根据权利要求1所述的药品检测方法，其特征在于，所述“确定任一模板图片与所述前景图片匹配”具体包括：

持续从所述若干模板图片中选择出一个未处理模板图片，判断未处理模板图片与前景图片是否匹配，直至未处理模板图片与前景图片匹配或者所述若干模板图片均已经被处理。

5.根据权利要求4所述的药品检测方法，其特征在于，所述“判断未处理模板图片与前景图片是否匹配”具体包括：

分别获取未处理模板图片的多个第一特征点、所述前景图片的多个第二特征点，从多个第一特征点和多个第二特征点中、获取未处理模板图片和前景图片中的最邻近的若干匹配特征点；

基于所述若干匹配特征点、获取所述前景图片到所述未处理模板图片的变换矩阵，利用所述变换矩阵对所述前景图片进行处理，之后再进行投射变换处理，得到待匹配图片；

判断待匹配图片与未处理模板图片是否匹配。

6.根据权利要求5所述的药品检测方法，其特征在于，所述“判断待匹配图片与未处理模板图片是否匹配”具体包括：

从未处理模板图片中、选择外侧面对应的图像区域中的若干第一点；

当存在任意的第一点在待匹配图片中不在对应的第二点时，则待匹配图片与未处理模板图片不匹配。

7.根据权利要求6所述的药品检测方法，其特征在于：

在每个模板图片中，外侧面对应的图片区域呈矩形；

在待匹配图片中，若干第一点包含有：分别位于所述外侧面的四个边界上的多个点；

所述“判断待匹配图片与未处理模板图片是否匹配”还包括：从所述待匹配图片选择与若干第一点对应的若干第二点，当若干第二点构成第二矩形、且若干第一点构成的第一矩形与第二矩形的面积之间的差值的绝对值≤预设差值时，确定待匹配图片与未处理模板图片匹配。

8.一种药品检测装置，其特征在于，包括以下模块：

模板图片获取模块，用于获取药品类型及对应的若干模板图片，所述模板图片包含所述药品类型对应药盒的一个外侧面；

药盒图片获取模块，用于获取药盒图片，所述药盒图片中包含有多个药盒、且药盒相互之间不堆叠；

处理模块，用于生成所述药盒图片的前景图片，在确定任一模板图片与所述前景图片匹配时，所述药盒图片中包含有所述药品类型对应的药品。

9.一种存储介质，存储有程序指令，其特征在于，所述程序指令被执行时实现如权利要求1至权利要求7任一项所述的药品检测方法。

10.一种电子终端，包括处理器和存储器，所述存储器存储有程序指令，其特征在于，所述处理器运行程序指令实现如权利要求1至权利要求7任一项所述的药品检测方法。

Images