CN115223293B - 用于耗材柜的取用验证方法、装置、系统及设备 - Google Patents

用于耗材柜的取用验证方法、装置、系统及设备 Download PDF

Info

Publication number
CN115223293B
CN115223293B CN202210833442.9A CN202210833442A CN115223293B CN 115223293 B CN115223293 B CN 115223293B CN 202210833442 A CN202210833442 A CN 202210833442A CN 115223293 B CN115223293 B CN 115223293B
Authority
CN
China
Prior art keywords
consumable
information
cabinet
area
hand
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210833442.9A
Other languages
English (en)
Other versions
CN115223293A (zh
Inventor
张能军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Nubomed Technology Co Ltd
Original Assignee
Shenzhen Nubomed Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Nubomed Technology Co Ltd filed Critical Shenzhen Nubomed Technology Co Ltd
Priority to CN202210833442.9A priority Critical patent/CN115223293B/zh
Publication of CN115223293A publication Critical patent/CN115223293A/zh
Application granted granted Critical
Publication of CN115223293B publication Critical patent/CN115223293B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/026—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
    • G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
    • G06K7/10009—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves
    • G06K7/10297—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation sensing by radiation using wavelengths larger than 0.1 mm, e.g. radio-waves or microwaves arrangements for handling protocols designed for non-contact record carriers such as RFIDs NFCs, e.g. ISO/IEC 14443 and 18092
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F11/00—Coin-freed apparatus for dispensing, or the like, discrete articles
    • G07F11/62—Coin-freed apparatus for dispensing, or the like, discrete articles in which the articles are stored in compartments in fixed receptacles
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/009—User recognition or proximity detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Toxicology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Electromagnetism (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)

Abstract

本发明公开了用于耗材柜的取用验证方法、装置、系统及设备，方法包括：从标签读写器读取初始标签数据集合，收到开门信息则获取图像采集装置拍摄的连续图像，确定连续图像的手部区域信息并进行检测得到对应的有效次数信息，收到关门信息则从标签读写器读取当前标签数据集合，获取差异集合并根据耗材登记信息及有效次数信息进行验证，得到取用验证信息。本发明属于智能验证技术领域，可通过对图像采集装置拍摄的连续图像进行分析检测，得到包含每一柜内区域中手部出现的有效次数的有效次数信息，并根据有效次数信息验证开门前后的差异集合中的每一耗材，从而得到耗材是否被真实取用的取用验证信息，大幅提高了对耗材柜内所存放的耗材进行监控的准确性。

Description

用于耗材柜的取用验证方法、装置、系统及设备
技术领域
本发明涉及智能验证技术领域，尤其涉及一种用于耗材柜的取用验证方法、装置、系统及设备。
背景技术
为实现对耗材柜中存放的耗材进行监控，可在耗材柜内设置标签读写器，通过标签读写器读取耗材上装配的耗材标签，从而实时获取耗材柜内的耗材信息。然而现有技术方法中的标签读写器在实际应用过程中存在耗材标签漏读的问题，例如，当用户对耗材柜内的耗材进行取放时，标签读写器由于环境、或天线性能的干扰出现耗材标签漏度的现象，导致无法准确获取耗材柜内存放的耗材，影响了对耗材柜内耗材进行监控的准确性。因此，现有的技术方法中耗材柜内对耗材进行监控的准确性不足、耗材取用信息难以验证的问题。
发明内容
本发明实施例提供了一种用于耗材柜的取用验证方法、装置、系统及设备，旨在解决现有技术方法中耗材柜内对耗材进行监控的准确性不足的问题。
第一方面，本发明实施例提供了一种用于耗材柜的取用验证方法，该方法应用于用于耗材柜的取用验证系统的数据处理终端中，所述系统还包括图像采集装置及标签读写器，所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接，方法包括：
从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合；
若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像；
根据预存的区域坐标信息确定所述连续图像的手部区域信息，所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域；
根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；所述有效次数信息为每一柜内区域中手部出现的有效次数；
若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合；
获取所述当前标签数据集合与所述初始标签数据集合的差异集合；
根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
第二方面，本发明实施例还提供了一种用于耗材柜的取用验证装置，该装置配置于用于耗材柜的取用验证系统的数据处理终端，所述系统还包括图像采集装置及标签读写器，所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接，所述装置包括：
初始标签数据集合获取单元，用于从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合；
图像获取单元，用于若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像；
手部区域信息获取单元，用于根据预存的区域坐标信息确定所述连续图像的手部区域信息，所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域；
有效次数信息获取单元，用于根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；所述有效次数信息为每一柜内区域中手部出现的有效次数；
当前标签数据集合获取单元，用于若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合；
差异集合获取单元，用于获取所述当前标签数据集合与所述初始标签数据集合的差异集合；
取用验证信息获取单元，用于根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
第三方面，本发明实施例提供了一种用于耗材柜的取用验证系统，所述系统包括图像采集装置、数据处理终端及标签读写器；
所述图像采集装置设置于耗材柜的正前方，用于采集得到所述耗材柜的图像信息；
所述标签读写器设置于所述耗材柜的内侧边框，用于对所述耗材柜中的耗材标签进行读取；
所述耗材柜包含相互分隔设置的多个柜内区域；所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接以实现数据信息的传输；
所述数据处理终端，用于实现如上述第一方面所述的用于耗材柜的取用验证方法。
第四方面，本发明实施例提供了一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，该处理器执行计算机程序时实现如上述第一方面所述的用于耗材柜的取用验证方法。
本发明实施例提供了一种用于耗材柜的取用验证方法、装置、系统及设备，从标签读写器读取初始标签数据集合，收到开门信息则获取图像采集装置拍摄的连续图像，确定连续图像的手部区域信息并进行检测得到对应的有效次数信息，收到关门信息则从标签读写器读取当前标签数据集合，获取差异集合并根据耗材登记信息及有效次数信息进行验证，得到取用验证信息。通过上述方法，可通过对图像采集装置拍摄的连续图像进行分析检测，得到包含每一柜内区域中手部出现的有效次数的有效次数信息，并根据有效次数信息验证开门前后的差异集合中的每一耗材，从而得到耗材是否被真实取用的取用验证信息，大幅提高了对耗材柜内所存放的耗材进行监控的准确性。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的用于耗材柜的取用验证方法的流程示意图；
图2为本发明实施例提供的用于耗材柜的取用验证系统的结构示意图；
图3为本发明实施例提供的用于耗材柜的取用验证方法的效果示意图；
图4为本发明实施例提供的用于耗材柜的取用验证方法的另一效果示意图；
图5为本发明实施例提供的用于耗材柜的取用验证装置的示意性框图；
图6为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
请参阅图1及图2，图1是本发明实施例提供的用于耗材柜的取用验证方法的流程示意图，图2为本发明实施例提供的用于耗材柜的取用验证系统的结构示意图；该用于耗材柜的取用验证方法应用于用于耗材柜的取用验证系统100的数据处理终端10中，该系统还包括图像采集装置20及标签读写器30，图像采集装置20及标签读写器30均与数据处理终端10之间进行网络连接以实现数据信息的传输，该用于耗材柜的取用验证方法通过安装于数据处理终端10中的应用软件进行执行，数据处理终端10即是可接收图像采集装置20所输入的图像及标签读写器30读取的耗材标签并进行数据处理的终端设备，例如台式电脑、笔记本电脑、平板电脑或手机等，图像采集装置20即是用于对耗材柜的正面图像进行拍摄的装置，图像采集装置20能够对耗材柜的全部区域进行完整拍摄，标签读写器30即是以非接触方式读取耗材上装配的耗材标签的设备，如RFID标签读写器，耗材柜中设置有多个相互分隔的柜内区域，柜内区域中可放置耗材，每一耗材上均装配有与耗材唯一对应的耗材标签，耗材标签可以是RFID标签。如图1所示，该方法包括步骤S110～S170。
S110、从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合。
从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合。耗材柜内设置有多个柜内区域，如图3所示，多个柜内区域可分层设置于耗材柜内；耗材入库时，可登记耗材所属层的位置，也即是耗材所属的柜内区域。在开门取用耗材柜中的耗材之前，可通过标签读写器读取耗材柜中的耗材标签，数据处理终端获取此时耗材柜内所存放的所有耗材标签，得到初始标签数据集合S开门前。其中，耗材柜可以是放置药品的高价值耗材柜。
S120、若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像。
若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像。若接收到耗材柜的开门信息，可发送启动指令至图像采集装置以开启图像采集装置，图像采集装置开启后即可对耗材柜进行拍摄，从而得到耗材柜的连续图像，如图像采集装置每一秒钟可拍摄10张图像，则在耗材柜开门至关门的整个过程中可对耗材柜进行连续拍摄，从而得到连续图像。
在一实施例中，步骤S120之前还包括步骤：接收所述图像采集装置输入的初始图像；对所述初始图像进行解析以构建得到耗材柜的区域坐标信息。
在接收耗材柜的开门信息之前，还可通过图像采集装置采集耗材柜的初始图像，也即是在耗材柜取用耗材之前，获取一张耗材柜开门状态下的初始图像，通过对初始图像进行解析从而构建耗材柜的区域坐标信息，区域坐标信息中包含耗材柜每一柜内区域的具体坐标信息。为实现基于初始图像准确构建耗材柜的区域坐标信息，可在耗材柜开门状态下采集初始图像。
在一实施例中，所述对所述初始图像进行解析以构建得到耗材柜的区域坐标信息包括子步骤：对所述初始图像进行图像解析以获取所述耗材柜中每一柜内区域的顶角像素；以所述初始图像的左下角为坐标原点解析每一所述柜内区域的顶角像素，得到每一所述柜内区域中顶角像素对应的顶角坐标位置作为所述区域坐标信息。
可对初始图像进行图像解析，从而获取耗材柜中每一柜内区域的顶角像素，如在本申请实施例中，每一柜内区域的立体形状均为长方体，每一柜内区域在初始图像中的平面形状均为矩形，即可通过图像解析获取每一柜体区域的顶角像素。如通过分析相邻像素之间的对比度，获取初始图像中对比度变化较大的位置点作为备选位置点，根据矩形区域的尺寸从备选位置点中筛选出满足柜体区域的尺寸条件的顶角位置点，获取顶角位置点的中线点像素确定为顶角像素。
以初始图像的左下角为坐标原点对每一柜内区域的顶角像素进行解析，则初始图像的左下角的坐标位置即为(0，0)，根据顶角像素与坐标原点之间间隔的像素数，即可确定顶角像素相对于坐标原点的顶角坐标位置，获取每一柜内区域中顶角像素对应的顶角坐标位置，即可得到与初始图像对应的区域坐标信息。
如图4所示，耗材柜内共设置有7个柜内区域，编号分别为1至7；其中，柜内区域1的四个顶角像素分别为A、B、C、D，则顶角像素对应的相对于坐标原点的顶角坐标位置可分别表示为A(x左上，y左上)、C(x左下，y左下)、B(x右上，y右上)、D(x右下，y右下)。
S130、根据预存的区域坐标信息确定所述连续图像的手部区域信息。
根据预存的区域坐标信息确定所述连续图像的手部区域信息，其中所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域。具体的，可调用手型检测获取每一图像中手的坐标位置，并根据柜内区域确定每一图像中手部所处的柜内区域。例如，可通过手型检测中的手型模板与图像进行区域匹配，手型模板至少包括像素颜色、区域轮廓等信息，若图像中某一区域图像与该手型模板的匹配度大于预存的匹配度阈值，若区域图像与手型模板的匹配度大于匹配度阈值，则表明该区域图像中像素的颜色与手型模板接近，且该区域图像的外形轮廓与手型模型相似，即可确定该区域图像为手部区域图像，并将该区域图像的坐标位置确定为图像中手的坐标位置；若区域图像与手型模板的匹配度不大于匹配度阈值，则表明该区域图像不与手型模板相似。
在一实施例中，步骤S130包括子步骤：检测所述连续图像的每一图像中手部所处的坐标位置；根据所述区域坐标信息及每一所述图像对应的坐标位置，确定每一所述图像中手部的坐标位置所属的柜内区域，得到所述手部区域信息。
具体的，可检测连续图像中每一图像，以从每一图像中识别并获取手部图像，正常使用过程中用户可单手拿取耗材，或双手同时拿取耗材，则图像中可能包含一个手部图像或两个手部图像。获取识别得到的手部图像的中心坐标点作为手部所处的位置坐标，手部所处的位置坐标也即是手部图像的中心位置相对于坐标原点的具体坐标位置，手部所处的坐标位置可表示为(x手，y手)。
区域坐标信息中包含每一柜内区域的顶角坐标位置，即可根据区域坐标信息及每一图像中手部的坐标位置，确定手部的坐标位置所属的柜内区域。获取每一图像中手部的坐标位置所述柜内区域即可得到手部区域信息。
例如，图4中柜内区域1对应的坐标区域范围可表示为(x左下，x左上)、(y左下，y右下)；判断某一图像中手部的坐标位置是否位于柜内区域1内，即可判断x手∈(x左下，x左上)且y手∈(y左下，y右下)是否成立，若成立，则判定图像中手部的坐标位置属于柜内区域1；若不成立，则继续获取下一柜内区域进行判断，直至确定图像中手部的坐标位置所属的柜内区域。
S140、根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息。
根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；其中所述有效次数信息为每一柜内区域中手部出现的有效次数。可根据检测规则检测手部区域信息，检测规则中可配置停留时长阈值，通过检测从而获取手部区域信息对应的有效次数信息。
具体判断方式可以是如上述步骤S130及步骤S140顺序执行的实施方式。还可以是，假设拍摄了100张图像，首先在第1层依次判断100张之后，继续获取第1层内手部的有效次数信息进行判断，完成相应判断之后；再根据第2层的坐标区域，依次对拍摄的100张图像进行判断，再获取第2层内手部的有效次数信息，依次类推，完成在每一层对100张图像依次进行判断的过程，从而获取到每一层的有效次数信息。
在一实施例中，步骤S140包括子步骤：根据所述手部区域信息检测手部在每一所述柜内区域的停留时间；根据所述检测规则判断所述停留时间是否不小于预存的停留时长阈值；对每一所述柜内区域中手部的停留时间不小于所述停留时长阈值的次数进行统计，得到每一柜内区域中手部出现的有效次数。
例如，本申请实施例中，图像采集装置每一秒钟可拍摄10张图像，则连续图像中每一图像占用的采集时间为0.1s(0.1秒)，可根据手部区域检测信息检测手部在每一柜内区域的停留时间，如手部检测信息中连续多张图像中手部的坐标位置均位于柜内区域1中，则可获取手部的坐标位置连续位于柜内区域1中所对应图像的数量，每一张图像累加0.1s，得到手部在柜内区域1的停留时间。如连续5张图像中，手部的坐标位置连续位于柜内区域1中，则手部在柜内区域1的停留时间为0.5s。
判断每一柜内区域中手部连续的停留时间是否不小于检测规则中的停留时长阈值，并对手部的停留时间不小于停留时长阈值的次数进行统计，从而得到每一柜内区域中手部出现的有效次数。所得到的有效次数可表示为Pα层，其中α为层编号，α的取值为1，2，3……7。
如可设置停留时长阈值T为0.5s，手部在柜内区域1的停留时间为0.5s，该停留时间不小于停留时长阈值T，则对柜内区域1中手部出现的次数进行累加1。通过上述方法，即可获取每一柜内区域中手部出现的有效次数。
S150、若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合。
若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合。数据处理终端若接收到关门信息，则可从标签读写器读取当前耗材柜中的耗材标签，得到当前标签数据集合，当前标签数据集合可表示为S开门后；与此同时，数据处理终端还可发送关闭指令至图像采集装置以关闭图像采集装置，也即实现关闭柜门结束图像拍摄的效果。
S160、获取所述当前标签数据集合与所述初始标签数据集合的差异集合。
获取所述当前标签数据集合与所述初始标签数据集合的差异集合。将获取到的当前标签数据集合与初始标签数据集合作差，即可得到差异集合；若标签读取器不出现漏读，差异集合中所包含的耗材标签，也即与用户取用的耗材相对应。
例如，当前标签数据集合为S开门后，初始标签数据集合为S开门前，则差异集合可表示为ΔS＝S开门前—S开门后。
S170、根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。可根据耗材登记信息及有效次数信息验证差异集合中的每一耗材，从而得到每一耗材是否真实取用的取用验证信息。
在一实施例中，步骤S170包括子步骤：根据所述耗材登记信息确定所述差异集合中每一耗材的放置区域；根据所述有效次数信息及每一所述耗材的放置区域，确定每一所述耗材的取用概率；判断每一所述耗材的取用概率是否大于零以得到取用验证信息，所述取用验证信息包含每一所述耗材是否真实取用的判断结果。
具体的，耗材登记信息中包含放置于耗材柜内每一耗材对应的放置区域，则可通过差异集合中包含的耗材对耗材登记信息进行筛选，从而得到差异集合中每一耗材的放置区域。
可根据有效次数信息及差异集合中每一耗材的放置区域，确定差异集合中每一耗材的取用概率，耗材的取用概率可采用公式(1)进行表示：
Figure BDA0003746472290000091
其中，G表示耗材被真正取用的概率，其中，t为次数阈值，α的取值为1，2，3……7。
例如，若第3层柜内区域的有效次数为3，次数阈值t为1，则差异集合中放置区域与第3层柜内区域相对应的耗材的取用概率为1。
判断差异集合中每一耗材的取用概率是否大于零，若大于零，则得到耗材真实取用的判断结果；若耗材的取用概率不大于零，则判定耗材未真实取用的判断结果，获取差异集合中每一耗材的判断结果得到取用验证信息。若差异集合中某一耗材的取用概率G＝0，则判定该次RFID标签读取不全。
在一实施例中，步骤S180之后还包括步骤：根据所述取用验证信息获取验证一致的取用耗材所对应的耗材标签进行上报。
根据取用验证信息获取验证一致的取用耗材所对应的耗材标签，可将验证一致的取用耗材的耗材标签上报至上层应用，其中，验证一致的取用耗材也即是判断结果为真实取用的耗材。若判断结果为真实取用，则RFID标签读取结果与连续图像中手部在相应柜内区域的有效次数相一致，也即是验证一致的取用耗材。若取用验证信息中存在验证不一致的耗材，确定验证不一致的耗材所属的柜内区域，则忽略差异集合ΔS中验证不一致的耗材对应的耗材标签，也即是忽略差异集合ΔS中该耗材取用的耗材标签记录信息，判断为标签漏读，且不上报此耗材标签的记录信息给上层应用软件。
在本发明实施例所提供的用于耗材柜的取用验证方法中，从标签读写器读取初始标签数据集合，收到开门信息则获取图像采集装置拍摄的连续图像，确定连续图像的手部区域信息并进行检测得到对应的有效次数信息，收到关门信息则从标签读写器读取当前标签数据集合，获取差异集合并根据耗材登记信息及有效次数信息进行验证，得到取用验证信息。通过上述方法，可通过对图像采集装置拍摄的连续图像进行分析检测，得到包含每一柜内区域中手部出现的有效次数的有效次数信息，并根据有效次数信息验证开门前后的差异集合中的每一耗材，从而得到耗材是否被真实取用的取用验证信息，大幅提高了对耗材柜内所存放的耗材进行监控的准确性。
本发明实施例还提供一种用于耗材柜的取用验证装置，该用于耗材柜的取用验证装置可配置于用于耗材柜的取用验证系统100的数据处理终端10中，该数据处理终端10用于执行前述的用于耗材柜的取用验证方法的任一实施例。具体地，请参阅图5，图5为本发明实施例提供的用于耗材柜的取用验证装置的示意性框图。
如图5所示，用于耗材柜的取用验证装置101包括初始标签数据集合获取单元110、图像获取单元120、手部区域信息获取单元130、有效次数信息获取单元140、当前标签数据集合获取单元150、差异集合获取单元160及取用验证信息获取单元170。
初始标签数据集合获取单元110，用于从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合。
图像获取单元120，用于若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像。
手部区域信息获取单元130，用于根据预存的区域坐标信息确定所述连续图像的手部区域信息，所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域。
有效次数信息获取单元140，用于根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；所述有效次数信息为每一柜内区域中手部出现的有效次数。
当前标签数据集合获取单元150，用于若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合。
差异集合获取单元160，用于获取所述当前标签数据集合与所述初始标签数据集合的差异集合。
取用验证信息获取单元170，用于根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
在本发明实施例所提供的用于耗材柜的取用验证装置应用上述用于耗材柜的取用验证方法，从标签读写器读取初始标签数据集合，收到开门信息则获取图像采集装置拍摄的连续图像，确定连续图像的手部区域信息并进行检测得到对应的有效次数信息，收到关门信息则从标签读写器读取当前标签数据集合，获取差异集合并根据耗材登记信息及有效次数信息进行验证，得到取用验证信息。通过上述方法，可通过对图像采集装置拍摄的连续图像进行分析检测，得到包含每一柜内区域中手部出现的有效次数的有效次数信息，并根据有效次数信息验证开门前后的差异集合中的每一耗材，从而得到耗材是否被真实取用的取用验证信息，大幅提高了对耗材柜内所存放的耗材进行监控的准确性。
本发明实施例还提供一种用于耗材柜的取用验证系统100，该用于耗材柜的取用验证系统100包括图像采集装置20、数据处理终端10及标签读写器30，其中数据处理终端10可配置于耗材柜中，该用于耗材柜的取用验证系统100中的数据处理终端10用于执行前述的用于耗材柜的取用验证方法的任一实施例。具体地，请参阅图2。
上述的用于耗材柜的取用验证系统100包括图像采集装置20、数据处理终端10及标签读写器30；所述图像采集装置20设置于耗材柜的正前方，用于采集得到所述耗材柜的图像信息；所述标签读写器30设置于所述耗材柜的内侧边框，用于对所述耗材柜中的耗材标签进行读取；所述耗材柜包含相互分隔设置的多个柜内区域；所述图像采集装置20及所述标签读写器30均与所述数据处理终端10之间进行网络连接以实现数据信息的传输；所述数据处理终端10，用于接收图像采集装置20所输入的图像及标签读写器30读取的耗材标签并进行数据处理，也即是用于实现上述的用于耗材柜的取用验证方法。
上述用于耗材柜的取用验证方法可以实现为计算机程序的形式，该计算机程序可以在如图6所示的计算机设备上运行，用于耗材柜的取用验证装置即可实现为计算机设备。
请参阅图6，图6是本发明实施例提供的计算机设备的示意性框图。该计算机设备可以是用于执行用于耗材柜的取用验证方法以接收图像采集装置所输入的图像及标签读写器读取的耗材标签并进行数据处理的数据处理终端。
参阅图6，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括存储介质503和内存储器504。
该存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行用于耗材柜的取用验证方法，其中，存储介质503可以为易失性的存储介质或非易失性的存储介质。
该处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。
该内存储器504为存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行用于耗材柜的取用验证方法。
该网络接口505用于进行网络通信，如提供数据信息的传输等。本领域技术人员可以理解，图6中示出的结构，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现上述的用于耗材柜的取用验证方法中对应的功能。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为易失性或非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序，其中计算机程序被处理器执行时实现上述的用于耗材柜的取用验证方法中所包含的步骤。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种用于耗材柜的取用验证方法，其特征在于，所述方法应用于用于耗材柜的取用验证系统的数据处理终端中，所述系统还包括图像采集装置及标签读写器，所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接，所述方法包括：
从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合；
若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像；
根据预存的区域坐标信息确定所述连续图像的手部区域信息，所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域；
根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；所述有效次数信息为每一柜内区域中手部出现的有效次数；
若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合；
获取所述当前标签数据集合与所述初始标签数据集合的差异集合；
根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
2.根据权利要求1所述的用于耗材柜的取用验证方法，其特征在于，所述开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像之前，还包括：
接收所述图像采集装置输入的初始图像；
对所述初始图像进行解析以构建得到耗材柜的区域坐标信息。
3.根据权利要求2所述的用于耗材柜的取用验证方法，所述耗材柜包括多个柜内区域，其特征在于，所述对所述初始图像进行解析以构建得到耗材柜的区域坐标信息，包括：
对所述初始图像进行图像解析以获取所述耗材柜中每一柜内区域的顶角像素；
以所述初始图像的左下角为坐标原点解析每一所述柜内区域的顶角像素，得到每一所述柜内区域中顶角像素对应的顶角坐标位置作为所述区域坐标信息。
4.根据权利要求1所述的用于耗材柜的取用验证方法，其特征在于，所述根据预存的区域坐标信息确定所述连续图像的手部区域信息，包括：
检测所述连续图像的每一图像中手部所处的坐标位置；
根据所述区域坐标信息及每一所述图像对应的坐标位置，确定每一所述图像中手部的坐标位置所属的柜内区域，得到所述手部区域信息。
5.根据权利要求1所述的用于耗材柜的取用验证方法，其特征在于，所述根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息，包括：
根据所述手部区域信息检测手部在每一所述柜内区域的停留时间；
根据所述检测规则判断所述停留时间是否不小于预存的停留时长阈值；
对每一所述柜内区域中手部的停留时间不小于所述停留时长阈值的次数进行统计，得到每一柜内区域中手部出现的有效次数。
6.根据权利要求1所述的用于耗材柜的取用验证方法，其特征在于，所述根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息，包括：
根据所述耗材登记信息确定所述差异集合中每一耗材的放置区域；
根据所述有效次数信息及每一所述耗材的放置区域，确定每一所述耗材的取用概率；
判断每一所述耗材的取用概率是否大于零以得到取用验证信息，所述取用验证信息包含每一所述耗材是否真实取用的判断结果。
7.根据权利要求1所述的用于耗材柜的取用验证方法，其特征在于，所述根据所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息之后，还包括：
根据所述取用验证信息获取验证一致的取用耗材所对应的耗材标签进行上报。
8.一种用于耗材柜的取用验证装置，其特征在于，所述装置配置于用于耗材柜的取用验证系统的数据处理终端，所述系统还包括图像采集装置及标签读写器，所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接，所述装置包括：
初始标签数据集合获取单元，用于从所述标签读写器读取耗材柜中的耗材标签得到初始标签数据集合；
图像获取单元，用于若接收到耗材柜的开门信息，开启所述图像采集装置以获取所述图像采集装置拍摄的连续图像；
手部区域信息获取单元，用于根据预存的区域坐标信息确定所述连续图像的手部区域信息，所述手部区域信息包括所述连续图像的每一图像中手部所处的柜内区域；
有效次数信息获取单元，用于根据预置的检测规则检测所述手部区域信息，以获取与所述手部区域信息对应的有效次数信息；所述有效次数信息为每一柜内区域中手部出现的有效次数；
当前标签数据集合获取单元，用于若接收到所述耗材柜的关门信息，从所述标签读写器读取耗材柜中的耗材标签得到当前标签数据集合；
差异集合获取单元，用于获取所述当前标签数据集合与所述初始标签数据集合的差异集合；
取用验证信息获取单元，用于根据预存的耗材登记信息及所述有效次数信息验证所述差异集合的每一耗材，得到对应的取用验证信息。
9.一种用于耗材柜的取用验证系统，其特征在于，所述系统包括图像采集装置、数据处理终端及标签读写器；
所述图像采集装置设置于耗材柜的正前方，用于采集得到所述耗材柜的图像信息；
所述标签读写器设置于所述耗材柜的内侧边框，用于对所述耗材柜中的耗材标签进行读取；
所述耗材柜包含相互分隔设置的多个柜内区域；所述图像采集装置及所述标签读写器均与所述数据处理终端之间进行网络连接以实现数据信息的传输；
所述数据处理终端，用于实现如权利要求1-7任一项所述的用于耗材柜的取用验证方法。
10.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的用于耗材柜的取用验证方法。
CN202210833442.9A 2022-07-14 2022-07-14 用于耗材柜的取用验证方法、装置、系统及设备 Active CN115223293B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210833442.9A CN115223293B (zh) 2022-07-14 2022-07-14 用于耗材柜的取用验证方法、装置、系统及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210833442.9A CN115223293B (zh) 2022-07-14 2022-07-14 用于耗材柜的取用验证方法、装置、系统及设备

Publications (2)

Publication Number Publication Date
CN115223293A CN115223293A (zh) 2022-10-21
CN115223293B true CN115223293B (zh) 2023-06-02

Family

ID=83612172

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210833442.9A Active CN115223293B (zh) 2022-07-14 2022-07-14 用于耗材柜的取用验证方法、装置、系统及设备

Country Status (1)

Country Link
CN (1) CN115223293B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105006073A (zh) * 2015-07-03 2015-10-28 霍智勇 智能物品管理柜及物品领用管理系统
CN108171172A (zh) * 2017-12-27 2018-06-15 惠州Tcl家电集团有限公司 自助购物方法、自助售卖机及计算机可读存储介质
CN108806074A (zh) * 2018-06-05 2018-11-13 腾讯科技（深圳）有限公司 购物信息的生成方法、装置及存储介质
CN111402512A (zh) * 2018-12-14 2020-07-10 比亚迪股份有限公司 耗材柜
CN112035821A (zh) * 2020-09-04 2020-12-04 平安科技（深圳）有限公司 图形验证码识别方法、装置、计算机设备及存储介质
CN113283439A (zh) * 2021-06-15 2021-08-20 深圳诺博医疗科技有限公司 基于图像识别的智能计数方法、装置及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105006073A (zh) * 2015-07-03 2015-10-28 霍智勇 智能物品管理柜及物品领用管理系统
CN108171172A (zh) * 2017-12-27 2018-06-15 惠州Tcl家电集团有限公司 自助购物方法、自助售卖机及计算机可读存储介质
CN108806074A (zh) * 2018-06-05 2018-11-13 腾讯科技（深圳）有限公司 购物信息的生成方法、装置及存储介质
CN111402512A (zh) * 2018-12-14 2020-07-10 比亚迪股份有限公司 耗材柜
CN112035821A (zh) * 2020-09-04 2020-12-04 平安科技（深圳）有限公司 图形验证码识别方法、装置、计算机设备及存储介质
CN113283439A (zh) * 2021-06-15 2021-08-20 深圳诺博医疗科技有限公司 基于图像识别的智能计数方法、装置及系统

Also Published As

Publication number Publication date
CN115223293A (zh) 2022-10-21

Similar Documents

Publication Publication Date Title
CN109961009B (zh) 基于深度学习的行人检测方法、系统、装置及存储介质
CN106897658B (zh) 人脸活体的鉴别方法和装置
CN105825524B (zh) 目标跟踪方法和装置
WO2021047232A1 (zh) 交互行为识别方法、装置、计算机设备和存储介质
US10032286B2 (en) Tracking objects between images
CN108416902B (zh) 基于差异识别的实时物体识别方法和装置
CN108269333A (zh) 人脸识别方法、应用服务器及计算机可读存储介质
CN109376631B (zh) 一种基于神经网络的回环检测方法及装置
CN108985199A (zh) 商品取放操作的检测方法、装置及存储介质
CN109829467A (zh) 图像标注方法、电子装置及非暂态电脑可读取储存媒体
CN108229324A (zh) 手势追踪方法和装置、电子设备、计算机存储介质
CN111626163B (zh) 一种人脸活体检测方法、装置及计算机设备
CN114155365B (zh) 模型训练方法、图像处理方法及相关装置
CN108955901B (zh) 一种红外测温方法、系统及终端设备
CN110969045B (zh) 一种行为检测方法、装置、电子设备和存储介质
CN111784675A (zh) 物品纹理信息处理的方法、装置、存储介质及电子设备
CN110826646A (zh) 机器人视觉测试方法、装置、存储介质及终端设备
CN110008825A (zh) 掌纹识别方法、装置、计算机设备和存储介质
CN107209556A (zh) 用于对捕获对象相对于交互平面的交互的深度图像进行处理的系统及方法
CN110110110A (zh) 一种以图搜图方法、装置、电子设备及存储介质
CN110909685A (zh) 姿势估计方法、装置、设备及存储介质
CN115223293B (zh) 用于耗材柜的取用验证方法、装置、系统及设备
CN106910207B (zh) 用于识别图像局部区域的方法、装置及终端设备
US20220122341A1 (en) Target detection method and apparatus, electronic device, and computer storage medium
CN115601827A (zh) 一种智能冰箱、存取动作识别方法、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant