CN111325903A - 一种货物识别方法、装置、货柜及货物识别服务器 - Google Patents

一种货物识别方法、装置、货柜及货物识别服务器 Download PDF

Info

Publication number
CN111325903A
CN111325903A CN201811436043.9A CN201811436043A CN111325903A CN 111325903 A CN111325903 A CN 111325903A CN 201811436043 A CN201811436043 A CN 201811436043A CN 111325903 A CN111325903 A CN 111325903A
Authority
CN
China
Prior art keywords
image
container
goods
state
cargo
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811436043.9A
Other languages
English (en)
Inventor
梁秋芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN201811436043.9A priority Critical patent/CN111325903A/zh
Publication of CN111325903A publication Critical patent/CN111325903A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F9/00Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/026Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例提供了一种货物识别方法、装置、货柜及货物识别服务器,该方法包括:检测到第一状态转换;指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像;将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物。应用本发明实施例提供的方案识别货物,无需零售商为货柜内的每个货物贴标签,因而能够减少零售商的人工成本。

Description

一种货物识别方法、装置、货柜及货物识别服务器
技术领域
本发明涉及图像识别技术领域,特别是涉及一种货物识别方法、装置、货柜及货物识别服务器。
背景技术
无人货柜是实现货物零售智能化、自动化的常用设备,因其能够大大降低零售商的服务成本、方便用户选取货物而逐渐被普及。
用户从传统的无人货柜中选取货物并关闭无人货柜的柜门后,无人货柜利用RFID(Radio Frequency Identification,射频识别)技术读取货物上粘贴的标签中包含的信息,从而识别用户选取的货物。
虽然应用上述方式可以实现货物识别,但是利用RFID技术进行货物识别时,需要零售商预先为无人货柜中的每个货物粘贴标签,这样导致零售商的人工成本增加。
发明内容
本发明实施例的目的在于提供一种货物识别方法、装置、货柜及货物识别服务器,以降低零售商人工成本。具体技术方案如下:
本发明实施例提供了一种货物识别方法,应用于货柜,所述方法包括:
检测到第一状态转换,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
可选的,在检测到第一状态转换的步骤之前,还包括:
获得安装在所述货柜第二预设位置的第二图像采集设备采集的人脸图像,所述第二预设位置不同于所述第一预设位置,且所述第二图像采集设备在所述第二预设位置处的监控范围不覆盖所述货柜内货物;
将所述人脸图像发送至人脸识别服务器,以使所述人脸识别服务器可确定是否存在与所述人脸图像相匹配的用户信息,得到确定结果;
接收所述人脸识别服务器反馈的所述确定结果;
在所述确定结果表征存在与所述人脸图像相配的用户信息的情况下,控制所述柜门由关闭状态转换为开启状态。
可选的,在检测到第一状态转换时的步骤之前,还包括:
在所述第一状态转换之前所述第二时刻时,指示所述第一图像采集设备采集所述货柜内货物的图像,作为所述第二图像,并获得所述第二图像;
将所述第二图像发送至所述货物识别服务器。
可选的,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集所述货柜内货物的图像。
可选的,所述第一图像采集设备为:具有镜头加热功能的图像采集设备。
可选的,所述第一图像采集设备的镜头包括:镜片、镜头座和电热膜;
所述镜片固定连接于所述镜头座,所述电热膜套接于所述镜片的外周,所述电热膜用于加热所述镜片。
可选的,所述电热膜包括:导热基体、电阻丝和电热膜接口;
所述电阻丝设置于所述导热基体内,所述电阻丝与所述电热膜接口电连接,所述电热膜接口用于与所述第一图像采集设备供电电路的电热膜供电接口电连接。
可选的,所述第一图像采集设备的镜头还包括:电热膜固定套;
所述电热膜固定套用于压紧所述电热膜,所述电热膜的内表面与所述镜片外周贴合、外表面与所述电热膜固定套贴合。
可选的,所述电热膜为圆环状。
可选的,所述电热膜粘结于所述镜片的外周。
本发明实施的又一方面,还提供了一种货物识别方法,应用于货物识别服务器,所述方法包括:
接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
可选的,所述根据所述第一图像和第二图像识别所述货柜内被选取的货物的步骤,包括:
识别所述第一图像中包含的货物的第一信息;
获取所述第二图像中包含的货物的第二信息;
根据所述第一信息相较于所述第二信息减少的信息识别所述货柜内被选取的货物。
可选的,所述根据所述第一图像和第二图像识别所述货柜内被选取的货物的步骤,包括:
确定所述第一图像相较于所述第二图像的图像差异区域;
识别所述图像差异区域中包含的货物的第三信息;
将所述第三信息作为所述货柜内被选取的货物。
可选的,在所述接收货柜发送的第一图像的步骤之前,还包括:
接收所述货柜发送的第二图像,其中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第二时刻时采集的所述货柜内货物的图像。
可选的,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集的所述货柜内货物的图像。
可选的,在识别出所述货柜内被选取的货物之后,还包括:
根据识别出的所述货柜内被选取的货物,生成货物列表;
将所述货物列表发送至所述货柜。
本发明实施的又一方面,还提供了一种货物识别装置,应用于货柜,所述装置包括:
检测模块,用于检测到第一状态转换时触发指示模块,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
所述指示模块,用于指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
第一发送模块,用于将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
可选的,所述装置还包括:
获得模块,用于获得安装在所述货柜第二预设位置的第二图像采集设备采集的人脸图像,所述第二预设位置不同于所述第一预设位置,且所述第二图像采集设备在所述第二预设位置处的监控范围不覆盖所述货柜内货物;
第二发送模块,用于将所述人脸图像发送至人脸识别服务器,以使所述人脸识别服务器可确定是否存在与所述人脸图像相匹配的用户信息,得到确定结果;
第一接收模块,用于接收所述人脸识别服务器反馈的所述确定结果;
解锁模块,用于在所述确定结果表征存在与所述人脸图像相配的用户信息的情况下,控制所述柜门由关闭状态转换为开启状态。
可选的,所述检测模块,还用于在所述第一状态转换之前所述第二时刻时,触发所述指示模块;
所述指示模块,还用于指示所述第一图像采集设备采集所述货柜内货物的图像,作为所述第二图像,并获得所述第二图像;
所述第一发送模块,还用于将所述第二图像发送至所述货物识别服务器。
可选的,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集所述货柜内货物的图像。
可选的,所述第一图像采集设备为:具有镜头加热功能的图像采集设备。
可选的,所述第一图像采集设备的镜头包括:镜片、镜头座和电热膜;
所述镜片固定连接于所述镜头座,所述电热膜套接于所述镜片的外周,所述电热膜用于加热所述镜片。
可选的,所述电热膜包括:导热基体、电阻丝和电热膜接口;
所述电阻丝设置于所述导热基体内,所述电阻丝与所述电热膜接口电连接,所述电热膜接口用于与所述第一图像采集设备供电电路的电热膜供电接口电连接。
可选的,所述第一图像采集设备的镜头还包括:电热膜固定套;
所述电热膜固定套用于压紧所述电热膜,所述电热膜的内表面与所述镜片外周贴合、外表面与所述电热膜固定套贴合。
可选的,所述电热膜为圆环状。
可选的,所述电热膜粘结于所述镜片的外周。
本发明实施的又一方面,还提供了一种货物识别装置,应用于货物识别服务器,所述装置包括:
第二接收模块,用于接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
识别模块,用于根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
可选的,所述识别模块,具体用于,
识别所述第一图像中包含的货物的第一信息;
获取所述第二图像中包含的货物的第二信息;
根据所述第一信息相较于所述第二信息减少的信息识别所述货柜内被选取的货物。
可选的,所述识别模块,具体用于,
确定所述第一图像相较于所述第二图像的图像差异区域;
识别所述图像差异区域中包含的货物的第三信息;
将所述第三信息作为所述货柜内被选取的货物。
可选的,所述第二接收模块,还用于接收所述货柜发送的第二图像,其中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第二时刻时采集的所述货柜内货物的图像。
可选的,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集的所述货柜内货物的图像。
可选的,其特征在于,所述装置还包括:
生成模块,用于根据识别出的所述货柜内被选取的货物,生成货物列表;
第三发送模块,用于将所述货物列表发送至所述货柜。
本发明实施例还提供了一种货柜,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一应用于货柜的货物识别方法。
本发明实施例还提供了一种货物识别服务器,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现上述任一应用于货物识别服务器的货物识别方法。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一应用于货柜的货物识别方法。
本发明实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一应用于货物识别服务器的货物识别方法。
本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一应用于货柜的货物识别方法。
本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一应用于货物识别服务器的货物识别方法。
本发明实施例提供的货物识别方法、装置、货柜及货物识别服务器,可以在检测到第一状态转换时,指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像;将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物。应用本发明实施例提供的方案,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种货物识别方法的流程示意图;
图2为本发明实施例提供的一种货柜的结构示意图;
图3为本发明实施例提供的一种电热膜的平面示意图;
图4为本发明实施例提供的一种具有镜头加热功能的图像采集设备的爆炸图;
图5为本发明实施例提供的采集货柜内货物的图像的示意图;
图6为本发明实施例提供的另一种货物识别方法的流程示意图;
图7为本发明实施例提供的一种货物识别装置的结构示意图;
图8为本发明实施例提供的另一种货物识别装置的结构示意图;
图9为本发明实施例提供的一种货柜内部电路的结构示意图;
图10为本发明实施例提供的一种货物识别服务器的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,示出了本发明实施例提供的一种货物识别方法的流程示意图,该方法应用于货柜,包括:
S100,检测到第一状态转换。
其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态。
用户在需要选取货物时,首先会打开货柜的柜门,然后拿出需要的货物,最后关闭货柜的柜门,也就是用户关闭货柜的柜门后则表示本次选取货物结束。相应地,货柜在检测到柜门由开启状态转换为关闭状态后,则可以确定用户本次选取货物结束,从而执行后续识别货柜内被选取货物的过程。
一种实现方式中,货柜在检测到第一状态转换之前,还需要获得安装在货柜第二预设位置的第二图像采集设备采集的人脸图像;将人脸图像发送至人脸识别服务器,以使人脸识别服务器确定是否存在与人脸图像相匹配的用户信息,得到确定结果;接收人脸识别服务器反馈的确定结果;并在确定结果表征存在与人脸图像相配的用户信息的情况下,控制所述柜门由关闭状态转换为开启状态。由于货柜的零售商需要确定要选取货物的用户是否为在零售商的人脸识别服务器中进行注册的用户,方便进行后续扣费,那么只有用户为已注册用户的情况下才会控制打开货柜的柜门。
具体的,货柜可以发出提示语音,提示当前用户将头部移动到第二图像采集设备的采集区域内,在当前用户将头部移动至采集区域后,采集当前用户的人脸图像,然后将人脸图像发送至人脸识别服务器,由于人脸识别服务器内会记录有已注册的各个用户的信息,则可以在记录的用户信息中查找是否存在与接收到的人脸图像匹配的用户信息,得到确定结果;然后将确定结果发送至货柜,货柜在接收到确定结果后,在确定结果表征存在与人脸图像相配的用户信息的情况下,也就是当前用户为已注册用户的情况下,控制所述柜门由关闭状态转换为开启状态。
柜门打开或关闭时,一种实现方式中,货柜可以通过分别安装在柜门与柜体上相对位置的磁条来检测柜门的开、关门状态,具体的,当柜门打开后,两个磁条分开引起感应电路断开,从而确定柜门打开;柜门关闭后柜门上的磁条回到原来与柜体上磁条相对的位置,导致感应电路闭合,从而确定柜门关闭。
一种实现方式中,第二预设位置可以为货柜的柜门上的一个位置,具体的,如图2所示的货柜的结构示意图中,柜门上安装有标号②所示的第二图像采集设备。
S110,指示安装于货柜第一预设位置的第一图像采集设备采集货柜内货物的图像,作为第一图像,并获得第一图像。
其中,第一图像采集设备在第一预设位置的监控范围覆盖货柜内所有货物。
第一预设位置可以为货柜内部储物空间中的位置,具体的,如图2所示的货柜结构示意图中,货柜的储物空间被三个货架隔层分为四个部分,分别在三个货架隔层和储物空间内货柜的顶部安装有如标号①所示第一图像采集设备,并且第一图像采集设备的镜头朝向下方以用以分别采集每一层内所有货物的图像。
发明人在实现本发明的过程中发现,为了保证货物的存放时间,货柜内的温度通常会比较低,尤其是用于存放需要冷藏的货物的冰柜内温度可能会接近零度,使得货柜内外的温差较大,造成货柜的柜门被打开后,货柜内的第一图像采集设备的镜头上会迅速起雾,进而影响最终货物的识别结果。
因此,本发明实施例一种实现方式中,第一图像采集设备为:具有镜头加热功能的图像采集设备。具体的,第一图像采集设备的镜头包括:镜片、镜头座和电热膜;镜片固定连接于镜头座,电热膜套接于镜片的外周,电热膜用于加热镜片。镜片外周固定有用于加热的电热膜,利用电热模持续给镜片加热,使镜片表面的温度在30℃-40℃,保证在柜门被打开后镜片不会起雾。
相应地,图3为本发明实施例提供的电热膜的平面示意图,电热膜包括:导热基体31、电阻丝32和电热膜接口33,电阻丝32设置于导热基体31内,电阻丝32通过导线34与电热膜接口33电连接,电热膜接口33用于与用于与第一图像采集设备供电电路的电热膜供电接口电连接,以接受供电使得电阻丝32产热。具体的,电阻丝32的额定功率为0.9W,输入电压为5V,加热稳定温度在32℃左右,为了能够将电阻丝发出的热量更好的传递到镜头上导热基体由导热性能好的材料构成。
一种实现方式中,为了能够使电热膜能够贴紧镜头的外周,第一图像采集设备的镜头还包括:电热膜固定套;在电热膜的外周设置有用于压紧电热膜的电热膜固定套,具体的电热膜固定套可以为拥有对称结构的卡扣。
图4为本发明实施例提供的第一图像采集设备的爆炸图,图中电热膜42连接在第一图像采集设备的主板41上,镜头座43用于将镜片45固定在主板41上,电热膜固定套44用以将电热膜42夹紧在镜片45的外周,并且电热膜固定套44能够固定安装在镜头座43上。
参见图5中,左图为利用不具有镜头加热功能的图像采集设备采集的货柜内货物的图像,右图为利用本发明实施例提供的具有镜头加热功能的图像采集设备采集的货柜内货物的图像,通过对比可见,利用本发明实施例提供的具有镜头加热功能的图像采集设备能够清晰的采集到货柜内货物的图像,进而保证货物识别的准确性。
S120,将第一图像发送至货物识别服务器,以使货物识别服务器根据第一图像和第二图像识别货柜内被选取的货物。
其中,第二图像为:在第一状态转换之前第一时刻与第一状态转换之前第二时刻之间第一图像采集设备采集的货柜内货物的图像,第一时刻为:最近一次检测到柜门由开启状态转换为关闭状态的时刻,第二时刻为:最近一次检测到柜门由关闭状态转换为开启状态的时刻。
一种实现方式中,货柜在获得柜内货物的第一图像后,将第一图像发送至货物识别服务器,货物识别服务器在接收到第一图像后,利用图像识别技术识别出第一图像中包含的货物的第一信息,第一信息包括:第一图像中包含的货物的种类和数量;并获得第二图像中的第二信息,然后通过比较确定第一信息比第二信息减少信息,减少的信息也就是当前用户选取的货物的信息。
比如,识别第一图像中包含的货物的第一信息包括:农夫山泉4瓶、康师傅矿泉水7瓶、绿茶3瓶、蓝可乐3瓶和立顿果茶4瓶;获取的第二图像中包含的货物的第二信息包括:农夫山泉4瓶、康师傅矿泉水7瓶、绿茶4瓶、蓝可乐3瓶和立顿果茶5瓶;经过对比可知,第一信息比第二信息少了绿茶1瓶和立顿果茶1瓶,相应地也就能够确定当前用户选取了绿茶1瓶和立顿果茶1瓶。
另一种实现方式中,货柜在获得柜内货物的第一图像后,将第一图像发送至货物识别服务器,货物识别服务器在接收到第一图像后,对第一图像与第二图像进行图像对比,确定第一图像相较述第二图像的图像差异区域;识别图像差异区域中包含的货物的第三信息;将第三信息作为货柜内被选取的货物。由于差异区域是由于货柜内货物被选取之后导致的,因此,可以根据差异区域来确定货柜内被选取的货物。
一种实现方式中,第二图像可以为:用户打开货柜的柜门时,第一图像采集设备采集货柜内货物得到的图像,也就是,在第一状态转换之前第二时刻时第一图像采集设备采集货柜内货物得到的图像。相应地,货柜在检测到第一状态转换时之前,还需要在所述第一状态转换之前所述第二时刻时,指示第一图像采集设备采集货柜内货物的图像,作为第二图像,并获得第二图像;将第二图像发送至货物识别服务器。
另一种实现方式中,第二图像还可以为:第一图像采集设备在第一状态转换之前第一时刻时采集所述货柜内货物的图像。也就是上一个用户选取货物之后关闭柜门时采集的图像,此时,货物识别服务器会记录货柜发送的不同用户在选取货物并关闭柜门之后第一图像采集设备采集的货柜内货物的图像,即通过对比当前用户选取货物之后采集的图像,与上一个用户选取货物之后采集的图像进行对比来确定货柜内被选取的货物。
由于货柜的零售商,需要根据货物识别结果来对用户的选取行为进行扣费,一种实现方式中,货物识别服务器可以根据识别出的货物,生成货柜内被选取的货物的货物列表,一种实现方式中,货物列表可以包括:被选取的货物的名称和数量;将货物列表发送至货柜,货柜在接收到货物列表之后将货物列表转发给零售商的人脸识别服务器,人脸识别服务器根据货物类别中的信息从用户的账户中扣费。另一种实现方式中,货物识别服务器还可以将用户名称、货物列表和货柜的标识发送至零售商的人脸识别服务器,人脸识别服务器根据接收到用户名称确定要扣费的账户,根据货物列表确定要扣的费用进而从确定的账户中扣费,根据货柜的标识确定用户从哪个货柜选取的货物方便了解各个货柜中货物的剩余情况。
为了实现对货柜进行防损坏管理,本发明实施例一种实现方式中,货柜可以实时获得安装在货柜第三预设位置的第三图像采集设备采集的货柜周围环境的第三图像;获得基于第三图像得到对周围环境进行检测的检测结果。其中,第三预设位置可以为货柜外部的某一位置,检测结果也就是是否存在对货柜进行损坏行为的结果。
一种实现方式中,货柜可以将第三图像采集设备采集的货柜周围环境的第三图像发送至人脸识别服务器,人脸识别服务器根据接收到第三图像确定是否存在对货柜进行损坏行为的检测结果,然后将检测结果发送至货柜,从而货柜能够获取到对周围环境进行检测的检测结果,并在确定存在对货柜进行损坏行为时发出警报。
另一种实现方式中,货柜在获得第三图像采集设备采集的货柜周围环境的第三图像后,可以利用自身设备中的检测系统来获得对周围环境进行检测的检测结果。
为了全面获得周围环境的图像,一种实现方式中,如图2所述的货柜的结构示意图中,在货柜的顶部通过一横杆安装标号③所示的第三图像采集设备,用于实时采集的货柜周围环境的第三图像,获得是否存在对货柜进行损坏行为的检测结果。
本发明实施例提供的各个方案中,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
为了方便理解,以下以一具体货物识别过程来对本发明实施例提供的货物识别方法进行说明:
当前用户站在货柜前,并将头部移动至柜门上第二图像采集设备的采集区域内;
货柜获得第二图像采集设备采集的当前用户的人脸图像,将获得的人脸图像发送至货柜零售商的人脸识别服务器;
人脸识别服务器在接收到人脸图像后,确定自身存储的用户信息中是否存在与人脸图像相匹配的用户信息,得到确定结果并将确定结果发送至货柜;
货柜在接收到确定结果后,在确定结果表征存在与人脸图像相配的用户信息的情况下,解锁柜门并发出提示音提示当前用户柜门已经解锁;
货柜检测到当前用户打开柜门后,获得第一图像采集设备采集的货柜内货物的第二图像,并将第二图像发送至货物识别服务器;在检测到当前用户关闭柜门后,获得第一图像采集设备采集的货柜内货物的第一图像,并将第一图像发送至货物识别服务器;
相应地,货物识别服务器在接收到第二图像后,获得第二图像中包含的货物的第二信息;货物识别服务器在接收到第一图像后,获得第一图像中包含的货物的第一信息;根据第一信息相较于第二信息减少的信息识别当前用户选取的货物,并生产货物列表,将生成的货物列表发送至货柜;
货柜在接收到货物类表后,将货物列表转发给人脸识别服务器;
人脸识别服务器根据货物列表从当前用户的账户中扣费。
参见图6,示出了本发明实施例提供的另一种货物识别方法的流程示意图,该方法应用于货物识别服务器,包括:
S600,接收货柜发送的第一图像,其中,第一图像为:货柜在检测到第一状态转换时、指示安装于货柜第一预设位置的第一图像采集设备采集货柜内货物得到的图像,其中,第一状态转换为:货柜的柜门由开启状态转换为关闭状态;
S610,根据第一图像和第二图像识别货柜内被选取的货物,其中,第二图像为:在第一状态转换之前第一时刻与第一状态转换之前第二时刻之间第一图像采集设备采集的货柜内货物的图像,第一时刻为:最近一次检测到柜门由开启状态转换为关闭状态的时刻,第二时刻为:最近一次检测到柜门由关闭状态转换为开启状态的时刻。
一种实现方式中,可以识别第一图像中包含的货物的第一信息;获取第二图像中包含的货物的第二信息;根据第一信息相较于第二信息减少的信息识别货柜内被选取的货物。
另一种实现方式中,还可以确定第一图像相较于第二图像的图像差异区域;识别图像差异区域中包含的货物的第三信息;将第三信息作为货柜内被选取的货物。
一种实现方式中,第二图像可以为:第一图像采集设备在第一状态转换之前第二时刻时采集的货柜内货物的图像。也就是在货物识别服务器接收到货柜发送的第一图像之前,还会接收到货柜发送的第二图像。
另一种实现方式中,第二图像还可以为:第一图像采集设备在第一状态转换之前第一时刻时采集的货柜内货物的图像;此时则需要货物识别服务器记录货柜发送的不同用户在选取货物之后第一图像采集设备采集的货柜内货物的图像,当需要确定当前用户选取的货物时,从记录的图像中获取当前用户上一用户在选取货物之后第一图像采集设备采集的货柜内货物的图像即为第二图像。
本发明实施例一种实现方式中,在识别出货柜内被选取的货物之后,还包括:
根据识别出的货柜内被选取的货物,生成货物列表;
将货物列表发送至货柜。
本发明实施例提供的各个方案中,货物识别服务器可以获取货柜采集的用户选取货物前后货柜内货物的图像,通过对比所获取的图像中包含的货物的信息的变化情况,来识别用户选取的货物,与现有技术相比,无需为货柜内的各个货物贴标签,因而能够降低零售商的人工成本。
参见图7,示出了本发明实施例提供的一种货物识别装置的结构示意图,应用于货柜,该装置包括:
检测模块700,用于检测到第一状态转换时触发指示模块710,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示模块710,用于指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
第一发送模块720,用于将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
本发明实施例一种实现方式中,所述装置还包括:
获得模块,用于获得安装在所述货柜第二预设位置的第二图像采集设备采集的人脸图像,所述第二预设位置不同于所述第一预设位置,且所述第二图像采集设备在所述第二预设位置处的监控范围不覆盖所述货柜内货物;
第二发送模块,用于将所述人脸图像发送至人脸识别服务器,以使所述人脸识别服务器确定是否存在与所述人脸图像相匹配的用户信息,得到确定结果;
第一接收模块,用于接收所述人脸识别服务器反馈的所述确定结果;
解锁模块,用于在所述确定结果表征存在与所述人脸图像相配的用户信息的情况下,控制所述柜门由关闭状态转换为开启状态。
本发明实施例一种实现方式中,所述装置还包括:
检测模块700,还用于在所述第一状态转换之前所述第二时刻时,触发所述指示模块710;
指示模块710,还用于指示所述第一图像采集设备采集所述货柜内货物的图像,作为所述第二图像,并获得所述第二图像;
第一发送模块720,还用于将所述第二图像发送至所述货物识别服务器。
本发明实施例一种实现方式中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集所述货柜内货物的图像。
本发明实施例一种实现方式中,所述第一图像采集设备为:具有镜头加热功能的图像采集设备。
本发明实施例一种实现方式中,所述第一图像采集设备的镜头包括:镜片、镜头座和电热膜;
所述镜片固定连接于所述镜头座,所述电热膜套接于所述镜片的外周,所述电热膜用于加热所述镜片。
本发明实施例一种实现方式中,所述电热膜包括:导热基体、电阻丝和电热膜接口;
所述电阻丝设置于所述导热基体内,所述电阻丝与所述电热膜接口电连接,所述电热膜接口用于与所述第一图像采集设备供电电路的电热膜供电接口电连接。
本发明实施例一种实现方式中,所述第一图像采集设备的镜头还包括:电热膜固定套;
所述电热膜固定套用于压紧所述电热膜,所述电热膜的内表面与所述镜片外周贴合、外表面与所述电热膜固定套贴合。
本发明实施例一种实现方式中,所述电热膜为圆环状。
本发明实施例一种实现方式中,所述电热膜粘结于所述镜片的外周。
本发明实施例提供的各个方案中,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
参见图8,示出了本发明实施例提供的另一种货物识别装置的结构示意图,该装置包括:
第二接收模块800,用于接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
识别模块810,用于根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
本发明实施例一种实现方式中,所述识别模块810,具体用于,
识别所述第一图像中包含的货物的第一信息;
获取所述第二图像中包含的货物的第二信息;
根据所述第一信息相较于所述第二信息减少的信息识别所述货柜内被选取的货物。
本发明实施例一种实现方式中,所述识别模块810,具体用于,
确定所述第一图像相较于所述第二图像的图像差异区域;
识别所述图像差异区域中包含的货物的第三信息;
将所述第三信息作为所述货柜内被选取的货物。
本发明实施例一种实现方式中,所述第二接收模块800,还用于接收所述货柜发送的第二图像,其中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第二时刻时采集的所述货柜内货物的图像。
本发明实施例一种实现方式中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集的所述货柜内货物的图像。
本发明实施例一种实现方式中,所述装置还包括:
生成模块,用于根据识别出的所述货柜内被选取的货物,生成货物列表;
第三发送模块,用于将所述货物列表发送至所述货柜。
本发明实施例提供的各个方案中,货物识别服务器可以获取货柜采集的用户选取货物前后货柜内货物的图像,通过对比所获取的图像中包含的货物的信息的变化情况,来识别用户选取的货物,与现有技术相比,无需为货柜内的各个货物贴标签,因而能够降低零售商的人工成本。
本发明实施例还提供了一种货柜,如图9所示,包括处理器001、通信接口002、存储器003和通信总线004,其中,处理器001,通信接口002,存储器003通过通信总线004完成相互间的通信,
存储器003,用于存放计算机程序;
处理器001,用于执行存储器003上所存放的程序时,实现本发明实施例所述的应用于货柜的货物识别方法。
具体的,上述货物识别方法,包括:
检测到第一状态转换,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,上述处理器001执行存储器003上所存放的程序实现应用于货柜的货物识别方法的其他实施例,与前述方法实施例部分提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
本发明实施例还提供了一种货物识别服务器,如图10所示,包括处理器011、通信接口012、存储器013和通信总线014,其中,处理器011,通信接口012,存储器013通过通信总线014完成相互间的通信,
存储器013,用于存放计算机程序;
处理器011,用于执行存储器013上所存放的程序时,实现本发明实施例所述的应用于货物识别服务器的货物识别方法。
具体的,上述货物识别方法,包括:
接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,上述处理器011执行存储器013上所存放的程序实现应用于货物识别服务器的货物识别方法的其他实施例,与前述方法实施例部分提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货物识别服务器可以获取货柜采集的用户选取货物前后货柜内货物的图像,通过对比所获取的图像中包含的货物的信息的变化情况,来识别用户选取的货物,与现有技术相比,无需为货柜内的各个货物贴标签,因而能够降低零售商的人工成本。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一应用于货柜的货物识别方法。
具体的,上述货物识别方法,包括:
检测到第一状态转换,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,通过上述计算机可读存储介质实现应用于货柜的货物识别方法的其他实施例,与前述方法实施例部分提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
在本发明实施的又一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述任一应用于货物识别服务器的货物识别方法。
具体的,上述货物识别方法,包括:
接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,通过上述计算机可读存储介质实现应用于货物识别服务器的货物识别方法方法的其他实施例,与前述方法实施例部分提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货物识别服务器可以获取货柜采集的用户选取货物前后货柜内货物的图像,通过对比所获取的图像中包含的货物的信息的变化情况,来识别用户选取的货物,与现有技术相比,无需为货柜内的各个货物贴标签,因而能够降低零售商的人工成本。
在本发明实施的又一方面,本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一应用于货柜的货物识别方法。
具体的,上述货物识别方法,包括:
检测到第一状态转换,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,通过上述计算机程序产品实现应用于货柜的货物识别方法的其他实施例,与前述方法实施例部提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货柜可以获得用户选取货物后货柜内货物的图像,然后将所获得的图像发送至货物识别服务器,货物识别服务器通过对比用户选取货物前后货柜内货物的图像的变化情况,来识别用户选取的货物,而无需为货柜内的各个货物贴标签,基于此能够降低零售商的人工成本。
在本发明实施的又一方面,本发明实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述任一应用于货物识别服务器的货物识别方法。
具体的,上述货物识别方法,包括:
接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
需要说明的是,通过上述计算机程序产品实现应用于货物识别服务器的货物识别方法的其他实施例,与前述方法实施例部份提供的实施例相同,这里不再赘述。
本发明实施例提供的各个方案中,货物识别服务器可以获取货柜采集的用户选取货物前后货柜内货物的图像,通过对比所获取的图像中包含的货物的信息的变化情况,来识别用户选取的货物,与现有技术相比,无需为货柜内的各个货物贴标签,因而能够降低零售商的人工成本。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、货柜、货物识别服务器、计算机可读存储介质以及计算机程序产品实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (16)

1.一种货物识别方法,其特征在于,应用于货柜,所述方法包括:
检测到第一状态转换,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
2.一种货物识别方法,其特征在于,应用于货物识别服务器,所述方法包括:
接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
3.一种货物识别装置,其特征在于,应用于货柜,所述装置包括:
检测模块,用于检测到第一状态转换时触发指示模块,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
所述指示模块,用于指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物的图像,作为第一图像,并获得所述第一图像,其中,所述第一图像采集设备在所述第一预设位置的监控范围覆盖所述货柜内所有货物;
第一发送模块,用于将所述第一图像发送至货物识别服务器,以使所述货物识别服务器根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
4.如权利要求3所述的装置,其特征在于,所述装置还包括:
获得模块,用于获得安装在所述货柜第二预设位置的第二图像采集设备采集的人脸图像,所述第二预设位置不同于所述第一预设位置,且所述第二图像采集设备在所述第二预设位置处的监控范围不覆盖所述货柜内货物;
第二发送模块,用于将所述人脸图像发送至人脸识别服务器,以使所述人脸识别服务器可确定是否存在与所述人脸图像相匹配的用户信息,得到确定结果;
第一接收模块,用于接收所述人脸识别服务器反馈的所述确定结果;
解锁模块,用于在所述确定结果表征存在与所述人脸图像相配的用户信息的情况下,控制所述柜门由关闭状态转换为开启状态。
5.如权利要求3所述的装置,其特征在于,
所述检测模块,还用于在所述第一状态转换之前所述第二时刻时,触发所述指示模块;
所述指示模块,还用于指示所述第一图像采集设备采集所述货柜内货物的图像,作为所述第二图像,并获得所述第二图像;
所述第一发送模块,还用于将所述第二图像发送至所述货物识别服务器。
6.如权利要求5所述的装置,其特征在于,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集所述货柜内货物的图像。
7.如权利要求3所述的装置,其特征在于,所述第一图像采集设备的镜头包括:镜片、镜头座和电热膜;
所述镜片固定连接于所述镜头座,所述电热膜套接于所述镜片的外周,所述电热膜用于加热所述镜片。
8.根据权利要求7所述的装置,其特征在于,所述电热膜包括:导热基体、电阻丝和电热膜接口;
所述电阻丝设置于所述导热基体内,所述电阻丝与所述电热膜接口电连接,所述电热膜接口用于与所述第一图像采集设备供电电路的电热膜供电接口电连接。
9.根据权利要求8所述的装置,其特征在于,所述第一图像采集设备的镜头还包括:电热膜固定套;
所述电热膜固定套用于压紧所述电热膜,所述电热膜的内表面与所述镜片外周贴合、外表面与所述电热膜固定套贴合。
10.根据权利要求9所述的装置,其特征在于,所述电热膜为圆环状。
11.根据权利要求10所述的装置,其特征在于,所述电热膜粘结于所述镜片的外周。
12.一种货物识别装置,其特征在于,应用于货物识别服务器,所述装置包括:
第二接收模块,用于接收货柜发送的第一图像,其中,所述第一图像为:所述货柜在检测到第一状态转换时、指示安装于所述货柜第一预设位置的第一图像采集设备采集所述货柜内货物得到的图像,其中,所述第一状态转换为:所述货柜的柜门由开启状态转换为关闭状态;
识别模块,用于根据所述第一图像和第二图像识别所述货柜内被选取的货物,其中,所述第二图像为:在所述第一状态转换之前第一时刻与所述第一状态转换之前第二时刻之间所述第一图像采集设备采集的所述货柜内货物的图像,所述第一时刻为:最近一次检测到所述柜门由开启状态转换为关闭状态的时刻,所述第二时刻为:最近一次检测到所述柜门由关闭状态转换为开启状态的时刻。
13.如权利要求12所述的装置,其特征在于,所述识别模块,具体用于,
识别所述第一图像中包含的货物的第一信息;
获取所述第二图像中包含的货物的第二信息;
根据所述第一信息相较于所述第二信息减少的信息识别所述货柜内被选取的货物。
14.如权利要求12所述的装置,其特征在于,所述识别模块,具体用于,
确定所述第一图像相较于所述第二图像的图像差异区域;
识别所述图像差异区域中包含的货物的第三信息;
将所述第三信息作为所述货柜内被选取的货物。
15.如权利要求12所述的装置,其特征在于,
所述第二接收模块,还用于接收所述货柜发送的第二图像,其中,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第二时刻时采集的所述货柜内货物的图像。
16.如权利要求12所述的装置,其特征在于,所述第二图像为:所述第一图像采集设备在所述第一状态转换之前所述第一时刻时采集的所述货柜内货物的图像。
CN201811436043.9A 2018-11-28 2018-11-28 一种货物识别方法、装置、货柜及货物识别服务器 Pending CN111325903A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811436043.9A CN111325903A (zh) 2018-11-28 2018-11-28 一种货物识别方法、装置、货柜及货物识别服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811436043.9A CN111325903A (zh) 2018-11-28 2018-11-28 一种货物识别方法、装置、货柜及货物识别服务器

Publications (1)

Publication Number Publication Date
CN111325903A true CN111325903A (zh) 2020-06-23

Family

ID=71168424

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811436043.9A Pending CN111325903A (zh) 2018-11-28 2018-11-28 一种货物识别方法、装置、货柜及货物识别服务器

Country Status (1)

Country Link
CN (1) CN111325903A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014134906A (ja) * 2013-01-09 2014-07-24 Panasonic Corp 自動販売機
CN106534631A (zh) * 2016-10-25 2017-03-22 合肥美的电冰箱有限公司 防凝露摄像头及冰箱
CN106781014A (zh) * 2017-01-24 2017-05-31 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN107833368A (zh) * 2017-11-28 2018-03-23 周建楚 自助售货柜及其使用方法
CN107862515A (zh) * 2017-12-25 2018-03-30 东莞弘驰智能技术有限公司 一种售货方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014134906A (ja) * 2013-01-09 2014-07-24 Panasonic Corp 自動販売機
CN106534631A (zh) * 2016-10-25 2017-03-22 合肥美的电冰箱有限公司 防凝露摄像头及冰箱
CN106781014A (zh) * 2017-01-24 2017-05-31 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN107833368A (zh) * 2017-11-28 2018-03-23 周建楚 自助售货柜及其使用方法
CN107862515A (zh) * 2017-12-25 2018-03-30 东莞弘驰智能技术有限公司 一种售货方法及系统

Similar Documents

Publication Publication Date Title
CN108335408B (zh) 用于自动售货机的物品识别方法、装置、系统及存储介质
CN109409291B (zh) 智能货柜的商品识别方法和系统及购物订单的生成方法
WO2019237729A1 (zh) 一种购物结算方法、装置和用户终端
WO2020010827A1 (zh) 一种基于开放式自动售货机的购物结算方法和装置
US11501594B2 (en) Vending machine and vending method and vending system therefor
CN103309438A (zh) 手势输入设备及其控制方法、电子装置、手势输入系统
US10559194B2 (en) System and method for providing customized connected device functionality and for operating a connected device via an alternate object
CN106296724A (zh) 一种目标人物的轨迹信息的确定方法、系统及处理服务器
CN205827521U (zh) 自动售货机
US11120311B2 (en) Adjusting machine settings through multi-pass training of object detection models
CN105187786A (zh) 智能猫眼的语音提醒方法及智能猫眼
JP2021511599A (ja) 無人販売機器、販売方法及び無人販売システム
CN109767557A (zh) 货柜系统
CN107945392B (zh) 自动售货机及采集证据的方法以及存储介质
CN103714843A (zh) 电器产品及其控制方法
WO2018045839A1 (zh) 用于智能冰箱的购物触发方法、设备和计算机可读存储介质
CN111523348B (zh) 信息生成方法和装置、用于人机交互的设备
CN105049710A (zh) 一种大视角摄像头控制方法及用户终端
CN109671211B (zh) 智能货柜撕签行为监控方法及智能货柜、计算机存储介质
CN111325903A (zh) 一种货物识别方法、装置、货柜及货物识别服务器
CN114544658A (zh) 变质食物的确定方法及装置、存储介质及电子装置
CN106878423A (zh) 一种基于监控摄像头的商店营业信息提供方法及其装置
CN109474503A (zh) 一种电器控制方法、装置、存储介质及电器
CN112700312A (zh) 物品对象的结算方法、服务器、客户端及系统
CN107330814A (zh) 智能点餐方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200623

RJ01 Rejection of invention patent application after publication