自助寄存柜的控制方法和装置
技术领域
本发明涉及智能存储技术领域,特别涉及一种自助寄存柜的控制方法和装置。
背景技术
自助储物柜是让使用者可以实现自助式储存物品,也称为自助寄存柜,具有广泛的应用场景,常见于超市,图书馆,景区等地方,在这些场景中,人们难免会有一些随身的物品要暂时存储。现有的自助寄存柜大多采用的是条形码的方式,在点击自助寄存柜上相关按键会自动打开一个柜子的柜门,供使用者存放物品,并给出一个条形码小票供使用者保留;使用者若要取出物品,则将条形码对准存储柜上的读码器,读码器识别条形码后打开对院柜子的柜门。
现有的技术设备能满足在特定场景暂时存储物品的需求,但是存在条形码小票不方便保留且易丢失,且存在丢失后被他人捡走并取出存储物品的可能,便捷性和安全性都有待改进。
发明内容
为了解决现有技术中自助寄存柜的存取凭证易丢失导致寄存物品存在安全隐患的问题,本发明实施例提供了一种自助寄存柜的控制方法和装置。所述技术方案如下:
第一方面,提供了一种自助寄存柜的控制方法,所述自助寄存柜上设置有摄像装置,所述方法包括:
如果检测到所述摄像装置连续拍摄到人脸达到预设时长,则采集所述摄像装置拍摄的人脸图像;
检测本地是否存储有与所述人脸图像匹配的人脸模型;
如果检测到与所述人脸图像匹配的人脸模型,则控制与所述匹配的人脸模型相绑定的存储柜的柜门开启,删除所述匹配的人脸模型与所述存储柜的绑定信息;
如果未检测到与所述人脸图像匹配的人脸模型,则查询所述自助寄存柜中空闲的存储柜,根据所述人脸图像生成的人脸模型,以及控制任一个所述空闲的存储柜的柜门开启,将所述任一个所述空闲的存储柜与所述生成的人脸模型进行绑定。
可选的,所述删除所述匹配的人脸模型与所述存储柜的绑定信息,包括:
在检测到所述存储柜的柜门关闭时,删除所述匹配的人脸模型与所述存储柜的绑定信息。
可选的,所述将所述任一个所述空闲的存储柜与所述生成的人脸模型进行绑定,包括:
在检测到所述任一个所述空闲的存储柜的柜门关闭时,将所述任一个所述空闲的存储柜与所述生成的人脸模型进行绑定。
可选的,所述检测本地是否存储有与所述人脸图像匹配的人脸模型之前,所述方法还包括:
检测所述摄像装置拍摄的人脸图像是否符合预定条件,所述预定条件包括所述人脸图像中人脸所占比例不超过预设比例、所述人脸图像中人脸的视线方向在预设范围内;
如果符合所述预定条件,则执行所述检测本地是否存储有与所述人脸图像匹配的人脸模型的步骤;
如果不符合所述预定条件,则展示用于提示调整人脸拍摄的提示信息,以及重新执行所述采集所述摄像装置拍摄的人脸图像的步骤。
可选的,检测本地是否存储有与所述人脸图像匹配的人脸模型之前,所述方法还包括:
将所述人脸图像的RGB图像数据转换成YCbCr图像数据;
将所述人脸图像中Cr值位于第一预设区间且Cb值位于第二预设区间的各个像素点确定为肤色像素点,以及将所述人脸图像中除所述肤色像素点以外的其他像素点的Y值、Cb值以及Cr值均置0,得到肤色图像;
采用预定滑动窗口对所述肤色图像进行遍历,得到多个子图像,所述子图像为每帧所述预定滑动窗口内的像素点组成的图像;
根据每个子图像内肤色像素点的数量确定每个子图像是否为肤色区域;
根据被确定为肤色区域的子图像的位置确定所述人脸图像内的肤色区域;
对所述人脸图像内肤色区域内特征值进行排序,以及根据所述排序结果确定所述人脸图像与本地存储的各个人脸模型是否匹配。
可选的,所述将所述人脸图像的RGB图像数据转换成YCbCr图像数据之前,所述方法还包括:
获取人脸图像的灰度数据;
根据所述灰度数据对所述人脸图像进行光照补偿。
可选的,所述根据所述灰度数据对所述人脸图像进行光照补偿,包括:
计算所述人脸图像内处于中心位置的多个像素点的平均灰度值;
根据第一公式计算预定参数的参数值,所述第一公式为γ=log(Ga)-1,Ga为所述平均灰度值,γ为所述预定参数;
利用第二公式调整所述人脸图像中每一像素点的每一颜色通道的亮度值,所述第二公式为:
其中,A为所述人脸图像中任一像素点的任一颜色通道的亮度值,所述AGamma为调整后的所述任一像素点的所述任一颜色通道的亮度值。
可选的,所述根据所述灰度数据对所述人脸图像进行光照补偿,包括:
计算所述人脸图像内处于中心位置的多个像素点的平均灰度值;
根据第一公式计算预定参数的参数值,所述第一公式为γ=log(Ga)-1,Ga为所述平均灰度值,γ为所述预定参数;
查询所述参数值对应的光照补偿关系表,按照所述光照补偿关系表中的对应关系调整每一像素点的每一颜色通道的亮度值。
第二方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有一个或一个以上的指令,所述一个或一个以上的指令被自助寄存柜内的处理器执行时实现第一方面以及第一方面任一可选实施方式所涉及的自助寄存柜的控制方法。
第三方面,提供了一种自助寄存柜的控制装置,所述装置包括:
存储器和处理器;
所述存储器中存储有至少一条程序指令;
所述处理器,通过加载并执行所述至少一条程序指令以实现第一方面以及第一方面任一可选实施方式所涉及的自助寄存柜的控制方法。
本发明实施例提供的技术方案带来的有益效果是:
通过如果检测到摄像装置连续拍摄到人脸达到第一预设时长,则采集该摄像装置拍摄的人脸图像;检测本地是否存储有与该人脸图像匹配的人脸模型;如果未检测到与该人脸图像匹配的人脸模型,则查询自助寄存柜中空闲的存储柜,根据该人脸图像生成的人脸模型,以及控制任一个空闲的存储柜的柜门开启,以及将该柜门开启的空闲的存储柜与生成的人脸模型进行绑定;如果检测到与该人脸图像匹配的人脸模型,则控制与该匹配的人脸模型相绑定的存储柜的柜门开启,删除该匹配的人脸模型与存储柜的绑定信息;解决了相关技术中自助寄存柜存在安全隐患的问题;达到了提高自主寄存柜的安全性的效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例提供的自助寄存柜的控制方法的方法流程图;
图2是本发明一个实施例提供的自助寄存柜的示意图;
图3是本发明一个实施例提供的检测人脸图像是否与人脸模型匹配的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
请参考图1,其示出了本发明一个实施例提供的自助寄存柜的控制方法的方法流程图。如图1所示,该自助寄存柜的控制方法可以包括:
步骤110,如果检测到摄像装置连续拍摄到人脸达到第一预设时长,则采集该摄像装置拍摄的人脸图像。
其中,第一预设时长通常由开发人员设定,例如开发人员可设定第一时长为3秒。
举例来讲,如图2所示,图2所示为一种自助寄存柜的示意图,该自助寄存柜包括多个存储柜20,该自助寄存柜上设置有摄像装置22以及显示装置21,其中该显示装置可以为触摸式显示屏。其中,摄像装置可设置于显示装置的上方,该显示装置可用于显示摄像装置拍摄的图像。
本申请中,检测到摄像装置是否连续拍摄到人脸可通过多种方式实现:
第一种,检测摄像装置拍摄的图像中是否存在人脸;如果存在人脸,则对该人脸进行追踪;如果持续追踪该人脸达到第一预设时长,则确定摄像装置连续拍摄到人脸达到第一预设时长。
第二种,按照预设频率检测摄像装置拍摄的图像中是否存在人脸;如果检测到人脸且第一预设时长内按照预设频率均检测到人脸,则确定摄像装置连续拍摄到人脸达到第一预设时长。其中,预设频率通常由开发人员设定,例如预设频率可以为1秒1次。
步骤120,检测本地是否存储有与该人脸图像匹配的人脸模型。
其中,本地存储的人脸模型包括已在该自助寄存柜寄存物品的用户的人脸模型。
步骤130,如果未检测到与该人脸图像匹配的人脸模型,则查询自助寄存柜中空闲的存储柜,根据该人脸图像生成的人脸模型,以及控制任一个空闲的存储柜的柜门开启,以及将该柜门开启的空闲的存储柜与生成的人脸模型进行绑定。
如果未检测到与该人脸图像匹配的人脸模型,则说明该人脸图像中的用户未使用该自助寄存柜中的存储柜进行物品寄存,则查询自助寄存柜中空闲的存储柜,以及控制任一个空闲的存储柜的电磁锁打开以开启该存储柜的柜门。
可选的,该自助寄存柜上还设置有显示装置和/或语音播放装置,利用显示装置展示柜门开启的存储柜的编号,和/或,利用语音播放装置提示柜门开启的存储柜的编号。
可选的,查询自助寄存柜中空闲的存储柜的具体实现可以为:自助寄存柜记录每个存储柜的状态,存储柜的状态包括空闲、非空闲;自助存储柜查询被标记为空闲状态的存储柜,从中选择一个存储柜并控制该存储柜的柜门开启以供用户进行物品寄存。
可选的,在检测到上述空闲的存储柜的柜门关闭时,将上述空闲的存储柜与生成的人脸模型进行绑定。可选的,在检测到上述空闲的存储柜的柜门关闭时,将该存储柜标记为非空闲状态。
可选的,如果上述被开启的空闲的存储柜开启时长达到第二预设时长,则控制该被开启的空闲的存储柜关闭。其中,第二预设时长可以由开发人员是核定,例如第二预设时长可以为10分钟、5分钟。具体实现可以为:在控制该空闲的存储柜的柜门开启时开始计时;如果计时时长达到第二预设时长,则控制该被开启的空闲的存储柜关闭。
可选的,在上述被开启的空闲的存储柜开启时长达到第二预设时长之前,先展示用于提示关闭关门的提示信息,该提示信息可以以文本提示、语音提示中至少一种进行提示。
可选的,在上述被开启的空闲的存储柜开启时长达到第二预设时长时,将该人脸模型存储至黑名单。使得在摄像装置中的人脸图像与黑名单中的人脸模型相匹配时,拒绝提供寄存服务,也即停止步骤130,还可展示用于提示拒绝提供寄存服务的提示信息,提示信息可以以文字提示、语音提示中任一种进行提示。
步骤140,如果检测到与该人脸图像匹配的人脸模型,则控制与该匹配的人脸模型相绑定的存储柜的柜门开启,删除该匹配的人脸模型与存储柜的绑定信息。
如果检测到与该人脸图像匹配的人脸模型,则说明该人脸图像中的用户已使用存储柜进行了物品寄存此次人脸识别的目的是取出寄存物品,此时控制与匹配的人脸模型相绑定的存储柜的柜门开启,以供用户取出已经寄存的物品。
可选的,在检测到与该人脸模型绑定的存储柜的柜门关闭时,删除该匹配的人脸模型与该存储柜的绑定信息。可选的,在检测到与该人脸模型绑定的存储柜的柜门关闭时,将该存储柜标记为空闲状态。
可选的,在控制与该匹配的人脸模型相绑定的存储柜的柜门开启时,利用显示装置和/或语音装置提示柜门开启的存储柜的编号和/或该存储柜在自助存储柜中的位置。
综上所述,本发明实施例提供的方法,通过如果检测到摄像装置连续拍摄到人脸达到第一预设时长,则采集该摄像装置拍摄的人脸图像;检测本地是否存储有与该人脸图像匹配的人脸模型;如果未检测到与该人脸图像匹配的人脸模型,则查询自助寄存柜中空闲的存储柜,根据该人脸图像生成的人脸模型,以及控制任一个空闲的存储柜的柜门开启,以及将该柜门开启的空闲的存储柜与生成的人脸模型进行绑定;如果检测到与该人脸图像匹配的人脸模型,则控制与该匹配的人脸模型相绑定的存储柜的柜门开启,删除该匹配的人脸模型与存储柜的绑定信息;解决了相关技术中自助寄存柜存在安全隐患的问题;达到了提高自主寄存柜的安全性的效果。
可选的,在执行步骤120之前,检测该摄像装置拍摄的人脸图像是否符合预定条件,该预定条件包括该人脸图像中人脸所占比例不超过预设比例、该人脸图像中人脸的视线方向在预设范围内;如果符合预定条件,则执行步骤120;如果不符合预定条件,则展示用于提示调整人脸拍摄的提示信息,以及重新执行采集摄像装置拍摄的人脸图像的步骤。
可选的,如果人脸图像中人脸所占比例低于最小阈值,则提示用户人脸靠近摄像头;如果人脸图像中人脸所占比例高于最大阈值,则提示用户人脸远离摄像头。
可选的,自助存储柜还统计每个存储柜当前寄存的物品的寄存时长;如果寄存时长超时,则判定恶意存放。具体实现可以为,在将任一存储柜与任一人脸模型绑定时开始计时得到存放时长;如果存放时长超出第三预设时长,则将该人脸模型添加至黑名单和/或展示用于提示有人恶意存放的提示信息,使得管理人员可根据该提示信息清理该存储柜,以及删除与该存储柜相关的绑定信息(包括人脸模型)。其中,第三预设时长可以由开发人员设定,也可由用户自行一,例如第三预设时长可以为设定为12小时。
可选的,检测本地是否存储有与该人脸图像匹配的人脸模型可通过如图3所示的几个步骤实现:
步骤310,将人脸图像的RGB图像数据转换成YCbCr图像数据。
本步骤的具体实现可以为:利用第三公式将人脸图像每一像素点的RGB数据转换成YCbCr数据,该第三公式为:
其中,R为任一像素点的红色通道的亮度值,G为该像素点的绿色通道的亮度值,B为该像素点的蓝色通道的亮度值,Y为该像素点的亮度分量值,Cb为该像素点的蓝色色度分量值,Cr为该像素点的红色色度分量值。
可选的,在步骤310之前,获取人脸图像;获取该人脸图像的灰度数据;根据该灰度数据对人脸图像进行光照补偿,使得过暗或过亮的图像都能够显示比较均衡。
可选的,根据该灰度数据对人脸图像进行光照补偿可通过以下两种方式实现:
第一种,计算人脸图像内处于中心位置的多个像素点的平均灰度值;根据第一公式计算预定参数的参数值,第一公式为γ=log(Ga)-1,Ga为平均灰度值,γ为预定参数;利用第二公式调整人脸图像中每一像素点的每一颜色通道的亮度值,第二公式为:
其中,A为人脸图像中任一像素点的任一颜色通道的亮度值,AGamma为调整后的该像素点的该颜色通道的亮度值。
可选的,本申请中计算人脸图像内处于中心位置的多个像素点的平均灰度值的实现可以为;获取处于人脸图像中心的m行n列像素点,计算该m行n列像素点的平均灰度值。其中,m、n为正整数,通常为开发人员设定,例如,m、n均可设定50。
可选的,根据第一公式计算预定参数的参数值的具体实现可以为:将以10为底该平均灰度值Ga的对数值精确到小数点第一位,以及计算该对数值与1的差值得到预定参数γ。一般来讲,γ值的取值区间为[0.5,1.4],一共包括10个取值。
第二种,计算人脸图像内处于中心位置的多个像素点的平均灰度值;根据第一公式计算预定参数的参数值,第一公式为γ=log(Ga)-1,Ga为平均灰度值,γ为预定参数;查询该参数值对应的光照补偿关系表,按照该光照补偿关系表中的对应关系调整每一像素点的每一颜色通道的亮度值。
该方式中,本地存储γ的每个取值对应的光照补偿关系表,一共10个光照补偿关系表,每个光照补偿关系表记录了每个像素值按照第一公式(第一公式中γ的值为该光照补偿关系表对应的γ的取值)调整后的值,这里所讲的像素值可以为[0,255]中任一个。
通过查询该参数值对应的光照补偿关系表,按照该光照补偿关系表中的对应关系调整每一像素点的每一颜色通道的亮度值,减少了按照第一公式计算调整的时间,能够快速对人脸图像进行光照补偿。
步骤320,将人脸图像中Cr值位于第一预设区间且Cb值位于第二预设区间的各个像素点确定为肤色像素点,以及将人脸图像中除肤色像素点以外的其他像素点的Y值、Cb值以及Cr值均置0,得到肤色图像。
其中,第一预设区间、第二预设区间通常由开发人员设定。可选的,第一预设区间为[133,173],第二预设区间为[77,127]。
在实际实现时,可将人脸图像中的像素点分配给多个处理器,由各个处理器检测被分配的像素点的Cr值是否位于第一预设区间以及Cb值是否位于第二预设区间。
步骤330,采用预定滑动窗口对肤色图像进行遍历,得到多个子图像,子图像为每帧预定滑动窗口内的像素点组成的图像。
其中,预定滑动窗口的大小可以由开发人员设定,也可根据人脸图像的大小设定,例如将预定滑动窗口设定为人脸图像的预定比例的大小,该预定比例小于1。
步骤340,根据每个子图像内肤色像素点的数量确定每个子图像是否为肤色区域。
本步骤的实现可以为:统计每个子图像内肤色像素点的数量;如果肤色像素点的数量达到该子图像内像素点数量的预定比例,则确定子图像为肤色区域。其中,预定比例通常由开发人员设定。预定比例越大提取到的皮肤区域越准确,但是人脸部分会有丢失;预定比例越小,提取取到的皮肤面积越大,但是会有过多的非皮肤区域被选中,会增加计算复杂度和减小特征值的准确性。
可选的,预定比例可以为20%。
步骤350,根据被确定为肤色区域的子图像的位置确定人脸图像内的肤色区域。
本步骤的具体实现可以为:将确定为肤色区域的子图像的区域均确定为肤色区域。
步骤360,对人脸图像内肤色区域内特征值进行排序,以及根据排序结果确定人脸图像与本地存储的各个人脸模型是否人脸匹配。
其中,在对人脸图像内肤色区域内特征值进行排序时,可采用并行正则采样排序(Parallel Sorting by Regular Sampling,PSRS)方法对排序过程进行并行化,以节省排序时间。
本发明一个实施例还提供的一种计算机可读存储介质,该计算机可读存储介质中存储有一个或一个以上的指令,所述一个或一个以上的指令被自助寄存柜内的处理器执行时实现上述任一实施例中所涉及的自助寄存柜的控制方法。
本发明一个实施例还提供一种肤色区域的检测装置,所述装置包括:存储器和处理器;所述存储器中存储有至少一条程序指令;所述处理器,通过加载并执行所述至少一条程序指令以实现上述任一实施例中所涉及的自助寄存柜的控制方法。
术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或隐含所指示的技术特征的数量。由此,限定的“第一”、“第二”的特征可以明示或隐含地包括一个或者更多个该特征。在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。