CN108710874A - 一种基于图像采集装置的自动售货机 - Google Patents

一种基于图像采集装置的自动售货机 Download PDF

Info

Publication number
CN108710874A
CN108710874A CN201810964709.1A CN201810964709A CN108710874A CN 108710874 A CN108710874 A CN 108710874A CN 201810964709 A CN201810964709 A CN 201810964709A CN 108710874 A CN108710874 A CN 108710874A
Authority
CN
China
Prior art keywords
user
image
processing unit
automatic vending
vending machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810964709.1A
Other languages
English (en)
Inventor
黄鼎隆
马修·罗伯特·斯科特
马咪娜
王海涵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Yuepu Investment Center LP
Original Assignee
Shenzhen Malong Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Malong Technologies Co Ltd filed Critical Shenzhen Malong Technologies Co Ltd
Priority to CN201810964709.1A priority Critical patent/CN108710874A/zh
Publication of CN108710874A publication Critical patent/CN108710874A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F11/00Coin-freed apparatus for dispensing, or the like, discrete articles
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07FCOIN-FREED OR LIKE APPARATUS
    • G07F9/00Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/026Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty

Abstract

本发明提供了一种基于图像采集装置的自动售货机,包括:柜体、货架和中控装置;货架和所述中控装置均设于所述柜体内;货架包括多个用于区别不同类别商品的商品陈列区,以及至少有一个图像采集装置对商品陈列区进行图像采集;中控装置,用于控制图像采集装置对商品陈列区进行图像采集。本发明实现了,在开放式购物环境中,利用图像采集设备结合图像识别技术对用户所拿取或放回的商品进行识别,从而大大提高了用户在开放式购物环境下的商品购物效率、为用户的购物流程提供了方便,同时也为基于图像采集装置的自动售货机的管理人员的管理提供了方便,并且提高了用户体验。

Description

一种基于图像采集装置的自动售货机
技术领域
本发明属于自动售货机技术领域,尤其涉及一种基于图像采集装置的自动售货机。
背景技术
物质流通是人类社会的最基本要素。零售行业或直接面向消费者销售的开放式的相关行业(以下简称为零售行业或零售企业)作为当前物质流通的重要手段,需要雇佣大量的收银人员来实现商品的买卖工作,收银人员对消费者所购物品一件一件进行统计,统计完成后,与消费者共同完成支付。
而自动售货柜,则解决了零售行业的人工统计和人工结算的缺陷,是一种面向消费者的无人售货、自动结算的售卖方式。可通过用户的选择,统计出用户所选择的商品的品种种类和总价值,以供用户进行结算,完成支付过程。但目前的自动售货柜只能进行根据用户的选择,自动出货自动结算,并不能在开放的零售购物环境中实现对于用户的购物的行为和所取得的进行准确的识别,从而实现结算。
总之,目前现有的开放式的购物环境中,只能通过人工对于消费者所购得的商品进行逐件的检查、统计和总价计算,耗费大量人力成本,结算时间长效率低,准确度差,而且用户体验差。
发明内容
基于上述问题,本发明的主要目的在于提供一种基于图像采集装置的自动售货机,以解决现有技术中的缺陷和不足。
为解决上述问题,本发明提供一种基于图像采集装置的自动售货机,包括:柜体、货架和中控装置;
所述货架和所述中控装置均设于所述柜体内;
所述货架包括多个用于区别不同类别商品的商品陈列区,以及至少有一个图像采集装置对所述商品陈列区进行图像采集;所述中控装置,用于控制所述图像采集装置对所述商品陈列区进行图像采集;
通过所述图像采集装置对所述商品陈列区进行图像采集,以得到不同时间节点的陈列区情况图像,并对所述陈列区情况图像进行识别,以确定用户是否拿取到目标商品,以及用户所拿取的目标商品的商品信息;所述商品信息包括所述目标商品的商品品种和所述商品品种对应的商品数量。
优选地,
所述中控装置包括处理单元,以及与所述处理单元均电性连接的通信单元和供电单元;
所述图像采集装置与所述处理单元电性连接;
所述通信单元,用于与用户终端或云端服务器进行数据通信;
所述处理单元,用于控制所述图像采集装置实时、定时或根据指令对所述商品陈列区进行图像采集;
所述供电单元,用于对所述中控装置和所述图像采集装置供电。
优选地,
每一个商品陈列区对应设置有至少一个图像采集装置;并且,
所述处理单元每间隔预设时间控制所述图像采集装置对于其对应的商品陈列区进行图像采集。
优选地,
每个商品陈列区设有与其对应的LED指示灯;
所述LED指示灯,与所述处理单元和所述供电单元均电性连接;
在检测到用户进行退货时,当用户将退货商品未放置于与所述退货商品对应的正确的商品陈列区时,通过所述处理单元控制所述LED指示灯对放置错误的商品陈列区进行货品放置错误提示;并且,通过所述处理单元控制所述LED指示灯在与所述退货商品对应的正确的商品陈列区对应的LED指示灯进行货品放置位置提示,以提示用户将该放置错误的退货商品放置于正确的商品陈列区中。
优选地,
所述自动售货机还包括:
设于所述柜体正面上端的人像采集装置;
所述人像采集装置与所述处理单元和所述供电单元均电性连接;
所述人像采集装置用于对用户进行图像采集,得到待识别图像;并且通过所述处理单元进行对所采集到的用户的待识别图像进行识别。
优选地,
所述基于图像采集装置的自动售货机还包括:显示屏;所述中控装置包括红外传感器;
所述红外传感器和所述显示屏均与所述处理单元电性连接;
在用户进入预设红外探测区域时,触发所述红外传感器生成一购物区进入指令;所述处理单元接收到所述购物区进入指令,判定所述用户进行所述购物区进行购物,则控制所述人像采集装置对所述用户进行图像采集,得到所述用户的用户信息识别图像;对所述用户信息识别图像进行识别,以得到所述用户对应的用户信息,并根据所述用户信息,利用所述显示屏显示与所述用户信息相对应的广告内容。
优选地,所述自动售货机还包括:LED照明灯;以及与所述柜体连接的柜门;
所述LED照明灯与所述处理单元和所述供电单元均电性连接;
在用户打开所述基于图像采集装置的自动售货机的所述柜门后,若当前时间到达预设夜晚时间区间,或者通过光传感器进行光感检测判定光源光线不足,则通过所述处理器点亮所述LED照明灯,提供光源,以便于用户进行购物或者图像采集。
优选地,所述柜门上设有门锁感应器;
所述门锁感应器与所述处理单元和所述供电单元均电性连接,用于感应所述柜门的开启过关闭;
当所述处理单元接收到由于柜门打开触发所述门锁感应器生成的柜门开启指令,从而判定所述柜门打开后,控制所述中控装置、所述图像采集装置进入唤醒状态;
当所述处理单元接收到由于柜门关闭触发所述门锁感应器生成的柜门关闭指令,从而判定所述柜门关闭后,所述处理单元根据所述图像采集装置对所述商品陈列区进行图像采集,确定用户选择的商品,生成购物清单,并产生支付信息。
优选地,
还包括kinect骨骼追踪摄像头;
所述kinect骨骼追踪摄像头与所述处理单元电性连接;
所述kinect骨骼追踪摄像头用于,在所述处理单元接收到所述柜门关闭指令或所述柜门开启指令时,对于用户的动作通过kinect骨骼追踪技术进行实时识别,并且根据所识别出的用户动作判定用户是否处于购物状态、退货状态、结算状态。
优选地,所述中控装置还包括制冷组件;
所述制冷组件包括设于所述处理单元表面的冷水通水块、与所述冷水通水块连通的进水管和出水管;以及与所述进水管和出水管组成水冷回路的制冷电机;所述水冷回路中设有循环冷却液;
在所述kinect骨骼追踪摄像头启动时,所述处理单元控制所述制冷组件启动,以便于使所述水冷回路中的循环冷却液进行循环,以达到对所述处理单元的制冷。
本发明提供一种基于图像采集装置的自动售货机,包括:柜体、货架和中控装置;所述货架和所述中控装置均设于所述柜体内;所述货架包括多个用于区别不同类别商品的商品陈列区,以及至少有一个图像采集装置对所述商品陈列区进行图像采集;所述中控装置,用于控制所述图像采集装置对所述商品陈列区进行图像采集;通过所述图像采集装置对所述商品陈列区进行图像采集,以得到不同时间节点的陈列区情况图像,并对所述陈列区情况图像进行识别,以确定用户是否拿取到目标商品,以及用户所拿取的目标商品的商品信息;所述商品信息包括所述目标商品的商品品种和所述商品品种对应的商品数量。本发明通过图像采集装置对柜体内的不同的商品陈列区进行图像采集,并对所采集到的图像进行识别,进而可识别出用户所拿取的商品或退回的商品。本发明实现了,在开放式购物环境中,利用图像采集设备结合图像识别技术对用户所拿取或放回的商品进行识别,从而大大提高了用户在开放式购物环境下的商品购物效率、为用户的购物流程提供了方便,同时也为基于图像采集装置的自动售货机的管理人员的管理提供了方便,并且提高了用户体验。
附图说明
图1为本申请中第一实施例中基于图像采集装置的自动售货机的结构示意图;
图2为本申请中第二实施例中基于图像采集装置的自动售货机的结构示意图;
图3为本申请中第三实施例中基于图像采集装置的自动售货机的结构示意图;
图4为本申请中第四实施例中基于图像采集装置的自动售货机的结构示意图;
图5为本申请中第五实施例中基于图像采集装置的自动售货机的结构示意图;
图6为本申请中第五实施例中基于图像采集装置的自动售货机的制冷组件的细化结构示意图。
附图标记:
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
下面详细描述本发明的实施例,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例1:
参考图1,本实施例提供一种基于图像采集装置122的自动售货机1,包括:柜体11、货架12和中控装置13;
所述货架12和所述中控装置13均设于所述柜体11内;
所述货架12包括多个用于区别不同类别商品的商品陈列区121,以及至少有一个图像采集装置122对所述商品陈列区121进行图像采集;所述中控装置13,用于控制所述图像采集装置122对所述商品陈列区121进行图像采集;
通过所述图像采集装置122对所述商品陈列区121进行图像采集,以得到不同时间节点的陈列区情况图像,并对所述陈列区情况图像进行识别,以确定用户是否拿取到目标商品,以及用户所拿取的目标商品的商品信息;所述商品信息包括所述目标商品的商品品种和所述商品品种对应的商品数量。
上述,本实施例所提供的方法应用于自动售货机,或者具有开放式购物环境的自动售货场景中,例如,在开放式的自动售货机中,打开柜体11后,用户可进入其中进行自选商品,关闭柜体11后进行结算。
上述,图像采集装置122可以为摄像头,用于采集柜体11内的货架12中的商品的图像。
上述,图像采集装置122可以设于柜体11内可对货架12进行图像采集的位置,例如可以设于柜体11内的货架12上端。
上述,自动售货机中包括柜体11,柜体11中包括至少一个货架12,每个柜体11中设有多个商品陈列区121,每个商品陈列区121中摆设有用于区别的对应的商品,即每种商品设置在对应的商品陈列区121中,优选的,每个商品陈列区121之间设有用于分离的隔板,用以区别。
上述,中控装置13,可以对自动售货机内的电子元器件进行控制,例如对于图像采集装置122进行控制,从而进行图像采集和识别;再例如,控制显示屏15显示相应信息,控制柜门19的开启和关闭,控制声控系统的启动和停止,控制进行结算流程等等。
上述,所述柜体11内设有多个不同的商品陈列区121,并且设置有至少一个图像采集装置122可对该商品陈列区121进行图像采集,优选的,每个陈列区设有一个对应的图像采集装置122。商品陈列区121,为商品依据规格、品种进行分类摆放的区域,例如,在购物仓内包括有货柜,每个货柜中设有多个分隔开的单元格,每个单元格中放置一种区别于其他的商品,每个单元格即为一个商品陈列区121。
上述,所述图像采集装置122,可以为摄像头,通过中控装置13的指令对对应的商品陈列区121进行图像采集。
上述,不同的时间节点可以为用户的购物不同的阶段,例如,初始购物阶段,拿取货物、货物离开对应的商品陈列区121等等阶段。不同的时间节点,商品陈列区121内的商品由于用户的购物行为,会发生改变,例如,数量上发生改变,或者原有位置发生改变等等。
通过所述图像采集装置122对所述商品陈列区121进行图像采集,以得到不同时间节点的陈列区情况图像,该陈列区情况图像即为商品在离开或放回对应的或错误的商品陈列区121前后所采集到的图像,例如用户拿货前的图像和用户拿货后的图像。通过中控装置13对所述陈列区情况图像进行识别,从而通过对比识别,获知用户是否拿取到目标商品,以及用户所拿取的目标商品的商品信息;所述商品信息包括所述目标商品的商品品种和所述商品品种对应的商品数量。此外,商品信息中,还可以包括例如商品的其他信息,例如商品的位置信息等等。
本实施例通过图像采集装置122对柜体11内的不同的商品陈列区121进行图像采集,并对所采集到的图像进行识别,进而可识别出用户所拿取的商品或退回的商品。本实施例实现了,在开放式购物环境中,利用图像采集设备结合图像识别技术对用户所拿取或放回的商品进行识别,从而大大提高了用户在开放式购物环境下的商品购物效率、为用户的购物流程提供了方便,同时也为基于图像采集装置122的自动售货机1的管理人员的管理提供了方便,并且提高了用户体验。
实施例2:
参考图2,基于上述实施例1,本实施例提供一种基于图像采集装置122的自动售货机1,所述中控装置13包括处理单元131,以及与所述处理单元131均电性连接的通信单元132和供电单元133;
所述图像采集装置122与所述处理单元131电性连接;
所述通信单元132,用于与用户终端或云端服务器进行数据通信;
所述处理单元131,用于控制所述图像采集装置122实时、定时或根据指令对所述商品陈列区121进行图像采集;
所述供电单元133,用于对所述中控装置13和所述图像采集装置122供电。
上述,中控装置13包括处理单元131、通信单元132和供电单元133;其中,处理单元131可以为中央处理器,用以对于所接收到的数据进行处理并生成相应的指令,以控制其他装置的开启和关闭,或对数据进行运算并生成相应的指令。
上述,通信单元132,可以为无线网络或有线网络连接装置,例如WLAN端口,通过网线与远端服务器连接,或者连接入互联网,并与云端连接。此外,通信单元132,还可以包括无线路由器,对自动售货机的购物范围内进行网络广播,以便于在购物过程中的用户可通过智能终端接入该广播的无线网络,并连接网络进行购物。例如,通过对用户的认证,确定用户为已认证用户后,生成一二维码,用户通过利用手机扫码,获取接入网络许可,从而可通过手机接入通信单元132的无线路由器的网络,进而上网。
上述,供电单元133,可以包括直流电供电和交流电供电,其中直流电供电可以为锂电池或者UPS不间断电流供电,交流电供电为固定电源。
在本实施例中,通过通信单元132,可实现自动售货机与网络的连接,并且控制图像采集单元和供电单元133,从而使自动售货机实现基于互联网的管理和控制,为用户支付安全、管理人员对于自动售货机的管理均提供了方便。
实施例3:
参考图3,基于上述实施例2,本实施例提供一种基于图像采集装置122的自动售货机1,其中,每一个商品陈列区121对应设置有至少一个图像采集装置122;并且,所述处理单元131每间隔预设时间控制所述图像采集装置122对于其对应的商品陈列区121进行图像采集。
每个商品陈列区121设有与其对应的LED指示灯123;
所述LED指示灯123,与所述处理单元131和所述供电单元133均电性连接;
在检测到用户进行退货时,当用户将退货商品未放置于与所述退货商品对应的正确的商品陈列区121时,通过所述处理单元131控制所述LED指示灯123对放置错误的商品陈列区121进行货品放置错误提示;并且,通过所述处理单元131控制所述LED指示灯123在与所述退货商品对应的正确的商品陈列区121对应的LED指示灯123进行货品放置位置提示,以提示用户将该放置错误的退货商品放置于正确的商品陈列区121中。
上述,图像采集装置122,每间隔一预设时间,即对所对应的商品陈列区121进行图像采集。例如,在打开柜门19,用户开始购物后,预设时间为5s,每间隔5s,即对每个商品陈列区121进行图像采集,以确定每个商品陈列区121内的商品变化情况。
进一步的,所述货架12的每个所述商品陈列区121设有一对应的LED指示灯123,用于根据对所述图像采集装置122所采集的商品陈列区121内的图像的识别结果,指示所述商品陈列区121内的商品放置的位置是否正确。
上述,LED指示灯123,为用于起到提醒和指示作用的LED灯,具体的,可在每一个商品陈列区121,即每一个单元格都设有一个或多个对应的LED灯。LED指示灯123,可以为单色的LED灯,也可以为可变色的LED灯,通过颜色变化、频闪或者亮灯,可以提示用户在LED指示灯123所在位置进行拿取商品。
例如,每个预设商品摆放区对应设置有一个LED指示灯123,在用户进行对于退货商品的放置时,可进行对于正确的预设商品摆放区的LED指示灯123的亮灯提示。在本实施例中,在通过语音模块播放错误提示后,可开启正确的商品摆放区对应的LED指示灯123,或者改变该指示灯的颜色,或进行频闪提示,以提示用户将所述退货商品放置于所述LED指示灯123对应的所述预设商品摆放区内。通过图像识别技术,对用户的购物动作的连拍购物图像进行识别,从而判断出用户是否进行退货操作,并通过图像识别,判断出用户退货商品所放置的位置是否正确,是否为原有的预设商品摆放区,如果不是,则通过语音模块进行提示,并且通过与所述预设商品摆放区对应的LED指示灯123进行提示,从而提醒用户将退货商品放置于正确的位置,实现了对于商品的摆放的智能化监控,为用户购物提供了方便,防止出现用户乱摆放商品为其他用户购物过程造成影响的情况。
实施例4:
参考图4,基于上述实施例1,本实施例提供一种基于图像采集装置122的自动售货机1,所述自动售货机还包括:
设于所述柜体11正面上端的人像采集装置14;
所述人像采集装置14与所述处理单元131和所述供电单元133均电性连接;
所述人像采集装置14用于对用户进行图像采集,得到待识别图像;并且通过所述处理单元131进行对所采集到的用户的待识别图像进行识别。
所述基于图像采集装置122的自动售货机1还包括:显示屏15;所述中控装置13包括红外传感器134;
所述红外传感器134和所述显示屏15均与所述处理单元131电性连接;
在用户进入预设红外探测区域时,触发所述红外传感器134生成一购物区进入指令;所述处理单元131接收到所述购物区进入指令,判定所述用户进行所述购物区进行购物,则控制所述人像采集装置14对所述用户进行图像采集,得到所述用户的用户信息识别图像;对所述用户信息识别图像进行识别,以得到所述用户对应的用户信息,并根据所述用户信息,利用所述显示屏15显示与所述用户信息相对应的广告内容。
上述,人像采集装置14,为用于对于用户的面部图像、上身图像或者全身图像进行采集的图像采集装置122,可以为专用的人像采集的摄像头,其可以包括摄像头本身,并且可以包括与摄像头本身连接的可移动万向轴,从而可在处理单元131的控制下进行自适应移动,从而通过自适应移动采集到用户的更加清晰的或者更加完整的可识别的图像。
例如,用户人像采集装置14,用于对用户进行图像识别,以达到用户登录账户的目的。用户人像采集装置14,可对用户进行面部图像采集或者对于用户的全身进行采集,并定位至面部轮廓,截取其中面部截图,进而提取面部的特征,再通过预先训练的神经网络模型对所提取的面部特征进行识别,如果识别出用户为亿注册用户,则通过认证过程,如果未识别出用户的信息,则可进入认证流程,提示新用户注册。
所述红外传感器134,与所述处理单元131电性连接,用于探测所述基于图像采集装置122的自动售货机1的预设红外探测区域内是否存在用户;
若所述用户进入所述预设红外探测区域内,触发所述红外传感器134生成一购物区进入指令并发送至所述处理单元131,所述处理单元131控制开启所述柜体11上的所述显示屏15,以显示与用户对应的广告信息。
上述,显示屏15,通常也被称为监视器。显示器是属于电脑的I/O设备,即输入输出设备。它是一种将一定的电子文件通过特定的传输设备显示到屏幕上再反射到人眼的显示工具。
上述,预设红外探测区域,为预设的基于红外传感器134的感知范围,例如,可以为基于图像采集装置122的自动售货机1为半径2.5m范围内的区域。红外传感器134可以设于柜体11上,也可以设于柜体11下端,用于探测用户是否进入预设红外探测区域。
当用户进入该区域,则通过红外传感器134进行相关提示信息的发送。
进一步的,在所述“在用户进入预设红外探测区域时,触发所述红外传感器134生成一购物区进入指令;所述处理单元131接收到所述购物区进入指令,判定所述用户进行所述购物区进行购物,则控制所述人像采集装置14对所述用户进行图像采集,得到所述用户的用户信息识别图像;对所述用户信息识别图像进行识别,以得到所述用户对应的用户信息,并根据所述用户信息,利用所述显示屏15显示与所述用户信息相对应的广告内容”之后,还可以包括,通过用户人像采集装置14对用户进行识别,从而获取一用户信息;该用户信息可以为云端预存的与该用户对应的用户信息,也可以为通过图像识别技术所实时获取到的用户信息,例如,用户信息中可以包括用户的年龄、性别、服饰穿着风格、发型、发色,甚至心情、眼神等等。根据用户信息,在预设的广告数据中,生成与该用户信息对应的广告,通过显示屏15进行播放,从而实现了因人而异的个性化广告播放。
实施例5:
参考图5-6,基于上述实施例2,本实施例提供一种基于图像采集装置122的自动售货机1,所述自动售货机还包括:LED照明灯16;以及与所述柜体11连接的柜门19;
所述LED照明灯16与所述处理单元131和所述供电单元133均电性连接;
在用户打开所述基于图像采集装置122的自动售货机1的所述柜门19后,若当前时间到达预设夜晚时间区间,或者通过光传感器进行光感检测判定光源光线不足,则通过所述处理器点亮所述LED照明灯16,提供光源,以便于用户进行购物或者图像采集。
所述柜门19上设有门锁感应器17;
所述门锁感应器17与所述处理单元131和所述供电单元133均电性连接,用于感应所述柜门19的开启过关闭;
当所述处理单元131接收到由于柜门19打开触发所述门锁感应器17生成的柜门19开启指令,从而判定所述柜门19打开后,控制所述中控装置13、所述图像采集装置122进入唤醒状态;
当所述处理单元131接收到由于柜门19关闭触发所述门锁感应器17生成的柜门19关闭指令,从而判定所述柜门19关闭后,所述处理单元131根据所述图像采集装置122对所述商品陈列区121进行图像采集,确定用户选择的商品,生成购物清单,并产生支付信息。
所述基于图像采集装置122的自动售货机1还包括kinect骨骼追踪摄像头18;
所述kinect骨骼追踪摄像头18与所述处理单元131电性连接;
所述kinect骨骼追踪摄像头18用于,在所述处理单元131接收到所述柜门19关闭指令或所述柜门19开启指令时,对于用户的动作通过kinect骨骼追踪技术进行实时识别,并且根据所识别出的用户动作判定用户是否处于购物状态、退货状态、结算状态。
所述基于图像采集装置122的自动售货机1所述中控装置13还包括制冷组件135;
所述制冷组件135包括设于所述处理单元131表面的冷水通水块1351、与所述冷水通水块1351连通的进水管1352和出水管1353;以及与所述进水管1352和出水管1353组成水冷回路的制冷电机1354;所述水冷回路中设有循环冷却液;
在所述kinect骨骼追踪摄像头18启动时,所述处理单元131控制所述制冷组件135启动,以便于使所述水冷回路中的循环冷却液进行循环,以达到对所述处理单元131的制冷。
上述,光传感器是一种传感装置,主要由光敏元件组成,主要分为环境光传感器、红外光传感器、太阳光传感器、紫外光传感器四类,主要应用在改变车身电子应用和智能照明系统等领域。现代电测技术日趋成熟,由于具有精度高、便于微机相连实现自动实时处理等优点,已经广泛应用在电气量和非电气量的测量中。然而电测法容易受到干扰,在交流测量时,频率响应不够宽及对耐压、绝缘方面有一定要求,在激光技术迅速发展的今天,已经能够解决上述的问题。
上述,在本实施例中,光传感器用于感知光线的变化。例如,夜晚时的光线与白天时的光线相比具有很大不同,当时间达到夜晚时,通过光传感器可实时检测到当前光线情况,从而判定出当前的时间区域是否处于夜晚。
用户在购物时,需要打开柜门19进行对不同商品的选购,而不同的时间的光线会有很大不同,不同的光线照射情况,会对于用户的购物、以及图像采集均造成较大影响,用户体验不好,并且图像识别干扰较大。
在本实施例中,通过柜门19未关闭用户还处于购物状态中,光传感器感知光线变化,或者根据系统时间判断,当前时间段是否处于预设夜晚时间段,例如,晚上19:00pm-5:00am,则通过处理单元131控制LED照明灯16进行开启,对柜体11内进行照明,从而实现根据用户购物情况,根据当前所处的时间范围,自动打开LED照明灯16在光线较弱的时候进行照明,提高了用户体验,为用户购物提供了方便,并且在用户购物时保持较好的光线,为对于用户拿取的商品的图像采集和识别提供了更好的光源环境。
上述,门锁感应器17,为用于感应柜门19开启和关闭的传感器。其中,柜门19的开启和关闭,可以为用户通过手动开关实现对于柜门19的开关操作,也可以根据图像识别或传感器的指令生成,进行对于柜门19的自动开关。
上述,在柜门19打开和关闭后,分别通过处理单元131控制内部电子元件的唤醒或者休眠,以便于进一步的进行购物或结算。其中,柜门19打开后,可以通过图像采集设备对柜门19内的不同商品陈列区121进行图像采集,得到对照图像。并且,在柜门19关闭后,通过图像采集设备对每个商品陈列区121进行图像采集,得到商品变化陈列图像,并将该图像与对照图像进行比对,从而确定用户拿去或放回的商品的品种和数量,进而生成一清单,再根据该清单进行结算。通过门锁感应器17,可实时判定用户是否进行购物,或者是否结束购物,从而实现在开放式购物环境中,对用户的当前状态的实时掌握,为用户的购物过程提供了方便,提高了用户体验。
此外,在柜体11内,还可以设有一温度传感器,用于感知当前环境温度;
在柜体11内,设有空调装置;所述空调装置包括空压机、冷却液循环装置、油汀加热片、冷风吹送装置和暖风吹送装置;
空压机、冷却液循环装置、冷风吹送装置依次电连接;
油酊加热片、暖风吹送装置电性连接;
当用户打开柜门19时,温度传感器获取当前温度值,并与预设温度范围进行比较,若当前温度值达到预设温度范围,则开启所述空调装置,对柜体11内进行降温或升温;
此外,可以通过用户人像采集装置14实时采集用户的身体位置,进而根据所述身体位置,调整所述冷风吹送装置或暖风吹送装置的吹风方向,以便于保持用户所处于的位置的凉爽或温暖,从而保持温度,大大提高了用户体验,为用户的购物过程提供了方便,使用户购物时尽量减小外界天气和外界温度的影响,保持一个更适宜的温度。
上述,Kinect是微软最近开发出来的一个颠覆目前其他传感器的体感传感器,它利用动态捕捉,影像识别,麦克风输入,语音识别,社群互动,追焦技术以及骨架追踪技术。将人当做遥控器,让玩家体验“免遥控的娱乐”通过自己的四肢运动来进行与其他人的交流。
同时Kinect的骨架追踪技术可以初步的解决传统游戏中关于账号安全的问题。他不再是局限于账号密码那种简单的区别每个人的不同。而是利用一种近似于人脑的方式来解决问题,让Kinect可以分辨出每个人的不同。这样可以不必进行无限次的研究可能性,确定一个人的身份,还可以将人的动作捕捉,进行分析,反馈。利用在各个领域将会取得很大的方便。
本实施例中,自动售货机利用骨骼追踪技术,以实现对于用户的购物行为进行捕捉和判断,通过kinect骨骼追踪摄像头18以实现图像捕捉。
骨架追踪技术是Kinect的核心技术。这个技术可以让Kinect去更好的捕捉人体的动作,并且可以识别人的身份问题。而骨架追踪技术的核心在于利用红外线传感器通过黑白光谱的方式来识别环境内容。黑与白分别对应着无穷远和无穷近。中间的灰色地带是表示着距离。传感器以极快的速度来生成图像,实时的表达环境。3D针模玩具就是类似于此的方式来形成3D环境。
然后,Kinect的任务就是利用分割策略将人从环境中分离出来,对于正在运动中的物体进行像素的分析,找出人体的各个部位。即为在每个图像中建立起一个分割遮罩,将没用的物体去除,仅留下有用的图像,然后再进行图像的传送,以减轻运算的负担。当然,这样的图像可能会有许多种可能性,但是Kinect不会就这样轻易的来评判这个是人体的哪个部位,会进行下一步的判定,再给予答案。
在通过处理单元131基于骨架追踪技术,利用kinect骨骼追踪摄像头18进行对于用户的动作进行追踪时,由于占用较多的系统资源,同时运用多种图形图像技术,所以会造成处理单元131的巨大负担,导致处理单元131的中央处理器的温度过载,甚至可能在炎热天气时,导致系统运行缓慢甚至烧毁的情况。
在本实施例中,通过在处理单元131设置一制冷组件135,用于对该处理单元131的处理器进行通过水冷技术的迅速降温,从而实现对于处理器的冷却,实现对处理器在高负荷运行的情况下进行温度保护。
所述制冷组件135包括设于所述处理单元131表面的冷水通水块1351、与所述冷水通水块1351连通的进水管1352和出水管1353;以及与所述进水管1352和出水管1353组成水冷回路的制冷电机1354;所述水冷回路中设有循环冷却液;
上述,冷水通水块1351,为设于处理单元131外表面的制冷装置,其余处理单元131的外表面贴合,用以实现快速降温,其中,在冷水通水块1351于处理器之间,可设有导热硅胶,用以增加两者的贴合度,减少空隙,提高导热效率,从而提高热传导效率。
进水管1352、冷水通水块1351、出水管1353、制冷电机1354四者之间组成一水冷回路,其中进水管1352和出水管1353的一端均与冷水通水块1351连接,另一端与制冷电机1354连接。水冷回路中,具有可高速循环的循环冷却液,通过在冷水通水块1351中把处理单元131的热量传导出来,并且通过出水管1353进入至制冷电机1354中,在制冷电机1354中迅速降温,并在降温后再通过出水管1353循环返回至冷水通水块1351。
在本实施例中,通过在处理单元131设置的制冷组件135,可实现利用水冷循环技术,对处理单元131进行迅速降温,从而可实现,在自动售货柜在进行运算量较大,造成系统负担较大的骨架追踪技术时,保持处理单元131的运行温度,使处理单元131在正常的温度范围内运行,保持并提高系统的运行效率,从而可使用户在自动售货机的帮助下,高效率的购物、智能的购物,避免了由于系统负载过大,导致处理单元131运行缓慢甚至烧毁,从而使用户无法进行正常的购物流程的问题。

Claims (10)

1.一种基于图像采集装置的自动售货机,其特征在于,包括:柜体、货架和中控装置;
所述货架和所述中控装置均设于所述柜体内;
所述货架包括多个用于区别不同类别商品的商品陈列区,以及至少有一个图像采集装置对所述商品陈列区进行图像采集;所述中控装置,用于控制所述图像采集装置对所述商品陈列区进行图像采集;
通过所述图像采集装置对所述商品陈列区进行图像采集,以得到不同时间节点的陈列区情况图像,并对所述陈列区情况图像进行识别,以确定用户是否拿取到目标商品,以及用户所拿取的目标商品的商品信息;所述商品信息包括所述目标商品的商品品种和所述商品品种对应的商品数量。
2.如权利要求1所述基于图像采集装置的自动售货机,其特征在于,
所述中控装置包括处理单元,以及与所述处理单元均电性连接的通信单元和供电单元;
所述图像采集装置与所述处理单元电性连接;
所述通信单元,用于与用户终端或云端服务器进行数据通信;
所述处理单元,用于控制所述图像采集装置实时、定时或根据指令对所述商品陈列区进行图像采集;
所述供电单元,用于对所述中控装置和所述图像采集装置供电。
3.如权利要求2所述基于图像采集装置的自动售货机,其特征在于,每一个商品陈列区对应设置有至少一个图像采集装置;并且,
所述处理单元每间隔预设时间控制所述图像采集装置对于其对应的商品陈列区进行图像采集。
4.如权利要求2所述基于图像采集装置的自动售货机,其特征在于,每个商品陈列区设有与其对应的LED指示灯;
所述LED指示灯,与所述处理单元和所述供电单元均电性连接;
在检测到用户进行退货时,当用户将退货商品未放置于与所述退货商品对应的正确的商品陈列区时,通过所述处理单元控制所述LED指示灯对放置错误的商品陈列区进行货品放置错误提示;并且,通过所述处理单元控制所述LED指示灯在与所述退货商品对应的正确的商品陈列区对应的LED指示灯进行货品放置位置提示,以提示用户将该放置错误的退货商品放置于正确的商品陈列区中。
5.如权利要求2所述基于图像采集装置的自动售货机,其特征在于,所述自动售货机还包括:
设于所述柜体正面上端的人像采集装置;
所述人像采集装置与所述处理单元和所述供电单元均电性连接;
所述人像采集装置用于对用户进行图像采集,得到待识别图像;并且通过所述处理单元进行对所采集到的用户的待识别图像进行识别。
6.如权利要求5所述基于图像采集装置的自动售货机,其特征在于,所述基于图像采集装置的自动售货机还包括:显示屏;所述中控装置包括红外传感器;
所述红外传感器和所述显示屏均与所述处理单元电性连接;
在用户进入预设红外探测区域时,触发所述红外传感器生成一购物区进入指令;所述处理单元接收到所述购物区进入指令,判定所述用户进行所述购物区进行购物,则控制所述人像采集装置对所述用户进行图像采集,得到所述用户的用户信息识别图像;对所述用户信息识别图像进行识别,以得到所述用户对应的用户信息,并根据所述用户信息,利用所述显示屏显示与所述用户信息相对应的广告内容。
7.如权利要求2所述基于图像采集装置的自动售货机,其特征在于,所述自动售货机还包括:LED照明灯;以及与所述柜体连接的柜门;
所述LED照明灯与所述处理单元和所述供电单元均电性连接;
在用户打开所述基于图像采集装置的自动售货机的所述柜门后,若当前时间到达预设夜晚时间区间,或者通过光传感器进行光感检测判定光源光线不足,则通过所述处理器点亮所述LED照明灯,提供光源,以便于用户进行购物或者图像采集。
8.如权利要求7所述基于图像采集装置的自动售货机,其特征在于,所述柜门上设有门锁感应器;
所述门锁感应器与所述处理单元和所述供电单元均电性连接,用于感应所述柜门的开启过关闭;
当所述处理单元接收到由于柜门打开触发所述门锁感应器生成的柜门开启指令,从而判定所述柜门打开后,控制所述中控装置、所述图像采集装置进入唤醒状态;
当所述处理单元接收到由于柜门关闭触发所述门锁感应器生成的柜门关闭指令,从而判定所述柜门关闭后,所述处理单元根据所述图像采集装置对所述商品陈列区进行图像采集,确定用户选择的商品,生成购物清单,并产生支付信息。
9.如权利要求8所述基于图像采集装置的自动售货机,其特征在于,还包括kinect骨骼追踪摄像头;
所述kinect骨骼追踪摄像头与所述处理单元电性连接;
所述kinect骨骼追踪摄像头用于,在所述处理单元接收到所述柜门关闭指令或所述柜门开启指令时,对于用户的动作通过kinect骨骼追踪技术进行实时识别,并且根据所识别出的用户动作判定用户是否处于购物状态、退货状态、结算状态。
10.如权利要求9所述基于图像采集装置的自动售货机,其特征在于,所述中控装置还包括制冷组件;
所述制冷组件包括设于所述处理单元表面的冷水通水块、与所述冷水通水块连通的进水管和出水管;以及与所述进水管和出水管组成水冷回路的制冷电机;所述水冷回路中设有循环冷却液;
在所述kinect骨骼追踪摄像头启动时,所述处理单元控制所述制冷组件启动,以便于使所述水冷回路中的循环冷却液进行循环,以达到对所述处理单元的制冷。
CN201810964709.1A 2018-08-23 2018-08-23 一种基于图像采集装置的自动售货机 Pending CN108710874A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810964709.1A CN108710874A (zh) 2018-08-23 2018-08-23 一种基于图像采集装置的自动售货机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810964709.1A CN108710874A (zh) 2018-08-23 2018-08-23 一种基于图像采集装置的自动售货机

Publications (1)

Publication Number Publication Date
CN108710874A true CN108710874A (zh) 2018-10-26

Family

ID=63873357

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810964709.1A Pending CN108710874A (zh) 2018-08-23 2018-08-23 一种基于图像采集装置的自动售货机

Country Status (1)

Country Link
CN (1) CN108710874A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109637022A (zh) * 2018-12-29 2019-04-16 张明亮 一种液体包装袋自动零售机
CN109872448A (zh) * 2019-01-19 2019-06-11 创新奇智(广州)科技有限公司 一种异物检测方法、计算机可读存储介质及检测系统
CN109948538A (zh) * 2019-03-19 2019-06-28 成都好享你网络科技有限公司 基于行为检测的视觉识别方法、装置和自动售货机
CN110047197A (zh) * 2019-01-24 2019-07-23 阿里巴巴集团控股有限公司 一种数据处理方法、设备、介质以及装置
CN111612970A (zh) * 2020-05-27 2020-09-01 京东方科技集团股份有限公司 货架系统及控制方法
CN113223255A (zh) * 2020-02-04 2021-08-06 东芝泰格有限公司 陈列用具
CN117671605A (zh) * 2024-02-01 2024-03-08 江苏源坤电子科技有限公司 一种基于大数据的冷柜摄像头角度控制系统及方法

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH087163A (ja) * 1994-06-22 1996-01-12 Shibaura Eng Works Co Ltd 自動販売機
WO2004072879A1 (en) * 2003-02-14 2004-08-26 Philips Intellectual Property & Standards Gmbh Method of managing stocks of articles
JP2005328985A (ja) * 2004-05-19 2005-12-02 Dainippon Printing Co Ltd 商品移動状況モニタリングシステム
JP2008065427A (ja) * 2006-09-05 2008-03-21 Central Japan Techno Service Kk 自動販売機用盗難監視装置
CN103544636A (zh) * 2013-11-08 2014-01-29 梁涛 基于虚拟商场的互动方法及设备
CN107146325A (zh) * 2017-07-13 2017-09-08 杭州宗盛智能科技有限公司 自动售货机及其控制方法、控制装置和系统
CN107481414A (zh) * 2017-08-21 2017-12-15 文彬 一种开放式无人售卖装置的实时导购方法及系统
JP6258535B1 (ja) * 2016-12-12 2018-01-10 尚茂智能科技股▲ふん▼有限公司 インテリジェント自動販売機
CN107705129A (zh) * 2017-09-15 2018-02-16 泾县麦蓝网络技术服务有限公司 一种应用于实体零售店的购物结算方法和系统
CN108230559A (zh) * 2018-02-08 2018-06-29 中山简单点网络技术有限公司 一种自动售货装置及其运行方法及自动售货系统
WO2018137136A1 (zh) * 2017-01-24 2018-08-02 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN209103314U (zh) * 2018-08-23 2019-07-12 深圳码隆科技有限公司 一种基于图像采集装置的自动售货机

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH087163A (ja) * 1994-06-22 1996-01-12 Shibaura Eng Works Co Ltd 自動販売機
WO2004072879A1 (en) * 2003-02-14 2004-08-26 Philips Intellectual Property & Standards Gmbh Method of managing stocks of articles
JP2005328985A (ja) * 2004-05-19 2005-12-02 Dainippon Printing Co Ltd 商品移動状況モニタリングシステム
JP2008065427A (ja) * 2006-09-05 2008-03-21 Central Japan Techno Service Kk 自動販売機用盗難監視装置
CN103544636A (zh) * 2013-11-08 2014-01-29 梁涛 基于虚拟商场的互动方法及设备
JP6258535B1 (ja) * 2016-12-12 2018-01-10 尚茂智能科技股▲ふん▼有限公司 インテリジェント自動販売機
WO2018137136A1 (zh) * 2017-01-24 2018-08-02 广州市蚁道互联网有限公司 自动售货机及其运行方法
CN107146325A (zh) * 2017-07-13 2017-09-08 杭州宗盛智能科技有限公司 自动售货机及其控制方法、控制装置和系统
CN107481414A (zh) * 2017-08-21 2017-12-15 文彬 一种开放式无人售卖装置的实时导购方法及系统
CN107705129A (zh) * 2017-09-15 2018-02-16 泾县麦蓝网络技术服务有限公司 一种应用于实体零售店的购物结算方法和系统
CN108230559A (zh) * 2018-02-08 2018-06-29 中山简单点网络技术有限公司 一种自动售货装置及其运行方法及自动售货系统
CN209103314U (zh) * 2018-08-23 2019-07-12 深圳码隆科技有限公司 一种基于图像采集装置的自动售货机

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109637022A (zh) * 2018-12-29 2019-04-16 张明亮 一种液体包装袋自动零售机
CN109872448A (zh) * 2019-01-19 2019-06-11 创新奇智(广州)科技有限公司 一种异物检测方法、计算机可读存储介质及检测系统
CN110047197A (zh) * 2019-01-24 2019-07-23 阿里巴巴集团控股有限公司 一种数据处理方法、设备、介质以及装置
CN110047197B (zh) * 2019-01-24 2021-08-20 创新先进技术有限公司 一种数据处理方法、设备、介质以及装置
CN109948538A (zh) * 2019-03-19 2019-06-28 成都好享你网络科技有限公司 基于行为检测的视觉识别方法、装置和自动售货机
CN113223255A (zh) * 2020-02-04 2021-08-06 东芝泰格有限公司 陈列用具
CN111612970A (zh) * 2020-05-27 2020-09-01 京东方科技集团股份有限公司 货架系统及控制方法
WO2021238646A1 (zh) * 2020-05-27 2021-12-02 京东方科技集团股份有限公司 货架系统及控制方法
US20230076584A1 (en) * 2020-05-27 2023-03-09 Beijing Boe Display Technology Co., Ltd. Shelf system and control method
CN117671605A (zh) * 2024-02-01 2024-03-08 江苏源坤电子科技有限公司 一种基于大数据的冷柜摄像头角度控制系统及方法

Similar Documents

Publication Publication Date Title
CN108710874A (zh) 一种基于图像采集装置的自动售货机
CN108765708A (zh) 一种无人自动售货机
CN106779947B (zh) 一种货架和包含该货架的物品流通系统及物品流通方法
CN109934625A (zh) 一种人工智能显示屏广告动态投放系统和方法
CN103890675B (zh) 恒温器和优化恒温器的用户界面的运行的方法
CN108875669B (zh) 一种基于可见光与红外图像融合的商品识别技术
CN107895181A (zh) 电子标签的控制方法、装置及系统
CN209103314U (zh) 一种基于图像采集装置的自动售货机
CN105165119B (zh) 照明设备及用于管理照明系统的方法
CN107397530A (zh) 一种中医体质与情感辨别调理系统
CN108734459A (zh) 一种3d超市商品核验系统
JP2006285409A (ja) 店舗等における人数及び人流カウント方法並びにこれらを利用したインストアマーチャンダイジングの提言方法。
CN113205636B (zh) 一种无人零售系统及无人零售方法
CN108647671A (zh) 一种光学标识视觉识别方法及基于该方法的无人售货柜
CN209029110U (zh) 中医面诊健康管理系统
CN109754009A (zh) 物品识别方法、装置、售货系统和存储介质
CN107702290A (zh) 空调器的控制方法及装置、终端
CN109670613A (zh) 一种无人值守的羽毛球馆运营系统
CN106096984A (zh) 一种基于物联网技术的智能门店用线上线下一体化管理系统
CN208796351U (zh) 一种无人自动售货机
CN107924544A (zh) 信息处理系统和信息处理方法
CN109983526A (zh) 信息处理设备、信息处理方法以及记录介质
CN110225141A (zh) 内容推送方法、装置及电子设备
CN108851833A (zh) 基于机器学习训练算法的智能穿衣镜及其训练方法
CN109300265A (zh) 无人超市管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220629

Address after: Room 368, 302, 211 Fute North Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai

Applicant after: Shanghai Yuepu Investment Center (L.P.)

Address before: 518000 floor 33, Yantian modern industry service center, 3018 Shayan Road, Shatoujiao street, Yantian District, Shenzhen City, Guangdong Province

Applicant before: SHENZHEN MALONG TECHNOLOGY Co.,Ltd.