CN113525489A - 一种购物装置和商品放置检测方法、检测系统 - Google Patents
一种购物装置和商品放置检测方法、检测系统 Download PDFInfo
- Publication number
- CN113525489A CN113525489A CN202110208970.0A CN202110208970A CN113525489A CN 113525489 A CN113525489 A CN 113525489A CN 202110208970 A CN202110208970 A CN 202110208970A CN 113525489 A CN113525489 A CN 113525489A
- Authority
- CN
- China
- Prior art keywords
- commodity
- photo
- processor
- shopping list
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 77
- 230000007246 mechanism Effects 0.000 claims abstract description 66
- 238000009434 installation Methods 0.000 claims abstract description 23
- 230000002159 abnormal effect Effects 0.000 claims description 27
- 230000005484 gravity Effects 0.000 claims description 21
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000000034 method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 3
- 229920000742 Cotton Polymers 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000006260 foam Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
- B62B3/00—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor
- B62B3/14—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor characterised by provisions for nesting or stacking, e.g. shopping trolleys
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62B—HAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
- B62B3/00—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor
- B62B3/14—Hand carts having more than one axis carrying transport wheels; Steering devices therefor; Equipment therefor characterised by provisions for nesting or stacking, e.g. shopping trolleys
- B62B3/1428—Adaptations for calculators, memory aids or reading aids
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01D—MEASURING NOT SPECIALLY ADAPTED FOR A SPECIFIC VARIABLE; ARRANGEMENTS FOR MEASURING TWO OR MORE VARIABLES NOT COVERED IN A SINGLE OTHER SUBCLASS; TARIFF METERING APPARATUS; MEASURING OR TESTING NOT OTHERWISE PROVIDED FOR
- G01D21/00—Measuring or testing not otherwise provided for
- G01D21/02—Measuring two or more variables by means not covered by a single other subclass
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Bioinformatics & Cheminformatics (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Cash Registers Or Receiving Machines (AREA)
Abstract
本发明提供一种购物装置和商品放置检测方法、检测系统,所述购物装置包括底座、车体框架、固定板、超声波发生器、超声波接收器、第一拍摄机构和第二拍摄机构,底座的内部设有供电单元、储存器、处理器和无线网络单元;车体框架固定在底座的上方,车体框架设有开口向上的容置部,车体框架的顶部边缘还设有倾斜的安装斜面;固定板固定在车体框架的顶部边缘,且与斜面相对设置;超声波发生器固定在固定板上,超声波接收器固定在固定板上,用于接收超声波检测区上的物品反射回的超声波的回波信号;第一拍摄机构固定在固定板上,且位于固定板朝向安装斜面的一侧;第二拍摄机构固定在安装斜面上。本发明可以快速且准确地识别出用户放置或移除的商品。
Description
技术领域
本发明涉及商品放置情况的检测技术领域,具体涉及一种购物装置和商品放置检测方法、检测系统。
背景技术
现有的购物车会采用在底部安装重力传感器的方式感应购物车内重量的变化,当重力传感器感知到有重量变化时,处理器会驱动相机对购物车内的商品进行拍照,然后根据照片识别购物车内的商品,并将识别到的商品加入到购物清单内,然而这样的方式难以准确识别出哪个商品是刚刚加入购物车内的商品,而且很容易出现商品的条形码被其他商品遮挡的情况,导致无法准确地识别出加入购物车内的商品。
发明内容
本发明的目的在于克服现有技术中的缺点与不足,提供一种购物装置和商品放置检测方法、检测系统,可以快速且准确地识别出用户放置或移除的商品。
本发明的一个实施例提供一种购物装置,包括:
底座,所述底座的内部设有供电单元、储存器、处理器和无线网络单元,所述供电单元分别与所述储存器、处理器和无线网络单元连接,所述储存器与所述处理器连接,所述处理器与所述无线网络单元连接,所述无线网络单元与商场服务器连接;
车体框架,所述车体框架固定在所述底座的上方,所述车体框架设有开口向上的容置部,所述车体框架的顶部边缘还设有一自上而下沿靠近所述容置部的方向倾斜的安装斜面;
固定板,所述固定板固定在所述车体框架的顶部边缘,且与所述斜面相对设置,所述固定板自下而上沿靠近所述安装斜面的方向倾斜;
超声波发生器,所述超声波发生器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波发生器与所述底座的处理器连接,所述超声波发生器用于向所述安装斜面发送超声波信号;形成一覆盖于所述容置部上方的超声波检测区;
超声波接收器,所述超声波接收器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波接收器与所述底座的处理器连接,所述超声波接收器用于接收所述超声波检测区上的物品反射回的超声波的回波信号,并将所述回波信号发送给所述处理器;
第一拍摄机构,所述第一拍摄机构固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述第一拍摄机构与所述底座的处理器连接,所述第一拍摄机构的相机镜头朝向所述超声波检测区;
第二拍摄机构,所述第二拍摄机构固定在所述安装斜面上,所述第二拍摄机构与所述底座的处理器连接,所述第二拍摄机构的相机镜头朝向所述超声波检测区。
在本实施例中,本发明的购物装置可以利用超声波发生器和超声波接收器快速地检测出经过所述超声波检测区的范围内的商品,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过处理器对照片进行识别从而获得所述商品的信息,相对于现有技术,本发明可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
进一步,还包括显示屏,所述显示屏固定在所述固定板上,且位于与所述第一拍摄机构相背的一侧,所述显示屏与所述处理器连接。有利于用户查看购物装置内的商品清单,以及所述第一拍摄机构和第二拍摄机构拍摄的图片。
进一步,还包括指示灯,所述指示灯固定在所述底座或车体框架的外表面,所述指示灯与所述处理器连接。有利于提醒顾客或服务员该购物装置的状态。
进一步,所述车体框架的底部还设有一重力传感器,所述重力传感器位于所述容置部的下方,所述重力传感器与所述处理器连接。
在本实施例中,通过重力传感器感应容置部内的重量的变化,从而判断被拍照的商品是被放置到容置部内还是被移除到容置部外,有利于判断购物装置内的商品是增加还是减少。
本发明的一个实施例还提供一种商品放置检测方法,包括以下步骤:
获取购物装置上的超声波接收器接收的回波信号;
根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
对所述第一照片和第二照片中进行条形码识别;
若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
相对于现有技术,本发明的商品放置检测方法通过获取超声波接收器接收的回波信号,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过对照片进行识别从而获得所述商品的信息,可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
进一步,还包括以下步骤:
在对所述第一照片和第二照片中进行条形码识别时,将所述第一照片和第二照片显示在一显示屏上;
在将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述信息比对成功的商品和虚拟购物清单的信息显示在所述显示屏上;
在将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述特征比对成功的商品和虚拟购物清单的信息显示在所述显示屏上。
进一步,还包括以下步骤:
获取所述虚拟购物清单的当前状态,若所述购物车的当前状态为异常状态,驱动一指示灯进入第一亮灯状态,否则,驱动所述指示灯保持第二亮灯状态。
进一步,还包括以下步骤:
通过一重力传感器获取购物装置内的商品实时的重量数据;
若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
本发明的一个实施例还提供一种商品放置检测系统,包括:回波信号获取模块、商品检测模块、条形码识别模块、第一商品处理模块和第二商品处理模块;
所述回波信号获取模块用于获取购物装置上的超声波接收器接收的回波信号;
所述商品检测模块用于根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
所述用于若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
所述条形码识别模块用于对所述第一照片和第二照片中进行条形码识别;
所述第一商品处理模块用于,若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
所述第二商品处理模块用于,若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
相对于现有技术,本发明的商品放置检测系统通过获取超声波接收器接收的回波信号,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过对照片进行识别从而获得所述商品的信息,可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
进一步,还包括:重力感应模块,所述重力感应模块用于通过一重力传感器获取购物装置内的商品实时的重量数据;若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
为了能更清晰的理解本发明,以下将结合附图说明阐述本发明的具体实施方式。
附图说明
图1为本发明一个实施例的购物装置的结构图。
图2为本发明一个实施例的商品放置检测方法的流程图。
图3为本发明一个实施例的商品放置检测系统的模块连接图。
1、底座;2、车体框架;21、滑轮组;22推杆;3、固定板;4、超声波发生器;5、超声波接收器;6、第一拍摄机构;7、第二拍摄机构;101、回波信号获取模块;102、商品检测模块;103、照片拍摄模块;104、条形码识别模块;105、第一商品处理模块;106、第二商品处理模块。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其是本发明一个实施例的购物装置的结构图,包括:
底座1,所述底座1的内部设有供电单元、储存器、处理器和无线网络单元(图未示),所述供电单元分别与所述储存器、处理器和无线网络单元连接,所述储存器与所述处理器连接,所述处理器与所述无线网络单元连接,所述无线网络单元与商场服务器连接;
车体框架2,所述车体框架2固定在所述底座1的上方,所述车体框架2设有开口向上的容置部,所述车体框架2的顶部边缘还设有一自上而下沿靠近所述容置部的方向倾斜的安装斜面;
优选地,所述车体框架2的底部设有滑轮组21,优选地,所述滑轮组21为万向轮滑轮组21;
固定板,所述固定板固定在所述车体框架2的顶部边缘,且与所述斜面相对设置,所述固定板自下而上沿靠近所述安装斜面的方向倾斜;
优选地,所述固定板平行于所述安装斜面;
优选地,所述车体框架2的顶部边缘还设有推杆,所述推杆位于所述固定板所在的一侧;
超声波发生器,所述超声波发生器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波发生器与所述底座1的处理器连接,所述超声波发生器用于向所述安装斜面发送超声波信号;形成一覆盖于所述容置部上方的超声波检测区;
优选地,所述车体框架2还固定有吸音机构,所述吸引机构覆盖在所述车体框架2与所述超声波检测区重叠的部分的外表面;所述吸引机构包括但不限于吸音板、和/或棉垫、和/或吸音泡沫;
超声波接收器,所述超声波接收器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波接收器与所述底座1的处理器连接,所述超声波接收器用于接收所述超声波检测区上的物品反射回的超声波的回波信号,并将所述回波信号发送给所述处理器;
第一拍摄机构,所述第一拍摄机构固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述第一拍摄机构与所述底座1的处理器连接,所述第一拍摄机构的相机镜头朝向所述超声波检测区;
第二拍摄机构,所述第二拍摄机构固定在所述安装斜面上,所述第二拍摄机构与所述底座1的处理器连接,所述第二拍摄机构的相机镜头朝向所述超声波检测区。
在本实施例中,本发明的购物装置可以利用超声波发生器和超声波接收器快速地检测出经过所述超声波检测区的范围内的商品,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过处理器对照片进行识别从而获得所述商品的信息,相对于现有技术,本发明可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
优选地,所述第一拍摄机构和第二拍摄机构都采用高速相机,其中所述第一拍摄机构包括A相机和B相机,所述A相机和B相机分别设置在所述固定板同一水平高度的两边,所述第二拍摄机构包括C相机和D相机,所述C相机和D相机分别设置在所述安装斜面同一水平高度的两边;其中所述A相机相邻于B相机和D相机,C相机相邻与B相机和D相机,所述A相机和C相机的镜头相对,所述B相机和D相机的镜头相对。
在一个可行的实施例中,还包括显示屏,所述显示屏固定在所述固定板上,且位于与所述第一拍摄机构相背的一侧,所述显示屏与所述处理器连接。
在本实施例中,所述处理器识别出商品的信息后,根据商品的信息调整购物清单的内容,并将购物清单的内容和所述第一拍摄机构和第二拍摄机构拍摄的图片发送到显示屏上,有利于用户查看购物装置内的商品清单,以及所述第一拍摄机构和第二拍摄机构拍摄的图片。可选地,所述显示屏还配有用于发送指令的物理按键。优选地,所述显示屏为触摸屏。
在一个可行的实施例中,还包括指示灯,所述指示灯固定在所述底座1或车体框架2的外表面,所述指示灯与所述处理器连接。
在本实施例中,当所述处理器无法从所述所述第一拍摄机构和第二拍摄机构拍摄的图片中识别出对应的商品时,驱动一指示灯进入第一亮灯状态,否则,驱动所述指示灯保持第二亮灯状态。可选地,所述指示灯为单色灯,所述第一亮灯状态可以为常亮或闪烁,所述第二亮灯状态为常暗状态。优选地,所述指示灯为双色灯,例如红绿色指示灯,当所述指示灯为红绿色指示灯时,所述第一亮灯状态可以是亮红色灯光,而所述第二亮灯状态可以是亮绿色灯光,反之亦然。有利于提醒顾客或服务员该购物装置的状态。
在一个可行的实施例中,所述车体框架2的底部还设有一重力传感器,所述重力传感器位于所述容置部的下方,所述重力传感器与所述处理器连接。
在本实施例中,通过重力传感器感应容置部内的重量的变化,从而判断被拍照的商品是被放置到容置部内还是被移除到容置部外,有利于判断购物装置内的商品是增加还是减少。
请参阅图2,本发明的一个实施例还提供一种商品放置检测方法,所述商品放置检测方法应用于检测上述购物装置的商品放置情况,包括以下步骤:
S1:获取购物装置上的超声波接收器接收的回波信号;
S2:根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
S3:若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
S4:对所述第一照片和第二照片中进行条形码识别;
S5:若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
S6:若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
相对于现有技术,本发明的商品放置检测方法通过获取超声波接收器接收的回波信号,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过对照片进行识别从而获得所述商品的信息,可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
优选地,所述第一拍摄机构和第二拍摄机构都采用高速相机,其中所述第一拍摄机构包括A相机和B相机,所述A相机和B相机分别设置在所述固定板同一水平高度的两边,所述第二拍摄机构包括C相机和D相机,所述C相机和D相机分别设置在所述安装斜面同一水平高度的两边;其中所述A相机相邻于B相机和D相机,C相机相邻与B相机和D相机,所述A相机和C相机的镜头相对,所述B相机和D相机的镜头相对。所述第一照片包括A照片和B照片,所述第二照片包括C照片和D照片。
在一个可行的实施例中,还包括以下步骤:
在对所述第一照片和第二照片中进行条形码识别时,将所述第一照片和第二照片显示在一显示屏上;
在将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述信息比对成功的商品和虚拟购物清单的信息显示在所述显示屏上;
在将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述特征比对成功的商品和虚拟购物清单的信息显示在所述显示屏上。
在一个可行的实施例中,还包括以下步骤:
获取所述虚拟购物清单的当前状态,若所述购物车的当前状态为异常状态,驱动一指示灯进入第一亮灯状态,否则,驱动所述指示灯保持第二亮灯状态。
在一个可行的实施例中,还包括以下步骤:
通过一重力传感器获取购物装置内的商品实时的重量数据;
若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
请参阅图3,本发明的一个实施例还提供一种商品放置检测系统,包括:回波信号获取模块101、商品检测模块102、条形码识别模块104、第一商品处理模块105和第二商品处理模块106;
所述回波信号获取模块101用于获取购物装置上的超声波接收器接收的回波信号;
所述商品检测模块102用于根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
所述照片拍摄模块103用于若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
所述条形码识别模块104用于对所述第一照片和第二照片中进行条形码识别;
所述第一商品处理模块105用于,若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
所述第二商品处理模块106用于,若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
相对于现有技术,本发明的商品放置检测系统通过获取超声波接收器接收的回波信号,然后快速驱动所述第一拍摄机构和第二拍摄机构对经过所述超声波检测区的范围内的商品拍照,经过对照片进行识别从而获得所述商品的信息,可以准确且快速地将放置到所述容置腔内的商品的信息或移除出所述容置腔的商品的信息识别出来。
在一个可行的实施例中,还包括:重力感应模块,所述重力感应模块用于通过一重力传感器获取购物装置内的商品实时的重量数据;若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (10)
1.一种购物装置,其特征在于,包括:
底座,所述底座的内部设有供电单元、储存器、处理器和无线网络单元,所述供电单元分别与所述储存器、处理器和无线网络单元连接,所述储存器与所述处理器连接,所述处理器与所述无线网络单元连接,所述无线网络单元与商场服务器连接;
车体框架,所述车体框架固定在所述底座的上方,所述车体框架设有开口向上的容置部,所述车体框架的顶部边缘还设有一自上而下沿靠近所述容置部的方向倾斜的安装斜面;
固定板,所述固定板固定在所述车体框架的顶部边缘,且与所述斜面相对设置,所述固定板自下而上沿靠近所述安装斜面的方向倾斜;
超声波发生器,所述超声波发生器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波发生器与所述底座的处理器连接,所述超声波发生器用于向所述安装斜面发送超声波信号;形成一覆盖于所述容置部上方的超声波检测区;
超声波接收器,所述超声波接收器固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述超声波接收器与所述底座的处理器连接,所述超声波接收器用于接收所述超声波检测区上的物品反射回的超声波的回波信号,并将所述回波信号发送给所述处理器;
第一拍摄机构,所述第一拍摄机构固定在所述固定板上,且位于所述固定板朝向所述安装斜面的一侧,所述第一拍摄机构与所述底座的处理器连接,所述第一拍摄机构的相机镜头朝向所述超声波检测区;
第二拍摄机构,所述第二拍摄机构固定在所述安装斜面上,所述第二拍摄机构与所述底座的处理器连接,所述第二拍摄机构的相机镜头朝向所述超声波检测区。
2.根据权利要求1所述的购物装置,其特征在于:还包括显示屏,所述显示屏固定在所述固定板上,且位于与所述第一拍摄机构相背的一侧,所述显示屏与所述处理器连接。
3.根据权利要求1所述的购物装置,其特征在于:还包括指示灯,所述指示灯固定在所述底座或车体框架的外表面,所述指示灯与所述处理器连接。
4.根据权利要求1所述的购物装置,其特征在于:所述车体框架的底部还设有一重力传感器,所述重力传感器位于所述容置部的下方,所述重力传感器与所述处理器连接。
5.一种商品放置检测方法,其特征在于,包括以下步骤:
获取购物装置上的超声波接收器接收的回波信号;
根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
对所述第一照片和第二照片中进行条形码识别;
若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态;
若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
6.根据权利要求5所述的商品放置检测方法,其特征在于,还包括以下步骤:
在对所述第一照片和第二照片中进行条形码识别时,将所述第一照片和第二照片显示在一显示屏上;
在将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述信息比对成功的商品和虚拟购物清单的信息显示在所述显示屏上;
在将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单时,将所述特征比对成功的商品和虚拟购物清单的信息显示在所述显示屏上。
7.根据权利要求5所述的商品放置检测方法,其特征在于,还包括以下步骤:
获取所述虚拟购物清单的当前状态,若所述购物车的当前状态为异常状态,驱动一指示灯进入第一亮灯状态,否则,驱动所述指示灯保持第二亮灯状态。
8.根据权利要求5所述的商品放置检测方法,其特征在于,还包括以下步骤:
通过一重力传感器获取购物装置内的商品实时的重量数据;
若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
9.一种商品放置检测系统,其特征在于,包括:回波信号获取模块、商品检测模块、条形码识别模块、第一商品处理模块和第二商品处理模块;
所述回波信号获取模块用于获取购物装置上的超声波接收器接收的回波信号;
所述商品检测模块用于根据所述回波信号判断所述购物装置的超声波检测区是否存在商品;
所述用于若所述超声波检测区存在商品,驱动第一拍摄机构向所述超声波检测区拍摄第一照片,驱动第二拍摄机构向所述超声波检测区拍摄第二照片;
所述条形码识别模块用于对所述第一照片和第二照片中进行条形码识别;
所述第一商品处理模块用于,若识别到条形码,根据识别所述条形码得到的商品信息与商场服务器的商品数据库的商品信息进行信息比对,若信息比对成功,将信息比对成功的商品与对应的第一照片或第二照片绑定,并将信息比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若信息比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态;
所述第二商品处理模块用于,若识别不到条形码,提取所述第一照片和第二照片中的被拍摄到的商品的特征数据,将提取到的特征数据与所述商场服务器的商品特征库的特征数据进行比对,若特征比对成功,将特征比对成功的商品与对应的第一照片或第二照片绑定,并将特征比对成功的商品加入到所述购物装置的处理器的虚拟购物清单内或移除出所述虚拟购物清单;若特征比对失败,将对应的所述第一照片和第二照片标记为异常照片,将所述虚拟购物清单标记为异常状态。
10.根据权利要求9所述的商品放置检测系统,其特征在于,还包括:重力感应模块,所述重力感应模块用于通过一重力传感器获取购物装置内的商品实时的重量数据;若所述重量数据增加,在信息比对成功时,将信息比对成功的商品移除出所述虚拟购物清单;在特征比对成功时,将特征比对成功的商品移除出所述虚拟购物清单。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110208970.0A CN113525489A (zh) | 2021-02-24 | 2021-02-24 | 一种购物装置和商品放置检测方法、检测系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110208970.0A CN113525489A (zh) | 2021-02-24 | 2021-02-24 | 一种购物装置和商品放置检测方法、检测系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113525489A true CN113525489A (zh) | 2021-10-22 |
Family
ID=78094411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110208970.0A Pending CN113525489A (zh) | 2021-02-24 | 2021-02-24 | 一种购物装置和商品放置检测方法、检测系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113525489A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114882370A (zh) * | 2022-07-07 | 2022-08-09 | 西安超嗨网络科技有限公司 | 商品智能识别方法、装置、终端及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4071740A (en) * | 1976-05-26 | 1978-01-31 | Paul Gogulski | Mobile automated shopping system |
US20180218351A1 (en) * | 2017-01-31 | 2018-08-02 | Focal Systems, Inc. | Automated checkout system through mobile shopping units |
CN108885753A (zh) * | 2016-08-31 | 2018-11-23 | 哈维尔·费勒·阿罗斯计算机模型有限公司 | 能够附接到购物手推车或另一容器的顶部开口的具有rfid窗口的设备以及识别方法 |
US20190034897A1 (en) * | 2017-07-26 | 2019-01-31 | Sbot Technologies Inc. | Self-Checkout Anti-Theft Vehicle Systems and Methods |
US20190318417A1 (en) * | 2018-04-12 | 2019-10-17 | MrG Systems, LLC. | Method and system associated with a smart shopping apparatus |
-
2021
- 2021-02-24 CN CN202110208970.0A patent/CN113525489A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4071740A (en) * | 1976-05-26 | 1978-01-31 | Paul Gogulski | Mobile automated shopping system |
CN108885753A (zh) * | 2016-08-31 | 2018-11-23 | 哈维尔·费勒·阿罗斯计算机模型有限公司 | 能够附接到购物手推车或另一容器的顶部开口的具有rfid窗口的设备以及识别方法 |
US20180218351A1 (en) * | 2017-01-31 | 2018-08-02 | Focal Systems, Inc. | Automated checkout system through mobile shopping units |
US20190034897A1 (en) * | 2017-07-26 | 2019-01-31 | Sbot Technologies Inc. | Self-Checkout Anti-Theft Vehicle Systems and Methods |
US20190318417A1 (en) * | 2018-04-12 | 2019-10-17 | MrG Systems, LLC. | Method and system associated with a smart shopping apparatus |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114882370A (zh) * | 2022-07-07 | 2022-08-09 | 西安超嗨网络科技有限公司 | 商品智能识别方法、装置、终端及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108885813B (zh) | 智能售货柜、物品识别的方法、装置、服务器和存储介质 | |
US10853702B2 (en) | Method and apparatus for checkout based on image identification technique of convolutional neural network | |
CA3124343C (en) | Methods and systems for detecting screen covers on electronic devices | |
WO2019143217A1 (ko) | 하이브리드 상품 인식 기술이 적용된 셀프 체크 아웃 기기 | |
US20060261157A1 (en) | Systems and methods for merchandise automatic checkout | |
CN106596588A (zh) | 电路板自动检测系统 | |
JP2008537808A5 (zh) | ||
WO2013116256A1 (en) | Method and apparatus for recycling electronic devices | |
KR100948382B1 (ko) | 방범 서비스 방법 및 시스템 | |
US20230056327A1 (en) | IDENTIFYING Scanning Motions during checkout USING OVERHEAD CAMERAS | |
CN113525489A (zh) | 一种购物装置和商品放置检测方法、检测系统 | |
JP6417912B2 (ja) | 商品処理システム、商品処理方法及びプログラム | |
CN107945392B (zh) | 自动售货机及采集证据的方法以及存储介质 | |
EP2810219B1 (en) | Method of analysing an electronic device | |
US20230120798A1 (en) | Systems and methods for detecting a mis-scan of an item for purchase | |
JP2002344952A (ja) | 車番認識装置及び方法 | |
US20180225647A1 (en) | Systems and methods for detecting retail items stored in the bottom of the basket (bob) | |
CN111599117B (zh) | 商品信息读取装置及控制方法、可读存储介质、电子设备 | |
CN113378601A (zh) | 防止货损的方法、自助设备及存储介质 | |
CN107742383B (zh) | 基于光面成像的自动结算系统及结算方法 | |
JP2016110537A (ja) | 商品処理システム及び商品処理方法 | |
JP2009043176A (ja) | 自動販売機 | |
US20150294278A1 (en) | System and Method for Recycling Electronics | |
US20190378389A1 (en) | System and Method of Detecting a Potential Cashier Fraud | |
CN115620402B (zh) | 一种人货交互行为识别方法、系统及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211022 |
|
RJ01 | Rejection of invention patent application after publication |