CN109241883A - 一种基于自动售货机的退货控制方法及其装置 - Google Patents

一种基于自动售货机的退货控制方法及其装置 Download PDF

Info

Publication number
CN109241883A
CN109241883A CN201810964594.6A CN201810964594A CN109241883A CN 109241883 A CN109241883 A CN 109241883A CN 201810964594 A CN201810964594 A CN 201810964594A CN 109241883 A CN109241883 A CN 109241883A
Authority
CN
China
Prior art keywords
goods
display
user
vending machine
commodity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810964594.6A
Other languages
English (en)
Other versions
CN109241883B (zh
Inventor
黄鼎隆
马修·罗伯特·斯科特
马咪娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Yuepu Investment Center LP
Original Assignee
Shenzhen Malong Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Malong Technologies Co Ltd filed Critical Shenzhen Malong Technologies Co Ltd
Priority to CN201810964594.6A priority Critical patent/CN109241883B/zh
Publication of CN109241883A publication Critical patent/CN109241883A/zh
Application granted granted Critical
Publication of CN109241883B publication Critical patent/CN109241883B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
    • G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
    • G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisious for transferring data to distant stations, e.g. from a sensing device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0217—Discounts or incentives, e.g. coupons or rebates involving input on products or services in exchange for incentives or rewards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/02—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus
    • G07F9/026—Devices for alarm or indication, e.g. when empty; Advertising arrangements in coin-freed apparatus for alarm, monitoring and auditing in vending machines or means for indication, e.g. when empty

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Multimedia (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Human Computer Interaction (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Control Of Vending Devices And Auxiliary Devices For Vending Devices (AREA)

Abstract

本发明提供了一种基于自动售货机的退货控制方法及其装置，其中所述方法包括：接收购物指令，并且根据购物指令开启自动售货机的柜门；判断自动售货机商品陈列区内是否存在未放置于预设陈列区的陈列商品；若是，则判定陈列商品放置位置错误，并生成提示信息，以提示用户将陈列商品放置于预设陈列区；若用户将陈列商品放置于与预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。本发明为消费者在购物时提供方便，提高用户对陈列商品放置在正确位置的积极性，提高了用户体验，避免了现有的自动售货机中，只能通过人工进行摆放商品，浪费大量人力成本，并且用户没有积极性去主动将错放商品归位的问题。

Description

一种基于自动售货机的退货控制方法及其装置
技术领域
本发明涉及图像识别技术领域，更具体地说，涉及一种基于自动售货机的退货控制方法及其装置。
背景技术
物质流通是人类社会的最基本要素。零售行业或直接面向消费者销售的开放式的相关行业(以下简称为零售行业或零售企业)作为当前物质流通的重要手段，需要雇佣大量的收银人员来实现商品的买卖工作，收银人员对消费者所购物品逐件进行统计，统计完成后，与消费者共同完成支付。
而自动售货机，则解决了零售行业的人工统计和人工结算的缺陷，是一种面向消费者的无人售货、自动结算的售卖方式。可通过用户的选择，统计出用户所选择的商品的品种种类和总价值，以供用户进行结算，完成支付过程。但在基于开放式的自动售货机中，用户购物过程中，由于存在用户不喜欢、拿错规格等不同原因需要将商品放回时，需要将商品放回至原有的对应区域，以便于其他的消费者更方便的根据清晰的摆放位置去选择商品，但是现有的自动售货机，并不能对商品是否放回原位进行判断，在用户反复拿取过程中，导致商品出现位置混乱的情况，给当前用户和其他用户的购物带来了巨大的不便。
总之，目前现有自动售货机，只能通过人工对于消费者由于不需要所返还退回的商品进行摆放，并不能直接自动识别商品位置，耗费大量人力成本，给其他消费者的购物过程造成麻烦，用户体验差。
发明内容
有鉴于此，本发明提供一种基于自动售货机的退货控制方法及其装置以解决现有技术的不足。
为解决上述问题，本发明提供一种基于自动售货机的退货控制方法，包括：
接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
优选地，所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
采集所述用户的拿货动作的连拍抓取图像；
对所述连拍抓取图像进行识别，判断所述用户是否对所述陈列商品进行移动操作；
若所述用户对所述陈列商品进行移动操作，则根据所述连拍抓取图像确定所述用户对于所述退货商品的摆放位置；
对所述摆放位置的摆放坐标与所述预设商品摆放区的预设坐标进行比较，生成第一比较结果，并根据所述第一比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
优选地，所述“对所述摆放位置的摆放坐标与所述预设商品摆放区的预设坐标进行比较，生成第一比较结果，并根据所述第一比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区”之后，还包括：
若所述用户未将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则通过语音模块播放位置错误提示，以便于提示所述用户所述退货商品被放置在错误的位置。
优选地，所述“判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品”包括：
采集所述自动售货机中的每个所述商品陈列区内的商品陈列图像；
利用预先训练的商品识别模型对所述商品陈列图像进行识别，确定所述商品陈列图像对应的商品信息；所述商品信息包括所述商品陈列图像中的商品品种和与所述商品品种对应的商品数量；
基于陈列商品与预设陈列区的对应关系，根据所述商品信息，判断是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品。
优选地，所述“若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区”之后，还包括：
根据所述提示信息控制所述预设陈列区对应的LED指示灯亮灯，以提示所述用户将所述陈列商品放置于点亮的所述LED指示灯对应的所述预设陈列区内。
优选地，所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
接收在商品陈列区放置所述陈列商品触发与所述商品陈列区对应的重力传感器而生成的增重变化数据；
将所述增重变化数据与所述商品展示区对应的摆放商品的预设重量数据进行比较，生成第二比较结果，并根据所述第二比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
优选地，所述提示信息中包括放置错误的陈列商品的错放品种、与所述错放品种对应的错放数量、总错放商品数量和错放位置，以及与所述陈列商品对应的预设陈列区；
所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”包括：
若所述用户将所述陈列商品放置于所述预设陈列区，则根据所述用户所放置所述陈列商品生成当前商品移动信息；所述当前商品移动信息包括所述用户移动放置所述陈列商品的移动放置商品品种，与所述移动放置商品品种对应的移动放置商品数量和总移动放置商品数量；
将所述当前商品移动信息与所述提示信息进行比较，生成第三比较结果，并根据所述第三比较结果生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
此外，为解决上述问题，本发明还提供一种基于自动售货机的退货控制装置，包括：接收模块、判断模块、提示模块和奖励模块；
所述接收模块，用于接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
所述判断模块，用于判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
所述提示模块，用于若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
所述奖励模块，用于若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
此外，为解决上述问题，本发明还提供一种用户终端，包括存储器以及处理器，所述存储器用于存储基于自动售货机的退货控制程序，所述处理器运行所述基于自动售货机的退货控制程序以使所述用户终端执行如上述所述基于自动售货机的退货控制方法。
此外，为解决上述问题，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有基于自动售货机的退货控制程序，所述基于自动售货机的退货控制程序被处理器执行时实现如上述所述基于自动售货机的退货控制方法。
本发明提供的一种基于自动售货机的退货控制方法及其装置。其中，本发明所提供的方法通过在用户进行购物之前判断自动售货机内是存在放置错误位置的陈列商品，如果存在则根据提示信息提示用户将该陈列商品进行归位，如果用户将其归位，则对用户根据奖励数据信息进行奖励。本发明实现了在开放式的购物环境中，对于所有陈列商品自动判断其放置位置是否出现错误，进而对于未放置于正确位置的商品进行提示其放回摆放区，并且通过奖励机制对讲商品归位的用户进行奖励，从而实现了智能的保持自动售货机内商品按照一定位置摆放，为消费者在购物时提供方便，提高用户对陈列商品放置在正确位置的积极性，提高了用户体验，避免了现有的自动售货机中，只能通过人工进行摆放商品，浪费大量人力成本，并且用户没有积极性去主动将错放商品归位的问题。
附图说明
图1为本发明基于自动售货机的退货控制方法实施例方案涉及的硬件运行环境的结构示意图；
图2为本发明基于自动售货机的退货控制方法第一实施例的流程示意图；
图3为本发明基于自动售货机的退货控制方法第二实施例的流程示意图；
图4为本发明基于自动售货机的退货控制方法第三实施例的流程示意图；
图5为本发明基于自动售货机的退货控制方法第四实施例的流程示意图；
图6为本发明基于自动售货机的退货控制方法第五实施例的流程示意图；
图7为本发明基于自动售货机的退货控制方法第六实施例的流程示意图；
图8为本发明基于自动售货机的退货控制装置的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
下面详细描述本发明的实施例，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，图1是本发明实施例方案涉及的终端的硬件运行环境的结构示意图。
本发明实施例终端可以是的设于自动货柜机中的PC，也可以是智能手机、平板电脑、电子书阅读器、MP3播放器、MP4播放器、便携计算机等可移动式终端设备。此外，也可以为自动货柜机本身所带有的计算机硬件装置。
如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏、输入单元比如键盘、遥控器，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
此外，终端包括图像采集设备，具体可以为摄像头，相机等。
此外，终端还包括红外传感设备，用以对用户的购物行为进行判断。
此外，终端还包括重力传感设备，用以对自动售货机中的商品的质量进行实时或定时的监控。
可选地，终端还可以包括RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。此外，移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。
本领域技术人员可以理解，图1中示出的终端并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机可读存储介质的存储器1005中可以包括操作系统、数据接口控制程序、网络连接程序以及基于自动售货机的退货控制程序。
本发明提供的一种基于自动售货机的退货控制方法及其装置。其中，所述方法实现了智能的保持自动售货机内商品按照一定位置摆放，为消费者在购物时提供方便，提高用户对陈列商品放置在正确位置的积极性，提高了用户体验，避免了现有的自动售货机中，只能通过人工进行摆放商品，浪费大量人力成本，并且用户没有积极性去主动将错放商品归位的问题。
实施例1：
参照图2，本发明第一实施例提供一种基于自动售货机的退货控制方法，包括：
步骤S10，接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
上述，本实施例所提供的基于自动售货机的退货控制方法，可以适用于开放式的购物环境，例如商场、超市等场所，即无人值守，用户可进行自由拿取货物。在本实施例中，可以为开放式的自动售货机，用户开始购物后，自动售货机的柜门打开，用户进行对内部的货物直接拿取，而自动售货机通过图像采集设备对用户的购物行为、所购物品进行识别和统计，实现对于用户的所购商品的最终结算。
上述，购物指令，为用户通过多种方式激活该自动售货机，以便于开始购物所生成的指令。例如，用户通过面部识别、动作识别、智能移动终端、手动操作等方式进行认证，认证通过后，生成购物指令。
步骤S20，判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
上述，在自动售货机中，为防止混乱，方便于用户进行购物，每一个品种的陈列商品对应的设有一陈列区，每个陈列区之间具有间隔，以将区内的商品进行区分。例如，自动售货机内设有陈列柜，陈列柜中设有多个具有隔板间隔的单元格，每个单元格中设有区别于其他品种的陈列商品。
上述，预设陈列区，为运维管理人员在自动售货机设置的每个商品陈列区所对应的应当放置的陈列商品的区域，根据预设的陈列区与陈列商品的对应关系，所确定的陈列区。例如，可乐饮料，应当放置于A-1单元格中，那A-1单元格就是商品可乐饮料的预设陈列区。
判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品，即为判断是否存在有商品放置于错误的位置的情况，具体的，可通过图像识别技术、重力传感技术、红外传感技术、加速传感技术，甚至声控、光控技术、NFC技术等实现对于商品位置的判断。
步骤S30，若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
上述，如果判断结果为存在未放置于预设陈列区的陈列商品，即判定该陈列商品的位置放置错误，放置在非预设陈列区中，该情况会对其他用户进行购物造成影响，所以生成与该放置错误的陈列商品相对应的提示信息，提示用户进行对该商品的移位，移动至正确的预设陈列区中。例如，提示信息通过显示屏显示：“请将A-3位置放置错误的可乐饮料放到正确的A-1位置，谢谢！”。
步骤S40，若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
上述，如果通过用户将放置错误的陈列商品移动到了正确的预设陈列区，即该用户将错放的商品，移动到了正确的位置，则根据该次用户的正确放置，生成一与用户对应的奖励数据信息，对用进行奖励。具体的，可关联用户的账户，直接根据奖励数据信息对用户账户进行奖励。例如，当系统判断出用户将可乐放置回正确位置后，系统自动生成一奖励数据信息，根据该信息，对用户账户进行红包发放。
本实施例应用于在用户正式开始购物并抓取商品之前，自动售货机中存在前一位用户所错误放置的商品或者掉落的商品出现在错误区域，造成的自动售货机混乱的情况，通过当前的用户对错误放置的商品进行归位，并给与奖励，从而实现了通过奖励机制提高用户进行商品归位的积极性。
本实施例所提供的方法通过在用户进行购物之前判断自动售货机内是存在放置错误位置的陈列商品，如果存在则根据提示信息提示用户将该陈列商品进行归位，如果用户将其归位，则对用户根据奖励数据信息进行奖励。本实施例实现了在开放式的购物环境中，对于所有陈列商品自动判断其放置位置是否出现错误，进而对于未放置于正确位置的商品进行提示其放回摆放区，并且通过奖励机制对讲商品归位的用户进行奖励，从而实现了智能的保持自动售货机内商品按照一定位置摆放，为消费者在购物时提供方便，提高用户对陈列商品放置在正确位置的积极性，提高了用户体验，避免了现有的自动售货机中，只能通过人工进行摆放商品，浪费大量人力成本，并且用户没有积极性去主动将错放商品归位的问题。
实施例2：
参照图3，本发明第二实施例提供一种基于自动售货机的退货控制方法，基于上述图2所示的第一实施例，所述步骤S40“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
步骤S50，采集所述用户的拿货动作的连拍抓取图像；
上述，连拍抓取图像，可以为连拍的静态图像，也可以为动态的GIF动图或者视频文件。具体的，为用户拿取货物的连拍图像。
步骤S60，对所述连拍抓取图像进行识别，判断所述用户是否对所述陈列商品进行移动操作；
步骤S70，若所述用户对所述陈列商品进行移动操作，则根据所述连拍抓取图像确定所述用户对于所述退货商品的摆放位置；
上述，对连拍图像进行识别，从而根据该识别结果判断用户是否对陈列商品进行移动的操作，即为，用户是否有将陈列商品进行归位的行为动作。
识别过程可以包括：
S1，提取连拍抓取图像的关键帧，并构建每个所述关键帧对应的时间戳；
S2，对所述在时间上连续的关键帧进行阈值分割算法进行分割，得到二值图像；其中包括：
S2-1，将每一帧的所述在时间上连续的关键帧转化为HSV颜色空间，得HSV图像；
S2-2，对所述HSV图像进行直方图分析，得到与所述HSV图像对应的阈值范围；
S2-3，将在H、S、V三个维度的像素值都在所述阈值范围内的像素点设置为1，将在H、S、V三个维度的像素值不都在所述阈值范围内的像素点设置为0，得到所述分割后所述二值图像。
S3，以预先采集的用户未抓取商品的手部图像作为对比种子图，对所述分割后二值图像进行比对，以框出所有所述关键帧中，具有区别于所述对比种子图的目标商品的图像，得到具有所述商品的目标关键帧。
S4，通过预先训练的人工神经网络，对所述目标关键帧进行识别，获取所述目标关键帧中的所包括的商品的品种和数量；
S5，根据所述时间戳，构建所述商品的移动轨迹；并根据所述移动轨迹获得所述商品移动的移动向量；
S6，根据所述移动向量，确定所述商品为退货商品并且移动至自动售货机内；
S7，如果所述商品为退货商品并且移动至自动售货机内，则判定所述用户将陈列商品进行移动操作；
上述，如果用户对陈列商品进行移动操作，进行归位，则根据连拍抓取图像确定所述用户对于所述退货商品的摆放位置，摆放位置可以为区域范围，或者坐标范围。
步骤S80，对所述摆放位置的摆放坐标与所述预设商品摆放区的预设坐标进行比较，生成第一比较结果，并根据所述第一比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
步骤S90，若所述用户未将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则通过语音模块播放位置错误提示，以便于提示所述用户所述退货商品被放置在错误的位置。
上述，语音模块，为用于对用户进行提示的外放的语音播放装置，具体的可以为扬声器。
上述，摆放坐标为摆放位置对应的坐标，预设坐标为预设商品摆放区所对应的坐标，上述坐标可以为坐标值，也可以为坐标范围，在进行比较过程中，可以为判断摆放坐标是否落在所述预设坐标的范围内，如果落在预设坐标的范围内，则可确定陈列商品处于预设陈列区内。在本实施例中，通过图像识别技术，对陈列商品是否被用户进行移动进行判断，进而对用该陈列商品的在移动后的摆放位置的坐标与预设商品摆放区的对应预设坐标进行比较，从而判断是否将陈列商品移动放置到了预设陈列区中，实现了基于图像识别技术的对用户将放置错误的陈列商品进行移动并放回正确的预设陈列区的判断和确定，提高了识别的准确度，实现了智能化的对于用户行为的识别，为用户的购物流程提供了方便。
实施例3：
参照图4，本发明第三实施例提供一种基于自动售货机的退货控制方法，基于上述图2所示的第一实施例，所述步骤S20“判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品”包括：
步骤S21，采集所述自动售货机中的每个所述商品陈列区内的商品陈列图像；
上述，每个商品陈列区设有一与其对应的图像采集设备，或者几个相邻的陈列区设有一图像采集设备，可一次货多次这几个相邻陈列区的整体情况。
步骤S22，利用预先训练的商品识别模型对所述商品陈列图像进行识别，确定所述商品陈列图像对应的商品信息；所述商品信息包括所述商品陈列图像中的商品品种和与所述商品品种对应的商品数量；
上述，商品信息为商品陈列图像通过图像识别技术所获得的图片中的信息，可以包括但不限于商品品种和数量。
步骤S23，基于陈列商品与预设陈列区的对应关系，根据所述商品信息，判断是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品。
上述，每个陈列商品对应的有一个或多个预设陈列区，即陈列商品与预设陈列区有对应关系，根据该对应关系，基于商品信息中的商品品种，可判断商品信息对应的商品陈列图像中是否存在放置错误位置的陈列商品。在本实施例中，通过利用预先训练的商品识别模型，对所采集的商品陈列图像进行识别，从而进行判断是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品。
实施例4：
参照图5，本发明第四实施例提供一种基于自动售货机的退货控制方法，基于上述图2所示的第一实施例，所述步骤S30“若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区”之后，还包括：
步骤S100，根据所述提示信息控制所述预设陈列区对应的LED指示灯亮灯，以提示所述用户将所述陈列商品放置于点亮的所述LED指示灯对应的所述预设陈列区内。
上述，每一个预设陈列区对应的设有一LED指示灯，在生成提示信息后，根据该提示信息，点亮所述预设陈列区的指示灯，提示用户将陈列商品放置到亮灯的预设陈列区位置处，从而为用户移动商品进行归位提供了方便。
此外，也可以为不同的LED指示灯设置有不同的颜色，例如红色、绿色，在接收到提示信息后，在正确的位置即预设陈列区的LED指示灯显示绿色，其他的LED指示灯显示为红色。
实施例5：
参照图6，本发明第五实施例提供一种基于自动售货机的退货控制方法，基于上述图2所示的第一实施例，所述步骤S40“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
步骤S110，接收在商品陈列区放置所述陈列商品触发与所述商品陈列区对应的重力传感器而生成的增重变化数据；
上述，每个商品陈列区设有一对应的重力传感器，通过重力传感器实时获取该商品陈列区的商品的重量值，即可实时感知商品取、放过程中的重量变化，即增重变化数据。当放置一陈列商品至商品陈列区后，触发对应的重力传感器，根据所增加的陈列商品的重量生成一增重变化数据。
步骤S120，将所述增重变化数据与所述商品展示区对应的摆放商品的预设重量数据进行比较，生成第二比较结果，并根据所述第二比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
上述，预设重量数据为商品展示区应当放置的商品的重量值，增重变化数据为用户当前放置的陈列商品的增加的重量，如果增重变化值与预设重量数据匹配，即增重变化值等于预设重量数据或者增重变化值为预设重量数据的整数倍，则可进一步判定用户将陈列商品放置到了预设陈列区。否则，商品放置于错误的区域。在本实施例中，通过重力传感技术，对商品陈列区内的所有商品进行重力监测，当用户将商品放置于商品陈列区内，可根据与该商品陈列区对应的预设重量数据进行判断，判断出用户是否将陈列商品放置到正确的预设陈列区，提高了识别能力，为用户对于商品的归位和进一步购物提供了方便。
实施例6：
参照图7，本发明第六实施例提供一种基于自动售货机的退货控制方法，基于上述图2所示的第一实施例，所述步骤S20中，所述提示信息中包括放置错误的陈列商品的错放品种、与所述错放品种对应的错放数量、总错放商品数量和错放位置，以及与所述陈列商品对应的预设陈列区；
上述，提示信息中包括放置错误的陈列商品的错放品种、与所述错放品种对应的错放数量、总错放商品数量和错放位置，以及与所述陈列商品对应的预设陈列区；即，通过对于放置错误的陈列商品，该提示信息中保存有放错商品的品种、每个品种的数量、总数量等信息。
所述步骤S40，“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”包括：
步骤S130，若所述用户将所述陈列商品放置于所述预设陈列区，则根据所述用户所放置所述陈列商品生成当前商品移动信息；所述当前商品移动信息包括所述用户移动放置所述陈列商品的移动放置商品品种，与所述移动放置商品品种对应的移动放置商品数量和总移动放置商品数量；
上述，如果用户将放置错误的陈列商品移动放置到了争取的预设陈列区，则生成一当前商品移动信息，其中包括用户所移动放置的陈列商品的品种、品种对应的数量，以及总数量。即，通过统计获得移动放置的陈列商品的数量数据。
步骤S140，将所述当前商品移动信息与所述提示信息进行比较，生成第三比较结果，并根据所述第三比较结果生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
上述，将当前商品移动信息与提示信息进行比较，即将其中的当前商品移动信息中的商品品种对应的数量与提示信息中需要进行移动的商品的品种对应的数量进行比较，并且将上述两信息中的总数量进行比较，获得一比较结果，该比较结果可获知用户是否将所有的摆放错误的陈列商品放置到的正确的预设陈列区中，比较结果中可以为用户将部分陈列商品归位，或者用户将所有陈列商品归位等等结果，根据用户对陈列商品归位的情况或者数量，生成相应的奖励数据信息，以便于根据用户所归位商品的情况进行对于用户的奖励。本实施例中，通过对于用户所归位的陈列商品的品种和数量进行统计记录，从而根据用户所归位陈列商品的情况对用户进行不同程度的奖励，提高了用户对陈列商品归位至预设陈列区的积极性，提高了用户体验，为该用户和其他用户的购物提供了方便。
此外，参考图8，本发明还提供一种基于自动售货机的退货控制装置，包括：接收模块10、判断模块20、提示模块30和奖励模块40；
所述接收模块10，用于接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
所述判断模块20，用于判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
所述提示模块30，用于若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
所述奖励模块40，用于若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
此外，本发明还提供一种用户终端，包括存储器以及处理器，所述存储器用于存储基于自动售货机的退货控制程序，所述处理器运行所述基于自动售货机的退货控制程序以使所述用户终端执行如上述所述基于自动售货机的退货控制方法。
此外，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有基于自动售货机的退货控制程序，所述基于自动售货机的退货控制程序被处理器执行时实现如上述所述基于自动售货机的退货控制方法。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种基于自动售货机的退货控制方法，其特征在于，包括：
接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
2.如权利要求1所述基于自动售货机的退货控制方法，其特征在于，所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
采集所述用户的拿货动作的连拍抓取图像；
对所述连拍抓取图像进行识别，判断所述用户是否对所述陈列商品进行移动操作；
若所述用户对所述陈列商品进行移动操作，则根据所述连拍抓取图像确定所述用户对于所述退货商品的摆放位置；
对所述摆放位置的摆放坐标与所述预设商品摆放区的预设坐标进行比较，生成第一比较结果，并根据所述第一比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
3.如权利要求2所述基于自动售货机的退货控制方法，其特征在于，所述“对所述摆放位置的摆放坐标与所述预设商品摆放区的预设坐标进行比较，生成第一比较结果，并根据所述第一比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区”之后，还包括：
若所述用户未将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则通过语音模块播放位置错误提示，以便于提示所述用户所述退货商品被放置在错误的位置。
4.如权利要求1所述基于自动售货机的退货控制方法，其特征在于，所述“判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品”包括：
采集所述自动售货机中的每个所述商品陈列区内的商品陈列图像；
利用预先训练的商品识别模型对所述商品陈列图像进行识别，确定所述商品陈列图像对应的商品信息；所述商品信息包括所述商品陈列图像中的商品品种和与所述商品品种对应的商品数量；
基于陈列商品与预设陈列区的对应关系，根据所述商品信息，判断是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品。
5.如权利要求1所述基于自动售货机的退货控制方法，其特征在于，所述“若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区”之后，还包括：
根据所述提示信息控制所述预设陈列区对应的LED指示灯亮灯，以提示所述用户将所述陈列商品放置于点亮的所述LED指示灯对应的所述预设陈列区内。
6.如权利要求1所述基于自动售货机的退货控制方法，其特征在于，所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”之前，还包括：
接收在商品陈列区放置所述陈列商品触发与所述商品陈列区对应的重力传感器而生成的增重变化数据；
将所述增重变化数据与所述商品展示区对应的摆放商品的预设重量数据进行比较，生成第二比较结果，并根据所述第二比较结果判断所述用户是否将所述陈列商品放置于所述预设陈列区。
7.如权利要求1所述基于自动售货机的退货控制方法，其特征在于，
所述提示信息中包括放置错误的陈列商品的错放品种、与所述错放品种对应的错放数量、总错放商品数量和错放位置，以及与所述陈列商品对应的预设陈列区；
所述“若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励”包括：
若所述用户将所述陈列商品放置于所述预设陈列区，则根据所述用户所放置所述陈列商品生成当前商品移动信息；所述当前商品移动信息包括所述用户移动放置所述陈列商品的移动放置商品品种，与所述移动放置商品品种对应的移动放置商品数量和总移动放置商品数量；
将所述当前商品移动信息与所述提示信息进行比较，生成第三比较结果，并根据所述第三比较结果生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
8.一种基于自动售货机的退货控制装置，其特征在于，包括：接收模块、判断模块、提示模块和奖励模块；
所述接收模块，用于接收购物指令，并且根据所述购物指令开启自动售货机的柜门；
所述判断模块，用于判断所述自动售货机商品陈列区内是否存在未放置于与所述陈列商品对应的预设陈列区的陈列商品；
所述提示模块，用于若存在未放置于所述预设陈列区的陈列商品，则判定所述陈列商品放置位置错误，并生成提示信息，以提示用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区；
所述奖励模块，用于若所述用户将所述陈列商品放置于与所述陈列商品对应的所述预设陈列区，则生成奖励数据信息，以便于根据所述奖励数据信息对所述用户进行奖励。
9.一种用户终端，其特征在于，包括存储器以及处理器，所述存储器用于存储基于自动售货机的退货控制程序，所述处理器运行所述基于自动售货机的退货控制程序以使所述用户终端执行如权利要求1-7中任一项所述基于自动售货机的退货控制方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有基于自动售货机的退货控制程序，所述基于自动售货机的退货控制程序被处理器执行时实现如权利要求1-7中任一项所述基于自动售货机的退货控制方法。
CN201810964594.6A 2018-08-23 2018-08-23 一种基于自动售货机的退货控制方法及其装置 Active CN109241883B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810964594.6A CN109241883B (zh) 2018-08-23 2018-08-23 一种基于自动售货机的退货控制方法及其装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810964594.6A CN109241883B (zh) 2018-08-23 2018-08-23 一种基于自动售货机的退货控制方法及其装置

Publications (2)

Publication Number Publication Date
CN109241883A true CN109241883A (zh) 2019-01-18
CN109241883B CN109241883B (zh) 2021-10-29

Family

ID=65068551

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810964594.6A Active CN109241883B (zh) 2018-08-23 2018-08-23 一种基于自动售货机的退货控制方法及其装置

Country Status (1)

Country Link
CN (1) CN109241883B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334768A (zh) * 2019-07-08 2019-10-15 创新奇智(重庆)科技有限公司 一种冰柜陈列检测方法、系统及电子设备
WO2020010828A1 (zh) * 2018-07-09 2020-01-16 深圳码隆科技有限公司 一种开放式自动售货机中商品的退货方法及其装置
CN111685599A (zh) * 2019-03-14 2020-09-22 富士电机株式会社 商品管理系统及商品管理方法
CN111753614A (zh) * 2019-11-01 2020-10-09 北京京东尚科信息技术有限公司 一种商品货架的监控方法和装置
CN112633157A (zh) * 2020-12-22 2021-04-09 江苏智库智能科技有限公司 一种agv工作区域安全性的实时检测方法及系统
CN112668962A (zh) * 2020-12-18 2021-04-16 重庆电子工程职业学院 一种基于5g网络的物流系统
CN112712655A (zh) * 2020-12-24 2021-04-27 重庆帮企科技集团有限公司 一种自助购物结算系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040117196A1 (en) * 2002-12-13 2004-06-17 Brockman Gary B. Method and apparatus for supporting delivery, sale and billing of perishable and time-sensitive goods such as newspapers, periodicals and direct marketing and promotional materials
CN103927815A (zh) * 2014-04-01 2014-07-16 李璐 一种大容量自动售货机及自动售货工艺
CN105184975A (zh) * 2015-10-14 2015-12-23 微点（北京）文化传媒有限公司 自动售货机管理系统和管理方法
CN105931371A (zh) * 2016-07-12 2016-09-07 帮团成都电子商务有限责任公司 自动售货机及自动售货方法
CN107481414A (zh) * 2017-08-21 2017-12-15 文彬 一种开放式无人售卖装置的实时导购方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040117196A1 (en) * 2002-12-13 2004-06-17 Brockman Gary B. Method and apparatus for supporting delivery, sale and billing of perishable and time-sensitive goods such as newspapers, periodicals and direct marketing and promotional materials
CN103927815A (zh) * 2014-04-01 2014-07-16 李璐 一种大容量自动售货机及自动售货工艺
CN105184975A (zh) * 2015-10-14 2015-12-23 微点（北京）文化传媒有限公司 自动售货机管理系统和管理方法
CN105931371A (zh) * 2016-07-12 2016-09-07 帮团成都电子商务有限责任公司 自动售货机及自动售货方法
CN107481414A (zh) * 2017-08-21 2017-12-15 文彬 一种开放式无人售卖装置的实时导购方法及系统

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020010828A1 (zh) * 2018-07-09 2020-01-16 深圳码隆科技有限公司 一种开放式自动售货机中商品的退货方法及其装置
CN111685599A (zh) * 2019-03-14 2020-09-22 富士电机株式会社 商品管理系统及商品管理方法
CN111685599B (zh) * 2019-03-14 2022-02-18 富士电机株式会社 商品管理系统及商品管理方法
CN110334768A (zh) * 2019-07-08 2019-10-15 创新奇智(重庆)科技有限公司 一种冰柜陈列检测方法、系统及电子设备
CN110334768B (zh) * 2019-07-08 2023-08-22 创新奇智(重庆)科技有限公司 一种冰柜陈列检测方法、系统及电子设备
CN111753614A (zh) * 2019-11-01 2020-10-09 北京京东尚科信息技术有限公司 一种商品货架的监控方法和装置
CN112668962A (zh) * 2020-12-18 2021-04-16 重庆电子工程职业学院 一种基于5g网络的物流系统
CN112668962B (zh) * 2020-12-18 2022-06-24 重庆电子工程职业学院 一种基于5g网络的物流系统
CN112633157A (zh) * 2020-12-22 2021-04-09 江苏智库智能科技有限公司 一种agv工作区域安全性的实时检测方法及系统
CN112633157B (zh) * 2020-12-22 2024-05-24 江苏智库智能科技有限公司 一种agv工作区域安全性的实时检测方法及系统
CN112712655A (zh) * 2020-12-24 2021-04-27 重庆帮企科技集团有限公司 一种自助购物结算系统

Also Published As

Publication number Publication date
CN109241883B (zh) 2021-10-29

Similar Documents

Publication Publication Date Title
CN109241883A (zh) 一种基于自动售货机的退货控制方法及其装置
CN109035629A (zh) 一种基于开放式自动售货机的购物结算方法和装置
CN108694779A (zh) 一种开放式自动售货机中商品的退货方法及其装置
CN108922026A (zh) 一种自动售货机的补货管理方法、装置和用户终端
KR102378059B1 (ko) 중량 모니터링 기반의 물품 감지 시스템 및 물품 감지 방법
CN109166007A (zh) 一种基于自动售货机的商品推荐方法及其装置
CN110866429B (zh) 漏扫识别方法、装置、自助收银终端及系统
CN108921645B (zh) 一种商品购买判定方法、装置和用户终端
CN101807370B (zh) 信息处理装置和信息处理方法
CN108985861A (zh) 一种基于开放式购物环境的购物结算控制方法和装置
CN109002782A (zh) 一种基于自动售货机的商品购买方法、装置和用户终端
EP3734205B1 (en) Intelligent refrigerator and information reminder method based on intelligent refrigerator
CN108960132B (zh) 一种开放式自动售货机中商品的购买方法及其装置
CN109308630A (zh) 一种智能货柜及其商品陈列方法
CN109243112A (zh) 一种开放式环境购物控制方法和装置
JP6498900B2 (ja) 広告評価システム、広告評価方法
CN109002780A (zh) 一种购物流程控制方法、装置和用户终端
CN109034980A (zh) 一种搭配商品推荐方法、装置和用户终端
CN105580045A (zh) 展示装置(互联网共享连接)
CN110689389A (zh) 基于计算机视觉的购物清单自动维护方法及装置、存储介质、终端
CN113888254A (zh) 货架商品管理方法和电子设备
CN204614025U (zh) 一种购物储物设备
CN108831019A (zh) 自助超市售货系统及自助售货系统
CN207182568U (zh) 自助购物系统
CN108764129B (zh) 货架以及购物系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220705

Address after: Room 368, 302, 211 Fute North Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai

Patentee after: Shanghai Yuepu Investment Center (L.P.)

Address before: 518000 floor 33, Yantian modern industry service center, 3018 Shayan Road, Shatoujiao street, Yantian District, Shenzhen City, Guangdong Province

Patentee before: SHENZHEN MALONG TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right