CN109389744A - 一种应用基于视觉方法生成订单的自助终端 - Google Patents

Abstract

本发明公开了一种应用基于视觉方法生成订单的自助终端，用户通过如下操作实现自助；1)用户通过手机微信、支付宝或其他第三方实名登记支付扫描屏幕或贴在机身二维码输入密码确认开收货柜门；2)后台在收到用户确认开门后给设备发送拍照指令，相机拍照后将开柜门前相片显示在屏幕上，并且都将商品框图框起来并生成库存列表供用户参考。本发明提供的应用基于视觉方法生成订单的自助终端，改变了整个自助终端在购买过程，方便直观；2)较传统自助终端相比减少了大量机械传动机构，大大降低设备的生产制造过程和成本。

Description

一种应用基于视觉方法生成订单的自助终端

技术领域

本发明涉及一种自助终端，尤其涉及一种应用基于视觉方法生成订单的自助终端。

背景技术

本发明技术方案提供了一种应用基于视觉方法生成订单的自助终端，客户通过微信、支付宝或APP扫码自动开门，开门前通过相机拍照自动识别自助终端内商品类型和数量，客户自选商品，关门后相机拍照自动识别自助终端内商品类型和数量，系统自动计算前后两侧类型和数量比对自动生成订单，通过微信、支付宝或APP推送给客户确认，支付整个交易过程。

发明内容

本发明为解决上述技术问题而采用的技术方案是提供一种应用基于视觉方法生成订单的自助终端，其中，具体技术方案为：

用户通过如下操作实现自助；

1)用户通过手机微信、支付宝或其他第三方实名登记支付扫描屏幕或贴在机身二维码输入密码确认开收货柜门；

2)后台在收到用户确认开门后给设备发送拍照指令，相机拍照后将开柜门前相片显示在屏幕上，并且都将商品框图框起来并生成库存列表供用户参考；

3)拍照后自动将售货机柜门打开，界面提示取货倒计时60秒和语音，提示顾客取货后务必将门关好；

4)用户取完货后关门或60秒后系统自动关门并报警提示顾客关门；

5)门关好后系统自动将取货前后照片展示在屏幕上，并生成取货订单，提示顾客如有疑问和可点击帮助，系统再重新识别核对；如果顾客不点击屏幕帮助按钮系统默认60秒生成订单并将该订单推送给用户手机界面提示扣款金额和数量；如果用户确认商品数量和品类都对的情况下点击确认按钮，后台自动推送给用户手机提示扣款金额和数量；

6)交易成功用户离开；如果交易失败或用户在使用后有疑问的情况下，用户在手机上点击帮助按钮，售货机将开门前后相片推送到用户手机界面核对，后台也可人工在核对手动操作。

视觉售货机管理和补货流程：

1)管理员手机点击补货开门按钮；

2)系统自动拍照将售货机内库存照片保存本地生成库存订单并显示在屏幕上；

3)用户将货物放满后并关门后在手机界面上点击补货成功按钮后，系统自动拍照并保存生成补货订单和当前库存量，在屏幕显示。

本发明相对于现有技术具有如下有益效果：1)改变了整个自助终端在购买过程，方便直观；2)较传统自助终端相比减少了大量机械传动机构，大大降低设备的生产制造过程和成本；3)较传统自助终端相比减少了大量机械传动机构，大大降低设备的出货故障率；4)机械、电气结构简单，简化生产工艺、降低生产成本；5)机械、电气结构简单，降低设备故障率；6)与传统售货机相比购买体验更加人性化和简便。

附图说明

图1为基于视觉方法生成订单的示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的描述。

本发明提供了一种应用基于视觉方法生成订单的自助终端，用户通过如下操作实现自助；

1)用户通过手机微信、支付宝或其他第三方实名登记支付扫描屏幕或贴在机身二维码输入密码确认开收货柜门；

2)后台在收到用户确认开门后给设备发送拍照指令，相机拍照后将开柜门前相片显示在屏幕上，并且都将商品框图框起来并生成库存列表供用户参考；

3)拍照后自动将售货机柜门打开，界面提示取货倒计时60秒和语音，提示顾客取货后务必将门关好；

4)用户取完货后关门或60秒后系统自动关门并报警提示顾客关门；

5)门关好后系统自动将取货前后照片展示在屏幕上，并生成取货订单，提示顾客如有疑问和可点击帮助，系统再重新识别核对；如果顾客不点击屏幕帮助按钮系统默认60秒生成订单并将该订单推送给用户手机界面提示扣款金额和数量；

该操作系统包括安卓屏，所述安卓屏装配安卓系统，所述安卓屏设置图像采集接口，所述图像采集接口通过数据线连接图像采集相机，所述图像采集相机采集售货机柜内部的商品图像；

采集的商品图像通过数据线反馈给安卓系统，安卓系统对商品图像进行识别；识别方法是图像采集相机拍摄二张图片，一张是柜门开启前的图像，另一张是柜门关闭后的图像，通过前后二台图像对比，获取到货道的出货信息。

安卓系统对数种商品的图像信息进行存储，在通过前后二台图像对比后，运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量。安卓系统识别出商品的种类和出货数量，再乘以商品金额生成出货单。

如果用户确认商品数量和品类都对的情况下点击确认按钮，后台自动推送给用户手机提示扣款金额和数量；

6)交易成功用户离开；如果交易失败或用户在使用后有疑问的情况下，用户在手机上点击帮助按钮，售货机将开门前后相片推送到用户手机界面核对，后台也可人工在核对手动操作。

视觉售货机管理和补货流程：

1)管理员手机点击补货开门按钮；

2)系统自动拍照将售货机内库存照片保存本地生成库存订单并显示在屏幕上；

3)用户将货物放满后并关门后在手机界面上点击补货成功按钮后，系统自动拍照并保存生成补货订单和当前库存量，在屏幕显示。

图像采集相机通过前后二台图像对比获取货道出货信息、运用机器学习、深度学习识别出货的货物种类以及出货的数量，取样，建模的方法在所属领域现有技术中比较成熟，在视觉方法生成订单的操作系统中具体应用方式是：

一)图像采集相机通过前后二台图像对比获取到货道的出货信息的实现方式为：货柜背景统一为白色，货物为其他颜色，当顾客取完货后，图像可以识别出当前格子对应的货物被取出。

二)运用机器学习、深度学习算法，识别出出货的货物种类以及出货的数量的实现方案为：货物种类是固定的，事先我们会对这些货物进行取样，建模，运用机器学习的方法(深度学习)，对货物进行识别训练，得出参数。实际运行时，直接运用该参数对货物进行识别，判断已取出的货物种类。

虽然本发明已以较佳实施例揭示如上，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的修改和完善，因此本发明的保护范围当以权利要求书所界定的为准。

Claims (5)

1.一种应用基于视觉方法生成订单的自助终端，其特征在于：

用户通过如下操作实现自助；

1)用户通过手机微信、支付宝或其他第三方实名登记支付扫描屏幕或贴在机身二维码输入密码确认开收货柜门；

2)后台在收到用户确认开门后给设备发送拍照指令，相机拍照后将开柜门前相片显示在屏幕上，并且都将商品框图框起来并生成库存列表供用户参考；

3)拍照后自动将售货机柜门打开，界面提示取货倒计时60秒和语音，提示顾客取货后务必将门关好；

4)用户取完货后关门或60秒后系统自动关门并报警提示顾客关门；

5)门关好后系统自动将取货前后照片展示在屏幕上，并生成取货订单，提示顾客如有疑问和可点击帮助，系统再重新识别核对；

6)交易成功用户离开。

2.如权利要求1所述的应用基于视觉方法生成订单的自助终端，其特征在于：

视觉售货机管理和补货流程：

1)管理员手机点击补货开门按钮；

2)系统自动拍照将售货机内库存照片保存本地生成库存订单并显示在屏幕上；

3)用户将货物放满后并关门后在手机界面上点击补货成功按钮后，系统自动拍照并保存生成补货订单和当前库存量，在屏幕显示。

3.如权利要求2所述的应用基于视觉方法生成订单的自助终端，其特征在于：第5)中，如果顾客不点击屏幕帮助按钮系统默认60秒生成订单并将该订单推送给用户手机界面提示扣款金额和数量。

4.如权利要求3所述的应用基于视觉方法生成订单的自助终端，其特征在于：第5)中，如果用户确认商品数量和品类都对的情况下点击确认按钮，后台自动推送给用户手机提示扣款金额和数量。

5.如权利要求4所述的应用基于视觉方法生成订单的自助终端，其特征在于：第6)中，如果交易失败或用户在使用后有疑问的情况下，用户在手机上点击帮助按钮，售货机将开门前后相片推送到用户手机界面核对，后台也可人工在核对手动操作。