CN108648334A - 无人售货柜及其异常上报控制方法、无人售货系统 - Google Patents

Abstract

本发明公开了一种无人售货柜及其异常上报控制方法、无人售货系统，其中方法包括：获取用户的开门请求信息，根据开门请求信息控制无人售货柜开门，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像，判断摄像头或商品图像是否异常，如果异常，判断异常次数是否达到预设阈值，如果未达到预设阈值，则控制摄像头重启或重新拍照，如果达到预设阈值，则进行异常上报。该方法在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

Description

无人售货柜及其异常上报控制方法、无人售货系统

技术领域

本发明涉及售货设备技术领域，特别涉及一种无人售货柜及其异常上报控制方法、无人售货系统。

背景技术

自动售货机是能根据投入的钱币或电子支付后自动付货的机器。自动售货机是商业自动化的常用设备，它不受时间、地点的限制，能节省人力、方便交易，是一种全新的商业零售形式。

用户在使用自动售货机购买商品时，一旦某一环节出现失败，会频繁报错以及频繁重启，从而增加用户的等待时间。

发明内容

本发明旨在至少在一定程度上解决上述技术中的技术问题之一。

为此，本发明提出一种无人售货柜的异常上报控制方法，在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

本发明一方面实施例提出了一种无人售货柜的异常上报控制方法，包括：

获取用户的开门请求信息；

根据所述开门请求信息控制所述无人售货柜开门；

启动所述无人售货柜的摄像头以获取所述无人售货柜中货架的商品图像；

判断所述摄像头或所述商品图像是否异常；

如果异常，判断异常次数是否达到预设阈值；

如果未达到所述预设阈值，则控制所述摄像头重启或重新拍照；以及

如果达到所述预设阈值，则进行异常上报。

本发明实施例的无人售货柜的异常上报控制方法，通过获取用户的开门请求信息，根据开门请求信息控制无人售货柜开门，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像，判断摄像头或商品图像是否异常，如果异常，判断异常次数是否达到预设阈值，如果未达到预设阈值，则控制摄像头重启或重新拍照，如果达到预设阈值，则进行异常上报。本实施例中，在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

本发明另一方面实施例提出一种无人售货柜，包括：

获取模块，用于获取用户的开门请求信息；

第一控制模块，用于根据所述开门请求信息控制所述无人售货柜开门；

启动模块，用于启动所述无人售货柜的摄像头以获取所述无人售货柜中货架的商品图像；

第一判断模块，用于判断所述摄像头或所述商品图像是否异常；

第二判断模块，用于在所述摄像头或所述商品图异常时，判断异常次数是否达到预设阈值；

第二控制模块，用于在异常次数未达到所述预设阈值时，控制所述摄像头重启或重新拍照；以及

上报模块，用于在异常次数达到所述预设时，进行异常上报。

本发明实施例的无人售货柜，通过获取用户的开门请求信息，根据开门请求信息控制无人售货柜开门，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像，判断摄像头或商品图像是否异常，如果异常，判断异常次数是否达到预设阈值，如果未达到预设阈值，则控制摄像头重启或重新拍照，如果达到预设阈值，则进行异常上报。本实施例中，在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

本发明另一方面实施例还提出一种无人零售系统，包括售货装置和云服务器，其中，

所述售货装置包括：

多个货架；

多个重量感应器，用于分别对所述多个货架进行重量检测以生成重量检测信号；

多个摄像头，用于分别获取所述多个货架之上商品的图像；

通信器，用于与所述云服务器进行通信；

第一控制器，用于将所述多个重量感应器的重量检测信号和所述多个摄像头获取的商品图像发送至云服务器；

所述云服务器，用于根据所述多个重量感应器的重量检测信号获取重量发生变化的目标货架，并根据所述目标货架的重量检测信号和对应的商品图像进行结算。

本发明实施例的无人零售系统，包括售货装置和云服务器，售货装置包括：多个货架；多个重量感应器，用于分别对多个货架进行重量检测以生成重量检测信号；多个摄像头，用于分别获取多个货架之上商品的图像；通信器，用于与云服务器进行通信；第一控制器，用于将多个重量感应器的重量检测信号和多个摄像头获取的商品图像发送至云服务器；云服务器，用于根据多个重量感应器的重量检测信号获取重量发生变化的目标货架，并根据目标货架的重量检测信号和对应的商品图像进行结算。本实施例中，通过根据多个重量感应器的重量检测信号确定重量发生变化的目标货架，并根据目标货架的重量检测信号和对应的商品图像进行结算，从而可以提高商品识别的准确性，减少用户购买商品失败的次数。

本发明另一方面实施例还提出一种计算机程序产品，当所述计算机程序产品中的指令由处理器执行时，实现如上述一方面实施例所述的无人售货柜的异常上报控制方法。

本发明另一方面实施例还提出一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现如上述一方面实施例所述的无人售货柜的异常上报控制方法。

本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中，

图1为本发明实施例提供的一种无人售货柜的异常上报控制方法的流程示意图。

图2为本发明实施例提供的另一种无人售货柜的异常上报控制方法的流程示意图；

图3为本发明实施例提供的一种无人售货柜的结构示意图；

图4为本发明实施例提供的一种无人零售系统的结构示意图；

图5为本发明实施例提供的另一种无人售货系统的结构示意图。

具体实施方式

下面详细描述本发明的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本发明，而不能理解为对本发明的限制。

下面结合附图来描述本发明实施例的无人售货柜及其异常上报控制方法、无人售货系统。

针对用户在使用自动售货机购买商品时，一旦某一环节出现异常，会频繁报错以及频繁重启，从而增加用户的等待时间的问题，本发明实施例提出一种无人售货柜的异常上报控制方法。

本发明实施例的无人售货柜的异常上报控制方法，通过在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

图1为本发明实施例提供的一种无人售货柜的异常上报控制方法的流程示意图。

如图1所示，该无人售货柜的异常上报控制方法包括：

步骤101，获取用户的开门请求信息。

本实施例中，无人售货柜是开门式无人售货柜，用户打开无人售货柜的柜门后，可以随意查看商品信息，如商品名称、商品生产地址、保质期等，并挑选商品。

为了防止有人从无人售货柜恶意拿取商品，开门请求信息为扫码信息。在实际使用中，用户可通过移动终端，如手机、掌上电脑等，扫描无人售货柜的二维码信息，以请求打开无人售货柜。其中，扫描二维码获得的扫码信息中可携带有无人售货柜的唯一标识、位置信息等。

具体地，移动终端获取扫码信息后，并将扫码信息发送给云服务器。云服务器接收到扫码信息后，根据获取的扫码信息，在扫码信息库进行查询。当在扫码信息库中查询到获取的扫码信息，则云服务器向无人售货柜发送用户请求开门的请求信息。其中，开门请求信息中携带有无人售货柜的唯一标识、位置信息等。

作为另一种可能的实现方式，无人售货柜上设置有开门按钮，当检测到用户开门操作指令时，获取到用户的开门请求信息。

本实施例中，通过获取用户的开门请求信息，再进行开门，不仅可以方便用户查看商品信息，避免购买错误，也可以避免无人售货柜中商品被恶意拿走。

步骤102，根据开门请求信息控制无人售货柜开门。

本实施例中，无人售货柜获取到用户的开门请求信息后，根据开门请求信息，控制无人售货柜开门。

为了提高控制的准确性，获取的开门请求信息中携带有无人售货柜的编码、位置信息等。无人售货柜从开门请求信息中提取无人售货柜的唯一标识、地址信息等，并与自身的唯一标识和所在位置进行比较，当唯一标识和位置信息均正确时，控制无人售货柜开门。从而，能够根据开门请求信息精确的打开用户请求打开的无人售货柜的柜门。

本实施例中，根据开门请求信息控制无人售货柜开门，可以防止有人直接打开无人售货柜，拿走商品的情况，提高了无人售货柜的安全性。

步骤103，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像。

本实施例中，在无人售货柜开门后，启动无人售货柜的摄像头，以通过摄像头获取无人售货柜中货架的商品图像。

在实际使用中，摄像头可以设置在储物间内的顶部，或者设置在每层货架的两侧，以拍摄货架上的商品。在摄像头启动后，可每隔预设时间，如1秒，拍摄一次每层货架上的商品。

本实施例中，在无人售货柜开门后，启动摄像头可以节省电量，提高摄像头的寿命。

步骤104，判断摄像头或商品图像是否异常。

在摄像头启动后，可能会发生异常，如用户不小心碰到了摄像头等，导致摄像头异常，或者商品图像异常，如商品图像不清晰，或者是未识别出商品等等。

本实施例中，商品图像异常可以是无人售货柜识别的得到的，也可以是从云服务器获取的。

作为一个示例，可通过本地图片识别算法对商品图像进行校验，当校验失败时，判断商品图像异常。具体地，将摄像头拍摄的多帧商品图像进行比较，以获取用户选取的商品图像和数量，并对商品图像进行特征提取，并将提取的特征与本地存储的每种商品图像的特征进行比较，以确定用户选取的商品是否为无人售货柜售卖的商品。当校验失败，如商品不是本无人售货柜售卖的商品，或者未识别出用户选取的商品等，判断商品图像异常。

作为另一个示例，无人售货柜可将摄像头拍摄的商品图像，通过无线网络发送给云服务器，以使云服务器对商品图像进行校验。具体的，可根据摄像头拍摄的商品图像，确定开门后缺少了商品的货架，之后从该货架对应的商品图像中提取商品，并生成每种商品的置信度，将置信度大于预设阈值的商品与预设的商品模型进行匹配，以获取该货架用户拿取的商品。如果未确定用户拿取的商品，即校验失败，则判断商品图像异常，并将商品图像异常的校验结果发送给无人售货柜。其中，无线网络可以是3G、4G等。其中，预设的商品模型可以预先学习或者训练得到的。

另外，在通过云服务器对商品图像进行校验时，由于无人售货柜通过无线网络向云服务器发送商品图像的过程中，可能会因为网速差等原因，导致商品图像上传云服务器失败。因此，在向云服务器上传商品图像时，判断商品图像上传云服务器是否失败。

具体的，在云服务器成功接收到商品图像时，可向无人售货柜反馈成功接收商品图像的消息。当无人售货柜接收到云服务器反馈的接收成功时，可以认为商品图像成功上传至云服务器；当无人售货柜接收到云服务器反馈的接收失败，或者未接收到反馈的消息时，可以认为商品图像上传失败，这时可控制摄像头重新拍照并再次上传，以使提高云服务器接收到商品图像的成功率。

本实施例中，可在本地对商品图像进行校验，或者由云服务器对商品图像进行校验，并从云服务器获取校验结果。

步骤105，如果异常，判断异常次数是否达到预设阈值。

由于无人售货柜在售卖商品的过程中，可能会出现异常，这些异常可能是偶然的，如果出现异常便上报，会造成频繁报错。

本实施例中，预先为异常次数设置对应的阈值。针对每次售货，从无人售货柜开门开始，当摄像头或者商品图像异常时，将异常次数加1，并将异常次数与预设阈值进行比较，以判断异常次数是否超过预设阈值。

在实际使用中，预设阈值可以设置为1次、2次或者3次等等，具体的，可以根据需要进行设置。

步骤106，如果未达到预设阈值，则控制摄像头重启或重新拍照。

本实施例中，当异常次数未达到预设阈值时，可以认为这些异常可能是偶然的，这时控制摄像头重新启动，对货架上的商品进行拍照，或者重新对对货架上的商品进行拍照。

以预设阈值为1次为例，在一次售货过程中，当摄像头或商品图像出现1次异常时，可能是又因为偶然情况，这时重启摄像头或者摄像头重新拍照，避免1次异常便进行上报。

步骤107，如果达到预设阈值，则进行异常上报。

本实施例中，在摄像头或者商品的异常次数大于预设阈值时，可以认为异常可能不是偶然的，这时可进行异常上报。在实际使用时，可将异常上报至云服务器，以使云服务器通知商家，或者将异常直接上报至商家服务中心，以使商家及时对发生异常的无人售货柜进行处理。

其中，上报的异常可包括：无人售货柜的唯一标识、位置信息、异常的类型、异常次数等等，以便于工作人员根据上报的异常信息进行排查。

本实施例中，通过对摄像头或商品图像是否发生异常进行判断，并对异常次数进行统计，在异常次数未超过预设阈值时，不进行异常上报，而是控制摄像头重启或者重新拍照，在在异常次数超过预设阈值时，再进行异常上报。从而，通过将异常次数与预设阈值进行比较，决定是否进行异常上报，避免了因偶然异常造成频繁报错以及重新开始售卖流程，减少了用户的等待时间。

在上述实施例的基础上，为了便于工作人员排查异常，在启动摄像头之前，对无人售货柜是否有信号异常、与云服务器连接是否超时等进行判断。图2为本发明实施例提供的另一种无人售货柜的异常上报控制方法的流程示意图。

如图2所示，该无人售货柜的异常上报控制方法包括：

步骤201，获取用户的开门请求信息。

步骤202，根据开门请求信息控制无人售货柜开门。

本实施例中，步骤201-步骤202，与上述实施例中步骤101-步骤102记载的内容类似，故在此不再赘述。

步骤203，判断无人售货柜是否有信号异常。如果有，则执行步骤204；否则，执行步骤205。

在无人售货柜开门后，判断无人售货柜是否有信号异常。例如，判断无人售货柜制冷信号是否异常、无人售货柜控制照明的信号是否异常等等。

步骤204，进行异常上报。

在确定无人售货柜有信号异常时，将异常上报至云服务器，使云服务器发送异常信息至商家。其中，上报的异常包括异常的类型、异常的无人售货柜的唯一标识、位置信息等。或者，无人售货柜将异常上报至商家服务中心。从而，商家可以根据上报的异常类型，对异常进行处理。

步骤205，判断与云服务器连接是否超时。如果超时，则执行步骤204；否则，执行步骤206。

在确定无人售货柜不存在信号异常时，进一步判断无人售货柜与云服务器连接是否超时。其中，连接为无线连接，包括4G网络连接等。

在具体实现时，可从无人售货获取到用户的开门请求信息开始计时，当无人售货柜与云服务器连接的时长超过预设时长，如1分钟，可以认为无人售货柜与云服务器连接超时。其中，预设时长可以根据实际需要进行设置。

步骤206，判断无人售货柜是否断电。如果断电，执行步骤204；否则，执行步骤207。

本实施例中，在确定无人售货柜不存在信号异常时，进一步判断无人售货柜是否断电。具体地，可通过检测电源电压是否正常，判断无人售货柜是否断电。当判断无人售货柜断电时，执行步骤204，将断电异常进行上报，以使工作人员根据断电异常对异常进行处理。当确定无人售货柜未断电时，执行步骤207，以进一步判断与云服务器的无线连接是否掉线。

步骤207，判断与云服务器的无线连接是否掉线。如果掉线，则执行步骤204；否则，执行步骤208。

本实施例中，在确定无人售货柜未断电时，进一步判断与云服务器的无线连接是否掉线。以4G网络为例，通过检测4G网络模块发射信号是否正常，来判断与云服务器的无线连接是否掉线。

如果掉线，执行步骤204，将与云服务器的无线连接掉线的异常进行上报，以使工作人员根据该异常检查与云服务器的无线连接。如果未掉线，则启动摄像头，以对商品进行拍照。

本实施例中，在步骤208之前，对无人售货柜是否有信号异常、与云服务器连接是否超时、无人售货柜是否断电、与云服务器的无线连接是否掉线进行判断，在出现异常时，将异常进行上报，以便于出现异常时排查原因，提高对异常的处理速度。

需要说明的是，本实施例中，步骤203、步骤205、步骤206、步骤207的无先后执行顺序，在实际应用中，可以根据需要设置执行顺序。

步骤208，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像。

步骤209，判断摄像头或商品图像是否异常。

步骤210，如果异常，判断异常次数是否达到预设阈值。

步骤211，如果未达到预设阈值，则控制摄像头重启或重新拍照。

步骤212，如果达到预设阈值，则进行异常上报。

本实施例中，步骤208-步骤212，与上述实施例中步骤103-步骤107记载的内容类似，故在此不再赘述。

本发明实施例的无人售货柜的异常上报控制方法，通过在启动摄像头之前，对无人售货柜是否有信号异常、与云服务器连接是否超时、无人售货柜是否断电、与云服务器的无线连接是否掉线进行判断，在出现异常时，进行异常上报，有利于在存在异常时排查异常的原因，提高了对异常的处理速度。

为了实现上述实施例，本发明实施例还提出一种无人售货柜。图3为本发明实施例提供的一种无人售货柜的结构示意图。

如图3所示，该无人售货柜包括：获取模块310、第一控制模块320、启动模块330、第一判断模块340、第二判断模块350、第二控制模块360、上报模块370。

获取模块310用于获取用户的开门请求信息。

第一控制模块320用于根据开门请求信息控制无人售货柜开门。

启动模块330用于启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像。

第一判断模块340用于判断摄像头或所述商品图像是否异常。

第二判断模块350用于在摄像头或商品图异常时，判断异常次数是否达到预设阈值。

第二控制模块360用于在异常次数未达到预设阈值时，控制摄像头重启或重新拍照；以及

上报模块370用于在异常次数达到预设时，进行异常上报。

在本实施例一种可能的实现方式中，第一判断模块340还用于：

通过本地图片识别算法对商品图像进行校验；

如果校验失败，则判断商品图像异常。

在本实施例一种可能的实现方式中，第一判断模块340还包括：

发送单元，用于向云服务器发送商品图像，以使云服务器对商品图像进行校验；

获取单元，用于从云服务器获取检验失败的结果。

在本实施例一种可能的实现方式中，第一判断模块340还包括：

判断单元，用于在判断商品图像上传云服务器是否失败；

控制单元，用于在上传失败时，控制摄像头重新拍照并再次上传。

在本实施例一种可能的实现方式中，该无人售货柜还包括：

第三判断模块，用于在在启动摄像头之前，判断无人售货柜是否有信号异常；

上报模块370还用于在有信号异常时，进行异常上报。

第四判断模块，用于在无异常信号时，进一步判断与云服务器连接是否超时。

上报模块370还用于在连接超时，判断连接异常，并进行异常上报；

第五判断模块，用于在未超时，进一步判断无人售货柜是否断电；

上报模块370还用于在断电时，判断异常，并进行异常上报；

第六判断模块，用于在未断电时，进一步判断与云服务器的无线连接是否掉线；

上报模块370还用于在与云服务器的无线连接掉线时，判断异常，并进行异常上报；

启动模块330还用于在未掉线时，启动摄像头。

在本实施例一种可能的实现方式中，开门请求信息为扫码信息，第一控制模块320还用于：

对扫码信息进行验证；

如果通过验证，则控制无人售货柜开门。

需要说明的是，前述对无人售货柜的异常上报控制方法实施例的解释说明，也适用于本实施例的无人售货柜，故在此不再赘述。

本发明实施例的无人售货柜，通过获取用户的开门请求信息，根据开门请求信息控制无人售货柜开门，启动无人售货柜的摄像头以获取无人售货柜中货架的商品图像，判断摄像头或商品图像是否异常，如果异常，判断异常次数是否达到预设阈值，如果未达到预设阈值，则控制摄像头重启或重新拍照，如果达到预设阈值，则进行异常上报。本实施例中，在异常次数未到达预设阈值时，不进行异常上报，而是重启摄像头或者重新拍照，在异常次数超过预设阈值时，才进行异常上报，从而避免了因偶然异常导致频繁报错，减少了用户的等待时间。

为了提高对商品的结算的准确率，本发明实施例还提出一种无人零售系统。图4为本发明实施例提供的一种无人零售系统的结构示意图。

如图4所示，该无人零售系统400包括售货装置410和云服务器420。

如图4所示，售货装置410包括：多个货架411、多个重量感应器412、多个摄像头413、通信器414、第一控制器415。

本实施例中，售货装置410中有多个货架411，用于放置商品。在具体实现时，多个货架411可间隔设置。

重量感应器412可设置在货架411的底部，以对货架411的重量检测以生成重量检测信号。即多个重量感应器412分别对多个货架411进行重量检测以生成重量检测信号。在具体实现时，可在每个货架411底部设置一个重力感应器412。

售货装置410包括多个摄像头413，用于分别获取多个货架411之上商品的图像。在实际使用时，可将摄像头413设置在每个货架411的两侧，或者是售货装置410内部的顶端。

售货装置410包括通信器414，用于与云服务器420进行通信。其中，可以通过通信器414与云服务器420进行无线连接，通过无线进行通信，如通过3G、4G等进行通信。

当用户从售货装置410的货架411上取出商品时，第一控制器415可将多个重量感应器412的重量检测信号和多个摄像头413获取的商品图像发送至云服务器420。在具体实现时，通信器414与云服务器420连接，将重量检测信号和商品图像发送给云服务器420。

具体过程如下：当用户从货架上取下商品并关闭售货装置的门之后，重量感应器将采集的每个货架的重量检测信号，和摄像头在用户开门和关门之间拍摄的商品图片发送给第一控制器。之后，第一控制器通过通信器将获取的多个重量感应器的重量检测信号和多个摄像头获取的商品图像发送至云服务器。云服务器接收之后，将多个重量感应器的重量检测信号与用户未拿取商品之前，重量感应器的重量检测信号进行比对，以获取重量发生变化的目标货架。并且，对商品图像进行识别，确定用户拿取的商品名称、单价、重量等信息。由此，云服务器可根据目标货架减少的重量、商品的单价和重量，计算用户应付的金额。

例如，目标货架重量减少了400克，用户拿取的商品单价是2元，单个商品的重量为400克，由此可知用户共拿了一瓶饮料，用户应付的金额为2元。

进一地，假设同一货架上放置的是同一种商品，用户可能从同一货架上拿取多个商品。

本实施例中，云服务器420可根据售货装置410关门前后重力检测信号检测的每个货架411的重量，获取目标货架411在售货装置410开关门前后的重量差。并且，云服务器420根据存储的每个货架411上商品的信息，可获取目标货架411所对应商品的单件重量，判断重量差是否为单件重量的整数倍。如果是整数倍，说明用户拿取了多个商品，则根据重量差和单件重量的倍数进行结算。云服务器420可将结算金额发送移动终端，以使用户通过移动终端进行电子支付。或者将结算金额发送给售货装置410进行显示，以使用户根据显示的金额进行支付，如通过扫描支付或者是投币支付。

例如，重量差为800克，商品单件重量是400克，单价是2元，则用户应付的金额为4元。

更进一步地，用户在使用售货装置购买商品的过程中，可能会将商品错放到其他货架，导致货架上放置不同种类的商品。

云服务器420在判断重量差不为单件重量的整数倍时，说明用户从目标货架上拿取了不同种类的商品，则对目标货架对应的商品图像进行识别以获取目标货架之上的商品。当目标货架之上的商品包括其他货架的商品时，获取其他货架的商品的单件重量，并根据重量差、其他货架的商品单件重量以及目标货架的商品单件重量进行结算。

例如，重力差为600克，目标货架上的商品单件重量为400克，单价为2元，用户拿取的其他货架上的商品单件重量为200克，其单价为3元，则用户应付的金额为5元。

在实际使用中，用户在选择商品时，可以会将某一个货架上的商品放到其他货架上。本实施例中，云服务器420在当判断目标货架411之上的商品包括其他货架411的商品时，控制售货装置410发出提示信息以对购买者进行提示。其中，提示可以是语音提示，也可以是在售货装置的显示屏幕上进行文字提示。

进一地，在用户将某一个货架上的商品放到其他货架上，且未恢复的情况下，为了提高结算的准确性，云服务器420在购买者未将目标货架411之上的其他货架411的商品恢复时，更新目标货架411的商品列表。其中，商品列表包括：商品的种类、商品名称、每个种类的商品的单价、每个种类的商品的单件重量、目标货架的重量等。

云服务器420识别目标货架上的商品时，云服务器420从目标货架411对应的商品图像中提取商品，并生成每种商品的置信度，将置信度大于预设阈值的商品与预设的商品模型进行匹配，以获取目标货架之上的商品。

作为一个示例，云服务器420对商品图像进行特征提取，在进行特征图降采样，归一化处理后得到的特征矢量，与图像识别数据库中的矢量及进行比对，生成每种商品的置信度，并将置信度超过预设阈值的商品与预设的商品模型进行匹配，以获取目标货架之上的商品。其中，图像识别数据库存储有每种商品的图像，预设的商品模型可以是学习或训练得到的。

本实施例中，通过对商品图像进行识别确定商品，相比射频识别技术利用大量的标签识别商品，大大降低了成本。

为了提高识别的准确性，在对商品模型进行训练使时，可通过大量的人工布置，在售货装置410中随意摆放不同组合不同类别的商品，再通过摄像头413拍摄图片，最后通过自动标定或人工标定的方式，将图片中的商品进行标定，进行图像训练，以确定商品模型的参数。若在云服务器420识别过程中，有图像识别数据库以外的商品，则可以通过再训练来调整商品模型的参数，或者通过人工标定进一步训练调整商品模型参数。

当售货装置410内还有非售货装置的商品时，云服务器420在识别出目标货架之上的商品包括非售货装置的商品，可通过售货装置410向购买者进行提醒，并向维护人员进行报警。

进一步地，图5为本发明实施例提供的另一种无人售货系统的结构示意图。如图5所示，售货装置410还包括：门控模块416和扫码模块417。

其中，门控模块416用于对售货装置的门进行控制；

扫码模块417用于在用户扫码通过之后通过门控模块416控制售货装置410的门进行开启。

具体过程可参见图1实施中所述的获取用户的开门请求信息的方法。

本实施例中，通过扫码模块和门口模块，控制售货装置的门进行开启，可以提高售货装置的安全性。

为了进一步提高安全性，售货装置410，还包括：购物监控模块，以对购物者的行为进行监控。

当购物监控模块监控得到用户恶意胡乱放置商品时，可向第一控制器415发送信息，以向用户发出警告。

更进一步地，为了便于用户选择商品和提高对商品图像的识别准确率，售货装置410还包括：照明模块。

当在售货装置的门开启时照明模块控制灯光进行照明，以及在多个摄像头开启时进行补光，提高拍摄的图像的质量。

本发明实施例的无人零售系统，包括售货装置和云服务器，售货装置包括：多个货架；多个重量感应器，用于分别对多个货架进行重量检测以生成重量检测信号；多个摄像头，用于分别获取多个货架之上商品的图像；通信器，用于与云服务器进行通信；第一控制器，用于将多个重量感应器的重量检测信号和多个摄像头获取的商品图像发送至云服务器；云服务器，用于根据多个重量感应器的重量检测信号获取重量发生变化的目标货架，并根据目标货架的重量检测信号和对应的商品图像进行结算。本实施例中，通过根据多个重量感应器的重量检测信号确定重量发生变化的目标货架，并根据目标货架的重量检测信号和对应的商品图像进行结算，从而可以提高商品识别的准确性，减少用户购买商品失败的次数。

为了实现上述实施例，本发明实施例还提出一种计算机程序产品，当所述计算机程序产品中的指令由处理器执行时，实现如上述实施例所述的无人售货柜的异常上报控制方法。

为了实现上述实施例，本发明实施例还提出一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时，实现如上述实施例所述的无人售货柜的异常上报控制方法。

在本发明的描述中，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。

在本发明中，除非另有明确的规定和限定，第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触，或第一和第二特征通过中间媒介间接接触。而且，第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方，或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方，或仅仅表示第一特征水平高度小于第二特征。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (20)

1.一种无人售货柜的异常上报控制方法，其特征在于，包括：

获取用户的开门请求信息；

根据所述开门请求信息控制所述无人售货柜开门；

启动所述无人售货柜的摄像头以获取所述无人售货柜中货架的商品图像；

判断所述摄像头或所述商品图像是否异常；

如果异常，判断异常次数是否达到预设阈值；

如果未达到所述预设阈值，则控制所述摄像头重启或重新拍照；以及

如果达到所述预设阈值，则进行异常上报。

2.如权利要求1所述的无人售货柜的异常上报控制方法，其特征在于，所述判断所述商品图像是否异常包括：

通过本地图片识别算法对所述商品图像进行校验；

如果校验失败，则判断所述商品图像异常。

3.如权利要求1所述的无人售货柜的异常上报控制方法，其特征在于，所述判断所述商品图像是否异常包括：

云服务器对所述商品图像进行校验；

如果校验失败，则判断所述商品图像异常。

4.如权利要求3所述的无人售货柜的异常上报控制方法，其特征在于，还包括：

判断所述商品图像上传所述云服务器是否失败；

如果失败，则控制所述摄像头重新拍照并再次上传。

5.如权利要求1所述的无人售货柜的异常上报控制方法，其特征在于，在启动所述摄像头之前，还包括：

判断所述无人售货柜是否有信号异常；

如果有，则进行异常上报；

如果无异常，则进一步判断与所述云服务器连接是否超时；

如果超时，则判断连接异常，并进行异常上报；

如果未超时，则进一步判断所述无人售货柜是否断电；

如果断电，则判断异常，并进行异常上报；

如果未断电，则进一步判断与所述云服务器的无线连接是否掉线；

如果掉线，则判断异常，并进行异常上报；

如果未掉线，则启动所述摄像头。

6.如权利要求1所述的无人售货柜的异常上报控制方法，其特征在于，所述开门请求信息为扫码信息，其中，所述根据所述开门请求信息控制所述无人售货柜开门具体包括：

对所述扫码信息进行验证；

如果通过验证，则控制所述无人售货柜开门。

7.一种无人售货柜，其特征在于，包括：

获取模块，用于获取用户的开门请求信息；

第一控制模块，用于根据所述开门请求信息控制所述无人售货柜开门；

启动模块，用于启动所述无人售货柜的摄像头以获取所述无人售货柜中货架的商品图像；

第一判断模块，用于判断所述摄像头或所述商品图像是否异常；

第二判断模块，用于在所述摄像头或所述商品图异常时，判断异常次数是否达到预设阈值；

第二控制模块，用于在异常次数未达到所述预设阈值时，控制所述摄像头重启或重新拍照；以及

上报模块，用于在异常次数达到所述预设时，进行异常上报。

8.一种无人零售系统，其特征在于，包括售货装置和云服务器，其中，

所述售货装置包括：

多个货架；

多个重量感应器，用于分别对所述多个货架进行重量检测以生成重量检测信号；

多个摄像头，用于分别获取所述多个货架之上商品的图像；

通信器，用于与所述云服务器进行通信；

第一控制器，用于将所述多个重量感应器的重量检测信号和所述多个摄像头获取的商品图像发送至云服务器；

所述云服务器，用于根据所述多个重量感应器的重量检测信号获取重量发生变化的目标货架，并根据所述目标货架的重量检测信号和对应的商品图像进行结算。

9.如权利要求8所述的无人零售系统，其特征在于，所述云服务器获取所述目标货架在所述售货装置开关门前后的重量差，并获取所述目标货架所对应商品的单件重量，判断所述重量差是否为所述单件重量的整数倍，如果是整数倍，则根据所述重量差和所述单件重量的倍数进行结算。

10.如权利要求9所述的无人零售系统，其特征在于，所述云服务器还用于，在判断重量差不为所述单件重量的整数倍之后，对所述目标货架对应的商品图像进行识别以获取所述目标货架之上的商品，当所述目标货架之上的商品包括其他货架的商品时，获取所述其他货架的商品的单件重量，并根据所述重量差、所述其他货架的商品单件重量以及所述目标货架的商品单件重量进行结算。

11.如权利要求10所述的无人零售系统，其特征在于，所述云服务器，还用于当判断所述目标货架之上的商品包括其他货架的商品时，控制所述售货装置发出提示信息以对购买者进行提示。

12.如权利要求11所述的无人零售系统，其特征在于，所述云服务器还用于，在所述购买者未将所述目标货架之上的其他货架的商品恢复时，更新所述目标货架的商品列表。

13.如权利要求10所述的无人零售系统，其特征在于，所述云服务器从所述目标货架对应的商品图像中提取商品，并生成每种商品的置信度，将置信度大于预设阈值的商品与预设的商品模型进行匹配，以获取所述目标货架之上的商品。

14.如权利要求13所述的无人零售系统，其特征在于，所述预设的商品模型通过学习或训练得到。

15.如权利要求10所述的无人零售系统，其特征在于，所述云服务器还用于，如果识别出所述目标货架之上的商品包括非售货装置的商品，则通过所述售货装置向购买者进行提醒，并向维护人员进行报警。

16.如权利要求8所述的无人零售系统，其特征在于，所述售货装置，还包括：

门控模块，用于对所述售货装置的门进行控制；

扫码模块，用于在用户扫码通过之后通过所述门控模块控制所述售货装置的门进行开启。

17.如权利要求8所述的无人零售系统，其特征在于，所述售货装置，还包括：

购物监控模块，用于对购物者的行为进行监控。

18.如权利要求8所述的无人零售系统，其特征在于，所述售货装置，还包括：

照明模块，用于在所述售货装置的门开启时进行照明，以及在所述多个摄像头开启时进行补光。

19.一种计算机程序产品，其特征在于，当所述计算机程序产品中的指令由处理器执行时，实现如权利要求1-6任一项所述的无人售货柜的异常上报控制方法。

20.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时，实现如权利要求1-6任一项所述的无人售货柜的异常上报控制方法。