CN109711359B - 售货机控制方法、装置和计算机可读存储介质 - Google Patents

Abstract

本公开提出一种售货机控制方法、装置和计算机可读存储介质，涉及人工智能技术领域。本公开的一种售货机控制方法，包括：一种售货机控制方法，包括：在售货机开门状态下：采集售货机有效范围内的图像；对采集的图像进行风险分析；若确定采集的图像异常，则确定采集的图像为高风险图像；将高风险图像上报售货机控制服务器，以便识别用户风险行为。通过这样的方法，能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

Description

售货机控制方法、装置和计算机可读存储介质

技术领域

本公开涉及人工智能技术领域，特别是一种售货机控制方法、装置和计算机可读存储介质。

背景技术

随着零售业高速发展，越来越多的互联网企业开始探索新的零售模式，无人售货机是线上零售业务向线下市场的有效扩展与延伸。无人售货机相对于无人货架采用了封闭的空间，能够降低偷盗的风险。

类似于无人货架，如何有效防止无人售货机商品被偷盗，防止将有害身体健康的商品放入无人售货机仍然是需要解决的问题。由于无人售卖机主要销售食品与日常生活必需品，因此上述行为如果得不到控制，不仅仅容易引起经济损失，还可能会威胁到商品使用者的人身安全。

发明内容

本公开的一个目的在于提高售货机的安全性。

根据本公开的一些实施例的一个方面，提出一种售货机控制方法，包括：

在售货机开门状态下：采集售货机有效范围内的图像；对采集的图像进行风险分析；若确定采集的图像异常，则确定采集的图像为高风险图像；

将高风险图像上报售货机控制服务器，以便识别用户风险行为。

在一些实施例中，将高风险图像上报售货机控制服务器包括：对异常图像进行筛选，挑选出部分异常图像；将挑选出的异常图像上报售货机控制服务器。

在一些实施例中，图像异常包括以下一项或多项：根据图像分析确定一个或多个图像采集设备被遮挡；根据图像分析确定售货机内出现了异常物体；用户对货物做出异常操作，异常操作包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项；或，货物的尺寸、颜色或透明度发生改变。

在一些实施例中，将高风险图像上报售货机控制服务器包括：在售货机关门后或保持开门状态的时长超过预定第一时长的情况下，判断是否存在高风险图像；若存在高风险图像，则上报高风险图像。

在一些实施例中，售货机控制方法还包括：基于采集的图像确定货物变化情况；基于重力探测确定货物变化情况；在基于图像和基于重力探测确定的货物变化情况不一致的情况下，执行确定采集的图像为高风险图像的操作。

在一些实施例中，售货机控制方法还包括：在根据图像或重力探测确定货物被取出售货机的情况下，记录被取出的货物的唯一标识，其中，售货机中的每个货物具备唯一标识；在根据图像或重力探测确定货物被放回售货机的情况下，确定放回的货物的标识与取出的货物的标识是否匹配；若不匹配，则执行确定采集的图像为高风险图像的操作，若匹配，则删除记录的货物的标识。

在一些实施例中，售货机控制方法还包括：接收来自用户的开门请求；若用户账户为限制用户，则拒绝触发售货机开门。

在一些实施例中，对采集的图像进行风险分析包括：基于售货机本地的图像特征和图像分析模型对采集的图像进行风险分析。

在一些实施例中，售货机控制方法还包括：售货机控制服务器在收到高风险图像的情况下，识别高风险图像；若通过识别高风险图像确定用户执行违规操作，则修改用户违规操作统计值；在用户的违规操作统计值达到预定门限的情况下，将用户标记为限制用户。

在一些实施例中，售货机控制方法还包括：若售货机控制服务器根据高风险图像确定用户未执行违规操作，则利用高风险图像更新图像分析训练数据集；根据更新后的图像分析训练数据集更新图像特征和图像分析模型，并发送给售货机以便更新售货机的图像特征和图像分析模型。

通过这样的方法，能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

根据本公开的另一些实施例的一个方面，提出一种售货机控制装置，包括：高风险图像确定单元，被配置为在售货机开门状态下对采集的售货机有效范围内的图像进行风险分析，若确定采集的图像异常，则确定采集的图像为高风险图像；上报单元，被配置为将高风险图像上报售货机控制服务器，以便识别用户风险行为。

在一些实施例中，上报单元还被配置为对异常图像进行筛选，挑选出部分异常图像；将挑选出的异常图像上报售货机控制服务器。

在一些实施例中，图像异常包括以下一项或多项：根据图像分析确定一个或多个图像采集设备被遮挡；根据图像分析确定售货机内出现了异常物体；用户对货物做出异常操作，异常操作包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项；或，货物的尺寸、颜色或透明度发生改变。

在一些实施例中，上报单元还被配置为：在售货机关门后或保持开门状态的时长超过预定第一时长的情况下，判断是否存在高风险图像；若存在高风险图像，则上报高风险图像。

在一些实施例中，售货机控制装置还包括：图像处理单元，被配置为基于采集的图像确定货物变化情况；重力处理单元，被配置为基于重力探测确定货物变化情况；高风险图像确定单元还被配置为在基于图像和基于重力探测确定的货物变化情况不一致的情况下，执行确定采集的图像为高风险图像的操作。

在一些实施例中，高风险图像确定单元还被配置为：在根据图像或重力探测确定货物被取出售货机的情况下，记录被取出的货物的唯一标识，其中，售货机中的每个货物具备唯一标识；在根据图像或重力探测确定货物被放回售货机的情况下，确定放回的货物的标识与取出的货物的标识是否匹配；若不匹配，则执行确定采集的图像为高风险图像的操作，若匹配，则删除记录的货物的标识。

在一些实施例中，售货机控制装置还包括：开门控制单元，被配置为：接收来自用户的开门请求；若用户账户为限制用户，则拒绝触发售货机开门。

在一些实施例中，高风险图像确定单元还被配置为：基于售货机本地的图像特征和图像分析模型对采集的图像进行风险分析；根据来自售货机控制服务器的图像特征和图像分析模型更新本地的图像特征和图像分析模型。

根据本公开的又一些实施例的一个方面，提出一种售货机控制装置，包括：存储器；以及耦接至存储器的处理器，处理器被配置为基于存储在存储器的指令执行如上文中任意一种由售货机执行的售货机控制方法。

这样的售货机控制装置能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

根据本公开的再一些实施例的一个方面，提出一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现上文中任意一种售货机控制方法的步骤。

通过执行这样的计算机可读存储介质上存储的指令，售货机控制装置能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

根据本公开的其中一些实施例的一个方面，提出一种售货机控制系统，包括：上文中任意一种售货机控制装置；和售货机控制服务器，被配置为：在收到高风险图像的情况下，识别高风险图像。

在一些实施例中，售货机被配置为基于售货机本地的图像特征和图像分析模型对采集的图像进行风险分析；售货机控制服务器还被配置为：若根据高风险图像确定用户未执行违规操作，则利用高风险图像更新图像分析训练数据集；根据更新后的图像分析训练数据集更新图像特征和图像分析模型，并发送给售货机。

在一些实施例中，售货机控制服务器还被配置为：若通过识别高风险图像确定用户执行违规操作，则修改用户违规操作统计值；在用户的违规操作统计值达到预定门限的情况下，将用户标记为限制用户。

这样的售货机控制系统中，售货机控制装置能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，以便及时确定违规操作，从而实现通过图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

另外，根据本公开的一些实施例的一个方面，还提出一种售货机，包括：储物装置，被配置为承载货物；图像采集装置，被配置为采集货物区域图像；重力探测装置，被配置为探测储物装置承载的货物重量变化情况；和，上文中任意一种售货机控制装置。

这样的售货机能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

附图说明

此处所说明的附图用来提供对本公开的进一步理解，构成本公开的一部分，本公开的示意性实施例及其说明用于解释本公开，并不构成对本公开的不当限定。在附图中：

图1为本公开的售货机控制方法的一些实施例的流程图。

图2为本公开的售货机控制方法的另一些实施例的流程图。

图3为本公开的售货机控制方法的又一些实施例的流程图。

图4为本公开的售货机控制方法的再一些实施例的流程图。

图5为本公开的售货机控制装置的一些实施例的示意图。

图6为本公开的售货机控制装置的另一些实施例的示意图。

图7为本公开的售货机控制系统的一些实施例的示意图。

图8为本公开的售货机的一些实施例的示意图。

具体实施方式

下面通过附图和实施例，对本公开的技术方案做进一步的详细描述。

本公开的售货机控制方法的一些实施例的流程图如图1所示。在售货机开门的状态下开始执行如下操作：

在步骤101中，售货机在用户的触发下开门。在一些实施例中，用户可以通过扫描售货机二维码，或通过其他方式告知售货机自身的身份以触发售货机开门。

当用户触发开门后，售货机通过图像采集设备采集售货机有效范围内的图像。在一些实施例中，有效范围可以包括售货机的正前方，售货机的里面，以及开门之后门与售货机之间的区域中的一种或多种。在一些实施例中，售货机包括2路以上图像采集设备，可以采集异常和非异常的图像且均缓存，还可以缓存存在异常图像的时刻的未异常的图像，从而保证缓存的高风险图像的质量。在一些实施例中，可以采用5路摄像头，分别位于左、右、上、下侧探测货架，以及由货架内向外探测前方。

在步骤102中，通过图像分析算法判断采集的图像是否异常。在一些实施例中，图像异常可以利用图像分析算法确定。在一些实施例中，图像异常可以指的是一个或多个图像采集设备(如摄像头)被遮挡。若确定采集的图像异常，则执行步骤103。

在一些实施例中，可以基于设定的图像异常情况分析出现图像异常的可能性，当可能性超过预定异常阈值时确定图像异常。

在步骤103中，确定当前采集的图像为高风险图像。

在步骤104中，将高风险图像上报售货机控制服务器，以便服务器识别用户风险行为。在一些实施例中，图像上报的操作可以在确定存在高风险图像后即时进行从而提高图像上报效率；在一些实施例中，可以在售货机关门，或售货机持续开门的时间超过预定时长时执行上报过程，降低图像上报的频率，降低通信和数据处理负担。

通过这样的方法，能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现及时反馈图像，提高异常发现的效率，提高售货机的安全性。

本公开的售货机控制方法的另一些实施例的流程图如图2所示。

在步骤201中，售货机在用户的触发下开门。

在步骤202中，对采集的图像进行图像分析，基于售货机本地存储的图像特征和图像分析模型判断采集的图像是否异常。在一些实施例中，图像异常可以为出现一个或多个摄像头被遮挡。若确定采集的图像异常，则执行步骤203。若未发现图像异常，则执行步骤204。

在一些实施例中，图像异常可以包括多种情况，如：根据图像分析确定售货机内出现了异常物体；用户对货物做出异常操作，异常操作可以包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项；或，货物的尺寸、颜色或透明度发生改变等。

在一些实施例中，可以利用售货机本地存储的图像特征和图像分析模型进行特征匹配分析，确定图像是否异常。

在步骤203中，缓存各个图像采集设备采集的图像作为高风险图像，进而执行步骤206。

在步骤204中，基于摄像头采集的图像确定货物变化情况，基于重力探测确定货物变化情况。在一些实施例中，可以根据采集的图像，基于图像算法识别出被操作的唯一货物，基于图像的轨迹识别出是放回还是拿出操作。根据重力探测，基于重量增加或减少判断是货物放回还是拿出。基于重量变化克数确定可能被操作的货物或货物组合确定重量减少量，基于预存的各种货物的重量确定哪个或哪些货物被取出。

在步骤205中，基于图像和基于重力探测确定的货物变化情况是否一致。在一些实施例中，当根据图像轨迹判断出的动作与重力增减判断的动作不一致，或者图像识别的被操作商品与重力变化克数不吻合时，说明该次操作可能出现了商品遮挡、异常置物等高风险行为；当图像识别与重力识别结果一致时，说明这是一次正常的购物流程，不缓存购物图像，将商品加入购物车或从购物车删减。

若变化情况一致，则执行步骤206；若变化情况不一致，则执行步骤203，采集当前时刻的图像作为高风险图像缓存。

在步骤206中，判断售货机是否关门，或是否虽然开门但保持开门状态的时长超过预定第一时长。若触发售货机关门，或开门时长超过预定第一时长，则执行步骤207。

在一些实施例中，可以只在用户关门结算时，执行步骤207。在另一些实施例中，可以在售货机通信闲时执行步骤207。

在步骤207中，判断当前缓存区是否缓存有高风险图像。若缓存有高风险图像，则执行步骤208。

在步骤208中，从缓存的高风险图像中筛选图像帧。在一些实施例中，筛选操作可以包括挑选图像清晰的，未完全被遮挡的数据帧，以及对于极为相似的数据只保留一帧或几帧等。

在步骤209中，将筛选出的高风险图像帧上报售货机控制服务器，并删除缓存区缓存的高风险图像。

通过这样的方法，能够通过图像是否异常，以及图像与重力探测的变化情况判读结果是否一致这两种途径判断是否触发缓存高风险图像并上报，降低了事件漏提取的概率，提高了售货机贩卖货物的安全性；同时，也无需持续存储图像，降低了对售货机存储空间的要求。

相关技术中，基于视频图像的无人售货机相对于基于纯重力、RFID(RadioFrequency Identification，射频识别)的无人售货机，由于其具备更广阔的选品空间，更优质的用户体验，引起越来越多的关注。但是基于重力的无人售货机存在无法监控用户购物流程的痛点，基于图像的无人售货机需要克服真实场景中容易出现的遮挡摄像头、危险品放置、双手盖住商品盗窃等高风险行为，仍然会造成较高的风险及较高的货损。

相关的无人售货机风险控制主要包含视频图像与重力两种常规解决方案：

(一)通过布置监控摄像头持续监控顾客消费过程，当补货人员或无人售货机维护人员发现售货机内出现异常商品或商品丢失时，可以通过查看录像，还原所有用户的完整的购物过程。

基于视频图像的风险控制解决方案无法提供有效的实时预警，只有当无人售货机运维人员发现售货机内的商品异常(有异常物品)或核对时发现商品丢失时，才能够发现风险，同时需要人工回放全部录像。此外，上述方案首先需要保存全部录像，占用无人售货机大量的存储空间，而如果通过网络回传视频到云端，则会占用大量网络带宽，运维成本急剧增加。同时，人工追溯视频会提高人力成本，且降低工作效率。基于纯视觉的行为识别算法目前尚不够准确，因此单独利用图像算法虽然能够节约存储空间，降低人力成本，但容易触发大量虚假报警，同时由于商品偷盗行为、异常置物行为与正常购物行为相似度高，很难利用算法区分，因此容易发生漏报，留下安全隐患。

(2)当无人售货机发现重力异常时，可以提供后台报警，运维人员可根据警情，到现场查看售货机情况，排除隐患。

基于重力的解决方案中，重力传感器能够时刻监控被取走或放回商品的重量，从而实现扣款。然而，当用户取走商品但是放回等重量的无用物品(比如沙子)或危险品时，无人售货机无法及时预警，从而导致高货损与高风险。同时由于不具备图像监控功能，因此当发现无人售货机出现异常商品时，无法进行追溯，无法定位何时、何人人偷盗了商品或置入了危险品。

通过本公开上述实施例中的方法，能够根据图像分析的结果发现异常行为，并在发现异常情况时及时触发上报异常图像，一方面降低了数据传输的负担，成数量级的降低了人工判读、回溯的工作量；另一方面还能够提高异常情况发现的效率，另外，还能够降低漏判的概率，提高售货安全性。

在一些实施例中，为了应对违规用户将从售货机中取出的物品中掺入异常物质(如注射有毒液体)，或置换为其他的外观相同、相似的物品重新放回售货机的情况，本公开的售货机控制方法的又一些实施例的流程图如图3所示。

在步骤301中，根据图像或重力探测确定货物被取出售货机。

在步骤302中，记录被取出的货物的唯一标识。在一些实施例中，每个货物可以配置有唯一标识，如RFID标识。当用户结账关闭售货机后，删除记录的货物的唯一标识。

当根据图像或重力探测确定货物被放回售货机时，触发执行步骤303。

在步骤303中，采集放回的货物的标识，并判断与取出的货物的标识是否匹配。若两者匹配，则执行步骤305；若两者不匹配，则执行步骤304。

在步骤304中，缓存当前时刻，或截取采集的本次售货过程的图像作为高风险图像。

在步骤305中，判断用户是否对货物做出异常操作。异常操作可以包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项。若确定用户做出异常操作，则执行步骤304。若确定用户未做出异常操作，则执行步骤306。

在步骤306中，确定用户正常放回物品，删除标识。

通过这样的方法，能够应对将从售货机中取出的物品中掺入异常物质(如注射有毒液体)，或置换为其他的外观相同、相似的物品重新放回售货机的情况，进一步提高了售货机贩卖物品的安全性。

本公开的售货机控制方法的再一些实施例的流程图如图4所示。

在步骤401中，接收来自用户的开门请求。用户的开门请求中可以包括用户的个人身份信息，如用户对于售货机，或售货机相关的平台的账号信息，或身份证号码信息等。

在步骤402中，将用户身份信息上传平台判断用户是否为限制用户。若确定为限制用户，则执行步骤403；若确定为正常用户，则执行步骤404。

在步骤403中，拒绝触发售货机开门。

在步骤404中，触发售货机开门。

在步骤405中，判断在购物过程中产生了高风险图像。在一些实施例中，可以采用如图2、3所示实施例中的方式确定是否产生高风险图像。在一些实施例中，当确定产生高风险图像时，可以先缓存高风险图像以便后续上报。若确定产生(缓存)了高风险图像，则执行步骤406。

在步骤406中，向服务器上报高风险图像。在一些实施例中，可以先从产生的高风险图像中提取部分帧，只上报提取的图像帧，从而降低数据传输负担。

在步骤407中，服务器发出告警，以便工作人员人工识别，或采用进一步的图像识别方法判读高风险图像。

在步骤408中，根据高风险图像确定用户是否执行违规操作。若确定用户执行了违规操作，则执行步骤409；若确定用户未执行违规操作，则认为当前出现了误判，执行步骤412。

在步骤409中，判断该用户违规操作统计值是否达到了预定门限。若已达到预定门限，则执行步骤411；若未达到预定门限，则执行步骤410。

在步骤410中，增加记录的用户违规操作统计值。在一些实施例中，还可以根据用户当前违规操作的种类确定增加的统计值的量，如普通违规操作加1，恶意违规操纵加10等。

在步骤411中，修改用户权限为限制用户。

在步骤412中，利用高风险图像更新图像分析训练数据集。

在步骤413中，根据更新后的图像分析训练数据集更新图像特征和图像分析模型，并发送给提供给售货机更新售货机本地的图像特征和图像分析模型。在一些实施例中，考虑到售货机的存储空间和数据处理负担，可以只发送给提供了该高风险图像的售货机，在避免售货机数据量过多的同时，也能够针对售货机所处的环境、所经历的情况实现动态更新。

通过这样的方法，能够根据用户违规操作情况动态改变用户的权限，预防用户进一步违规操作，提高安全性；还能够动态更新图像分析的数据基础，图像提取特征和模型，提高售货机图像分析的准确性，降低错误判断的概率。由于在售货机使用过程中，能够通过有效的在线自反馈机制进行在线的难例挖掘，寻找不容易被准确识别的图像并回传，使售货机实现模型的自我迭代与优化，从而快速适应部署新环境、新商品的图像识别需求，节省大量训练图像的图像采集成本，同时图像识别准确度的提升也会进一步提高用户体验、减少货物损失。

本公开的售货机控制装置的一些实施例的示意图如图5所示。

高风险图像确定单元501能够在售货机开门的状态下，判断采集的图像是否异常，并在确定异常的情况下确定采集的图像为高风险图像。在一些实施例中，售货机包括2路以上图像采集设备，可以采集异常和非异常的图像且均缓存，还可以缓存存在异常图像的时刻的未异常的图像，从而保证缓存的高风险图像的质量。在一些实施例中，图像异常可以利用基于售货机本地的图像分析模型和图像特征，次用图像分析算法确定。在一些实施例中，图像异常可以指的是一个或多个图像采集设备(如摄像头)被遮挡。

上报单元502能够将高风险图像上报售货机控制服务器，以便服务器识别用户风险行为。在一些实施例中，可以在售货机关门，或售货机持续开门的时间超过预定时长时执行上报过程，降低图像上报的频率，降低通信和数据处理负担。

这样的售货机控制装置能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

在一些实施例中，图像异常还可以包括多种情况：如根据图像分析确定售货机内出现了异常物体；用户对货物做出异常操作，异常操作包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项；或，货物的尺寸、颜色或透明度发生改变，从而降低漏发现违规操作的可能性，进一步提高了安全性。

在一些实施例中，上报单元502可以先从缓存的高风险图像中筛选部分高风险图像帧，再将筛选出的高风险图像帧上报售货机控制服务器，并删除缓存区缓存的高风险图像。在一些实施例中，可以删除部分像素低的帧，或从极为相似的帧中选择几帧。这样的售货机控制装置能够降低需要上报给服务器的数据量，一方面降低数据传输负担，另一方面提高数据传输效率，便于服务器侧对于违规操作的迅速反应。

在一些实施例中，如图5所示，售货机控制装置还可以包括重力处理单元503和图像处理单元504。重力处理单元503能够基于重力探测确定货物变化情况，在一些实施例中，可以根据重力探测确定重量减少量，基于预存的各种货物的重量确定哪个或哪些货物被取出。图像处理单元504能够基于摄像头采集的图像确定货物变化情况，在一些实施例中，可以根据采集的图像确定哪个或哪些货物被取出。

高风险图像确定单元501能够在基于图像和基于重力探测确定的货物变化情况不一致的情况下缓存高风险图像，以便上报单元上报。

这样的售货机控制装置能够通过图像是否异常，以及图像与重力探测的变化情况判读结果是否一致这两种途径判断是否触发缓存高风险图像并上报，降低了事件漏提取的概率，提高了售货机贩卖货物的安全性。

在一些实施例中，售货机控制装置还可以包括开门控制单元505，能够在收到用户触发开门操作时，判断用户是否为限制用户。若确定用户为限制用户，则拒绝触发售货机开门；若用户为正常状态的用户，则执行开门操作。

这样的售货机控制装置能够利用用户信用体系确定是否向用户提供服务，进一步提高了安全性。

本公开售货机控制装置的一些实施例的结构示意图如图6所示。售货机控制装置包括存储器601和处理器602。其中：存储器601可以是磁盘、闪存或其它任何非易失性存储介质。存储器用于存储上文中售货机控制方法的对应实施例中的指令。处理器602耦接至存储器601，可以作为一个或多个集成电路来实施，例如微处理器或微控制器。该处理器602用于执行存储器中存储的指令，能够实现及时反馈图像，提高异常发现的效率，提高售货机的安全性。

在另一些实施例中，一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现售货机控制方法对应实施例中的方法的步骤。本领域内的技术人员应明白，本公开的实施例可提供为方法、装置、或计算机程序产品。因此，本公开可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本公开可采用在一个或多个其中包含有计算机可用程序代码的计算机可用非瞬时性存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本公开的售货机控制系统的一些实施例的示意图如图7所示。售货机控制装置71可以为上文中提到的任意一种售货机控制装置。售货机控制服务器70能够在收到高风险图像的情况下，以便判读高风险图像。在一些实施例中，为了提高风险评估的及时性，可以发出告警。

这样的售货机控制系统中，售货机控制装置能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，以便及时确定违规操作，从而实现通过图像的及时反馈，提高异常发现的效率，提高售货机的安全性；能够根据用户违规操作情况动态改变用户的权限，预防用户进一步违规操作，提高安全性。

在一些实施例中，若根据高风险图像判读后确定用户执行违规操作，且违规操作统计值达到预定门限，则修改用户权限为限制用户，从而使该用户再次使用售货机时，售货机拒绝为用户开门，从而实现用户信用的统计和有效应用，提高售货机售货的安全性。

在一些实施例中，若售货机控制服务器70根据高风险图像判读后确定用户未执行违规操作，则可以利用高风险图像更新图像分析训练数据集，根据更新后的图像分析训练数据集更新图像特征和图像分析模型，并发送给售货机，售货机控制装置更新本地的图像特征和图像分析模型，实现自身图像分析功能的优化。

这样的售货机控制系统能够动态更新图像分析的数据基础，图像提取特征和模型，提高售货机图像分析的准确性，降低错误判断的概率。

本公开的售货机80的一些实施例的示意图如图8所示。储物装置81能够承载售卖的货物；重力探测装置82能够采集货架上的重量变化情况；图像采集装置83能够采集售货机内部，以及用户操作时所处区域的图像。在一些实施例中，重力探测装置和图像采集装置可以包括多个。售货机控制装置84可以为上文中提到的任意一种售货机控制装置。

这样的售货机能够在图像采集异常的情况下及时做出反应，将采集的图像上传给服务器供服务器解析，从而实现图像的及时反馈，提高异常发现的效率，提高售货机的安全性。

最后应当说明的是：以上实施例仅用以说明本公开的技术方案而非对其限制；尽管参照较佳实施例对本公开进行了详细的说明，所属领域的普通技术人员应当理解：依然可以对本公开的具体实施方式进行修改或者对部分技术特征进行等同替换；而不脱离本公开技术方案的精神，其均应涵盖在本公开请求保护的技术方案范围当中。

Claims (11)

1.一种售货机控制方法，包括：

在售货机开门状态下：

采集售货机有效范围内的图像；

对采集的图像进行风险分析；

若确定采集的图像异常，则确定采集的图像为高风险图像；

若未发现图像异常，则基于采集的图像确定货物变化情况；基于重力探测确定货物变化情况；在基于图像和基于重力探测确定的货物变化情况不一致的情况下，执行确定采集的图像为高风险图像的操作；

将高风险图像上报售货机控制服务器，以便识别用户风险行为；

售货机控制服务器在收到所述高风险图像的情况下，识别所述高风险图像；

若通过识别所述高风险图像确定用户执行违规操作，则修改用户违规操作统计值；

在所述用户的违规操作统计值达到预定门限的情况下，将用户标记为限制用户。

2.根据权利要求1所述的方法，其中，所述将高风险图像上报售货机控制服务器包括：

对所述高风险图像进行筛选，挑选出部分高风险图像；

将挑选出的高风险图像上报所述售货机控制服务器。

3.根据权利要求1或2所述的方法，其中，所述图像异常包括以下一项或多项：

根据图像分析确定一个或多个图像采集设备被遮挡；

根据图像分析确定售货机内出现了异常物体；

用户对货物做出异常操作，所述异常操作包括破坏货物外包装、向货物内部加入物质、从货物中取物质或用户持货物离开摄像头探测区域后又返回中的一项或多项；或，

货物的尺寸、颜色或透明度发生改变。

4.根据权利要求1或2所述的方法，其中，所述将高风险图像上报售货机控制服务器包括：

在售货机关门后或保持开门状态的时长超过预定第一时长的情况下，判断是否存在所述高风险图像；

若存在所述高风险图像，则上报所述高风险图像。

5.根据权利要求1所述的方法，还包括：

在根据图像或重力探测确定货物被取出售货机的情况下，记录被取出的货物的唯一标识，其中，所述售货机中的每个货物具备唯一标识；

在根据图像或重力探测确定货物被放回售货机的情况下，确定放回的货物的标识与取出的货物的标识是否匹配；

若不匹配，则执行确定采集的图像为高风险图像的操作；

若匹配，则删除记录的所述货物的标识。

6.根据权利要求1所述的方法，还包括：

接收来自用户的开门请求；

若用户账户为限制用户，则拒绝触发售货机开门。

7.根据权利要求1所述的方法，其中，对采集的图像进行风险分析包括：

基于售货机本地的图像特征和图像分析模型对采集的图像进行风险分析。

8.根据权利要求7所述的方法，还包括：

若所述售货机控制服务器根据所述高风险图像确定用户未执行违规操作，则利用所述高风险图像更新图像分析训练数据集；

根据更新后的图像分析训练数据集更新图像特征和图像分析模型，并发送给售货机以便更新所述售货机的图像特征和图像分析模型。

9.一种售货机控制系统，包括：

售货机控制装置，包括：

重力处理单元，被配置为基于重力探测确定货物变化情况；

图像处理单元，被配置为基于采集的图像确定货物变化情况；

高风险图像确定单元，被配置为在售货机开门状态下对采集的售货机有效范围内的图像进行风险分析，若确定采集的图像异常，则确定采集的图像为高风险图像；若未发现图像异常，则在基于图像和基于重力探测确定的货物变化情况不一致的情况下，执行确定采集的图像为高风险图像的操作；上报单元，被配置为将高风险图像上报售货机控制服务器，以便识别用户风险行为；

和

售货机控制服务器，被配置为：在收到所述高风险图像的情况下，识别所述高风险图像；若通过识别所述高风险图像确定用户执行违规操作，则修改用户违规操作统计值；在所述用户的违规操作统计值达到预定门限的情况下，将用户标记为限制用户。

10.一种售货机控制系统，包括：

存储器；以及

耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器的指令执行如权利要求1至8任一项所述的方法。

11.一种计算机可读存储介质，其上存储有计算机程序指令，该指令被处理器执行时实现权利要求1至8任意一项所述的方法的步骤。

Images