CN115935222A - 智能货柜的物品核对方法及系统 - Google Patents

Abstract

本说明书提供的智能货柜的物品核对方法及系统，服务器通过对目标图像进行图像识别，确定目标图像中的物品的类别以及物品在目标图像中所在的位置；目标用户(即补货人员)通过显示装置选择要核对的目标类别；客户端确定目标类别对应的目标物品在目标图像中的位置，对每个目标物品依次进行编号，并在显示装置中显示。补货人员可以根据显示装置中显示的目标物品的编号，一目了然知道目标物品的数量和摆放位置，直观、快速地对目标物品进行核对，以确定所有的目标物品都被正确识别，大大提高补理货的速度。

Description

智能货柜的物品核对方法及系统

技术领域

本说明书涉及无人零售领域，尤其涉及一种智能货柜的物品核对方法及系统。

背景技术

目前的智能零售无人货柜主要采用视觉识别方案，依靠摄像头获取图像，通过图像识别技术进行商品识别，判断用户购买的商品。当无人货柜中的商品出现短缺时，补货人员需要向无人货柜添加商品，以保证货源充足。在补货人员向无人货柜添加商品后，需要逐层核对无人货柜的服务器是否可以正确识别出所有商品，以便于后续售卖过程中能够通过无人货柜采集的图像正确识别用户购买的商品。当补货人员发现漏识别或者识别错误时需要找出漏识别或者识别有错误的商品，重新开门进行调整。现有技术中，通过在图像中将所有商品框出来进行商品名称的标记，来帮助补货人员核对查找出识别错误的商品。但这种方法的图像画面杂乱，商品之间的标记交错，补货人员眼花缭乱找出识别有误或者漏识别的商品较困难、耗时较长，影响补货速度。

因此，需要提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。

发明内容

本说明书提供一种效率更高、视觉效果好的智能货柜的物品核对方法及系统。

第一方面，本说明书提供一种智能货柜的物品核对方法，应用于所述智能货柜的客户端，包括：获取目标图像并发送给服务器，所述目标图像中包括多个物品；接收所述服务器发送的对所述目标图像的图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；控制显示装置显示所述目标图像以及类别列表，所述类别列表包括所述多个物品对应的至少一个类别；以及基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记。

在一些实施例中，所述基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记，包括：接收所述显示装置发送的所述目标用户对目标类别的选择，所述目标类别包括所述类别列表中的一个；在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，生成目标标记图像；以及控制所述显示装置显示所述目标标记图像。

在一些实施例中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，包括：基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中对应的位置；基于所述每个目标物品在所述目标图像中对应的位置以及预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。

在一些实施例中，所述排列规则包括：基于坐标序列的排列规则。

在一些实施例中，所述在所述目标图像中对所述至少一个目标物品依次进行编号，包括：基于所述每个目标物品在所述目标图像中对应的位置以及所述排列规则，确定所述每个目标物品的编号；以及在所述目标图像中，对所述每个目标物品在其所在的位置显示对应的编号。

在一些实施例中，所述目标用户包括通过所述服务器进行身份验证的用户。

在一些实施例中，在所述获取目标图像并发送给服务器之前，还包括：获取所述智能货柜的关门信号，其中，所述智能货柜的柜门处设置有感应传感器，与所述客户端通信连接。

在一些实施例中，所述智能货柜的物品核对方法，还包括：接收所述显示装置发送的确认核对结果的指令，并发送给所述服务器。

第二方面，本说明书提供一种智能货柜的物品核对系统，包括所述智能货柜的客户端，包括至少一个存储介质以及至少一个处理器，所述至少一个存储介质存储有至少一个指令集用于智能货柜的物品核对；所述至少一个处理器同所述至少一个存储介质通信连接，其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施本说明书第一方面所述的智能货柜的物品核对方法。

第三方面，本说明书还提供一种智能货柜的物品核对方法，应用于所述智能货柜的服务器，包括：接收所述智能货柜的客户端发送的目标图像，所述目标图像中包括多个物品；对所述目标图像进行图像识别生成图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；以及将所述图像识别结果发送给所述客户端，其中，所述客户端控制显示装置显示所述目标图像以及类别列表，并基于目标用户对所述类别列表的选择，控制所述显示装置在所述目标图像中对所述目标用户选择的类别进行标记，所述类别列表包括所述多个物品对应的至少一个类别。

在一些实施例中，所述智能货柜的物品核对方法，还包括：接收所述客户端发送的确认核对结果的指令。

第二方面，本说明书提供一种智能货柜的物品核对系统，包括所述智能货柜的服务器，包括包括至少一个存储介质以及至少一个处理器，所述至少一个存储介质存储有至少一个指令集用于智能货柜的物品核对；所述至少一个处理器同所述至少一个存储介质通信连接，其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施本说明书第三方面所述的智能货柜的物品核对方法。

由以上技术方案可知，本说明书提供的智能货柜的物品核对方法及系统中，服务器通过对目标图像进行图像识别，生成图像识别结果，并发送给客户端，从而确定目标图像中的物品的类别以及物品在目标图像中所在的位置；目标用户(即补货人员)可以通过客户端的显示装置选择要核对的货架层对应的目标图像以及要核对的目标图像中的目标类别；客户端可以根据目标用户选择的目标类别以及服务器发送的图像识别结果，确定目标类别对应的目标物品在目标图像中的位置，并在目标图像中对每个目标物品依次进行编号，并在显示装置中显示对目标物品的编号。补货人员可以根据显示装置中显示的目标物品的编号，一目了然知道目标物品的数量以及摆放位置，直观、快速地对目标物品的数量以及是否符合摆放规则进行核对，以确定目标图像中所有的目标物品都被标记了编号，不存在漏识别或识别错误的情况。所述方法和系统可以通过图像识别标记物品的类别以及位置，以对不同类别的物品分别进行核对，核对时可以直接在物品所在的位置显示物品的编号，补货人员可以、有无识别错误，大大提高补理货的速度。

本说明书提供的智能货柜的物品核对方法及系统的其他功能将在以下说明中部分列出。根据描述，以下数字和示例介绍的内容将对那些本领域的普通技术人员显而易见。本说明书提供的智能货柜的物品核对方法及系统的创造性方面可以通过实践或使用下面详细示例中所述的方法、装置和组合得到充分解释。

附图说明

为了更清楚地说明本说明书实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本说明书的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本说明书的实施例提供的一种智能货柜的示意图；

图2示出了根据本说明书的实施例提供的一种托盘上的物品的陈列规则的示意图；

图3示出了根据本说明书的实施例提供的一种计算设备的设备示意图；

图4示出了根据本说明书的实施例提供的一种智能货柜的物品核对方法的流程图；

图5示出了根据本说明书的实施例提供的一种目标图像以及类别列表的示意图；

图6示出了根据本说明书的实施例提供的一种生成目标标记图像的流程图；

图7示出了根据本说明书的实施例提供的一种目标标记图像的示意图；以及

图8示出了根据本说明书的实施例提供的另一种目标标记图像的示意图。

具体实施方式

以下描述提供了本说明书的特定应用场景和要求，目的是使本领域技术人员能够制造和使用本说明书中的内容。对于本领域技术人员来说，对所公开的实施例的各种局部修改是显而易见的，并且在不脱离本说明书的精神和范围的情况下，可以将这里定义的一般原理应用于其他实施例和应用。因此，本说明书不限于所示的实施例，而是与权利要求一致的最宽范围。

这里使用的术语仅用于描述特定示例实施例的目的，而不是限制性的。比如，除非上下文另有明确说明，这里所使用的，单数形式“一”，“一个”和“该”也可以包括复数形式。当在本说明书中使用时，术语“包括”、“包含”和/或“含有”意思是指所关联的整数，步骤、操作、元素和/或组件存在，但不排除一个或多个其他特征、整数、步骤、操作、元素、组件和/或组的存在或在该系统/方法中可以添加其他特征、整数、步骤、操作、元素、组件和/或组。

考虑到以下描述，本说明书的这些特征和其他特征、以及结构的相关元件的操作和功能、以及部件的组合和制造的经济性可以得到明显提高。参考附图，所有这些形成本说明书的一部分。然而，应该清楚地理解，附图仅用于说明和描述的目的，并不旨在限制本说明书的范围。还应理解，附图未按比例绘制。

本说明书中使用的流程图示出了根据本说明书中的一些实施例的系统实现的操作。应该清楚地理解，流程图的操作可以不按顺序实现。相反，操作可以以反转顺序或同时实现。此外，可以向流程图添加一个或多个其他操作。可以从流程图中移除一个或多个操作。

智慧零售就是运用互联网、物联网技术，感知消费习惯，预测消费趋势，引导生产制造，为消费者提供多样化、个性化的产品和服务。智能货柜是智能零售最典型的应用。所述智能货柜是指依靠摄像头获取图像并利用视觉等技术完成商品自动识别并进行商品自动交易结算的智能货柜。顾客通过人脸识别或者扫码开门，从所述智能货柜中取出商品，关门自动结算，完成整个交易过程，实现真正意义上的智能交易支付，达到了先拿商品后付款的良好用户体验。

目前在智能货柜中，主要通过标定的图像数据对图像识别模型进行训练，采用训练好的图像识别模型对智能货柜中的摄像头采集的图像进行识别，确定物品的类别和数量。如果智能货柜中的物品随意摆放，可能导致智能货柜中物品之间出现遮挡，从而导致图像识别模型识别错误或漏识别。在一些场景下，受到光线的影响也可能导致图像识别模型识别错误或漏识别。若图像识别模型存在识别错误或漏识别的情况，可能导致后续售卖过程中无法通过图像识别模型对智能货柜采集的图像正确识别，从而无法确定用户购买的物品，降低顾客体验感。

所以在补货人员补货时，需要对物品进行核对，以确保图像识别模型可以识别出图像中的所有物品，不存在识别错误或漏识别的情况。具体地，补货人员需要对摄像头采集的图像和图像识别模型对所述图像的识别结果进行核对，以确保图像识别模型能够完整准确地识别出所述图像中的所有物品。当补货人员发现图像识别模型存在漏识别或识别错误时，需要找出漏识别或识别错误的物品，重新对物品的位置进行调整，直至所有的物品都被正确识别。因此，需要一种物品核对方法和系统来帮助补货人员快速核对物品是否被图像识别模型正确识别。

所述视觉货柜上通常可以搭载显示装置。顾客可以通过显示装置浏览摄像头拍摄的图像，以进行商品选择。补货员在进行补货上新时，可以通过显示装置浏览摄像头拍摄的图像，以对物品进行核对，查看物品摆放是否符合规范。

图1示出了根据本说明书的实施例提供的一种智能货柜001的示意图。智能货柜001可以用于陈列和存储物品。所述物品可以是零星的可以单独存在的物体。比如，一瓶饮料、一包零食，等等。如图1所示，智能货柜001可以包括至少一个承载装置400、物品核对系统200以及显示装置800。在一些实施例中，智能货柜001还可以包括机架600。在一些实施例中，智能货柜001还可以包括感应传感器900。

机架600可以是智能货柜001的支撑基座。

至少一个承载装置400可以安装在机架600上，用于承载所述物品。图1示出了5个承载装置400。需要说明的是，图1只是示例性说明，智能货柜001上的承载装置400的数量可以是任意数。每个承载装置400可以包括托盘460和视觉传感器480。

托盘460可以安装在机架600上。托盘460可以用于承载物品。所述物品在托盘460上可以按照预设的陈列规则陈列。比如，托盘460可以被分割为多列，每一列陈列同一种物品，不同列可以陈列不同种类的物品，也可以陈列同一种物品。为了帮助提高图像识别模型的识别准确率，托盘460上的物品应满足预设的陈列规则。比如，从视觉传感器480的角度来说，托盘460上的物品之间不应该相互遮挡。

图2示出了根据本说明书的实施例提供的一种托盘460上的物品的陈列规则的示意图。如图2所示，托盘460被划分为多个区域，每个区域陈列同一种类别的物品。为了方便展示，图2所示的托盘460中包括7列，每一列上陈列有不同的物品。为了方便展示，我们将这7种不同类别的物品从左至右分别标记为物品1、物品2、物品3、物品4、物品5、物品6和物品7。

视觉传感器480可以位于托盘460上方，用于拍摄当前承载装置400上的托盘460上的所述物品的图像，以监测当前托盘460上的所述物品的变化。智能货柜001可以根据视觉传感器480采集的所述图像识别出当前时刻用户从托盘460上取走的物品。视觉传感器480可以安装在托盘460的预设位置和预设角度。视觉检测装置800可以是普通摄像头，也可以使用一个广角的普通摄像头，例如拍摄角度是160度的广角摄像头，或者可以使用鱼眼摄像头。

物品核对系统200可以包括客户端220和服务器240。客户端220可以存储有执行本说明书描述的物品核对方法的数据或指令，并可以执行或用于执行所述数据和/或指令。客户端220可以包括具有数据信息处理功能的硬件设备和驱动该硬件设备工作所需必要的程序。当然，客户端220也可以仅为具有数据处理能力的硬件设备，或者，仅为运行在硬件设备中的程序。客户端220运行时可以与每个承载装置400中的视觉传感器480通信连接，接收视觉传感器480采集的托盘460上的物品的图像，并基于本说明书描述的物品核对方法帮助目标用户002对托盘460上的物品进行核对。客户端220运行时还可以与显示装置800通信连接，并基于本说明书描述的物品核对方法控制显示装置800显示核对信息，帮助目标用户002对托盘460上的物品进行核对。所述目标用户002可以是拥有物品核对权限的人员。具体地，目标用户002可以是通过智能货柜001的客户端220和/或服务器240进行身份验证的用户，比如补货人员，或商家，等等。客户端220运行时还可以与感应传感器900通信连接，接收感应传感器900的感应数据，并基于本说明书描述的物品核对方法帮助目标用户002对托盘460上的物品进行核对。在一些实施例中，客户端220可以安装在智能货架001上，比如，安装在智能货架001的机架600上，或机架600的内部。在一些实施例中，客户端220可以安装在显示装置800上或集成在显示装置800中。

所述通信连接是指能够直接地或者间接地接收信息的任何形式的连接。在一些实施例中，客户端220可以同视觉传感器480、显示装置800以及感应传感器900通过无线通信连接来彼此传递数据；在一些实施例中，客户端220也可以同视觉传感器480、显示装置800以及感应传感器900通过电线直接连接来彼此传递数据；在一些实施例中，客户端220也可以通过电线同其他电路直接连接来建立同视觉传感器480、显示装置800以及感应传感器900的间接连接，从而实现彼此传递数据。所述无线通信连接可以是网络连接，蓝牙连接，NFC连接，等等。

在一些实施例中，客户端220可以包括移动设备、平板电脑、笔记本电脑、机动车辆的内置设备或类似内容，或其任意组合。在一些实施例中，所述移动设备可包括智能家居设备、智能移动设备或类似设备，或其任意组合。在一些实施例中，所述智能家居装置可包括智能电视、台式电脑等，或任意组合。在一些实施例中，所述智能移动设备可包括智能手机、个人数字辅助、游戏设备、导航设备等，或其任意组合。在一些实施例中，所述机动车中的内置装置可包括车载计算机、车载电视等。在一些实施例中，客户端220可以是具有定位技术的设备，用于定位客户端220的位置。

服务器240可以存储有执行本说明书描述的物品核对方法的数据或指令，并可以执行或用于执行所述数据和/或指令。服务器240可以包括具有数据信息处理功能的硬件设备和驱动该硬件设备工作所需必要的程序。当然，服务器240也可以仅为具有数据处理能力的硬件设备，或者，仅为运行在硬件设备中的程序。在一些实施例中，服务器240可以包括移动设备、平板电脑、笔记本电脑、机动车辆的内置设备或类似内容，或其任意组合。

在一些实施例中，所述移动设备可包括智能家居设备、智能移动设备或类似设备，或其任意组合。在一些实施例中，所述智能家居装置可包括智能电视、台式电脑等，或任意组合。在一些实施例中，所述智能移动设备可包括智能手机、个人数字辅助、游戏设备、导航设备等，或其任意组合。

在一些实施例中，所述机动车中的内置装置可包括车载计算机、车载电视等。在一些实施例中，服务器240可以是具有定位技术的设备，用于定位服务器240的位置。

服务器240可以通过网络100与客户端220通信连接。网络100可以促进信息和/或数据的交换。如图1所示，客户端220与服务器240可以同网络100连接，并且通过网络100互相传输信息和/或数据。例如，服务器240可以通过网络100从客户端220获取图像数据。在一些实施例中，网络100可以是任何类型的有线或无线网络，也可以是其组合。比如，网络100可以包括电缆网络，有线网络、光纤网络、电信通信网络、内联网、互联网、局域网(LAN)、广域网(WAN)、无线局域网(WLAN)、大都市市区网(MAN)、广域网(WAN)、公用电话交换网(PSTN)、蓝牙网络、ZigBee网络、近场通信(NFC)网络或类似网络。在一些实施例中，网络100可以包括一个或多个网络接入点。例如，有线或无线网络接入点，如基站和/或互联网交换点，通过该接入点，客户端220与服务器240可以连接到网络100以交换数据和/或信息。

显示装置800运行时可以与客户端220通信连接，用于显示物品核对信息。显示装置800可以用于与所述目标用户002进行人机交互。在一些实施例中，所述人机交互功能包括但不限于：网络浏览、文字处理、状态提示、操作输入等。在一些实施例中，显示装置800可以包括显示屏。所述显示屏可以是触摸屏式的液晶显示器(LCD)。所述显示屏具有图像用户界面(GUI)，可使得所述目标用户002通过触摸所述图像用户界面(GUI)和/或通过手势与客户端220进行人机交互。在一些实施例中，显示装置800还可以包括语音播放装置，比如扬声器。所述扬声器可以是任意形式的可以传递音频信号的装置。所述目标用户002可以通过所述语音播放装置接收语音信息，从而与客户端220进行人机交互。在一些实施例中，显示装置800还可以包括语音采集装置，比如麦克风。所述目标用户002可以通过所述语音采集装置向客户端220输入语音指示，等等。在一些实施例中，显示装置800可以包括所述显示屏、所述语音播放装置以及所述语音采集装置中的一种或多种。在一些实施例中，用于执行上述人机交互功能的可执行指令被存储在一个或多个处理器可执行的计算机程序产品或可读存储介质中。为了方便展示，下面的描述中我们将以显示装置800为所述显示屏为例进行描述。

感应传感器900可以设置在智能货柜001的柜门处，用户感应所述柜门的状态，比如，打开状态还是闭合状态。感应传感器900可以与客户端220通信连接，并将感应数据发送给客户端220。客户端220可以根据所述感应数据判断当前时刻柜门是打开状态还是闭合状态。感应传感器900可以是霍尔传感器，也可以是红外传感器，还可以是超声波传感器、雷达传感器，等等。

图3示出了根据本说明书的实施例提供的一种计算设备300的硬件示意图。在一些实施例中，计算设备300所示的结构适用于客户端220。在一些实施例中，计算设备300所示的结构也适用于服务器240。在一些实施例中，客户端220执行所述物品核对方法的数据或指令可以在计算设备300上实现。在一些实施例中，服务器240执行所述物品核对方法的数据或指令可以在计算设备300上实现。所述物品核对方法在本说明书中的其他部分介绍。

如图3所示，计算设备300可以包括至少一个存储介质330和至少一个处理器320。在一些实施例中，计算设备300还可以包括通信端口350和内部通信总线310。在一些实施例中，计算设备300还可以包括I/O组件360。

内部通信总线310可以连接不同的系统组件，实现各组件间的数据通信，包括存储介质330、处理器320、通信端口350以及I/O组件360。例如，处理器320可以通过内部通信总线310将数据发送到存储介质330或I/O组件360等其它硬件中。在一些实施例中，内部通信总线310可以为工业标准(ISA)总线、扩展工业标准(EISA)总线、视频电子标准(VESA)总线、外部部件互联标准(PCI)总线等。

I/O组件360可以用于输入或输出信号、数据或信息。I/O组件360支持计算设备300和其他组件之间的输入/输出。在一些实施例中，I/O组件360可以包括输入装置和输出装置。示例性输入装置可以包括摄像头、键盘、鼠标、显示屏和麦克风等，或其任意组合。示例性输出装置可以包括显示装置、语音播放装置(比如，扬声器等等)、打印机、投影仪等或其任意组合。示例性显示装置可以包括液晶显示器(LCD)、基于发光二极管(LED)的显示器、平板显示器、曲面显示器、电视设备、阴极射线管(CRT)等或其任意组合。

通信端口350可以连接到网络以便计算设备300同外界的数据通信。所述连接可以是有线连接、无线连接或两者的组合。有线连接可以包括电缆、光缆或电话线等或其任意组合。无线连接可以包括蓝牙、Wi-Fi、WiMax、WLAN、ZigBee、移动网络(例如，3G、4G或5G等)等或其任意组合。在一些实施例中，通信端口350可以是标准化端口，如RS232、RS485等。

在一些实施例中，通信端口350可以是专门设计的端口。

存储介质330可以包括数据存储装置。所述数据存储装置可以是非暂时性存储介质，也可以是暂时性存储介质。比如，所述数据存储装置可以包括磁盘332、只读存储介质(ROM)334或随机存取存储介质(RAM)336中的一种或多种。存储介质330还包括存储在所述数据存储装置中的至少一个指令集。所述至少一个指令集用于所述物品核对。所述指令是计算机程序代码，所述计算机程序代码可以包括执行本说明书提供的物品核对方法的程序、例程、对象、组件、数据结构、过程、模块等等。

至少一个处理器320可以同至少一个存储介质330以及通信端口350通过内部通信总线310通信连接。至少一个处理器320用以执行上述至少一个指令集。当计算设备300运行时，至少一个处理器320读取所述至少一个指令集，并且根据所述至少一个指令集的指示执行本说明书提供的物品核对方法。当所述物品核对系统200运行时，至少一个处理器320读取所述至少一个指令集，并且根据所述至少一个指令集的指示执行本说明书提供的物品核对方法。处理器320可以执行物品核对方法包含的所有步骤。处理器320可以是一个或多个处理器的形式，在一些实施例中，处理器320可以包括一个或多个硬件处理器，例如微控制器，微处理器，精简指令集计算机(RISC)，专用集成电路(ASIC)，特定于应用的指令集处理器(ASIP)，中央处理单元(CPU)，图形处理单元(GPU)，物理处理单元(PPU)，微控制器单元，数字信号处理器(DSP)，现场可编程门阵列(FPGA)，高级RISC机器(ARM)，可编程逻辑器件(PLD)，能够执行一个或多个功能的任何电路或处理器等，或其任何组合。仅仅为了说明问题，在本说明书中计算设备300中仅描述了一个处理器320。然而，应当注意，本说明书中计算设备300还可以包括多个处理器，因此，本说明书中披露的操作和/或方法步骤可以如本说明书所述的由一个处理器执行，也可以由多个处理器联合执行。例如，如果在本说明书中计算设备300的处理器320执行步骤A和步骤B，则应该理解，步骤A和步骤B也可以由两个不同处理器320联合或分开执行(例如，第一处理器执行步骤A，第二处理器执行步骤B，或者第一和第二处理器共同执行步骤A和B)。

需要说明的是，本说明书提供的物品核对方法P100的全部步骤可以全部在客户端220上执行，也可以全部在服务器240上执行，还可以一部分在客户端220上执行，一部分在服务器240上执行。为了方便展示，下面的描述中，我们将以物品核对方法P100一部分在客户端220上执行，一部分在服务器240上执行为例进行描述。

图4示出了根据本说明书的实施例提供的一种智能货柜001的物品核对方法P100的流程图。如前所述，客户端220和服务器240可以执行本说明书所述的物品核对方法P100。具体地，当客户端220和服务器240在计算设备300上运行时，处理器320可以读取存储在其本地存储介质中的指令集，然后根据所述指令集的规定，执行本说明书所述的物品核对方法P100。

在一些实施例中，所述方法P100可以包括：

S110：客户端220获取智能货柜001的关门信号。

在进行所述物品核对之前，需启动智能货柜001的所述物品核对模式。在一些实施例中，客户端220可以在一些指令下进入所述物品核对模式，比如，客户端220可以在目标用户002的操作指令下进入所述物品核对模式。如前所述，显示装置800可以包括人机交互界面。目标用户002可以通过所述人机交互界面触发所述物品核对模式。比如，所述人机交互界面可以包括设置按钮，目标用户002可以在设置按钮中触发所述物品核对模式。再比如，显示装置800上可以包括快捷触发按钮，目标用户002可以通过所述快捷触发按钮触发所述物品核对模式，比如，长按所述快捷触发按钮，或双击所述快捷触发按钮，等等。客户端220可以通过显示装置800与客户端220的所述通信连接，获取目标用户002对所述物品核对模式的触发指令。

在一些实施例中，在启动所述物品核对模式后，客户端220可以基于所述关门信号运行所述物品核对模式。如前所述，智能货柜002的柜门处设置有感应传感器900，以监测柜门的状态。客户端200在启动所述物品核对模式后，可以根据感应传感器900的感应数据确定柜门的状态。当客户端220检测到柜门处于关闭状态时，可以运行所述物品核对模式，对智能货柜001中的所述物品进行核对。当客户端220检测到柜门处于打开状态时，可以暂停所述物品核对模式，停止对智能货柜001中的所述物品进行核对，直至柜门再次处于关闭状态。

在一些实施例中，客户端220也可以在目标用户002的触发下运行物品核对模式。比如，所述补货人员在放置好物品后，可以通过显示装置800的人机交互界面向客户端220发送运行所述物品核对模式的指令，客户端220开始对智能货柜001中的所述物品进行核对。

如前所述，在进行物品核对时一般由有权限的目标用户002进行操作，比如补货人员，商家，等等。因此，所述物品核对模式需要有权限的目标用户002进行启动，防止没有权限的用户误操作，导致物品数据出错。在一些实施例中，客户端220在目标用户002的触发指令下启动所述物品核对模式。客户端220可以对目标用户002进行身份验证，以确保目标用户002是有权限的用户。具体地，客户端220可以接收显示装置800发送的目标用户002对所述物品核对模式的触发指令，并对目标用户002进行身份验证；客户端220在确定目标用户002的身份验证通过，启动所述物品核对模式。

客户端220在接收到所述物品核对模式的触发指令后，需要对目标用户002进行身份验证，以确保目标用户002是否有访问权限。只有在目标用户002具有访问权限时，才会进入所述物品核对模式。具体地，客户端220对目标用户002的身份验证可以是任意形式的身份验证，比如，生物特征验证、密码验证、验证信息验证，等等。所述生物特征验证可以是采集目标用户002的生物特征，并进行识别，以确定目标用户002的身份。所述密码验证可以是要求目标用户002输入访问密码或访问密令，等等。所述验证信息验证可以是向目标用户002发送验证信息，并接收目标用户002响应于所述验证信息的应答信息，确定目标用户002的身份。下面的描述中，我们将以生物特征验证为例进行展示。

客户端220可以控制采集设备采集目标用户002的身份验证信息，并接收所述采集设备发送的所述身份验证信息。所述身份验证信息可以是生物特征信息，也可以是密码信息，还可以是其他验证信息。以生物特征信息为例，所述生物特征信息可以是目标用户002的指纹信息、掌纹信息、面部图像信息、虹膜信息、巩膜信息、骨骼信息、声纹信息等等中的至少一种。所述采集设备可以与220客户端通信连接。所述采集设备可以安装在机架600上，也可以集成在显示装置800上。所述采集设备可以是指纹采集器，用于采集目标用户002的指纹。在一些实施例中，所述采集设备也可以是摄像头，采集目标用户002的掌纹信息、面部图像信息、虹膜信息、巩膜信息、骨骼信息，等等。在一些实施例中，所述采集设备还可以是麦克风，采集目标用户002的声纹。在一些实施例中，所述采集设备还可以是键盘，用户采集目标用户002输入的密码，等等。

客户端220可以将所述身份验证信息发送给服务器240进行身份验证。客户端220可以将所述身份验证信息发送给服务器240，由服务器240对所述身份验证信息进行识别验证。在一些实施例中，客户端220也可以不将所述身份验证信息发送给服务器240，由客户端220对所述身份验证信息进行识别验证。以客户端220可以将所述身份验证信息发送给服务器240，由服务器240对所述身份验证信息进行识别验证为例，当所述身份验证信息为所述生物特征信息时，服务器240可以对所述身份验证信息进行数据分析，获取所述身份验证信息中的特征数据，比如，五官分布及形态、肌肤纹理，等等，并将所述特征数据与预先存储在服务器240中的有访问权限的特征数据进行匹配，以确定目标用户002的生物特征信息是否与服务器240中预先存储的有访问权限的用户特征相匹配，并生成身份验证结果。当目标用户002的生物特征信息与服务器240中预先存储的有访问权限的用户特征中的至少一个相匹配时，所述身份验证结果为通过。当目标用户002的生物特征信息与服务器240中预先存储的有访问权限的用户特征中的所有特征均不匹配时，所述身份验证结果为不通过。

客户端220可以接收服务器240发送的身份验证结果，在确定目标用户002的身份验证通过时，可以启动所述物品核对模式。

在启动所述物品核对模式后，所述方法P100还可以包括：

S120：客户端220获取目标图像，并将所述目标图像发送给服务器240。

客户端220在启动所述物品核对模式后，可以通过拍照的方式对所述物品进行核对。具体地，在步骤S120中，客户端220可以向视觉传感器480发送拍照指令；视觉传感器480可以对托盘460上的物品进行拍照，并将采集的目标图像发送给客户端220。当视觉传感器480为鱼眼摄像头时，所述目标图像可以是鱼眼图像。当视觉传感器480为普通摄像头时，所述目标图像可以是普通图像。客户端220可以同时向智能货柜001的所有承载装置400中的视觉传感器480发送所述拍照指令，也可以向其中的一部分视觉传感器480发送所述拍照指令，还可以向目标用户002选定的承载装置400中的视觉传感器480发送所述拍照指令。所述目标图像可以包括所有视觉传感器480拍摄的图像，也可以包括部分视觉传感器480拍摄的图像，还可以包括目标用户002选定的承载装置400中的视觉传感器480拍摄的图像。每一个所述目标图像中可以包括多个物品。客户端220可以将所有视觉传感器480拍摄的图像发送给服务器240，也可以将部分视觉传感器480拍摄的图像发送给服务器240，还可以将目标用户002选定的承载装置400中的视觉传感器480拍摄的图像发送给服务器240。客户端220可以对不同的视觉传感器480拍摄的所述目标图像进行标记，以标记其对应的承载装置400。客户端220向服务器240发送所述目标图像时，也可以向服务器240发送客户端220的设备标识，并将所述目标图像与客户端220的所述设备标识进行关联。也就是说，每个所述目标图像都与客户端220的所述设备标识以及所述目标图像对应的承载装置进行关联。

S130：服务器240对所述目标图像进行图像识别生成图像识别结果。

服务器240接收智能货柜001的客户端220发送的所述目标图像后，可以基于预设的图像识别模型对所述目标图像进行识别，并生成所述图像识别结果。所述图像识别模型可以是基于已进行标定的样本图像训练得到的。服务器240可以将所述目标图像输入所述图像识别模型，所述图像识别模型可以识别出所述目标图像中的所述多个物品中的至少部分物品。当所述多个物品之间彼此没有遮挡，也没有强光影响时，所述图像识别模型可以识别出所述多个物品中的所有物品。当所述多个物品之间存在遮挡，或存在强光影响时，所述图像识别模型可能无法是识别出被遮挡或被强光照射的物品，需要目标用户002调整位置后才可识别出。所述图像识别模型在对所述目标图像进行图像识别时，所述图像识别模型可以生成所述图像识别结果。所述图像识别结果可以包括所述多个物品中的至少部分物品(即能够被识别出的物品)中的每个物品对应的类别及其在所述目标图像中的位置。所述物品的类别可以是所述物品能够区分所述物品的属性信息，比如，所述物品的名称、规格、价格，等等。所述物品在所述目标图像中的位置，可以是所述物品在所述目标图像中的像素点的坐标。当所述物品包括多个像素点时，所述物品在所述目标图像中的位置可以是所述物品所在区域的像素点坐标的集合，也可以是所述物品的几何中心所在的像素点的坐标。

需要说明的是，当视觉传感器480是鱼眼摄像头时，服务器240在对所述目标图像进行所述图像识别前，可以先对鱼眼图像进行鱼眼矫正，以矫正鱼眼图像的畸变，提高视觉浏览效果。所述物品在所述目标图像中的位置可以是所述物品在矫正后的目标图像中的像素点的坐标。

S140：服务器240将所述图像识别结果发送给客户端220。

当服务器240生成所述图像识别结果后，可以将所述图像识别结果发送给客户端220。客户端220在接收到服务器240发送的对所述目标图像的图像识别结果后，可以基于所述图像识别结果对所述目标图像进行，并控制显示装置800进行显示。

具体地，所述方法P100还可以包括：

S160：客户端220控制显示装置800显示所述目标图像以及类别列表。

客户端220可以基于所述图像识别结果中的所述至少部分物品中的每个物品对应的类别，对所述目标图像中的物品进行分类，并生成所述类别列表。所述类别列表可以包括所述多个物品对应的至少一个类别。客户端220可以控制显示装置800显示所有承载装置400对应的所述目标图像以及类别列表。客户端220也可以控制显示装置800显示目标用户002选定的承载装置400对应的所述目标图像以及类别列表。具体地，目标用户002可以通过所述人机交互界面从至少一个承载装置400中选择一个。显示装置800可以显示承载装置列表。所述承载装置列表可以包括所述至少一个承载装置400形成的列表。目标用户002可以从所述承载装置列表中选择一个承载装置400。显示装置800可以将目标用户002选择的承载装置400发送给客户端220，客户端220可以控制显示装置800显示目标用户002选定的承载装置400对应的所述目标图像以及类别列表。

图5示出了根据本说明书的实施例提供的一种目标图像以及类别列表的示意图。图5所示的为显示装置800的人机交互页面的显示效果。为了方便展示，我们将图5中示出的所述目标图像标记为目标图像801，将类别列表标记为类别列表803。如图5所示，所述目标图像中包括7类物品，分别是物品1、物品2、物品3、物品4、物品5、物品6和物品7。类别列表803中也对应服务器240识别出的7类物品。

具体地，所述方法P100还可以包括：

S180：客户端220基于目标用户002对所述类别列表的选择，控制显示装置800在所述目标图像中对目标用户002选择的类别进行标记。

如图4所示，步骤S180可以包括：

S182：客户端220接收显示装置800发送的目标用户002对目标类别的选择。

所述目标类别可以是目标用户002选择核对的类别。所述目标类别可以包括所述类别列表中的一个。如前所述，客户端220可以控制显示装置800显示所述目标图像以及类别列表。目标用户002可以通过显示装置800的人机交互界面从所述类别列表中选择一个要核对的类别，即所述目标类别。具体地，目标用户002可以长按所述目标类别，也可以轻触所述目标类别，还可以双击所述目标类别，等等。显示装置800可以将目标用户002的选择操作发送给客户端220。

S184：客户端220在所述目标图像中对所述目标类别对应的至少一个目标物品进行标记，生成目标标记图像。

如前所述，所述类别列表中的类别为服务器240从所述目标图像中识别出的类别，因此，每个类别中可以包括至少一个物品。所述目标类别中可以包括至少一个目标物品。图6示出了根据本说明书的实施例提供的一种生成目标标记图像的流程图。如图6所示，步骤S184可以包括：

S184-2：客户端220基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中对应的位置。

如前所述，所述图像识别结果中包括被识别出的每个物品在所述目标图像中的位置。客户端220可以基于所所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中对应的位置，即每个物品在所述目标图像中的像素点坐标。

S184-4：客户端220基于所述每个目标物品在所述目标图像中对应的位置以及预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。

所述排列规则可以任意有序的规则。在一些实施例中，所述排列规则可以是基于坐标序列的排列规则，即基于每个所述目标物品在所述目标图像中的像素点的坐标大小进行排序，比如，按照坐标值从小到大的规则进行排序。在一些实施例中，所述排列规则可以是基于所述目标图像的显示方向，从左到右，从上到下进行排序。步骤S184-4可以包括：

S184-42：客户端220基于所述每个目标物品在所述目标图像中对应的位置以及所述排列规则，确定所述每个目标物品的编号。

以所述排列规则为基于坐标序列的排列规则为例进行说明，客户端220可以根据每个目标物品在所述目标图像中的坐标值以及所述排列规则，生成目标序列。所述目标序列可以是所述至少一个目标物品依照所述排列规则形成的序列。依据所述目标序列，对所述目标序列中的所述至少一个物品从前到后依次确定每个目标物品对应的编号。所述编号可以从1开始。

S184-44：客户端220在所述目标图像中，对所述每个目标物品在其所在的位置显示对应的编号，生成目标标记图像。

确定每个所述目标物品的编号后，客户端220可以对所述目标图像进行标记，在每个所述目标物品在所述目标图像中对应的位置显示其对应的编号，从而生成所述目标标记图像。

如图4所示，步骤S180还可以包括：

S186：客户端220控制显示装置800显示所述目标标记图像。

图7示出了根据本说明书的实施例提供的一种显示装置800显示的目标标记图像805的示意图。如图7所示，目标用户002选择的目标类别为物品3。目标标记图像805中对所有的物品3进行编号，目标用户002在对物品3进行核对时，可以直观清楚地观察到目标标记图像805中的物品3的数量，以及是否标记出所有的物品3。图7所示的目标标记图像805中已标记出所有的物品3。因此，物品3被全部识别，并识别正确，即物品3的核对正确。

图8示出了根据本说明书的实施例提供的另一种显示装置800显示的目标标记图像806的示意图。如图8所示，目标用户002选择的目标类别为物品4。图8所示的目标标记图像806中并未标记出所有的物品4。因此，物品4未被全部识别，即物品4的核对有误。目标用户002可以清楚直观地发现漏识别的物品4所处的位置。目标用户002可以开门重新对物品4进行调整。

综上所述，所述方法P100中服务器240通过图像识别技术对智能货柜001中各个承载装置400对应的目标图像上的物品进行识别，以识别出各物品对应的类别以及其在对应的目标图像上的位置；客户端220可以对每个承载装置400上的所述多个物品进行分类，并通过显示装置800分层显示；目标用户002可以逐个对承载装置400中的多个类别的物品进行核对；目标用户002可以通过显示装置800选择要核对的承载装置400中的目标类别；客户端220可以对目标用户002所选择的目标类别的物品进行标记，以在目标图像中对目标类别下的所有目标物品按照位置顺序依次进行编号并显示；目标用户002可以从显示装置800中清楚直观、一目了然地观察出所选的目标类别中的物品的数量，以及是否所有的目标物品都被正确识别，有无漏识别或错误识别的情况，以及目标物品的摆放位置是否符合规范；若出现漏识别或错误识别的情况，或者存在目标物品的摆放位置不符合规范的情况，目标用户002可以清楚直观地发现漏识别或错误识别或摆放错误的目标物品所处的位置，从而开门对漏识别或错误识别或摆放错误的目标物品进行位置调整，提高补理货的速度。

在一些实施例中，所述方法P100还可以包括：

S190：客户端220接收显示装置800发送的确认核对结果的指令，并发送给服务器240。

如前所述，若目标用户002确定目标物品识别正确，不存在漏识别或识别错误的情况时，目标用户002可以通过显示装置800向客户端220发送确认核对结果的指令，以确认当前图像识别模型的识别结果准确。客户端220可以接收所述确认核对结果的指令，也可以将所述确认核对结果的指令发送给服务器240。服务器240接收客户端220发送的所述确认核对结果的指令。客户端220和/或服务器240可以将当前时刻的图像识别模型的识别结果作为智能货柜001中的图像识别结果。

目标用户002在向客户端220发送所述确认核对结果的指令，可以在完成对当前目标类别的目标物品的核对后，向客户端220发送当前目标类别的确认核对结果的指令，也可以在完成对当前承载装置400上的所有类别的物品的核对，向客户端220发送当前承载装置400的所有物品的确认核对结果的指令，还可以在完成对智能货柜001中的所有承载装置400上的所有类别的物品的核对后，向客户端220发送智能货柜001中的所有承载装置400上的所有类别的物品的确认核对结果的指令。

若目标用户002发现目标物品存在漏识别或错误识别的情况时，目标用户002可以重新开门对漏识别或错误识别的目标物品的位置进行调整；调整完成后，智能货柜001可以重新执行所述方法P100，直至目标用户002确认物品识别正确，则向客户端220发送所述确认核对结果的指令。

综上所述，本说明书提供的智能货柜的物品核对方法P100和系统001，通过对智能货柜001上的物品进行分层以及分类核对，使得目标用户002可以根据物品类别逐一对不同类别的物品进行核对；并且所述方法P100和系统001通过在图像上对所选类别的物品按位置顺序进行编号，使目标用户002可以一目了然地知道目标物品的数量，发现所述类别的物品是否被正确识别，是否存在漏识别或错误识别的情况，以及是否存在以及目标物品的摆放位置是否符合规范；若出现漏识别或错误识别的情况，或者存在目标物品的摆放位置不符合规范的情况，目标用户002可以清楚直观地发现漏识别或错误识别或摆放错误的目标物品所处的位置，从而开门对漏识别或错误识别或摆放错误的目标物品进行位置调整，提高补理货的速度。本说明书提供的智能货柜的物品核对方法P100和系统001，使得显示装置800显示的页面清楚、直观、简单，提高视觉浏览效果，提高补理货的速度。

本说明书另一方面提供一种非暂时性存储介质，存储有至少一组用来进行物品核对的可执行指令。当所述可执行指令被处理器执行时，所述可执行指令指导所述处理器实施本说明书所述的智能货柜的物品核对方法P100的步骤。在一些可能的实施方式中，本说明书的各个方面还可以实现为一种程序产品的形式，其包括程序代码。当所述程序产品在计算设备300上运行时，所述程序代码用于使计算设备300执行本说明书描述的物品核对步骤。用于实现上述方法的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)包括程序代码，并可以在计算设备300上运行。然而，本说明书的程序产品不限于此，在本说明书中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统(例如处理器320)使用或者与其结合使用。所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。所述计算机可读存储介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读存储介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读存储介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。可以以一种或多种程序设计语言的任意组合来编写用于执行本说明书操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在计算设备300上执行、部分地在计算设备300上执行、作为一个独立的软件包执行、部分在计算设备300上部分在远程计算设备上执行、或者完全在远程计算设备上执行。

上述对本说明书特定实施例进行了描述。其他实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者是可能有利的。

综上所述，在阅读本详细公开内容之后，本领域技术人员可以明白，前述详细公开内容可以仅以示例的方式呈现，并且可以不是限制性的。尽管这里没有明确说明，本领域技术人员可以理解本说明书需求囊括对实施例的各种合理改变，改进和修改。这些改变，改进和修改旨在由本说明书提出，并且在本说明书的示例性实施例的精神和范围内。

此外，本说明书中的某些术语已被用于描述本说明书的实施例。例如，“一个实施例”，“实施例”和/或“一些实施例”意味着结合该实施例描述的特定特征，结构或特性可以包括在本说明书的至少一个实施例中。因此，可以强调并且应当理解，在本说明书的各个部分中对“实施例”或“一个实施例”或“替代实施例”的两个或更多个引用不一定都指代相同的实施例。此外，特定特征，结构或特性可以在本说明书的一个或多个实施例中适当地组合。

应当理解，在本说明书的实施例的前述描述中，为了帮助理解一个特征，出于简化本说明书的目的，本说明书将各种特征组合在单个实施例、附图或其描述中。然而，这并不是说这些特征的组合是必须的，本领域技术人员在阅读本说明书的时候完全有可能将其中一部分特征提取出来作为单独的实施例来理解。也就是说，本说明书中的实施例也可以理解为多个次级实施例的整合。而每个次级实施例的内容在于少于单个前述公开实施例的所有特征的时候也是成立的。

本文引用的每个专利，专利申请，专利申请的出版物和其他材料，例如文章，书籍，说明书，出版物，文件，物品等，可以通过引用结合于此。用于所有目的的全部内容，除了与其相关的任何起诉文件历史，可能与本文件不一致或相冲突的任何相同的，或者任何可能对权利要求的最宽范围具有限制性影响的任何相同的起诉文件历史。现在或以后与本文件相关联。举例来说，如果在与任何所包含的材料相关联的术语的描述、定义和/或使用与本文档相关的术语、描述、定义和/或之间存在任何不一致或冲突时，使用本文件中的术语为准。

最后，应理解，本文公开的申请的实施方案是对本说明书的实施方案的原理的说明。其他修改后的实施例也在本说明书的范围内。因此，本说明书披露的实施例仅仅作为示例而非限制。本领域技术人员可以根据本说明书中的实施例采取替代配置来实现本说明书中的申请。因此，本说明书的实施例不限于申请中被精确地描述过的实施例。

Claims (14)

1.一种智能货柜的物品核对方法，应用于所述智能货柜的客户端，包括：

显示目标图像和类别列表，所述目标图像是所述智能货柜中的视觉传感器对所述智能货柜中的多个物品采集得到，所述类别列表包括所述多个物品分别对应的至少一个类别；

接收目标用户从所述类别列表中对目标类别的选择；以及

在所述目标图像中对所述目标类别对应的至少一个目标物品做标记，以便所述目标用户通过所述标记核对所述智能货柜中所述目标类别实际对应的所有物品。

2.如权利要求1所述的方法，其中，所述方法还包括：

获取所述目标图像并将所述目标图像发送给服务器，

接收所述服务器发送的对所述目标图像的图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置，以及

基于所述图像识别结果生成所述类别列表。

3.如权利要求2所述的方法，其中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品做标记包括：

基于所述图像识别结果，确定所述至少一个目标物品中的每个目标物品在所述目标图像中的位置；以及

基于所述每个目标物品在所述目标图像中的位置和预设的排列规则，在所述目标图像中对所述至少一个目标物品依次进行编号。

4.如权利要求3所述的方法，其中，所述在所述目标图像中对所述至少一个目标物品依次进行编号，包括：

基于所述每个目标物品在所述目标图像中的位置和所述排列规则，确定所述每个目标物品的编号；以及

在所述目标图像中，对所述每个目标物品在其所在的位置上显示对应的编号。

5.如权利要求3所述的方法，其中，所述排列规则包括基于坐标序列的排列规则。

6.如权利要求2所述的方法，其中，所述在所述目标图像中对所述目标类别对应的至少一个目标物品做标记包括：

生成目标标记图像；以及

控制显示装置显示所述目标标记图像。

7.如权利要求6所述的方法，其中，所述类别列表包括所述目标类别和除所述目标类别之外的多个其他类别，所述目标标记图像中包括所述至少一个目标物品和所述多个其他类别对应的多个其他物品，所述多个其他物品未被做标记，所述目标用户通过所述标记和所述多个其他物品，核对所述目标类别实际对应的所有物品是否存在漏识别和错误识别的情况。

8.如权利要求1所述的方法，其中，所述目标用户包括通过身份验证的用户。

9.如权利要求1所述的方法，其中，在所述获取目标图像之前，还包括：

获取所述智能货柜的关门信号，其中，所述智能货柜的柜门处设置有感应传感器，与所述客户端通信连接。

10.如权利要求2所述的方法，其中，还包括：

接收显示装置发送的确认核对结果的指令，将所述指令发送给所述服务器。

11.一种智能货柜的物品核对系统，包括所述智能货柜的客户端，包括：

至少一个存储介质，存储有至少一个指令集用于智能货柜的物品核对；以及

至少一个处理器，同所述至少一个存储介质通信连接，

其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施权利要求1-10中任一项所述的智能货柜的物品核对方法。

12.一种智能货柜的物品核对方法，应用于所述智能货柜的服务器，包括：

接收所述智能货柜的客户端发送的目标图像，所述目标图像是所述智能货柜中的视觉传感器对所述智能货柜中的多个物品采集得到；

对所述目标图像进行图像识别生成图像识别结果，所述图像识别结果包括所述多个物品中的至少部分物品对应的类别及其在所述目标图像中的位置；以及

将所述图像识别结果发送给所述客户端，其中，所述客户端显示所述目标图像和类别列表，接收目标用户从所述类别列表中对目标类别的选择，以及在所述目标图像中对所述目标类别对应的至少一个目标物品做标记，以便所述目标用户通过所述标记核对所述智能货柜中所述目标类别实际对应的所有物品，所述类别列表包括所述多个物品对应的至少一个类别。

13.如权利要求12所述的智能货柜的物品核对方法，其中，还包括：

接收所述客户端发送的确认核对结果的指令。

14.一种智能货柜的物品核对系统，包括所述智能货柜的服务器，包括：

至少一个存储介质，存储有至少一个指令集用于智能货柜的物品核对；以及

至少一个处理器，同所述至少一个存储介质通信连接，

其中，当所述智能货柜的物品核对系统运行时，所述至少一个处理器读取所述至少一个指令集并实施权利要求12-13中任一项所述的智能货柜的物品核对方法。

Images