CN115861781A - 一种商品识别方法和装置 - Google Patents

Abstract

本申请公开了一种商品识别方法和装置，该方法包括以下步骤：根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类；基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。本申请实施例根据待识别商品的陈列位置，确定对应的商品品类，以缩小商品特征库中商品的品类，并利用缩小后的商品特征库进行商品检索识别，从而节省资源成本和时间成本，实现更准确的商品识别。

Description

一种商品识别方法和装置

技术领域

本申请属于人工智能技术领域，具体涉及一种商品识别方法和装置。

背景技术

随着人工智能的快速发展，智慧零售也在其推动下得到了迅速的发展。为了实现高效和智能化的商品管理，智慧零售综合使用基于互联网、大数据和人工智能等技术，赋能或升级现有的商超、便利店，使其更加数字化和智能化。

智能数字货架是智慧零售业务中的一个重要环节，货架上商品的智能检测、智能识别、商品缺货、陈列督查等功能赋予了智能数字货架的智能化管理需求。商品识别作为智能货架管理中的重要环节，也是货架排面分析、货架缺货分析等应用的前提，是实现货架智能管理的核心技术点。因此，精准的商品识别在货架的智能管理中起着至关重要的作用。由于商品种类繁多，商品包装频繁更新、实际场景环境变化等多方面的影响，要实现高精度的商品识别存在巨大的困难，这不仅需要海量的数据支撑，还需要精准的商品识别技术。

为了实现高精度的商品识别，目前最有效的方法是通过以图搜图的方式来进行商品检索，即系统设有一个特征向量数据库，进行检索时将目标特征与特征向量数据库进行特征与特征之间进行距离计算或者相似度计算，并将相似度最高的特征所属类别作为目标特征的类别。然而，由于商品种类繁多，导致商品识别的资源消耗和时间消耗较大，无法做到精准和高效，进而影响后续的货架智能管理。

申请内容

本申请实施例的目的是提供一种商品识别方法和装置，以解决现有技术中的商品识别的资源消耗和时间消耗较大的缺陷。

为了解决上述技术问题，本申请是这样实现的：

第一方面，提供了一种商品识别方法，包括以下步骤：

根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类；

基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

第二方面，提供了一种商品识别装置，包括：

确定模块，用于根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类；

检索模块，用于基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

本申请实施例根据待识别商品的陈列位置，确定对应的商品品类，以缩小商品特征库中商品的品类，并利用缩小后的商品特征库进行商品检索识别，从而节省资源成本和时间成本，实现更准确的商品识别。

附图说明

图1是本申请实施例提供的一种商品识别方法流程图；

图2是本申请实施例提供的用于摆放商品的货架层的示意图；

图3是本申请实施例提供的一种商品识别装置的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例中，可以采集商超内所有需要识别的商品图片，构建商品识别特征库，在进行商品识别的时候使用整个商品特征库内的所有商品特征进行特征对比，最终将相似度最高的特征所属类别作为待识别商品的类别。上述商品识别技术使用所有商品构建的特征库进行商品特征对比检索，而整体特征库中存在数百万甚至上千万的商品特征，海量的商品特征使得精准的商品识别变得极其困难。与此同时，与海量的特征进行对比检索也会耗费大量的资源与时间成本，无法做到实时性。

因此，本申请实施例利用商超提供的货架商品信息(或更为详细的货架商品标准陈列信息)提出了一种基于货架信息的商品识别方法，可以根据货架商品信息将待对比检索的特征库特征类别减少到该货架上摆放的商品的类别范围内。若商超可以提供更为详细的货架商品标准陈列信息，可以将待对比检索的特征库特征类型减少到更少的商品类型范围，从而减少特征库中的特征数量。使用货架上摆放的商品信息或货架商品标准陈列信息来获取该货架上摆放商品的品类、类别、甚至商品在货架上的摆放顺序，然后基于商品品类或类别信息缩小商品特征库，尽可能减少商品特征库中与待识别商品无关的商品特征。

在实际场景中，商超为了方便管理货架上的商品，通常会将相同品类的商品摆放在同一个货架(或者某个货架的同一层)上，即一个货架上商品的品类是固定的(或已知的)。进而，有些商超根据品牌商的需求，会按照品牌商规定的货架商品标准陈列图来摆放商品，这种情况下，标准陈列图可以提供更详细的商品摆放信息。本申请实施例提出的商品识别方法根据货架商品信息或货架商品标准陈列信息，在商品检索之前先将检索对比的商品特征库缩小在一定范围内，然后在缩小的商品特征库中进行更加精确的商品检索识别，不仅能够减小商品检索对比的商品特征数量、提高商品识别的准确度，还可以减少商品检索时的资源消耗和时间消耗，使商品识别真正做到又快又准。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的一种商品识别方法进行详细地说明。

如图1所示，为本申请实施例提供的一种商品识别方法流程图，该方法包括以下步骤：

步骤101，根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类。

具体地，可以将待识别的商品所在货架对应的商品品类，确定为所述待识别商品对应的商品品类；其中，所述货架上的所有商品均属于所述商品品类。还可以根据货架商品标准陈列信息，确定待识别商品在货架上的陈列位置对应的第一商品类别，以及与所述陈列位置相邻的位置对应的第二商品类别；根据所述第一商品类别和所述第二商品类别对应的商品品类，确定与所述待识别商品对应的商品品类；其中，货架商品标准陈列信息用于确定货架中的每个位置摆放的商品的类别。

本实施例中，可以将所述第一商品类别和所述第二商品类别对应的商品品类，确定为与所述待识别商品对应的商品品类。

步骤102，基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

本实施例中，在根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类之前，还可以根据待识别商品的检测框的中心点坐标，定位所述待识别商品在货架上所属棚格的位置；相应地，可以根据货架商品标准陈列信息，确定待识别商品在货架上所属棚格的位置对应的第一商品类别，以及与所述棚格左右相邻的多个棚格的位置对应的第二商品类别。

本申请实施例根据待识别商品的陈列位置，确定对应的商品品类，以缩小商品特征库中商品的品类，并利用缩小后的商品特征库进行商品检索识别，从而节省资源成本和时间成本，实现更准确的商品识别。

在本申请实施例中，通过商超提供的货架商品信息或货架商品标准陈列信息来减少待对比检索的商品特征库中特征的类别和数量，使得商品识别时待识别商品与较少的特征库特征进行对比，以得到更精确的商品识别结果，消耗更少的资源成本和时间成本。其中，商品的品类代表某一大类商品，例如：饮料类、饼干类、洗护类等等，而商品类别则表示某一商品其本身具体的类别。棚格表示货架上某一固定区域位置，如图2中所示的基于货架层的虚线框。

在本申请实施例的一种具体实现中，当使用商超提供货架商品信息时，基于货架商品信息缩小商品特征库的商品识别方法，具体实现细节如下步骤：

(1)假设整体商品特征库中共有10个品类的商品，例如A,B,C,D,E,F,G,H,I,J；

(2)对于一个待识别的商品，其所在货架上的商品品类均属于A或B；

(3)使用(2)中提供的货架商品信息(品类A和B)将商品特征库缩小至仅仅包含A和B两类商品的特征；

(4)将待识别的商品特征与(3)中商品品类缩小的特征库中特征进行对比检索；

(5)选取相似度最大的特征类别作为待识别商品的类别。

在本申请实施例的另一种具体实现中，基于货架商品标准陈列信息缩小的商品特征库的商品识别方法，具体实现细节如下步骤：

(1)根据货架商品标准陈列信息可以得到货架每层每个位置摆放的商品类别。假设图2中货架第一层中标注的商品为待识别商品，根据待识别商品的检测框可以计算出检测框的中心点坐标；

(2)根据(1)中计算出的商品检测框中心点坐标可以定位其在货架上所属棚格的位置，如图2中类别A4所属的棚格；

(3)选取商品所属棚格左右各n个棚格，得到2n+1个棚格范围内商品类别；假设n＝1，则选取A3,A4,A5三个棚格，并得到A3,A4,A5三个商品类别；

(4)根据(3)中选出的2n+1个商品类别，将商品特征库中特征的类别缩小到2n+1个类别；

(5)将待识别的商品特征与(4)中商品类别缩小的特征库中特征进行对比检索；

(6)选取相似度最大的特征类别作为待识别商品的类别。

本申请实施例对货架上的商品进行商品识别之前，根据货架所属的商品信息或货架商品标准陈列信息对全品类商品特征库进行特征选择，选出与货架上商品品类或所选择的棚格所属商品类别相关的特征，将选出的商品特征用于后续的商品识别，能够大幅度缩小商品特征库中商品的品类和类别，减少需要对比的特征数量，然后利用缩小的特征库来进行商品检索识别，这不仅可以节省大量的资源和时间成本，还可以实现更准确的商品识别。

如图3所示，为本申请实施例提供的一种商品识别装置的结构示意图，包括：

确定模块310，用于根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类。

具体地，确定模块310，可以具体用于将待识别的商品所在货架对应的商品品类，确定为所述待识别商品对应的商品品类；其中，所述货架上的所有商品均属于所述商品品类。也可以具体用于根据货架商品标准陈列信息，确定待识别商品在货架上的陈列位置对应的第一商品类别，以及与所述陈列位置相邻的位置对应的第二商品类别；根据所述第一商品类别和所述第二商品类别对应的商品品类，确定与所述待识别商品对应的商品品类；其中，货架商品标准陈列信息用于确定货架中的每个位置摆放的商品的类别。

本实施例中，确定模块310，具体用于将所述第一商品类别和所述第二商品类别对应的商品品类，确定为与所述待识别商品对应的商品品类。

检索模块320，用于基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

本实施例中，上述装置，还包括：

定位模块，用于根据待识别商品的检测框的中心点坐标，定位所述待识别商品在货架上所属棚格的位置；

相应地，确定模块310，具体用于根据货架商品标准陈列信息，确定待识别商品在货架上所属棚格的位置对应的第一商品类别，以及与所述棚格左右相邻的多个棚格的位置对应的第二商品类别。

本申请实施例根据待识别商品的陈列位置，确定对应的商品品类，以缩小商品特征库中商品的品类，并利用缩小后的商品特征库进行商品检索识别，从而节省资源成本和时间成本，实现更准确的商品识别。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (10)

1.一种商品识别方法，其特征在于，包括以下步骤：

根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类；

基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

2.根据权利要求1所述的方法，其特征在于，所述根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类，具体包括：

将待识别的商品所在货架对应的商品品类，确定为所述待识别商品对应的商品品类；

其中，所述货架上的所有商品均属于所述商品品类。

3.根据权利要求1所述的方法，其特征在于，所述根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类，具体包括：

根据货架商品标准陈列信息，确定待识别商品在货架上的陈列位置对应的第一商品类别，以及与所述陈列位置相邻的位置对应的第二商品类别；

根据所述第一商品类别和所述第二商品类别对应的商品品类，确定与所述待识别商品对应的商品品类；

其中，货架商品标准陈列信息用于确定货架中的每个位置摆放的商品的类别。

4.根据权利要求3所述的方法，其特征在于，所述根据所述第一商品类别和所述第二商品类别，确定与所述待识别商品对应的商品品类，具体包括：

将所述第一商品类别和所述第二商品类别对应的商品品类，确定为与所述待识别商品对应的商品品类。

5.根据权利要求3所述的方法，其特征在于，所述根据待识别商品的陈列位置，确定与所述待识别商品对应的商品品类之前，还包括：

根据待识别商品的检测框的中心点坐标，定位所述待识别商品在货架上所属棚格的位置；

所述根据货架商品标准陈列信息，确定待识别商品在货架上的陈列位置对应的第一商品类别，以及与所述陈列位置相邻的位置对应的第二商品类别，具体包括：

根据货架商品标准陈列信息，确定待识别商品在货架上所属棚格的位置对5应的第一商品类别，以及与所述棚格左右相邻的多个棚格的位置对应的第二商品类别。

6.一种商品识别装置，其特征在于，包括：

确定模块，用于根据待识别商品的陈列位置，确定与所述待识别商品对应0的商品品类；

检索模块，用于基于所述待识别商品的商品特征，在所述商品品类对应的商品特征库中进行对比检索，并从所述商品特征库中选取与所述商品特征相似度最大的特征类别作为所述待识别商品的类别。

7.根据权利要求6所述的装置，其特征在于，

5所述确定模块，具体用于将待识别的商品所在货架对应的商品品类，确定为所述待识别商品对应的商品品类；其中，所述货架上的所有商品均属于所述商品品类。

8.根据权利要求6所述的装置，其特征在于，

所述确定模块，具体用于根据货架商品标准陈列信息，确定待识别商品在0货架上的陈列位置对应的第一商品类别，以及与所述陈列位置相邻的位置对应的第二商品类别；根据所述第一商品类别和所述第二商品类别对应的商品品类，确定与所述待识别商品对应的商品品类；其中，货架商品标准陈列信息用于确定货架中的每个位置摆放的商品的类别。

9.根据权利要求8所述的装置，其特征在于，

5所述确定模块，具体用于将所述第一商品类别和所述第二商品类别对应的商品品类，确定为与所述待识别商品对应的商品品类。

10.根据权利要求8所述的装置，其特征在于，还包括：

定位模块，用于根据待识别商品的检测框的中心点坐标，定位所述待识别商品在货架上所属棚格的位置；

所述确定模块，具体用于根据货架商品标准陈列信息，确定待识别商品在货架上所属棚格的位置对应的第一商品类别，以及与所述棚格左右相邻的多个棚格的位置对应的第二商品类别。

Images