CN109741119A - 结账方法、装置、系统及计算机可读存储介质 - Google Patents

Abstract

本发明公开了一种结账方法、装置、系统及计算机可读存储介质，该方法包括：根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；若一致，将识别出的所有商品信息均添加至结算清单；若不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，然后重新执行识别操作直到所有商品识别完毕。本发明降低了基于图像处理结账方式漏算的概率，提高了结账准确性和效率，减少用户无意识的逃单行为。

Description

结账方法、装置、系统及计算机可读存储介质

技术领域

本发明涉及人工智能技术领域，具体而言，涉及一种结账方法、装置、系统及计算机可读存储介质。

背景技术

随着社会和市场经济的快速发展，我国境内的大型超市、大型商场、大型购物城、自助购物市场、物流货舱、海港码头、货物集散地等等场所的商品流通数量日益在增长，尤其是大中型购物超市的日常商品流通数量呈几何倍数增长，采用传统的集中收银方式，即消费者在收银通道与收银员一对一的现金或刷卡的收银方式已远远不能满足市场需求，造成了大量的时间和人工成本的增加。

发明内容

鉴于上述问题，本发明提供了一种结账方法、装置、系统及计算机可读存储介质，以解决现有技术的不足。

根据本发明的一个实施方式，提供一种结账方法，包括：

S1根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；

S2判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；

S3若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；

S4若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，然后重新执行步骤S1及后续步骤直到所有商品识别完毕。

在上述的结账方法中，所述步骤S1包括：

采集第一指定区域内商品的图像数据；

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；

计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

在上述的结账方法中，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息。

在上述的结账方法中，通过语音或文字进行所述提示的操作。

在上述的结账方法中，提示用户根据体积信息或平面投影信息在所识别出的商品中选取至少一件商品。

在上述的结账方法中，所述结算清单包括商品名称、商品单价、商品数量和商品优惠信息。

本发明的第二实施方式提供一种结账装置，包括：

识别模块，用于根据采集的指定区域内商品的图像数据识别出对应的含商品重量的商品信息；

判断模块，用于判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；

添加模块，用于若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；

提示模块，若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，所述提示模块提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，并且所述识别模块重新执行识别操作直到所有商品识别完毕。

在上述的结账装置中，所述识别模块包括：

采集第一指定区域内商品的图像数据；

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；

计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

本发明的第三实施方式提供一种结账系统，包括：

成像装置，用于采集第一指定区域内商品的图像数据；

提示设备，用于通过语音或文字提示用户进行所述提示操作；

计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，在所述处理器执行所述计算机程序时，实施权利要求1-6中任一项所述的结账方法。

本发明的第四实施方式提供一种计算机可读存储介质，其存储有上述的结账系统中所使用的所述计算机程序。

本发明结账方法、装置、系统及计算机可读存储介质至少提供以下技术效果：降低了基于图像处理结账方式漏算的概率，提高了结账效果的准确性和结账效率，减少用户无意识的逃单行为。

附图说明

为了更清楚地说明本发明的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对本发明保护范围的限定。

图1示出了本发明第一实施例提供的一种结账方法的流程示意图。

图2示出了本发明第二实施例提供的一种结账方法的流程示意图。

图3示出了本发明实施例提供的一种结账装置的结构示意图。

图4示出了本发明实施例提供的一种结账系统的结构示意图。

主要元件符号说明：

10-结账装置；110-识别模块；120-判断模块；130-添加模块；140-提示模块；20-结账系统；210-成像装置；220-提示设备；230-计算机设备。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在多尺度标定板的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。

下面结合附图，对本发明的具体实施方式作详细说明。

实施例1

图1示出了本发明第一实施例提供的一种结账方法的流程示意图。所述结账方法包括：

步骤S110，根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息。

其中，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息等。

采集第一指定区域内商品的图像数据；根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

其中，所述图像分割算法可以为基于阈值的分割方法、基于区域的分割方法、基于边缘的分割方法以及基于特定理论的分割方法等。

其中，所述图像模型为利用多视角成像装置从不同角度对商品图像采集，对采集的商品图像进行预处理，提取出有用的特征信息共同组成商品模型。本实施例中，所述图像预处理可以包括去燥、增强及分割等图像处理方法。本发明的其他实施例中，还可以包括其他类型的图像处理操作过程。

所述相似度主要用于对于两幅图像之间内容的相似程度进行打分，根据分数的高低来判断图像内容的相近程度。可以采用直方图匹配法、数学上的矩阵分解及基于特征点的图像相似度等方式计算所述图像信息与预先存储的图像模型之间的相似度。

计算某一分割后的商品的图像信息与所有预先存储的图像模型之间的相似度，获取相似度最大的图像模型所对应的商品信息作为该商品的商品信息。

本实施例中，所述第一指定区域可以为成像装置所能扫描的最大区域。本发明的其他实施例中，还可以为成像装置扫描范围内某一预定区域。

其中，所述所述商品信息包括商品名称、商品单价和商品生产厂家信息、商品ID等。

步骤S120，判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致。

在扫描的第一指定区域放置一重力传感器，通过该重力传感器测量第一指定区域中放置的商品的总重量。

判断第一指定区域内商品的总重量与步骤S110中已识别出的所有商品的总重量是否一致，若一致前进至步骤S130；若不一致前进至步骤S140。

步骤S130，将所述识别出的所有商品信息均添加至结算清单。

若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，意味着通过采集的商品图像数据已经全部识别出第一指定区域内所有的商品，并且该识别结果是正确的，此时，将所识别出的所有商品的商品信息均添加至结算清单中。

其中，所述结算清单包括商品名称、商品单价、商品数量、商品优惠信息和商品总金额、商品实付金额等。

步骤S140，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单。

若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该选取的至少一件商品的商品信息添加至结算清单。然后继续通过成像装置采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，直到用户所购买的所有商品都扫描完毕，第一指定区域内采集不到商品的有效图像数据为止。此时，每扫描一次商品图像数据所述结算清单中至少添加一条商品信息的记录，成像装置扫描完毕后，该结算清单中包含了所有商品的商品信息。

所述第二指定区域可为可放置商品的指定装置或区域。

步骤S150，根据所述结算清单支付对应的金额。

提示用户根据所述结算清单支付所对应的支付金额。

其中，支付方式可以为银行卡支付、在线支付等多种支付方式。

值得注意的是，用户在支付该结算清单中对应金额的之前，还可以通过显示装置确认该结算清单中商品信息。

优选地，通过语音或文字进行所述提示的操作。

可以通过语音或者文字提示用户取出第一指定区域内商品、支付结算清单中对应的金额等操作。

实施例2

图2示出了本发明第二实施例提供的一种结账方法的流程示意图。

步骤S210，采集第一指定区域内商品的图像数据。

步骤S220，对所述图像数据进行分割得到不同商品对应的图像信息。

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息。

步骤S230，计算所述图像信息与所有预先存储的图像模型之间的相似度。

将步骤S220中所得的商品与后台预先存储的所有的图像模型进行对比，计算所述图像信息与所有预先存储的图像模型之间的相似度，并将该相似度进行排序。

步骤S240，获取最大相似度对应的图像模型的商品信息。

步骤S250，判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致。

若第一指定区域内商品的总重量与识别出的所有商品的总重量一致，前进至步骤S260；若第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，前进至步骤S270。

步骤S260，将所述识别出的所有商品信息均添加至结算清单。

步骤S270，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域。

步骤S280，将该至少一件商品的商品信息添加至结算清单。

步骤S290，判断第一指定区域商品是否识别完毕。

此时，判断第一指定区域内是否还有剩余商品，若没有剩余商品，即所有商品识别完毕，前进至步骤S300，否则返回至步骤S210继续进行识别直至所有商品识别完毕为止。

步骤S300，根据所述结算清单支付对应的金额。

优选地，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息。

优选地，通过语音或文字进行所述提示的操作。

优选地，提示用户根据体积信息或平面投影信息在所识别出的商品中选取至少一件商品。

优选地，所述结算清单包括商品名称、商品单价、商品数量和商品优惠信息。

实施例3

图3示出了本发明实施例提供的一种结账装置的结构示意图。

该结账装置10包括识别模块110、判断模块120、添加模块130和识提示模块140。

识别模块110，用于根据采集的指定区域内商品的图像数据识别出对应的含商品重量的商品信息。

采集第一指定区域内商品的图像数据；根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

判断模块120，用于判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致。

添加模块130，用于若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单。

提示模块140，若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，所述提示模块140提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并且所述识别模块重新执行所述识别操作。

该结账装置，还可以包括支付模块，用于根据所述结算清单支付对应的金额。

优选地，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息。

优选地，通过语音或文字进行所述提示的操作。

优选地，提示用户根据体积信息或平面投影信息在所识别出的商品中选取至少一件商品。

优选地，所述结算清单包括商品名称、商品单价、商品数量和商品优惠信息。

实施例4

图4示出了本发明实施例提供的一种结账系统的结构示意图。

该结账系统20包括成像装置210、提示设备220和计算机设备230。

成像装置210，用于采集第一指定区域内商品的图像数据。

本实施例中，所述成像装置210为摄像头。本发明的其他实施例中，还可以为其他类型可以拍摄图像数据的装置。

所述成像装置210包括至少一个摄像头，通过全方位多角度的采集第一指定区域的图像数据，提高商品识别的准确率。

所述第一指定区域正上方距离Dcm处或者在所述第一指定区域正上方D厘米处固定沿着固定形状的边缘分布有至少一个成像装置210。其中，D的取值根据该成像装置210所采集的商品的图像数据的质量而定，固定形状可以为方形、圆形或三角形等。该第一指定区域可以为成像装置210所能扫描的最大区域或者为成像装置210扫描范围内某一预定区域。

本实施例中，所述第一指定区域正下方设置有一重力传感器，用于测量该第一指定区域内放置的所有商品的总重量。本发明的其他实施例中，还可以通过其他方式来测量第一指定区域内放置的所有商品的总重量。

提示设备220，用于通过语音或文字提示用户进行所述提示操作。

计算机设备230，包括存储器和处理器。

所述存储器存储有计算机程序。

在所述处理器执行所述计算机程序时，实施所述的结账方法，该结账方法包括：

S1根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；

S2判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；

S3若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；

S4若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，然后重新执行步骤S1及后续步骤直到所有商品识别完毕。

其中，步骤S1包括：

采集第一指定区域内商品的图像数据；

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；

计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

处理器与成像装置210、提示设备220及存储器相连接。

处理器与第一指定区域下所附着的重力传感器相连接，该连接方式可以为有线连接方式或无线连接方式。

处理器首先接收从成像装置210采集的第一指定区域内若干商品的图像数据，根据图像处理技术识别出该图像数据中所包含的若干商品信息；接收从第一指定区域下所附着的重力传感器所传递的第一指定区域内所有商品的总重量信息，并与识别出的商品的总重量向比较，若相同则将所有识别出的商品信息添加至结算清单中，并将该结算清单存储至存储器，若第一指定区域内所有商品的总重量与识别出的商品的总重量不同，通过提示设备220提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，并重新执行识别操作直至所有商品识别完毕。

此时，结算清单中包含所有商品的商品信息及支付金额等信息，可以通过提示设备220提示用户进行支付操作。

支付完毕后，还可以打印存储的结算清单中所对应的数据，给用户提供小票收据。

该结账系统还可以包括显示装置，用于显示所述结算清单中的信息给用户查看。

优选地，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息。

优选地，通过语音或文字进行所述提示的操作。

优选地，提示用户根据体积信息或平面投影信息在所识别出的商品中选取至少一件商品。

优选地，所述结算清单包括商品名称、商品单价、商品数量和商品优惠信息。

本实施例还提供了一种计算机可读存储介质，用于储存上述的结账系统中所使用的所述计算机程序。

至此，本发明提出了一种结账方法、装置、系统及计算机可读存储介质，降低了基于图像处理结账方式漏算的概率，减少用户无意识的逃单行为；同时，通过不同的提示方式来引导用户执行对应的操作，提高了结账效果的准确性和结账效率。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和结构图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，结构图和/或流程图中的每个方框、以及结构图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本发明各个实施例中的各功能模块或单元可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或更多个模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是智能手机、个人计算机、服务器、或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种结账方法，其特征在于，包括：

S1根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；

S2判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；

S3若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；

S4若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，然后重新执行步骤S1及后续步骤直到所有商品识别完毕。

2.根据权利要求1所述的结账方法，其特征在于，所述步骤S1包括：

采集第一指定区域内商品的图像数据；

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；

计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

3.根据权利要求1所述的结账方法，其特征在于，所述商品信息还包括商品名称、商品单价和商品生产厂家信息、体积信息及平面投影信息。

4.根据权利要求1所述的结账方法，其特征在于，通过语音或文字进行所述提示的操作。

5.根据权利要求3所述的结账方法，其特征在于，提示用户根据体积信息或平面投影信息在所识别出的商品中选取至少一件商品。

6.根据权利要求1所述的结账方法，其特征在于，所述结算清单包括商品名称、商品单价、商品数量和商品优惠信息。

7.一种结账装置，其特征在于，包括：

识别模块，用于根据采集的第一指定区域内商品的图像数据识别出对应的含商品重量的商品信息；

判断模块，用于判断第一指定区域内商品的总重量与识别出的所有商品的总重量是否一致；

添加模块，用于若所述第一指定区域内商品的总重量与识别出的所有商品的总重量一致，将所述识别出的所有商品信息均添加至结算清单；

提示模块，若所述第一指定区域内商品的总重量与识别出的所有商品的总重量不一致，所述提示模块提示用户在所识别出的商品中选取至少一件商品放至第二指定区域，并将该至少一件商品的商品信息添加至结算清单，并且所述识别模块重新执行识别操作直到所有商品识别完毕。

8.如权利要求7所述的结账装置，其特征在于，所述识别模块包括：

采集第一指定区域内商品的图像数据；

根据图像分割算法对所述图像数据进行分割得到不同商品对应的图像信息；

计算所述图像信息与所有预先存储的图像模型之间的相似度，获取最大相似度对应的图像模型的商品信息。

9.一种结账系统，其特征在于，包括：

成像装置，用于采集第一指定区域内商品的图像数据；

提示设备，用于通过语音或文字提示用户进行所述提示操作；

计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，在所述处理器执行所述计算机程序时，实施权利要求1-6中任一项所述的结账方法。

10.一种计算机可读存储介质，其特征在于，其存储有权利要求9所述的结账系统中所使用的所述计算机程序。