CN116665380B - 一种智能结账处理方法、系统、pos收银机及储介质 - Google Patents

Abstract

本申请涉及智能结账的领域，尤其是涉及一种智能结账处理方法、系统、POS收银机及储介质。方法包括：获取人员身份信息以及人员监测图像，对人员身份信息进行数据提炼，得到人员标识数据以及目标设备，将人员标识数据与购物者进行标注，得到人员标识图像，基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制购物识别装置对购物者所拿取商品进行识别，获取购物商品信息，当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备，本申请具有提高商品结算速率的效果。

Description

一种智能结账处理方法、系统、POS收银机及储介质

技术领域

本申请涉及智能结账的领域，尤其是涉及一种智能结账处理方法、系统、POS收银机及储介质。

背景技术

POS收银机是微电子技术发展及现代化商品流通管理理念和技术发展结合的产物，它在会计业务上的高准确性、销售统计上的高效率性以及商品管理上的高实事性，使得商业经营者可以迅速、准确、详细地掌握商品流通过程中的全部数据。

目前，超市为了便捷购物者对各种不同种类的商品进行任意选购结算，引入POS收银机进行商品结账处理。主要结账方式分为人工结账以及自助结账，人工结账：当购物者对商品选购完成后，将商品拿置人工POS收银机处进行人工结账，工作人员逐一对每个商品进行扫码识别，录取每个商品的商品信息以及商品金额，POS收银机接收录取后的商品信息以及商品金额进行总商品账单结算，人工结账的方式对顾客来说，具有扫描商品速度快、不易出错等优点，但当出现节假日或商场活动等情况时，人流量激增，收银员难以在较短时间内通过POS收银机完成收银任务，从而导致人流排队拥挤的现象发生。而自助结账则是当购物者选购完商品后，将商品移动至自助POS收银机处进行自助结账，购物者逐一将商品放置到自助POS收银机的商品识别处，然后POS收银机采集商品信息以及商品金额，并对商品金额进行汇总计算。自助POS收银机的出现虽然在一定程度上改善了人工结账单一导致的排队拥挤的现象，但自助POS收银机的结账方式对于老年人或者使用现金、购物较多的购物者来说，自助结账难度较大，同时自助结账与人工结账相比，还存在商品错扫、商品漏扫、扫描商品效率低以及自助收银区域排队拥挤等缺陷。

因此，人工结账以及自助结账两种结账方式不论结合与否，都存在排队拥挤的现象，导致购物者在结算商品时需要花费较长的时间进行等待，降低了购物者的购物体验以及商品结算速率。

发明内容

为了解决上述中的至少一项技术问题，本申请提供了一种智能结账处理方法、系统、POS收银机及储介质。

第一方面，本申请提供一种智能结账处理方法，采用如下的技术方案：

一种智能结账处理方法，包括：

获取人员身份信息以及人员监测图像，所述人员身份信息用于表示每个购物者在进入超市时对应的身份信息，所述人员监测图像用于表示每个所述购物者在进入超市后的监测图像；

对所述人员身份信息进行数据提炼，得到人员标识数据以及与所述人员标识数据相对应的目标设备；

将所述人员标识数据与所述人员监测图像中对应的购物者进行标注，得到人员标识图像；

基于所述人员标识图像确定每个所述购物者所在购物位置，并根据所述购物位置生成监测指令，控制与所述购物位置相对应的购物识别装置对所述购物者所拿取商品进行识别；

获取购物商品信息，所述购物商品信息为所述购物识别装置识别所述购物者在购物过程中所拿取的购物商品信息；

当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，若未发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并将所述费用信息发送至与所述购物者相对应的目标设备。

在另一种可能实现的方式中，当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，包括：

当检测到所述购物者到达第一指定区域后，获取第一购物篮图像，所述第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对所述第一购物篮图像进行重叠识别，确定所述购物篮盛放商品是否存在重叠情况，若不存在，则对所述第一购物篮图像中的商品进行识别，生成商品验证信息，并基于所述商品验证信息对所述购物商品信息进行比对验证，得到商品验证结果；

根据所述商品验证结果确定所述购物商品信息是否发生变化。

在另一种可能实现的方式中，所述对所述购物商品信息进行计算分析，生成费用信息，包括：

对所述购物商品信息中的每种商品以及每种商品所对应的商品数量进行统计，得到商品类别数量；

将所述商品类别数量中的商品种类与预设商品类别价格中的商品种类进行匹配，得到每种商品的标价数据；

基于所述标价数据以及所述商品类别数量进行支付费用计算，生成费用信息。

在另一种可能实现的方式中，所述对所述第一购物篮图像进行重叠识别，确定所述购物篮盛放商品是否存在重叠情况，还包括：

若所述购物篮盛放商品存在重叠情况，则将所述第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至所述重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，所述第二购物篮图像为所述购物篮内的商品重叠层数为预设层数时的购物篮图像，所述商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

对所述第二购物篮图像以及所述商品平铺图像进行识别，得到商品验证结果。

在另一种可能实现的方式中，所述将所述费用信息发送至与所述购物者相对应的目标设备，之后还包括：

获取所述购物者的支付状态，所述支付状态的初始状态为未支付状态；

判断所述支付状态是否由未支付状态转变为已支付状态，若支付状态由未支付状态转变已支付状态，则生成通行指令，控制开启超市出口通道；

若支付状态未发生转变，则检测所述购物者是否到达第二指定区域，若到达所述第二指定区域，则生成支付提示信息，并将所述支付提示信息发生至所述目标设备。

在另一种可能实现的方式中，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，还包括：

若所述购物商品信息发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并基于所述商品验证结果确定丢弃商品信息；

根据所述丢弃商品信息生成商品反馈信息，并将所述商品反馈信息发送至目标设备。

在另一种可能实现的方式中，所述根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，之后还包括：

判断所述商品平铺图像中是否存在散装商品，若存在，则对所述散装商品进行价格标签检测，确定所述散装商品是否价格标签；

若所述散装商品不存在价格标签，则生成计量称重指令，控制机械手对所述散装商品进行抓取称量，得到商品重量信息；

将所述商品重量信息按照所述散装商品的计量标价标准进行价格计算，得到所述散装商品费用。

第二方面，本申请提供一种智能结账处理装置，采用如下的技术方案：

一种智能结账处理装置，包括：

第一获取模块，用于获取人员身份信息以及人员监测图像，所述人员身份信息用于表示每个购物者在进入超市时对应的身份信息，所述人员监测图像用于表示每个所述购物者在进入超市后的监测图像；

数据提炼模块，用于对所述人员身份信息进行数据提炼，得到人员标识数据以及与所述人员标识数据相对应的目标设备；

数据标注模块，用于将所述人员标识数据与所述人员监测图像中对应的购物者进行标注，得到人员标识图像；

商品识别模块，用于基于所述人员标识图像确定每个所述购物者所在购物位置，并根据所述购物位置生成监测指令，控制与所述购物位置相对应的购物识别装置对所述购物者所拿取商品进行识别；

第二获取模块，用于获取购物商品信息，所述购物商品信息为所述购物识别装置识别所述购物者在购物过程中所拿取的购物商品信息；

费用计算模块，用于当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，若未发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并将所述费用信息发送至与所述购物者相对应的目标设备。

在一种可能的实现方式中，所述费用计算模块在当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化时，具体用于：

当检测到所述购物者到达第一指定区域后，获取第一购物篮图像，所述第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对所述第一购物篮图像进行重叠识别，确定所述购物篮盛放商品是否存在重叠情况，若不存在，则对所述第一购物篮图像中的商品进行识别，生成商品验证信息，并基于所述商品验证信息对所述购物商品信息进行比对验证，得到商品验证结果；

根据所述商品验证结果确定所述购物商品信息是否发生变化。

在另一种可能的实现方式中，所述费用计算模块在对所述购物商品信息进行计算分析，生成费用信息时，具体用于：

对所述购物商品信息中的每种商品以及每种商品所对应的商品数量进行统计，得到商品类别数量；

将所述商品类别数量中的商品种类与预设商品类别价格中的商品种类进行匹配，得到每种商品的标价数据；

基于所述标价数据以及所述商品类别数量进行支付费用计算，生成费用信息。

在另一种可能的实现方式中，所述装置还包括：重叠识别模块、图像获取模块以及图像识别模块，其中，

所述重叠识别模块，用于若所述购物篮盛放商品存在重叠情况，则将所述第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

所述图像获取模块，用于根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至所述重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，所述第二购物篮图像为所述购物篮内的商品重叠层数为预设层数时的购物篮图像，所述商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

所述图像识别模块，用于对所述第二购物篮图像以及所述商品平铺图像进行识别，得到商品验证结果。

在另一种可能的实现方式中，所述装置还包括：状态获取模块、状态判断模块以及支付提示模块，其中，

所述状态获取模块，用于获取所述购物者的支付状态，所述支付状态的初始状态为未支付状态；

所以状态判断模块，用于判断所述支付状态是否由未支付状态转变为已支付状态，若支付状态由未支付状态转变已支付状态，则生成通行指令，控制开启超市出口通道；

所述支付提示模块，用于当支付状态未发生转变时，检测所述购物者是否到达第二指定区域，若到达所述第二指定区域，则生成支付提示信息，并将所述支付提示信息发生至所述目标设备。

在另一种可能的实现方式中，所述装置还包括：丢弃确定模块以及信息发送模块，其中，

所述丢弃确定模块，用于当所述购物商品信息发生变化时，对所述购物商品信息进行计算分析，生成费用信息，并基于所述商品验证结果确定丢弃商品信息；

所述信息发送模块，用于根据所述丢弃商品信息生成商品反馈信息，并将所述商品反馈信息发送至目标设备。

在另一种可能的实现方式中，所述装置还包括：标签确定模块、商品计量模块以及价格计算模块，其中，

所述标签确定模块，用于判断所述商品平铺图像中是否存在散装商品，若存在，则对所述散装商品进行价格标签检测，确定所述散装商品是否价格标签；

所述商品计量模块，用于当所述散装商品不存在价格标签，生成计量称重指令，控制机械手对所述散装商品进行抓取称量，得到商品重量信息；

所述价格计算模块，用于将所述商品重量信息按照所述散装商品的计量标价标准进行价格计算，得到所述散装商品费用。

第三方面，本申请提供一种POS收银机，采用如下的技术方案：

一种POS收银机，该POS收银机包括：

至少一个处理器；

存储器；

至少一个应用程序，其中至少一个应用程序被存储在存储器中并被配置为由至少一个处理器执行，所述至少一个应用程序配置用于：执行上述智能结账处理方法。

第四方面，提供了一种计算机可读存储介质，存储介质存储有至少一条指令、至少一段程序、代码集或指令集，至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现如第一方面中任一可能的实现方式所示的智能结账处理方法。

综上所述，本申请包括以下至少一种有益技术效果：

本申请提供了一种智能结账处理方法、系统、POS收银机及储介质，与相关技术相比，在本申请中，在购物者的购物商品进行结账时，获取人员身份信息以及人员监测图像，其中，人员身份信息用于表示每个购物者在进入超市时对应的身份信息，人员监测图像用于表示每个购物者在进入超市后的监测图像，然后对人员身份信息进行数据提炼，得到人员标识数据以及与人员标识数据相对应的目标设备，然后将人员标识数据与人员监测图像中对应的购物者进行标注，得到人员标识图像，然后基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制与购物位置相对应的购物识别装置对购物者所拿取商品进行识别，然后获取购物商品信息，其中，购物商品信息为购物识别装置识别购物者在购物过程中所拿取的购物商品信息，当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备，购物者通过目标设备接收到费用信息后，可直接通过目标设备对购买商品进行账单结算，无需进行排队等待，从而不仅提升了购物者的购物结算速率，而且也降低了购物商品结算过程中的人力成本。

附图说明

图1是本申请实施例一种智能结账处理方法的流程示意图；

图2是本申请实施例一种智能结账处理装置的方框示意图；

图3是本申请实施例POS收银机的示意图。

具体实施方式

以下结合附图1-3对本申请作进一步详细说明。

领域技术人员在阅读完本说明书后可以根据需要对本实施例做出没有创造性贡献的修改，但只要在本申请的权利要求范围内都受到专利法的保护。

为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

另外，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，一种智能结账处理方法、系统、POS收银机及储介质和/或B，可以表示：单独存在一种智能结账处理方法、系统、POS收银机及储介质，同时存在一种智能结账处理方法、系统、POS收银机及储介质和B，单独存在B这三种情况。另外，本文中字符“/”，如无特殊说明，一般表示前后关联对象是一种“或”的关系。

下面结合说明书附图对本申请实施例作进一步详细描述。

本申请实施例提供了一种智能结账处理方法，由POS收银机执行，该POS收银机可以为服务器也可以为终端设备，其中，该服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云计算服务的云服务器。终端设备可以是智能手机、平板电脑、笔记本电脑、台式计算机等，但并不局限于此，该终端设备以及服务器可以通过有线或无线通信方式进行直接或间接地连接，本申请实施例在此不做限制，如图1所示，该方法包括：

步骤S10，获取人员身份信息以及人员监测图像。

其中，人员身份信息用于表示每个购物者在进入超市时对应的身份信息，人员监测图像用于表示每个购物者在进入超市后的监测图像。

在本申请实施例中，采用人脸识别、体貌特征识别以及手机扫码等方式确认购物者在进入超市时的身份信息。其中，人员身份信息包括：面部特征信息、体貌特征信息、待支付信息以及终端设备信息。而在超市内部不同位置安装有视频监视器，其安装分布方式根据不同商品摆放类型以及每种商品类别在不同时间段内的人流量进行安装分布，例如：当商品摆放类型为货架摆放时，视频监视器则安装布局于货架与货架之间，以监测购物者的动向。

步骤S11，对人员身份信息进行数据提炼，得到人员标识数据以及与人员标识数据相对应的目标设备。

具体地，数据提取（Data Extraction）指根据一定的目的，从原始文献中摘录所需要的信息，以作进一步存储、换算和分析的过程。

在本申请实施例中，对人员身份信息中的终端设备信息、体貌特征信息以及待支付信息进行提取，得到该人员的人员标识数据以及目标设备。

步骤S12，将人员标识数据与人员监测图像中对应的购物者进行标注，得到人员标识图像。

在本申请实施例中，将人员标识数据与购物者对应标注的方式包括框选标注以及像素标注，在此不做限制。其中，框选标注是最常见、应用最广泛的图像数据标注方法，又叫拉框标注，它是在目标对象周围拟合紧密矩形的过程，像素标注就是将标签附加到图像上的过程， 这可以是整个图像的一个标签，也可以是图像中每一组像素的多个标签。 这些标签是由人工智能预先确定的，并被选中为计算机视觉模型提供图像中所显示的信息。

步骤S13，基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制与购物位置相对应的购物识别装置对购物者所拿取商品进行识别。

具体地，购物识别装置分别安装与每个货架以及其他商品摆放工具处，可以实时的识别从货架以及其他摆放工具处拿取商品时的商品信息，在本申请实施例中，购物识别装置包括摄像头，摄像头将拍摄的商品图像输入至预先训练好的商品识别神经网络模型中进行识别，得到该商品图像的商品信息，商品信息包括：商品名称、商品价格、商品上架时间、商品生产日期等。

当人员标识图像中购物者进入到货架或者其他商品摆放工具处时，启动购物识别装置进行商品信息识别，然后将识别到的商品信息发送至POS收银机，POS收银机接收到商品信息后，基于该商品信息对购物者的人员身份信息中的待支付信息进行更新。

步骤S14，获取购物商品信息。

其中，购物商品信息为购物识别装置识别购物者在购物过程中所拿取的购物商品信息。

步骤S15，当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备。

具体地，第一指定区域为距离超市出口20米-25米区域，此处区域设置有黄色标识线，通过视频监视器可以得知购物者是否到达进入黄色标识线处。当购物者进入到第一指定区域后，位于指定区域处的收银机器人对购物商品信息进行二次识别，并将识别到的商品信息发送至POS收银机，POS收银机将商品信息与购物商品信息进行比对验证，在确定购物商品信息与商品信息一致时，POS收银机对购物商品信息中的不同商品费用进行计算，生成费用信息，并将费用信息发送至人员身份信息中的目标设备，购物者通过目标设备对费用信息中的费用金额进行支付。

本申请实施例提供了一种智能结账处理方法，在购物者的购物商品进行结账时，获取人员身份信息以及人员监测图像，其中，人员身份信息用于表示每个购物者在进入超市时对应的身份信息，人员监测图像用于表示每个购物者在进入超市后的监测图像，然后对人员身份信息进行数据提炼，得到人员标识数据以及与人员标识数据相对应的目标设备，然后将人员标识数据与人员监测图像中对应的购物者进行标注，得到人员标识图像，然后基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制与购物位置相对应的购物识别装置对购物者所拿取商品进行识别，然后获取购物商品信息，其中，购物商品信息为购物识别装置识别购物者在购物过程中所拿取的购物商品信息，当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备，购物者通过目标设备接收到费用信息后，可直接通过目标设备对购买商品进行账单结算，无需进行排队等待，从而不仅提升了购物者的购物结算速率，而且也降低了购物商品结算过程中的人力成本。

本申请实施例的一种可能的实现方式，步骤S15具体包括：

当检测到购物者到达第一指定区域后，获取第一购物篮图像，第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对第一购物篮图像进行重叠识别，确定购物篮盛放商品是否存在重叠情况，若不存在，则对第一购物篮图像中的商品进行识别，生成商品验证信息，并基于商品验证信息对购物商品信息进行比对验证，得到商品验证结果；

根据商品验证结果确定购物商品信息是否发生变化。

具体地，当购物者推动购物篮到达第一指定区域时，收银机器人对购物篮进行图像拍摄，该图像拍摄角度包括购物篮正上方以及购物篮四周，再将上述拍摄角度的图像拍摄完成后，收银机器人上传至POS收银机，POS收银机对图像进行重叠检测，判断是否存在商品重叠情况，当不存在时，即表示当前购物篮内物品以全面呈现于图像中，因此POS收银机可直接对购物篮内的物品进行识别，得到商品验证结果。

本申请实施例的一种可能的实现方式，步骤S15具体包括：

对购物商品信息中的每种商品以及每种商品所对应的商品数量进行统计，得到商品类别数量；

将商品类别数量中的商品种类与预设商品类别价格中的商品种类进行匹配，得到每种商品的标价数据；

基于标价数据以及商品类别数量进行支付费用计算，生成费用信息。

具体地，预设商品类别价格为预先存储至POS收银机中的商品信息以及商品信息对应的商品价格，根据商品类别数量中的商品种类与商品信息中的商品种类，即可得知商品种类数量中所对应商品的标价数据，然后将标价数据与商品类别数量中的对应商品的数量进行乘法计算，得到购物者所购商品费用，根据购物者所购商品费用生成费用信息。

本申请实施例的一种可能的实现方式，对第一购物篮图像进行重叠识别，确定购物篮盛放商品是否存在重叠情况，还包括：

若购物篮盛放商品存在重叠情况，则将第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

根据重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，第二购物篮图像为购物篮内的商品重叠层数为预设层数时的购物篮图像，商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

对第二购物篮图像以及商品平铺图像进行识别，得到商品验证结果。

具体地，当收银机器人拍摄到的图像存在商品重叠现象时，POS收银机采用神经网络技术将第一购物篮图像输入至预先训练后的识别模型中，即预设识别模型中进行具体重叠识别，确定购物篮内商品的重叠层数以及位于购物篮内的重叠区域，然后根据重叠区域以及重叠层数生成抓取指令，控制收银机器人的机械手将重叠区域的商品抓取平铺摆放于预设位置。在本申请实施例中，预设位置为预先安放于收银机器人两侧的商品摆放桌。

在购物篮内商品的重叠层数为预设层数时，则停止对购物篮内的商品进行抓取，在本申请实施例中，预设层数为0层，即表示购物篮内的商品不存在重叠情况，此时收银机器人二次对购物篮内的商品以及商品摆放桌上的商品进行识别，得到重叠商品信息。然后将重叠商品信息与购物商品信息进行比对验证，得到对应的商品验证结果。

本申请实施例的一种可能的实现方式，将费用信息发送至与购物者相对应的目标设备，之后还包括：

获取购物者的支付状态，支付状态的初始状态为未支付状态；

判断支付状态是否由未支付状态转变为已支付状态，若支付状态由未支付状态转变已支付状态，则生成通行指令，控制开启超市出口通道；

若支付状态未发生转变，则检测购物者是否到达第二指定区域，若到达第二指定区域，则生成支付提示信息，并将支付提示信息发生至目标设备。

具体地，购物者若根据目标设备所接收到的费用信息对商品进行支付后，目标设备向POS收银机发送支付指令，此时POS收银机将购物者的待支付信息中的支付状态更新修改为已支付状态。

在本申请实施例中，第二指定区域为距离超市出口5米-10米处，该区域设置有红色标识线，超市出口处设置有通行闸门。当购物者到达第二指定区域后，若支付状态为已支付状态，则生成通行指令，控制通行闸门开启，若支付状态仍为未支付状态，则生成支付提示信息，并将支付提示信息发送至购物者的目标设备，已告知购物者及时支付商品费用。

本申请实施例的一种可能的实现方式，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，还包括：

若购物商品信息发生变化，则对购物商品信息进行计算分析，生成费用信息，并基于商品验证结果确定丢弃商品信息；

根据丢弃商品信息生成商品反馈信息，并将商品反馈信息发送至目标设备。

具体地，在购物者进行购买商品过程中，对于后续购物车内不想购买的商品，购物者常常会将该商品从购物车内放至其他地方，将此类商品定义为丢弃商品，为了超市后续更好的商品服务，本申请实施例采用商品反馈的形式了解购物者丢弃该商品的丢弃理由。

本申请实施例的一种可能的实现方式，根据重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，之后还包括：

判断商品平铺图像中是否存在散装商品，若存在，则对散装商品进行价格标签检测，确定散装商品是否价格标签；

若散装商品不存在价格标签，则生成计量称重指令，控制机械手对散装商品进行抓取称量，得到商品重量信息；

将商品重量信息按照散装商品的计量标价标准进行价格计算，得到散装商品费用。

上述实施例从方法流程的角度介绍一种智能结账处理方法，下述实施例从虚拟模块或者虚拟单元的角度介绍了一种智能结账处理装置，具体详见下述实施例。

本申请实施例提供一种智能结账处理装置，如图2所示，该智能结账处理装置20具体可以包括：第一获取模块21、数据提炼模块22、数据标定模块23、商品识别模块24、第二获取模块25以及费用计算模块26，其中，

第一获取模块21，用于获取人员身份信息以及人员监测图像，人员身份信息用于表示每个购物者在进入超市时对应的身份信息，人员监测图像用于表示每个购物者在进入超市后的监测图像；

数据提炼模块22，用于对人员身份信息进行数据提炼，得到人员标识数据以及与人员标识数据相对应的目标设备；

数据标定模块23，用于将人员标识数据与人员监测图像中对应的购物者进行标定，得到人员标识图像；

商品识别模块24，用于基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制与购物位置相对应的购物识别装置对购物者所拿取商品进行识别；

第二获取模块25，用于获取购物商品信息，购物商品信息为购物识别装置识别购物者在购物过程中所拿取的购物商品信息；

费用计算模块26，用于当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备。

本申请实施例的一种可能的实现方式，费用计算模块26在当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化时，具体用于：

当检测到购物者到达第一指定区域后，获取第一购物篮图像，第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对第一购物篮图像进行重叠识别，确定购物篮盛放商品是否存在重叠情况，若不存在，则对第一购物篮图像中的商品进行识别，生成商品验证信息，并基于商品验证信息对购物商品信息进行比对验证，得到商品验证结果；

根据商品验证结果确定购物商品信息是否发生变化。

本申请实施例的另一种可能的实现方式，费用计算模块26在对购物商品信息进行计算分析，生成费用信息时，具体用于：

对购物商品信息中的每种商品以及每种商品所对应的商品数量进行统计，得到商品类别数量；

将商品类别数量中的商品种类与预设商品类别价格中的商品种类进行匹配，得到每种商品的标价数据；

基于标价数据以及商品类别数量进行支付费用计算，生成费用信息。

本申请实施例的另一种可能的实现方式，装置20还包括：重叠识别模块、图像获取模块以及图像识别模块，其中，

重叠识别模块，用于若购物篮盛放商品存在重叠情况，则将第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

图像获取模块，用于根据重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，第二购物篮图像为购物篮内的商品重叠层数为预设层数时的购物篮图像，商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

图像识别模块，用于对第二购物篮图像以及商品平铺图像进行识别，得到商品验证结果。

本申请实施例的另一种可能的实现方式，装置20还包括：状态获取模块、状态判断模块以及支付提示模块，其中，

状态获取模块，用于获取购物者的支付状态，支付状态的初始状态为未支付状态；

所以状态判断模块，用于判断支付状态是否由未支付状态转变为已支付状态，若支付状态由未支付状态转变已支付状态，则生成通行指令，控制开启超市出口通道；

支付提示模块，用于当支付状态未发生转变时，检测购物者是否到达第二指定区域，若到达第二指定区域，则生成支付提示信息，并将支付提示信息发生至目标设备。

本申请实施例的另一种可能的实现方式，装置20还包括：丢弃确定模块以及信息发送模块，其中，

丢弃确定模块，用于当购物商品信息发生变化时，对购物商品信息进行计算分析，生成费用信息，并基于商品验证结果确定丢弃商品信息；

信息发送模块，用于根据丢弃商品信息生成商品反馈信息，并将商品反馈信息发送至目标设备。

本申请实施例的另一种可能的实现方式，装置20还包括：标签确定模块、商品计量模块以及价格计算模块，其中，

标签确定模块，用于判断商品平铺图像中是否存在散装商品，若存在，则对散装商品进行价格标签检测，确定散装商品是否价格标签；

商品计量模块，用于当散装商品不存在价格标签，生成计量称重指令，控制机械手对散装商品进行抓取称量，得到商品重量信息；

价格计算模块，用于将商品重量信息按照散装商品的计量标价标准进行价格计算，得到散装商品费用。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本申请实施例还从实体装置的角度介绍了一种POS收银机，如图3所示，图3所示的POS收银机300除常规配置装置外包括：处理器301和存储器303。其中，处理器301和存储器303相连，如通过总线302相连。可选地，POS收银机300还可以包括收发器304。需要说明的是，实际应用中收发器304不限于一个，该POS收银机300的结构并不构成对本申请实施例的限定。

处理器301可以是CPU（Central Processing Unit，中央处理器），通用处理器，DSP（Digital Signal Processor，数据信号处理器），ASIC（Application SpecificIntegrated Circuit，专用集成电路），FPGA（Field Programmable Gate Array，现场可编程门阵列）或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器301也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。

总线302可包括一通路，在上述组件之间传送信息。总线302可以是PCI（Peripheral Component Interconnect，外设部件互连标准）总线或EISA（ExtendedIndustry Standard Architecture，扩展工业标准结构）总线等。总线302可以分为地址总线、数据总线、控制总线等。为便于表示，图3中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

存储器303可以是ROM（Read Only Memory，只读存储器）或可存储静态信息和指令的其他类型的静态存储设备，RAM（Random Access Memory，随机存取存储器）或者可存储信息和指令的其他类型的动态存储设备，也可以是EEPROM（Electrically ErasableProgrammable Read Only Memory，电可擦可编程只读存储器）、CD-ROM（Compact DiscRead Only Memory，只读光盘）或其他光盘存储、光碟存储（包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等）、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。

存储器303用于存储执行本申请方案的应用程序代码，并由处理器301来控制执行。处理器301用于执行存储器303中存储的应用程序代码，以实现前述方法实施例所示的内容。

其中，POS收银机包括但不限于：移动电话、笔记本电脑、数字广播接收器、PDA（个人数字助理）、PAD（平板电脑）、PMP（便携式多媒体播放器）、车载终端（例如车载导航终端）等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。还可以为服务器等。图3示出的POS收银机仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。

本申请实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，当其在计算机上运行时，使得计算机可以执行前述方法实施例中相应内容。与现有技术相比，本申请实施例中，在购物者的购物商品进行结账时，获取人员身份信息以及人员监测图像，其中，人员身份信息用于表示每个购物者在进入超市时对应的身份信息，人员监测图像用于表示每个购物者在进入超市后的监测图像，然后对人员身份信息进行数据提炼，得到人员标识数据以及与人员标识数据相对应的目标设备，然后将人员标识数据与人员监测图像中对应的购物者进行标注，得到人员标识图像，然后基于人员标识图像确定每个购物者所在购物位置，并根据购物位置生成监测指令，控制与购物位置相对应的购物识别装置对购物者所拿取商品进行识别，然后获取购物商品信息，其中，购物商品信息为购物识别装置识别购物者在购物过程中所拿取的购物商品信息，当检测到购物者到达第一指定区域后，对购物商品信息进行比对验证，确定购物商品信息是否发生变化，若未发生变化，则对购物商品信息进行计算分析，生成费用信息，并将费用信息发送至与购物者相对应的目标设备，购物者通过目标设备接收到费用信息后，可直接通过目标设备对购买商品进行账单结算，无需进行排队等待，从而不仅提升了购物者的购物结算速率，而且也降低了购物商品结算过程中的人力成本。

应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

以上仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (8)

1.一种智能结账处理方法，其特征在于，在超市内部不同位置安装有视频监视器，其安装分布方式根据不同商品摆放类型以及每种商品类别在不同时间段内的人流量进行安装分布，且，在第一指定区域设置有机械手，能够将重叠区域的商品抓取出来，并且平铺至预设位置，包括：

获取人员身份信息以及人员监测图像，所述人员身份信息用于表示每个购物者在进入超市时对应的身份信息，所述人员监测图像用于表示每个所述购物者在进入超市后的监测图像；

对所述人员身份信息进行数据提炼，得到人员标识数据以及与所述人员标识数据相对应的目标设备；

将所述人员标识数据与所述人员监测图像中对应的购物者进行标注，得到人员标识图像；

基于所述人员标识图像确定每个所述购物者所在购物位置，并根据所述购物位置生成监测指令，控制与所述购物位置相对应的购物识别装置对所述购物者所拿取商品进行识别；

获取购物商品信息，所述购物商品信息为所述购物识别装置识别所述购物者在购物过程中所拿取的购物商品信息；

当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，若未发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并将所述费用信息发送至与所述购物者相对应的目标设备；

所述当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，包括：

当检测到所述购物者到达第一指定区域后，获取第一购物篮图像，所述第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对所述第一购物篮图像进行重叠识别，确定所述购物篮盛放商品是否存在重叠情况，若不存在，则对所述第一购物篮图像中的商品进行识别，生成商品验证信息，并基于所述商品验证信息对所述购物商品信息进行比对验证，得到商品验证结果；

根据所述商品验证结果确定所述购物商品信息是否发生变化；

若所述购物篮盛放商品存在重叠情况，则将所述第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至所述重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，所述第二购物篮图像为所述购物篮内的商品重叠层数为预设层数时的购物篮图像，所述商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

对所述第二购物篮图像以及所述商品平铺图像进行识别，得到商品验证结果。

2.根据权利要求1所述的一种智能结账处理方法，其特征在于，所述对所述购物商品信息进行计算分析，生成费用信息，包括：

对所述购物商品信息中的每种商品以及每种商品所对应的商品数量进行统计，得到商品类别数量；

将所述商品类别数量中的商品种类与预设商品类别价格中的商品种类进行匹配，得到每种商品的标价数据；

基于所述标价数据以及所述商品类别数量进行支付费用计算，生成费用信息。

3.根据权利要求1所述的一种智能结账处理方法，其特征在于，所述将所述费用信息发送至与所述购物者相对应的目标设备，之后还包括：

获取所述购物者的支付状态，所述支付状态的初始状态为未支付状态；

判断所述支付状态是否由未支付状态转变为已支付状态，若支付状态由未支付状态转变已支付状态，则生成通行指令，控制开启超市出口通道；

若支付状态未发生转变，则检测所述购物者是否到达第二指定区域，若到达所述第二指定区域，则生成支付提示信息，并将所述支付提示信息发生至所述目标设备。

4.根据权利要求1所述的一种智能结账处理方法，其特征在于，所述对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，还包括：

若所述购物商品信息发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并基于所述商品验证结果确定丢弃商品信息；

根据所述丢弃商品信息生成商品反馈信息，并将所述商品反馈信息发送至目标设备。

5.根据权利要求1所述的一种智能结账处理方法，其特征在于，所述根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，之后还包括：

判断所述商品平铺图像中是否存在散装商品，若存在，则对所述散装商品进行价格标签检测，确定所述散装商品是否价格标签；

若所述散装商品不存在价格标签，则生成计量称重指令，控制机械手对所述散装商品进行抓取称量，得到商品重量信息；

将所述商品重量信息按照所述散装商品的计量标价标准进行价格计算，得到所述散装商品费用。

6.一种智能结账处理装置，其特征在于，在超市内部不同位置安装有视频监视器，其安装分布方式根据不同商品摆放类型以及每种商品类别在不同时间段内的人流量进行安装分布，且，在第一指定区域设置有机械手，能够将重叠区域的商品抓取出来，并且平铺至预设位置，包括：

第一获取模块，用于获取人员身份信息以及人员监测图像，所述人员身份信息用于表示每个购物者在进入超市时对应的身份信息，所述人员监测图像用于表示每个所述购物者在进入超市后的监测图像；

数据提炼模块，用于对所述人员身份信息进行数据提炼，得到人员标识数据以及与所述人员标识数据相对应的目标设备；

数据标注模块，用于将所述人员标识数据与所述人员监测图像中对应的购物者进行标注，得到人员标识图像；

商品识别模块，用于基于所述人员标识图像确定每个所述购物者所在购物位置，并根据所述购物位置生成监测指令，控制与所述购物位置相对应的购物识别装置对所述购物者所拿取商品进行识别；

第二获取模块，用于获取购物商品信息，所述购物商品信息为所述购物识别装置识别所述购物者在购物过程中所拿取的购物商品信息；

费用计算模块，用于当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化，若未发生变化，则对所述购物商品信息进行计算分析，生成费用信息，并将所述费用信息发送至与所述购物者相对应的目标设备；

所述费用计算模块在当检测到所述购物者到达第一指定区域后，对所述购物商品信息进行比对验证，确定所述购物商品信息是否发生变化时，具体用于：

当检测到所述购物者到达第一指定区域后，获取第一购物篮图像，所述第一购物篮图像为购物者首次将购物篮移动至第一指定区域的图像；

对所述第一购物篮图像进行重叠识别，确定所述购物篮盛放商品是否存在重叠情况，若不存在，则对所述第一购物篮图像中的商品进行识别，生成商品验证信息，并基于所述商品验证信息对所述购物商品信息进行比对验证，得到商品验证结果；

根据所述商品验证结果确定所述购物商品信息是否发生变化；

述装置还包括：重叠识别模块、图像获取模块以及图像识别模块，其中，

所述重叠识别模块，用于若所述购物篮盛放商品存在重叠情况，则将所述第一购物篮图像输入至预设识别模型中进行具体重叠识别，得到重叠区域以及重叠层数；

所述图像获取模块，用于根据所述重叠区域以及重叠层数生成抓取指令，控制机械手将重叠区域的商品抓取平铺摆放至预设位置，直至所述重叠层数为预设层数时，获取第二购物篮图像以及商品平铺图像，所述第二购物篮图像为所述购物篮内的商品重叠层数为预设层数时的购物篮图像，所述商品平铺图像为机械手对商品进行抓取平铺摆放后的商品图像；

所述图像识别模块，用于对所述第二购物篮图像以及所述商品平铺图像进行识别，得到商品验证结果。

7.一种POS收银机，其特征在于，该POS收银机包括：

至少一个处理器；

存储器；

至少一个应用程序，其中至少一个应用程序被存储在存储器中并被配置为由至少一个处理器执行，所述至少一个应用程序配置用于：执行权利要求1～5任一项所述的一种智能结账处理方法。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，当所述计算机程序在计算机中执行时，令所述计算机执行权利要求1～5任一项所述的一种智能结账处理方法。