CN109360358A - 支付设备、支付系统及自助结账方法 - Google Patents

Abstract

本发明提供了一种支付设备、支付系统及自助结账方法，该支付设备包括：第一摄像头、第二摄像头、用于放置待结算对象的商品放置部件、支架和控制器，其中，第一摄像头和第二摄像头安装在支架上，支架与商品放置部件固定连接；第一摄像头的镜头朝下，且第一摄像头的视角至少覆盖商品放置部件；第二摄像头包括深度摄像头或红外摄像头，第二摄像头的镜头朝向待支付用户，且第二摄像头的视角至少覆盖待支付用户的脸部区域；控制器分别与第一摄像头、第二摄像头连接。本发明的支付设备能够使待支付用户进行自助支付，大大提高了结算效率，降低了人工成本，并且该支付设备可摆放于任意位置，使用方便，缓解了现有的结算方式效率低下的技术问题。

Description

支付设备、支付系统及自助结账方法

技术领域

本发明涉及电子设备的技术领域，尤其是涉及一种支付设备、支付系统及自助结账方法。

背景技术

随着生活水平的提高，超市购物已经成为人们主要的购物方式。用户在购物结算时，一般都是通过收银员进行结算，在这种方式下，由于是依赖人工的方式进行的结算，成本较高，另外，人工的方式导致效率比较低下，特别是在大型的超市，结算时用户往往需要排很久的队，导致用户的体验特别不好。

综上，现有的结算方式存在效率低下的技术问题。

发明内容

有鉴于此，本发明的目的包括：提供一种支付设备、支付系统及自助结账方法，该设备能够大大提高结算效率，降低人工成本。

第一方面，本发明实施例提供了一种支付设备，包括：第一摄像头、第二摄像头、用于放置待结算对象的商品放置部件、支架和控制器，其中，所述第一摄像头和第二摄像头安装在所述支架上，所述支架与所述商品放置部件固定连接；所述第一摄像头的镜头朝下，且所述第一摄像头的视角至少覆盖所述商品放置部件；所述第二摄像头包括深度摄像头或红外摄像头，所述第二摄像头的镜头朝向待支付用户，且所述第二摄像头的视角至少覆盖所述待支付用户的脸部区域；所述控制器分别与所述第一摄像头、所述第二摄像头连接。

进一步地，还包括重力传感器，所述重力传感器设置于所述商品放置部件的底部，且所述重力传感器与所述控制器连接。

进一步地，还包括红外传感器，所述红外传感器设置于所述商品放置部件的一侧，所述红外传感器与所述控制器连接。

进一步地，还包括距离传感器，所述距离传感器设置于所述第二摄像头的侧部，且所述距离传感器与所述第二摄像头的朝向相同，所述距离传感器与所述控制器连接。

进一步地，所述支架包括：第一支架和主支架，其中，所述第一支架和所述主支架按照预设角度固定连接，所述第一摄像头安装在所述第一支架上，所述第二摄像头安装在所述主支架上，所述主支架与所述商品放置部件固定连接。

进一步地，所述支架包括：第一支架、第二支架和主支架，其中，所述第一支架、所述第二支架均与所述主支架按照预设角度固定连接，所述第一摄像头安装在所述第一支架上，所述第二摄像头安装在所述第二支架上，所述主支架与所述商品放置部件固定连接。

进一步地，所述第一支架/第二支架为可伸缩的支架，所述主支架为可升降的支架。

进一步地，所述第二摄像头还包括一彩色摄像头。

进一步地，还包括：显示器或语音播报器；所述显示器与所述控制器连接，用于对支付提醒信息、支付结果信息、支付信息进行显示；所述语音播报器与所述控制器连接，用于对所述支付提醒信息、所述支付结果信息、所述支付信息进行播报。

进一步地，所述商品放置部件为置物板或托盘。

第二方面，本发明实施例还提供了一种支付系统，包括上述第一方面中所述的支付设备，还包括位于云端的学习服务器和数据库，所述学习服务器分别与所述数据库、所述支付设备的控制器连接。

第三方面，本发明实施例还提供了一种自助结账方法，应用于上述第二方面中的支付系统，包括：

如果判断出所述支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集所述待结算对象的图像信息；

通过商品识别模型对所述待结算对象的图像信息进行商品识别，得到所述待结算对象的图像信息中所包含的商品信息，其中，所述商品识别模型为学习服务器通过新商品的训练样本图像对上一次更新后的商品识别模型进行训练后得到的模型；当不存在所述新商品的训练样本图像时，所述商品识别模型为所述上一次更新后的商品识别模型；

使第二摄像头开始采集待支付用户的图像，对所述待支付用户的图像进行人脸识别，若人脸识别结果为所述待支付用户的图像中的人脸图像在预设人脸图像库中，则通过支付系统对所述商品信息中的待结算对象进行支付操作。

进一步地，所述方法还包括：

获取所述新商品的训练样本图像；

通过所述新商品的训练样本图像对所述上一次更新后的商品识别模型进行训练，训练之后得到所述商品识别模型。

进一步地，所述新商品的训练样本图像包括多张训练图像，每张所述训练图像为通过所述第一摄像头对放置在所述商品放置部件上的所述新商品的一个侧面进行拍摄得到的图像，且每张所述训练图像中标注有用于表征所述新商品的商品信息的标签。

进一步地，在使第一摄像头开始采集所述待结算对象的图像信息之前，所述方法还包括：

判断所述商品放置部件上是否放置有所述待结算对象，其中，如果判断出所述支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集所述待结算对象的图像信息。

进一步地，判断所述商品放置部件上是否放置有所述待结算对象包括：

当控制器接收到重力传感器、红外传感器或距离传感器的信号时，确定所述商品放置部件上放置有所述待结算对象。

进一步地，所述方法还包括：

在通过支付系统对所述商品信息中的待结算对象进行支付操作之前，通过显示器或语音播报器对支付提醒信息、支付结果信息、支付信息进行显示或播报。

进一步地，所述方法还包括：

支付操作完成后，关闭所述第一摄像头和所述第二摄像头。

本实施例提供了一种支付设备、支付系统及自助结账方法，该支付设备包括：第一摄像头、第二摄像头、用于放置待结算对象的商品放置部件、支架和控制器，其中，第一摄像头和第二摄像头安装在支架上，支架与商品放置部件固定连接；第一摄像头的镜头朝下，且第一摄像头的视角至少覆盖商品放置部件；第二摄像头包括深度摄像头或红外摄像头，第二摄像头的镜头朝向待支付用户，且第二摄像头的视角至少覆盖待支付用户的脸部区域；控制器分别与第一摄像头、第二摄像头连接。通过上述描述可知，在本发明实施例中，待支付用户只需将待结算对象置于商品放置部件上即可，第一摄像头便能采集待结算对象的图像信息，进而由控制器根据待结算对象的图像信息确定待结算对象的商品信息，进而生成购物清单和支付信息，最后再通过第二摄像头拍摄待支付用户的脸部区域，根据待支付用户的脸部区域图像由控制器控制待支付用户的支付账户对待结算对象进行支付。也就是本发明的支付设备能够使待支付用户进行自助支付，大大提高了结算效率，降低了人工成本，提升了用户体验，并且该支付设备可摆放于任意位置，使用方便，缓解了现有的结算方式效率低下的技术问题。

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种支付设备的结构示意图；

图2为本发明实施例提供的另一种支付设备的结构示意图；

图3为本发明实施例提供的可选地支付设备的结构示意图；

图4为本发明实施例提供的可选地支付设备的结构示意图；

图5为本发明实施例提供的带有显示器的支付设备的结构示意图；

图6为本发明实施例提供的一种支付系统的结构示意图；

图7为本发明实施例提供的一种自助结账方法的流程图。

图标：

1-支付设备；2-数据库；3-学习服务器；11-第一摄像头；12-第二摄像头；13-商品放置部件；14-支架；15-红外传感器；16-距离传感器；17-重力传感器；18-显示器；141-主支架；142-第一支架；143-第二支架。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

随着科学技术的发展，现有的支付设备越来越多样化。目前，普遍使用的支付设备都是需要通过收银员进行结算。具体过程为：收银员采用扫码设备对用户购买的商品进行扫码识别，扫码识别到的商品记录于与扫码设备连接的电脑上，生成购物清单，然后收银员告知用户需要支付的金额，再进行现金支付或者通过扫描用户的付款码进行支付。然而上述结算方式需要过多的人工操作过程，效率低下，并且人工成本高。虽然目前已有自助结账设备，但现有的自助结账设备通常需要用户自行对商品进行扫码识别，再将扫码识别后的商品放置于商品放置台上，扫码识别到的商品记录于与扫码设备连接的电脑上，生成购物清单，用户从电脑上读取需要支付的金额，再通过扫描用户的付款码进行支付。然而该结算方式步骤繁多，操作复杂，不仅机器容易报错，而且对于老年用户不够友好。

为改善此问题，本发明实施例提供了一种支付设备，能够提高结算效率，降低人工成本。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种支付设备进行详细介绍。

实施例1：

图1是根据本发明实施例的一种支付设备的结构示意图，如图1所示(图1中并未示出控制器)，该支付设备包括：第一摄像头11、第二摄像头12、用于放置待结算对象的商品放置部件13、支架14和控制器，其中，第一摄像头11和第二摄像头12安装在支架14上，支架14与商品放置部件13固定连接；第一摄像头11的镜头朝下，且第一摄像头11的视角至少覆盖商品放置部件13；第二摄像头12包括深度摄像头或红外摄像头，第二摄像头12的镜头朝向待支付用户，且第二摄像头12的视角至少覆盖待支付用户的脸部区域；控制器分别与第一摄像头11、第二摄像头12连接。

为了便于理解，对本发明的支付设备的实际应用过程以及工作原理进行描述说明：

待支付用户在完成待结算对象的选购时，将待结算对象放置于支付设备的商品放置部件13上，第一摄像头11可以实时采集商品放置部件13上的待结算对象的图像信息。若商品放置部件13上未放置待结算对象时，则第一摄像头11处于关机的状态；若商品放置部件13上放置有待结算对象时，则第一摄像头11此时就能采集得到待结算对象的图像信息，然后将待结算对象的图像信息发送至控制器，进而控制器对待结算对象的图像信息进行商品识别，得到商品信息，再根据商品信息生成购物清单和支付信息；然后，第二摄像头12拍摄待支付用户的脸部区域，将待支付用户的脸部区域图像发送至控制器，进而控制器对待支付用户的脸部区域图像进行人脸活体识别，确定第二摄像头12所拍摄的脸部区域图像是否来自于真实活体，如果来自于真实活体，则进一步对第二摄像头12所拍摄的脸部区域图像进行人脸识别，得到该脸部区域图像所对应的待支付用户的支付账号，最终，通过确定的支付账号对待结算对象进行支付。

本发明实施例通过活体人脸识别技术，可以防止他人用手机图像、视频、照片、面具、3D(3Dimensions，三维)打印人头等手段冒充待支付用户，保证了待支付用户的资金安全。

需要说明的是，只有事先在支付设备上进行了人脸图像登记以及支付系统登记的待支付用户才能使用人脸支付的方式对待结算对象进行支付。

本实施例提供了一种支付设备，该支付设备包括：第一摄像头11、第二摄像头12、用于放置待结算对象的商品放置部件13、支架14和控制器，其中，第一摄像头11和第二摄像头12安装在支架14上，支架14与商品放置部件13固定连接；第一摄像头11的镜头朝下，且第一摄像头11的视角至少覆盖商品放置部件13；第二摄像头12包括深度摄像头或红外摄像头，第二摄像头12的镜头朝向待支付用户，且第二摄像头12的视角至少覆盖待支付用户的脸部区域；控制器分别与第一摄像头11、第二摄像头12连接。通过上述描述可知，在本发明实施例中，待支付用户只需将待结算对象置于商品放置部件13上即可，第一摄像头11便能采集待结算对象的图像信息，进而由控制器根据待结算对象的图像信息确定待结算对象的商品信息，进而生成购物清单和支付信息，最后再通过第二摄像头12拍摄待支付用户的脸部区域，根据待支付用户的脸部区域图像由控制器控制待支付用户的支付账户对待结算对象进行支付。也就是本发明的支付设备能够使待支付用户进行自助支付，大大提高了结算效率，降低了人工成本，并且该支付设备可摆放于任意位置，使用方便，缓解了现有的结算方式效率低下的技术问题。

考虑到支付设备使用时的便捷性和通用性，发明人对支付设备的支架14进行了改进。

如图2所示，在一个可选地实施例中，支架14包括：第一支架142和主支架141，其中，第一支架142和主支架141按照预设角度固定连接，第一摄像头11安装在第一支架142上，第二摄像头12安装在主支架141上，主支架141与商品放置部件13固定连接。

如图3所示，在另一个可选地实施方式中，支架14包括：第一支架142、第二支架143和主支架141，其中，第一支架142、第二支架143均与主支架141按照预设角度固定连接，第一摄像头11安装在第一支架142上，第二摄像头12安装在第二支架143上，主支架141与商品放置部件13固定连接。

在该种实现方式中，如图3所示，第一支架142和第二支架143可以分别连接于主支架141的不同位置处；第一支架142和第二支架143也可以连接于主支架141的顶部位置；还可以是第一支架142和第二之间连接后，再与主支架141连接，本发明实施例对上述具体实现方式不进行限制。

另外，上述预设角度可调，并且，第一支架142/第二支架143为可伸缩的支架，主支架141为可升降的支架。

需要说明的是，第一摄像头11采集到待结算对象的图像信息后，将待结算对象的图像信息发送至控制器，控制器根据待结算对象的图像信息中待结算对象占图像的位置以及大小通过电机控制器控制电机(图中未示出电机和电机控制器)对第一支架142的伸出长度以及主支架141的高度进行自动调整；并且，第二摄像头12采集到待支付用户的脸部区域图像，将待支付用户的脸部区域图像发送至控制器，控制器根据待支付用户的脸部区域图像中待支付用户的脸部区域占脸部区域图像的位置以及大小通过电机控制器控制电机对第二支架143的伸出长度以及主支架141的高度进行自动调整。

此外，第一支架142/第二支架143与主支架扭接，当第一摄像头11的视角无法覆盖商品放置部件13时，可通过电机控制器控制电机调节第一支架142与主支架141之间的预设角度，使得第一摄像头11的视角能够完全覆盖商品放置部件13；同理，当第二摄像头12的视角无法覆盖待支付用户的脸部区域时，可通过电机控制器控制电机调节第二支架143与主支架141之间的预设角度，使得第二摄像头12的视角能够完全覆盖商品放置部件13。

这样的设计能够使得第一摄像头11对不同大小，不同放置位置的待结算对象进行图像的采集，并且能够使得第二摄像头12对不同身高，不同站位的待支付用户都进行很好的脸部区域图像采集，可满足不同用户的使用需求。

进一步地，发明人考虑到如果第一摄像头11实时对商品放置部件13进行拍摄，会造成电能的浪费。为此，发明人在支付设备上设置了红外传感器15，参考图4，红外传感器15设置于商品放置部件13的一侧，红外传感器15与控制器连接。

具体的，当红外传感器15检测到红外信号后，将红外信号发送至控制器，控制器根据红外信号确定出商品放置部件13上放置有待结算对象时，控制第一摄像头11开启，再采集待结算对象的图像信息。

上述的红外传感器15是一种直接检测商品放置部件13上是否放置有待结算对象的方式，本发明实施例还提供了另外一种间接反映商品放置部件13上是否放置有待结算对象的方式。可选地，参考图4，支付设备还包括：距离传感器16，距离传感器16设置于第二摄像头12的侧部，且距离传感器16与第二摄像头12的朝向相同，距离传感器16与控制器连接。

距离传感器16用于检测预设距离范围内是否存在待支付用户，其中，当确定得到预设距离范围内存在待支付用户时，第一摄像头11开始采集待结算对象的图像信息。

具体的，当距离传感器16检测到预设距离范围内存在待支付用户时，将该信息发送至控制器，控制器控制第一摄像头11开启，再采集待结算对象的图像信息。因为当预设范围内存在待支付用户时，从侧面可以反映出待支付用户正在商品放置部件13上放置待结算对象或者已经在商品放置部件13上放置了待结算对象，也即此时商品放置部件13已经有了待结算对象，即可开启第一摄像头11对待结算对象的图像信息进行采集。

具体实现时，可以在支付设备上既设置红外传感器15又设置距离传感器16，也可以只设置红外传感器15，或只设置距离传感器16。在同时设置红外传感器15和距离传感器16时，可以在红外传感器15检测到商品放置部件13上放置有待结算对象，并且距离传感器16检测到预设距离范围内存在待支付用户时，才控制第一摄像头11开启，使得第一摄像头11采集待结算对象的图像信息。

进一步地，发明人考虑到当商品放置部件13上放置有多个商品时，可能会存在商品之间的遮挡，这样第一摄像头11所采集的待结算对象的图像信息中无法包含所有的待结算对象，这样确定得到的商品信息会存在错误。为此，发明人在支付设备上设置了重力传感器17，参考图4，重力传感器17设置于商品放置部件13的底部，且重力传感器17与控制器连接。

具体的，重力传感器17将其检测到的商品放置部件13上的重力信息发送至控制器，同时，控制器对待结算对象的图像信息进行识别后，根据识别到的待结算对象的商品信息进行待结算对象的重力计算，得到待结算对象的重力计算值，将待结算对象的重力计算值与重力传感器17检测到的重力值进行对比，如果二者之间的差值在预设误差范围内，则确定识别到的待结算对象的商品信息正确；如果重力传感器17检测到的重力值与重力计算值之间的差值不在预设误差范围内，则支付设备会提醒待支付用户重新对待结算对象进行摆放，直至最后得到的重力传感器17检测到的重力值与重力计算值之间的差值在预设范围内为止。这样的实现方式能够使得整个的支付过程更加准确。

当然，上述的重力传感器17还是一种直接检测商品放置部件13上是否放置有待结算对象的方式，当重力传感器17检测到商品放置部件13上的重力信息后，将检测到的重力信息发送至控制器，控制器根据重力信息确定出商品放置部件13上放置有待结算对象时，控制第一摄像头11开启，第一摄像头11才开始采集待结算对象的图像信息，进而控制器再对第一摄像头11采集的待结算对象的图像信息进行识别以及后续的确认分析。

实现时，可以在支付设备上只设置重力传感器17，也可以在支付设备上设置重力传感器17的同时，也设置红外传感器15和距离传感器16，本发明实施例对其具体实现方式不进行限制。

进一步地，为了能够准确的得到待支付用户的脸部区域图像，第二摄像头12还包括一彩色摄像头。

上述人脸支付只是一种进行待结算对象支付的方式，本发明还提供了另外一种进行待结算对象支付的方式。当待结算对象没有进行人脸图像登记时，可采用如下的方式进行支付。可选地，参考图5(图中并未示出语音播报器)，该支付设备还包括：显示器18或语音播报器；显示器18与控制器连接，用于对支付提醒信息、支付结果信息、支付信息进行显示；语音播报器与控制器连接，用于对支付提醒信息、支付结果信息、支付信息进行播报。

具体的，当控制器根据商品信息生成购物清单和支付信息后，控制显示器18显示购物清单和支付信息，在待支付用户对购物清单进行确认后使待支付用户基于支付信息执行支付操作。

需要说明的是，支付信息可以为支付码，而支付码具体可以为支付二维码，本发明实施例对支付信息不进行具体限制。

当然，显示器18还能够对支付提醒信息、支付结果信息进行显示，从而指导用户进行支付操作。

此外，还可以在支付设备上设置语音播报器。语音播报器的存在能够对支付过程中的操作流程进行指导性的提示，方便用户对支付设备的使用。

在本发明实施例中，上述的商品放置部件13为置物板或托盘。

本发明的支付设备能够使得用户进行自助支付，大大提高了结算的效率，同时支付操作简单，能够在不同人群中推广使用。

实施例2：

图6是根据本发明实施例的一种支付系统的结构示意图，如图6所示，该支付系统包括：上述实施例1中的支付设备1，还包括位于云端的学习服务器3和数据库2，其中，学习服务器3分别与数据库2、支付设备1的控制器连接。

下面对该结构的工作过程进行详细描述：

当商家的商品种类增加时，可以将新商品放置在商品放置部件上，进而通过第一摄像头对新商品进行拍照(具体可以拍该新商品的不同侧面)，对拍摄得到的新商品的图像进行商品信息的标注，标注完成后，将携带标注信息的新商品的图像发送至数据库，学习服务器从数据库中读取该携带标注信息的新商品的图像并进行学习，得到新的商品识别模型，然后将新的商品识别模型同步至控制器的商品识别模块，这样，控制器的商品识别模块在对包含该新商品的待结算对象的图像信息进行识别时，便能够对其中的新商品进行准确的识别。当然，也可以将新商品放置在其他区域对新商品进行拍照，但是当训练图像和识别图像的背景、环境等信息相同时，有利于提高商品识别模块的识别准确率。

实施例3：

根据本发明实施例，提供了一种自助结账方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图7是根据本发明实施例的一种自助结账方法的流程图，如图7所示，该自助结账方法包括如下步骤：

步骤S702，如果判断出支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集待结算对象的图像信息；

在本发明实施例中，该自助结账方法应用于上述实施例2中的支付系统。

具体的，参考实施例1和实施例2，当判断出支付系统中的商品放置部件上放置有待结算对象，则第一摄像头开启，使第一摄像头开始采集待结算对象的图像信息，进而将采集得到的待结算对象的图像信息发送至控制器。

通过上述描述可知，在第一摄像头开始采集待结算对象的图像信息之前，该方法还包括：判断商品放置部件上是否放置有待结算对象，其中，如果判断出支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集待结算对象的图像信息。

具体的，当控制器接收到重力传感器、红外传感器或距离传感器的信号时，确定商品放置部件上放置有待结算对象。

步骤S704，通过商品识别模型对待结算对象的图像信息进行商品识别，得到待结算对象的图像信息中所包含的商品信息，其中，商品识别模型为学习服务器通过新商品的训练样本图像对上一次更新后的商品识别模型进行训练后得到的模型；当不存在新商品的训练样本图像时，商品识别模型为上一次更新后的商品识别模型；

在本发明实施例中，控制器在接收到待结算对象的图像信息后，其中的商品识别模型对待结算对象的图像信息进行商品识别，得到待结算对象的图像信息中所包含的商品信息。

具体的，商品识别模型为学习服务器通过新商品的训练样本图像对上一次更新后的商品识别模型进行训练后得到的模型；当不存在新商品的训练样本图像时，商品识别模型为上一次更新后的商品识别模型。

实现时，学习服务器获取新商品的训练样本图像的过程可参考上述实施例2中的具体描述，在此不再赘述。学习服务器在获取新商品的训练样本图像后，通过新商品的训练样本图像对上一次更新后的商品识别模型进行训练，训练之后得到商品识别模型。具体的，新商品的训练样本图像包括多张训练图像，每张训练图像为通过第一摄像头对放置在商品放置部件上的新商品的一个侧面进行拍摄得到的图像，且每张训练图像中标注有用于表征新商品的商品信息的标签。

具体的，上一次更新后的商品识别模型是基于机器学习算法搭建的模型。其中，机器学习算法包括但不限于以下算法：神经网络算法，深度强化学习方法，深度确定性策略梯度算法。当然，还可以包括其它机器学习算法，本发明实施例不对机器学习算法的形式进行限制。

步骤S706，使第二摄像头开始采集待支付用户的图像，对待支付用户的图像进行人脸识别，若人脸识别结果为待支付用户的图像中的人脸图像在预设人脸图像库中，则通过支付系统对商品信息中的待结算对象进行支付操作。

在商品识别模型识别得到商品信息后，第二摄像头开始采集待支付用户的图像，并对待支付用户的图像进行人脸识别，根据人脸识别结果确定对应的支付账号，通过支付系统对商品信息中的待结算对象进行支付操作。

本发明的自助结账方法能够使得用户自主完成支付，无需收银员的参与，大大提高了结算效率，减少了人工成本，同时通过图像识别进行支付的方式准确性好，也避免了收银员参与所产生的误操作。

在本发明的一个可选实施例中，该方法还包括：

在通过支付系统对商品信息中的待结算对象进行支付操作之前，通过显示器或语音播报器对支付提醒信息、支付结果信息、支付信息进行显示或播报。

在本发明的一个可选实施例中，该方法还包括：支付操作完成后，关闭第一摄像头和第二摄像头。

本发明实施例所提供的支付设备、支付系统及自助结账方法的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

另外，在本发明实施例的描述中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (18)

1.一种支付设备，其特征在于，包括：第一摄像头、第二摄像头、用于放置待结算对象的商品放置部件、支架和控制器，其中，所述第一摄像头和第二摄像头安装在所述支架上，所述支架与所述商品放置部件固定连接；

所述第一摄像头的镜头朝下，且所述第一摄像头的视角至少覆盖所述商品放置部件；所述第二摄像头包括深度摄像头或红外摄像头，所述第二摄像头的镜头朝向待支付用户，且所述第二摄像头的视角至少覆盖所述待支付用户的脸部区域；所述控制器分别与所述第一摄像头、所述第二摄像头连接。

2.根据权利要求1所述的设备，其特征在于，还包括重力传感器，所述重力传感器设置于所述商品放置部件的底部，且所述重力传感器与所述控制器连接。

3.根据权利要求1所述的设备，其特征在于，还包括红外传感器，所述红外传感器设置于所述商品放置部件的一侧，所述红外传感器与所述控制器连接。

4.根据权利要求1所述的设备，其特征在于，还包括距离传感器，所述距离传感器设置于所述第二摄像头的侧部，且所述距离传感器与所述第二摄像头的朝向相同，所述距离传感器与所述控制器连接。

5.根据权利要求1所述的设备，其特征在于，所述支架包括：第一支架和主支架，其中，所述第一支架和所述主支架按照预设角度固定连接，所述第一摄像头安装在所述第一支架上，所述第二摄像头安装在所述主支架上，所述主支架与所述商品放置部件固定连接。

6.根据权利要求1所述的设备，其特征在于，所述支架包括：第一支架、第二支架和主支架，其中，所述第一支架、所述第二支架均与所述主支架按照预设角度固定连接，所述第一摄像头安装在所述第一支架上，所述第二摄像头安装在所述第二支架上，所述主支架与所述商品放置部件固定连接。

7.根据权利要求5或6所述的设备，其特征在于，所述第一支架/第二支架为可伸缩的支架，所述主支架为可升降的支架。

8.根据权利要求1所述的设备，所述第二摄像头还包括一彩色摄像头。

9.根据权利要求1所述的设备，其特征在于，还包括：显示器或语音播报器；

所述显示器与所述控制器连接，用于对支付提醒信息、支付结果信息、支付信息进行显示；

所述语音播报器与所述控制器连接，用于对所述支付提醒信息、所述支付结果信息、所述支付信息进行播报。

10.根据权利要求1所述的设备，其特征在于，所述商品放置部件为置物板或托盘。

11.一种支付系统，其特征在于，包括权利要求1至10中任一项所述的支付设备，还包括位于云端的学习服务器和数据库，所述学习服务器分别与所述数据库、所述支付设备的控制器连接。

12.一种自助结账方法，应用于上述权利要求11中所述的支付系统，其特征在于，包括：

如果判断出所述支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集所述待结算对象的图像信息；

通过商品识别模型对所述待结算对象的图像信息进行商品识别，得到所述待结算对象的图像信息中所包含的商品信息，其中，所述商品识别模型为学习服务器通过新商品的训练样本图像对上一次更新后的商品识别模型进行训练后得到的模型；当不存在所述新商品的训练样本图像时，所述商品识别模型为所述上一次更新后的商品识别模型；

使第二摄像头开始采集待支付用户的图像，对所述待支付用户的图像进行人脸识别，若人脸识别结果为所述待支付用户的图像中的人脸图像在预设人脸图像库中，则通过支付系统对所述商品信息中的待结算对象进行支付操作。

13.根据权利要求12所述的方法，其特征在于，所述方法还包括：

获取所述新商品的训练样本图像；

通过所述新商品的训练样本图像对所述上一次更新后的商品识别模型进行训练，训练之后得到所述商品识别模型。

14.根据权利要求13所述的方法，其特征在于，所述新商品的训练样本图像包括多张训练图像，每张所述训练图像为通过所述第一摄像头对放置在所述商品放置部件上的所述新商品的一个侧面进行拍摄得到的图像，且每张所述训练图像中标注有用于表征所述新商品的商品信息的标签。

15.根据权利要求12所述的方法，其特征在于，在使第一摄像头开始采集所述待结算对象的图像信息之前，所述方法还包括：

判断所述商品放置部件上是否放置有所述待结算对象，其中，如果判断出所述支付系统中的商品放置部件上放置有待结算对象，则使第一摄像头开始采集所述待结算对象的图像信息。

16.根据权利要求15所述的方法，其特征在于，判断所述商品放置部件上是否放置有所述待结算对象包括：

当控制器接收到重力传感器、红外传感器或距离传感器的信号时，确定所述商品放置部件上放置有所述待结算对象。

17.根据权利要求12所述的方法，其特征在于，所述方法还包括：

在通过支付系统对所述商品信息中的待结算对象进行支付操作之前，通过显示器或语音播报器对支付提醒信息、支付结果信息、支付信息进行显示或播报。

18.根据权利要求12所述的方法，其特征在于，所述方法还包括：支付操作完成后，关闭所述第一摄像头和所述第二摄像头。