CN108682091A - 一种购物结算方法、装置和用户终端 - Google Patents

Abstract

本发明提供了一种购物结算方法、装置和用户终端，其中所述方法包括：获取用户购物的当次购物清单；对用户进行面部识别，以获取用户对应的购物倾向品种数据；根据购物倾向品种数据验证用户的当次购物清单，以确定当次购物清单中的商品品种的正确性，并生成最终确认购物清单；在确定当次购物清单的正确性后，获取最终确认购物清单对应的价格数据，以便于用户在支付界面根据当次购物清单的价格数据进行支付。对用户购买的商品进行基于用户本身的购物倾向品种数据的验证，通过验证提示用户排除选择错误或用户操作错误的商品，大大提高了用户购物清单的准确性，提高了购物结算的效率，提升了用户体验。

Description

一种购物结算方法、装置和用户终端

技术领域

本发明涉及计算机视觉商品识别、面部识别、重力感应技术领域，更具体地说，涉及一种购物结算方法、装置和用户终端。

背景技术

物质流通是人类社会的最基本要素。零售行业或直接面向消费者销售的相关行业(以下简称为零售行业或零售企业)作为当前物质流通的重要手段，需要雇佣大量的收银人员来实现购物结算，收银人员对消费者所购物品逐件的进行录入，录入完成后，与消费者共同完成支付。

而自动售货柜，则解决了零售行业的人工录入，人工结算的缺陷，是一种面向消费者的无人售货、自动结算的售卖方式。

目前，现有的自动售货柜的购物结算方法，均为对用户所购买的总价值进行叠加，最终得到总价格，从而直接显示于相关支付界面，以提示用户进行支付完成购买结算。但是用户在购物的过程中，往往存在用户操作错误的，或者由于商品说明不清楚导致用户选择错误的商品，最终用户只能在进行支付后才能发现，买错了商品，从而进入非常麻烦的退换货物的流程，而不会对用户选择下单的商品进行是否切合用户购买意愿的验证，导致购物结算经常出现错误，用户购物结算效率低，用户体验不好的问题。

发明内容

有鉴于此，本发明提供购物结算方法、装置和用户终端以解决现有技术的不足。

为解决上述问题，本发明提供一种购物结算方法，包括：

获取用户购物的当次购物清单；

对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

优选地，所述“根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单”包括：

调取所述当前购物清单中商品品种的预设3D图像数据；

获取用户图像数据，显示于显示屏中；

基于增强现实技术，在显示屏中的用户图像数据中，依据物品实际比例显示所述当前购物清单中商品品种的预设3D图像数据；

根据所述购物倾向品种数据验证所述用户的当次购物清单；

若所述当次购物清单中包含有与所述购物倾向品种数据不匹配的商品品种，则在显示屏中显示的所述当前购物清单中商品品种的预设3D图像数据对不匹配的商品品种进行提示；

根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单。

优选地，所述“根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单”包括：

根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，获取用户移除的商品品种和用户留存的商品品种；

根据所述用户留存的商品品种更新所述当前购物清单，删除所述当前购物清单中与所述用户留存的商品品种不匹配的商品品种，得到删除品种数据；

将所述删除品种数据与所述用户移除的商品品种匹配，若匹配通过，则生成最终确认购物清单。

优选地，所述“对用户进行面部识别，以获取所述用户对应的购物倾向品种数据”后，还包括：

采集用户的多角度的用户图像；

对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据；

对所述多角度面部图像数据依据人脸区域进行特征点定位，并基于定位后的特征点获取所述特征点对应的最小特征截图；

为每个所述最小特征截图设定标签，并生成特征数据包；

基于用户数据库，对所述用户的每个所述特征数据包中的最小特征截图进行相似度查询，生成相似性结果；

获取所述用户数据库中与所述用户的相匹配的相似性结果中最大值的用户数据，并且根据所述用户数据获取与所述用户数据对应的购物倾向品种数据。

优选地，所述“对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据”之前，还包括：

提示所述用户进行相应的面部动作；

获取所述用户的相应的面部动作的动态图像数据，并对所述动态图像数据进行人脸活体检测，以便于对所述多角度的用户图像数据进行人脸检测。

优选地，所述“获取用户购物的当次购物清单”之后，还包括：

通过红外温度传感器，获取所述用户的当前体温值；

将所述当前体温值与预设体温值进行比较，得出所述用户的情绪状态；

所述“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之前，还包括：

根据所述情绪状态，显示与所述情绪状态相对应的支付界面，以便于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，并且在所述支付界面根据所述当次购物清单的价格进行支付。

优选地，所述“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之后，还包括：

基于体感技术，获取所述用户的凌空肢体动作的支付方式选择指令；

根据所述凌空肢体动作的支付方式选择指令，调取与所述支付方式选择指令对应的支付方式，并将所述支付方式显示于所述支付界面，以供所述用户进行支付。

此外，为解决上述问题，本发明还提供一种购物结算装置，包括：获取模块、识别模块和验证模块；

所述获取模块，用于获取用户购物的当次购物清单；

所述识别模块，用于对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

所述验证模块，用于根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

所述获取模块，还用于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

此外，为解决上述问题，本发明还提供一种用户终端，包括存储器以及处理器，所述存储器用于存储购物结算程序，所述处理器运行所述购物结算程序以使所述用户终端执行如上述所述购物结算方法。

此外，为解决上述问题，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有购物结算程序，所述购物结算程序被处理器执行时实现如上述所述购物结算方法。

本发明提供的一种购物结算方法、装置和用户终端。其中，本发明所提供的方法在得到用户购物的当次购物清单后，通过对用户的面部识别从而获得与用户对应的购物倾向品种数据，从而获取到用户的相关购物倾向相关联的品种，并且，根据购物倾向品种数据对用户的当次购物清单进行验证，从而确定当次购物清单中的商品品种的正确性，以便于用户选择正确的商品，排除掉买错的商品，并根据最终确认购物清单进行结算。本发明对用户购买的商品进行基于用户本身的购物倾向品种数据的验证，通过验证提示用户排除选择错误或用户操作错误的商品，大大提高了用户购物清单的准确性，提高了购物结算的效率，提升了用户体验。

附图说明

图1为本发明购物结算方法实施例方案涉及的硬件运行环境的结构示意图；

图2为本发明购物结算方法第一实施例的流程示意图；

图3为本发明购物结算方法第二实施例的流程示意图；

图4为本发明购物结算方法第三实施例的流程示意图；

图5为本发明购物结算方法第四实施例的流程示意图；

图6为本发明购物结算方法第五实施例的流程示意图；

图7为本发明购物结算方法第六实施例的流程示意图；

图8为本发明购物结算方法第七实施例的流程示意图；

图9为本发明购物结算装置的功能模块示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

下面详细描述本发明的实施例，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。

在本发明中，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

如图1所示，图1是本发明实施例方案涉及的终端的硬件运行环境的结构示意图。

本发明实施例终端可以是的设于自动货柜机中的PC，也可以是智能手机、平板电脑、电子书阅读器、MP3播放器、MP4播放器、便携计算机等可移动式终端设备。此外，也可以为自动货柜机本身所带有的计算机硬件装置。

如图1所示，该终端可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏、输入单元比如键盘、遥控器，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

此外，终端包括图像采集设备，具体可以为摄像头，相机等。

可选地，终端还可以包括RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。此外，移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

本领域技术人员可以理解，图1中示出的终端并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机可读存储介质的存储器1005中可以包括操作系统、数据接口控制程序、网络连接程序以及购物结算程序。

本发明提供的一种购物结算方法、装置和用户终端。其中，所述方法对用户购买的商品进行基于用户本身的购物倾向品种数据的验证，通过验证提示用户排除选择错误或用户操作错误的商品，大大提高了用户购物清单的准确性，提高了购物结算的效率，提升了用户体验。

实施例1：

参照图2，本发明第一实施例提供一种购物结算方法，包括：

步骤S100，获取用户购物的当次购物清单；

在本实施例中，所针对的购物方式为通过自动货柜机、自动售货机的自动结算。此外，也可以应用于其他购物或结算场景，例如，在商场中或其他位置的无人购物结算。

上述，当次购物清单的生成，可以为通过用户在自动货柜机进行点选不同的商品品种和数量，从而生成当次购物清单，也可以为通过用户在移动终端进行选择相应的商品品种和数量，从而进行相应清单的生成。此外，也可以为其他的购物方式。

上述，当次购物清单中，可以包括但不限于用户所选择商品的品种、数量、型号规格、保质期、生产厂家等等信息。

步骤S200，对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

上述，购物倾向品种数据，为与用户对应的购物倾向的商品品种或除与用户对应的购物倾向的商品品种以外的商品品种，可以包括但不限于与不同用户的不同年龄段所对应的商品品种或以外的品种、不同性别对应的商品品种或以外的品种、不同肤色所对应的商品品种或以外的品种、不同头发颜色所对应的商品品种或以外的品种等等。此外，也可以为对于多次购买过的老用户，购物倾向品种数据为该老用户的多次购物习惯品种、购物的习惯数量等等。

通过对于用户的面部识别，从而可以得到用户的相关特征信息，例如肤色、年龄、发色、性别等等用户的特征信息，或者用户是否为多次购物的老用户，即为已注册过的用户，从而确定用户所保存的身份ID。通过用户的相关特征信息或者用户的身份ID，获取到用户的购物倾向品种数据。

此外，也可以对于用户进行人体图像识别，即对用户进行全身的特征识别，从而得到用户的衣着、体型、身高甚至预测出体重等相关人体特征信息，可进一步根据上述人体特征信息得到用户的购物倾向品种数据。

步骤S300，根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

上述，通过购物倾向品种数据对用户的当次购物清单进行验证，从而确定用户选择的商品的正确性，防止用户的误操作或者误选择，并且最终生成购物清单。

例如，通过面部识别，判定用户为老年男性，购物倾向品种数据中并不包括卫生巾、避孕套等用品，所以在该用户选择错误的商品即卫生巾和避孕套后，可通过购物倾向品种数据进行验证，提示用户所选择的商品是否正确。

再例如，通过面部识别，判定用户为年轻黑人女性，其购物倾向品种数据中并不包括防晒霜，所以在该用户选择错误的商品即防晒霜后，可通过购物倾向品种数据进行验证，提示用户所选择的商品是否正确。

步骤S400，在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

上述，在对于用户的当前购物清单验证后，得到最终确认购物清单，并获取得到价格数据，从而提示用户进行支付，即完成支付过程。

本实施例所提供的方法在得到用户购物的当次购物清单后，通过对用户的面部识别从而获得与用户对应的购物倾向品种数据，从而获取到用户的相关购物倾向相关联的品种，并且，根据购物倾向品种数据对用户的当次购物清单进行验证，从而确定当次购物清单中的商品品种的正确性，以便于用户选择正确的商品，排除掉买错的商品，并根据最终确认购物清单进行结算。本实施例对用户购买的商品进行基于用户本身的购物倾向品种数据的验证，通过验证提示用户排除选择错误或用户操作错误的商品，大大提高了用户购物清单的准确性，提高了购物结算的效率，提升了用户体验。

实施例2：

参照图3，本发明第二实施例提供一种购物结算方法，基于上述图2所示的第一实施例，所述步骤S300“根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单”包括：

步骤S310，调取所述当前购物清单中商品品种的预设3D图像数据；

上述，预设3D图像数据为每一个商品所对应的预设的图像数据，该图像数据为3D的图像数据，该预设3D图像数据可以为基于增强现实技术的可在视频图像中以当前实地位置及角度进行显示的图像。

上述，预设3D图像数据为预先存储的对应每一种类商品的图像文件，可以保存于自动售货机本地，也可以为保存于云端服务器中，在需要进行在图像中显示或实景显示时进行获取。

步骤S320，获取用户图像数据，显示于显示屏中；

上述，实时获取用户的用户图像数据，该用户图像数据为对于当前用户的视频直播的图像数据。上述，显示屏为本实施例所基于的购物结算装置中的显示屏，其中，购物结算装置可以为自动售货机。

上述，显示屏可以为触屏显示屏，也可以为非触屏显示屏。

上述，用户的用户图像数据为实时在显示屏中进行显示。

上述，用户图像数据可以为用户的实时的全身图像，也可以为用户的半身图像，此外，还包括除了用户的用户图像数据中的用户全身或半身图像之外的用户身后和身旁的空间。

步骤S330，基于增强现实技术，在显示屏中的用户图像数据中，依据物品实际比例显示所述当前购物清单中商品品种的预设3D图像数据；

上述，需要说明的是，增强现实技术(Augmented Reality，简称AR)，是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D模型的技术，这种技术的目标是在屏幕上把虚拟世界套在现实世界并进行互动。增强现实技术，它是一种将真实世界信息和虚拟世界信息“无缝”集成的新技术，是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息,声音,味道,触觉等),通过电脑等科学技术，模拟仿真后再叠加，将虚拟的信息应用到真实世界，被人类感官所感知，从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。

上述，在本实施例中，在显示屏中所显示的用户图像数据中的用户身体的相应位置，对当前购物清单中的商品的预设3D图像数据进行显示。其中，相应位置可以为用户图像数据中的用户身体的周围，也可以为身上的相应位置。

上述，预设3D图像数据在用户图像数据中显示的大小比例为以人体在用户图像数据中的显示比例为基准的比例，即与人体图像的相应的比例。

在本实施例中，摄像机摄取的真实世界图像(用户图像数据，包括用户的身体的全身或半身图像，以及用户周围的实景)输入到计算机中，与计算机图形系统产生的虚拟景象合成，并将预设3D图像数据实际比例(以用户身体比例为基准)输出到屏幕显示器。用户从屏幕上看到最终的增强场景图像。

以实际比例显示当前购物清单中商品品种的预设3D图像数据，可使用户更加真实的体会到所购买物品的样式、情况、大小等内容，使用户有更加直观的体验，从而可更加准确的判断该商品品种是否为用户需要购买的商品。例如，自动售货机中所售的商品为泳装，用户购买的泳装可通过AR技术显示于用户的实景图像中，使用户以实际比例观察泳装的大小、样式，甚至可以将图像设置到用户图像数据中的用户身体上，进行虚拟的试穿，使用户更好的通过虚拟模式体验商品，大大提高了用户体验，为用户的购物过程增加了乐趣，同时提高了用户对商品选择的准确度。

步骤S340，根据所述购物倾向品种数据验证所述用户的当次购物清单；

步骤S350，若所述当次购物清单中包含有与所述购物倾向品种数据不匹配的商品品种，则在显示屏中显示的所述当前购物清单中商品品种的预设3D图像数据对不匹配的商品品种进行提示；

上述，对当次购物清单进行验证，具体的，将当次购物清单与用户对应的购物倾向品种数据中的清单进行比对，查看当次购物清单中是否存在与用户的购买意愿不相符合的商品，若存在，则在显示屏中显示的预设3D图像数据中对该不符合的商品进行提示，以便于用户进行判断。

例如，通过摄像机获取包括用户身体在内的用户图像数据并在自动售货机中的显示屏上进行显示该实景，并根据当次购物清单在实景中进行显示清单中的所有品种的商品的预设3D图像数据，以便于用户进行观察，清单中包含有男式衣服、男鞋、女泳装；该用户为中年男子用户，基于该用户的购物倾向品种数据，判断其中女泳装为与该用户的购买意愿可能存在不相符合问题的商品，并在用户图像数据中的女泳装的预设3D图像数据显示红色叹号，并通过语音提示用户，让用户进行确认是否该商品为用户需要购买的商品。

步骤S360，根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单。

凌空体感指令为基于图像体感技术的用户操作指令。需要说明的是，体感技术，在于人们可以很直接地使用肢体动作，与周边的装置或环境互动，而无需使用任何复杂的控制设备，便可让人们身历其境地与内容做互动。

上述，凌空体感指令可以为用户的通过手部的凌空拖拽指令，也可以为通过其他肢体动作完成的指令。例如，通过凌空拖拽，将显示屏中显示的用户不想购买的泳装，扔进图像中的回收站中，从而完成对于当前购物清单中的改泳装的删除。

上述，凌空体感指令可以为四肢的相应动作，还可以为躯干的相应动作所完成的指令，例如，摇头、扭腰、扭屁股等等动作。

进而删除相应的商品品种，并生成最终确认购物清单。

在本实施例中，通过增强现实技术对用户的当前购物清单中的商品品种进行实际比例的显示，并且，根据购物倾向品种数据，在用户图像数据的实景图像中，对用户的当前购物清单中的所有的商品品种的预设3D图像数据加以提示，从而提示用户去验证商品的正确性，使用户更加直观的看出所购的物品是否为需要购买的商品，大大提高了用户体验；此外，通过体感技术进行对于在实景中显示的商品的选择和删除，更加方便于用户对当前购物清单的修改，使购物过程更加直观，提高了用户体验，增加了购物的乐趣。

实施例3：

参照图4，本发明第三实施例提供一种购物结算方法，基于上述图3所示的第二实施例，所述步骤S360“根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单”包括：

步骤S361，根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，获取用户移除的商品品种和用户留存的商品品种；

上述，用户移除的商品品种，为用户通过肢体动作的凌空体感指令操作，对用户图像数据中的商品品种进行移除的商品品种。其中，移除可以为，放置于虚拟的回收站中的商品品种。

步骤S362，根据所述用户留存的商品品种更新所述当前购物清单，删除所述当前购物清单中与所述用户留存的商品品种不匹配的商品品种，得到删除品种数据；

上述，对当前购物清单进行更新，删除掉其中与用户留存的商品品种不匹配的商品品种，从而得到删除品种数据。

删除品种数据为对当前购物清单进行更新时所删除的品种数据，可以包括品种的名称、数量、规格等信息。

步骤S363，将所述删除品种数据与所述用户移除的商品品种匹配，若匹配通过，则生成最终确认购物清单。

上述，将删除品种数据与用户移除的商品品种进行比较，判断删除品种数据与用户移除的商品品种是否匹配，如果完全匹配，则判定当前购物清单的更新是正确的，则生成最终确认购物清单。

在本实施例中，通过当前购物清单与用户留存的商品品种进行比较，并且再将删除品种数据与用户移除的商品品种进行比较，从而最终确定用户更新的当前购物清单是否正确，大大提高了对于用户购物清单的验证的准确度，以防止出现误删或误操作导致清单出现漏删、多删、操作失误、数据更新同步失误的问题。

实施例4：

参照图5，本发明第四实施例提供一种购物结算方法，基于上述图2所示的第一实施例，所述步骤S200“对用户进行面部识别，以获取所述用户对应的购物倾向品种数据”后，还包括：

步骤S500，采集用户的多角度的用户图像；

上述，多角度的用户图像可以通过多个不同角度的摄像头进行采集获取。

通过多角度的用户图像的采集，以确定摄像头前为活体的人在进行图像采集。

步骤S600，对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据；

上述，多角度用户图像数据为用户的全身的实景图像，通过对其进行人脸检测，从而定位到用户图像数据中的人脸，从而将人脸图像提取出，以得到多角度面部图像数据。

上述，多角度面部图像数据可以为不同角度的用户对应的多个人脸图像。

步骤S700，对所述多角度面部图像数据依据人脸区域进行特征点定位，并基于定位后的特征点获取所述特征点对应的最小特征截图；

步骤S800，为每个所述最小特征截图设定标签，并生成特征数据包；

步骤S900，基于用户数据库，对所述用户的每个所述特征数据包中的最小特征截图进行相似度查询，生成相似性结果；

上述，对多角度面部图像数据依据人脸区域进行特征点定位，并基于定位后的特征点获取特征点对应的最小特征截图，并为每一个最小特征截图创建标签，生成数据包。从而在于云端服务器的数据交互过程中，大大提高了数据传输的稳定性。将多个大幅的图像，截取为不同特征定位点对应的截图，从而在传输过程中，降低带宽的占用，以占用较小空间的数据包代替大幅的图像，提高了传输效率。

步骤S1000，获取所述用户数据库中与所述用户的相匹配的相似性结果中最大值的用户数据，并且根据所述用户数据获取与所述用户数据对应的购物倾向品种数据。

上述，通过对于用户的多角度图像数据的获取，在进行对用户的面部识别过程中，首先获取用户的多角度的面部图像，从而在一定程度上判定用户的真实性，即可判断出用户为真实的人。此外，通过对多角度面部图像数据依据人脸区域进行特征点定位，并基于定位后的特征点获取特征点对应的最小特征截图，并为每一个最小特征截图创建标签，生成数据包，从而在传输过程中，降低带宽的占用，以占用较小空间的数据包代替大幅的图像，提高了传输效率。

实施例5：

参照图6，本发明第五实施例提供一种购物结算方法，基于上述图5所示的第四实施例，所述步骤S600“对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据”之前，还包括：

步骤S1100，提示所述用户进行相应的面部动作；

步骤S1200，获取所述用户的相应的面部动作的动态图像数据，并对所述动态图像数据进行人脸活体检测，以便于对所述多角度的用户图像数据进行人脸检测。

上述，在显示屏中或通过语音提示用户对摄像头进行相应的面部动作，例如，摇头、眨眼、点头、歪头等动作。通过相应的面部动作，获取动态图像数据，从而进行人脸活体检测，以判断出当前摄像头前的被识别用户为活体用户。

上述，人脸活体检测技术可以采用Face++、google技术、百度人脸活体检测技术等技术。通过人脸活体检测技术，以达到对于当前摄像头前的被识别用户为活体用户的判断，提高准确度，防止利用照片、视频等手段以假乱真，提高数据交互的安全性。

实施例6：

参照图7，本发明第五实施例提供一种购物结算方法，基于上述图2所示的第一实施例，所述步骤S100“获取用户购物的当次购物清单”之后，还包括：

步骤S1300，通过红外温度传感器，获取所述用户的当前体温值；

步骤S1400，将所述当前体温值与预设体温值进行比较，得出所述用户的情绪状态；

情绪，是对一系列主观认知经验的通称，是多种感觉、思想和行为综合产生的心理和生理状态。而情绪状态包括高兴、低落、沮丧、痛苦、疼痛等等状态。用户在不同的情绪状态中，购物的状态不同的，例如痛苦的时候，在高兴的时候。在本实施例中，通过红外温度传感器，实时或定时获取当前的用户的当前体温值，以判断出用户的情绪状态。

预设体温值为系统预设的不同体温值范围与情绪状态对应关系。

所述步骤S400“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之前，还包括：

步骤S1500，根据所述情绪状态，显示与所述情绪状态相对应的支付界面，以便于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，并且在所述支付界面根据所述当次购物清单的价格进行支付。

上述，通过判断出用户的情绪状态，从而显示与用户的情绪状态相对应的支付界面，并且，可进行相应的语音提示甚至相应的商品的推荐，例如，检测出用户体温升高，判断为用户情绪状态为痛苦，则可在支付界面显示为关切的支付界面或者医务人员的图像的支付界面，并且，通过语音提示“您是不是有些不舒服？”等。再例如，判断出用户的情绪状态为沮丧，则显示的支付界面为带有正能量、热血的图像的支付界面。与用户情绪状态相匹配的不同的支付界面的显示，提高了用户体验，增加了购物过程的乐趣性，增加了购物设备的人性化智能化的功能。

实施例7：

参照图8，本发明第五实施例提供一种购物结算方法，基于上述图2所示的第一实施例，所述步骤S400“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之后，还包括：

步骤S1600，基于体感技术，获取所述用户的凌空肢体动作的支付方式选择指令；

步骤S1700，根据所述凌空肢体动作的支付方式选择指令，调取与所述支付方式选择指令对应的支付方式，并将所述支付方式显示于所述支付界面，以供所述用户进行支付。

上述，支付方式可以包括支付宝支付、微信支付、银联卡支付、visa支付、面部识别支付、投币支付等等方式。

上述，凌空肢体动作的支付方式选择指令可以为挥手、抬脚、扭动肢体等等动作。

通过用户的基于体感技术的凌空肢体动作的支付方式选择指令，进而选择相应的支付方式，并显示于支付界面供用户支付结算。提高了用户支付的趣味性，可使用户更加直观的对于支付流程进行操控，为用户的支付流程提供方便，提高了用户体验。

此外，本发明还提供一种购物结算装置，包括：获取模块10、识别模块20和验证模块30；

所述获取模块10，用于获取用户购物的当次购物清单；

所述识别模块20，用于对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

所述验证模块30，用于根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

所述获取模块10，还用于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

此外，本发明还提供一种用户终端，包括存储器以及处理器，所述存储器用于存储购物结算程序，所述处理器运行所述购物结算程序以使所述用户终端执行如上述所述购物结算方法。

此外，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有购物结算程序，所述购物结算程序被处理器执行时实现如上述所述购物结算方法。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种购物结算方法，其特征在于，包括：

获取用户购物的当次购物清单；

对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

2.如权利要求1所述购物结算方法，其特征在于，所述“根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单”包括：

调取所述当前购物清单中商品品种的预设3D图像数据；

获取用户图像数据，显示于显示屏中；

基于增强现实技术，在显示屏中的用户图像数据中，依据物品实际比例显示所述当前购物清单中商品品种的预设3D图像数据；

根据所述购物倾向品种数据验证所述用户的当次购物清单；

若所述当次购物清单中包含有与所述购物倾向品种数据不匹配的商品品种，则在显示屏中显示的所述当前购物清单中商品品种的预设3D图像数据对不匹配的商品品种进行提示；

根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单。

3.如权利要求2所述购物结算方法，其特征在于，所述“根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，修改所述当次购物清单中的商品品种，并生成最终确认购物清单”包括：

根据所述用户的对于所述当前购物清单中商品品种的预设3D图像数据的凌空体感指令，获取用户移除的商品品种和用户留存的商品品种；

根据所述用户留存的商品品种更新所述当前购物清单，删除所述当前购物清单中与所述用户留存的商品品种不匹配的商品品种，得到删除品种数据；

将所述删除品种数据与所述用户移除的商品品种匹配，若匹配通过，则生成最终确认购物清单。

4.如权利要求1所述购物结算方法，其特征在于，所述“对用户进行面部识别，以获取所述用户对应的购物倾向品种数据”后，还包括：

采集用户的多角度的用户图像；

对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据；

对所述多角度面部图像数据依据人脸区域进行特征点定位，并基于定位后的特征点获取所述特征点对应的最小特征截图；

为每个所述最小特征截图设定标签，并生成特征数据包；

基于用户数据库，对所述用户的每个所述特征数据包中的最小特征截图进行相似度查询，生成相似性结果；

获取所述用户数据库中与所述用户的相匹配的相似性结果中最大值的用户数据，并且根据所述用户数据获取与所述用户数据对应的购物倾向品种数据。

5.如权利要求4所述购物结算方法，其特征在于，所述“对所述多角度的用户图像数据进行人脸检测，以获得多角度面部图像数据”之前，还包括：

提示所述用户进行相应的面部动作；

获取所述用户的相应的面部动作的动态图像数据，并对所述动态图像数据进行人脸活体检测，以便于对所述多角度的用户图像数据进行人脸检测。

6.如权利要求1所述购物结算方法，其特征在于，所述“获取用户购物的当次购物清单”之后，还包括：

通过红外温度传感器，获取所述用户的当前体温值；

将所述当前体温值与预设体温值进行比较，得出所述用户的情绪状态；

所述“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之前，还包括：

根据所述情绪状态，显示与所述情绪状态相对应的支付界面，以便于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，并且在所述支付界面根据所述当次购物清单的价格进行支付。

7.如权利要求1所述购物结算方法，其特征在于，所述“在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付”之后，还包括：

基于体感技术，获取所述用户的凌空肢体动作的支付方式选择指令；

根据所述凌空肢体动作的支付方式选择指令，调取与所述支付方式选择指令对应的支付方式，并将所述支付方式显示于所述支付界面，以供所述用户进行支付。

8.一种购物结算装置，其特征在于，包括：获取模块、识别模块和验证模块；

所述获取模块，用于获取用户购物的当次购物清单；

所述识别模块，用于对用户进行面部识别，以获取所述用户对应的购物倾向品种数据；

所述验证模块，用于根据所述购物倾向品种数据验证所述用户的当次购物清单，以确定所述当次购物清单中的商品品种的正确性，并生成最终确认购物清单；

所述获取模块，还用于在确定所述当次购物清单的正确性后，获取所述最终确认购物清单对应的价格数据，以便于所述用户在支付界面根据所述当次购物清单的价格数据进行支付。

9.一种用户终端，其特征在于，包括存储器以及处理器，所述存储器用于存储购物结算程序，所述处理器运行所述购物结算程序以使所述用户终端执行如权利要求1-7中任一项所述购物结算方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有购物结算程序，所述购物结算程序被处理器执行时实现如权利要求1-7中任一项所述购物结算方法。