CN110276617A - 无人便利店进门识别方法、装置、设备和存储介质 - Google Patents
无人便利店进门识别方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN110276617A CN110276617A CN201910550960.8A CN201910550960A CN110276617A CN 110276617 A CN110276617 A CN 110276617A CN 201910550960 A CN201910550960 A CN 201910550960A CN 110276617 A CN110276617 A CN 110276617A
- Authority
- CN
- China
- Prior art keywords
- face
- recognition
- user
- picture
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q20/00—Payment architectures, schemes or protocols
- G06Q20/38—Payment protocols; Details thereof
- G06Q20/40—Authorisation, e.g. identification of payer or payee, verification of customer or shop credentials; Review and approval of payers, e.g. check credit lines or negative lists
- G06Q20/401—Transaction verification
- G06Q20/4014—Identity check for transactions
- G06Q20/40145—Biometric identity checks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07F—COIN-FREED OR LIKE APPARATUS
- G07F7/00—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus
- G07F7/08—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus by coded identity card or credit card or other personal identification means
- G07F7/10—Mechanisms actuated by objects other than coins to free or to actuate vending, hiring, coin or paper currency dispensing or refunding apparatus by coded identity card or credit card or other personal identification means together with a coded signal, e.g. in the form of personal identification information, like personal identification number [PIN] or biometric data
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Accounting & Taxation (AREA)
- Theoretical Computer Science (AREA)
- Finance (AREA)
- General Business, Economics & Management (AREA)
- Strategic Management (AREA)
- Computer Security & Cryptography (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Multimedia (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例公开了一种无人便利店进门识别方法、装置、设备和存储介质，该方法包括当检测到用户进门事件触发时，获取当前采集的人脸画面；对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。本方案提高了用户身份验证效率，便于用户快速进入便利店。
Description
技术领域
本申请实施例涉及计算机技术领域，尤其涉及一种无人便利店进门识别方法、装置、设备和存储介质。
背景技术
本部分旨在为权利要求书中陈述的本申请的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
随着科技的发展，无人便利店应运而生。无人便利店通常指用户在购物过程中全程无需服务人员的参与即可完成物品的购买。用户进入无人便利店后，进行物品的自主选购，物品选择完毕后可自行离开便利店，系统后台会自动完成物品的结算。
用户在进入无人便利店时，通常会进行用户身份的验证，如用户在便利店门禁门口处进行身份的识别，身份验证成功后门禁开启，用户可以进入到无人便利店中进行物品选择。然而，现有的进门识别验证的机制存在缺陷，需要改进。
发明内容
本发明实施例提供了一种无人便利店进门识别方法、装置、设备和存储介质，提高了用户身份验证效率，便于用户快速进入便利店。
第一方面，本发明实施例提供了一种无人便利店进门识别方法，该方法包括：
当检测到用户进门事件触发时，获取当前采集的人脸画面；
对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
第二方面，本发明实施例还提供了一种无人便利店进门识别装置，该装置包括：
信息采集模块，用于当检测到用户进门事件触发时，获取当前采集的人脸画面；
人脸检测模块，用于对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
信息处理模块，用于对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
绑定模块，用于将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
第三方面，本发明实施例还提供了一种设备，该设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明实施例所述的无人便利店进门识别方法。
第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行本发明实施例所述的无人便利店进门识别方法。
本发明实施例中，当检测到用户进门事件触发时，获取当前采集的人脸画面；对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。本方案提高了用户身份验证效率，便于用户快速进入便利店。
附图说明
图1为本发明实施例提供的一种无人便利店进门识别方法的流程图；
图2为本发明实施例提供的另一种无人便利店进门识别方法的流程图；
图3为本发明实施例提供的另一种无人便利店进门识别方法的流程图；
图4为本发明实施例提供的另一种无人便利店进门识别方法的流程图；
图5为本发明实施例提供的另一种无人便利店进门识别方法的流程图；
图6为本发明实施例提供的一种无人便利店进门识别装置的结构框图；
图7为本发明实施例提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明实施例，而非对本发明实施例的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明实施例相关的部分而非全部结构。
图1为本发明实施例提供的一种无人便利店进门识别方法的流程图，本实施例可适用于无人便利店，该方法可以由终端设备或服务器执行，具体包括如下步骤：
步骤S101、当检测到用户进门事件触发时，获取当前采集的人脸画面。
在一个实施例中，无人便利店设置有门禁装置，该门禁装置设置在便利店入口处，用户可自行通过门禁并进入到便利店内部进行物品选择，便利店内部设置有多个放置物品的货架，货架摆放有供用户选择的物品。用户选购物品完毕后，可通过门禁装置或出口离开便利店。
在一个实施例中，在用户通过门禁装置进入便利店时对用户身份进行验证。其中，在用户进门时触发用户进门事件。示例性的，可以通过在门禁装置处设置传感器以检测是否有用户存在，当检测到用户存在时相应触发用户进门事件，该传感器可以是红外传感器、重力传感器、摄像头等。
当检测到用户进门事件触发时，获取当前采集的人脸画面。其中，采集的人脸画面包括门禁装置处设置的摄像头拍摄的用户的图像画面，该摄像头可设置在门禁控制台中，以拍摄门禁附近区域站立的用户的人脸。在一个实施例中，当检测到用户进门事件触发时，开启摄像头进行人脸画面的拍摄，拍摄内容可传输至服务器或门禁控制台的处理系统进行处理，同时该拍摄的具体画面实时显示在门禁装置处集成的显示屏幕中。
步骤S102、对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框。
在一个实施例中，在获取到当前采集的人脸画面后，对该人脸画面进行检测，以识别出当前人脸画面中存在的人脸。具体的，确定人脸画面中存在的人脸的方法可以采用参考模板法，将采集的人脸画面和标准人脸参考模板进行比对以确定出人脸画面人脸所在的位置；或者，提取人脸画面的特征信息，判断该特征信息中是否存在满足人脸结构分布特征的部分，找到满足人脸结构分布特征的部分即确定出相应的人脸所在位置。还可以采用模式识别中的神经网络算法检测当前人脸画面中出现的人脸。在确定出人脸在当前人脸画面中的位置后，在该位置处相应生成人脸识别框，如沿人脸头部位置的边缘生成线条实体框，该实体框同步绘制在显示的人脸画面中，即用户在门禁装置处可通过集成的显示屏看到自己的人脸图像以及对应的人脸识别框。
在一个实施例中，如果未检测到人脸画面存在人脸，则继续进行检测直到检测到人脸；如果检测到人脸画面存在一张人脸，则进行该人脸的识别；如果检测到人脸画面存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框，如在当前人脸画面中检测到两张人脸，则在每张人脸位置处绘制生成各自对应的人脸识别框。现有的无人便利店在用户进门识别的方式中，无法同时识别多个用户，如采用人脸检测进行人脸识别进门的方式中，如果在人脸画面检测出多张人脸，系统无法完成正常识别，即使可以完成识别也无法执行后续用户的物品选择流程。
步骤S103、对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位。
在一个实施例中，同时对多个人脸识别框中的人脸进行识别，示例性的，当前人脸画面中存在三个人脸识别框，即存在三张不同的人脸图像，同时对该三张不同的人脸图像进行识别，识别成功后获取对应的支付信息。其中，用户在首次使用无人便利店时进行注册，注册时后台相应记录该用户的支付信息以及身份验证信息(如用户的人脸图像)，其中，支付信息绑定有用户的可支付银行卡用于物品结算。数据库中将用户的身份验证信息和支付信息进行关联保存。在识别、验证成功后，获取关联的支付信息以用于后续付款。可选的，还可随机确定多个人脸识别框中的一个作为识别对象，识别、验证成功后，随机在剩余的人脸识别框中选择下一个识别对象直到当前人脸画面中的所有人脸均识别完毕为止。
在另一个实施例中，在当前人脸画面的多个人脸图像中，确定不同人脸图像的优先级，对优先级高的人脸图像优先进行识别以及支付信息的获取和标识信息的分配。具体的，确定不同人脸图像的大小，人脸图像在当前人脸画面中所占比例越大，优先级越高，即优先进行识别验证。
其中，标识信息用于用户的追踪定位，在用户通过门禁装置进入便利店进行物品选择时，根据该标识信息实现对用户的追踪，具体的，无人便利店内部设置有多个摄像头，当用户进入便利店内部后，该多个摄像头协同工作进行用户的移动轨迹的追踪定位，当检测到用户选择了某件物品时，相应的将该物品添加到为用户创建的虚拟购物清单中，该虚拟购物清单和在门禁装置处为用户创建的标识信息一一对应，不同的用户在通过门禁装置时被分配有不同的标识信息，用以实现在无人便利店中对每位用户进行追踪定位，在用户出便利店时进行物品结算。
步骤S104、将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
在一个实施例中，将分配的标识信息和获取的支付信息进行绑定。在通过标识信息追踪到用户离开无人便利店物品选择区时，依据该支付信息进行付款结算。当绑定成功时，在绑定成功的人脸识别框中显示预设信息。示例性的，当前人脸画面中存在两个用户的不同人脸图像，当其中的一个人脸图像别识别、验证成功后，进行对该用户的标识分配以及支付信息的获取，将标识信息和支付信息进行绑定，绑定成功后，在该人脸图像对应的人脸识别框中显示预设信息，该预设信息用以告知哪位用户已经验证成功，并提示用户通过门禁装置，该预设信息示例性的可以是“验证成功，请通过门禁”。
由上述方案可知，在用户进入无人便利店时，人脸识别过程中可对人脸画面同时存在多张人脸的情况下完成用户的进门处理流程，无需用户等待或使其他用户远离图像采集画面，提高了用户身份验证效率，便于用户快速进入便利店。
在上述技术方案的基础上，在显示的人脸画面中的每个人脸位置处生成人脸识别框之后，还包括：对每个人脸所在的位置进行实时检测，并调整对应的人脸识别框的位置。其中，在当前画面的人脸图像位置显示人脸识别框后，对每个人脸识别框中的人脸进行实时定位跟踪，如检测到其中一个人脸识别框中的人脸图像向人脸画面左侧偏移时，其对应的人脸识别框也相应左移。由此，实现了对当前人脸画面中的不同人脸图像进行实时的位移追踪，可选的，在确定出当前的人脸画面中的某一人脸图像移出人脸画面时，对应的人脸识别框相应消失。
在上述技术方案的基础上，在绑定成功的人脸识别框中显示预设信息后，还包括开启门禁装置。具体的，可以是检测到其中一个人脸识别框显示预设信息后即开启门禁装置，还可以是检测到当前人脸画面中所有人脸识别框均显示预设信息后开启门禁装置。
图2为本发明实施例提供的另一种无人便利店进门识别方法的流程图，给出了一种优化的无人便利店进门处理机制。如图2所示，技术方案具体如下：
步骤S201、当检测到用户进门事件触发时，获取当前采集的人脸画面。
步骤S202、对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框。
步骤S203、计算人脸识别框中人脸的停留时间，将停留时间满足预设时间阈值的人脸确定为满足识别条件，对满足识别条件的人脸图像进行识别。
在一个实施例中，计算人脸识别框中人脸的停留时间，如进行持续一轮5s的画面采集与检测，确定人脸识别框中人脸的停留时间。示例性的，在第1s中的人脸画面检测到人脸a、人脸b和人脸c，在第3s确定出人脸b消失，在5s的持续采集与检测中确定出人脸a和人脸c持续出现在人脸画面中，则将人脸a和人脸c确定为满足识别条件。其中，以持续5s的画面采集与检测为例，对应的预设时间阈值可以是4s或5s。
步骤S204、获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位。
步骤S205、将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
由上述方案可知，在对人脸识别框中的人脸进行识别时，先确定其是否满足识别条件，如计算人脸识别框中人脸的停留时间，将停留时间满足预设时间阈值的人脸确定为满足识别条件，后续进行该人脸识别框中人脸的识别，由此提高了人脸识别效率，避免进行无用识别，进一步优化了无人便利店的进门机制。
图3为本发明实施例提供的另一种无人便利店进门识别方法的流程图，给出了一种优化的无人便利店进门处理机制。如图3所示，技术方案具体如下：
步骤S301、当检测到用户进门事件触发时，获取当前采集的人脸画面。
步骤S302、对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框。
步骤S303、计算人脸识别框中人脸的面积比例值，将面积比例值满足预设面积阈值的人脸确定为满足识别条件，对满足识别条件的人脸图像进行识别。
其中，面积比例值依据检测到的人脸识别框中人脸所占画面的比例确定。示例性的，以当前画面显示两个人脸识别框，人脸识别框中分别显示人脸a和人脸c，人脸a所占画面的比例值为30％，人脸c所占画面比例值为15％，将面积比例值大于20％的人脸确定为满足预设面积阈值(预设面积阈值可适应性调整，示例性的为20％)，即判定人脸a满足识别条件，对人脸a进行识别以及后续分配标识信息，人脸c判定为不满足识别条件，不进行识别。
步骤S304、获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位。
步骤S305、将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
由上述内容可知，在对人脸识别框中的人脸进行识别时，先确定其是否满足识别条件，如计算人脸识别框中人脸的面积比例值，将面积比例值满足预设面积阈值的人脸确定为满足识别条件，后续进行该人脸识别框中人脸的识别，由此提高了人脸识别效率，避免进行无用识别，进一步优化了无人便利店的进门机制。
图4为本发明实施例提供的另一种无人便利店进门识别方法的流程图，给出了一种优化的无人便利店进门处理机制。如图4所示，技术方案具体如下：
步骤S401、当检测到用户进门事件触发时，获取当前采集的人脸画面。
步骤S402、对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框。
步骤S403、对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位。
步骤S404、将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
步骤S405、获取采集的门禁装置处的图像画面，对所述图像画面进行识别，依据识别结果以及所述标识信息进行用户的追踪定位。
在一个实施例中，门禁装置开启后，另一摄像头拍摄通过该门禁装置的用户，可选的，该摄像头设置在正对门禁装置可拍摄到通过该门禁装置的用户人脸的位置，当门禁装置开启时，获取该摄像头采集的门禁装置处的图像画面，对该图像画面进行识别，依据识别结果以及标识信息进行用户的追踪定位。示例性的，以当前人脸画面中包含两个用户的人脸图像为例，在门禁装置处，识别、验证过程中分配给用户的标识信息分别为第一标识信息和第二标识信息，其中，第一标识信息和第一用户绑定，第二标识信息和第二用户绑定，在分配第一标识信息后，第一用户以第一标识信息为标记被便利店安装的摄像头进行追踪，在脸分配第二标识信息后，第二用户以第二标识信息为标记被便利店安装的摄像头进行追踪，为确保第一用户和第二用户在通过门禁时不被错误追踪，此时获取摄像头采集的门禁装置处的图像画面，对第一用户和第二用户的人脸分别进行识别确认，如确认出第一用户首先通过门禁装置，第二用户在第一用户后通过门禁装置，则相应的将第一标识信息作为第一用户的标记对第一用户进行追踪，将第二标记信息作为第二用户的标记对第二用户进行追踪。
由上述内容可知，该方案避免了由于用户通过门禁装置时的顺序问题导致后续追踪、付款结算错误的问题，进一步优化了无人便利店的进门机制。
图5为本发明实施例提供的另一种无人便利店进门识别方法的流程图，在上述技术方案的基础上，给出了一种优化的无人便利店进门方法。如图5所示，技术方案具体如下：
步骤S501、当检测到用户进门事件触发时，获取当前采集的人脸画面。
步骤S502、对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框。
步骤S503、对所述人脸识别框中的人脸进行识别，如果确定出当前人脸画面中存在关联用户，则在所述关联用户中确定主用户，获取所述主用户的支付信息并分配标识信息。
在一个实施例中，用户注册过程中，可设置和自身关联的用户，并同步进行人脸识别，系统将识别到的关联用户的人脸图像和注册用户信息关联保存，如在数据库中保存记录注册用户的人脸图像、关联用户的人脸图像以及注册用户的支付信息。在确定当前人脸画面中存在至少两张人脸并显示多个人脸识别框后，对人脸识别框中的人脸进行识别，确定出当前人脸画面中是否存在关联用户，如果存在则确定该多个关联用户的主用户，如注册过程中的注册用户为主用户，注册过程中的关联用户确定为关联用户，获取主用户的支付信息，为主用户分配标识信息，相应的，可为每个关联用户单独分配子标识信息，子标识信息均和该主用户的支付信息进行绑定，后续使用子标识信息对该关联的用户进行追踪定位，当该关联的用户进行物品选择后，相应的在主用户的用户虚拟购物清单增加该物品，并在最后离开便利时一同进行结算。
步骤S504、将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
在一个实施例中，针对当前人脸画面存在关联用户的情况，主用户识别验证成功后，和该主用户关联的用户同步完成验证，可选的，在主用户和关联用户的人脸识别框中可同时显示“验证成功，请通过”。
由上述方案可知，当检测出人脸画面中存在至少两张人脸时，进行是否存在关联人脸的判断，如果存在，则将多个关联的人脸绑定同一支付信息，并完成相应的进门验证，进一步优化了用户的进门识别机制，可令多个用户同时通过门禁装置并在后续进行物品选择、结算。
在上述技术方案的基础上，所述确定出当前人脸画面中存在关联用户包括：依据门禁装置处的图像画面识别结果确定当前人脸画面中存在关联用户。示例性的，对门禁装置处的图像画面进行识别，当确定出存在多个用户时，对该多个用户的行为进行识别，如果识别出存在预设行为，则判定当前人脸画面中存在关联用户，该预设行为可由机器学习训练得到，用于表征多个用户之间存在关联关系。
图6为本发明实施例提供的一种无人便利店进门识别装置的结构框图，该装置用于执行上述实施例提供的无人便利店进门识别方法，具备执行方法相应的功能模块和有益效果。如图6所示，该装置具体包括：信息采集模块101、人脸检测模块102、信息处理模块103和绑定模块104，其中，
信息采集模块101，用于当检测到用户进门事件触发时，获取当前采集的人脸画面；
人脸检测模块102，用于对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
信息处理模块103，用于对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
绑定模块104，用于将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
由上述方案可知，在用户进入无人便利店时，人脸识别过程中可对人脸画面同时存在多张人脸的情况下完成用户的进门处理流程，无需用户等待或使其他用户远离图像采集画面，提高了用户身份验证效率，便于用户快速进入便利店。
在一个可能的实施例中，所述信息处理模块103具体用于：
确定在人脸识别框中满足识别条件的人脸图像；
对所述人脸图像进行识别。
在一个可能的实施例中，所述信息处理模块103具体用于：
计算人脸识别框中人脸的停留时间，将停留时间满足预设时间阈值的人脸确定为满足识别条件；或
计算人脸识别框中人脸的面积比例值，将面积比例值满足预设面积阈值的人脸确定为满足识别条件。
在一个可能的实施例中，所述预设信息包括验证成功信息，该装置还包括图像验证模块105，具体用于：
在绑定成功的人脸识别框中显示预设信息之后，获取采集的门禁装置处的图像画面，对所述图像画面进行识别，依据识别结果以及所述标识信息进行用户的追踪定位。
在一个可能的实施例中，所述信息处理模块104具体用于：
对所述人脸识别框中的人脸进行识别，如果确定出当前人脸画面中存在关联用户，则在所述关联用户中确定主用户，获取所述主用户的支付信息并分配标识信息。
在一个可能的实施例中，所述信息处理模块104具体用于：
依据人脸识别结果或门禁装置处的图像画面识别结果确定当前人脸画面中存在关联用户。
在一个可能的实施例中，所述人脸检测模块102还用于:
在显示的人脸画面中的每个人脸位置处生成人脸识别框之后，对每个人脸所在的位置进行实时检测，并调整对应的人脸识别框的位置。
图7为本发明实施例提供的一种设备的结构示意图，如图7所示，该设备包括处理器201、存储器202、输入装置203和输出装置204；设备中处理器201的数量可以是一个或多个，图7中以一个处理器201为例；设备中的处理器201、存储器202、输入装置203和输出装置204可以通过总线或其他方式连接，图7中以通过总线连接为例。
存储器202作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的无人便利店进门识别方法对应的程序指令/模块。处理器201通过运行存储在存储器202中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的无人便利店进门识别方法。
存储器202可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器202可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器202可进一步包括相对于处理器201远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置203可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置204可包括显示屏等显示设备。
本发明实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种无人便利店进门识别方法，该方法包括：
当检测到用户进门事件触发时，获取当前采集的人脸画面；
对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明实施例可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明实施例各个实施例所述的方法。
值得注意的是，上述无人便利店进门识别装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明实施例的保护范围。
注意，上述仅为本发明实施例的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明实施例不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明实施例的保护范围。因此，虽然通过以上实施例对本发明实施例进行了较为详细的说明，但是本发明实施例不仅仅限于以上实施例，在不脱离本发明实施例构思的情况下，还可以包括更多其他等效实施例，而本发明实施例的范围由所附的权利要求范围决定。
Claims (10)
1.无人便利店进门识别方法，其特征在于，包括：
当检测到用户进门事件触发时，获取当前采集的人脸画面；
对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
2.根据权利要求1所述的方法，其特征在于，对所述人脸识别框中的人脸进行识别包括：
确定在人脸识别框中满足识别条件的人脸图像；
对所述人脸图像进行识别。
3.根据权利要求2所述的方法，其特征在于，所述确定在人脸识别框中满足识别条件的人脸图像包括：
计算人脸识别框中人脸的停留时间，将停留时间满足预设时间阈值的人脸确定为满足识别条件；或
计算人脸识别框中人脸的面积比例值，将面积比例值满足预设面积阈值的人脸确定为满足识别条件。
4.根据权利要求1所述的方法，其特征在于，所述预设信息包括验证成功信息，在绑定成功的人脸识别框中显示预设信息之后，还包括：
获取采集的门禁装置处的图像画面，对所述图像画面进行识别，依据识别结果以及所述标识信息进行用户的追踪定位。
5.根据权利要求1-4中任一项所述的方法，其特征在于，对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息包括：
对所述人脸识别框中的人脸进行识别，如果确定出当前人脸画面中存在关联用户，则在所述关联用户中确定主用户，获取所述主用户的支付信息并分配标识信息。
6.根据权利要求5所述的方法，其特征在于，所述确定出当前人脸画面中存在关联用户包括：
依据人脸识别结果或门禁装置处的图像画面识别结果确定当前人脸画面中存在关联用户。
7.根据权利要求1-4中任一项所述的方法，其特征在于，在显示的人脸画面中的每个人脸位置处生成人脸识别框之后，还包括：
对每个人脸所在的位置进行实时检测，并调整对应的人脸识别框的位置。
8.无人便利店进门识别装置，其特征在于，包括：
信息采集模块，用于当检测到用户进门事件触发时，获取当前采集的人脸画面；
人脸检测模块，用于对所述人脸画面进行检测，如果检测出所述人脸画面中存在至少两张人脸，则在显示的人脸画面中的每个人脸位置处生成人脸识别框；
信息处理模块，用于对所述人脸识别框中的人脸进行识别，获取对应的支付信息并分配标识信息，所述标识信息用于用户的追踪定位；
绑定模块，用于将所述支付信息和所述标识信息进行关联绑定，并在绑定成功的人脸识别框中显示预设信息。
9.一种设备，所述设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一项所述的无人便利店进门识别方法。
10.一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一项所述的无人便利店进门识别方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910550960.8A CN110276617A (zh) | 2019-06-24 | 2019-06-24 | 无人便利店进门识别方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910550960.8A CN110276617A (zh) | 2019-06-24 | 2019-06-24 | 无人便利店进门识别方法、装置、设备和存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110276617A true CN110276617A (zh) | 2019-09-24 |
Family
ID=67961831
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910550960.8A Withdrawn CN110276617A (zh) | 2019-06-24 | 2019-06-24 | 无人便利店进门识别方法、装置、设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110276617A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110674786A (zh) * | 2019-09-30 | 2020-01-10 | 联想(北京)有限公司 | 处理方法及装置 |
| CN111680657A (zh) * | 2020-06-15 | 2020-09-18 | 杭州海康威视数字技术股份有限公司 | 一种物品取放事件的触发人员确定方法、装置及设备 |
| CN112070954A (zh) * | 2020-09-14 | 2020-12-11 | 上海商汤智能科技有限公司 | 活体识别方法、装置、设备及存储介质 |
-
2019
- 2019-06-24 CN CN201910550960.8A patent/CN110276617A/zh not_active Withdrawn
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110674786A (zh) * | 2019-09-30 | 2020-01-10 | 联想(北京)有限公司 | 处理方法及装置 |
| CN111680657A (zh) * | 2020-06-15 | 2020-09-18 | 杭州海康威视数字技术股份有限公司 | 一种物品取放事件的触发人员确定方法、装置及设备 |
| CN111680657B (zh) * | 2020-06-15 | 2023-05-05 | 杭州海康威视数字技术股份有限公司 | 一种物品取放事件的触发人员确定方法、装置及设备 |
| CN112070954A (zh) * | 2020-09-14 | 2020-12-11 | 上海商汤智能科技有限公司 | 活体识别方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110287867A (zh) | 无人便利店进门识别方法、装置、设备和存储介质 | |
| CN106504353B (zh) | 车辆收费方法和装置 | |
| AU2020309090B2 (en) | Image processing methods and apparatuses, electronic devices, and storage media | |
| CN110276617A (zh) | 无人便利店进门识别方法、装置、设备和存储介质 | |
| US9779400B2 (en) | Biometric matching system using input biometric sample | |
| CN110135852A (zh) | 乘车支付方法、系统、支付受理设备和服务器 | |
| TW202013231A (zh) | 身份識別系統和方法、終端以及計算機存儲介質 | |
| CN104574954B (zh) | 一种基于自由流系统的车辆稽查方法、控制设备及系统 | |
| CN107833328B (zh) | 基于人脸识别的门禁验证方法及装置、计算设备 | |
| CN109858329A (zh) | 基于人脸识别的防尾随方法、装置、设备及存储介质 | |
| TW201629864A (zh) | 無線支付方法與裝置及交通工具乘坐費檢驗方法與系統 | |
| CN110853391A (zh) | 智能共享停车系统 | |
| JP2003187352A (ja) | 特定人物検出システム | |
| JP5789170B2 (ja) | 駐車場管理システム | |
| CN108154707A (zh) | 一种停车场数据处理终端设备和停车场管理系统 | |
| CN110264581A (zh) | 停车扣费方法及相关设备 | |
| CN113781827A (zh) | 一种云平台的视频数据管理方法及云平台 | |
| CN114067403A (zh) | 一种老年人自助存取款障碍识别方法和装置 | |
| JP2015187897A (ja) | 駐車場管理システム | |
| CN110659955A (zh) | 多用户购物管理方法、装置、设备及存储介质 | |
| US10636262B2 (en) | Method and device for monitoring individuals in a place equipped with distributed detection means | |
| CN113744443B (zh) | 一种闸机通道防欺骗控制方法、装置、设备及存储介质 | |
| CN109979121B (zh) | 一种监控自助银行的方法及服务器 | |
| Semedo et al. | Contact-free airport borders with biometrics-on-the-move | |
| CN117079379B (zh) | 轨道交通高容差人脸过闸方法和系统、计算机程序介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20190924 |
|
| WW01 | Invention patent application withdrawn after publication |