CN113014863A - 认证用户的方法及系统以及计算机可读记录介质 - Google Patents

认证用户的方法及系统以及计算机可读记录介质 Download PDF

Info

Publication number
CN113014863A
CN113014863A CN202011502073.2A CN202011502073A CN113014863A CN 113014863 A CN113014863 A CN 113014863A CN 202011502073 A CN202011502073 A CN 202011502073A CN 113014863 A CN113014863 A CN 113014863A
Authority
CN
China
Prior art keywords
user
video
user terminal
instruction
instructions
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011502073.2A
Other languages
English (en)
Inventor
白峻式
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Line Plus Corp
Original Assignee
Line Plus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Line Plus Corp filed Critical Line Plus Corp
Publication of CN113014863A publication Critical patent/CN113014863A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45Structures or tools for the administration of authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/41Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W88/00Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02Terminal devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Collating Specific Patterns (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及认证用户的方法及系统以及计算机可读记录介质。用户认证方法包括:发送步骤,向用户终端发送使用户执行多个行动的多个指令;接收步骤,从上述用户终端接收与上述多个指令对应拍摄的视频;确定步骤,确定在上述视频内是否存在上述用户;以及认证步骤,在确定为上述用户存在的情况下,以从上述视频提取的上述用户的脸部为基础来认证上述用户。

Description

认证用户的方法及系统以及计算机可读记录介质
技术领域
本发明涉及用户认证方法及系统,具体地,涉及如下的方法及系统,即,可接收通过用户终端拍摄的视频,分析所接收的视频来确定视频内是否存在用户,并可处理用户的认证。
背景技术
随着如智能手机的移动设备的扩散及互联网的发展,利用移动设备的金融服务及结算服务等被广泛应用。为了利用这种金融及结算服务,有可能需要用户的实名认证。只是,由于利用这种服务的数量急剧增加,且提供认证服务的机构的资源有限,因此,提供通过面对面实名认证的实名认证服务有可能受限。由此,通过非面对面实名认证的认证用户的服务最近在图像处理、识别领域中正被积极研发。例如,从利用摄像头拍摄的图像提取的用户的脸部信息可用于用户认证。
但是,与面对面实名认证相比,这种非面对面实名认证很难确认是否为实际本人,因此,有可能发生他人冒充本人的副作用。例如,可存在利用印刷有与他人的身份证相同人物的照片或纸来判断为相同人物的问题。并且,在客户端装置中进行非面对面实名认证的情况下,当向需要实名认证的系统传送客户端装置处理的实名认证结果时,可能存在通过破解而使不同的实名结果被传输的缺点。进而,即使在服务器装置中进行用于非面对面实名认证的图像识别及处理,因收发信息的监听及盗号,为了非面对面实名认证而从客户端发送的图像有可能发生变化。
发明内容
本发明提供用于解决上述问题的用户认证方法、存储有计算机程序的记录介质及系统。
本发明提供如下的用户认证方法及系统,即,响应于引导用户执行多个行动的多个指令(instructions),从用户终端接收与多个指令对应拍摄的视频,确定在视频内是否存在用户,在确定为用户存在的情况下,以从视频提取的用户的脸部为基础来认证用户。
本发明提供如下的用户认证方法及系统,即,在用户认证过程中,通过摄像头拍摄的视频从用户终端实时且连续接收。
本发明可通过包括方法、系统或存储多个指令的计算机可读存储介质在内的多种方式实现。
本发明一实施例的用户认证方法包括:发送步骤,向用户终端发送使用户执行多个行动的多个指令;接收步骤,从用户终端接收与多个指令对应拍摄的视频;确定步骤,确定在视频内是否存在用户;以及认证步骤,在确定为用户存在的情况下,以从视频提取的用户的脸部为基础认证用户。
根据一实施例,从用户终端接收与多个指令对应拍摄的视频的步骤包括:通过用于与用户终端进行通信的信道,从用户终端实时接收视频。
根据一实施例,视频通过用于与用户终端进行通信的信道连续接收。
根据一实施例,确定在视频内是否存在用户的步骤包括如下的步骤:通过分析视频来确定在视频内用户是否执行与多个指令相对应的多个行动;以及在确定为用户执行与多个指令相对应的多个行动的情况下,确定为在拍摄的视频内存在用户。
根据一实施例,从用户终端接收与多个指令对应拍摄的视频的步骤包括如下的步骤:从用户终端接收与引导拍摄用户脸部的指令对应地拍摄的脸部相关视频;从用户终端接收与引导拍摄用户身份证的指令对应地拍摄的身份证相关视频,认证用户的步骤包括:第一信息提取步骤,从脸部相关视频提取与用户的脸部有关的第一信息;第二信息提取步骤,从身份证相关视频提取与用户的脸部有关的第二信息;比较步骤,对所提取的第一信息及所提取的第二信息进行比较;以及在所提取的第一信息及所提取的第二信息类似的情况下,认证用户的步骤。
根据一实施例,多个指令包含引导拍摄用户的脸部正面的指令。
根据一实施例,多个指令包含引导用户身份证的移动的指令,接收身份证相关视频的步骤包括:从用户终端接收根据指令拍摄用户的身份证的视频,认证用户的步骤包括:以分析上述视频而获取的用户身份证的移动为基础来确定在视频内是否存在用户的身份证。
根据一实施例,身份证相关视频包括一同拍摄用户的至少一部分及用户的身份证的视频,接收身份证相关视频的步骤包括如下的步骤:通过第一信道,从用户终端接收包括用户的至少一部分的区域;以及通过第二信道,从用户终端接收包括用户的身份证的区域。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤包括:选择步骤,在预先确定的多个指令候补中随机选择多个指令;以及发送步骤,向用户终端发送随机选择的多个指令。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤包括:向用户终端发送使用户进行第一行动的第一指令,从用户终端接收与多个指令对应拍摄的视频的步骤包括:从用户终端接收与第一指令对应拍摄的视频,确定在视频内是否存在用户的步骤包括:分析与第一指令对应拍摄的视频来确定用户是否响应于第一指令而执行第一行动。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤还包括:在确定为用户执行第一行动的情况下,向用户终端发送使用户执行第二行动的第二指令,从用户终端接收与多个指令对应拍摄的视频的步骤还包括:从用户终端接收与第二指令对应拍摄的视频,确定在视频内是否存在用户的步骤还包括:分析与第二指令对应拍摄的视频来确定用户是否响应于第二指令而执行第二行动。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤还包括:在确定为用户不执行第一行动的情况下,向用户终端发送使用户执行第三行动的第三指令,第三指令以从与第一指令对应拍摄的视频的分析中获取的用户的行动与第一行动之间的不同点为基础选择。
根据一实施例,本发明还包括:在确定为用户不执行第一行动的情况下,利用与为了与用户终端进行通信而使用的信道不同的信道来与用户终端进行通信。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤包括:向用户终端一同发送与对应于多个指令的多个分辨率有关的信息和多个指令。
根据一实施例,与多个指令相对应的多个分辨率包含显示与多个指令对应拍摄的视频的画面中的多个区域中的每个区域的分辨率。
根据一实施例,多个指令包含引导一同拍摄用户的至少一部分及用户的身份证的指令,引导拍摄用户的身份证的区域的分辨率被设定为高于引导拍摄用户的至少一部分的区域的分辨率。
根据一实施例,向用户终端发送使用户执行多个行动的多个指令的步骤包括:向用户终端一同发送与对应于多个指令中的每个指令的传送速度有关的信息和多个指令。
本发明提供计算机可读记录介质,记录有用于在计算机中执行本发明一实施例的上述用户认证方法的计算机程序。
本发明一实施例的用户认证系统包括:通信模块,向用户终端发送使用户执行多个行动的多个指令,从用户终端接收与多个指令对应拍摄的视频;存储器;以及至少一个处理器,上述至少一个处理器与存储器相连接,被配置为执行包含在存储器中的多个计算机可读指令,至少一个处理器还被配置为确定在视频内是否存在用户,在确定为用户存在的情况下,以从视频提取的用户的脸部为基础认证用户。
根据一实施例,通信模块还被配置为通过用于与用户终端进行通信的信道来从用户终端实时接收视频。
根据本发明的一部分实施例,可分析从用户终端接收的视频来确定用户是否存在,在确定为用户存在的情况下进行用户认证,因此可防止利用用户的印刷照片或纸来进行用户认证的现象。
根据本发明的一部分实施例,可分析实时接收的视频来提供用户认证服务,因此,可以解决用于认证用户的过程中的图像或视频被处理的问题。
根据本发明的一部分实施例,用户认证系统可分析从用户终端实时接收的视频来执行用户认证,因此,可通过提供用户认证服务的应用和网页浏览器提供用户认证服务。
本发明的效果并不局限于以上提及到的效果,本发明所属技术领域的技术人员(以下,称之为“本领域技术人员”)可从发明要求保护范围的记载明确理解未提及的其他效果。
附图说明
本发明的实施例将参照以下说明的附图说明,其中,类似的附图标记表示类似的结构要素,但并不局限于此。
图1为示出在本发明一实施例的认证用户的过程中,根据显示在用户终端的指令将用户的行动成像的视频的例示图。
图2为示出在本发明另一实施例的认证用户的过程中,根据显示在用户终端的指令将用户的行动成像的视频的例示图。
图3为示出为了提供本发明一实施例的用户认证服务,以使用户认证系统与多个用户终端进行通信的方式相连接的结构的简图。
图4为示出本发明一实施例的用户终端及用户认证系统的内部结构的框图。
图5为示出本发明一实施例的用户认证系统的结构的框图。
图6为示出本发明一实施例的用户认证方法的流程图。
图7为示出本发明一实施例的以输入图像为基础来推论或输出行动执行结果的图像分析模型的图。
图8为示出本发明一实施例的以拍摄根据多个指令的用户的行动的视频为基础认证用户的例示图。
图9为示出本发明一实施例的例示性指令信息数据库的图。
图10为示出通过本发明一实施例的用户认证系统,根据用户是否执行行动来选择不同指令的例示的图。
图11为示出本发明一实施例的与指令对应地拍摄用户的行动的画面的例示图。
图12为示出本发明另一实施例的与指令对应地拍摄用户的行动的画面的例示图。
图13为示出本发明又一实施例的与指令对应地拍摄用户的行动的画面的例示图。
图14为示出本发明一实施例的与指令对应地一同拍摄用户及用户的身份证的例示图。
图15为示出本发明一实施例的为了确认用户的身份证是否存在而与指令对应地拍摄身份证的移动的例示图。
附图标记的说明
100、100_1、100_2、100_3:用户终端
110:摄像头
120:用户
300:用户认证系统
310:网络
412、438:通信模块
414、434:处理器
416、436:存储器
418、432:输入输出接口
420:输入输出装置
510:指令处理模块
520:图像提取模块
530:图像分析模块
540:认证模块
具体实施方式
以下,参照附图,详细说明本发明实施例的具体内容。只是,在以下的说明中,在判断为使本发明的主旨不清楚的情况下,将省略与公知功能或结构有关的具体说明。
在附图中,对相同或对应的结构要素赋予相同的附图标记。并且,在说明以下的实施例的过程中,将省略对相同或对应的结构要素的重复说明。但是,即使与结构要素有关的技术被省略,这种结构要素也会包含在实施例中。
所公开的实施例的优点、特征及实现这些的方法将参照与附图一同后述的实施例变得更加明确。但是,本发明并不局限于以下公开的实施例,而是可实现为多种不同的形式,只是,本实施例使本发明变得完整,并为了告知本发明所属技术领域的技术人员本发明的完整范畴而提供。
对在本说明书中所使用的术语进行简单说明,对所公开的实施例进行具体说明。在本说明书中所使用的术语考虑本发明中的功能并尽可能选择当前广泛使用的一般术语,但这可根据本发明所属技术领域的意图、惯例及新技术的问世等改变。并且,在特定情况下,存在申请人随意选择的术语,在此情况下,在对应的本发明的说明部分中详细记载其含义。因此,在本发明中所使用的术语并非为简单的术语名称,而是以上述术语所具有的含义和本发明的整体内容为基础定义。
在本说明书中,只要在上下文上并未明确特定为单数,则单数的表达包括复数的表达。并且,只要在上下文上并未明确特定为复数,则复数的表达包括单数的表达。在整个说明书中,当称为一个部分“包括”其他结构要素时,只要没有特别相反的记载,则意味着还可包括其他结构要素,而并非意味着排除其他结构要素。
并且,在说明书中所使用的“模块”或“部”等术语意味着软件或硬件结构要素,“模块”或“部”执行一种功能。但是,“模块”或“部”并不局限于软件或硬件。“模块”或“部”可以被配置为存储于可寻址的存储介质,或可以被配置为使一个或多个处理器进行工作。因此,作为一例,“模块”或“部”可包括如软件结构要素、面向对象软件结构要素、类结构要素及任务结构要素的结构要素、处理器、函数、属性、过程、子例程、程序代码段、驱动程序、固件、微代码、电路、数据、数据库、数据结构、表、数组和变量中的至少一种。在结构要素和“模块”或“部”内提供的功能可结合成更少数量的结构要素及“模块”或“部”或者可分离成附加的结构要素和“模块”或“部”。
根据本发明的一实施例,“模块”或“部”可实现为处理器及存储器。“处理器”应被解释成包括通用处理器、中央处理器(CPU)、微处理器、数字信号处理器(DSP)、控制器、微控制器、状态机等广泛含义。在多个环境中,“处理器”也可以指专用集成电路(ASIC)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)等。例如,“处理器”也可以指数字信号处理器与微处理器的组合、多个微处理器的组合、与数字信号处理器芯相结合的一个以上的微处理器的组合或如任意其他结构的组合的处理设备的组合。并且,“存储器”应被解释成包括可存储电子信息的任意电子组件的广泛含义。“存储器”也可以指随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存储存储器(NVRAM)、可编程只读存储器(PROM)、电可编程只读存储器(EPROM)、电可擦可编程只读存储器(EEPROM)、闪存、磁或光数据存储装置、如寄存器等的处理器可读介质的多种类型。若处理器从存储器读取信息或者在存储器中记录信息,则存储器处于与处理器进行电子通信的状态。集成在处理器的存储器处于与处理器进行电子通信的状态。
在本发明中,“系统”可包括服务器装置和云装置中的至少一个装置,但并不局限于此。例如,系统可以由一个以上的服务器装置构成。作为另一例,系统可以由一个以上的云装置构成。作为又一例,系统可以由服务器装置和云装置构成来进行工作。
在本发明中,“图像”可以为包含一个以上的图像,也可以为包含多个图像的视频。
在本发明中,“视频”可以为包含通过摄像头拍摄的多个图像且图像内的一个以上的对象移动的影像。例如,视频可包含在用户终端中拍摄的所有图像。作为另一例,视频可包含与从用户终端所拍摄的图像中提取的帧(frame)对应的图像和/或一部分图像。其中,可以调节从用户终端所拍摄的图像中提取的帧或图像的数量。
在本发明中,“拍摄用户的行动的视频”包含拍摄用户利用自己的身体和/或物品执行的行动的视频。例如,自己的身体可包括脸部、手、胳膊、腿等。并且,物品可以为用户用手拿住并采取任意行动的对象,例如,可包含身份证等,但并不局限于此。
在本发明中,“确定用户是否存在”可包括确定用户是否实际存在。例如,在与多个指令对应拍摄的视频内是否存在用户可以为在视频内拍摄的用户是否实际存在。其中,在通过用户终端拍摄用户成像或拍摄的图像、纸、视频等的情况下,而并非拍摄实际用户的情况下,可以判断为用户不存在。
在本发明中,“实时接收”可以为在数据发生的同时接收数据。根据一实施例,实时接收所拍摄的视频可以为在通过图像传感器拍摄视频后立即接收所拍摄的视频。例如,用户认证系统从用户终端实时接收所拍摄的视频可以为在通过用户终端拍摄视频后立即向用户认证系统发送视频,用户认证系统从用户终端接收所拍摄的视频。其中,当用户终端向用户认证系统发送时,可发生用户终端的视频拍摄/处理时间和/或从用户终端向用户认证系统提供的通信延迟,在经过这种视频拍摄/处理时间和/或任意通信延迟时间之后所接收的视频也被看成实时接收。
在本发明中,“身份证”可以为证明个人或用户的身份或身家信息的文件或卡。例如,身份证可以为居民登录卡、社会保障卡(social secret card)、驾驶执照、护照、学生证、残障人士卡等,但并不局限于此。
在本发明中,“类似”可包括相同或类似的所有含义。例如,两种信息类似可以为两种信息相同或类似。
在本发明中,“信道”可以为两个装置之间的对任意信息和/或数据进行相互通信的通路。例如,为了用户认证系统与用户终端的通信而使用的信道可以为用户认证系统与用户终端之间的对任意信息和/或数据进行相互通信的通路。
在本发明中,“用户”和“用户终端”区别使用,但是,用户可以为用户终端,相反,用户终端也可以为用户。
图1为示出在本发明一实施例的认证用户120的过程中,根据所接收的指令将用户的行动成像的视频的例示图。用户120为了自己所利用的服务而可以通过用户终端100接收要求进行用户120的本人认证或实名认证的请求。其中,服务可包括用户终端100能够通过网页浏览器和/或应用执行的任意服务,例如,支付服务、信用卡服务、银行服务、虚拟货币服务等,但并不局限于此。
根据一实施例,当用户120加入提供自己所利用的服务的系统或者当丢失自己的账号和/或密码时,可从用户认证系统接收这种用户认证请求。例如,这种用户认证系统可以与提供服务的系统一同提供。作为另一例,用户认证系统可以与提供服务的系统单独提供。
用户认证系统可被配置为从用户终端100接收拍摄用户的至少一部分的视频。上述视频可通过附着在用户终端100或者有线/无线连接的摄像头成像或拍摄。根据一实施例,如图所示,摄像头110可附着于用户终端100的前面部。在此情况下,摄像头110可以拍摄观看用户终端100的前面部的用户所执行的行动,所拍摄的视频可以向用户认证系统传送。例如,用户认证系统可从用户终端100实时接收拍摄用户的行动的视频。
用户认证系统可被配置为从用户终端100接收拍摄用户的至少一部分的视频,并可确定在所接收的视频内是否存在用户。根据一实施例,用户认证系统可以向用户终端100传送一个以上的指令,所传送的一个以上的指令可向用户终端100输出。例如,如图所示,用户终端100可从用户认证系统300接收“请摆出V字”的指令,并可在用户终端100的显示器显示这种指令。其中,所接收的指令可以显示在与显示所拍摄的视频的区域区分的区域。
响应于用户终端100所接收的指令,用户可以执行这种指令所引导的行动,这种用户的行动可以通过摄像头110拍摄并向用户认证系统传送。例如,如图所示,用户120可根据“请摆出V字”的指令,利用自己的右手来摆出V字,这种行动可通过摄像头110拍摄。在用户终端100中拍摄的视频可实时向用户认证系统传送。用户认证系统可以确定从用户终端100实时接收的视频内是否存在用户。
图2为示出在本发明另一实施例的认证用户120的过程中,根据显示在用户终端100的指令将用户的行动成像的视频的例示图。在确定为用户120存在的情况下,用户认证系统可以向用户终端100发送要求出示用户120的身份证以便能够通过摄像头110拍摄的指令。根据另一实施例,在确定用户是否存在的过程中,用户终端100可从用户认证系统300接收这种要求出示用户的身份证的指令。这种指令可以向用户终端100输出,例如,如图所示,可以向用户终端100的显示器显示“请出示自己的身份证(表面)”的指令。其中,所接收的指令可以显示在与显示所拍摄的视频的区域区分的区域。
响应于这种指令,用户120在自己的手中举起身份证来出示,以使自己的身份证被摄像头110拍摄。拍摄用户120的身份证的视频可以向用户认证系统300传送。例如,如图所示,在拍摄用户120的至少一部分的过程中,可以一同拍摄用户的身份证。上述影像可以在通过摄像头拍摄后立即,即,可以实时向用户认证系统300传送。在本实施例中,以一同拍摄用户120的脸部及身份证的方式示出,但并不局限于此,可以仅将用户120的身份证通过摄像头110拍摄并向用户认证系统300提供。用户认证系统可以将这样拍摄身份证的视频用于认证用户120。
图3为示出为了提供本发明一实施例的用户认证服务,用户认证系统300以能够与多个用户终端100_1、100_2、100_3进行通信的方式连接的结构的简图。用户认证系统300可包括能够通过网络310向多个用户终端100_1、100_2、100_3认证多个用户终端的用户的系统。根据一实施例,用户认证系统300可包括与用户认证服务有关的计算机可执行程序(例如,可下载应用)及可存储、提供及执行数据的一个以上的服务器装置和/或数据库或者基于云计算服务的一个以上的分散计算装置和/或分散数据库。通过用户认证系统300提供的用户认证服务可以通过安装于多个用户终端100_1、100_2、100_3的用户认证服务所要求的应用或网页服务器等向用户提供。其中,管理上述应用的服务器在从多个用户终端100_1、100_2、100_3接收到用户认证请求的情况下,可以向用户认证系统300请求用户认证。在此情况下,用户认证系统300与多个用户终端100_1、100_2、100_3以可相互进行通信的方式相连接。
多个用户终端100_1、100_2、100_3为了认证用户而可以通过网络130与用户认证系统300进行通信。根据一实施例,多个用户终端100_1、100_2、100_3可以向用户认证系统300传送通过与用户终端100_1、100_2、100_3有关的图像传感器拍摄的视频。其中,所拍摄的视频可包含为了用户的认证而需要的任意信息和/或数据。例如,所拍摄的视频可包含与用户的至少一部分(例如,用户的脸部)有关的信息。作为另一例,所拍摄的视频可包含与用户的身份证有关的信息。
多个用户终端100_1、100_2、100_3为了认证用户可通过能够进行双向通信的信道向用户认证系统300实时发送通过图像传感器拍摄的视频。根据一实施例,用户认证系统300可通过与用户终端100的互联网语音协议(Voice over Internet Protocol,VoIP)信道接收通过多个用户终端100_1、100_2、100_3拍摄的视频。根据另一实施例,这样拍摄的视频可通过广播信道从用户终端100实时接收。其中,广播信道可通过能够进行双向通信的任意方式生成,例如,可利用网页即时通信(Web Real-Time Communication,WebRTC)等来生成,但并不局限于此。
网络310可以被配置为使多个用户终端100_1、100_2、100_3与用户认证系统300之间能够进行通信。网络310可根据设置环境,例如,可以由以太网(Ethernet)、电力线通信(Power Line Communication)、电话线通信装置及RS-serial通信等的有线网络、如移动通信网、无线局域网(Wireless LAN,WLAN)、无线保真(Wi-Fi)、蓝牙(Bluetooth)及蜂窝(ZigBee)等的无线网络或它们的组合构成。换句话说,通信方式并不局限于此,可包括使用网络310能够包括的通信网(作为一例,移动通信网、有线互联网、无线互联网、广播网、卫星网等)的通信方式和用户终端之间的近距离无线通信。例如,网络310可包括个人局域网(personal area network,PAN)、局域网(local area network,LAN)、校园网(campus areanetwork,CAN)、城域网(metropolitan area network,MAN)、广域网(wide area network,WAN)、宽带网络(broadband network,BBN)、互联网等的网络中的一个以上的任意网络。并且,网络310可包括具有总线网络、星型网络、环型网络、网状网络、星型总线网络、树形网络或分层(hierarchical)网络等的网络拓扑中的一个以上,但并不局限于此。
图3中,作为用户终端的例子,示出了便携式终端100_1、平板终端100_2及个人电脑终端100_3,但并不局限于此,用户终端可以为能够进行有线和/或无线通信,具有能够从用户接收与用户认证有关的信息的用户界面的任意计算装置。例如,用户终端可包括智能手机(smart phone)、手机、导航仪、计算机、笔记本计算机、数字广播终端、个人数字助理(Personal Digital Assistants,PDA)、便携式多媒体播放器(Portable MultimediaPlayer,PMP)、平板计算机、游戏机(game console)、可穿戴设备(wearable device)、物联网(internet of things,IoT)设备、虚拟现实(virtual reality,VR)设备、增强现实(augmented reality,AR)设备等。并且,图3示出3个用户终端100_1、100_2、100_3通过网络310与用户认证系统300进行通信,但并不局限于此,不同数量的用户终端可通过网络310与用户认证系统300进行通信。
用户认证系统300可通过网络310从多个用户终端100_1、100_2、100_3接收用户认证请求。所接收的用户认证请求作为用户认证信息,可存储在与用户认证系统300有关的存储介质中。用户认证请求可包含生成用户认证请求的用户信息、拍摄用户的至少一部分的视频、拍摄用户的身份证的视频等,在用户需要进行对于特定服务或商品的自己的认证的情况下可以请求。
用户认证系统300可通过网络310向用户终端100_1、100_2、100_3传送使多个用户终端100_1、100_2、100_3的用户执行多个行动的多个指令。根据一实施例,这种多个指令可以向多个用户终端100_1、100_2、100_3实时传送。响应于这种多个指令,多个用户终端100_1、100_2、100_3的用户执行对应指令所表示的行动,拍摄所执行的行动的视频可以向用户认证系统300实时传送。这样接收的视频可用于认证多个用户终端100_1、100_2、100_3的用户。
图4为示出本发明一实施例的用户终端100及用户认证系统300的内部结构的框图。用户终端100可包括通信模块412、处理器414、存储器416及输入输出接口418。与此类似地,用户认证系统300可包括输入输出接口432、处理器434、存储器436及通信模块438。如图4所示,用户终端100及用户认证系统300可被配置为利用各自的通信模块412、438来通过网络310进行信息和/或数据的通信。并且,输入输出装置420可被配置为通过输入输出接口418向用户终端100输入信息和/或数据,或者输出从用户终端100生成的信息和/或数据。图4中,通信模块412、处理器414、存储器416及输入输出接口418作为用户终端100的内部结构示出,但其他用户终端(例如,图3的用户终端100_1、100_2、100_3)也可以包括与用户终端100的内部结构相同或类似的内部结构。
通信模块412、438可提供使用户终端100与用户认证系统300可通过网络310相互进行通信的结构或功能,也可提供使用户终端100和/或用户认证系统300与其他用户终端或其他系统(作为一例,单独的云系统、单独的视频接收系统)进行通信的结构或功能。作为一例,用户终端100的处理器414根据存储于如存储器416的记录装置的程序代码生成的请求(例如,用户认证请求)可根据通信模块412的控制来通过网络310向用户认证系统300传递。相反,根据用户认证系统300的处理器434的控制提供的控制信号或指令(例如,引导用户的行动的指令)等可经过通信模块438和网络310来通过用户终端100的通信模块412向用户终端100发送。例如,用户终端100可通过通信模块412从用户认证系统300接收引导用户的行动的指令或与例示性示出这种指令的图像有关的信息中的至少一个。
存储器416、436可包括非暂时性的任意计算机可读记录介质。根据一实施例,存储器416、436可包括随机存取存储器(random access memory,RAM)、如只读存储器(readonly memory,ROM)、磁盘驱动器、固态硬盘(solid state drive,SSD)、闪存(flashmemory)等的永久性大容量存储装置(permanent mass storage device)。作为另一例,如只读存储器、固态硬盘、闪存、磁盘驱动器等的永久性大容量存储装置作为与存储器416、436区分的单独的永久性存储装置,可包括在用户终端100或用户认证系统300中。并且,存储器416、436可存储操作系统和至少一个程序代码(例如,安装于用户终端100并驱动的浏览器或为了提供用户认证服务而安装于用户终端100的用户认证专用应用或用于提供用户认证服务的应用等的代码)。与此不同,存储器416、436可存储为了进行由网页浏览器提供的用户认证而需要的程序代码。
这种软件结构要素可以从与存储器416、436不同的计算机可读记录介质加载。这种另外的计算机可读记录介质可包括能够与这种用户终端100及用户认证系统300直接连接的记录介质,例如,可包括软盘驱动器、磁盘、磁带、DVD/CD-ROM驱动器、存储卡等的计算机可读记录介质。作为另一例,软件结构要素可通过通信模块412、438向存储器416、436加载,而并非通过计算机可读记录介质。例如,至少一个程序可基于通过文件安装的计算机程序(作为一例,上述用户认证专用应用或提供用户认证服务的应用)来向存储器416、436加载,上述文件由开发人员或分配应用的安装文件的文件分配系统通过网络310提供。与此不同,至少一个程序可通过网页浏览器向存储器416、436加载。
处理器414、434可被配置为执行基本的算术、逻辑及输入输出计算来处理计算机程序的指令。指令可通过存储器416、436或通信模块412、438向处理器414、434提供。例如,处理器414、434可根据存储于如存储器416、436的记录装置的程序代码执行接收的指令。
输入输出接口418可以为用于与输入输出装置420接合的单元。作为一例,输入装置可包括具有图像传感器的摄像头、键盘、麦克风、鼠标等的装置,输出装置可包括显示器、扬声器、触觉反馈装置(haptic feedback device)等的装置。作为另一例,输入输出接口418可以为用于与如触摸屏等的用于执行输入和输出的结构或功能合并为一个的装置接合的单元。例如,用户终端100的处理器414在处理向存储器416加载的计算机程序的指令的过程中,利用用户认证系统300或其他用户终端所提供的信息和/或数据构成的服务画面或内容可通过输入输出接口418显示在显示器上。图4示出输入输出装置420不包括在用户终端100中,但并不局限于此,输入输出装置420可以与用户终端100构成一个装置。并且,用户认证系统300的输入输出接口432可以为用于与和用户认证系统300相连接或者用户认证系统300可包括的用于输入或输出的装置(未图示)接合的单元。图4示出输入输出接口418、432为与处理器414、434分离配置的要素,但并不局限于此,输入输出接口418、432可包括在处理器414、434中。
用户终端100及用户认证系统300可包括比图4的结构要素更多的结构要素。但是,无需明确示出大部分现有技术的结构要素。根据一实施例,用户终端100可被实现为包括上述输入输出装置中的至少一部分。并且,用户终端100还可包括收发器(transceiver)、全球定位系统(Global Positioning System,GPS)模块、包含图像传感器的一个以上的摄像头、各种传感器、数据库等的其他结构要素。例如,在用户终端100为智能手机的情况下,通常,可包括智能手机所具有的结构要素,例如,加速度传感器或陀螺仪传感器、摄像头模块、各种物理按钮、利用触摸板的按钮、输入输出端口、用于振动的振动器等多种结构要素也可包括在用户终端100中。
根据一实施例,用户终端100的处理器414可被配置为使提供用户认证服务的应用或网页浏览器进行工作。在此情况下,与对应应用或网页浏览器有关的程序代码可加载在用户终端100的存储器416中。在应用或网页浏览器进行工作的期间,用户终端100的处理器414可通过输入输出接口418接收从输入输出装置420提供的信息和/或数据或者可通过通信模块412从用户认证系统300接收信息和/或数据,并对所接收的信息和/或数据进行处理来存储于存储器416。并且,上述信息和/或数据可通过通信模块412向用户认证系统300提供。
根据一实施例,在提供用户认证服务的应用或网页浏览器进行工作的期间,处理器414可通过与输入输出接口相连接的摄像头、触摸屏、键盘等的输入装置来接收文本、图像等的信息。此外,处理器414可将所接收的图像、视频和/或文本存储于存储器416或者通过通信模块412及网络310向用户认证系统300提供。例如,处理器414可通过触摸屏、键盘等的输入装置接收用于生成用户认证请求的信息。并且,处理器414可通过摄像头等的输入装置接收与拍摄用户的行动的视频有关的信息。所接收的信息可通过通信模块412及网络310向用户认证系统300提供。
处理器414可被配置为通过用户终端100的显示可输出装置(例如,触摸屏、显示器等)、语音可输出装置(例如,扬声器)等的输出装置输出处理后的信息和/或数据。根据一实施例,提供用户认证服务的应用或网页浏览器所提供的信息和/或数据(例如,引导用户的行动的指令、表示这种行动的例示图像等)可通过显示可输出装置显示。根据另一实施例,提供用户认证服务的应用或网页浏览器所提供的信息和/或数据可通过语音可输出装置等输出。例如,引导用户的行动的指令可通过扬声器来通过用户终端输出并向用户提供。
用户认证系统300的处理器434可被配置为生成为了认证用户而需要的任意信息和/或数据。根据一实施例,处理器434可生成为了与请求用户认证的用户终端进行通信而需要的信息和/或数据(例如,与用户终端的信道有关的信息)。根据另一实施例,处理器434可被配置为生成与使用户执行特定行动的多个指令有关的信息和/或数据。这样生成的信息和/或数据可存储于存储器436,进而,可通过通信模块438及网络310向用户终端100提供。
处理器434可以被配置为管理、处理和/或存储从包括用户终端100的多个用户终端和/或多个外部系统接收的信息和/或数据。处理器434可被配置为从多个用户终端实时接收通过图像传感器所拍摄的视频。实时接收的视频可以不间断地,即,连续接收。其中,视频可以为至少拍摄用户的行动的视频。例如,若与用户终端的通信断开而导致所拍摄视频的实时接收中断,则处理器434可以结束用户认证,或者在通信重启之后开始进行新的用户认证。
处理器434可被配置为分析实时接收的视频来确定在所接收的视频内是否存在用户。在用户存在的情况下,处理器434可以分析在视频内提取的用户的脸部,并以所分析的结果为基础来认证用户。例如,处理器434可从与引导拍摄用户的脸部的指令对应拍摄的脸部相关视频提取与用户的脸部有关的信息,从引导拍摄用户身份证的指令对应拍摄的身份证相关视频提取与用户的脸部有关的信息。比较与所提取的两个用户脸部有关的信息,在类似的情况下可以进行用户认证。对于用户的认证结果可通过通信模块438及网络310向用户终端100提供。以下,详细说明以用户认证系统300的处理器434所接收的视频为基础来提供认证用户的服务的具体方式。
图5为示出本发明一实施例的用户认证系统300的结构的框图。用户认证系统300的处理器434可包括指令处理模块510、图像提取模块520、图像分析模块530及认证模块540。并且,处理器434可通过通信模块438与外部系统收发信息和/或数据。此外,处理器434可将信息和/或数据存储于存储器436,或从存储器436获取信息和/或数据。
指令处理模块510可被配置为生成用于认证用户的多个指令。其中,多个指令中的每个指令可包含引导用户的行动的指令。并且,多个指令中的每个指令可包含表示这种行动的例示性图像。例如,多个指令可包含用于确定用户是否存在的任意指令。作为另一例,多个指令可包含引导出示用户的身份证的指令。这样生成的指令可存储于能够通过处理器434访问的存储介质(例如,存储器436)。
指令处理模块510可以在预先存储的多个指令中选择一个以上的指令。根据一实施例,指令处理模块510可以在预先存储的多个指令候补中随机选择多个指令。例如,所选择的多个指令可包含引导拍摄用户的脸部正面的指令。作为另一例,所选择的多个指令可包含引导拍摄用户的身份证的指令。
指令处理模块510可通过通信模块438向用户终端100传送所选择的多个指令。根据一实施例,指令处理模块510可按确定的顺序向用户终端100传送所选择的多个指令。例如,在多个指令包含第一指令、第二指令及第三指令的情况下,可以向用户终端100优先传送第一指令。之后,在对于第一指令的分析通过图像分析模块530完成的情况下,可以向用户终端100传送第二指令。在与第二指令对应接收的视频的分析完成的情况下,指令处理模块510可以向用户终端100传送第三指令。根据另一实施例,在特定指令的情况下,指令处理模块510可以向用户终端100传送与多个信道有关的信息,上述多个信道用于传送在用户终端的画面中的多个区域中的每个区域拍摄的视频。例如,在拍摄用户的区域和拍摄身份证的区域分离的情况下,在两个区域中拍摄的视频可以通过不同的信道传送。
指令处理模块510可以向用户终端100传送多个指令,直至完成用户认证。根据一实施例,多个指令可包含用于确定在所拍摄的视频内是否存在用户的指令。例如,这种指令可包含使用户利用自己的身体(例如,脸部等)和/或物品(例如,身份证等)来执行特定行动的指令。根据另一实施例,多个指令可包含用于在所拍摄的视频内认证用户的指令。例如,这种指令可包括引导适当识别用户的脸部的指令(例如,引导拍摄用户的脸部正面的指令)及引导拍摄用户的身份证的指令。
图像提取模块520可通过通信模块438从用户终端100实时接收视频。若用户终端100从指令处理模块510接收引导特定行动的指令,则用户终端100的用户可以执行这种行动。在执行这种行动的期间,与用户终端100有关的摄像头可以拍摄用户的行动,用户终端100可通过通信模块438向图像提取模块520发送与所接收的指令对应拍摄的视频。用户终端100可以在拍摄视频之后立即向图像提取模块520实时传送所拍摄的视频,图像提取模块520可以实时接收所拍摄的视频。根据一实施例,图像提取模块520可经过网络310来通过通信模块438直接接收视频。根据另一实施例,从用户终端100实时传送的视频可以由管理用户认证系统300与用户终端100之间的信道的额外的服务器(例如,互联网语音协议管理服务器、广播信道管理服务器等)接收,可通过额外的服务器向图像提取模块520提供。根据又一实施例,图像提取模块520可通过多个信道接收在用户终端的画面中的多个区域拍摄的视频。
图像提取模块520可从实时接收的视频提取用于认证用户的一个以上的图像。根据一实施例,图像提取模块520可被配置为根据预先确定的规则来提取在所接收的视频中所包含的一个以上的图像。例如,图像提取模块520可被配置为按确定的时间间隔(例如,每1秒钟提取)来提取所接收的视频中所包含的多个图像。根据另一实施例,图像提取模块520可从指令处理模块510接收与向用户传送的指令有关的信息,根据所接收的指令调节从所接收的视频提取图像的速度。例如,在引导与用户的静态状态对应的行动的指令(例如,观看脸部正面的动作、出示身份证的动作等)的情况下,图像提取模块520可从所接收的视频以低的图像提取速度提取图像。作为又一例,在引导与用户的动态状态对应的行动的指令(例如,移动脸部的动作、移动身份证的动作)的情况下,图像提取模块520可从所接收的视频以高的图像提取速度提取图像。这样提取的图像可存储于图像分析模块530。
图像提取模块520可以确定与多个指令相对应的多个分辨率。其中,分辨率可以为用户终端100与指令对应地利用摄像头拍摄时所适用的分辨率。根据一实施例,分辨率可以按所拍摄的视频内的区域不同地确定。例如,可以设定成以高的分辨率拍摄在所拍摄的视频内用户的身份证所在的区域。这样确定的分辨率可以与对应指令有关地存储于存储器436。
图像提取模块520可以确定与多个指令中的每个指令相对应的传送速度。其中,传送速度可以为当将用户终端100利用摄像头拍摄的视频向用户认证系统300传送时所适用的传送速度。例如,传送速度可以用每秒传送的帧数(fps)表示。这样确定的传送速度可以与对应指令有关地存储于存储器436。根据一实施例,传送速度可以表示通过用户终端100的摄像头拍摄的视频的播放速度。用户终端100可根据与传送速度对应的播放速度向图像提取模块520传送所拍摄的视频。
当向用户终端100传送指令时,指令处理模块510可以一同传送与指令有关的分辨率和/或与传送速度有关的信息。由此,响应于所接收的指令,用户终端100可按所接收的分辨率,利用摄像头进行拍摄,所拍摄的视频按所接收的传送速度向用户认证系统300提供。例如,可针对显示在所拍摄的视频的画面中的多个区域接收不同的分辨率,当拍摄视频时,用户终端100可以对摄像头应用对于多个区域设定的分辨率。
图像分析模块530可从图像提取模块520接收所提取的一个以上的图像,并可分析所提取的图像。根据一实施例,可以将用于分析用户是否执行多个指令中的每个指令所引导的行动的库文件存储于存储器436。在这种环境下,图像分析模块530可访问存储器436,利用预先存储的库文件来分析所接收的图像。根据另一实施例,可以生成用于确定用户是否执行多个指令所引导的行动的分析模型,所生成的分析模型可存储于存储介质(例如,存储器436)。图像分析模块530可利用这种分析模型来分析所提取的图像。参照图7详细说明这种分析模型。
图像分析模块530可分析所接收的一个以上的图像来确定图像内的用户是否执行与多个指令相对应的行动。
根据一实施例,在向用户终端100传送的指令为引导移动用户的身体一部分和/或物品的指令的情况下,图像分析模块530可根据所传送的指令确定用户是否移动。根据另一实施例,在向用户终端100传送的指令为引导移动用户身份证的指令的情况下,图像分析模块530可分析从与这种指令对应接收的视频提取的图像来确定身份证是否移动。与用户是否执行与多个指令相对应的行动有关的信息可以向认证模块540提供。
根据一实施例,图像分析模块530可从所接收的图像提取与用户的脸部有关的信息。例如,所接收的图像可包含与用户的脸部(例如,用户的脸部正面)有关的图像,图像分析模块530可从这种图像提取与用户的脸部有关的第一信息。作为另一例,所接收的图像可包含将用户的身份证成像的图像,图像分析模块530可从用户的身份证成像的图像提取与用户的脸部有关的第二信息。这样提取的与用户有关的第一信息及第二信息可以向认证模块540提供。
根据一实施例,在一个以上的指令按预先确定的顺序向用户终端100发送之后,图像分析模块530可以分析在与从用户终端100传送的一个以上的指令中的每个指令对应接收的视频中提取的图像。例如,图像分析模块530可分析所提取的图像来确定用户是否响应于对应指令来执行指令所引导的行动。在这种配置下,每当生成与一个指令对应的分析结果时,所生成的分析结果可以向认证模块540提供。
认证模块540能够以针对从图像分析模块530提取的图像的分析结果为基础来确定在实时接收的视频内是否存在用户。例如,这种分析结果可按向用户终端传送的指令顺序接收。根据一实施例,在判断为用户执行与向用户终端100传送的一个以上的指令(例如,3个指令)对应的所有行动的情况下,认证模块540可以确定在所接收的视频内存在用户。与此不同,在判断为用户并不执行向用户终端传送的一个以上的指令所对应的行动的情况下,认证模块540可确定为在所接收的视频内不存在用户。
根据另一实施例,在判断为用户未执行与向用户终端100传送的多个指令中的第一指令对应的行动的情况下,认证模块540可以使指令处理模块510向用户终端100传送不同的第二指令。其中,第二指令能够以从与第一指令对应接收的视频分析获取的用户的行动与和第一指令对应的行动之间的不同点为基础来通过指令处理模块510选择。分析从与第二指令对应拍摄的视频提取的图像的结果,在呈现为用户执行与第二指令对应的行动的情况下,认证模块540可确定为在所接收的视频内存在用户。在另一实施例中,在接收到用户执行多个指令中与预先确定的数量的指令对应的行动的分析结果的情况下,认证模块540可以确定为在所接收的视频内存在用户。
在又一实施例中,在判断为从用户终端100接收的视频并不连续的情况下,认证模块540可确定为在所接收的视频内不存在用户。例如,在判断为在视频中所包含的一个以上的连续帧之间的时间差并不与通过指令处理模块510指示的传送速度对应的情况下,可确定为在所接收的视频内不存在用户。
在又一实施例中,在判断为用户未执行与向用户终端100传送的多个指令中的第一指令对应的行动的情况下,认证模块540可以使通信模块438改变为了与用户终端进行通信而使用的信道。根据一实施例,认证模块540为了与用户终端100进行通信而可以将当前使用的信道改变成不同的通信信道。由此,可以防止因通信信道的问题而导致的用户认证无法正常进行的问题。根据另一实施例,认证模块540可以向通信模块438下达指示,以将在与用户终端100的通信过程中当前使用的信道改变成能够与咨询员连接的通信信道。由此,在用户的行动并不与指令所表示的行动对应的情况下,咨询员可以直接进行用户认证来提供对于用户的准确认证。
认证模块540能够以针对所提取的图像的分析结果为基础来认证用户。根据一实施例,认证模块540可以被配置为在从所接收的图像判断为用户存在的情况下认证用户。在另一实施例中,在从图像分析模块530接收到判断为身份证发生移动的视频分析结果的情况下,认证模块540可以判断为身份证的存在。由此,在判断为身份证存在的情况下,可以认证用户。
认证模块540可以接收从与引导拍摄用户脸部的指令对应拍摄的脸部相关视频提取的、与用户的脸部有关的第一信息,并可以接收从与引导拍摄用户身份证的指令对应拍摄的身份证相关视频提取的、与用户的脸部有关的第二信息。而且,可以相互比较所提取的与用户的脸部有关的第一信息及所提取的与用户的脸部有关的第二信息。其中,在所提取的第一信息与所提取的第二信息类似的情况下,认证模块540可以认证用户。例如,在所提取的第一信息与所提取的第二信息之间的类似度为预先确定的类似度以上的情况下,可以判断为所提取的第一信息与所提取的第二信息类似。作为另一例,认证模块540可以确定所提取的第一信息与所提取的第二信息之间的类似度及与此有关的可靠性,能够以所确定的类似度及可靠性为基础确定提取的第一信息与提取的第二信息之间是否类似。这种类似度和/或可靠性可以利用图像处理领域中已知的任意技术来确定,例如,可以利用以从多个图像提取的信息为基础推论/输出类似度和/或可靠性的基于规则的(Rule-based)技术、机器学习技术、人工神经网模型等,但并不局限于此。通过认证模块540确定的用户认证结果可以向用户终端100提供,或者可以向与用户认证请求有关的系统提供。
图5中示出处理器434将指令生成模块510、图像提取模块520、图像分析模块530及认证模块540作为单独的模块包括,但并不局限于此,两个以上的模块可以实现为一个模块。
图6为示出本发明一实施例的用户认证方法600的流程图。用户认证方法600可通过用户认证系统300执行。如图所示,用户认证方法600可以通过向用户终端发送使用户执行多个行动的多个指令的步骤S610开始。例如,多个行动可包括用于确定用户是否存在所需的行动、用于提取用户的脸部所需的行动以及用于拍摄用户的身份证所需的行动等。
之后,在步骤S620中,可从用户终端接收与多个指令对应拍摄的视频。根据一实施例,用户认证系统300可通过用于与用户终端进行通信的信道从用户终端实时接收与多个指令对应拍摄的视频。为此,用户终端可响应于多个指令,利用包括图像传感器的摄像头拍摄指令所表示的行动,并可以向用户认证系统300实时传送所拍摄的视频。
接着,在步骤S630中,用户认证系统300可以确定在视频内是否存在用户。在视频中可拍摄与多个指令中的每个指令对应执行的用户的行动。例如,这种行动可以为使用户身体的一部分(例如,脸部、手、胳膊等)和/或物品(例如,用户可用手举起的物品等)移动的行动。
最后,在步骤S640中,在确定为用户存在的情况下,用户认证系统300能够以从视频提取的用户的脸部为基础来认证用户。根据一实施例,用户认证系统300可以被配置为从视频提取多个用户脸部。例如,可从视频提取与所拍摄的用户的脸部有关的第一信息。此外,可从视频提取与在用户的身份证中所包含的用户的脸部有关的第二信息。之后,用户认证系统300可比较所提取的与用户的脸部有关的第一信息与第二信息之间的类似度,在第一信息及第二信息类似的情况下,可以认证用户。
图7为示出本发明一实施例的被配置为以图像710为基础来推论或输出行动执行结果730的图像分析模型720的图。图像分析模型720可通过用户认证系统300的处理器434生成,所生成的图像分析模型720可存储于处理器434能够访问的存储介质(例如,存储器436)。图像710可包含在通过用户认证系统300接收的视频内提取的一个以上的图像。例如,图像提取模块520可从用户终端实时接收所拍摄的视频,根据预先确定的规则从所接收的视频提取图像710。所提取的图像710可向图像分析模块530提供,图像分析模块530可被配置为向图像分析模型720输入所提取的图像710来推论或输出用户的行动执行结果730。例如,行动执行结果可包含与用户是否执行与多个指令中的每个指令相对应的行动有关的信息。其中,图像分析模型720可包括用于分析多个指令所表示的多个行动的多个模型。
根据一实施例,图像分析模块530可以被配置为将多个用户的行动成像的多个学习图像作为图像分析模型720的输入图像提供来推论或输出对于在图像内用户是否执行特定行动的结果。例如,图像分析模型720可被配置为通过基于规则(Rule-based)的学习及预测来推论对于用户是否执行特定行动的结果。作为另一例,图像分析模型720可被配置为通过已知的机器学习技术学习,通过所输入的图像输出行动执行结果730。例如,机器学习技术可包括寻找极大特殊假设(Find-S)算法、版本空间(Version Space)算法以及候选消除(Candidate Elimination)算法。作为又一例,图像分析模型720可包括利用任意神经网络等来生成的人工神经网模型。
图8为示出本发明一实施例的以拍摄根据多个指令的用户的行动的视频为基础认证用户的例示图。用户终端100可通过用户认证系统300请求用户认证。对此进行响应,用户认证系统300可生成用于与用户终端进行通信的信道。例如,在利用网页即时通信来使用户认证系统300与用户终端进行通信的情况下,用户认证系统300可以向用户终端传送包含链接的信息(例如,“用户请求开始”按钮)。对此进行响应,用户终端可通过点击这种按钮来生成用于与用户进行通信的信道。用户终端100可通过所生成的信道向用户认证系统300实时传送通过与用户终端相连接的摄像头拍摄的视频。
用户终端100可以开始实时传送通过摄像头拍摄的视频,可以向用户认证系统300实时传送拍摄至传送结束的视频(步骤S810)。所拍摄的视频可通过用户认证系统300与用户终端100之间的信道实时传送。由此,用户认证系统300可以开始实时接收通过用户终端100拍摄的视频,可通过所生成的信道实时接收拍摄至接收完成的视频(步骤S812)。即,用户认证系统300在执行用户认证的期间,可以实时及连续接收通过用户终端100拍摄的视频。
在开始接收通过用户终端100拍摄的视频之后,用户认证系统300可按预先确定的顺序向用户终端100传送多个指令。例如,可以随机选择这种多个指令。对此进行响应,用户可以执行与多个指令相对应的行动,用户终端100可以向用户认证系统300实时传送拍摄所执行的行动的视频。用户认证系统300可分析实时传送的视频并存储所分析的结果。此外,用户认证系统300能够以实时存储的视频为基础认证用户,并可以向用户终端100通报认证结果。
首先,用户认证系统300可以传送“观看脸部正面”的指令(步骤S814)。对此进行响应,用户120可以执行行动以在通过摄像头拍摄的画面呈现出自己的脸部正面(步骤S816)。这种行动通过摄像头拍摄,用户终端100可以向用户认证系统300实时传送所拍摄的视频。用户认证系统300可分析实时接收的视频,并确定用户是否执行传送的指令所表示的行动,即,脸部朝向正面的行动,并可存储分析结果(步骤S818)。
接着,用户认证系统300可以向用户终端100传送“左右摇头”的指令(步骤S820)。对此进行响应,用户120可以执行行动以在通过摄像头拍摄的画面呈现出左右摇头的行动(步骤S822)。用户终端100可通过摄像头拍摄这种行动,并可向用户认证系统300实时传送所拍摄的视频。用户认证系统300可分析实时接收的视频来确定用户是否执行所传送的指令所表示的行动,即,左右摇头的行动,并可存储分析结果(步骤S824)。在本发明中,用户120执行与多个指令相对应的多个指令所引导的行动,因此,用户认证系统300可以在认证用户期间确定用户存在于摄像头前。
在确定为用户存在的情况下,用户认证系统300可以向用户终端100请求或传送使身份证位于特定区域并被拍摄的指令(步骤S826)。例如,特定区域可以与构成所拍摄的视频的各个图像或帧内的一部分区域对应,并可通过用户终端的显示器显示。对此进行响应,用户可以在特定区域出示用户的身份证(步骤S828)。这种身份证可通过与用户终端100有关的摄像头拍摄,所拍摄的视频可以向用户认证系统300实时传送。用户认证系统300可分析与在特定区域出示身份证的指令对应拍摄的身份证相关视频来提取用户的脸部图像,并从与脸部请朝正面的指令对应拍摄的脸部相关视频提取用户的脸部图像(步骤S830)。用户认证系统300比较所提取的两个用户的脸部图像,在相互类似的情况下,可以通报完成用户的认证(步骤S832)。响应于这种通报,用户终端100可以终止所拍摄的视频的实时传送。由此,在用户认证系统300中,所拍摄的视频的接收也将会终止。
图9为示出本发明一实施例的例示性指令信息数据库900的图。指令信息数据库900可构建为多个指令、分辨率、传送速度等相关存储的任意数据结构。其中,根据指令,各个区域的分辨率可以被设定为不相同。
与多个指令相对应的分辨率及传送速度可通过处理器434确定,所确定的分辨率及传送速度可以作为指令信息数据库900存储于存储介质(例如,存储器436)。根据一实施例,可对引导拍摄与用于认证用户的脸部有关的图像的指令确定高的分辨率并存储。例如,如图所示,可接收与指令1对应地拍摄脸部的正面的视频,因此与指令1有关的分辨率(例如,720p)可被设定为高于与其他指令有关的分辨率。作为另一例,可接收与指令5对应地拍摄脸部和身份证(表面)的视频,用户的身份证内的脸部图像可用于认证用户。由此,引导拍摄用户的身份证的区域2的分辨率(例如,1024p)可被设定为高于与其他指令有关的分辨率。在此情况下,与区域1和/或区域2有关的信息可作为指令信息数据库900或区域信息数据库存储于存储介质(例如,存储器436)。
根据另一实施例,在用于确定用户是否存在的多个指令中,可对引导拍摄用于分析用户的移动的图像的指令设定比较高的分辨率。例如,可以接收拍摄与指令2对应地使脸部向左侧移动的行动的视频,因此,与指令2有关的分辨率(例如,480p)可以被设定为高于与表示用户的静态移动的指令有关的分辨率。并且,在指令4的情况下也可以类似地设定。与此不同,例如,表示用户的静态移动的指令可以包含例如指令3(“请摆出V字”),与指令3有关的分辨率可以被设定为比较低的240p。
处理器434可根据多个指令不同地确定传送速度。根据一实施例,可对引导拍摄用于分析用户的移动的图像的指令设定高的传送速度。例如,指令2和指令4可以接收拍摄用户的移动的视频,因此,与其他指令相比,可以设定高的传送速度(例如,5fps)。根据另一实施例,可以对与用户的静态移动有关的指令设定比较低的传送速度。例如,指令1、指令3及指令5可以与用户的静态移动有关,如图所示,传送速度可以被设定为1fps。
当处理器434参照存储于存储介质的指令信息数据库900来向用户终端传送各个指令时,可以一同传送与和各个指令有关的分辨率和/或传送速度有关的信息。对此进行响应,当用户终端与所接收的指令对应地通过摄像头拍摄视频时,所接收的分辨率可适用于摄像头,可以以所接收的传送速度向用户认证系统300传送所拍摄的视频的帧或图像。用户终端可根据指令以不同的传送速度向用户认证系统300传送所拍摄的视频,因此,可以将在用于认证用户的用户终端中的数据使用量最小化。
图10为示出通过本发明一实施例的用户认证系统300,根据用户是否执行行动来选择不同指令的例示的图。如图所示,用户认证系统300可以选择指令1(“向右转脸部”)(步骤S1010)。例如,这种指令1可通过预先确定的规则选择。在认证用户的过程中,所选择的指令1可以向用户终端传送。
响应于所接收的指令1,用户终端可以利用摄像头拍摄用户的行动,并可以向用户认证系统300传送所拍摄的用户的行动。用户认证系统300可分析所接收的视频来确定用户是否执行指令1(步骤S1020)。若确定为用户执行指令1,则可以选择指令2(“请眨眼”)(步骤S1030)。其中,指令2所表示的行动有可能与指令1所表示的行动无关。
若确定为用户并未执行指令1,则可以生成或选择指令3(“向左转脸部”)(步骤S1040)。其中,指令3能够以从所接收的视频的分析而获取的用户的行动与和指令1对应的行动之间的不同点为基础选择。例如,与指令3有关的行动可以为和与指令1有关的行动类似的行动。由此,在未验证到与指令1对应拍摄的视频内的用户的行动的情况下,可通过分析与表示类似的行动的指令3对应拍摄的视频内的用户的行动来完善或再次验证与指令1对应分析的结果。
虽然在图10中并未示出,但若确定为用户未执行指令1,则也可以结束验证处理,或者再次请求执行指令1。在此情况下,用户认证系统300可以向用户终端传送与确定为未执行指令1有关的信息。
另一方面,用户终端可利用提供用户认证服务的应用或网页浏览器来执行用户认证请求。对此进行响应,可以生成用户终端与提供用户认证服务的用户认证系统之间的信道。用户终端可利用所生成的信道来与用户认证系统相互进行通信。以下的图11至图15示出在利用用户认证服务的过程中,拍摄用户与指令对应地进行行动的状态的例示性画面。
图11为示出本发明一实施例的与指令对应地拍摄用户的行动的画面的例示图。根据一实施例,用户终端可从用户认证系统300接收“脸部请朝正面”的指令。响应于这种指令,用户可执行行动以使自己的脸部位于显示在显示利用摄像头拍摄的视频的画面上的区域1110。在执行上述行动的情况下,拍摄用户的脸部正面的视频可以向用户认证系统300实时传送。对此进行响应,用户认证系统300在认证用户的过程中,可以分析在视频内的一部分区域1110中拍摄的视频。
如图所示,与所接收的指令对应地,与所接收的指令有关的信息可以一同显示在显示利用摄像头拍摄的视频的用户终端的画面上。根据一实施例,可以在显示所拍摄的视频的用户终端的画面上一同显示表示所接收的指令的文本1130即“脸部请朝正面”。此外,表示所接收的指令的人物图像1120也可以一同显示在用户终端的画面上。参照上述文本1130和/或人物图像1120,用户可以执行与所接收的指令对应的行动。实时接收拍摄上述行动的视频的用户认证系统300可以确定在视频内是否存在用户。并且,用户认证系统300可以在所接收的视频内提取与用户的脸部有关的信息。
图12为示出本发明另一实施例的与指令对应地拍摄用户的行动的画面的例示图。根据本实施例,用户终端可以从用户认证系统300接收“向右转脸部”的指令。响应于这种指令,用户可以使自己的脸部位于显示在利用摄像头拍摄的画面上的特定区域1210来进行向右侧转脸部的行动。在执行上述转动脸部的行动的情况下,可以向用户认证系统300实时传送拍摄用户的脸部向右转的行动的视频。对此进行响应,用户认证系统300在认证用户的过程中,可以分析在视频内的一部分区域1210中拍摄的视频。
如图所示,与所接收的指令对应地,与所接收的指令有关的信息可以一同显示在显示利用摄像头拍摄的视频的用户终端的画面上。根据一实施例,表示所接收的指令的文本1230即“向右转脸部”可以一同显示在显示拍摄的视频的用户终端的画面上。此外,表示所接收的指令的人物图像1220也可以一同显示在用户终端的画面上。参照这种文本1230和/或人物图像1220,用户可以执行与所接收的指令对应的行动,实时接收拍摄这种行动的视频的用户认证系统300可以确定在视频内是否存在用户。
图13为示出本发明又一实施例的与指令对应地拍摄用户的行动的画面的例示图。根据本实施例,用户终端可从用户认证系统300接收“请闭眼”的指令。响应于这种指令,用户可以使自己的脸部位于显示在利用摄像头拍摄的画面上的区域1310并执行闭眼的行动。在执行上述行动的情况下,拍摄用户闭眼的行动的视频可以向用户认证系统实时传送。对此进行响应,用户认证系统300在认证用户的过程中可以分析在视频内的一部分区域1310中拍摄的视频。
在图13中,与所接收的指令对应地,与所接收的指令有关的信息可以一同显示在显示利用摄像头拍摄的视频的用户终端的画面上。例如,表示所接收的指令的文本1330即“请闭眼”也可以一同显示在显示拍摄的视频的用户终端的画面上。此外,表示所接收的指令的人物图像1320也可一同显示在用户终端的画面上。参照上述文本1330和/或人物图像1320,用户可以执行与所接收的指令对应的行动,实时接收拍摄这种行动的视频的用户认证系统300可以确定在视频内是否存在用户。
图14为示出本发明一实施例的与指令对应地一同拍摄用户及用户的身份证的例示图。根据本实施例,用户终端可从用户认证系统300接收“与脸部一同示出身份证(表面)”的指令。响应于这种指令,如图所示,用户可执行行动以使自己的脸部位于显示在利用摄像头拍摄的画面上的区域1410。与此同时,用户可执行行动以使身份证位于显示在画面上的区域1440。在执行上述行动的情况下,可以向用户认证系统300实时传送拍摄用户的脸部及身份证的视频。对此进行响应,用户认证系统300可在进行用户认证的过程中分析在视频内的区域1410和/或区域1440中拍摄的视频。
如图所示,与所接收的指令对应地,与所接收的指令有关的信息可以一同显示在显示利用摄像头拍摄的视频的用户终端的画面上。根据一实施例,可将表示所接收的指令的文本1420即“与脸部一同示出身份证(表面)”一同显示在显示拍摄的视频的用户终端的画面上。此外,表示所接收的指令的身份证图像1430也一同显示在用户终端的画面上。参照这样显示在画面上的信息,用户可以执行与所接收的指令对应的行动,接收拍摄这种行动的视频的用户认证系统300可从身份证图像提取用户的脸部。可相互比较从图11的拍摄脸部正面的视频提取的脸部图像和从拍摄身份证的视频提取的脸部图像来用于认证用户。
根据一实施例,在拍摄用户的至少一部分(其中,包括用户的脸部的用户的至少一部分)的区域1410和拍摄身份证的区域1440可适用不同的设定。例如,两个区域适用不同的信道,在两个区域中拍摄的视频可以通过分别设定的信道向用户认证系统300传送。作为另一例,两个区域适用不同的分辨率,在两个区域中拍摄的视频可以为以不同的分辨率拍摄的视频。其中,在引导拍摄身份证的区域1440中拍摄的视频的分辨率可大于在引导拍摄用户的至少一部分的区域1410中拍摄的视频的分辨率。
图15为示出本发明一实施例的为了确认用户的身份证是否存在而与指令对应地拍摄身份证的移动的例示图。根据一实施例,用户终端可从用户认证系统300接收“示出脸部和身份证(表面)并移动身份证”的指令。响应于这种指令,用户可执行行动以使自己的脸部位于显示在利用摄像头拍摄的画面上的区域1510。与此同时,用户可以使身份证位于利用摄像头拍摄的画面的其他区域1540并进行移动身份证的行动。在执行上述行动的情况下,拍摄用户的脸部及移动身份证的行动的视频可以向用户认证系统300实时传送。对此进行响应,用户认证系统300在认证用户的过程中可以分析在视频内的区域1510和/或区域1540中拍摄的视频。
图15中,与所接收的指令对应地,与所接收的指令有关的信息可以一同显示在显示利用摄像头拍摄的视频的用户终端的画面上。例如,可将表示所接收的指令的文本1520即“示出脸部和身份证(表面)并移动身份证”一同显示在显示拍摄的视频的用户终端的画面上。此外,表示所接收的指令的身份证图像1530和身份证区域1540也可以一同显示在用户终端的画面上。用户可利用显示在画面上的这种信息来执行与所接收的指令对应的行动,实时接收拍摄这种行动的视频的用户认证系统300可以确定身份证是否存在。例如,用户认证系统300能够以分析视频而获取的用户身份证的移动为基础来确定在视频内是否存在用户的身份证。在身份证存在的情况下,用户认证系统300可以认证用户。
上述用户认证方法可实现为在计算机可读记录介质中的计算机可读代码。计算机可读记录介质包括存储有可通过计算机系统读取的数据的所有种类的记录装置。作为计算机可读记录介质的例子,包括只读存储器、随机存取存储器、CD-ROM、磁带、软盘、光学数据存储装置等。并且,计算机可读记录介质可分散在通过网络连接的计算机系统,通过分散方式存储并执行计算机可读代码。而且,用于实现上述实施例的功能性(functional)程序、代码及代码段可由本发明所属技术领域的程序员轻松推论。
本发明的方法、动作或技术可通过多个单元实现。例如,这种技术可通过硬件、固件、软件或它们的组合实现。本发明所属技术领域的技术人员可以理解与本发明的内容相关说明的多个例示性逻辑块、模块、电路及算法步骤可通过电子硬件、计算机软件或两者的组合实现。为了明确说明硬件及软件的这种相互替代,多个例示性结构要素、块、模块、电路及步骤在它们的功能性观点上已在上面进行说明。这些功能是通过硬件实现还是通过软件实现根据向特定应用及整体系统附加的设计要求事项确定。本发明所属技术领域的技术人员为了各个特定应用而可以实现以多种方式说明的功能,但这些实现不能被解释成超出本发明的范围。
在硬件实现中,在执行技术的过程中所利用的处理单元可以在一个以上的专用集成电路、数字信号处理器、数字信号处理设备(digital signal processing devices,DSPD)、可编程逻辑器件(programmable logic devices,PLD)、现场可编程门阵列(fieldprogrammable gate arrays,FPGA)、处理器、控制器、微控制器、微处理器、电子设备、以执行在本发明中说明的功能的方式设计的其他电子单元、计算机或它们的组合内实现。
因此,与本发明相关说明的多个例示性逻辑块、模块及电路可通过通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或其他可编程逻辑设备、离散门或晶体管逻辑、离散硬件组件、或以执行在本发明中说明的功能的方式设计的任意组合实现或执行。通用处理器可以为微处理器,代替性地,处理器也可以为任意种类的处理器、控制器、微控制器或状态机。处理器也可通过计算设备的组合,例如,数字信号处理器和微处理器、多个微处理器、与数字信号处理器芯连接的一个以上微处理器或任意其他结构的组合实现。
在固件和/或软件的实现中,技术可通过存储在如随机存取存储器(randomaccess memory,RAM)、只读存储器(read-only memory,ROM)、非易失性随机存取存储器(non-volatile random access memory,NVRAM)、可编程只读存储器(programmable read-only memory,PROM)、可擦可编程只读存储器(erasable programmable read-onlymemory,EPROM)、电可擦可编程只读存储器(electrically erasable PROM,EEPROM)、闪存、压缩碟片(compact disc,CD)、磁或光数据存储设备等的计算机可读记录介质上的指令实现。指令可通过一个以上的处理器执行,可以使多个处理器执行本发明中说明的功能性特定实施方式。
在通过软件实现的情况下,上述技术可作为一个以上的指令或代码,可存储于计算机可读介质上或通过计算机可读介质传送。计算机可读介质包括使计算机程序从一个场所向另一个场所轻松传送的任意介质,包括计算机存储介质及通信介质两者。存储介质可以是通过计算机可访问的任何可利用的介质。作为非限定性例子,这种计算机可读介质可包括随机存取存储器、只读存储器、电可擦可编程只读存储器、CD-ROM或其他光盘存储器、磁盘存储器或其他磁存储设备、或为了将所期望的程序代码以指令或数据结构的形式移送或存储而使用的可通过计算机访问的任意其他介质。并且,任意连接都能够被适当地称为计算机可读介质。
例如,若软件通过使用同轴电缆、光纤维电缆、软线、数字用户线(DSL)或如红外线、无线及微波的无线技术来从网页、服务器或其他远程源传送,则同轴电缆、光纤维电缆、软线、数字用户线或如红外线、无线及微波的无线技术包括在介质的定义内。在本发明中所使用的磁盘(disk)和圆盘(disc)包括CD、激光光盘、光盘、数字多功能光盘(digitalversatile disc,DVD、)、软盘及蓝光光盘,其中,多个磁盘(disk)通常磁性生成数据,相反,多个圆盘(disc)利用激光来光学生成数据。上述组合也包括在计算机可读介质的范围内。
软件模块可常驻在随机存取存储器、闪存、只读存储器、可擦可编程只读存储器、电可擦可编程只读存储器、寄存器、硬盘、可移动磁盘、CD-ROM或公知的任意其他形式的存储介质内。例示性存储介质可以与处理器相连接,以使处理器从存储介质读取信息或在存储介质中记录信息。代替性地,存储介质可以与处理器合并。处理器和存储介质可存在于专用集成电路内。专用集成电路可存在于用户终端内。代替性地,处理器和存储介质可以在用户终端中作为个别结构要素存在。
以上说明的实施例中记述了在一个以上的独立型计算机系统中使用当前公开的主题的实施方式,但本发明并不局限于此,也可以与如网络或分散计算环境的任意计算环境相关地实现。进一步,在本发明中,主题的实施方式可以在多个处理芯或装置中实现,储存器可受到多个装置的类似的影响。这种装置也可包括个人计算机、网络服务器及便携式装置。
在本说明书中,本发明与一部分实施例相关地说明,在不超出本发明所属技术领域的技术人员可以理解的本发明范围的范围内可进行多种变形及变更。并且,这些变形及变更也属于本说明书中附加的发明要求保护范围的范围内。

Claims (20)

1.一种用户认证方法,其特征在于,包括:
发送步骤,向用户终端发送使用户执行多个行动的多个指令;
接收步骤,从上述用户终端接收与上述多个指令对应拍摄的视频;
确定步骤,确定在上述视频内是否存在上述用户;以及
认证步骤,在确定为上述用户存在的情况下,以从上述视频提取的上述用户的脸部为基础来认证上述用户。
2.根据权利要求1所述的用户认证方法,其特征在于,从上述用户终端接收与上述多个指令对应拍摄的视频的步骤包括:通过用于与上述用户终端进行通信的信道,从上述用户终端实时接收上述视频。
3.根据权利要求2所述的用户认证方法,其特征在于,上述视频通过用于与上述用户终端进行通信的信道连续接收。
4.根据权利要求1所述的用户认证方法,其特征在于,确定在上述视频内是否存在上述用户的步骤包括如下的步骤:
通过分析上述视频来确定在上述视频内上述用户是否执行与上述多个指令相对应的多个行动;以及
在确定为上述用户执行与上述多个指令相对应的多个行动的情况下,确定为在上述拍摄的视频内存在上述用户。
5.根据权利要求1所述的用户认证方法,其特征在于,
从上述用户终端接收与上述多个指令对应拍摄的视频的步骤包括如下的步骤:
从上述用户终端接收与引导拍摄用户脸部的指令对应地拍摄的脸部相关视频;以及
从上述用户终端接收与引导拍摄用户身份证的指令对应地拍摄的身份证相关视频,
认证上述用户的步骤包括:
第一信息提取步骤,从上述脸部相关视频提取与上述用户的脸部有关的第一信息;
第二信息提取步骤,从上述身份证相关视频提取与上述用户的脸部有关的第二信息;
比较步骤,对所提取的上述第一信息及所提取的上述第二信息进行比较;以及
在所提取的上述第一信息及所提取的上述第二信息类似的情况下,认证上述用户的步骤。
6.根据权利要求5所述的用户认证方法,其特征在于,上述多个指令包含引导拍摄用户的脸部正面的指令。
7.根据权利要求5所述的用户认证方法,其特征在于,
上述多个指令包含引导用户身份证的移动的指令,
接收上述身份证相关视频的步骤包括:从上述用户终端接收根据上述指令拍摄上述用户的身份证的视频,
认证上述用户的步骤包括:以分析上述视频而获取的用户身份证的移动为基础来确定在上述视频内是否存在上述用户的身份证。
8.根据权利要求5所述的用户认证方法,其特征在于,
上述身份证相关视频包括一同拍摄上述用户的至少一部分及上述用户的身份证的视频,
接收上述身份证相关视频的步骤包括如下的步骤:
通过第一信道,从上述用户终端接收包括上述用户的至少一部分的区域;以及
通过第二信道,从上述用户终端接收包括上述用户的身份证的区域。
9.根据权利要求1所述的用户认证方法,其特征在于,上述向用户终端发送使用户执行多个行动的多个指令的步骤包括:
选择步骤,在预先确定的多个指令候补中随机选择上述多个指令;以及
发送步骤,向上述用户终端发送随机选择的上述多个指令。
10.根据权利要求1所述的用户认证方法,其特征在于,
上述向用户终端发送使用户执行多个行动的多个指令的步骤包括:向上述用户终端发送使上述用户进行第一行动的第一指令,
从上述用户终端接收与上述多个指令对应拍摄的视频的步骤包括:从上述用户终端接收与上述第一指令对应拍摄的视频,
确定在上述视频内是否存在上述用户的步骤包括:分析与上述第一指令对应拍摄的视频来确定上述用户是否响应于上述第一指令而执行上述第一行动。
11.根据权利要求10所述的用户认证方法,其特征在于,
上述向用户终端发送使用户执行多个行动的多个指令的步骤还包括:在确定为上述用户执行上述第一行动的情况下,向上述用户终端发送使上述用户执行第二行动的第二指令,
从上述用户终端接收与上述多个指令对应拍摄的视频的步骤还包括:从上述用户终端接收与上述第二指令对应拍摄的视频,
确定在上述视频内是否存在上述用户的步骤还包括:分析与上述第二指令对应拍摄的视频来确定上述用户是否响应于上述第二指令而执行上述第二行动。
12.根据权利要求10所述的用户认证方法,其特征在于,
上述向用户终端发送使用户执行多个行动的多个指令的步骤还包括:在确定为上述用户不执行上述第一行动的情况下,向上述用户终端发送使上述用户执行第三行动的第三指令,
上述第三指令以从与上述第一指令对应拍摄的视频的分析中获取的用户的行动与上述第一行动之间的不同点为基础选择。
13.根据权利要求10所述的用户认证方法,其特征在于,还包括:在确定为上述用户不执行上述第一行动的情况下,利用与为了与上述用户终端进行通信而使用的信道不同的信道来与上述用户终端进行通信。
14.根据权利要求1所述的用户认证方法,其特征在于,上述向用户终端发送使用户执行多个行动的多个指令的步骤包括:向上述用户终端一同发送与对应于上述多个指令的多个分辨率有关的信息和上述多个指令。
15.根据权利要求14所述的用户认证方法,其特征在于,与上述多个指令对应的多个分辨率包含显示与上述多个指令对应拍摄的视频的画面中的多个区域中的每个区域的分辨率。
16.根据权利要求14所述的用户认证方法,其特征在于,
上述多个指令包含引导一同拍摄上述用户的至少一部分及上述用户的身份证的指令,
引导拍摄上述用户的身份证的区域的分辨率被设定为高于引导拍摄上述用户的至少一部分的区域的分辨率。
17.根据权利要求1所述的用户认证方法,其特征在于,上述向用户终端发送使用户执行多个行动的多个指令的步骤包括:向上述用户终端一同发送与对应于上述多个指令中的每个指令的传送速度有关的信息和上述多个指令。
18.一种计算机可读记录介质,其特征在于,记录有用于在计算机中执行根据权利要求1至17中任一项所述的用户认证方法的计算机程序。
19.一种用户认证系统,其特征在于,包括:
通信模块,向用户终端发送使用户执行多个行动的多个指令,从上述用户终端接收与上述多个指令对应拍摄的视频;
存储器;以及
至少一个处理器,上述至少一个处理器与上述存储器相连接,被配置为执行包含在上述存储器中的多个计算机可读指令,
上述至少一个处理器还被配置为确定在上述视频内是否存在上述用户,在确定为上述用户存在的情况下,以从上述视频提取的上述用户的脸部为基础来认证上述用户。
20.根据权利要求19所述的用户认证系统,其特征在于,上述通信模块还被配置为通过用于与上述用户终端进行通信的信道来从上述用户终端实时接收上述视频。
CN202011502073.2A 2019-12-20 2020-12-18 认证用户的方法及系统以及计算机可读记录介质 Pending CN113014863A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2019-0172446 2019-12-20
KR1020190172446A KR102320723B1 (ko) 2019-12-20 2019-12-20 사용자를 인증하는 방법 및 시스템

Publications (1)

Publication Number Publication Date
CN113014863A true CN113014863A (zh) 2021-06-22

Family

ID=76383466

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011502073.2A Pending CN113014863A (zh) 2019-12-20 2020-12-18 认证用户的方法及系统以及计算机可读记录介质

Country Status (4)

Country Link
US (1) US11527108B2 (zh)
JP (1) JP2021099802A (zh)
KR (2) KR102320723B1 (zh)
CN (1) CN113014863A (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD954076S1 (en) * 2019-11-25 2022-06-07 LINE Plus Corporation Display panel with a graphical user interface
CN115087952A (zh) * 2020-02-10 2022-09-20 日本电气株式会社 用于便携式终端的程序、处理方法及便携式终端
WO2023022367A1 (ko) * 2021-08-19 2023-02-23 민팃(주) 개인 인증 방법 및 장치
US20230230088A1 (en) * 2022-01-06 2023-07-20 Socure, Inc. Method and System of Predictive Document Verification and Machine Learning Therefor
WO2023153324A1 (ja) * 2022-02-08 2023-08-17 日本電気株式会社 証跡管理装置、証跡管理システム、証跡管理方法及び記録媒体
KR102477839B1 (ko) * 2022-03-15 2022-12-15 주식회사 파프리카데이터랩 데이터 내 검출된 객체의 특성을 이용한 데이터 유효성 검사 방법 및 장치
JP7239047B1 (ja) 2022-07-19 2023-03-14 凸版印刷株式会社 認証システム、認証方法、及びプログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010092888A (ko) * 2000-03-27 2001-10-27 유영산 인터넷을 이용한 페이스 투 페이스에 의한 인증방법
CN103314386A (zh) * 2010-10-29 2013-09-18 爱克斯欧德斯支付系统有限公司 使用代币处理交易的方法和系统
KR101394597B1 (ko) * 2012-05-09 2014-05-27 김명훈 얼굴검출 알고리즘을 이용한 영상보안장치와 영상보안시스템 및 얼굴검출 알고리즘을 이용한 영상보안방법
CN104298909B (zh) * 2013-07-19 2018-11-30 富泰华工业(深圳)有限公司 电子装置、身份验证系统及方法
KR102270674B1 (ko) * 2013-09-30 2021-07-01 삼성전자주식회사 생체인식 카메라
US10853680B2 (en) * 2015-07-14 2020-12-01 Panasonic Intellectual Property Management Co., Ltd. Identification medium recognition device and identification medium recognition method
US10956544B1 (en) * 2016-04-01 2021-03-23 Massachusetts Mutual Life Insurance Company Access control through head imaging and biometric authentication
US10521503B2 (en) * 2016-09-23 2019-12-31 Qualtrics, Llc Authenticating a respondent to an electronic survey
KR102042129B1 (ko) * 2017-02-10 2019-11-27 주식회사 코스콤 본인 인증 방법 및 그 장치
US10565304B2 (en) * 2017-09-16 2020-02-18 Noredink Corp. System and method for implementing a proficiency-driven feedback and improvement platform
KR102498545B1 (ko) * 2018-02-23 2023-02-10 삼성전자주식회사 생체 인증과 관련된 객체의 표시에 따라 생체 인증을 수행하는 방법 및 이를 위한 전자 장치
KR20190107976A (ko) * 2018-03-13 2019-09-23 삼성전자주식회사 복수의 구동 방식을 이용하여 획득된 복수의 이미지 정보에 기반하여,지문 정보를 생성하기 위한 방법 및 그 전자 장치
JP6481074B1 (ja) 2018-07-31 2019-03-13 株式会社メルカリ プログラム、情報処理方法、情報処理装置
US20220050890A1 (en) * 2018-09-12 2022-02-17 Isx Ip Ltd Remotely verifying an identity of a person
WO2020136284A1 (en) * 2018-12-28 2020-07-02 De Malzac De Sengla Guillaume Electronic registered mail methods, apparatus, and system

Also Published As

Publication number Publication date
JP2021099802A (ja) 2021-07-01
KR20210134540A (ko) 2021-11-10
KR20210080064A (ko) 2021-06-30
KR102320723B1 (ko) 2021-11-02
US20210192189A1 (en) 2021-06-24
KR102464984B1 (ko) 2022-11-09
US11527108B2 (en) 2022-12-13

Similar Documents

Publication Publication Date Title
CN113014863A (zh) 认证用户的方法及系统以及计算机可读记录介质
US11017070B2 (en) Visual data processing of response images for authentication
US10325117B2 (en) Quick usage control
US8462997B2 (en) User-specific attribute customization
US11043032B2 (en) Visual display systems and method for manipulating images of a real scene using augmented reality
CN117056892A (zh) 虚拟现实中对访问私有数据的安全授权
CN111966275B (zh) 程序试用方法、系统、装置、设备及介质
US20150244814A1 (en) Adaptive co-browsing
US11159590B1 (en) Content recognition while screen sharing
JP7393487B2 (ja) プロフィール写真を推薦する方法とシステム、および非一時的なコンピュータ読み取り可能な記録媒体
US10248306B1 (en) Systems and methods for end-users to link objects from images with digital content
KR102277691B1 (ko) 얼굴 이미지와 메신저 계정의 연동에 기반한 이미지 관리 방법 및 시스템
WO2020028107A1 (en) Tagging an image with audio-related metadata
KR20200072456A (ko) 이미지에서 추출된 키워드를 이용하여 이미지를 필터링하기 위한 방법과 시스템 및 비-일시적인 컴퓨터 판독 가능한 기록 매체
US20200389600A1 (en) Environment-driven user feedback for image capture
JP6839771B2 (ja) 補正パターン分析による映像補正方法およびシステム
KR20200106026A (ko) 얼굴 인식에 기초하여 정보를 제공하는 방법과 시스템 및 비-일시적인 컴퓨터 판독 가능한 기록 매체
KR20190143083A (ko) 이미지에서 추출된 키워드를 이용하여 이미지를 필터링하기 위한 방법과 시스템 및 비-일시적인 컴퓨터 판독 가능한 기록 매체
US11783724B1 (en) Interactive training apparatus using augmented reality
KR102485811B1 (ko) 이미지에서 추출된 키워드를 이용하여 이미지를 필터링하기 위한 방법과 시스템 및 비-일시적인 컴퓨터 판독 가능한 기록 매체
KR102147485B1 (ko) 촬영 가이드 방법 및 시스템
CN111083095A (zh) 提供认证数据的方法、计算机装置及计算机程序

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination