CN110688641A - 信息处理方法及电子设备 - Google Patents
信息处理方法及电子设备 Download PDFInfo
- Publication number
- CN110688641A CN110688641A CN201910945248.8A CN201910945248A CN110688641A CN 110688641 A CN110688641 A CN 110688641A CN 201910945248 A CN201910945248 A CN 201910945248A CN 110688641 A CN110688641 A CN 110688641A
- Authority
- CN
- China
- Prior art keywords
- information
- target
- target information
- condition
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 13
- 238000003672 processing method Methods 0.000 title claims abstract description 12
- 238000012545 processing Methods 0.000 claims abstract description 90
- 238000000034 method Methods 0.000 claims abstract description 74
- 238000012795 verification Methods 0.000 claims abstract description 64
- 230000008569 process Effects 0.000 claims abstract description 55
- 238000004458 analytical method Methods 0.000 claims description 27
- 230000000153 supplemental effect Effects 0.000 claims description 5
- 230000001815 facial effect Effects 0.000 description 29
- 230000008921 facial expression Effects 0.000 description 9
- 230000005236 sound signal Effects 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 4
- 210000004709 eyebrow Anatomy 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 239000000725 suspension Substances 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000002996 emotional effect Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000000513 principal component analysis Methods 0.000 description 2
- 230000002618 waking effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Hardware Design (AREA)
- Software Systems (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种信息处理方法及电子设备,如果满足第一条件,采集图像信息,如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,执行第一处理,该第一处理表征验证通过;如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性不满足第二条件,执行第二处理,该第二处理和第一处理不同,从而可以防止误执行第一处理,降低误认证给用户带来不便的情况出现的概率。
Description
技术领域
本申请涉及信息处理技术领域,更具体地说,涉及一种信息处理方法及电子设备。
背景技术
目前,在进行生物特征认证(如,人脸认证,虹膜认证、指纹认证等)的过程中,通常是检测到生物特征与特征模板匹配后就认证通过并响应认证结果,然而,随着验证速度的提升,可能会导致用户在发现问题时还来不及确认就完成了验证易出现误认证的情况,给用户带来不便。
发明内容
本申请的目的是提供一种信息处理方法及电子设备,包括如下技术方案:
一种信息处理方法,包括:
如果满足第一条件,采集图像信息,其中,所述图像信息的部分信息用于验证是否匹配基准信息;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性满足第二条件,执行第一处理,所述第一处理表征验证通过;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性不满足所述第二条件,执行第二处理,所述第二处理和所述第一处理不同。
上述方法,优选的,所述目标信息的属性包括如下至少一种:
目标信息的位置关系信息;或者
目标信息的运动信息。
上述方法,优选的,所述执行第二处理包括如下的一种:
执行第二处理,所述第二处理表征验证不通过;
或者,
采集补充信息,所述补充信息用于确认需要通过验证。
上述方法,优选的,在所述采集补充信息前,还包括:
输出提示信息,所述提示信息用于提示所述第一条件的满足。
上述方法,优选的,还包括如下的一种:
如果确认需要通过验证,则再次采集图像信息,如果所述图像信息中表征生物特征的目标信息匹配基准信息,执行所述第一处理;
或者,
如果确认需要通过验证,执行所述第一处理。
上述方法,优选的,所述目标信息的属性满足第二条件,包括如下的至少一种:
将预设时长内多次采集的图像信息输入预先训练好的分析模型,得到所述目标信息的位置关系信息,和/或,所述目标信息的运动信息;若所述目标信息的位置关系信息不为目标位置关系,和/或,所述目标信息的运动信息不为目标运动信息,确定所述目标信息的属性满足第二条件;
或者,
将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定所述目标信息的运动信息;和/或,将预设时长内多次采集的图像信息的目标信息分别进行位置分析,以确定每次采集的图像信息中所述目标信息的位置关系信息;若所述目标信息的运动信息不匹配目标运动信息,和/或,存在所述目标信息的位置关系信息不匹配目标位置关系,确定所述目标信息的属性满足第二条件。
上述方法,优选的,所述如果满足第一条件,采集图像信息包括:
接收语音信号;
若所述语音信号携带唤醒词,确定满足第一条件;
根据所述语音信号确定声源方向;
采集所述声源方向的图像信息。
一种电子设备,包括:
存储器,用于至少存储一组指令集;
图像采集装置,用于采集图像信息;
处理器,用于调用并执行所述存储器中的所述指令集,通过执行所述指令集进行以下操作:
如果满足第一条件,通过所述图像采集装置采集图像信息,其中,所述图像信息的部分信息用于验证是否匹配基准信息;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性满足第二条件,执行第一处理,所述第一处理表征验证通过;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性不满足所述第二条件,执行第二处理,所述第二处理和所述第一处理不同。
上述电子设备,优选的,还包括:
至少两个语音采集装置,用于采集语音信号;
所述处理器在如果满足第一条件,通过所述图像采集装置采集图像信息时,具体用于:
通过所述两个语音采集装置接收语音信号;
若所述语音信号携带唤醒词,确定满足第一条件;
根据所述语音信号确定声源方向;
将所述图像采集装置的朝向调整为所述声源方向,以采集所述声源方向的图像信息。
上述电子设备,优选的,还包括:音频输出装置;其中,
所述音频输出装置的朝向与所述图像采集装置的朝向相同;
所述至少两个语音采集装置的朝向与所述图像采集装置的朝向相反。
通过以上方案可知,本申请提供的一种信息处理方法及电子设备,如果满足第一条件,采集图像信息,如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,执行第一处理,该第一处理表征验证通过;如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性不满足第二条件,执行第二处理,该第二处理和第一处理不同,实现了验证过程的智能暂缓,从而可以防止误执行第一处理,降低误认证给用户带来不便的情况出现的概率。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的信息处理方法的一种实现流程图;
图2为本申请实施例提供的电子设备的一种结构示意图;
图3为本申请实施例提供的多媒体输入输出设备的电气结构示意图;
图4为本申请实施例提供的多媒体输入输出设备的爆炸图。
说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的部分,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例,能够以除了在这里图示的以外的顺序实施。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
由于在基于生物特征进行身份认证时,验证过程几乎是瞬间就可以完成的,使得用户即使发现问题或产生疑问,还来不及执行用于指示暂停或取消的操作(语音或手势等)就完成了验证,造成误认证的情况。基于此,本申请实施例提出,在验证过程中引入智能暂缓机制,具体的,在基于采集的图像信息中表征生物特征的目标信息进行身份验证的同时,还基于目标信息判断用户是否对本次验证是不确定的,如果用户对本次验证是不确定的,则暂停验证,使得用户可以对本次验证过程进行确认,以便准确获得用户的意图,如果需要验证,则用户可以触发恢复验证过程,如果不需要验证,用户可以触发取消本次验证。
基于此,本申请实施例提供的信息处理方法可以应用于电子设备中,该电子设备可以是便携式移动终端,例如手机,也可以是个人计算机,例如,台式计算机,笔记本电脑等。
本申请提供的信息处理方法的一种实现流程图如图1所示,可以包括:
步骤S11:如果满足第一条件,采集图像信息,其中,该图像信息的部分信息用于验证是否匹配基准信息。
本申请实施例中,如果满足第一条件,说明需要对用户进行身份验证了。此时,可以采集用户的图像信息,从采集的图像信息中提取表征生物特征的目标信息,然后判断该目标信息是否与基准信息匹配。
其中表征生物特征的目标信息可以是指从图像中提取的特征信息,如脸部特征信息或者虹膜特征信息等。脸部特征信息可以包括但不限于以下至少一种:尺度不变特征变换(Scale-Invariant Feature Transform,SIFT)特征,主成分分析特征(PrincipalComponent Analysis,PCA)、Gabor特征、快速鲁棒性特征(Speeded Up Robust Feature,SURF)、方向梯度直方图特征(Histogram of Oriented Gradient,HOG)、局部二值模式特征(Local Binary Pattern,LBP)等。虹膜特征信息可以包括但不限于以下至少一种:Gabor特征、高斯-拉普拉斯(Laplacian of Gaussian,LOG)特征、Haar小波特征等。
若目标信息为用户的脸部特征信息,则基准信息是指预先存储的用户的脸部特征信息。若目标信息为用户的虹膜特征信息,则基准信息是指预先存储的用户的虹膜特征信息。
步骤S12:如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,执行第一处理,该第一处理表征验证通过。
也就是说,本申请实施例中,不仅将目标信息与基准信息进行匹配,还判断目标信息的属性是否满足第二条件。只有在目标信息匹配基准信息,且目标信息的属性满足第二条件时,才确定验证通过,此时才会执行第一处理。
特征信息是由特征点组成的,因此,目标信息的属性可以是指特征信息中特征点的属性,该属性可以是指:不同特点之间的关联关系,和/或,同一特征点在不同时刻的关联关系。
步骤S13:如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性不满足第二条件,执行第二处理,该第二处理和上述第一处理不同。
也就是说,只要目标信息匹配基准信息(为便于叙述,记为条件A)与目标信息的属性满足第二条件(为便于叙述,记为条件B)这两个条件中的至少一个条件不满足,则说明未验证通过,此时不会执行第一处理,而是执行第二处理。
可选的,执行第二处理可以为等待预设时长(比如3秒)后,执行第一处理。
可选的,在上述等待期间,还可以输出交互界面,该交互界面中具有提示正在验证的提示信息(比如,“验证中”)。进一步的,该交互界面中还可以设置有取消按钮,用于用户手动取消验证过程。
本申请实施例提供的信息处理方法,如果满足第一条件,采集图像信息,如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,执行第一处理,该第一处理表征验证通过;如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性不满足第二条件,执行第二处理,该第二处理和第一处理不同,实现了验证过程的智能暂缓,从而可以防止误执行第一处理,降低误认证给用户带来不便的情况出现的概率。
在一可选的实施例中,上述目标信息的属性可以为表征生理特征的信息,该生理特征可以是由于用户的心理变化或情绪变化而产生的特征,也就是说,目标信息的属性可以是表征用户的心理变化或情绪变化的信息。
需要说明的是,生理特征并不是生物特征,即生理特征是无法代表用户身份的特征。比如,生理特征可以是用户的面部表情。
可选的目标信息的属性可以包括如下至少一种:
目标信息的位置关系信息;
或者,
目标信息的运动信息。
由前述记载可知,目标信息由特征点组成,基于此,
上述目标信息的位置关系可以是指同一时刻不同特征点之间的相对位置关系。
上述目标信息的运动信息可以是指同一特征点在不同时刻的相对位置关系。
若目标信息为用户的脸部特征,则上述目标信息的位置关系信息和运动信息均可以表征用户的面部表情。相应的,上述目标信息的属性满足第二条件时,表示用户的面部表情不为目标面部表情,例如,用户的面部表情没有变为紧张或疑惑等不稳定的面部表情。
当用户的面部表情为紧张或疑惑时,通常会有抿嘴和/或皱眉等动作,此时,上下嘴唇会相互靠近,两个眉毛也会相互靠近。基于此,当目标信息(眉毛位置的特征信息,和/或,唇部特征信息)的位置关系或目标信息的运动信息表征上下嘴唇会相互靠近和/或两个眉毛相互靠近时,说明用户产生了迟疑,此时,目标信息的属性未满足第二条件。
在一可选的实施例中,上述执行第二处理的一种实现方式可以为:
执行表征验证不通过的第二处理。具体可以包括如:输出提示信息,提示验证不通过,或者,退回采集图像信息之前的显示界面。
在一可选的实施例中,上述执行第二处理的另一种实现方式可以为:
采集补充信息,该补充信息用于确认需要通过验证。
其中,该补充信息可以是用户输入的语音信息,或者,可以是用户输入的触控消息,或者,可以是用户输入的悬空手势信息等。
可选的,在采集补充信息之前,可以先输出提示信息,该提示信息用于提示第一条件的满足。基于该提示信息,用户可以知道后续会执行验证过程并在验证通过后执行第一处理,如果用户根据实际的需要确定需要执行第一处理,则可以输入确认需要通过验证的补充信息,如果不想执行第一处理,则不输入确认需要通过验证的补充信息。
本实施例中,输出提示信息相当于是对第一条件满足的确认验证,以人脸支付为例,假设当前的支付金额为500元,在用户确认支付后,开始进行人脸验证,在执行支付前,如果捕捉到用户有皱眉动作,基于本申请会暂停支付,并输出提示信息,以提示支付金额(比如,应支付500元),那么,如果用户的本意就是支付500元(此时,用户皱眉可能由其它原因导致的,与支付无关),那么用户确认支付即可,这里的确认支付可以是从暂停点开始继续执行支付流程,无需重新进行验证;而如果用户的本意是50元,却因为误操作成了500元(此时,用户皱眉是因为支付金额有误导致的),则用户可以取消支付。
进一步的,在采集到补充信息后,说明确认需要通过验证,则此时可以根据执行第二处理前的验证结果确定是否需要再次采集图像信息以再次进行验证。具体的,
如果在执行第二处理前,未确定目标信息是否与基准信息进行匹配,则可以再次采集图像信息,并判断再次采集的图像信息中表征生物特征的目标信息是否与基准信息匹配,如果判断结果为是,则执行第一处理;注意,此时可以不必再判断目标信息的属性是否满足第二条件。
如果在执行第二处理前,已确定目标信息与基准信息匹配,则可以不必再次采集图像信息,并判断再次采集的图像信息中表征生物特征的目标信息是否与基准信息匹配,而是直接执行第一处理即可,此时也不必再判断目标信息的属性是否满足第二条件。
当然,在一可选的实施例中,不管在执行第二处理前目标信息是否与基准信息匹配,在确认需要通过验证时,都可以再次采集图像信息,并判断再次采集的图像信息中表征生物特征的目标信息是否与基准信息匹配,如果判断结果为是,再执行第一处理。
在一可选的实施例中,判断目标信息的属性是否满足第二条件可以通过如下两种实现方式中的至少一种实现:
方式一:将预设时长内多次采集的图像信息输入基于预先训练好的分析模型,得到该分析模型输出的目标信息的位置关系信息,和/或,所述目标信息的运动信息;若目标信息的位置关系信息不为目标位置关系,和/或,目标信息的运动信息不为目标运动信息,确定目标信息的属性满足第二条件。
本申请实施例中,目标信息的位置关系信息为目标位置关系,以及目标信息的运动信息为目标运动信息均表示用户对当前的验证过程产生了疑虑,有可能不是用户的本意,此时目标信息的属性不满足第二条件,不会执行第一处理。
本申请实施例中,方式一有三种可选的实现方式:
可选的,预先训练好的分析模型可以为用于分析目标信息的位置关系信息的分析模型,基于此,在分析模型输出的目标信息的位置关系信息不为目标位置关系信息时,确定目标信息的属性满足第二条件。
可选的,预先训练好的分析模型也可以是用于分析目标信息的运动信息的分析模型,基于此,在分析模型输出的目标信息的运动信息不为目标运动信息时,确定目标信息的属性满足第二条件。
可选的,预先训练好的分析模型也可以是用于同时分析目标信息的位置关系信息和目标信息的运行信息的分析模型,基于此,在分析模型输出的目标信息的位置关系信息不为目标位置关系信息,且分析模型输出的目标信息的运动信息不为目标运动信息时,确定目标信息的属性满足第二条件。
或者,在预先训练好的分析模型是用于同时分析目标信息的位置关系信息和目标信息的运行信息的分析模型时,可以在分析模型输出的目标信息的位置关系信息不为目标位置关系信息,或者,分析模型输出的目标信息的运动信息不为目标运动信息时,确定目标信息的属性满足第二条件。
方式二:将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定目标信息的运动信息;和/或,将预设时长内多次采集的图像信息中的目标信息分别进行位置分析,以确定每次采集的图像信息中目标信息的位置关系信息;若目标信息的运动信息不匹配目标运动信息,和/或,存在目标信息的位置关系信息不匹配目标位置关系,确定目标信息的属性满足第二条件。
本申请实施例中,目标信息的位置关系信息匹配目标位置关系,以及目标信息的运动信息匹配目标运动信息均表示用户对当前的验证过程产生了疑虑,有可能不是用户的本意,此时目标信息的属性不满足第二条件,不会执行第一处理。
与方式一使用预先训练好的分析模型对目标信息进行分析不同,方式二是基于模板或目标信息本身的位置信息直接对目标信息进行分析。
方式二也有三种可选的实现方式:
可选的,将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定目标信息的运动信息;若目标信息的运动信息不匹配目标运动信息,确定目标信息的属性满足第二条件。
可选的,将预设时长内多次采集的图像信息中的目标信息分别进行位置分析,以确定每次采集的图像信息中目标信息的位置关系信息;若存在至少一个目标信息的位置关系信息不匹配目标位置关系,确定目标信息的属性满足第二条件。
可选的,将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定目标信息的运动信息;将预设时长内多次采集的图像信息中的目标信息分别进行位置分析,以确定每次采集的图像信息中目标信息的位置关系信息;若目标信息的运动信息不匹配目标运动信息,且存在至少一个目标信息的位置关系信息不匹配目标位置关系,确定目标信息的属性满足第二条件。
或者,在将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定目标信息的运动信息;将预设时长内多次采集的图像信息中的目标信息分别进行位置分析,以确定每次采集的图像信息中目标信息的位置关系信息时,如果目标信息的运动信息不匹配目标运动信息,或者,存在至少一个目标信息的位置关系信息不匹配目标位置关系,则可以确定目标信息的属性满足第二条件。
基于上述判断目标信息的属性是否满足第二条件的两种实现方式,可以仅通过其中一种方式判断判断目标信息的属性是否满足第二条件即可。
或者,
也可以两种方式同时执行,哪种方式先输出判断结果,就以哪种方式输出的判断结果为准,从而保证验证的快捷性;或者,只要有一种实现方式输出的判断结果表征目标信息的属性满足第二条件,则确定目标信息的属性满足第二条件,这也可以保证验证的快捷性;或者,只有两种方式输出的判断结果均表征目标信息的属性满足第二条件时,才确定目标信息的属性满足第二条件,这样可以进一步提高验证的准确性。
在一可选的实施例中,上述满足第一条件可以是指:获取到执行第一处理的指令,该指令可以是由用户触发生成的。该第一处理可以是如下任意一种处理:支付,系统登录、人物追踪等。
以人脸支付为例,电子设备(如,手机)在获取到支付指令后,启动电子设备的图像采集单元以开始采集用户的图像信息,电子设备每获取一次图像信息,均从该图像信息中提取用户的脸部特征信息(即目标信息),判断提取的脸部特征信息是否与预先存储的脸部特征信息模板匹配,除此之外,还将每次提取的脸部特征信息与本次之前提取的脸部特征信息进行综合分析,以确定用户的脸部特征的运动轨迹(即目标信息的运动信息这一属性),如果判断出提取的脸部特征信息与预先存储的脸部特征信息模板匹配,且用户的脸部特征的运动轨迹不匹配目标运动轨迹(目标运动轨迹是表征疑虑、紧张等面部表情的运动轨迹),说明验证通过,执行支付流程。若用户的脸部特征的运动轨迹匹配目标运动轨迹,说明用户对支付产生疑惑,可能不是用户的真正意图,此时确定验证不通过,禁止执行支付流程。在禁止执行支付流程的同时,还可以输出提示信息,提示已满足第一条件,例如提示信息可以为“需要执行支付流程,请确认是否需要验证通过”,若用户输入确认通过的指令(可以通过语音方式输入该指令,比如“确认要验证通过”;也可以通过点击提示信息中提供的用于确认的虚拟按键输入该指令),则可以再次采集用户的图像信息,电子设备每获取一次图像信息,均从该图像信息中提取用户的脸部特征信息,判断提取的脸部特征信息是否与预先存储的脸部特征信息模板匹配,若匹配,则确定认证通过,执行支付流程,若不匹配,则确定认证不通过,禁止执行支付流程。
可选的,在再次采集用户的图像信息之前,还可以先判断是否已确定提取的脸部特征信息与预先存储的脸部特征信息模板匹配,若已确定,则直接执行支付流程即可,不必再次采集用户的图像信息,如果还未确定提取的脸部特征信息与预先存储的脸部特征信息模板匹配,则再执行再次采集用户的图像信息的步骤及后续步骤。
可选的,在上述支付场景中,除了判断提取的脸部特征信息是否与预先存储的脸部特征信息模板匹配外,还可以分析每次提取的脸部特征信息在同一时刻的相对位置关系,以确定用户的脸部特征的相对位置关系(即目标信息的位置关系信息这一属性),如果判断出提取的脸部特征信息与预先存储的脸部特征信息模板匹配,且用户的脸部特征的相对位置关系不匹配目标相对位置关系(目标位置关系是表征疑虑、紧张等面部表情的位置关系),说明验证通过,执行支付流程。若用户的脸部特征的相对位置关系匹配目标相对位置关系,说明用户对支付产生疑惑,可能不是用户的真正意图,此时确定验证不通过,禁止执行支付流程。后续的处理过程可以参看前述实施例,这里不再详述。
在一些场景下,为了简化用户操作,可以允许用户通过语音进行控制,例如,通过语音唤醒电子设备(比如,电脑)的操作系统,这样用户就可以不必走到电子设备前才能手动对操作系统进行唤醒了。然而,在唤醒操作系统后,还需要用户输入密码才能登录操作系统。用户的操作仍然比较繁琐,为了简化用户操作,在本申请的一可选实施例中,上述满足第一条件可以包括:
接收到语音信号,且该语音信号中携带唤醒词。
当用户想要登录操作系统时,可以说出带有唤醒词的语音。电子设备在采集到语音信号后,若分析出语音信号中携带唤醒词,则唤醒操作系统。
操作系统被唤醒,说明用户想要登录操作系统了,此时还可以根据采集到的语音信号确定声源方向,采集声源方向的图像信息,如果声源方向的图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,则登录操作系统。
可选的,在另一种实现方式中,在采集声源方向的图像信息后,如果声源方向的图像信息中表征生物特征的目标信息匹配基准信息,且接收到的语音信号的声纹信息与目标声纹信息匹配,则登录操作系统。本申请实施例中,结合图像信息和声纹信息进行验证,避免用户距离图像采集单元比较远,无法准确获取目标信息而导致的验证缓慢的问题。
可选的,在采集声源方向的图像信息后,可以同时启动第一判断过程和第二判断过程;当任意一个判断过程输出判断结果时,基于该判断结果登录操作系统或禁止登录操作系统;
其中,
第一判断过程包括:如果声源方向的图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,则登录操作系统,否则禁止登录操作系统;
第二判断过程包括:如果声源方向的图像信息中表征生物特征的目标信息匹配基准信息,且接收到的语音信号的声纹信息与目标声纹信息匹配,则登录操作系统,否则禁止登录操作系统。
可选的,如果两个判断过程同时输出判断结果,可以根据用户距图像采集单元的距离确定目标判断结果,基于该目标判断结果登录操作系统或禁止登录操作系统;可选的,如果用户与图像采集单元的距离大于距离阈值,则可以将第二判断过程的判断结果作为目标判断结果,否则将第一判断过程的判断结果作为目标判断结果。
另外,在用户长时间不使用电子设备的情况下,电子设备会进入休眠等低功耗状态,以减少电能消耗。基于此,在接收语音信号之前,还可以监测是否具有环境音信号,如果检测到环境音信号,则退出低功耗状态。在退出低功耗状态后,再执行前述接收语音信号的步骤及后续步骤。
进一步的,在禁止登录操作系统后,在声源方向的图像信息中表征生物特征的目标信息不匹配基准信息的情况下,还可以对接收到的语音信号进行分析,以确定语音源(即说话人)与电子设备之间的距离,若该距离小于距离阈值,持续对所述语音源方向进行拍照或录制视频。
在一些电话会议场景下,需要对主讲人进行追踪放大并进行显示。则上述执行第一处理可以是启动主讲人追踪流程。
可选的,在电话会议场景下,上述如果满足第一条件,采集图像信息的具体实现方式也可以为:
接收语音信号,若语音信号携带唤醒词,确定满足第一条件。
当用户想要使用电话会议系统时,可以说出带有唤醒词的语音。电子设备在采集到语音信号后,若分析出语音信号中携带唤醒词,则唤醒电话会议系统。
电话会议系统被唤醒,说明用户想要进行电话会议了,此时还可以根据采集到的语音信号确定声源方向,采集声源方向的图像信息,如果声源方向的图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,则启动主讲人追踪流程;
其中,对主讲人进行追踪的具体实现方式可以为:
接收语音信号。当主讲人发言时,语音信号即为主讲人的语音信号。
对所述语音信号进行分析,以确定语音信号源的方向,及语音信号源距离音频采集装置的距离。
本申请实施例中,可以采用多个分布在不同方位的语音采集设备采集语音信号,根据语音信号到达不同语音采集设备的时间差和/或相位差确定语音信号源的方向,及语音信号源距离音频采集装置的距离。
根据语音信号源的方向及语音信号源距离音频采集装置的距离,确定目标图像采集单元。该目标图像采集单元是距离语音信号源最近的图像采集单元,从而保证能够采集到主讲人的清晰的图像信息。
通过目标图像采集单元采集语音信号源的方向的图像信息。
将采集到的图像信息进行放大后进行显示。
与方法实施例相对应,本申请还提供一种电子设备,该电子设备的一种结构示意图如图2所示,可以包括:
存储器21,用于至少存储一组指令集;
图像采集装置22,用于采集图像信息;
处理器23,用于调用并执行所述存储器中的所述指令集,通过执行所述指令集进行以下操作:
如果满足第一条件,通过所述图像采集装置采集图像信息,其中,所述图像信息的部分信息用于验证是否匹配基准信息;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性满足第二条件,执行第一处理,所述第一处理表征验证通过;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性不满足所述第二条件,执行第二处理,所述第二处理和所述第一处理不同。
本申请实施例提供的电子设备,如果满足第一条件,采集图像信息,如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性满足第二条件,执行第一处理,该第一处理表征验证通过;如果图像信息中表征生物特征的目标信息匹配基准信息,且目标信息的属性不满足第二条件,执行第二处理,该第二处理和第一处理不同,从而可以防止误执行第一处理,降低误认证给用户带来不便的情况出现的概率。
在一可选的实施例中,目标信息的属性包括如下至少一种:
目标信息的位置关系信息;或者
目标信息的运动信息。
在一可选的实施例中,处理器23执行第二处理时可以包括如下的一种:
处理器23执行第二处理,所述第二处理表征验证不通过;
或者,
处理器23采集补充信息,所述补充信息用于确认需要通过验证。
在一可选的实施例中,处理器23在所述采集补充信息前,还可以用于:
输出提示信息,所述提示信息用于提示所述第一条件的满足。
在一可选的实施例中,处理器23还可以用于执行如下的一种:
如果确认需要通过验证,则再次采集图像信息,如果所述图像信息中表征生物特征的目标信息匹配基准信息,执行所述第一处理;
或者,
如果确认需要通过验证,执行所述第一处理。
在一可选的实施例中,所述目标信息的属性满足第二条件,包括如下的至少一种:
将预设时长内多次采集的图像信息输入预先训练好的分析模型,得到所述目标信息的位置关系信息,和/或,所述目标信息的运动信息;若所述目标信息的位置关系信息不为目标位置关系,和/或,所述目标信息的运动信息不为目标运动信息,确定所述目标信息的属性满足第二条件;
或者,
将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定所述目标信息的运动信息;和/或,将预设时长内多次采集的图像信息的目标信息分别进行位置分析,以确定每次采集的图像信息中所述目标信息的位置关系信息;若所述目标信息的运动信息不匹配目标运动信息,和/或,存在所述目标信息的位置关系信息不匹配目标位置关系,确定所述目标信息的属性满足第二条件。
在一可选的实施例中,本申请实施例提供的电子设备还可以包括:
至少两个语音采集装置,用于采集语音信号。
相应的,处理器23在如果满足第一条件,通过所述图像采集装置采集图像信息时,具体可以用于:
通过所述两个语音采集装置接收语音信号;
若所述语音信号携带唤醒词,确定满足第一条件;
根据所述语音信号确定声源方向;
将所述图像采集装置的朝向调整为所述声源方向,以采集所述声源方向的图像信息。
在一可选的实施例中,电子设备还可以包括音频输出装置,用于电子设备输出音频信号。
在一可选的实施例中,图像采集装置、音频输出装置和语音采集装置可以集成在一个独立的多媒体输入输出设备中,该多媒体输入输出设备可以通过通用串行总线(Universal Serial Bus,USB)接口可插拔的连接于电子设备。图像采集装置、音频输出装置和语音采集装置均通过USB接口与电子设备进行交互。该多媒体输入输出设备可以整体呈长条状,图像采集装置、音频输出装置和语音采集装置在多媒体输入输出设备的长度方向上分布部署。
如图3所示,为本申请实施例提供的多媒体输入输出设备的电气结构示意图。该示意图中,包括两个音频输出装置31,两个语音采集装置32和一个图像采集装置33,还包括第一处理芯片34(例如,CX20921),第二处理芯片35(例如,CX20709)和第三处理芯片36(例如,SPCA2098D),以及USB接口37;其中,
两个语音采集装置32与第一处理芯片34电连接;
第一处理芯片34还与第二处理芯片35电连接;
第二处理芯片35还与两个音频输出装置31和USB接口37电连接;
图像采集装置33与第三处理芯片36电连接,第三处理芯片36还与USB接口37电连接。其具体工作流程为:
两个语音采集装置32将采集到的语音信号输入到第一处理芯片34,第一处理芯片34对接收到的语音信号进行模数转换后输入到第二处理芯片35,第二处理芯片35对接收到的数字语音信号进行降噪和语音增强处理,将增强处理后的语音信号封装为USB信号后通过USB接口37传输给电子设备,使得电子设备根据增强后的数字语音信号进行如前所述的唤醒等相关处理。
另外,第二处理芯片35还可以通过USB接口接收电子设备输出的音频信号,并通过两个音频输出装置31输出。此外,第二处理芯片35还将接收到的音频信号传输给第一处理芯片34,以便第一处理芯片34对数字语音信号进行回声消除处理,将回声消除处理后的语音信号输入到第二处理芯片35。
图像采集装置33将采集到的图像信息传输给第三处理芯片36,第三处理芯片36将图像信息封装为USB信号后通过USB接口传输给电子设备,使得电子设备根据接收到的图像信息执行如前所述的信息处理方法的各个步骤。
为了保证多媒体输入输出设备的体积尽可能小,本申请实施例中,对多媒体输入输出设备的结构进行了进一步的优化设计:
音频输出装置的朝向与图像采集装置的朝向相同;至少两个语音采集装置的朝向与图像采集装置的朝向相反。
如图4所示,为本申请实施例提供的多媒体输入输出设备的爆炸图,该示意图中,包括两个音频输出装置41,两个语音采集装置42,一个图像采集装置43和USB接口44;其中,两个音频输出装置41的朝向与图像采集装置43的朝向相同,而两个语音采集装置42的朝向与图像采集装置43的朝向相反,两个语音采集装置42设置在两个音频输出装置41之间,两个语音采集装置42间的距离在30mm至120mm之间。
在一可选的实施例中,图像采集装置可以包括红外图像采集单元和彩色图像采集单元。两个图像采集单元可以同时开启,或者,根据环境光强度仅开启其中一个图像采集单元,具体,如果环境光强度大于强度阈值,则开启彩色图像采集单元,否则,开启红外图像采集单元。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
应当理解,本申请实施例中,从权、各个实施例、特征可以互相组合结合,都能实现解决前述技术问题。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种信息处理方法,包括:
如果满足第一条件,采集图像信息,其中,所述图像信息的部分信息用于验证是否匹配基准信息;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性满足第二条件,执行第一处理,所述第一处理表征验证通过;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性不满足所述第二条件,执行第二处理,所述第二处理和所述第一处理不同。
2.根据权利要求1所述的方法,所述目标信息的属性包括如下至少一种:
目标信息的位置关系信息;或者
目标信息的运动信息。
3.根据权利要求1所述的方法,所述执行第二处理包括如下的一种:
执行第二处理,所述第二处理表征验证不通过;
或者,
采集补充信息,所述补充信息用于确认需要通过验证。
4.根据权利要求3所述的方法,在所述采集补充信息前,还包括:
输出提示信息,所述提示信息用于提示所述第一条件的满足。
5.根据权利要求3所述的方法,还包括如下的一种:
如果确认需要通过验证,则再次采集图像信息,如果所述图像信息中表征生物特征的目标信息匹配基准信息,执行所述第一处理;
或者,
如果确认需要通过验证,执行所述第一处理。
6.根据权利要求1所述的方法,所述目标信息的属性满足第二条件,包括如下的至少一种:
将预设时长内多次采集的图像信息输入预先训练好的分析模型,得到所述目标信息的位置关系信息,和/或,所述目标信息的运动信息;若所述目标信息的位置关系信息不为目标位置关系,和/或,所述目标信息的运动信息不为目标运动信息,确定所述目标信息的属性满足第二条件;
或者,
将预设时长内多次采集的图像信息中的目标信息与预置的目标信息模板进行匹配,以确定所述目标信息的运动信息;和/或,将预设时长内多次采集的图像信息的目标信息分别进行位置分析,以确定每次采集的图像信息中所述目标信息的位置关系信息;若所述目标信息的运动信息不匹配目标运动信息,和/或,存在所述目标信息的位置关系信息不匹配目标位置关系,确定所述目标信息的属性满足第二条件。
7.根据权利要求1所述的方法,所述如果满足第一条件,采集图像信息包括:
接收语音信号;
若所述语音信号携带唤醒词,确定满足第一条件;
根据所述语音信号确定声源方向;
采集所述声源方向的图像信息。
8.一种电子设备,包括:
存储器,用于至少存储一组指令集;
图像采集装置,用于采集图像信息;
处理器,用于调用并执行所述存储器中的所述指令集,通过执行所述指令集进行以下操作:
如果满足第一条件,通过所述图像采集装置采集图像信息,其中,所述图像信息的部分信息用于验证是否匹配基准信息;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性满足第二条件,执行第一处理,所述第一处理表征验证通过;
如果所述图像信息中表征生物特征的目标信息匹配基准信息,且所述目标信息的属性不满足所述第二条件,执行第二处理,所述第二处理和所述第一处理不同。
9.根据权利要求8所述的电子设备,还包括:
至少两个语音采集装置,用于采集语音信号;
所述处理器在如果满足第一条件,通过所述图像采集装置采集图像信息时,具体用于:
通过所述两个语音采集装置接收语音信号;
若所述语音信号携带唤醒词,确定满足第一条件;
根据所述语音信号确定声源方向;
将所述图像采集装置的朝向调整为所述声源方向,以采集所述声源方向的图像信息。
10.根据权利要求9所述的电子设备,还包括:音频输出装置;其中,
所述音频输出装置的朝向与所述图像采集装置的朝向相同;
所述至少两个语音采集装置的朝向与所述图像采集装置的朝向相反。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910945248.8A CN110688641A (zh) | 2019-09-30 | 2019-09-30 | 信息处理方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910945248.8A CN110688641A (zh) | 2019-09-30 | 2019-09-30 | 信息处理方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110688641A true CN110688641A (zh) | 2020-01-14 |
Family
ID=69111366
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910945248.8A Pending CN110688641A (zh) | 2019-09-30 | 2019-09-30 | 信息处理方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110688641A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130177218A1 (en) * | 2008-06-16 | 2013-07-11 | Canon Kabushiki Kaisha | Personal authentication apparatus and personal authentication method |
CN106292732A (zh) * | 2015-06-10 | 2017-01-04 | 上海元趣信息技术有限公司 | 基于声源定位和人脸检测的智能机器人转动方法 |
CN106709402A (zh) * | 2015-11-16 | 2017-05-24 | 优化科技(苏州)有限公司 | 基于音型像特征的真人活体身份验证方法 |
CN108124488A (zh) * | 2017-12-12 | 2018-06-05 | 福建联迪商用设备有限公司 | 一种基于人脸和声纹的支付认证方法及终端 |
CN109636401A (zh) * | 2018-11-30 | 2019-04-16 | 上海爱优威软件开发有限公司 | 一种基于用户微表情的支付方法及系统 |
CN110210289A (zh) * | 2019-04-19 | 2019-09-06 | 平安科技(深圳)有限公司 | 情绪识别方法、装置、计算机可读存储介质及电子设备 |
-
2019
- 2019-09-30 CN CN201910945248.8A patent/CN110688641A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130177218A1 (en) * | 2008-06-16 | 2013-07-11 | Canon Kabushiki Kaisha | Personal authentication apparatus and personal authentication method |
CN106292732A (zh) * | 2015-06-10 | 2017-01-04 | 上海元趣信息技术有限公司 | 基于声源定位和人脸检测的智能机器人转动方法 |
CN106709402A (zh) * | 2015-11-16 | 2017-05-24 | 优化科技(苏州)有限公司 | 基于音型像特征的真人活体身份验证方法 |
CN108124488A (zh) * | 2017-12-12 | 2018-06-05 | 福建联迪商用设备有限公司 | 一种基于人脸和声纹的支付认证方法及终端 |
CN109636401A (zh) * | 2018-11-30 | 2019-04-16 | 上海爱优威软件开发有限公司 | 一种基于用户微表情的支付方法及系统 |
CN110210289A (zh) * | 2019-04-19 | 2019-09-06 | 平安科技(深圳)有限公司 | 情绪识别方法、装置、计算机可读存储介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021135685A1 (zh) | 身份认证的方法以及装置 | |
CN104361276B (zh) | 一种多模态生物特征身份认证方法及系统 | |
KR101997371B1 (ko) | 신원 인증 방법 및 장치, 단말기 및 서버 | |
US11989275B2 (en) | Passive identification of a device user | |
Alsaadi | Study on most popular behavioral biometrics, advantages, disadvantages and recent applications: A review | |
WO2017059700A1 (zh) | 一种身份验证方法及装置 | |
CN111492357A (zh) | 用于生物识别用户认证的系统和方法 | |
US20190130411A1 (en) | Method and system for data processing | |
CN111583355B (zh) | 面部形象生成方法、装置、电子设备及可读存储介质 | |
WO2020088483A1 (zh) | 一种音频控制方法及电子设备 | |
CN111797249A (zh) | 一种内容推送方法、装置与设备 | |
EP3890342A1 (en) | Method and apparatus for awakening wearable device | |
US11715330B2 (en) | Liveness detection in an interactive video session | |
CN111797304A (zh) | 一种内容推送方法、装置与设备 | |
US20240185860A1 (en) | Methods and systems for processing audio signals containing speech data | |
CN109814964A (zh) | 一种界面展示方法、终端设备及计算机可读存储介质 | |
CN110826410B (zh) | 一种人脸识别的方法和设备 | |
US20210406353A1 (en) | System and method for biometric authentication | |
KR20190048630A (ko) | 전자 장치 및 그 제어 방법 | |
JP7400924B2 (ja) | 情報提供装置、情報提供方法、およびプログラム | |
CN110688641A (zh) | 信息处理方法及电子设备 | |
CN115376517A (zh) | 一种会议场景下的说话内容的显示方法和装置 | |
CN109102810B (zh) | 声纹识别方法和装置 | |
US20160226866A1 (en) | Authentication using individual's inherent expression as secondary signature | |
JP2002251614A (ja) | 生体照合装置,生体照合システム,生体照合方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |