发明内容
有鉴于此,本发明提供一种基于人脸图像的性别识别方法及装置,用于以较少的帧数来获取稳定的性别识别结果,提高识别速率。技术方案如下:
本发明提供一种基于人脸图像的性别识别方法,包括:
获取连续N帧人脸图像的性别识别结果,所述性别识别结果用于表示被观察者的性别属性,N为大于1且小于预设帧数的自然数;
判断连续N帧人脸图像的性别识别结果是否一致;
当所述连续N帧人脸图像的性别识别结果一致时,将所述被观察者的性别属性确定为所述性别识别结果表示的性别属性。
优选的,当所述连续N帧人脸图像的性别识别结果不一致时,将所述被观察者的性别属性维持为当前性别属性。
优选的,所述获取连续N帧人脸图像的性别识别结果包括:
对当前帧的人脸图像进行识别,得到性别识别结果;
判断从所述当前帧为止连续i帧的人脸图像是否均得到性别识别结果,i为大于等于2的自然数;
如果是,从连续i帧中获取连续N帧人脸图像的性别识别结果;
如果否,继续获取第i+1帧的人脸图像进行识别以判断从第i+1帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧。
优选的,所述判断从所述当前帧为止连续i帧的人脸图像是否均得到性别识别结果包括:判断从所述当前帧为止位于同一个所述连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果。
优选的,在当前帧的人脸图像未得到性别识别结果的情况下,将所述被观察者的性别属性确定为未知属性,并从下一帧的人脸图像开始进行识别以确定被观察者的性别属性。
本发明还提供一种基于人脸图像的性别识别装置,包括:
获取单元,用于获取连续N帧人脸图像的性别识别结果,所述性别识别结果用于表示被观察者的性别属性,N为大于1且小于预设帧数的自然数;
判断单元,用于判断连续N帧人脸图像的性别识别结果是否一致;
控制单元,用于当所述连续N帧人脸图像的性别识别结果一致时,将所述被观察者的性别属性确定为所述性别识别结果表示的性别属性。
优选的,所述控制单元还用于当所述连续N帧人脸图像的性别识别结果不一致时,将所述被观察者的性别属性维持为当前性别属性。
优选的,所述获取单元包括:识别子单元、判断子单元和获取子单元,其中,
所述识别子单元,用于对当前帧的人脸图像进行识别,得到性别识别结果;
所述判断子单元,用于判断从所述当前帧为止连续i帧的人脸图像是否均得到性别识别结果,并在判断出从所述当前帧为止连续i帧的人脸图像未均得到性别识别结果时触发所述识别子单元继续获取第i+1帧的人脸图像进行识别以判断从第i+1帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧,i为大于等于2的自然数;
所述获取子单元,用于在所述判断子单元判断出从所述当前帧为止连续i帧的人脸图像均得到性别识别结果时,从连续i帧中获取连续N帧人脸图像的性别识别结果。
优选的,所述判断子单元所述判断从所述当前帧为止连续i帧的人脸图像是否均得到性别识别结果包括:判断从所述当前帧为止位于同一个所述连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果。
优选的,所述控制单元还用于在当前帧的人脸图像未得到性别识别结果的情况下,将所述被观察者的性别属性确定为未知属性,并从下一帧的人脸图像开始进行识别以确定被观察者的性别属性。
与现有技术相比,本发明包括以下优点:
从上述技术方案可以看出,本发明提供的基于人脸图像的性别识别方法及装置通过对连续N帧人脸图像的性别识别结果进行判断,得到被观察者的性别属性,这样要得到性别识别结果一致的连续N帧人脸图像时所选取的图像帧数小于平均法选取的图像帧数,提高识别速率。并且稳定结果可以以单帧人脸图像识别准确度在选取的图像帧数下的次方来表示,因此当选取的图像帧数较少时可以得到较高的稳定结果,即得到较为稳定的性别识别结果。
当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
具体实施方式
为了使本领域技术人员更好地理解本发明,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例提供的基于人脸图像的性别识别方法的一种流程图,可以包括以下步骤:
101:获取连续N帧人脸图像的性别识别结果,性别识别结果用于表示被观察者的性别属性,N为大于1且小于预设帧数的自然数。
在本发明实施例中连续N帧人脸图像的性别识别结果是指在对连续N帧的人脸图像分别进行识别时,每帧人脸图像均得到性别识别结果。这连续N帧人脸图像优选位于同一个连续图像序列中的人脸图像,这是因为在同一个连续图像序列一般取自同一个图像获取设备,不易出现内容突变的问题,并且所获取到的每帧人脸图像的时间间隔较小有利于对被观察者的性别属性的判断。
当然假若来自同一个图像获取设备的相邻两个连续图像序列的时间间隔较小,连续N帧人脸图像也可以选自这两个连续图像序列。但是目前两个连续图像序列的时间间隔较大且不能保证来自同一个图像获取设备,因此本发明实施例优选从一个连续图像序列中获取连续N帧人脸图像。在同一个图像获取设备获取到其所处空间的环境图像后,从该环境图像中提取出人脸图像进行识别。
其中预设帧数是能够得到较为稳定的性别识别结果时选取的帧总数,比如单帧人脸图像的识别准确度为90%,要想得到较为稳定的性别识别结果,则预设帧数可以选取较小的数值,如数值3,那么相应的稳定结果为90%^3=72.9%,该稳定结果为一个较为稳定的性别识别结果。
102:判断连续N帧人脸图像的性别识别结果是否一致,如果是,执行步骤103;如果否,执行步骤104。
103:当连续N帧人脸图像的性别识别结果一致时,将被观察者的性别属性确定为性别识别结果表示的性别属性。
104:当连续N帧人脸图像的性别识别结果不一致时,将被观察者的性别属性维持为当前性别属性。
当连续N帧人脸图像的性别识别结果一致时,表明连续N帧人脸图像为同一个被观察者人脸的可能性较高,此时可以将连续N帧人脸图像的性别识别结果作为被观察者的性别属性;当连续N帧人脸图像的性别识别结果不一致时,由于连续N帧的时间通常在几十毫秒,不会突变为不同被观察者,则表明连续N帧人脸图像受到环境变化影响可能性较高,因此维持为当前性别属性是可靠的。
从上述技术方案可以看出,本发明提供的基于人脸图像的性别识别方法通过对连续N帧人脸图像的性别识别结果进行判断,得到被观察者的性别属性,这样要得到性别识别结果一致的连续N帧人脸图像时所选取的图像帧数小于平均法选取的图像帧数,提高识别速率。并且稳定结果可以以单帧人脸图像识别准确度在选取的图像帧数下的次方来表示,因此当选取的图像帧数较少时可以得到较高的稳定结果,即得到较为稳定的性别识别结果。
在本发明实施例中,获取连续N帧人脸图像的性别识别结果的一种方式可以是:获取任意连续N帧人脸图像的性别识别结果,具体过程可以参阅图2所示流程图,包括以下步骤:
1011:对当前帧的人脸图像进行识别,得到性别识别结果。其中当前帧是当前时刻获取的帧,每获取到一帧人脸图像,都需要对该帧人脸图像进行识别,得到性别识别结果,并且所获取的人脸图像为同一个连续图像序列中的人脸图像。
1012:判断从当前帧为止连续i帧的人脸图像是否均得到性别识别结果,如果是,执行步骤1013;如果否,执行步骤1014。
在本发明实施例中,从当前帧为止连续i帧的人脸图像是指包括当前帧之内,从当前帧之前的连续i帧人脸图像。例如当前帧为一个连续图像序列的第4帧人脸图像时,则从当前帧为止连续i帧的人脸图像是从第4帧至第4-i+1帧的人脸图像,其中i为大于等于2的自然数。
当连续i帧的人脸图像均得到性别识别结果,表明被观察者一直处于图像获取装置所处空间下,连续i帧的人脸图像指向同一个被观察者的可能性较高,从而可以通过连续i帧的人脸图像来确定被观察者的性别属性;当连续i帧的人脸图像中有未得到性别识别结果的人脸图像,表明被观察者有可能在一段时间内离开图像获取装置所处空间,此时则需要对后续帧进行判断以得到连续i帧的人脸图像。
此处需要注意的一点是:在判断连续i帧的人脸图像是否均得到性别识别结果时,需要判断从当前帧为止位于同一个连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果,即对同一个连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果进行判断。
1013:从连续i帧中获取连续N帧人脸图像的性别识别结果。
1014:获取第i+1帧的人脸图像进行识别以判断从第i+1帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧。
以第一帧人脸图像开始来阐述判断从第i帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧是指:在同一个连续图像序列中,从第一帧人脸图像至第i帧人脸图像未全部得到性别识别结果时,进一步判断从第i+1帧人脸图像为止之前连续i帧的人脸图像是否均得到性别识别结果直至获取到连续图像序列的最后一帧的人脸图像。当在任意一次判断时确定连续i帧的人脸图像均得到性别识别结果,则可以从所确定的连续i帧的人脸图像中选取连续N帧人脸图像的性别识别结果。
在选取连续N帧人脸图像时可以选择连续i帧中的前N帧人脸图像,即获取时间较早的前N帧人脸图像,当然也可以选择连续i帧中的后N帧人脸图像,即获取时间较晚的N帧人脸图像。
此外还需要说明一下:在当前帧的人脸图像未得到性别识别结果的情况下,将被观察者的性别属性确定为未知属性,并从下一帧的人脸图像开始进行识别,将下一帧作为当前帧执行步骤101至104以确定被观察者的性别属性。
下面以一个连续图像序列,且将被观察者的性别属性初始化为Sfinal=unknow为例详细阐述本发明实施例提供的基于人脸图像的性别识别方法,其流程图可以参阅图3所示,包括以下步骤:
301:将被观察者的性别属性初始化为Sfinal=unknow。其中Sfinal=unknow表示被观察者的性别属性为未知属性。
302:在当前时刻内获取连续图像序列中的一帧图像。其中连续图像序列是同一个图像获取装置获取到的一个连续图像序列。
303:检测当前获取的图像中是否有人脸,如果是,执行步骤304,如果否,继续获取连续图像序列中的其他未被获取的图像进行检测,维持Sfinal=unknow。当检测到有人脸时,表明该图像中可能包含有被观察者的人脸,则对该图像中的被观察者的性别属性进行识别,相应的该图像可以作为人脸图像。
304:对当前获取的图像进行识别,得到性别识别结果。
305:对当前获取的图像的性别识别结果进行标记,具体是:当上一帧图像未得到性别识别结果时,将当前获取的图像的性别识别结果记为S0;当上一帧图像得到性别识别结果时,将当前获取的图像的性别识别结果记为Sj,其中j为连续得到性别识别结果的帧数。
306:判断连续i帧图像是否均得到性别识别结果,如果是,执行步骤307,如果否,继续获取连续图像序列中的其他未被获取的图像进行检测,维持Sfinal=unknow。
307:从连续i帧图像中选取连续N帧图像{Sk,i-N<k≤i}。
308:判断Sk对应的性别识别结果是否一致,如果是,执行步骤309,如果否,执行步骤310。
309:将被观察者的性别属性Sfinal更新为Sk对应的性别识别结果。
310:维持被观察者的性别属性不变。
对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
与上述方法实施例相对应,本发明实施例还提供一种基于人脸图像的性别识别装置,其结构示意图如图4所示,可以包括:获取单元11、判断单元12和控制单元13。其中,
获取单元11,用于获取连续N帧人脸图像的性别识别结果,性别识别结果用于表示被观察者的性别属性,N为大于1且小于预设帧数的自然数。
在本发明实施例中连续N帧人脸图像的性别识别结果是指在对连续N帧的人脸图像分别进行识别时,每帧人脸图像均得到性别识别结果。这连续N帧人脸图像优选位于同一个连续图像序列中的人脸图像,这是因为在同一个连续图像序列一般取自同一个图像获取设备,不易出现内容突变的问题,并且所获取到的每帧人脸图像的时间间隔较小有利于对被观察者的性别属性的判断。
当然假若来自同一个图像获取设备的相邻两个连续图像序列的时间间隔较小,连续N帧人脸图像也可以选自这两个连续图像序列。但是目前两个连续图像序列的时间间隔较大且不能保证来自同一个图像获取设备,因此本发明实施例优选从一个连续图像序列中获取连续N帧人脸图像。在同一个图像获取设备获取到其所处空间的环境图像后,从该环境图像中提取出人脸图像进行识别。
其中预设帧数是能够得到较为稳定的性别识别结果时选取的帧总数,比如单帧人脸图像的识别准确度为90%,要想得到较为稳定的性别识别结果,则预设帧数可以选取较小的数值,如数值3,那么相应的稳定结果为90%^3=72.9%,该稳定结果为一个较为稳定的性别识别结果。
判断单元12,用于判断连续N帧人脸图像的性别识别结果是否一致。
控制单元13,用于当连续N帧人脸图像的性别识别结果一致时,将被观察者的性别属性确定为性别识别结果表示的性别属性。
当连续N帧人脸图像的性别识别结果一致时,表明连续N帧人脸图像为同一个被观察者人脸的可能性较高,此时控制单元13可以将连续N帧人脸图像的性别识别结果作为被观察者的性别属性;当连续N帧人脸图像的性别识别结果不一致时,由于连续N帧的时间通常在几十毫秒,不会突变为不同被观察者,则表明受到环境变化影响可能性较高,维持为当前性别属性是可靠的,因此此时控制单元13还可以当连续N帧人脸图像的性别识别结果不一致时,将被观察者的性别属性维持为当前性别属性。
从上述技术方案可以看出,本发明提供的基于人脸图像的性别识别装置通过对连续N帧人脸图像的性别识别结果进行判断,得到被观察者的性别属性,这样要得到性别识别结果一致的连续N帧人脸图像时所选取的图像帧数小于平均法选取的图像帧数,提高识别速率。并且稳定结果可以以单帧人脸图像识别准确度在选取的图像帧数下的次方来表示,因此当选取的图像帧数较少时可以得到较高的稳定结果,即得到较为稳定的性别识别结果。
此外本发明实施例还提供图4所示基于人脸图像的性别识别装置中获取单元11的一种可行结构,其结构示意图请参阅图5所示,可以包括:识别子单元111、判断子单元112和获取子单元113。其中,
识别子单元111,用于对当前帧的人脸图像进行识别,得到性别识别结果。其中当前帧是当前时刻获取的帧,每获取到一帧人脸图像,都需要对该帧人脸图像进行识别,得到性别识别结果,并且所获取的人脸图像为同一个连续图像序列中的人脸图像。
判断子单元112,用于判断从当前帧为止连续i帧的人脸图像是否均得到性别识别结果,并在判断出从当前帧为止连续i帧的人脸图像未均得到性别识别结果时触发识别子单元111继续获取第i+1帧的人脸图像进行识别以判断从第i+1帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧。
在本发明实施例中,从当前帧为止连续i帧的人脸图像是指包括当前帧之内,从当前帧之前的连续i帧人脸图像。例如当前帧为一个连续图像序列的第4帧人脸图像时,则从当前帧为止连续i帧的人脸图像是从第4帧至第4-i+1帧的人脸图像,其中i为大于等于2的自然数。
当连续i帧的人脸图像均得到性别识别结果,表明被观察者一直处于图像获取装置所处空间下,连续i帧的人脸图像指向同一个被观察者的可能性较高,从而可以通过连续i帧的人脸图像来确定被观察者的性别属性;当连续i帧的人脸图像中有未得到性别识别结果的人脸图像,表明被观察者有可能在一段时间内离开图像获取装置所处空间,此时则需要对后续帧进行判断以得到连续i帧的人脸图像。
以第一帧人脸图像开始来阐述判断从第i帧为止的连续i帧人脸图像是否得到性别识别结果至当前获取的帧为连续图像序列的最后一帧是指:在同一个连续图像序列中,从第一帧人脸图像至第i帧人脸图像未全部得到性别识别结果时,进一步判断从第i+1帧人脸图像为止之前连续i帧的人脸图像是否均得到性别识别结果直至获取到连续图像序列的最后一帧的人脸图像。当在任意一次判断时确定连续i帧的人脸图像均得到性别识别结果,则可以从所确定的连续i帧的人脸图像中选取连续N帧人脸图像的性别识别结果。
在选取连续N帧人脸图像时可以选择连续i帧中的前N帧人脸图像,即获取时间较早的前N帧人脸图像,当然也可以选择连续i帧中的后N帧人脸图像,即获取时间较晚的N帧人脸图像。
需要注意的一点是:在判断连续i帧的人脸图像是否均得到性别识别结果时,需要判断从当前帧为止位于同一个连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果,即对同一个连续图像序列中的连续i帧的人脸图像是否均得到性别识别结果进行判断。
获取子单元113,用于在判断子单元判断出从当前帧为止连续i帧的人脸图像均得到性别识别结果时,从连续i帧中获取连续N帧人脸图像的性别识别结果。
此外还需要说明一下:在当前帧的人脸图像未得到性别识别结果的情况下,控制单元13将被观察者的性别属性确定为未知属性,并从下一帧的人脸图像继续开始进行识别。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
以上对本发明所提供的一种基于人脸图像的性别识别方法及装置进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。