CN109960992B - 虹膜识别方法和vr设备 - Google Patents
虹膜识别方法和vr设备 Download PDFInfo
- Publication number
- CN109960992B CN109960992B CN201711432690.8A CN201711432690A CN109960992B CN 109960992 B CN109960992 B CN 109960992B CN 201711432690 A CN201711432690 A CN 201711432690A CN 109960992 B CN109960992 B CN 109960992B
- Authority
- CN
- China
- Prior art keywords
- images
- image
- iris
- frames
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/197—Matching; Classification
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Ophthalmology & Optometry (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Eye Examination Apparatus (AREA)
- Studio Devices (AREA)
Abstract
本申请提供了一种虹膜识别方法、装置及VR设备。通过控制摄像单元在移动的过程中,抓取相对不同位置眼睛的图像。然后,利用多帧融合技术去除图像中附着在虹膜上的菲涅尔纹,从而完成最终识别,解决在虹膜识别过程中菲涅尔纹的干扰问题,提升用户使用VR设备的安全性以及用户体验。
Description
技术领域
本申请涉及虚拟现实(Virtual Reality,VR)技术领域,尤其是,涉及一种虹膜识别方法和VR设备。
背景技术
随着仿真技术快速发展,VR作为仿真技术中的一个重要技术方向,也越来越受到人们的关注。在VR设备应用中,对于用户身份的识别和认证是提升用户体验的一个重要部分。目前在VR设备应用中,常用的生物识别方式是虹膜识别方式,通过虹膜识别的方式可以进行用户身份识别和认证。
虹膜识别主要依赖对包含清晰虹膜纹理的眼睛图像进行识别。在现有的VR设备中,主要采用摄像单元拍摄人眼图像。因为,VR的镜片为菲涅尔镜片,因此摄像单元所拍摄到的人眼图像上会带有菲涅尔纹。但是,由于菲涅尔纹具有很强的纹理特性,在成像的过程中,会被非常密集的随机覆盖在虹膜纹理区域内,容易使虹膜的大片区域受到影响。并且菲涅尔纹还会遮挡虹膜识别区域的有效数据,从而严重影响虹膜识别的准确度和效果。
发明内容
有鉴于此,本申请实施例提供一种虹膜识别方法和VR设备,用于解决在虹膜识别过程中菲涅尔纹的干扰问题,从而提升用户使用VR设备的安全性以及用户体验。
本申请实施例提供如下技术方案:
本申请实施例第一方面提供了一种虹膜识别方法,所述方法应用于虚拟现实VR设备,所述VR设备包括菲涅尔透镜和摄像单元,所述摄像单元透过所述菲涅尔透镜采集图像,所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变,所述方法包括:
控制所述摄像单元移动,并控制所述摄像单元在移动过程中采集N帧第一图像,所述第一图像为包括菲涅尔纹的虹膜图像,N的取值大于1,N为整数;
将所述N帧第一图像进行对齐和融合,得到去除菲涅尔纹的第二图像;
基于所述第二图像进行虹膜识别。
其中,上述融合可以使得所述N帧第一图像中任一第一图像中的菲涅尔纹所在区域的内容被其他第一图像中的虹膜图像的内容或者部分内容替代。
上述方案,利用多帧融合技术去除附着在虹膜上的菲涅尔纹,得到去除菲涅尔纹的第二图像,最后基于该第二图像进行虹膜特征提取,完成最终的虹膜识别。从而解决在虹膜识别过程中菲涅尔纹的干扰问题,提升用户使用VR设备的安全性以及用户体验。
在一种可能的设计中,所述控制所述摄像单元在移动过程中采集N帧第一图像,包括:
通过所述VR设备中的电机控制所述摄像单元移动N次,在每完成一次移动时控制所述摄像单元采集一次图像,从而得到所述N帧第一图像。
在一种可能的设计中,还包括:获取预存的所述摄像单元采集的包含菲涅尔纹的第三图像,所述第三图像背景为纯色背景,所述菲涅尔纹包括至少两个同圆心的圆环;
将所述圆环之间所具有的间隔的N分之一对应的摄像单元的移动距离,作为所述摄像单元一次移动所移动的距离。
其中,作为替代方案,也可以不是获取预存的第三图像,而是获取预存的距离作为摄像单元一次移动所移动的距离。
在一种可能的设计中,所述将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像,包括:
确定所述N帧第一图像中各自的虹膜圆心,以所述N帧第一图像中各自的虹膜圆心作为所述N帧第一图像的配准偏移基准,对所述N帧第一图像进行图像配准;
基于菲涅尔纹在所述N帧第一图像的位置,将所述N帧图像中的菲涅尔纹所在的区域中的像素值标记为0;
基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到所述第二图像。
在一种可能的设计中,所述确定所述N帧第一图像中各自的虹膜圆心,包括:
确定位于所述N帧第一图像中任一第一图像中的的虹膜图像;
确定所述虹膜图像中灰度值最小的区域为瞳孔区域;
基于所述瞳孔区域,利用边缘检测和区域分割算法,确定包含所述瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;
基于所述虹膜圆的位置定位虹膜圆心。
在本申请实施例第二方面提供了一种虚拟现实VR设备,所述VR设备包括菲涅尔透镜,摄像单元,控制单元和处理单元;
所述摄像单元用于,透过所述菲涅尔透镜采集图像;
所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变;
所述控制单元用于,控制所述摄像单元移动,并控制所述摄像单元在移动过程中采集N帧第一图像,所述第一图像为包括菲涅尔纹的虹膜图像,N的取值大于1,N为整数;
所述处理单元用于,将所述N帧第一图像进行对齐和融合,得到去除菲涅尔纹的第二图像,以及基于所述第二图像进行虹膜识别。
在一种可能的设计中,所述VR设备包括电机,所述电机用于所述控制单元控制所述摄像单元移动,所述控制所述摄像单元在移动过程中采集N帧第一图像的控制单元用于,通过所述VR设备中的电机控制所述摄像单元移动N次,在每完成一次移动时控制所述摄像单元采集一次图像,从而得到所述N帧第一图像。
在一种可能的设计中,所述VR设备还包括:
获取单元用于,获取预存的所述摄像单元采集的包含菲涅尔纹的第三图像,所述第三图像背景为纯色背景,所述菲涅尔纹包括至少两个同圆心的圆环;
所述控制单元用于,将所述圆环之间所具有的间隔的N分之一对应的摄像单元的移动距离,作为所述摄像单元每完成一次移动所移动的距离。
在一种可能的设计中,所述将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像的处理单元用于,确定所述N帧第一图像中各自的虹膜圆心,以所述N帧第一图像中各自的虹膜圆心作为所述N帧第一图像的配准偏移基准,对所述N帧第一图像进行图像配准;基于菲涅尔纹在所述N帧第一图像的位置,将所述N帧图像中的菲涅尔纹所在的区域中的像素值标记为0;基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到所述第二图像。
在一种可能的设计中,所述确定所述N帧第一图像中各自的虹膜圆心的处理单元用于,确定位于所述N帧第一图像中任一第一图像中的的虹膜图像;
确定所述虹膜图像中灰度值最小的区域为瞳孔区域;基于所述瞳孔区域,利用边缘检测和区域分割算法,确定包含所述瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;基于所述虹膜圆的位置定位虹膜圆心。
本申请实施例的第三方面提供了一种虚拟现实VR设备,所述VR设备包括菲涅尔透镜,摄像单元,处理器和存储器,所述摄像单元用于,透过所述菲涅尔透镜采集图像;
所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变;
所述存储器用于,存储应用于VR设备上的虹膜识别的操作程序、代码或指令;
所述处理器用于,调用所述存储器中存储的虹膜识别的操作程序、代码或指令,执行本申请实施例第一方面提供的虹膜识别方法。
本申请实施例的第四方面提供了一种计算机可读存储介质,包括指令,当其在计算机上运行时,使得计算机执行上述本申请实施例第一方面公开的虹膜识别方法。
本申请实施例的第五方面提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述各方面所述的虹膜识别方法。
本申请实施例所公开的虹膜识别方法和VR设备。该VR设备包括菲涅尔透镜和摄像单元,该摄像单元透过该菲涅尔透镜采集图像,该菲涅尔透镜与该摄像单元的相对位置在摄像单元移动的过程中固定不变。该方法通过执行控制该摄像单元移动,并控制该摄像单元在移动的过程中采集N帧第一图像,该第一图像为包括菲涅尔纹的虹膜图像,然后,将N帧第一图像进行对齐和融合,得到去除菲涅尔纹的第二图像,最后基于该第二图像,完成最终的虹膜识别。通过上述的虹膜识别方法,将菲涅尔纹去除之后再进行虹膜识别,从而解决在虹膜识别过程中菲涅尔纹的干扰问题,提升用户使用VR设备的安全性以及用户体验。
附图说明
图1为本申请实施例公开的一种VR设备的结构示意图;
图2为本申请实施例公开的具有菲涅尔纹的虹膜图;
图3为本申请实施例公开的去除菲涅尔纹之后的虹膜图;
图4为本申请实施例公开的一种虹膜识别方法的流程示意图;
图5为本发明实施例公开的设置电机相关参数的方法流程示意图;
图6为本发明实施例公开的多帧融合去除菲涅尔纹的流程示意图;
图7为本发明实施例公开的一种VR设备的结构示意图;
图8为本发明实施例公开的另一种VR设备的结构示意图。
具体实施方式
本申请实施例公开的一种虹膜识别方法和VR设备,用于解决在虹膜识别过程中菲涅尔纹的干扰问题,从而提升用户使用VR设备的安全性以及用户体验。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。并且,在本申请的描述中,除非另有说明,“多个”是指两个或多于两个。另外,为了便于清楚描述本申请实施例的技术方案,在本申请的实施例中,采用了“第一”、“第二”等字样对功能和作用基本相同的相同项或相似项进行区分。本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定,并且“第一”、“第二”等字样也并不限定一定不同。
此外,本申请实施例和权利要求书及附图中的术语“包括”和“具有”不是排他的。例如,包括了一系列步骤或模块的过程、方法、系统、产品或设备没有限定于已列出的步骤或模块,还可以包括没有列出的步骤或模块。
以图1示出的VR设备为例对本申请实施例公开的虹膜识别方法的执行过程进行详细说明。
如图1所示,该VR设备100包括电机101,摄像单元和菲涅尔透镜。
其中,VR设备100中对应人眼左眼的位置,对应设置一套摄像单元102和菲涅尔透镜103。该摄像单元102透过该菲涅尔透镜103采集图像。该摄像单元102和菲涅尔透镜103的相对位置在摄像单元102移动过程中固定不变。VR设备100中对应人眼右眼的位置,对应设置一套摄像单元104和菲涅尔透镜105。该摄像单元104透过该菲涅尔透镜105采集图像。该摄像单元104和菲涅尔透镜105的相对位置在摄像单元104移动过程中固定不变。
也就是说,位于同一侧的菲涅尔透镜和摄像单元的相对位置在摄像单元移动的过程中固定不变。这里需要说明的是,固定不变是指:在摄像单元102移动的过程中,摄像单元102和菲涅尔透镜103之间不会产生相对位移。或者,在摄像单元102移动的过程中,菲涅尔透镜103相对于摄像单元102的相对速度或者相对角速度为0。
电机101通过传动机构调整摄像单元102和摄像单元104的位置。该传动机构可以为齿轮等部件。具体为:摄像单元102和摄像单元104通过电机101的传动调整相向移动,或者,摄像单元102和摄像单元104随电机101的传动调整背向移动。
在摄像单元102和摄像单元104移动过程中,分别采集N帧包含第一图像,该第一图像为包括菲涅尔纹的虹膜图像,N为大于1的整数。
菲涅尔纹包含至少两个同圆心的圆环。图2示出包含多个同圆心的圆环构成的菲涅尔纹的虹膜图像。
该VR设备基于每一个摄像单元所采集到的N帧第一图像以及多帧图像的融合技术进行融合,得到去除菲涅尔纹的第二图像,然后再基于该第二图像进行虹膜特征提取,进行虹膜识别。如图3所示,为去除菲涅尔纹后的虹膜图。
本申请实施例中通过电机的传动机构调节位于人眼左眼和对应人眼右眼的摄像单元相向移动或者背向移动,从而改变VR设备与眼睛的相对位置。该VR设备首先,通过控制摄像单元在移动的过程中,抓取相对不同位置眼睛的图像。且因同一侧的菲涅尔透镜和摄像单元的位置在摄像单元移动的过程中固定不变,因此菲涅尔纹在所抓取到的图像中的位置也不变,而眼睛虹膜位置在图像中是变化的。然后,利用本申请实施例公开的多帧融合技术去除附着在虹膜上的菲涅尔纹,得到去除菲涅尔纹的第二图像,最后基于该第二图像进行虹膜特征提取,完成最终的虹膜识别。从而解决在虹膜识别过程中菲涅尔纹的干扰问题,提升用户使用VR设备的安全性以及用户体验。
如图4所示,为本申请实施例公开的一种虹膜识别方法的流程示意图,该虹膜识别方法应用于图1公开的VR设备。该虹膜识别方法包括:
S401:VR设备控制摄像单元移动,并控制摄像单元在移动过程中采集N帧第一图像。
该第一图像为包括菲涅尔纹的虹膜图像。
在具体实现中,当用户佩戴好VR设备之后,触发启动虹膜识别的应用程序。VR设备中的电机通过预设的控制程序启动,并通过传动机构使VR设备上的摄像单元相向移动或背向移动。该控制程序中包括预设的摄像单元的移动速度、单次摄像单元移动时长和预设的摄像单元的移动次数。该预设的摄像单元移动次数为N,N为整数,取值大于1。
需要说明的是,在N次移动过程中,摄像单元每次移动的距离与预设的摄像单元的移动速度和单次摄像单元移动时长有关。通常情况下,摄像单元每次移动的距离相同。对此本申请实施例并不限定,摄像单元每次移动的距离也可以根据需要而有所不同。摄像单元每次移动的方向与电机的控制有关,摄像单元每次移动的方向可根据需要变化。
在具体实现中,VR设备通过采集参照图像或预设图像中的菲涅尔纹设置摄像单元的移动距离,移动速度和单次移动时间。具体如图5所示,包括:
S501:VR设备获取预存的通过摄像单元采集的第三图像。
第三图像为包含菲涅尔纹的参照图像或者预设图像,该第三图像的背景为纯色背景。该菲涅尔纹包括至少两个同圆心的圆环。该第三图像经由一次采集后,可预存于摄像单元中作为参照图像或者预设图像。
可选的,可以通过摄像单元拍摄纯白纸张,得到只包含白底和菲涅尔纹的图像。
在具体实现中,通常在VR设备(VR菲涅尔透镜)前放置一张白纸。通过VR设备自动IRled提供的照明,摄像单元透过VR菲涅尔透镜,采集白纸的红外图像,该红外图像在图像菲涅尔透镜区域只有白底和菲涅尔纹。
S502:VR设备将确定的菲涅尔纹所包括的圆环之间的间隔的N分之一对应的摄像单元的移动距离,作为该摄像单元一次移动所移动的距离。
菲涅尔纹由多个同圆心的圆环环绕构成,通过边缘提取检测方法,能够确定菲涅尔纹由多少个圆环构成,并确定相邻圆环之间的间隔。需要说明的是,菲涅尔纹由多少个圆环构成,通过边缘提取检测方法就会确定多少个间隔。可选的,可任选其中一个间隔作为菲涅尔纹所包括的圆环之间的间隔,即用于计算摄像单元的移动距离的间隔。可选的,可取多个间隔的平均值作为用于计算摄像单元的移动距离的间隔。可选的,将得到的最大的间隔作为菲涅尔纹所包括的圆环之间的间隔,即用于计算摄像单元的移动距离的间隔。
这里的边缘指构成菲涅尔纹的各个圆环的边缘,各个圆环的边缘通过图象局部区域亮度变化显著的部分。该图像局部区域的灰度剖面可以看作,从一个灰度值在很小的缓冲区域内急剧变化到另一个灰度相差较大的灰度值。通过对边缘检测,主要是检测图像的灰度变化的度量并通过计算进行定位,从而获取封闭边界区域。在本申请实施例中则是获取各个圆环的边界区域,能够最终确定菲涅尔纹具有多少个同圆心的圆环。
可选的,由于菲涅尔透镜和摄像单元的相对位置在摄像单元移动的过程中是固定不变的,因此,该间隔也可以进行预先设置。
在具体实现中,预设摄像单元移动次数N可以理解为后续需要进行融合的第一图像的帧数。
也就是说,在后续进行虹膜识别的过程中摄像单元每移动1次,采集一次第一图像,得到一帧第一图像。摄像单元移动N次,则能够获取N帧第一图像。在本申请实施例中,为保证VR设备运行的实时性,该预设电机移动次数N的较佳取值范围为3-5。
但是,本申请实施例对于预设电机移动次数以及后续采集第一图像的帧数并不仅限于此。在满足系统运行实时性的原则上,还可以取更大值。
另一方面,可选的,单次摄像单元移动距离也可以通过VR设备基于菲涅尔纹中圆环的间隔与N帧第一图像,确定相邻第一图像之间的像素差,可以将得到的像素差转换为单次摄像单元的移动距离。
在具体实现中,可以通过将菲涅尔纹中圆环的间隔与N帧相除,将得到的值作为N帧相邻的第一图像之间的像素差。
S503:VR设备根据单次摄像单元移动距离和预设摄像单元移动速度确定单次摄像单元移动时长。
在具体实现中,预设摄像单元移动速度可以通过图像坐标移动速度表示。该图像坐标移动速度,根据小孔成像原理,以及电机实际移动速度与像素所满足的关系式(1)确定。
n=s/t (1)
其中,n表示图像坐标移动速度,单位为:pixel/ms;s表示电机实际移动速度,单位为:mm/ms;t表示摄像单元的单像素尺寸。
在本申请实施例中,用图像坐标移动速度表征预设摄像单元移动速度,因此n也表示预设摄像单元移动速度。
由此,根据S602中确定的单次摄像单元移动距离和S603中确定的预设摄像单元移动速度,通过公式(2)得到单次摄像单元移动时长。
T=M/n (2)
其中,T表示单次摄像单元移动时长,M表示摄像单元移动距离,n表示预设摄像单元移动速度。
执行S401中控制摄像单元在移动过程中采集N帧第一图像具体为:通过所述VR设备中的电机控制所述摄像单元移动N次,在每完成一次移动时控制所述摄像单元采集一次图像,从而得到N帧第一图像。
在具体实现中,首先,VR设备中的电机按照预设摄像单元移动次数N控制摄像单元定向移动N次,摄像单元在每完成一次定向移动时,采集一次第一图像,从而得到一帧第一图像。第一图像中包含菲涅尔纹和虹膜图像。需要说明的是,两套摄像单元是采用同样的方式进行第一图像的采集。当VR设备控制摄像单元完成N次移动后,摄像单元完成N帧第一图像的采集。
S402:VR设备将N帧第一图像进行融合,得到去除菲涅尔纹的第二图像。
在具体实现中,VR设备将采集到的N帧第一图像进行对齐和融合。首先,需要确定进行多帧对齐和融合的基准位置,即确定虹膜在图像中的位置,再确定虹膜中心位置,并以此为基准,完成多帧图像的配准。然后,在基于进行配准好的多帧图像对图像中标记为0的区域进行对齐和融合。也就是采用多帧对齐融合技术以去除图像中的菲涅尔纹。上述融合可以使得N帧第一图像中任一第一图像中的菲涅尔纹所在区域的内容被其他第一图像中的虹膜图像的内容或者部分内容替代。
具体过程如图6所示,包括:
S601:VR设备确定N帧第一图像中各自的虹膜圆心,以N帧第一图像中各自的虹膜圆心作为N帧第一图像的配准偏移基准,对N帧第一图像进行图像配准。
该虹膜圆心可以预先确定,也可以在识别的过程中确定。在具体实现中,VR设备确定虹膜圆心的过程为:
首先,当用户正常佩戴VR后,通过VR设备自动IRLED灯提供照明,摄像单元透过VR菲涅尔透镜,采集人眼红外图像。
其次,基于采集到的人眼红外图像中,瞳孔位置的灰度值最小的原理,通过搜索人眼红外图像中最小灰度值的方式,确定瞳孔位置,进而通过瞳孔位置确定人眼红外图像中的瞳孔区域。
较佳的方式为设定两倍的最小灰度值为阈值,进行图像的二值化。图像的二值化为就是将图像上的像素点的灰度值设置为0或255,也就是将整个图像呈现出明显的只有黑和白的视觉效果,根据阈值选取的不同,二值化的算法可以分为固定阈值和自适应阈值,本申请实施例对此并不进行限定。
然后,基于确定的瞳孔区域,采用边缘分割算法,确定虹膜圆的边缘在第一图像上的位置。
在具体实现中,由于边缘是图像上灰度变化最明显的地方,且作为图像中不同区域的边界,存在灰度突变以及具有方向性的特征。瞳孔是人眼睛内虹膜中心的小圆孔。基于上述边缘的特征和确定的瞳孔区域,采用边缘分割算法,可以确定包含瞳孔区域的虹膜圆的边缘在第一图像上的位置。
最后,在确定虹膜圆的边缘的第一图像上,定位虹膜圆的位置,并基于该虹膜圆得到虹膜圆心。
也就是说,对每一帧第一图像按照确定的虹膜圆心作为偏移基准进行配准。最后,得到配准后图像。
具体的,确定N帧第一图像中各自的虹膜圆心,包括:首先,确定位于N帧第一图像中任一第一图像中的的虹膜图像;然后,确定虹膜图像中灰度值最小的区域为瞳孔区域;然后,基于瞳孔区域,利用边缘检测和区域分割算法,确定包含瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;最后,基于虹膜圆的位置定位虹膜圆心。
S602:VR设备基于菲涅尔纹在N帧第一图像的位置,将N帧图像中的菲涅尔纹所在的区域中的像素值标记为0。
在具体实现中,VR设备对采集到的每一帧第一图像中包含菲涅尔纹的区域进行标记,将该区域作为标记区域,并设置该标记区域为0。实际上是将该包含菲涅尔纹的区域中的像素值标记为0。
需要说明的是,对第一图像中包含菲涅尔纹的区域中的像素值进行标记可以采用人工标记,可以在VR设备离线时进行人工标记。但并不仅限于采用人工标记。另外,由于摄像单元和菲涅尔透镜的位置固定不变,即,菲涅尔纹在图像中的相对位置固定这一特点,对N帧第一图像的标记,只需要人工对其中一帧第一图像进行一次标定,其他帧自动可参照进行自动标记。
S603:VR设备基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到第二图像。
在具体实现中,依据图像空域不变性。首先,VR设备基于配准结果将标记后的N帧第一图像进行对齐;然后,计算对齐后的N帧第一图像中相邻图像的频率均值和方差,并利用得到的频率均值和方差设置N帧第一图像中相邻图像之间的加权系数。然后,VR设备依次将N帧第四图像中设置为0的像素值与设置的加权系数进行多帧图像信息取或运算,得到N帧去除菲涅尔纹的第二图像。
S603:VR设备基于该第二图像进行虹膜识别。
在具体实现中,基于上述已将菲涅尔纹去除的第二图像进行虹膜识别,从而保证虹膜信息的完整性。
本申请实施例通过通过执行控制该摄像单元移动,并控制该摄像单元在移动的过程中采集N帧包含重叠的菲涅尔纹和虹膜图像的第一图像,然后,将N帧第一图像进行对齐和融合,得到去除菲涅尔纹的第二图像,最后基于该第二图像,完成最终的虹膜识别。通过上述的虹膜识别方法,将菲涅尔纹去除之后再进行虹膜识别,从而解决在虹膜识别过程中菲涅尔纹的干扰问题,提升用户使用VR设备的安全性以及用户体验。
基于上述本申请实施例公开的虹膜识别方法,本申请实施例还公开了执行该虹膜识别方法的VR设备。在具体实现中可以为图1中示出的VR设备。
如图7所示,为本申请实施例公开的VR设备的结构示意图。该VR设备700包括:菲涅尔透镜701,摄像单元702,控制单元703和处理单元704。
该摄像单元702用于,透过菲涅尔透镜701采集图像。
该菲涅尔透镜701与摄像单元702的相对位置在摄像单元702移动过程中固定不变。
该控制单元703用于,控制摄像单元702移动,并控制摄像单元702在移动过程中采集N帧第一图像,该第一图像为包括菲涅尔纹的虹膜图像,N的取值大于1,N为整数。
在具体实现中,在VR设备700中包括电机,该电机用于该控制单元703控制摄像单元702移动,该控制单元703在控制摄像单元702在移动过程中采集N帧第一图像的具体过程为:通过VR设备700中的电机控制摄像单元702移动N次,在每完成一次移动时控制摄像单元702采集一次图像,从而得到N帧第一图像。
该处理单元704用于,将N帧第一图像进行融合,得到去除菲涅尔纹的第二图像,以及基于第二图像进行虹膜识别。
在具体实现中,该处理单元704将N帧第一图像进行融合,得到去除菲涅尔纹的第二图像的具体过程为:确定N帧第一图像中各自的虹膜圆心,以N帧第一图像中各自的虹膜圆心作为N帧第一图像的配准偏移基准,对N帧第一图像进行图像配准;基于菲涅尔纹在N帧第一图像的位置,将N帧图像中的菲涅尔纹所在的区域中的像素值标记为0;基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到第二图像。
在具体实现中,处理单元704确定N帧第一图像中各自的虹膜圆心的具体过程为:确定位于N帧第一图像中任一第一图像中的的虹膜图像;确定虹膜图像中灰度值最小的区域为瞳孔区域;基于瞳孔区域,利用边缘检测和区域分割算法,确定包含瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;基于虹膜圆的位置定位虹膜圆心。
进一步的,VR设备还包括:获取单元用于,获取预存的摄像单元采集的包含菲涅尔纹的第三图像,该第三图像背景为纯色背景,菲涅尔纹包括至少两个同圆心的圆环。
相应地,该控制单元703用于,将圆环之间所具有的间隔的N分之一对应的摄像单元702的移动距离,作为摄像单元702每完成一次移动所移动的距离。
可选的,控制单元703也可以实现获取单元的功能。即控制单元703还用于获取摄像单元采集的包含菲涅尔纹的第三图像,该第三图像背景为纯色背景,菲涅尔纹包括至少两个同圆心的圆环。以及,将圆环之间所具有的间隔的N分之一对应的摄像单元702的移动距离,作为摄像单元702每完成一次移动所移动的距离。
以上本申请实施例公开的VR设备700中的各个单元中所涉及的相应操作,可以参照上述本申请实施例中VR设备执行的相应操作,这里不再进行赘述。
结合本申请实施例公开的虹膜识别方法,本申请实施例所公开的VR设备也可以直接用硬件、处理器执行的存储器,或者二者的结合来实施。
如图8所示,该VR设备800包括:处理器801,存储器802,摄像头803,菲涅尔透镜804和电机805。可选的,该VR设备800还包括通信接口806。
该处理器801通过总线与存储器802耦合。处理器802通过总线与该通信接口806耦合。
该摄像头803透过菲涅尔透镜804采集图像。
该电机805用于通过处理器801的控制,通过相应的传动机构使摄像头803移动。
该菲涅尔透镜804与摄像头803的相对位置在摄像头803在摄像头803移动的过程中固定不变。
处理器801具体可以是中央处理器(central processing unit,CPU),网络处理器(network processor,NP),专用集成电路(application-specific integrated circuit,ASIC)或者可编程逻辑器件(programmable logic device,PLD)。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gate array,FPGA)或者通用阵列逻辑(generic array logic,GAL)。
存储器802具体可以是内容寻址存储器(content-addressable memory,CAM)或者随机存取存储器(random-access memory,RAM)。CAM可以是三态内容寻址存储器(ternarycam,TCAM)。
通信接口805可以是有线接口,例如光纤分布式数据接口(fiber distributeddata interface,FDDI)或者以太网(ethernet)接口。
存储器802也可以集成在处理器801中。如果存储器802和处理器801是相互独立的器件,存储器802和处理器801相连,例如存储器802和处理器801可以通过总线通信。通信接口806和处理器806可以通过总线通信,通信接口806也可以与处理器801直接连接。
存储器802,用于存储上述本申请实施例公开的虹膜识别方法的操作程序、代码或指令。可选的,该存储器802包括操作系统和应用程序,用于上述本申请实施例公开的虹膜识别方法的操作程序、代码或指令。
当处理器801或硬件设备要进行上述本申请实施例公开的虹膜识别方法的相关操作时,调用并执行存储器802中存储的操作程序、代码或指令可以完成上述本申请实施例中涉及的VR设备执行相应虹膜识别方法的过程。具体过程可参见上述本申请实施例相应的部分,这里不再赘述。
可以理解的是,上述图1-图5所示虹膜识别方法实施例所涉及到的接收/发送等操作可以是指在由处理器实现的接收/发送处理,也可以是指通过接收器和发射器完成的发送/接收过程,接收器和发射器可以独立存在,也可以集成为收发器。一种可能的实现方式中,VR设备800还可以包括:收发器。
可以理解的是,图8仅仅示出了该VR设备的简化设计。在实际应用中,VR设备可以包含任意数量的接口,处理器,存储器等,而所有可以实现本申请实施例的VR设备或者控制设备都在本申请实施例的保护范围之内。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
最后应说明的是:以上实施例仅用以示例性说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请及本申请带来的有益效果进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请权利要求的范围。
Claims (11)
1.一种虹膜识别方法,其特征在于,所述方法应用于虚拟现实VR设备,所述VR设备包括菲涅尔透镜和摄像单元,所述摄像单元透过所述菲涅尔透镜采集图像,所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变,所述方法包括:
控制所述摄像单元移动,并控制所述摄像单元在移动过程中采集N帧第一图像,所述第一图像为包括菲涅尔纹的虹膜图像,N的取值大于1,N为整数;
将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像;
基于所述第二图像进行虹膜识别。
2.根据权利要求1所述的方法,其特征在于,所述控制所述摄像单元在移动过程中采集N帧第一图像,包括:
通过所述VR设备中的电机控制所述摄像单元移动N次,在每完成一次移动时控制所述摄像单元采集一次图像,从而得到所述N帧第一图像。
3.根据权利要求1或2所述的方法,其特征在于,还包括:获取预存的所述摄像单元采集的包含菲涅尔纹的第三图像,所述菲涅尔纹包括至少两个同圆心的圆环;
将所述圆环之间所具有的间隔的N分之一对应的摄像单元的移动距离,作为所述摄像单元一次移动所移动的距离。
4.根据权利要求1或2任一项所述的方法,其特征在于,所述将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像,包括:
确定所述N帧第一图像中各自的虹膜圆心,以所述N帧第一图像中各自的虹膜圆心作为所述N帧第一图像的配准偏移基准,对所述N帧第一图像进行图像配准;
基于菲涅尔纹在所述N帧第一图像的位置,将所述N帧第一图像中的菲涅尔纹所在的区域中的像素值标记为0;
基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到所述第二图像。
5.根据权利要求4中所述的方法,其特征在于,所述确定所述N帧第一图像中各自的虹膜圆心,包括:
确定位于所述N帧第一图像中任一第一图像中的虹膜图像;
确定所述虹膜图像中灰度值最小的区域为瞳孔区域;
基于所述瞳孔区域,利用边缘检测和区域分割算法,确定包含所述瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;
基于所述虹膜圆的位置定位虹膜圆心。
6.一种虚拟现实VR设备,其特征在于,所述VR设备包括菲涅尔透镜,摄像单元,控制单元和处理单元;
所述摄像单元用于,透过所述菲涅尔透镜采集图像;
所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变;
所述控制单元用于,控制所述摄像单元移动,并控制所述摄像单元在移动过程中采集N帧第一图像,所述第一图像为包括菲涅尔纹的虹膜图像,N的取值大于1,N为整数;
所述处理单元用于,将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像,以及基于所述第二图像进行虹膜识别。
7.根据权利要求6所述的VR设备,其特征在于,所述VR设备包括电机,所述电机用于所述控制单元控制所述摄像单元移动,所述控制所述摄像单元在移动过程中采集N帧第一图像的控制单元用于,通过所述电机控制所述摄像单元移动N次,在每完成一次移动时控制所述摄像单元采集一次图像,从而得到所述N帧第一图像。
8.根据权利要求6或7所述的VR设备,其特征在于,所述VR设备还包括:
获取单元用于,获取预存的所述摄像单元采集的包含菲涅尔纹的第三图像所述菲涅尔纹包括至少两个同圆心的圆环;
所述控制单元用于,将所述圆环之间所具有的间隔的N分之一对应的摄像单元的移动距离,作为所述摄像单元每完成一次移动所移动的距离。
9.根据权利要求6或7任一项所述的VR设备,其特征在于,所述将所述N帧第一图像进行融合,得到去除菲涅尔纹的第二图像的处理单元用于,确定所述N帧第一图像中各自的虹膜圆心,以所述N帧第一图像中各自的虹膜圆心作为所述N帧第一图像的配准偏移基准,对所述N帧第一图像进行图像配准;基于菲涅尔纹在所述N帧第一图像的位置,将所述N帧第一图像中的菲涅尔纹所在的区域中的像素值标记为0;基于配准结果,将标记后的N帧第一图像进行对齐,并将对齐后的N帧第一图像进行或运算,得到所述第二图像。
10.根据权利要求9所述的VR设备,其特征在于,所述确定所述N帧第一图像中各自的虹膜圆心的处理单元用于,确定位于所述N帧第一图像中任一第一图像中的虹膜图像;
确定所述虹膜图像中灰度值最小的区域为瞳孔区域;基于所述瞳孔区域,利用边缘检测和区域分割算法,确定包含所述瞳孔区域的虹膜圆的边缘,从而确定虹膜圆的位置;基于所述虹膜圆的位置定位虹膜圆心。
11.一种虚拟现实VR设备,其特征在于,所述VR设备包括菲涅尔透镜,摄像单元,处理器和存储器,所述摄像单元用于,透过所述菲涅尔透镜采集图像;
所述菲涅尔透镜与所述摄像单元的相对位置在摄像单元移动过程中固定不变;
所述存储器用于,存储应用于VR设备上的虹膜识别的操作程序、代码或指令;
所述处理器用于,调用所述存储器中存储的虹膜识别的操作程序、代码或指令,执行权利要求1-5中任一项所述的虹膜识别方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711432690.8A CN109960992B (zh) | 2017-12-26 | 2017-12-26 | 虹膜识别方法和vr设备 |
PCT/CN2018/120579 WO2019128714A1 (zh) | 2017-12-26 | 2018-12-12 | 虹膜识别方法和vr设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711432690.8A CN109960992B (zh) | 2017-12-26 | 2017-12-26 | 虹膜识别方法和vr设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109960992A CN109960992A (zh) | 2019-07-02 |
CN109960992B true CN109960992B (zh) | 2023-08-29 |
Family
ID=67022047
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711432690.8A Active CN109960992B (zh) | 2017-12-26 | 2017-12-26 | 虹膜识别方法和vr设备 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN109960992B (zh) |
WO (1) | WO2019128714A1 (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101819626A (zh) * | 2009-02-26 | 2010-09-01 | 何玉青 | 一种基于图像融合的虹膜光斑消除方法 |
CN204791066U (zh) * | 2015-05-21 | 2015-11-18 | 北京中科虹霸科技有限公司 | 一种用于移动终端的虹膜识别装置及包含其的移动终端 |
CN105955491A (zh) * | 2016-06-30 | 2016-09-21 | 北京上古视觉科技有限公司 | 一种具有眼控及虹膜识别功能的vr眼镜 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8705808B2 (en) * | 2003-09-05 | 2014-04-22 | Honeywell International Inc. | Combined face and iris recognition system |
KR100826876B1 (ko) * | 2006-09-18 | 2008-05-06 | 한국전자통신연구원 | 홍채 검출 방법 및 이를 위한 장치 |
US10565446B2 (en) * | 2015-09-24 | 2020-02-18 | Tobii Ab | Eye-tracking enabled wearable devices |
CN105224936B (zh) * | 2015-10-28 | 2017-11-17 | 广东欧珀移动通信有限公司 | 一种虹膜特征信息提取方法和装置 |
CN107292242B (zh) * | 2017-05-31 | 2020-07-07 | 华为技术有限公司 | 一种虹膜识别方法和终端 |
-
2017
- 2017-12-26 CN CN201711432690.8A patent/CN109960992B/zh active Active
-
2018
- 2018-12-12 WO PCT/CN2018/120579 patent/WO2019128714A1/zh active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101819626A (zh) * | 2009-02-26 | 2010-09-01 | 何玉青 | 一种基于图像融合的虹膜光斑消除方法 |
CN204791066U (zh) * | 2015-05-21 | 2015-11-18 | 北京中科虹霸科技有限公司 | 一种用于移动终端的虹膜识别装置及包含其的移动终端 |
CN105955491A (zh) * | 2016-06-30 | 2016-09-21 | 北京上古视觉科技有限公司 | 一种具有眼控及虹膜识别功能的vr眼镜 |
Also Published As
Publication number | Publication date |
---|---|
WO2019128714A1 (zh) | 2019-07-04 |
CN109960992A (zh) | 2019-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111382613B (zh) | 图像处理方法、装置、设备和介质 | |
EP3503033B1 (en) | Optical tracking system and optical tracking method | |
CN103945109B (zh) | 摄像装置及其控制方法、远程控制装置及其控制方法 | |
CN105659580A (zh) | 一种自动对焦方法、装置及电子设备 | |
CN108230245A (zh) | 图像拼接方法、图像拼接装置及电子设备 | |
US20220301217A1 (en) | Eye tracking latency enhancements | |
CN104834901A (zh) | 一种基于双目立体视觉的人脸检测方法、装置及系统 | |
CN107392958A (zh) | 一种基于双目立体摄像机确定物体体积的方法及装置 | |
CN113129241B (zh) | 图像处理方法及装置、计算机可读介质、电子设备 | |
CN103827920A (zh) | 根据图像的对象距离确定 | |
CN110619660A (zh) | 一种物体定位方法、装置、计算机可读存储介质及机器人 | |
CN106295640A (zh) | 一种智能终端的物体识别方法和装置 | |
CN105208273A (zh) | 使用双摄像头终端拍照的方法、装置及双摄像头终端 | |
AU2020203790A1 (en) | Transformed multi-source content aware fill | |
CN113657195A (zh) | 人脸图像识别方法、设备、电子装置和存储介质 | |
CN105224936B (zh) | 一种虹膜特征信息提取方法和装置 | |
CN109308714A (zh) | 基于分类惩罚的摄像头和激光雷达信息配准方法 | |
CN114511608A (zh) | 一种深度图像的获取方法、装置、终端、成像系统和介质 | |
CN109960992B (zh) | 虹膜识别方法和vr设备 | |
KR20160024419A (ko) | Dibr 방식의 입체영상 카메라 판별 방법 및 장치 | |
CN105976366B (zh) | 一种靶环线定位的方法及装置 | |
KR101601508B1 (ko) | 시선 추적 방법 | |
CN108073935A (zh) | 基于临近像素和连通路径识别手部区域的方法及装置 | |
CN117190866B (zh) | 多个堆叠电子元器件的极性判别检测方法、装置和设备 | |
CN115049740A (zh) | 标靶图像检测方法、装置、设备、车辆以及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |