CN109478227B - 计算设备上的虹膜或其他身体部位识别 - Google Patents
计算设备上的虹膜或其他身体部位识别 Download PDFInfo
- Publication number
- CN109478227B CN109478227B CN201680086206.8A CN201680086206A CN109478227B CN 109478227 B CN109478227 B CN 109478227B CN 201680086206 A CN201680086206 A CN 201680086206A CN 109478227 B CN109478227 B CN 109478227B
- Authority
- CN
- China
- Prior art keywords
- body part
- camera
- display
- user
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 claims abstract description 42
- 230000008713 feedback mechanism Effects 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 3
- 238000001514 detection method Methods 0.000 abstract description 21
- 210000000554 iris Anatomy 0.000 description 62
- 238000012545 processing Methods 0.000 description 39
- 230000008569 process Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 11
- 230000015654 memory Effects 0.000 description 10
- 230000001815 facial effect Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 235000002673 Dioscorea communis Nutrition 0.000 description 1
- 241000544230 Dioscorea communis Species 0.000 description 1
- 208000035753 Periorbital contusion Diseases 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013481 data capture Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000005670 electromagnetic radiation Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007639 printing Methods 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
- G06V40/67—Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/197—Matching; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Ophthalmology & Optometry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
- Collating Specific Patterns (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
公开了虹膜或其他对象检测方法和装置。在一个实施例中，该方法包括：将用设备的第一相机捕获的图像数据发送到设备的显示器，该图像数据具有用于在将图像数据发送到显示器时引导用户相对于显示器定位用户身体部位的指示；向用户提供反馈以向用户指示身体部位处于适当位置，使得身体部位的图像能够被设备的第二相机捕获；利用第二相机捕获身体部位的图像；以及使用图像对身体部位进行识别。
Description
技术领域
本发明的实施例涉及虹膜或其他身体部位识别领域，更具体地，本发明的实施例涉及通过反馈给用户来使用三维导航进行虹膜识别。
背景技术
虹膜是眼睛中的圆形结构，其控制瞳孔的直径和大小，因此控制到达视网膜的光量。虹膜识别是一种用于使用人眼的虹膜之一或两个虹膜的图像来识别个体的技术。虹膜识别使用红外摄像技术，其中用户的眼睛被照亮以获取虹膜的图像。然后处理图像以识别个体。
今天，在虹膜识别和验证技术的应用实践中，相机系统具有IR带通滤波器和窄视角镜头，其广泛应用于获得人眼虹膜的稳定纹理细节而不受可见光的干扰，以及提高虹膜/纹理识别算法的可靠性和性能。窄视角镜头(20～30度)可以帮助获得用比传统镜头(70～100度)更多的像素表示的相同小尺寸对象的图像，例如人眼。在近IR波长下，穿过滤波器的IR应用于镜头，以帮助获得人眼虹膜的清晰纹理信息，特别是针对亚洲黑/棕眼睛的虹膜(很难从黑眼睛获得高对比度的图像细节)。
当前系统存在许多问题。首先，很难帮助终端用户将他们的头部和眼睛导航到IR传感器的狭窄可视区域，因为在导航期间大多数情况下头部和眼睛通常在可视区域之外。其次，现有技术系统通常使用由IR带通滤波器带来的单色图像/流，这提供糟糕的用户体验。最后，虹膜识别没有自动触发原始数据捕获。因此，在相机系统中需要某种形式的面部检测或眨眼检测。
附图说明
从下面给出的详细描述和本发明的各种实施例的附图中将更全面地理解本发明，然而，不应将本发明限制于特定实施例，而是实施例仅用于解释和理解。
图1是计算设备的一个实施例的示例。
图2示出红外相机和彩色相机两者的视角。
图3是用于辅助通过窄视角IR相机捕获虹膜图像的过程的一个实施例的流程图。
图4是用于辅助通过窄视角IR相机捕获虹膜图像的过程的另一实施例的更详细流程图。
图5示出执行虹膜识别解锁设备的应用场景的流程图。
图6示出眼睛检测逻辑和显示图形生成逻辑之间的交互的一个示例。
图7示出根据一个实施方式的便携式图像捕获设备。
具体实施方式
在以下描述中，阐述了许多细节以提供对本发明的更透彻的解释。然而，对于本领域技术人员显而易见的是，可以在没有这些具体细节的情况下实践本发明。在其他情况下，公知结构和设备以框图形式而不是详细地示出，以避免模糊本发明。
公开用于利用计算设备捕获和/或获取个体(人)眼睛的虹膜图像的方法和设备。在一个实施例中，计算设备包括平板计算机、电话、膝上型计算机系统、二合一产品、个人数字助理等。在一个实施例中，本文描述的技术能够捕获焦点上的虹膜图像以提高虹膜识别算法的性能和准确性。
这里描述的技术帮助用户在虹膜识别专用相机的聚焦区域中容易地显示他们的面部和眼睛，该虹膜识别专用相机利用窄视角(NVA)红外(IR)镜头(例如，30°对角视角)来捕获用于虹膜识别应用的虹膜图像。这些技术利用前置彩色相机的特征和可用功能来帮助NVA IR相机获得用于虹膜识别算法的清晰虹膜图像，从而结合两种不同相机系统的优点，使用用户熟悉的彩色系统提供了关于虹膜捕获和识别的友好用户体验而不会注意到NVAIR相机的使用。
注意，尽管说明书讨论了本文描述的技术在虹膜中的应用，但是该技术也适用于识别其他身体部位(例如，面部)和/或其他对象。在一个实施例中，计算系统使用位于计算设备中的虹膜识别应用专用相机附近的现有宽视场(FOV)传统前置彩色相机(例如，80°对角视角)来帮助导航头部和眼睛。因此，前置彩色相机的视场(FOV)大于NVA IR相机的FOV。注意，图2中示出其示例。
根据两个相机的位置和镜头参数，NVA IR相机的可视区域可以映射到前置彩色相机的可视区域中的区域。在一个实施例中，该区域是显示的矩形(IR相机映射的矩形)。在一个实施例中，当在镜头(自动)聚焦期间NVA IR相机的镜头向前或向后移动时，IR相机映射的矩形收缩或扩展。使用来自前置彩色相机的宽视角预览流，个体可以看到面部和眼睛所在的位置，然后通过IR相机映射的矩形轻松地将眼睛导航到IR相机FOV中。使用彩色传感器101中的面部检测、面部特征检测和/或眨眼检测的公知功能，识别子系统可以检测面部是否移动到彩色传感器101的可视区域中的IR传感器映射的矩形中。在一个实施例中，识别子系统使用前置彩色相机中的面部检测、面部特征检测和/或眨眼检测的功能来自动触发从IR相机捕获虹膜图像。
图1是计算设备的一个实施例的示例。参考图1，平板计算机100包括彩色传感器(相机)101、IR传感器(相机)102、IR发射器103和显示器107。由彩色传感器101捕获的图像数据(例如，预览流)被发送或流送到显示器107，其中具有用于引导用户相对于显示器定位身体部位(例如，用户的眼睛、面部)的指示。在一个实施例中，指示包括显示在显示器上的第一图形(例如，矩形105或其他形状的元素)，其被映射到IR传感器102的视场104。通过观看显示器，用户将要识别的身体部位(例如，其眼睛)定位到图形(例如，矩形)中以使得能够通过IR传感器102捕获身体部位的图像。
该指示不限于是图形元素。例如，在一个实施例中，指示包括显示器上的文本和图形两者，以指导用户相对于显示器定位身体部位。在另一实施例中，指示包括显示器上的光(例如，发光二极管(LED))和音频中的一个或多个以指导用户相对于显示器定位身体部位。
计算设备包括反馈机构，用于向用户提供反馈，以向用户指示身体部位处于由IR传感器102进行图像捕获的位置。在一个实施例中，一旦反馈机构指示身体部位处于由IR传感器102进行图像捕获的适当位置(例如，正确的焦深)，则IR传感器102自动捕获身体部位的图像。在一个实施例中，反馈机构可操作为检测身体部位是否位于显示器中映射到IR传感器102的视场的区域中，使得IR传感器102可以捕获合适的图像。在虹膜识别的情况下，合适的图像是足够详细地显示用户眼睛的虹膜以允许进行虹膜识别的图像。
在一个实施例中，反馈包括改变图形的颜色。例如，反馈机构可以将矩形105的颜色从一种颜色(例如，黄色)改变为另一种颜色(例如，绿色，例如在图形元素106中)。在另一个实施例中，反馈机构用另一图形替换一个图形。例如，显示矩形105以引导用户将其眼睛定位在矩形内，并且当用户的眼睛处于能够获得适合于虹膜检测的图像的位置时，使用绿色正方形106替换黄色矩形105，从而向用户发出他/她处于适当位置的信号。
在一个实施例中，用户还使用两个较小的矩形106来向前或向后(放大或缩小)导航/定位以及水平(右/左)和竖直(上/下)移动他的眼睛，从而提供完整的3D导航。在前置彩色相机的镜头的景深和焦距不同于虹膜IR相机的情况下，这是必要的。注意，虹膜IR相机应用通常就是这种情况，因为使用具有短焦距和短景深相机镜头的相机来捕捉小尺寸对象(眼睛)的更多细节。因此，3D导航用于捕获清晰的虹膜图像。
在一个实施例中，计算设备包括处理器(例如，中央处理单元(CPU)、片上系统(SOC)、控制器)，以使用由IR传感器102捕获的图像对身体部位进行识别。
图3是用于辅助通过窄视角IR相机捕获虹膜图像的过程的一个实施例的流程图。该过程由处理逻辑执行，处理逻辑可以包括硬件(电路、专用逻辑等)、软件(例如在通用计算机系统或专用机器上运行)、固件或三者的组合。
参考图3，该过程开始于将用设备的第一相机捕获的图像数据发送到设备的显示器，其中具有用于在将图像数据发送到显示器时引导用户相对于显示器定位用户身体部位(例如，眼睛、面部等)的指示(处理框301)。在一个实施例中，第一相机是红绿蓝(RGB)相机。在一个实施例中，指示包括显示在显示器上的第一图形，该第一图形被映射到第二相机的视场中，并且身体部位在显示器上定位到第一图形中从而能够捕获身体部位的图像。在一个实施例中，第二相机是IR相机。在一个实施例中，指示包括显示器上的文本和图形之一或两者，以指导用户相对于显示器定位身体部位。在另一实施例中，指示包括使用显示器上的光和音频中的一个或多个来指导用户相对于显示器定位身体部位。
处理逻辑检测身体部位是否在显示器中映射到第二相机的视场的区域中(处理框302)，并且向用户提供反馈以向用户指示身体部位处于适当位置，使得可以通过设备的第二相机捕获身体部位的图像(处理框303)。在一个实施例中，反馈包括用第二图形替换第一图形。在另一实施例中，反馈包括改变第一图形的颜色。
响应于向用户指示身体部位处于由第二相机进行图像捕获的位置，处理逻辑利用第二相机捕获身体部位的图像(处理框304)。
使用由第二相机捕获的图像数据，处理逻辑使用图像对身体部位进行识别(处理框305)。在一个实施例中，身体部位包括用户的眼睛，并且对身体部位进行识别包括进行虹膜识别。在一个实施例中，身体部位包括用户的面部，并且对身体部位进行识别包括进行面部识别。
在具有基于如本文所述的窄视角IR相机的虹膜识别功能的计算系统(例如，电话、平板计算机系统等)上，系统可以捕获虹膜图像以仅用显示的来自前置彩色相机的预览流或在不显示来自IR相机的预览流的情况下进行虹膜识别和验证。
图4是用于辅助通过窄视角IR相机捕获虹膜图像的过程的另一实施例的更详细流程图。该过程由处理逻辑执行，处理逻辑可以包括硬件(电路、专用逻辑等)、软件(例如在通用计算机系统或专用机器上运行)、固件或三者的组合。
参考图4，该过程开始于打开设备上的前置彩色相机的预览流(处理框401)。接下来，处理逻辑确定并在设备的屏幕上的前置彩色相机的预览显示区域中绘制IR相机映射的矩形(即，图形元素)(处理框402)。处理逻辑检测面部和/或虹膜是否在IR相机映射的矩形中(处理框403)。如果在，则处理逻辑打开虹膜相机并触发它捕获虹膜图像(处理框404)。在一个实施例中，当面部和/或虹膜处于IR相机映射的矩形中时，处理逻辑触发虹膜相机自动拍照。
在捕获虹膜图像之后，处理逻辑将虹膜图像发送到虹膜识别过程，其使用虹膜图像进行识别(处理框405)。基于虹膜识别过程的结果，处理逻辑采取一个或多个动作。例如，虹膜识别过程可以用于确定用户以与使用密码相同的方式进行认证以获得对设备的访问。
图5示出执行虹膜识别解锁设备的应用场景的流程图。该过程由处理逻辑执行，处理逻辑可以包括硬件(电路、专用逻辑等)、软件(例如在通用计算机系统或专用机器上运行)、固件或三者的组合。
参考图5，处理逻辑确定用户的面部是否在兴趣区域(ROI)中(处理框501)。一旦发生这种情况，则处理逻辑确定用户的眼睛是否在ROI中(处理框502)。一旦用户的眼睛在ROI中，则处理逻辑确定用户的眼睛是否睁开(处理框503)。这可以使用公知技术来执行，例如，与眨眼检测和/或面部特征检测相关联的技术。
如果确定眼睛睁开，则处理逻辑使相机拍摄照片以用于虹膜识别(处理框504)。在一个实施例中，一旦确定眼睛睁开，这就会自动发生。
如果作为进行虹膜识别的结果，处理逻辑确定虹膜是否匹配具有对设备进行访问的权限的个体，则处理逻辑解锁该设备(处理框505)。
在一个实施例中，用于检测眼睛(或其他身体部位)何时在IR相机映射的矩形中的眼睛检测逻辑与显示图形生成逻辑一起操作以帮助捕获虹膜图像。图6示出眼睛检测逻辑和显示图形生成逻辑之间的交互的一个示例。该逻辑可以包括硬件(电路、专用逻辑等)、软件(例如在通用计算机系统或专用机器上运行)、固件或三者的组合。
参考图6，显示图形生成逻辑601生成具有图形指示(例如，映射到IR相机视场的矩形)的显示数据，以引导用户将其身体部位定位在引导物内。一旦显示图形生成逻辑601生成具有图形指示的显示数据，则显示图形生成逻辑601向眼睛检测逻辑602发信号以开始检测用户的眼睛何时处于适当位置以拍摄IR图像。发信号可以包括发送消息。一旦眼睛检测逻辑602检测到用户的眼睛处于适当位置，则眼睛检测逻辑602向显示图形生成逻辑601发信号(例如，消息)，使得显示图形生成逻辑601可以生成新的图形元素。在一个实施例中，这是相同的图形元素但具有不同的颜色。在另一实施例中，图形元素改变(例如，黄色矩形变为围绕用户眼睛的两个绿色正方形)。
在一个实施例中，眼睛检测逻辑602包括用于确定眼睛是否相对于IR或虹膜相机适当定位以获得适合于进行虹膜识别的图像的逻辑。
本文描述的技术提供许多优点。这些优点包括为用户提供一种简单的方式来通过来自前置彩色传感器的预览流将眼睛导航到识别ROI中。而且，当身体部位相对于窄视角IR相机处于适当位置时(例如，眼睛处于ROI中，由前置彩色传感器系统的就绪面部特征检测和/或眨眼检测所检测到的眼睛睁开)，本文描述的技术还自动触发从IR传感器捕获高质量原始图像。
具有图像捕获功能的设备的示例
图7示出根据一个实施方式的便携式图像捕获设备100。成像设备100容纳有系统板2。板2可以包括多个部件，包括但不限于处理器4和至少一个通信封装件6。通信封装件可以耦合到一个或多个天线16。处理器4物理耦合以及电气耦合到板2。
取决于其应用，图像捕获设备100可以包括可以或可以不物理耦合及电气耦合到板2的其他部件。这些其他部件包括但不限于易失性存储器(例如，DRAM)8、非易失性存储器(例如，ROM)9、闪存(未示出)、图形处理器12、数字信号处理器(未示出)、加密处理器(未示出)、芯片组14、天线16、显示器18(例如触屏显示器)、触屏控制器20、电池22、音频编解码器(未示出)、视频编解码器(未示出)、功率放大器24、全球定位系统(GPS)设备26、指南针28、加速度计(未示出)、陀螺仪(未示出)、扬声器30、一个或多个相机32、麦克风阵列34和大容量存储设备(例如硬盘驱动器)10、光盘(CD)(未示出)、数字通用盘(DVD)(未示出)等。这些部件可以连接到系统板2，安装到系统板上，或者与任何其他部件组合。
一个或多个相机32包括上述相机。相机阵列可以直接或通过图像芯片耦合到图像芯片36(例如成像信号处理器)和处理器4。图像芯片可以采用各种不同的形式，例如图形协处理器或单独的专用成像管理模块。这样的模块或设备可以包括用于捕获、处理、编辑、压缩、存储、打印和/或显示一个或多个图像的逻辑、算法和/或指令(包括上述操作)。这些过程可以包括去噪、图像识别、图像增强和本文描述的其他过程。在一些实施例中，成像管理模块可以包括在成像应用或操作系统内实现为软件的编程例程、功能和/或过程。在各种其他实施例中，成像管理模块可以实现为独立芯片或集成电路，或者包括在处理器内、CPU内、图形芯片或其他集成电路或芯片内或相机模块内的电路。
通信封装件6实现无线和/或有线通信，用于向视频设备100传输数据和从视频设备100传输数据。术语“无线”及其派生词可以用于描述电路、设备、系统、方法、技术、通信信道等，其可以通过使用调制的电磁辐射通过非固体介质传送数据。该术语并不暗示相关设备不包含任何引线，尽管在一些实施例中它们可能不包含任何引线。通信封装件6可以实现多种无线或有线标准或协议中的任何一种，包括但不限于Wi-Fi(IEEE 802.11系列)、WiMAX(IEEE 802.16系列)、IEEE802.20、长期演进(LTE)、Ev-DO、HSPA+、HSDPA+、HSUPA+、EDGE、GSM、GPRS、CDMA、TDMA、DECT、蓝牙、其以太网衍生物以及指定为3G、4G、5G及更高版本的任何其他无线和有线协议。视频设备100可以包括多个通信封装件6。例如，第一通信封装件6可以专用于例如Wi-Fi和蓝牙的较短距离无线通信，并且第二通信封装件6可以专用于较长距离无线通信，例如GPS、EDGE、GPRS、CDMA、WiMAX、LTE、Ev-DO等。
相机32可以包括相机的所有组件或共享资源，例如存储器8、9、10，处理4和用户接口12、20，以及其他视频设备部件和功能。处理器4耦合到相机和存储器，以接收帧并产生增强图像。在一个实施例中，相机32包括上面描述的图像捕获传感器和滤色器阵列。在一个实施例中，相机32还包括图像处理系统，如上所述。
在各种实施方式中，图像捕获设备100可以是视频相机、数字单镜头反射相机或无反射镜相机、蜂窝电话、媒体播放器、膝上型计算机、上网本、笔记本、超极本、智能电话、可穿戴设备、平板计算机、个人数字助理(PDA)、超级移动PC或数字视频录像机。图像捕获设备可以是固定的、便携的或可穿戴的。在进一步的实施方式中，图像捕获设备100可以是记录图像帧序列并处理数据的任何其他电子设备。
在第一示例性实施例中，一种方法包括：将用设备的第一相机捕获的图像数据发送到设备的显示器，该图像数据具有用于在将图像数据发送到显示器时引导用户相对于显示器定位用户身体部位的指示；向用户提供反馈以向用户指示身体部位处于适当位置，使得身体部位的图像能够被设备的第二相机捕获；利用第二相机捕获身体部位的图像；以及使用图像对身体部位进行识别。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，指示包括显示在显示器上的第一图形，该第一图形被映射到第二相机的视场中，并且身体部位在显示器上定位到第一图形中从而能够捕获身体部位的图像。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，反馈包括用第二图形替换第一图形。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，反馈包括改变第一图形的颜色。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，指示包括显示器上的文本和图形之一或两者，以指导用户相对于显示器定位身体部位。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，指示包括使用显示器上的光和音频中的一个或多个来引导用户相对于显示器定位身体部位。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，检测身体部位是否在显示器中映射到第二相机的视场的区域中。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，身体部位包括用户的眼睛，并且对身体部位进行识别包括进行虹膜识别。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，身体部位包括用户的面部，并且对身体部位进行识别包括进行面部识别。
在另一示例性实施例中，第一示例性实施例的主题可以可选地包括，第一相机是红绿蓝(RGB)相机，并且第二相机是红外(IR)相机。
在第二示例性实施例中，一种设备包括：显示器；第一彩色相机子系统，能够操作为利用第一彩色相机捕获图像数据，并且将图像数据发送到显示器，该图像数据具有用于在将图像数据发送到显示器时引导用户相对于显示器定位用户身体部位的指示；第二相机，能够操作为捕获身体部位的图像；反馈机构(例如，显示的图形、声音、文本等)，向用户提供反馈，以向用户指示身体部位处于由第二相机进行图像捕获的位置，其中，第二相机能够操作为响应于身体部位处于由设备的第二相机进行身体部位的图像捕获的位置而自动捕获身体部位的图像；以及处理器，使用由第二相机捕获的图像对身体部位进行识别。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，指示包括显示在显示器上的第一图形，该第一图形被映射到第二相机的视场中，并且身体部位在显示器上定位到第一图形中从而能够捕获身体部位的图像。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，反馈包括用第二图形替换第一图形。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，反馈包括改变第一图形的颜色。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，指示包括显示器上的文本和图形之一或两者，以指导用户相对于显示器定位身体部位。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，指示包括使用显示器上的光和音频中的一个或多个来引导用户相对于显示器定位身体部位。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，反馈机构能够操作为检测身体部位是否在显示器中映射到第二相机的视场的区域中。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，身体部位包括用户的眼睛，并且对身体部位进行识别包括进行虹膜识别。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，身体部位包括用户的面部，并且对身体部位进行识别包括进行面部识别。
在另一示例性实施例中，第二示例性实施例的主题可以可选地包括，第一相机是红绿蓝(RGB)相机，并且第二相机是红外(IR)相机。
在第三示例性实施例中，一种具有一个或多个非暂时性计算机可读存储介质的制造产品，该存储介质中存储有指令，该指令在由设备执行时实现如下方法，该方法包括：将用设备的第一相机捕获的图像数据发送到设备的显示器，该图像数据具有用于在将图像数据发送到显示器时引导用户相对于显示器定位用户身体部位的指示；向用户提供反馈以向用户指示身体部位处于适当位置，使得身体部位的图像能够被设备的第二相机捕获；利用第二相机捕获身体部位的图像；以及使用图像对身体部位进行识别。
在另一示例性实施例中，第三示例性实施例的主题可以可选地包括，指示包括显示在显示器上的第一图形，该第一图形被映射到第二相机的视场中，并且身体部位在显示器上定位到第一图形中从而能够捕获身体部位的图像。
在另一示例性实施例中，第三示例性实施例的主题可以可选地包括，反馈包括改变第一图形的颜色或用第二图形替换第一图形。
在另一示例性实施例中，第三示例性实施例的主题可以可选地包括，该方法还包括检测身体部位是否在显示器中映射到第二相机的视场的区域中。
以上详细描述的一些部分是根据对计算机存储器内的数据比特的操作的算法和符号表示来呈现的。这些算法描述和表示是数据处理领域的技术人员用来最有效地将其工作的实质传达给本领域其他技术人员的手段。这里的算法通常被认为是导致期望结果的自相一致的步骤序列。这些步骤是需要物理量的物理操纵的步骤。通常，尽管不是必须的，但是这些量采用能够被存储、传输、组合、比较和以其他方式操纵的电信号或磁信号的形式。有时，主要出于通用的原因，已经证明将这些信号称为比特、值、元素、符号、字符、术语、数字等是方便的。
然而，应该注意，所有这些和类似术语都与适当的物理量相关联，并且仅仅是应用于这些量的方便标签。除非特别声明，否则从以下讨论中显而易见的是，应当理解，在整个说明书中，使用例如“处理”、或“运算”、或“计算”、或“确定”、或“显示”等的术语的讨论涉及计算机系统或类似电子计算设备的动作和处理，其将在计算机系统的寄存器和存储器内表示为物理(电子)量的数据操纵并转换为在计算机系统的存储器或寄存器或其他这样的信息存储、传输或显示设备内类似地表示为物理量的其他数据。
本发明还涉及用于进行本文的操作的装置。该装置可以为所需目的而专门构造，或者其可以包括由存储在计算机中的计算机程序选择性地激活或重新配置的通用计算机。这样的计算机程序可以存储在计算机可读存储介质中，例如但不限于任何类型的盘，包括软盘、光盘、CD-ROM和磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPROM、磁卡或光卡或适用于存储电子指令的任何类型的介质，并且每个介质都耦合到计算机系统总线。
本文呈现的算法和显示并不固有地涉及任何特定的计算机或其他装置。根据本文的教导，各种通用系统可以与程序一起使用，或者可以证明构造更专用的装置以执行所需的方法步骤是方便的。各种这些系统所需的结构将从下面的描述中显而易见。另外，没有参考任何特定的编程语言描述本发明。应当理解，可以使用各种编程语言来实施本文描述的本发明的教导。
机器可读介质包括以机器(例如，计算机)可读的形式存储或发送信息的任何机制。例如，机器可读介质包括只读存储器(ROM)、随机存取存储器(RAM)、磁盘存储介质、光存储介质、闪存设备等。
尽管在阅读了前面的描述之后，本发明的许多改变和修改对于本领域普通技术人员来说无疑将变得显而易见，但是应该理解，通过图示的方式示出和描述的任何特定实施例绝不是意图被视为限制。因此，对各种实施例的细节的参考并不旨在限制权利要求的范围，权利要求本身仅叙述被认为是对本发明而言必不可少的那些特征。
Claims (12)
1.一种用于进行身体部位识别的方法，所述方法包括：
将用设备的第一相机捕获的图像数据发送到所述设备的显示器，其中所述图像数据具有用于在将所述图像数据发送到所述显示器时引导用户相对于所述显示器定位用户身体部位的指示；
向用户提供反馈以向用户指示所述身体部位处于适当位置，所述身体部位的图像能够被所述设备的第二相机捕获；
利用所述第二相机捕获所述身体部位的图像；以及
使用所述图像对所述身体部位进行识别，
其中，所述指示包括显示在所述显示器上的第一图形，所述第一图形被映射到所述第二相机的视场中，并且
其中，所述反馈包括用第二图形替换所述第一图形或者改变所述第一图形的颜色。
2.根据权利要求1所述的方法，其中，所述身体部位在所述显示器上定位到所述第一图形中从而能够捕获所述身体部位的图像。
3.根据权利要求2所述的方法，其中，所述指示包括所述显示器上的文本和图形之一或两者，以指导用户相对于所述显示器定位所述身体部位，或者所述指示包括使用所述显示器上的光和音频中的一个或多个来指导用户相对于所述显示器定位所述身体部位。
4.根据权利要求1所述的方法，还包括：检测所述身体部位是否在所述显示器中映射到所述第二相机的视场的区域中。
5.根据权利要求1所述的方法，其中，所述身体部位包括用户的眼睛，并且对所述身体部位进行识别包括进行虹膜识别。
6.根据权利要求1所述的方法，其中，所述第一相机是红绿蓝(RGB)相机，并且所述第二相机是红外(IR)相机。
7.一种用于进行身体部位识别的设备，所述设备包括：
显示器；
第一彩色相机子系统，能够操作为利用第一彩色相机捕获图像数据，并且将所述图像数据发送到所述显示器，其中所述图像数据具有用于在将所述图像数据发送到所述显示器时引导用户相对于所述显示器定位用户身体部位的指示；
第二相机，能够操作为捕获所述身体部位的图像；
反馈机构，向用户提供反馈，以向用户指示所述身体部位处于由所述第二相机进行图像捕获的位置，其中，所述第二相机能够操作为响应于所述身体部位处于由所述设备的第二相机进行所述身体部位的图像捕获的位置而自动捕获所述身体部位的图像；以及
处理器，使用由所述第二相机捕获的图像对所述身体部位进行识别，
其中，所述指示包括显示在所述显示器上的第一图形，所述第一图形被映射到所述第二相机的视场中，并且
其中，所述反馈包括用第二图形替换所述第一图形或者改变所述第一图形的颜色。
8.根据权利要求7所述的设备，其中，所述身体部位在所述显示器上定位到所述第一图形中从而能够捕获所述身体部位的图像。
9.根据权利要求8所述的设备，其中，所述指示包括所述显示器上的文本和图形之一或两者，以指导用户相对于所述显示器定位所述身体部位，或者所述指示包括使用所述显示器上的光和音频中的一个或多个来指导用户相对于显示器定位所述身体部位。
10.根据权利要求7所述的设备，其中，所述反馈机构能够操作为检测所述身体部位是否在所述显示器中映射到所述第二相机的视场的区域中。
11.根据权利要求7所述的设备，其中，所述身体部位包括用户的眼睛，并且对所述身体部位进行识别包括进行虹膜识别。
12.根据权利要求7所述的设备，其中，所述第一彩色相机是红绿蓝(RGB)相机，并且所述第二相机是红外(IR)相机。
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/CN2016/087422 WO2018000184A1 (en) | 2016-06-28 | 2016-06-28 | Iris or other body part identification on a computing device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109478227A CN109478227A (zh) | 2019-03-15 |
| CN109478227B true CN109478227B (zh) | 2024-01-05 |
Family
ID=60785583
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201680086206.8A Active CN109478227B (zh) | 2016-06-28 | 2016-06-28 | 计算设备上的虹膜或其他身体部位识别 |
Country Status (4)
| Country | Link |
|---|---|
| US (2) | US11232316B2 (zh) |
| CN (1) | CN109478227B (zh) |
| DE (1) | DE112016007018T5 (zh) |
| WO (1) | WO2018000184A1 (zh) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US11232316B2 (en) | 2016-06-28 | 2022-01-25 | Intel Corporation | Iris or other body part identification on a computing device |
| CN107066079A (zh) * | 2016-11-29 | 2017-08-18 | 阿里巴巴集团控股有限公司 | 基于虚拟现实场景的业务实现方法及装置 |
| US10304209B2 (en) | 2017-04-19 | 2019-05-28 | The Nielsen Company (Us), Llc | Methods and systems to increase accuracy of eye tracking |
| US11029756B2 (en) | 2018-01-12 | 2021-06-08 | Intel Corporation | Display with pixel level eye tracking |
| US11379016B2 (en) | 2019-05-23 | 2022-07-05 | Intel Corporation | Methods and apparatus to operate closed-lid portable computers |
| KR20200140609A (ko) * | 2019-06-07 | 2020-12-16 | 삼성전자주식회사 | 폴더블 전자 장치 및 상기 폴더블 전자 장치에서 정보를 표시하는 방법 |
| JP7338696B2 (ja) * | 2019-11-05 | 2023-09-05 | 日本電気株式会社 | 虹彩認証装置及び虹彩認証方法 |
| US11733761B2 (en) | 2019-11-11 | 2023-08-22 | Intel Corporation | Methods and apparatus to manage power and performance of computing devices based on user presence |
| US11809535B2 (en) | 2019-12-23 | 2023-11-07 | Intel Corporation | Systems and methods for multi-modal user device authentication |
| US11360528B2 (en) | 2019-12-27 | 2022-06-14 | Intel Corporation | Apparatus and methods for thermal management of electronic user devices based on user activity |
| CN113925716B (zh) * | 2021-10-22 | 2023-08-04 | 河南省中医院（河南中医药大学第二附属医院） | 中医神经内科用多功能护理架及控制方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102017599A (zh) * | 2008-01-30 | 2011-04-13 | 泰塞拉技术爱尔兰有限公司 | 用于眼睛注视测量的方法和装置 |
| CN102938826A (zh) * | 2011-11-14 | 2013-02-20 | 微软公司 | 使用多个相机照相 |
| CN105389491A (zh) * | 2014-08-28 | 2016-03-09 | 凯文·艾伦·杜西 | 包括路径参数的面部识别认证系统 |
| WO2016060486A1 (en) * | 2014-10-15 | 2016-04-21 | Samsung Electronics Co., Ltd. | User terminal apparatus and iris recognition method thereof |
Family Cites Families (36)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005292542A (ja) * | 2004-04-01 | 2005-10-20 | Matsushita Electric Ind Co Ltd | 目画像撮像装置および携帯端末装置 |
| JP4059224B2 (ja) * | 2004-04-13 | 2008-03-12 | 株式会社デンソー | 運転者の外観認識システム |
| US8531562B2 (en) * | 2004-12-03 | 2013-09-10 | Fluke Corporation | Visible light and IR combined image camera with a laser pointer |
| US9117119B2 (en) * | 2007-09-01 | 2015-08-25 | Eyelock, Inc. | Mobile identity platform |
| US9002073B2 (en) * | 2007-09-01 | 2015-04-07 | Eyelock, Inc. | Mobile identity platform |
| US8594374B1 (en) * | 2011-03-30 | 2013-11-26 | Amazon Technologies, Inc. | Secure device unlock with gaze calibration |
| US9395820B2 (en) | 2011-12-02 | 2016-07-19 | Intel Corporation | Techniques for notebook hinge sensors |
| KR101241625B1 (ko) | 2012-02-28 | 2013-03-11 | 인텔 코오퍼레이션 | 얼굴 인식 환경 통지 방법, 장치, 및 이 방법을 실행하기 위한 컴퓨터 판독 가능한 기록 매체 |
| JP5949319B2 (ja) * | 2012-08-21 | 2016-07-06 | 富士通株式会社 | 視線検出装置及び視線検出方法 |
| US9612656B2 (en) * | 2012-11-27 | 2017-04-04 | Facebook, Inc. | Systems and methods of eye tracking control on mobile device |
| KR102037417B1 (ko) * | 2013-08-13 | 2019-10-28 | 삼성전자주식회사 | 홍채 영상 촬영 방법, 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 홍채 영상 촬영 장치 |
| KR102270674B1 (ko) * | 2013-09-30 | 2021-07-01 | 삼성전자주식회사 | 생체인식 카메라 |
| CN104658073A (zh) * | 2013-11-20 | 2015-05-27 | 鸿富锦精密工业(武汉)有限公司 | 虹膜钥匙及利用该虹膜钥匙对电子装置解锁的方法 |
| US10620457B2 (en) | 2013-12-17 | 2020-04-14 | Intel Corporation | Controlling vision correction using eye tracking and depth detection |
| CN104751114B (zh) * | 2013-12-27 | 2018-09-18 | 由田新技股份有限公司 | 通过眼部开闭状态控制的验证系统及其手持式控制装置 |
| WO2015113479A1 (zh) * | 2014-01-28 | 2015-08-06 | 北京中科虹霸科技有限公司 | 一种具有人机交互机制的移动终端虹膜识别装置和方法 |
| KR102206877B1 (ko) * | 2014-02-21 | 2021-01-26 | 삼성전자주식회사 | 생체 정보디스플레이 방법 및 장치 |
| US9344673B1 (en) * | 2014-03-14 | 2016-05-17 | Brian K. Buchheit | Enhancing a camera oriented user interface via an eye focus guide |
| KR102237479B1 (ko) * | 2014-06-03 | 2021-04-07 | (주)아이리스아이디 | 홍채 인식 단말기 및 방법 |
| KR102215077B1 (ko) * | 2014-08-04 | 2021-02-10 | 삼성전자주식회사 | 홍채인식장치 및 홍채인식방법 |
| KR102255351B1 (ko) * | 2014-09-11 | 2021-05-24 | 삼성전자주식회사 | 홍채 인식 방법 및 장치 |
| KR102287751B1 (ko) * | 2014-09-25 | 2021-08-09 | 삼성전자 주식회사 | 전자 장치의 홍채 인식 방법 및 장치 |
| US9767358B2 (en) * | 2014-10-22 | 2017-09-19 | Veridium Ip Limited | Systems and methods for performing iris identification and verification using mobile devices |
| US20160125239A1 (en) * | 2014-10-30 | 2016-05-05 | Delta ID Inc. | Systems And Methods For Secure Iris Imaging |
| KR20160050755A (ko) * | 2014-10-31 | 2016-05-11 | 삼성전자주식회사 | 전자 장치 및 그의 홍채 인식 방법 |
| US9936195B2 (en) | 2014-11-06 | 2018-04-03 | Intel Corporation | Calibration for eye tracking systems |
| WO2016085212A1 (ko) * | 2014-11-24 | 2016-06-02 | 삼성전자 주식회사 | 디스플레이를 제어하는 전자 장치 및 방법 |
| KR20160072682A (ko) * | 2014-12-15 | 2016-06-23 | 삼성전자주식회사 | 생체 정보를 이용한 인증 방법 및 이를 위한 전자 장치 |
| KR102277212B1 (ko) * | 2015-01-23 | 2021-07-15 | 삼성전자주식회사 | 디스플레이 정보를 이용한 홍채 인증 방법 및 장치 |
| US9961258B2 (en) * | 2015-02-23 | 2018-05-01 | Facebook, Inc. | Illumination system synchronized with image sensor |
| US20160283789A1 (en) * | 2015-03-25 | 2016-09-29 | Motorola Mobility Llc | Power-saving illumination for iris authentication |
| WO2016190484A1 (ko) * | 2015-05-26 | 2016-12-01 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
| KR102329821B1 (ko) * | 2015-06-04 | 2021-11-23 | 삼성전자주식회사 | 개인 인증 전자 장치 및 방법 |
| US10068078B2 (en) * | 2015-10-15 | 2018-09-04 | Microsoft Technology Licensing, Llc | Electronic devices with improved iris recognition and methods thereof |
| US10308371B1 (en) * | 2016-03-18 | 2019-06-04 | Rockwell Collins, Inc. | Spatially modulated and temporally sequenced multi-stream vision system |
| US11232316B2 (en) | 2016-06-28 | 2022-01-25 | Intel Corporation | Iris or other body part identification on a computing device |
-
2016
- 2016-06-28 US US16/306,896 patent/US11232316B2/en active Active
- 2016-06-28 DE DE112016007018.7T patent/DE112016007018T5/de active Pending
- 2016-06-28 WO PCT/CN2016/087422 patent/WO2018000184A1/en active Application Filing
- 2016-06-28 CN CN201680086206.8A patent/CN109478227B/zh active Active
-
2021
- 2021-11-30 US US17/538,804 patent/US11676424B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102017599A (zh) * | 2008-01-30 | 2011-04-13 | 泰塞拉技术爱尔兰有限公司 | 用于眼睛注视测量的方法和装置 |
| CN102938826A (zh) * | 2011-11-14 | 2013-02-20 | 微软公司 | 使用多个相机照相 |
| CN105389491A (zh) * | 2014-08-28 | 2016-03-09 | 凯文·艾伦·杜西 | 包括路径参数的面部识别认证系统 |
| WO2016060486A1 (en) * | 2014-10-15 | 2016-04-21 | Samsung Electronics Co., Ltd. | User terminal apparatus and iris recognition method thereof |
| CN105528573A (zh) * | 2014-10-15 | 2016-04-27 | 三星电子株式会社 | 用户终端设备及其虹膜识别方法 |
Non-Patent Citations (2)
| Title |
|---|
| 基于虹膜识别技术的便携式身份认证系统;汪林峰等;《光电子.激光》;20011025(第10期);全文 * |
| 融合视频监控的远程多生物特征识别系统;罗志成;《中国安防》;20091201(第12期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| US11676424B2 (en) | 2023-06-13 |
| US20190236390A1 (en) | 2019-08-01 |
| US20220083796A1 (en) | 2022-03-17 |
| US11232316B2 (en) | 2022-01-25 |
| WO2018000184A1 (en) | 2018-01-04 |
| CN109478227A (zh) | 2019-03-15 |
| DE112016007018T5 (de) | 2019-06-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109478227B (zh) | 计算设备上的虹膜或其他身体部位识别 | |
| CN107818305B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
| US9813907B2 (en) | Sensor-assisted user authentication | |
| US11050915B2 (en) | Method for zooming by switching between dual cameras, mobile terminal, and storage apparatus | |
| US9807300B2 (en) | Display apparatus for generating a background image and control method thereof | |
| US8983235B2 (en) | Pupil detection device and pupil detection method | |
| US20170094132A1 (en) | Image capture apparatus, determination method, and storage medium determining status of major object based on information of optical aberration | |
| EP3544286B1 (en) | Focusing method, device and storage medium | |
| CN108605087B (zh) | 终端的拍照方法、拍照装置和终端 | |
| US9854161B2 (en) | Photographing device and method of controlling the same | |
| US8965105B2 (en) | Image processing device and method | |
| CN109002796B (zh) | 一种图像采集方法、装置和系统以及电子设备 | |
| EP4156082A1 (en) | Image transformation method and apparatus | |
| US10404912B2 (en) | Image capturing apparatus, image processing apparatus, image capturing system, image processing method, and storage medium | |
| KR20110089655A (ko) | 촬영 구도를 유도하는 디지털 영상 촬영 장치 및 방법 | |
| KR20170048555A (ko) | 홍채 이미지 획득 방법 및 장치, 및 홍채 인식 장치 | |
| CN107977636B (zh) | 人脸检测方法及装置、终端、存储介质 | |
| US20240078700A1 (en) | Collaborative tracking | |
| US10990802B2 (en) | Imaging apparatus providing out focusing and method for controlling the same | |
| WO2022082554A1 (en) | Mechanism for improving image capture operations | |
| JP2020067534A (ja) | 撮像装置 | |
| US20220392256A1 (en) | Authentication device, registration device, authentication method, registration method, and storage medium | |
| WO2024118233A1 (en) | Dynamic camera selection and switching for multi-camera pose estimation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |