CN112106046A - 用于执行生物特征认证的电子设备及其操作方法 - Google Patents

用于执行生物特征认证的电子设备及其操作方法 Download PDF

Info

Publication number
CN112106046A
CN112106046A CN201980025835.3A CN201980025835A CN112106046A CN 112106046 A CN112106046 A CN 112106046A CN 201980025835 A CN201980025835 A CN 201980025835A CN 112106046 A CN112106046 A CN 112106046A
Authority
CN
China
Prior art keywords
electronic device
image
display
information
biometric information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980025835.3A
Other languages
English (en)
Inventor
李在庸
朴大熙
宋相坤
李艺娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2019/005802 external-priority patent/WO2019221494A1/en
Publication of CN112106046A publication Critical patent/CN112106046A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/67—Static or dynamic means for assisting the user to position a body part for biometric acquisition by interactive indications to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Ophthalmology & Optometry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Geometry (AREA)
  • Collating Specific Patterns (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

根据实施例，一种电子设备包括：相机模块，包括相机；传感器模块，包括感测电路；显示器；存储器；以及处理器，被配置为：控制存储器存储注册的生物特征信息，使用相机模块获得至少一个图像，使用传感器模块获得生物特征信息，控制显示器显示通过对至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象，并且控制显示器将第一对象与基于至少一个图像中包括的第三对象的位置、形状或尺寸中的至少一个的用于改变姿势的信息一起显示，直到获得的生物特征信息和注册的生物特征信息满足指定条件为止。

Description

用于执行生物特征认证的电子设备及其操作方法
技术领域
本公开总体上涉及用于执行生物特征认证的电子设备及其操作方法。
背景技术
最近，使用便携式电子设备的生物特征认证技术日益普及。智能电话或其它电子设备可以通过各种生物特征认证方案(例如虹膜或面部识别)来执行认证。电子设备可以经由生物特征认证传感器获得生物特征信息，并以确定所获得的生物特征信息是否与所存储的信息匹配的方式执行认证。因此，用户需要将用户的身体部位(例如，眼睛或面部)定位到传感器能够获得生物特征信息的位置。
电子设备可以显示指示获得生物特征信息的位置的向导线和由其前相机捕获的图像，以使得用户能够将其身体部位位于用于获得生物特征信息的准确位置。用户可以在显示器上识别用户的捕获图像，从而将用户的身体部位重新定位到可以获得生物特征信息的位置。
发明内容
【技术问题】
如上所述，当电子设备在显示器上显示捕获的图像以进行生物特征认证时，可能会出现安全问题。例如，如果电子设备中恰好安装了黑客程序，则会存在生物特征信息(例如，虹膜或面部信息)泄漏的可能性。应该防止用户独有的虹膜或面部信息泄漏，但是当在显示器上显示捕获的身体部位的图像时，可能会泄漏该信息。此外，用户可能不愿意在公共场所暴露其某个身体部位。
以上信息仅作为背景信息呈现，以帮助理解本公开。关于以上内容中的任何内容是否可以用作关于本公开的现有技术，没有进行确定，也没有进行断言。
【问题的解决方案】
根据各种示例实施例，可以提供一种能够将捕获的用户图像转换为对象并显示该对象的电子设备及其操作方法。
根据示例实施例，一种电子设备包括：相机模块，包括相机；传感器模块，包括感测电路；显示器；存储器；处理器，被配置为：控制存储器存储注册的生物特征信息，使用相机模块获得至少一个图像，使用传感器模块获得生物特征信息，控制显示器显示通过对至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象，并且控制显示器将第一对象与用于基于至少一个图像中包括的第三对象的位置、形状或尺寸中的至少一个改变姿势的信息一起显示(如本文中所使用的，术语“一起”可以指例如但不限于在同一屏幕上和/或同时)，直到获得的生物特征信息和注册的生物特征信息满足指定条件为止。
根据示例实施例，一种操作包括相机模块、传感器模块和显示器在内的电子设备的方法包括：使用相机模块获得至少一个图像；使用传感器模块获得生物特征信息；经由显示器显示通过对至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象；并且经由显示器将第一对象与基于至少一个图像中包括的第三对象的位置、形状或尺寸中的至少一个的用于改变姿势的信息一显示，直到获得的生物特征信息和注册的生物特征信息满足指定条件为止。
根据示例实施例，一种电子设备包括：相机模块，包括相机；传感器模块，包括感测电路；显示器；存储器；以及处理器，被配置为：控制存储器存储注册的生物特征信息，使用相机模块获得至少一个图像，使用传感器模块获得生物特征信息，控制显示器显示通过对至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象，控制显示器将第一对象与指示用于获得生物特征信息的区域的向导一起显示，并基于识别出获得的生物特征信息和注册的生物特征信息满足指定条件而识别认证成功。
根据以下具体实施方式，本公开的其它方面、优点和显著特征对于本领域技术人员将变得显而易见，以下具体实施方式结合附图公开了本公开的示例性实施例。
【发明的有利效果】
从前面的描述显而易见，根据各个实施例，可以提供一种能够将捕获的用户图像转换为对象并显示该对象的电子设备及其操作方法。因此，可以防止和/或减少诸如虹膜信息或面部信息之类的生物特征信息的泄漏。也可以满足用户防止其某个身体部位暴露在公共场所的期望。
附图说明
结合附图，从下面的具体实施方式中，本公开的上述和其它方面、特征和伴随的优点将变得更加明显和容易理解，其中：
图1是示出根据实施例的示例电子设备的框图；
图2是示出根据实施例的操作电子设备的示例方法的流程图；
图3A和图3B是示出根据实施例的操作电子设备的示例方法的流程图；
图4是示出根据实施例的示例电子设备的图；
图5A和图5B是示出根据实施例的经由相机模块获得的示例图像和在显示器上显示的示例屏幕的图；
图6A和图6B是示出根据实施例的由电子设备提供的示例动画向导的图；
图6C是示出根据实施例的示例向导的图；
图7是示出根据实施例的操作电子设备的示例方法的流程图；
图8是示出根据实施例的由电子设备显示的示例向导的图；
图9是示出根据实施例的操作电子设备的示例方法的流程图；
图10是示出根据实施例的由电子设备显示的示例屏幕的图；
图11是示出根据实施例的操作电子设备的示例方法的流程图；
图12是示出根据实施例的操作电子设备的示例方法的流程图；
图13是示出根据实施例的操作电子设备的示例方法的流程图；
图14是示出根据实施例的电子设备的示例显示屏幕的图；
图15是示出根据实施例的操作电子设备的示例方法的流程图；
图16是示出根据实施例的示例电子设备的图；
图17是示出根据实施例的操作电子设备的示例方法的流程图；
图18是示出根据实施例的示例电子设备的图；
图19是示出根据实施例的操作电子设备的示例方法的流程图；
图20A和图20B是示出根据实施例的示例电子设备的图；
图21是示出根据实施例的操作电子设备的示例方法的流程图；
图22是示出根据实施例的示例电子设备的图；
图23是示出根据实施例的操作电子设备的示例方法的流程图；
图24A和图24B是示出根据实施例的示例对象的图；
图25是示出根据实施例的操作电子设备的示例方法的流程图；
图26是示出根据实施例的示例电子设备的图；以及
图27是示出根据实施例的操作电子设备的示例方法的流程图。
在所有附图中，相似的附图标记将被理解为指代相似的部件、组件和结构。
具体实施方式
根据各种示例实施例的电子设备可以是各种类型的电子设备中的一个。应当理解，本公开的各种示例实施例及其中使用的术语并不旨在将本文阐述的技术限于特定实施例，并且其各种变化、等效物和/或替换也落入本公开的范围内。在整个本公开和附图中，相同或相似的附图标记可用于指代相同或相似的元件。
应当理解，单数形式的“一”、“一个”和“该”包括复数形式，除非上下文另有明确规定。如本文所使用，术语“A或B”、“A和/或B中的至少一个”、“A、B或C”或“A、B和/或C中的至少一个”可以包括列举项目的所有可能组合。
如本文中所使用，术语“第一”或“第一个”以及“第二”或“第二个”可以用来指代对应的组件，而与重要性和/或顺序无关，并且可以用于将组件与另一个组件区分开而无需限制组件。将理解，当元件(例如，第一元件)被称为(操作地或通信地)“与另一元件(例如，第二元件)耦合/耦合到其”或“与另一元件(例如，第二元件)连接/连接到其”时，它可以直接或经由第三元件与另一元件耦合或连接。
如本文中所使用，术语“模块”可以包括以硬件、软件、固件或其任何组合配置的单元，并且可以与其它术语互换使用，例如“逻辑”、“逻辑块”、“部分”或“电路”。模块可以是单个整体部分，也可以是用于执行一个或多个功能的最小单元或部分。例如，模块可以被配置在专用集成电路(ASIC)中。
图1是示出根据本公开实施例的示例电子设备的框图。
参考图1，根据实施例，电子设备101可以包括处理器(例如，包括处理电路)120、存储器130、显示器160、传感器模块(例如，包括至少一个传感器和/或)感测电路)170、相机模块(例如，包括相机)180和/或通信模块(例如，包括通信电路)190中的至少一个。
处理器120可以包括各种处理电路，并且执行例如软件(例如，程序)来控制与处理器120耦合的电子设备101的至少一个其它组件(例如，硬件或软件组件)，并可以执行各种数据处理或计算。根据示例实施例，作为数据处理或计算的至少一部分，处理器120可以将从另一组件(例如，传感器模块170或通信模块190或传感器模块170)接收的命令或数据加载到易失性存储器上，处理存储在易失性存储器中的命令或数据，并将所得数据存储在非易失性存储器中。根据实施例，处理器120可以包括各种处理电路，包括例如主处理器(例如，中央处理单元(CPU)、应用处理器(AP)等)以及辅助处理器(例如，图形处理单元(GPU)、图像信号处理器(ISP)、传感器中枢处理器、通信处理器(CP)等)可独立于主处理器或与主处理器结合操作。辅助处理器可以适合于比主处理器消耗更少的功率，或者执行指定功能。辅助处理器可被实现为与主处理器分离或作为主处理器的一部分。然而，处理器不限于前述示例。
存储器130可以存储由电子设备101的至少一个组件(例如，处理器120或传感器模块170)使用的各种数据。各种数据可以包括例如但不限于软件(例如，程序)、输入数据、输出数据等，以用于与其相关的命令。存储器130可以包括例如易失性存储器、非易失性存储器等。
根据实施例，存储器130可以存储用于执行生物特征认证过程的命令(或程序或应用)。存储器130可以存储用于生物特征认证的安全性信息(例如，虹膜信息或面部信息)。例如，用户可以执行用于注册生物特征信息的操作，该操作稍后将用于生物特征认证。电子设备101可以提供用户界面以通过传感器模块170获得生物特征信息并获得初始生物特征信息。电子设备101可以将生物特征信息(或编码的生物特征信息)存储在存储器130中。所存储的生物特征信息可以稍后与经由传感器模块170获得的生物特征信息进行比较。存储器130可以包括能够转换捕获的图像的转换信息(或转换模型)。例如，存储器130可以存储例如能够从捕获的图像提取各种对象或特征点的程序、识别程序以及可以替换所识别的对象的视觉元素。
处理器120可以控制电子设备101的显示器160，以使用存储在存储器130中的信息和经由相机模块180获得的图像在显示器160上显示经图像转换后的对象(例如，颜文字或形象)。
显示器160可以在视觉上向电子设备101的外部(例如，用户)提供信息。显示器160可以包括例如但不限于：液晶显示器(LCD)面板、全息图设备、投影仪等，以及控制电路以控制显示器、全息图设备、投影仪等中的对应一个。根据实施例，显示器160可以包括适合于检测触摸的触摸电路，或者适合于测量由触摸引起的力的强度的传感器电路(例如，压力传感器)。显示器160可以显示通过对经由相机模块180获得的至少一个图像中包括的至少一个对象进行转换而获得的对象。显示器160可以显示信息(例如，文本、图像或动画)以将用户的作为认证目标的身体部位引导到指定位置。
传感器模块170可以包括各种感测电路和/或传感器并获得生物特征信息。例如，传感器模块170可以包括红外(IR)发射器和IR接收器。IR发射器可以包括用于将IR射线辐射到外部的各种电路。IR接收器可以包括用于接收由位于外部的对象反射的IR射线的各种电路。
例如，当电子设备101采用虹膜识别时，电子设备101可以经由IR发射器辐射IR射线，并经由IR接收器接收由用户的身体部位(例如眼睛)反射的IR射线。因此，电子设备101可以获得用户的眼睛的IR图像。例如，当电子设备101采用面部识别时，电子设备101可以经由IR发射器辐射IR射线，并经由IR接收器接收由用户的身体部位(例如面部)反射的IR射线。因此，电子设备101可以获得用户面部的IR图像。
相机模块180可以包括相机并且捕获静止图像和/或运动图像。根据实施例，相机模块180可以包括例如但不限于一个或多个镜头、图像传感器、图像信号处理器、闪光灯等。相机模块180可以设置在包括开口的表面上，显示器160通过该开口暴露在电子设备101的壳体的多个表面中。因此，相机模块180可以捕获注视显示器160的用户。
通信模块190可以包括各种通信电路，并且在电子设备101与外部电子设备之间建立直接(例如，有线)通信信道和/或无线通信信道，或者支持通过所建立的通信信道的通信。通信模块190可以包括一个或多个通信处理器，其可以独立于处理器120(例如，应用处理器(AP))进行操作，并且可以支持直接(例如，有线)通信和/或无线通信。根据实施例，通信模块190可以包括各种模块，每个模块包括各种通信电路，例如但不限于：无线通信模块(例如，蜂窝通信模块、短距离无线通信模块、全球导航卫星系统(GNSS)通信模块等)、有线通信模块(例如，局域网(LAN)通信模块、电力线通信(PLC)模块等)等。对应的通信模块可以经由第一网络(例如，诸如BluetoothTM的短距离通信网络、无线保真(Wi-Fi)直连、红外数据协会(IrDA)等)、第二网络(例如，远距离通信网络，诸如蜂窝网络、互联网、计算机网络(例如，LAN或广域网(WAN)等)与外部电子设备进行通信。这些各种类型的通信模块可以被实现为单个组件(例如，单个芯片)，或者可以被实现为彼此分离的多个组件(例如，多个芯片)。无线通信模块可以使用存储在用户识别模块中的用户信息(例如，国际移动用户身份(IMSI))在诸如第一网络或第二网络之类的通信网络中识别和认证电子设备101。通信模块190可以从外部电子设备接收注册的生物特征信息。通信模块190可以从外部电子设备接收关于转换对象的信息(例如，关于注册的颜文字的信息)。在识别出生物特征认证成功之后，通信模块190可以将指示认证成功的信息发送到外部电子设备。通信模块190可以将生物特征信息或加密的生物特征信息发送到外部电子设备。
根据示例实施例，处理器120可以被配置为控制电子设备使用相机模块180获得至少一个图像，经由传感器模块170获得生物特征信息，经由显示器160显示通过基于至少一个图像对该至少一个图像中包括的对象的至少一部分进行转换而生成的转换对象，并且经由显示器160显示转换对象以及基于至少一个图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息(例如，将转换对象与该信息一起显示)，直到获得的生物特征信息和注册的生物特征信息满足指定条件为止。在本公开中，术语“以及”和“一起”可以互换使用，并且可以指例如但不限于在同一屏幕上和/或同时显示。
根据示例实施例，处理器120可以被配置为控制传感器模块以辐射红外(IR)射线并接收IR射线的反射，基于IR反射识别用户眼睛的IR图像，从IR图像中识别虹膜信息，并且在显示器160上显示用于改变姿势的信息，直到识别的虹膜信息对应于存储在存储器130中的虹膜信息为止。
根据示例实施例，处理器120可以被配置为控制传感器模块170以辐射红外(IR)射线并接收IR射线的反射，基于IR反射识别用户面部的IR图像，从IR图像识别面部信息，并在显示器上显示用于改变姿势的信息，直到识别的面部信息对应于存储在存储器中的面部信息为止。
根据示例实施例，处理器120可以被配置为经由显示器160显示用于改变姿势的信息，该信息是基于用来识别的目标对象的位置与指定参考位置之间的差异、用来识别的目标对象的形状与指定参考形状之间的差异，或用来识别的目标对象的尺寸与指定参考尺寸之间的差异中的至少一个所识别的。
根据示例实施例，处理器120可以被配置为经由显示器160显示与用来识别的目标对象的位置与指定参考位置之间的差异、用来识别的目标对象的形状与指定参考形状之间的差异、或用来识别的目标对象的尺寸与指定参考尺寸之间的差异中的至少一个相对应地设置的文本、图像或动画集中的至少一个。
根据示例实施例，处理器120可以被配置为控制显示器在与指定参考位置相对应的位置中显示转换对象以及基于指定参考形状或指定参考尺寸中的至少一个的向导。
根据示例实施例，处理器120可以被配置为基于至少一个图像中包括的用来识别的目标对象的位置、尺寸或形状中的至少一个来确定转换对象的位置、尺寸或形状中的至少一个。
根据示例实施例，处理器120可以被配置为使用与至少一个图像中包括的至少一个对象相对应的纹理来生成转换对象，或者使用存储在存储器130中的纹理来生成转换对象。
根据示例实施例，处理器120可以被配置为在识别出至少一个图像的第一图像中包括的用来识别的第一目标对象满足第一条件时，经由显示器160显示用于改变姿势的信息以及通过对第一图像中包括的对象的至少一部分进行转换而获得的第一转换对象，并且在识别出第一图像之后获得的第二图像中包括的用来识别的第二目标对象满足第二条件时，经由显示器160将用于改变姿势的第二信息与通过对第二图像中包括的对象的至少一部分进行转换而获得的第二转换对象一起显示，该第二信息与用于改变姿势的第一信息不同。
根据示例实施例，处理器120可以被配置为控制电子设备使用相机模块180获得至少一个图像，以控制电子设备通过传感器模块170获得生物特征信息，经由显示器160显示通过基于至少一个图像对至少一个图像中包括的对象的至少一部分进行转换而生成的转换对象，在显示器160将该转换对象与对用于获得生物特征信息的区域加以指示的向导一起显示，并在识别出获得的生物特征信息和注册的生物特征信息满足指定条件后，识别出认证成功。
根据示例实施例，处理器120可以被配置为基于至少一个图像中包括的用来识别的目标对象的位置、尺寸或形状中的至少一个来确定转换对象的位置、尺寸或形状中的至少一个。
根据示例实施例，处理器120可以被配置为基于分析至少一个图像的结果来识别是否存在干扰了用来识别的目标对象的检测的对象，并且提供转换对象以及请求改变干扰了用来识别的目标对象的检测的对象的位置的信息。
根据示例实施例，处理器120可以被配置为识别传感器模块170上的污点，并且提供转换对象以及请求去除污点的信息。
根据示例实施例，处理器120可以被配置为基于所获得的生物特征信息和注册的生物特征信息在预设时间内不满足指定条件来识别认证失败，并且经由显示器160显示对应于认证失败的颜文字。
根据示例实施例，存储器130可以存储模板图像。处理器120可以被配置为基于至少一个图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个来识别模板图像的尺寸，并且将尺寸被识别的模板图像显示为转换对象。
根据示例实施例，存储器130可以存储模板图像。处理器120可以被配置为基于至少一个图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个来调节模板图像中的子对象的位置、形状或尺寸中的至少一个，并将调节后的模板图像显示为转换对象。
根据示例实施例，存储器130可以存储关于指定动作的信息。处理器120可以被配置为基于至少一个图像来识别关于用户动作的信息，并且基于所获得的生物特征信息和注册的生物特征信息满足指定条件、以及所识别的用户动作的信息对应于关于指定动作的信息，确定认证成功。
根据示例实施例，存储器130可以存储关于指定动作的信息。处理器120可以被配置为基于来自传感器模块170的数据来识别关于用户动作的信息，并且基于获得的生物特征信息和注册的生物特征信息满足指定条件以及所识别的用户动作的信息对应于关于指定动作的信息，确定认证证成功。
图2是示出根据实施例的操作电子设备的示例方法的流程图。
根据实施例，在操作201中，电子设备101可以检测启动生物特征信息识别的事件。例如，电子设备101可以应用户的请求或者当在预定时间内没有检测到用户交互时进入睡眠状态(或者休眠状态)。此后，电子设备101可以检测事件的发生以进入唤醒状态。在这种情况下，电子设备101可以被配置为显示在进入睡眠状态之前显示的屏幕，或者在成功执行用户认证之后显示的菜单屏幕。电子设备101可以检测发生了用于进入唤醒状态的事件作为启动生物特征信息识别的事件。根据实施例，电子设备101可以在运行与安全有关的应用(例如，金融应用、电子支付应用或运行需要登录的网站的网络浏览器应用)的同时从应用获得启动生物特征信息识别的事件。可以在执行电子设备101的安全性要求的操作之前检测启动生物特征信息识别的事件。
如本文中所使用的，“电子设备101执行特定处理”可以指例如电子设备101的处理器120执行特定处理或控制其它硬件组件执行特定处理的情况。例如，“电子设备101执行特定处理”可以指特定硬件组件执行特定处理而不受处理器120控制的情况。例如，“电子设备101执行特定处理”可以指例如在执行了存储在电子设备101的存储器130中的至少一个命令时，处理器120执行特定处理或控制其它硬件组件执行特定处理的情况。
在操作203中，电子设备101可以激活相机模块180以获得至少一个图像。在操作205中，电子设备101可以激活用于识别生物特征信息的传感器模块170并获得生物特征信息。根据实施例，电子设备101可以例如同时执行经由相机模块180获得至少一个图像和经由传感器模块170获得生物特征信息。
在操作207中，电子设备101可以在显示器160上显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。电子设备101可以在显示器160上显示转换对象，该转换对象是通过基于各种转换方案对图像中包括的对象的至少一部分进行转换而生成的。例如，电子设备101可以获得通过对获得的图像中包括的面部区域进行转换而得到的颜文字并显示该颜文字。例如，电子设备101可以提取获得的图像中包括的面部区域，在这种情况下，可以使用各种面部检测方案(例如，神经网络、adaboost、支持向量机方案等，但不限于此)。电子设备101可以将捕获的2D图像的面部图像纹理(例如，眼睛纹理、鼻子纹理、嘴部纹理等)放置在准备的3D模板上。在该示例中，眼睛纹理、鼻子纹理、嘴部纹理等可以是图形处理的纹理，以允许将所获得的图像中的眼睛区域、鼻子区域或嘴部区域表示为图形(或动画对象)。眼睛纹理可以不包括虹膜信息。电子设备101还可以使用准备好的关于其它区域(例如，耳朵、头发、头后部)的纹理信息。电子设备101可以基于用户的交互来修改形成纹理的3D模板，从而生成3D颜文字。如上所述，3D颜文字中包括的眼睛纹理可以不包含虹膜信息。电子设备101可以以各种方式从图像生成模仿用户的颜文字或形象。本领域普通技术人员将容易理解，生成颜文字或形象不限于特定方法或以上公开的方法。作为另一示例，电子设备101可以基于所获得的图像中的至少一个对象(例如，眼睛对象)的位置，用表示身体部位的任何视觉元素进行替换，并进行显示。在这种情况下，可以用准备好的形状来表示转换对象，而不是用模仿用户的形状来表示。即使在这种情况下，由于使用图像中对象的属性(例如，位置、尺寸或形状中的至少一个)来确定属性(例如，位置、尺寸或形状中的至少一个)，所以视觉元素也可以称为转换对象。
在操作209中，电子设备101可以提供转换对象以及基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，直到生物特征信息或图像中包括的用来识别的目标对象中的至少一个满足指定条件为止。根据实施例，电子设备101可以提供用于改变姿势的信息，直到获得的生物特征信息和预先注册的生物特征信息满足指定条件为止。例如，电子设备101可以提供转换对象以及基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，直到获得的生物特征信息与预先注册的生物特征信息之间的差异在阈值以下为止。换句话说，电子设备101可以提供用于改变姿势的信息，直到认证成功为止。电子设备101可以基于所获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个与图像中用来识别的目标对象的指定位置、指定形状或指定尺寸中的至少一个之间的差异来提供用于改变姿势的识别信息。例如，当图像中的眼睛的位置被识别为低于预定位置时，电子设备101可以提供文本、图像或动画中的至少一个，以使得用户将其头部向上倾斜一点。例如，当图像中的眼睛的尺寸被识别为小于预定尺寸时，电子设备101可以提供文本、图像或动画中的至少一个，以使得用户将其面部转向相机模块180。例如，当图像中的眼睛的形状被识别为与预定形状不同时，电子设备101可以提供文本、图像或动画中的至少一个，以使得用户调节其面部所面向的方向。根据实施例，电子设备101可以基于所获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个与图像中用来识别的目标对象的指定位置、指定形状或指定尺寸中的至少一个之间的差异来提供用于改变姿势的识别信息，直到图像中包括的用来识别的目标对象中的至少一个满足指定条件为止。
图3A和图3B是示出根据实施例的用于操作电子设备的示例方法的流程图。下面参考图4更详细地描述图3A的示例实施例。图4是示出根据本公开实施例的电子设备的示例配置的图。
参考图3A，在操作301中，电子设备101可以检测启动虹膜信息识别的事件。在操作303中，电子设备101可以激活相机模块180以获得至少一个图像。在操作305中，电子设备101可以激活传感器模块170中包括的红外(IR)传感器模块以辐射IR射线并获得关于反射的IR射线的信息。
在操作307中，电子设备101可以显示通过基于获得的图像来对图像中包括的对象的至少一部分进行转换而生成的转换对象。例如，如图4中所示，电子设备101可以显示通过对图像中包括的面部进行转换而生成的形象403。例如，电子设备101可以提取经由相机模块180获得的图像的面部区域，并从所提取的面部区域中识别多个特征点。电子设备101可以至少基于所识别的特征点的位置来生成形象403。电子设备101可以基于图像中面部的位置来确定形象403的显示位置。
在操作309中，电子设备101可以从获得的图像中识别眼睛的位置、形状或尺寸中的至少一个。在操作311中，电子设备101可以提供转换对象以及基于与获得的图像中包括的眼睛相关信息所识别的用于改变姿势的信息，直到所识别的眼睛相关信息或生物特征信息中的至少一个满足指定条件为止。例如，电子设备101可以存储眼睛相关信息和用于改变姿势的信息之间的关系信息，如表1所示。
【表1】
Figure BDA0002723744310000131
Figure BDA0002723744310000141
Figure BDA0002723744310000151
表1中的“-”可以表示可忽略的信息。例如，电子设备101可以通过分析图像的一部分来识别左瞳孔和右瞳孔的位置(例如，x坐标和v坐标)、半径、宽度和高度。此外，电子设备101可以存储左瞳孔和右瞳孔的指定参考半径和指定参考位置(例如，x坐标和v坐标)。例如，如在第一情况下，当识别的左瞳孔的x坐标小于指定参考x坐标，并且识别的右瞳孔的x坐标小于指定参考x坐标时，电子设备101可以将眼睛位置分析的结果识别为“向左偏”。与此对应，电子设备101可以显示“颜文字”平行向右移动的动画或文本“请向右移”。例如，如在第五种情况中，当识别的左瞳孔的v坐标大于指定参考v坐标，并且识别的右瞳孔的v坐标大于指定参考v坐标时，电子设备101可以将眼睛位置分析的结果识别为“向上偏”。电子设备101可以显示“颜文字”平行向下移动的动画或文本“请向下移”。例如，如在第八种情况中，当识别的左瞳孔的x坐标小于指定参考x坐标，识别的左瞳孔的半径大于参考半径，识别的右瞳孔的x坐标小于指定参考x坐标，并且识别的右瞳孔的半径大于参考半径时，电子设备101可以将眼睛位置分析的结果识别为“位于近处”。电子设备101可以显示“颜文字”逐渐缩小的动画或文本“请离远一点”。例如，如在第九种情况中，当识别的左瞳孔的宽度小于参考半径(或捕获的瞳孔的半径)，并且识别的右瞳孔的宽度大于参考半径(或捕获的瞳孔的半径)时，电子设备101可以将眼睛位置分析的结果识别为“脸向左转”。电子设备101可以显示“颜文字向右转”的动画或显示文本“请将头向右转”。例如，如在第十一种情况中，当识别的左瞳孔的高度小于参考半径(或捕获的瞳孔的半径)，并且识别的右瞳孔的高度小于参考半径(或捕获的瞳孔的半径)时，电子设备101可以将眼睛位置分析的结果识别为“脸向上转”。电子设备101可以显示“颜文字向下转”的动画或显示文本“请收下巴”。表1中所示的参考位置或参考半径可以根据例如设备内部的相机模块180和传感器模块170的位置以及相机模块180和电子设备101的规格来实验地识别和确定。因此，例如，如图4中所示，电子设备101可以显示文本向导线401、动画向导线402、形象403和指示参考位置的向导线404。参考位置可以是与可获得生物特征信息的位置相对应地设置的区域，并且可以例如但不限于通过例如传感器模块170和相机模块180的相对位置和角度来实验地确定或设置。当捕获的图像中的面部对象随着用户移动而改变其位置和面部表情时，电子设备101可以相应地改变并显示形象403。此外，即使当关于眼睛的信息改变时，电子设备101也可以实时地改变并显示向导信息。
根据实施例，电子设备101可以分析图像以识别用户是否戴着墨镜或带图案的隐形眼镜。当用户戴墨镜或带图案的隐形眼镜时，可能无法识别虹膜。例如，当被例如墨镜遮盖的不可识别区域大于眼睛区域时，电子设备101可以识别出佩戴了墨镜。例如，当被例如隐形眼镜遮盖的不可识别区域小于眼睛区域时，电子设备101可以识别出佩戴了隐形眼镜。在识别出佩戴了墨镜之后，电子设备101可以提供摘下墨镜的向导。在识别出佩戴了隐形眼镜之后，电子设备101可以提供用于其它认证方案的用户界面，诸如面部识别或指纹识别。
根据实施例，电子设备101可以根据获得的虹膜信息是否与存储的虹膜信息匹配来确定认证是否成功。例如，电子设备101可以从获得的眼睛的IR图像中检测虹膜部分和眼睑部分。电子设备101可以从IR图像提取虹膜部分，并且从提取的虹膜部分去除眼睑部分。电子设备101可以对去除了眼睑部分的虹膜部分进行归一化，并且对归一化的结果执行数据编码。电子设备101可以将编码数据与存储的数据进行比较，当比较结果表明它们匹配或它们的匹配率在指定值以上时，电子设备101可以确定认证成功。根据实施例，电子设备101可以在提供转换对象和向导信息的同时实时地执行上述虹膜认证过程。
图3B是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。
根据实施例，在操作311中，电子设备101可以检测启动虹膜信息识别的事件。在操作313中，电子设备101可以激活相机模块180以获得至少
个图像。在操作315中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。在操作317中，电子设备101可以从获得的图像中识别眼睛的位置、形状或尺寸中的至少一个。
在操作319中，电子设备101可以识别所识别的多条眼睛相关信息中的至少一条是否满足指定条件。除非识别出所识别的多条眼睛相关信息中的至少一条满足指定条件，否则电子设备101可以在操作321中(操作319中为“否”)提供转换对象以及基于获得的图像中包括的眼睛相关信息所识别的用于改变姿势的信息。当识别的多条眼睛相关信息中的至少一条满足指定条件时，电子设备101可以在操作323中(操作319中为“是”)激活IR传感器模块以辐射IR射线并获得关于反射IR射线的信息。在操作325中，电子设备101可以基于获得的IR反射信息来执行认证。
图5A和图5B是示出根据实施例的经由相机模块获得的示例图像和在显示器上显示的示例屏幕的图。
参考图5A，电子设备101可以使用相机模块180获得第一图像520。如上所述，捕获的第一图像520可以不显示在显示器160上。第一图像520可以包括面部对象523，并且面部对象523可以包括右眼对象524和左眼对象525。电子设备101可以存储与图像中右眼对象的参考范围521和图像中左眼对象的参考范围522相关的信息(例如，x坐标、v坐标、半径、宽度和高度)。电子设备101可以识别出所识别的右眼对象524的v坐标小于右眼对象的参考范围521的v坐标。电子设备101可以将分析用户眼睛位置的结果识别为“向下偏”。电子设备101可以显示包括向导信息512和513中的至少一条以及转换对象511在内的第一屏幕510。例如，转换对象523可以是从面部对象523生成的颜文字。可以根据图像520中面部的位置、形状或面部表情的变化来改变和显示该颜文字。电子设备101可以从图像520中的面部提取特征点，基于特征点的位置的变化来识别面部表情的变化，并且相应地改变并显示颜文字。电子设备101可以显示向导信息512，例如指示用户需要将其眼睛向哪个方向移动的箭头和作为文本“请向上移一点”的向导信息513。
参考图5B，电子设备101可以使用相机模块180获得第二图像540。第二图像540可以包括面部对象543，并且面部对象543可以包括右眼对象544和左眼对象545。如图5B中所示，与右眼对象的参考范围521和左眼对象的参考范围522相关的信息(例如，x坐标、v坐标、半径、宽度和高度)可以被设置为对于所有图像都是相同的。电子设备101可以识别出所识别的右眼对象544的尺寸小于右眼对象的参考范围521的尺寸。电子设备101可以将分析用户眼睛位置的结果识别为“位于远处”。电子设备101可以显示包括向导信息532和533中的至少一条以及转换对象531在内的第二屏幕530。例如，转换对象533可以是从面部对象523生成的颜文字。电子设备101可以显示向导信息532，例如，指示用户需要将其眼睛向哪个方向移动的箭头和作为文本“请向前移一点”的向导信息533。
根据实施例，电子设备101可以识别出右眼对象544和左眼对象545之间的距离a2小于右眼对象的参考范围521与左眼对象的参考范围522之间的距离a1。基于此，电子设备101可以将分析用户眼睛位置的结果识别为“位于远处”。尽管未示出，但是当识别出右眼对象与左眼对象之间的距离大于右眼对象的参考范围521与左眼对象的参考范围522之间的距离a1时，电子设备101可以将分析用户眼睛位置的结果识别为“位于近处”。
图6A和图6B是示出根据实施例的由电子设备提供的示例动画向导的图。
参考图6A，电子设备101可以将分析用户眼睛位置的结果识别为“脸向左转”。电子设备101可以显示“请将头向右转”的文本向导601。此外，电子设备101可以显示转换对象将脸向右转的动画602。例如，电子设备101可以通过顺序地显示构成动画602的多个图像611、612和613来显示动画602，如图6B中所示。电子设备101可以在提供多个图像611、612和613的同时施加残像效果。例如，电子设备101可以在显示图像611的同时显示图像612的情况下调节图像611的至少一部分的透明度，并且可以将其与图像612一起显示。
图6C是示出根据实施例的示例向导的图。
参考图6C，电子设备101可以将分析用户眼睛位置的结果识别为“脸向左偏”。电子设备101可以显示向导624和625以指示参考范围和转换对象621。电子设备101可以显示向导622和623以指示与转换对象621的眼睛相对应的部分。电子设备101可以基于捕获的图像中包括的眼睛区域的位置、形状或尺寸中的至少一个确定向导622和623的位置、形状或尺寸中的至少一个，并且在与转换对象621的眼睛相对应的部分中显示确定的向导622和623。
电子设备101可以在获得的图像中显示与指示参考范围的向导624和625以及对应于眼睛区域的向导622和623之间的差异相对应的箭头631和632。用户可以识别箭头631和632并改变用户的姿势。此外，用户可以根据向导622和623的尺寸向前或向后移动。尽管图6C示出了向导622和623在尺寸上与指示参考范围的向导624和625相似，但这仅是示例，并且本公开不限于此。例如，当用户的位置比参考距离更远离电子设备101时，可以以比指示参考范围的向导624和625更小的尺寸来显示向导622和623。
图7是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图7以及图8详细描述示例实施例。图8是示出根据实施例的由电子设备显示的示例向导的图。
根据实施例，在操作701中，电子设备101可以检测启动生物特征信息识别的事件。在操作703中，电子设备101可以激活相机模块180以获得至少一个图像。在操作705中，电子设备101可以激活用于识别生物特征信息的传感器模块170并获得生物特征信息。在操作707中，电子设备101可以显示通过基于图像对获得的图像中包括的对象的至少一部分进行转换而生成的转换对象，并显示针对用来识别的目标对象的位置和尺寸的向导。例如，如图8中所示，电子设备101可以显示与指定范围和转换对象821相对应的向导824和825。电子设备101可以另外显示与转换对象821的眼睛区域相对应的向导822和823。
图9是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图9以及图10更详细地描述示例实施例。图10是示出根据实施例的由电子设备显示的示例屏幕的图。
根据实施例，在操作901中，电子设备101可以检测启动生物特征信息识别的事件。在操作903中，电子设备101可以激活相机模块180以获得第一图像。在操作905中，电子设备101可以提供通过基于第一图像对第一图像中包括的对象的至少一部分进行转换而生成的第一转换对象，并提供基于第一图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的第一信息。如图10中所示，电子设备101可以显示第一屏幕1010。第一屏幕1010可以包括向导1012和1013以及基于第一图像中包括的面部而生成的转换对象1011。例如，电子设备101可以识别第一图像中包括的用来识别的目标对象(例如，眼睛)位于参考位置下方。因此，电子设备101可以显示指示请求向上移动的向导1012和1013。
在操作907中，电子设备101可以获得第二图像。例如，用户可以识别向导1012和1013并且相应地将头向上倾斜，并且电子设备101可以在用户将头向上倾斜之后获得第二图像。在操作909中，电子设备101可以提供通过基于第二图像对第二图像中包括的对象的至少一部分进行转换而生成的第二转换对象，并提供基于第二图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的第二信息。如图10中所示，电子设备101可以基于第二图像显示第二屏幕1020。第二屏幕1020可以包括向导1022和1023以及基于第二图像中包括的面部生成的转换对象1021。例如，电子设备101可以识别第二图像中包括的用来识别的目标对象(例如，眼睛)位于参考位置上方。因此，电子设备101可以显示指示请求向下移动的向导1022和1023。换句话说，电子设备101可以实时改变并显示与图像中用来识别的目标对象的位置、尺寸或形状中的至少一个的变化相对应的向导。
图11是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。
根据实施例，在操作1101中，电子设备101可以检测启动生物特征信息识别的事件。在操作1103中，电子设备101可以激活相机模块180以获得至少一个图像。在操作1105中，电子设备101可以激活用于识别生物特征信息的传感器模块170并获得生物特征信息。在操作1107中，电子设备101可以识别是否存在注册的颜文字。电子设备101可以在识别生物特征信息之前预先执行颜文字注册。例如，电子设备101可以预先获得捕获的用户面部图像以注册颜文字。电子设备101可以基于上述方案从捕获的图像生成颜文字并注册该颜文字。在确定存在预先注册的颜文字时(在操作1107中为“是”)，电子设备101可以在操作1109中基于获得的图像提供转换对象以及用于改变姿势的信息和注册的颜文字。在确定没有先前注册的颜文字时(操作1107中为“否”)，电子设备101可以在操作1111中基于获得的图像提供转换对象以及用于改变姿势的信息和默认颜文字。默认图像例如可以是基于预先指定的纹理生成的颜文字，而不是基于来自捕获图像的纹理生成的颜文字。当生成颜文字所需的时间相对于生物特征认证所需的时间更长时，电子设备101可以显示例如预先指定的形象。
图12是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。
根据实施例，在操作1201中，电子设备101可以检测启动生物特征信息识别的事件。在操作1203中，电子设备101可以激活相机模块180以获得至少一个图像。在操作1205中，电子设备101可以激活用于识别生物特征信息的传感器模块170并获得生物特征信息。在操作1207中，电子设备101可以从获得的图像中提取面部区域。如上所述，电子设备101可以基于各种面部区域检测方案来提取面部区域，该多种面部区域检测方案不限于特定的一种。电子设备101可以提取面部区域并且可以不使用剩余的背景区域。因此，可以防止背景区域显示在显示器160上，这可以进一步保障用户的隐私。
在操作1209中，电子设备101可以显示通过基于所提取的面部区域对图像中所包含的对象的至少一部分进行转换而生成的转换对象。在操作1211中，电子设备101可以提供用于改变姿势的信息和附加信息以及转换对象，直到面部区域中包括的用来识别的目标对象或生物特征信息中的至少一个满足指定条件为止。根据实施例，电子设备101可以在除了转换对象之外的背景区域中显示附加信息。例如，电子设备101可以在背景区域中显示用于附加认证的界面。当电子设备101被配置为以多因素认证方案进行认证时，电子设备101可以在背景区域中显示用于附加认证的界面。电子设备101可以显示与认证相关的信息(例如，支付信息或汇款信息)。本领域普通技术人员将容易认识到，可在背景区域中显示的附加信息不限于特定类型。电子设备101可以在背景区域中显示用于改变姿势的信息，在这种情况下，可以不显示附加信息。根据实施例，电子设备101可以对背景区域进行模糊处理并进行显示。在这种情况下，电子设备101可以显示经模糊的背景区域和转换对象以及用于改变姿势的信息。根据实施例，电子设备101可以被配置为显示从图像获得的背景区域以及转换对象。
图13是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图14更详细地描述与图13有关的示例实施例。图14是示出根据实施例的电子设备的示例显示屏幕的图。
根据实施例，在操作1301中，电子设备101可以检测启动面部识别的事件。启动面部识别的事件可以至少部分地与上述启动虹膜识别的事件相同。在操作1303中，电子设备101可以激活相机模块180以获得至少一个图像。在操作1305中，电子设备101可以激活传感器模块170中包括的红外(IR)传感器模块以辐射IR射线并获得关于反射的IR射线的信息。例如，电子设备101可以以包括多个点的网格形状辐射IR射线。因此，电子设备101可以获得面部的二维(2D)或三维(3D)IR图像。在操作1307中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。例如，如图14中所示，电子设备101可以显示转换对象1421、针对指定区域的向导1410以及用于引导姿势改变的向导1422和1423。
在操作1309中，电子设备101可以从获得的图像中识别出面部的位置、形状或尺寸中的至少一个。在操作1311中，电子设备101可以提供转换对象以及基于与获得的图像中包括的面部的相关信息所识别的用于改变姿势的信息，直到所识别的面部相关信息或生物特征信息中的至少一个(例如，基于针对面部的IR图像识别的信息)满足指定条件为止。例如，电子设备101可以提供向导1422和1423，直到从面部的IR图像1440的面部区域1420提取的特征点1445满足指定条件为止。虽然图14示出了IR图像1440是2D IR图像，但这仅是示例。电子设备101可以获得3D IR图像并且从3D IR图像提取特征点。即使在识别特征点1445是否与预先存储的特征点匹配时，电子设备101也可以显示已经被重新定位的转换对象1430。根据实施例，电子设备101可以在首次注册用户的面部时获得面部的IR图像，并存储从IR图像提取的特征点的位置。电子设备101可以将关于存储的特征点的信息与关于从IR图像获得的特征点的信息进行比较，并且当将其确定为匹配时，可以确定认证成功。
根据实施例，电子设备101可以被配置为基于经由传感器模块170获得的IR图像来显示转换对象，而无需激活相机模块180。
图15是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图15以及图16详细描述示例实施例。图16是示出根据实施例的示例电子设备的图。
参考图15，在操作1501中，电子设备101可以检测启动生物特征信息识别的事件。在操作1503中，电子设备101可以激活相机模块以获得至少一个图像。在操作1505中，电子设备101可以激活用于识别生物特征信息的传感器模块并获得生物特征信息。在操作1507中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。
根据实施例，在操作1509中，电子设备101可以测量环境照度。例如，电子设备101可以通过分析经由相机模块获得的至少一个图像来识别环境照度。电子设备101可以基于图像中包括的像素值来识别环境照度。电子设备101可以基于经由传感器模块获得的生物特征信息来识别环境照度。例如，电子设备101可以基于IR传感器获得捕获的用于认证的身体部位的IR图像。电子设备101可以基于IR图像中包括的像素值来识别环境照度。电子设备101可以基于经由照度传感器识别的感测数据来激活照度传感器并识别环境照度。电子设备101可以从外部电子设备(例如，外部照度传感器或外部服务器)接收关于环境照度的信息。
在操作1511中，电子设备101可以提供转换对象以及基于环境照度和获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，直到生物特征信息或图像中包括的用来识别的目标对象中的至少一个满足指定条件为止。电子设备101可以提供转换对象以及基于环境照度识别的用于改变照度环境的信息。例如，如图16中所示，电子设备101可以显示请求增加照度的文本1601“请移动到更亮的地方”。此外，电子设备101可以显示图像1612以指示相对较亮的环境，同时显示图像1611以指示相对较暗的环境。因此，用户可以从相对较暗的环境移动到相对较亮的环境，或者识别出需要改变照度。指示相对较暗的环境的图像1611和指示相对较亮的环境的图像1612可以包括转换对象和基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息。可以确定指示总体亮度(例如，亮度或色度中的至少一个)的信息或指示较亮环境的图像1612和指示较暗环境的图像1611的背景。
图17是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图17以及图18详细描述示例实施例。图18是示出根据实施例的电子设备的图。
参考图17，在操作1701中，电子设备101可以检测启动生物特征信息识别的事件。在操作1703中，电子设备101可以激活相机模块以获得至少一个图像。在操作1705中，电子设备101可以激活用于识别生物特征信息的传感器模块并获得生物特征信息。
在操作1707中，电子设备101可以在识别出获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个满足指定条件的同时，使用生物特征信息来识别认证失败。例如，电子设备101可以识别出图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个满足指定条件以获得生物特征信息。尽管满足条件，但是电子设备101可以识别出根据经由传感器获得的生物特征信息的识别失败。
在操作1709中，电子设备101可以基于图像分析来识别是否佩戴了饰物。在操作1711中，电子设备101可以提供转换对象以及请求调节饰物的位置的信息。例如，电子设备101可以识别出眼镜在图像分析的所得图像中。电子设备101可以基于各种识别模型从图像中识别各种饰物。电子设备101可以识别出在图像中存在干扰用来识别的身体部位的饰物或其它对象(例如，头发)。电子设备101可以预先存储针对饰物的识别模型，该饰物干扰对用来识别的目标身体部位或各种对象的感测。这样的识别模型可以由电子设备101生成或从另一外部电子设备接收。识别模型可以通过学习来更新。
如图18中所示，电子设备101可以提供转换对象以及请求调节饰物的位置的信息。例如，电子设备101可以显示请求改变饰物的位置的文本1801：“请摘掉眼镜”。
此外，电子设备101可以将正在显示的饰物移动前图像切换为饰物移动后图像。因此，用户可以识别出需要改变饰物的位置。饰物移动前图像可以包括用于基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，并包括转换对象1802和指示饰物的对象1803。饰物移动后图像可以包括用于基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，并包括转换对象1812和指示饰物的对象1813。指示饰物的对象1813可以被布置成远离转换对象1812，使得用户可以识别出需要摘掉饰物。
根据实施例，即使不基于经由传感器的感测数据识别出故障的情况下，电子设备101也可以提供导致要基于图像分析的结果移动饰物的位置的文本或图像中的至少一个。根据实施例，电子设备101可以提供图像或文本中的至少一个以请求重新布置除眼镜以外的其它各种对象。
图19是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图20A和图20B更详细地描述图19的示例实施例。图20A和20B是示出根据实施例的示例电子设备的图。
参考图19，在操作1901中，电子设备101可以检测启动生物特征信息识别的事件。在操作1903中，电子设备101可以激活相机模块以获得至少一个图像。在操作1905中，电子设备101可以激活用于识别生物特征信息的传感器模块并获得生物特征信息。
在操作1907中，电子设备101可以在识别获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个满足指定条件的同时，使用生物特征信息来识别认证失败。尽管满足条件，但是电子设备101可以识别出根据经由传感器获得的生物特征信息的识别失败。
在操作1909中，电子设备101可以识别出传感器模块上有污点。在操作1911中，电子设备101可以提供转换对象以及请求去除污点的信息。
电子设备101可以基于对获得的生物特征信息的分析来识别出污点在传感器模块上(或者在传感器模块上的玻璃)。例如，电子设备101可以经由IR传感器获得IR图像。电子设备101可以基于IR图像分析的结果识别出污点在IR传感器上。例如，电子设备101可以在按顺序捕获的多个IR图像中识别出相同的对象处于相同的位置，并且因此可以识别出污点粘附在该位置。电子设备101可以识别出某个区域的分辨率低于另一区域，因此可以识别出该区域中存在污点。当捕获的IR图像的分辨率低于指定值时，电子设备101可以识别出存在污点。电子设备101可以预先存储能够识别污点的识别模型，并且可以通过识别将识别模型应用于IR图像的结果来识别污点的存在。用于识别污点的存在的上述方法仅是示例，并且本公开的实施例不限于此。
例如，如图20A中所示，电子设备101可以显示请求去除污点的文本，例如“请从前部去除污点”。电子设备101可以将指示在存在污点的情况下捕获且正被显示的图像2010切换为指示在去除污点之后捕获的图像2020。因此，用户可以识别出需要擦拭传感器的前部。指示在存在污点的情况下捕获的图像2010和指示在去除污点之后捕获的图像2020可以包括转换对象以及基于获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息。相对地，指示在存在污点的情况下捕获的图像2010可以是例如模糊图像，并且指示在去除污点之后捕获的图像2020可以是非模糊图像。
如图20B中所示，电子设备101可以显示请求去除污点的文本2022以及指示需要擦拭的对象2021。指示需要擦拭的对象2021可以根据传感器的位置而不同。
图21是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图22更详细地描述与图21有关的示例实施例。图22是示出根据实施例的示例电子设备的图。
参考图21，在操作2101中，电子设备101可以检测启动生物特征信息识别的事件。在操作2103中，电子设备101可以激活相机模块以获得至少一个图像。在操作2105中，电子设备101可以激活用于识别生物特征信息的传感器模块并获得生物特征信息。在操作2107中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。在操作2109中，电子设备101可以提供转换对象以及基于环境照度和获得的图像中包括的用来识别的目标对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息，直到生物特征信息或图像中包括的用来识别的目标对象中的至少一个满足指定条件为止。
在操作2111中，电子设备101可以识别使用生物特征信息的认证在预设时间内是否成功。当认证被识别为成功时(操作2111中的“是”)，电子设备101可以在操作2113中执行与认证成功相对应的操作。例如，电子设备101可以解除电子设备101的锁定状态，并显示菜单屏幕。电子设备101可以执行例如对特定主页的登录或电子支付。当认证被识别为失败时(操作2111中为“否”)，电子设备101可以在操作2115中提供与认证失败相对应的颜文字。例如，电子设备101可以显示反映与认证失败相对应的情绪的对象2202，如图22中所示。电子设备101还可以显示指示认证失败的文本2201。电子设备101可以存储与各种情绪相对应的对象。电子设备101可以显示表达与认证失败相对应的悲伤的对象。
根据实施例，电子设备101可以以与之前不同的颜色来设置和显示电子设备101的屏幕的背景，例如，除了对象2202之外的其余区域。
根据实施例，当识别出认证成功时，电子设备101可以提供反映与认证成功相对应的情绪的对象，然后执行与认证成功相对应的操作。例如，电子设备101可以显示表示与认证成功相对应的开心的对象。电子设备101可以将背景的颜色改变为与认证成功相对应的颜色，并显示颜色改变后的背景。
根据实施例，对于每次认证尝试，电子设备101可以显示反映不同情绪的对象或以不同颜色显示背景。对于每个认证步骤，电子设备101可以显示反映不同情绪的对象或者以不同颜色显示背景。
图23是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图24A和图24B更详细地描述图23的示例实施例。图24A和图24B是示出根据实施例的示例对象的图。
在操作2301中，电子设备101可以激活相机模块以获得至少一个图像。在操作2303中，电子设备101可以识别至少一个图像中包括的用来识别的目标对象的属性。例如，当电子设备101执行基于虹膜识别的认证时，电子设备101可以从至少一个图像的每一个中识别与虹膜相对应的区域。电子设备101可以识别用来识别的目标对象的属性，包括虹膜区域的位置、形状或尺寸中的至少一个。当存在多个要识别的目标对象(例如，两个虹膜)时，电子设备101可以将虹膜区域之间的相对位置(例如，虹膜区域之间的距离)识别为用来识别的目标对象的属性。
在操作2305中，电子设备101可以基于用来识别的目标对象的属性来调节形象的至少一些对象，并提供该对象。电子设备101可以基于用来识别的目标对象的被识别出的属性来显示与用来识别的目标对象相对应的形象的对象。
例如，参考图24A，电子设备101可以从捕获的第一用户的第一图像中识别出第一用户的面部区域2401，并识别出面部区域2401中包括的虹膜区域2402和2403。电子设备101识别面部区域并从所识别的面部区域检测虹膜区域仅仅是示例。电子设备101可以立即识别虹膜区域而不识别面部区域。电子设备101可以识别出第一用户的虹膜区域2402与2403之间的距离是d1。电子设备101可以存储设置为在认证过程期间显示的模板图像2410。模板图像2410可以包括对应于例如虹膜的对象2411和2412。模板图像2410可以被设置为在细节上不可编辑，因此，对象2411和2412可以不被单独地编辑。在这种情况下，电子设备101可以通过调节模板图像2410的尺寸将虹膜区域的属性反映到显示的对象。例如，电子设备101可以识别与虹膜间距离d1相对应的第一尺寸，并且在屏幕上显示由于将模板图像2410设置为第一尺寸而产生的对象2422。可以将与被设置为第一尺寸的对象2422中包括的虹膜相对应的对象之间的距离X1布置在与面部相对应的区域2421内的认证区域2423和2424中。电子设备101可以存储在图像中识别出的虹膜间距离d1与认证区域2423和2424之间的第一尺寸或距离X1之间的关系。电子设备101还可以与虹膜间距离d1相对应地设置认证区域2423和2424之间的距离X1。电子设备101甚至在用来虹膜识别的IR图像中也可以在与认证区域2423和2424相对应的位置上执行虹膜识别。
同时，电子设备101可以从捕获的第二用户的第二图像中识别第二用户的面部区域2431，并识别面部区域2431中包括的虹膜区域2432和2433。电子设备101可以识别出第二用户的虹膜区域2432和2433之间的距离为d2。例如，电子设备101可以识别与虹膜间距离d2相对应的第二尺寸，并在屏幕上显示由于将模板图像2410设置为第二尺寸而产生的对象2442。可以将与被设置为第二尺寸的对象2442中包括的虹膜相对应的对象2443和2444之间的距离X2布置在与面部相对应的区域2441内的认证区域2443和2444中。电子设备101可以存储在图像中识别出的虹膜间距离d2与认证区域2443和2444之间的第二尺寸或距离X2之间的关系。电子设备101还可以与虹膜间距离d2相对应地设置认证区域2443和2444之间的距离X2。电子设备101甚至在用来虹膜识别的IR图像中也可以在与认证区域2443和2444相对应的位置上执行虹膜识别。
尽管未示出，但是电子设备101可以基于虹膜的尺寸或形状来设置显示对象的尺寸。对于模仿用户面部的颜文字，电子设备101还可以设置颜文字的整体尺寸以反映用来识别的目标对象的属性。
图24B是示出可以对模板2410中的对象2411和2412进行详细编辑的示例的图。电子设备101可以基于用来识别的目标对象的识别的属性来调节和显示与虹膜相对应的对象的属性并进行显示。
例如，电子设备101可以识别出第一用户的虹膜区域2402与2403之间的距离是d1。例如，与虹膜间距离d1相对应，电子设备101可以调节与模板2410中的虹膜相对应的对象2411与2412之间的距离。因此，电子设备101可以生成并显示对象2452，其中对应于虹膜的对象之间的距离为P1。电子设备101可以存储对应于虹膜的对象2411和2412之间的距离d1与对应于虹膜的对象之间的距离P1之间的对应关系，并基于该对应关系来调节与对象2452中的虹膜相对应的对象的属性。电子设备101也可以将与面部区域2451相对应的用来识别的目标对象2453和2454设置为P1。电子设备101还可以在与IR图像中用来识别的目标对象2543和2454相对应的位置上执行虹膜识别。
例如，电子设备101可以识别出第二用户的虹膜区域2432与2433之间的距离是d2。例如，对应于虹膜间距离d2，电子设备101可以调节与模板2410中的虹膜相对应的对象2411和2412之间的距离。因此，电子设备101可以生成并显示对象2462，其中对应于虹膜的对象之间的距离为P2。电子设备101可以存储对应于虹膜的对象2411和2412之间的距离d1与对应于虹膜的对象之间的距离P2之间的对应关系，并基于该对应关系来调节与对象2462中的虹膜相对应的对象的属性。电子设备101也可以将与面部区域2461相对应的用来识别的目标对象2463和2464设置为P2。电子设备101还可以在与IR图像中用来识别的目标对象2463和2464相对应的位置上执行虹膜识别。
图25是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。参考图26更详细地描述图25中所示的示例实施例。图26是示出根据本公开的各个实施例的电子设备的图。
参考图25，在操作2501中，电子设备101可以检测启动生物特征信息识别的事件。在操作2503中，电子设备101可以激活相机模块以获得至少一个图像。在操作2505中，电子设备101可以激活用于识别生物特征信息的传感器模块并获得生物特征信息。在操作2507中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。
在操作2509中，电子设备101可以显示与指定动作相对应的屏幕以及转换对象。例如，电子设备101可以执行多因素认证。电子设备101可以通过识别生物特征信息和操作信息来执行多因素认证。电子设备101可以识别生物特征信息是否对应于预先存储的信息，并且可以基于用户的动作是否对应参考于预先指定的动作来执行多因素认证。例如，电子设备101可以将用户转脸的动作存储为指定动作，并且将从面部的IR图像获得的信息存储为生物特征认证信息。电子设备101可以显示与指定动作相对应的动画2602。例如，电子设备101可以显示动画2602，其中向前看的形象将脸向右转。电子设备101可以进一步显示图像2603(或动画)以引导用户在背景中将脸向右转。因此，用户可以执行由图像2603引导的动作。
在操作2511中，电子设备101可以至少基于在指定时间段内获得的多条连续的生物特征信息来执行认证。例如，电子设备101可以经由IR相机获得多个连续的IR图像。电子设备101可以从多个IR图像中的至少一个提取例如特征点，并且识别关于特征点的信息是否对应于预先存储的特征点信息。电子设备101可以基于它们是否彼此对应来识别第一认证是否成功。电子设备101可以分析多个IR图像并识别用户的动作。例如，电子设备101可以分析IR图像以识别用户的面部朝向前方然后向右转。电子设备101可以基于所识别的动作是否对应于预先存储的动作来识别第二认证是否成功。在识别出第一认证和第二认证都成功时，电子设备101可以识别出认证成功。根据实施例，电子设备101可以被配置为基于经由传感器模块获得的生物特征信息来执行第一认证，并且基于经由相机获得的图像来执行基于动作的第二认证。上述面部识别仅是示例，并且本领域的普通技术人员将容易理解，各种生物特征信息可以用于多因素认证方案中的一种。
图27是示出根据本公开实施例的用于操作电子设备的示例方法的流程图。
在操作2701中，电子设备101可以检测启动生物特征信息识别的事件。在操作2703中，电子设备101可以激活相机模块以获得至少一个图像。在操作2705中，电子设备101可以显示通过基于获得的图像对图像中包括的对象的至少一部分进行转换而生成的转换对象。根据实施例，电子设备101可以避免激活传感器模块。
在操作2709中，电子设备101可以显示与指定动作相对应的屏幕以及转换对象。例如，如图26中所示，电子设备101可以显示与指定动作相对应的动画2602或导致指定动作的图像2603中的至少一个。
在操作2711中，电子设备101可以至少基于在指定时间段期间获得的多个图像来执行认证。在这种情况下，电子设备101可以基于检测到的动作是否对应于存储的动作来执行认证。除了基于动作是否彼此对应之外，电子设备101还可以基于识别图像中的至少一个对象的结果来执行认证。例如，电子设备101可以从图像中辨别出面部区域并识别该面部区域。电子设备101可以基于识别面部区域的结果是否对应于指定信息来执行认证。换句话说，如上所述，即使不使用来自传感器模块的数据，电子设备101也可以基于从图像获得的信息来执行多因素认证。
如本文所述的各种示例实施例可以被实现为包含存储在机器(例如，计算机可读存储介质(例如，内部存储器)、外部存储器等中的命令的软件(例如，程序)，但是本公开不限于此。机器可以是可以调用存储在存储介质中的命令并且可以根据所调用的命令进行操作的设备。机器可以包括根据本文公开的实施例的电子设备(例如，电子设备101)。当命令由处理器(例如，处理器120)执行时，处理器可以在处理器的控制下独自或使用其它组件来执行与命令相对应的功能。命令可以包含由编译器生成的代码或由解释器执行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。
根据实施例，可以在计算机程序产品中包括并设置根据本公开的各个实施例的方法。计算机程序产品可以作为商品在买卖双方之间进行交易。可以以机器可读存储介质(例如，光盘只读存储器(CD-ROM))的形式或通过应用商店(例如，PlaystoreTM)在线分发计算机程序产品。当在线分发时，计算机程序产品的至少一部分可以被临时生成或至少被临时存储在诸如制造商的服务器、应用商店的服务器或中继服务器之类的存储介质中。
根据各个实施例，每个组件(例如，模块或程序)可以由单个或多个实体配置，并且各个实施例可以排除上述子组件中的一些或添加其它子组件。替代地或附加地，一些组件(例如，模块或程序)可以被集成到单个实体中，该实体然后可以以相同或相似的方式执行这些组件的相应(预集成)功能。根据本公开的各个实施例的由模块、程序或其它组件执行的操作可以按顺序地、并行地、重复地或启发式地执行，或者至少一些操作可以以不同的顺序执行或被省略，或者可以添加其它操作。
虽然已经参考本公开的各种示例实施例示出和描述了本公开，但是本领域技术人员将理解，在不脱离如例如由所附权利要求及其等效物所限定的本公开的精神和范围的情况下，可以在形式和细节上进行各种改变。

Claims (15)

1.一种电子设备，包括：
相机模块，包括相机；
传感器模块，包括传感器；
显示器；
存储器；以及
处理器，被配置为：
控制所述存储器存储注册的生物特征信息，
使用所述相机模块获得至少一个图像，
使用所述传感器模块获得生物特征信息，
控制所述显示器显示通过对所述至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象，以及
控制所述显示器将所述第一对象与基于所述至少一个图像中包括的第三对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息一起显示，直到所获得的生物特征信息和所注册的生物特征信息满足指定条件为止。
2.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述传感器模块发出红外IR射线并接收所述IR射线的反射，
基于所述IR反射来识别用户眼睛的IR图像，或者基于所述IR反射来识别用户面部的IR图像，
从所述IR图像中识别虹膜信息或从所述IR图像中识别面部信息，
控制所述显示器显示所述用于改变姿势的信息，直到所识别的虹膜信息对应于存储在所述存储器中的虹膜信息为止，或者显示所述用于改变姿势的信息，直到所识别的面部信息对应于存储在所述存储器中的面部信息为止。
3.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述显示器显示基于所述第三对象的位置与指定参考位置之间的差异、所述第三对象的形状与指定参考形状之间的差异或所述第三对象的尺寸与指定参考尺寸之间的差异中的至少一个所识别的用于改变姿势的信息，并显示与所述第三对象的位置与所述指定参考位置之间的差异、所述第三对象的形状与所述指定参考形状之间的差异或所述第三对象的尺寸与所述指定参考尺寸之间的差异中的至少一个相对应的文本、图像或动画中的至少一个。
4.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述显示器显示基于所述第三对象的位置与指定参考位置之间的差异、所述第三对象的形状与指定参考形状之间的差异或所述第三对象的尺寸与指定参考尺寸之间的差异中的至少一个所识别的用于改变姿势的信息，并在与所述指定参考位置相对应的位置中将所述第一对象与基于所述指定参考形状或所述指定参考尺寸中的至少一个的向导一起显示。
5.根据权利要求1所述的电子设备，其中所述处理器被配置为：
基于所述至少一个图像中包括的所述第三对象的位置、尺寸或形状中的至少一个，识别所述第一对象的位置、尺寸或形状中的至少一个。
6.根据权利要求1所述的电子设备，其中所述处理器被配置为：
使用与所述至少一个图像中包括的所述第二对象的一部分相对应的纹理来生成所述第一对象，或者使用存储在所述存储器中的纹理来生成所述第一对象。
7.根据权利要求1所述的电子设备，其中所述处理器被配置为：
基于识别出所述至少一个图像的第一图像中包括的用来识别的第一目标对象满足第一条件，控制所述显示器将用于改变姿势的第一信息与通过对所述第一图像中包括的对象的至少一部分进行转换而获得的第一转换对象一起显示，并且
基于识别出在所述第一图像后获得的第二图像中包括的用来识别的第二目标对象满足第二条件，控制所述显示器将用于改变姿势的第二信息与通过对所述第二图像中包括的对象的至少一部分进行转换而获得的第二转换对象一起显示，所述用于改变姿势的第二信息与所述用于改变姿势的第一信息不同。
8.根据权利要求1所述的电子设备，其中所述处理器被配置为：
识别关于所述电子设备的环境照度的信息，并且将所述第一对象与基于关于所述环境照度的信息所识别的用于改变照度环境的信息一起提供。
9.根据权利要求1所述的电子设备，其中所述处理器被配置为：
基于分析所述至少一个图像的结果，识别存在干扰对所述第三对象的检测的对象，并将所述第一对象与请求改变干扰对所述第三对象的检测的对象的位置的信息一起提供。
10.根据权利要求1所述的电子设备，其中所述处理器被配置为：
识别所述传感器模块上存在的污点，以及
将所述第一对象与请求去除所述污点的信息一起提供。
11.根据权利要求1所述的电子设备，其中所述处理器被配置为：
基于所获得的生物特征信息和所注册的生物特征信息在预设时间内不满足所述指定条件，识别认证失败，以及
控制所述显示器显示反映与所述认证失败相对应的情绪的对象。
12.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述存储器存储模板图像，
基于所述至少一个图像中包括的所述第三对象的位置、形状或尺寸中的至少一个来识别所述模板图像的尺寸，以及
控制所述显示器将识别出尺寸的模板图像显示为所述第一对象。
13.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述存储器存储模板图像，
基于所述至少一个图像中包括的所述第三对象的位置、形状或尺寸中的至少一个，调节所述模板图像中的子对象的位置、形状或尺寸中的至少一个，以及
控制所述显示器将调节后的模板图像显示为所述第一对象。
14.根据权利要求1所述的电子设备，其中所述处理器被配置为：
控制所述存储器存储关于指定动作的信息，
基于所述至少一个图像识别关于用户动作的信息，或者基于来自所述传感器模块的数据识别关于用户动作的信息，以及
基于所获得的生物特征信息和所注册的生物特征信息满足所述指定条件以及所识别的关于所述用户动作的信息对应于关于所述指定动作的信息，识别认证成功，或者基于所获得的生物特征信息和所注册的生物特征信息满足所述指定条件以及所识别的关于所述用户动作的信息对应于关于所述指定动作的信息，确定认证成功。
15.一种操作电子设备的方法，所述电子设备包括相机模块、传感器模块和显示器，所述方法包括：
使用所述相机模块获得至少一个图像；
使用所述传感器模块获得生物特征信息；
经由所述显示器显示通过对所述至少一个图像中包括的第二对象的至少一部分进行转换而生成的第一对象；以及
经由所述显示器将所述第一对象与基于所述至少一个图像中包括的第三对象的位置、形状或尺寸中的至少一个所识别的用于改变姿势的信息一起显示，直到所获得的生物特征信息和所注册的生物特征信息满足指定条件为止。
CN201980025835.3A 2018-05-14 2019-05-14 用于执行生物特征认证的电子设备及其操作方法 Pending CN112106046A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20180054980 2018-05-14
KR10-2018-0054980 2018-05-14
KR1020180130211A KR102581179B1 (ko) 2018-05-14 2018-10-29 생체 인증을 수행하는 전자 장치 및 그 동작 방법
KR10-2018-0130211 2018-10-29
PCT/KR2019/005802 WO2019221494A1 (en) 2018-05-14 2019-05-14 Electronic device for performing biometric authentication and method of operating the same

Publications (1)

Publication Number Publication Date
CN112106046A true CN112106046A (zh) 2020-12-18

Family

ID=68731117

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980025835.3A Pending CN112106046A (zh) 2018-05-14 2019-05-14 用于执行生物特征认证的电子设备及其操作方法

Country Status (3)

Country Link
EP (1) EP3746923A4 (zh)
KR (1) KR102581179B1 (zh)
CN (1) CN112106046A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022222735A1 (zh) * 2021-04-23 2022-10-27 腾讯科技（深圳）有限公司 信息处理方法、装置、计算机设备和存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102472956B1 (ko) * 2020-08-25 2022-12-01 네이버 주식회사 사용자 인증 방법 및 시스템
KR102623605B1 (ko) * 2021-12-10 2024-01-11 주식회사 펫나우 반려 동물의 생체 정보를 취득하는 전자 장치 및 그 동작 방법
WO2023106874A1 (ko) * 2021-12-10 2023-06-15 주식회사 펫나우 반려 동물의 생체 정보를 취득하는 전자 장치 및 그 동작 방법
WO2024080770A1 (ko) * 2022-10-14 2024-04-18 삼성전자 주식회사 홍채 정보를 검출하는 웨어러블 장치 및 그 제어 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160092720A1 (en) * 2014-09-25 2016-03-31 Samsung Electronics Co., Ltd. Method and apparatus for iris recognition
KR20170031542A (ko) * 2015-09-11 2017-03-21 엘지전자 주식회사 안경 검출 정보에 기반한 홍채 등록 및 인증 방법
JP2017208638A (ja) * 2016-05-17 2017-11-24 レノボ・シンガポール・プライベート・リミテッド 虹彩認証装置、虹彩認証方法、及びプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8982110B2 (en) * 2005-03-01 2015-03-17 Eyesmatch Ltd Method for image transformation, augmented reality, and teleperence
IL226047A (en) * 2013-04-29 2017-12-31 Hershkovitz Reshef May A method and system for giving personal expressions
CN106156578B (zh) * 2015-04-22 2020-02-14 深圳市腾讯计算机系统有限公司 身份验证方法和装置
KR20180006133A (ko) * 2016-07-08 2018-01-17 삼성전자주식회사 전자 장치 및 그의 동작 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160092720A1 (en) * 2014-09-25 2016-03-31 Samsung Electronics Co., Ltd. Method and apparatus for iris recognition
KR20170031542A (ko) * 2015-09-11 2017-03-21 엘지전자 주식회사 안경 검출 정보에 기반한 홍채 등록 및 인증 방법
JP2017208638A (ja) * 2016-05-17 2017-11-24 レノボ・シンガポール・プライベート・リミテッド 虹彩認証装置、虹彩認証方法、及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022222735A1 (zh) * 2021-04-23 2022-10-27 腾讯科技（深圳）有限公司 信息处理方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
EP3746923A1 (en) 2020-12-09
EP3746923A4 (en) 2021-06-23
KR102581179B1 (ko) 2023-09-22
KR20190130448A (ko) 2019-11-22

Similar Documents

Publication Publication Date Title
KR102565755B1 (ko) 얼굴의 특징점의 움직임에 따라 모션이 수행된 아바타를 표시하는 전자 장치와 이의 동작 방법
US10796178B2 (en) Method and device for face liveness detection
US10846388B2 (en) Virtual reality environment-based identity authentication method and apparatus
CN112106046A (zh) 用于执行生物特征认证的电子设备及其操作方法
CN108664783B (zh) 基于虹膜识别的识别方法和支持该方法的电子设备
KR102175595B1 (ko) 펄스형 광원을 이용한 근접 평면 분할
WO2018153311A1 (zh) 基于虚拟现实场景的业务认证方法及装置
US8966613B2 (en) Multi-frame depth image information identification
KR102659357B1 (ko) 아바타 애니메이션을 제공하기 위한 전자 장치 및 그에 관한 방법
EP3700167B1 (en) Methods and systems for determining user liveness and verifying user identities
US11069115B2 (en) Method of controlling display of avatar and electronic device therefor
KR102499354B1 (ko) 디스플레이를 통해 표시된 제 1 콘텐트에 대해 제 2 콘텐트를 외부 객체의 움직임에 따라 제공하기 위한 전자 장치 및 그의 동작 방법
US11335090B2 (en) Electronic device and method for providing function by using corneal image in electronic device
US20230300464A1 (en) Direct scale level selection for multilevel feature tracking under motion blur
US11410466B2 (en) Electronic device for performing biometric authentication and method of operating the same
US11683585B2 (en) Direct scale level selection for multilevel feature tracking under motion blur
CN117461309A (zh) 对于计算机立体视觉的未对准观察点缓解
US20230004214A1 (en) Electronic apparatus and controlling method thereof
US11983897B2 (en) Camera intrinsic re-calibration in mono visual tracking system
US20230154044A1 (en) Camera intrinsic re-calibration in mono visual tracking system
WO2024097607A1 (en) Multi-factor authentication using a wearable device
EP4341833A1 (en) Bending estimation as a biometric signal
WO2022246382A1 (en) Bending estimation as a biometric signal
CN117501208A (zh) 利用步态印迹模仿的ar数据模拟

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination