CN110462617A - 用于通过多个相机认证生物数据的电子装置和方法 - Google Patents

用于通过多个相机认证生物数据的电子装置和方法 Download PDF

Info

Publication number
CN110462617A
CN110462617A CN201880020368.0A CN201880020368A CN110462617A CN 110462617 A CN110462617 A CN 110462617A CN 201880020368 A CN201880020368 A CN 201880020368A CN 110462617 A CN110462617 A CN 110462617A
Authority
CN
China
Prior art keywords
electronic device
camera
image
processor
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880020368.0A
Other languages
English (en)
Other versions
CN110462617B (zh
Inventor
李宇镛
金明源
张东薰
姜慧真
崔珉硕
李基赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN110462617A publication Critical patent/CN110462617A/zh
Application granted granted Critical
Publication of CN110462617B publication Critical patent/CN110462617B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/45—Structures or tools for the administration of authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10—Character recognition
    • G06V30/14—Image acquisition
    • G06V30/142—Image acquisition using hand-held instruments; Constructional details of the instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/19—Sensors therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/60—Static or dynamic means for assisting the user to position a body part for biometric acquisition
    • G06V40/63—Static or dynamic means for assisting the user to position a body part for biometric acquisition by static guides
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/30—Transforming light or analogous information into electric information
    • H04N5/33—Transforming infrared radiation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了一种识别生物数据的电子装置和方法。所述电子装置包括：第一相机，其被配置为通过可见光获取图像；第二相机，其被配置为通过红外线获取图像；显示器；存储器；以及处理器，其被配置为：接收与用户的生物认证相关联的请求，响应于所述请求而识别与所述电子装置相关联的上下文信息；在上下文信息对应于第一条件时，向所述显示器提供对应于所述生物认证且由所述第一相机获取的第一图像，并使用从所述第二相机获取的生物数据来执行所述生物认证；以及在所述上下文信息对应于第二条件时，向所述显示器提供对应于所述生物认证且由所述第二相机获取的第二图像，并使用从所述第二相机获取的生物数据来执行所述生物认证。

Description

用于通过多个相机认证生物数据的电子装置和方法
技术领域
本公开涉及一种通过使用多个相机来认证生物数据(biometric data)的电子装置和方法，且更具体地说，涉及一种用于识别与电子装置相关联的上下文信息并将上下文信息的合适图像提供给显示器的电子装置和方法。
背景技术
随着信息通信技术和半导体技术的显著发展，各种各样的电子装置近来越来越受欢迎。另外，当今的此类电子装置正超出它们各自的传统领域，并因此已达到了移动融合的阶段，在其中正合并有其他类型的装置的领域。举例来说，电子装置提供相机功能以捕获并存储对象的图像或将图像记录为视频。另外，一些最近的电子装置具有不同种类的两个或更多个相机以增强用户便利性。
电子装置可使用此类相机来识别用户的生物数据并由此保证其安全性。举例来说，电子装置可通过使用红外相机来识别用户的虹膜数据并基于虹膜数据来认证用户。
发明内容
技术问题
使用识别生物数据的红外相机获取的图像可能是消色图像。举例来说，使用红外相机获得的图像可通过白色、黑色和灰色仅展示温度差，而不会准确地表达用户的固有颜色。
通过显示器提供消色图像可能会使用户的实际外观失真。此外，此图像质量较差；因此，这会导致可用性的损失，这是因为所述图像不能满足用户对高质量和高分辨率图像的需求。具体地说，在电子装置的显示器上显示基于红外线的用户生物数据会导致泄漏和再现的问题，从而可能希望显示彩色图像。
问题的解决方案
因此，通过使用能够通过可见光获取图像的另一个相机，可向显示器提供对应于生物认证的图像。但是，取决于上下文(cont ext)，使用可见光的相机可能在操作上受限。当相机的操作受限时，通过例如显示从红外相机获得的图像或某些生物认证指导，电子装置必须选择性地提供所述上下文的合适图像。
本公开的一方面提供一种电子装置，所述电子装置可识别与所述电子装置相关联的上下文信息并将所述上下文信息的合适图像提供给显示器。
本公开的另一方面提供一种电子装置，所述电子装置可防止所显示用户图像由于低照度环境中的照明模块而发生颜色失真。
根据实施例，提供一种电子装置。所述电子装置包括：第一相机，其被配置为通过可见光获取图像；第二相机，其被配置为通过红外线获取图像；显示器；存储器；以及处理器，其被配置为：接收与用户的生物认证相关联的请求，响应于所述请求而识别与所述电子装置相关联的上下文信息；在上下文信息对应于第一条件时，向所述显示器提供对应于所述生物认证且由所述第一相机获取的第一图像，并使用从所述第二相机获取的生物数据来执行所述生物认证；以及在所述上下文信息对应于第二条件时，向所述显示器提供对应于所述生物认证且由所述第二相机获取的第二图像，并使用从所述第二相机获取的生物数据来执行所述生物认证。
根据另一实施例，提供一种在电子装置处识别生物数据的方法，所述电子装置包括被配置为通过可见光获取图像的第一相机和被配置为通过红外线获取图像的第二相机。所述方法包括：接收与用户的生物认证相关联的请求；响应于所述请求而识别与所述电子装置相关联的上下文信息；在上下文信息对应于第一条件时，向所述显示器提供对应于所述生物认证且由所述第一相机获取的第一图像，并使用从所述第二相机获取的生物数据来执行所述生物认证；以及在所述上下文信息对应于第二条件时，向所述显示器提供对应于所述生物认证且由所述第二相机获取的第二图像，并使用从所述第二相机获取的生物数据来执行所述生物认证。
发明的有益效果
根据本公开的另一方面，取决于与种电子装置相关联的上下文信息，所述电子装置可为显示器提供图像，所述图像对应于生物认证，且通过使用能够通过可见光获取图像的第一相机和来能够通过红外线获取图像的第二相机中的一个来获取。
根据本公开的另一方面，一种电子装置可至少基于上下文信息而校正待提供的所述图像的颜色的至少一部分。
附图说明
通过以下结合附图而进行的描述，可更清楚了解本公开的某些实施例的上述和其他方面、特征以及优点，在附图中：
图1是根据实施例的包括电子装置的网络环境的框图；
图2是根据实施例的电子装置的框图；
图3是根据实施例的编程模块的框图；
图4是根据实施例的电子装置的框图；
图5是根据实施例的电子装置的图示；
图6是根据实施例的识别生物数据的方法的流程图；
图7是根据实施例的图6中的操作的方法的流程图；
图8是根据实施例的低照度环境中的电子装置的图示；
图9、10和11是根据实施例的通过电子装置校正通过显示器提供的图像的颜色的方法的图示；以及
图12是根据实施例的电子装置和至少一个外部电子装置的图示。
具体实施方式
在下文中，参考附图描述本公开的各种实施例。然而，应理解，并不意图将本公开限制于本文中公开的特定形式；相反，本公开旨在被解释为涵盖本公开的各种修改、等效物和/或替代物。在附图的描述中，类似的附图标记可用以表示类似的元件。
如本文中所使用，表达“具有”、“可具有”、“包括”和“可包括”表示对应特征(例如，数字、功能、操作或例如部件的元件)的存在，但不排除一个或多个额外特征。
在本公开中，表达“A或B”，“A和/或B中的至少一个”以及“A和/或B中的一个或多个”可包括所列项目的所有可能组合。举例来说，“A或B”、“A和B中的至少一个”和“A或B中的至少一个”是指(1)包括至少一个A，(2)包括至少一个B和(3)包括至少一个A以及至少一个B。
本公开中使用的表达“第一”和“第二”可使用各种部件，而不管顺序或重要性，并用以在不限制部件的情况下将部件与另一部件区分开。举例来说，第一用户装置和第二用户装置指示不同的用户装置，但都是用户装置。举例来说，在不脱离本公开的范围和精神的情况下，第一元件可被称作第二元件，且类似地，第二元件也可被称作第一元件。
应当理解，当元件(例如，第一元件)被称作(操作性地或通信地)“连接”或“耦接”到另一元件(例如，第二元件)时，所述元件可直接连接或耦接到所述另一元件，或又一元件(例如，第三元件)可以内插于所述元件与另一元件之间。对比之下，可理解，当元件(例如，第一元件)被称作“直接连接”或“直接耦接”到另一元件(例如，第二元件)时，在它们之间没有内插的元件(例如，第三元件)。
根据情形，在本公开中使用的表达“被配置为”可与例如表达“适合于”、“有能力”、“被设计为”、“适用于”、“实现来”和“能够”互换使用。表达“被配置为”可能不一定意味着在硬件上“专门被设计为”。可选地，在一些情形下，表达“被配置为…的装置”可指示所述装置与其他装置或部件一起“能够”。举例来说，“适用于(被配置为)执行A、B和C的处理器”可指示用于仅执行对应操作的专用处理器(例如，嵌入式处理器)，或可通过执行存储于存储器装置中的一个或多个软件程序来执行对应操作的通用处理器(例如，中央处理单元(CPU)或应用处理器(AP))。
本公开中使用的术语仅用以描述特定实施例，并不旨在限制本公开。如本文中使用，除非上下文明确地另有指示，否则单数形式还可包括复数形式。除非另外定义，否则本文使用的所有术语与本公开所属领域的技术人员通常理解的那些术语具有相同的含义。诸如在常用词典中所定义的术语的术语应当被解释为具有等同于相关技术领域中的上下文含义的含义，并且除非本描述中清楚地定义，否则不意图被解释为具有空想的或过于正式的含义。在一些状况下，即使如在本公开中定义的术语也可能并不意图被解释为排除本公开的实施方案。
在本公开中，电子装置可是包括通信功能的装置。举例来说，电子装置可是智能电话机、平板个人计算机(PC)、移动电话机、视频电话机、电子(电子书)阅读器、台式PC、膝上型PC、上网本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)，运动图像专家组(MPEG)音频层3(MP3)播放器、便携式医疗装置、数码相机或可穿戴装置(例如，诸如电子眼镜的头戴式装置(HMD)、电子服装、电子手镯、电子项链、电子配件、电子纹身、智能镜子或智能手表)。
根据实施例，电子装置可是包括通信功能的智能家用电器。举例来说、电子装置可是TV、数字视频盘(DVD)播放器、音频设备、冰箱、空调、真空吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、电视盒(例如，三星AppleGoogle TVTM等)、游戏控制台、电子词典、电子钥匙、摄录机或电子相框。
根据实施例，电子装置可包括以下各项中的至少一个：各种医疗装置(例如，各种便携式医疗测量装置(例如，血糖监测装置、心率监测装置、血压测量装置、温度计等)、磁共振血管造影(MRA)装置、磁共振成像(MRI)装置、计算机断层扫描(CT)机和超声波机器)、导航装置、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、车辆信息娱乐装置、船舶电子装置(例如，船舶导航装置和陀螺罗盘)、航空电子装置、安全装置、汽车头单元、用于家庭或工业的机器人、银行中的自动柜员机(ATM)、商店中的销售点(POS)装置或物联网(I oT)装置(例如，灯泡、各种传感器、电表或燃气表、洒水装置、火灾报警器、恒温器、街灯、烤面包机、体育用品、热水箱、加热器、锅炉等)。
根据实施例，电子装置可是具有通信功能的的建筑物或大厦的一部分或家具、电子板、电子签名接收装置、投影仪或各种测量仪器(例如，水表、电表、燃气表、测波仪等)。本文中公开的电子装置可以是上文提及的装置中的一个或其任意组合。
在下文中，可参考附图描述根据实施例的电子装置。如本文所使用，术语“用户”可指使用电子装置的人，或可指使用电子装置的装置(例如，人工智能电子装置)。
图1是根据实施例的包括电子装置101的网络环境100的框图。
参考图1，在网络环境100中，电子装置101包括总线110、处理器120、存储器130、输入/输出接口150、显示器160和通信接口170。电子装置101可省略所述部件中的至少一个或还包括另一部件。
总线110可以是连接上述部件并且在上述部件之间发送通信(例如，控制消息)的电路。
处理器120可包括CPU、AP和通信处理器(CP)中的一个或多个。举例来说，处理器120可控制电子装置101的至少一个部件和/或执行与通信或数据处理有关的计算。
存储器130可包括易失性和/或非易失性存储器。举例来说，存储器130可存储与电子装置101的至少一个部件相关的命令或数据。根据实施例，存储器可存储软件和/或程序140。举例来说，程序140可包括内核141、中间件143、应用程序编程接口(API)145以及应用程序147等。内核141、中间件143或API 145的至少一个部分可定义为操作系统(OS)。
内核141控制或管理用于执行由剩余其它程序(例如，中间件143、API145或应用程序147)实施的操作或功能的系统资源(例如，总线110、处理器120或存储器130)。另外，内核141提供用于从中间件143、API 145或应用程序147访问电子装置101的个别部件以控制或管理所述部件的接口。
中间件143执行允许API 145或应用程序147与内核141通信以交换数据的中继功能。另外，在从应用程序147接收的操作请求中，中间件143通过使用向应用程序147指派能够使用电子装置101的系统资源(例如，总线110、处理器120、存储器130等)的优先级的方法来执行用于所述操作请求的控制(例如，调度或负载平衡)。
API 145是应用程序147能够控制内核141或中间件142所提供的功能所借助的接口，并包括例如用于文件控制、窗口控制、图像处理或字符控制的至少一个接口或功能(例如，命令)。
输入/输出接口150可以是用以将由用户或另一外部装置输入的命令或数据发送到电子装置101的另一部件的接口。另外，输入/输出接口150可将从电子装置101的另一部件接收的指令或数据输出到用户或另一外部装置。
显示器160可包括例如液晶显示器(LCD)、发光二极管(LED)、有机LED(OLED)、微机电系统(MEMS)显示器或电子纸显示器。显示器160可向用户显示例如各种内容(例如，文本、图像、视频、图标、符号等)。显示器160可包括触摸屏，并接收使用用户身体的一部分的触摸输入、手势输入、接近输入或悬停输入。
通信接口170可例如在电子装置101与外部装置(例如，第一外部装置102、第二外部装置104或服务器106)之间建立通信。举例来说，通信接口170可通过无线通信或有线通信连接到网络162，并可与第二外部装置104或服务器106通信。
无线通信可将长期演进(LTE)、LTE高级(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)、全球移动通信系统(GSM)等中的至少一个用作蜂窝通信协议。近程通信164可包括例如无线保真(WiFi)、蓝牙(BT)、近场通信(NFC)或全球导航卫星系统(GNSS)等等中的至少一个。
GNSS可包括例如GPS、全球导航卫星系统(格洛纳斯)、北斗导航卫星系统(北斗)和欧洲基于全球卫星的导航系统(伽利略)中的至少一个。在下文中，“GPS”可与“GNSS”互换使用。有线通信可包括例如通用串行总线(USB)、高清多媒体接口(HDMI)、推荐标准-232(RS-232)、普通老式电话服务(POTS)等中的至少一个。网络162可包括电信网络，例如计算机网络(例如，局域网(LAN)或广域网(WAN))、互联网或电话网络中的至少一个。
第一外部装置102和第二外部装置104中的每一个可以是与电子装置101相同或不同类型的装置。根据本公开的实施例，服务器106可包括一组或多组服务器。由电子装置101进行的执行的至少一部分可由第一外部装置102、第二外部装置104或服务器106中的一个或多个运行。如果电子装置101自动运行功能或服务，那么电子装置101可请求通过第一外部装置102、第二外部装置104或服务器106运行至少一个功能。对于上述内容，举例来说，可使用云计算技术、分布式计算技术或客户端-服务器计算技术。
图2是根据实施例的电子装置201的框图。
参考图2，电子装置201可例如对图1中所说明的电子装置101的全部或部分进行配置。电子装置201包括一个或多个处理器(例如AP)210、通信模块220、订户识别模块(SIM)224、存储器230、传感器模块240、输入装置250、显示器260、接口270、音频模块280、相机模块291、电力管理模块295、电池296、指示器297和电机298。
AP 210操作OS或应用程序，以便控制连接到AP 210的多个硬件或软件组成部件并执行包括多媒体数据的各种数据处理和计算。AP 210可通过例如片上系统(SoC)来实现。根据本公开的实施例，AP 210还可包括图形处理单元(GPU)和/或图像信号处理器(ISP)。AP210还可包括图2中说明的部件的至少一个部分(例如，蜂窝模块221)。AP 210可加载从至少一个其他部件(例如，非易失性存储器)接收到的命令或数据，并将各种数据存储于非易失性存储器中。
通信模块220可包括与图1的通信接口170相同或相似的部件。通信模块220例如可包括蜂窝模块221、WiFi模块223、BT模块225、GPS模块227、NFC模块228和射频(RF)模块229。
蜂窝模块221通过通信网络(例如，LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro、GSM等)提供语音、呼叫、视频呼叫、短消息服务(SMS)或互联网服务。此外，蜂窝模块221可通过使用SIM 224来区分并认证通信网络内的电子装置。根据实施例，蜂窝模块221执行可由AP 210提供的至少一些功能。举例来说，蜂窝模块221可执行至少一些多媒体控制功能。蜂窝模块221可包括CP。
WiFi模块223、BT模块225、GPS模块227和NFC模块228中的每一个可包括例如用于处理通过对应模块发送/接收的数据的处理器。虽然示出蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228，但是蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228的至少一些(例如，两个或更多个)可包括于一个集成电路(IC)或一个IC封装中。举例来说，对应于蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228的处理器中的至少一些(例如，对应于蜂窝模块221的CP和对应于WiFi模块222的WiFi处理器)可由一个SoC实施。
RF模块229发送/接收数据，例如RF信号。RF模块229可包括例如收发器、功率放大器模块(PAM)、频率滤波器、低噪声放大器(LNA)等。另外，RF模块229还可包括用于在无线通信的自由空气空间中发送/接收电波的部件，例如导体、导线等。尽管蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228共享图2中的一个RF模块229，但根据一个实施例，蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228中的至少一个可通过单独的RF模块发送/接收RF信号。
SIM 224可插入到形成于电子装置201的某一部分中的槽中。SIM 224包括唯一标识信息(例如，集成电路卡标识符(ICCID))或订户信息(例如，国际移动订户身份(IMSI))。
存储器230(例如，图1中的存储器130)可包括内部存储器232或外部存储器234。内部存储器232可包括例如以下各项中的至少一个：易失性存储器(例如，随机存取存储器(RAM)、动态RAM(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等)以及非易失性存储器(例如，只读存储器(ROM)、一次性可编程ROM(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩模型ROM、闪存ROM、非和(NAND)快闪存储器、非或(NOR)闪存存储器等)。
根据实施例，内部存储器232可以是固态驱动器(SSD)。外部存储器234还可包括闪存驱动器，例如紧凑式闪存(CF)驱动器、安全数字(SD)卡、微型SD卡、迷你SD卡、极速数字(xD)卡或存储棒等。外部存储器234可通过各种接口在功能上连接到电子装置201。电子装置201还可包括存储装置(或存储媒体)，例如硬盘驱动器。
传感器模块240测量物理量或检测电子装置201的操作状态，并将测得或检测到的信息转换为电信号。例如，传感器模块240可包括以下各项中的至少一个：手势传感器240A、陀螺仪传感器240B、压力(气压或大气压)传感器240C、磁性传感器240D、加速度传感器240E、抓握传感器240F、接近传感器240G、颜色传感器240H(例如，红绿蓝(RGB)传感器)240H、生物传感器240I、温度/湿度传感器240J、照明(例如，光)传感器240K以及紫外线(UV)传感器240M。额外或另选地，传感器模块240可包括例如电子鼻(E-nose)传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器、指纹传感器等等。传感器模块240还可包括用于控制包括于传感器模块240中的一个或多个传感器的控制电路。
输入装置250包括触摸面板252、(数字)笔传感器254、键256和超声波输入装置258。举例来说，触摸面板252可识别电容型触摸面板、电阻型触摸面板、红外型触摸面板和声波型触摸面板中的至少一个中的触摸输入。触摸面板252还可包括控制电路。在电容型触摸面板中，触摸面板252可识别接近触摸以及直接触摸。触摸面板252还包括触觉层。在此状况下，触摸面板252向用户提供触觉反应。
例如可以使用与接收用户的触摸输入的方法相同或类似的方法或使用单独的识别薄片来实现(数字)笔传感器254。键256可包括例如物理按钮、光学按键或小键盘。超声输入装置258是可通过产生超声信号以识别数据的输入装置借助电子装置201的麦克风288检测声波并可执行无线识别的装置。根据实施例，电子装置201通过使用通信模块220来从与电子装置201连接的外部装置(例如，计算机或服务器)接收用户输入。
显示器260包括面板262、全息图单元264和投影仪266。面板262可是例如LCD或有源矩阵OLED(AM-OLED)。面板262可被实现为例如是柔性的、透明的或可穿戴的。面板262可通过触摸面板252和一个模块配置。全息图装置264可通过使用光的干涉来在空中显示立体图像。投影仪266将光投射到屏幕上以显示图像。举例来说，屏幕可位于电子装置201的内部或外部。根据实施例，显示器260还可包括用于控制面板262、全息图装置264或投影仪266的控制电路。
接口270包括例如HDMI 272、USB274、光学接口276和D-超小型(D-sub)连接器278。接口270可包括于例如图1中说明的通信接口170中。另外或另选地，接口270可包括例如移动高清链接(MHL)接口、SD卡/多媒体卡(MMC)或红外数据协会(IrDA)标准接口。
音频模块280双向转换声音和电信号。音频模块280的至少一些部件可包括于例如如图1中说明的输入/输出接口150中。音频模块280处理通过例如扬声器282、接收器284、耳机286、麦克风288等输入或输出的声音信息。
相机模块291是可拍摄静态图像并录制视频的装置。根据实施例，相机模块291可包括一个或多个图像传感器(例如，前传感器或后传感器)、ISP或闪光灯(例如，LED或氙灯)。
电力管理模块295管理电子装置201的电力。电力管理模块295可包括例如电力管理集成电路(PMIC)、充电器IC或电池量表。
PMIC可安装于例如IC或SoC中。充电方法可分为有线和无线方法。充电器IC为电池充电，并防止过电压或过电流从充电器流动。根据本公开的实施例，充电器IC可包括用于有线充电方法和无线充电方法中的至少一个的充电器IC。无线充电方法可包括例如磁共振方法、磁感应方法和电磁波方法，以及可以增加用于无线充电的额外电路，例如，诸如线圈回路、谐振电路、整流器等的电路。
电池量表测量例如电池296的剩余量、充电期间的电压、电流或温度。电池296存储或产生电力，并使用所存储或产生的电力来向电子装置201供电。电池296可包括例如可再充电电池或太阳能电池。
指示器297示出电子装置201或电子装置201201的一部分(例如，AP210)的某些状态，例如启动状态、消息状态、充电状态等。电机298将电信号转换为机械振动。电子装置201可包括用于支持移动TV的处理单元(例如，GPU)。用于支持移动TV的处理单元可根据数字多媒体广播(DMB)、数字视频广播(DVB)和MediaFloTM等标准而处理例如媒体数据。
根据本公开的实施例的电子装置201的每一个元件可由一个或多个部件实施，且相关部件的名称可视电子装置的类型而改变。电子装置201可包括至少一个上述部件，可省略一些部件，或还可包括额外部件。另外，电子装置201的一些部件可组合以形成单个实体，并因此可在组合之前等效地执行对应部件的功能。
图3是根据实施例的编程模块310的框图。
参考图3，编程模块310可包括于，例如存储于电子设备101中，例如存储于如图1中说明的存储器130中。编程模块310的至少一部分可通过软件、固件、硬件和/或其中两个或更多个的组合来加以配置。编程模块310可包括以硬件和/或以在OS上驱动的各种应用程序370实施的OS，实施的硬件例如是用以控制与电子装置100相关的资源的硬件200。举例来说，所述OS可是BadaTM等等。编程模块310可包括内核320、中间件330、API 360和应用程序370。编程模块310的至少部分可预先加载在电子装置上或从第一外部装置102、第二外部装置104或服务器106等下载。
内核320可包括系统资源管理器321和/或装置驱动器323。系统资源管理器321可包括例如进程管理器、存储器管理器和文件系统管理器。系统资源管理器321可控制、分配和/或收集系统资源。装置驱动器323可包括例如显示器驱动器、相机驱动器、BT驱动器、共享存储器驱动器、USB驱动器、小键盘驱动器、WiFi驱动器和音频驱动器。另外，根据实施例，装置驱动器323可包括进程间通信(IPC)驱动器。
中间件330可包括预先实施来提供由应用程序370共同使用的功能的多个模块。另外，中间件330可通过API 360提供功能，使得应用程序370可高效地使用电子设备内的有限系统资源。举例来说，中间件330可包括以下各项中的至少一个：运行时间库335、应用程序管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电力管理器345、数据库管理器346、包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351和安全管理器352。
运行时库335可包括编译器使用以便在正在执行应用程序370之一时通过编程语言添加新功能的库模块。根据实施例，运行时库335可执行输入/输出、存储器管理和/或算术函数的功能。
应用程序管理器341可管理应用程序370中的至少一个的生命周期。窗口管理器342可管理由屏幕所使用的图形用户界面(GUI)资源。多媒体管理器343可检测用于再现各种媒体文件的格式，并通过使用适合于对应格式的编解码器来执行媒体文件的编码和/或解码。资源管理器344可管理例如源代码、存储器或应用程序370中的至少一个的存储空间等资源。
电力管理器345可在与基本输入/输出系统(BIOS)一起操作的同时管理电池和/或电力，并可提供用于操作的电力信息。数据库管理器346可管理待由应用程序370中的至少一个使用的数据库的生成、搜索和/或改变。包管理器347可管理以包文件形式分布的应用程序的安装和/或更新。
连接管理器348可管理例如WiFi或BT等无线连接。通知管理器349可不打扰用户的方式显示和/或通知例如到达消息、承诺、接近通知等事件。位置管理器350可管理电子设备的位置信息。图形管理器351可管理将被提供给用户的图形效果和/或与图形效果相关的用户界面。安全管理器352可提供用于系统安全和/或用户认证的各种安全功能。根据本公开的实施例，如果电子设备100具有电话呼叫功能，那么中间件330还可包括用于管理电子设备的语音和/或视频通信功能的电话管理器。支付管理器能够将支付信息从应用程序370中继到应用程序370或内核320。另选地，支付管理器能够在电子装置200中存储从外部装置接收的支付相关信息，或将存储于电子装置200中的信息发送到外部装置。
中间件330可通过前述内部元件模块的各种功能组合来生成和使用新的中间件模块。中间件330可提供根据OS的类型专用的模块，以提供差异化的功能。另外，中间件330可动态地移除一些现有元件和/或添加新元件。因此，中间件330可排除各种实施例中描述的一些元件，还包括其他元件，和/或用具有不同名称但执行类似功能的元件替换元件。
API 360是API编程功能集，并且可根据OS被提供为不同配置。举例来说，在或的情况下，对于每个OS平台可以提供一个API集，而在的情况下，可提供两个或更多个API集。
应用程序370可包括例如预加载的应用程序和/或第三方应用程序。应用程序370可包括以下各项中的一个或多个：主页应用程序371、拨号器应用程序372、SMS/多媒体消息服务(MMS)应用程序373、即时消息(IM)应用程序374、浏览器应用程序375、相机应用程序376、警报应用程序377、联系人应用程序378、语音拨号应用程序379、电子邮件应用程序380、日历应用程序381、媒体播放器应用程序382、专辑应用程序383、手表应用程序384、支付应用程序、医疗保健应用程序(例如，用于测量血压、运动强度等的应用程序、用于提供环境信息(例如，大气压力、湿度、温度等)等的应用程序。然而、本实施例不限于此，且应用程序370可包括任何其他类似和/或合适的应用程序。
根据本公开的实施例，应用程序370能够包括用于支持电子装置101与第一外部装置102和第二外部装置104之间的信息交换的应用程序(例如，信息交换应用程序)。信息交换应用程序能够包括用于将某些信息中继到外部装置的通知中继应用程序或用于管理外部装置的装置管理应用程序。
举例来说，通知中继应用程序能够包括用于将在电子装置的其他应用程序(例如，SMS/MMS应用程序373、电子邮件应用程序380、医疗保健应用程序、环境信息应用程序等)中创建的通知信息中继到第一外部装置102和第二外部装置104的功能。另外，通知中继应用程序能够从外部装置接收通知信息以将接收到的信息提供给用户。
装置管理应用程序能够管理(例如，安装、移除或更新)与电子装置通信的外部装置(例如，第一外部装置102和第二外部装置104)的至少一个功能。所述功能的实例是接通/关断外部装置或外部装置的一部分的功能、控制显示器的亮度(或分辨率)、在外部装置上运行的应用程序和外部装置所提供的服务等的功能。所述服务的实例是呼叫服务、消息传送服务等。
根据实施例，应用程序370能够包括应用程序(例如，移动医疗装置的健康护理应用程序等)以及第一外部装置102和第二外部装置104的指定属性。应用程序370能够包括从服务器106、第一外部装置102和第二外部装置104接收的应用程序。应用程序370能够包括预先加载的应用程序或可从服务器下载的第三方应用程序。应理解，程序模块310的部件可根据操作系统的类型而称为不同名称。
根据实施例，程序模块310的至少一部分可通过软件、固件、硬件或其两个或更多个的任何组合来实施。程序模块310的至少部分可由处理器210实施(例如，执行)。编程模块310的至少部分可包括模块、程序、例程、指令集或进程等，以便执行一个或多个功能。
在本公开中，术语“模块”是指包括硬件、软件、固件或其组合的单元。举例来说，术语“模块”可与术语“单元”、“逻辑”、“逻辑块”、“部件”、“电路”等互换。术语“模块”可指示集成部件的最小单元或一部分。术语“模块”可指示可执行一个或多个功能的最小单元或其一部分。术语“模块”可指示可机械或电子模式实施的单元。举例来说，术语“模块”可指示包括应用专用集成电路(ASIC)、现场可编程门阵列(FPGA)和可执行已知或将开发的功能的可编程逻辑装置中的至少一个的单元。
根据各种实施例的方法(例如，操作)或装置(例如，模块或功能)的至少部分可用可通过各种类型的计算机进行且例如作为编程模块的类型存储于非暂时性计算机可读存储媒体中的指令来得以实施。一个或多个处理器120可执行命令指令，由此执行功能。非暂时性计算机可读存储媒体的实例可是存储器130。
非暂时性计算机可读存储媒体的实例包括磁性媒体，例如硬盘、软盘和磁带；光学媒体，例如光盘ROM(CD-ROM)盘和DVD；磁光媒体，例如光磁盘；以及硬件装置，例如ROM、RAM、闪存存储器等。程序指令的实例包括由汇编语言创建的机器代码指令，例如编译器，以及由可在使用解释器的计算机中执行的高级编程语言创建的代码指令等。所描述硬件装置可被配置为充当一个或多个软件模块以便执行上述实施例的操作，或反之亦然。
根据各种实施例的模块或编程模块可包括一个或多个部件，移除上述部分部件或还包括新部件。可串行、并行、重复或启发方式执行由模块、编程模块或其他部件执行的操作。可任何其他次序执行，跳过或随同另外的操作来执行所述操作的一部分。
图4是根据实施例的电子装置400的框图。
参考图4，电子装置400(例如，图1中的电子装置101或图2中的电子装置201)可包括处理器410(例如，图1中的处理器120或图2中的处理器210)、第一相机420、第二相机430、显示器440(例如，图1中的显示器160或图2中的显示器260)、存储器450(例如，图1中的存储器130或图2中的存储器230)和照明模块460。在实施例中，电子装置400可省略上述元件中的至少一个，或还可包括另一元件。
处理器410可指令其他元件(例如，第一相机420、第二相机430、显示器440、存储器450和照明模块460)来进行操作。另外，处理器410可从其他元件接收指令，对接收到的指令进行解码，并根据经解码的指令而执行操作或数据处理。在实施例中，处理器410可将图像信号处理为合适的形式以便在显示器440上显示。处理器410可包括图像处理器、相机驱动器和应用处理器中的一个或多个。虽然图4示出一个处理器410控制所有元件的操作，但在一个实施例中，至少两个处理器410可控制不同的元件并处理单独的任务。
第一相机420可是通过使用可见光来获取图像的装置。根据实施例，第一相机420可包括图像传感器，诸如互补金属氧化物半导体(CMOS)传感器或电荷耦合器件(CCD)传感器。第一相机420可基于图像传感器而生成对应于生物认证的第一图像。第一图像可以是仅具有关于由成像媒体检测到的光强度的信息的原始图像。第一图像可以是由第一相机420检测到的全分辨率图像。
第二相机430可以是通过使用红外线来获取图像的装置。第二相机430可包括红外图像传感器和带通滤波器。红外图像传感器可检测捕获的图像并将其转换为电信号。第二相机430可基于红外图像传感器而生成对应于生物认证的第二图像。第二图像可以是仅具有关于由成像媒体检测的光强度的信息的原始图像。第二图像可以是由红外图像传感器检测到的全分辨率图像。
显示器440可在其上显示各种信息(例如，多媒体数据、文本数据等)。显示器440可包括面板、全息图装置和/或投影仪。面板可包括例如LCD或AM-OLED。面板可被实施为例如是柔性的、透明的或可穿戴的。面板可包括触摸面板和一个或多个模块。全息图装置可通过使用光的干涉来在空中显示立体图像。投影仪可通过将光投射到屏幕上来显示图像。例如，屏幕可定位在电子装置400的内部或外部。根据实施例，显示器440可显示对应于生物认证且由第一相机420获取的第一图像，或对应于生物认证且由第二相机430获取的第二图像。
存储器450可存储例如由第一相机420和/或第二相机430拍摄的图像作为图像文件或视频文件。另外，存储器450可预先存储针对虹膜识别而认证的虹膜特征数据。根据实施例，存储器450可存储指令，所述指令在执行中使处理器410接收与用户的生物认证相关联的请求；响应于所述请求而识别与电子装置400相关联的上下文信息；在上下文信息对应于第一条件时，向显示器440提供对应于生物认证且由第一相机420获取的第一图像，并使用从第二相机430获取的生物数据来执行生物认证；而在上下文信息对应于第二条件时，向显示器440提供对应于生物认证且由第二相机430获取的第二图像，并使用从第二相机430获取的生物数据来执行生物认证。
照明模块460可发射具有特定波长范围的光。举例来说，照明模块460可发射波长范围是850到950nm的光。在一个实施例中，照明模块460可包括带通滤波器，所述带通滤波器过滤具有特定波长范围的光以防止归因于具有红外波长范围的环境光的不正确操作。照明模块460可与红外图像传感器的输入帧同步地发射脉冲光，或可按连续波来发射光。
图5是根据实施例的电子装置500的图示。
参考图5，电子装置500可在其中包括各种电子部件，并包括用于所述保护部件的外壳。外壳可形成电子装置500的外观，包括例如前面、与前面相对的后面、以及围绕前面和后面之间形成的空间的侧面。外壳的前面的至少一部分可由显示器540形成。在实施例中，显示器540可延伸到外壳的侧面。
根据实施例，电子装置500可包括用于通过使用可见光来获取图像的第一相机510、以及用于通过使用红外光来获取图像的第二相机520。第一相机510和第二相机520可形成为使得其透镜安装在与显示器540面向的方向相同的方向上。第一相机510和第二相机520可设置为彼此相邻，以便分别获取对应于生物认证的第一图像和第二图像。
根据实施例，第一相机510与第二相机520可具有不同的焦距和/或不同的视角。举例来说，第一相机510可具有第一视角，且第二相机520可具有与第一视角不同的第二视角。举例来说，第一相机510可具有广角镜头，且第二相机520可具有长焦镜头。
根据实施例，电子装置500可包括发射具有特定波长范围的光的照明模块530。照明模块530可被配置为在与第二相机520的透镜方向相同的方向上发射光。视需要可省略照明模块530。
图6是根据实施例的识别生物数据的方法的流程图。
参考图6，在步骤610处，电子装置400的处理器410可接收与用户的生物认证相关联的请求。
用户的生物认证可指通过使用用户的生物数据(例如虹膜、指纹、静脉、面部、语音或步态)来认证用户的过程。
可从用户或另一外部电子装置接收与用户的生物认证相关联的请求。在实施例中，可通过在电子装置400中运行的特定应用程序或通过用于控制电子装置400的操作的操作策略来触发与用户的生物认证相关联的请求。
在步骤620处，电子装置400的处理器410可响应于所述请求而识别与电子装置400相关联的上下文信息。
与电子装置400相关联的上下文信息可包括例如电子装置400的周围环境、电子装置400的操作策略和电子装置400的状态中的至少一个。
根据实施例，电子装置400的处理器410可检查电子装置400周围的照度以识别电子装置400的周围环境。举例来说，处理器410可通过使用照度传感器来检查电子装置400周围的照度。处理器410可通过从至少一个相机获取图像数据并分析获取到的图像数据的过程来检查电子装置400周围的照度。
根据实施例，电子装置400的处理器410可根据操作策略(例如，安全策略)而确定是否允许使用相机。举例来说，处理器410可检查操作策略是否允许在当前状态下使用能够通过使用可见光来获取图像的第一相机420和/或使用能够通过使用红外线来获取图像的第二相机430。
根据实施例，电子装置400的处理器410可识别电子装置400的状态。举例来说，处理器410可通过使用至少一个传感器来检查所显示屏幕的显示模式或检查电子装置400的位置状态。举例来说，处理器410可通过使用加速度传感器和陀螺仪传感器中的至少一个来检查电子装置400的方向和/或移动状态。
在步骤630处，电子装置400的处理器410可识别对应于上下文信息的条件，接着基于所识别的条件而通过显示器440提供生物认证指导。
图7是图6中示出的步骤630的方法的流程图。
参考图7，在步骤710处，电子装置400的处理器410可确定上下文信息是否对应于第一条件。第一条件可包括以下条件中的至少一个：电子装置400周围的照度满足第一范围(例如，通过照度传感器获得的值超出预定阈值)，根据电子装置400的操作策略而允许使用第一相机420，以及电子装置400的显示模式是纵向模式。在实施例中，第一条件可指电子装置400的默认状态。在此状况下，如果上下文信息不满足存储于电子装置400中的至少一个约束，那么可将所述上下文信息视为指示满足第一条件。
当上下文信息对应于第一条件时，处理器410可在步骤720处向显示器440提供对应于生物认证且由第一相机420获取的第一图像。根据实施例，第一图像可显示于显示器440的至少一部分上。另外，生物认证指导可在第一图像上重叠，且用户可通过使用第一图像和生物认证指导来执行生物认证。
当上下文信息不对应于第一条件时，处理器410可在步骤730处确定上下文信息是否对应于第二条件。第二条件可包括以下条件中的至少一个：电子装置400周围的照度满足第二范围(例如，通过照度传感器获得的值未超出预定阈值)，根据电子装置400的操作策略而不允许使用第一相机420，以及电子装置400的显示模式是横向模式。
根据实施例，根据电子装置400的操作策略而不允许使用第一相机420的条件可包括第一相机420的操作受安全模块限制的状况。安全模块可基于存储存储器450或外部服务器中的操作策略来限制通过某个应用程序或其他系统调用的第一相机420的操作。当安全模块限制第一相机420的操作时，处理器410可确定上下文信息对应于第二条件。处理器410可识别在电子装置400中运行的至少一个应用程序。如果第一相机420的预览功能受到所识别应用程序限制，那么处理器410可确定上下文信息对应于第二条件。
在一个实施例中，当不能通过第一相机420来获取用户图像时(例如，当确定第一相机420的镜头在实物上被阻挡时)，即使允许使用第一相机420，处理器410也可确定上下文信息对应于第二条件。
当上下文信息对应于第二条件时，处理器410可在步骤740处向显示器440提供对应于生物认证且由第二相机430获取的第二图像。根据实施例，第二图像可显示于显示器440的至少一部分上。另外，生物认证指导可在第二图像上重叠，且用户可通过使用第二图像和生物认证指导来执行生物认证。
如果上下文信息不对应于第二条件，那么处理器410可在步骤750处向显示器440提供预定的生物认证指导。举例来说，预定的生物认证指导可包括用户接口，所述用户接口用于调整电子装置400的方向或调整用户与电子装置400之间的距离，以使得用户可执行生物认证。
在进一步确定上下文信息是否对应于第三条件之后，可提供预定的生物认证指导。举例来说，当上下文信息对应于第三条件时，处理器410可向显示器440提供预定的生物认证指导。否则(即，如果上下文信息不对应于任何条件)，那么处理器410可不向显示器440提供与生物认证相关的任何用户接口。然而，在此状况下，处理器410可控制任何其他接口(例如，扬声器或振动装置)以引起用户的生物认证。
参考图6，在向显示器440提供生物认证指导之后，电子装置400的处理器410可通过使用通过至少一个相机获取的生物数据来执行生物认证。
根据实施例，至少一个相机可包括能够通过使用红外线来获取图像的相机。举例来说，使用红外线获取的图像可含有用户的虹膜特征数据。虹膜特征数据可包括例如虹膜中的折叠、血管图案、颜色等。此外，虹膜特征数据可根据随外部亮度变化的瞳孔大小而包括以上特征的变化模式。处理器410可比较使用红外线获取的用户的虹膜特征数据与先前存储的(即，预先注册的)虹膜特征数据，并由此确认用户是否是认证的用户。
图8是根据实施例的低照度环境中的电子装置800的图示。
参考图8，电子装置800的处理器可识别与电子装置800相关联的上下文信息，尤其是与电子装置800的周围环境相关联的上下文信息。举例来说，电子装置800可检测电子装置800周围的照度，并在检测到的照度满足第一范围(例如，通过照度传感器获得的值超出预定阈值)时确定上下文信息对应于上述第一条件。相反，当检测到的照度满足第二范围(例如，通过照度传感器获得的值未超出预定阈值)时，电子装置800可确定上下文信息对应于上述第二条件。
根据实施例，当检测到的照度满足第一范围时，电子装置800可进一步确定检测到的照度是指示低照度环境、中照度环境还是高照度环境。举例来说，当电子装置800因为检测到的照度满足第一范围而向显示器提供对应于生物认证且使用第一相机获得的第一图像时，显示器上的第一图像的颜色可根据检测到的照度而变化。因此，可能需要检查电子装置800周围的照度是指示低照度环境、中照度环境还是高照度环境。
根据实施例，电子装置800可通过使用安装于电子装置800中的照度传感器来确定照度环境。举例来说，如果通过照度传感器获得的值超出预定阈值(即，满足第一范围)并且还小于第一范围内的第一特定值，那么这可指示低照度环境。如果通过照度传感器获得的值超出预定阈值并且介于第一范围内的第一特定值与第二特定值之间，那么这可指示中照度环境。如果通过照度传感器获得的值超出预定阈值且大于第一范围内的第二特定值，那么这可指示高照度环境。
在实施例中，电子装置800可通过从至少一个相机获取图像数据并分析所获取的图像数据的过程来检测电子装置800周围的照度。举例来说，基于用于自动曝光调节的测得亮度值(BV)、用于自动曝光调节的图像直方图分布和由于自动曝光调节而确定的相机参数(例如，国际标准组织(I SO)值、曝光时间)中的至少一个，电子装置800可确定电子装置800周围的照度。举例来说，如果BV值是0或更小，直方图中的较小值占很大比例，I SO值是1000或更大，且曝光时间是1/2秒或更短，那么电子装置800周围的照度可被确定为低照度环境。
图8中示出的实例示出了电子装置800周围的照度满足第一范围并还指示低照度环境的状况。举例来说，如果确定电子装置800周围的照度满足第一范围，那么电子装置800可在与第二区域820区分开的第一区域810上显示由第一相机获取的图像。另外，当照明模块发射红外波长范围内的光时，接近红外波长范围的红色可见光波长范围可一起被发射，接着被用户反射，并影响由第一相机获取的图像。具体地说，由于红色可见光波长范围对图像的影响在低照度环境中是相当大的，因此显示在第一区域810上的用户图像可能更具微红色，如由附图标记830示出。
图9到11是根据实施例的通过电子装置校正通过显示器提供的图像的颜色的方法的图示。
根据实施例，当上下文信息对应于第一条件时，电子装置400的处理器410可向显示器440提供对应于生物认证且使用第一相机420获取的第一图像。
根据实施例，电子装置400可包括照明模块460，且电子装置400的处理器410可被配置为基于照明模块460的特性来校正第一图像的至少一部分。举例来说，如果照明模块460具有发射红外波长范围内的光的特性，那么处理器410可校正所获取第一图像的红色部分的至少一部分。
根据实施例，电子装置400的处理器410可被配置为至少基于上下文信息而校正第一图像的至少一部分。举例来说，如果确定电子装置400处于低照度环境中，且如果环境红外线的强度很大，那么处理器410可校正所获取第一图像的红色部分的至少一部分。
参考图9，电子装置400的处理器410可基于所获取的上下文信息而识别环境红外线920的强度和/或电子装置与用户之间的第一距离(d1)，并接着显示合适的指导来调节照明模块460的发光强度和/或调节电子装置与用户之间的距离。
根据实施例，使用照度传感器、接近传感器、生物传感器和第二相机中的至少一个的红外线检测值，在照明模块不发射红外线的状态下，电子装置400的处理器410可识别环境红外线920(例如，在太阳的自然光内的红外线)的强度。使用面部检测算法(例如，面部大小检测)和接近传感器中的至少一个，电子装置400的处理器410可识别电子装置与用户之间的第一距离(d1)。
根据实施例，电子装置400的处理器410可执行如下的至少一个操作：基于环境红外线920的强度和/或电子装置与用户之间的第一距离(d1)而调整照明模块460的强度的操作，以及向显示器提供合适的指导来调节电子装置与用户之间的距离的操作。举例来说，处理器410可通过将照明模块460的第一发光强度910调节为第二发光强度930来发射光，或显示合适的指导来引导用户将电子装置与用户之间的第一距离(d1)调节为第二距离(d2)。
根据实施例，即使红外线920的强度很大，用户也可能位于低照度环境中。在此状况下，如果照明模块460发射具有第一发光强度910的红外线，那么从第一相机420获取的用户图像可以是微红色。因此，电子装置400的处理器410可调整照明模块460的强度或显示合适指导来调整电子装置与用户之间的距离，以便防止所显示用户图像变成微红色。
参考图10，通过使用在显示器440的至少一部分上显示的具有特定波长范围的颜色，电子装置400的处理器410可校正第一图像的至少一部分。
根据实施例，当识别出电子装置400处于低照度环境时，基于照明模块460发射的光的强度，电子装置400的处理器410可通过显示器440的至少一部分显示表示特定波长范围的颜色。举例来说，处理器410可基于施加到照明模块460的电量而识别照明模块460的发光强度1010，并通过显示器440的至少一部分显示对应于待由用户反射的某一波长范围(例如，绿色和/或蓝色波长范围)的颜色1020。从照明模块460发射的红光可能经历与从显示器440发射的绿光和/或蓝光的相消干涉。因此，由第一相机420获取的第一图像可具有均匀分布的红光、绿光和蓝光，以使得可防止显示在显示器440上的用户图像变成微红色。
参考图11，电子装置400的处理器410可被配置为基于通过选择性地过滤第一相机420的至少一些像素的值而获取的数据来校正第一图像的至少一部分。
根据实施例，第一相机420可逐像素地响应于红色(R)、绿色(G)和蓝色(B)光源(例如，拜耳传感器)生成电信号。举例来说，处理器410可基于通过选择性地过滤第一相机420的至少一些像素(例如，红色)的值而获取的数据来校正第一图像的至少一部分。
举例来说，如果照明模块460在低照度环境中发射红光，那么红色波长范围过度地入射于第一相机420的红色像素上，且因此会获取带有红色的第一图像1110。考虑到这一点，当识别出照明模块460在低照度环境中发射红光时，处理器410或第一相机420可选择性地过滤某个像素(例如，红色像素)的值。举例来说，处理器410可通过降低第一相机420的图像传感器中的红色像素的模数转换器(ADC)的增益来降低光电转换效率。根据实施例，处理器410可通过在ADC操作之后降低数字化图像数据(例如，拜耳原始图像)中的红色通道的数据来选择性地过滤红色像素的值。通过在过滤红色的情况下获得第一图像1120，处理器410可防止显示器440上显示的用户图像成为微红色。
根据实施例，电子装置400的处理器410可通过调整第一图像的至少一些像素的内插比来校正第一图像的至少一部分。举例来说，如果照明模块460在低照度环境中发射红光，那么处理器410可认为红色像素的比率可能异常高，接着在当白平衡(WB)应用于从第一相机420获取的图像时调整红色像素的比率。举例来说，如果在应用WB的状况下像素的内插比是R:G:B＝4:3:2，那么处理器410可在低照度环境中将像素的内插比调整为R:G:B＝1:3:2，以便防止显示器440上显示的用户图像变成微红色。
根据实施例，电子装置400的处理器410可控制显示器440以通过调整某一像素的当前值来校正第一图像的至少一部分。举例来说，如果照明模块460在低照度环境中发射红光，那么处理器410可认为红色像素的比率可能异常高，并接着控制显示第一图像的显示器440以根据某一比率而调整某一像素(例如，红色像素)的当前值。由此，处理器410可防止显示器440上显示的用户图像变成微红色。
图12是根据实施例的电子装置1210和至少一个外部电子装置1220的图示。
参考图12，电子装置1210可耦合到至少一个外部电子装置1220。电子装置1210可与与其连接到的至少一个外部电子装置1220共享屏幕的至少一部分。举例来说，电子装置1210可识别外部电子装置1220的属性(例如，分辨率、宽高比或显示方向)，并接着确定显示模式。举例来说，当外部电子装置1220的属性适合于横向模式时(例如，当分辨率是1920×1080时)，电子装置1210可将显示模式确定为横向模式。
根据实施例，在与至少一个外部电子装置1220共享屏幕的至少一部分的同时，电子装置1210可接收与用户的生物认证相关联的请求。接着，电子装置1210可识别与电子装置1210相关联的上下文信息(例如，显示模式)，并将对应于所识别上下文信息的生物认证指导提供给显示器。举例来说，当确定上下文信息对应于上述第三条件时(例如，当显示模式对应于横向模式时)，电子装置1210可在显示器上显示预定的生物认证指导1211。如果确定不存在对应于上下文信息的条件(例如，上述第一、第二或第三条件)，则电子装置120可不向显示器提供与生物认证相关的任何用户接口。然而，在此状况下，电子装置1210的处理器可控制另一接口(例如，扬声器或振动装置)以引起用户的生物认证。
仅提供本公开的实施例以帮助全面理解本公开，并且不暗示限制。因此，应理解，本文中描述的本公开的许多变化和修改可落入由所附权利要求书和其等效物限定的本公开的范围内。

Claims (15)

1.一种电子装置，包括：
第一相机，被配置为通过可见光获取图像；
第二相机，被配置为通过红外线获取图像；
显示器；
存储器；和
处理器，被配置为：
接收与用户的生物认证相关联的请求，
响应于所述请求而识别与所述电子装置相关联的上下文信息，
在所述上下文信息对应于第一条件时，向所述显示器提供对应于所述生物认证且由所述第一相机获取的第一图像，并使用从所述第二相机获取的生物数据来执行所述生物认证，以及
在所述上下文信息对应于第二条件时，向所述显示器提供对应于所述生物认证且由所述第二相机获取的第二图像，并使用从所述第二相机获取的生物数据来执行所述生物认证。
2.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为：
从所述生物数据识别虹膜特征数据，以及
基于所识别的虹膜特征数据与存储于所述存储器中的预先登记的虹膜特征数据的比较而执行所述生物认证。
3.根据权利要求1所述的电子装置，还包括：
照明模块，
其中所述处理器被进一步配置为基于所述照明模块的特性而校正所述第一图像的至少一部分。
4.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为至少基于所述上下文信息而校正所述第一图像的至少一部分。
5.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为通过使用在所述显示器的至少一部分上显示的具有某一波长范围的颜色来校正所述第一图像的至少一部分。
6.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为基于通过选择性地过滤所述第一相机的至少一些像素的值而获取的数据来校正所述第一图像的至少一部分。
7.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为通过调整所述第一图像的至少一些像素的内插比来校正所述第一图像的至少一部分。
8.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为控制所述显示器以通过调整某一像素的当前值来校正所述第一图像的至少一部分。
9.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为：
检测所述电子装置周围的照度，
在所检测到的照度满足第一范围时，确定所述上下文信息对应于所述第一条件，以及
在所检测到的照度满足第二范围时，确定所述上下文信息对应于所述第二条件。
10.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为：
识别正在所述电子装置中运行的至少一个应用程序，以及
在所述第一相机的预览功能受限于所识别的应用程序时，确定所述上下文信息对应于所述第二条件。
11.根据权利要求1所述的电子装置，其中所述处理器被进一步配置为：在所述上下文信息对应于第三条件时，向所述显示器提供预定的生物认证指导，并使用从所述第二相机获取的生物数据来执行所述生物认证。
12.根据权利要求11所述的电子装置，其中所述处理器被进一步配置为：
识别外部电子装置，所述电子装置与所述外部电子装置共享屏幕的至少一部分，以及
基于所述屏幕的显示模式而识别所述上下文信息。
13.一种在电子装置处识别生物数据的方法，所述电子装置包括被配置为通过可见光获取图像的第一相机和被配置为通过红外线获取图像的第二相机，所述方法包括：
接收与用户的生物认证相关联的请求；
响应于所述请求而识别与所述电子装置相关联的上下文信息；
在所述上下文信息对应于第一条件时，向所述电子装置的显示器提供对应于所述生物认证且由所述第一相机获取的第一图像，并使用从所述第二相机获取的生物数据来执行所述生物认证；以及
在所述上下文信息对应于第二条件时，向所述显示器提供对应于所述生物认证且由所述第二相机获取的第二图像，并使用从所述第二相机获取的生物数据来执行所述生物认证。
14.根据权利要求13所述的方法，还包括：
从所述生物数据识别虹膜特征数据；以及
基于所识别的虹膜特征数据与存储于存储器中的预先登记的虹膜特征数据的比较而执行所述生物认证。
15.根据权利要求13所述的方法，还包括：
基于所述电子装置的照明模块的特性而校正所述第一图像的至少一部分。
CN201880020368.0A 2017-03-24 2018-03-26 用于通过多个相机认证生物数据的电子装置和方法 Active CN110462617B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2017-0037675 2017-03-24
KR1020170037675A KR102371211B1 (ko) 2017-03-24 2017-03-24 복수의 카메라를 이용하여 생체 정보를 인증하는 방법 및 장치
PCT/KR2018/003513 WO2018174674A1 (en) 2017-03-24 2018-03-26 Electronic device and method for authenticating biometric data thorough plural cameras

Publications (2)

Publication Number Publication Date
CN110462617A true CN110462617A (zh) 2019-11-15
CN110462617B CN110462617B (zh) 2024-01-12

Family

ID=63582716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880020368.0A Active CN110462617B (zh) 2017-03-24 2018-03-26 用于通过多个相机认证生物数据的电子装置和方法

Country Status (5)

Country Link
US (1) US10467471B2 (zh)
EP (1) EP3583532A4 (zh)
KR (1) KR102371211B1 (zh)
CN (1) CN110462617B (zh)
WO (1) WO2018174674A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7210872B2 (ja) * 2017-07-19 2023-01-24 富士フイルムビジネスイノベーション株式会社 画像処理装置及び画像処理プログラム
CN108875338A (zh) * 2018-05-04 2018-11-23 北京旷视科技有限公司 解锁方法、装置和系统及存储介质
US11131117B2 (en) 2019-03-12 2021-09-28 Magna Closures Inc. Electromagnetic-based sensor with cold mirror cover
JP2021175149A (ja) * 2020-04-30 2021-11-01 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム
US11462047B1 (en) * 2021-05-05 2022-10-04 Lenovo (Singapore) Pte. Ltd. Device having a camera overlaid by display as biometric sensor
KR20230063551A (ko) * 2021-11-02 2023-05-09 삼성전자주식회사 복수의 카메라들을 이용해 얼굴 인증을 수행하는 전자 장치 및 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130222564A1 (en) * 2012-02-29 2013-08-29 Suprema Inc. Apparatus for recognizing face based on environment adaptation
US20160125221A1 (en) * 2014-10-31 2016-05-05 Samsung Electronics Co., Ltd. Method for recognizing iris and electronic device thereof
CN105913019A (zh) * 2016-04-11 2016-08-31 北京奇虎科技有限公司 虹膜识别方法及终端
CN106254682A (zh) * 2016-09-22 2016-12-21 维沃移动通信有限公司 一种拍照方法及移动终端

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6920236B2 (en) * 2001-03-26 2005-07-19 Mikos, Ltd. Dual band biometric identification system
US20090245594A1 (en) 2008-03-31 2009-10-01 General Electric Company Iris imaging and iris-based identification
JP2014078052A (ja) * 2012-10-09 2014-05-01 Sony Corp 認証装置および方法、並びにプログラム
US20150317464A1 (en) * 2014-04-30 2015-11-05 Motorola Mobility Llc Selective Infrared Filtering for Imaging-Based User Authentication and Visible Light Imaging
KR102287751B1 (ko) 2014-09-25 2021-08-09 삼성전자 주식회사 전자 장치의 홍채 인식 방법 및 장치
JP6572537B2 (ja) * 2014-12-15 2019-09-11 富士通コネクテッドテクノロジーズ株式会社 認証装置、方法及びプログラム
CN105187726B (zh) * 2015-06-17 2021-05-18 巽腾(广东)科技有限公司 一种多功能移动图像处理装置、处理方法
JP6564271B2 (ja) * 2015-08-07 2019-08-21 キヤノン株式会社 撮像装置及び画像処理方法、プログラム、並びに記憶媒体
JP6631331B2 (ja) * 2016-03-10 2020-01-15 富士通株式会社 生体認証装置、生体認証方法および生体認証プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130222564A1 (en) * 2012-02-29 2013-08-29 Suprema Inc. Apparatus for recognizing face based on environment adaptation
US20160125221A1 (en) * 2014-10-31 2016-05-05 Samsung Electronics Co., Ltd. Method for recognizing iris and electronic device thereof
CN105913019A (zh) * 2016-04-11 2016-08-31 北京奇虎科技有限公司 虹膜识别方法及终端
CN106254682A (zh) * 2016-09-22 2016-12-21 维沃移动通信有限公司 一种拍照方法及移动终端

Also Published As

Publication number Publication date
US10467471B2 (en) 2019-11-05
WO2018174674A1 (en) 2018-09-27
EP3583532A4 (en) 2020-04-15
KR102371211B1 (ko) 2022-03-07
EP3583532A1 (en) 2019-12-25
CN110462617B (zh) 2024-01-12
US20180276468A1 (en) 2018-09-27
KR20180108214A (ko) 2018-10-04

Similar Documents

Publication Publication Date Title
US11350033B2 (en) Method for controlling camera and electronic device therefor
US11604574B2 (en) Electronic device and method for electronic device displaying image
US10244177B2 (en) Method for processing image to generate relevant data based on user inputs and electronic device supporting the same
US10469742B2 (en) Apparatus and method for processing image
US11039062B2 (en) Electronic device, and method for processing image according to camera photographing environment and scene by using same
EP2958316B1 (en) Electronic device using composition information of picture and shooting method using the same
US10367978B2 (en) Camera switching method and electronic device supporting the same
CN110462617A (zh) 用于通过多个相机认证生物数据的电子装置和方法
CN107800930A (zh) 图像合成方法和支持该方法的电子设备
KR102547104B1 (ko) 전자 장치 및 복수의 영상을 처리하는 방법
KR102469426B1 (ko) 이미지 처리 장치 및 이의 동작 방법
CN107409180A (zh) 具有相机模块的电子装置和用于电子装置的图像处理方法
CN108392182A (zh) 提供皮肤信息的方法和支持所述方法的电子设备
KR102149448B1 (ko) 이미지를 처리하기 위한 전자 장치 및 방법
KR20170097860A (ko) 디스플레이를 이용하여 이미지를 촬영하는 전자 장치 및 이미지 촬영 방법
US20160133227A1 (en) Method for content adaptation based on ambient environment of electronic device and electronic device thereof
US10200705B2 (en) Electronic device and operating method thereof
CN109661804A (zh) 包括虹膜识别传感器的电子设备和操作电子设备的方法
KR102489279B1 (ko) 이미지 처리장치 및 방법
WO2019071623A1 (zh) 一种拍摄方法以及电子装置
US20180033463A1 (en) Electronic device and operation method thereof
US10198828B2 (en) Image processing method and electronic device supporting the same
CN107682619A (zh) 用于处理图像的方法和支持该方法的电子设备
US20170111569A1 (en) Face detection method and electronic device for supporting the same
KR102317624B1 (ko) 전자 장치 및 그의 이미지 처리 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant