CN108141544B - 面部检测方法以及支持该方法的电子设备 - Google Patents

面部检测方法以及支持该方法的电子设备 Download PDF

Info

Publication number
CN108141544B
CN108141544B CN201680060984.XA CN201680060984A CN108141544B CN 108141544 B CN108141544 B CN 108141544B CN 201680060984 A CN201680060984 A CN 201680060984A CN 108141544 B CN108141544 B CN 108141544B
Authority
CN
China
Prior art keywords
image
electronic device
specified shape
exposure
exposure configuration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201680060984.XA
Other languages
English (en)
Other versions
CN108141544A (zh
Inventor
金宗宣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108141544A publication Critical patent/CN108141544A/zh
Application granted granted Critical
Publication of CN108141544B publication Critical patent/CN108141544B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/162Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/147Details of sensors, e.g. sensor lenses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993Evaluation of the quality of the acquired pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/164Detection; Localisation; Normalisation using holistic features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/71Circuitry for evaluating the brightness variation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/72Combination of two or more compensation controls
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time

Abstract

提供了一种用于获得对象的图像的方法和装置。使用第一曝光配置来获得对象的图像。基于图像的亮度信息来确定指定形状是否在图像中。当指定形状在图像中时,将第一曝光配置改变为第二曝光配置。

Description

面部检测方法以及支持该方法的电子设备
技术领域
本公开总体上涉及面部检测方法以及支持该面部检测方法的电子设备,并且更具体地,涉及利用曝光配置补偿的面部检测方法以及支持该面部检测方法的电子设备。
背景技术
用于使用它们的图像传感器来拍摄对象的电子设备(例如,数码相机、数码摄像机或智能电话)被广泛使用。这样的电子设备可以执行将人的面部与背景或物体区分开的面部检测功能,以便更清楚地拍摄人的面部。
发明内容
技术问题
然而,在逆光条件下人的面部形状未清楚地示出,这使得传统电子设备难以在这种条件下检测面部。
技术方案
根据本公开的一方面,提供了一种电子设备,其包括拍摄模块,该拍摄模块被配置为使用第一曝光配置来获得对象的图像。该电子设备还包括处理器,该处理器被配置为基于图像的亮度信息来确定指定形状是否在图像中,并且当指定形状在图像中时将第一曝光配置改变为第二曝光配置。
根据本公开的另一方面,提供了一种用于获得对象的图像的电子设备。该电子设备包括被配置为存储图像的存储器和被配置为输出图像的预览图像的显示器。该电子设备还包括处理器,该处理器被配置为:如果接收到用于图像拍摄命令的用户输入,则将图像存储在存储器中;并且基于图像的亮度信息来确定指定形状是否在图像中。该处理器还被配置为:当指定形状在图像中时,改变电子设备的拍摄模块的曝光配置。
根据本公开的另一方面,提供了一种电子设备的面部检测方法。使用第一曝光配置来获得对象的图像。基于图像的亮度信息来确定指定形状是否在图像中。当指定形状在图像中时,将第一曝光配置改变为第二曝光配置。
有益效果
已经做出了本公开以至少解决上述问题和/或缺点,并且至少提供以下描述的优点。因此,本公开的一个方面提供了一种面部检测方法以及用于支持该面部检测方法的电子设备,该面部检测方法被配置为如果在图像中检测到指定形状则改变曝光配置。
附图说明
根据以下结合附图给出的详细描述,本公开的以上及其他方面、特征和优点将更加显然,在附图中:
图1是示出了根据本公开的实施例的与面部检测相关联的电子设备的配置的框图;
图2a是示出了根据本公开的实施例的安装了面部检测功能的相机的侧视图的图;
图2b是示出了根据本公开的实施例的安装了面部检测功能的相机的后视图的图;
图3a是示出了根据本公开的实施例的安装了面部检测功能的智能电话的侧视图的图;
图3b是示出了根据本公开的实施例的安装了面部检测功能的智能电话的后视图的图;
图4是示出了根据本公开的实施例的与面部检测相关联的处理器的配置的框图;
图5是示出了根据本公开的实施例的与面部检测相关联的电子设备的操作方法的流程图;
图6是示出了根据本公开的实施例的与从图像中检测指定形状相关联的电子设备的操作方法的流程图;
图7是示出了根据本公开的实施例的与改变曝光配置相关联的电子设备的操作方法的流程图;
图8是示出了根据本公开的实施例的与使用所存储的图像数据进行面部检测相关联的电子设备的操作方法的流程图;
图9是示出了根据本公开的实施例的从图像中检测指定形状的图;
图10是示出了根据本公开的实施例的改变曝光配置并检测面部的操作的画面;
图11a是示出了根据本公开的实施例的基于指定形状中的特征点的分布状态的曝光配置的图;
图11b是示出了根据本公开的另一实施例的基于指定形状中的特征点的分布状态的曝光配置的图;
图12是示出了根据本公开的实施例的使用所存储的图像数据来检测面部的操作的画面;
图13是示出了根据本公开的实施例的其中存储了面部形状的图案的图;
图14是示出了根据本公开的实施例的网络环境中的电子设备的图;
图15是示出了根据本公开的实施例的电子设备的框图;以及
图16是示出了根据本公开的实施例的程序模块的框图。
具体实施方式
参考附图,详细地描述了本公开的实施例。虽然示出在不同的附图中,但是相同或相似的组件可以用相同或相似的附图标记来表示。可以省略对本领域公知的结构或处理的详细描述,以免混淆本公开的主题。
本文中使用的术语和词语不限于其词典含义,而仅仅用于实现对本公开的清楚一致的理解。因此,本领域技术人员应当清楚,下文中提供对本公开各实施例的描述仅用于说明目的而不用于限制本公开的目的。
应当理解的是,除非上下文中另有清楚指示,否则单数形式“一”、“一个”和“所述”包括复数指示物。因此,例如,对“组件表面”的引用包括对这样的表面中的一个或多个的引用。
本文中使用的术语“包括”、“包含”、“具有”、“可以包括”、“可以包含”以及“可以具有”指示所公开的功能、操作或要素的存在,但是不排除其他功能、操作或要素。
例如,表述“A或B”和“A和B中的至少一项”可以表示:A和B、A、或B。例如,表述“A或B”和“A和B中的至少一项”可以表示:至少一个A、至少一个B、或至少一个A和至少一个B二者。
本文使用的诸如“第1”、“第2”、“第一”、“第二”等术语可以用于修饰本公开的各种实施例中的各种不同元件,但并非意在限制所述元件。例如,“第一用户设备”和“第二用户设备”可以指示不同的用户设备,而不管顺序或重要性如何。在不脱离本公开范围的情况下,第一组件可以被称为第二组件,反之亦然。
在本公开的各种实施例中,应认识到:当将组件(例如,第一组件)称作“与另一组件(例如,第二组件)(可操作性地或通信地)耦接/被(可操作性地或通信地)耦接到”或“连接到”另一组件(例如,第二组件)时,该组件可以直接连接到该另一组件,或可以通过其他组件(例如,第三组件)连接。在本公开的各种实施例中,应认识到:当将组件(例如,第一组件)称作“直接连接到”或“直接访问”另一组件(例如,第二组件)时,在该组件(例如,第一组件)和该另一组件(例如,第二组件)之间不存在其他组件(例如,第三组件)。
如在本文中所使用的,根据情况,表述“被配置为”可以与以下各项互换使用:例如,“适用于”、“具有......的能力”、“被设计为”、“适于”、“被制作用于”和“能够”。术语“(被)配置为”并不一定意味着在硬件方面“(被)专门设计为”。相反,在一些情形下表述“(被)配置为..的设备”可以指示该设备和另一设备或一部分“能够...”。例如,表述“被配置为执行A、B和C的处理器”可以指示用于执行对应操作的专用处理器(例如,嵌入式处理器)、或者用于通过执行存储在存储设备中的至少一个软件程序来执行对应操作的通用处理器(例如,中央处理单元(CPU)或应用处理器(AP))。
在本公开的各种实施例中使用的术语用于描述本公开的特定实施例,而不旨在限制其他实施例的范围。本文使用的所有术语可以具有与本领域技术人员通常所理解的含义相同的含义。通常,词典中定义的术语应被视为具有与相关技术的语境含义相同的含义,并且除非本文中清楚地限定,否则不应该不同地对其进行理解,或将其理解为过于正式的含义。在任意情况下,即使在本说明书中定义的术语也不应被解释为排除本公开的实施例。
根据本公开各种实施例的电子设备可以实现为以下项中的至少一种:智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型PC、上网本计算机、工作站、服务器、个人数字助理(PDA)、便携式多媒体播放器(PMP)、运动图像专家组(MPEG-1或MPEG-2)音频层3(MP3)播放器、移动医疗设备、相机或可穿戴设备。可穿戴设备可以包括以下至少一种:饰品型设备(例如,手表、戒指、手环、脚环、项链、眼镜、隐形眼镜或头戴式设备(HMD))、衣料或服饰集成型设备(例如,电子服装)、身体贴附型设备(例如,皮肤贴或纹身)或生物可植入型设备(例如,可植入电路)。
在本公开的一些实施例中,电子设备可以实现为家用电器。智能家用电器可以包括以下至少一种:例如,电视(TV)、数字视频/多功能盘(DVD)播放器、音频设备、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家用自动控制面板、安全控制面板、TV盒、游戏机、电子词典、电子钥匙、录像机或电子相框。
在本公开的其他实施例中,电子设备可以实现为以下项中的至少一种:各种医疗设备(例如,各种便携医疗测量设备(例如,血糖测量设备、心率测量设备、血压测量设备、体温测量设备等)、磁共振造影(MRA)机、磁共振成像(MRI)机、计算机断层扫描(CT)机、扫描仪、超声设备等)、导航设备、全球导航卫星系统(GNSS)、事件数据记录器(EDR)、飞行数据记录器(FDR)、车载信息娱乐设备、船用电子装备(例如,导航系统、陀螺仪等)、航空装备、安全设备、车辆音响主机、工业或家用机器人、自动柜员机(ATM)、零售店的收款机(POS)设备或者物联网(IoT)设备(例如,灯泡、各种传感器、电表或燃气表、洒水设备、火警报警器、自动调温器、街灯、烤面包机、锻炼装备、热水壶、加热器、锅炉等)。
根据本公开的各种实施例,电子设备可以实现为以下项中的至少一种:家具或建筑物/结构的一部分、电子公告板、电子签名接收设备、投影仪或测量仪器(例如,水表、电表、燃气表、无线电波表等)。电子设备可以是上述设备中的一种或多种组合。根据本公开的一些实施例的电子设备可以是柔性设备。根据本公开实施例的电子设备不限于上述设备,并且可以包括根据新技术发展的新型电子设备。
在下文中,将参照附图更详细地描述根据本公开各种实施例的电子设备。本文使用的术语“用户”可以指代使用电子设备的人,或者可以指代使用电子设备的设备(例如,人工智能电子设备)。
图1是示出了根据本公开的实施例的与面部检测相关联的电子设备的配置的框图。电子设备100可以是拍摄设备,其可以捕捉或拍摄对象。例如,电子设备100可以是便携式电子设备,例如数码相机、数码摄像机或智能电话等。电子设备100可以通过拍摄来获得静止图像或视频。根据各种实施例,电子设备100可以提供诸如自动对焦功能、自动曝光功能和自定义白平衡功能之类的功能。然而,电子设备100的功能不限于此。例如,电子设备100可以提供与拍摄图像相关联的各种功能,例如放大功能、缩小功能、拍摄功能、连续拍摄功能、定时拍摄功能、闪光灯开/关功能、或者滤波器功能。因此,电子设备100的用户可以通过使用从电子设备100提供的功能设置图像拍摄条件来获得拍摄的(或捕捉的)图像。
根据各种实施例,电子设备100可以提供诸如预览图像或实时取景图像之类的图像,用于在执行拍摄功能时通过屏幕(例如,显示器170)预先显示待拍摄的图像。例如,如果设置了图像拍摄条件,则电子设备100可以提供应用了该图像拍摄条件的预览图像或实时取景图像。
参考图1,电子设备100包括拍摄模块110、存储器130、处理器150和显示器170。拍摄模块110包括:例如,镜头111,用于接收对象的图像光并将接收到的图像光成像为图像;光圈113,用于调节穿过镜头111的光量;快门115,用于执行打开和关闭光圈113的功能,使得图像传感器117被曝光于穿过镜头111的光一段时间;图像传感器117,用于接收由镜头111成像的图像作为光信号;以及内部存储器119。
镜头111可以包括例如多个光学透镜。镜头111可以接收被对象反射之后的光输入,使得图像被聚焦在图像传感器117的光敏表面上。根据一个实施例,镜头111可以基于处理器150的信号来执行变焦功能,并且可以自动调节焦点。
根据各种实施例,镜头111可以可拆卸地安装在电子设备100上。例如,如果镜头111安装在电子设备100上,则其可以支持拍摄功能。如果电子设备100不执行拍摄功能,则镜头111可以从电子设备100拆卸下来并且可以保持分离。镜头111可以具有各种形式。用户可以基于拍摄模式或拍摄目的将镜头111选择性地安装在电子设备100上。在各种实施例中,电子设备100还可以包括被配置为覆盖镜头111的镜头盖。例如,镜头盖可以允许镜头111的一个表面(例如,前表面)打开和关闭。虽然镜头111安装在电子设备100上,但是镜头盖可以阻挡光并保持电子设备100可以不拍摄图像的状态。根据各种实施例,电子设备100还可以包括单独的传感器(例如,照度传感器等),并且可以通过该单独的传感器来确定镜头盖是否被组合或者镜头盖是被打开还是关闭。指示镜头盖是否被组合或者镜头盖是被打开还是关闭的信息可以被提供给处理器150。因此,处理器150可以确定拍摄启用状态。
光圈113可以调节穿过镜头111的光量。根据各种实施例,光圈113可以以圆盘的形式来设置并且可以被设置为使得其区域基于光圈值被打开和关闭。由于光入射的路径的大小基于该区域被打开和关闭的程度而变化,因此光圈113可以以不同的方式来调整穿过镜头111的光暴露于图像传感器117的程度。例如,当光圈值较高时,该区域关闭的程度会增大。因此,入射光的量会减少。当光圈值较低时,该区域被打开的程度会增大,并且入射光的量会增加。
快门115可以执行打开和关闭光圈113的功能。例如,电子设备100可以通过打开和关闭快门115来将光暴露于图像传感器117。根据各种实施例,快门115可以通过将镜头111与图像传感器117之间打开和关闭的时间调整为更长或更短来调整穿过镜头111进入图像传感器117的光量。例如,可以基于快门115被打开和关闭的快门速度以不同方式来调整穿过镜头111的光暴露于图像传感器117的程度。
图像传感器117布置在穿过镜头111的图像光被提供为图像的位置处,并且可以执行将图像转换为电信号的功能。图像传感器117可以包括例如电荷耦合器件(CCD)图像传感器或互补金属氧化物半导体(CMOS)图像传感器。根据各种实施例,图像传感器117可以基于图像传感器117的感光度以不同的方式来调整吸收光的量。例如,当图像传感器117的感光度较高时,吸收光的量可以增加。当图像传感器117的感光度较低时,吸收光的量可以降低。
内部存储器119可以暂时存储通过拍摄模块110拍摄(或捕捉)的图像。根据一个实施例,内部存储器119可以存储在快门115被操作之前通过图像传感器117拍摄的图像。根据各种实施例,电子设备100可以将内部存储器119中存储的图像提供为预览图像或实时取景图像。在各种实施例中,电子设备100可以在内部存储器119中存储在快门115被操作之后拍摄的图像,并且可以将该图像发送到与用户的选择输入或者用户设置的信息相对应的存储器130。例如,电子设备100可以将以第一曝光配置拍摄的第一图像存储在内部存储器119中,并且可以确定将第一图像存储在与选择输入相对应的存储器130中。替代地,如果确定存储在内部存储器119中的第一图像是在逆光条件下拍摄的并且第一图像中包括指定形状(例如,Ω形状),则电子设备100可以将第一曝光配置改变为第二曝光配置以重新尝试拍摄图像,并且可以将拍摄的第二图像直接存储在存储器130中而不是内部存储器119中。在这种情况下,电子设备100可以从内部存储器119删除第一图像。
存储器130可以包括易失性存储器和/或非易失性存储器。存储器130可以存储与电子设备100的其他元件中的至少一个相关的指令或数据。根据一个实施例,存储器130可以将与面部检测相关联的功能存储为以程序形式实现的指令。因此,如果该指令被处理器150执行,则处理器150可以执行与面部检测相关联的功能。此外,存储器130可以存储通过拍摄模块110拍摄的图像,并且可以基于处理器150执行的特定指令将存储的图像输出到显示器170上。根据各种实施例,存储器130可以包括嵌入式存储器或外部存储器。
处理器150可以包括CPU、AP或通信处理器(CP)中的至少一个。处理器150可以执行与电子设备100的其他元件中的至少一个的通信和/或控制相关的操作或数据处理。
根据各种实施例,处理器150可以与镜头111、光圈113、快门115或图像传感器117电连接,并且可以控制拍摄功能。处理器150可以控制功能,例如自动对焦功能、自动曝光功能、自定义白平衡功能、放大功能、缩小功能、拍摄功能、连续拍摄功能、定时拍摄功能、闪光灯开/关功能或滤波器功能等。
根据各种实施例,处理器150可以与内部存储器119、存储器130和显示器170电连接,并且可以控制存储、发送或输出所拍摄图像的功能。例如,处理器150可以将拍摄的图像存储在内部存储器119或存储器130中,并且可以将图像输出到显示器170上。
根据各种实施例,处理器150可以控制拍摄模块110的曝光配置。处理器150可以改变光圈值、快门速度或图像传感器117的感光度中的至少一个。例如,处理器150可以控制拍摄模块110将第一曝光配置改变为第二曝光配置并拍摄图像。处理器150可以确定使用第一曝光配置拍摄的第一图像是否是在逆光条件下拍摄的图像。如果确定第一图像是在逆光条件下拍摄的,则处理器150可以确定在第一图像中是否存在指定形状。此外,如果在第一图像中存在指定形状,则处理器150可以将第一曝光配置改变为第二曝光配置。指定形状可以是例如Ω形状。处理器150可以基于是否存在指定形状来确定是否存在人的面部。下面更详细地描述处理器150的与面部检测相关联的功能。
显示器170可以包括例如液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、微机电系统(MEMS)显示器或电子纸显示器。显示器170可以向用户呈现各种内容(例如,文本、图像、视频、图标、符号等)。根据实施例,显示器170可以输出通过拍摄模块110拍摄的图像。此外,显示器170可以输出内部存储器119或存储器130中存储的图像。根据各种实施例,显示器170可以包括触摸屏,并且可以接收来自电子笔或用户身体部位的触摸、手势、接近或悬停输入。
图2a是示出了根据本公开的实施例的安装了面部检测功能的相机的侧视图的图。图2b是示出了根据本公开的实施例的安装了面部检测功能的相机的后视图的图。电子设备200可以执行与图1的电子设备100相同的功能或相似的功能。电子设备200可以实现为数码相机或数码摄像机。
参考图2a和图2b,电子设备200包括相机镜头筒210、镜头筒连接部件230和相机主体250。相机镜头筒210可以通过镜头筒连接部件230附接到相机主体250或从相机主体250拆卸下来。例如,相机镜头筒210可以以连接至少一个圆柱形部分的形式来设置。在图2a和图2b中,本公开的实施例被例示为具有被连接为一体的两个不同直径的圆柱形部分。然而,相机镜头筒210的形式不限于此。
根据各种实施例,相机镜头筒210包括光圈值改变单元211,该光圈值改变单元211可以在其外观区域中以物理形式调节光圈值。光圈值改变单元211可以是沿着相机镜头筒210形成的带状调节设备。例如,电子设备200的用户可以沿相机镜头筒210的圆周旋转光圈值改变单元211。当旋转光圈值改变单元211时,可以调节光圈215的打开和关闭程度。光圈值改变单元211可以形成在电子设备200的内侧上,而不是形成在电子设备200的圆周上。此外,光圈值改变单元211可以通过软件操作,而不是物理地(或经由硬件)操作。例如,电子设备200可以基于程序例程通过处理器256来改变光圈值改变单元211。
根据各种实施例,相机镜头筒210在其内侧包括镜头213和光圈215。镜头213和光圈215可以执行与图1的镜头111和光圈113相同或相似的功能。镜头213可以布置在相机镜头筒210的前表面中,并且可以使得从外部进入的光通过。相机镜头筒210还可以在其前表面处包括镜头盖。镜头盖可以执行保护镜头213免受外部异物影响的功能。此外,可以基于镜头盖被打开还是关闭来确定光是否进入镜头213。
根据各种实施例,相机镜头筒210可以从电子设备200中排除。在这种情况下,光圈值改变单元211、镜头213和光圈215可以被包括在电子设备200的相机主体250中。替代地,可以通过在相机主体250中包括光圈值改变单元211、镜头213和光圈215并且在相机镜头筒210中包括附加镜头,来将相机镜头筒210可拆卸地安装在相机主体250上。
镜头筒连接单元230可以形成在相机主体250的前部区域中,使得相机镜头筒210可拆卸地安装在相机主体250上。由于在镜头筒连接单元230的外周表面或内周表面上形成螺纹或螺纹杆,所以镜头筒连接单元230的螺纹或螺纹杆可以与相机镜头筒210的内周表面或外周表面上形成的螺纹杆或螺纹组合。镜头筒连接单元230的形式不限于此。例如,镜头筒连接单元230可以包括可将其组合到相机主体250的各种形式。如果光圈值改变单元211、镜头213和光圈215被包括在相机主体250中,则电子设备200可以不包括镜头筒连接单元230。
相机主体250包括取景器251、快门操作单元252、显示器253和功能按钮270。取景器251可以包括在拍摄对象时可以观看对象的光学设备。例如,用户通过取景器251使相机聚焦在对象上或者可以检查对象是否被准确地放在屏幕上。根据各种实施例,取景器251可以是电子类型的而不是光学类型的。例如,取景器251可以提供通过图像传感器255拍摄的预览图像。电子设备200可以不包括取景器251,并且可以通过显示器253提供预览图像。
快门操作单元252可以执行对快门254的打开和关闭操作。例如,如果用户推动快门操作单元252,则可以打开和关闭快门254达指定时间。根据实施例,快门操作单元252可以设置有物理按钮。快门操作单元252可以设置有在显示器253上显示的按钮对象。
显示器253可以布置在相机主体250的区域(例如,后表面)上,并且可以输出通过图像传感器255拍摄的图像。显示器253可以执行与图1中所示的显示器170相同的功能或相似的功能。
快门254、图像传感器255、处理器256和存储器257被包括在相机主体250的内部中。快门254、图像传感器255、处理器256和存储器257可以执行与图1中的快门115、图像传感器117、处理器150和存储器130相同的功能或相似的功能。此外,存储器257可以执行图1中所示的内部存储器119的功能。
功能按钮270可以执行在电子设备200中实现的功能。例如,功能按钮270可以是与各种功能相对应的电源按钮、焦点调节按钮、曝光调节按钮、变焦按钮、定时器设置按钮、闪光灯设置按钮或拍摄图像显示按钮。根据各种实施例,电子设备200可以将功能按钮270设置为物理按钮。在各种实施例中,功能按钮270可以被设置为在显示器253上显示的按钮对象。在这种情况下,电子设备200可以将显示器253的区域扩展到在功能按钮270被设置为物理按钮时所布置的区域,以提供较大屏幕。
图2a和图2b中所示的电子设备200的组件被例示为描述成像设备的组件。本公开的实施例不限于此。除了上述组件之外,电子设备200还可以包括至少一个其他组件。上述组件中的至少一个可以从电子设备200中排除。例如,电子设备200还可以包括闪光灯模块,该闪光灯模块用于在拍摄对象时发射光并且附加地获得光量。
图3a是示出了根据本公开的实施例的安装了面部检测功能的智能电话的侧视图的图。图3b是示出了根据本公开的实施例的安装了面部检测功能的智能电话的后视图的图。电子设备300可以执行与图1的电子设备100相同的功能或相似的功能。图3a和图3b中所示的电子设备300可以是便携式电子设备,例如智能电话。
参考图3a和图3b,电子设备300包括拍摄模块310、处理器330、显示器350和存储器370。拍摄模块310可以执行与图1的拍摄模块110相同的功能或相似的功能。这里,由于电子设备300被小型化以被设置为便携式设备,因此拍摄模块310可以被小型化为小于图2a和图2b中所示的电子设备200的拍摄模块。
根据各种实施例,电子设备300还包括相机框架311。相机框架311可以形成在拍摄模块310的外部,并且可以由诸如玻璃或透明塑料之类的透明材料制成,使得光进入拍摄模块310。相机框架311可以从电子设备300的外侧突出。然而,相机框架的形式不限于此。
根据各种实施例,电子设备300包括闪光灯模块390。闪光灯模块390可以在拍摄对象时发射光并且可以获得附加光量。闪光灯模块390可以被布置为与拍摄模块310相邻。在图3a和图3b中,闪光灯模块390被布置在相机框架311的外部附近。然而,闪光灯模块390不限于此。在各种实施例中,闪光灯模块390被布置在相机框架311的内部。
图4是示出了根据本公开的实施例的与面部检测相关联的处理器的配置的框图。在图4中,下面详细描述图1的处理器150的上述功能中的与面部检测相关联的功能。
参考图4,处理器150包括特征点提取单元151、检测区域确定单元153、形状检测单元155、曝光配置单元157和面部检测单元159。特征点提取单元151可以从通过图1的图像传感器117拍摄的图像中提取特征点。特征点可以包括指示图像的特征以从图像中检测、跟踪或识别对象的点。例如,特征点可以包括尽管每个对象在图像上的形式、大小或位置有所不同依然可容易地区分的点。此外,特征点可以包括尽管成像设备的视点或照明改变依然在图像上可容易地区分的点。
根据实施例,特征点提取单元151可以从图像中提取每个对象的角点或边界点作为特征点。特征点提取单元151可以通过各种特征点提取方法来提取特征点,例如尺度不变特征变换(SIFT)、加速稳健特征(SURF)、局部二值模式(LBP)和修正统计变换(MCT)。特征点提取单元151可以基于图像的亮度信息来提取特征点。例如,如果亮度值的变化水平大于指定水平,则特征点提取单元151可以提取相应点作为特征点。
如果从图像中提取出特征点,则检测区域确定单元153可以将存在特征点的区域设置为检测区域。根据实施例,检测区域确定单元153可以基于特征点在图像上的分布状态来设置检测区域。例如,如果特征点存在于指定的分离距离内,则检测区域确定单元153可以将特征点包括在一个检测区域中。偏离分离距离的特征点可以设置为不同的检测区域。另外,如果一个检测区域中包括的特征点少于指定的特征点数量,则检测区域确定单元153可以取消对相应检测区域的设置。
形状检测单元155可以确定在设置的检测区域中是否存在指定形状。根据实施例,形状检测单元155可以检测在检测区域中是否存在与人的面部形状相对应的Ω形状。例如,形状检测单元155可以确定检测区域中包括的特征点是否分布为Ω形状。
根据各种实施例,形状检测单元155可以使用确定特征点的特性的方法(例如,局部二值模式(LBP)或修正统计变换(MCT))来检测指定形状(例如,Ω形状)。形状检测单元155可以在检测区域中设置子区域,并且可以针对每个子区域对检测区域执行扫描(例如,Z字形扫描)。形状检测单元155可以转换子区域中包括的每个特征点的大小,并且可以确定在子区域中是否存在与指定形状相对应的图案。此外,形状检测单元155可以将子区域设置为尺寸逐渐变大并且可以继续进行检测。
根据各种实施例,电子设备100可以基于子区域的尺寸来转换与指定形状相对应的具有最小尺寸的图案的尺寸,并且可以将转换后的图案与特征点的图案进行比较。形状检测单元155可以扫描所有设置的检测区域。然而,如果检测到指定形状,则形状检测单元155停止扫描所设置的检测区域。此外,形状检测单元155可以将指示是否检测到指定形状的信息发送到曝光配置单元157或面部检测单元159。
曝光配置单元157可以设置光圈值、快门速度或图1中的图像传感器117的感光度中的至少一个。如果检测到指定形状,则曝光配置单元157可以改变曝光配置。根据各种实施例,曝光配置单元157可以基于指定形状中包括的特征点的分布状态(例如,特征点的数量、特征点的分布水平或者特征点的密度)以不同的方式来改变曝光配置。
根据实施例,当指定形状中包括的特征点的数量减少时,曝光配置单元157可以将曝光增加范围设置得更大。例如,曝光配置单元157可以将光圈值的减小范围设置得更大,可以将快门速度的减小范围设置得更大,或者可以将图像传感器117的感光度增加范围设置得更大。当指定形状中包括的特征点的数量增加时,曝光配置单元157可以将曝光增加范围设置得更小。例如,曝光配置单元157可以将光圈值的减小范围设置得更小,可以将快门速度的减小范围设置得更小,或者可以将图像传感器117的感光度增加范围设置得更小。如果图像的亮度值大于指定水平,则曝光配置单元157可以减少曝光而不是增加曝光。
面部检测单元159可以确定在图像上是否存在人的面部。面部检测单元159可以针对指定尺寸的每个子区域扫描图像,并且可以确定是否存在与面部相对应的图案。根据实施例,面部检测单元159可以基于在图1的存储器130中存储的面部的图像数据来确定在图像上是否存在面部。
在面部检测单元159处确定是否存在与面部相对应的图案的功能可以与在形状检测单元155处确定是否存在指定形状的功能相同或相似。例如,面部检测单元159可以将与子区域相对应的图像数据与存储器130中存储的面部的图像数据进行比较,以确定是否存在面部。在这种情况下,面部检测单元159可以将子区域设置为尺寸逐渐变大并且可以继续进行检测。面部检测单元159可以基于子区域的大小来转换存储器130中存储的面部图像数据的大小,并且可以比较转换后的面部图像数据。
根据各种实施例,处理器150还可以包括逆光确定单元,该逆光确定单元可以确定图像是否是在逆光条件下拍摄的图像。例如,逆光确定单元可以将图像分类为多个区域,并且可以将区域分类为中心区域和周边区域。此外,逆光确定单元可以针对多个区域中的每一个区域来计算亮度特性值。亮度特性值可以是以下项中的一个:多个区域中的每一个区域中的像素的亮度值被相加的亮度值总和;多个区域中的每一个区域中的像素的平均亮度值;或表示多个区域中的每一个区域中的像素的亮度值的像素亮度代表值。逆光确定单元可以比较多个区域的亮度特性值,并且可以基于比较结果来确定逆光状态。如果从周边区域中的亮度值总和减去中心区域中的亮度值总和所得的值大于或等于指定水平,则逆光确定单元可以将图像确定为在逆光条件下拍摄的图像。如果图像是在逆光条件下拍摄的图像,则处理器150可以执行上述面部检测功能。
根据本公开的实施例,处理器150包括特征点提取单元151、检测区域确定单元153、形状检测单元155、曝光配置单元157和面部检测单元159。处理器150不限于此。根据各种实施例,处理器150可以执行以存储器130中的程序形式实现的与以下单元的功能相对应的指令:特征点提取单元151、检测区域确定单元153、形状检测单元155、曝光配置单元157和面部检测单元159。
如上所述,根据各种实施例,电子设备可以包括:拍摄模块,被配置为使用第一曝光配置来获得对象的图像;以及处理器,被配置为基于图像的亮度信息来确定指定形状是否在图像中,并且当指定形状在图像中时将第一曝光配置改变为第二曝光配置。
根据各种实施例,第一曝光配置和第二曝光配置均可以包括电子设备的光圈值、快门速度和图像传感器的感光度中的至少一个。
根据各种实施例,处理器还可以被配置为基于图像的亮度信息来确定图像是否是在逆光条件下拍摄的,当图像是在逆光条件下拍摄的时,确定指定形状是否在图像中。
根据各种实施例,处理器还可以被配置为当对图像的面部检测失败时确定指定形状是否在图像中。
根据各种实施例,处理器还可以被配置为基于图像中包括的第一区域的第一亮度值与邻近第一区域的第二区域的第二亮度值的比较结果来确定指定形状是否在图像中。
根据各种实施例,处理器还可以被配置为从图像中提取至少一个特征点,并且基于该至少一个特征点的图案与对应于指定形状的图案的比较来确定指定形状是否在图像中。
根据各种实施例,处理器还可以被配置为将与图像中检测到指定形状的区域相对应的图像数据存储在与电子设备可操作地连接的存储器中。
根据各种实施例,处理器还可以被配置为基于存储器中存储的图像数据在检测到指定形状的区域中执行面部检测。
根据各种实施例,处理器还可以被配置为对使用第二曝光配置获得的第二图像执行面部检测。
根据各种实施例,指定形状可以是Ω形状。
根据各种实施例,用于获得对象的图像的电子设备可以包括:存储器,被配置为存储图像;显示器,被配置为输出图像的预览图像;以及处理器,被配置为如果接收到用于图像拍摄命令的用户输入,则将图像存储在存储器中,并且基于图像的亮度信息来确定指定形状是否在图像中。处理器还可以被配置为当指定形状在图像中时改变电子设备的拍摄模块的曝光配置。
图5是示出了根据本公开的实施例的与面部检测相关联的电子设备的操作方法的流程图。
参考图5,在步骤510中,图1的电子设备100通过使用第一曝光配置对对象进行拍摄来获得第一图像。根据各种实施例,电子设备100可以确定第一图像是否是在逆光条件下拍摄的图像。如果第一图像不是在逆光条件下拍摄的,则电子设备100可以进行下面描述的步骤520至560。
在步骤520中,电子设备100对第一图像执行面部检测。根据各种实施例,如果对第一图像的面部检测成功,则电子设备100可以省略下面描述的步骤530至560。替代地,电子设备100可以省略步骤530至550,并且可以执行步骤560。
根据各种实施例,如果对第一图像的面部检测失败,则在步骤530中,电子设备100确定在第一图像中是否存在指定形状。电子设备100可以确定在第一图像中是否存在与面部形状相对应的Ω形状。
根据各种实施例,如果在第一图像中不存在指定形状,则电子设备100可以省略下面描述的步骤540至560。如果在第一图像中存在指定形状,则在步骤540中,电子设备100将第一曝光配置改变为第二曝光配置。第二曝光配置可以是其中曝光相比于第一曝光配置相对增加的配置。例如,在第二曝光配置中,光圈值相对于第一曝光配置的光圈值相对减小,快门速度可以相对于第一曝光配置的快门速度减小,或者图1中的图像传感器117的感光度可以相对于第一曝光配置的感光度增加。
根据各种实施例,电子设备100可以基于第一图像中包括的指定形状中存在的特征点的分布状态以不同方式改变第二曝光配置。当指定形状中存在的特征点的数量减少时,电子设备100可以将第二曝光配置的曝光增加范围设置为与第一曝光配置相比更大。
根据各种实施例,电子设备100可以通过使用改变后的第二曝光配置对对象进行拍摄来获得第二图像。此外,在步骤550中,电子设备100对第二图像执行面部检测。因此,由于曝光的增加,电子设备100可以从第二图像中检测到面部。如果对第二图像的面部检测失败,则电子设备100可以将第二曝光配置改变为第三曝光配置以增加曝光。例如,如果尽管在图像中存在指定形状但面部检测失败,则电子设备100可以重复地执行步骤520至550,直到面部检测成功为止。替代地,电子设备100可以将操作520至550限制为被执行指定次数。
在步骤560中,电子设备100将与面部相对应的图像数据存储在图1的存储器130中。根据各种实施例,电子设备100可以将与第一图像中的Ω形状相对应的图像数据存储为逆光条件下的面部图像数据。此外,电子设备100可以将与第二图像中的Ω形状相对应的图像数据存储为一般条件下的面部图像数据。
根据各种实施例,电子设备100可以不执行步骤520、550和560中的至少一个。例如,电子设备100可以省略执行对拍摄了对象的图像的面部检测,可以确定指定形状是否存在,并且可以改变曝光配置。
图6是示出了根据本公开的实施例的与从图像中检测指定形状相关联的电子设备的操作方法的流程图。
参考图6,在步骤610中,图1的电子设备100从拍摄的图像中提取特征点。根据实施例,电子设备100可以提取图像中包括的每个对象的角点或边界点作为特征点。电子设备100可以基于图像的亮度信息从图像中提取特征点。例如,如果亮度值的变化水平大于特定水平,则电子设备100可以提取相应点作为特征点。
在步骤630中,电子设备100确定检测区域。根据各种实施例,如果从图像中提取出特征点,则电子设备100可以将存在特征点的区域确定为检测区域。根据实施例,如果特征点存在于指定的分离距离内,则电子设备100可以将存在特征点的区域确定为一个检测区域。
在步骤650中,电子设备100对指定形状进行检测。根据实施例,电子设备100可以确定在检测区域中是否存在指定形状(例如,Ω形状)。例如,电子设备100可以确定检测区域中包括的特征点是否分布为指定形状。电子设备100可以在针对每个子区域扫描检测区域时转换子区域中包括的每个特征点的大小,并且可以确定是否存在与指定形状相对应的图案。此外,如果针对每个子区域对检测区域的扫描结束,则电子设备100可以将子区域设置成尺寸更大,并且可以再次对指定形状进行检测。此外,电子设备100可以将子区域设置为尺寸逐渐增大,直到子区域的大小与检测区域的大小相同或相似,并且可以检测指定形状。
图7是示出了根据本公开的实施例的与改变曝光配置相关联的电子设备的操作方法的流程图。当改变曝光配置时,图1的电子设备100可以基于图像中包括的指定形状中存在的特征点的分布状态以不同方式来改变曝光配置。
参考图7,在步骤710中,电子设备100验证指定形状中的特征点的分布状态。根据实施例,电子设备100可以分析指定形状中的特征点的数量、特征点的分布水平、特征点的密度等。如果指定形状是Ω形状,则电子设备100可以验证Ω形状中的上侧(例如,与面部的眼睛、鼻子或嘴巴相对应的区域)中包括的特征点的数量。
在步骤730中,电子设备100基于特征点的分布状态来设置曝光。根据实施例,当在Ω形状中的上侧中包括的特征点的数量较低时,电子设备100可以将曝光增加范围设置得更大。例如,电子设备100可以将光圈值的减小范围设置得更大,可以将快门速度的减小范围设置得更大,或者可以将图1的图像传感器117的感光度增加范围设置得更大。当在Ω形状中的上侧中包括的特征点的数量较高时,电子设备100可以将曝光增加范围设置得更小。例如,电子设备100可以将光圈值的减小范围设置得更小,可以将快门速度的减小范围设置得更小,或者可以将图像传感器117的感光度增加范围设置得更小。
图8是示出了根据本公开的实施例的与使用所存储的图像数据进行面部检测相关联的电子设备的操作方法的流程图。如果在以逆光条件拍摄的图像中存在指定形状(例如,Ω形状),则图1的电子设备100可以基于图1的存储器130中存储的面部图像数据来执行面部检测,而不是改变曝光配置。
参考图8,在步骤810中,电子设备100通过使用第一曝光配置对对象进行拍摄来获得第一图像。在步骤820中,电子设备100对第一图像执行面部检测,并且确定面部检测是否失败。根据各种实施例,如果面部检测成功,则电子设备100可以省略下面描述的步骤830和840。
根据各种实施例,如果面部检测失败,则在步骤830中,电子设备100确定在第一图像中是否存在指定形状。电子设备100可以确定在第一图像中是否存在与人的面部形状相对应的Ω形状。如果在第一图像中不存在指定形状,则电子设备100可以省略步骤840。
根据各种实施例,如果在第一图像中存在指定形状,则在步骤840中,电子设备100基于存储器130中存储的图像数据来执行面部检测。电子设备100可以使用存储器130中存储的在逆光条件下的面部图像数据来对第一图像执行面部检测。例如,电子设备100可以计算第一图像中与指定形状相对应的图像数据和逆光条件下的面部图像数据之间的相似度。如果相似度大于或等于指定水平,则电子设备100可以将图像中与指定形状相对应的部分检测为面部。
如上所述,根据各种实施例,电子设备的面部检测方法可以包括:使用第一曝光配置获得对象的图像;基于图像的亮度信息来确定指定形状是否在图像中;以及当检测到指定形状时,将第一曝光配置改变为第二曝光配置。
根据各种实施例,改变为第二曝光配置可以包括以下操作中的至少一个:改变电子设备中包括的光圈的光圈值;改变电子设备中包括的快门的快门速度;以及改变电子设备中包括的图像传感器的感光度。
根据各种实施例,确定指定形状是否在图像中可以包括:基于图像的亮度信息来确定图像是否是在逆光条件下拍摄的,并且当图像是在逆光条件下拍摄的时确定指定形状是否在图像中。
根据各种实施例,确定指定形状是否在图像中可以包括:当图像中的面部检测失败时确定指定形状是否在图像中。
根据各种实施例,确定指定形状是否在图像中可以包括:基于图像中包括的第一区域的第一亮度值与邻近第一区域的第二区域的第二亮度值的比较结果来确定指定形状是否在图像中。
根据各种实施例,确定指定形状是否在图像中可以包括:从图像中提取至少一个特征点,并且基于该至少一个特征点的图案与对应于指定形状的图案的比较来确定指定形状是否在图像中。
根据各种实施例,面部检测方法还可以包括:将与图像中检测到指定形状的区域相对应的图像数据存储在与电子设备可操作地连接的存储器中。
根据各种实施例,面部检测方法还可以包括:基于存储器中存储的图像数据,对检测到指定形状的区域执行面部检测。
根据各种实施例,面部检测方法还可以包括:在使用第二曝光配置获得的第二图像中执行面部检测。
图9是示出了根据本公开的实施例的从图像中检测指定形状的图。
参考图9,在第一状态901中,图1的电子设备100通过使用第一曝光配置拍摄对象来获得第一图像910。此外,在第二状态903中,电子设备100沿指定方向扫描第一图像910并提取特征点931。在这种情况下,电子设备100可以将第一图像910划分为至少一个子区域911,并且可以沿指定方向顺序地扫描至少一个划分的子区域911。根据各种实施例,电子设备100可以基于第一图像910的亮度信息从第一图像910中提取特征点。
如果特征点931被提取出来,则在第三状态905中,电子设备100可以设置检测区域。根据实施例,电子设备100可以将存在于指定分离距离内的特征点931设置为一个检测区域。在图9中,本公开的实施例被例示为:电子设备100组合存在于第一图像910的上部区域中的特征点931并将该组合区域设置为第一检测区域951,组合存在于第一图像910的中心区域中的特征点931并将该组合区域设置为第二检测区域953,并且组合存在于第一图像910的下部区域中的特征点931并将该组合区域设置为第三检测区域955。
根据各种实施例,如果设置了第一至第三检测区域951、953和955,则在第四状态907中,电子设备100可以在第一至第三检测区域951、953和955中的每一个中检测指定形状。例如,电子设备100可以将第二检测区域953划分为至少一个子区域971,并且可以在沿指定方向顺序地扫描该至少一个划分的子区域971的同时对指定形状进行检测。在图9中,本公开的实施例被例示为电子设备100在第二检测区域953中检测到指定形状。本公开的实施例不限于此。例如,电子设备100可以在第一检测区域951和第三检测区域955中检测到指定形状。
图10是示出了根据本公开的实施例的改变曝光配置并检测面部的操作的画面。
参考图10,在状态1001中,图1的电子设备100通过使用第一曝光配置拍摄对象来获得第一图像1010。根据各种实施例,电子设备100可以确定第一图像1010是否是在逆光条件下拍摄的图像。电子设备100基于第一图像1010的亮度信息来确定第一图像1010是否是在逆光条件下拍摄的。
如果第一图像1010是在逆光条件下拍摄的图像,则在第二状态1003中,电子设备100从第一图像1010中检测指定形状1031(例如,Ω形状)。根据实施例,电子设备100可以从第一图像1010中提取特征点,可以分析特征点的图案,并且可以检测指定形状1031。
如果从第一图像1010中检测到指定形状1031,则电子设备100可以将第一曝光配置改变为第二曝光配置。此外,在第三状态1005中,电子设备100通过使用第二曝光配置拍摄对象来获得第二图像1050。
根据各种实施例,如果获得第二图像1050,则电子设备100可以对第二图像1050执行面部检测。此外,当在图1的显示器170上输出第二图像1050时,电子设备100可以将指定效果应用于从第二图像1050中检测到的面部区域1051。在图10中,本公开的实施例被例示为电子设备100在检测到的面部区域1051上显示具有四边形周界的对象。然而,应用于检测到的面部区域1051的效果不限于此。电子设备100可以向检测到的面部区域1051显示具有圆形或椭圆形周界的对象,并且可以以不同的方式来设置所显示的对象的颜色。
根据各种实施例,如果对对象进行拍摄的第一图像1010是预览图像或实时取景图像,则电子设备100可以连续地执行上述面部检测功能,并且可以在基于对象的运动而改变的第一图像1010上跟踪面部区域1051。另外,如果面部区域1051的位置或大小等改变,则电子设备100可以改变在面部区域1051上显示的对象的位置、大小或颜色,并且可以显示改变后的对象。
图11a是示出了根据本公开的实施例的基于指定形状中的特征点的分布状态的曝光配置的图。图11b是示出了根据本公开的实施例的基于指定形状中的特征点的分布状态的曝光配置的图。
根据各种实施例,图1的电子设备100确定使用第一曝光配置对对象进行拍摄的第一图像1110是否是在逆光条件下拍摄的图像。如果第一图像1110是在逆光条件下拍摄的图像,则电子设备100可以从第一图像1110中检测指定形状。如果从第一图像1110中检测到指定形状,则电子设备100可以将第一曝光配置改变为第二曝光配置。
根据各种实施例,当将第一曝光配置改变为第二曝光配置时,电子设备100可以基于指定形状中存在的特征点1101的分布状态(例如,特征点1101的数量、特征点1101的分布水平或特征点1101的密度等)以不同方式来改变第二曝光配置。电子设备100可以基于指定形状中的区域(例如,上侧)中存在的特征点1101的数量以不同方式来改变第二曝光配置。
如图11a所示,如果Ω形状中存在指定数量的特征点1101或更多特征点,则电子设备100改变第二曝光配置,使得曝光比第一曝光配置高第一级别。此外,如图11b所示,如果Ω形状中存在少于指定数量的特征点1101,则电子设备100改变第二曝光配置,使得曝光比第一曝光配置高第二级别。这里,第一级别可以相对低于第二级别。例如,当Ω形状中存在的特征点1101的数量较高时,电子设备100可以将曝光增加范围设置得较小。当Ω形状中存在的特征点1101的数量较低时,电子设备100可以将曝光增加范围设置得较大。因此,与图11b中的使用第二曝光配置对对象进行拍摄的第三图像1150相比,图11a中的使用第二曝光配置对对象进行拍摄的第二图像1130会相对较暗。然而,第二曝光配置的曝光增加范围不限于此。在各种实施例中,当Ω形状中存在的特征点1101的数量较高时,电子设备100可以将曝光增加范围设置得较大。
图12是示出了根据本公开的实施例的使用所存储的图像数据来检测面部的操作的画面。根据各种实施例,如果指定形状存在于在逆光条件下拍摄的图像中,则图1的电子设备100使用图1的存储器130中存储的面部图像数据来检测面部,而不是改变曝光配置。
参考图12,在第一状态1201中,电子设备100通过使用第一曝光配置拍摄对象来获得第一图像1210。此外,电子设备100对第一图像1210执行面部检测。
根据各种实施例,如果对第一图像1210的面部检测失败,则在第二状态1203中,电子设备100从第一图像1210中检测指定形状1231(例如,Ω形状)。电子设备100从第一图像1210中提取特征点,分析特征点的图案,并检测指定形状1231。
根据各种实施例,如果从第一图像1210中检测到指定形状1231,则在第三状态1205中,电子设备100可以基于存储器130中存储的面部图像数据来执行面部检测。电子设备100仅在检测到指定形状1231的区域1251中执行面部检测。例如,电子设备100可以将检测到指定形状1231的区域1251划分为至少一个子区域1253,并且可以在沿指定方向顺序地扫描该至少一个划分的子区域1253的同时执行面部检测。
根据各种实施例,电子设备100将存储器130中存储的面部图像数据中的在逆光条件下的面部图像数据与第一图像1210中与检测到指定形状1231的区域1251相对应的部分的数据进行比较。如果该面部图像数据和第一图像1210的该部分的数据之间的相似度大于或等于特定水平,则电子设备100将第一图像1210中与检测到指定形状1231的区域1251相对应的部分检测为面部区域1271。
根据各种实施例,在第四状态1207中,电子设备100将指定效果应用于图1的显示器170上输出的第一图像中的面部区域1271。在图12中,电子设备100在面部区域1271上显示具有四边形周界的对象。然而,应用于面部区域1271的效果不限于此。电子设备100可以在面部区域1271上显示具有圆形或椭圆形周界的对象,并且可以以不同的方式来设置所显示的对象的颜色。
根据各种实施例,如果对对象进行拍摄的第一图像1210是预览图像或实时取景图像,则电子设备100可以连续地执行上述面部检测功能,并且可以在基于对象的运动而改变的第一图像1210上跟踪面部区域1271。另外,如果所检测到的面部区域1271的位置或大小等改变,则电子设备100可以改变在面部区域1271上显示的对象的位置、大小或颜色,并且可以显示改变后的对象。
图13是示出了根据本公开的实施例的其中存储了面部形状的图案的图。
参考图13,图1的电子设备100将与面部形状相对应的面部图像数据存储在图1的存储器130中。根据各种实施例,如果从对对象进行拍摄的图像中检测到面部,则电子设备100将与检测到面部的区域相对应的面部图像数据存储在存储器130中。当存储面部图像数据时,电子设备100对面部的方向(例如,面部的前表面、右侧表面或左侧表面)进行分类并将其存储在存储器130中。此外,当存储面部图像数据时,电子设备100可以将面部的大小改变为与先前存储的面部图像数据相同的大小或相似的大小,并且可以将改变后的面部图像数据存储在存储器130中。电子设备100可以将面部图像数据的平均值存储在存储器130中。例如,电子设备100可以计算先前存储的面部图像数据的平均值以及将要新存储的面部图像数据的平均值,并且可以将计算出的平均值存储在存储器130中。
根据各种实施例,电子设备100对一般条件下的第一面部图像数据1310和逆光条件下的第二面部图像数据1330进行分类并将其存储在存储器130中。当使用逆光条件下的面部图像数据1330时,电子设备100验证是否存在除面部区域之外的区域1331(例如,存在于面部和肩部之间的空间),并且可以确定面部区域。
根据本公开的各种实施例,如果从对对象进行拍摄的图像中检测到指定形状,则电子设备可以通过改变曝光配置来执行逆光条件下的面部检测。
图14是示出了根据本公开的实施例的网络环境中的电子设备的图。
参考图14描述网络环境1400中的电子设备1401。电子设备1401包括总线1410、处理器1420、存储器1430、输入/输出接口1450、显示器1460和通信接口1470。在本公开的各种实施例中,可以省略上述元件中的至少一个,或可以向电子设备1401添加其他元件。
总线1410可以包括用于将上述元件1410至1470彼此连接并在上述元件之间传送通信(例如,控制消息和/或数据)的电路。
处理器1420可以包括CPU、AP或CP中的至少一个。处理器1420可以执行与电子设备1401的其他元件中的至少一个的通信和/或控制相关的操作或数据处理。
存储器1430可以包括易失性存储器和/或非易失性存储器。存储器1430可以存储与电子设备1401的其他元件中的至少一个相关的指令或数据。根据本公开的实施例,存储器1430可以存储软件和/或程序1440。程序1440包括例如内核1441、中间件1443、应用编程接口(API)1445和应用程序(或应用)1447。内核1441、中间件1443或API 1445中的至少一部分可以被称为操作系统(OS)。
内核1441可以控制或管理用于执行其他程序(例如,中间件1443、API 1445或应用程序1447)的操作或功能的系统资源(例如,总线1410、处理器1420、存储器1430等)。此外,内核1441可以提供接口,该接口允许中间件1443、API 1445或应用程序1447访问电子设备1401的各个元件以便控制或管理系统资源。
中间件1443可以起到中介的作用,使得API 1445或应用程序1447与内核1441通信并交换数据。
此外,中间件1443可以根据优先级顺序来处理从应用程序1447接收到的一个或多个任务请求。例如,中间件1443可以向至少一个应用程序1447分配使用电子设备1401的系统资源(例如,总线1410、处理器1420、存储器1430等)的优先级。例如,中间件1443可以根据向至少一个应用分配的优先级来处理一个或多个任务请求,从而对该一个或多个任务请求执行调度或负载均衡。
作为允许应用1447控制由内核1441或中间件1443提供的功能的接口,API 1445可以包括例如用于文件控制、窗口控制、图像处理、字符控制等的至少一个接口或功能(例如,指令)。
输入/输出接口1450可以用于向电子设备1401的其他元件传送从用户或其他外部设备输入的指令或数据。此外,输入/输出接口1450可以向用户或其他外部设备输出从电子设备1401的其他元件接收到的指令或数据。
显示器1460可以包括例如LCD、LED显示器、OLED显示器、MEMS显示器或电子纸显示器。显示器1460可以向用户呈现各种内容(例如,文本、图像、视频、图标、符号等)。显示器1460可以包括触摸屏,并可以接收来自电子笔或用户身体部位的触摸、手势、接近或悬停输入。
通信接口1470可以设置电子设备1401和外部设备(例如,第一外部电子设备1402、第二外部电子设备1404或服务器1406)之间的通信。例如,通信接口1470可以经由无线通信或有线通信与网络1462相连,以便与外部设备(例如,第二外部电子设备1404或服务器1406)进行通信。
无线通信可以使用以下至少一项蜂窝通信协议:例如,长期演进(LET)、LTE-高级(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)或全球移动通信系统(GSM)。无线通信可以包括例如短距离通信1464。短距离通信可以包括无线保真(Wi-Fi)、蓝牙、近场通信(NFC)、磁条传输(MST)或GNSS中的至少一个。
MST可以根据传输数据产生脉冲,所述脉冲可以产生电磁信号。电子设备1401可以将电磁信号发送给诸如POS设备的读取器设备。POS设备可以通过使用MST读取器来检测磁信号,并且通过将检测到的电磁信号转换为电信号来恢复数据。
根据使用区域或带宽,GNSS可以包括例如以下至少一项:全球定位系统(GPS)、全球导航卫星系统(GLONASS)、北斗导航卫星系统(下文中,“北斗”)或伽利略(欧洲全球卫星导航系统)。在下文中,术语“GPS”和术语“GNSS”可以互换使用。有线通信可以包括以下各项中的至少一个:通用串行总线(USB)、高清多媒体接口(HDMI)、推荐标准832(RS-232)、普通老式电话业务(POTS)等。网络1462可以包括电信网络中的至少一个,例如,计算机网络(例如,局域网(LAN)或广域网(WAN))、互联网或电话网络。
第一外部电子设备1402和第二外部电子设备1404的类型可以与电子设备1401的类型相同或不同。根据本公开的实施例,服务器1406可以包括具有一个或多个服务器的组。在电子设备1401中执行的操作的一部分或全部可以在一个或多个其他电子设备(例如,第一外部电子设备1402、第二外部电子设备1404或服务器1406)中执行。当电子设备1401应当自动地或者响应于请求而执行特定功能或服务时,代替其自身执行所述功能或服务或者在其自身执行所述功能或服务之外,电子设备1401可以向另一设备(例如,第一外部电子设备1402、第二外部电子设备1404或服务器1406)请求与所述功能或服务相关的至少一部分功能。该另一电子设备(例如,第一外部电子设备1402、第二外部电子设备1404或服务器1406)可以执行所请求的功能或附加功能,并可以向电子设备1401传输执行的结果。电子设备1401可以使用接收到的结果本身,或者附加地处理接收到的结果,以提供所请求的功能或服务。为此目的,可以使用例如云计算技术、分布式计算技术或客户端-服务器计算技术。
图15是示出了根据本公开的实施例的电子设备的配置的框图。
参考图15,电子设备1501可以包括例如图14的电子设备1401的整体或一部分。电子设备1501可以包括一个或多个处理器1510(例如,AP)、通信模块1520、订户识别模块(SIM)1529、存储器1530、安全模块1536、传感器模块1540、输入设备1550、显示器1560、接口1570、音频模块1580、相机模块1591、电力管理模块1595、电池1596、指示器1597和电机1598。
处理器1510可以驱动例如OS或应用程序以控制连接到处理器1510的多个硬件或软件组件,并且可以处理和计算多种数据。例如,处理器1510可以用片上系统(SoC)来实现。根据本公开的实施例,处理器1510可以包括图形处理单元(GPU)和/或图像信号处理器。处理器1510可以包括图15中所示的组件中的至少一些组件(例如,蜂窝模块)。处理器1510可以将从至少一个其他组件(例如,非易失性存储器)接收的命令或数据加载到易失性存储器中以处理数据,并且将各种数据存储在非易失性存储器中。
通信模块1520可以具有与图14的通信接口1470相同或相似的配置。通信模块1520包括例如蜂窝模块1521、Wi-Fi模块1522、BT模块1523、GNSS模块1524(例如,GPS模块、Glonass模块、北斗模块或伽利略模块)、NFC模块1525、MST模块1526和射频(RF)模块1527。
蜂窝模块1521可以通过通信网络来提供例如语音呼叫服务、视频呼叫服务、文本消息服务或互联网服务等。根据本公开的实施例,蜂窝模块1521可以使用SIM 1529(例如,SIM卡)在通信网络中识别和认证电子设备1501。根据本公开的实施例,蜂窝模块1521可以执行可由处理器1510提供的功能中的至少一部分。根据本公开的实施例,蜂窝模块1521可以包括CP。
Wi-Fi模块1522、BT模块1523、GNSS模块1524、NFC模块1525或MST模块1526可以包括例如用于对通过对应模块发送和接收的数据进行处理的处理器。根据本公开的各种实施例,蜂窝模块1521、Wi-Fi模块1522、BT模块1523、GNSS模块1524、NFC模块1525或MST模块1526中的至少一些(例如,两个或更多个)可以被包括在一个集成电路(IC)或一个IC封装中。
RF模块1527可以发送和接收例如通信信号(例如,RF信号)。尽管未示出,但是RF模块1527可以包括例如收发机、功率放大模块(PAM)、频率滤波器或低噪声放大器(LNA)或天线等。根据本公开的另一实施例,蜂窝模块1521、Wi-Fi模块1522、BT模块1523、GNSS模块1524、NFC模块1525或MST模块1526中的至少一个可以通过单独的RF模块来发送和接收RF信号。
SIM 1529可以包括例如包含SIM和/或嵌入式SIM的卡。SIM 1529可以包括唯一标识信息(例如,集成电路卡标识符(ICCID))或者订户信息(例如,国际移动订户身份(IMSI))。
存储器1530(例如,图14的存储器1430)包括例如嵌入式存储器1532和外部存储器1534。嵌入式存储器1532可以包括以下至少一项:例如,易失性存储器(例如,动态随机存取存储器(RAM)(DRAM)、静态RAM(SRAM)、同步动态DRAM(SDRAM)等)或非易失性存储器(例如,一次性可编程只读存储器(ROM)(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩模ROM、闪存ROM、闪存(例如,NAND闪存或NOR闪存等)、硬盘驱动器或固态驱动器(SSD))。
外部存储器1534可以包括闪存驱动器,例如紧凑型闪存(CF)、安全数字(SD)、微型SD、迷你型SD、极限数字(xD)、多媒体卡(MMC)或存储棒等。外部存储器1534可以通过各种接口与电子设备1501操作地和/或物理地相连。
安全模块1536可以是与存储器1530相比具有相对较高安全等级的模块,并且可以是存储安全数据且确保受保护执行环境的电路。安全模块1536可以用单独的电路来实现,并且可以包括单独的处理器。安全模块1536可以包括例如存在于可移除智能芯片或可移除SD卡中或嵌入在电子设备1501的固定芯片中的嵌入式安全元件(eSE)。此外,安全模块1536可以由与电子设备1501的OS不同的OS来驱动。例如,安全模块1536可以基于java卡开放平台(JCOP)OS来操作。
传感器模块1540可以测量例如物理量或可以检测电子设备1501的操作状态,并将测量或检测到的信息转换为电信号。传感器模块1540包括以下至少一项:例如,手势传感器1540A、陀螺仪传感器1540B、大气压力传感器1540C、磁性传感器1540D、加速度传感器1540E、握持传感器1540F、接近传感器1540G、颜色传感器1540H(例如,红、绿、蓝(RGB)传感器)、生物特征传感器1540I、温度/湿度传感器1540J、照度传感器1540K或紫外(UV)传感器1540M。附加地或备选地,传感器模块1540还可以包括例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器和/或指纹传感器等。传感器模块1540还可以包括用于控制其中包括的至少一个或多个传感器的控制电路。根据本公开的各种实施例,电子设备1501还可以包括被配置为控制传感器模块1540的处理器,作为处理器1510的一部分或者独立于处理器1510。当处理器1510处于睡眠状态时,电子设备1501可以控制传感器模块1540。
输入设备1550包括例如触摸面板1552、(数字)笔传感器1554、按键1556和超声输入设备1558。触摸面板1552可以使用例如电容型、电阻型、红外型或超声型中的至少一种。此外,触摸面板1552还可以包括控制电路。触摸面板1552还可以包括触觉层,并可以向用户提供触觉反应。
(数字)笔传感器1554可以是例如触摸面板1552的一部分,或可以包括用于识别的单独片。按键1556可以包括例如物理按钮、光学按键或键区。超声输入设备1558可以允许电子设备1501使用麦克风1588检测声波以及通过产生超声信号的输入工具来验证数据。
显示器1560(例如,图14的显示器1460)包括例如面板1562、全息设备1564和投影仪1566。面板1562可以包括与显示器1460相同或相似的配置。面板1562可以被实现为例如柔性、透明或可穿戴的。面板1562和触摸面板1552可以集成到一个模块中。全息设备1564可以使用光的干涉在空间中示出立体图像。投影仪1566可以将光投影到屏幕上以便显示图像。屏幕可以位于例如电子设备1501内部或外部。根据本公开的实施例,显示器1560还可以包括用于控制面板1562、全息设备1564或投影仪1566的控制电路。
接口1570包括例如HDMI 1572、USB 1574、光学接口1576或D-超小型接口1578。例如,接口1570可以被包括在图14所示的通信接口1470中。附加地或者备选地,接口1 570可以包括例如移动高清链路(MHL)接口、SD卡/MMC接口或者红外数据协会(IrDA)标准接口。
音频模块1580可以双向地转换声音和电信号。音频模块1580的至少一部分组件可以被包括在例如图14所示的输入和输出接口1450(或用户接口)中。音频模块1580可以处理通过例如扬声器1582、接收器1584、耳机1586或麦克风1588输入或输出的声音信息。
相机模块1591可以捕获静态图像和运动图像。根据本公开的实施例,相机模块1591可以包括一个或多个图像传感器(例如,前置传感器或后置传感器)、镜头、ISP或闪光灯(例如,LED或氙灯)。
电力管理模块1595可以管理例如电子设备1501的电力。根据本发明的实施例,电力管理模块1595可以包括电力管理集成电路(PMIC)、充电器IC或电池量表。PMIC可以具有有线充电方法和/或无线充电方法。无线充电方法可以包括例如磁共振方法、磁感应方法或电磁方法等。还可以提供用于无线充电的附加电路,例如线圈回路、谐振电路或整流器等。电池量表可以测量例如电池1596的剩余容量以及对电池1596充电时电池的电压、电流或温度。电池1596可以包括例如可再充电电池或太阳能电池。
指示器1597可以显示电子设备1501或其一部分(例如,处理器1510)的具体状态,例如引导状态、消息状态或充电状态。电机1598可以将电信号转换为机械振动,并可以产生振动或触觉效果。尽管未示出,但是电子设备1501可以包括用于支持移动TV的处理单元(例如,GPU)。用于支持移动TV的处理单元可以根据诸如数字多媒体广播(DMB)标准、数字视频广播(DVB)标准、MediaFlo标准等标准来处理媒体数据。
根据本公开各种实施例的电子设备的上述元件中的每个元件可以配置有一个或多个组件,并且对应元件的名称可以根据电子设备的类型而改变。电子设备可以包括上述元件中的至少一个元件,可以从电子设备中省略一些元件,或可以在电子设备中进一步包括其他附加元件。此外,电子设备中的一些元件可以彼此组合以形成一个实体,从而可以按照与组合之前相同的方式执行对应元件的功能。
图16是示出了根据本公开的实施例的程序模块的配置的框图。
程序模块1610(例如,图14的程序1440)可以包括用于控制与电子设备(例如,图14的电子设备1401)相关联的资源的OS和/或在OS上执行的各种应用(例如,图14的应用程序1447)。
程序模块1610包括内核1620、中间件1630、API 1660和/或应用1670。程序模块1610的至少一部分可以预先加载在电子设备上,或者可以从外部电子设备(例如,图14的第一外部电子设备1402、第二外部电子设备1404或服务器1406等)下载。
内核1620(例如,图14的内核1441)可以包括例如系统资源管理器1621和/或设备驱动器1623。系统资源管理器1621可以控制、指派或收集系统资源。根据本公开的实施例,系统资源管理器1621可以包括进程管理单元、内存管理单元或文件系统管理单元。设备驱动器1623可以包括例如显示器驱动器、相机驱动器、BT驱动器、共享存储器驱动器、USB驱动器、键盘驱动器、Wi-Fi驱动器、音频驱动器或进程间通信(IPC)驱动器。
中间件1630(例如,图14的中间件1443)可以提供例如应用1670通常需要的功能,并且可以通过API 1660向应用1670提供各种功能,使得应用1670有效地使用电子设备内的有限系统资源。根据本公开的实施例,中间件1630(例如,中间件1443)包括以下至少一项:运行时间库1635、应用管理器1641、窗口管理器1642、多媒体管理器1643、资源管理器1644、电力管理器1645、数据库管理器1646、包管理器1647、连接管理器1648、通知管理器1649、位置管理器1650、图形管理器1651、安全管理器1652和支付管理器1654。
运行时间库1635可以包括例如由编译器使用的库模块,以便在执行应用1670的同时通过编程语言来添加新的功能。运行时间库1635可以执行与输入和输出管理、存储器管理或算术功能有关的功能。
应用管理器1641可以管理例如至少一个应用1670的生命周期。窗口管理器1642可以管理电子设备的屏幕上使用的图形用户界面(GUI)资源。多媒体管理器1643可以确定用于再现各种媒体文件所使用的格式,并且可以通过使用与相应格式相对应的编解码器来对媒体文件进行编码或解码。资源管理器1644可以管理至少一个应用1670的源代码,并且可以管理存储器或存储空间的资源等。
电力管理器1645可以和例如基本输入/输出系统(BIOS)等一起操作,可以管理电池或电源,并可以提供用于电子设备的操作的电力信息。数据库管理器1646可以生成、搜索或改变要在至少一个应用1670中使用的数据库。包管理器1647可以管理对以包文件类型分发的应用的安装或更新。
连接管理器1648可以管理例如无线连接,例如Wi-Fi连接或BT连接等。通知管理器1649可以按照不会干扰用户的方式来显示或通知事件,例如到达消息、约会和接近通知。位置管理器1650可以管理电子设备的位置信息。图形管理器1651可以管理要被提供给用户的图形效果或与图形效果相关的用户界面(UI)。安全管理器1652可以提供用于系统安全或用户认证等的全部安全功能。根据本公开的实施例,当电子设备(例如,图14的电子设备1401)具有电话功能时,中间件1630还可以包括电话管理器,用于管理电子设备的语音或视频通信功能。
中间件1630可以包括中间件模块,所述中间件模块配置上述组件的各种功能的组合。中间件1630可以提供根据每种OS的类型而被专门化的模块,以便提供差异化的功能。此外,中间件1630可以动态删除现有组件中的一些,或可以添加新组件。
API 1660(例如,图14的API 1445)可以是例如API编程函数的集合,并且可以根据OS而具有不同的组件。例如,可以根据平台提供一个或两个或更多个API集合。
应用1670(例如,图14的应用程序1447)包括以下一项或多项:例如,主页应用1671、拨号器应用1672、短消息服务/多媒体消息服务(SMS/MMS)应用1673、即时消息(IM)应用1674、浏览器应用1675、相机应用1676、闹钟应用1677、联系人应用1678、语音拨号应用1679、电子邮件应用1680、日历应用1681、媒体播放器应用1682、相册应用1683、时钟应用1684、支付应用1685、健康护理应用(例如,用于测量锻炼量或血糖的应用等)或者环境信息应用(例如,用于提供气压信息、湿度信息或温度信息的应用等)等。
根据本公开的实施例,应用1670可以包括用于在电子设备(例如,图14的电子设备1401)和外部电子设备(例如,第一外部电子设备1402或第二外部电子设备1404)之间交换信息的信息交换应用。例如,信息交换应用可以包括用于向外部电子设备发送特定信息的通知中继应用或者用于管理外部电子设备的设备管理应用。
例如,通知中继应用可以包括向外部电子设备(例如,第一外部电子设备1402或第二外部电子设备1404)发送由电子设备的其他应用(例如,SMS/MMS应用、电子邮件应用、健康护理应用或环境信息应用等)所产生的通知信息的功能。另外,通知中继应用可以从外部电子设备接收例如通知信息,并且可以将接收到的通知信息提供给电子设备的用户。
设备管理应用可以管理(例如,安装、删除或更新)例如与该电子设备通信的外部电子设备(例如,第一外部电子设备1402或第二外部电子设备1404)的至少一个功能(例如,接通/断开外部电子设备本身(或一部分组件)的功能、或调整显示器的亮度(或分辨率)的功能)、在外部电子设备中操作的应用、或从外部电子设备提供的服务(例如,呼叫服务或消息服务)。
根据本公开的实施例,应用1670可以包括根据外部电子设备(例如,第一外部电子设备1402或第二外部电子设备1404)的属性而预设的应用(例如,移动医疗设备的健康卡应用)。应用1670可以包括从外部电子设备(例如,服务器1406、第一外部电子设备1402或第二外部电子设备1404)接收的应用。应用1670可以包括预加载的应用或可以从服务器下载的第三方应用。程序模块1610的组件名称可以根据OS的类型而不同。
根据本公开的各种实施例,程序模块1610的至少一部分可以用软件、固件、硬件、或它们中的两个或更多个的组合来实现。例如,程序模块1610的至少一部分可以由处理器(例如,图15的处理器1510)来实现(例如,执行)。程序模块1610的至少一部分可以包括例如用于执行一个或多个功能的模块、程序、例程、指令集或进程等。
本文使用的术语“模块”可以表示例如包括硬件、软件和固件之一或其组合在内的单元。术语“模块”可以与术语“单元”、“逻辑”、“逻辑块”、“组件”和“电路”互换使用。模块可以是集成组件的最小单元,或者可以是其一部分。模块可以是用于执行一个或多个功能的最小单元或其一部分。可以从机械上或从电学上实现模块。例如,模块可以包括用于执行已知的或将来开发的一些操作的专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)和可编程逻辑器件中的至少一种。
根据本公开多种实施例的设备(例如,其模块或功能)或方法(例如,操作)的至少一部分可以实现为以程序模块形式存储在计算机可读存储介质中的指令。当通过处理器(例如,处理器1420)执行所述指令时,处理器可以执行与所述指令相对应的功能。例如,计算机可读存储介质可以是存储器1430。
计算机可读记录介质可以包括硬盘、软盘、磁介质(例如,磁带)、光学介质(例如,CD-ROM、DVD)、磁光介质(例如,光磁软盘)或硬件设备(例如,ROM、RAM、闪存等)。程序指令可以包括由编译器产生的机器语言代码以及可由计算机使用注释器执行的高级语言代码。上述硬件设备可以被配置为操作为一个或多个软件模块,以执行本公开各种实施例的操作,反之亦然。
例如,电子设备可以包括处理器和存储计算机可读指令的存储器。存储器可以包括当被处理器执行时用于执行上述方法或功能的指令。例如,存储器可以包括指令,该指令在由处理器执行时使得处理器执行以下操作:使用第一曝光配置来获得对象的图像;基于图像的亮度信息从图像中检测形状;以及如果检测到形状,则将第一曝光配置改变为第二曝光配置。
根据本公开各种实施例的模块或程序模块可以包括上述元件中的至少一个元件,或者可以省略一些元件,或可以添加其他额外的元件。由根据本公开各种实施例的模块、程序模块或其他元件执行的操作可以按照顺序、并行、迭代或启发式的方式执行。另外,一些操作可以按不同顺序执行,或者可以被省略,或者可以增加其他操作。
尽管参考本公开的特定实施例示出并描述了本公开,但是本领域技术人员将理解,在不脱离本公开的范围的前提下,可以在其中进行形式和细节上的各种改变。

Claims (12)

1.一种电子设备,包括:
拍摄模块,被配置为在逆光条件下使用第一曝光配置来获得对象的图像;以及
处理器,被配置为:如果对所述图像的面部检测失败,则确定指定形状是否在所述图像中,其中,为了确定所述指定形状是否在所述图像中,所述处理器还被配置为:
基于多个点中的每一个点的亮度值的变化水平是否大于指定水平,从所述图像中提取多个特征点作为特征点,并在所述图像中确定存在所述特征点的检测区域,其中所述特征点分布为所述指定形状,以及
如果所述指定形状在所述图像中,则通过将所述第一曝光配置的曝光水平增加到第二曝光配置的曝光水平来将所述第一曝光配置改变为所述第二曝光配置,并基于所述图像中包括的所述指定形状中存在的所提取的多个特征点的数量来改变所述第二曝光配置,
其中,所述处理器还被配置为:在所述指定形状中存在的所提取的多个特征点的数量减少时,增大所述第一曝光配置的曝光水平的增加范围,并且
其中,所述指定形状是Ω形状。
2.根据权利要求1所述的电子设备,其中,所述第一曝光配置和所述第二曝光配置均包括所述电子设备的光圈值、快门速度和图像传感器的感光度中的至少一个。
3.根据权利要求1所述的电子设备,其中,所述处理器还被配置为:
基于所述图像的亮度信息来确定所述图像是否是在逆光条件下拍摄的,
当所述图像是在逆光条件下拍摄的时,确定所述指定形状是否在所述图像中。
4.根据权利要求1所述的电子设备,其中,所述处理器还被配置为:基于所述图像中包括的第一区域的第一亮度值与邻近所述第一区域的第二区域的第二亮度值的比较结果来确定所述指定形状是否在所述图像中。
5.根据权利要求1所述的电子设备,其中,所述处理器还被配置为:
从所述图像中提取至少一个特征点;以及
基于所述至少一个特征点的图案与对应于所述指定形状的图案的比较来确定所述指定形状是否在所述图像中。
6.根据权利要求1所述的电子设备,其中,所述处理器还被配置为:将与所述图像中检测到所述指定形状的区域相对应的图像数据存储在与所述电子设备操作连接的存储器中。
7.根据权利要求6所述的电子设备,其中,所述处理器还被配置为:基于所述存储器中存储的图像数据在检测到所述指定形状的区域中执行面部检测。
8.根据权利要求1所述的电子设备,其中,所述处理器还被配置为:对使用所述第二曝光配置获得的第二图像执行面部检测。
9.根据权利要求1所述的电子设备,还包括:
显示器,被配置为输出所述图像的预览图像;
其中,所述处理器被配置为:
如果接收到用于图像拍摄命令的用户输入,则将所述图像存储在存储器中。
10.一种电子设备的面部检测方法,所述方法包括:
在逆光条件下使用第一曝光配置来获得对象的图像;
如果对所述图像的面部检测失败,则基于所述图像的亮度信息来确定指定形状是否在所述图像中;以及
如果所述指定形状在所述图像中,则当检测到所述指定形状时,将所述第一曝光配置改变为第二曝光配置,
其中,所述确定包括:
从所述图像中提取多个特征点作为特征点;以及
在所述图像中确定存在所述特征点的检测区域,其中,所述特征点分布为所述指定形状,并且
其中,所述改变包括:
在所述指定形状中存在的所提取的多个特征点的数量减少时,增大所述第一曝光配置的曝光水平的增加范围;以及
通过将所述第一曝光配置的曝光水平增加到所述第二曝光配置的曝光水平来将所述第一曝光配置改变为所述第二曝光配置,并基于所述图像中包括的所述指定形状中存在的所提取的多个特征点的数量来利用所述增加范围改变所述第二曝光配置,
其中,所述指定形状是Ω形状。
11.根据权利要求10所述的方法,其中,改变为第二曝光配置包括以下操作中的至少一个:
改变所述电子设备中包括的光圈的光圈值;
改变所述电子设备中包括的快门的快门速度;以及
改变所述电子设备中包括的图像传感器的感光度。
12.根据权利要求10所述的方法,其中,确定所述指定形状是否在所述图像中包括:
基于所述图像中包括的第一区域的第一亮度值与邻近所述第一区域的第二区域的第二亮度值的比较结果来确定所述指定形状是否在所述图像中。
CN201680060984.XA 2015-10-20 2016-10-19 面部检测方法以及支持该方法的电子设备 Expired - Fee Related CN108141544B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020150146253A KR20170046005A (ko) 2015-10-20 2015-10-20 얼굴 검출 방법 및 이를 지원하는 전자 장치
KR10-2015-0146253 2015-10-20
PCT/KR2016/011765 WO2017069517A1 (en) 2015-10-20 2016-10-19 Face detection method and electronic device for supporting the same

Publications (2)

Publication Number Publication Date
CN108141544A CN108141544A (zh) 2018-06-08
CN108141544B true CN108141544B (zh) 2020-10-02

Family

ID=58523157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680060984.XA Expired - Fee Related CN108141544B (zh) 2015-10-20 2016-10-19 面部检测方法以及支持该方法的电子设备

Country Status (5)

Country Link
US (1) US20170111569A1 (zh)
EP (1) EP3342154A4 (zh)
KR (1) KR20170046005A (zh)
CN (1) CN108141544B (zh)
WO (1) WO2017069517A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2667790C1 (ru) 2017-09-01 2018-09-24 Самсунг Электроникс Ко., Лтд. Способ автоматической регулировки экспозиции для инфракрасной камеры и использующее этот способ вычислительное устройство пользователя
KR102438201B1 (ko) 2017-12-01 2022-08-30 삼성전자주식회사 사진 촬영과 관련된 추천 정보를 제공하는 방법 및 시스템
KR20210024859A (ko) * 2019-08-26 2021-03-08 삼성전자주식회사 영상 처리 방법 및 장치

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1652577A (zh) * 2004-02-06 2005-08-10 株式会社尼康 数码相机
CN1756309A (zh) * 2004-09-30 2006-04-05 佳能株式会社 图像捕获设备及控制方法、使计算机执行该方法的程序、图像处理设备
CN102843513A (zh) * 2011-06-21 2012-12-26 三星电子株式会社 通过使用照相机识别目标的照相机装置以及方法
CN103841323A (zh) * 2014-02-20 2014-06-04 小米科技有限责任公司 配置拍摄参数的方法、装置和终端设备

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7298412B2 (en) * 2001-09-18 2007-11-20 Ricoh Company, Limited Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
JP4711987B2 (ja) * 2007-03-14 2011-06-29 株式会社リコー 撮像装置および自動露出制御方法
US7956899B2 (en) * 2007-08-29 2011-06-07 Sanyo Electric Co., Ltd. Imaging device and image processing apparatus
KR101411910B1 (ko) * 2008-01-04 2014-06-26 삼성전자주식회사 디지털 촬영 장치 및 이의 제어 방법
KR101446772B1 (ko) * 2008-02-04 2014-10-01 삼성전자주식회사 디지털 영상 처리 장치 및 그 제어 방법
CN101247479B (zh) * 2008-03-26 2010-07-07 北京中星微电子有限公司 一种基于图像中目标区域的自动曝光方法
JP5520463B2 (ja) * 2008-09-04 2014-06-11 株式会社ソニー・コンピュータエンタテインメント 画像処理装置、対象物追跡装置および画像処理方法
JP2010204304A (ja) * 2009-03-02 2010-09-16 Panasonic Corp 撮像装置、運転者監視装置および顔部測距方法
FR2990038A1 (fr) * 2012-04-25 2013-11-01 St Microelectronics Grenoble 2 Procede et dispositif de detection d'un objet dans une image
US9049355B2 (en) * 2012-09-21 2015-06-02 Htc Corporation Methods for image processing of face regions and electronic devices using the same
WO2015009968A2 (en) * 2013-07-19 2015-01-22 Google Inc. Face template balancing

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1652577A (zh) * 2004-02-06 2005-08-10 株式会社尼康 数码相机
CN1756309A (zh) * 2004-09-30 2006-04-05 佳能株式会社 图像捕获设备及控制方法、使计算机执行该方法的程序、图像处理设备
CN102843513A (zh) * 2011-06-21 2012-12-26 三星电子株式会社 通过使用照相机识别目标的照相机装置以及方法
CN103841323A (zh) * 2014-02-20 2014-06-04 小米科技有限责任公司 配置拍摄参数的方法、装置和终端设备

Also Published As

Publication number Publication date
CN108141544A (zh) 2018-06-08
EP3342154A4 (en) 2018-09-26
WO2017069517A1 (en) 2017-04-27
US20170111569A1 (en) 2017-04-20
EP3342154A1 (en) 2018-07-04
KR20170046005A (ko) 2017-04-28

Similar Documents

Publication Publication Date Title
CN107566693B (zh) 电子设备及其图像捕获方法
US10871798B2 (en) Electronic device and image capture method thereof
US10623661B2 (en) Image composition method with image sensors having different angles of view and electronic device for supporting the same
CN107409180B (zh) 具有相机模块的电子装置和用于电子装置的图像处理方法
KR102328098B1 (ko) 전자장치의 초점 검출 장치 및 방법
US10917552B2 (en) Photographing method using external electronic device and electronic device supporting the same
US10367978B2 (en) Camera switching method and electronic device supporting the same
CN108028891B (zh) 电子设备和照相方法
CN108427533B (zh) 电子设备及用于确定电子设备的环境的方法
CN110462617B (zh) 用于通过多个相机认证生物数据的电子装置和方法
CN106454005B (zh) 电子装置和电子装置的图像编码方法
US20200374432A1 (en) Electronic device comprising camera and electronic device control method
US11132537B2 (en) Electronic device for determining position of user based on image pixels, and method of controlling said device
CN108141544B (zh) 面部检测方法以及支持该方法的电子设备
CN107682619B (zh) 用于处理图像的方法和支持该方法的电子设备
US10198828B2 (en) Image processing method and electronic device supporting the same
US10691318B2 (en) Electronic device and method for outputting thumbnail corresponding to user input
CN108124098B (zh) 电子设备和用于自动聚焦的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20201002

Termination date: 20211019