CN105391937A - 基于生理信号控制相机模块的方法 - Google Patents

Abstract

本发明公开一种电子设备的控制方法。所述方法包括：接收输入信号，所述输入信号包括将通过所述电子设备的传感器模块进行检查的对象的生理信号；基于至少所述输入信号检测输入操作；以及根据所述输入操作通过相机模块获取图像。

Description

基于生理信号控制相机模块的方法

技术领域

本发明公开一种电子设备的控制方法。所述方法包括：接收输入信号，所述输入信号包括将通过所述电子设备的传感器模块进行检查的对象的生理信号；基于至少所述输入信号检测输入操作；以及根据所述输入操作通过相机模块获取图像。

背景技术

各种电子设备包括相机模块，并且通常通过按下安装到电子设备的主体的拍照按钮或通过触摸显示在显示器上的拍照按钮来获取图像。

但操纵机械按钮或显示器上的按钮图像的操作可影响所获取的图像的质量。

发明内容

本发明已解决至少上述问题和缺点并且提供至少以下描述的优势。

因此，本发明的一方面是提供一种通过电子设备的相机模块在无需操纵机械按钮或显示在电子设备的显示器上的虚拟按钮的情况下获取图像的方法。

因此，本发明的另一个方面是提供一种通过使用生理信息来控制电子设备的相机模块的方法。

因此，本发明的另一个方面是通过使用传感器模块来允许用户控制相机模块。例如，电子设备的用户可以基于手指在传感器模块上的运动来改变相机模块的设置或指示以获取图像。

因此，本发明的另一个方面是通过电子设备的相机模块获取图像，其中该图像可基于传感器模块所接收的生理信息或情绪信息进行处理。

根据本发明的一个方面，提供一种控制电子设备的方法，该方法包括：接收输入信号，输入信号包括将通过电子设备的传感器模块进行检查的对象的生理信号；基于至少该输入信号检测输入操作；以及根据所述输入操作通过相机模块获取图像。根据本发明的另一个方面，提供一种电子设备。该电子设备包括：相机模块；传感器模块，接收包括待检查对象的生理信号的输入信号；以及控制模块，至少基于输入信号检测输入操作，并且根据输入操作获取图像。

根据本发明的另一个方面，提供一种方法。该方法包括：通过电子设备的生物测量传感器接收用户的生理信号；以及至少基于生理信号的变化，通过电子设备的相机模块获取图像。根据本发明的另一个方面，提供一种移动终端。该移动终端包括：相机模块，被布置在移动终端的主体的前表面和后表面中的至少一个上；传感器模块，用于接收用户的生理信号，传感器模块在主体的前表面和后表面中的至少一个上形成；以及控制模块，用于至少基于生理信号的变化通过相机模块获取图像，控制模块功能性地连接到相机模块和传感器模块。根据本发明的另一个方面，提供一种上面记录有程序以执行方法的非暂时性计算机可读记录介质。该方法包括：通过电子设备的生物测量传感器接收用户的生理信号；以及通过电子设备的相机模块至少基于生理信号的变化来获取图像。

附图说明

根据下面的具体说明并结合附图，本发明的上述及其它方面、特征和优势将更加显而易见，图中：

图1为根据本发明的实施方式的在网络环境内的电子设备的框图；

图2为根据本发明的实施方式的电子设备的配置的框图；

图3为根据本发明的实施方式的电子设备的编程模块的框图；

图4为根据本发明的实施方式的电子设备的框图；

图5A和图5B为根据本发明的实施方式的电子设备的立体图；

图6A至图6C示出根据本发明的实施方式的电子设备的操作状态；

图7A和图7B示出根据本发明的实施方式的电子设备的传感器模块的操作；

图8A和图8B为示出根据本发明的实施方式的由电子设备根据时间推移而检测到的生理信号的图；

图9为根据本发明的实施方式的用于通过电子设备基于输入信号来获取图像的操作的流程图；

图10为根据本发明的实施方式的用于通过电子设备根据接触操作来获取图像的操作的流程图；

图11为根据本发明的实施方式的用于通过电子设备根据分离操作来获取图像的操作的流程图；

图12为根据本发明的实施方式的用于控制电子设备的操作的流程图；

图13A和图13B示出根据本发明的实施方式的特定时间的流逝；

图14示出根据本发明的实施方式的、基于接触顺序来控制电子设备；

图15A和图15B示出根据本发明的实施方式的基于运动方向来控制电子设备；

图16示出根据本发明的实施方式的基于接触顺序来控制电子设备；

图17示出根据本发明的实施方式的耦合到电子设备的按钮的生物测量传感器；

图18示出根据本发明的实施方式的使用耦合到电子设备的按钮的生物测量传感器的方法；

图19为根据本发明的实施方式的通过使用指纹信息来处理图像的操作的流程图；

图20为根据本发明的实施方式的通过使用心律信息来提供预览图像的操作的流程图；

图21示出根据本发明的实施方式的显示使用心律信息所提供的预览图像的屏幕；

图22为根据本发明的实施方式的将用户图像和心律显示在一起的操作的流程图；

图23示出根据本发明的实施方式的将图像与心律信息显示在一起的屏幕；

图24为根据本发明的实施方式的将所获取的图像与情绪信息显示在一起的操作的流程图；

图25示出根据本发明的实施方式的将图像与情绪信息显示在一起的屏幕；

图26示出根据本发明的实施方式的显示图像的屏幕，其中生理信息与用户相关；以及

图27A至图27D示出根据本发明的实施方式的控制电子设备以拍摄全景图像的方法。

具体实施方式

提供下面参考附图的描述以帮助对于由权利要求以及它们的等价物所定义的本发明的各种实施方式的全面理解。其包括各种具体细节以帮助该理解，但这些细节应被视为仅仅作为示例。因此，本领域的技术人员将认识到，在不脱离本发明的范围和精神的情况下，可进行本文所述各种实施方式的各种改变和修改。另外，为清楚及简洁起见，可省略熟知功能和结构的描述。

在下面的描述和权利要求中使用的术语及词语并不限制于它们的字典意义，而是仅仅用于实现本发明的清楚且简洁的理解。因此，对于本领域的技术人员显而易见的是，本发明各种实施方式的以下描述仅被提供用于例证的目的，而不用于限制由所附权利要求及它们的等价物所定义的本发明的目的。

应理解，单数形式“一”、“一个”和“该”包括多个对象，除非上下文另外清楚地表明并非如此。因此，例如，对“一组件表面”的参考包括对此类表面中的一个或多个的参考。

根据本发明实施方式的电子设备可为具有通信功能的装置。例如，根据本发明的电子设备可为以下各项中的至少一个和/或组合：平板个人计算机(PC)、移动电话、视频电话、电子启动(电子书)阅读器、桌面PC、膝上型PC、上网本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医疗设备、电子手镯、电子项链、电子首饰、摄像头、可穿戴设备、电子时钟、手表、家用电器(例如，冰箱、空调、清洁器、烘箱、微波炉、洗衣机、空气净化器等)、人工智能机器人、电视(TV)、数字通用盘(DVD)播放器、音频播放器、各种医疗设备(例如，磁共振血管造影(MRA)装置、磁共振成像(MRI)装置、计算机断层摄影(CT)设备、超声设备等)、导航设备、全球定位系统(GPS)接收器、事件数据记录器(EDR)、飞行数据记录器(FDR)、机顶盒、电视盒(例如，三星电子设备有限公司的HomeSync^TM、苹果有限公司的AppleTV^TM、谷歌有限公司的GoogleTV^TM)、电子字典、车用信息娱乐装置、船用电子设备(例如，导航装置、回转罗盘等)、航空电子设备、安全设备、电子布、电子钥、摄像机、游戏主机、头戴式显示器(HMD)单元、平板显示装置、电子框、电子相册、具有通信功能的一件家具和/或一部分建筑物/结构、电子板、电子签名接收设备、以及保护器。

对于本领域的技术人员显而易见的是，根据本发明的电子设备并不限制于前述设备。

图1为根据本发明实施方式的在网络环境内的电子设备的框图。

参考图1，电子设备101包括总线110、处理器120、存储器130、输入/输出接口150、显示器160和通信接口170。

总线110是用于将上述元件(例如，处理器120、存储器130、输入/输出接口150、显示器160和通信接口170)互连并且用于允许上述元件之间的通信(例如，通过传送控制消息)的电路。

处理器120通过例如总线110接收来自上述其它元件(例如，存储器130、输入/输出接口150、显示器160和通信接口170)的命令，对所接收的命令进行解密，并且根据经解密的命令执行操作和/或数据处理。

存储器130存储从处理器120和/或其它元件(例如，输入/输出接口150、显示器160和通信接口170)接收到的命令，和/或由处理器120和/或其它元件生成的命令和/或数据。存储器130包括软件和/或程序140，诸如内核141、中间件143、应用程序编程接口(API)145和应用147。上述编程模块中的每个可通过软件、固件、硬件和/或它们中的两个或更多个的组合进行配置。

内核141控制和/或管理系统资源，例如总线110、处理器120或存储器130，这些系统资源用于在其他编程模块(诸如中间件143、API145和/或应用147)中实现的操作和/或功能的执行。此外，内核141提供接口，中间件143、API145和/或应用147可通过该接口访问并且随之控制和/或管理电子设备101的单独元件。

中间件143执行中继功能，该中继功能允许API145和/或应用147与内核141通信并交换数据。此外，相对于从应用147中的至少一个接收到的操作请求，中间件143通过例如在使用电子设备101的系统资源(例如，总线110、处理器120和/或存储器130)时对应用147中的至少一个中的至少一个应用给予优先权来执行相对于该操作请求的负载平衡。

API145是应用147藉以控制由内核141和/或中间件143提供的功能的接口，并且包括例如用于文件控制、窗口控制、图像处理和/或字符控制的至少一个接口或功能。

输入/输出接口150接收来自用户的命令和/或数据，并将所接收的命令和/或数据通过总线110传送到处理器120和/或存储器130。显示器160将图像、视频和/或数据显示给用户。

通信接口170建立电子设备101与第一外部设备102、第二外部设备104和/或服务器106之间的通信。通信接口170支持短距离通信协议，例如，WiFi协议、蓝牙(BT)协议和近场通信(NFC)协议，通信网络(例如，因特网、物联网(IoT)、局域网(LAN)、广域网(WAN)、电信网络、蜂窝网络和卫星网络)，普通老式电话服务(POTS)，或任何其它类似和/或合适的通信网络，诸如网络162。第一外部设备102和第二外部设备104可为相同类型和/或不同类型的电子设备。

图2为根据本发明实施方式的电子设备的配置的框图。

参考图2，其提供电子设备201的框图。电子设备201可作为整体或图1所示电子设备101的一部分进行配置。电子设备201包括一个或多个应用处理器(AP)、通信模块220、用户识别模块(SIM)卡224、存储器230、传感器模块240、输入设备250、显示模块260、接口270、音频模块280、相机模块291、电源管理模块295、电池295、指示器297和电机298。

AP210操作操作系统(OS)或应用以控制连接到AP210的多个硬件或软件组成部分，并且执行包括多媒体数据在内的各种数据处理和计算。AP210可通过例如片上系统(SoC)实现。处理器210还可包括图形处理单元(GPU)。

通信模块220在通过网络162连接到电子设备201的不同电子设备(例如，第二外部设备104和服务器106)之间的通信中传输/接收数据。根据实施方式，通信模块220包括蜂窝模块221、WiFi模块223、蓝牙(BT)模块250、全球定位系统(GPS)模块227、近场通信(NFC)模块228和射频(RF)模块229。

蜂窝模块221通过通信网络(例如，长期演进(LTE)、高级LTE(LTE-A)、码分多址(CDMA)、宽带CDMA(WCDMA)、通用移动电信系统(UMTS)、无线宽带(WiBro)、全球移动通信(GSM)等)提供语音、呼叫、视频呼叫、短消息服务(SMS)或互联网服务。此外，蜂窝模块221通过使用SIM卡224在通信网络内验证电子设备。根据实施方式，蜂窝模块221执行可由AP210提供的功能中的至少一些。例如，蜂窝模块221可执行多媒体控制功能中的至少一些。

蜂窝模块221可包括通信处理器(CP)。此外，蜂窝模块221可通过例如SoC实现。

虽然组件诸如蜂窝模块221(例如，通信处理器)、存储器230和电源管理模块295在图2中被示为与AP210分开的组件，但在实施方式中，AP210可包括前述组件中的至少一些(例如，蜂窝模块221)。

AP210或蜂窝模块221(例如，通信处理器)将从连接到AP210和蜂窝模块221中的每个的非易失性存储器和其它组件中的至少一个接收到的命令或数据加载到易失性存储器，并对所加载的命令或数据进行处理。另外，AP210或蜂窝模块221将从其它组件中的至少一个接收到的数据或通过其它组件中的至少一个所生成的数据存储在非易失性存储器中。

WiFi模块223、BT模块225、GPS模块227和NFC模块228中的每个可例如包括用于处理通过对应模块所传输/接收的数据的处理器。虽然蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228在图2中被示为彼此分开的块体，但根据一个实施方式，NFC模块228可以包含在集成芯片(IC)或一个IC封装中。例如，对应于蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228的处理器中的至少一些(例如，对应于蜂窝模块221的通信处理器和对应于WiFi模块223的WiFi处理器)可通过一个SoC实现。

RF模块229传输/接收数据，例如RF信号。RF模块229可包括例如收发器、功率放大模块(PAM)、滤频器、低噪声放大器(LNA)等。此外，RF模块229可包括用于在无线通信中通过自由大气空间传输/接收电子波的组件，例如导体、导线等。虽然在图2中蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228共用一个RF模块229，但蜂窝模块221、WiFi模块223、BT模块225、GPS模块227和NFC模块228中的至少一个可通过单独的RF模块传输/接收RF信号。

SIM卡224是可插入到在电子设备201的特定部分中形成的插槽中的卡。SIM卡224包括唯一标识信息(例如，集成电路卡标识(ICCID))或用户信息(例如，国际移动用户身份(IMSI))。

存储器230包括内部存储器232或外部存储器234。

内部存储器232可包括易失性存储器(例如，随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、同步动态随机存取存储器(SDRAM)等)和非易失性存储器(例如，只读存储器(ROM)、一次可编程只读存储器(OTPROM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除可变成只读存储器(EEPROM)、掩模只读存储器、闪速只读存储器、NAND闪速存储器、NOR闪速存储器等)中的至少一个。

内部存储器232可为固态硬盘(SSD)。

外部存储器234可包括闪存驱动器，例如，闪存(CF)、安全数字(SD)、微型安全数字(Micro-SD)、迷你型安全数字(Mini-SD)、极端数字(xD)、或记忆棒。外部存储器234可通过各种接口功能性地连接到电子设备201。电子设备201还可包括存储设备(或存储结介质)诸如硬盘驱动器。

传感器模块240测量电子设备201的物理量或检测其操作状态，并且将所测量或所检测的信息转换成电子信号。传感器模块240可包括以下各项中的至少一个：手势传感器240A、陀螺仪传感器240B、大气压(气压)传感器240C、磁传感器240D、加速度传感器240E、手柄传感器240F、接近传感器240G、颜色传感器240H(例如，红、绿和蓝(RGB)传感器)240H、生物测量传感器240I、温度/湿度传感器240J、照度(光)传感器240K和紫外线(UV)传感器240M。除此之外或作为另外一种选择，传感器模块240可包括例如电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外(IR)传感器、虹膜传感器、指纹传感器等。传感器模块240还可包括用于控制包含在传感器模块240中的一个或多个传感器的控制电路。

输入设备250包括触控面板252、(数字)笔传感器254、按键256、超声波输入设备258。例如，触控面板252识别电容型、电阻型、红外型和声波型中的至少一种类型的触摸输入。触控面板252还包括控制电路。对于电容型的情况，触控面板252可识别接近以及直接触摸。触控面板252还包括触觉层。在这种情况下，触控面板252对用户提供触觉反应。

(数字)笔传感器254可例如使用与接收用户的触摸输入的方法相同或类似的方法、或使用单独的识别片实现。

按键256可包括物理按钮、光学按键、或键盘。

超声波输入设备258为这样的设备，其通过电子设备201的麦克风288经由生成超声波信号以识别数据的输入装置来检测超声波，并且执行无线识别。

电子设备201可通过使用通信模块220从连接到电子设备201的第一外部设备102或第二外部设备104或服务器106接收用户输入。

显示模块260包括面板262、全息图设备264和投影仪266。

面板262可为例如液晶显示器(LCD)或主动矩阵有机发光二极管(AM-OLED)。面板262可被实现为例如柔性的、透明的、或耐磨的。面板262可通过触控面板252和一个模块进行配置。

全息图设备264通过使用光的干涉在空气中显示立体图像。

投影仪266将光投射在屏幕上以显示图像。该屏幕可位于电子设备201之内或之外。

显示模块260还可包括用于控制面板262、全息图设备264和投影仪266的控制电路。

接口270包括高清晰度多媒体接口(HDMI)272、通用串行总线(USB)274、光学接口276和D-微型(D-sub)278。接口270可包括在图1所示通信接口160中。除此之外或作为另外一种选择，接口290可包括移动高清连接(MHL)接口、安全数字(SD)卡/多媒体卡(MMC)、或红外数据协会(IrDA)标准接口。

音频模块280双向地转换声信号和电信号。音频模块280中的至少一些组件可包括在图1所示输入/输出接口140中。音频模块280处理通过扬声器282、接收器284、耳机286和麦克风288输入或接收的声音信息。

相机模块291为可拍摄静止图像和视频的设备。相机模块291可包括一个或多个图像传感器(例如，前传感器或后传感器)、图像信号处理器(ISP)或闪光灯(例如，LED或氙气灯)。

电源管理模块295管理电子设备201的电源。电源管理模块295可包括例如电源管理集成电路(PMIC)、充电器集成电路(IC)、或电池电量表。

PMIC可安装到集成电路或SoC半导体上。充电方法分为有线方法和无线方法。充电器IC对电池充电，并且阻止过电压或过电流从充电器流出。充电器IC包括用于有线充电方法和无线充电方法中的至少一种的充电器IC。

无限充电方法可包括磁谐振方法、磁感应方法和电磁波方法，并且可以增加用于无线充电的附加电路，例如电路诸如线圈回路、谐振电路、整流器等。

电池电量表测量例如电池296的剩余电量，或充电期间的电压、电流、或温度。

电池296储电或发电，以通过使用所存储的或所生成的电向电子设备201供电。电池296可包括充电电池或太阳能电池。

指示器297显示电子设备201或电子设备201的一部分(例如，AP210)的特定状态，例如，启动状态、消息状态、充电状态等。

电机298将电信号转换成机械振动。

电子设备201可包括用于支持移动TV的处理单元(例如，GPU)。用于支持移动TV的处理单元可根据数字多媒体广播(DMB)、数字视频广播(DVB)、媒体流等标准来处理媒体数据。

根据本发明各种实施方式的电子设备的组件中的每个可通过一个或多个组件实现，并且对应组件的名称可根据电子设备的类型而改变。根据本发明各种实施方式的电子设备可包括上述组件中的至少一个，可省略少量的组件，或者还可包括另外的组件。另外，根据本发明各种实施方式的电子设备的组件中的一些可被组合以形成单个实体，并且因此可以等同地执行对应组件在组合之间的功能。

图3是根据本发明实施方式的电子设备的编程模块的框图。

参考图3，其提供了编程模块300的框图。编程模块300可包括(存储)在图1所示的电子设备101(例如，存储器130)中。编程模块300中的至少一些可由软件、固件、硬件、或它们的组合形成。编程模块300可在硬件(例如，电子设备201)中执行，以包括控制与电子设备101相关的资源的操作系统(OS)或在OS上驱动的各种应用370。例如，OS为Android^TM、iOS^TM、Windows^TM、Symbian^TM、Tizen^TM、Bada^TM等。编程模块300包括内核320、中间件330、应用程序编程接口(API)360和应用370。

内核320包括系统资源管理器321和设备驱动器323。

系统资源管理器321可包括例如进程管理器、存储器管理器和文件系统管理器。系统资源管理器311执行系统资源的控制、分配和回收。

设备驱动器323可包括例如显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键盘驱动器、WiFi驱动器和音频驱动器。此外，根据实施方式，设备驱动器312包括进程间通信(IPC)驱动器。

中间件330包括多个模块，该多个模块被提前准备以提供应用370共同需要的功能。此外，中间件330通过API360提供功能，以允许应用370有效地利用电子设备101内的有限系统资源。中间件330包括以下各项中的至少一个：运行时间库335、应用管理器341、窗口管理器342、多媒体管理器343、资源管理器344、电源管理器345、数据库管理器346、软件包管理器347、连接管理器348、通知管理器349、位置管理器350、图形管理器351和安全管理器352。

运行时间库335包括当执行应用370时被编译器用以通过编程语言添加新功能的库模块。运行时间库335执行输入和输出、存储器的管理、与运算功能相关联的功能等。

应用管理器341管理应用370中的至少一个的生命周期。

窗口管理器342管理在屏幕上使用的GUI资源。

多媒体管理器343检测再现各种媒体文件所需的格式，并通过使用适用于对应格式的编解码器执行媒体文件的编码和解码。

资源管理器344管理资源诸如源代码、存储器、或应用370中的至少一个的存储空间。

电源管理器345与基本输入输出系统(BIOS)一起操作，以管理电池或电能并提供操作所需的电能信息。

数据库管理器346管理将被应用370中的至少一个使用的数据库的生成、搜索和改变。

软件包管理器347管理以包文件形式分布的应用的安装或更新。

连接管理器348管理无线连接，诸如WiFi或蓝牙。

通知管理器349以不打扰用户的方式向用户显示或通知事件，诸如到达消息、约会、接近报警器等。

位置管理器350管理电子设备101的位置信息。

图形管理器351管理提供给用户的图形效果或与该图形效果相关的用户界面。

安全管理器352提供系统安全或用户验证所需的一般安全功能。

当电子设备101具有呼叫功能时，中间件330还可包括用于管理电子设备101的语音或视频呼叫功能的通话管理器。

中间件330还通过组合前述内部组件模块的各种功能来生成新的中间件模块并且使用所生成的新中间件模块。中间件330可提供对各种类型的操作系统特定的模块，以提供具有差异的功能。此外，中间件330可动态地删除常规组件中的一些并增添新的组件。因此，在本发明实施方式中描述的组件中的一些可被省略、被具有不同名称但执行类似功能的其它组件替代，或者也可包括其它组件。

API361为API编程功能的集合，并且可根据操作系统被提供不同配置。例如，在Android^TM或iOS^TM中，可对每个平台提供单个API集。在Tizen^TM中可提供两个或更多个API集合。

应用370可包括预加载的应用和/或第三方应用。应用370可包括主页应用371、拨号器应用372、短信息服务(SMS)/多媒体信息服务(MMS)应用373、即时消息(IM)应用374、浏览器应用375、相机应用376、闹钟应用377、联系人应用378、语音拨号应用379、电子邮件应用380、日历应用381、媒体播放器应用382、相册应用383、时钟应用384。但是本发明并不限于此，并且应用370可包括任何其它类似的和/或合适的应用。

编程模块300中的至少一些由存储在计算机可读存储介质中的命令实现。当该命令被一个或多个处理器(例如，处理器210)执行时，该一个或多个处理器执行与该命令相对应的功能。计算机可读存储介质可为例如存储器260。编程模块300中的至少一些可通过例如处理器210实现(例如，执行)。编程模块300中的至少一些可包括例如用于执行一个或多个功能的模块、程序、规程、指令集、或进程。

根据本发明实施方式，编程模块300的各组件的名称可根据操作系统的类型而变化。此外，编程模块300可包括前述组件中的一个或多个，省略所述组件中的一些，或者还包括其它附加组件。

图4为根据本发明实施方式的电子设备的框图。

参考图4，提供了电子设备400。电子设备400包括相机模块410、传感器模块420和控制模块430。该电子设备可以另外包括显示器440。电子设备400可为参考图1描述的电子设备101或参考图2描述的电子设备201。

相机模块410可包括用于拍摄静止图像或运动图像的一个或多个图像传感器。相机模块410根据控制命令或信号改变该一个或多个图像传感器的设置。例如，相机模块410根据控制命令来控制焦距、白平衡、快门速度、或亮度。此外，相机模块410根据控制命令或信号控制该一个或多个图像传感器以获取图像。

传感器模块420测量或检测与电子设备400相关的物理量或待检查对象的生理信号，并且将所检测的物理量或生理信号转换成电信号。传感器模块420包括用于测量待检查对象的生理信号的生物测量传感器。

该生物测量传感器可为用于待检查对象的光电容积描记法(PPG)传感器。生物测量传感器测量生理信号，包括虹膜信息、视网膜信息、静脉信息、指纹信息和周边血氧饱和度(SpO2)中的至少一个。

另选地，该生物测量传感器可为心律监视器(HRM)、心律变异(HRV)传感器、肌电图传感器、或脑电图传感器。

另选地，传感器模块420可包括以下各项中的至少一个：照明传感器、手势传感器、加速度传感器、位置传感器、陀螺仪传感器和磁传感器，以及生物测量传感器。

传感器模块420被配置为接收输入信号，并且该输入信号包括待检查对象的生理信号和关于电子设备400相关物理量的信息。待检查对象可为电子设备400的用户。

控制模块430功能性地连接到相机模块410和传感器模块420，并且至少基于通过传感器模块420接收到的输入信号而控制相机模块410以获取图像。生理信号包括在用于控制相机模块410的输入信号中。针对相机模块410的控制命令或信号是基于通过传感器模块420接收到的输入信号而检测的输入操作。输入操作包括待检查对象相对于传感器模块420的表面的至少一部分进行的操作，例如，接近操作、接触操作、或分离操作。

显示器440显示通过相机模块410获取的动态图像，例如，预览图像。显示器440显示通过相机模块410获取的静止图像，例如，拍摄的图像。此外，显示器440可显示用于通过控制模块430来控制相机模块410的各种用户界面(UI)。

电子设备400还可包括音频模块280。在这种情况下，控制模块430功能性地连接到音频模块280和传感器模块420，并且至少部分根据通过传感器模块420接收到的输入信号来控制音频模块280以获取音频数据。生理信号包括在用于控制音频模块的输入信号中。针对音频模块的控制命令或信息是根据通过传感器模块420接收到的输入操作而检测的输入操作。输入操作包括待检查对象相对于传感器模块420的表面的至少一部分进行的操作，例如，接近操作、接触操作、或分离操作。

电子设备400可以另外包括通信模块220。在这种情况下，控制模块430连接到通信模块和传感器模块420，并且还功能性地连接到显示器440和音频模块280中的至少一个，并且控制显示器440和音频模块280中的至少一个，以至少基于通过传感器模块420接收到的输入信号而获取图像或音频数据。生理信号包括在用于控制显示器440或音频模块280的输入信号中。针对显示器440或音频模块280的控制命令或信号是基于通过传感器模块420接收到的输入信号而检测到的输入操作。输入操作包括待检查对象相对于传感器模块420的表面的至少一部分进行的操作，例如，接近操作、接触操作、或分离操作。例如，控制模块430在语音通话、视频通话、音频会议、或视频会议期间，至少基于通过传感器模块420接收到的输入信号来获取在显示器440上显示的图像(例如，通话应用画面或会议应用画面)或视频(例如，包括接收方图像和发送方图像中的一个或多个的视频)。

图5A和图5B是根据本发明实施方式的电子设备的立体图。

参考图5A，其提供了电子设备400的前立体图。电子设备400包括杆型终端主体，但本发明的电子设备并不限于此并且可具有各种结构，诸如涡旋型、曲线弯曲型、其中两个或更多个主体耦合以往复运动的滑动型和折叠型。

如图5A所示，电子设备400包括前表面、侧表面和后表面，并且包括沿长度方向形成的两端。主体包括形成电子设备400的外部的壳体，并且所述壳体可分为前壳体和后壳体。包括在电子设备400中的各种类型的组件可被布置在形成于前壳体和后壳体之间的空间中。当电子设备400对应于相对于图2公开的电子设备201时，包括在电子设备201中的组件可位于壳体中，或者可位于形成于前壳体和后壳体之间的空间中。例如，相机模块410、传感器模块420、按钮425和显示器440可位于包括在电子设备400的主体中的壳体中。显示器440占据前壳体的主要部分。相机模块410可位于包括在电子设备400的主体中的前壳体和后壳体中的至少一个中。如图5A所示，相机模块411被布置在电子设备400的前壳体上，并且位于靠近显示器440的一个端部的区域中。

参考图5B，提供了电子设备400的后立体图。如图5B所示，相机模块413被布置在电子设备400的主体的后表面上并且位于后壳体中。

前相机模块411和后相机模块413可具有不同的拍摄方向。后相机模块413可被配置为能够执行清新度比前相机模块411高的拍摄。闪光灯415设置在与后相机模块413相邻的区域中。当通过后相机模块413获取图像时，闪光灯415可朝向将要拍摄的对象发射光。

传感器模块420设置在电子设备400的主体的一个表面上。如图5B所示，传感器模块420被布置在电子设备400的主体的后表面上并且位于后壳体中。当闪光灯415设置在后壳体上时，传感器模块420位于与闪光灯415相邻的区域中。另选地，传感器模块420可位于与后相机模块413相邻的区域中。

除此之外，当用户用手抓住电子设备400以通过前相机模块411获取图像时，传感器模块420可设置在用户的手指可触达的后壳位置上。在这种情况下，用户抓住电子设备400的手指中的至少一些可作为被传感器模块420测量生理信号的对象。

当按钮425设置在前壳体上时，传感器模块420可位于与按钮425相邻或与按钮425组合在一起的区域中。

包括在传感器模块420中的生物测量传感器可为HRM传感器、HRV传感器、ECG传感器、或SpO2传感器。

包括在传感器模块420中的生物测量传感器包括用于生成入射光并将该光照射到待检查对象的光发射单元421，和用于接收来自待检查对象的反射光的光接收单元423。

传感器模块420可为PPG传感器，其包括光发射单元421和光接收单元423。光发射单元421可被实现为发光二极管(LED)。此外，光发射单元421可被实现为具有不同波长的一个或多个LED。不同波长可为包括可见光线或红外光线的光线。生理信号例如PPG信号是基于通过光接收单元423接收到的反射光进行检测的。

图6A至图6C示出根据本发明实施方式的电子设备的操作状态。

参考图6A，用户500可将位于电子设备500的主体的前表面上的前相机模块411朝向用户500放置，并且通过对象510(诸如用户的手)抓住电子设备400的主体来控制前相机模块411的操作。

参考图6B，通过位于电子设备400的主体的后壳体中的传感器模块420接收关于用户500的生理信息。例如，电子设备400通过被配置为包括生物测量传感器的传感器模块420接收输入信号，所述输入信号包括关于待检查对象的生理信号，其对应于抓住电子设备400的主体的对象510的至少一部分(例如，手指)。控制模块430基于输入信号检测对应于对象510的该部分的运动的输入操作，所述对象510为待检查的对象。控制模块430然后至少基于输入操作来控制前相机模块411以获取图像。

参考图6C，电子设备400通过相机模块411基于待检查对象在传感器模块420的表面上进行的输入操作来获取图像，并将图像显示在显示器440上。

图7A和图7B示出根据本发明实施方式的电子设备的传感器模块的操作。

参考图7A，传感器模块420包括光发射单元421和光接收单元423。光发射单元421生成入射光并将该光朝向待检查对象510照射，所述待检查对象对应于人体组织的一部分，并且光接收单元423接收当穿透待检查对象510的入射光被反射并返回时生成的反射光。

从光发射单元421生成的入射光可被实现为具有特定波长。该入射光可为例如指示绿光的光线。由于绿色入射光相对于其它颜色的可见光具有相对低的皮肤透过率和高的吸收率，因此绿色入射光可用于佩戴在手腕上的可穿戴设备。此外，入射光可为例如指示红光的光线。

另选地，光发射单元421可被实现为一个或多个LED以生成不同的波长。该一个或多个LED可生成例如绿、红、或其它颜色的可见光，或者生成红外线(IR)。

如图7A所示，例如，光发射单元421包括具有不同波长的第一光发射单元4211和第二光发射单元4213。该第一光发射单元4211和第二光发射单元4213向待检查对象510照射不同波长的入射光，并且反射的入射光中的每个被光接收单元423接收。

传感器模块420可经配置包括PPG传感器，该PPG传感器包括光发射单元421和光接收单元423。当人体内的心脏收缩和舒张时，外周血管的血流量变化，并且因此外周血管的体积也改变。PPG传感器通过检测被照射到待检查对象的光的穿透量来测量外周血管的体积变化，并且基于外周血管的体积变化来测量血管内的血量变化、血氧饱和度变化中的一个或多个。PPG传感器基于所测量的血管内的血量变化来测量心律或每单位时间的心跳之间的时间间隔的变化。因此，PPG传感器可作为心律监视器(HRM)操作，其可基于所测量的血量信息来测量心律。

对应于待检查对象510的人体组织可为例如手指。在待检查对象510接触传感器模块420的表面之后，对象510在传感器模块420的表面上的接触状态维持预定时间，同时传感器模块420根据收缩周期和舒张周期来检测对应于待检查对象510的人体组织内的血量变化。例如，传感器模块420检测亮度变化，这是因为，由于血量增加，在收缩周期内的亮度较暗，并且由于血量减小，在舒张周期内的亮度较亮。包括在传感器模块420中的测量模块通过光接收单元423来检测从人体组织内的血管所反射的光，并且将所检测的光转换成电信号，以获取待检查对象510的生理信号。例如，传感器模块420将通过光接收单元423检测到的光的量转换成电压，并接收该电压作为输入，且基于电压改变周期的测量而计算心律或心跳之间的经历时间。

控制模块430基于通过传感器模块420接收到的生理信号对HRV进行分析，并且基于所述分析的结果获取生理信息，该生理信息包括待检查对象510的自主神经系统信息。所述分析为HRV的频域的分析，例如，基于功率频谱密度(PSD)的在特定频带中生成的功率峰值信息的分析。PSD可包括相关函数法、快速傅里叶变换、或自回归技术。基于HRV分析结果获取的生理信息可为与免疫缺陷、生理压力、身体疲劳、缺乏睡眠、慢性应激、抑郁、激动(例如，偏爱、恐惧、兴奋状态等)有关的信息。

控制模块430基于传感器模块420所接收的生理信号测量氧饱和度。为此，传感器模块420可包括氧饱和度传感器，并且该氧饱和度传感器测量氧饱和的血红蛋白与总血红蛋白的比率。用于测量氧饱和度的传感器模块420可包括光发射单元421，该光发射单元421包括红LED和IRLED。由于红色波长和IR波长对于动脉血的氧饱和度的变化具有不同的反应敏感度，因此通过敏感度差异来测量SpO2。基于SpO2的测量结果获取的生理信息可为与消耗的卡路里、呼吸困难、意识浑浊、或运动期间的身体状态有关的信息。

参考图7B，控制模块430至少基于包括生理信号的输入信号来检测与待检查对象510相对于传感器模块420的表面的特定运动相对应的输入操作。该输入操作可基于在与传感器模块420的表面相距特定距离429内的特定区域进行区分。该特定区域可为传感器模块420可在里面检测待检查对象510的检测区域。此外，该检测区域可为在与传感器模块420相距特定范围的距离以内的区域，使得通过传感器模块420接收到的生理信号可指示有意义的生理信息。

例如，检测区域可为在一定距离内的区域，其中在所述区域内可接收到待检查对象510的可测量信号，或者可为这样的区域，在所述区域中可接收到与最大可测量信号的强度的特定百分比相对应的信号。控制模块430基于包括待检查对象510的生理信号的输入信号来确定待检查对象510的接近或确定待检查对象510是否发生接触。输入操作可包括例如接近操作、接触操作、或分离操作。

接近操作是待检查对象510藉以进入检测区域的操作；即待检查对象510a藉以进入待检查对象510b在检测区域内的位置的操作。接触操作可为待检查对象510藉以接触传感器模块420的表面的至少一部分的操作，或为待检查对象510b藉以移动到待检查对象510c的位置以接触传感器模块420的表面的操作。分离操作可为待检查对象510藉以远离传感器模块420的表面的操作，或为待检查对象510c藉以从传感器420的表面分开并移动到待检查对象510b的位置的操作。

在下文中，将描述一种确定待检查对象的接近的方法。根据下面描述的各种实施方式，通过基于包括生理信号的输入信号来确定待检查对象510是否进入检测区域、待检查对象510是否接触传感器模块420的表面的至少一部分、或待检查对象510是否与传感器模块420的表面分开，控制模块430可检测待检查对象510的输入操作。

当待检查对象510接触PPG传感器的至少一部分时，PPG传感器接收包括DC分量和AC分量中的至少一个的生理信号。AC分量为这样的分量信号，所述分量信号根据由于心脏收缩和舒张导致的心跳而相对快速地变化，并且DC分量为这样的分量信号，所述分量信号根据血容量以及血管周围组织的吸收程度或反光程度而相对缓慢地变化，而无关于生理信号中的心跳。

图8A和图8B为示出根据本发明实施方式的通过电子设备根据时间推移而检测到的生理信号的图。

参考图8A至图8B，基于由PPC传感器接收到的生理信号的DC分量或AC分量的信号电平和信号模式中的至少一个，控制模块430确定待检查对象510的接近或确定待检查对象510是否发生接触。

参考图8A，提供了仅包括DC分量的生理信号的波形的示例。

参考图8B，提供了同时包括DC分量和AC分量的生理信号的波形的示例。

基于生理信号的信号电平是否大于特定值，控制模块430可确定待检查对象510是否发生接触。所述信号电平可以是基于DC分量或AC分量确定的生理信号值。

基于生理信号的DC分量的电平值是否大于特定值，控制模块430可确定待检查对象510是否发生接触。

基于生理信号的AC分量的电平值是否在特定值之内，控制模块430可确定待检查对象510是否发生接触。

例如，当DC分量的电平值被分类为第一范围、第二范围和第三范围(第一范围<第二范围<第三范围)时，控制模块430确定当对应于生理信号的DC分量的电平值在第一范围内时待检查对象510在检测区域以外，确定当DC分量的电平值在第二范围内时待检查对象510在检测区域以内，并且确定当DC分量的电平值在第三范围内时对检查对象510接触传感器模块420的表面。

当基于待检查对象510的生理信号来检测对应于运动的输入操作时，控制模块430在检测到从第一范围到第二范围的变化时检测接触操作，在检测到第二范围到第三范围的变化时检测接触操作，并且在检测到第三范围到第二范围的变化时检测分离操作。

在另一个示例中，当可通过PPG传感器测量的DC分量的电平值在0到200000的范围内时，第一范围为小于或等于60000，第二范围为大于60000并小于100000，并且第三范围为大于或等于100000。

在另一个示例中，相比于DC分量的电平值的最大值，第一范围可为小于或等于30％，第二范围可为小于50％，并且第三范围可为小于或等于50％。

对应于生理信号的DC分量的电平值可通过对所接收的信号进行放大的过程而变得不同。当待检查对象510位于检测区域以外时，生理信号的DC分量的电平可由于电子设备400的环境光而变得不同，使得首先执行通过环境光移除该分量的操作。

控制模块430可根据生理信号的信号模式，确定待检查对象510的接近或确定待检查对象510是否发生接触。例如，控制模块430可基于包括在生理信号中的AC分量的幅值来确定待检查对象510的接近或确定待检查对象510是否发生接触。当生理信号的AC分量的幅值小时，根据收缩周期期间的血管扩张和舒张周期期间的血管收缩，由光接收单元423接收到的光的增加和减少差异减小。在这种情况下，其被确定为是非接触状态或接近状态，而不是接触状态，其中待检查对象510的生理信号被充分地接收。

例如，当AC分量的幅值分为第一范围和第二范围时，如果使用包括在生理信号中的AC分量的峰值所测得的最大或平均幅值变化在第一范围内，则控制模块430确定待检查对象510在检测区域以外，并且如果所述最大或平均幅值变化在第二范围内，则确定待检查对象510在检测区域以内。在这种情况下，当检测对应于待检查对象510的运动的输入操作时，如果检测到从第一范围到第二范围的变化，则控制模块430检测输入操作对应于接近操作。例如，相比于包括在生理信号中的AC分量的最大幅值，第一范围可为低于20％并且第二范围可为20％至60％。

根据另一个实施方式，当检测对应于待检查对象510的运动的输入操作时，如果包括在生理信号中的AC分量的幅值(例如，峰值)大于或等于特定幅值，则控制模块430检测接触操作，并且如果所述AC分量的幅值小于特定幅值则检测分离操作。

当检测对应于待检查对象510的运动的输入操作时，如果包括在生理信号中的AC分量的峰值的幅值变成大于或等于特定幅值的状态维持预定时间或者预定数目的连续峰值保持为大于或等于特定幅值的值，则控制模块430检测接触操作，并且如果所述峰值的幅值变成小于特定幅值的状态维持预定时间或者预定数目的连续峰值保持为小于预定幅值的值，则检测分离操作。

当检测对应于对检查对象510的运动的输入操作时，如果包括在生理信号中的DC分量接近最大接收电平并且包括在生理信号中的AC分量非常微弱(等于或小于特定电平)，则控制模块430检测其中待检查对象510位于检测区域以内的状态或非接触状态或接近状态，而不是其中待检查对象510接触传感器模块420的表面的接触状态。在这种情况下，控制模块430确定的是，通过包括在传感器模块420中的光接收单元423所接收的光的量较大，但未测量待检查对象510的反射光或投射光。

当传感器模块420包括照明传感器时，控制单元430基于通过照明传感器所接收的光量水平和生理信号确定待检查对象510的接近或确定待检查对象510是否发生接触。

如在前述各种实施方式中所述，控制模块430基于包括生理信号的输入信号检测对应于待检查对象510的运动的待检查对象510的输入操作。

当满足启动生物测量传感器的条件时，控制模块430启动传感器模块420，以使生理信号包括在输入信号中。例如，当相机模块410启动时，如果在通过相机模块410接收的预览图像中检测到拍摄对象的面部，如果待检查对象的接近被包含在传感器模块420中的接近传感器检测到，或者如果通过包括在传感器模块420中的PPG传感器所进行的周期性监控检测到了待检查对象的存在，则控制模块430认为满足启动条件，并且因此启动生物测量传感器。之后，传感器模块420接收包括生理信号的输入信号，其中所述生理信号是通过启动的生物测量传感器获取的。当传感器模块420接收包括由启动的生物测量传感器所获取的生理信号的输入信号时，控制模块430可控制音频模块280以输入音频数据，或者控制电机298或控制触觉模块以输出触觉反馈或力反馈。

因此，电子设备至少基于生理信号的变化，通过生物测量传感器执行接收用户生理信号的操作，并且通过电子设备的相机模块执行获取图像的操作。生理信号的变化是基于生理信号的电平和模式中的至少一个进行检测的。

图9是根据本发明实施方式的用于根据输入操作通过电子设备获取图像的操作的流程图。

参考图9，电子设备400接收包括生理信号的输入信号，基于输入信号检测输入操作，并且根据输入操作控制相机模块410。

在步骤1110中，传感器模块420接收包括生理信号的输入信号。例如，当抓住电子设备400的用户接近或接触传感器模块420时，传感器模块420从待检查对象510获取生理信号，所述待检查对象510对应于用户身体的一部分。传感器模块420可为PPG传感器或ECG传感器，并且生理信号可为PPG信号或ECG信号。传感器模块420还可包括用于测量与电子设备400相关的物理量的传感器。在这种情况下，传感器模块420获取针对与电子设备400相关的物理量的测量信号。输入信号包括生理信号，并且还可包括测量信号。该测量信号为针对用户身体该部分的另一物理量(例如，通过照明传感器进行的接近度)的测量值。

在步骤1120中，控制模块430至少基于输入信号来检测输入操作。控制模块430基于包括在输入信号中的生理信号检测待检查对象510的输入操作。此外，控制模块430基于包括在输入信号中的生理信号和另一个测量信号中的至少一个检测待检查对象510的输入操作。输入操作是根据输入信号的信号电平或信号模式中的至少一个检测的。

通过控制模块430检测的输入操作可为接近操作，并且该接近操作是待检查对象510藉以从检测区域外面进入检测区域的操作。

通过控制模块430检测的输入操作可为接触操作，并且该接触操作是待检查对象510藉以接触传感器模块420的表面的至少一部分的操作。

通过控制模块430检测的输入操作可为分离操作，并且该分离操作可为待检查对象510藉以从传感器模块420的表面分开的操作。

在步骤1130中，控制模块430根据输入操作通过相机模块410获取图像。当输入操作为接触操作时，控制模块430控制相机模块410以获取图像。当输入操作为分离操作时，控制模块430控制相机模块410以获取图像。当输入操作为接近操作时，控制模块430控制以改变相机模块410的设置(例如，焦距控制或白平衡控制)。

当输入操作为第一输入操作时，控制模块430控制相机模块410以开始获取图像，并且当输入操作为第二输入操作时，控制模块430控制相机模块410以结束获取图像。例如，通过第一接触操作开始进行拍摄，并且当在生成分离操作后发生第二接触操作时，拍摄终止。另选地，当通过多个手指生成多触摸即两个接触操作时，通过第一手指的接触操作开始图像采集，并且通过第二手指的接触操作终止图像采集。通过多个输入操作，可以拍摄包括多个图像的全景图像或视频。

控制模块430基于至少基于输入信号所检测的一个或多个输入操作、输入操作中的每个所维持的时间、或一个或多个输入操作的顺序，对相机模块410进行控制。此外，控制模块430根据该一个或多个输入操作而改变相机模块410的设置以获取图像。之后本文的各种实施方式将描述控制模块430至少基于一个或多个所检测的输入操作来控制相机模块410。

另选地，控制模块430可基于一个或多个所检测的输入操作至少基于生成输入操作时的时间，来控制相机模块410或音频模块280。在这种情况下，控制模块430执行通过相机模块410和音频模块280中的至少一个来连续地获取图像或音频数据中的一个或多个的操作，并且自采集时间开始，将所述图像或音频数据在电子设备400的存储器230中暂时存储预定的维持时间tp(例如，10秒)。因此，当生成输入操作时，控制模块430将所述图像或音频数据中的一个或多个从时间(t-tp)(该时间早于生成输入操作时的时间(t))存储到生成输入操作时的时间。

当生成输入操作时，控制模块430可从生成输入操作时的时间(t)开始，获取并存储在预定维持时间(tn)期间的图像或音频数据中的一个或多个。

另选地，控制模块430可将图像或音频数据中的一个或多个存储这样的时间，所述时间为从比生成输入操作时的时间(t)早第一维持时间的时间，到比生成输入操作时的时间(t)晚第二维持时间的时间。例如，当生成输入操作时，可执行声音拍摄(例如，记录预定时间内的音频数据的操作，其中所述预定时间包括在拍摄时间之前或之后的时间，并且使所记录的音频数据与一个或多个图像相关)功能。

图10为根据本发明实施方式的用于通过电子设备根据接触操作来获取图像的操作的流程图。

参考图10，电子设备400接收包括生理信号的输入信号，诸如用户根据输入信号使其身体的一部分(包括手指)接触传感器模块420，并且当检测到该接触状态维持预定时间时，在经过预定时间之后通过相机模块获取图像。控制模块430将接触操作或根据接触操作的接触维持状态识别为控制命令，该控制命令指示以执行准备操作以获取图像。

例如，在步骤1210中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号来检测接触操作。

在步骤1220中，当检测到接触操作时，控制模块430改变相机模块410的设置以准备获取图像。用于改变设置的操作可为用于控制相机模块410的焦距的操作。此外，用于改变设置的操作可为用于控制相机模块的白平衡的操作。用于改变设置的操作可为用于控制ISO、曝光、光圈和快门速度中的至少一个的操作。

在步骤1230中，控制模块430至少基于包括生理信号的输入信号检测待检查对象510与传感器模块420之间的接触状态是否在接触操作之后维持预定时间。

在步骤1240中，当待检查对象510与传感器模块420之间的接触状态维持预定时间时，控制模块430通过相机模块410获取图像。

根据另一个实施方式，在身体部分持续接触传感器模块420预定时间之后，当用户重复该身体部分相对于传感器模块420的分离和接触时，控制模块430可通过相机模块410在每次接触时获取图像。例如，在至少基于输入信号检测接触操作并检测该接触状态在接触操作之后维持预定时间之后，当控制模块430重复地检测分离操作和接触操作时，控制模块430可重复地根据分离操作和接触操作通过相机模块410获取图像。

根据另一个实施方式，在身体部分与传感器模块420之间的接触状态维持预定时间之后，当用户重复该身体部分相对于传感器模块420的分离和接触时，控制模块430可测量分离和接触重复的次数，并且切换到预定设置或模式。例如，在至少基于输入信号检测接触操作并检测该接触状态在接触操作之后维持预定时间之后，当控制模块430重复地检测分离操作和接触操作时，控制模块430可根据分离操作和接触操作切换相机拍摄模式。例如，当控制模块430检测在两次接触之后的预定时间的分离时，控制模块430可将拍摄模式切换到夜晚拍摄模式。

又如，当控制模块430检测在三次接触之后的预定时间的分离时，控制模块430可将拍摄模式切换到运动拍摄模式。

当电子设备400中未执行用于获取图像的应用程序时，随着控制模块430检测用户身体的一部分到传感器模块的接触，控制模块430可执行该应用程序。例如，在检测接触操作和执行用于获取图像的应用程序之后，控制模块430改变相机模块410的设置。此后，当待检查对象510与传感器模块420之间的接触状态保持预定时间时，控制模块430通过相机模块410获取图像。

图11为根据本发明实施方式的用于根据分离操作获取图像的操作的流程图。

参考图11，在用户根据包括生理信号的输入信号使其身体部分诸如手指接触传感器模块之后，当用户使该身体部分与传感器模块420分开时，电子设备400通过相机模块410获取图像。

在步骤1310中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测接触操作。

在步骤1320中，当检测到接触操作时，控制模块430改变相机模块410的设置以准备获取图像。用于改变设置的操作可为用于控制相机模块410的焦距的操作。此外，用于改变设置的操作可为用于控制相机模块的白平衡的操作。用于改变设置的操作可为用于控制ISO、曝光、光圈和快门速度中的至少一个的操作。

在步骤1330中，控制模块430至少基于包括生理信号的输入信号检测分离操作，其中待检查对象510在接触操作之后通过所述分离操作从传感器模块420的表面分开。

在步骤1340中，控制模块430根据所检测的分离操作通过相机模块410获取图像。

控制模块430可忽略用于获取图像的其它拍摄命令，除了在检测到接触操作之后对于分离操作的检测。例如，控制模块430可忽略可由电子设备400实现的自动拍摄条件，例如，用于在以下情况下获取图像的条件：当检测到包括在预览图像中的拍摄对象的特定姿势时，当检测到笑脸时，以及当检测到特定的运动模式时，或者在接收到另一个输入操作时用于获取图像的条件，并且可以仅当检测到分离操作时才获取图像。

图12为根据本发明实施方式的用于控制电子设备的操作的流程图。

参考图12，在基于包括生理信号的输入信号而将身体部分诸如手指接触传感器模块420之后，当用户维持该接触状态预定的时间时，在从用户将其身体部分从传感器模块分开开始的等待时间之后，电子设备400可通过相机获取图像。

在步骤1310中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于该输入信号检测接触操作。

在步骤1320中，当检测到接触操作时，控制模块430改变相机模块410的设置以准备获取图像。

在步骤1325中，控制模块430根据接触操作确定待检查对象510与传感器模块420之间的接触状态是否维持至少预定时间。

在步骤1330中，当控制模块430检测分离操作时，其中待检查对象510通过该分离操作从传感器模块420的表面分开，在步骤1335中控制模块430在于步骤1340中获取图像之前等待，直到经过特定的等待时间为止。该特定等待时间可基于接触状态所维持的时间而确定。控制模块430可在显示器440上将等待状态显示特定的等待时间，例如，以图形对象的形式。

图13A和图13B示出根据本发明实施方式的特定时间的经历。

参考图13A和图13B，在检测分离操作之后，控制模块430将指示特定时间的开始的图形对象441a显示在显示器440上，并且随后在经过特定的等待时间之后，将图形对象441a改为图形对象441b。控制模块430在经过特定等待时间之后通过相机模块410获取图像。

当通过相机模块410获取图像时，控制模块430可通过包括在电子设备400中的麦克风记录在特定记录时间之内的语音。控制模块430可基于接触状态所维持的时间来确定所述特定记录时间。控制模块430将语音与图像存储在一起。

图14示出根据本发明实施方式的根据接触顺序来控制电子设备。

参考图14，传感器模块420包括光发射单元421和光接收单元423，并且光发射单元421包括具有不同波长的发光二极管的第一光发射单元421a和第二光发射单元421b。第一光发射单元421a可包括例如发射红外光的LED，并且第二光发射单元421b可包括例如发射红色可见光的LED。

当光发射单元421被实现为一个或多个LED时，光接收单元423接收在不同波长的入射光穿透待检查对象510时生成并且然后反射并返回的反射光。传感器模块420通过基于所接收的反射光检测一个或多个LED与待检查对象510之间的接触顺序，来检测待检查对象510在传感器模块420上的运动方向。

传感器模块420可同时或在不同的时间生成来自一个或多个LED的入射光。因此，传感器模块420检测所述一个或多个LED中的、在特定时间启动的LED，并且因此检测待检查对象510在传感器模块420上的运动方向。

控制模块430至少基于通过传感器模块420接收的输入信号来检测待检查对象510的运动方向，其中所述传感器模块420包括经配置包括一个或多个LED的生物测量传感器。在这种情况下，控制模块430基于所述运动方向来控制电子设备400。

图15A和图15B示出根据本发明实施方式的根据运动方向来控制电子设备。

参考图15A和图15B，在将所获取的图像610显示在显示器440上之后，控制模块430检测待检查对象510的、从设置在电子设备400的后表面上的传感器模块420的表面上的第一位置510a到第二位置510b的运动方向，将图像610沿运动方向移动，并且根据所述图像的运动显示另一个图像620。在图15A和图15B中，待检查对象510的运动方向与在显示器440上的图像的运动方向相反。即待检查对象510(其接触设置在电子设备400的后表面上的传感器模块420，并且紧密地越过传感器模块420)的运动方向对应于从右到左的方向，并且在设置于电子设备400的前表面上的显示器440上，图像620的运动方向对应于从左到右的方向。此外，在显示器440上移动的内容的速度可根据待检查对象510的运动速度而变化。

控制模块430基于运动方向通过控制电子设备400，使内容移动，同时将内容显示在显示器440上。例如，内容可为网页，并且运动操作可为滚动操作。又如，内容可为电子书的一个或多个页面，并且运动方向可为电子书的翻页效果操作。又如，内容可为显示在菜单上的菜单焦点(例如，高亮、光标、或选择指示)，并且运动操作可为菜单焦点的运动操作。

图16示出根据本发明实施方式的根据接触顺序控制电子设备。

参考图16，传感器模块420包括光发射单元421和光接收单元423，并且光接收单元423可包括一个或多个光接收二极管，诸如第一光接收二极管423a、第二光接收二极管423b、第三光接收二极管423c和第四光接收二极管423d。在这种情况下，由光发射单元421生成的入射光在穿透待检查对象510之后反射，并且通过每个光接收二极管而被接收。控制模块430基于一个或多个光接收二极管的位置或由每个光接收二极管接收到的生理信号的变化，检测待检查对象在传感器模块420上的运动方向。

当光接收单元423包括被布置在光发射单元421中心的左侧和右侧上的两个或更多个光接收二极管时，控制模块430检测待检查对象510在传感器模块420上的左运动方向和右运动方向。

当光接收单元423包括四个光接收二极管(第一光接收二极管423a、第二光接收二极管423b、第三光接收二极管423c和第四光接收二极管423d)时，这四个光接收二极管分别布置在光发射单元421中心的顶侧、底侧、左侧和右侧。在这种情况下，控制模块430检测待检查对象510在传感器模块420上的左运动方向和右运动方向，或顶部、底部、左侧和右侧运动方向。

根据上述实施方式的光接收二极管的数目仅仅是示例，并且光接收单元423可包括不同数目的光接收二极管。

控制模块430可至少基于通过传感器模块420所接收的输入信号来检测待检查对象510的运动方向，其中所述传感器模块420包括被配置为包括一个或多个光接收二极管的生物测量传感器。在这种情况下，控制模块430根据如上述的运动方向对电子设备400进行控制。

图17示出根据本发明实施方式的耦合到电子设备的按钮的生物测量传感器。

参考图17，传感器模块420可被形成以覆盖设置在电子设备400的主体上的开关。传感器模块420包括设置在按钮425上方的生物测量传感器，所述按钮425以堆积的形式覆盖开关。按钮425和传感器模块420可以功能性地连接以通过相机模块410来控制图像采集。例如，当传感器模块420被形成为设置在按钮425上方时，用户在按下按钮425之前接触传感器模块420，使得传感器模块420接收对应于待检查对象510的用户身体部分(例如，手指)的生理信号。在这种情况下，控制模块430至少基于包括生理信号的输入信号来检测输入操作，并且相应地基于输入操作、关于开关是打开还是关闭的确定的结果、或者输入操作和关于开关是打开还是关闭的确定的结果两者，来控制电子设备400。

电子设备400可包括用于测量传感器模块420与按钮425之间的其他物理量的传感器，这些传感器位于传感器模块420上方或者位于按钮425下方。虽然已描述按钮425在电子设备400的前壳体上形成，但按钮425也可设置在电子设备400的另一个表面上。

图18示出根据本发明实施方式的使用耦合到电子设备的按钮的生物测量传感器的方法。

参考图18，提供了包括被形成以覆盖按钮425的传感器模块420的电子设备400。

当包括在传感器模块420中的生物测量传感器被禁用时，控制模块430在检测按钮425的按下之后启动生物测量传感器，如步骤[a]所示。此外，控制模块430可根据生物测量传感器的启动，执行用于通过相机模块410获取图像的应用程序。

当控制模块430至少基于通过传感器模块420所接收的输入信号来检测待检查对象510的接触操作或分离操作，并且检测在接触操作之后的按钮425的按下时，控制模块430改变相机模块410的设置，如步骤[b]所示。例如，即使在检测到按钮425的按下之前，控制模块430也可根据接触操作控制焦距或白平衡。接触操作可对应于半按焦距，以用于控制相机模块410的焦距。

此后，如步骤[c]所示，控制模块430根据开关452的按压通过相机模块410获取图像。控制模块430根据分离操作而禁用生物测量传感器，如步骤[d]所示。

图19为根据本发明实施方式的用于通过使用指纹信息来处理图像的操作的流程图。

参考图19，传感器模块420可包括指纹识别传感器。在这种情况下，传感器模块420通过指纹识别传感器，接收包括与待检查对象510的指纹有关的信息的输入信号。控制模块430根据指纹信息控制电子设备400。

在步骤1410中，传感器模块420接收包括生理信号和指纹信息的输入信号，并且控制模块430至少基于输入信号检测输入操作。

在步骤1420中，控制模块430基于包括在输入信号中的指纹信息识别用户。

在步骤1430中，控制模块430根据输入操作通过相机模块410获取图像。

在步骤1440中，控制模块430检测用户是否包含在图像中，并且在步骤1450中，当用户包含在图像中时，将图像存储在受保护的存储空间中。该受保护的存储空间可以为存在于电子设备400内的安全区域、用于用户的私人存储空间、基于电子设备400的外部设备或服务的私人存储区域。

当确定指纹为未识别用户的指纹时，控制模块430可根据输入操作通过相机模块410获取图像，并将图像存储在客人存储空间中。该客人存储空间可为存在于电子设备400内的公布区域(例如，未经用户验证便可访问的存储器)、或基于服务的私人存储区域、存储指纹信息或图像中的至少一个以在电子设备400被偷走时记录用户的电子设备400的内部或外部设备。

当通过传感器模块420获取的生理信息是心律信息时，控制模块430可通过使用心律信息控制电子设备400以对图像进行处理。电子设备400可至少基于通过传感器模块420获取的生理信号，来获取待检查对象510的心律信息。控制模块430可将心律信息与对应于待检查对象510的用户的图像一起显示在显示器440上。

图20为根据本发明实施方式的用于使用心律信息提供预览图像的操作的流程图。

图21示出根据本发明实施方式的屏幕，该屏幕显示通过使用心律信息提供的预览图像。

参考图20和图21，在步骤1510中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测接触操作作为输入操作。

在步骤1520中，在维持接触操作的同时，控制模块430至少基于生理信号获取待检查对象510的心律信息。

在步骤1530中，控制模块430将通过相机模块410获取的预览图像631显示在显示器440上，并且还将心律信息633与预览图像一起显示。

在步骤1540中，控制模块430检测在接触状态期间的分离操作，并且在步骤1550中，通过控制相机模块410获取图像。

控制模块430可存储图像，使得心律信息包括在图像中。

控制模块430可检测包括在预览图像中的、对应于待检查对象510的用户的图像，并显示用户图像和心律信息，使得用户图像与心律信息彼此相关。

还可以包括这样的操作，所述操作为在显示预览图像631的同时，指定心律信息633的一个或多个显示属性(例如，位置、尺寸、颜色、形状、图标、头像和预定的模板)。

心律信息可为与压力或情绪相关的信息，其中压力或情绪是基于通过HRM传感器或HRV传感器所收集的生理信号确定的，并且心律信息633的显示属性可基于与对应压力或情绪有关的信息进行指定或改变。

图22为根据本发明实施方式的用于将用户图像和心律信息显示在一起的操作的流程图。

图23示出根据本发明实施方式的将图像与心律信息显示在一起的屏幕。

参考图22和图23，在步骤1610中，例如，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。

在步骤1620中，控制模块430至少基于生理信号获取待检查对象510的心律信息。

在步骤1630中，控制模块430根据输入操作通过相机模块410获取图像。

在步骤1640中，控制模块430在图像内检测对应于待检查对象510的用户图像。当图像中包括多人643、645和647的图像时，控制模块430根据心律信息、生理信息、或用户设置来检测对应于待检查对象510的用户图像。电子设备400可包括数据库，该数据库包括对应于心律信息的用户图像，并且可基于该数据库来检测用户图像。

在步骤1650中，控制模块430将所获取的图像641显示在显示器440上并且显示心律信息，使得心律信息以图形对象或文本的形式646与用户图像645相关。

控制模块430可将基于生理信息的情绪信息与图像一起显示。

图24为根据本发明实施方式的用于将所获取的图像与情绪信息显示在一起的操作的流程图。

图25示出根据本发明实施方式的将图像与情绪信息显示在一起的屏幕。

参考图24和图25，在步骤1710中，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。

在步骤1720中，控制模块430至少基于生理信号获取待检查对象510的情绪信息。情绪信息可包括例如喜悦、羞涩、悲伤、或兴奋。情绪信息可根据心律信息来获取。

控制模块430通过检测预定时间内的心律增加或心律信号的特定模式，确定对应于喜悦的情绪信息。

另选地，控制模块430可通过识别在预览图像中示出的情绪状态来获取情绪信息，其中预览图像通过相机模块410获得。例如，控制模块430可基于以下各项中的至少一个来获取情绪信息：预览图像中的用户身体运动模式、面部图像中的面部表情、面部形状、面部的运动模式(例如，眼睛或嘴巴的形状变化)、是否存在笑容、或是否存在眨眼。

此外，在步骤1730中，控制模块430根据输入操作通过相机模块410获取图像。

在步骤1740中，控制模块430将情绪信息与图像一起显示在显示器440上。

控制模块430可根据情绪信息改变在图像中示出的用户的面部表情。更具体地讲，控制模块430可分析用户的面部的特征点，并且改变这些特征点中的与情绪信息相关联的特征点的位置。当情绪信息对应于喜悦时，控制模块430可通过改变对应于嘴巴的特征点的位置使得嘴角上扬或嘴唇分开来改变用户的面部表情，以在图像中表示用户的笑脸。

控制模块430可根据情绪信息改变在图像中示出的用户的面部颜色的一部分或全部。例如，当情绪信息对应于兴奋或羞涩时，控制模块430可使红色653出现在图像中所示的用户651的脸颊上。

控制模块430可识别包括在图像中的人，获取对应于待检查对象510的用户和其他人的生理信息或情绪信息，并将生理信息和情绪信息显示在一起。为此，电子设备400可与包括所识别的人的生理信号的另一个设备通信。控制模块430可基于包括在由传感器模块420接收的输入信号中的生理信号而获取用户的生理信息，并且通过与对应于面部识别信息的另一个电子设备通信而获取其他人的生理信息。

图26示出根据本发明实施方式的显示图像的显示屏，其中在所述图像中，生理信息与用户相关。

参考图26，例如，对应于待检查对象510的用户661的生理信息662是通过电子设备400的传感器模块获取的，并且与用户661相关。此外，其他用户663和667的生理信息664和668可通过其他用户663和667的通信或可穿戴设备获取，并且与其他用户663和667相关。

控制模块430可将生理信息或情绪信息与通过相机模块410获取的图像存储在一起。生理信息或情绪信息可存储在用于图像的文件格式的元信息区域中。

图27A至图27D示出根据本发明实施方式的控制电子设备以拍摄全景图像的方法。

参考图27A至图27D，传感器模块420接收包括待检查对象510的生理信号的输入信号，并且控制模块430至少基于输入信号检测输入操作。控制模块430组合根据所检测的输入操作获取的一个或多个图像以生成连接的图像，例如，全景图像。

当检测到接触操作时，电子设备400的控制模块430通过相机模块410获取参考图像，并且根据电子设备400的主体的向上和向下或向左和向右旋转而获取连接到参考图像的一个或多个图像。控制模块430在电子设备400的显示器上显示向导，该向导用于根据主体的旋转指示连接到参考图像的一个或多个图像的位置。向导显示拍摄方向或拍摄位置。当检测到另一个输入操作时，控制模块430组合参考图像和一个或多个图像。例如，组合可对应于与根据主体的向上和向下旋转而位于参考图像上方或下方的图像对应的一个或多个图像的组合，或者对应于与根据主体的向右和向左旋转而位于参考图像的左侧或右侧的图像对应的一个或多个图像的组合。

参考图27A，当检测到相对于被布置在电子设备400的主体的后表面上的传感器模块420的接触操作时，控制模块430通过被布置在电子设备400的主体的前表面上的相机模块411获取参考图像670a。参考图像670a可包括对应于电子设备400的用户的图像671。

参考图27B，当电子设备400的主体逆时针旋转时，控制模块430通过相机模块411获取对应于在参考图像670a的右侧的图像的至少一个图像670b或670c。至少一个图像670b或670c可包括参考图像670a的至少一些区域。

参考图27C，当电子设备400的主体顺时针旋转时，控制模块430通过相机模块411获取对应于在参考图像670a的左侧的图像的至少一个图像670d或670e。至少一个图像670d或670e可包括参考图像670a的至少一些区域。

参考图27D，根据接触操作维持特定时间，在接触状态之后，当检测到另外的接触操作时或当检测到分离操作时，控制模块430通过连接参考图像670a和至少一个图像670b、670c、670d、或670e，生成一个图像670f。

此外，本文所公开的实施方式仅用于说明和技术内容的理解，而不限制本发明的范围。因此，所属领域技术人员应理解，在不脱离本发明的精神和范围的情况下可做出形式和细节上的各种更改。因此，本发明的范围并非由本发明的详细说明定义，而由所附权利要求及其等价物定义，因此在所述范围内的全部差异均应解释为包括在本发明中。

Claims (15)

1.一种控制电子设备的方法，所述方法包括：

接收输入信号，所述输入信号包括将通过所述电子设备的传感器模块进行检查的对象的生理信号；

基于至少所述输入信号检测输入操作；以及

根据所述输入操作通过相机模块获取图像。

2.根据权利要求1所述的方法，其中所述生理信号包括光电容积描记法测量信号。

3.根据权利要求1所述的方法，其中检测所述输入操作包括检测接触操作，所述接触操作包括接触所述传感器模块的表面的至少一部分。

4.根据权利要求1所述的方法，其中根据通过所述传感器模块接收的所述生理信号和另一个输入信号的信号电平或信号模式中的一个来检测所述输入操作。

5.根据权利要求1所述的方法，其中检测所述输入操作包括：

检测接触操作，所述接触操作包括在所述传感器模块的表面的至少一部分上的接触；以及

检测状态，其中在所述状态下，所述接触在所述接触操作之后维持预定时间；以及

其中获取所述图像包括：

根据所述接触操作改变所述相机模块的设置；以及

当经过所述预定时间时，通过所述相机模块获取所述图像。

6.根据权利要求5所述的方法，其中改变所述设置包括控制所述相机模块的焦距和控制所述相机模块的白平衡中的至少一者。

7.根据权利要求1所述的方法，其中检测所述输入操作包括检测接近操作，所述接近操作包括在特定范围内接近所述传感器模块的表面；以及

其中获取所述图像包括根据所述接近操作改变所述相机模块的设置。

8.根据权利要求1所述的方法，其中检测所述输入操作包括检测分离操作，所述分离操作包括与所述传感器模块的表面分离。

9.根据权利要求1所述的方法，其中检测所述输入操作包括：

检测接触操作，所述接触操作包括接触所述传感器模块的表面的至少一部分；以及

检测分离操作，所述分离操作包括与所述传感器模块的所述表面分离；以及

其中获取所述图像包括：

根据所述接触操作改变所述相机模块的设置；以及

根据所述分离操作通过所述相机模块获取所述图像。

10.根据权利要求1所述的方法，进一步包括：

基于所述输入信号获取待检查对象的心律信息；

在所述图像中识别所述待检查对象；以及

显示与识别到的所述待检查对象相关联的所述心律信息。

11.一种电子设备，所述电子设备包括：

相机模块；

传感器模块，接收包括待检查对象的生理信号的输入信号；以及

控制模块，至少基于所述输入信号来检测输入操作，并根据所述输入操作通过所述相机模块获取图像。

12.一种方法，所述方法包括：

通过电子设备的生物统计传感器接收用户的生理信号；以及

至少基于所述生理信号的变化通过所述电子设备的相机模块获取图像。

13.根据权利要求12所述的方法，其中获取所述图像包括基于所述生理信号的电平和模式中的至少一个来确定所述生理信号是否改变。

14.根据权利要求12所述的方法，其中获取所述图像包括当不再接收到所述生理信号时通过所述相机模块获取所述图像。

15.一种移动终端，所述移动终端包括：

相机模块，布置在所述移动终端的主体的前表面和后表面中的至少一个上，

传感器模块，用于接收用户的生理信号，所述传感器模块被形成在所述主体的所述前表面和所述后表面中的至少一个上；以及

控制模块，用于至少基于所述生理信号的变化通过所述相机模块获取图像，所述控制模块功能性地连接到所述相机模块和所述传感器模块。