CN105430250B - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN105430250B
CN105430250B CN201510526312.0A CN201510526312A CN105430250B CN 105430250 B CN105430250 B CN 105430250B CN 201510526312 A CN201510526312 A CN 201510526312A CN 105430250 B CN105430250 B CN 105430250B
Authority
CN
China
Prior art keywords
focus value
focus
value
mobile terminal
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510526312.0A
Other languages
English (en)
Other versions
CN105430250A (zh
Inventor
许亨茂
蔡圭烈
元载现
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020140122238A external-priority patent/KR102206386B1/ko
Priority claimed from KR1020140122233A external-priority patent/KR20160031891A/ko
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN105430250A publication Critical patent/CN105430250A/zh
Application granted granted Critical
Publication of CN105430250B publication Critical patent/CN105430250B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Telephone Function (AREA)
  • Studio Devices (AREA)

Abstract

移动终端及其控制方法。提供了一种拍摄图像的移动终端及其控制方法。该移动终端包括:相机单元,其被配置为接收外部图像并且将所接收到的图像处理为图像帧;以及控制单元,其被配置为设定从所述相机单元接收的图像帧的焦点值,其中,所述焦点值是通过利用根据第二方案提取的第二焦点校正根据第一方案提取的第一焦点值而获得的焦点值,所述第一方案利用图像的相位差来检测焦点值,所述第二方案利用图像的比较值来检测焦点。

Description

移动终端及其控制方法
技术领域
本公开涉及能够拍摄图像的移动终端及其控制方法。
背景技术
终端可根据其移动性而大致分成移动/便携式终端或固定终端。移动终端还可根据用户是否可直接携带终端而分成手持终端或车载终端。
移动终端已变得越来越多功能。这些功能的示例包括数据和语音通信、经由相机拍摄图像和视频、录制音频、经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。
一些移动终端包括支持玩游戏的附加功能,而其它终端被配置成多媒体播放器。最近,移动终端已被配置为接收广播和多播信号,其使得能够观看诸如视频和电视节目的内容。
正不断进行努力以支持和增加移动终端的功能。这些努力包括软件和硬件改进,以及结构组件上的改变和改进。
此外,在通过相机拍摄图像时自动调节焦点值并且利用自动调节的焦点值的方法仍有待引入。
发明内容
因此,详细描述的一方面在于提供一种在通过相机拍摄图像时利用通过自动调节焦点值而获得的信息的方法。
详细描述的另一方面在于提供一种改变拍摄的图像的焦点的方法。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现和广义描述的,一种移动终端包括:相机单元,其被配置为接收外部图像并且将所接收到的图像处理为图像帧;以及控制单元,其被配置为设定从所述相机单元接收的图像帧的焦点值,其中,所述焦点值是通过利用根据第二方案提取的第二焦点校正根据第一方案提取的第一焦点值而获得的焦点值,所述第一方案利用图像的相位差来检测焦点值,所述第二方案利用图像的比较值来检测焦点。
在本公开的示例性实施方式中,所述控制单元可通过计算第一焦点值与第二焦点值之间的差值来校正第一焦点值的误差。
在本公开的示例性实施方式中,所述移动终端还可包括存储单元,其被配置为存储与设定焦点有关的焦点信息,其中,所述控制单元可利用焦点信息来确定根据第一方案提取的第一焦点值的精度。
在本公开的示例性实施方式中,与设定焦点有关的焦点信息可以是第一焦点值与第二焦点值之间的差值,多个先前计算的差值可被存储在存储单元中。
在本公开的示例性实施方式中,所述控制单元可基于存储在存储单元中的所述多个差值来确定第一焦点值的精度,并且当所述精度等于或高于预设水平时,所述控制单元可将第一焦点值设定为图像帧的焦点值。
在本公开的示例性实施方式中,当所述精度等于或高于所述预设水平时,所述控制单元可不校正第一焦点值的误差。
在本公开的示例性实施方式中,当所述精度等于或高于所述预设水平时,所述控制单元可不再提取第二焦点值。
在本公开的示例性实施方式中,所述移动终端还可包括触摸屏单元,其被配置为显示从相机单元接收的图像帧,其中,所述控制单元可在触摸屏单元上显示分别呈现第一焦点值和第二焦点值的图形对象,使得所述图形对象视觉上相区分。
在本公开的示例性实施方式中,当对所述图形对象施加预设类型的触摸时,所述控制单元可利用第二焦点值来校正第一焦点值的误差。
在本公开的示例性实施方式中,所述控制单元可在触摸屏单元上显示呈现经误差校正的第一焦点值的图形对象。
在本公开的示例性实施方式中,当从相机单元接收图像时,所述控制单元可在背景中校正第一焦点值的误差。
在本公开的示例性实施方式中,当第一焦点值和第二焦点值相同时,所述控制单元可将图像帧的焦点设定为第一焦点值。
在本公开的示例性实施方式中,当第一焦点值和第二焦点值不同时,所述控制单元可将指示需要误差校正的通知信息输出到触摸屏单元。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现和广义描述的,一种控制移动终端的方法包括以下步骤:从相机单元接收外部图像并且将所接收到的图像处理为图像帧;根据第一方案提取图像帧的第一焦点值,该第一方案利用图像的相位差来检测焦点值;根据第二方案提取图像帧的第二焦点值,该第二方案利用图像的比较值来检测焦点;以及将通过利用第二焦点值校正第一焦点值而获得的焦点值设定为图像帧的焦点值,其中,在设定焦点值的步骤中,当第一焦点值的精度等于或高于预设水平时,不执行校正第一焦点值的步骤。
在本公开的示例性实施方式中,可利用第一焦点值与第二焦点值之间的差值来校正第一焦点值。
在本公开的示例性实施方式中,所述方法还可包括以下步骤:将第一焦点值与第二焦点值之间的差值存储在存储单元中;以及利用存储在存储单元中的差值来计算第一焦点值的精度。
在本公开的示例性实施方式中,当所计算出的精度等于或高于预设水平时,可不执行校正第一焦点值的步骤。
在本公开的示例性实施方式中,当所计算出的精度等于或高于预设水平时,可不执行提取第二焦点值的步骤。
在本公开的示例性实施方式中,当所计算出的精度等于或高于预设水平时,第一焦点值可被设定为图像帧的焦点值。
在本公开的示例性实施方式中,在图像帧显示在触摸屏单元上的状态下,当校正第一焦点值时,呈现第一焦点值的图形对象可被输出到图像帧上。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现和广义描述的,一种移动终端包括:相机,其被配置为将外部图像处理为图像帧;触摸屏,其被配置为显示图像帧;以及控制单元,其被配置为在图像帧显示在触摸屏上的状态下检测图像帧的焦点值,其中,在显示图像的状态下,所述控制单元可基于接收的图像拍摄命令利用所检测到的焦点值拍摄图像,并且当拍摄图像时,控制单元可将指示日志的焦点信息与所拍摄的图像一起存储,所述日志关于在基于拍摄图像的时间点的预设时间周期内检测的图像帧的焦点。
在本公开的示例性实施方式中,所述焦点信息可以是日志,该日志关于从接收图像帧的时间点至拍摄图像帧的时间点所检测到的图像帧的焦点。
在本公开的示例性实施方式中,所述控制单元可利用图像帧的相位差或者利用图像帧的比较值来检测图像帧的焦点。
在本公开的示例性实施方式中,所述控制单元可将图像帧分成多个区域,并且存储所述多个区域中的每一个的焦点信息。
在本公开的示例性实施方式中,所述焦点信息可指示关于按照所述多个区域检测的焦点的日志。
在本公开的示例性实施方式中,所述控制单元可在所拍摄的图像帧上按照交叠方式输出呈现焦点信息的至少一个图形对象。
在本公开的示例性实施方式中,当至少一个图形对象中的任一个被选择时,所述控制单元可将所拍摄的图像帧的焦点值改变为由所选择的图形对象呈现的焦点值。
在本公开的示例性实施方式中,当所拍摄的图像帧的焦点值改变为由所选择的图形对象呈现的焦点值时,所述控制单元可处理焦点值所指示的区域以及焦点值所指示的区域以外的区域,使得所述区域视觉上相区分。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现和广义描述的,一种控制移动终端的方法包括以下步骤:从相机接收外部图像并且将所接收到的图像处理为图像帧;在触摸屏上显示所处理的图像帧;在图像帧显示在触摸屏上的状态下,检测图像帧的焦点值;当接收到图像拍摄命令时,利用所检测到的焦点值拍摄外部图像;以及在拍摄图像之后,将指示日志的焦点信息与所拍摄的图像一起存储,所述日志关于在基于拍摄图像的时间点的预设时间周期内检测的图像帧的焦点。
在本公开的示例性实施方式中,可利用各个区域的相位差或者利用图像帧的比较值来检测图像帧的焦点,焦点信息可指示日志,该日志关于从自相机接收图像帧的时间点至拍摄图像的时间点所检测到的焦点,可利用焦点信息将所拍摄的图像的所检测到的焦点值改变为不同的焦点值。
本申请的进一步的适用范围将从下文给出的详细描述而变得更明显。然而,应该理解,仅示意性地在指示本发明的优选实施方式的同时给出详细描述和具体示例,因为对于本领域技术人员而言,通过该详细描述,在本发明的精神和范围内的各种改变和修改将变得明显。
附图说明
附图被包括以提供对本发明的进一步理解,并且被并入本说明书并构成本说明书的一部分,附图示出了示例性实施方式并且与说明书一起用于说明本发明的原理。
附图中:
图1A是根据本公开的示例性实施方式的移动终端的框图。
图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
图2是示出在根据本公开的示例性实施方式的移动终端中设定焦点的方法的流程图。
图3是示出图2的控制方法的曲线图。
图4是示出存储日志信息(或者历史信息)的方法的流程图。
图5A、图5B和图6是与日志信息有关的曲线图。
图7A和图7B是示出控制以不同方式检测的焦点的方法的概念图。
图8A和图8B是示出当以不同方式检测的焦点具有相同值时的控制方法的概念图。
图9A、图9B、图9C和图9D是示出根据来自用户的控制命令校正焦点值的误差的概念图。
图10是示出使用与检测的焦点值有关的日志信息的方法的流程图。
图11A、图11B和图11C是示出图10的控制方法的概念图。
图12A、图12B、图12C和图12D是示出存储有被分成多个区域的图像的焦点信息的形状的概念图。
图13A和图13B是示出使用焦点信息的方法的概念图。
具体实施方式
现在将参照附图根据本文所公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同或相似的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,本领域普通技术人员熟知的内容通常被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的那些更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
将理解,尽管本文中可能使用术语第一、第二等来描述各种元件,这些元件不应受这些术语的限制。这些术语通常仅用于将一个元件与另一元件相区分。
将理解,当元件被称作“与”另一元件“连接”时,该元件可与所述另一元件连接或者还可存在中间元件。相比之下,当元件被称作“与”另一元件“直接连接”时,不存在中间元件。
除非从上下文看出表示明确不同的含义,否则单数表示形式可包括多数表示形式。
本文中使用诸如“包括”或“具有”的术语,应该理解它们旨在指示存在说明书中所公开的多个组件、功能或步骤,还将理解,同样可利用更多或更少的组件、功能或步骤。
本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、石板PC、平板PC、超级本、可穿戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等。
仅作为非限制性示例,参照特定类型的移动终端进行进一步描述。然而,这些教导同样适用于其它类型的终端,例如上述那些类型。另外,这些教导也可适用于诸如数字TV、台式计算机等的固定终端。
现在参照图1A至图1C,其中图1A是示出根据本公开的移动终端的框图,图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制单元180和电源单元190的组件。将理解,不要求实现所示的所有组件,可另选地实现更多或更少的组件。
无线通信单元110通常包括允许通信(例如,移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。
另外,无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120来获得,并且可由控制单元180根据装置参数、用户命令及其组合来分析和处理。
感测单元140通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器、气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器获得的信息,及其组合。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。
显示单元151可具有与触摸传感器的中间层结构或集成结构,以便方便触摸屏。触摸屏可在移动终端100与用户之间提供输出接口,并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,移动终端100可响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如,存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内,针对移动终端100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是应用程序被存储在存储器170中,被安装在移动终端100中,并由控制单元180执行以执行移动终端100的操作(或功能)。
除了与应用程序关联的操作以外,控制单元180通常还用于控制移动终端100的总体操作。控制单元180可通过对由图1A所示的各种组件输入或输出的信号、数据、信息等进行处理、或者激活存储在存储器170中的应用程序,来提供或处理适合于用户的信息或功能。作为一个示例,控制单元180根据存储在存储器170中的应用程序的执行来控制图1A至图1C所示的一些或全部组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
上述组件中的至少一些可按照协作方式来操作,以实现根据稍后将说明的各种实施方式的眼镜型终端的操作或控制方法。眼镜型终端的操作或控制方法可通过在眼镜型终端上驱动存储在存储器170中的至少一个应用程序来实现。
仍参照图1A,现在将更详细地描述该图中描绘的各种组件。
关于无线通信单元110,广播接收模块111通常被配置为经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可包括卫星信道、地面信道或这二者。在一些实施方式中,可使用两个或更多个广播接收模块111以方便同时接收两个或更多个广播信道或支持在广播信道之间切换。
移动通信模块112可向一个或更多个网络实体发送无线信号和/或从其接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分,所述移动通信网络根据移动通信的技术标准或通信方法(例如,全球移动通信系统(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强型优化语音数据或增强型仅语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等)来构建。
经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。
无线互联网模块113被配置为方便无线互联网接入。此模块可从内部或外部连接到移动终端100。无线互联网模块113可根据无线互联网技术经由通信网络发送和/或接收无线信号。
这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可根据这些无线互联网技术以及其它互联网技术中的一个或更多个来发送/接收数据。
在一些实施方式中,当根据(例如)WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LET、LTE-A等实现无线互联网接入时,作为移动通信网络的一部分,无线互联网模块113执行这种无线互联网接入。因此,互联网模块113可与移动通信模块112协作或用作移动通信模块112。
短距离通信模块114被配置为方便短距离通信。用于实现这种短距离通信的合适的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短距离通信模块114通常经由无线局域网支持移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端100之间的通信或者移动终端与另一移动终端100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。
在一些实施方式中,另一移动终端(可类似于移动终端100来配置)可以是能够与移动终端100交换数据(或者与移动终端100协作)的可穿戴装置(例如,智能手表、智能眼镜或头戴式显示器(HMD))。短距离通信模块114可感测或识别可穿戴装置,并允许可穿戴装置与移动终端100之间的通信。另外,当所感测到的可穿戴装置是被验证与移动终端100进行通信的装置时,例如,控制单元180可经由短距离通信模块114将在移动终端100中处理的数据发送给可穿戴装置。因此,可穿戴装置的用户可在可穿戴装置上使用在移动终端100中处理的数据。例如,当在移动终端100中接到电话时,用户可利用可穿戴装置来回电话。另外,当在移动终端100中接收到消息时,用户可利用可穿戴装置来查看所接收到的消息。
位置信息模块115通常被配置为检测、计算、推导或者标识移动终端的位置。例如,位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块或这二者。如果需要,位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作,以获得与移动终端的位置有关的数据。
作为一个示例,当移动终端使用GPS模块时,可利用从GPS卫星发送的信号来获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,可基于与无线接入点(AP)有关的信息来获取移动终端的位置,所述无线接入点(AP)向Wi-Fi模块发送无线信号或者从Wi-Fi模块接收无线信号。
输入单元120可被配置为允许向移动终端120的各种类型的输入。这种输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧可被显示在显示单元151上或存储在存储器170中。在一些情况下,相机121可按照矩阵配置布置,以使得具有各种角度或焦点的多个图像能够被输入至移动终端100。作为另一示例,相机121可按照立体布置方式来设置,以获取用于实现立体图像的左图像和右图像。
麦克风122通常被实现为允许向移动终端100输入音频。可根据移动终端100中执行的功能来按照各种方式处理音频输入。如果需要,麦克风122可包括各种噪声去除算法以去除在接收外部音频的过程中生成的不期望的噪声。
用户输入单元123是允许用户输入的组件。这种用户输入可使得控制单元180能够控制移动终端100的操作。用户输入单元123可包括机械输入元件(例如,位于移动终端100的正面和/或背面或侧面的键、按钮、薄膜开关、滚轮、触合式开关等)或者触敏输入装置等中的一个或更多个。作为一个示例,触敏输入装置可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在移动终端上的触摸屏以外的位置处的触摸键。另一方面,虚拟键或视觉键可按照各种形状(例如,图形、文本、图标、视频或其组合)显示在触摸屏上。
感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制单元180通常与感测单元140协作以基于感测单元140所提供的感测来控制移动终端100的操作或者执行与安装在移动终端中的应用程序关联的数据处理、功能或操作。可利用各种传感器中的任何传感器来实现感测单元140,现在将更详细地描述其中一些传感器。
接近传感器141可包括在没有机械接触的情况下,利用电磁场、红外线来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可布置在移动终端被触摸屏覆盖的内侧区域处或触摸屏附近。
例如,接近传感器141可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型接近传感器时,接近传感器141可通过电磁场响应于导电物体的靠近而发生的变化来感测指点器相对于触摸屏的接近。在这种情况下,触摸屏(触摸传感器)也可被归类为接近传感器。
本文中常常将提及术语“接近触摸”以表示指点器被设置成在没有接触触摸屏的情况下接近触摸屏的情景。本文中常常将提及术语“接触触摸”以表示指点器与触摸屏进行实际接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置,这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可感测接近触摸以及接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等)。通常,控制单元180对与接近传感器141所感测的接近触摸和接近触摸模式对应的数据进行处理,并在触摸屏上输出视觉信息。另外,控制单元180可根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或处理不同的数据。
触摸传感器可利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如,显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。
作为一个示例,触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可被配置为不仅感测触摸位置和触摸面积,而且感测触摸压力和/或触摸电容。通常使用触摸物体来对触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。
当通过触摸传感器感测到触摸输入时,可将对应信号发送给触摸控制器。触摸控制器可对所接收到的信号进行处理,然后将对应数据发送给控制单元180。因此,控制单元180可感测显示单元151的哪一区域被触摸。这里,触摸控制器可以是独立于控制单元180的组件、控制单元180及其组合。
在一些实施方式中,控制单元180可根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的触摸物体的类型来执行相同或不同的控制。例如,根据提供触摸输入的物体是执行相同的控制还是不同的控制可基于移动终端100的当前操作状态或者当前执行的应用程序来决定。
触摸传感器和接近传感器可单独实现或者组合实现,以感测各种类型的触摸。这些触摸包括短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻拂触摸、缩小触摸、放大触摸、轻扫触摸、悬停触摸等。
如果需要,可实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如,控制单元180可基于由照明传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快,光到达光学传感器的时间远比超声波到达超声传感器的时间短。可利用这一事实来计算波生成源的位置。例如,可基于光作为基准信号利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等)、光电传感器(或图像传感器)和激光传感器。
利用激光传感器实现相机121可允许检测物理对象相对于3D立体图像的触摸。光电传感器可被层压在显示装置上或者与显示装置交叠。光电传感器可被配置为对接近触摸屏的物理对象的移动进行扫描。更详细地讲,光电传感器可包括成行和列的光电二极管和晶体管,以利用根据施加的光的量而变化的电信号来对光电传感器处接收的内容进行扫描。即,光电传感器可根据光的变化来计算物理对象的坐标,从而获得物理对象的位置信息。
显示单元151通常被配置为输出在移动终端100中处理的信息。例如,显示单元151可显示在移动终端100处执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施方式中,显示单元151可被实现为用于显示立体图像的立体显示单元。
典型的立体显示单元可采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。
音频输出模块152通常被配置为输出音频数据。这些音频数据可从多种不同的源中的任何源获得,使得所述音频数据可从无线通信单元110接收或者可存储在存储器170中。所述音频数据可在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式下输出。音频输出模块152可提供与移动终端100所执行的特定功能有关的可听输出(例如,呼叫信号接收音、消息接收音等)。音频输出模块152还可被实现为受话器、扬声器、蜂鸣器等。
触觉模块153可被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等可通过用户选择或控制单元的设定来控制。例如,触觉模块153可按照组合方式或顺序方式输出不同的振动。
除了振动以外,触觉模块153可产生各种其它触觉效果,包括诸如插针排列向接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、利用能够吸热或发热的元件再现冷和热的感觉的效果等。
除了通过直接接触传递触觉效果以外,触觉模块153还可被实现为使得用户能够通过诸如用户的手指或手臂的肌肉觉来感觉到触觉效果。可根据移动终端100的特定配置设置两个或更多个触觉模块153。
光学输出模块154可输出用于利用光源的光指示事件的发生的信号。移动终端100中发生的事件的示例可包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。
由光学输出模块154输出的信号可被实现为使得移动终端发射单色光或多种颜色的光。例如,随着移动终端感测到用户已查看所发生的事件,信号输出可被终止。
接口单元160用作要与移动终端100连接的外部装置的接口。例如,接口单元160可接收从外部装置发送来的数据,接收电力以输送给移动终端100内的元件和组件,或者将移动终端100的内部数据发送给这种外部装置。接口单元160可包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
所述标识模块可以是存储用于验证移动终端100的使用权限的各种信息的芯片,并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。另外,具有标识模块的装置(本文中也称作“标识装置”)可采取智能卡的形式。因此,标识装置可经由接口单元160与终端100连接。
当移动终端100与外部托架连接时,接口单元160可用作使得能够将来自托架的电力供应给移动终端100的通道,或者可用作使得能够用来将由用户从托架输入的各种命令信号输送给移动终端的通道。从托架输入的各种命令信号或电力可用作用于识别出移动终端被正确安装在托架上的信号。
存储器170可存储用于支持控制单元180的操作的程序,并存储输入/输出数据(例如,电话簿、消息、静止图像、视频等)。存储器170可存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。
存储器170可包括一种或更多种类型的存储介质,包括闪存、硬盘、固态盘、硅磁盘、微型多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。移动终端100还可与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。
控制单元180通常可控制移动终端100的总体操作。例如,当移动终端的状态满足预设条件时,控制单元180可设定或解除用于限制用户相对于应用输入控制命令的锁定状态。
控制单元180还可执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理,或者执行模式识别处理以将触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外,控制单元180可控制那些组件中的一个或其组合,以便实现本文公开的各种示例性实施方式。
电源单元190接收外部电力或提供内部电力,并且供应对包括在移动终端100中的各个元件和组件进行操作所需的适当电力。电源单元190可包括电池,该电池通常是可再充电的或者以可拆卸的方式连接到终端主体以便于充电。
电源单元190可包括连接端口。该连接端口可被配置为接口单元160的一个示例,用于供应电力以对电池进行再充电的外部充电器可电连接到该连接端口。
作为另一示例,电源单元190可被配置为以无线方式对电池进行再充电,而不使用连接端口。在此示例中,电源单元190可利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发射器输送的电力。
本文所述的各种实施方式可利用(例如)软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。
现在将参照附图详细描述示例性实施方式。为了参照附图简要描述起见,将为相同或等同的组件提供相同的标号,其描述将不再重复。
在本公开中,设置在终端主体100的前表面上的相机将被称作前相机121a,设置在终端主体100的后表面上的相机将被称作后相机121b。另外,在前相机121a和后相机121b二者均适用的实施方式的情况下,前相机121和后相机121将被简称作相机121。
下文中,将详细描述具有能够自动调节焦点的相机的移动终端。图2是示出在根据本公开的示例性实施方式的移动终端中设定焦点的方法的流程图。图3是示出图2的控制方法的曲线图。
根据本公开的示例性实施方式的移动终端可包括被配置为接收外部图像并且将所接收到的图像处理为图像帧的相机121(或者相机单元)、被配置为设定从相机121接收的图像帧的焦点值的控制单元180以及被配置为视觉上显示图像帧的显示单元151(或者触摸屏单元)。
可通过从用户接收的控制命令来激活相机121。这里,相机121的激活可指从设置在相机121中的图像传感器接收图像的状态。
这里,可通过执行与利用相机121拍摄图像有关的相机应用来激活相机121。相机应用可在移动终端出厂时被预先安装,或者用户可选择性地从外部服务器(例如,应用商店等)下载相机应用并且将所下载的相机应用安装在移动终端中。
当从相机121接收到图像帧时,可设定图像帧的焦点值。这里,焦点可指当利用相机121拍摄图像时图像中最清楚地显现的点(或区域)。
焦点值可由控制单元180自动地设定,或者可由用户手动设定。是自动还是手动设定焦点值可由用户来选择。
在设定为自动设定焦点值的情况下,控制单元180可利用预设方案计算从相机121接收的图像的焦点值。这里,所述预设方案可以是通常使用的利用图像的相位差来检测焦点值的方案(例如,相位检测AF(PDAF)方案)、利用图像的对比度值来检测焦点值的方案(例如,对比度AF(CAF))等。
另外,在设定为手动设定焦点值的情况下,控制单元180可直接从用户接收焦点信息。例如,在从相机121接收的图像输出在显示单元151上的状态下,用户可对显示他或她期望的对象的区域施加触摸,因此将施加触摸的区域设定为焦点值。
下文中,将详细描述在设定为自动设定焦点值的情况下由控制单元180利用预设方案计算焦点值的方法。
首先,在根据本公开的示例性实施方式的移动终端中,在步骤S210中,可从相机121接收外部图像并且将其处理为图像帧。
这里,被处理为图像帧的外部图像可以是视频或静止图像。另外,图像帧可显示在显示单元151(也可被称作触摸屏单元,在下文中通常将使用显示单元)上。
接下来,根据本公开的示例性实施方式的移动终端可针对图像帧根据利用图像的相位差检测焦点值的第一方案提取第一焦点值。
这里,根据本公开的示例性实施方式的相机121还可包括具有像素的图像传感器上的狭缝。这里,所述狭缝是用于检测图像的相位差的工具。详细地讲,控制单元180可检测由狭缝的两侧接收的光的相位差。
将详细描述图像传感器的结构。设置在图像传感器中的单元可包括像素和狭缝。例如,在单元具有1.12微米(μm)的尺寸的情况下,图像传感器可具有尺寸为0.56微米(μm)的缝隙。
控制单元180可通过狭缝结构来检测图像的相位差,并且利用所检测到的相位差提取第一焦点值。该第一方案的优点在于,简单地通过检测从相机121接收的光的相位差来提取焦点值,因此,快速地提取焦点值。因此,当通过移动终端的相机121拍摄图像时,可迅速地拍摄图像。
然而,由于移动终端的物理限制,难以检测精确的相位差。因此,如果没有检测到精确的相位差,则控制单元180可提取错误的焦点值,因此,用户可能无法获得期望的图像。
为了解决该问题,在根据本公开的示例性实施方式的移动终端中,在步骤S230中,可基于第一焦点值根据利用图像的比较值检测焦点值的第二方案提取第二焦点。
根据第二方案,由于检测图像的比较值并且利用比较值提取焦点值,所以可获得高精度水平,但是花费较长时间来提取焦点值。
利用第二方案,控制单元180还可基于第一焦点值检测图像的比较值。这里,控制单元180可检测已设定第一焦点值的区域的周边上的图像的比较值,而非检测整个图像的比较值。所述周边区域可以是具有预设尺寸的区域。
控制单元180可检测周边区域的图像的比较值并且检测第二焦点值。在这种情况下,与针对整个图像检测焦点值的处理相比,可更快速地检测焦点值。
此后,在根据本公开的示例性实施方式的移动终端中,在步骤S240中,可利用第二焦点值校正第一焦点值并且可将经校正的焦点值设定为图像帧的焦点值。
控制单元180可比较所计算出的第一焦点值和第二焦点值。这里,当第一焦点值和第二焦点值相同时,控制单元180可将第一焦点值设定为从相机121接收的图像帧的焦点值。
然而,当第一焦点值和第二焦点值不相同时,控制单元180可利用第二焦点值来校正第一焦点值。
详细地讲,控制单元180可计算第一焦点值与第二焦点值之间的误差。这里,第一焦点值与第二焦点值之间的误差可被设定为偏移值。例如,参照图3,控制单元180可检测利用相位差检测的第一焦点值与利用图像的比较值检测的第二焦点值之间的偏移值。
这里,第一焦点值可以是根据第一方案检测的至少两条曲线图相交的交点。另外,第二焦点值可以是根据第二方案检测的曲线图的顶点。另外,偏移值可以是交点的x值与顶点的x值之间的差值。
这里,控制单元180可利用偏移值校正第一焦点值。这样,在本公开的示例性实施方式中,可校正利用相位差检测的第一焦点值的误差。
即,在本公开的示例性实施方式中,为了增加利用相位差检测的第一焦点值的精度,基于第一焦点值利用图像的比较值进一步检测第二焦点值,并且可利用第二焦点值校正第一焦点值。
另外,在检测焦点时,在本公开的示例性实施方式中,可利用先前检测的焦点值的日志信息更快速地检测焦点值。这里,日志信息可包括先前检测的偏移值信息。
详细地讲,在检测到第一焦点值之后,控制单元180可利用包括在先前日志信息中的偏移值信息来校正第一焦点值。即,在根据第二方案提取第二焦点值之前,可首先预先校正第一焦点值。这样,根据本公开的示例性实施方式,可获得具有更高精度的第一焦点值。
此后,控制单元180可基于所校正的第一焦点值检测第二焦点值,并且利用所检测到的第二焦点值对经校正的第一焦点值进行重新校正。在这种情况下,在本公开的示例性实施方式中,由于与基于校正之前的第一焦点值获得焦点值的情况相比,基于校正之后具有更高精度的经校正的第一焦点值获得第二焦点值,所以可节省用于计算第二焦点值的时间。
另外,在本公开的示例性实施方式中,当确定没有必要利用先前日志信息使用第二焦点值校正第一焦点值时,可不进一步检测第二焦点值。即,可省略使用第二方案检测焦点值的步骤,并且可仅利用第一方案获得焦点值。例如,确定不需要使用第二焦点值的校正的情况可指第一焦点值与第二焦点值之间的偏移值(差值)等于或小于预设值的情况。
这是因为,如果通过先前日志信息,第一焦点值的偏移值充分小,则确定第一焦点值的精度高,不再需要通过第二方案的校正。
因此,与每次通过组合第一现有第一方案和第二方案获得焦点值的方案相比,可利用日志信息更快速地获得焦点值。
下文中将详细描述在计算焦点值时存储先前日志信息的方法。图4是示出存储日志信息(或者历史信息)的方法的流程图。图5A和图5B以及图6是与日志信息有关的曲线图。
详细地讲,在根据本公开的示例性实施方式的移动终端中,当焦点值的校正完成时,在步骤S410中,可将与焦点值的校正有关的信息存储在存储单元170中。即,控制单元180可将偏移值存储在存储单元170中。
当对从相机121接收的图像帧执行自动调节焦点值的处理时,控制单元180可将在各个处理中计算的偏移值作为日志信息(或者历史信息)存储在存储单元170中。
这里,当下一次检测焦点值时可利用日志信息。详细地讲,当下一次接收到焦点值检测请求时,控制单元180可利用第一方案检测第一焦点值。这里,控制单元180可利用包括在日志信息中的偏移值校正通过第一方案检测的第一焦点值。
此后,控制单元180可基于所校正的第一焦点值利用第二方案检测第二焦点值,并且可按照如上所述的相同方式利用所校正的第一焦点值以及利用第二方案检测的第二焦点值来校正误差。
这里,可检测关于校正的焦点值以及利用第二方案检测的焦点值的新偏移值,并且控制单元180可将该新偏移值存储在存储单元170中。另外,当下一次检测焦点值时可使用该新偏移值来校正第一焦点值。
即,如上所述,在本公开的示例性实施方式中,先前用于检测焦点的偏移值信息可在下一次用于检测焦点值。详细地讲,在本公开的示例性实施方式中,可通过先前日志信息校正焦点值。另外,在本公开的示例性实施方式中,在第一焦点值的精度增加至等于或高于预设水平的情况下,不执行使用第二焦点值对第一焦点值的校正,由此可更快速地检测焦点值。
另外,在校正第一焦点值的误差之后,在步骤S420中,控制单元180可利用日志信息确定第一焦点值的精度。这里,可通过将偏移值与预设基准值进行比较来计算第一焦点值的精度。例如,当偏移值低于预设基准值时,确定第一焦点值的精度高,当偏移值高于预设基准值时,确定第一焦点值的精度低。
这里,在精度等于或高于预设基准值的情况下,控制单元180可不执行校正误差的步骤。这里,等于或高于预设水平的精度可预先设定或者可由用户设定。即,在确定精度等于或高于预设水平之后从相机接收图像的情况下,控制单元180可不根据第二方案检测第二焦点值(其花费较长时间),而是将根据第一方案的第一焦点值设定为图像的焦点值。
在这种情况下,在步骤S430中,可将从相机121接收的图像帧的焦点值设定为第一焦点值。即,在本公开的示例性实施方式中,与设定焦点值有关的日志信息被存储在存储器170中,并且当焦点值的设定完成时,确定所设定的焦点值的精度,当精度等于或高于预设水平时,可省略校正误差的步骤。
即,在本公开的示例性实施方式中,通过省略校正误差的步骤,可更快速地检测焦点值。另外,在本公开的示例性实施方式中,由于利用先前日志信息比较焦点值,所以即使省略校正误差值的步骤,焦点值的精度也可增加。这样,本公开可提供快速地检测焦点值并且增加精度的方法。
详细地讲,参照图5A,控制单元180可针对图像检测偏移值。此后,在针对焦点值的图像拍摄终止之后,可接收新图像帧。这里,新图像帧的接收可指处于去激活状态的相机被激活,从用户接收图像拍摄命令,并且从相机121接收图像的情况。这里,相机121的去激活可指无法从相机121接收图像的状态。
在相机121被去激活的状态下,在本公开的示例性实施方式中,可从用户接收用于激活相机121的控制命令以激活相机121。这里,激活可指可从相机121接收图像的情况。
这里,控制单元180可再次执行检测从相机121接收的图像的焦点的步骤。在这种情况下,控制单元180可检测不同于先前偏移值的偏移值,并且可将该不同偏移值存储在存储单元170中。
即,当相机121被激活时,控制单元180自动地检测焦点,当相机121被去激活时,控制单元180可存储偏移值。另外,当通过来自用户的控制命令再次激活相机121时,控制单元180可再次检测焦点值。
这里,在再次检测焦点值的情况下,控制单元180可利用所存储的偏移值校正根据第一方案提取的第一焦点值,并且将所校正的第一焦点值与利用第二方案提取的第二焦点值进行比较。这里,如图5B所示,所校正的第一焦点值与利用第二方案提取的第二焦点值的各个偏移值可小于先前偏移值。
当检测焦点值的处理被重复时,如图6所示,根据第一方案提取的第一焦点值与根据第二方案提取的第二焦点值之间的差值可等于或小于预设值。例如,第一焦点值和第二焦点值可相同。这里,当第一焦点值和第二焦点值相同时,第一焦点值的精度可为100%。
在这种情况下,控制单元180可确定不需要进一步校正根据第一方案提取的焦点值。因此,当此后检测焦点值时,利用第二方案检测焦点值的处理可被省略。因此,在本公开的示例性实施方式中,根据第一方案提取焦点值的时间可减少。
在上文中,详细描述了存储日志信息并且使用该日志信息的方法。这样,本公开可迅速地向用户提供精确的焦点值。
下文中,将描述视觉上显示自动调节焦点值的方法的方法。图7A和图7B是示出控制以不同方式检测的焦点的方法的概念图。图8A和图8B是示出当以不同方式检测的焦点具有相同值时的控制方法的概念图。
当从相机121接收到图像时,控制单元180可在显示单元151上显示所接收到的图像的图像帧。这里,控制单元180可针对图像帧检测焦点值。
这里,控制单元180可根据至少两个方案针对图像帧检测焦点值。如上所述,控制单元180可根据第一方案和第二方案检测焦点值。
这里,控制单元180可按照交叠方式在图像帧上输出指示根据第一方案的第一焦点值的图形对象以及指示根据第二焦点值的第二焦点值的图形对象。这里,指示第一焦点值的图形对象和指示第二焦点值的图形对象可被显示为在视觉上相区分。例如,如图7A所示,控制单元180可将作为具有正方形形状的图形对象720的第一焦点值和作为图形对象710的第二焦点值输出到显示单元151。
这里,控制单元180可暂时地输出图形对象。详细地讲,当从接收到图像的时间点开始上面参照图3和图4描述的控制方法的执行完成时,控制单元180可不再将图形对象输出到显示单元151。在这种情况下,用户可在图形对象正被暂时地输出的同时识别出正设定焦点值。另外,用户可在焦点值的设定完成之后拍摄图像。
此外,与参照图3和图4的描述不同,当预设类型的触摸施加到图形对象时,控制单元180可利用根据这两个方案提取的焦点值来校正误差。即,控制单元180可在触摸被施加到图形对象之后执行误差校正。
当误差校正步骤终止时,控制单元180可将呈现误差校正之后的焦点值的图形对象720输出到显示单元151。因此,用户可在误差校正完成之后拍摄具有精确的焦点值的图像。
此外,如图8A和图8B所示,在根据第一方案和第二方案提取的焦点值相同的情况下,控制单元180可暂时地显示分别呈现第一焦点值和第二焦点值的图形对象710和图形对象和720,随后仅显示呈现第一焦点值的图形对象710。因此,用户可识别出没有执行校正当前焦点值的误差的步骤。
在上文中,描述了利用至少两个焦点值检测方法来检测焦点值的情况。下文中,将描述通过来自用户的控制命令执行校正焦点值的误差的步骤的方法。图9A、图9B、图9C和图9D是示出根据来自用户的控制命令校正焦点值的误差的概念图。
在从相机单元121接收的图像被输出在显示单元151上的同时,当对其施加预设类型的触摸时,控制单元180可输出表示与该图像有关的功能的项目列表。例如,如图9A所示,预设类型的触摸可以是在图像帧连续地输出在显示单元151上的同时输入的双轻敲。
在这种情况下,所述列表可显示在正输出在显示单元151上的图像上。例如,如图9B所示,所述列表可包括表示图像拍摄模式、手抖校正、定时器和AF调节功能的项目。
这里,AF调节功能可以是通过根据第一方案提取的第一焦点值和根据第二方案提取的第二焦点值计算偏移值的功能。这里,所计算出的偏移值可用于校正根据第一方案提取的焦点值的误差。
另外,当由于确定根据第一方案提取的第一焦点值的精度等于或高于预设水平,不执行使用第二方案校正第一焦点值的步骤时,可使用AF调节功能。即,AF调节功能是通过由用户强制地执行利用第二方案校正误差的步骤来再次校正当前第一焦点值的误差的功能。
这里,AF调节功能可在移动终端的后台执行。这里,在后台执行AF调节功能可指在移动终端的用户没有意识到AF调节功能的执行的状态下执行AF调节功能。另外,当在后台执行AF调节功能时,显示单元151上可不显示指示正在执行AF调节的视觉信息。
另外,在本公开的示例性实施方式中,如图9C所示,可输出指示正在执行AF调节功能的通知信息。因此,用户可识别出当前正在调节AF,因此,不可拍摄图像。
另外,如图9D所示,在本公开的示例性实施方式中,当AF调节完成时,可输出指示AF调节已完成的通知信息。因此,用户可识别出能够拍摄图像。
如上所述,可在计算焦点值时提供利用先前日志信息更快速且精确地计算焦点值的方法。
另外,能够通过自动地调节焦点来拍摄图像的移动终端可利用自动调节的焦点的日志信息。下文中,将描述针对通过自动地调节焦点而拍摄的图像使用日志信息的方法。图10是示出使用与检测的焦点值有关的日志信息的方法的流程图。图11A、图11B和图11C是示出图10的控制方法的概念图。
在根据本公开的示例性实施方式的移动终端中,在步骤S1010中,可从相机121接收外部图像并将其处理为图像帧。
相机121可将从图像传感器接收的图像处理为图像帧。当执行与图像拍摄有关的应用时,可激活相机121。在这种情况下,相机121的激活可指可从相机121接收图像的状态。
可根据表示与图像的拍摄有关的应用的图形对象的用户选择来执行与拍摄图像有关的相机应用的执行。
此后,在步骤S1020中,根据本公开的示例性实施方式的移动终端可将处理的图像帧显示在显示单元151上。这里,从相机121实时接收的图像帧可显示在显示单元151上。用户可通过显示在显示单元151上的图像帧来检查所拍摄的图像。
在步骤S1030中,在图像帧显示在显示单元151上的状态下,根据本公开的示例性实施方式的移动终端可针对图像帧检测焦点值。
这里,可利用现有方法来检测焦点值。例如,可使用利用图像的相位差检测焦点值的相位检测方案、利用图像的比较值检测焦点值的比较值方案、将相位检测方案和比较值检测方案混合的混合方案等。
这里,相位检测方案是利用从相机121接收的光的相位差将不存在光的相位差的位置设定为焦点值的方案。在相位检测方案的情况下,由于检测光的相位差,所以与比较值检测方案相比可迅速地检测焦点值,但是焦点值不明确。
另外,比较值方案是针对整个区域检测图像的比较值并且将具有最高比较值的区域设定为焦点值的方案。在比较值检测方案中,由于使用比较值,所以可检测精确的焦点值,但是检测焦点值需要花费较长时间。
另外,混合方案是将相位检测方案和比较值检测方案混合的方案。在通过相位检测方案检测粗略信息之后,可基于所检测到的焦点值利用比较值检测方案检测精确的焦点值。该方案可利用相位检测方案和比较值检测方案的优点。
本公开也可应用于通过各种其它方案检测焦点值的情况。即,本公开可应用于与焦点值的检测有关的日志信息的情况,而不管如何检测焦点值。另外,检测焦点值的方案可在移动终端出厂时设定,或者可由用户设定。
此外,在利用上述方案中的任一个检测焦点值之后,当从用户接收到图像拍摄命令时,在步骤S1040中,可利用所检测到的焦点值执行图像帧的拍摄。
在图像帧显示在显示单元151上的状态下,当从用户接收到图像拍摄命令时,可在接收到图像拍摄命令的时间点执行从相机151接收的图像。在这种情况下,所拍摄的图像可以是具有所检测到的焦点值的图像。
可根据诸如触摸方案、语音方案、手势方案等的各种方案来执行图像拍摄命令。例如,在图像正输出在显示单元151上的同时,用户可对显示有图像拍摄按钮的区域施加触摸,因此拍摄在触摸的时间点输出的图像。
当拍摄了图像时,在步骤S1050中,根据本公开的示例性实施方式的移动终端可基于图像拍摄的时间点将焦点信息(指示针对图像帧检测焦点的日志)与所拍摄的图像一起存储达预设时间周期。
在拍摄图像之后,当从用户接收存储图像的命令时,控制单元180可将图像以及与图像有关的信息存储在存储单元170中。与图像有关的信息可以是包括F数、快门速度等的信息,其也可称为EXIF信息。另外,在拍摄图像之后,当没有从用户接收存储图像的命令时,控制单元180可不将图像存储在存储单元170中。在这种情况下,控制单元180可不存储EXIF信息。
这里,在本公开的示例性实施方式中,EXIF信息可包括指示检测焦点的日志的的焦点信息。
此外,指示检测焦点的日志的焦点信息可以是在基于拍摄图像的时间点的预设时间周期内检测的焦点的日志信息。这里,所述预设时间周期可由用户设定,或者可在移动终端出厂时在移动终端中预先设定。
例如,焦点信息可以是指示日志的信息,所述日志关于从自相机121接收图像的时间点到拍摄图像的时间点自动检测的焦点。另外,焦点信息可以是指示日志的信息,所述日志关于在拍摄图像之后直至接收到图像拍摄命令所检测到的焦点。
详细地讲,当相机121被激活并且接收到图像时,控制单元180可执行检测图像的焦点值的步骤。这里,控制单元180可存储在检测焦点的处理期间提取的值(例如,相位差值等)。
例如,如图11A所示,用户可执行与拍摄图像有关的应用。这里,当执行该应用时,如图11B所示,可从相机121接收图像。
这里,从自相机121接收图像的时间点开始,控制单元180可执行检测所接收到的图像的焦点值的处理。例如,控制单元180可利用相位差执行检测焦点值的处理。
此后,控制单元180可将指示图像的焦点值已设定的图形对象720输出到指示利用相位差检测的焦点值的区域。
另外,如图11C所示,在拍摄图像之后,控制单元180可存储先前针对图像划分的至少一个区域的相位差值。例如,控制单元180可针对十二个划分的区域中的每一个存储相位差值。这里,具有相位差值0的区域是已设定焦点值的区域。
这里,在不存在相位差的情况下,相位差值被存储为0,没有相位差的区域可被设定为焦点值。这里,当相位差值具有正(+)值时,可指示基于相位差值为0的区域对象位于前方,当相位差值具有负(-)值时,可指示基于相位差值为0的区域对象位于后方。即,通过相位差值,用户可确定对象的相对位置。另外,通过相位差值,用户可识别出当前拍摄的图像的焦点已设定的区域。
此外,在存储图像之后,当从相机121连续地接收图像时,直至在存储图像之后接收拍摄图像的命令之前的焦点信息可被存储。这里,针对在接收图像拍摄命令之后拍摄的图像,可存储指示日志的焦点信息,所述日志关于直至在存储先前图像之后接收图像拍摄命令之前检测的焦点。
目前为止,描述了存储焦点信息的方法。在本示例性实施方式中,可提供通过存储直至在激活相机121之后拍摄图像之前的焦点信息来不同地利用焦点信息的方法。
下文中,将详细描述在检测焦点时针对多个区域中的每一个存储焦点信息的方法。图12A、图12B、图12C和图12D是示出存储有被分成多个区域的图像的焦点信息的形状的概念图。
在根据本公开的示例性实施方式的移动终端中,当检测从相机121接收的图像的焦点值时,图像可被分成具有预设尺寸的多个区域以检测焦点值。多个区域可被称作多窗口。另外,预设区域的尺寸可由用户来改变。
另外,所述多个区域的数量可由用户设定,或者可预先设定。例如,如图12B所示,控制单元180可将图像分成十六个虚拟区域。
当检测多个区域的焦点值时,用户可拍摄多焦点图像。这里,多焦点图像可以是包括至少两个或更多个焦点值的图像。
此外,控制单元180可存储关于检测的多个区域的焦点值的焦点信息。这里,所存储的焦点信息可根据检测焦点值的方案按照不同的形状存储在存储单元170中。
例如,如图12C所示,焦点信息可作为各个区域中的曲线图信息存储。这里,焦点值可以是针对各个区域利用图像的比较值推导的值。即,各个区域的焦点可以是各个区域中的曲线图的最高点。另外,当存储曲线图信息时,与曲线图有关的最高点信息以及曲线图的形状信息可一起存储在存储单元170中。
这里,包括曲线图的最高点的区域可以是包括在图像中的对象当中的最靠近相机的对象所显示的区域。另外,更靠近曲线图的最高点的区域可被解释为显示有靠近相机的对象的区域。另外,用户可利用曲线图的形状信息在一定程度上推断包括在图像中的对象之间的相对距离。
在另一示例中,如图12D所示,焦点信息可作为数字被存储在存储单元170中。这里,数字的含义可按照上面参照图11A、图11B和图11C描述的相同方式来解释。例如,数字为0的区域可以是调焦区域,数字为负(-)的区域可以是与调焦区域相比相对地远离相机的区域。
这样,用户可针对2D图像确定粗略的相对距离,而无需复杂的算法。
目前为止,描述了所存储的焦点信息的形状。这样,当自动调节焦点时,用户可存储焦点信息并且稍后利用它来校正图像。另外,根据本示例性实施方式,可在没有复杂的算法的情况下迅速且简单地检测图像的焦点信息。
下文中,将详细描述使用存储的焦点信息的方法。图13A和图13B是示出使用焦点信息的方法的概念图。
在根据本公开的示例性实施方式的移动终端中,当存储图像时,指示关于检测的图像的焦点的日志的焦点信息也可一起存储。
这里,控制单元180可基于从用户接收的控制命令利用焦点信息来改变所拍摄的图像的焦点。
这里,当改变所拍摄的图像的焦点时,控制单元180可将所拍摄的图像改变为当利用改变的焦点拍摄时可显示的图像。为此,当改变各个焦点时一起改变的图像的特性值可被存储在存储单元170中。控制单元180可利用与焦点值的改变对应的图像的特性值来转换图像。这里,特性值可以是图像的锐度信息等。
详细地讲,如图13A所示,控制单元180可将存储在存储单元170中的多个图像中的任一个输出到显示单元151。这里,控制单元180可利用与图像一起存储的焦点信息来改变图像的焦点值。
即,在本示例性实施方式中,即使不执行复杂的算法,也可利用一起存储的焦点信息来简单地改变拍摄的图像的焦点。
例如,参照图13A,在其背景的焦点值没有设定的状态下拍摄图像,因此,所拍摄的图像的区域看起来模糊。例如,看起来模糊的区域可以是人所显示的区域以外的背景区域。这里,可在被分成多个区域的图像的所述多个区域中的每一个中存储焦点信息。
在这种情况下,当接收到针对图像改变焦点的命令时,控制单元180可利用焦点信息改变背景区域的焦点,使得背景区域的图像的焦点值改变为具有适当设定的焦点值的图像。这里,控制单元180可从存储单元170检测根据改变的焦点值改变的图像的特性值。
例如,控制单元180可根据改变的焦点值增加图像的锐度。详细地讲,如图13A所示,当背景区域的焦点值改变时,可获得清楚的图像。这样,即使在拍摄失焦图像的情况下,用户也可通过简单地改变焦点值来获得清楚的图像。
因此,控制单元180可改变清楚地显示的图像的区域的焦点值。详细地讲,控制单元180可改变利用精确的焦点值拍摄的图像的一部分的焦点值,使得改变的焦点值区域模糊。清楚的图像改变为模糊的图像可被称为失焦效果。
例如,如图13B所示,控制单元180可控制显示单元151输出存储在存储单元170中的多个图像中的任一个。随后,控制单元180可利用焦点信息改变图像的特定区域的焦点值。
这里,控制单元180可根据改变的焦点值来降低图像的锐度。详细地讲,如图13B所示,图像的特定区域可看起来模糊。即,在本示例性实施方式中,可在不执行单独的算法的情况下,通过简单地利用焦点信息来提供改变图像的焦点值的效果。
在本示例性实施方式中,在拍摄图像之后,可利用所检测到的拍摄的图像的自动调焦的日志信息来向图像提供各种效果。另外,当所拍摄的图像失焦时,可改变图像的焦点,从而向用户提供期望的图像。
上述本发明可被实现为记录有程序的介质中的计算机可读代码。计算机可读介质包括存储有可由计算机系统读取的数据的任何类型的记录装置。计算机可读介质可以是例如硬盘驱动器(HDD)、固态盘(SSD)、硅磁盘驱动器(SDD)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置等。计算机可读介质还包括载波形式的实现方式(例如,经由互联网的传输)。另外,计算机可包括终端的控制单元180。因此,以上详细描述不应在每一个方面限制性地解释,而是应该被视为示意性的。本发明的范围应该由所附权利要求书的合理解释来确定,等同范围内的每一种修改均被包括在本发明的范围内。
上述实施方式和优点仅是示例性的,不能被认为是限制本公开。本教导可容易地应用于其它类型的设备。本说明书旨在为示意性的,而非限制权利要求书的范围。对于本领域技术人员而言许多另选形式、修改形式和变化形式将是明显的。本文所述的示例性实施方式的特征、结构、方法和其它特性可按照各种方式组合以获得另外和/或另选的示例性实施方式。
由于本发明的特征可在不脱离其特性的情况下按照多种形式来具体实现,还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节的限制,而是应该在所附权利要求书中限定的范围内广义地理解,因此落入权利要求书的范围或其等同范围内的所有改变和修改因此旨在被所附权利要求书所涵盖。

Claims (17)

1.一种移动终端,该移动终端包括:
相机单元,该相机单元被配置为接收外部图像,对所接收到的图像进行处理并且提供图像帧;
存储单元,该存储单元被配置为存储与设定焦点有关的焦点信息;以及
控制器,该控制器被配置为设定所述图像帧的焦点值,
其中,如下设定所述焦点值:
基于所述图像的相位差根据第一焦点检测方案获得第一焦点值,
基于所述图像的比较值根据第二焦点检测方案获得第二焦点值,并且
基于所获得的第一焦点值和所获得的第二焦点值来设定所接收到的图像帧的焦点值,
其中,所述控制器基于所存储的焦点信息来确定所获得的第一焦点值的精度,
其中,所述焦点信息与第一焦点值和第二焦点值之间的差异相对应,并且所述存储单元存储多个先前确定的差异,并且
其中,当确定所述精度等于或大于预设水平时,所述控制器不再获得所述第二焦点值。
2.根据权利要求1所述的移动终端,其中,所述控制器确定所述第一焦点值与所述第二焦点值之间的差异,并且所述控制器通过基于所确定的差异改变所述第一焦点值的误差来设定所述图像帧的焦点值。
3.根据权利要求1所述的移动终端,其中,所述控制器基于所存储的多个差异来确定所获得的第一焦点值的精度,并且当确定所述精度等于或大于所述预设水平时,所述控制器将所述第一焦点值设定为所述图像帧的焦点值。
4.根据权利要求3所述的移动终端,其中,当确定所述精度等于或大于所述预设水平时,所述控制器不改变所述第一焦点值的误差。
5.根据权利要求3所述的移动终端,其中,当确定所述精度小于所述预设水平时,所述控制器将通过基于所述第二焦点值校正所述第一焦点值所获得的焦点值设定为所述图像帧的所述焦点值。
6.根据权利要求1所述的移动终端,该移动终端还包括:
触摸屏单元,该触摸屏单元被配置为显示所述图像帧,
其中,所述控制器控制所述触摸屏单元显示第一对象和第二对象,所述第一对象呈现所述第一焦点值,所述第二对象呈现所述第二焦点值,其中,所显示的第二对象与所显示的第一对象视觉上相区分。
7.根据权利要求6所述的移动终端,其中,响应于在所述第一对象和所述第二对象中的一个处的预设类型的触摸,所述控制器基于所述第二焦点值来改变所述第一焦点值的误差。
8.根据权利要求7所述的移动终端,其中,所述控制器控制所述触摸屏单元显示呈现改变了误差的第一焦点值的对象。
9.根据权利要求7所述的移动终端,其中,当从所述相机单元接收图像时,所述控制器改变在所述图像的背景中的所述第一焦点值的误差。
10.根据权利要求7所述的移动终端,其中,当所述第一焦点值与所述第二焦点值相同时,所述控制器将所述图像帧的焦点值设定为所述第一焦点值。
11.根据权利要求6所述的移动终端,其中,当所述第一焦点值不同于所述第二焦点值时,所述控制器控制所述触摸屏单元显示与误差校正有关的通知信息。
12.一种用于控制移动终端的方法,该方法包括以下步骤:
从相机单元接收外部图像并且对所接收到的图像进行处理以提供图像帧;
基于所述图像的相位差根据第一焦点检测方案获得所述图像帧的第一焦点值;
基于所述图像的比较值根据第二焦点检测方案获得所述图像帧的第二焦点值;
基于所述第一焦点值和所述第二焦点值来设定所述图像帧的焦点值;以及
基于存储在存储单元中的焦点信息确定所获得的第一焦点值的精度,
其中,所述焦点信息与第一焦点值和第二焦点值之间的差异相对应,并且所述存储单元存储多个先前确定的差异,并且
其中,当确定所述精度等于或大于预设水平时,则不再执行获得所述第二焦点值的步骤。
13.根据权利要求12所述的方法,其中,基于所述第一焦点值与所述第二焦点值之间的差异来校正所述第一焦点值。
14.根据权利要求12所述的方法,其中,当确定所述精度等于或大于所述预设水平时,则不执行校正所述第一焦点值的步骤。
15.根据权利要求12所述的方法,其中,当确定所述精度小于所述预设水平时,则所述图像帧的所述焦点值被设定为通过基于所述第二焦点值校正所述第一焦点值所获得的焦点值。
16.根据权利要求12所述的方法,其中,当确定所述精度等于或大于所述预设水平时,则所述第一焦点值被设定为所述图像帧的焦点值。
17.根据权利要求12所述的方法,其中,当所述图像帧显示在触摸屏单元上并且所述第一焦点值改变时,所述方法还包括在所述触摸屏上显示图形对象,该图形对象呈现所述图像帧的所述第一焦点值。
CN201510526312.0A 2014-09-15 2015-08-25 移动终端及其控制方法 Active CN105430250B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR10-2014-0122238 2014-09-15
KR1020140122238A KR102206386B1 (ko) 2014-09-15 2014-09-15 이동단말기 및 그 제어방법
KR10-2014-0122233 2014-09-15
KR1020140122233A KR20160031891A (ko) 2014-09-15 2014-09-15 이동단말기 및 그 제어방법

Publications (2)

Publication Number Publication Date
CN105430250A CN105430250A (zh) 2016-03-23
CN105430250B true CN105430250B (zh) 2018-11-02

Family

ID=53785381

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510526312.0A Active CN105430250B (zh) 2014-09-15 2015-08-25 移动终端及其控制方法

Country Status (3)

Country Link
US (1) US9681038B2 (zh)
EP (1) EP2996325B1 (zh)
CN (1) CN105430250B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6487679B2 (ja) * 2014-11-21 2019-03-20 キヤノン株式会社 焦点検出装置及びその制御方法
US9871546B2 (en) * 2015-09-11 2018-01-16 Panasonic Intellectual Property Corporation Of America Wearable terminal mountable on part of body of user
JP2017219812A (ja) * 2016-06-10 2017-12-14 キヤノン株式会社 撮像装置及びその制御方法、プログラム、記憶媒体
CN107995416B (zh) * 2017-11-14 2019-10-18 维沃移动通信有限公司 一种焦距调节方法及移动终端
US20210088697A1 (en) * 2018-03-16 2021-03-25 Lg Electronics Inc. Liquid iris, optical device comprising same, and mobile terminal

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101387733A (zh) * 2007-09-11 2009-03-18 索尼株式会社 成像设备和准焦控制方法
CN101952759A (zh) * 2008-02-22 2011-01-19 松下电器产业株式会社 摄像装置
CN103685928A (zh) * 2012-09-26 2014-03-26 奥林巴斯映像株式会社 图像处理装置以及图像处理方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003295047A (ja) 2002-04-05 2003-10-15 Canon Inc 撮像装置および撮像システム
JP4125101B2 (ja) 2002-12-06 2008-07-30 キヤノン株式会社 撮像装置、並びにその自動焦点調節装置及びその制御方法
JP5241096B2 (ja) 2006-12-19 2013-07-17 キヤノン株式会社 撮像装置及びその制御方法及びプログラム及び記憶媒体
JP2011017800A (ja) 2009-07-07 2011-01-27 Canon Inc 焦点検出装置
JP5448621B2 (ja) * 2009-07-27 2014-03-19 キヤノン株式会社 撮像装置、及び撮像装置の制御方法
CN103460104B (zh) 2011-03-25 2016-08-10 佳能株式会社 摄像装置
WO2012144195A1 (ja) * 2011-04-18 2012-10-26 パナソニック株式会社 撮像装置、撮像装置の合焦制御方法、及び集積回路
JP6071761B2 (ja) * 2013-05-31 2017-02-01 キヤノン株式会社 撮像装置及びその制御方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101387733A (zh) * 2007-09-11 2009-03-18 索尼株式会社 成像设备和准焦控制方法
CN101952759A (zh) * 2008-02-22 2011-01-19 松下电器产业株式会社 摄像装置
CN103685928A (zh) * 2012-09-26 2014-03-26 奥林巴斯映像株式会社 图像处理装置以及图像处理方法

Also Published As

Publication number Publication date
EP2996325A3 (en) 2016-05-11
US20160080631A1 (en) 2016-03-17
CN105430250A (zh) 2016-03-23
EP2996325A2 (en) 2016-03-16
US9681038B2 (en) 2017-06-13
EP2996325B1 (en) 2020-10-14

Similar Documents

Publication Publication Date Title
CN106162035B (zh) 移动终端
CN106257909B (zh) 移动终端及其控制方法
CN106210184B (zh) 移动终端及其控制方法
EP2966561B1 (en) Mobile terminal equipped with touch screen and method of controlling therefor
CN106686206B (zh) 移动终端及其控制方法
EP3367648B1 (en) Automatic photographing dependent on positioning on preview screen
CN106713738B (zh) 移动终端及其控制方法
US20160381534A1 (en) Mobile terminal
CN106471860B (zh) 移动终端和用于控制其的方法
CN106155494B (zh) 移动终端及其控制方法
US10511703B2 (en) Charging device, method for controlling charging device, and mobile terminal connected to same
US9454301B2 (en) Mobile terminal controlled by at least one touch and method of controlling therefor
CN106201391B (zh) 移动终端系统及其控制方法
CN105430250B (zh) 移动终端及其控制方法
KR20160136013A (ko) 이동 단말기 및 그 제어 방법
CN106612371B (zh) 移动终端
US10579260B2 (en) Mobile terminal having display screen and communication system thereof for unlocking connected devices using an operation pattern
EP3091502A2 (en) Mobile terminal and method of controlling the same
CN107770363A (zh) 移动终端
EP3115879A1 (en) Mobile terminal
US20160320839A1 (en) Wearable terminal and system including same
US9891243B2 (en) Apparatus and method for detecting wrist steps
CN107851248B (zh) 移动终端及其控制方法
US11032608B2 (en) Mobile terminal and control method therefor
KR102206386B1 (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant