CN103595909B - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN103595909B
CN103595909B CN201310356686.3A CN201310356686A CN103595909B CN 103595909 B CN103595909 B CN 103595909B CN 201310356686 A CN201310356686 A CN 201310356686A CN 103595909 B CN103595909 B CN 103595909B
Authority
CN
China
Prior art keywords
image
shooting
mobile terminal
shooting image
controller
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310356686.3A
Other languages
English (en)
Other versions
CN103595909A (zh
Inventor
禹成敏
朱声范
金学海
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN103595909A publication Critical patent/CN103595909A/zh
Application granted granted Critical
Publication of CN103595909B publication Critical patent/CN103595909B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1626Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits
    • H04B1/401Circuits for selecting or indicating operating mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/675Focus control based on electronic image sensor signals comprising setting of focusing regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/676Bracketing for image capture at varying focusing conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Telephone Function (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明提供了移动终端及其控制方法。所述移动终端包括:相机,其被配置为拍摄多个图像;触摸屏,其被配置为将多个拍摄图像中的一个拍摄图像或者第一合成图像作为代表图像进行显示,其中,通过将所述多个拍摄图像中的至少两个拍摄图像合成在一起来创建所述第一合成图像;以及控制器,其被配置为接收在显示所述代表图像的同时施加的第一触摸输入,从所述多个拍摄图像中提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像,以及经由所述触摸屏显示所提取的图像。

Description

移动终端及其控制方法
技术领域
本发明涉及一种用于在经由设置到移动终端的相机拍摄图像之后调整焦点的移动终端。
背景技术
移动终端是可被配置为执行各种功能的装置。这些功能的示例包括数据和语音通信、经由相机捕获图像和视频、录音、经由扬声器系统播放音乐文件和输出音乐以及在显示器上显示图像和视频。
通常,终端可以分类为移动终端和固定终端。另外,移动终端可以再分类为手持终端和车载终端。
随着终端的功能变得多样化,对利用终端创建和管理多媒体内容的需求逐渐增加。为了满足所述需求,相机的功能在终端中趋向于变得重要。
当经由相机拍摄照片时,执行将相机对焦在期望对象上的处理。如果当没有对焦到期望对象上时进行拍摄,则引起捕获的期望对象的照片模糊的问题。
尽管在对焦在期望对象上之后用户拍摄期望对象的照片,但对用户而言通过逐一检查照片拍摄结果来检查相机是否被准确地对焦在对象上是不方便的。
发明内容
因此,本发明的实施方式指向一种基本上消除了由于相关技术的局限性和缺点所导致的一个或更多个问题的移动装置及其控制方法。
本发明的一个目的在于提供一种移动终端及其控制方法,通过所述移动终端及其控制方法提高了用户操纵便利。
特别地,本发明的目的在于提供移动终端及其控制方法,通过所述移动终端及其控制方法可以在拍摄照片之后显示用户选择对焦的对象的拍摄图像。
本发明的另一目的在于提供移动终端及其控制方法,通过所述移动终端及其控制 方法可以基于所拍摄的照片来创建3D图像。
本发明的附加优点、目的和特征将在这里的公开以及附图中被阐述,本领域技术人员也可以基于这里的公开而理解这些方面。
为了实现根据本发明的这些目的和其它优点,如这里实施和广泛描述的,根据本发明的一个实施方式的移动终端可以包括:相机,其被配置为拍摄多个图像;触摸屏,其被配置为将多个拍摄图像中的一个拍摄图像或者第一合成图像作为代表图像进行显示,其中,通过将所述多个拍摄图像中的至少两个拍摄图像合成在一起来创建所述第一合成图像;以及控制器,如果在显示所述代表图像的同时施加了第一触摸输入,则所述控制器被配置为从所述多个拍摄图像中提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像,并且控制所提取的图像经由所述触摸屏输出。
在本发明的另一个方面,根据本发明的一个实施方式的控制移动终端的方法可以包括以下步骤:拍摄多个图像,将多个拍摄图像中的一个拍摄图像或者第一合成图像作为代表图像进行显示,其中,通过将所述多个拍摄图像中的至少两个拍摄图像合成在一起来创建所述第一合成图像,如果在显示所述代表图像的同时施加了第一触摸输入,则从所述多个拍摄图像中提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像,并且显示所提取的图像。
从本发明可获得的效果可以不受上面提到的效果的限制。另外,本发明所属技术领域的普通技术人员从下面的描述将清楚地理解其它没有提到的效果。
应该理解,本发明的以上总体描述和下面的详细描述是示例性和说明性的,并且意在提供所要求保护的本发明的进一步说明。
附图说明
被包括以提供对本发明的进一步理解并被合并在本说明书中并且构成本说明书的一部分的附图示出本发明的(一个或更多个)实施方式,并且与说明书一起用来说明本发明的原理。结合附图,考虑下面的优选实施方式的描述,本发明的前述和其它方面、特征和优点将变得更加明显。在附图中:
图1是根据本发明的一个实施方式的移动终端的框图;
图2是根据本发明的一个实施方式的移动终端的前透视图;
图3是根据本发明的一个实施方式的移动终端的后透视图;
图4是图1中示出的相机的详细构造的框图;
图5是示出根据本发明的一个实施方式的移动终端的操作的流程图;
图6A和图6B是示出使用与预览图像一起显示的设置菜单将相机的拍摄模式设置为多聚焦拍摄模式的一个示例的示图;
图7是示出用于描述在多聚焦拍摄模式中创建的拍摄图像的一个示例的示图;
图8是示出用于描述将在拍摄图像中捕获的指定对象的分辨率值记录在EXIF数据中的处理的一个示例的示图;
图9是示出用于描述将拍摄图像的整个区域的分辨率值记录在EXIF(可交换图像文件)数据中的处理的一个示例的示图;
图10A至图10C是示出用于描述显示在用户设置的ROI(感兴趣区域)中具有最佳分辨率的拍摄图像的处理的一个示例的示图;
图11A至图11C是示出用于描述通过应用眼睛跟踪算法将拍摄图像中的人物正注视的对象设置为处于对焦的处理的一个示例的示图;
图12A至图12C是示出用于描述创建在代表图像中设置的多个感兴趣区域中具有最佳分辨率的多焦点图像的处理的一个示例的示图;
图13A和图13B是示出用于描述创建对焦的拍摄图像的多焦点图像的处理的一个示例的示图;
图14A至图14C是示出用于描述创建在所有区域具有最佳分辨率的全部对焦图像的处理的一个示例的示图;
图15A至图15C是示出用于描述创建在代表图像中设置的所有多个感兴趣区域中具有最低分辨率的失焦图像的处理的一个示例的示图;
图16A至图16D是示出用于描述基于多个拍摄图像创建3D图像的处理的一个示例的示图;
图17A至图17H是示出在图库(gallery)模式中的输出的一个示例的示图;以及
图18A至图18D是示出用于描述在施加拍摄命令之前基于用户输入来选择代表图像的处理的一个示例的示图。
具体实施方式
在下面详细的说明书中,参照构成说明书的一部分的附图,所述附图通过本发明的说明性特定实施方式进行示出。本技术领域的普通技术人员将理解,可以使用其他实施方式,并且在不脱离本发明的范围的情况下,可以进行结构、电气以及过程改变。只要可能,贯穿附图将使用相同的标号表示相同或类似的部件。
如这里所使用的,针对元件使用后缀“模块”、“单元”和“部分”以仅为了方便本公开。因此,针对后缀本身没有给予重要含义或作用,理解的是,“模块”、“单元”和“部分”可以一起或可交替地使用。
本发明可应用于各种类型的移动终端。这些终端的示例包括移动电话、用户装备、智能电话、数字广播接收机、个人数字助理、膝上型电脑、便携式多媒体播放器(PMP)、导航仪等。
然而,本领域技术人员清楚的是,在本说明书中所公开的根据实施方式的构造可应用于诸如数字TV、台式电脑的固定终端以及移动终端。
图1是根据本发明的实施方式的移动终端100的框图。图1示出根据本发明的实施方式的移动终端100,所述移动终端100包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等。图1示出具有多个部件的移动终端100,但是实现所有示出的部件不是必要的。可以另选地实现更多或更少的部件。
在下面的描述中,依次说明移动终端100的以上元件。
首先,无线通信单元110一般包括允许在移动终端100和该移动终端100所处的无线通信系统或网络之间的无线通信的一个或更多个部件。例如,无线通信单元110可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置-定位模块115等。
广播接收模块111经由广播频道从外部广播管理服务器接收广播信号和/或广播关联信息。广播频道可以包括卫星频道和地面频道。为了同时接收至少两个广播频道或者广播频道切换方便,可以向移动终端100设置至少两个广播接收模块111。
广播管理服务器一般指生成并发送广播信号和/或广播关联信息的服务器或被提供之前生成的广播信号和/或广播关联信息并且然后将提供的信号或信息发送到终端的服务器。广播信号可以被实现为TV广播信号、无线电广播信号、数据广播信号等。 如果期望的话,广播信号还可以包括与TV或无线电广播信号组合的广播信号。
广播关联信息包括与广播频道、广播节目、广播服务提供商等相关联的信息。并且,广播关联信息可以经由移动通信网络来提供。在该情形中,广播关联信息可以通过移动通信模块112来接收。
广播关联信息可以按多种形式来实现。例如,广播关联信息可以包括数字多媒体广播(DMB)的电子节目指南(EPG)和手持数字视频广播(DVB-H)的电子服务指南(ESG)。
广播接收模块111可以被配置为接收从多种广播系统发送的广播信号。通过非限制的示例,这种广播系统包括地面数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、手持数字视频广播(DVB-H)、广播和移动服务的集合(DVB-CBMS)、广播开放移动联盟(OMA-BCAST)、中国多媒体移动广播(CMMB)、移动广播商业管理系统(MBBMS)、已知为媒体仅正向链接的数据广播系统和地面集成服务数字广播(ISDB-T)。另选地,广播接收模块111可以被配置为适用于其它广播系统以及上面解释的数字广播系统。
由广播接收模块111接收的广播信号和/或广播关联信息可以存储在适当的装置(例如,存储器160)中。
移动通信模块112经由诸如GSM(用于移动通信的全球系统)、CDMA(码分多址)、WCDMA(宽带CDMA)等的移动网络向/从一个或更多个网络实体(例如,基站、外部终端、服务器等)发送/接收无线信号。根据文本/多媒体消息收发等,这种无线信号可以代表音频、视频和数据。
无线互联网模块113支持对移动终端100的互联网接入。该模块可以内部地或外部地连接到移动终端100。在该情形中,无线互联网技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波接入互操作性)、HSDPA(高速下行分组接入)、GSM、CDMA、WCDMA、LTE(长期演进)等。
通过Wibro、HSPDA、GSM、CDMA、WCDMA、LTE等的无线互联网接入经由移动通信网络来实现。在该情形中,被配置为经由移动通信网络执行无线互联网接入的无线互联网模块113可以被理解为一种移动通信模块112。
短距离通信模块114促进相对短距离的通信。举一些例子,适合于实现该模块的技术包括射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)以及通常被称 为蓝牙和ZigBee的网络化技术。
位置-定位模块115标识或以其它方式获得移动终端100的位置。如果期望的话,该模块可以利用全球定位系统(GPS)模块来实现。根据当前技术,GPS模块115可以通过从至少三个卫星计算距离信息和准确的时间信息然后向计算出的信息应用三角测量来基于精度、纬度、海拔和方向(或取向)中的至少一个来准确地计算当前3维位置信息。目前,利用三个卫星计算位置和时间信息,然后利用另一卫星修改计算出的位置和时间信息的误差。此外,GPS模块115可以通过连续地计算实时当前位置来计算速度信息。
参照图1,音频/视频(A/V)输入单元120可以被配置为向移动终端100提供音频或视频信号输入。如所示的,A/V输入单元120可以包括相机121和麦克风122。相机121接收并处理由图像传感器以视频电话模式或拍摄模式获得的静态图片或视频的图像帧。并且,经处理后的图像帧可以显示在显示器151上。
由相机121处理后的图像帧可以存储在存储器160中或者通过无线通信单元110向外部发送。另选地,根据使用的环境,可以向移动终端100设置至少两个相机121。
麦克风122在便携式装置处于特定模式(例如,电话呼叫模式、记录模式和/或语音识别)的同时接收外部音频信号。该音频信号被处理并转换为电音频数据。当为呼叫模式时,处理后的音频数据被转换为可经由移动通信模块112向移动通信基站发送的格式。麦克风122通常包括分类的噪声去除算法,以去除在接收外部音频信号的过程中生成的噪声。
用户输入单元130响应于相关联的(一个或多个)输入装置的用户操作而生成输入数据。这种装置的示例包括设置在移动终端100的正面/背面/侧面的按钮136和触摸传感器(恒定压力/静电)137,并且还可以包括键盘、薄膜开关、滚轮、拨动开关等。
感测单元140提供用于利用移动终端的各个方面的状态测量来控制移动终端100的操作的感测信号。例如,感测单元140可以检测移动终端100的打开/闭合状态、移动终端100的部件(例如,显示器和键盘)的相对定位、移动终端100或移动终端100的部件的位置的改变、用户与移动终端100的接触的存在或不存在、移动终端100的取向或加速/减速。通过非限制的示例,这种感测单元140包括陀螺仪传感器、加速传感器、地磁传感器。
作为示例,考虑被配置为滑动类型移动终端的移动终端100。在该构造中,感测单元140可以感测移动终端的滑动部分是打开还是闭合。其它示例包括感测由电源单元190提供的电力的存在或不存在或者在接口单元170和外部设备之间的联接或其它连接的存在或不存在的感测单元140。并且,感测单元140可以包括接近传感器141和照明传感器142。
输出单元150生成与视觉、听觉和触觉等相关的输出。并且,输出单元150包括显示器151、音频输出模块152、报警单元153、触觉模块154等。
显示器151通常被实现为可视地显示(输出)与移动终端100相关联的信息。例如,如果移动终端正在电话呼叫模式中操作,则显示器将通常提供包括与开始、进行和终止电话呼叫相关联的信息的用户界面(UI)或图形用户界面(GUI)。作为另一个示例,如果移动终端100正在视频呼叫模式或拍摄模式中操作,则显示器151可以另外地或另选地显示与这些模式、UI或GUI相关联的图像。
显示器151可以利用已知显示技术来实现,所述已知显示技术例如包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器和三维显示器。移动终端100可以包括一个或更多个这样的显示器。
以上显示器中的一些可以通过可被称为透明显示器的透明或透光类型来实现。作为用于透明显示器的代表性示例,有TOLED(透明OLED)等。显示器151的后部构造也可以实现为透光类型。在该构造中,用户可以通过终端主体的被显示器151占据的区域看见在终端主体后面的对象。
根据移动终端100的实现的构造,至少两个显示器151可以被设置到移动终端100。例如,多个显示器可以彼此分离地或者一体构造地设置在移动终端100的单个面上。另选地,多个显示器可以布置在移动终端100的不同的面上。
当显示器151和触摸传感器137构造多层结构(以下,称为“触摸屏”)时,可以使用显示器151作为输入装置和输出装置。在这种情形中,触摸传感器可以被配置为触摸膜、触摸片、触摸板等。
触摸传感器137可以被配置为将施加到显示器151的特定部分的压力或者从显示器的特定部分生成的电容的变化转换成电输入信号。此外,可以将触摸传感器137配置为检测触摸的压力以及触摸的位置或尺寸。
如果对触摸传感器137做出触摸输入,则与触摸相对应的(一个或多个)信号被 传送到触摸控制器。触摸控制器处理所述(一个或多个)信号并且将经处理的(一个或多个)信号传送到控制器180。因此,控制器180能够知道显示器151的指定部分是否被触摸。
参照图2,接近传感器141以设置在由触摸屏包围的移动终端100的内部区域或触摸屏周围。接近传感器为如下的接近传感器,即,它可以在没有机械接触的情况下,利用电磁场强度或红外线来检测正在接近指定检测表面的物体或在接近传感器周围存在的物体的存在或不存在。因此,接近传感器141具有比接触类型传感器更长的耐用性,并且还具有比接触类型传感器更广泛的用途。
接近传感器可以包括透射光电传感器、直接反射光电传感器、镜面反射光电传感器、射频振荡接近传感器、静电电容接近传感器、磁性接近传感器、红外接近传感器等。当触摸屏包括静电电容接近传感器时,它被配置为利用根据指示器的接近的电场变化来检测指示器的接近。在该情形中,触摸屏(触摸传感器)可以被分类为接近传感器。
为了下面的描述的清楚和方便,随着指示器变得接近触摸屏而没有接触触摸屏,如果指示器被感知为位于触摸屏上面,则这种动作将被称为“接近触摸”。如果指示器实际地接触触摸屏,这种动作将被称为“接触触摸”。指示器对触摸屏的“接近触摸”的位置指的是当指示器对触摸屏进行接近触摸时指示器与触摸屏垂直相对的位置。
接近传感器141检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸持续时间、接近触摸位置、接近触摸移位状态等)。另外,与检测到的接近触摸动作和/或检测到的接近触摸模式相对应的信息可以输出到触摸屏上。
音频输出模块152以多种模式(所述多种模式包括呼叫接收模式、呼叫拨打模式、记录模式、语音识别模式、广播接收模式等)操作,以输出从无线通信单元110接收到的音频数据或存储在存储器160中的音频数据。在操作期间,音频输出模块152输出与特定功能相关的音频(例如,接收到的呼叫,接收到的消息等)。音频输出模块152通常利用一个或更多个扬声器、蜂鸣器、其它音频产生装置及其组合来实现。
报警单元153输出用于宣告与移动终端100相关联的特定事件的发生的信号。典型的事件包括呼叫接收事件、消息接收事件和触摸输入接收事件。报警单元153可以通过震动以及视频或音频信号的方式输出用于宣告事件发生的信号。该视频信号或音频信号可以通过显示器151或音频输出模块152来输出。因此,显示器151或音频输 出模块152可以被认为是报警单元153的一部分。
触觉模块154生成可以被用户感觉到的各种触觉效果。震动是由触觉模块154生成的一个代表性的触觉效果。由触觉模块154生成的震动的强度和模式是可控的。例如,不同的震动可以通过被合成在一起的方式来输出或者可以依次输出。
触觉模块154可以生成各种触觉效果以及震动。例如,触觉模块154生成如下的效果:归因于抵靠接触皮肤表面垂直地移动的针的布置的效果;归因于空气通过注入/吸入孔的注入/吸入力的效果;归因于在皮肤表面上方掠过的效果;归因于与电极的接触的效果;归因于静电力的效果;归因于使用吸热或放热装置来表现热/冷感觉的效果;等。
触觉模块154可以被实现为允许用户通过手指、手臂等的肌觉来感觉触觉效果以及通过直接接触来传递触觉效果。另选地,根据移动终端100的相应构造类型,至少两个触觉模块154可以被设置给移动终端100。
存储器160通常用来存储各种数据以支持移动终端100的处理、控制和存储要求。这样的数据的示例包括用于在移动终端100上操作的应用的程序指令、接触数据、电话本数据、消息、音频、静态图片(或照片)、运动图片等。并且,每一个数据的最近使用历史记录或累计使用频率(例如,针对每一个电话本、每一个消息或每一个多媒体的使用频率)可以存储在存储器160中。而且,用于在触摸输入到触摸屏时输出的各种模式的震动和/或声音的数据可以存储在存储器160中。
存储器160可以使用任何类型的适当的易失性和非易失性存储器或存储装置或其组合或其它类似的存储器或数据存储装置来实现,所述易失性和非易失性存储器或存储装置包括硬盘、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁性存储器、闪存、磁盘或光盘、多媒体卡微型存储器、卡型存储器(例如,SD存储器、XD存储器等)。并且,移动终端100可以与经由互联网执行存储器160的存储功能的网络存储器关联地操作。
接口单元170通常被实现为将移动终端100与外部装置连接。接口单元170从外部装置接收数据或者被提供电力,并且然后将数据或电力传递到移动终端100的各个部件,或者使得在移动终端100内的数据传递到外部装置。接口单元170可以被配置为使用有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端 口、用于连接到具有识别模块的设备的端口、音频输入/输出端口、视频输入/输出端口、耳塞端口等。
识别模块是存储用于对移动终端100的使用权限进行认证的各种信息的芯片,并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等。具有识别模块的装置(在下文中被称为“识别装置”)可以被制造为智能卡。因此,识别装置可经由相应端口连接到移动终端100。
当移动终端100连接到外部支架时,接口单元170变成用于为移动终端100从支架提供电力的通道或用于将由用户从支架输入的各种命令信号传递到移动终端100的通道。从支架输入的各种命令信号的每一个或电力可以用作如下的信号,即,该信号使得移动终端100识别出它被正确地加载在支架中。
控制器180通常控制移动终端100的总体操作。例如,控制器180执行与语音通话、数据通信、视频电话等相关联的控制和处理。控制器180可以包括提供多媒体播放的多媒体模块181。多媒体模块181可以被配置为控制器180的一部分或者可以被实施为单独的部件。
而且,控制器180可以执行图案识别处理,用于将在触摸屏上执行的书写输入和图形绘制输入分别识别为字符或图像。
电源单元190为移动终端100提供各个部件需要的电力。电力可以是内部电力、外部电力或其组合。
电池可以包括嵌入式可再充电电池,并且可以可拆卸地附接到终端主体用于充电等。连接端口可以被配置为接口170的一个,用于提供电池充电的电力的外部充电器经由所述接口170被电连接。
这里描述的各个实施方式可以使用例如计算机软件、硬件或其的一些组合被实现在计算机可读介质中。
对于硬件实现,这里描述的实施方式可以被实现在一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的其它电子单元、或其选择性的组合中。这样的实施方式也可以通过控制器180来实现。
对于软件实现,这里描述的实施方式可以利用单独的软件模块(例如,过程和功 能)来实现,每一个软件模块执行这里描述的功能和操作中的一个或更多个。软件代码可以利用以任何适当的编程语言编写的软件应用程序来实现,可以存储在诸如存储器160的存储器中,并且由诸如控制器180的控制器或处理器来执行。
图2是根据本发明的一个实施方式的移动终端的前透视图。
在附图中所示的移动终端100具有条型终端主体。然而,移动终端100可以按多种不同的构造来实现。这样的构造的示例包括折叠型、滑动型、旋转型、旋臂型及其组合。为了清楚,进一步的公开将主要涉及条型移动终端100。然而,该教导等同地应用于其它类型的移动终端。
参照图2,移动终端100包括构造其外观的壳体(101、102、103)。在本实施方式中,壳体被划分为前壳体101和后壳体102。多个电/电子部件位于设置在前壳体101和后壳体102之间的空间中。
偶尔,电子部件可以安装在后壳体102的表面上。安装在后壳体102的表面上的电子部件可以包括诸如电池、USIM卡、存储卡等的可拆卸部件。这样,后壳体102还可以包括被配置为覆盖后壳体102的表面的后盖103。特别地,为了用户方便,后盖103具有可拆卸的构造。如果后盖103从后壳体102拆卸,则后壳体102的表面露出。
参照图2,如果后盖103附接到后壳体102,则后壳体102的侧面可以部分露出。如果后盖103的尺寸减小,则后壳体102的背面可部分露出。如果后盖103覆盖后壳体102的整个背面,则后盖103可以包括开口103’,所述开口103’被配置为向外露出相机121’或音频输出单元152’。
壳体101、102和103通过合成树脂的注射成型形成,或者可以由诸如不锈钢(STS)、钛(Ti)等之类的金属物质形成。
显示器151、音频输出模块152、相机121、用户输入单元130/131和132、麦克风122、接口170等可以设置到壳体101或102。
显示器151占据了前壳体101的主表面的大部分。音频输出模块152和相机121被设置到与显示器151的两端部中的一个端部相邻的区域,而用户输入单元131和麦克风122被设置到与显示器151的另一端部相邻的另一区域。用户输入单元132和接口170可以设置在前壳体101和后壳体102的侧面。
输入单元130被操纵以接收用于控制终端100的操作的命令。并且,输入单元 130可以包括多个操纵单元131和132。操纵单元131和132可以被称为操纵部,并且可以采用使得用户通过感受触觉来执行操纵动作的触觉方式的任何机制。
通过第一操纵单元131或第二操纵单元132输入的内容可以被不同地设置。例如,诸如开始、结束、滚动等的命令被输入到第一操纵单元131。并且,用于从音频输出模块152输出的声音的音量调节的命令可以输入到第二操纵单元132,用于切换到显示器151的触摸识别模式的命令等可以输入到第二操纵单元133。
接着,图3是在图2中所示的终端的背侧的透视图。
参照图3,相机121’可以被另外地设置到终端主体的背侧,更具体地,设置到后壳体102。相机121具有与在图2中所示的前部相机121基本上相反的拍摄方向,并且可以具有与前部相机121不同的像素。
优选地,例如,前部相机121具有低的像素足以拍摄和发送用户的脸部的图片以用于视频电话,而后部相机121’具有高的像素,以用于捕获一般的用于拍摄的对象,而不用发送捕获的对象。并且,相机121和121’中的每一个都可以安装在终端主体上以旋转或弹出。
闪光灯123和镜子124被另外地邻近相机121’而设置。在利用相机121’拍摄对象时,闪光灯123向所述对象投射光。在用户尝试使用相机121’拍摄该用户的图片(自拍)时,镜子124使得用户能够观察到由镜子124反射的用户的脸部。
另外的音频输出单元152’可以设置到终端主体的背侧。另外的音频输出单元152’可以与图2中示出的前部音频输出模块152一起来实现立体声功能,并且可以用于通过终端交谈中的扬声器模式的实现。
广播信号接收天线116可以另外地设置到终端主体的侧面以及用于通信等的天线。构成图1中示出的广播接收模块111的一部分的天线116可以可伸缩地设置到终端主体。
图4是图1中示出的相机的详细构造的框图。
参照图4,终端100的相机121可以包括镜头121-1、成像装置121-2和镜头驱动单元121-3。
镜头121-1接收从移动终端100的外部入射的对象图像的输入,折射对象图像,然后将折射的对象图像转发到成像装置121-2。在附图中,镜头121-1示出为单个凸透镜,这仅为了清晰而提供。并且,多个镜头可用于相机。
镜头驱动单元121-3在所有方向(例如,后、前、右、左等)移动镜头121-1,以改变输入到成像装置121-2的图像的焦距。通常,移动装置100具有安装在其上的自动对焦功能,镜头驱动单元121-3可以自动移动镜头121-1,以将所选择的对象设置在焦点。当然,用户可以通过随机地调整镜头驱动单元121-3来手动地将相机121对焦在所选择的对象上。
特别地,本发明的镜头驱动单元121-3通过在光轴的方向上重复地移动镜头来改变输入到成像装置121-2的图像的焦距。这样,镜头驱动单元121-3可以操作以均衡镜头121-1的物理移动距离,或者可以移动镜头121-1以一致地增加或减小镜头121-1的焦距。为了调整镜头121-1的位置,本发明的镜头驱动单元121-3可以包括步进电机、压电装置、VCM(音圈电机)和VCA(音圈致动器)。
成像装置121-2是将经由镜头121-1输入的模拟图像转换成数字图像的装置。成像装置121-2的性能根据清晰度、分辨率、数字图像类型等中的至少一个而改变。并且,成像装置121-2被研发为创建高分辨率的数字图像。
之前,成像装置121-2仅通过将在输入拍摄命令的时刻创建的图像转换成数字图像然后保存数字图像而工作。最近,由于通过在显示单元151而不是取景器进行查看来执行拍摄,所以有必要连续地将输入图像转换成数字图像。为了使得视频看起来流畅,每秒至少12个数字图像是必要的。在一些情形中,多于12个的数字图像可以被创建并被提供给显示单元151。
为了下面描述的清晰和方便,假设在下面的描述中提到的移动终端100包括图1中示出的部件中的至少一个。特别地,根据本发明的实施方式的移动终端100可以包括图1中示出的部件中的相机121、存储器160、显示单元151和控制器180。如果显示模块151包括触摸屏,则下面实施方式的实现还可以更方便。因此,假设显示模块151包括触摸屏来进行下面的描述。
接着,图5是示出根据本发明的一个实施方式的移动终端的操作的流程图。
参照图5,如果通过用户的适当的操作来激活相机模块121(S501)。控制器180可以控制触摸屏151显示经由相机121实时输入的预览图像(S502)。当预览图像被显示时,控制器180还可以控制用于调整相机121的拍摄模式的设置菜单被显示在触摸屏151上。
之后,在相机121的拍摄模式已被设置为多聚焦拍摄模式(S503)之后,并且如 果拍摄开始(S504),则控制器180可以创建焦距彼此不同的多个拍摄图像(S505)。
下面将参照图6至图8更详细地描述参照图5描述的多聚焦模式。
特别地,图6A和图6B是示出使用与预览图像一起显示的设置菜单将相机的拍摄模式设置为多聚焦拍摄模式的一个示例的示图。
参照图6A,控制器180可以控制触摸屏151显示用于调整相机121的设置的设置菜单以及经由相机121输入的预览图像。在图6A示出的示例中,设置菜单显示缩放设置601、亮度设置603、闪光灯激活/失活设置605和拍摄模式设置607的项。
利用拍摄模式设置607,用户可以将相机121的拍摄模式调整成正常拍摄模式607-1、连续拍摄模式607-2和多聚焦拍摄模式607-3中的一个(图6B)。在正常拍摄模式607-1中,如果拍摄命令以用户按下拍摄按钮610的方式被施加,则在施加拍摄命令的时刻的图像被转换成数字图像以创建拍摄图像。
在连续拍摄模式607-2中,连续拍摄命令被控制在拍摄按钮610被按下的同时被输入,从而可以创建多个连续拍摄图像。由于正常拍摄模式607-1和连续拍摄模式607-2是已知技术,所以在下面的描述中将省略其细节。
根据本发明的移动终端100还可以提供多聚焦拍摄模式607-3的选择作为相机121的拍摄模式。在多聚焦拍摄模式607-3中,在已经创建了焦距彼此不同的多个拍摄图像之后,如果相应的拍摄完成,则可以提供后聚焦校正功能。特别地,多聚焦拍摄模式607-3可以被理解为按在指定的持续时间改变镜头121-1的焦距的方式创建连续的拍摄图像,而连续拍摄模式607-2是为了通过保持镜头121-1的一致的焦距来创建连续拍摄图像。
由于连续拍摄模式607-2通过保持镜头121-1的一致的焦距来创建拍摄图像,所以连续拍摄图像中的各个拍摄图像聚焦在相同的对象上。然而,由于多聚焦拍摄模式607-3通过改变镜头121-1的焦距来创建拍摄图像,所以拍摄图像可以具有焦点彼此不同的对象。这将在下面参照图7进行详细描述。
图7是示出用于描述在多聚焦拍摄模式中创建的拍摄图像的一个示例的示图。为了下面描述的清晰,假设在多聚焦拍摄模式下总共创建4个拍摄图像。为了更清晰,这4个拍摄图像将按从左到右的顺序分别被称为拍摄图像1至拍摄图像4。
参照图7,在将相机121的拍摄模式设置为多聚焦拍摄模式之后,如果输入了拍摄命令,则控制器180可以通过改变镜头121-1的位置(特别地,镜头121-1的焦距) 来拍摄多个拍摄图像。特别地,如果输入了用户的拍摄命令,则控制器180可以通过在光轴的方向上(例如,在镜头121-1的焦距逐渐增加的方向上)移动镜头121-1来控制创建多个拍摄图像。
在图7示出的示例中,当拍摄了多个拍摄图像时,由于镜头121-1的位置(即,焦距)彼此不同,所以每一个拍摄图像中的对焦图像可能没有被保持为一致。特别地,由于镜头121-1响应于镜头121-1的较短的焦距而被对焦在较近距离中的对象上,或者镜头121-1响应于镜头121-1的较长的焦距而被对焦在较远距离中的对象上,所以镜头121-1的较长焦距处拍摄的图像可以具有较远距离对焦的对象,而在镜头121-1的较短焦距处拍摄的图像具有较近距离对焦的对象。
针对图7中示出的示例,在镜头121-1的焦距d1处拍摄的第一拍摄图像1中,第一对象11被对焦,而第二对象12至第四对象14失焦。相反,在镜头121-1的焦距d2拍摄的第二拍摄图像2中,第二对象12被对焦,而第一对象11、第三对象13和第四对象14失焦。在第三拍摄图像3中,第三对象13被对焦。在第四拍摄图像4中,第四对象14被对焦。为了清晰,在图7中,响应于距相机121-1的距离,拍摄图像中捕获的对象分别成为第一对象11至第四对象14。
如在上面示例的描述中提到的,可以在多聚焦拍摄模式中改变镜头121-1的焦距来拍摄各种拍摄图像。由于在各个拍摄图像中镜头121-1的焦距不同并且各个拍摄图像的对焦部分不一致,所以具有最大分辨率的点可以针对各个拍摄图像而被设置得不同。例如,关于第一对象11周围的分辨率,第一拍摄图像1具有最大分辨率。然而,关于第二对象12周围的分辨率,第二拍摄图像2而不是第一拍摄图像1具有最大分辨率。
在下面示例的描述中,多聚焦拍摄模式可以被理解为被提供以在创建焦距彼此不同的多个拍摄图像之后从ROI(感兴趣区域)中提取具有最佳分辨率的拍摄图像。
在通过在光轴方向上移动镜头121-1来创建多个拍摄图像的过程中,控制器180可以控制每当镜头121-1到达预设镜头位置就拍摄一次拍摄图像。可以在镜头121-1的最初位置和镜头121-1的结束位置之间设置多个预设镜头位置。每当镜头121-1通过预设镜头位置时,控制器180可以控制创建对象的拍摄图像。这样,多个预设镜头位置之间的距离可以被设置为彼此相等,这不是强制性的。
基于施加到镜头驱动单元的当前值以在光轴方向上移动镜头121-1,控制器180 可以确定镜头121-1是否到达所述预设镜头位置。如果镜头121-1到达了所述预设镜头位置,则控制器180可以基于入射在成像装置上的图像来控制创建拍摄图像。
在上述示例中,每当镜头121-1通过预设镜头位置就创建拍摄图像。然而,控制器180可以控制按指定时间间隔创建拍摄图像。例如,如果镜头121-1从最初位置移动到结束位置花费的时间是t,则控制器180在接收到拍摄命令的输入之后每过去t/N的时间就创建拍摄图像,从而控制创建N个拍摄图像。当一输入拍摄命令就创建最初拍摄图像时,可以创建(N+1)个拍摄图像。
可以将创建的拍摄图像划分成头区域和数据区域。特别地,数据区域可以被理解为用于在其中记录图像数据的部分,而头区域可以被理解为用于在其中记录拍摄信息的EXIF数据的部分。当EXIF(可交换图像文件格式)数据被记录在头区域中时,控制器180不必对数据区域进行解码就可以获得拍摄图像的信息。
在创建拍摄图像的过程中,本发明的控制器180可以控制EXIF数据被相应地保存在拍摄图像的头区域中。在这种情形中,包括在EXIF数据中的拍摄信息包括诸如相机制造商、相机型号、拍摄时间等的基本信息,并且还可以包括拍摄图像的拍摄序号、拍摄时刻的焦距、与对焦的对象隔开的距离、拍摄图像的分辨率信息等中的至少一个。
在这种情形中,可以提供拍摄图像的拍摄序号以指示作为在多聚焦拍摄模式中施加一次拍摄命令的结果所创建的多个拍摄图像中的各个拍摄图像的拍摄顺序。在图7中示出的示例中,当在多聚焦拍摄模式中通过改变镜头121-1的焦距创建了4个拍摄图像时,可以分别向拍摄图像按顺序分配序号1至4。
焦距表示当创建拍摄图像时镜头121-1的焦距。如果焦距包括在EXIF数据中,则用户可以检查在创建相应拍摄图像的时刻的焦距。
与对焦的对象隔开的距离可以表示移动终端100和位于在拍摄图像中具有最大分辨率的点的对象之间的实际隔开的距离。在这种情形中,与对象隔开的距离可以表示移动装置100(或从移动终端100发出的延长线)和所述对象之间的垂直距离。
例如,在图7中示出的示例中,如果第一对象11至第四对象l4与移动终端100分别隔开1m、2m、3m和4m,则与对焦的对象隔开的距离可以在第一拍摄图像1中被记录为1m,与对焦的对象隔开的距离可以在第二拍摄图像2中被记录为1m,与对焦的对象隔开的距离可以在第三拍摄图像3中被记录为3m,与对焦的对象隔开的距 离可以在第四拍摄图像4中被记录为4m。
拍摄图像的分辨率信息可以包括在拍摄图像中捕获的指定对象的分辨率值和在拍摄图像的整个区域的分辨率值中的至少一个。下面将参照图8和图9详细描述用于记录拍摄图像的分辨率信息的处理。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
图8是示出用于描述将在拍摄图像中捕获的指定对象的分辨率值记录在EXIF数据中的处理的一个示例的示图。例如,如图8所示,在拍摄图像中捕获了4个对象11至14。控制器180检测拍摄图像中所包括的对象(例如,主体、人物等),然后可以将所检测到的对象的分辨率值记录在EXIF数据中。特别地,控制器180可以控制关于第一对象11至第四对象14的分辨率信息分别记录在第一拍摄图像1至第四拍摄图像4的EXIF数据中。
因此,控制器180不必对拍摄图像的数据区域进行解码而通过查询头区域的EXIF数据就可以提取针对每个对象的具有最大分辨率值的拍摄图像。
记录拍摄图像中捕获的指定对象的分辨率值可能没有必要表示应该记录所有拍摄对象的分辨率值。例如,图7中示出的第一拍摄图像1中的第一对象11至第四对象14的分辨率值可以不包括在EXIF数据中。当第一拍摄图像1时,由于位于较近距离处的第一对象11被对焦,所以位于较远距离处的第四对象14的识别率可能显著减小。在这种情形中,控制器180可以控制只记录与通过第一拍摄图像1可检测到的对象相对应的分辨率值。例如,如果通过第一拍摄图像1只能检测到第一对象11至第三对象13而第四对象14除外,则记录第一对象11至第三对象13的分辨率值,而可以省略记录第四对象14的分辨率值。
接着,图9是示出用于描述将拍摄图像的整个区域的分辨率值记录在EXIF(可交换图像文件)数据中的处理的一个示例的示图。
参照图9,为了将拍摄图像的整个区域的分辨率值记录在EXIF数据中,控制器180将拍摄图像划分成M个区域,然后控制将各个区域的分辨率值记录在EXIF数据中。由于图9中示出的拍摄图像被划分成16个区域(按从左上角到右下角的顺序分别称为第1区域至第16区域),所以控制器180可以分别记录第1区域至第16区域的分辨率值。
因此,控制器180不必对拍摄图像的数据区域解码就可以通过查询头区域中所记 录的EXIF数据来提取在所期望区域中具有最大分辨率值的拍摄图像。图9示出为了清晰将拍摄图像划分成16个区域的示例,而本发明可以不受该示例的限制。
在图8或图9示出的示例中,可以由控制器180将拍摄图像中所捕获的对象的分辨率值或从将拍摄图像划分成M个区域所生成的区域中的分辨率值记录在EXIF数据中。然而,EXIF数据中所记录的分辨率值可以不包括分辨率的绝对量。例如,针对除了最初拍摄图像之外的其余拍摄图像,与最初拍摄图像不同的分辨率或者与先前拍摄图像不同的分辨率值可以由控制器180记录在EXIF数据中。
例如,在图8示出的示例中,当第一拍摄图像1中的第一对象11的分辨率绝对量和第二拍摄图像2中的第一对象1的分辨率绝对量被分别测量为10和8时,可以将分辨率差‘-2’而非绝对量‘8’作为第一对象11的分辨率值记录在第二拍摄图像2的EXIF数据中。
通过将分辨率差而非分辨率的绝对量记录在EXIF数据中,优点在于不必进行单独的运算就能利用分辨率差的符号来确定分辨率的‘高’或‘低’。特别地,如果分辨率差的符号是‘+’,则针对相应对象(或区域),相应的拍摄图像可以被理解为具有比先前拍摄图像的分辨率高的分辨率。相反,如果分辨率差的符号是‘-’,则针对相应对象(或区域),相应的拍摄图像可以被理解为具有比先前拍摄图像的分辨率低的分辨率。
在这种情形中,先前序号的拍摄图像可以不总是表示序号紧接先前序号的拍摄图像。拍摄图像的序号之前的先前序号足以进行比较。此外,先前序号可以被固定到最初序号的拍摄图像(即,最初拍摄图像)。例如,在记录第三拍摄图像3的EXIF数据中,可以记录与第二拍摄图像2不同的分辨率。另选地,可以记录与第一拍摄图像1不同的分辨率。
为了描述本发明现在参照图5,控制器180选择多个拍摄图像中的至少一个拍摄图像作为代表图像,然后显示所选择的代表图像(S506)。随后,如果用户向代表性图像的指定区域或者代表性图像上显示的指定对象施加了触摸输入(S507),则控制器180从多个拍摄图像中提取针对施加触摸的指定区域或者施加触摸的指定对象具有最佳分辨率的拍摄图像,然后可以通过替换代表图像来控制在触摸屏151上显示所提取的拍摄图像(S508)。因此,控制器180可以控制多个拍摄图像中的被对焦在用户触摸输入所施加的点的拍摄图像在触摸屏151上显示。因此,即使没有对焦在特定 对象上而执行拍摄,也可以在拍摄之后显示对焦在特定对象上的拍摄图像。
下面将参照图10A至图10C详细描述显示用户设置的ROI(感兴趣区域)中具有最佳分辨率的拍摄图像的处理。为了清晰,假设多个拍摄图像包括参照图7所描述的4个拍摄图像1至4。另外,假设与图8中示出的示例相同按拍摄图像中所显示的对象为单位来构造用户设置的ROI(感兴趣区域)。
接着,图10A至图10C是示出用于描述显示在用户设置的ROI(感兴趣区域)中具有最佳分辨率的拍摄图像的处理的一个示例的示图。
参照图10A,如果创建了多个拍摄图像,则控制器180从多个拍摄图像中选择指定的拍摄图像作为代表图像,然后可以在触摸屏151上显示所选择的拍摄图像。
尽管图10A示出对焦在第一对象11上的第一拍摄图像被选择作为代表图像的一个示例,但对于最初创建的拍摄图像被选择作为代表图像不是强制性的。例如,序号紧接最初拍摄图像的序号的拍摄图像可以被设置为代表图像。在一些情形中,通过将至少两个图像合成在一起所生成的多焦点图像可以被显示为代表图像。稍后将在“全部对焦”的描述中详细描述多焦点图像。
在正显示代表图像时,如果用户向触摸屏151施加了触摸输入,则控制器180可以提取在与用户的触摸输入相对应的对象(参看图8)处具有最大分辨率的拍摄图像。在图10A中,由于向第二对象12施加了触摸输入1001,所以控制器180提取针对第二对象12具有最高分辨率值的第二拍摄图像2,然后可以控制在触摸屏151上显示第二拍摄图像2(图10B)。在正显示第二拍摄图像2时,如果向第三对象13施加了触摸输入1003,则控制器180提取针对第三对象13具有最高分辨率的第三拍摄图像3,并且然后可以控制在触摸屏151上显示第三拍摄图像3(图10C)。在提取具有最高分辨率值的拍摄图像的过程中,控制器180可以使用多个拍摄图像中的各个拍摄图像的EXIF数据。由于当使用EXIF数据时可以省略数据区域解码处理,所以可以在短时段内提取在触摸点具有最佳分辨率值的拍摄图像。
然而,如果分辨率信息没有包括在EXIF数据中,则可以通过对各个拍摄图像的数据区域进行解码来提取在触摸输入施加点具有最佳分辨率值的拍摄图像。
与图10所示的示例相同,用户可以不在拍摄的时间而是在完成相应拍摄之后通过向用户想要对焦的点施加触摸输入来调节焦点。因此,尽管可以在不调整焦点的情况下执行拍摄,但是用户可以调整焦点,从而防止不期望的对象被对焦或者防止期望 的对象失焦。
在图10中示出的示例中,由于施加用户的触摸输入的点被设置为ROI(感兴趣区域),所以提取最佳分辨率是ROI的拍摄图像。然而,用户触摸的点被设置为ROI不是强制性的。根据本发明的另一实施方式,控制器180可以根据拍摄图像中所捕获的对象的属性来设置ROI。将在下面参照图11A至图11C对此进行详细描述。
图11A至图11C是示出用于描述通过应用眼睛跟踪算法将拍摄图像中的人物正注视的对象设置为处于对焦的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。另外,假设还将人物(或动物)1103的眼睛显示在4个拍摄图像1至4中的每一个上。
参照图11A,如果用户选择眼睛跟踪按钮1101,则控制器180可以使用眼睛跟踪算法确定拍摄图像中所捕获的人物1103的眼睛所在对象或区域。这样,参照图11B,控制器180可以控制显示捕获的人物1103的注视路径1105。如果确定了捕获的人物注视区域,则控制器180从捕获的人物注视区域中提取具有最佳分辨率值的拍摄图像,然后可以显示所提取的拍摄图像。例如,在图11B所示的示例中,当拍摄图像中所捕获的人物正注视第三对象13时,控制器180提取针对第三对象13具有最佳分辨率值的拍摄图像,容纳后可以在触摸屏151上显示所提取的拍摄图像(图11C)。
在图11所示的示例中,只要人物(或动物)的眼睛显示在拍摄图像中就可使用眼睛跟踪算法。因此,只要从拍摄图像中检测到人物1103的眼睛,就可控制显示眼睛跟踪按钮。
当在拍摄图像中捕获到多个人物时,能够控制经由显示单元151输出多焦点图像。在这种情形中,可以从将通过用户输入从多个人物中所选择的人物注视的区域合并在一起来创建多焦点图像。另选地,可以从将多个人物分别注视的区域合并在一起来创建多焦点图像。稍后将参照图12进一步描述多焦点图像。
在图10至图11所示的示例中,根据用户的触摸输入和拍摄图像中所捕获的人物所在区域来设置一个ROI(感兴趣区域)。然而,仅设置一个ROI不是必须的。当存在多个ROI时,下面将参照图12进一步详细描述移动终端100的操作。
接着,图12A至图12C是示出用于描述创建在代表图像中设置的多个感兴趣区域中具有最佳分辨率的多焦点图像的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
参照图12A,在经由触摸屏151正输出代表图像的同时,如果用户选择‘对焦’按钮1201,则控制器180可以进入待机模式等待用户的触摸输入。随后,如果用户选择对其给予对焦效果的区域,则控制器180可以控制显示用户所选择的所有区域被对焦的图像。如果存在一个将被给予对焦效果的区域,如参照图10在前面的描述中所提到的,则可在触摸屏151上显示在所选择的区域中具有最佳分辨率的拍摄图像。另一方面,参照图12B,如果想要向多个区域(例如,图12B中选择的2个区域1203和1205)给予对焦效果,则控制器180将至少两个图像合并在一起,并且可以控制显示所有所选择的区域被对焦的多焦点图像。
例如,参照图12B,当向第二对象12和第三对象13中的每一个施加触摸输入时,控制器180提取针对第二对象12具有最高分辨率值的第二拍摄图像2和针对第三对象13具有最高分辨率值的第三拍摄图像3,然后可以控制显示通过将第二拍摄图像2和第三拍摄图像3合成在一起所创建的多焦点图像。
控制器180将多个提取的图像中的一个提取的图像设置为基本图像,然后可以通过将另一提取图像的至少一部分粘贴到基本图像来创建多焦点图像。例如,参照图12C,控制器180将基本图像设置为对焦在第二对象2上的第二拍摄图像2,并且用第三拍摄图像3的显示有第三对象13的区域来替换第二拍摄图像2的显示有第三对象13的区域,从而通过将第二拍摄图像2和第三拍摄图像3合成在一起来创建多焦点图像。
在图12示出的示例中,创建针对用户设置的指定ROI(感兴趣区域)具有最佳分辨率的多焦点图像。根据本发明的实施方式的移动终端100可以不必等待用户的输入而创建对焦在拍摄图像中显示的所有对象的多焦点图像。下面将参照图13A和图13B对此进行详细描述。
图13A和图13B是示出用于描述创建对焦的拍摄图像的多焦点图像的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
参照图13A,在经由触摸屏151输出代表图像的同时,如果用户选择‘智能对焦’按钮1301,则控制器180可以控制创建多焦点图像,其中,通过提取针对拍摄对象具有最佳分辨率值的部分来合成所述多焦点图像。
例如,参照图13B,当存在4个拍摄图像1至4时,控制器180选择多个拍摄图 像中的指定的一个拍摄图像作为基本图像,然后可以通过从另一图像中提取针对拍摄对象保持最佳分辨率的部分并且然后将所提取的部分粘贴到基本图像来控制创建对焦在所有对象上的多焦点图像。
例如,参照图13B,当存在4个拍摄对象(即,第一对象11至第四对象14)时,控制器180可以控制显示对焦在全部4个对象的多焦点图像。特别地,如果从第一拍摄图像1和第四拍摄图像4中选择第一拍摄图像1作为基本图像,则由于第一拍摄图像1针对第一对象11具有最大焦点,所以没有必要从另一拍摄图像中提取针对第一对象11的图像。
相反,由于第二拍摄图像2针对第二对象12具有最大焦点,所以从第二拍摄图像2中提取针对第二对象12的图像,然后将针对第二对象12的图像与第一拍摄图像1进行合成。以相同的方式,针对第三对象13的图像和针对第四对象14的图像分别从第三拍摄图像3和第四拍摄图像4中提取出,然后与第一拍摄图像1进行合成,从而可以获得对焦在所有对象上的拍摄图像,如图13B所示。
为了清晰,在图10至图13所示的示例中,与图8中示出的示例相同按对象为单位设置ROI(感兴趣区域)(例如,用户的触摸点、显示对象的点等),这仅为了描述的清楚起见。另外,按如图8所示的对象为单位设置ROI不是必须的。另选地,可以按如图9所示的拍摄图像的划分的区域为单位来设置ROI。
例如,在图10所示的示例中,控制器180可以控制在触摸屏151上显示在与用户的触摸点相对应的区域中具有最佳分辨率值的拍摄图像。特别地,如果用户的触摸输入对应于图9中示例性示出的区域中的第9区域,则控制器180可以控制在触摸屏151上显示在第9区域中具有最佳分辨率值的第一拍摄图像1。
在图10至图13所示的示例中,在触摸屏151上显示在指定的ROI(感兴趣区域)中具有最佳分辨率的拍摄图像(或多焦点图像)。根据本发明实施方式的移动终端100可以控制显示在所有区域具有最佳分辨率的图像(下面称为全部对焦图像)。下面将参照图14A至图14C对此进行详细描述。
图14A至图14C是示出用于描述创建在所有区域具有最佳分辨率的全部对焦图像的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
参照图14A,在经由触摸屏151输出代表图像的同时,如果用户选择“全部对焦” 按钮1401,则控制器180可以控制显示在所有区域对焦的全部对焦图像。
例如,参照图14B,当拍摄图像中的每一个拍摄图像均被划分成16个区域时,控制器180将多个拍摄图像彼此进行比较,然后可以提取针对第1区域至第16区域中的每一个具有最佳分辨率的拍摄图像。随后,控制器180从多个拍摄图像的每一个中切除具有最佳分辨率的区域,然后将切除的区域集合在一起以创建全部对焦图像。
例如,参照图14B,如果第一拍摄图像1在(由V表示的)第5区域、第9区域、第13区域和第14区域中具有最佳分辨率,第二拍摄图像2在(由Y表示的)第7区域、第11区域、第12区域、第15区域和第16区域中具有最佳分辨率,第三拍摄图像3在(由X表示的)第2区域、第6区域和第10区域中具有最佳分辨率,并且第四拍摄图像4在(由O表示的)第1区域、第3区域、第4区域和第8区域中具有最佳分辨率,则控制器180可以控制通过收集多个拍摄图像的每一个中的具有最佳分辨率值的区域来创建如图14C所示的全部对焦图像。
在这种情形中,16个区域的编号基于图9的相同标号。特别地,16个区域按从左上角到右下角的顺序分别称为第1区域至第16区域。与参照图13描述的智能对焦功能不同,可以获得针对拍摄对象所在的背景以及针对拍摄对象具有最佳分辨率的全部对焦图像。
在图5中所示的步骤S508中,移动终端100可以显示在例如设置的ROI中具有最高分辨率值的图像。另一方面,根据本发明实施方式的移动终端100可以控制显示在设置的ROI中具有最低分辨率值的图像。下面将参照图15A至图15C对此进行详细描述。
图15A至图5C是示出用于描述创建在代表图像中设置的所有多个感兴趣区域中具有最低分辨率的失焦图像的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
参照图15A,在经由触摸屏151输出代表图像的同时,如果用户选择‘失焦’按钮1501,则控制器180可以进入待机模式以等待用户的触摸输入。随后,如果用户选择了对其给予失焦效果的区域,则控制器180可以控制显示用户选择的所有区域失焦的图像。
如果存在将给于失焦效果的一个区域,则可以显示在所选择的区域中具有最低分辨率的拍摄图像。另一方面,参照图15B,如果想要向多个区域给于失焦效果,则控 制器180可以通过将至少两个图像合成在一起来创建失焦图像。
例如,参照图15B,当向第一对象11和第三对象13中的每一个施加触摸输入时,控制器180提取针对第一对象11具有最低分辨率值的拍摄图像和针对第三对象13具有最低分辨率值的拍摄图像,然后可以通过将所提取的拍摄图像合成在一起来控制显示所选择的区域失焦的失焦图像。
如果针对第一对象11具有最低分辨率值的拍摄图像和针对第三对象13具有最低分辨率值的拍摄图像分别包括第四拍摄图像4和第一拍摄图像1,则参照图15C,控制器180可以通过将第四拍摄图像4和第一拍摄图像1合成在一起来创建失焦图像,在所述失焦图像中,第一对象11和第三对象13中的每一个都具有最低分辨率值。
在参照图12、图13和图15的以上描述中,在提取了针对设置的ROI具有最高或最低分辨率值的拍摄图像之后,通过采用所提取的拍摄图像中的一个拍摄图像作为基本图像来执行图像合成。然而,与参照图12、图13和图15的以上描述不同,将所提取的图像中的一个设置为基本图像不是必须的。
即使拍摄图像针对设置的ROI不具有最高或最低分辨率值,但仍可以利用该拍摄图像作为基本图像,所述基本图像成为图像合成的基础。例如,在图12所示的示例中,控制器180可以将基本图像设置为没有对焦在第二对象12或第三对象13的代表图像(即,第一拍摄图像1)。在这种情形中,控制器分别从第二拍摄图像2和第三拍摄图像3获得针对第二对象12的图像和针对对象13的图像,然后通过将所获得的图像粘贴到代表图像来控制创建多焦点图像。
根据本发明实施方式的移动终端100可以基于多个拍摄图像来创建3D图像。特别地,控制器180可以通过基于多个拍摄图像中的各个拍摄图像的分辨率值反向计算相机121和拍摄对象之间的距离然后根据所计算出的距离创建左眼图像和右眼图像来创建3D图像。下面将参照图16A至图16D对此进行详细描述。
图16A至图16D是示出用于描述基于多个拍摄图像创建3D图像的处理的一个示例的示图。为了清晰,假设多个拍摄图像包括参照图7描述的4个拍摄图像1至4。
参照图图16A和图16B,在经由触摸屏151输出代表图像的同时,如果用户选择‘3D’按钮1601,然后向指定的点施加触摸输入,则控制器180可以将施加了触摸输入的点设置为零视差点。在这种情形中,所述零视差点是成为用于确定将被设置为凸出区域(或负区域)的部分和将被设置为凹入(recessed)区域(或正区域)的 部分的参考的点。另外,控制器180可以参照移动终端100和位于零视差点的对象之间的垂直距离来设置凸出区域和凹入区域。
例如,如果随机对象和移动终端100之间的垂直距离小于位于零视差点的对象和移动终端100之间的垂直距离,则控制器180可以将凸出区域设置为所述随机对象在3D图像中的显示区域。相反,如果随机对象和移动终端100之间的垂直距离大于位于零视差点的对象和移动终端100之间的垂直距离,则控制器180可以将凹入区域设置为所述随机对象在3D图像中的显示区域。
参照图16C,由于施加了用户触摸输入的第三对象位于图16B中的零视差点,所以可以不向3D图像创建应用凸出或凹入效果。因此,当创建了左眼图像和右眼图像时,控制器180控制在相同的坐标显示第三对象13,从而控制不向第三对象13应用3D效果。
另一方面,在第二对象12和第一对象11的情况下,由于第二对象12和第三对象13中的每一个都比第三对象l3更靠近移动终端100(即,距移动终端的垂直距离比第三对象13距移动终端的垂直距离短)时,可以向3D图像创建应用凸出效果。将第一对象11和第二对象12彼此进行比较,可以向到相机121比第二对象12到相机121更近的第一对象11应用更多的凸出效果。为了向第一对象11和第二对象12中的每一个给予凸出效果,控制器180可以控制用于显示第一对象11和第二对象12的坐标的x轴值分别在左眼图像和右眼图像中被设置为彼此不同。
例如,在坐标(x1,y1)为中心显示的第一对象11被控制为在左眼图像中显示在坐标(x1-a,y1)(其中,‘a’是正数)并且在右眼图像中显示在坐标(x1+a,y1),从而控制向第一对象11应用凸出效果。同时,在坐标(x2,y2)为中心显示的第二对象12被控制为在左眼图像中显示在坐标(x2-b,y2)(其中,‘b’是正数)并且在右眼图像中显示在坐标(x2+b,y2),从而控制向第二对象12应用凸出效果。在这种情形中,由于应用到第一对象11的凸出效果大于应用到第二对象12的凸出效果,所以可以建立关系‘a>b’。
相反,可以向距相机121比第三对象13距相机121远(即,距移动终端100的垂直距离比第三对象13距移动终端100的长)的第四对象14应用凹入效果而非凸出效果。因此,控制器180控制在坐标(x4,y4)为中心显示的第四对象14在左眼图像中显示在坐标(x4-c,y4)(其中,‘c’是正数)并且在右眼图像中显示在坐标(x4+c, y4),从而控制向第四对象14应用凹入效果。
此外,控制器180将与拍摄图像的背景相对应的部分设置为在左眼图像和右眼图像中具有相同的坐标,从而控制该部分不被设置为凸出或凹入区域。
可以从在以上描述中提到的EXIF数据来判断距拍摄对象的距离。由于与对焦的对象隔开的距离可以包括EXIF数据中,所以可以判断零视差点和拍摄图像之前的距离。
即使与对焦的对象隔开的距离没有保存在EXIF数据中,也可以利用在相应拍摄的时刻的记录在EXIF数据中的焦距和最大分辨率值来计算距对焦对象的距离。
在图16示出的示例中,可以没有必要固定拍摄对象的凸出/凹入水平(即,3D图像的深度水平)。控制器180可以响应于用户的设置增加/减小拍摄对象的凸出或凹入水平。特别地,在以上参照图16C描述中提到的值‘a’、‘b’和‘c’未被固定,并且可以通过用户的设置进行修改。
图16D示出用于调整3D图像的深度水平的设置屏幕的一个示例。参照图16D,在图16B示出的示例中已经设置了零视差点或者已经创建了左眼图像和右眼图像之后,控制器180可以基于用户操纵来显示3D深度设置菜单1610。
通过图16D中示例性示出的设置屏幕,控制器180使得能够手动调整3D图像的深度。在图16D示出的示例中,如果3D效果被设置为较高水平,则控制器180可以控制进一步增加拍摄对象的凸出或凹入水平。特别地,在图16D示出的示例中,如果3D效果被设置为较高水平,则在以上参照图16C的描述中提到的a/b/c的值可以进一步增加。
现在参照图5,如果控制器180基于指示已完成了焦点调整的用户命令来确定焦点调整完成(S509),则控制器180可以控制从存储器中删除除了显示的拍摄图像之外的其余图像(S510)。例如,在图10示出的示例中,在显示第一拍摄图像1至第四拍摄图像4中的至少一个的同时,如果输入了指示焦点调整已完成的用户命令,则控制器180从存储器160中删除除了当前显示的图像之外的其余图像,从而提高移动终端100的存储容量。
在正显示与图11至图16相同通过将两个拍摄图像合成在一起所创建的合成图像(例如,多焦点图像、全部对焦图像、3D图像等)的同时,如果输入了指示焦点调整已完成的用户命令,则可以控制删除除了合成图像之外的所有拍摄图像。
在图5示出的示例中,如果创建了多个拍摄图像,则控制器180自动选择代表图像,然后显示所选择的代表图像。然而,根据本发明实施方式的移动终端100自动选择代表图像不是必须的。另选地,控制器180可以基于用户的选择来选择多个拍摄图像中的一个拍摄图像作为代表图像。下面将参照图17A至图17H对此进行详细描述。
图17A至图17H是示出在图库模式中的输出的一个示例的示图。
参照图17A,如果用户施加了用于进入图库模式以观看移动终端100的存储器160中所保存的照片的命令,则控制器可以与缩略图一起提供存储器160中所保存的照片文件。在提供在多聚焦拍摄模式中所拍摄的多个拍摄图像的缩略图时,控制器180可以控制多个拍摄图像的缩略图以具有缩略图彼此堆叠的台阶结构1701。
通过控制多个拍摄图像的缩略图具有台阶结构1701,控制器180可以控制将在多聚焦拍摄模式中拍摄的多个拍摄图像与在正常拍摄模式中拍摄的拍摄图像区分开。特别地,与在正常拍摄模式中所拍摄的拍摄图像不同,由于通过彼此堆叠的多个缩略图来显示在多聚焦拍摄模式中所拍摄的多个拍摄图像,所以在多聚焦拍摄模式中拍摄的多个拍摄图像与在正常拍摄模式中拍摄的拍摄图像可容易地彼此区分开。
参照图17B,如果向台阶结构1701的缩略图输入了用户命令(例如,触摸了台阶结构的缩略图),则控制器180将台阶结构1701中堆叠的多个缩略图展开以控制将多个拍摄图像的缩略图显示为列表。随后,如果用户选择了显示为列表的多个缩略图中的一个缩略图,则控制器180可以将与所选择的缩略图相对应的拍摄图像显示为代表图像。
这样,为了帮助用户选择代表图像,控制器180可以控制显示多个拍摄图像中的一个拍摄图像的EXIF数据。例如,如果在图17B示出的示例中输入了适当的用户命令,则控制器180可以控制显示图17C中示出的菜单屏幕1710。如果从图17C中示出的菜单屏幕1710中选择了‘详细信息’项,则参照图17D,控制器180可以控制在相应的缩略图上显示各个拍摄图像的EXIF数据。在图17D示出的示例中,显示EXIF数据,所述EXIF数据包括拍摄图像的序号1711和与对焦的对象隔开的距离1713。
针对另一示例,在多个拍摄图像中的一个拍摄图像被显示为代表图像的同时,控制器180可以响应于用户命令控制显示代表图像的EXIF数据。例如,参照图17E,在多个拍摄图像中的一个拍摄图像被显示为代表图像的同时,如果输入了用户命令 (例如,长时间按代表图像),则参照图17F,控制器180可以控制显示菜单屏幕1720。如果从图17F所示的菜单屏幕中选择了‘详细信息’项,则参照图17G,控制器180可以控制显示代表图像的EXIF数据。在图17G示出的示例中,提供文件名、拍摄图像的最大分辨率值、距具有最大分辨率值的对象的距离和拍摄的序号。
与图17中示出的示例相同,控制器180可以基于用户输入选择多个拍摄图像中的一个拍摄图像作为代表图像。此外,控制器180可以控制显示多个拍摄图像中的各个拍摄图像。
如在步骤S509和步骤S510的以上描述中提到的,如果通过用户命令确定焦点调整已完成,则控制器180可以从存储器160中删除除了所显示的图像之外的其余图像。在删除了其余图像之后,如果再次进入图库模式,则参照图17H,控制器180可以通过撤销图17A中所示的台阶结构1701的缩略图来显示最终选择的图像的缩略图1740。
在图17示出的示例中,由用户从多个拍摄图像中所选择的指定的拍摄图像被选择作为代表图像。
根据本发明的另一实施方式,控制器180可以基于在输入拍摄命令之前施加的用户输入来选择代表图像(S504)。下面将参照图18A至图18D对此进行详细描述。
图18A至图18D是示出用于描述在施加拍摄命令之前基于用户输入来选择代表图像的处理的一个示例的示图。
参照图18A,如果进入多聚焦拍摄模式,则控制器180针对环境显示预览图像,并且可以控制显示自动对焦按钮1810。
如果用户选择图18A中示出的自动对焦按钮1810,则控制器180识别预览图像中的对象(例如,图18A中的第一对象11至第四对象14),选择所识别出的对象,然后控制通过视觉上区分开(例如,在图18B中,分别在第一对象11至第四对象14周围显示虚线轮廓)来显示所选择的对象。在显示区分开的对象11至14的同时,用户可以利用触摸输入选择或者不选择预览图像中的各个对象。例如,参照图18B,如果向第三对象13施加了触摸输入,则控制器180可以控制不选择第三对象13。如果这样,则参照图18C,第三对象13的虚线轮廓1813消失。
之后,如果用户输入拍摄命令,则控制器180选择对焦在所选择的(一个或更多个)对象上的图像作为代表图像,然后控制显示代表图像。例如,如果在选择第一对 象11、第二对象12和第四对象14(图18C)的同时输入了拍摄命令(例如,触摸了拍摄按钮),则控制器180可以控制对焦在第一对象11、第二对象12和第四对象14的多焦点图像被显示为代表图像(图18D)。下面描述省略了已参照图12描述的创建多焦点图像的处理。
当施加了拍摄命令时,如果仅存在一个选择的对象,则控制器180可以控制多个拍摄图像中的对焦在所选择的对象上的拍摄图像被显示为代表图像。
如果在多聚焦拍摄模式中输入了拍摄命令,则可以创建比当在正常拍摄模式中施加拍摄命令时所产生的拍摄图像多的拍摄图像。例如,如果在多聚焦拍摄模式中创建了20个焦距彼此不同的拍摄图像,则可能需要比在正常拍摄模式中多20倍的存储空间。
为了解决由于在多聚焦拍摄模式中创建多个拍摄图像所导致过分占用存储器160的问题,如果创建了多个拍摄图像,则控制器180删除多个拍摄图像中的不重要(一个或更多个)的拍摄图像,仅将(一个或更多个)重要拍摄图像作为目标,然后控制以进行焦点校正处理(即,图5中示出的步骤S506至S511)。特别地,控制器180可以控制保存具有分辨率值高于其余拍摄图像的分辨率值的对象或区域的拍摄图像。
例如,如参照图8的以上描述中所提到的,当在拍摄图像中包括4个对象时,控制器180保存多个拍摄图像中的针对第一对象11具有最佳分辨率的拍摄图像、针对第二对象12具有最佳分辨率的拍摄图像、针对第三对象13具有最佳分辨率的拍摄图像、针对第四对象14具有最佳分辨率的拍摄图像,并可以删除其余的拍摄图像。在这种情形中,可以利用最大4个拍摄图像来执行后焦距校正处理。
针对另一情形,如在参照图9的以上描述中所提到的,当拍摄图像被划分成16个区域时,控制器保存在各个区域中具有最大分辨率的图像,并且可以删除其余的图像。可以说,如果多个拍摄图像中的一个拍摄图像不具有与其余的拍摄图像相比在任何区域具有最佳分辨率值的部分,则控制器180从存储器160中删除相应的拍摄图像,并可以控制以进行焦点校正处理。在这种情形中,可以利用最大16个拍摄图像来执行后聚焦校正处理。
为了确定拍摄图像是否具有分辨率值高于其余的拍摄图像的分辨率值的对象或区域,控制器180可以使用与各个拍摄图像相关联的EXIF数据。特别地,控制器180 将EXIF数据中所包括的各个对象的分辨率值(参看图8)或者EXIF数据中所包括的各个区域的分辨率值(参看图9)进行比较,从而确定相应的拍摄图像是否具有分辨率值高于其余的拍摄图像的分辨率值的对象或区域。
然而,图5中的删除其余图像的步骤S511可以不是强制性的。在一些情况下,可以通过跳过图5中的删除其余图像的步骤S511来执行本发明。
例如,如参照图4的以上描述中所提到的,根据本发明实施方式的移动终端100提取针对通过触摸输入所选择的对象或区域具有最佳分辨率值的拍摄图像。如果该示例被进一步应用,则控制器180可以提取针对通过触摸输入所选择的对象或区域具有最佳亮度的拍摄图像。为了提取针对通过触摸输入所选择的对象或区域具有最佳亮度的拍摄图像,可以将直方图记录在EXIF数据中。控制器180从EXIF数据中所记录的直方图中提取针对通过触摸输入所选择的对象或区域的颜色值(例如,RGB、YCbCr、YUV等),然后可以提取针对通过触摸输入所选择的对象或区域具有最佳亮度的拍摄图像。
因此,本发明的实施方式提供多个优点。第一,本发明可以提供增强用户操纵便利性的移动终端。
第二,本发明可以提供能够在完成拍摄之后显示对焦在用户选择的对象上的拍摄图像的移动终端。
第三,本发明可以提供能够基于拍摄图片创建3D图像的移动终端。最后,在创建3D图像时,根据本发明的实施方式的移动终端可以提供使得用户能够自由地调整零视差点的效果。
本领域技术人员将理解,在不脱离本发明的精神或范围的情况下,本发明可以指定为其它(一个或更多个)形式。
另外,上述方法(或操作流程)可以在记录程序的介质中被实现为计算机可读代码。计算机可读介质可以包括存储可以被计算机系统读取的数据的所有种类的记录装置。计算机可读介质可以包括例如ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置等,并且还包括载波类型实现(例如,经由互联网的传输)。此外,计算机可以包括终端的控制器180。
本发明没有脱离本所附权利要求的精神。本发明包括对这里讨论的示例和实施方式中的每一个的各种修改。根据本发明,以上在一个实施方式或示例中描述的一个或 多个特征可以等同地应用于以上描述的另一示例或实施方式。以上描述的一个或更多个实施方式或示例的特征可以合并成以上描述的实施方式或示例中的每一个。本发明的一个或更多个实施方式或示例的任何全部或部分组合也是本发明的一部分。
因为在不脱离本发明的精神或必要特征的情况下可以按多种形式实现本发明,所以还应该理解,上述实施方式不受以上描述的任何细节的限制,除非另外指定,而是应该被广义地解释为在所附权利要求中所定义的精神和范围内,因此落入权利要求的边界和界限内的所有改变和修改或者这种边界或界限的等同物因此意在通过所附权利要求被包括。
该申请要求在2012年8月16日提交的韩国专利申请No.10-2012-0089729的较早的申请日和优先权的利益,该韩国专利申请通过引用完全合并于此。

Claims (20)

1.一种移动终端,所述移动终端包括:
相机;
触摸屏;以及
控制器,其被配置为:
显示经由所述相机在多聚焦拍摄模式下实时输入的预览图像,
识别所述预览图像中的多个对象,
响应于对所述预览图像中的所述多个对象中的至少两个对象的选择,显示所选择的对象以使得所述选择的对象在所述预览图像中视觉上区分开,
响应于对拍摄命令的接收,经由所述相机拍摄多个图像,
将多聚焦图像作为代表图像进行显示,其中,通过将多个拍摄图像中的至少两个图像合成在一起来创建所述多聚焦图像,所述至少两个图像分别具有针对所选择对象的最佳分辨率,
接收在显示所述代表图像的同时施加的第一触摸输入,
从所述多个拍摄图像中提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像,以及
经由所述触摸屏显示所提取的图像。
2.根据权利要求1所述的移动终端,其中,所述控制器还被配置为通过使焦距彼此不同来连续地拍摄所述多个图像。
3.根据权利要求2所述的移动终端,其中,所述控制器还被配置为:在每当所述相机的镜头到达预设位置就沿光轴的方向移动所述相机的所述镜头的同时,创建所述多个拍摄图像中的各个拍摄图像。
4.根据权利要求1所述的移动终端,其中,所述控制器还被配置为创建所述多个拍摄图像中的各个拍摄图像的可交换图像文件格式EXIF数据。
5.根据权利要求4所述的移动终端,其中,所述EXIF数据包括所述多个拍摄图像中的各个拍摄图像的分辨率信息。
6.根据权利要求5所述的移动终端,其中,所述分辨率信息包括与记录针对在所述拍摄图像中捕获的各个对象的分辨率值有关的信息或者与记录针对通过将所述拍摄图像划分成N个区域所生成的各个区域的分辨率值有关的信息。
7.根据权利要求6所述的移动终端,其中,所述控制器还被配置为:将所述多个拍摄图像的EXIF数据彼此进行比较,然后提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像。
8.根据权利要求4所述的移动终端,其中,所述控制器还被配置为将所述EXIF数据记录在所述多个拍摄图像中的各个拍摄图像的头区域中。
9.根据权利要求1所述的移动终端,其中,所述控制器还被配置为如果通过所述第一触摸输入选择了第一对象和第二对象或者第一区域和第二区域,则提取在所述第一对象或第一区域中具有最佳分辨率的第一拍摄图像以及在所述第二对象或所述第二区域中具有最佳分辨率的第二拍摄图像。
10.根据权利要求9所述的移动终端,其中,所述控制器还被配置为通过将所述第一拍摄图像和所述第二拍摄图像合成在一起来创建合成图像以被显示在所述触摸屏上。
11.根据权利要求1所述的移动终端,其中,所述控制器还被配置为如果在所述多个拍摄图像中的至少一个拍摄图像中包括人物,则将位于所述人物注视的点的对象或区域处理为由所述第一触摸输入所选择的对象或区域。
12.根据权利要求11所述的移动终端,其中,所述控制器还被配置为通过应用眼睛跟踪算法来确定人物注视点。
13.根据权利要求4所述的移动终端,其中,所述EXIF数据还包括与具有最大分辨率值的对象和所述相机之间的距离有关的距离信息。
14.根据权利要求13所述的移动终端,其中,所述控制器还被配置为基于所述多个拍摄图像来创建3D图像。
15.根据权利要求14所述的移动终端,其中,所述控制器还被配置为将通过第二触摸输入所选择的对象设置为零视差点。
16.根据权利要求15所述的移动终端,其中,所述控制器还被配置为通过向比所述零视差点距所述相机更近的对象应用凸出效果并且向比所述零视差点距所述相机更远的对象应用凹入效果来创建所述3D图像。
17.一种控制移动终端的方法,所述方法包括以下步骤:
经由所述移动终端的触摸屏显示经由所述移动终端的相机在多聚焦拍摄模式下实时输入的预览图像,
识别所述预览图像中的多个对象,
响应于对所述预览图像中的所述多个对象中的至少两个对象的选择,经由所述移动终端的所述触摸屏显示所选择的对象以使得所述选择的对象在所述预览图像中视觉上区分开,
响应于对拍摄命令的接收,经由所述移动终端的所述相机拍摄多个图像;
经由所述移动终端的所述触摸屏将多聚焦图像作为代表图像进行显示,其中,通过将多个拍摄图像中的至少两个图像合成在一起来创建所述多聚焦图像,所述至少两个图像分别具有针对所选择对象的最佳分辨率;
经由所述移动终端的控制器接收在显示所述代表图像的同时施加的第一触摸输入;
经由所述控制器从所述多个拍摄图像中提取针对通过所述第一触摸输入所选择的对象或区域具有最佳分辨率的图像,以及
经由所述触摸屏显示所提取的图像。
18.根据权利要求17所述的方法,其中,通过使焦距彼此不同来连续地拍摄所述多个拍摄图像。
19.根据权利要求18所述的方法,所述方法还包括以下步骤:在每当所述相机的镜头到达预设位置就沿光轴的方向移动所述相机的所述镜头的同时,经由所述控制器创建所述多个拍摄图像中的各个拍摄图像。
20.根据权利要求17所述的方法,所述方法还包括以下步骤:
经由所述控制器创建所述多个拍摄图像中的各个拍摄图像的可交换图像文件格式EXIF数据。
CN201310356686.3A 2012-08-16 2013-08-15 移动终端及其控制方法 Expired - Fee Related CN103595909B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2012-0089729 2012-08-16
KR1020120089729A KR101952684B1 (ko) 2012-08-16 2012-08-16 이동 단말기 및 이의 제어 방법, 이를 위한 기록 매체

Publications (2)

Publication Number Publication Date
CN103595909A CN103595909A (zh) 2014-02-19
CN103595909B true CN103595909B (zh) 2016-12-28

Family

ID=48918221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310356686.3A Expired - Fee Related CN103595909B (zh) 2012-08-16 2013-08-15 移动终端及其控制方法

Country Status (4)

Country Link
US (1) US9628703B2 (zh)
EP (1) EP2698984A3 (zh)
KR (1) KR101952684B1 (zh)
CN (1) CN103595909B (zh)

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5493789B2 (ja) * 2009-12-07 2014-05-14 株式会社リコー 撮像装置および撮像方法
KR101990073B1 (ko) * 2012-11-12 2019-06-17 삼성전자주식회사 전자장치에서 다초점 영상 촬영 및 저장 방법 및 장치
KR102105961B1 (ko) 2014-05-13 2020-05-28 엘지전자 주식회사 이동단말기 및 그 제어방법
KR102252448B1 (ko) * 2014-09-12 2021-05-14 삼성전자주식회사 제어 방법 및 그 방법을 처리하는 전자장치
KR102234709B1 (ko) * 2014-09-15 2021-04-01 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
CN104767938A (zh) * 2015-03-27 2015-07-08 广东欧珀移动通信有限公司 一种拍摄图片的方法及装置
CN104853089B (zh) * 2015-04-16 2018-04-17 深圳市威德视科技有限公司 一种实现完整高清图片的方法和装置
US10110792B2 (en) 2015-04-24 2018-10-23 Lifetouch Inc. Background replacement system and methods involving multiple captured images
CN104917965A (zh) * 2015-05-28 2015-09-16 努比亚技术有限公司 拍摄方法及装置
JP6347056B2 (ja) 2015-07-07 2018-06-27 パナソニックIpマネジメント株式会社 撮像装置および静止画像生成方法
KR102429427B1 (ko) * 2015-07-20 2022-08-04 삼성전자주식회사 촬영 장치 및 그 동작 방법
KR101790411B1 (ko) 2015-09-25 2017-10-26 순천향대학교 산학협력단 균일한 입도분포를 가지는 아고멜라틴 공결정 분체의 제조방법
CN105306829A (zh) * 2015-12-07 2016-02-03 广东欧珀移动通信有限公司 拍照方法及装置
CN105786384B (zh) * 2016-02-26 2019-07-30 努比亚技术有限公司 一种调节焦点装置和方法
CN107135335A (zh) * 2016-02-29 2017-09-05 致伸科技股份有限公司 获得影像的方法及应用该方法的影像提取装置与电子装置
EP3439281A4 (en) * 2016-03-29 2019-04-17 Sony Corporation INFORMATION PROCESSING DEVICE, IMAGING DEVICE, IMAGE REPRODUCING DEVICE, METHOD, AND PROGRAM
CN105827710B (zh) * 2016-03-31 2019-05-31 百度在线网络技术(北京)有限公司 车载终端与移动终端协同输入的控制方法及移动终端
KR20170123125A (ko) * 2016-04-28 2017-11-07 엘지전자 주식회사 이동단말기 및 그 제어방법
CN106254724A (zh) * 2016-07-29 2016-12-21 努比亚技术有限公司 一种实现图像降噪的方法、装置和终端
KR101948674B1 (ko) 2016-10-20 2019-02-18 (주)하이모 포터블 스캐너 및 그 스캐닝 방법
CN106454105A (zh) * 2016-10-28 2017-02-22 努比亚技术有限公司 图像处理装置及方法
CN106331510B (zh) * 2016-10-31 2019-10-15 维沃移动通信有限公司 一种逆光拍照方法及移动终端
US10534953B2 (en) * 2016-11-14 2020-01-14 Samsung Electronics Co., Ltd. Electronic apparatus and control method thereof
US11222195B2 (en) * 2016-11-14 2022-01-11 Samsung Electronics Co., Ltd. Electronic apparatus and control method thereof
CN106791358B (zh) * 2016-11-16 2021-03-05 Oppo广东移动通信有限公司 终端拍照方法、装置及终端
CN106851104B (zh) * 2017-02-28 2019-11-22 努比亚技术有限公司 一种根据用户视角进行拍摄的方法及装置
CN107071333A (zh) * 2017-05-19 2017-08-18 深圳天珑无线科技有限公司 视频图像处理方法和视频图像处理装置
CN108282608B (zh) * 2017-12-26 2020-10-09 努比亚技术有限公司 多区域对焦方法、移动终端及计算机可读存储介质
CN108305215A (zh) * 2018-01-23 2018-07-20 北京易智能科技有限公司 一种基于智能移动终端的图像处理方法及系统
CN108495045B (zh) * 2018-05-17 2020-11-27 Oppo广东移动通信有限公司 图像拍摄方法、装置、电子装置以及存储介质
CN109151305B (zh) * 2018-08-27 2020-12-15 惠州Tcl移动通信有限公司 一种控制移动终端连续拍照的方法、存储设备及移动终端
CN110602395B (zh) * 2019-09-10 2021-04-13 Oppo广东移动通信有限公司 电子设备及其摄像头的控制方法
CN110995996A (zh) * 2019-12-11 2020-04-10 Tcl移动通信科技(宁波)有限公司 一种图像显示方法、装置、存储介质及终端设备
CN111314621B (zh) * 2020-04-15 2022-05-27 维沃移动通信有限公司 一种拍照方法及电子设备
CN111491124B (zh) * 2020-04-17 2023-02-17 维沃移动通信有限公司 视频处理方法、装置及电子设备
CN111447370B (zh) * 2020-05-19 2021-07-27 Oppo广东移动通信有限公司 摄像头访问方法、访问装置、终端设备及可读存储介质
US20230216979A1 (en) * 2020-07-20 2023-07-06 Sony Group Corporation Information processing device, information processing method, and program
KR20220053876A (ko) * 2020-10-23 2022-05-02 강성철 다초점 영상 재생 장치 및 방법
CN112637491A (zh) * 2020-12-18 2021-04-09 维沃移动通信(杭州)有限公司 拍摄方法和拍摄装置
EP4320859A1 (en) * 2021-04-04 2024-02-14 LEIA Inc. Multiview image creation system and method

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005277813A (ja) * 2004-03-25 2005-10-06 Canon Inc 電子撮像装置
KR20080058779A (ko) * 2006-12-22 2008-06-26 삼성전자주식회사 화상형성장치 및 그 연사촬영 이미지의 제어방법
CN101605208A (zh) * 2008-06-13 2009-12-16 富士胶片株式会社 图像处理设备、成像设备、图像处理方法及程序
CN101621622A (zh) * 2008-06-30 2010-01-06 索尼株式会社 超级分辨率数字变焦
CN101888482A (zh) * 2010-06-22 2010-11-17 宇龙计算机通信科技(深圳)有限公司 多焦距图像同时显示的方法、系统及移动终端
CN102142141A (zh) * 2010-01-28 2011-08-03 株式会社泛泰 具有图像转换功能的移动通信终端和方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7860382B2 (en) * 2006-10-02 2010-12-28 Sony Ericsson Mobile Communications Ab Selecting autofocus area in an image
JP5381060B2 (ja) * 2008-02-05 2014-01-08 株式会社リコー 撮像装置およびその画像処理方法
US9288428B2 (en) 2010-05-11 2016-03-15 Olympus Corporation Shooting apparatus and method for controlling shooting apparatus
US8619179B2 (en) * 2011-03-28 2013-12-31 Canon Kabushiki Kaisha Multi-modal image capture apparatus with a tunable spectral response
KR101832959B1 (ko) * 2011-08-10 2018-02-28 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
US8736706B1 (en) * 2012-03-13 2014-05-27 Google Inc. Method and system for generating high resolution composite images

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005277813A (ja) * 2004-03-25 2005-10-06 Canon Inc 電子撮像装置
KR20080058779A (ko) * 2006-12-22 2008-06-26 삼성전자주식회사 화상형성장치 및 그 연사촬영 이미지의 제어방법
CN101605208A (zh) * 2008-06-13 2009-12-16 富士胶片株式会社 图像处理设备、成像设备、图像处理方法及程序
CN101621622A (zh) * 2008-06-30 2010-01-06 索尼株式会社 超级分辨率数字变焦
CN102142141A (zh) * 2010-01-28 2011-08-03 株式会社泛泰 具有图像转换功能的移动通信终端和方法
CN101888482A (zh) * 2010-06-22 2010-11-17 宇龙计算机通信科技(深圳)有限公司 多焦距图像同时显示的方法、系统及移动终端

Also Published As

Publication number Publication date
EP2698984A3 (en) 2015-11-18
KR20140033531A (ko) 2014-03-19
US9628703B2 (en) 2017-04-18
EP2698984A2 (en) 2014-02-19
KR101952684B1 (ko) 2019-02-27
CN103595909A (zh) 2014-02-19
US20140049611A1 (en) 2014-02-20

Similar Documents

Publication Publication Date Title
CN103595909B (zh) 移动终端及其控制方法
US10091411B2 (en) Mobile terminal and controlling method thereof for continuously tracking object included in video
KR101660505B1 (ko) 이동 단말기 및 그 제어방법
KR102155094B1 (ko) 이동 단말기 및 그 제어방법
CN105100388B (zh) 移动终端及其控制方法
KR102101740B1 (ko) 이동 단말기 및 이의 제어방법
EP3364645A2 (en) Mobile terminal and method of controlling the same
US10104312B2 (en) Mobile terminal and method for controlling the same
KR101806891B1 (ko) 이동 단말기 및 이동 단말기의 제어방법
CN107343081A (zh) 移动终端及其控制方法
US10158807B2 (en) Mobile terminal and method for controlling the same
CN106210184A (zh) 移动终端及其控制方法
CN106406688B (zh) 移动终端及其控制方法
KR20170131101A (ko) 이동 단말기 및 그 제어방법
CN106713738A (zh) 移动终端及其控制方法
KR20150087606A (ko) 이동 단말기 및 그 제어 방법
KR20170025177A (ko) 이동단말기 및 그 제어방법
KR20150047032A (ko) 이동 단말기 및 이의 제어방법
KR101737840B1 (ko) 이동 단말기 및 그 제어방법
KR20170064901A (ko) 모바일 디바이스 및 그 제어 방법
KR101537625B1 (ko) 이동단말기 및 그 제어방법
KR20150030082A (ko) 이동 단말기 및 그 제어방법
KR20170082228A (ko) 이동 단말기 및 그 제어방법
KR20150009744A (ko) 투명 플렉서블 디스플레이를 이용하는 이동 단말기의 사용자 인터페이스 제공 방법
KR101638922B1 (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20161228

Termination date: 20190815

CF01 Termination of patent right due to non-payment of annual fee