CN101794203A - 移动终端及其照相机图像控制方法 - Google Patents

移动终端及其照相机图像控制方法 Download PDF

Info

Publication number
CN101794203A
CN101794203A CN201010001525A CN201010001525A CN101794203A CN 101794203 A CN101794203 A CN 101794203A CN 201010001525 A CN201010001525 A CN 201010001525A CN 201010001525 A CN201010001525 A CN 201010001525A CN 101794203 A CN101794203 A CN 101794203A
Authority
CN
China
Prior art keywords
display part
face
image
portable terminal
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201010001525A
Other languages
English (en)
Other versions
CN101794203B (zh
Inventor
金钟焕
尹泳钉
梁玄东
金相受
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020090001230A external-priority patent/KR101622599B1/ko
Priority claimed from KR1020090024750A external-priority patent/KR101572887B1/ko
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN101794203A publication Critical patent/CN101794203A/zh
Application granted granted Critical
Publication of CN101794203B publication Critical patent/CN101794203B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00281Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal
    • H04N1/00307Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a telecommunication apparatus, e.g. a switched network of teleprinters for the distribution of text-based information, a selective call terminal with a mobile telephone apparatus

Abstract

本发明提供了一种移动终端及其照相机图像控制方法。控制移动终端的方法包括:通过移动终端上的显示器在第一显示部分显示拍摄的图像或预览图像,通过显示器在第二显示部分显示相同的拍摄的图像或预览图像,通过移动终端上的控制器对显示在第一显示部分的拍摄的图像或预览图像进行缩放,以及通过显示器在第二显示部分所显示的图像上显示用于标识第一显示部分所显示的图像的缩放部分的缩放指南。

Description

移动终端及其照相机图像控制方法
技术领域
本发明涉及移动终端以及对应的拍摄图像的方法。
背景技术
移动终端可以被配置为执行各种功能(诸如,数据和语音通信功能、通过终端上的照相机拍摄照片或视频图像、播放视频或音乐文件、玩游戏以及记录语音消息等)。因此,终端已经成为了多媒体播放器。但是,由于移动终端通常尺寸较小,因此同样使用尺寸较小的字体来显示用户界面等。这使得用户很难操作移动终端。用户还拍摄了许多照片,但是实际上用于操作照相机功能的用户界面有限。
发明内容
因此,本发明的一个目的在于解决上述及其它问题。
本发明的另一目的在于提供了用户能在预览屏幕图像上方便地使用的各种用户界面。
本发明的另一目的在于根据对预览屏幕图像的照相机缩放操作来对图像进行有效地显示和控制。
为了实现这些和其它优点,并且根据本发明的目的,如在此具体实施和广泛描述的,本发明在一个方面提供了一种控制移动终端的方法。该方法包括以下步骤:通过所述移动终端上的显示器在第一显示部分显示拍摄图像或预览图像;通过所述显示器在第二显示部分显示相同的拍摄图像或预览图像;通过所述移动终端上的控制器对在所述第一显示部分所显示的所述拍摄图像或预览图像进行缩放,并通过所述显示器在所述第二显示部分所显示的图像上显示用于标识所述第一显示部分所显示的图像的缩放部分的缩放指南。
另一方面,本发明包括一种控制移动终端的方法,并且该方法包括以下步骤:通过所述移动终端上的显示器在第一显示部分显示拍摄图像或预览图像;通过所述移动终端的控制器识别所述拍摄图像或预览图像中所包括的至少第一人脸和第二人脸;通过所述显示器在所述第二显示部分显示所述至少第一人脸和第二人脸中所包括的第一人脸;接收指示对所述第二显示部分中的所述第一人脸进行移位的移位信号;以及基于所接收到的移位信号,通过所述显示器在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
另一方面,本发明提供了一种移动终端,其包括:第一显示部分,其被配置为显示拍摄图像或者预览图像;第二显示部分,其被配置为显示相同的拍摄图像或预览图像;以及控制器,其被配置为对在所述第一显示部分所显示的所述拍摄图像或预览图像进行缩放,以及控制所述第二显示部分以在所述第二显示部分所显示的图像上显示用于标识所述第一显示部分所显示的图像的缩放部分的缩放指南。
另一方面,本发明提供了一种移动终端,该移动终端包括:第一显示部分,其被配置为在第一显示部分显示拍摄图像或者预览图像;控制器,其被配置为识别所述拍摄图像或预览图像中所包括的至少第一人脸和第二人脸;第二显示部分,其被配置为显示在所述至少第一人脸和第二人脸中所包括的第一人脸。此外,所述控制器还被配置为:接收指示对所述第二显示部分中的所述第一人脸进行移位的移位信号,并且基于所接收到的移位信号,在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
根据以下的详细说明书,本发明的其它应用范围将变得很明显。但是,应了解,指示本发明的优选实施方式的具体说明书以及特定示例仅仅是示例,对于本领域的技术人员来说很明显的是,根据具体说明书可以在本发明的精神和范围内进行各种修改和变型。
附图说明
根据下面的详细说明及附图,本发明将更充分地被理解,这些详细说明及附图仅出于示例的目的,因此不是对本发明的限制,在附图中:
图1是实施本发明的一个实施方式的移动终端的示意性框图;
图2A是实施本发明的一个实施方式的移动终端的正视立体图;
图2B是实施本发明的一个实施方式的移动终端的后视立体图;
图3A和图3B是根据本发明的一个实施方式的用于说明移动终端的操作状态的移动终端的正视图;
图4是根据本发明的一个实施方式的用于说明接近传感器的接近深度的概念图;
图5A和图5B是分别用于说明用于检测接近信号的接近触摸(proximity touch)识别区域、以及用于生成触觉效果的触觉区域的图;
图6是例示了根据本发明的一个实施方式的使用缩微图(迷你图)来控制移动终端的预览图像的方法的流程图;
图7是例示了根据本发明的一个实施方式的在缩放操作中显示迷你图的显示屏的概图;
图8是例示了根据本发明的一个实施方式的在缩放操作中显示用于滚动图像的滚动条的显示屏的概图;
图9是例示了根据本发明的一个实施方式的利用特定的经过时间来控制移动终端的照相机图像的显示屏的概图;
图10是例示了根据本发明的一个实施方式的基于触摸操作来控制移动终端的照相机图像的显示屏的概图;
图11是例示了根据本发明的一个实施方式的利用迷你图来控制移动终端的缩放图像的方法的流程图;
图12A至12E是例示了根据本发明的一个实施方式的利用迷你图来对移动终端的缩放图像进行移位的显示屏的概图;
图13是例示了根据本发明的一个实施方式的拍摄移动终端的缩放图像的显示屏的概图;
图14是例示了根据本发明的一个实施方式的使用人脸识别处理来控制移动终端的照相机图像的方法的流程图;
图15是例示了根据本发明的一个实施方式的使用人脸识别处理来控制移动终端的缩放图像的显示屏的概图;
图16A至图16I是根据本发明的一个实施方式的当利用人脸识别处理来执行缩放操作时,显示各种通知信息的显示屏的概图;
图17是例示了根据本发明的一个实施方式的当触摸通知信息时,对缩放图像的中央位置进行移位使得出现对应的人脸识别区域的显示屏的概图;
图18是例示了根据本发明的一个实施方式的当触摸人脸识别区域箭头时,对缩放图像的中央位置进行移位使得出现对应的人脸识别区域的显示屏的概图;
图19是例示了根据本发明的一个实施方式的当接近触摸人脸识别区域图标时,对缩放图像的中央位置进行移位使得出现对应的人脸识别区域的显示屏的概图;
图20是例示了根据本发明的一个实施方式的当触摸-并-拖动人脸识别区域图标时,对缩放图像的中央位置进行移位使得出现对应的人脸识别区域的显示屏的概图;
图21是例示了根据本发明的一个实施方式的利用特定的触摸动作来对缩放的图像进行移位的显示屏的概图;
图22是根据本发明的一个实施方式的通过多次触摸布局图(composition map)来将中央位置移位到人脸识别区域的显示屏的概图;
图23是例示了根据本发明的一个实施方式的在通过对布局图施加触摸来将中央位置移位到人脸识别区域之后执行图像拍摄的显示屏的概图;
图24是例示了根据本发明的一个实施方式的在通过施加多次长触摸来将中央位置移位到人脸识别区域之后执行图像拍摄的显示屏的概图;
图25是例示了根据本发明的一个实施方式的针对人脸识别区域来执行各种应用的方法的流程图;
图26是例示了根据本发明的一个实施方式的实际执行图24中的应用的显示屏的概图;
图27例示了根据本发明的一个实施方式的控制移动终端的拍摄图像的方法的流程图;
图28A至图28E包括例示了根据本发明的一个实施方式的用于控制移动终端的拍摄图像的方法的各种实施例的显示屏的概图;
图29A至图29E包括例示了根据本发明的一个实施方式的在拍摄图像控制方法中,对在两个物理上分立的显示区域中显示的图像进行控制的显示屏的概图;
图30A至图30C包括例示了根据本发明的一个实施方式的通过接近触摸在辅显示区域与主显示区域之间的协同操作的显示屏的概图;
图31A至图31C包括例示了根据本发明的一个实施方式的当在相同机体中形成了两个物理上分立的显示区域时对所拍摄的图像进行控制的显示屏的概图;以及
图32A至图32E包括例示了根据本发明的一个实施方式的当在相同机体中形成了两个物理上分立的显示区域时对在两个显示区域所显示的图像进行控制的显示屏的概图。
具体实施方式
现在将详细描述本发明的优选实施方式,在附图中例示了它们的实施例。
图1是根据本发明的一个实施方式的移动终端100的框图。如图所示,移动终端100包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感应单元140、输出单元150、存储器160、接口170、控制器180及电源190等。
此外,无线通信单元110通常包括使得能够在移动终端100与该移动终端所在的无线通信系统或网络之间进行无线通信的一个或更多个组件。例如,移动通信单元110可包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115等。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。同时,广播信道可以包括卫星信道和地面信道。广播管理服务器通常是生成并发送广播信号和/或广播相关信息的服务器,或可以是接收之前生成的广播信号和/或广播相关信息的服务器、然后将提供的广播信号或广播相关信息发送至终端的服务器。
此外,广播信号不仅可包括TV广播信息、收音广播信号和数据广播信号等。还可包括与TV广播信号或收音广播信号组合的广播信号。广播相关信息包括与广播信道、广播节目、广播业务供应商等相关的信息。甚至可以经由移动通信网来提供广播相关信息。在后者的情况下,可以由移动通信模块112来接收广播相关信息。
可以按照各种方式来实现广播相关信息。例如,广播相关信息可包括数字多媒体广播(DMB:digital multimedia broadcasting)的电子节目指南(EPG:electronic program guide)、或者手持数字视频广播(DVB-H:digital video broadcast-handheld)的电子服务指南(ESG:electronic serviceguide)。此外,广播接收模块111利用各种广播系统来接收广播信号。具体而言,广播接收模块111可以利用数字广播系统来接收数字广播信号。作为非限制性示例,这些数字广播系统诸如地面数字多媒体广播(DMB-T:digital multimedia broadcasting-terrestrial)、卫星数字多媒体广播(DMB-S:digital multimedia broadcasting-satellite)、手持数字视频广播(DVB-H:digital video broadcast-handheld)、DVB-CBMS、OMA-BCAST、被称为媒体前向链路(
Figure G2010100015259D00061
:media forward link only)的数据广播系统以及综合业务地面数字广播(ISDB-T:integrated services digitalbroadcasting-terrestrial)等。还可以将广播接收模块111构造为适于除上述数字广播系统的提供广播信号的广播系统。
可以将由广播接收模块111接收到的广播信号和/或广播相关信息保存在存储器160中。移动通信模块112向移动通信网中的至少一个基站、外部终端和服务器发送无线信号,或从它们接收无线信号。这些无线信号可以根据文本/多媒体消息的收发按照不同形式可以包括语音呼叫信号、视频电话呼叫信号或数据等。
此外,无线互联网模块113对应于无线互联网接入的模块,并且可以包括在终端100中或者外部地附接到终端100。可以将WLAN(无线LAN)(Wi-Fi)、Wibro(Wireless broadband:无线宽带)、Wimax(WorldInteroperability for Microwave Access:全球微波接入互操作性)以及HSDPA(High Speed Downlink Packet Access:高速下行分组接入)等用作无线互联网接入技术。同时,短距离通信模块114对应于用于本地通信的模块。此外,可以将射频识别(RFID:radio frequency identification)、红外数据协会(IrDA:Infrared data association)、超宽带(UWB:ultra-wideband)以及通常被称为蓝牙(Bluetooth)和ZigBee用作本地通信技术。
位置信息模块115确认或者获得移动终端的位置。具体而言,全球定位系统(GPS:global positioning system)模块是位置信息模块115的代表例。此外,GPS模块115可以计算有关一个点或对象与至少3个卫星之间的距离、有关测量距离信息的时间的信息,并在预定的时间,根据维度、经度和高度对所获得的距离信息应用三角法来获得该点或对象的三维位置信息。此外,还使用利用3个卫星来计算位置和时间信息并利用另一卫星来校正所计算的位置和时间信息的方法。此外,GPS模块115连续地实时计算当前位置并利用位置信息来计算速度信息。
参照图1,A/V输入单元120用于输入音频信息或视频信号输入,并且包括照相机121和麦克风122。照相机121处理在视频电话模式或拍摄模式通过图像传感器获得的静态图像或运动图像的图像帧。才外,处理后的图像帧可以显示在显示单元151上。同样,由照相机121处理的图像帧可以保存在存储器160中还是通过无线通信单元110发送至外部设备。移动终端100还可以包括至少两个照相机。麦克风122在呼叫模式、记录模式或速度识别模式下接收外部音频信号,并将接收到的音频信号处理成电子音频数据。
然后,该视频数据被转换成可经由移动通信模块112发送至移动通信基站的格式并在呼叫模式时被输出。此外,麦克风122可以采用用于去除在接收外部音频信号时产生的噪音的各种噪音去除算法。此外,用户输入单元130从用户接收用于控制终端的操作的输入数据。用户输入单元130可包括:键盘、薄膜开关(dome switch)、触摸板(例如,静压式/电容式触摸板)、滚轮(jog wheel)和拨动开关(jog switch)等。
同样,感应单元140对移动终端100的当前状态(诸如,移动终端100的开/关状态、移动终端100的位置、用户是否触摸移动终端100、移动终端100的方向以及移动终端100的加速/减速)进行感应,并产生用于控制移动终端100的操作的感应信号。例如,当移动终端100时滑动电话时,感应单元140可以感应到该滑动电话是打开还是关闭。此外,感应单元140可以感应电源190是否提供的电力、以及接口170是否与外部设备连接。感应单元140还可包括接近传感器141。
更具体而言,接近传感器141可以位于移动终端100的内部区域、位于触摸屏周围或者靠近触摸屏。接近传感器141利用电磁力或者红外线而不通过机械接触来感应靠近预定的感应面的对象或者位于接近传感器141附近的对象。此外,接近传感器141的使用寿命比接触传感器长,因此在移动终端100中具有较广的应用。
此外,接近传感器141包括透射式光电传感器、直接反射式光电传感器、镜面反射式光电传感器、高频振荡接近传感器、电容式接近传感器、磁接近传感器、红外接近传感器等。此外,电容式触摸屏被构造为根据指点器(pointer)的接近通过电场的变化来检测指点器的接近。在该情况下,可以将触摸屏(触摸传感器)划分为接近传感器。
在以下说明中,为了方便,将指点器接近触摸屏但不实际接触触摸屏的动作称作“接近触摸”,而将指点器接触触摸屏的动作称作“接触触摸”。此外,指点器在触摸屏上的接近触摸点相当于触摸屏上的、指点器对触摸屏进行触摸的点。
此外,接近传感器141感应接近触摸动作和接近触摸模式(例如,接近触摸距离、接近触摸方向、接近触摸速度、接近触摸时间、接近触摸位置、接近触摸运动状态等)。然后,可以在触摸屏上显示与所感应的接近触摸动作和接近触摸模式相对应的信息。
此外,输出单元150生成与视觉、听觉、触觉的输出。并且,输出单元150包括显示单元151、音频输出模块152、报警单元153、触觉模块154。此外,显示单元151显示被移动终端100处理过的信息。例如,当移动终端处于电话呼叫模式时,显示单元151显示与电话呼叫相关的信息的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频电话模式或摄影模式时,显示单元151还拍摄或/和接收到的图像、UI或GUI。
此外,显示单元151可包括液晶显示器(liquid crystal display)、薄膜晶体管液晶显示器(thin film transistor-liquid crystal display)、有机发光二极管显示器(organic light-emitting diode display)、柔性显示器和三维显示器中的至少一种。此外,这些显示器中的一些可以是透明型或光透射型。也就是说,显示单元151可包括透明显示器。
更具体而言,透明显示器包括透明液晶显示器。此外,显示单元151的后结构也可以是光透射型。因此,用户能够透过移动终端100机体的、由显示单元151所占据的透明区域,看到位于移动终端100机体之后的对象。
移动终端100可包括至少两个显示单元151。例如,移动终端100可以包括以预定的距离设置在单个表面的多个显示器或集成显示器。可以将多个显示器设置在移动终端100的不同表面上。
此外,当显示单元151与感应触摸的传感器(下面称作“触摸传感器”)形成层结构(下面称作“触摸屏”)时,除了输出设备之外,还可以将显示单元151用作输入设备。触摸显示器可以例如被设置为触摸膜、触摸片、触摸板等。
此外,触摸传感器可以被构造为将施加到显示单元151的特定部分的压力的变化或在显示单元151的特定部分处所产生的电容变化转换成电输入信号。此外,触摸传感器还可以构造为感应触摸压力以及触摸的位置或区域。
同时,当对触摸传感器进行触摸输入时,与该触摸对应的信号被发送到触摸控制器。然后触摸控制器处理该信号,并将与处理后的信号对应的数据发送到控制器180。因此,控制器180能够检测显示单元151的触摸部分。
同样,音频输出模块152可以在呼叫信号接收模式、电话呼叫模式、或录制模式、语音识别模式、以及广播接收模式下,输出从无线通信单元110所接收或保存在存储器160中的音频数据。此外,音频输出模块152输出移动终端100中执行的、与特定功能(例如,呼叫信号振铃音、消息振铃音等)有关的音频。音频输出模块152可以包括接收机、扬声器、蜂鸣器等。
此外,报警单元153输出用于通知移动终端100的事件的发生的信号。例如,当接收到呼叫信号、接收到消息、输入按键信号、输入触摸等时,可以产生报警。报警单元153还可以按照不同于视频信号或音频信号(例如,通过振动来表示事件的发生的信号)的方式来输出信号。还可以经由显示单元151或音频输出单元152来输出视频信号或音频信号。
同样,触觉模块154生成用户可以感测的各种触觉效果。触觉效果的一个代表性效果是振动。由触觉模块154所生成的振动的强度和模式是可控制的。例如,各种振动可以被合并在一起输出,或者依次输出。此外,除了振动以外,触觉模块154还可以产生如下各种触觉效果:排列的针相对于接触皮肤表面垂直移动的刺激效果、根据通过喷气孔或吸气孔的空气喷力或空气吸力的刺激效果、摩擦皮肤的刺激效果、根据电极接触的刺激效果、利用静电力的刺激效果、以及利用能够吸热或放热元件来再现冷和热的效果等。触觉模块154不仅可以通过直接接触来传递该触觉效果,而且还可以使得用户能够通过用户的手指、手臂等的肌肉感觉来感觉触觉效果。移动终端100还可以包括多个触觉模块154。
此外,存储器160可以存储用于操作控制器180的程序以及临时存储输入/输出数据(例如,电话簿、消息、静止图像、运动图像等)。存储器160还可以按照各种模式来存储将触摸应用到触摸屏时所输出的振动和声音的数据。此外,存储器160可以包括以下中的至少一个:闪存、硬盘型存储器、多媒体卡微型存储器、卡型存储器(例如,SD或XD存储器)、随机存取存储器(RAM:random access memory)、静态随机存取存储器(SRAM:static random access memory)、只读存储器(ROM:read-only memory)、电可擦除可编程只读存储器(EEPROM:electricallyerasable programmable read-only memory)、可编程只读存储器(PROM:programmable read-only memory)、磁存储器、磁盘或光盘等。移动终端100能够与互联网上的用于执行存储器160的存储功能的网页存储器相关联地进行操作。
接口170用作通往与移动终端100连接的外部设备的路径。此外,接口170从外部设备接收数据或者电源,然后将数据或电源发送到移动终端100的内部元件,或者将移动终端100的数据发送到外部设备。同时,接口170可以例如包括有线/无线耳塞端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于连接到具有用户识别模块的设备的端口、音频I/O端口、视频I/O端口、耳机端口等。
此外,接口170还可以与用户识别模块进行接口,该用户识别模块是用于存储对使用移动终端100的权限进行认证的信息的芯片。例如,用户识别模块可以包括用户身份模块(UIM:user identity module)、订户身份模块(SIM:subscriber identity module)及通用用户身份模块(USIM:universal subscriber identity module)。包括用户识别模块的识别设备可以按照智能卡的形式而制造。因此,通过接口170的端口将该识别设备连接到移动终端100。
当移动终端100连接到外部托架时,接口单元170可以用作从该外部托架向移动终端100提供电力的通路,或者用作用户通过该托架向移动终端100发送所输入的各种命令信号的通路。从托架输入的各种命令信号或电力可以用作用于确认移动终端是否正确地设置于该托架中的信号。
此外,控制器180控制移动终端的总体操作。例如,控制器180执行用于语音通信、数据通信、视频电话的控制和处理。如图1所示,控制器180可以包括用于播放多媒体的多媒体模块181。同样,如图1所示,多媒体模块181可以被包括在控制器180的一部分,或者与控制器180分立设置。此外,控制器180可以执行用于将应用于触摸屏手写体的输入或画图输入识别为字符或图像的图案识别处理。此外,电源190接收外部电力和内部电力,并在控制器180的控制下提供操作移动终端的组件所需的电力。
接着,图2A是根据本发明的一个实施方式的移动终端100的正视立体图。在此示例中,移动终端100是直板式(bar-type)终端机体。但是,本发明不限于直板式终端,并且可以应用于包括滑盖式(slide-type)、折叠式(folder-type)、旋盖式(swing-type)、旋转式(swivel-type)终端的各种类型的终端。
此外,终端机体包括形成移动终端100的外部的壳体(外壳、机壳、盖等)。在本实施方式中,该壳体可以分成前壳体101和后壳体102。此外,在前壳体101与后壳体102之间的空间中设置了各种电子部件。在前壳体101与后壳体102之间还附加设置有至少一个中间壳体。同时,壳体可通过塑料注入成型来形成,或者可以由例如不锈钢(STS)或钛(Ti)等的金属材料制成。
如图2A所示,可以将显示单元151、音频输出单元152、照相机121、用户输入单元131和132、麦克风122和接口170设置到终端机体上(具体而言,设置在前壳体101)。此外,显示单元151占据了前壳体101的大部分主表面。音频输出单元152和照相机121设置在与显示单元151的两个端部中的一个端部相邻的区域。同时,用户输入单元131和麦克风122设置在与显示单元151的另一端部接近的区域。用户输入单元132和接口170可以设置在前壳体101和后壳体102的侧面。
因此,在此实施方式中,用户输入单元130包括操作用于接收控制手持终端100的操作的命令的多个操作单元131和132。此外,操作单元131和132可称作操作部,并且可以采用用户操控操作单元131和132而产生触觉的任意触觉方式。同样,操作单元131和132可以接收各种输入。例如,操作单元131接收诸如开始和结束呼叫命令的命令,而第二操作单元132接收诸如对从音频输出单元152输出的声音进行音量控制、或者将显示单元151转换为触摸识别模式的命令。
接着,图2B是根据本发明的一个实施方式的图2A示出的移动终端100的后视立体图。如图2B所示,可以将照相机121’附加地设置到在终端机体的后侧,即,设置到后壳体102。在此结构中,照相机121’的拍摄方向与图2A所示出的照相机121拍摄方向基本上相反,并且可以具有与图2A所示出的照相机121不同的像素。此外,优选的是,照相机121产生较低像素的图像以使其能够拍摄用户的人脸图像并在视频电话期间将该图像发送至接收方,而照相机121’产生较高像素的图像以使其能够在许多情况下拍摄普通对象的图像而不立即发送该图像。照相机121和照相机121’可以按照可以旋转或弹出的方式而安装在终端机体上。
如图2B所示,闪光灯123和反光镜124附加地设置在照相机121’的附近。当使用照相机121’拍摄对象时,闪光灯123朝着对象投射光,并且当用户试图使用照相机121’来进行自拍时,反光镜124被用于使用户观察他/她的人脸。在终端体的后侧还可设置音频输出单元152’。在此实施方式中,音频输出单元152’可与图2A所示的音频输出单元152一起实现立体声功能,并且可以在该终端用于电话呼叫时在免提模式(speakerphone mode)下使用该音频输出单元。
除了用于电话呼叫的天线以外,还可以将广播信号接收天线附加地设置到终端机体的侧面。构成图1所示的广播接收模块111的一部分的天线可以按照可从终端机体收回天线的方式设置到终端机体。此外,在终端机体中设置有用于向手持终端100提供电力的电源190,并且该电源可以包括在终端机体中,或者可以可拆卸地连接至终端机体。图2B还例示了用于感应附加地附接到终端100的后壳体102的触摸的触摸板135。此外,触摸板135可以与显示单元151一样为光透射型。在这种情况下,当显示单元151从两个侧面输出可视信息时,可以经由触摸板135来识别该可视信息。
同时,可以由触摸板135控制从显示单元151的两个侧面输出的信息。另外,还可以将显示器附装到触摸板135上,从而也能够将触摸屏设置到后壳体102。此外,通过与前壳体101的显示单元151连接的方式来操作触摸板135。并且触摸板135可以与显示单元151平行地设置在显示单元151的后面。触摸板135的尺寸小于或等于显示单元151的尺寸。
参照图3A和图3B来解释显示单元151与触摸板135之间的互操作。具体而言,图3A和图3B是手持终端100的正视图,用于说明根据本发明的一个实施方式的移动终端100的操作状态。显示单元151可以用字符、数字、符号、图形、或图标的方式来显示各种可视信息。为了输入信息,可以按照键盘形式的预定排列来显示字符、数字、符号、图形及图标中的至少一项。同时,该键盘形式可以称作“软键”键盘。
此外,图3A示出了通过终端机体的正面来输入施加到软键的触摸。显示单元151可以是单个区域或者可以被划分成多个区域。在后一种情况下,显示单元151被构造成使得多个区域彼此可相互操作。例如,如图3A所示,在显示单元151的上部和下部分别显示输出区域口151a和输入区域151b。输入区域151b显示代表用于输入号码(诸如电话号码)的数字的软键151c。因此,当触摸了软键151c时,在输出区域151a上显示与所触摸的软键相对应的数字。此外,当用户操作了第一操作单元131,则试图进行对与显示在输出区域151a上的电话号码相对应的呼叫连接。
接着,图3B示出了通过终端机体的后面来输入施加到软键的触摸的移动终端100的图。图3B还示出了终端机体的横向图,而图3A示出了终端机体纵向图。此外,显示单元151构造为根据终端机体所处的方向来转换输出图像。此外,图3B示出了文本输入模式的手持终端的操作。如图所示,显示单元151包括具有输出区域135a和输入区域135b的触摸板显示器135。在输入区域135b上还可以设置表示字符、符号和数字中的至少一项的多个软键135c。此外,在此实施方式中,软键135c可以按照qwerty按键的形式来设置。
当通过触摸板135来触摸软键135c时,与所触摸的软键135c相对应的字符、数字和符号被显示在输出区域135a。与经由显示单元151的触摸输入相比,经由触摸板135的触摸输入能够防止在触摸时软键135c被用户的手指所覆盖。此外,当显示单元151和触摸板135透明时,用户能够看到位于终端机体之后的他/她的手指,并因此可以通过触摸显示的软键135c的背侧或表面来选择项目。
另外,用户例如可以通过使用图标上的光标或指针来在显示单元151或触摸板135上滚动信息来移动显示在显示单元151上的对象。此外,当用户在显示单元151或触摸板135上移动他/她的手指时,控制器180可以在显示单元151上可视地显示用户手指的移动路径。这在对显示在显示器151上的图像进行编辑时有用。此外,当在预定时间段内同时触摸显示单元151(触摸屏)和触摸板135时,可以执行终端的一个特定功能。例如,用户可以使用拇指和食指夹住终端机体。该特定功能例如可包括对显示单元151或触摸板135进行激活或关闭。
下面,参照图4来详细地解释参照图1说明的接近传感器141。即,图4是用于解释接近传感器141的接近深度的概念图。如图4所示,当诸如用户手指的指针接近触摸屏时,位于触摸屏内部或附近的接近传感器141感应到接近并输出接近信号。此外,接近传感器141可以构造为根据接近触摸屏的指针与触摸屏之间的距离(以下称作“接近深度”)来输出接近信号。
同样,将当指针接近触摸屏时输出接近信号的距离称作检测距离。可以利用具有不同检测距离的多个接近传感器并对从接近传感器输出的各个接近信号进行比较来确定接近深度。图4示出了设置有能感应三个接近深度的接近传感器的触摸屏的截面。当然,可以在触摸屏上设置能感应小于或大于三个接近深度的接近传感器。
因此,如图4所示,当指针(在此示例中为用户手指)与触摸屏完全接触时(D0),控制器180将该动作识别为接触触摸。当指针距触摸屏的距离小于距离D1时,控制器180将该动作识别为第一接近深度的接近触摸。类似地,当指针距触摸屏的距离在距离D1与距离D2之间时,控制器180将该动作识别为第二接近深度的接近触摸。当指针距触摸屏的距离在距离D2与距离D3之间时,控制器180将该动作识别为第三接近深度的接近触摸。此外,当指针距触摸屏的距离大于距离D3时,控制器180将该动作识别为取消接近触摸。
因此,控制器180能够根据指针相对于触摸屏的接近距离和接近位置,来将接近触摸识别为各种输入信号,并根据输入信号来执行各种操作。
接着,图5A和图5B是用于说明根据本发明的一个实施方式的接近触摸识别区域和触觉效果生成区域的图。具体而言,为了简洁和便于说明,图5A用圆形来表示诸如图标、菜单项等的对象。
如图5A(a)所示,可将显示单元151上的用于显示对象的区域划分成处于中央部分的第一区域A和包围第一区域A的第二区域B。另外,第一区域A和第二区域B可以设置为生成在强度或模式上彼此不同的触觉效果。例如,第一区域和第二区域可以设置为按照以下方式生成2级振动,即,如果触摸了第二区域B则输出第一振动,而如果触摸了第一区域A则输出强于第一振动的第二振动。同时,触觉区域可以不同于接近触摸识别区域。具体而言,可以将触觉区域设置为比接近触摸识别区域更窄或更宽。例如,在图5A(a)中,可以将接近触摸识别区域设置为包括第一区域A和第二区域B两者,而可以将触觉区域设置为仅包括第一区域A。
此外,如图5A(b)所示,可以将其中显示有对象的区域划分成三个区域A、B、C。另选的是,如图5A(c)所示,可以将其中显示有对象的区域划分成N个区域(N>3)。可以将各个划分的区域设置为生成具有不同强度或模式的触觉效果。此外,如上面所讨论的,可以将具有单个对象的区域划分成至少三个区域时,并且其中,将触觉区域和接近触摸识别区域设置为彼此不同。
接着,图5B例示了将显示器151的接近触摸识别区域的大小设置为根据接近深度而变化。具体来说是,参照图5B(a),接近触摸识别区域可被设置为根据针对显示器151的接近深度而按照C→B→A减小,并设置为根据显示器151的接近深度而按照C→B→A增加。此外,可以将触觉区域设置为具有预定大小(如图4B(b)所示的区域“H”),而与显示器151的接近深度无关。同时,当对用于设置触觉区域或接近触摸识别区域的、显示有对象的区域进行划分时,可以使用下面各种方案:水平/垂直划分、径向划分及其组合,以及如图5A所示的同心圆类型的划分。
下面,图6是例示了使用根据本发明的一个实施方式的利用预览图像的缩微版本来控制移动终端的预览图像的方法的流程图。如图6所示,当用户通过按键操作或触摸输出进入照相机模式时(S10),控制器180在主显示区域上将照相机通过图像传感器检测到的照相机图像(例如,全景图)显示为预览图像,并且还在辅显示区域上显示全景图的缩微版本(S11)。所显示的全景图可以是为用户示出他或她打算拍摄的图像的预览或者用户之前拍摄的图像的预览图像。该图像还可以是从互联网下载的图片、存储在终端的存储器中的图片等。图像可以为视频的至少一部分。例如,图像为从视频中复制的或视频临时停顿的静态图像。可以用视频来取代图像。
在此状态下,当用户在终端上执行照相机缩放操作时(S12为“是”),控制器180对预览图像进行放大或缩小,并在主显示区域上显示缩放后的图像,还在辅显示区域上显示当前的缩放位置部分或缩放指南(S13)。同样,控制器180以在屏显示(OSD)的方式显示与缩放后的图像互操作的各种设置/执行图标(例如,(垂直/水平)滚动条等)(S14)。
然后,在预览状态下,控制器180根据包括接近触摸或接触触摸操作的一定时间的触摸操作来对显示在主显示区域上的缩放图像、在辅显示区域上的缩微图像以及图标的显示进行控制(S15)。更具体而言,控制器180显示预览图像、图像的缩微版本(后面称作“缩微图像”)、滚动条、各种设置/执行图标等。因此,在一个实施方式中,控制器180在经过了特定时间之后去除特定项目。这些特征将在后面进行更具体的讨论。
接着,图7包括例示了根据本发明的一个实施方式的当用户对所显示的全景图进行缩放操作时对移动终端的照相机图像进行控制的显示屏的概图。如图7的上部的显示屏所示,当用户进入终端的照相机模式时,控制器180在整个显示区域上显示由照相机121的图像传感器拍摄的预览的全景图,还在特定的区域(即,在此示例中,在全景图的右上部)以重叠的方式显示缩微图像40。如图所示,缩微图像40是全景图的缩微版本。另外,控制器可以在与全景图分离的显示区域中显示缩微图像40,而不是以重叠的方式显示缩微图像40。
然后,如图7的下部所示,用户执行缩放操作(在此示例中,用户对全景图进行放大)。如图所示,控制器180在与全景图的当前缩放部分对应的缩微图像40上显示缩放指南41。因此,用户可以利用缩微图像40上的缩放指南41来保持相对全景图的定位。更具体地说,当用户执行缩放操作而不显示缩微图像40时,因为他或她只能查看缩放部分,所以用户很快就失去了对全景图的感觉。为了查看全景图,用户必须往回进行缩放,这很麻烦,或者必须以预期的目标检查移动终端以获得整个图像的定位。
但是,根据本发明的实施方式,用户可以有利地查看缩微图像40和缩放指南41以保持全景图的定位。然后,用户可以通过查看缩微图像40和缩放指南41,在感觉满意时拍摄缩放后的图像。例如,在图7的实施方式中,用户对总共7个人中的、用户打算拍摄的5个特定的人进行了放大以拍摄图像。因此,一旦用户执行了缩放操作,则用可以对预期的目标进行拍摄。
接着,图8包括例示了控制器180将滚动条42与缩微图像40一起显示的显示屏的概图。在此示例中,滚动条42包括以OSD形式显示的水平条和垂直条。然后用户可以利用滚动条42滚动全景图,控制器180将根据滚动操作来调整缩放指南41。此外,用户可以利用方向键来滚动查看的图像而不是显示滚动条42。
接着,图9包括根据本发明的一个实施方式的在经过了特定量的时间之后,控制图标等从显示器上消失的显示屏的概图。如图9的上部所示,控制器180显示由照相机121的图像传感器拍摄的全景图、与当前缩放位置对应的缩微图像40和缩放指南41、滚动条42、和用户能查看或选择以协助拍摄最终图像的各种设置/执行图标43。
然后,如图9的下部所示,当在预览状态下经过特定时间之后,控制器180消除所显示的缩微图像40、滚动条42和各种设置/执行图标53中的全部或部分。也就是说,项目从屏幕上消失。图9的左下部例示了经过特定时间之后全部项目消失的情况,而图9的右下部例示了部分项目消失的情况。请注意,用参考标号44来标识缩放图像的中央位置。用户还可以设置出现该特性必须经过的时间量、以及设置在经过了设定时间之后消失的项目。
接着,图10是例示了根据本发明的一个实施方式的控制器180基于用户触摸屏幕的特定部分来在显示器上显示各种项目的显示屏的概图。例如,图10的上部例示了与图9的左下部示出的情况类似的情况(即,在经过了特定时间量之后,不再显示或者消除缩微图像40、滚动条42和各种设置/执行图标43)。如图10所示,当用户触摸屏幕的特定部分时,控制器180可以重新显示已经消失的全部项目或者仅显示在用户触摸的相同位置或类似位置中显示的显示项目。
例如,图10的左下部例示了控制器180重新显示已经消失的全部项目,而右下部例示了仅重新显示缩微图像40和缩放指南41。即,用户触摸了屏幕上的、之前显示了缩微图像40的部分,因此,控制器180仅显示与用户所触摸的位置相对应的项目。
接着,图11是根据本发明的另一实施方式的控制缩放图像的方法的流程图。应注意,步骤S20-S24与图6中的步骤S10-S14类似。具体而言,当用户通过按键操作或触摸输入而进入照相机模式时(S20),控制器180在主显示区域上将照相机通过图像传感器检测的照相机图像(例如,全景图)显示为预览图像,并且还在辅显示区域中显示全景图的缩微版本(S21)。所显示的全景图可以是向用户示出他或她打算拍摄的图像的预览、或者用户之前拍摄的图像的预览图像。该图像还可以是从互联网下载的图片、存储在终端的存储器中的图片等。
在此状态下,当用户在终端上执行照相机缩放操作时(S22中为“是”),控制器180对预览图像进行放大或缩小,并在主显示区域上显示缩放后的图像,还在辅显示区域上显示当前的缩放位置部分(S23)。此外,控制器180还在缩放后的图像上例如以OSD的形式显示垂直/水平滚动条,并显示各种设置/执行图标(S24)。然后,在预览状态下,当用户触摸缩微图像时,控制器180对缩放图像的中央位置进行移位以在屏幕上显示对应的触摸位置(S25)。如之前所讨论的,用户还可以使用滚动条来滚动或移动缩放图像。
具体而言,图12A至图12E包括例示了根据本发明的一个实施方式的、基于触摸动作来对缩放图进行移位的示例的显示屏的概图。例如,图12A例示了用户触摸缩微图像40的、由缩放指南41所定义的缩放区域以外的部分,并且控制器180将缩放图像进行移位以包括所触摸的部分。
也就是说,如图12A的中部所示,控制器180在主显示区域显示缩放图像(即,放大的图像),并且在辅显示区域上显示表示缩放图像40的当前缩放位置部分的缩放指南41。在这种状态下,如图12A的上部中的缩微图像40的分解图所示的,当用户触摸缩微图像40上的特定区域或特定部分时,控制器40将缩放图像的中央位置进行移位以在主显示区域上包括所触摸的部分(如图12A的下部所示)。图12A还例示了用户短暂地触摸缩微图像40(短触摸(short touch))。还可以使用其它预先设置的触摸动作,诸如长触摸(long touch)或双触摸(double touch)操作。因此,因为中央位置被移位,所以显示在主显示区域上的缩放图像以及辅显示区域中的缩放指南41向右侧移动。
接着,图12B包括例示了根据本发明的一个实施方式的、控制器180基于用户执行的触摸操作来保持缩放图像的移位位置或者将缩放图像返回至初始位置的显示屏的概图。具体而言,图12B例示了用户触摸缩微图像40达特定时间量,然后释放触摸。如图所示,缩放图像被移位以包括所触摸的位置,并且当用户释放触摸动作时,控制器180保持屏幕显示的当前状态,或者从当前状态返回至其初始状态。用户还可以对终端配置可选项以设置基于所释放的触摸动作会发生哪个动作。此外,如上面所讨论的,触摸动作包括用户不实际触摸屏幕,而是在屏幕上朝着期望的位置移动手指(或其它对象)的接近触摸动作。
接着,图12C包括例示了根据本发明的一个实施方式的通过触摸&拖动操作来对缩放图像进行移位的示例的显示屏的概图。除了在图12C中用触摸&拖动操作来取代触摸动作以外,图12C中的操作与图12A和12B中例示的操作类似。也就是说,当用户在缩微图像40的特定区域中进行触摸-并-拖动时,控制器180将缩放图像的中央位置移位到拖动点。
图12D包括例示了根据本发明的一个实施方式的、通过某种触摸动作来对缩放图像进行移位的示例的显示屏。如图12D所示,控制器180显示包括缩放指南41的缩微图像40。在此状态下,当用户通过环形触摸动作在缩微图像40上选择特定的人或多个人,控制器180对缩放图像的中央位置进行移位以使得包括在环形触摸以内的全部选择的人或对象能够显示在屏幕图像上,并适当地显示缩放指南41以包括新的缩放部分。因此,在此实施方式中,用户在缩放部分中对他们期望显示的主题或对象周围绘制了环形图案(或其它图案)。
接着,图12E包括例示了根据本发明的一个实施方式的、用户触摸滚动条42以将缩放图像移位的显示屏的概图。如图12E所示,用户触摸并拖动滚动条42,而控制器180将缩放图像的中央位置移位以与对滚动条42执行的触摸和拖动操作相符。如上面所讨论的,用户还可以操作方向键来取代触摸和拖动滚动条42。
接着,图13包括例示了根据本发明的一个实施方式的、拍摄缩放图像及全景图的方法的显示屏的概图。具体而言,如图13所示,当执行照相机缩放功能时,控制器180将缩放图像显示为主显示区域的预览图像,并且还在辅显示区域中显示表示缩微图像40上的当前缩放位置部分的缩放指南。然后,在此状态下,当用户通过按压、触摸、选择等方式对图像拍摄键进行操作以拍摄图像时,控制器180存储当前的缩放图像或者同时存储当前缩放图像和显示在缩微图像40中的全景图。
此外,当选择了图像拍摄键时,用户可以选择各种可选项来确定将执行哪个存储/图像拍摄的可选项。另选的是,可以设置两个分立的按钮来拍摄缩放图像或者拍摄缩放图像和全景图两者。同样,也可以仅拍摄全景图。此外,为了同时拍摄并存储当前缩放的图像和全景图,可以按不同的间隔来存储全景图和缩放图像。例如,可以在得到全景图后以每秒1帧的方式来进行存储,而在得到缩放图像后以每秒30帧的方式来进行存储。另选的是,为了同时存储当前缩放图像和全景图,例如可以首先只得到全景图,然后可以基于所存储的缩放坐标通过内部图像处理操作来得到缩放图像。
因此,根据此实施方式,用户后来可以没有延迟地查看缩放图像。具体而言,当用户通常查看图像并期望查看缩放部分时,用户必须按压缩放键以放大图像,在显示缩放部分之前,通常存在延迟。但是,根据此实施方式,因为已经保存了缩放图像,所以用户能够快速地查看缩放图像。
接着,图14是例示了使用根据本发明的一个实施方式的利用人脸识别处理来控制移动终端的照相机图像的方法的流程图。如图14所示,当用户进入照相机模式时(S30),控制器180在主显示区域上将通过图像传感器拍摄的全景图显示为预览图像,并且还在辅显示区域中以缩微图像40的形式显示全景图(S31)。
在此状态下,控制器180检查是否已经设置了人脸识别特征(S32)。如果用户利用特定的菜单选项已经设置了人脸识别特征,例如(S32中的“是”),则控制器180在主显示区域的特定位置显示与人脸识别有关的布局信息(S33)。优选的是,该布局信息包括布局图/略图或者标识照相机传感器所识别的人脸的布局图标。
此外,当用户在此状态下执行缩放操作时,控制器180在主显示区域上显示缩放图像,在缩微图像40上显示表示当前缩放位置部分的缩放指南41,并且显示通知信息,该通知信息表示由于照相机的缩放操作而使得部分人脸识别区域位于屏幕外部(S34)。另外,当设置了人脸识别时,控制器180可以不显示缩微图像40和滚动条42。然后,当用户触摸或者选择通知信息时,控制器180将缩放图像的中央位置移位,以使触摸部分可以显示在主显示区域(S35)。
此外,优选为在人脸识别区域所处的方向上将通知信息显示为指示符、图标、简单图像、人脸识别图像、简单文本信息或者标识信息、布局图/略图等。此外,可以显示与所识别的人脸区域的数量相对应数量的文本信息和箭头、图标等。将不再具体地讨论根据本发明的不同实施方式的人脸识别特征。
例如,图15包括例示了根据本发明的一个实施方式的在预览图像中被识别的多个人脸的显示屏的概图。参照图15,控制器180根据用户菜单的设置针对全预览图像来执行人脸识别,并且在此示例中,控制器180识别了屏幕中的7个人脸。因此,控制器180在屏幕上显示了7个人脸识别区域45。如图所示,在此示例中,区域45显示为围绕预览图像中的人的人脸的正方形轮廓。
控制器180还以布局图46(例如,表形式、网格形式等)或者布局图标的方式显示人脸识别的数量。布局图46还可以通过与缩微图像40和滚动条42互操作的方式来进行显示。从而用户可以快速地查看已经识别出了多少人脸以及预览图像中有多少人。因此,如果用户知道他或她期望图片中包括的人的数量是10个人,则用户可以基于表示已经识别出了仅7个人的布局图46来快速地确定他或她需要进行缩小以拍摄另外的人。
然后,当用户执行缩放功能时,控制器180在主显示区域上显示缩放图像,而在辅显示区域上显示表示缩微图像40上当前缩放位置部分的缩放指南41。此外,如图15的下部分所示,因为用户对预览图像进行了放大,所以控制器180目前仅在缩放图像中识别出了5个人脸。因此,布局图46被更新为反映仅识别了5个人脸。
此外,控制器180在例如布局图46中有利地将目前不包括的两个人脸显示为虚线,以使用户能快速地判断他或她的缩放操作已经将两个人脸移出到预览图像之外。控制器180还显示通知信息51,该通知信息表示当前存在没有被识别的极左侧和极右侧的人脸。因此,用户能够查看通信信息51,并知道在缩放图像的左侧和右侧存在人脸。此外,在遗漏的人脸识别区域所处的方向上将通知信息51显示为指示符、图标、简单图像、人脸识别图像、简单文本信息或者识别信息、布局图等。
接着,图16A至图16I包括例示了根据本发明的一个实施方式的、显示当利用人脸识别处理时的各种通知信息的示例的显示屏的概图。例如,图16A例示了显示指示有两个人脸在显示区域以外的指示符50的示例(在此示例中,例如,在图15的上部示出的全景图中,有两个人处于极左侧和极右侧)。当查看图像时,指示符50显示在图像的左侧,但是也可以显示在图像的极左侧和极右侧上以向用户通知未被识别的人脸的位置。
因此,随着用户执行缩放操作,指示符50也将基于缩放图像中示出的所识别的人脸的数量而变化。图16B例示了显示为指示在当前缩放屏幕图像的极左侧和极右侧存在人脸识别区域的指示符51。用户还可以从菜单中选择指示符或图标的位置和形状。
图16C例示了对根据照相机缩放操作表示在缩放屏幕的左侧部分还存在人脸识别区域的简单图像52进行显示的示例(同时也示出了识别区域45)。并且图16D例示了显示识别图像53的示例,该识别图像表示在当前缩放图像的左侧部分和右侧部分还存在人脸识别区域。图16C中,简单图像可以是用户预先选择的任何图像,而在图16D中,图像53是遗漏的人脸的实际图像。还可以将表示人脸的替身(avatar)或其它图像用作识别图像53。
同样,图16E例示了显示文本信息54的示例,该文本信息54表示已经识别出了多少个人脸,以及随着用户执行缩放操作,在该缩放图像以外的其它区域还存在人脸识别区域。具体而言,随着用户缩放操作,控制器180显示文本54,该文本54表示例如在在当前缩放屏幕中只显示总共7个人脸中的第2至第6个人脸,而在当前缩放屏幕中未显示第1至第7个人脸。
另外,图16F例示了对人脸识别图像和识别信息55的显示,该人脸识别图像和识别信息55表示在当前缩放图像之外存在所识别的人脸。此外,在一个实施方式中,控制器180可以将缩放图像以外的人脸与终端的存储器中存储的电话簿信息进行比较。例如,电话簿信息可以包括人的名称、电话号码和图像。控制器180可以将识别的人脸与电话簿中包括的人脸(图像)进行比较,然后显示当前缩放图像以外的人脸的相应的名称或缩写。同时,可以将以上讨论的有关向用户通知所识别的人脸在缩放图像以外的任何特征进行组合。
此外,图16G例示了对布局图46的显示,该布局图46表示有多少所识别的人脸当前被显示在缩放图像中以及缩放图像之外。具体而言,如图16G的上部所示,控制器显示布局图46-1,该布局图46-1表示只有全部7个人脸中的5个中间人脸显示在当前缩放屏幕上。同时,图16G的中部例示了当用户放大图片时控制器180对布局图46-2进行的显示,该布局图46-2表示只有极左侧的人脸显示在当前缩放图像中。
类似地,如图16G的下部所示,控制器180显示布局图46-3,该布局图46-3表示在当前放大图像上显示了共计16个人脸,并且显示了各个用户相对彼此的当前位置。也就是说,根据每个人的识别人脸的位置以步进的方式来设置布局图46-3。布局图也可以例如位于缩放屏幕的中下端部分,并且用户可以选择布局图的形状和尺寸。
接着,图16H例示了显示包括数量和箭头的指示符56的示例。该指示符56表示所识别的人脸没有显示在当前缩放图像中的数量和位置。在图16H的示例中,指示符56表示靠近左侧有两个人脸没有显示在当前缩放图像中。也就是说,在用户执行缩放操作时,控制器180对全景图执行人脸识别处理,对显示在当前缩放屏幕上的人脸识别区域45的数量进行识别,并且显示识别的人脸的数量和位置,使得用户能够容易地检查在缩放状态下显示的人的数量和位置。
此外,图16I例示了显示包括数量和箭头的标识57的示例,该标识57表示根据照相机缩放执行结果,在缩放屏幕图像的外部区域存在另外的人脸识别区域。例如,当用户执行缩放操作时,控制器180对全景图执行人脸识别处理,并显示数字“1/7”以及水平可移动箭头,该数字“1/7”表示当前显示的人脸识别区域45是总共7个人脸识别区域中的第1人脸识别区域,以及用户可以选择该水平可移动箭头来滚动到不同的识别人脸。因此,参照图16A至图16I,当以特定的倍率来执行缩放操作时,控制器180显示通知信息,该通知信息表示人脸识别区域45与缩放的图像一起处于屏幕显示区域的外侧。
下面,将介绍当用户触摸通知信息时,将缩放屏幕的中央位置44移位以使对应的人脸识别区域出现的操作。此外,可以按照特定的间隔预先设定移位的程度(缩放图像位移量),并且例如,可以将移位程度设置为人脸识别区域之间的间隔。
更具体地说,图17包括例示了基于用户触摸表示所识别的人脸存在于当前缩放图像以外的指示符51而改变中央位置44的显示屏的概图。也就是说,当用户触摸指示符51中的一个时,控制器180将缩放图像的中央位置44移位,该移位操作包括调整缩放倍率以显示人脸识别区域,(即,处于图17所示的示例中的极右侧的人)。另外,如图17的下部所示,在用户将当前缩放图像移位之后,控制器180显示两个图标51-1,表示根据对缩放的图像的中央位置44进行移位的结果,有两个人脸识别区域55处于极左侧部分。
接着,图18包括例示了当用户选择指示符57时,将缩放图像的中央位置移位以使得下一个紧邻的识别人脸显示在缩放图像中的示例的显示屏的概图。也就是说,当用户按照适当的倍率执行了缩放操作时,控制器180对全景图执行人脸识别,并在当前缩放图中显示人脸识别区域45,同时还显示指示符57,在此示例中指示符“1/7”表示当前显示的人脸识别区域是7个人脸识别区域中的第1人脸识别区域。控制器180还显示用户可以触摸用来滚动至不同识别人脸的箭头指示符。因此,如图18所示,当用户触摸箭头时,控制器180根据箭头的方向来将缩放图像的中央位置44移位以使下一个人脸识别区域出现(例如,在此示例中为了显示第2个识别的人脸)。
此外,图19包括例示了根据本发明的一个实施方式当对指示符51进行接近触摸时,将缩放图像的中央位置移位以使得对应的人脸识别区域出现的示例的显示屏的概图。如图所示,除了用接近触摸动作来取代实际触摸指示符51以外,图19的操作与图17的操作类似。因此,当用户对指示符51之一进行接近触摸达特定时间段时,控制器180将缩放图像的中央部分44移位,该移位操作包括调整缩放倍率以使下一个人脸识别区域出现。然后,当用户在接近距离以外移动其手指或其它指向对象(pointing object)时,控制器180将缩放图像返回至以前的状态。或者,当用户移出到接近距离以外时,控制器180可以保持当前的状态。
接着,图20包括例示了根据本发明的一个实施方式通过执行触摸-并-拖动操作来改变或移位缩放图像的中央位置的显示屏的概图。具体而言,控制器180在预览状态下对全景图执行人脸识别,然后,显示指示符51,该指示符51表示在缩放图像的极左侧和极右侧存在人脸识别区域45。因此,当用户触摸-并-拖动指示符51(如图20的上部所示)时,控制器180将缩放图像的中央位置44移位以使得人脸识别区域45位于拖动点。控制器180还在屏幕显示区域的极右侧显示包括6个图标(例如,箭头)的指示符51-2以进行如下指示:虽然没有显示,但是在右方向上还存在6个人。
图21包括例示了根据本发明的一个实施方式利用特定的触摸动作来对缩放图像进行移位的示例的显示屏的概图。在此实施方式中,当按照特定的形状(例如,环形或多边形)选择了表示一个或多个人脸识别区域的一个或多个通知信息(人脸识别区域图标)时,缩放屏幕图像的中央位置被移位以显示全部所选的部分。更具体地说,图21的上部例示了控制器180在缩放屏幕的极右侧显示6个图标51-2以通知用户在右方向上还有6个人脸(虽然他们当前并没有被示出)。
在此状态下,当各用户使用环形触摸动作选择4个图标时,控制器180将中央位置移位,同时适当地调整缩放倍率以使与该4个图标对应的4个人脸识别区域显示在屏幕上(如图21的下部所示)。其结果是,由触摸动作而选择的4个人脸显示在屏幕上,并且控制器180显示图标51-1,该图标51-1表示在屏幕显示区域的极左侧还有2个人脸识别区域,并显示图标51,该图标51表示在屏幕显示区域的极右侧还有1个人脸识别区域。这些操作也同样可以应用于当缩微图像、滚动条、布局图部分被触摸(实际触摸或者接近触摸)或者被触摸-并-拖动的情况。
接着,图22包括例示了根据本发明的一个实施方式的通过多次触摸布局图来将中央位置移位到人脸识别区域的显示屏的概图。具体而言,在预览状态下在执行了特定的缩放倍率之后,控制器180对全景图执行人脸识别。在人脸识别处理之后,控制器180显示布局图46-1以及图标51,该布局图46-1表示显示了总共7个人脸中的5个人脸,并且图标51表示在当前缩放屏幕或屏幕显示区域的极左侧和极右侧还有人脸识别区域。
在此状态下,当各用户多次触摸布局图46-1时,控制器180将缩放屏幕的中央位置移位,同时适当地调整缩放倍率以使布局图上部内多次触摸的部分(例如,第1人脸和第4人脸)全都显示在屏幕上。其结果是,在屏幕出现4个人脸,而在当前屏幕显示区域的极右侧部分显示了表示还有3个人脸识别区域的图标51-3。
接着,图23包括例示了根据本发明的一个实施方式的通过对布局图施加触摸来在将中央位置移位到人脸识别区域之后执行图像拍摄的示例的显示屏的概图。参照图23,当用户在预览状态下长触摸布局图46-1的特定区域(或者在施加了触摸之后按压图像拍摄键)时,控制器180将缩放屏幕的中央位置移位,同时适当地调整缩放倍率以使通过触摸而选择的第一人脸显示在屏幕上。其结果是,将所选择的单个人脸显示在屏幕上,并且控制器显示图标51-2,该图标表示在当前屏幕显示区域的极右侧部分还有6个人脸识别区域。
同时,一旦中央位置被移位到用户选择的人脸识别区域,控制器180控制照相机121在当前缩放状态下拍摄图像(第一人脸),并将拍摄的图像保存在存储器160中。另外,当图像拍摄操作结束时,当前状态自动返回至预览状态。在本实施方式中,有差别地显示了屏幕显示和图像拍摄操作,但是在实际执行该功能时,它们之间的时间差很短。也就是说,一旦用户选择了特定的人脸,则该特定人脸被放大,并且该图像被拍摄。另选的是,可以将所选择的人脸显示达预定的时间量(例如,几秒)以使得用户能够在快速地拍摄图像之前查看人脸。还可以使得用户完整地查看所选择的人脸并选择其它键来实际地拍摄所选择的人脸。
另外,图24包括例示了在通过触摸布局图来将缩放屏幕的图像的中央位置移位到对应的人脸识别区域之后执行图像拍摄的示例的显示屏的概图。也就是说,除了执行多次长触摸以外,图24例示的情况与图23例示的情况类似。即,在图23例示的情况下,从布局图中选择一个区域并且立即执行图像拍摄操作,而在图24所例示的情况下,控制器180基于多次长触摸操作来将对应的人脸识别区域依次移位以执行图像拍摄。
更具体地说,当用户在布局图46-1上多次长触摸特定区域(例如,第1至第4区域)或者在之对缩放屏幕图像进行了多次触摸操作之后按压图像拍摄键时,控制器180将中央位置移位以使通过多次长触摸而选择的第1人脸识别区域显示在屏幕上,拍摄所选择的图像,将中央位置移位到第4人脸识别区域,并拍摄所选择的图像。此后,控制器180优选地自动返回至预览状态。
同样,通过参照图24以多次长触摸为例子介绍了连续图像拍摄操作,但是本发明不限于多次长触摸操作。例如,当用户在布局图上连续触摸或者接近触摸特定区域时,可以在将屏幕的中央位置移位当同时连续地拍摄相应的人脸区域。此外,可以根据触摸、接近触摸和触摸-并-拖动操作来提供声音效果或者振动反馈。
因此,在预览状态下对全景图执行人脸识别,在屏幕的特定区域显示表示人脸识别区域在屏幕以外的通知信息,并且触摸该通知信息以移动屏幕的中央位置或者执行图像拍摄操作。另外,可以对屏幕上显示的人脸识别区域执行各种应用。例如,对于一个人脸识别区域来说,可以将各种应用(诸如呼叫(例如,视频呼叫)、消息发送(例如,广播发送和MMS发送)、主页或博客互操作、照片图像搜索、视频搜索、互联网搜索、电话簿存储等)应用到相应的人脸识别区域。同时,当存在两个人脸识别区域时,可以将包括多方视频呼叫通信的多方呼叫通信、包括广播MMS发送的广播发送、主页或博客互操作、照片图像搜索、视频搜索、互联网搜索、电话簿存储等应用到相应的人脸识别区域。
接着,图25是例示了根据本发明的一个实施方式针对人脸识别区域执行各种应用的方法的流程图。如图25所示,控制器180在已经执行了特定缩放倍率的预览状态下对全景图执行人脸识别,并显示人脸识别区域(S40和S41)。然后,在用户接近触摸了其中一个人脸识别区域之后,在经过了特定时间之后(S42和S43),控制器180在屏幕上显示与所选择的人脸识别区域有关的应用列表(S44)。当只有1个人脸识别区域显示在屏幕上和当有2个人脸识别区域显示在屏幕上时可以不同地对该应用列表进行配置。当用户从显示列表中选择特定的应用时,控制器180执行相应的操作(S45)。
图26包括例示了根据本发明的一个实施方式的在图25中执行的方法的显示屏的概图。参照图26,控制器180对全景图执行人脸识别,然后,在屏幕上显示人脸识别区域。当用户对人脸识别区域中的从左边开始第5个人脸识别区域进行接近触摸后经过特定时间时,控制器180显示针对屏幕上的进行了接近触摸当人脸识别区域的应用列表57,并在相应的应用列表57上显示所触摸的人的名称或缩写(例如,“Hong Kil-dong”或“H.K.D”)。此外,当只有一个人脸识别区域和当有两个人脸识别区域时优选地将应用列表57配置为不同。
在该状态下,当用户按照如上述所述的相同方式来选择不同的人脸时,控制器180在屏幕上显示针对所选择的人脸识别区域的应用列表,并在相应的应用列表上显示所触摸的人的名字。然后,当用户从所显示的应用列表57中选择特定的应用“7.在拍摄图像后进行电话簿存储”,则控制器180在屏幕上显示所选择的应用列表并执行相应的应用。
此外,以上说明书介绍了当用户对预览屏幕图像执行缩放操作时的屏幕显示,以及对所显示的缩放屏幕图像执行的部分图像拍摄操作。下面,将介绍在辅显示区域上显示拍摄图像的特定部分以检查是否已经适当地执行了图像拍摄的操作。
具体而言,图27是例示了根据本发明的一个实施方式的控制移动终端的拍摄图像的方法的流程图。如图27所示,当用户进入照相机模式时,控制器180拍摄对象(例如,一群人)的图像(S50),然后,将所拍摄的图像临时保存在存储器160中。控制器180还在作为主显示区域的显示单元151上显示图像(S52)。
此外,选择了所显示的图像的一部分(S53),然后在辅显示部分进行放大和显示(S54)。控制器180还根据用户输入来控制显示在主显示区域和辅显示区域上的图像(S55)。可以根据用户的设置或者根据设置为缺省的信息来选择图像的一部分。例如,用户选择的部分以及显示在主显示区域上的区域(例如,人脸识别区域)可以根据用户的设置通过实际触摸动作来选择。此外,主显示区域是显示总体信息的区域,并且通常比辅显示区域更大。
因此,用户可以检查放大图像中是否存在错误,并最终保存或删除所拍摄的图像。当检查了全部的识别区域或者存在由用户发起的中断时,控制器180显示是否要将当前临时保存的图像存储在存储器中、是否要发送当前临时保存的图像、或者是否要删除当前临时保存的图像的指南消息。当用户选择要存储图像时,控制器180将拍摄的图像保存在存储器160中,并且如果用户选择不存储图像,则将该临时保存的拍摄图像删除。
此外,以上的描述提到了将拍摄一群人的图像作为示例。但是,本发明的实施方式还涉及对多个对象来拍摄和操作图像,其中,可以根据用户的设置来对相应对象的特定部分进行识别或选择(例如,通过触摸动作)、放大、检查和存储。例如,如果将所拍摄的对象的一部分视为重要,则可以将该相应部分与临时拍摄的图像数据进行区分并显示。
接着,图28A至图28E是例示了根据本发明的一个实施方式的用于控制移动终端的拍摄图像的方法的各种实施例的显示屏的概图。如图28A所示,当从拍摄的图像中选择了特定的部分时,主显示区域被分成两个区域(例如,在此示例中为上部区域和下部区域)。此外,上部区域是指辅显示区域62,而下部区域是指主区域61。如图28A所示,控制器180在下部的主显示区域61显示临时存储的全景图,并在上部的辅显示区域62上显示用户从多个人脸识别区域71a至71c中选择的所选特定区域(例如,人脸识别区域71a)的放大的细节人脸。
图28B例示了类似的特征,所不同的是:水平地显示了两个显示区域。更具体地说,如图28B所示,终端被打开之后其主显示区域可旋转,并且被分成两个显示区域61和62。此外,在图27和28中,主显示区域61和辅显示区域62利用相同的尺寸进行显示。但是,两个显示区域的尺寸可以彼此不同。
此外,图28C与图28A所例示的情况类似,所不同的是:主显示区域61在显示器的上部而辅显示区域62在下部。此外,图28D例示了物理上分立的两个显示区域,即,显示单元151设置在终端的上折叠部和下折叠部两处。在这种情况下,将主显示区域63设置为上折叠部,而将辅显示区域64设置为下折叠部。因此,在主显示区域63上显示临时存储的全景图,而所选择的特定区域的细节人脸(例如,用户选择的人脸识别区域71a)被放大并显示在辅显示区域64上。
此外,图28E例示了形成在同一机体上的两个物理上分立的显示区域。具体而言,该实施方式对应于触摸式终端,其中,主显示区域65和辅显示区域66形成在主机体上。优选的是,在辅显示区域66的附近形成有诸如导航键的功能键。此外,辅显示区域66和主显示区域65优选为包括具有识别对其施加的接近触摸的能力的触摸屏显示器。因此,当用户从当前显示在主显示区域65上的图像中选择特定部分时,控制器180在辅显示区域66上对所选择的部分的人脸(即,人脸识别区域71a)进行放大并显示。
接着,图29A至图29E例示了包括两个物理上分立的显示器并且在该两个显示器上显示图像的终端。具体而言,图29A例示了与根据用户的选择或者根据缺省的顺序(例如,人脸识别区域71a、人脸识别区域71b、然后是人脸识别区域71c)而在辅显示区域66上被放大并显示的特定人脸识别区域相对应的图像。用户可以通过对显示在主显示区域65上的期望的人脸识别区域进行触摸或接近触摸来选择要在辅显示区域66上显示的不同图像。此外,控制器180根据辅显示区域的尺寸来放大用户选择的人脸识别区域的具体图像。也就是说,控制器180可以对具体图像的分辨率等进行调整以使得显示在主显示区域65上的图像的尺寸适合辅显示区域。
图29B例示了用户直接触摸或接近触摸显示在辅显示区域66上的图像,并且控制器180将被触摸的图像显示在主显示区域65上。此外,用户可以按压形成于辅显示区域66的附近的、如图29C所示的导航键(方向键等)来选择显示在图29A中的下一个人脸识别区域71b。也就是说,用户可以利用导航键来滚动各种人脸识别区域,其中各个所选择的人脸识别区域被显示在辅显示区域66中(如图29D所示)。然后,当用户诸如通过按压或触摸显示在辅显示区域66上的图像来输入选择信号时,控制器180在主显示区域65上放大并显示与人脸识别区域71b对应的人脸(如图29E所示)。此外,可以单独地选择包括用户所期望的人脸识别区域的区域,或者可以按照特定的时间间隔来连续显示期望的区域。
接着,图30A至图30C包括例示了用户执行接近触摸操作来选择期望的图像的一部分的显示屏的概图。具体而言,与图29所示用户通过直接触摸区域来选择显示在主显示区域65上的人脸识别区域的情况不同,图30B例示了用户手指靠近显示在主显示区域65上的人脸识别区域,并且控制器180识别接近距离并控制显示在辅显示区域66上的图像的尺寸。具体而言,当用户的手按照图4所示的d3→d2→d1的方式靠近主显示区域65时,控制器180从图30B和图30C逐渐地放大显示在的辅显示区域的图像。
接着,图31A至图31C包括例示了用户利用滚轮72来控制显示在主显示区域65上的图像的尺寸的显示屏的概图。滚轮72的内部还可以如图30那样包括辅显示区域66。更具体地说,如图31A所示,当用户对对象的图像进行拍摄时,控制器180在主显示区域65上显示拍摄的图像。然后,如图31B和31C所示,当用户旋转滚轮72时,控制器180根据旋转的方向对显示在主显示区域65上的拍摄图像进行按比例放大和缩小。
例如,当用户如图31B所示顺时针旋转滚轮72时,控制器180放大或增大显示在主显示区域65上的初始屏幕图像。此外,当用户如图31C所示逆时针旋转滚轮72时,控制器180缩小或减小显示在主显示区域65上的初始屏幕图像。此外,用户可以利用预定的按键操作来将增大或减小的图像移位到左侧或右侧,然后存储所显示的图像。
接着,图32A至图32E包括例示了当在同一机体中形成两个物理上分立的显示区域时,对显示在两个显示区域的图像进行控制的操作的显示屏的概图。具体而言,图32A例示了具有滚轮72的辅显示区域66。此外,主显示区域65包括人脸识别区域71a、71b、和71c。同时,在此实施方式中,主显示区域66和辅显示区域66均被配置为识别施加于其上的接近触摸。
如图32A所示,当用户对显示在主显示区域65上的具体的人脸识别区域71a进行触摸或接近触摸时,控制器180在辅显示区域55上显示相应人脸识别区域71a的人脸图像(如图32B所示)。另外,优选的是,控制器180将显示在主显示区域65上的人脸放大。该方法与图29B所例示的方法类似,可以在执行图29A所例示的方法之后执行图32B所例示的方法。
此外,当用户触摸主显示区域65的放大图像,并将其向左或向右拖动以检查不同人脸识别区域的图像(如图32C所示)时,控制器180显示位于对应方向上的下一个人脸识别区域的具体人脸图像。例如,当用户向右拖动放大图像时,则下一个人脸识别区域的人脸图像71b被放大且被显示在主显示区域65和辅显示区域66上(如图32D所示)。
在如图32E所示的不同方法中,用户可以利用滚轮72来选择期望的图像。具体而言,用户可以向左或向右旋转滚轮72以显示下一个人脸识别区域的详细人脸图像。例如,当将人脸识别区域71b的图像显示在主显示区域65和/或辅显示区域66上(如图32B所示)时,并且如果用户顺时针旋转滚轮72,则控制器180在主显示区域65上放大并显示之前的人脸识别区域71a的图像。
此外,人脸识别区域或对象的检测是指从照相机图像(照片或视频)中发现用户的人脸区域并用四边形、圆形等来显示该区域的技术。也可以执行类似的追踪。具体而言,人脸或对象的追踪是指根据用户的移动连续追踪、检测并显示用户的人脸区域的技术。也可以使用识别处理。具体而言,识别处理是指这样一种技术,即,从照相机图像(照片或视频)中检测人脸信息,将所检测的人脸信息与之前存储的人脸信息进行比较,并显示相应的人脸或者在不同的应用中使用该信息。
因此,本发明的实施方式提供了几点好处。例如,用户能够在存储图像之前容易地查看图像。因此,用户可以在存储图像之前检查人脸表情,例如,看看对象是否眨眼等。因此,用户不必执行另外的菜单选择并执行额另外的删除操作来删除不想要的图片。
此外,在以上说明中,将人脸识别区域作为了示例,但是本发明不限于此。也就是说,当用户通过触摸动作(例如,环形、三角形、四边形触摸动作)指定了想要放大和查看的部分或范围时,控制器180可以按如上所述相同的方式在主显示区域65上和/或辅显示区域66上显示所指定的部分,并根据用户操纵的方向键或滚轮的操作来显示图像。
如上所示,可以在预览状态下有效地显示和控制根据照相机的缩放操作而变化的图像,因此用户可以更方便且准确地执行图像拍摄操作。此外,可以从拍摄并临时存储的图像中选择所期望的部分并在不同区域上进行显示,从而可以有效地检查拍摄图像的状态,并且用户可以仅存储他想要的照片图像。
具体而言,在拍摄图像之前,用户界面使得用户能方便的调整布局,在拍摄图像之后,用户界面使得用户能容易地检查所拍摄的图像,由此使得用户能方便地执行图像拍摄操作。此外,由具有触摸功能的移动终端的照相机的图像传感器所拍摄的全景图(预览屏幕图像)被同时显示在辅显示区域以及主显示区域,通过应用一定时间的触摸(接近触摸或接触触摸)通过照相机的缩放来控制显示在主显示区域和辅显示区域上的图像的屏幕显示。
此外,显示在主显示区域和辅显示区域上的所拍摄的图像可协同操作。同样,辅显示区域被设置在主显示区域内或者是设置在移动终端以内或以外的显示区域。当辅显示区域设置在主显示区域以内时,以缩微图像的方式来实现辅显示区域,并且缩微图像还可以显示为在屏显示(OLD)。照相机缩放操作还包括数字缩放和光学缩放。
另外,移动终端针对显示在主显示区域的照相机图像来执行人脸识别处理,当人脸识别区域被缩放时,显示向用户通知该事件的通知信息。通知信息可以显示为指示符、图标、简单图像、识别图像、文本类型信息、布局图等。此外,可以显示依照人脸识别区域的数量的通知信息片段、文本信息和箭头或者图标。还可以根据对通知信息的触摸(接近触摸、基础触摸、触摸&拖动、多次触摸、长触摸等)来控制屏幕显示和图像拍摄操作。当触摸了拍摄图像的特殊区域时,对应区域的图像被显示在辅显示区域以使得用户能够容易地进行检查。在一个示例中,区域为人脸识别区域,并且优选的是,放大并显示相应区域的图像。
此外,可以控制屏幕显示,使得当触摸缩放屏幕图像(或者预览屏幕图像)的特定部分时,未显示的缩微图像、滚动条、各种设置/执行图标等全部重新显示在屏幕显示区域中。此外,当触摸缩放屏幕图像(或者预览屏幕图像)的特定部分时,只有所选择的部分显示在屏幕显示区。同样,当用户触摸(接触触摸、接近触摸或者触摸-并-拖动)缩微图像的特定区域时,对中央位置移位以使得所触摸的点显示在屏幕显示区。例如,当用户触摸缩微图像的特定区域时,控制器180将中央位置移位到所触摸的点,并进行显示。
然后,当释放了触摸时,控制器180保持当前状态或者从当前状态返回至其原始状态(预览状态)。如果用户触摸-并-拖动缩微图像的特定区域,则控制器180将中央位置移位到相应的拖动点。此外,当触摸了水平条的特定区域时,则对中央位置进行移位以使所触摸的点显示在屏幕显示区。也就是说,当用户触摸滚动条部分的特定部分时,控制器180按照与缩微图像相同的方式将中央位置移位。
此外,当拍摄图像时,可以将根据照相机缩放操作的缩放图像和全景图同时存储在存储器中,当执行触摸、接近触摸、触摸-并-拖动操作时,可以输出声音效果、振动反馈等。此外当用户触摸通知信息时,控制器180将缩放图像的中央位置移位到所触摸的人脸识别区域(可以包括适当调整缩放倍率)。例如,当用户触摸文本信息的箭头部分时,控制器180移位到与所触摸的部分对应的人脸识别区域。当用户的触摸靠近通知信息达特定时间时,控制器180将缩放图像的中央位置移位到靠近的人脸识别区域(可包括适当调整缩放倍率)。然后,当释放出触摸输入时,控制器180可以保持屏幕显示的当前状态或者返回至原始状态。
此外,当用户触摸-并-拖动通知信息时,控制器180将缩放图像的中央位置移位,使得人脸识别区域位于拖动位置(可包括适当调整缩放倍率)。如果按照特定形状(例如,环形)选择了通知信息,则控制器180将图像移位使得所选择的部位完全包括在屏幕中。
当用户触摸缩微图像、滚动条和布局图时,控制器将缩放图像的中央位置移位使得出现相应的人脸识别区域。当用户多次触摸通知信息或布局图时,控制器180将缩放图像的中央位置移位使得所触摸的人脸识别区域完全包括在屏幕中。当在长触摸或者短触摸布局图上的特定区域之后,按压图像拍摄键时,控制器180在移位到对应的人脸识别区域之后立即执行拍摄。当在对布局图上的特定区域进行接触触摸并且该触摸接触保持了延长的时间(即,执行所谓的“多次长触摸”或“多次长触摸”)之后,按压图像拍摄键时,控制器180依次到相应的人脸识别区域并执行图像拍摄。
当用户依次触摸布局图的特定区域时,控制器180可以执行图像拍摄,同时依次移位到对应的人脸识别区域,并在触摸、接近触摸和触摸-并-拖动的情况下,提供声音效果、振动反馈等。该触摸动作还可包括含有触摸并拖动移动指令、滚动指令、手势指令等的各种触摸动作。另外,还可以用声音指令和方向键输入指令来对图像进行移动、滚动、拍摄等操作。
根据上述实施方式的移动终端包括移动电话、智能电话、笔记本计算机、数字广播终端、PDA(Personal Digital Assistants:个人数字助理)、PMP(Portable Multimedia Player:便携式多媒体播放器)、导航设备等。
此外,可以在程序记录介质中将本发明的实施方式实现为计算机可读代码。计算机可读介质包括存储有计算机系统可读的数据的各种类型的记录设备。计算机可读介质例如包括ROM、RAM、CD-ROM、磁带、软盘、光数据存储设备等,计算机可读介质还包括以互联网形式的实现。计算机对应于终端的控制器180。
可以在不脱离其特征的情况下,以多种方式来实现示例性的实施方式,因此,应理解的是,除非特别指出,否则上述实施方式不限于以上说明的任何具体细节,而应在由所附权利要求所限定的范围内广泛地进行解释。因此,希望由所附权利要求涵盖落入权利要求范围或其等同物范围内的各种修改例和变型例。

Claims (44)

1.一种控制移动终端的方法,该方法包括以下步骤:
通过所述移动终端上的显示器在第一显示部分显示拍摄图像或预览图像;
通过所述显示器在第二显示部分显示相同的拍摄图像或预览图像;
通过所述移动终端上的控制器对在所述第一显示部分所显示的所述拍摄图像或预览图像进行缩放;以及
通过所述显示器在所述第二显示部分所显示的图像上显示用于标识所述第一显示部分所显示的图像的缩放部分的缩放指南。
2.根据权利要求1所述的方法,其中,所述缩放步骤对在所述第一显示部分所显示的图像进行缩放而不对在所述第二显示部分所显示的图像进行缩放。
3.根据权利要求1所述的方法,该方法还包括以下步骤:
在保持显示在所述第二显示部分的图像的全景图呈现的同时,通过所述控制器对显示在所述第二显示部分的图像的显示尺寸进行缩微。
4.根据权利要求3所述的方法,该方法还包括以下步骤:
通过所述显示器按照重叠的方式在所述第一显示部分所显示的图像上显示在所述第二显示部分所显示的缩微图像。
5.根据权利要求4所述的方法,该方法还包括以下步骤:
通过所述显示器按照半透明的方式在所述第一显示部分所显示的图像上显示重叠的缩微图像。
6.根据权利要求1所述的方法,该方法还包括以下步骤:
通过输入移动指令来移动在所述第一显示部分所显示的图像;以及
以与在所述第一显示部分中移动的图像相符的方式通过所述控制器将在所述第二显示部分显示的图像上所显示的所述缩放指南移位。
7.根据权利要求6所述的方法,其中,所述移动指令包括以下指令中的至少一种:触摸并拖动移动指令、滚动指令、手势指令、语音指令和方向键输入指令。
8.根据权利要求1所述的方法,其中,将在所述第二显示部分所显示的图像设置为在经过特定时间时自动消失,并且在触摸所述显示器的预定部分时重新出现。
9.根据权利要求1所述的方法,该方法还包括以下步骤:
接收触摸输入信号,所述触摸输入信号指示触摸了在所述第二显示部分所显示的图像的一部分;以及
以与所接收到的指示触摸了在所述第二显示部分所显示的图像的一部分的所述触摸输入信号相符的方式移动在所述第一显示部分所显示的图像。
10.根据权利要求9所述的方法,其中,所述移动步骤移动在所述第一显示部分所显示的图像,使得与对在所述第二显示部分所显示的图像的触摸位置相对应的、显示在所述第一显示部分的图像的位置位于所述第一显示部分的中央。
11.根据权利要求2所述的方法,该方法还包括以下步骤:
存储在所述第一显示部分所显示的缩放图像,并且存储在所述第二显示部分所显示的非缩放图像。
12.根据权利要求1所述的方法,该方法还包括以下步骤:
显示指示符,该指示符指示在所述第一显示部分所显示的所述缩放图像中遗漏了所述图像的全部已识别人脸中的多少个已识别人脸。
13.根据权利要求12所述的方法,其中,所述指示符显示在所述显示器的与遗漏的人脸所处的方向相对应的一侧。
14.根据权利要求12所述的方法,其中,所述指示符包括以下中的至少一种:布局图的图像、遗漏的人脸、图标、文本信息、数字和电话簿信息。
15.根据权利要求12所述的方法,该方法还包括以下步骤:
接收输入信号,所述输入信号指示选择了所显示的指示符;以及
通过所述控制器,将在所述第一显示部分所显示的图像移位以包括由所选择的指示符指示的遗漏的人脸。
16.根据权利要求1所述的方法,该方法还包括以下步骤:
通过所述控制器识别在所述第一显示部分所显示的图像中的至少第一人脸和第二人脸;
通过所述显示器在所述第二显示部分显示包括在所述至少第一人脸和第二人脸中的第一人脸;
接收移位信号,所述移位信号指示对所述第二显示部分中的所述第一人脸进行移位;并且
基于所接收到的移位信号,通过所述显示器在所述第二显示部分显示所述至少第一人脸和第二人脸中的第二人脸。
17.根据权利要求1所述的方法,其中,所述第一显示部分和所述第二显示部分位于所述移动终端上的同一显示器上或者位于所述移动终端上的分立显示器上。
18.一种控制移动终端的方法,该方法包括以下步骤:
通过所述移动终端上的显示器在第一显示部分显示拍摄图像或预览图像;
通过所述移动终端上的控制器来识别所述拍摄图像或预览图像中所包括的至少第一人脸和第二人脸;
通过所述显示器在所述第二显示部分显示所述至少第一人脸和第二人脸中所包括的第一人脸;
接收移位信号,所述移位信号指示对所述第二显示部分中的所述第一人脸进行移位;以及
基于所接收到的移位信号,通过所述显示器在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
19.根据权利要求18所述的方法,该方法还包括以下步骤:
接收选择信号,所述选择信号指示选择了在所述第二显示部分所显示的所述第一人脸;以及
通过所述显示器在所述第一显示部分显示所述第一人脸,并在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
20.根据权利要求18所述的方法,其中,在所述移动终端中所述第一显示部分和所述第二显示部分物理上彼此分立。
21.根据权利要求18所述的方法,其中,所接收到的移位信号对应于以下中的至少一个:1)触摸或接近触摸在所述第二显示部分上所显示的方向软键,2)语音激活命令,3)滚动所述第二显示部分上的滚轮,以及4)操纵所述移动终端上的实体键。
22.根据权利要求18所述的方法,其中,当接收到指示触摸或者接近触摸在所述第一显示部分所显示的所述第一人脸的触摸信号时,执行在所述第二显示部分对所述第一人脸的显示。
23.一种移动终端,该移动终端包括:
第一显示部分,其被配置为显示拍摄图像或者预览图像;
第二显示部分,其被配置为显示相同的拍摄图像或预览图像;以及
控制器,其被配置为对在所述第一显示部分所显示的所述拍摄图像或预览图像进行缩放,并且控制所述第二显示部分以在所述第二显示部分所显示的图像上显示用于标识所述第一显示部分所显示的图像的缩放部分的缩放指南。
24.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:对在所述第一显示部分所显示的图像进行缩放而不对在所述第二显示部分所显示的图像进行缩放。
25.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:在保持显示在所述第二显示部分的图像的全景图呈现的同时,对显示在所述第二显示部分的图像的显示尺寸进行缩微。
26.根据权利要求25所述的移动终端,其中,所述控制器还被配置为:控制所述第二显示部分以按照重叠的方式在所述第一显示部分所显示的图像上显示在所述第二显示部分所显示的缩微图像。
27.根据权利要求26所述的移动终端,其中,所述控制器还被配置为:控制所述第二显示部分以按照半透明的方式在所述第一显示部分所显示的图像上显示重叠的缩微图像。
28.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:通过输入移动指令来移动在所述第一显示部分所显示的图像,以及以与在所述第一显示部分中移动的图像相符的方式将在所述第二显示部分所显示的图像上所显示的所述缩放指南移位。
29.根据权利要求28所述的移动终端,其中,所述移动指令包括以下指令中的至少一种:触摸并拖动移动指令、滚动指令、手势指令、语音指令和方向键输入指令。
30.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:将在所述第二显示部分所显示的图像设置为在经过特定时间时自动消失,并且在触摸所述显示器的预定部分时重新出现。
31.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:接收触摸输入信号,所述触摸输入信号指示触摸了在所述第二显示部分所显示的图像的一部分;以及以与所接收到的指示触摸了在所述第二显示部分所显示的图像的一部分的所述触摸输入信号相符的方式移动在所述第一显示部分所显示的图像。
32.根据权利要求31所述的移动终端,其中,所述控制器还被配置为:移动在所述第一显示部分所显示的图像,使得与对在所述第二显示部分所显示的图像的触摸位置相对应的、显示在所述第一显示部分的图像的位置位于所述第一显示部分的中央。
33.根据权利要求24所述的移动终端,该移动终端还包括:
存储器,其被配置为存储在所述第一显示部分所显示的缩放图像,并且存储在所述第二显示部分所显示的非缩放图像。
34.根据权利要求23所述的移动终端,其中,所述控制器还被配置为显示指示符,该指示符指示与在所述第二显示部分所显示的图像相比在所述第一显示部分所显示的所述缩放图像中遗漏了多少个已识别人脸。
35.根据权利要求34所述的移动终端,其中,所述控制器还被配置为将所述指示符显示在所述第一显示部分的与遗漏的人脸所处的方向相对应的一侧。
36.根据权利要求34所述的移动终端,其中,所述指示符包括以下中的至少一种:布局图的图像、遗漏的人脸、图标、文本信息、数字和电话簿信息。
37.根据权利要求34所述的移动终端,其中,所述控制器还被配置为:接收输入信号,该输入信号指示选择了所显示的指示符;并且将在所述第一显示部分所显示的图像移位以包括由所选择的指示符指示的遗漏的人脸。
38.根据权利要求23所述的移动终端,其中,所述控制器还被配置为:识别在所述第一显示部分所显示的图像中的至少第一人脸和第二人脸;在所述第二显示部分显示包括在所述至少第一人脸和第二人脸中的第一人脸;接收移位信号,该移位信号指示对所述第二显示部分中的所述第一人脸进行移位;以及基于所接收到的移位信号,在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
39.根据权利要求23所述的移动终端,其中,所述第一显示部分和所述第二显示部分位于所述移动终端上的同一显示器上或者位于所述移动终端上的分立显示器上。
40.一种移动终端,该移动终端包括:
第一显示部分,其被配置为在第一显示部分显示拍摄图像或者预览图像;
控制器,其被配置为识别所述拍摄图像或预览图像中所包括的至少第一人脸和第二人脸;以及
第二显示部分,其被配置为显示在所述至少第一人脸和第二人脸中所包括的第一人脸;
其中,所述控制器还被配置为:接收移位信号,该移位信号指示对所述第二显示部分中的所述第一人脸进行移位;并且基于所接收到的移位信号,在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
41.根据权利要求40所述的移动终端,其中,所述控制器还被配置为:接收选择信号,该选择信号指示选择了在所述第二显示部分所显示的所述第一人脸;以及在所述第一显示部分显示所述第一人脸,并在所述第二显示部分显示所述至少第一人脸和第二人脸中的所述第二人脸。
42.根据权利要求40所述的移动终端,其中,在所述移动终端中所述第一显示部分和所述第二显示部分物理上彼此分立。
43.根据权利要求40所述的移动终端,其中,所接收的移位信号对应于以下中的至少一个:1)触摸或接近触摸显示在所述第二显示部分上的方向软键,2)语音激活命令,3)滚动所述第二显示部分上的滚轮,以及4)操纵所述移动终端上的实体键。
44.根据权利要求40所述的移动终端,其中,所述控制器还被配置为:当接收到指示触摸或者接近触摸在所述第一显示部分所显示的所述第一人脸的触摸信号时,在所述第二显示部分显示所述第一人脸。
CN201010001525.9A 2009-01-07 2010-01-06 移动终端及其照相机图像控制方法 Expired - Fee Related CN101794203B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR1020090001230A KR101622599B1 (ko) 2009-01-07 2009-01-07 이동 단말기 및 그의 줌 이미지 제어방법
KR10-2009-0001230 2009-01-07
KR10-2009-0024750 2009-03-24
KR1020090024750A KR101572887B1 (ko) 2009-03-24 2009-03-24 촬상 장치 및 촬상 방법

Publications (2)

Publication Number Publication Date
CN101794203A true CN101794203A (zh) 2010-08-04
CN101794203B CN101794203B (zh) 2014-10-22

Family

ID=41719040

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010001525.9A Expired - Fee Related CN101794203B (zh) 2009-01-07 2010-01-06 移动终端及其照相机图像控制方法

Country Status (3)

Country Link
US (1) US8478347B2 (zh)
EP (1) EP2207342B1 (zh)
CN (1) CN101794203B (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102981697A (zh) * 2011-07-08 2013-03-20 佳能株式会社 显示控制设备和显示控制方法
CN103197856A (zh) * 2011-10-21 2013-07-10 古野电气株式会社 图像显示装置、图像显示程序及图像显示方法
CN103535021A (zh) * 2011-02-24 2014-01-22 高通股份有限公司 自动对焦追踪
WO2014063508A1 (zh) * 2012-10-24 2014-05-01 惠州Tcl移动通信有限公司 一种基于移动终端的拍照删除方法及移动终端
CN104731494A (zh) * 2013-12-23 2015-06-24 中兴通讯股份有限公司 一种预览界面选定区域放大的方法和装置
CN104732218A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 图像显示的方法及装置
CN104903833A (zh) * 2012-09-24 2015-09-09 罗伯特·博世有限公司 用于在屏幕上显示图像的客户端设备、监视系统、方法以及计算机程序
CN106027910A (zh) * 2013-01-22 2016-10-12 华为终端有限公司 预览画面呈现方法、装置及终端
CN106406710A (zh) * 2016-09-30 2017-02-15 维沃移动通信有限公司 一种录制屏幕的方法及移动终端
CN106406688A (zh) * 2015-08-03 2017-02-15 Lg电子株式会社 移动终端及其控制方法
CN107026973A (zh) * 2016-02-02 2017-08-08 株式会社摩如富 图像处理装置、图像处理方法与摄影辅助器材
CN107111432A (zh) * 2014-12-31 2017-08-29 诺基亚技术有限公司 图像导航
CN107580693A (zh) * 2015-05-08 2018-01-12 Lg电子株式会社 移动终端及其控制方法
CN107682615A (zh) * 2012-04-25 2018-02-09 索尼公司 显示控制装置和显示控制方法
CN107800878A (zh) * 2017-10-19 2018-03-13 广东欧珀移动通信有限公司 图片显示方法及装置
CN108933865A (zh) * 2014-05-13 2018-12-04 Lg 电子株式会社 移动终端及其控制方法
CN108965747A (zh) * 2018-06-19 2018-12-07 苏州佳世达电通有限公司 影像显示方法及应用其的影像显示装置
CN109151306A (zh) * 2018-08-27 2019-01-04 惠州Tcl移动通信有限公司 一种基于拍摄预览区域的拍照方法、移动终端及存储介质
CN109218599A (zh) * 2017-07-05 2019-01-15 宏碁股份有限公司 全景图像的显示方法及其电子装置
CN111212235A (zh) * 2020-01-23 2020-05-29 华为技术有限公司 一种长焦拍摄的方法及电子设备
CN112887537A (zh) * 2021-01-18 2021-06-01 维沃移动通信有限公司 图像处理方法和电子设备
CN115428423A (zh) * 2020-02-10 2022-12-02 三星电子株式会社 导览图提供方法和支持其的电子设备

Families Citing this family (86)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7469381B2 (en) 2007-01-07 2008-12-23 Apple Inc. List scrolling and document translation, scaling, and rotation on a touch-screen display
US9030418B2 (en) * 2008-06-24 2015-05-12 Lg Electronics Inc. Mobile terminal capable of sensing proximity touch
US7953462B2 (en) * 2008-08-04 2011-05-31 Vartanian Harry Apparatus and method for providing an adaptively responsive flexible display device
EP2207342B1 (en) * 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
DE102009004898A1 (de) * 2009-01-16 2010-08-19 Siemens Aktiengesellschaft Verfahren zur Darstellung zweier unterschiedlicher Bilder eines Fusionsbildes und Vorrichtung hierfür
WO2011099581A1 (ja) * 2010-02-12 2011-08-18 京セラ株式会社 携帯電子機器
JP5616819B2 (ja) * 2010-03-10 2014-10-29 富士フイルム株式会社 撮影アシスト方法、そのプログラム、その記録媒体、撮影装置および撮影システム
US8870065B2 (en) * 2010-03-16 2014-10-28 Sherry Brennan Multi-use electronic card balance reader
TW201132316A (en) * 2010-03-19 2011-10-01 Hon Hai Prec Ind Co Ltd Adjusting system and method for vanity mirron, vanity mirron including the same
US20140253486A1 (en) * 2010-04-23 2014-09-11 Handscape Inc. Method Using a Finger Above a Touchpad During a Time Window for Controlling a Computerized System
US8773470B2 (en) * 2010-05-07 2014-07-08 Apple Inc. Systems and methods for displaying visual information on a device
JP5251926B2 (ja) * 2010-06-16 2013-07-31 セイコーエプソン株式会社 撮影装置およびタイミング制御回路
JP5182352B2 (ja) * 2010-11-16 2013-04-17 カシオ計算機株式会社 撮像装置、画像合成方法、及びプログラム
KR101260834B1 (ko) * 2010-12-14 2013-05-06 삼성전자주식회사 타임라인 바를 이용한 터치스크린 제어방법, 장치 및 이를 위한 프로그램이 기록된 기록매체 및 사용자 단말
WO2012163393A1 (en) * 2011-05-30 2012-12-06 Sony Ericsson Mobile Communications Ab Improved camera unit
US9715751B2 (en) * 2011-07-13 2017-07-25 Apple Inc. Zooming to faces depicted in images
US9137444B2 (en) 2011-09-26 2015-09-15 Sony Corporation Image photography apparatus for clipping an image region
US20130080932A1 (en) 2011-09-27 2013-03-28 Sanjiv Sirpal Secondary single screen mode activation through user interface toggle
JP5451944B2 (ja) 2011-10-07 2014-03-26 パナソニック株式会社 撮影装置及び撮影方法
KR102084582B1 (ko) * 2012-02-24 2020-03-04 삼성전자 주식회사 화면에 표시된 개체의 크기 조정 방법 및 장치
KR20130098675A (ko) * 2012-02-28 2013-09-05 삼성전자주식회사 얼굴 검출 처리 회로 및 이를 포함하는 촬상 장치
US20130314558A1 (en) 2012-05-24 2013-11-28 Mediatek Inc. Image capture device for starting specific action in advance when determining that specific action is about to be triggered and related image capture method thereof
US10150028B2 (en) 2012-06-04 2018-12-11 Sony Interactive Entertainment Inc. Managing controller pairing in a multiplayer game
US8875998B2 (en) 2012-07-23 2014-11-04 Sherry Brennan Middle class america card
CN103577083A (zh) * 2012-07-30 2014-02-12 腾讯科技(深圳)有限公司 一种图片操作方法和移动终端
JP2014038560A (ja) * 2012-08-20 2014-02-27 Canon Inc 情報処理装置、情報処理方法及びプログラム
JP5966778B2 (ja) * 2012-09-05 2016-08-10 カシオ計算機株式会社 撮像装置、撮像方法及びプログラム
JP6341924B2 (ja) 2012-11-09 2018-06-13 トムソン ライセンシングThomson Licensing ハンドヘルドディスプレイズーム機能
KR20140063272A (ko) * 2012-11-16 2014-05-27 엘지전자 주식회사 영상표시장치, 및 그 동작방법
US10691230B2 (en) * 2012-12-29 2020-06-23 Apple Inc. Crown input for a wearable electronic device
KR102049855B1 (ko) 2013-01-31 2019-11-28 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
JP6219037B2 (ja) * 2013-02-06 2017-10-25 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、および情報処理方法
US9471200B2 (en) 2013-03-15 2016-10-18 Apple Inc. Device, method, and graphical user interface for organizing and presenting a collection of media items
WO2014157357A1 (ja) * 2013-03-27 2014-10-02 Necカシオモバイルコミュニケーションズ株式会社 情報端末、表示制御方法及びそのプログラム
KR20150000278A (ko) * 2013-06-24 2015-01-02 삼성전자주식회사 디스플레이 장치 및 제어 방법
KR102101740B1 (ko) * 2013-07-08 2020-04-20 엘지전자 주식회사 이동 단말기 및 이의 제어방법
KR102065408B1 (ko) * 2013-08-16 2020-01-13 엘지전자 주식회사 이동 단말기
US11068128B2 (en) 2013-09-03 2021-07-20 Apple Inc. User interface object manipulations in a user interface
US10545657B2 (en) 2013-09-03 2020-01-28 Apple Inc. User interface for manipulating user interface objects
KR20180128091A (ko) 2013-09-03 2018-11-30 애플 인크. 자기 특성을 갖는 사용자 인터페이스 객체를 조작하는 사용자 인터페이스
KR20150051085A (ko) * 2013-11-01 2015-05-11 삼성전자주식회사 하이 다이나믹 레인지 영상을 표시하는 방법 및 상기 방법을 기록한 컴퓨터 판독 가능 저장매체 및 디지털 영상 처리 장치.
US10740540B2 (en) * 2013-12-13 2020-08-11 Freedom Scientific, Inc. Techniques for programmatic magnification of visible content elements of markup language documents
JP6071866B2 (ja) * 2013-12-18 2017-02-01 キヤノン株式会社 表示制御装置、表示装置、撮像システム、表示制御方法、及びプログラム
JP5835384B2 (ja) * 2014-03-18 2015-12-24 株式会社リコー 情報処理方法、情報処理装置、およびプログラム
JP5835383B2 (ja) 2014-03-18 2015-12-24 株式会社リコー 情報処理方法、情報処理装置、およびプログラム
US9392095B2 (en) 2014-04-03 2016-07-12 Lg Electronics Inc. Mobile terminal and control method for the mobile terminal
US9972121B2 (en) * 2014-04-22 2018-05-15 Google Llc Selecting time-distributed panoramic images for display
KR102158214B1 (ko) * 2014-05-19 2020-09-22 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
KR102212030B1 (ko) * 2014-05-26 2021-02-04 엘지전자 주식회사 글래스 타입 단말기 및 이의 제어방법
WO2015200889A1 (en) 2014-06-27 2015-12-30 Apple Inc. Electronic device with rotatable input mechanism for navigating calendar application
KR20160024143A (ko) * 2014-08-25 2016-03-04 삼성전자주식회사 영상 처리 방법 및 전자 장치
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
US20160062571A1 (en) 2014-09-02 2016-03-03 Apple Inc. Reduced size user interface
TWI582641B (zh) 2014-09-02 2017-05-11 蘋果公司 按鈕功能性
WO2016036509A1 (en) 2014-09-02 2016-03-10 Apple Inc. Electronic mail user interface
KR20160056133A (ko) * 2014-11-11 2016-05-19 삼성전자주식회사 이미지 표시 제어 방법 및 이를 지원하는 장치
US10365807B2 (en) 2015-03-02 2019-07-30 Apple Inc. Control of system zoom magnification using a rotatable input mechanism
CN104836957A (zh) * 2015-05-09 2015-08-12 陈包容 一种照片拍摄的处理方法及装置
JP6608196B2 (ja) * 2015-06-30 2019-11-20 キヤノン株式会社 情報処理装置、情報処理方法
KR101678861B1 (ko) * 2015-07-28 2016-11-23 엘지전자 주식회사 이동단말기 및 그 제어방법
KR20170014356A (ko) 2015-07-29 2017-02-08 엘지전자 주식회사 이동 단말기 및 이의 제어방법
CN105120157B (zh) * 2015-08-25 2018-04-17 广东欧珀移动通信有限公司 图像的处理方法及装置
CN106549903B (zh) * 2015-09-16 2020-09-11 腾讯科技(深圳)有限公司 一种设置用户头像的方法和装置
KR20170055867A (ko) * 2015-11-12 2017-05-22 엘지전자 주식회사 이동단말기 및 그 제어방법
CN105357442A (zh) * 2015-11-27 2016-02-24 小米科技有限责任公司 摄像头拍摄角度调整方法及装置
US9864925B2 (en) 2016-02-15 2018-01-09 Ebay Inc. Digital image presentation
KR20180020734A (ko) * 2016-08-19 2018-02-28 엘지전자 주식회사 이동단말기 및 그 제어 방법
US10547776B2 (en) 2016-09-23 2020-01-28 Apple Inc. Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes
KR20180037725A (ko) * 2016-10-05 2018-04-13 엘지전자 주식회사 디스플레이 장치
TWI633499B (zh) * 2017-06-22 2018-08-21 宏碁股份有限公司 全景影像的顯示方法及其電子裝置
KR20190008610A (ko) * 2017-07-17 2019-01-25 엘지전자 주식회사 이동 단말기 및 그 제어 방법
JP6602361B2 (ja) * 2017-10-16 2019-11-06 キヤノン株式会社 電子機器及びその制御方法
US11226731B1 (en) * 2018-01-24 2022-01-18 Snap Inc. Simulated interactive panoramas
WO2019160194A1 (ko) * 2018-02-14 2019-08-22 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10897577B2 (en) * 2018-06-26 2021-01-19 Canon Kabushiki Kaisha Image capturing system, image capturing apparatus, illumination apparatus, and control method
DK179896B1 (en) 2018-09-11 2019-08-30 Apple Inc. CONTENT-BASED TACTILE OUTPUTS
US11435830B2 (en) 2018-09-11 2022-09-06 Apple Inc. Content-based tactile outputs
JP7113255B2 (ja) * 2018-09-18 2022-08-05 パナソニックIpマネジメント株式会社 電子機器、画像表示方法、プログラム、および画像撮影システム
US11082620B2 (en) * 2018-09-26 2021-08-03 Qualcomm Incorporated Zoomed in region of interest
CN110830645B (zh) * 2019-09-24 2021-05-18 华为技术有限公司 一种操作方法和电子设备及计算机存储介质
US11297244B2 (en) * 2020-02-11 2022-04-05 Samsung Electronics Co., Ltd. Click-and-lock zoom camera user interface
US11265462B2 (en) * 2020-07-06 2022-03-01 Qualcomm Incorporated Automatic camera selection capturing intended subjects in an image
CN111866381B (zh) * 2020-07-08 2022-05-10 Oppo广东移动通信有限公司 一种调焦方法、装置、设备及计算机可读存储介质
US11792188B2 (en) * 2020-08-05 2023-10-17 Bank Of America Corporation Application for confirming multi-person authentication
US11700445B2 (en) * 2021-10-28 2023-07-11 Microsoft Technology Licensing, Llc Adaptive multi-scale face and body detector
EP4175281B1 (de) * 2021-11-02 2023-08-02 Rene Kiessig Verfahren und vorrichtung zum herstellen eines kommunikationskanals

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4340358B2 (ja) * 1999-08-02 2009-10-07 富士フイルム株式会社 画像撮影装置
US7149549B1 (en) * 2000-10-26 2006-12-12 Ortiz Luis M Providing multiple perspectives for a venue activity through an electronic hand held device
JP3914705B2 (ja) * 2000-11-29 2007-05-16 富士フイルム株式会社 ディジタル・カメラおよびその動作制御方法
TW566031B (en) * 2002-08-16 2003-12-11 Benq Corp Mobile phone and related method capable of displaying customized animation
US7856251B2 (en) * 2003-04-24 2010-12-21 Samsung Electronics Co., Ltd. Device and method for using a rotating key and controlling a display in a mobile terminal
JP2006093912A (ja) * 2004-09-22 2006-04-06 Casio Hitachi Mobile Communications Co Ltd 携帯電話装置およびプログラム
KR101155526B1 (ko) * 2005-06-15 2012-06-19 삼성전자주식회사 찾아가기 기능을 가진 디지털 영상 처리 장치의 제어 방법
KR100640808B1 (ko) * 2005-08-12 2006-11-02 엘지전자 주식회사 촬상 이미지의 듀얼 디스플레이 기능을 갖는 이동통신단말기 및 그 방법
US7839446B2 (en) * 2005-08-30 2010-11-23 Olympus Corporation Image capturing apparatus and image display apparatus including imparting distortion to a captured image
US8049678B2 (en) * 2005-09-09 2011-11-01 Lg Electronics, Inc. Image capturing and displaying method and system
US7844301B2 (en) * 2005-10-14 2010-11-30 Lg Electronics Inc. Method for displaying multimedia contents and mobile communications terminal capable of implementing the same
DE602006021225D1 (de) * 2005-11-11 2011-05-19 Sony Corp Bildverarbeitungseinrichtung, bildverarbeitungsverfahren, programm dafür und das programm enthaltendes aufzeichnungsmedium
JP2007165960A (ja) * 2005-12-09 2007-06-28 Freescale Semiconductor Inc 携帯電話装置
KR100782336B1 (ko) * 2006-06-13 2007-12-06 삼성전자주식회사 휴대용 단말기의 출력 제어 장치 및 방법
JP4904108B2 (ja) * 2006-07-25 2012-03-28 富士フイルム株式会社 撮影装置及び画像表示制御方法
KR100764698B1 (ko) 2006-08-07 2007-10-08 삼성전자주식회사 카메라 영상의 패턴인식과 해석에 의한 휴대 단말기의사용자 인터페이스 제어 방법 및 그 단말기
KR101443617B1 (ko) * 2007-10-10 2014-09-23 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
US8634796B2 (en) * 2008-03-14 2014-01-21 William J. Johnson System and method for location based exchanges of data facilitating distributed location applications
US7855737B2 (en) * 2008-03-26 2010-12-21 Fotonation Ireland Limited Method of making a digital camera image of a scene including the camera user
EP2207342B1 (en) * 2009-01-07 2017-12-06 LG Electronics Inc. Mobile terminal and camera image control method thereof
KR101533850B1 (ko) * 2009-01-20 2015-07-06 엘지전자 주식회사 전자 종이를 가진 이동 통신 단말기 및 이에 적용된 제어방법
US8095191B2 (en) * 2009-07-06 2012-01-10 Motorola Mobility, Inc. Detection and function of seven self-supported orientations in a portable device
US8301202B2 (en) * 2009-08-27 2012-10-30 Lg Electronics Inc. Mobile terminal and controlling method thereof
KR101572892B1 (ko) * 2010-05-06 2015-11-30 엘지전자 주식회사 이동 단말기 및 이것의 영상 디스플레이 방법
AU2011202836B2 (en) * 2010-12-21 2014-04-10 Lg Electronics Inc. Mobile terminal and method of controlling a mode screen display therein

Cited By (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103535021A (zh) * 2011-02-24 2014-01-22 高通股份有限公司 自动对焦追踪
CN102981697B (zh) * 2011-07-08 2015-09-23 佳能株式会社 显示控制设备和显示控制方法
CN102981697A (zh) * 2011-07-08 2013-03-20 佳能株式会社 显示控制设备和显示控制方法
US9160872B2 (en) 2011-07-08 2015-10-13 Canon Kabushiki Kaisha Display control apparatus and display control method
CN103197856A (zh) * 2011-10-21 2013-07-10 古野电气株式会社 图像显示装置、图像显示程序及图像显示方法
CN107682615A (zh) * 2012-04-25 2018-02-09 索尼公司 显示控制装置和显示控制方法
CN104903833A (zh) * 2012-09-24 2015-09-09 罗伯特·博世有限公司 用于在屏幕上显示图像的客户端设备、监视系统、方法以及计算机程序
WO2014063508A1 (zh) * 2012-10-24 2014-05-01 惠州Tcl移动通信有限公司 一种基于移动终端的拍照删除方法及移动终端
US9965154B2 (en) 2012-10-24 2018-05-08 Huizhou Tcl Mobile Communication Co., Ltd. Mobile terminal-based photograph deletion method and mobile terminal
CN106027910A (zh) * 2013-01-22 2016-10-12 华为终端有限公司 预览画面呈现方法、装置及终端
CN106027910B (zh) * 2013-01-22 2019-08-16 华为终端有限公司 预览画面呈现方法、装置及终端
CN104731494B (zh) * 2013-12-23 2019-05-31 中兴通讯股份有限公司 一种预览界面选定区域放大的方法和装置
CN104731494A (zh) * 2013-12-23 2015-06-24 中兴通讯股份有限公司 一种预览界面选定区域放大的方法和装置
CN108933865A (zh) * 2014-05-13 2018-12-04 Lg 电子株式会社 移动终端及其控制方法
US10863080B2 (en) 2014-05-13 2020-12-08 Lg Electronics Inc. Mobile terminal and method for controlling the same
US10659678B2 (en) 2014-05-13 2020-05-19 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN107111432A (zh) * 2014-12-31 2017-08-29 诺基亚技术有限公司 图像导航
US10782868B2 (en) 2014-12-31 2020-09-22 Nokia Technologies Oy Image navigation
CN104732218A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 图像显示的方法及装置
CN107580693A (zh) * 2015-05-08 2018-01-12 Lg电子株式会社 移动终端及其控制方法
CN106406688A (zh) * 2015-08-03 2017-02-15 Lg电子株式会社 移动终端及其控制方法
CN106406688B (zh) * 2015-08-03 2019-07-23 Lg电子株式会社 移动终端及其控制方法
CN107026973A (zh) * 2016-02-02 2017-08-08 株式会社摩如富 图像处理装置、图像处理方法与摄影辅助器材
CN107026973B (zh) * 2016-02-02 2020-03-13 株式会社摩如富 图像处理装置、图像处理方法与摄影辅助器材
CN106406710A (zh) * 2016-09-30 2017-02-15 维沃移动通信有限公司 一种录制屏幕的方法及移动终端
CN109218599B (zh) * 2017-07-05 2021-06-01 宏碁股份有限公司 全景图像的显示方法及其电子装置
CN109218599A (zh) * 2017-07-05 2019-01-15 宏碁股份有限公司 全景图像的显示方法及其电子装置
CN107800878A (zh) * 2017-10-19 2018-03-13 广东欧珀移动通信有限公司 图片显示方法及装置
CN108965747A (zh) * 2018-06-19 2018-12-07 苏州佳世达电通有限公司 影像显示方法及应用其的影像显示装置
CN109151306B (zh) * 2018-08-27 2020-08-11 惠州Tcl移动通信有限公司 一种基于拍摄预览区域的拍照方法、移动终端及存储介质
CN109151306A (zh) * 2018-08-27 2019-01-04 惠州Tcl移动通信有限公司 一种基于拍摄预览区域的拍照方法、移动终端及存储介质
CN111212235A (zh) * 2020-01-23 2020-05-29 华为技术有限公司 一种长焦拍摄的方法及电子设备
CN111212235B (zh) * 2020-01-23 2021-11-19 华为技术有限公司 一种长焦拍摄的方法及电子设备
CN114157804A (zh) * 2020-01-23 2022-03-08 华为技术有限公司 一种长焦拍摄的方法及电子设备
CN114205522A (zh) * 2020-01-23 2022-03-18 华为技术有限公司 一种长焦拍摄的方法及电子设备
CN114157804B (zh) * 2020-01-23 2022-09-09 华为技术有限公司 一种长焦拍摄的方法及电子设备
US11968447B2 (en) 2020-01-23 2024-04-23 Huawei Technologies Co., Ltd. Long-focus shooting method and electronic device
CN115428423A (zh) * 2020-02-10 2022-12-02 三星电子株式会社 导览图提供方法和支持其的电子设备
CN112887537A (zh) * 2021-01-18 2021-06-01 维沃移动通信有限公司 图像处理方法和电子设备
CN112887537B (zh) * 2021-01-18 2022-08-23 维沃移动通信有限公司 图像处理方法和电子设备

Also Published As

Publication number Publication date
EP2207342A3 (en) 2015-07-15
US20100173678A1 (en) 2010-07-08
CN101794203B (zh) 2014-10-22
EP2207342B1 (en) 2017-12-06
EP2207342A2 (en) 2010-07-14
US8478347B2 (en) 2013-07-02

Similar Documents

Publication Publication Date Title
CN101794203B (zh) 移动终端及其照相机图像控制方法
CN101853124B (zh) 移动终端及其控制方法
US10956017B2 (en) Circle type display device for a mobile terminal having a scroll bar at the edge of its display and method of controlling the same
CN102238275B (zh) 移动终端和在移动终端中显示图像的方法
US8400414B2 (en) Method for displaying data and mobile terminal thereof
KR101531193B1 (ko) 맵 제어방법과 이를 이용한 이동 단말기
US8922494B2 (en) Mobile terminal and method of controlling the same
US8627235B2 (en) Mobile terminal and corresponding method for assigning user-drawn input gestures to functions
US9058095B2 (en) Method for displaying data in mobile terminal having touch screen and mobile terminal thereof
CN101907972B (zh) 移动终端以及在移动终端中显示信息的方法
US20100115407A1 (en) Mobile terminal and displaying method thereof
CN101540794B (zh) 移动终端及其屏幕显示方法
KR101568351B1 (ko) 터치 스크린을 구비한 이동 단말기 및 이를 이용한 데이터 처리 방법
US9001151B2 (en) Mobile terminal for displaying a plurality of images during a video call and control method thereof
EP2336870A1 (en) Mobile terminal and controlling method thereof
US20100060595A1 (en) Mobile terminal and method of switching identity module therein
CN101626429A (zh) 移动终端和控制其操作的方法
CN101996033A (zh) 移动终端及控制该移动终端的方法
CN103391469A (zh) 移动终端及其控制方法
KR101622599B1 (ko) 이동 단말기 및 그의 줌 이미지 제어방법
KR101692729B1 (ko) 이동 단말기, 및 외부 객체에 대한 메시지 생성 및 획득 방법
CN105677164A (zh) 页面选择方法和装置
KR101531512B1 (ko) 이동단말기 및 그 제어 방법
KR101620952B1 (ko) 이동 단말기와 그 위젯 업데이트 방법
KR20140054937A (ko) 이동단말 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141022

Termination date: 20200106

CF01 Termination of patent right due to non-payment of annual fee