CN106201302B - 移动终端和用于该移动终端的控制方法 - Google Patents

移动终端和用于该移动终端的控制方法 Download PDF

Info

Publication number
CN106201302B
CN106201302B CN201510415444.6A CN201510415444A CN106201302B CN 106201302 B CN106201302 B CN 106201302B CN 201510415444 A CN201510415444 A CN 201510415444A CN 106201302 B CN106201302 B CN 106201302B
Authority
CN
China
Prior art keywords
touch
information
controller
mobile terminal
graphic object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510415444.6A
Other languages
English (en)
Other versions
CN106201302A (zh
Inventor
李知妍
郑珠铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106201302A publication Critical patent/CN106201302A/zh
Application granted granted Critical
Publication of CN106201302B publication Critical patent/CN106201302B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Studio Devices (AREA)

Abstract

移动终端和用于该移动终端的控制方法。一种移动终端，该移动终端包括：无线通信单元，该无线通信单元被构造成无线地与至少一个其它终端通信；摄像头；显示单元，该显示单元被构造成显示通过摄像头接收到的预览图像；以及控制器，该控制器被构造成接收施加到包括在预览图像中的第一图形对象的触摸，调整在第一图形对象附近的聚焦，在显示单元上显示指示存在与第一图形对象相关联的第一信息的指示符，接收当显示预览图像时施加到指示符的预设类型的触摸，并且基于预设类型的触摸来显示与第一图形对象相关联的第一信息。

Description

移动终端和用于该移动终端的控制方法
技术领域
本发明涉及具有图像捕获功能的移动终端及其控制方法。
背景技术
可以将终端划分为移动/便携式终端和固定终端。并且，可以将移动终端分类为手持终端和车载终端。随着它成为多功能的，移动终端能够捕获静止图像或运动图像、播放音乐或视频文件、玩游戏、接收广播等，以实现为集成多媒体播放器。
已在硬件和软件方面应用了各种新的尝试来实现多媒体播放器的复杂功能。例如，用户界面环境使得用户能够以容易且方便的方式搜索或选择功能。另外，近年来，设置在移动终端中的摄像头的分辨率和功能已增强，从而增加了设置在移动终端中的摄像头的利用。
发明内容
本发明的一个方面在于提供一种提供优化GUI的移动终端及其控制方法，该优化GUI能够向用户提供与被摄体相关联的信息。
本发明的另一方面在于提供一种能够利用与预览图像中的被摄体相关联的信息来执行各种功能的移动终端及其控制方法。
为了实现这些和其它优点并且根据本发明的目的，如本文所具体实现和广义描述的，本发明在一个方面中提供一种移动终端，该移动终端包括：无线通信单元，该无线通信单元被构造成无线地与至少一个其它终端通信；摄像头；显示单元，该显示单元被构造成显示通过所述摄像头接收到的预览图像；以及控制器，该控制器被构造成接收施加到包括在所述预览图像中的第一图形对象的触摸，调节在所述第一图形对象周围的聚焦，将指示存在与所述第一图形对象相关联的第一信息的指示符显示在所述显示单元上，接收当所述预览图像被显示时施加到所述指示符的预设类型的触摸，并且基于所述预设类型的触摸来显示与所述第一图形对象相关联的所述第一信息。本发明还提供了该移动终端的对应的控制方法。
此外本发明的应用性的范围从在下文中给出的详细描述将变得显而易见。然而，应该理解，详细描述和特定示例虽然指示本发明的优选实施方式，但是仅通过例示给出，因为在本发明的精神和范围内的各种改变和修改从此详细描述对于本领域技术人员而言将变得显而易见。
附图说明
附图被包括以提供对本发明的进一步理解，并且被并入本说明书并构成本说明书的一部分，附图例示了本发明的实施方式，并且与本说明书一起用来说明本发明的原理。
附图中：
图1A是例示了根据本发明的实施方式的移动终端的框图；
图1B和图1C是从不同方向看根据本发明的实施方式的移动终端的示例的概念图；
图2是例示了本发明的控制方法的流程图；
图3A、图3B和图3C是例示了图2所示的控制方法的概念图；
图4A(a)-图4A(d)、图4B(a)-图4B(c)、图4C(a)-图4C(d)、图5A(a)-图5A(d)、图5B(a)-图5B(c)、图6A(a)-图6A(c)和图6B(a)-图6B(b)是例示了用于提供与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息的方法的概念图；
图7A(a)-图7A(c)、图7B(a)-图7B(c)和图7C(a)-图7C(c)是例示了当与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息包括多个类别时提供与多个类别中的任意类别相关联的信息的方法的概念图；
图8A(a)-图8A(c)和图8B(a)-图8B(d)是例示了确定与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的应用、并且利用该应用来提供与图形对象相关联的信息的方法的概念图；
图9A(a)-图9A(d)、图9B(a)-图9B(d)和图9C(a)-图9C(d)是例示了当与预览图像中的被施加了触摸或调整了聚焦的图形对象对应的被摄体是能够通信的装置时执行与该装置的通信的方法的概念图；
图10A(a)-图10A(c)、图10B(a)-图10B(b)和图10C(a)-图10C(b)是例示了利用当提供了与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息时捕获的图像的方法的概念图；以及
图11A(a)-图11A(c)、图11B(a)-图11B(d)、图11C(a)-图11C(c)和图11D(a)-图11D(d)是例示了利用与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息的方法的概念图。
具体实施方式
现在将参照附图根据本文所公开的实施方式详细地给出描述。为了参照附图的简要描述起见，相同或等效的部件将设置有相同的附图标记，并且将不重复其的描述。用于以下描述中公开的构成元件的词尾“模块”和“单元”仅仅意在供本说明书的容易描述使用，并且词尾它本身不给出任何特殊意义或功能。
附图用来帮助容易地理解本发明的技术构思，并且本发明的构思不受附图限制。本发明的构思应该被解释为延伸到除附图之外的任何变更、等同物和替代物。
本文所描述的移动终端可以包括蜂窝手机、智能手机、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、石板PC、平板PC、超极本、可穿戴装置(例如，智能手表、智能眼睛、头戴式显示器(HMD))等。然而，根据本说明书的实施方式的配置还能够应用于诸如数字TV、台式计算机等的固定终端，排除仅适用于移动终端的情况。
参照图1A至图1C，图1A是根据本发明的移动终端的框图，图1B和图1C是从不同方向看时的移动终端的一个示例的概念图。移动终端100可以包括诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、电源单元190等的部件。图1A例示了具有各种部件的移动终端，但是实现所例示的部件中的全部不是要求。可以另选地实现更多或更少的部件。
更详细地，那些部件中的无线通信单元110通常可以包括在移动终端100与无线通信系统之间、在移动终端100与另一移动终端100之间或在移动终端100与另一移动终端100(或外部服务器)位于其内的网络之间许可无线通信的一个或更多个模块。
例如，无线通信单元110可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114、定位信息模块115等中的至少一个。输入单元120可以包括用于输入图像信号的摄像头121、麦克风122或用于输入音频信号的音频输入模块，或用于使得用户能够输入信息的用户输入单元123(例如，触摸键、按键(或机械键)等)。可以通过用户的控制命令来分析和处理由输入单元120收集的音频数据或图像数据。
感测单元140可以包括感测移动终端的内部信息、移动终端的周围环境和用户信息中的至少一个的至少一个传感器。例如，感测单元140可以包括接近传感器141、光照传感器142、触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外线(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如，参照摄像头121)、麦克风122、电量计、环境传感器(例如，气压计、湿度计、温度计、辐射检测传感器、热传感器、气体传感器等)和化学传感器(例如，电子鼻、保健传感器、生物计量传感器等)。此外，本文所公开的移动终端可以以组合由那些传感器中的至少两个传感器感测到的信息的这样一种方式利用信息。
输出单元150可以被构造成输出音频信号、视频信号或触觉信号。输出单元150可以包括显示单元151、音频输出模块152、触觉模块153、光学输出模块154等。显示单元151可以具有带触摸传感器的中间层结构或集成结构以实现触摸屏。触摸屏可以在移动终端100与用户之间提供输出接口，以及充当在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160可以用作与与移动终端100连接的各种类型的外部装置的接口。接口单元160例如可以包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。移动终端100可以响应于外部装置连接至接口单元160而执行与连接的外部装置相关联的适当控制。
此外，存储器单元170可以存储用于支持移动终端100的各种功能的数据。存储器170可以存储在移动终端100中执行的多个应用程序(或应用)、用于移动终端100的操作的数据、指令字等。那些应用程序中的至少一些可以经由无线通信从外部服务器下载。那些应用程序中的一些其它应用程序可以在出厂时被安装在移动终端100内以得到移动终端100的基本功能(例如，接电话、打电话、接收消息、发送消息等)。此外，应用程序可以被存储在安装在移动终端100中的存储器170中，并且由控制器180执行以执行移动终端100的操作(或功能)。
除与应用程序相关联的操作，控制器180通常还能够控制移动终端100的总体操作。控制器180能够通过处理由前述部件输入或输出的信号、数据、信息等或激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。
控制器180能够控制图1A所例示的部件的至少一部分，以驱动存储在存储器170中的应用程序。另外，控制器180能够通过组合包括在移动终端100中的部件中的至少两个来驱动应用程序以得到操作。
电源单元190可以接收外部电力或内部电力并且供应在控制器180的控制下操作包括在移动终端100中的各个元件和部件所需要的适当电力。电源单元190可以包括电池，并且该电池可以是嵌入式电池或可更换电池。
可以组合那些元件和部件的至少一部分以实现根据本文所描述的各种实施方式的移动终端的操作和控制或移动终端的控制方法。并且，可以在移动终端中以激活存储在存储器170中的至少一个应用程序的这样一种方式实现移动终端的操作和控制或控制方法。
在下文中，在说明由具有所述配置的移动终端100实现的各种实施方式之前，将参照图1A更详细地描述各个前述部件。首先，将对无线通信单元110进行描述。无线通信单元110的广播接收模块110可以经由广播频道从外部广播管理实体接收广播信号和/或广播相关信息。广播频道可以包括卫星频道和地面频道。可以在移动终端100中设置至少两个广播接收模块111以同时接收至少两个广播频道或切换广播频道。
移动通信模块112可以在移动通信网络上向/从网络实体中的至少一个(例如，基站、外部移动终端、服务器等)发送/接收无线信号，所述移动通信网络是根据用于移动通信的技术标准或传输方法(例如，全球移动通信系统(GSM)、码分多址(CMDA)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、长期演进(LTE)等)来构建的。这里，无线信号可以根据文本/多媒体消息的发送/接收包括音频呼叫信号、视频(电话)呼叫信号或各种格式的数据。
无线互联网模块113表示用于无线互联网接入的模块。这个模块可以在内部或在外部藕接至移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送/接收无线信号。
这种无线互联网接入的示例可以包括无线LAN(WLAN)、无线保真(Wi-Fi)直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作性(Wimax)、高速下行链路分组接入(HSDPA)、长期演进(LTE)等。无线互联网模块113可以根据在甚至包括不为前述的互联网技术的范围内的至少一个无线互联网技术来发送/接收数据。
从根据Wibro、HSDPA、GSM、CDMA、WCDMA、LTE等的无线互联网接入经由移动通信网络执行的观点看，经由移动通信网络执行无线互联网接入的无线互联网模块113可以被理解为一种移动通信模块112。
短距离通信模块114表示用于短距离通信的模块。用于实现短距离通信的适合的技术可以包括BLUETOOTHTM、射频识别(RFID)、红外线数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连等。短距离通信模块114可以经由无线个人局域网支持移动终端100与无线通信系统之间、移动终端100与另一移动终端100之间或该移动终端与另一移动终端100(或外部服务器)位于在的网络之间的无线通信。
这里，另一移动终端100可以是能够与移动终端100交换数据(或与移动终端100协作)的可穿戴装置，例如，智能手表、智能眼镜或头戴式显示器(HMD)。短距离通信模块114可以感测(识别)靠近移动终端100、能够与移动终端通信的可穿戴装置。另外，当所感测到的可穿戴装置是被认证为与根据本发明的实施方式的移动终端100通信的装置时，控制器180能够经由短距离通信模块114向可穿戴装置发送在移动终端100中处理的数据的至少一部分。因此，可穿戴装置的用户可以在可穿戴装置上使用在移动终端100中处理的数据。例如，当在移动终端100中接收到电话时，用户可以利用可穿戴装置来回电话。并且，当在移动终端100中接收到消息时，用户可以利用可穿戴装置来检查所接收到的消息。
定位信息模块115表示用于检测或计算移动终端的位置的模块。定位信息模块115的示例可以包括全球定位系统(GPS)模块或无线保真(Wi-Fi)模块。例如，当移动终端使用GPS模块时，可以利用从GPS卫星发送的信号来获取移动终端的位置。又如，当移动终端使用Wi-Fi模块时，可以基于与无线接入点(AP)有关的信息来获取移动终端的位置，所述AP向Wi-Fi模块发送无线信号或从Wi-Fi模块接收无线信号。视需要，定位信息模块115可以执行无线通信单元110的另一模块的任意功能以按照代用或附加方式获得移动终端的位置的数据。定位信息模块115作为用来获取移动终端的定位(或当前定位)的模块不限于用于直接计算或获取移动终端的定位的模块。
接下来，输入单元120可以被构造成提供输入到移动终端的音频信号或视频信号(或信息)或由用户输入到移动终端的信息。为了输入音频信息，移动终端100可以包括一个或多个摄像头121。摄像头121可以处理由图像传感器在视频呼叫模式或捕获模式下获得的静止图片或视频的图像帧。经处理的图像帧可以被显示在显示单元151上。此外，布置在移动终端100中的多个摄像头121可以按照矩阵配置布置。通过利用具有矩阵配置的摄像头121，可以将具有各种角度或聚焦的多个图像信息输入到移动终端100中。并且，多个摄像头121可以被布置在立体结构中以获取用于实现立体图像的左图像和右图像。
麦克风122可以将外部音频信号处理成电音频数据。可以根据在移动终端100中执行的功能(或执行的应用程序)以各种方式利用经处理的音频数据。此外，麦克风122可以包括匹配噪声去除算法以去除在接收外部音频的过程中生成的噪声。
用户输入单元123可以接收由用户输入的信息。当通过用户输入单元123输入信息时，控制器180能够控制移动终端100的操作以对应于输入信息。用户输入单元123可以包括机械输入元件(或机械键，例如，位于移动终端100的正面/背面或侧面上的按钮、薄膜开关、滚轮、触合式开关等)和触敏输入机构。例如，触敏输入机构可以是通过软件处理显示在触摸屏上的虚拟键、软键或可视键，或被布置在除触摸屏之外的一部分上的触摸键。此外，虚拟键或可视键也许可按照各种形状(例如，图形、文本、图标、视频或其组合)显示在触摸屏上。
感测单元140可以感测移动终端的内部信息、移动终端的周围环境信息和用户信息中的至少一个，并且生成与它对应的感测信号。控制器180能够基于感测信号来控制移动终端100的操作或执行与安装在移动终端中的应用程序相关联的数据处理、功能或操作。在下文中，将更详细地给出可以被包括在感测单元140中的各种传感器的代表性传感器的描述。
首先，接近传感器141指代用于通过在没有机械接触的情况下利用电磁场或红外线来感测是否存在接近于待感测的表面的对象或布置在待感测的表面附近的对象的传感器。接近传感器141可以被布置在移动终端的被触摸屏覆盖的内部区域处或在触摸屏附近。接近传感器141可以具有比接触传感器长的寿命和更增强的实用性。
例如，接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等。当触摸屏被实现为电容型时，接近传感器141可以通过电磁场的改变来感测指点体与触摸屏的接近，所述电磁场响应具有电导率的对象的方式。在这种情况下，触摸屏(触摸传感器)可以被分类为接近传感器。
在下文中，为了简要说明起见，指点体被设置为在没有接触的情况下接近于触摸屏的状态将被称为“接近触摸”，然而指点体基本上接触触摸屏的状态将被称为“接触触摸”。对于与指点体在触摸屏上的接近触摸对应的位置，这种位置将对应于指点体在指点体的接近触摸时垂直于触摸屏面向的位置。接近传感器141可以感测接近触摸以及接近触摸模式(例如，距离、方向、速度、时间、位置、运动状态等)。此外，控制器180能够处理与由接近传感器141感测到的接近触摸和接近触摸模式对应的数据(或信息)，并且在触摸屏上输出与经处理的数据对应的视觉信息。另外，控制器180能够根据相对于触摸屏上的同一点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或处理不同的数据(或信息)。
触摸传感器可以利用各种类型的触摸方法中的至少一个(诸如电阻型、电容型、红外线型、磁场型等)来感测施加到触摸屏(或显示单元151)上的触摸(或触摸输入)。例如，触摸传感器可以被构造成将施加到显示单元151的特定部分的压力的变化或从显示单元151的特定部分发生的电容的变化转换成电输入信号。并且，触摸传感器可以被构造成不仅感测触摸位置和触摸区域，而且感测触摸压力。这里，触摸对象是用于将触摸输入施加到触摸传感器上的对象。触摸对象的示例可以包括手指、触摸笔、手写笔、指点体等。
当触摸输入被触摸传感器感测到时，可以将对应信号发送到触摸控制器。触摸控制器可以处理所接收到的信号，并且然后将对应数据发送给控制器180。因此，控制器180能够感测显示单元151的哪一个区已被触摸。这里，触摸控制器可以是与控制器180分开的部件或控制器180它本身。
此外，控制器180能够根据触摸了触摸屏的对象(或除触摸屏之外设置的触摸键)的类型来执行不同的控制或相同的控制。根据给出触摸输入的对象是执行不同的控制还是相同的控制可以基于移动终端100的当前操作状态或当前执行的应用程序来决定。此外，可以单独地或相结合地执行触摸传感器和接近传感器，以感测各种类型的触摸，诸如短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻击触摸、向内挤压(pinch-in)触摸、向外挤压(pinch-out)触摸、扫掠触摸、悬停触摸等。
超声传感器可以被构造成通过利用超声波来识别与感测对象有关的位置信息。控制器180能够基于由光照传感器和多个超声传感器感测到的信息来计算波生成源的位置。因为光比超声波快得多，所以光到达光学传感器的时间比超声波到达超声传感器的时间短得多。可以利用该事实来计算波生成源的位置。更详细地，可以通过基于光作为基准信号利用与超声波到达传感器的时间的时间差来计算波生成源的位置。
构建输入单元120的摄像头121可以是一种摄像头传感器。摄像头传感器可以包括光电传感器和激光传感器中的至少一个。可以组合摄像头121和激光传感器以检测感测对象相对于3D立体图像的触摸。光电传感器可以被层压在显示装置上。光电传感器可以被构造成对接近于触摸屏的感测对象的移动进行扫描。更详细地，光电传感器可以包括成行和列的光电二极管和晶体管，以通过利用根据施加的光的量而改变的电信号来对放置在光电传感器上的内容进行扫描。即，光电传感器可以根据光的变化来计算感测对象的坐标以从而获得感测对象的位置信息。
显示单元151可以输出在移动终端100中处理的信息。例如，显示单元151可以显示在移动终端100中驱动的应用程序的执行画面信息或响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
显示单元151还可以被实现为用于显示立体图像的立体显示单元。立体显示单元152可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。
音频输出模块152可以在呼叫信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等下输出从无线通信单元110接收到的或存储在存储器160中的音频数据。并且，音频输出模块152还可以提供与由移动终端100执行的特定功能有关的可听输出信号(例如，呼叫信号接收音、消息接收音等)。音频输出模块152可以包括受话器、扬声器、蜂鸣器等。
触觉模块153可以生成用户可以感到的各种触觉效果。由触觉模块153生成的触觉效果的典型示例可以是振动。由触觉模块153生成的振动的强度、模式等也许可通过用户选择或控制器的设定来控制。例如，触觉模块153可以按照组合方式或顺序方式输出不同的振动。
除振动之外，触觉模块153可以生成各种其它触觉效果，包括诸如插针排列相对于接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、通过利用能够吸热或发热的元件来再现冷和热的感觉的效果等。
触觉模块153可以被实现为使得用户能够通过诸如用户的手指或手臂的肌感觉来感觉触觉效果，以及通过直接接触传递触觉效果。可以根据移动终端100的配置设置两个或更多个触觉模块153。
光学输出模块154可以输出用于利用光源的光来指示事件生成的信号。移动终端100中生成的事件的示例可以包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。可以实现由光学输出模块154所输出的信号使得移动终端发射单色光或具有多个颜色的光。可以随着移动终端感测到用户的事件检查而终止信号输出。
接口单元160可以用作与与移动终端100连接的每个外部装置的接口。例如，接口单元160可以接收从外部装置发送的数据，接收电力以传递给移动终端100内的各个元件，或将移动终端100的内部数据发送到外部装置。例如，接口单元160可以包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
标识模块可以是存储用于对利用移动终端100的权限进行认证的各种信息的芯片，并且可包括用户身份模块(UIM)、订户身份模块(SIM)、全球订户身份模块(USIM)等。另外，具有标识模块的装置(本下文中，被称为“标识装置”)可以采取智能卡的形式。因此，标识装置可以经由接口单元160与终端100连接。
当移动终端100与外部托架连接时，接口单元160可以用作使得来自托架的电力能够借此被供应给移动终端100的通路，或可用作使得由用户从托架输入的各种命令信号能够借此被传递给移动终端的通路。从托架输入的各种命令信号或电力可以作为用于识别出移动终端被正确地安装在托架上的信号。
存储器170可以存储用于控制器180的操作的程序，并且暂时存储输入/输出数据(例如，电话簿、消息、静止图像、视频等)。存储器170可以存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。
存储器170可以包括至少一种类型的存储介质，包括闪速存储器、硬盘、多媒体卡微型、卡型存储器(例如，SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘和光盘。并且，移动终端100可以与在互联网上执行存储器170的存储功能的web存储装置有关地操作。
如前述，控制器180通常能够控制移动终端100的通用操作。例如，控制器180能够设定或解除用于限制用户在移动终端的状态满足预设条件时相对于应用输入控制命令的锁定状态。
控制器180还可执行与语音呼叫、数据通信、视频呼叫等相关联的控制和处理，或执行模式识别处理以将触摸屏上执行的手写输入或绘画输入分别识别为字符或图像。另外，控制器180能够控制那些部件中的一个或组合，以在移动终端100上实现本文所公开的各种实施方式。
电源单元190可以接收外部电力或内部电力并且供应在控制器180的控制下操作包括在移动终端100中的各个元件和部件所需要的适当电力。电源单元190可以包括电池。电池可以是嵌入式电池，该嵌入式电池是可再充电的或可拆卸地耦接至终端机身来充电。
电源单元190可包括连接端口。连接端口可以被构造成接口单元160的一个示例，用于供应电力以对电池再充电的外部(再)充电器电连接至该接口单元160。又如，电源单元190可以被构造成在不使用连接端口的情况下以无线方式对电池再充电。这里，电源单元190可以利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发送器传递的电力。本文所描述的各种实施方式可以利用例如软件、硬件或其任意组合实现在计算机可读介质或其相似介质中。
参照图1B和图1C，本文所公开的移动终端100可以提供有直板型终端机身。然而，本发明可能不限于此，而且可以适用于诸如手表型、夹子型、眼镜型或折叠型、翻盖型、滑盖型、旋转型和摆动型等的各种结构，其中两个或更多个机身按照相对可移动的方式彼此组合。本发明可以与特定类型的移动终端相关联，但是特定类型的移动终端的描述可以适用于另一类型的移动终端。
移动终端100可以包括形成终端的外观的壳体(例如，机壳、外壳、盖子等)。在此实施方式中，可以将壳体划分为前壳体101和后壳体102。各种电子部件可以被并入形成在前壳体101与后壳体102之间的空间。至少一个中间壳体可以被另外布置在前壳体101与后壳体102之间。
显示单元151可以被布置在终端机身的正面上以输出信息。如所例示的，显示单元151的窗口151a可以被安装到前壳体101以连同前壳体101一起形成终端机身的正面。在一些情况下，电子部件还可以被安装到后壳体102。安装到后壳体102的那些电子部件的示例可以包括可拆卸电池、标识模块、存储卡等。这里，用于覆盖所安装的电子部件的后盖103可以可拆卸地耦接至后壳体102。因此，当后盖103与后壳体102分离时，可以外部地暴露安装到后壳体102的电子部件。
如所例示的，当后盖103耦接至后壳体102时，可以部分地暴露后壳体102的侧面。在一些情况下，在耦合后，后壳体102还可以被后盖103完全屏蔽。此外，后盖103可以包括用于外部地暴露摄像头121b或音频输出模块152b的开口。
壳体101、102、103可以由注塑成型合成树脂形成或可以由金属(例如，不锈钢(STS)、钛(Ti)等)形成。与多个壳体形成用于容纳这些各种部件的内部空间的示例不同，移动终端100可以被构造成使得一个壳体形成内部空间。在这个示例中，还可以实现具有如此形成以致合成树脂或金属从侧面向背面延伸的单机身的移动终端100。
此外，移动终端100可以包括用于防止水引入到终端机身中的防水单元。例如，防水单元可以包括防水构件，所述防水构件位于在窗口151a与前壳体101之间、在前壳体101与后壳体102之间或在后壳体102与后盖103之间，以在那些壳体被耦合时封闭地密封内部空间。
移动终端可以包括显示单元151、第一音频输出单元152a和第二音频输出单元152b、接近传感器141、光照传感器152、光学输出模块154、第一摄像头121a和第二摄像头121b、第一操纵单元123a和第二操纵单元123b、麦克风122、接口单元160等。
在下文中，参照图1B和图1C，将给出显示单元151、第一音频输出模块152a、接近传感器141、光照传感器142、光学输出模块154、第一摄像头121a和第一操纵单元123a被布置在终端机身的正面上、第二操纵单元123b、麦克风122和接口单元160被布置在终端机身的侧面上并且第二音频输出模块152b和第二摄像头121b被布置在终端机身的背面上的移动终端100的描述。
这里，那些部件可能不限于该布置，但是必要时被排除或布置在另一表面上。例如，可能不在终端机身的正面上布置第一操纵单元123a，并且可以在终端机身的侧面上而不是在终端机身的背面上布置第二音频输出单元152b。
显示单元151可以输出在移动终端100中处理的信息。例如，显示单元151可以显示在移动终端100中驱动的应用程序的执行画面信息或响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
显示单元151可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器以及电子墨水显示器中的至少一个。可以根据移动终端100的配置方面在数量上按照两个或更多个实现显示单元151。例如，多个显示单元151可以在一个表面上被布置为彼此间隔开或集成在一起，或可以被布置在不同的表面上。
显示单元151可以包括感测到显示单元上的触摸以通过触摸方式接收控制命令的触摸传感器。当触摸被输入给显示单元151时，触摸传感器可以被构造成感测此触摸并且控制器180能够生成与该触摸对应的控制命令。以触摸方式输入的内容可以是文本或数值，或能够在各种模式下指示或指定的菜单项。
可以按照具有触摸模式的薄膜的形式配置触摸传感器。触摸传感器可以是在窗口151a与显示器之间布置在窗口151a的背面上或直接图案化在窗口151a的背面上的金属线的形式配置。或，触摸传感器可以与显示器整体地形成。例如，触摸传感器可以被布置在显示器的基板上或在显示器内。
显示单元151可以连同触摸传感器一起形成触摸屏。在这里，触摸屏可以用作用户输入单元123(见图1A)。因此，触摸屏可以代替第一操纵单元123a的功能中的至少一些。可以按照用于将语音声音传递给用户的耳朵或扩音器以输出各种警报声音或多媒体再现声音的受话器的形式实现第一音频输出模块152a。
显示单元151的窗口151a可以包括声孔以用于发射从第一音频输出模块152a生成的声音的声孔。这里，本发明可能不限于此。它还可以被构造成使得声音沿着结构主体之间的组装间隙(例如，窗口151a与前壳体101之间的间隙)放出。在这种情况下，独立地形成以输出音频声音的孔可能在外观方面不被看到或隐藏，从而进一步简化移动终端100的外观。
光学输出模块154可以输出用于指示事件生成的光。移动终端100中生成的事件的示例可以包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。当感测到用户的事件检查时，控制器可以控制光学输出单元154停止光的输出。第一摄像头121a可以处理诸如由图像传感器在视频呼叫模式或捕获模式下获得的静止或运行图像的视频帧。经处理的视频帧可以被显示在显示单元151上或存储在存储器170中。
第一操纵单元123a和第二操纵单元123b是用户输入单元123的示例，其可以被用户操纵来输入用于控制移动终端100的操作的命令。第一操纵单元123a和第二操纵单元123b还可以被统称为操纵部，并且可以采用任意方法，如果它是触觉方式则使得用户能够执行诸如触摸、按、滚动等的具有触觉感觉的操纵。
附图是在第一操纵单元123a为触摸键的基础上例示的，但是本发明不限于此。例如，第一操纵单元123a可以配置有机械键，或触摸键和按键的组合。
可以以各种方式设定由第一操纵单元123a和第二操纵单元123b接收到的内容。例如，第一操纵单元123a可以被用户用来输入诸如菜单、首页键、取消、搜索等的命令，并且第二操纵单元123b可以被用户用来输入诸如控制正从第一音频输出模块152a或第二音频输出模块152b输出的音量水平、切换成显示单元151的触摸识别模式等的命令。
此外，作为用户输入单元123的另一示例，后输入单元可以被布置在终端机身的背面上。后输入单元可以被用户操纵来输入用于控制移动终端100的操作的命令。可以以各种方式设定内容输入。例如，后输入单元可以被用户用来输入命令，诸如通电/断电、开始、结束、滚动等、控制正从第一音频输出模块152a或第二音频输出模块152b输出的音量水平、切换成显示单元151的触摸识别模式等。后输入单元可以被实现成允许触摸输入、按输入或其组合的形式。
后输入单元可以被布置为在终端机身的厚度方向上覆盖正面的显示单元151。例如，后输入单元可以被布置在终端机身的背面的上端部上，使得当用户用一只手抓取终端机身时用户能够利用食指容易地操纵它。然而，本发明可能不限于此，并且后输入单元的位置也许是易变的。
当后输入单元被布置在终端机身的背面上时，可以利用后输入单元实现新的用户接口。并且，前述的触摸屏或后输入单元可以取代位于终端机身的正面上的第一操纵单元123a的功能的至少一部分。因此，当第一操纵单元123a未被布置在终端机身的正面上时，显示单元151可以被实现为具有更大屏幕。
此外，移动终端100可以包括对用户的指纹进行扫描的手指扫描传感器。控制器能够使用由手指扫描传感器感测到的指纹信息作为认证手段。可以将指纹扫描传感器安装在显示单元151或用户输入单元123中。可以形成麦克风122以接收用户的语音、其它声音等。麦克风122可以被设置在多个地方处，并且构造成接收立体声音。
接口单元160可以用作使得移动终端100能够与外部装置交换数据的路径。例如，接口单元160可以是用于连接至另一装置(例如，耳机、外部扬声器等)的连接端子、用于近场通信的端口(例如，红外线数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)或用于将电力供应给移动终端100的电源端子中的至少一个。可以以用于容纳外部卡的插座的形式实现接口单元160，所述外部卡诸如订户标识模块(SIM)、用户身份模块(UIM)或用于信息存储的存储卡。
第二摄像头121b可以还被安装到终端机身的背面。第二摄像头121b可以具有与第一摄像头单元121a的方向基本上相反的图像捕获方向。第二摄像头121b可以包括沿着至少一条线布置的多个透镜。多个透镜还可以被布置在矩阵配置中。摄像头可以被称为“阵列摄像头”。当第二摄像头121b被实现为阵列摄像头时，可以利用多个透镜以各种方式捕获图像并且可以获得具有较好质量的图像。
闪光灯124可以被布置为与第二摄像头121b相邻。当被摄体的图像用摄像头121b捕获时，闪光灯124可以照射被摄体。第二音频输出模块152b还可以被布置在终端机身上。第二音频输出模块152b可以与第一音频输出模块152a相结合地实现立体声功能(参照图1A)，并且还可以被用于实现用于呼叫通信的扬声器电话模式。
用于无线通信的至少一个天线可以被布置在终端机身上。天线可以被安装在终端机身中或形成在壳体上。例如，配置广播接收模块111的一部分的天线也许能缩进到终端机身中。另选地，天线可以以薄膜的形式形成为被附接到后盖103的内表面上或包括导电材料的壳体可以用作天线。
用于将电力供应给移动终端100的电源单元190可以被布置在终端机身上。电源单元190可以包括被安装在终端机身中或可拆卸地耦接至终端机身的外部的电池191。电池191可以经由连接至接口单元160的电源电缆接收电力。并且，电池191也许可利用无线充电器以无线方式(再)充电。可以通过磁感应或电磁共振实现无线充电。
此外，附图例示了后盖103耦接至后壳体102以用于遮挡电池191，以防止电池191的分离并且以保护电池191免于外部冲击或异物影响。当电池191可从终端机身拆卸时，后壳体103可以可拆卸地耦接至后壳体102。
还可以在移动终端100上设置用于保护外观或协助或扩展移动终端100的功能的附件。作为该附件的一个示例，可以设置用于覆盖或容纳移动终端100的至少一个表面的盖或盒。盖或盒可以与显示单元151合作来扩展移动终端100的功能。附件的另一示例可以是用于协助或扩展进入到触摸屏的触摸输入的触摸笔。
此外，能够包括前面构成元件中的至少一个的根据本发明的实施方式的移动终端可以执行图像捕获功能。这里，图像可以包括静止图像、视频等，并且图像捕获功能可以包括静止图像捕获功能和视频捕获功能。在下文中，为了方便说明起见，可以使用术语“图像”，并且图像包括如以上所描述的静止图像、视频等。
可以基于所选择(或触摸)的图标(或应用的图标)执行图像捕获功能。当通过图标执行图标捕获功能时，显示单元151可以处于“开”状态。此外，除选择与图像捕获功能链接的图标的方法之外还可以在设置在移动终端中的键(例如，硬键和软键中的至少一个)时执行图像捕获功能。在这种情况下，即使当显示单元151处于“关”状态时，也能够响应于设置在移动终端中的键被选择而执行图像捕获功能。
根据本发明的实施方式的移动终端可以随着图像捕获功能被执行而将通过摄像头接收到的图像显示在显示单元151上。具体地，移动终端能够在显示单元151上实时地显示通过摄像头接收到的图像。这里，可以将通过摄像头接收到的图像称为“预览图像”、“图像”等。
图像捕获功能的执行可以表示执行针对图像捕获而驱动的应用。当图像捕获功能被执行时，移动终端的控制器180可以激活摄像头121以为捕获图像的状态做准备。此外，控制器180能够在显示单元151上显示通过已激活摄像头121接收到的图像。这里，根据本发明的实施方式，在显示单元151上通过已激活摄像头121接收到的图像被定义为“预览图像”。此外，当基于用户的选择执行图像捕获功能时，控制器180能够将正在显示单元151上显示的预览图像存储在存储器170中。
根据本发明的实施方式的移动终端可以提供用于将通过摄像头接收到的图像(或预览图像)存储在存储器中的图像捕获功能。这里，移动终端针对存储器中的通过摄像头接收到的图像的操作可以被表达为“取图像”、“获得图像”、“捕获图像”、“取预览图像”、“呈现预览图像”、“处理针对预览图像的捕获命令”、“对于预览图像执行捕获功能”等。此外，如果表达有用于将从摄像头接收到的图像存储在存储器中的意义则能够自由地使用任意表达，而不局限于前面的表达。
根据本发明的实施方式，移动终端能够基于用户的选择来执行图像捕获操作，并且用户的表达可以被表达为“用户的控制命令”或“控制命令”。此外，能够以各种方式执行用户的选择，并且例如，用户可以对设置在移动终端中的硬键进行触摸或按压或对在显示单元151上显示的软键或可视键中的至少一个进行触摸以执行图像捕获操作。换句话说，当触摸或按下了与图像捕获功能链接的硬键或触摸了在显示单元151上显示的软键或可视键中的至少一个时，控制器180能够确定已接收到用户的用于执行图像捕获操作的控制命令。控制器180能够基于这样的控制命令来捕获通过摄像头121接收到的图像。此外，除示例，当接收到与预设指令对应的用户语音或对移动终端施加了特定手势或在移动终端上感测到预设移动时也可以执行图像捕获功能。
此外，根据本发明的实施方式的移动终端可以基于施加到显示单元151的上面显示有预览图像的一个区域的触摸来执行各种功能。各种功能可以包括聚焦调整功能、图像捕获功能等。例如，当在显示单元151上显示预览图像时对上面显示有预览图像的屏幕的一个区域施加了触摸时，控制器180能够调整在被施加了触摸的一个区域附近的聚焦。
在另一示例中，当在显示单元151上显示预览图像时对上面显示有预览图像的屏幕的一个区域施加了触摸时，控制器180能够确定已接收到用户的用于执行图像捕获操作的控制命令。再又如，控制器180能够基于施加到上面显示有预览图像的屏幕的一个区域的至少一个触摸来调整在该一个区域附近的聚焦，并且然后执行捕获已调整聚焦的预览图像的操作。
如上所述，根据施加到上面显示有预览图像的屏幕的一个区域的触摸来调整在该一个区域附近的聚焦的功能被定义为触摸自动聚焦(TAF)。此外，根据本发明的实施方式的移动终端能够执行用于甚至在不用对预览图像施加附加触摸的情况下也自动地调整聚焦的连续自动聚焦(CAF)(在下文中，被称为“自动聚焦调整功能”)。当显示预览图像时或当根据安装有摄像头的机身的移动而改变预览图像时，可以每当经过预设时间段时周期性地执行自动聚焦调整功能。
根据本发明的实施方式的移动终端能够利用自动聚焦调整功能来调整在上面显示有预览图像的屏幕的一个区域附近的聚焦。例如，当显示预览图像时，控制器能够调整在上面显示有预览图像的屏幕的中心的区域附近的聚焦。此外，控制器180能够利用摄像头来检测用户的眼睛，并且调整在其中检测到眼睛的一个区域附近的聚焦。
在另一示例中，控制器180能够通过对预览图像的图像分析来确定其中将被自动调整聚焦的一个区域。例如，可以将与占据预览图像的最大面积的对象对应的区域、与包含可识别轮廓的对象对应的区域、与其中和周围对象对比的亮度和色度中的至少一个高于阈值的对象对应的区域等确定为其中将自动调整聚焦的一个区域。
此外，显示单元151上显示的预览图像290可以包括至少一个图形对象300。在预览图像290上显示的图形对象可以表示要由用户利用摄像头捕获的被摄体(主体)。
此外，当对包含在预览图像290中的图形对象中的至少一个施加了触摸时，控制器180能够识别(提取)被施加了触摸的图形对象。识别图形对象能够表示基于图形对象的形状(形式)、颜色、深度值、特征、文本、图像等而被提取为一个目标图像。这里，图形对象可以包括期望由用户捕获的所有类型的对象，诸如建筑物、文本、照片、图片、面部、地图、电子装置(外部装置)、汽车、机器人、条形码、QR码等。
可以基于各种方案执行图形对象的识别。例如，被施加了触摸的图形对象可以针对预览图像利用图像分析方案、文本提取方案、面部识别方案等而被提取为一个目标对象(诸如图像分析方案、文本提取方案、面部识别方案等的用于提取包含在图像中的图形对象的方法脱离本发明的要点，进而将省略其详细描述)。
在下文中，对包含在预览图像290中的至少一个图形对象施加触摸包括将被施加了触摸的图形对象识别为一个目标对象的含义。此外，被施加了触摸的图形对象可以被认为与当在显示单元上显示预览图像时根据自动聚焦调整功能自动地调整(控制)聚焦的图形对象相同。
此外，当触摸被施加到包含在预览图像290中的图形对象300中的至少一个时，根据本发明的实施方式的移动终端能够在显示单元151上显示与被施加了触摸的图形对象相关联的信息310。这里，与图形对象相关联的信息310可以是与根据施加到包含在预览图像中的至少一个图形对象的触摸而识别为一个目标对象的图形对象相关联的信息。
此外，与图形对象相关联的信息310可以根据预览图像290上的被施加了触摸的图形对象300的类型而变化。控制器180能够在包含在预览图像290中的图形对象当中识别被施加了触摸的图形对象，并且基于经识别的图形对象来区分图形对象的类型。图形对象的类型可以包括能够被标识为一个主体的所有对象，诸如建筑物、文本、照片、图片、面部、地图、电子装置(外部装置)、汽车、机器人、条形码、QR码等。控制器180能够基于存储在存储器170中的数据或通过与外部服务器(或外部装置)通信接收到的数据来对经识别的图形对象的类型进行分类。
这里，可以基于用户请求执行对对象的类型进行分类的处理。例如，用户请求可以是对指示存在与图形对象相关联的信息的指示符施加预设类型的触摸。换句话说，控制器可能不请求用于对被施加了触摸的图形对象的类型进行分类的数据或与在对指示符施加预设类型的触摸之前到外部服务器的图形对象相关联的信息。因此，当用户不想要具有根据本发明的实施方式的关联信息时，可以不与外部服务器另外执行通信，进而可能不轻率地消耗与外部服务器通信所需要的数据容量。
此外，与预览图像290上的被施加了触摸的图形对象相关联的信息310可以包括至少一个类别。这里，类别可以表示一种关联信息310。换句话说，与任一个图形对象相关联的信息可以包括至少一个类别(类型)，并且例如，类别可以包括详细信息、路径信息、web搜索信息、词典信息、与图像相关联的信息(URL地址等)、与视频相关联的信息、关联应用信息、装置能够通信信息等。关联信息可以包括在上文未列举并且将参照附图另外描述的各种信息。
此外，控制器180能够在显示单元151上显示预览图像290和关联信息310中的至少一个。具体地，控制器180能够基于在显示预览图像290时施加到显示单元151的预设类型的触摸来将关联信息310显示为与上面显示有预览图像290的屏幕的一个区域交叠。换句话说，即使当在显示单元151上显示关联信息310时也可以根据摄像头维持激活状态而维持预览图像290的显示。该一个区域的尺寸可以是预设尺寸或可以基于施加的预设类型的触摸而改变。
此外，当显示与包含在预览图像290中的图形对象300当中的被施加了触摸的图形对象相关联的信息310时，控制器180能够对于预览图像290执行图像捕获操作。在这种情况下，可以将图像捕获的预览图像290连同与图形对象相关联的信息310存储在存储器170中。例如，当在显示单元151上显示关联信息310时执行了图像捕获操作时，可以将与所捕获的预览图像对应的原始图像以及与该原始图像链接的图像文件中的至少一方和关联信息310存储在存储器170中。
如上所述，根据本发明的实施方式，可以在同时执行图像捕获功能的同时提供与包含在预览图像中的图形对象相关联的信息。因此，当用户想要在执行图像捕获功能的同时接收与包含在预览图像中的图形对象相关联的信息时，他或她能够在同时执行图像捕获功能而不是终止图像捕获功能并且执行另一附加功能的同时接收关联信息，从而增强用户的方便。
此外，根据本发明的实施方式，当在显示与包含在预览图像中的图形对象相关联的信息时执行了图像捕获操作时，能够同时存储预览图像和关联信息。因此，根据本发明的实施方式，能够去除用户应该另外存储在执行图像捕获功能的同时接收到的关联信息的不便，并且满足用户对于在查看所捕获的图像时接收关联信息的需要。
在下文中，将参照附图更详细地描述当执行图像捕获功能时提供与包含在显示单元上显示的预览图像中的至少一个图形对象相关联的信息的方法。具体地，图2是例示了本发明的控制方法的流程图，并且图3A、图3B和图3C是例示了图2所示的控制方法的概念图。
首先，参照图2，执行基于用户请求来执行图像捕获功能的处理。当图像捕获功能被执行时，在显示单元151上显示通过摄像头接收到的预览图像290(S210)。如上所述，预览图像290可以包括至少一个图形对象300，并且图形对象300可以表示包含在通过摄像头接收到的图像的被摄体(主体)。
图3例示了预览图像290中包含文本的示例。在下文中，为了方便说明起见，一个图形对象300被定义为一个单词。然而，不限于此，并且当根据用户请求选择了包含至少一个单词的句子时，该句子可以作为一个图形对象300被处理(将参照图6A和图6B更详细地描述将句子作为一个图形对象来处理以提供与该图形对象相关联的信息的方法)。
此外，即使文本被包含在图3至图7C所例示的预览图像290中，也仅仅将包含在预览图像中的图形对象描述为例如文本，但不限于此。换句话说，即使当包含在预览图像中的图形对象包括能够被标识为诸如建筑物、文本、照片、图片、面部、地图、电子装置、汽车、机器人、条形码、QR码等的一个主体的所有对象时，也可以按照相同或相似的方式应用在下面描述的内容。
然后，当对包含在预览图像290中的图形对象300中的至少一个施加了触摸时，执行调整在被施加了触摸的图形对象附近的聚焦的处理(S220)。具体地，当对上面显示有预览图像290的屏幕的一个区域施加了触摸时，控制器180能够调整在被施加了触摸的该一个区域附近的聚焦。当确定了图形对象300存在于上面显示有预览图像290的屏幕的被施加了触摸的一个区域中时，控制器180能够调整在图形对象300附近的聚焦。
例如，如图3B所例示的，当对在预览图像290上显示的图形对象中的任一个图形对象300(例如，Private)施加了触摸时，控制器180能够调整在被施加了触摸的图形对象300附近的聚焦。此外，如上所述，控制器180能够利用聚焦调整功能对预览图像290上显示的图形对象中的任一个自动地调整聚焦。
然后，执行在显示单元151上显示指示存在与被施加了触摸的图形对象300相关联的信息的指示符400的处理(S230)。具体地，当确定了对显示有预览图像290的一个区域施加了触摸并且识别为一个目标对象的图形对象存在于该一个区域中时，控制器180能够在显示单元151上显示指示存在与该图形对象相关联的信息的指示符400。
此外，当通过自动聚焦调整功能对包含在预览图像290中的图形对象中的至少一个调整了聚焦时，控制器180能够在显示单元151上显示指示存在与经聚焦调整的图形对象相关联的信息的指示符400。
当被施加了触摸的图形对象300或调整了聚焦的图形对象存在与图形对象相关联的信息310时，指示符400起到通知存在关联信息310的作用。可以在显示单元151上以各种形式显示指示符400。具体地，如果指示符400具有与先前显示为与预览图像290交叠的与捕获功能相关联的图标(或图形对象)(例如，捕获按钮、设定按钮、重放按钮等)区分开的形式并且作为示例可以以图标、图像、条等的形式加以实现，则它可能具有任意形式。例如，参照图3B，可以在显示单元151的一侧显示指示符400，并且该形式可以具有条形。
此外，可以基于被施加了触摸的图形对象所在的位置或调整了聚焦的图形对象所在的位置来确定指示符400被显示所在的位置。例如，当被施加了触摸(或调整了聚焦)的图形对象位于其中显示有预览图像290的屏幕的一侧(或与一侧相邻的区域)时，可以在与所述一侧相对的另一侧显示指示符400。在另一示例中，当即使在被施加了触摸(或调整了聚焦)的图形对象位于其中显示有预览图像290的屏幕的一侧(或与一侧相邻的区域)时用于显示关联信息的一个区域也被固定在该一侧与被施加了触摸(调整了聚焦)的图形对象之间的空间(区域)时，可以在显示单元151的一侧显示指示符400。例如，当预设了用于显示关联信息的一个区域的尺寸时，控制器180能够确定用于显示所述一个区域的空间是基于所预设的一个区域的尺寸来固定的。
当在显示预览图像时对指示符400施加了预设类型的触摸时，执行与被施加了触摸(或调整了聚焦)的图形对象相关联的信息310的处理(S240)。具体地，控制器180能够在显示单元151的一侧显示指示符400。这里，当在显示单元151的整个显示区域上显示预览图像290上时，可以将指示符400显示为与预览图像290交叠。换句话说，即使当在显示单元151上显示指示符400时也可以维持预览图像290的显示。维持预览图像290的显示可以表示连续地执行图像捕获功能。随后，当对指示符400施加了预设类型的触摸时，控制器180能够在显示单元151上显示与被施加了触摸(或调整了聚焦)的图形对象相关联的信息310。
施加到指示符400以显示关联信息310的预设类型的触摸可以包括各种类型的触摸。例如，预设类型的触摸可以包括短(轻敲)触摸、长触摸、多触摸、拖曳触摸、轻击触摸、向内挤压触摸、向外挤压触摸、扫掠触摸和悬停触摸中的任一个。
在下文中，例如，将描述预设类型的触摸是从指示符400开始的拖曳触摸。控制器180能够基于施加到指示符400的预设类型的触摸来显示与被施加了触摸的图形对象相关联的信息310。具体地，可以在显示单元151的一侧显示指示符400，并且预设类型的触摸可以是从指示符400开始的拖曳触摸。控制器180能够基于施加到指示符400的拖曳触摸来显示与被施加了触摸的图形对象相关联的信息310。
可以在显示单元151的一个区域500中显示与图形对象相关联的信息310。可以基于施加到指示符400的拖曳触摸来设定该一个区域500。此外，可以基于施加到指示符400的拖曳触摸来改变该一个区域的尺寸。
例如，控制器180能够如图3C所例示的那样基于从指示符400开始的拖曳触摸来设定(显示)用于显示关联信息310的显示单元151的该一个区域500。此外，控制器180能够在设定区域500中显示与被施加了触摸的图形对象相关联的信息310。这里，该一个区域500的尺寸可以根据拖曳触摸而变化。
在另一示例中，控制器180能够基于施加到指示符400的预设类型的触摸(例如，长触摸或双触摸)来在显示单元151的一个区域500中显示关联信息。这里，当对指示符400施加了长触摸或双触摸时，控制器180能够将该一个区域500设定为具有预设尺寸，并且将关联信息310显示在该一个区域500中。
此外，当由从指示符400开始的拖曳触摸设定的该一个区域的尺寸小于预设尺寸时，控制器180能够将由拖曳触摸设定的该一个区域500的尺寸扩展至预设尺寸。此外，当对包含在预览图像中的图形对象中的至少一个图形对象300自动地调整了聚焦时，控制器180能够在显示单元上显示指示存在与调整了聚焦的图形对象相关联的信息的指示符400。此外，当对该指示符施加了预设类型的触摸时，控制器180能够在显示单元上显示与调整了聚焦的图形对象相关联的信息310。
当在显示关联信息310时对其中显示有预览图像的区域施加了触摸时，控制器180能够捕获预览图像290，并且以链接方式将所捕获的预览图像290和所显示的关联信息290存储在存储器170中。
换句话说，本发明的一个实施方式能够显示关于被施加了触摸的图形对象或对其自动地调整了聚焦的图形对象的关联信息。在下文中，将围绕被施加了触摸的图形对象进行描述。然而，围绕被施加了触摸的图形对象所描述的内容还可以以相同或相似的方式适用于围绕对其自动地调整了聚焦的图形对象所描述的内容。
如上所述，根据本发明的一个实施方式，能够在显示预览图像时显示与包含在预览图像中的图形对象中的任一个相关联的信息。因此，根据本发明的实施方式能够满足用户对于在执行图像捕获功能的同时接收与预览图像相关联的信息的需要。
在下文中，将参照附图更详细地描述在显示预览图像时显示与被施加了触摸的图形对象相关联的信息的各种方法。图4A(a)-图4A(d)、图4B(a)-图4B(c)、图4C(a)-图4C(d)、图5A(a)-图5A(d)、图5B(a)-图5B(c)、图6A(a)-图6A(c)和图6B(a)-图6B(b)是例示了用于提供与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息的方法的概念图，并且图7A(a)-图7A(c)、图7B(a)-图7B(c)和图7C(a)-图7C(c)是例示了当与预览图像中的被施加了触摸的图形对象相关联的信息包括多个类别时提供与多个类别中的任意类别相关联的信息的方法的概念图。
控制器180能够在显示单元151上显示通过摄像头接收到的预览图像290。然后，如图4A(a)所例示的，当对包含在预览图像290中的图形对象中的至少一个图形对象300(例如，Private)施加了触摸时，控制器180能够调整在被施加了触摸的图形对象300a附近的聚焦。
此外，如图4A(a)所例示的，控制器180能够在显示单元151上显示指示存在与被施加了触摸的图形对象300a相关联的信息的指示符400。图4A(a)例示了指示符400被显示在其中显示有预览图像290的区域的一侧。然而，指示符400不限于此，并且根据被施加了触摸的图形对象的位置或调整了聚焦的图形对象的位置显示在其不同侧。此外，可以按照诸如图像、图标或弹出菜单形状以及条形状的各种形状显示指示符400。
当在显示预览图像290时对指示符400施加了预设类型的触摸时，控制器180能够控制显示单元151显示与被施加了触摸的图形对象相关联的信息310。具体地，控制器180能够基于施加到指示符400的预设类型的触摸在显示单元151的一个区域500中显示与被施加了触摸的图形对象300a相关联的信息310a。
例如，如图4A(b)所例示的，控制器180能够基于施加到在显示单元151的一侧显示的指示符400的拖曳触摸将关联信息310显示在显示单元151的一个区域500中。这里，该一个区域500的尺寸可以基于施加到指示符400的拖曳触摸而变化。此外，预览图像290的一部分的显示可能受与该一个区域500对应的尺寸限制，因为该一个区域500与预览图像290交叠。当从指示符400开始的拖曳触摸从一侧向另一侧延伸并且该一个区域500与其中显示有预览图像290的整个区域交叠时，可以限制预览图像290的显示。另外，控制器180能够将该一个区域500的背景设定为透明的以显示预览图像290。而且，控制器180能够改变关联信息的显示位置以将关联信息显示在被施加了触摸(或调整了聚焦)的图形对象附近的该一个区域500中。
当根据再次施加到位于另一侧的指示符400的拖曳触摸减小该一个区域500的尺寸时，该一个区域500的背景在成为透明的之前可以被恢复。具体地，当在该一个区域500被设定为显示单元151的整个区域时对指示符400施加了拖曳触摸时，控制器180能够减小一个区域500的尺寸。此外，当该一个区域500的尺寸减小时(当该一个区域500不与其中显示有预览图像290的整个区域交叠时)，控制器180能够将该一个区域500的背景恢复成为透明的之前的状态，并且将关联信息的显示位置恢复为被改变之前的状态。
此外，如图4A(c)所例示的，当显示关联信息310a时可以对包含在预览图像290中的图形对象当中的与被施加了触摸的图形对象300a不同的图形对象300b(例如，schools)施加触摸。在这种情况下，控制器180能够调整在被施加了触摸的不同的图形对象300b附近的聚焦。此外，可以在显示单元151上显示与不同的图形对象300b相关联的信息310b。这里，例如，假定与图形对象300a相关联的信息310a是第一信息，并且与不同的图形对象300b相关联的信息310b是第二信息。当在一个区域500中显示第一信息310a时对不同的图形对象300b施加了触摸时，控制器180能够显示与不同的图形对象300b相关联的第二信息310b而不是在该一个区域500中显示的第一信息310a。
而且，如图4A(d)所例示的，当对不同的图形对象300b施加了触摸并且显示了信息310b时，控制器180能够显示与和图形对象相关联的信息310a的显示功能链接的图标320a。此外，当对不同的图形对象300b施加了触摸时，控制器180能够维持在先前被施加了触摸的图形对象300a附近显示的轮廓的显示。这里，当对包含在预览图像290中的图形对象中的任一个施加了触摸或自动地调整了聚焦时，可以在被施加了触摸(或调整了聚焦)的图形对象附近显示轮廓。轮廓执行引导以标识出预览图像290上的被施加了触摸或调整了聚焦的图形对象的作用。当对包含在预览图像290中的多个图形对象施加了触摸时，控制器180能够显示被施加了触摸的各个图形对象的轮廓。
可以依赖于被施加了触摸(或调整了聚焦)的图形对象而显示轮廓。具体地，当设置有摄像头的机身移动时，可以改变在显示单元151上显示的预览图像290，并且因此，包含在预览图像290中的图形对象可以移动或消失。另外，当图形对象移动时，依赖于该图形对象的移动，轮廓同时可以移动。当对轮廓施加触摸或与轮廓对应的图形对象从预览图像290消失时，轮廓可以消失。
与显示功能链接的图标320a可以起到存储(链接)与被施加了触摸的图形对象300相关联的信息310、并且基于用户请求在显示单元151上显示所存储的关联信息310的作用。此外，可以基于预设类型的触摸来移动或删除与显示功能链接的图标320a。控制器180能够基于与显示功能链接的图标320a的移动来执行各种功能。例如，控制器180能够在图标320a上显示与存储相关联的信息310或执行在有通信能力的装置之间的数据传输(将在下面参照图9A(a)-图9C(d)更详细地描述在有通信能力的装置之间传输数据的方法)。
将参照图4B(a)-图4B(c)更详细地描述利用与显示功能相关联的图标来显示关联信息的方法。当对与第一信息310a的显示功能链接的图标320a施加了触摸时并且当如图4B(a)所例示的那样显示第二信息310b时，控制器180能够如图4B(b)所例示的那样在显示单元151的一个区域500中显示第一信息310a而不是第二信息310b。另外，与显示功能链接的图标320a的颜色可以与在被施加了触摸(或调整了聚焦)的图形对象300a附近显示的轮廓的颜色相同。因此，用户能够更容易地理解与显示功能相关联的图标与哪一个图形对象相关。
此外，当先前图形对象300a从预览图像消失时，与第一信息310a(其与该先前图形对象300a相关联)的显示功能链接的图标320a可以消失或照原样保持。此外，控制器180能够基于施加到与第一信息310a的显示功能链接的图标320a的触摸来显示与已被显示在一个区域500中的第二信息310b的显示功能链接的图标320b。例如，当与第一信息310a的显示功能链接的图标是第一图标320a时，控制器180能够基于施加到第一图标320a的触摸来显示与第一图标320a不同的与第二信息310b的显示功能链接的第二图标320b。
然后，当如图4B(b)所例示的那样对第二图标320b施加了触摸时，控制器180能够如图4B(c)所例示的那样在显示单元151的一个区域500中显示与第二图标320b链接(存储)的第二信息310b。此外，已经在图4A(a)-图4B(c)中描述了与显示功能链接的图标320(例如，图标320a和/或320b)是当显示与被施加了触摸的图形对象相关联的信息时基于所选择的不同的图形对象320(图4A(c))或施加到先前显示的图标的触摸(图4B(a))来显示的。然而，不限于此，并且能够以各种方式显示图标320。例如，当在图4A(a)中对图形对象300施加了触摸时，在图4A(b)的步骤中可以连同指示符400一起显示或基于施加到指示符400的预设类型的触摸(例如，拖曳触摸)显示与图形对象的显示功能相关联的图标320。此外，可以将与图形对象相关联的信息理解为包括与显示功能链接的图标。
例如，当对包含在预览图像290中的图形对象中的至少一个图形对象300a施加了触摸时，指示与被施加了触摸的图形对象300a相关联的信息310a的指示符400被显示，如图4C(a)所例示。然后，控制器180能够基于施加到指示符400的预设类型的触摸来显示与被施加了触摸的图形对象相关联的信息310a。此外，如图4C(b)所例示的，控制器180能够基于施加到指示符400的预设类型的触摸来显示与和被施加了触摸的图形对象相关联的信息310a的显示功能链接的图标320a(第一图标)。
此外，如图4C(c)所例示的，当对与先前被施加了触摸的图形对象300a不同的图形对象300b施加了触摸时，控制器180能够显示与该不同的图形对象相关联的信息310b，并且显示与和该不同的图形对象相关联的信息310b的显示功能链接的图标320b(第二图标)。
然后，如图4C(d)所例示的，当一个区域500基于施加到指示符400的预设类型的触摸而消失时，控制器180能够限制第一图标320a和第二图标320b的显示。这里，用于使得该一个区域能够消失的预设类型的触摸可以包括从指示符开始的拖曳触摸、施加到指示符的双触摸、对预览图像中的不被识别为图形对象的区域的触摸等。
然后，指示符400可以基于经过预设时间段而消失。这里，当对指示符400施加了预设类型的触摸以在经过预设时间段之前在显示单元151的一个区域500中显示关联信息时，控制器180能够再次显示第一图标320a和第二图标320b。
参照图5A(a)-图5B(c)，将更详细地描述对用于利用关联信息来显示关联信息的图标施加预设类型的触摸的方法。如图5A(a)所例示的，在显示单元151上显示了预览图像290、与被施加了触摸的图形对象300a、300b相关联的信息310a、310b中的任一个信息310b以及与关联的信息310a、310b的显示功能链接的图标320a、320b。这里，控制器180能够基于如图5A(a)所例示的那样施加到与显示功能链接的图标320b的预设类型的触摸来显示用于删除被施加了触摸的图标320b以如图5A(b)所例示的那样与被施加了触摸的图标320b交叠的图标322。例如，该预设类型的触摸可以包括长触摸、双触摸等。此外，当对与显示功能的图标320a、320b施加了扫掠触摸时，控制器180能够甚至在不用另外显示用于删除的图标322的情况下删除图标320a、320b。
换句话说，当对用于删除的图标322施加了触摸时，控制器180能够删除如图5A(b)所例示的图标320b。另外，当在显示信息310b时对用于删除的图标322施加了触摸时，可以在显示单元151的一个区域500中显示与不同的图形对象相关联的信息310a。
此外，如图5A(c)所例示的，当在图标322与利用图5A(a)和图5A(b)的前面方法与显示功能链接的图标320a交叠时对用于删除的图标322施加了触摸时，控制器180能够删除图标320a。此外，控制器180能够基于用于利用关联信息的图标320a的删除来限制在显示单元151的一个区域500中显示的关联信息310a的显示。这里，当不存在要在显示单元151的一个区域500中显示的关联信息时，控制器180能够限制该一个区域500和该指示符400的显示。
在图5B(a)-图5B(c)中例示了利用与图5A(a)-图5A(d)的前面方法不同的方法来删除图标320或显示与图标320链接的信息310的方法。如图5B(a)所例示的，控制器180能够显示用于基于施加到与信息的显示功能链接的图标320a、320b中的任一个图标320b的触摸以及从施加的触摸延伸的拖曳触摸来执行删除功能的图标324。然后，当从用于执行删除功能的图标324解除(终止)了拖曳触摸时，控制器180能够删除如图5B(b)所例示的被施加了拖曳触摸的图标320b。
接下来，当从指示符400和显示单元151的一个区域500中的至少一个解除拖曳触摸时，控制器180能够如图5B(c)所例示的那样在一个区域500中显示与被施加了拖曳触摸的任一个图标320b链接的信息310b。此外，即使在图4A(a)至图5B(c)中对两个图形对象施加了触摸，它也不限于此，并且还可以以相同或相似的方式应用前面描述，而不约束被施加了触摸的图形对象的数量。
此外，在图4A(a)至图5B(c)中当在包含在预览图像中的图形对象是文本时对文本的任一个单词施加了触摸时将被施加了触摸的单词作为一个图形对象来处理的方法已作为示例被描述。
在下文中，将参照附图更详细地描述当包含在预览图像中的图形对象是文本时通过不同方案来选择(识别)任一个图形的方法。控制器180能够通过各种触摸方案来识别图形对象。例如，如图4A(a)至图5B(c)所例示的，当对包含在预览图像290中的文本的任一个单词施加了触摸时，控制器180能够选择被施加了触摸的单词作为一个图形对象。
在另一示例中，当包含在预览图像290中的图形对象是文本时，控制器180能够基于施加到该文本的拖曳触摸的轨迹来选择该文本的至少一部分作为图形对象300。即使包含在预览图像290中的图形对象不是文本，当对包含在预览图像290中的图形对象施加了拖曳触摸时，控制器180也能够选择与拖曳触摸的轨迹交叠的至少一个图形对象。
如图6A(a)所例示的，当对包含在预览图像290中的文本施加了拖曳触摸时，控制器180能够基于施加到文本的拖曳触摸的轨迹来选择文本的至少一部分。这里，可以如图6A(b)所例示的那样以包括与拖曳触摸的轨迹交叠的文本(例如，“He didn't know that”)的句子(例如，“He didn't know that she was upset.”)为单位来选择(确定)文本300的至少部分。
此外，可以仅利用与拖曳触摸的轨迹交叠的文本(例如，“He didn't know that”)确定文本300的至少部分。换句话说，是仅利用与拖曳触摸的轨迹交叠的文本来确定图形对象还是利用包括交叠文本的句子来确定图形对象可以遵循用户设定或是在控制器的控制之下确定的。
然后，如图6A(b)所示例，当选择了包含在预览图像290中的图形对象300时，控制器180能够显示指示存在与所选择的图形对象边框300相关联的信息的指示符400。当如图6A(b)所例示的那样对指示符400施加预设类型的触摸时，控制器180能够如图6A(c)所例示的那样在显示单元151上显示与所选择的图形对象相关联的信息310。这里，当所选择的图形对象300是句子时，关联信息310可以是针对句子的翻译信息。
图6B(a)-图6B(b)例示了其中文本的至少一部分基于拖曳触摸的轨迹而被选择为图形对象的另一示例。控制器180能够基于施加到文本的拖曳触摸的轨迹来选择文本的至少一部分作为图形对象300。例如，如图6B(a)所例示的，当拖曳触摸的轨迹与文本中的“He”和“How”交叠时，选择为图形对象的文本300的至少一部分可以是包括“He”和“How”的句子(例如，“He didn't know that she was upset.”和“How come？”)。
在另一示例中，如图6B(b)所例示的，当施加到文本的拖曳触摸的轨迹形成闭合环路时，选择为图形对象的文本300的至少一部分可以是包括与闭合环路和由该闭合环路形成的区域中的至少一个交叠的文本的句子。
然后，当文本300的至少一部分是从包含在预览图像290中的图形对象中选择的时，指示符400指示存在与文本300的至少一部分相关联的信息。利用指示符400来显示关联信息的方法将由图4A(a)至图4C(d)的较早描述取代。
如上所述，当对包含在预览图像中的图形对象中的至少一个施加了触摸时，本发明的一个实施方式显示与被施加了触摸的该至少一个图形对象相关联的信息。此外，本发明的一个实施方式能够显示与和图形对象相关联的信息的显示功能链接的图标，并且通过图标来显示关联信息或删除图标。因此，本发明的实施方式能够根据用户请求来显示多个关联信息而不用显示仅一个关联信息，从而提供用于提供关联信息的最佳用户界面。
在下文中，将参照附图更详细地描述当与被施加了触摸的图形对象相关联的信息包括至少一个类别时显示关联信息的方法。图7A(a)-图7A(c)、图7B(a)-图7B(c)和图7C(a)-图7C(c)是例示了当与预览图像中的被施加了触摸的图形对象相关联的信息包括多个类别时提供与多个类别中的任意类别相关联的信息的方法的概念图。
首先，如图7A(a)所例示的，当对包含在预览图像290中的图形对象中的至少一个图形对象300施加了触摸时，控制器180能够显示指示存在与被施加了触摸的图形对象300相关联的信息的指示符400。这里，控制器180能够如图7A(b)所示的那样在指示符400上显示与和被施加了触摸的图形对象300相关联的信息310对应的类别信息410。类别信息410起到通知与图形对象相关联的信息310属于哪一种类型的作用。换句话说，类别信息410可以是表示与被施加了触摸的图形对象相关联的信息的单词。类别信息410可以与和图形对象相关联的信息310链接。
可以通过各种方案在指示符400上显示类别信息410。例如，当显示指示符400时，可以在指示符400上自动地显示类别信息410。在另一示例中，可以基于施加到指示符400的触摸在指示符400上显示类别信息410。此外，控制器180在对指示符400施加了触摸时在指示符400上显示类别信息410，并且在施加了从施加到指示符400的触摸延伸的触摸输入时在显示单元151的一个区域500中显示与在指示符400上显示的类别信息410对应的关联信息310。
然后，当对指示符400施加了预设类型的触摸时，控制器180能够在显示单元151上显示与被施加了触摸(或调整了聚焦)的图形对象相关联的信息310。这里，与被施加了触摸的图形对象相关联的信息310可以是与在指示符400上显示的类别信息410对应的信息。
在另一示例中，可以继在指示符400上显示类别信息410之后基于施加到指示符400的预设类型的触摸(例如，长触摸、双触摸、拖曳触摸)在显示单元151的一个区域500中显示与被施加了触摸的图形对象相关联的信息310。
此外，控制器180能够如图7A(c)所示的那样显示用于基于与被施加了触摸的图形对象相关联的信息310的显示来利用关联信息的图标320。可以在图标320上显示类别信息410。此外，与被施加了触摸的图形对象相关联的信息310可以包括多个类别。具体地，与多个类别对应的多个关联信息可以与被施加了触摸的任一个图形对象链接。在这种情况下，可以如图7B(b)所例示的那样在指示符400上显示多个类别中的任意类别。此外，如图7B(a)所示的，可以在指示符400上显示指示被施加了触摸的图形对象与与多个类别对应的多个关联信息链接的图标420。
然后，控制器180能够基于施加到指示符400的预设类型的触摸来将在指示符400上显示的类别信息410a改变为另一类别信息410b。预设类型的触摸可以包括施加到指示符400的短触摸、扫掠触摸等。
换句话说，当对指示符400施加了预设类型的触摸时，控制器180能够使得在指示符400上显示的任一个类别信息410a能够被示出或将它改变为如图7B(b)所例示的另一类别信息410b。然后，当对指示符400施加了预设类型的触摸时，控制器180能够如图7B(c)所例示的那样在显示单元151的一个区域500中显示与在指示符400上显示的类别信息410b对应的信息310b。
在另一示例中，当与多个类别对应的关联信息与包含在预览图像290中的图形对象当中的被施加了触摸的图形对象300链接时，可以如图7C(a)所例示的那样在指示符400上同时显示多个类别信息410a、410b。然后，当对在指示符400上显示的多个类别信息中的任一个施加了预设类型的触摸时，控制器180能够在显示单元上显示与被施加了触摸的任一个对应的关联信息。
例如，当施加了从在指示符400上显示的多个类别信息当中的第一类别信息410a(例如，词典)开始的拖曳触摸时，控制器180能够如图7C(b)所例示的那样在显示单元151上显示与第一类别信息410a对应的关联信息310a。此外，控制器180能够显示与信息310a的显示功能链接的图标320a，并且基于施加的从指示符400(第一类别信息410a)开始的拖曳触摸将第一类别信息410a显示在图标320a上。
在另一示例中，当施加了从在指示符400上显示的多个类别信息当中的第二类别信息410b(例如，搜索)开始的拖曳触摸时，控制器180能够如图7C(c)所例示的那样在显示单元151的一个区域500中显示与第二类别信息410b对应的关联信息310b。此外，控制器180能够显示与信息310b的显示功能链接的图标320b，并且基于施加的从指示符400(第二类别信息410b)开始的拖曳触摸将第二类别信息410b显示在图标320b上。
此外，可以在其中关联信息310被显示以及显示在指示符400上的显示单元151的一个区域500上显示类别信息410。此外，根据本发明的实施方式，在显示单元151上显示的预览图像290可以随着移动设置有摄像头的机身而改变。被施加了触摸的图形对象300或调整了聚焦的图形对象可以根据预览图像290的改变而消失。另外，可以维持已被显示的关联信息310的显示或可以在显示单元151的一个区域500中显示用于通知选择新的图形对象的必要性的通知信息。当执行自动聚焦调整功能以将聚焦调整到经改变的预览图像290中的新的图形对象时，可以在显示单元151的一个区域500中显示与新的图形对象相关联的信息。
在另一示例中，当被施加了触摸(或调整了聚焦)的图形对象根据预览图像290的改变而消失时，指示符400、关联信息310和显示单元151的一个区域500可能消失。这里，如果显示了与关联信息310的显示功能链接的图标320，则图标320的显示可以被照原样维持或根据指示符400的消失同时消失。
在下文中，将参照附图更详细地描述利用与包含在预览图像中的图形对象当中的被施加了触摸的图形对象相关联的应用来提供与被施加了触摸的图形对象相关联的信息的方法。图8A(a)-图8A(c)和图8B(a)-图8B(d)是例示了确定与预览图像中的被施加了触摸的图形对象相关联的应用、并且利用该应用来提供与图形对象相关联的信息的方法的概念图。
如图8A(a)所例示的，预览图像290可以包括至少一个图形对象。这里，当对任一个图形对象300施加了触摸时，控制器180能够调整在被施加了触摸的图形对象300附近的聚焦。此外，如图8A(b)所例示的，控制器180能够显示指示存在与被施加了触摸的图形对象300相关联的信息的指示符400。此外，当被触摸的图形对象300被确定为包括建筑物、地点名称、街道名称等的符号或能够确定地点的地形时，控制器180能够基于确定结果来确定相关应用。例如，当被触摸图形对象300被确定为建筑物或地点名称时，控制器180能够将地图相关应用确定为与被施加了触摸的图形对象相关联的应用。这里，地图相关应用可以提供包括地点信息、当前位置与特定地点之间的路径信息等的详细信息。
控制器180能够基于被触摸图形对象300来确定关联应用，并且将从所确定的应用提供的信息作为与被施加了触摸的图形对象相关联的信息310来提供。换句话说，从应用提供的信息可以是相关应用的执行画面。具体地，当对指示符400施加了预设类型的触摸时，控制器180能够在显示单元151上显示所确定的应用的执行画面。
在这种情况下，可以在显示单元151的一个区域中显示应用的执行画面，并且可以基于从施加到指示符400的触摸延伸的拖曳触摸来改变应用的执行画面的尺寸。具体地，可以基于从施加到指示符400的触摸延伸的拖曳触摸来改变显示单元151的一个区域500的尺寸。此外，可以在显示单元151的一个区域500中显示应用的执行画面。因此，可以基于从施加到指示符400的触摸延伸的拖曳触摸来改变应用的执行画面的尺寸。
在另一示例中，控制器180能够基于施加到指示符400的预设类型的触摸(例如，长触摸或双触摸)在显示单元151的一个区域500中显示应用的执行画面。另外，当对指示符400施加了长触摸或双触摸时，控制器180能够将该一个区域500设定为具有预设尺寸，并且在该一个区域500中显示应用的执行画面。
此外，当由从指示符400开始的拖曳触摸设定的一个区域500的尺寸小于预设尺寸时，控制器180能够将由拖曳触摸设定的一个区域500的尺寸扩展至预设尺寸。可以如图8A(b)所例示的那样在指示符400上显示指示存在从相关应用提供的详细信息的类别信息410。
例如，当显示了指示符400时，可以在指示符400上自动地显示类别信息410。此外，可以基于施加到指示符400的触摸来显示指示符400。这里，类别信息410可以是代表性关键词、相关应用名称等。
然后，如图8A(c)所例示的，控制器180能够基于施加到指示符400的预设类型的触摸在显示单元151的一个区域500中显示与类别信息410对应的执行画面(关联信息310)。还能够如图8A(c)所示的那样显示图标320。此外，如图8B(a)所例示的，可以在预览图像290上显示地图相关图像。在这种情况下，控制器180能够基于预览图像290、预览图像中的被施加了触摸的图形对象300以及在没有触摸情况下对其自动地应用了聚焦的图形对象300中的至少一个来确定相关应用。
例如，图8B(a)例示了与地铁地图对应的图像被显示为预览图像290，并且对包含在预览图像290中的图形对象当中的与地铁站对应的区域施加了触摸。在这种情况下，控制器180能够基于预览图像290和被施加了触摸的图形对象300a来确定相关应用(例如，地图相关应用)。
然后，控制器180能够在显示单元上显示指示存在与被施加了触摸(或自动地调整了聚焦)的图形对象300a相关联的信息的指示符400。此外，控制器180能够显示与和指示符400相关联的信息对应的类别信息410a。而且，控制器180能够如图8B(b)所示的那样在与关联信息的显示功能链接的图标320a上显示类别信息410a。
然后，当如图8B(b)所例示的那样对与被施加了触摸的图形对象300a不同的图形对象300b施加了触摸时，控制器180能够如图8B(d)所例示的那样在指示符400上显示与和不同的图形对象300b相关联的信息对应的类别信息410b。这里，当确定了在预览图像290上存在被施加了触摸的两个或更多个图形对象时，相关应用可以利用与被施加了触摸的图形对象相关联的信息310a、310b来提供不同的信息。例如，当关联应用是地图相关应用并且被施加了触摸的图形对象是与至少两个或更多个地点有关的图形对象时，相关应用可以如图8B(c)所示的那样利用与至少两个或更多个地点相关联的图形对象来提供路径信息。
控制器180能够如图8B(c)所例示的那样基于用于改变在指示符400上显示的类别信息的预设类型的触摸(例如，短触摸或扫掠触摸)在指示符400上显示指示存在路径信息的类别信息410c。然后，当对显示有与路径信息对应的类别信息410c的指示符400施加了预设类型的触摸(例如，拖曳触摸)时，控制器180能够在显示单元151上显示与类别信息410c对应的应用的执行画面310c。可以在应用的执行画面310c上显示利用与预览图像290上的被施加了触摸的至少两个图形对象相关联的信息310a、310b所提取的路径信息。此外，控制器180能够基于显示在显示单元151上的应用的执行画面310c来显示与应用的执行画面310c的显示功能链接的图标320c。
如上所述，本发明的一个实施方式能够基于预览图像和被施加了触摸的图形对象中的至少一个来确定相关应用，并且将所确定的应用的执行画面显示为关联信息。因此，用户能够在同时执行图像捕获功能的同时通过相关应用的执行画面来驱动应用，并且获得从该应用提供的信息，从而增强方便。
在下文中，将参照附图更详细地描述当被施加了触摸(或自动地调整了聚焦)的图形对象是有通信能力的装置时利用装置相关信息来执行与装置的通信的方法。图9A(a)-图9A(d)、图9B(a)-图9B(d)和图9C(a)-图9C(d)是例示了当与预览图像中的被施加了触摸的图形对象对应的被摄体是有通信能力的装置时执行与该装置的通信的方法的概念图。
首先，根据本发明的实施方式的移动终端100可以包括执行与至少一个外部装置的无线通信的无线通信单元110。控制器180能够确定触摸被施加到包含在预览图像中的图形对象中的至少一个，并且与被施加了触摸的图形对象对应的被摄体是能够与无线通信单元110通信的装置。例如，能够基于识别为被施加了触摸的图形对象的形状、利用无线通信单元110的通信历史、是否存在被摄体对于从无线通信单元110发送的信号的响应等来确定它是否是有通信能力的装置。
当如图9A(a)所例示的那样对包含在预览图像290中的图形对象中的至少一个施加了触摸时，控制器180能够调整在被施加了触摸的图形对象300附近的聚焦。此外，如图9A(b)所例示的，控制器180能够显示指示存在与被施加了触摸的图形对象300相关联的信息的指示符400。
当与被施加了触摸的图形对象300对应的被摄体是有通信能力的装置时，与被施加了触摸的图形对象相关联的信息310可以包括该装置的详细信息、执行与装置300的通信功能所需要的信息、当正在装置上再现图像时与图像相关联的信息、以及用于选择是否执行与装置的无线通信的信息等。
例如，控制器180能够如图9A(b)所例示的那样在指示符400上显示通知存在与装置相关联的信息的类别信息410。例如，通信功能可以是遥控功能。此外，与装置相关联的信息可以是用于选择是否执行与装置300的无线通信的信息。
然后，控制器180能够如图9A(c)所例示的那样基于施加到指示符400的预设类型的触摸来显示用于选择是否执行与装置300的无线通信的信息。然后，当基于用户的选择执行了通信功能(例如，遥控功能)时，控制器180能够如图9A(d)所例示的那样在显示单元151的一个区域500中显示与通信功能(例如，遥控功能)相关联的图标310。
此外，当从有通信能力的装置300a显示(再现)图像时，控制器180能够通过无线通信单元110从装置300a接收与图像相关联的信息。这里，与图像相关联的信息可以包括在有通信能力的装置300a上显示的图像、与该图像相关联的详细信息、与该图像的显示功能链接的图标等。
控制器180能够在与装置300a不同的装置300b上显示在有通信能力的装置上显示的图像。具体地，当预览图像中的被施加了触摸的图形对象300a是有通信能力的装置并且在装置300a上显示了图像时，控制器180能够执行与装置300a的通信功能(或通信连接)以接收所显示的图像。
然后，控制器180能够在被施加了触摸的图形对象300a上显示指示存在与图像相关联的信息的指示符400。此外，控制器180能够基于施加到指示符400的预设类型的触摸来显示与图像相关联的信息310a。此外，控制器180能够基于施加到指示符400的预设类型的触摸(拖曳触摸)来显示与图像的显示功能链接的图标320a。在另一示例中，控制器180能够在指示符400上基于与预设类型的触摸不同的预设类型的触摸(例如，短触摸、长触摸、双触摸、扫掠触摸等)来显示图标320a。
例如，当与被施加了触摸的图形对象300a对应的从有通信能力的装置显示的图像是视频时，控制器180能够从该装置接收视频，并且如图9B(a)所例示的那样显示指示存在与视频相关联的信息的指示符400。此外，控制器180能够显示与视频的显示功能链接的图标320a。
此外，控制器180能够如图9B(b)所例示的那样基于施加到指示符400的预设类型的触摸来显示与图像相关联的信息310。然后，当对包含在预览图像中的图形对象当中的与与有通信能力的装置300a不同的装置对应的图形对象300b施加了预设类型的触摸时，控制器180能够执行与不同装置300b的通信功能以在不同装置300b上显示图像。
预设类型的触摸例如可以是从与正从包含在预览图像290中的图形对象当中的与与有通信能力的装置300a不同的装置对应的图形对象300b解除(或终止)的图像的显示功能链接的图标320开始的拖曳触摸。这里，不同装置300b是有通信能力的装置。具体地，控制器180能够向不同装置300b发送图像以基于施加到用于利用与图像相关联的信息的图标320的预设类型的触摸来将图像显示在与与被施加了触摸的图形对象对应的装置300a(上面已显示有图像的装置)不同的装置300b上。
参照图9B(b)，可以在从其终止了从图标320开始的拖曳触摸的位置处显示与不同装置300b对应的图形对象。在这种情况下，如图9B(c)所例示的，控制器180能够在显示单元151的一个区域500中显示用于选择是否在不同装置300b上显示图像的信息310b。
然后，如图9B(d)所例示的，控制器180能够执行与不同装置的通信功能以基于用户的选择将图像显示在不同装置310b上。例如，控制器180能够将图像发送到不同装置310b以将图像显示在不同装置310b上。此外，控制器180能够执行用于控制不同装置310b控制在不同装置310b上显示的图像的遥控功能(通信功能)。例如，如图9B(d)所例示的，控制器180能够在用于显示关联信息的区域500中显示用于控制不同装置300b的图标310b。
此外，当对与图像的显示功能链接的图标320施加了触摸时，控制器180能够在显示单元151的一个区域500中显示图像。当删除了用于利用关联信息的图标320a、320b或用于显示关联信息的区域500根据图4C(a)至图5B(c)中所描述的方法消失时，控制器180能够终止与有通信能力的装置的通信功能。
此外，可以在预览图像290上显示在有通信能力的装置上显示的支付画面信息的登录画面信息的一部分。参照图9C(a)，可以在预览图像290上显示在有通信能力的装置上显示的登录画面信息的一部分。这里，当在预览图像中显示的图形对象当中的被施加了触摸的图形对象被确定为与登录处理相关联的对象时，控制器180能够如图9C(b)所示的那样显示指示存在与图形对象300相关联的信息的指示符400。
这里，与图形对象相关联的信息310可以是用于通知能够利用显示单元151来执行有通信能力的装置的登录的信息。此外，可以在显示单元151中设置用于识别用户的指纹的指纹传感器，并且控制器180能够使用通过指纹传感器感测到的指纹信息作为认证方法。
换句话说，当对指示符400施加了预设类型的触摸时，控制器180能够显示用于显示关联信息的区域500。另外，控制器180能够激活指纹传感器以识别用户的施加到区域500的指纹。此外，可以在区域500中显示用于指导指纹的输入的通知信息310。
然后，当在区域500中识别了用户的指纹时，控制器180能够将经识别的指纹信息发送给有通信能力的装置。当所接收到的指纹信息和预存储的指纹信息匹配时，有通信能力的装置可以执行如图9C(d)所例示的登录处理。此外，如图9C(c)所例示的，控制器180能够显示用于利用与登录相关联的信息的图标320。这里，与登录相关联的信息可以是预存储的指纹信息或登录所需要的信息(例如，ID、密码)。
这里，当从用于显示关联信息的区域500和被施加了触摸的图形对象300中的至少一个解除了从施加到图标320的触摸延伸的拖曳触摸时，控制器180能够发送登录到有通信能力的装置以请求登录所需要的信息。此外，当在预览图像290上显示了支付画面信息的一部分时，图9C(a)-图9C(d)的前面方法可以以相同或相似的方式应用。
如上所述，当预览图像被显示为执行与有通信能力的装置的通信时，本发明的实施方式能够对包含在预览图像中的与有通信能力的装置对应的图形对象施加触摸。因此，用户可以利用预览图像更容易地选择他或她期望的装置，并且接收能够在显示了所选择的装置和预览图像时执行的优化GUI。
在下文中，将参照附图更详细地描述利用当显示了与包含在预览图像中的图形对象相关联的信息时捕获的图像的方法。(a)-图10A(c)、图10B(a)-图10B(b)和图10C(a)-图10C(b)是例示了利用当提供了与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息时捕获的图像的方法的概念图。
首先，如图10A(a)所例示的，在显示单元151上显示了预览图像290以及与该预览图像中的被施加了触摸的图形对象300相关联的信息310。这里，控制器180能够基于施加到与图像捕获功能链接的图标600的触摸来捕获图像捕获操作。在这种情况下，控制器180能够将预览图像290的原始图像292以及与该原始图像连接和关联信息310链接的数据中的至少一个存储在存储器170中。
例如，如图10A(b)所例示的，可以在显示单元151上显示与和存储在存储器170中的原始图像相关联的信息310链接的文件。当显示链接文件时，可以在显示单元151上显示原始图像292以及指示存在关联信息的指示符400。控制器180能够如图10A(c)所示的那样基于施加到指示符400的预设类型的触摸来显示已在图像捕获期间显示的关联信息310。
此外，可以如图10B(a)-图10B(b)所例示的那样在显示单元151上显示存储在存储器中的图像的缩略图。这里，如图10A(a)所例示的，当在显示关联信息时执行了捕获功能时，控制器180能够将与原始图像292和关联信息310链接的文件存储在存储器170中。可以按照其中原始图像292的缩略图292a以及指示存在关联信息的指示符400如图10B(a)-图10B(b)所例示的那样彼此交叠的形状显示与原始图像292和关联信息310链接的文件的缩略图。
当如图10B(a)所例示的那样对原始图像的缩略图292a施加了触摸时，控制器180能够以放大方式显示原始图像292，并且在显示单元的一侧显示指示存储关联信息的指示符400。在这种状态下，当对指示符400施加了预设类型的触摸时，可以像以上所描述的那样在显示单元151的一个区域500中显示与原始图像292相关联的信息。
在另一示例中，当如图10B(b)所例示的那样对与原始图像的缩略图292a交叠的指示符400施加了触摸时，控制器180能够在同时以放大方式显示原始图像292的同时在显示单元151的一个区域500中立即显示与原始图像链接的关联信息310。
此外，控制器180能够基于用户请求来发送(共享)与原始图像和关联信息310链接的文件。具体地，控制器180能够基于用于发送在显示与原始图像和关联信息310链接的文件时选择的文件的按钮700的选择来发送文件。
这里，控制器180能够根据关联信息310是否被显示在显示单元151上来以不同的方式控制所发送的图像(数据)。例如，当如图10C(a)所例示的那样不在显示单元151上显示关联信息310时选择了按钮700时，控制器180能够控制来仅发送原始图像292。在另一示例中，当如图10C(b)所例示的那样在显示单元151上显示关联信息310时选择了按钮700时，控制器180能够控制来发送与原始图像和关联信息310链接的文件292b。通过这样的配置，当用户向另一人发送图像时，可以同时发送与包含在该图像中的图形对象相关联的信息，从而以各种方式发送图像。
在下文中，将参照附图更详细地描述存储或利用与在预览图像上显示的图形对象当中的被施加了触摸或自动地调整了聚焦的图形对象相关联的信息的方法。图11A(a)-图11A(c)、图11B(a)-图11B(d)、图11C(a)-图11C(c)和图11D(a)-图11D(d)是例示了利用与预览图像中的被施加了触摸或调整了聚焦的图形对象相关联的信息的方法的概念图。
一般而言，如图10A(a)所例示的，可以基于施加到与显示功能链接的图标600的触摸来捕获预览图像290。此外，当对上面显示有预览图像290的画面的一个区域施加了触摸时，根据本发明的实施方式的移动终端可以调整在被施加了触摸的区间附近的聚焦并且捕获预览图像。换句话说，控制器180能够仅利用一个触摸操作来执行聚焦调整功能和图像捕获功能。在这种情况下，可以在预览图像290上限制与图像捕获功能链接的图形对象(图标)的显示。
本发明的一个实施方式能够在对包含在预览图像290中的图形对象中的至少一个施加了触摸时调整在被施加了触摸的图形对象附近的聚焦，并且对于预览图像290执行图形捕获操作。这里，可以维持预览图像290的显示。此外，如图11A(a)所例示的，可以在预览图像290上显示指示存在与被施加了触摸的图形对象300相关联的信息的指示符400。
控制器180能够基于施加到指示符400的预设类型的触摸在显示单元151的一个区域500中显示与被施加了触摸的图形对象相关联的信息310。此外，控制器180能够在预览图像290和一个区域500中的至少一个上显示用于存储与被施加了触摸的图形对象相关联的信息310的图标610。当图标610被施加了触摸时，控制器180能够捕获在显示单元151上当前显示的预览图像290，并且以链接方式存储所捕获的图像和关联信息310。
在另一示例中，当在一个区域500中显示了关联信息310时，一个区域500可以如图11A(b)所例示的那样基于施加到指示符400的预设类型的触摸(例如，拖曳触摸)而消失。在这种情况下，如图11A(c)所例示的，控制器180能够捕获在显示单元151上当前显示的预览图像290，并且以链接方式存储所捕获的图像和关联信息310。
控制器180能够以链接方式存储所捕获的图像和关联信息310，并且然后控制显示单元151仅显示预览图像290。此外，控制器180能够如图11B(a)所示的那样在用于显示显示有关联信息的弹出窗口700a的一个区域500中显示按钮510a。具体地，当对能够显示弹出窗口的按钮510a施加了触摸时，控制器180能够显示如图11B(b)所示的弹出窗口700a。
弹出窗口700a可以执行显示与至少两个功能中的任一个对应的画面信息以在一个屏幕(一个显示单元)上显示与至少两个功能对应的画面信息的作用。换句话说，根据本发明的实施方式的移动终端可以执行用于利用弹出窗口700a同时执行至少两个功能的多任务处理。
根据实施方式，当如图11B(c)所示的那样显示预览图像290时可以在弹出窗口700a上显示被施加了触摸(或自动地调整了聚焦)的图形对象300的捕获图像。此外，可以在弹出窗口700a上显示用于搜索关联信息的web搜索功能的执行画面、用于发送或共享与预览图像和关联信息链接的文件的功能的执行画面等以及被施加了触摸的图形对象300的捕获图像。
可以移动弹出窗口700a并且可以根据用户请求改变其尺寸。具体地，当施加了从弹出窗口700a的一个区域(例如，上端部区域)开始的拖曳触摸时，控制器180能够移动弹出窗口700a。此外，控制器180能够基于施加的从700a的轮廓部分开始的拖曳触摸来改变弹出窗口700a的尺寸。
此外，如图11B(b)所示的，弹出窗口700a可以包括用于存储在弹出窗口上显示的画面信息的存储按钮710、用于在显示单元151上显示仅在弹出窗口上显示的画面信息的放大按钮708以及用于关闭弹出窗口的关闭按钮712中的至少一个。
另外，在下文中，将被施加了触摸(或调整了聚焦)的图形对象的捕获图像显示到弹出窗口700a的方法将作为示例被描述。当对包含在预览图像中的图形对象中的任一个施加了触摸或应用了聚焦时，控制器180能够提取被施加了触摸或调整了聚焦的图形对象以生成捕获图像。
然后，当对用于显示在一个区域500中显示的弹出窗口的按钮510施加了触摸时，控制器180能够显示弹出窗口700a，并且在弹出窗口700a上显示所生成的捕获图像。例如，如图11B(a)所例示的，当在一个区域500中显示了与被施加了触摸(或调整了聚焦)的图形对象300a相关联的信息310a时，控制器180能够感测施加到用于显示弹出窗口的按钮510a的触摸。控制器180能够基于施加到按钮510a的触摸来在显示单元151上显示包括被施加了触摸的图形对象300a的捕获图像的弹出窗口700a。
当在显示弹出窗口700a时对包含在预览图像中的图形对象当中的不同的图形对象300b施加了触摸时，控制器180能够如图11B(c)所示的那样在显示单元的一个区域500中显示与不同的图形对象300b相关联的信息310b。然后，当对用于显示在一个区域中显示的弹出窗口的按钮510a施加了触摸时，控制器180能够如图11B(d)所例示的那样显示包括不同的图形对象300b的捕获图像的弹出窗口700b。
这里，即使当显示了至少一个弹出窗口700a或弹出窗口700b时也连续地维持预览图像290的显示。此外，控制器180能够将与图形对象相关联的信息与弹出窗口链接。具体地，当显示了包括图形对象的捕获图像的弹出窗口时，控制器180能够将与图形对象相关联的信息链接到弹出窗口。换句话说，当对能够显示弹出窗口的按钮施加了触摸时，可以将与被施加了触摸(或调整了聚焦)的图形对象相关联的信息、图形对象的捕获图像以及与该图形对象相关联信息与所显示的弹出窗口链接。
然后，当对包含在弹出窗口700a或弹出窗口700b中的存储按钮(或与存储功能链接的图标)施加了触摸时，控制器180能够以链接方式将在弹出窗口上显示的捕获图像和关联信息存储在存储器单元中。此外，如图11B(d)所例示的，当显示了至少两个弹出窗口时，控制器180能够显示用于将包含在至少两个弹出窗口中的捕获图像以及与至少两个弹出窗口链接的关联信息存储在存储器单元中的按钮(或图标)620。
当如图11C(a)所例示的那样对按钮620施加了触摸时，控制器180能够将包含在与预览图像290交叠的至少两个弹出窗口700a、700b中的捕获图像以及与弹出窗口链接的关联信息310a、310b存储在存储器170中。此外，控制器180能够基于存储操作的执行来控制显示单元151以使得弹出窗口700a、弹出窗口700b、按钮620、指示符400和一个区域500中的至少一个能够消失。然后，可以如图11C(b)所例示的那样在显示单元151上显示仅预览图像290。
在图11C(c)中例示了其中以链接方式存储至少两个捕获图像和关联信息的画面。如上所述，当对用于将包含在至少两个弹出窗口中的捕获图像以及与至少两个弹出窗口链接的关联信息存储在存储器单元中的按钮620施加了触摸时，控制器180能够以链接方式存储被施加了触摸(或调整了聚焦)的图形对象300a、300b的捕获图像以及与图形对象相关联的信息。
此外，控制器180能够利用弹出窗口来改变在显示单元151的一个区域500中显示的关联信息。在图11D中显示了包括第一图形对象的捕获图像的第一弹出窗口700a和包括第二图形对象的捕获图像的第二弹出窗口700b。此外，在显示单元151的一个区域中显示了与第二图形对象相关联的信息310b。
控制器180能够在显示单元151的一个区域500中显示与至少两个弹出窗口当中的激活的弹出窗口链接的信息。这里，激活的弹出窗口可以是最近显示的弹出窗口、在显示了多个弹出窗口时最近被施加了触摸的弹出窗口等。
例如，在图11D中例示了根据图11B的方法最近生成了第二弹出窗口以激活第二弹出窗口700b。在这种情况下，如图11D(a)所例示的，控制器180能够使得经激活的第二弹出窗口700b能够与经去激活的第一弹出窗口700a交叠。此外，可以在显示单元151的一个区域500中显示与经激活的第二弹出窗口700b链接的关联信息310b。
这里，如图11D(a)所例示的，当对经去激活的第一弹出窗口700a施加了触摸或第一弹出窗口700a随着对其施加拖延触摸而移动时，控制器180能够激活第一弹出窗口700a。此外，如图11D(b)所例示的，可以随着第一弹出窗口700a被激活而显示与第一弹出窗口700a链接的信息310a而不是与第二弹出窗口700b链接的信息310b。
此外，当与在显示单元151的一个区域500中显示的关联信息310a链接的弹出窗口700a如图11D(b)所例示的那样消失时，控制器180能够如图11D(c)所例示的那样再激活先前激活的弹出窗口700b。此外，当先前激活的弹出窗口700b被再次激活时，与先前激活的弹出窗口700b链接的信息310b代替与已经在显示单元151的一个区域500中消失的弹出窗口700a链接的信息310a。此外，当在显示单元151上显示仅任一个弹出窗口700b时弹出窗口700b消失时，可以如图11D(d)所例示的那样在显示单元151上显示仅预览图像290。
如上所述，本发明能够利用包括被施加了触摸(或调整了聚焦)的图形对象的捕获图像的弹出窗口来改变在显示单元151上显示的信息。此外，本发明能够利用弹出窗口以链接方式存储包含在弹出窗口中的捕获图像和关联信息。用户可以使用包括捕获图像的弹出窗口来更直观地查找已由他自己或她自己选择(或对其自动地调整了聚焦)的图形对象，并且容易地以链接方式存储关联信息和捕获图像，从而增强方便。
如上所述，根据本发明的实施方式，本发明提供与由用户在执行图像捕获功能的同时在预览图像上触摸的图形对象相关联的信息。因此，本发明可以满足用户在同时执行图像捕获功能的同时接收关联信息的需要，而不用另外执行不同功能(例如，通过进入app图标执行的web搜索功能)以获得与图形对象相关联的信息。
此外，当与由用户触摸的图形对象相关联的信息包括多个类别时，本发明基于用户请求来提供与任一个类别对应的关联信息。因此，用户能够接收与他的或她的对于特定图形对象的期望类别对应的关联信息，从而增强方便。
此外，本发明利用与由用户触摸的图形对象相关联的信息来在同时执行图像捕获功能的同时执行应用功能。此外，本发明能够在一个画面上同时执行功能，而不用单独地执行图像捕获功能和应用功能。因此，本发明能够根据图像捕获功能利用与在预览图像上触摸的图形对象相关联的信息来执行应用功能，并且提供用于在一个画面上执行图像捕获功能和应用功能的新的用户界面。
此外，当与由用户触摸的图形对象对应的主体是有通信能力的装置时，本发明能够利用与该装置相关联的信息来执行与该装置的通信。因此，用户能够直观地选择通过设置有图像捕获功能的预览图像在视觉上看见的外部装置，并且执行与所选择的电子装置的通信，从而增强方便。
前面的本发明可以作为可由计算机读取的代码被实现在由程序编写的介质上。计算机可读介质可以包括其中存储有可由计算机系统读取的数据的所有种类的记录装置。计算机可读介质的示例可以包括硬盘驱动器(HDD)、固态盘(SSD)、ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置等，并且还包括以载波(例如，经由因特网的传输)实现的装置。另外，计算机可以包括终端的控制器180。因此，其详细描述不应该被解释为在所有方面为限制性的，而是被认为是例示性的。本发明的范围应该由对所附权利要求的合理解释来确定，并且落在本发明的等效范围内的所有改变被包括在本发明的范围中。

Claims (19)

1.一种移动终端，该移动终端包括：
无线通信单元，该无线通信单元被构造成无线地与至少一个其它终端通信；
摄像头；
显示单元，该显示单元被构造成显示通过所述摄像头接收到的预览图像；以及
控制器，该控制器被构造成：
接收施加到包括在所述预览图像中的第一图形对象的触摸，所述第一图形对象与外部装置相对应，
当所述触摸被施加到与所述外部装置相对应的所述第一图形对象时，调整在与所述外部装置相对应的所述第一图形对象附近的聚焦，
在所述显示单元上显示指示存在与所述第一图形对象相关联的第一信息的指示符，
接收在显示所述预览图像时施加到所述指示符的预设类型的触摸，并且
基于所述预设类型的触摸来显示与所述第一图形对象相关联的所述第一信息，
其中，所述控制器还被构造成：
经由所述无线通信单元向与被施加以所述触摸的所述第一图形对象相对应的所述外部装置发送信号，
基于所述外部装置对于从所述无线通信单元发送的所述信号的响应，确定与被施加以所述触摸的所述第一图形对象相对应的所述外部装置是否能够与所述无线通信单元进行无线通信，
当与所述第一图形对象相对应的所述外部装置能够与所述无线通信单元进行无线通信时，响应于被施加到所述指示符的所述预设类型的触摸，在所述显示单元上显示用于选择是否执行与所述外部装置的无线通信的信息，并且
基于用户的选择来在所述显示单元上显示与通信功能相关联的图标。
2.根据权利要求1所述的移动终端，其中，所述控制器还被构造成：
在所述显示单元的一侧显示所述指示符，并且
基于所述预设类型的触摸，在所述显示单元的一个区域中显示与所述第一图形对象相关联的所述第一信息。
3.根据权利要求2所述的移动终端，其中，所述控制器还被构造成：
接收在显示所述第一信息时施加到与包含在所述预览图像中的所述第一图形对象不同的第二图形对象的触摸，
在所述显示单元上显示与所述第二图形对象相关联的第二信息，并且
显示与所述第一信息的显示链接的第一图标。
4.根据权利要求3所述的移动终端，其中，所述控制器还被构造成：
接收施加到所述第一图标的触摸，并且
基于所接收到的施加到所述第一图标的触摸，显示所述第一信息而不是所述第二信息。
5.根据权利要求4所述的移动终端，其中，所述控制器还被构造成：
显示与所述第二信息的显示链接的第二图标，
接收施加到所述第二图标的触摸，并且
显示所述第二信息而不是所述第一信息。
6.根据权利要求1所述的移动终端，其中，所述控制器还被构造成：
接收在显示所述第一信息时施加到所述预览图像的触摸，
捕获所述预览图像，并且
以链接方式存储所捕获的预览图像和所显示的第一信息。
7.根据权利要求1所述的移动终端，其中，包含在所述预览图像中的所述第一图形对象包含文本，并且
其中，所述控制器还被构造成基于施加到所述文本的拖曳触摸的轨迹来选择所述文本的至少一部分。
8.根据权利要求7所述的移动终端，其中，所述控制器还被构造成：
以句子为单位选择包含与所述拖曳触摸的所述轨迹交叠的文本的所述文本的至少一部分。
9.根据权利要求1所述的移动终端，其中，所述控制器还被构造成：
选择与所接收到的施加到所述第一图形对象的触摸的轨迹交叠的所述第一图形对象。
10.根据权利要求1所述的移动终端，其中，所述控制器还被构造成：
显示与所述第一信息对应的类别信息。
11.根据权利要求10所述的移动终端，其中，当所述第一信息包含多个类别时，所述控制器还被构造成：
在所述指示符上显示与所述多个类别对应的第一类别信息，并且
当对所述指示符施加了触摸时，显示与所述第一类别信息不同的第二类别信息。
12.根据权利要求10所述的移动终端，其中，所述控制器还被构造成：
接收当在所述指示符上显示所述类别信息时施加到所述指示符的所述预设类型的触摸，并且
显示与在所述指示符上显示的所述类别信息对应的信息。
13.根据权利要求1所述的移动终端，其中，所述控制器还被构造成：
基于所述预览图像和所述第一图形对象中的至少一方来确定相关应用，并且
当所述预设类型的触摸施加到所述指示符时，在所述显示单元的一个区域中显示所确定的应用的执行画面。
14.根据权利要求13所述的移动终端，其中，所述控制器还被构造成：
基于从施加到所述指示符的触摸延伸的拖曳触摸或基于施加到所述指示符的至少两个触摸来改变所述一个区域的尺寸。
15.根据权利要求1所述的移动终端，其中，当在第一装置上显示了图像时，所述控制器还被构造成：
通过所述无线通信单元从所述第一装置接收与所述图像相关联的信息，并且
基于施加到所述指示符的所述预设类型的触摸来显示与所述图像相关联的所述信息。
16.根据权利要求15所述的移动终端，其中，与所述图像相关联的所述信息包括与所述图像的显示功能链接的图标，并且
当从所述图标开始的拖曳触摸在与不同于所述第一装置的第二装置对应的第二图形对象处结束时，所述控制器还被构造成将所述图像发送给所述第二装置以显示在所述第一装置上显示的所述图像。
17.一种控制移动终端的方法，该方法包括以下步骤：
经由所述移动终端的显示单元来显示通过摄像头接收到的预览图像；
经由所述移动终端的控制器来接收施加到包括在所述预览图像中的第一图形对象的触摸，所述第一图形对象与外部装置相对应；
当所述触摸被施加到与所述外部装置相对应的所述第一图形对象时，经由所述控制器来调整在与所述外部装置相对应的所述第一图形对象附近的聚焦；
在所述显示单元上显示指示存在与所述第一图形对象相关联的第一信息的指示符；
经由所述控制器来接收当显示所述预览图像时施加到所述指示符的预设类型的触摸；以及
基于所述预设类型的触摸来显示与所述第一图形对象相关联的所述第一信息，
其中，所述方法还包括以下步骤：
经由无线通信单元向与被施加以所述触摸的所述第一图形对象相对应的所述外部装置发送信号；
基于所述外部装置对于从所述无线通信单元发送的所述信号的响应，确定与被施加以所述触摸的所述第一图形对象相对应的所述外部装置是否能够与所述无线通信单元进行无线通信；
当与所述第一图形对象相对应的所述外部装置能够与所述无线通信单元进行无线通信时，响应于被施加到所述指示符的所述预设类型的触摸，在所述显示单元上显示用于选择是否执行与所述外部装置的无线通信的信息；并且
基于用户的选择来在所述显示单元上显示与通信功能相关联的图标。
18.根据权利要求17所述的方法，该方法还包括以下步骤：
在所述显示单元的一侧显示所述指示符；以及
基于所述预设类型的触摸，在所述显示单元的一个区域中显示与所述第一图形对象相关联的所述第一信息。
19.根据权利要求18所述的方法，该方法还包括以下步骤：
接收当显示所述第一信息时施加到不同于包含在所述预览图像中的所述第一图形对象的第二图形对象的触摸；
在所述显示单元上显示与所述第二图形对象相关联的第二信息；以及
显示与所述第一信息的显示链接的第一图标。
CN201510415444.6A 2014-08-12 2015-07-15 移动终端和用于该移动终端的控制方法 Expired - Fee Related CN106201302B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020140104487A KR20160019760A (ko) 2014-08-12 2014-08-12 이동 단말기 및 그것의 제어방법
KR10-2014-0104487 2014-08-12

Publications (2)

Publication Number Publication Date
CN106201302A CN106201302A (zh) 2016-12-07
CN106201302B true CN106201302B (zh) 2020-08-04

Family

ID=52465156

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510415444.6A Expired - Fee Related CN106201302B (zh) 2014-08-12 2015-07-15 移动终端和用于该移动终端的控制方法

Country Status (4)

Country Link
US (1) US20160048287A1 (zh)
EP (2) EP3343343A1 (zh)
KR (1) KR20160019760A (zh)
CN (1) CN106201302B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5829226B2 (ja) * 2013-02-28 2015-12-09 本田技研工業株式会社 ナビゲーションシステム、情報提供方法及び移動通信端末
KR20170025413A (ko) 2015-08-28 2017-03-08 엘지전자 주식회사 이동 단말기 및 그 제어 방법
CN107817941B (zh) * 2016-09-14 2022-12-02 中兴通讯股份有限公司 信息保存方法和装置
US10373358B2 (en) * 2016-11-09 2019-08-06 Sony Corporation Edge user interface for augmenting camera viewfinder with information
JP6589844B2 (ja) * 2016-12-21 2019-10-16 京セラドキュメントソリューションズ株式会社 表示制御装置、及び表示制御方法
KR102356812B1 (ko) * 2017-05-19 2022-01-28 엘지전자 주식회사 지문 감지가 가능한 전자장치
JP7098910B2 (ja) * 2017-11-02 2022-07-12 ブラザー工業株式会社 二次元コード生成プログラムおよび二次元コード印刷システム
JP6774445B2 (ja) * 2018-02-05 2020-10-21 本田技研工業株式会社 移動体制御システム、移動体及び移動体制御方法
US11500533B2 (en) 2018-02-14 2022-11-15 Lg Electronics Inc. Mobile terminal for displaying a preview image to be captured by a camera and control method therefor
KR102558166B1 (ko) * 2018-08-08 2023-07-24 삼성전자주식회사 복수의 객체들을 포함하는 이미지를 보정하는 전자 장치 및 그 제어 방법
CN113330353B (zh) * 2019-01-17 2023-07-28 苹果公司 头戴式显示器及其面部界面
FR3103041B1 (fr) * 2019-11-08 2021-12-31 Clikilix Procédé et dispositif de traitement d’image
CN114840112B (zh) * 2022-05-16 2023-03-24 北京轻网科技股份有限公司 Pop资源管理方法、装置、设备和计算机可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102096446A (zh) * 2009-11-26 2011-06-15 Lg电子株式会社 移动终端及其控制方法
EP2439676A1 (en) * 2010-10-08 2012-04-11 Research in Motion Limited System and method for displaying text in augmented reality
CN102483679A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 提供搜索功能性的用户接口方法
US8477109B1 (en) * 2010-06-24 2013-07-02 Amazon Technologies, Inc. Surfacing reference work entries on touch-sensitive displays

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5905492A (en) * 1996-12-06 1999-05-18 Microsoft Corporation Dynamically updating themes for an operating system shell
KR20030008243A (ko) * 2001-07-16 2003-01-25 엘지전자 주식회사 인터넷을 이용한 휴대폰 원격제어 방법
US6888537B2 (en) * 2002-02-13 2005-05-03 Siemens Technology-To-Business Center, Llc Configurable industrial input devices that use electrically conductive elastomer
US20030160830A1 (en) * 2002-02-22 2003-08-28 Degross Lee M. Pop-up edictionary
FI20021224A (fi) * 2002-06-24 2003-12-25 Nokia Corp Parannettu menetelmä päätelaitekeskustelun toteuttamiseksi ja menetelmää hyödyntävä päätelaite
US20040177325A1 (en) * 2003-03-07 2004-09-09 Keane Robert S. Edit location indicator
TWI333365B (en) * 2006-11-22 2010-11-11 Ind Tech Res Inst Rending and translating text-image method and system thereof
KR20080082288A (ko) * 2007-03-08 2008-09-11 삼성전자주식회사 원격제어가 가능한 휴대단말기 및 그 제어 방법
US20080229218A1 (en) * 2007-03-14 2008-09-18 Joon Maeng Systems and methods for providing additional information for objects in electronic documents
US20090077184A1 (en) * 2007-09-18 2009-03-19 Martin John Brewer Remote Control of Mobile Terminal via Remote Control Proxy and SMS
US8650507B2 (en) * 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
KR101019039B1 (ko) * 2008-05-22 2011-03-04 삼성전자주식회사 터치 스크린을 구비한 단말기 및 데이터 검색 방법.
US8160568B2 (en) * 2008-05-27 2012-04-17 Lg Electronics Inc. Mobile terminal and method for remote-controlling thereof
US9571625B2 (en) * 2009-08-11 2017-02-14 Lg Electronics Inc. Electronic device and control method thereof
SG171492A1 (en) * 2009-12-01 2011-06-29 Creative Tech Ltd An electronic book reader
KR20110064334A (ko) * 2009-12-08 2011-06-15 삼성전자주식회사 휴대용 단말기에서 사용자 인터페이스 설정을 위한 장치 및 방법
US20110261030A1 (en) * 2010-04-26 2011-10-27 Bullock Roddy Mckee Enhanced Ebook and Enhanced Ebook Reader
EP2383970B1 (en) * 2010-04-30 2013-07-10 beyo GmbH Camera based method for text input and keyword detection
JP5762718B2 (ja) * 2010-10-20 2015-08-12 シャープ株式会社 画像形成装置
US9582187B2 (en) * 2011-07-14 2017-02-28 Microsoft Technology Licensing, Llc Dynamic context based menus
CN103718174A (zh) * 2011-08-05 2014-04-09 黑莓有限公司 用于搜索文本和以增强现实的方式显示发现的文本的系统和方法
KR101527038B1 (ko) * 2012-02-24 2015-06-08 엘지전자 주식회사 이동 단말기 및 그 제어 방법, 이를 위한 기록 매체
US9146655B2 (en) * 2012-04-06 2015-09-29 Samsung Electronics Co., Ltd. Method and device for executing object on display
EP2837167B1 (en) * 2012-04-12 2018-12-19 Telefonaktiebolaget LM Ericsson (publ) Pairing a mobile terminal with a wireless device
US20130339864A1 (en) * 2012-06-15 2013-12-19 Nokia Corporation Method and apparatus for providing mixed-reality connectivity assistance
EP2944076B1 (en) * 2013-01-09 2020-05-20 Sony Corporation Mobile device and method for establishing a wireless link

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102483679A (zh) * 2009-08-31 2012-05-30 高通股份有限公司 提供搜索功能性的用户接口方法
CN102096446A (zh) * 2009-11-26 2011-06-15 Lg电子株式会社 移动终端及其控制方法
US8477109B1 (en) * 2010-06-24 2013-07-02 Amazon Technologies, Inc. Surfacing reference work entries on touch-sensitive displays
EP2439676A1 (en) * 2010-10-08 2012-04-11 Research in Motion Limited System and method for displaying text in augmented reality

Also Published As

Publication number Publication date
EP2985687A3 (en) 2016-03-02
US20160048287A1 (en) 2016-02-18
KR20160019760A (ko) 2016-02-22
EP3343343A1 (en) 2018-07-04
EP2985687A2 (en) 2016-02-17
CN106201302A (zh) 2016-12-07

Similar Documents

Publication Publication Date Title
CN106201302B (zh) 移动终端和用于该移动终端的控制方法
CN110266874B (zh) 移动终端及其控制方法
US10044928B2 (en) Mobile terminal and method for controlling the same
KR102225945B1 (ko) 이동 단말기 및 그 제어 방법
CN106850395B (zh) 移动终端及其控制方法
EP2947867B1 (en) Mobile terminal and method of controlling the same
EP2996326B1 (en) Mobile terminal and control method thereof
CN104935723B (zh) 移动终端及其控制方法
US10241613B2 (en) Mobile terminal and method for controlling the same
KR101781909B1 (ko) 이동 단말기 및 그 제어방법
KR102083597B1 (ko) 이동단말기 및 그 제어방법
CN105393521B (zh) 移动终端及其控制方法
KR20190102587A (ko) 이동 단말기 및 그 동작방법
KR102398834B1 (ko) 이동단말기
KR20150134949A (ko) 이동 단말기 및 그것의 제어방법
CN105282277B (zh) 移动终端及其控制方法
KR102130802B1 (ko) 이동 단말기 및 그 제어방법
KR102077677B1 (ko) 이동 단말기 및 이의 제어방법
KR20170022490A (ko) 이동 단말기 및 그 제어방법
KR20170020090A (ko) 이동 단말기 및 이의 제어방법
KR101537625B1 (ko) 이동단말기 및 그 제어방법
KR20150135844A (ko) 이동 단말기 및 그 제어 방법
US9967720B2 (en) Mobile terminal and method for controlling the same
KR20160073679A (ko) 이동 단말기 및 그 제어 방법
KR20150074832A (ko) 이동 단말기 및 이의 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20200804

Termination date: 20210715

CF01 Termination of patent right due to non-payment of annual fee