CN106790965A - 移动装置及其控制方法 - Google Patents

Abstract

移动装置及其控制方法。本发明涉及一种移动装置及其控制方法。该方法包括以下步骤：如果从用户接收到用于触摸特定画面图像超过规定时间的输入，则识别所述特定画面图像；从所识别的特定画面图像中提取标签信息；基于所提取的标签信息来执行与所述特定画面图像有关的特定应用；以及显示所述特定应用的执行画面。

Description

移动装置及其控制方法

技术领域

本发明涉及移动装置及其控制方法。更具体地，当从用户接收到用于选择画面图像的输入时，本发明涉及一种移动装置及其控制方法，该移动装置能够使用图像识别技术和深层链接(deep link)技术来执行与画面图像有关的应用并且显示应用执行画面。

背景技术

近来，由于IT技术的发展，移动装置已经成为我们日常生活中的大问题。移动装置的功能正在多样化。例如，移动终端的功能可以包括数据和音频通信、经由相机的图片和视频拍摄、语音记录、经由扬声器系统播放音乐文件以及在显示单元上输出图像或视频。一些终端执行电子游戏的功能或多媒体播放器的功能。具体地，最新的移动终端能够接收提供诸如广播、视频和电视节目这样的视觉内容的多播信号。

随着终端的功能多样化，按照配备有包括例如拍摄图片或视频、播放音乐或视频文件、游戏、接收广播等在内的复杂功能的多媒体播放器形式来实现终端。具体地，在移动装置中通过拍摄当前画面来生成画面图像的截图功能是重要功能中的一个。

传统的画面图像UX按照用户执行拍摄当前画面的功能的方式被存储在特定文件夹中。例如，如果用户同时按音量按钮和特定的移动装置的电源按钮，则移动装置的当前画面被拍摄为画面图像并且所拍摄的画面图像被存储在特定文件夹中。

然而，因为在以前的移动装置环境中通过移动装置在当前定时处的画面的图像来生成画面图像，所以尽管画面信息稍后发生改变，然而不存在将改变后的画面信息反映到画面图像的方法。因此，用户可能感觉不便。

发明内容

因此，本发明致力于一种基本上消除了由于现有技术的局限性和缺点而导致的一个或更多个问题的设备及其方法。

本发明的一个目的在于提供一种移动装置及其控制方法，该移动装置能够在接收到用于选择画面图像的输入时仅按照以下方式来使用所述画面图像立即访问应用的子概念信息：使用所述画面图像的标签信息来执行与所述画面图像有关的应用，并且使用深层链接技术来显示应用执行画面。

本发明的另一目的在于提供一种移动装置及其控制方法，该移动装置能够当在显示画面图像的状态下从用户接收到用于在向下方向上拖曳所述画面图像的触摸输入时，执行与所述画面图像有关的应用并且显示所述应用的执行画面。

本发明的另一目的在于提供一种移动装置及其控制方法，该移动装置能够当在画面图像包含系统配置信息的情况下从用户接收到用于选择所述画面图像的触摸输入时，基于系统配置信息来改变移动装置的配置。

本发明的另一目的在于提供一种移动装置及其控制方法，该移动装置能够当显示了多个画面图像并且从用户接收到用于从所述多个画面图像中选择特定画面图像的输入时，显示与所述特定画面图像有关的应用执行画面。

本发明的额外优点、目的和特征将部分地在接下来的描述中阐述，并且对于查看了以下内容的本领域普通技术人员而言部分地将变得显而易见，或者可以从本发明的实践中学习。本发明的这些目的和其它优点可以通过在撰写的说明书及其权利要求书以及附图中所具体指出的结构来实现和达到。

为了实现这些目的和其它优点并且根据本发明的目的，如本文中所具体实现和广义描述的，根据一个实施方式，一种移动装置包括：存储器，该存储器被配置为存储多个画面图像；输入单元，该输入单元被配置为从用户接收用于从所述多个画面图像中选择特定画面图像的输入；控制器，该控制器被配置为：如果从用户接收到用于触摸所述特定画面图像超过规定时间的输入，则识别所述特定画面图像，从所识别的特定画面图像中提取标签信息，并且基于所提取的标签信息来执行与所述特定画面图像有关的特定应用；以及显示单元，该显示单元被配置为根据从所述控制器接收的控制命令来显示所述特定画面图像和与所述特定画面图像有关的所述特定应用的执行画面中的至少一个。

为了进一步地实现这些目的和其它优点并且根据本发明的目的，如本文中所具体实现和广义描述的，根据不同的实施方式，一种控制移动装置的方法包括以下步骤：如果从用户接收到用于触摸特定画面图像超过规定时间的输入，则识别所述特定画面图像，从所识别的特定画面图像中提取标签信息，基于所提取的标签信息来执行与所述特定画面图像有关的特定应用，以及显示所述特定应用的执行画面。

根据本发明的一个实施方式，当接收到用于选择画面图像的输入时，能够仅按照以下方式来使用所述画面图像立即访问应用的子概念信息：使用所述画面图像的标签信息来执行与所述画面图像有关的应用，并且使用深层链接技术来显示应用执行画面。因此，因为用户不必要再次从第一步骤开始执行应用，所以能够增强用户方便。

根据本发明的另一实施方式，当在显示画面图像的状态下从用户接收到用于在向下方向上拖曳所述画面图像的触摸输入时，能够执行与所述画面图像有关的应用并且显示所述应用的执行画面。因此，因为能够向用户提供由最新信息更新的画面，所以能够增强用户方便。

根据本发明的另一实施方式，当画面图像包含系统配置信息时，如果从用户接收到用于选择所述画面图像的触摸输入，则能够基于所述系统配置信息来改变移动装置的配置。因此，所述画面图像能够被利用为用于在将来改变系统配置的预置信息，并且能够被与不同的移动装置共享。如果被提供所述画面图像的用户不善于使用智能装置，则该用户能够仅使用所述画面图像来容易地改变系统配置。因此，能够增强用户方便。

根据本发明的另一实施方式，当显示了多个画面图像并且从用户接收到用于从所述多个画面图像中选择特定画面图像的输入时，能够显示与所述特定画面图像有关的应用执行画面。因此，用户能够利用用于检查最新的更新状态的多个画面图像来配置画面。如果该用户选择所述特定画面图像，则能够立即显示所述应用执行画面。因此，能够增强用户方便。

将要理解的是，本发明的以上总体描述和以下详细描述这二者都是示例性的和说明性的，并且旨在提供对所要求保护的本发明的进一步说明。

附图说明

附图被包括进来以提供对本发明的进一步理解，并且被并入到本申请中并构成本申请的一部分，附图例示了本发明的实施方式，并且与本说明书一起用来说明本发明的原理。在附图中：

图1A是例示了与本发明有关的移动装置的框图；

图1B和图1C是例示了与本发明有关的移动装置的一个实施方式的不同的视图的概念图；

图2是例示了根据本发明的一个实施方式的移动装置的配置图；

图3A是例示了根据本发明的一个实施方式的控制移动装置的方法的流程图；

图3B是例示了根据本发明的一个实施方式的控制移动装置的方法的流程图；

图4是例示了根据本发明的一个实施方式的通过识别画面图像来提取标签信息的处理的图；

图5是例示了根据本发明的一个实施方式的当与外部装置共享画面图像的同时发送所述画面图像和标签信息的方法的图；

图6是例示了根据本发明的一个实施方式的激活画面图像的方法的图；

图7是例示了根据本发明的一个实施方式的按照向下拖曳画面图像的方式来利用最新信息更新画面信息的方法的图；

图8是例示了根据本发明的一个实施方式的画面图像包含移动装置的系统配置信息的情况的图；

图9是例示了根据本发明的一个实施方式的画面图像包含特定应用的配置信息的情况的图；

图10是例示了根据本发明的一个实施方式的画面图像包含移动装置的主画面信息的情况的图；

图11是例示了根据本发明的一个实施方式的按照将多个画面图像彼此组合的方式来实现画面图像形式的方法的图；

图12是例示了根据本发明的一个实施方式的使用相机来拍摄外部装置画面并且将所拍摄的图像作为被变换为移动装置版本的应用画面的图像存储在存储器中的方法的图；

图13是例示了根据本发明的一个实施方式的画面图像包含多媒体回放信息的情况的图；

图14是例示了根据本发明的一个实施方式的画面图像包含导航信息的情况的图；以及

图15是例示了根据本发明的一个实施方式的画面图像与网络浏览器画面对应的情况的图。

具体实施方式

现在将参照附图根据在本文中公开的示例性实施方式详细地给出描述。为了便于参照附图简要描述，相同或等同的组件可以设置有相同的附图标记，并且将不再重复其描述。一般而言，诸如“模块”和“单元”这样的后缀可以被用于指代元件或组件。本文中使用这样的后缀仅旨在利于本说明书的描述，并且后缀本身并不旨在提供任何特殊的含义或功能。在本公开中，为了简要起见通常已经省略了为相关领域内的普通技术人员熟知的内容。附图被用来帮助容易理解各个技术特征，并且应该理解的是，本文中提供的实施方式不受附图的限制。这样，除了那些在附图中被明确阐述的以外，本公开应当被解释为扩展到任何改变、等同物和替代方案。

应当理解的是，尽管术语第一、第二等可以在本文中被用来描述各个元件，然而这些元件不应该受这些术语的限制。这些术语通常仅被用于将一个元件与另一个元件进行区分。

应当理解的是，当一个元件被称为与另一个元件“连接”时，该元件能够与另一个元件连接，或者也可以存在中间元件。相反，当一个元件被称为与另一个元件“直接连接”，则不存在中间元件。

单数表示可以包括复数表示，除非依据上下文它表示明确不同的含义。

在本文中使用了诸如“包括”或“具有”这样的术语，但应当理解的是，它们旨在表示存在说明书中公开的多个组件、功能或步骤，并且还应当理解的是，可以同样使用更多的或更少的组件、功能或步骤。

本文中所提出的移动终端可以使用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、触屏平板PC、平板PC、超级本、可穿戴装置(例如，智能手表、智能眼镜、头戴式显示器(HMD))等。

仅通过非限制性的示例的方式，将参照特定类型的移动终端来做出进一步的描述。然而，这些教导同样适用于其它类型的终端，诸如上面提到的这些类型的终端。另外，这些教导也可以被应用到固定终端，诸如数字TV、台式计算机等。

现在参照图1A至图1C，其中，图1A是根据本公开的移动终端的框图，并且图1B和图1C是该移动终端的一个示例的从不同的方向观看的概念图。

移动终端100被示出具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190这样的组件。理解的是，实现所有例示的组件不是必需的，并且可以另选地实现更多的或更少的组件。现在参照图1A，移动终端100被示出具有无线通信单元110，该无线通信单元110被配置有多个通常实现的组件。

无线通信单元110通常包括允许移动终端100与无线通信系统中之间的通信(诸如无线通信)、移动终端100与另一个移动终端之间的通信、移动终端100与外部服务器之间的通信的一个或更多个模块。此外，无线通信单元110通常包括将移动终端100与一个或更多个网络连接的一个或更多个模块。

为了利于这种通信，无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。

输入单元120包括用于获取图像或视频的相机121、麦克风122(其是用于输入音频信号的一种类型的音频输入装置)和用于使得用户能够输入信息的用户输入单元123(例如，触摸键、按键、机械键、软键等)。数据(例如，音频、视频、图像等)由输入单元120获得，并且可以由控制器180根据装置参数、用户命令及其组合来分析和处理。

感测单元140通常使用被配置为感测移动终端的内部的信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现。例如，在图1A中，传感单元140被显示具有接近传感器141和照度传感器142。如果需要的话，感测单元140可以另选地或附加地包括其它类型的传感器或装置(诸如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声波传感器、光传感器(例如，相机121)、麦克风122、电池电量计(battery gauge)、环境传感器(例如，气压计、湿度计、温度计、放射线检测传感器、热传感器和气体传感器等)和化学传感器(例如，电子鼻、保健传感器、生物传感器等)，仅举几例。移动终端100可以被配置为利用从传感单元140获得的信息，并且特别是，从感测单元140中的一个或更多个传感器及其组合获得的信息。

输出单元150通常被配置为输出各种类型的信息(诸如音频、视频、触觉输出等)。输出单元150被示出具有显示单元151、音频输出模块152、触觉模块153和光输出模块154。显示单元151可以具有夹层结构或集成结构，其具有触摸传感器以利于触摸屏。该触摸屏可以提供移动终端100与用户之间的输出接口、以及作为提供移动终端100与用户之间的输入接口的用户输入单元123的功能。

接口单元160用作与能够连接到移动终端100的各种类型的外部装置的接口。例如，接口单元160可以包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储器卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下，移动终端100可以响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。

存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如，存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可以经由无线通信从外部服务器下载。其它应用程序可以在制造或装运时安装在移动终端100内，这通常是针对移动终端100的基本功能(例如，接电话、打电话、接收消息、发送消息等)的情况。常见的是应用程序被存储在存储器170中，被安装在移动终端100中，并由控制器180执行，以执行移动终端100的操作(或功能)。

除了与应用程序关联的操作以外，控制器180通常还用于控制移动终端100的总体操作。控制器180对通过以上提及的组件输入或者输出的信号、数据、信息等进行处理和/或运行保存在存储器170中的应用程序，因此对适当的信息和/或功能进行处理或者给用户提供适当的信息或功能。

控制器180可以通过对图1A中描绘的各种组件输入或输出的信号、数据、信息等进行处理、或者激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。例如，控制器180根据存储在存储器170中的应用程序的执行来控制图1A所示的一些或全部组件。

电源单元190能够被配置为接收外部电力或提供内部电力，以便供应对移动终端100中所包含的元件和组件进行操作所需的适当的电力。电源单元190可以包括电池，而该电池可以被配置为嵌入终端主体中，或者被配置为可以从终端主体拆卸。

在前面描述中提及的相应的组件的至少一个部分能够协作地操作，以根据以下描述中提及的本发明的各个实施方式来具体实现移动终端的操作、控制或控制方法。此外，能够通过运行保存在存储器170中的至少一个或更多个应用程序在移动终端中具体实现移动终端的操作、控制或控制方法。

仍参照图1A，现在将更详细地描述此图中所示的各种组件。

关于无线通信单元110，广播接收模块111通常被配置为经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道或这二者。在一些实施方式中，可以使用两个或更多个广播接收模块111，以利于同时接收两个或更多个广播信道或者支持在广播信道之间切换。

移动通信模块112能够向一个或更多个网络实体发送无线信号和/或从一个或更多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分，所述移动通信网络根据用于移动通信的技术标准或通信方法(例如，全球移动通信系统(GSM)、码分多址(CDMA)、CDMA2000(码分多址2000)、EV-DO(增强型优化语音-数据或增强型仅语音-数据、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等)来构建。

经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。

无线互联网模块113被配置为利于无线互联网接入。此模块可以从内部或外部耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。

这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可以根据这些无线互联网技术中的一种或更多种以及其它互联网技术来发送/接收数据。

在一些实施方式中，当根据例如Wibro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LET、LTE-A等实现无线互联网接入时，作为移动通信网络的一部分，无线互联网模块113执行这种无线互联网接入。因此，互联网模块113可以与移动通信模块112协作或用作移动通信模块112。

短距离通信模块114被配置为利于短距离通信。用于实现这种短距离通信的适当的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短距离通信模块114通常经由无线局域网支持移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端100之间的通信或者移动终端与另一移动终端100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。

在一些实施方式中，另一移动终端(其可以类似于移动终端100来配置)可以是能够与移动终端100交换数据(或者与移动终端100协作)的可穿戴装置(例如，智能手表、智能眼镜或头戴式显示器(HMD))。短距离通信模块114可以感测或识别可穿戴装置，并允许可穿戴装置与移动终端100之间的通信。另外，当所感测到的可穿戴装置是被认证与移动终端100进行通信的装置时，例如，控制器180可以经由短距离通信模块114将在移动终端100中处理的数据发送给可穿戴装置。因此，可穿戴装置的用户可以在可穿戴装置上使用在移动终端100中处理的数据。例如，当在移动终端100中接到电话时，用户可以利用可穿戴装置来接电话。另外，当在移动终端100中接收到消息时，用户能够利用可穿戴装置来查看所接收的消息。

位置信息模块115通常被配置为检测、计算、推导或者识别移动终端的位置。例如，位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块或这二者。如果需要，位置信息模块115可以另选地或另外地与无线通信单元110的任何其它模块一起工作，以获得与移动终端的位置有关的数据。例如，当移动终端使用GPS模块时，可以利用从GPS卫星发送的信号来获取移动终端的位置。又如，当移动终端使用Wi-Fi模块时，能够基于与无线接入点(AP)有关的信息来获取移动终端的位置，所述无线接入点(AP)向Wi-Fi模块发送无线信号或者从Wi-Fi模块接收无线信号。

输入单元120可以被配置为允许向移动终端100的各种类型的输入。这种输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧能够被显示在显示单元151上或存储在存储器170中。在一些情况下，相机121可以按照矩阵配置布置，以使得具有各种角度或焦点的多个图像能够被输入至移动终端100。又如，相机121可以按照立体布置方式来设置，以获取用于实现立体图像的左图像和右图像。

麦克风122通常被实现为允许向移动终端100输入音频。能够根据移动终端100中执行的功能来按照各种方式处理音频输入。如果需要，麦克风122可以包括各种噪声去除算法，以去除在接收外部音频的过程中生成的不期望的噪声。

用户输入单元123是允许用户输入的组件。这种用户输入可以使得控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件(例如，位于移动终端100的正面和/或背面或侧面的键、按钮、薄膜开关、滚轮、触合式开关等)或者触敏输入装置等中的一个或更多个。例如，触敏输入装置可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在移动终端上的触摸屏以外的位置处的触摸键。另一方面，在触摸屏上可以按照各种形状(例如，图形、文本、图标、视频或其组合)显示虚拟键或视觉键。

感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制器180通常与感测单元140协作，以基于感测单元140所提供的感测来控制移动终端100的操作或者执行与安装在移动终端中的应用程序关联的数据处理、功能或操作。可以利用各种传感器中的任何传感器来实现感测单元140，现在将更详细地描述其中一些传感器。

接近传感器141可以包括在没有机械接触的情况下，利用电磁场、红外线等来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可以布置在移动终端的被触摸屏覆盖的内侧区域处或触摸屏附近。

例如，接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型接近传感器时，接近传感器141能够通过电磁场响应于导电物体的靠近而发生的变化来感测指点器相对于触摸屏的接近。在这种情况下，触摸屏(触摸传感器)也可以被归类为接近传感器。

本文中常常将提及术语“接近触摸”以表示指点器被定位成在没有接触触摸屏的情况下接近触摸屏的情景。本文中常常将提及术语“接触触摸”以表示指点器与触摸屏进行实际接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置，这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可以感测接近触摸以及接近触摸模式(例如，距离、方向、速度、时间、位置、移动状态等)。

一般而言，控制器180对与接近传感器141所感测的接近触摸和接近触摸模式对应的数据进行处理，并在触摸屏上输出视觉信息。另外，控制器180能够根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或处理不同的数据。

触摸传感器能够利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如，显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。例如，触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可以被配置为不仅感测触摸位置和触摸区域，而且感测触摸压力和/或触摸电容。通常使用触摸物体来向触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。

当通过触摸传感器感测到触摸输入时，可以将对应信号发送给触摸控制器。触摸控制器可以对所接收的信号进行处理，然后将对应数据发送给控制器180。因此，控制器180可以感测显示单元151的哪一区域被触摸。这里，触摸控制器可以是独立于控制器180的组件，可以是控制器180，并且可以是这二者的组合。

在一些实施方式中，控制器180可以根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的触摸物体的类型来执行相同或不同的控制。例如，根据提供触摸输入的物体是执行相同的控制还是不同的控制可以基于移动终端100的当前操作状态或者当前执行的应用程序来决定。

触摸传感器和接近传感器可以单独实现或者组合实现，以感测各种类型的触摸。这些触摸包括短(或轻拍)触摸、长触摸、多触摸、拖曳触摸、轻拂触摸、内缩(pinch-in)触摸、外张(pinch-out)触摸、扫掠触摸、悬停触摸等。

如果需要，可以实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如，控制器180可以基于由照明传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快，因此光到达光学传感器的时间远比超声波到达超声传感器的时间短。可以利用这一事实来计算波生成源的位置。例如，可以基于光作为基准信号利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。

相机121通常包括至少一个相机传感器(CCD、CMOS等)、光传感器(或图像传感器)和激光传感器。

利用激光传感器实现相机121可以允许检测物理对象相对于3D立体图像的触摸。光传感器可以被层叠在显示装置上或者与显示装置交叠。光传感器可以被配置为对接近触摸屏的物理对象的移动进行扫描。更详细地，光传感器可以包括成行和列的光电二极管和晶体管，以利用根据施加的光的量而改变的电信号来对光传感器处接收的内容进行扫描。即，光传感器可以根据光的变化来计算物理对象的坐标，以因此获得物理对象的位置信息。

显示单元151单元通常被配置为输出在移动终端100中处理的信息。例如，显示单元151可以显示在移动终端100处执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。

在一些实施方式中，显示单元151可以被实现为用于显示立体图像的立体显示单元。

典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等这样的立体显示方案。

音频输出模块152通常被配置为输出音频数据。这些音频数据可以从多种不同的源中的任何源获得，使得所述音频数据可以从无线通信单元110接收，或者可以存储在存储器170中。所述音频数据可以在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式下输出。音频输出模块152能够提供与移动终端100所执行的特定功能有关的可听输出(例如，呼叫信号接收音、消息接收音等)。音频输出模块152还可以被实现为受话器、扬声器、蜂鸣器等。

触觉模块153能够被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等能够通过用户选择或控制器的设置来控制。例如，触觉模块153可按照组合方式或顺序方式输出不同的振动。

除了振动以外，触觉模块153还能够产生各种其它触觉效果，包括经由诸如插针排列为了接触皮肤而垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等这样的刺激的效果、通过利用能够吸热或发热的元件来重现冷和热的感觉的效果等。

除了通过直接接触传递触觉效果以外，触觉模块153还能够被实现为使得用户能够通过诸如用户的手指或手臂的肌肉觉来感觉到触觉效果。可以根据移动终端100的特定配置设置两个或更多个触觉模块153。

光输出模块154能够输出用于利用光源的光指示事件的发生的信号。移动终端100中发生的事件的示例可以包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。

由光输出模块154输出的信号可以按照移动终端发射单色光或多种颜色的光的这样的方式来实现。例如，随着移动终端感测到用户已查看所发生的事件，信号输出可以被终止。

接口单元160用作将外部装置与移动终端100连接的接口。例如，接口单元160能够接收从外部装置发送来的数据，接收电力以输送给移动终端100内的元件和组件，或者将移动终端100的内部数据发送给这种外部装置。接口单元160可以包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储器卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。

识别模块可以是存储用于对使用移动终端100的权限进行认证的各种信息的芯片，并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、全球订户识别模块(USIM)等。另外，具有识别模块的装置(本文中也称作“识别装置”)可以采取智能卡的形式。因此，识别装置能够经由接口单元160与终端100连接。

当移动终端100与外部托架连接时，接口单元160可以用作使得能够将来自托架的电力供应给移动终端100的通道，或者可以用作使得能够用来将由用户从托架输入的各种命令信号输送给移动终端的通道。从托架输入的各种命令信号或电力可以用作用于识别出移动终端被正确安装在托架上的信号。

存储器170能够存储用于支持控制器180的操作的程序，并存储输入/输出数据(例如，电话簿、消息、静止图像、视频等)。存储器170可以存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。

存储器170可以包括一种或更多种类型的存储介质，包括闪存、硬盘、固态盘、硅磁盘(silicon disk)、微型多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。移动终端100还可以与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。

控制器180通常可以控制移动终端100的总体操作。例如，当移动终端的状态满足预设条件时，控制器180可以设置或解除用于限制用户针对应用输入控制命令的锁定状态。

控制器180还能够执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理，或者执行模式识别处理以将触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外，控制器180能够控制那些组件中的一个或它们的组合，以便实现本文公开的各种示例性实施方式。

电源单元190接收外部电力或提供内部电力，并且供应对移动终端100中所包含的各个元件和组件进行操作所需的适当电力。电源单元190可以包括电池，该电池通常是可再充电的或者按可拆卸的方式连接到终端主体以便于充电。

电源单元190可以包括连接端口。该连接端口可以被配置为接口单元160的一个示例，用于供应电力以对电池进行再充电的外部充电器可以电连接到该连接端口。

又如，电源单元190可以被配置为按无线方式对电池进行再充电，而不使用连接端口。在此示例中，电源单元190能够利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发射器输送的电力。

本文中所描述的各种实施方式可以利用例如软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。

现在参照图1B和图1C，参照直板型终端主体描述移动终端100。然而，另选地，移动终端100可以按照各种不同的配置中的任何配置来实现。这些配置的示例包括手表型、夹子型、眼镜型或者折叠型、翻盖型、滑盖型、摆动型和旋转型(其中两个和更多个主体按照能够相对移动的方式彼此组合)或其组合。本文的讨论将常常涉及特定类型的移动终端(例如，直板型、手表型、眼镜型等)。然而，关于特定类型的移动终端的这些教导将通常也适用于其它类型的移动终端。

移动终端100将通常包括形成终端的外观的壳体(例如，框架、外壳、盖等)。

在此实施方式中，壳体利用前壳体101和后壳体102形成。各种电子组件被包含在前壳体101与后壳体102之间所形成的空间中。另外，可以在前壳体101与后壳体102之间设置至少一个中间壳体。

显示单元151被示出为在终端主体的前侧以输出信息。如例示的，显示单元151的窗口151a可以被安装到前壳体101以与前壳体101一起形成终端主体的前表面。

在一些实施方式中，电子组件也可以被安装到后壳体102。这些电子组件的示例包括可拆卸电池191、识别模块、存储器卡等。后盖103被示出为覆盖电子组件，该盖可以可拆卸地连接到后壳体102。因此，当将后盖103从后壳体102拆卸时，安装到后壳体102的电子组件暴露于外。

如例示的，当后盖103连接到后壳体102时，后壳体102的侧表面部分地暴露。在一些情况下，在连接时，后壳体102也可以被后盖103完全遮蔽。在一些实施方式中，后盖103可以包括开口，以用于将相机121b或音频输出模块152b暴露于外。

壳体101、102、103可以通过对合成树脂进行注入成型来形成，或者可以由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。

作为多个壳体形成用于容纳组件的内部空间的示例的另选方式，移动终端100可以被配置为使得一个壳体形成该内部空间。在此示例中，按照合成树脂或金属从侧表面扩展至后表面这样的方式来形成具有单体的移动终端100。

如果需要，移动终端100可以包括用于防止水进入终端主体中的防水单元(未示出)。例如，防水单元可以包括位于窗口151a与前壳体101之间、前壳体101与后壳体102之间、或者后壳体102与后盖103之间的防水构件，以在将那些壳体连接时使内部空间密封。

移动终端100可以设置有显示单元151、第一音频输出单元152a、第二音频输出单元152b、接近传感器141、照度传感器142、光输出单元154、第一相机121a、第二相机121b、第一操纵单元123a、第二操纵单元123b、麦克风122、接口单元160等。

图1B和图1C描绘了布置在移动终端上的特定组件。

然而，应当理解的是，另选布置方式也是可能的并且在本公开的教导内。一些组件可以被省略或重新布置。例如，第一操纵单元123a可以设置在终端主体的另一表面上，第二音频输出模块152b可以设置在终端主体的侧表面上。

显示单元151输出在移动终端100中处理的信息。显示单元151可利用一个或更多个适当的显示装置实现。

这些适当的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、电子墨水显示器及其组合。

可以利用两个显示装置(能够实现相同或不同的显示技术)来实现显示单元151。例如，多个显示单元151可被布置在一侧，彼此间隔开，或者这些装置可以被集成，或者这些装置可以被布置在不同的表面上。

显示单元151还可以包括触摸传感器，其感测在显示单元处接收的触摸输入。当触摸被输入到显示单元151时，触摸传感器可以被配置为感测该触摸，并且控制器180例如可以生成与该触摸对应的控制命令或其它信号。按触摸方式输入的内容可以是文本或数值，或者是能够按照各种模式指示或者指定的菜单项。

触摸传感器可以按照设置在窗口151a与窗口151a后表面上的显示器之间的具有触摸图案的膜或者直接在窗口151a的后表面图案化的金属丝的形式来配置。另选地，触摸传感器可以与显示器一体地形成。例如，触摸传感器可以设置在显示器的基板上或者显示器内。

显示单元151还可以与触摸传感器一起形成触摸屏。这里，触摸屏可以用作用户输入单元123(参见图1A)。因此，触摸屏可以代替第一操纵单元123a的至少一些功能。

第一音频输出模块152a可以按照扬声器的形式实现以输出视频音频、警报音、多媒体音频重现等。

显示单元151的窗口151a通常将包括允许第一音频输出模块152a所生成的音频通过的孔。一个另选方式是允许沿着结构体之间的装配间隙(例如，窗口151a与前壳体101之间的间隙)来释放声音。在这种情况下，从外观上看独立地形成用于输出音频音的孔不可见或者说被隐藏，因此使移动终端100的外观和制造进一步简化。

光输出模块154能够被配置为输出指示事件的发生的光。这些事件的示例包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。当用户已查看生成的事件时，控制器能够控制光学输出单元154以停止光输出。

第一相机121a能够处理在拍照模式或视频呼叫模式下通过图像传感器而获得的诸如静止或运动图像这样的图像帧。然后，经处理的图像帧能够被显示在显示单元151上，或者被存储在存储器170中。

第一操纵单元123a和第二操纵单元123b是用户输入单元123的示例，其可以由用户操纵以提供向移动终端100的输入。第一操纵单元123a和第二操纵单元123b还可以被共同称作操纵部，并且可以采用允许用户执行诸如触摸、推按、滚动等这样的操纵的任何触觉方法。第一操纵单元123a和第二操纵单元123b还可以采用允许用户执行诸如接近触摸、悬停等这样的操纵的任何非触觉方式。

图1B将第一操纵单元123a例示为触摸键，但可能的另选方式包括机械键、按键、触摸键及其组合。

在第一操纵单元123a和第二操纵单元123b处接收的输入可以按照各种方式来使用。例如，用户可以使用第一操纵单元123a来提供对菜单、本位键(home key)、取消、搜索等的输入，用户可以使用第二操纵单元123b来提供输入，以控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。

作为用户输入单元123的另一示例，后输入单元(未示出)可以被设置在终端主体的后表面上。用户能够操纵后输入单元，以提供向移动终端100的输入。所述输入可以按照各种不同的方式来使用。例如，用户可以使用后输入单元来提供针对电源开/关、开始、结束、滚动的输入、控制从第一音频输出模块152a或第二音频输出模块152b输出的音量水平、切换为显示单元151的触摸识别模式等。后输入单元可以被配置为允许触摸输入、推按输入或其组合。

后输入单元可以被定位为在终端主体的厚度方向上与前侧的显示单元151交叠。例如，后输入单元可以被定位在终端主体的后侧的上端部，使得当用户用一只手抓住终端主体时，该用户能够利用食指容易地操纵它。另选地，后输入单元能够至多被定位在终端主体的后侧的任何位置。

包括后输入单元的实施方式可以将第一操纵单元123a的一些或全部功能实现于后输入单元中。因此，在从前侧省略第一操纵单元123a的情况下，显示单元151能够具有更大的屏幕。

作为另一另选方式，移动终端100可以包括扫描用户的指纹的手指扫描传感器。然后，控制器180能够使用由手指扫描传感器所感测的指纹信息作为认证过程的一部分。手指扫描传感器也可以被安装在显示单元151中或者在用户输入单元123中被实现。

麦克风122被示出为位于移动终端100的端部处，但是其它位置也是可能的。如果需要，可以实现多个麦克风，这种布置方式允许接收立体声。

接口单元160可以用作允许移动终端100与外部装置通过接口连接的路径。例如，接口单元160可以包括用于连接到另一装置(例如，耳机、外部扬声器等)的连接端子、用于近场通信的端口(例如，红外数据联盟(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于向移动终端100供电的电源端子中的一个或更多个。接口单元160可以按照用于容纳诸如订户识别模块(SIM)、用户识别模块(UIM)或者用于信息存储的存储器卡这样的外部卡的插槽的形式来实现。

第二相机121b被示出为位于终端主体的后侧，并且其图像拍摄方向基本上与第一相机单元121a的图像拍摄方向相反。如果需要，可另选地将第二相机121b设置在其它位置或者使其能够移动，以便具有与所示的图像拍摄方向不同的图像拍摄方向。

第二相机121b能够包括沿着至少一条线布置的多个镜头。所述多个镜头还可以按照矩阵配置来布置。这些相机可以被称作“阵列相机”。当第二相机121b被实现为阵列相机时，可以利用多个镜头来按照各种方式拍摄图像，并且图像具有更好的质量。

如图1C中所示，闪光灯124被示出为与第二相机121b相邻。当利用相机121b拍摄对象的图像时，闪光灯124可以对对象进行照明。

如图1B所示，能够在终端主体上设置第二音频输出模块152b。第二音频输出模块152b可以与第一音频输出模块152a结合来实现立体声功能，并且还可以被用于实现呼叫通信的免提模式。

用于无线通信的至少一个天线可以设置在终端主体上。天线可以安装在终端主体中，或者可以由壳体形成。例如，构成广播接收模块111的一部分的天线可以可缩回到终端主体中。另选地，可以利用附接到后盖103的内表面的膜或者包含导电材料的壳体来形成天线。

用于向移动终端100供电的电源单元190可以包括电池191，该电池191安装在终端主体中或者可拆卸地连接到终端主体的外部。电池191可以经由连接到接口单元160的电源线来接收电力。

另外，能够利用无线充电器按无线方式对电池191进行再充电。可以通过磁感应或电磁共振来实现无线充电。

后盖103被示出为连接到后壳体102以用于遮蔽电池191，以防止电池191分离并且保护电池191免受外部冲击或异物的影响。当电池191能够从终端主体拆卸时，后壳体103可以可拆卸地连接到后壳体102。

在移动终端100上能够另外设置用于保护外观或者辅助或扩展移动终端100的功能的附件。作为附件的一个示例，可以设置用于覆盖或容纳移动终端100的至少一个表面的盖或袋。所述盖或袋可以与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于辅助或扩展对触摸屏的触摸输入的触摸笔。

将参照额外的图更详细地描述另外的优选实施方式。本领域的技术人员应理解，本特征能够在不脱离其特性的情况下按照多种形式来体现。

网络搜索引擎指示被设计为对WWW(万维网)的信息进行搜索的软件系统。在移动终端的市场被扩展之前，用户已经利用PC(个人计算机)来使用网络搜索引擎的服务。

近来，随着移动终端的使用正在按照散播巨量的智能电话的方式快速地增加，使用移动终端的网络搜索引擎的使用的百分比也正在增加。

在经由移动终端使用服务的情况下，不仅能够使用网络浏览器应用来访问网络搜索引擎的网页而且能够经由由网络搜索引擎本身提供的应用来访问网络搜索引擎。

此外，在网页上提供的服务或内容同样已经发生改变。图像或文本过去被提供在传统的网页上作为主要内容。然而，不仅图像或文本而且诸如位置信息、标签信息等的这样的元数据被提供在最近的网页上。

位置信息与地理位置对应。与在GPS中使用的相似，该位置信息包括经度和纬度。不仅经度和纬度，行政区域的位置信息(地址等)也可以同样与位置信息对应。

例如，在显示关于特定餐馆的信息的网页的情况下，该网页能够包含该特定餐馆的图片、餐馆的食物的图片(图像内容)和关于图片的说明(文本内容)。此外，餐馆的位置能够被包含在位置信息内容中。

如在前面的描述中所提及，虽然最近的网页提供各种内容，但是由网络搜索引擎提供的搜索结果不包含关于内容的信息，因此引起不便。因此，在下面描述的本发明的一个实施方式提出了提供与关于由网络搜索引擎提供的服务的各种内容有关的信息。在下面，参照图来说明特定的实施方式。

此外，根据本发明，能够使用柔性显示器来显示在移动终端中处理的信息。关于此，在下面参照附图更详细地对此进行说明。

图2是用于根据本发明的一个实施方式的移动装置的配置图。

如图2中所示，移动装置100包括无线通信单元110、输入单元120、相机121、显示单元151、存储器170和控制器180。

无线通信单元110与外部装置进行收发数据。

输入单元120从用户接收用于从多个画面图像中选择特定画面图像的输入。

相机121拍摄移动装置的前面。

显示单元151根据从控制器180接收的控制命令来显示特定图像和与该特定图像有关的应用执行画面中的至少一个。

存储器170存储多个画面图像。

如果从用户接收到用于触摸特定画面图像超过规定时间的输入，则控制器180识别该特定画面图像，从所识别的特定画面图像中提取标签信息和元数据，基于所提取的标签信息和元数据来执行与该特定画面图像有关的特定应用，并且显示该特定应用的执行画面。

在这种情况下，如果画面图像包含特定内容，则标签信息可以对应于与能够呈现所述内容或标签信息的搜索标签对应的关键词。

具体地，如果画面图像与被拍摄应用执行画面的图像对应，则标签信息可以指示应用的URL地址、应用名称、包括搜索词关键词的文本等。

元数据是数据的结构化数据。例如，在画面图像的情况下，元数据包括该画面图像被生成的日期、光圈曝光值、位置信息等。

控制器180基于从包括OCR识别、画面图像的布局、画面图像的设计和文本信息在内的组中选择的至少一项来识别特定画面图像。

例如，如果在执行诸如Naver这样的特定搜索引擎的中间拍摄到特定画面图像，则控制器180按照经由OCR识别来识别图像中的特定字符的方式来识别该特定画面图像。控制器180能够基于所识别的特定画面图像来确定与该特定画面图像有关的应用是否与该特定搜索引擎对应。

控制器180按照经由画面图像的布局来识别图像中的与特定搜索引擎有关的信息的方式来识别特定画面图像。

控制器180按照经由画面图像的设计来识别图像中的与特定搜索引擎有关的信息的方式来识别特定画面图像。

控制器180按照经由画面图像中所包含的文本信息来识别图像中的与特定搜索引擎有关的信息的方式来识别特定画面图像。

图3A是用于根据本发明的一个实施方式的控制移动装置的方法的流程图。本发明由控制器180来执行。

如图3A中所示，首先，如果从用户接收到用于触摸存储在存储器中的多个画面图像当中的特定画面图像超过规定时间的输入，则控制器180识别该特定画面图像[S310]。

控制器180从所识别的特定画面图像中提取标签信息[S320]。

控制器180基于所提取的标签信息来执行与特定画面图像有关的特定应用[S330]。

控制器180显示特定应用的执行画面[S340]。

图3B是用于根据本发明的一个实施方式的控制移动装置的方法的流程图。本发明由控制器180来执行。

如图3B中所示，控制器180从用户接收用于从多个画面图像中选择特定画面图像的输入[S410]。

控制器显示所选择的特定画面图像[S420]。

控制器180从用户接收用于触摸所选择的特定画面图像超过规定时间的输入[S430]。

控制器180检查特定画面图像是否包含标签信息[S440]。在这种情况下，标签信息与包含应用的URL地址、应用名称和搜索词关键词在内的文本对应。

如果特定画面图像包含标签信息[S440]，则基于该标签信息来执行与特定画面图像有关的应用[S450]。

如果特定画面图像不包含标签信息[S440]，则控制器180识别特定画面图像[S442]。

控制器180从所识别的特定画面图像中提取标签信息和元数据[S444]。

控制器180基于标签信息和元数据来执行与特定画面图像有关的应用[S450]。具体地，控制器180基于应用的URL地址、应用名称、应用的画面信息、搜索词和画面图像的元数据来执行与特定画面图像有关的应用。

控制器180显示应用的执行画面[S460]。

根据本发明，如果从用户接收到用于触摸图库相册(gallery album)的特定画面图像超过规定时间的输入，则控制器180基于包含在该特定画面图像中的标签信息来执行与该特定画面图像有关的特定应用，并且显示该特定应用的执行画面。

也就是说，如果从用户接收到用于使用深层链接技术来触摸特定画面图像的输入，则能够显示与该特定画面图像有关的特定应用的执行画面。因此，由于用户能够仅使用画面图像来执行应用，因此增加了用户方便。在这种情况下，深层链接技术与使得用户链接到不同的网页而不是网站上的主页的超文本链接对应。

图4是根据本发明的一个实施方式的通过识别画面图像来提取标签信息的处理的图。

控制器180提取特定应用的元数据，提取画面图像中所包含的文本信息，识别画面图像的类型，并且基于从包括所提取的元数据、所提取的文本信息和所识别的画面图像的类型在内的组中选择的一项来对所生成的画面图像进行分析。

如果从用户接收到用于按特定按钮的输入，则控制器180拍摄当前画面，并且将所拍摄的画面显示在显示单元151上。

如在实施方式410中所示，控制器180从画面图像10中提取当前显示在画面上的应用信息。在这种情况下，应用信息包括应用名称、URL和时间信息。

控制器180识别画面图像的文本。具体地，控制器180使用OCR(光学字符识别)来识别画面图像的文本。

控制器180识别画面图像的类型。例如，画面图像能够被分类成数字图像、图片等。如果画面图像与数字图像对应，则画面图像可以变成图形图像、图表图像或地图图像。如果画面图像与图片对应，则画面图像可以变成新闻图片。

如实施方式420中所示，说明了分析画面图像的方法。

应用名称可以与CGV应用对应。

在画面图像中识别的文本422包含“移动票”、“CGV Youndeungpo”、“冰雪奇缘(Frozen)”,“2014.01.25(星期六)15:35”和“座位信息J015”。

画面图像的类型423指示画面图像不是图片，而是数字图像。画面图像的类型与QR码和移动票对应。

控制器180将先前分析的结果存储在存储器170中。

图5是根据本发明的一个实施方式的用于当画面图像被与外部装置共享时同时发送画面图像和标签信息的方法的图。

控制器180经由无线通信单元110向外部装置同时发送元数据、画面图像和该画面图像的标签信息。

例如，如实施方式510中所示，控制器180从用户接收用于选择画面图像512的输入。

如实施方式520中所示，控制器180从用户接收用于选择被配置为发送画面图像512的特定SNS图标522的输入。

控制器180经由无线通信单元110向外部装置发送画面图像512、画面图像的标签信息和元数据524。

如实施方式530中所示，第二移动装置的控制器显示与画面图像512相同的画面图像。在这种情况下，第二移动装置包括与第一移动装置的应用相同的应用，并且能够使用深层链接技术。

根据本发明，当用户与对方共享画面图像时，画面图像的元数据和标签信息被一起发送到对方。因此，如果对方触摸经共享的画面图像，则基于标签信息来执行与画面图像有关的特定应用。因此，对方还能够按照直接访问该特定应用的方式来检查信息。因此，对方不必要通过直接执行应用来搜索信息，因此增加了用户方便。

图6是根据本发明的一个实施方式的用于激活画面图像的方法的图。

如果从用户接收到用于触摸特定画面图像超过规定时间并且轻拍显示有该特定画面图像的画面超过规定次数的输入或者用于触摸特定画面图像超过规定时间并且在向上方向或向下方向上刷(scrub)显示有该特定画面图像的画面的输入，则控制器180能够显示与该特定画面图像有关的应用执行画面。

如实施方式610中所示，如果从用户接收到用于触摸特定画面图像612超过规定时间的触摸输入614，则如实施方式640中所示，控制器180显示与该特定画面图像有关的应用执行画面642。

根据本发明的不同的实施方式，如果从用户接收到大于或等于基准值的触摸输入超过规定时间，则能够显示应用执行画面。

如实施方式610中所示，如果从用户接收到用于用大于或等于规定值的压力触摸特定画面图像612的输入614超过规定时间，则如实施方式640中所示，控制器180显示与该特定画面图像有关的应用执行画面642。

如实施方式620中所示，如果从用户接收到用于触摸特定画面图像622超过规定时间的触摸输入624并且从用户接收到用于轻拍该特定画面图像超过规定次数的输入626，则如实施方式640中所示，控制器180显示与该特定画面图像有关的应用执行画面642。

如实施方式630中所示，如果从用户接收到用于触摸特定画面图像632超过规定时间的触摸输入634并且从用户接收到用于在向上方向或向下方向上刷该特定画面图像632的输入636，则如实施方式640中所示，控制器180显示与该特定画面图像有关的应用执行画面642。

根据本发明，如果从用户接收到用于触摸画面图像的输入，则控制器能够执行与该画面图像有关的应用，因此增加了用户方便。

图7是根据本发明的一个实施方式的用于按照向下拖曳画面图像的方式利用最新信息来更新画面信息的方法的图。

如果在特定画面图像被显示的状态下从用户接收到用于在向下方向或向上方向上拖曳特定画面图像的触摸输入，则控制器180执行与该特定画面图像有关的特定应用，并且显示该特定应用的执行画面。

如实施方式710中所示，控制器180从用户接收用于从图库中选择特定画面图像712的触摸输入。

如实施方式720中所示，控制器180在特定画面图像被显示的状态下从用户接收用于在向上方向或向下方向上拖曳特定画面图像722的触摸输入724。

如实施方式730中所示，控制器180响应于所接收的触摸输入来基于标签信息执行与特定画面图像有关的特定应用。

如实施方式740中所示，控制器180显示特定应用的执行画面742。因此，控制器180能够利用最新信息来更新特定应用的执行画面742。

例如，在公告板的情况下，连续地张贴出新的帖子。在这种情况下，因为用户需要频繁地访问并且检查公告板应用，所以对于用户来说是不方便的。根据本发明，当画面图像包含公告板信息时，如果从用户接收到用于选择画面图像的输入，则公告板应用被立即执行，并且用户能够检查每当用户选择画面图像时利用最新信息来更新的公告板，因此增加了用户方便。

图8是针对根据本发明的一个实施方式的画面图像包含移动装置的系统配置信息的情况的图。

当特定画面图像包含系统配置信息时，如果从用户接收到用于选择该特定画面图像的触摸输入，则控制器180基于所述系统配置信息来改变移动装置的配置。

如实施方式810中所示，如果特定画面图像812包含系统配置信息，则控制器180从用户接收用于在向下方向或向上方向上拖曳该特定画面图像812的触摸输入814。

如实施方式820中所示，控制器180响应于所接收的触摸输入来执行与特定画面图像有关的特定应用。例如，如果特定画面图像包含系统音量配置信息，则控制器180执行移动装置的系统音量配置应用。

当前画面822与系统音量配置应用的执行画面对应。

如实施方式830中所示，控制器180基于特定画面图像812中所包含的系统配置信息来改变移动装置的配置。

当前画面832与系统音量配置应用的执行画面对应。能够看到系统音量配置按照与特定画面图像812相同的方式发生改变。

根据本发明，如果移动装置的系统配置被存储为画面图像并且在将来从用户接收到用于选择该画面图像的输入，则该画面图像能够作为能够基于系统配置信息来改变移动装置的配置的预置图像被利用。

在这种情况下，预置图像指示在复杂的电路系统中预先调整每个部件的输入/输出等级级别。

图9是根据本发明的一个实施方式的针对画面图像包含特定应用的配置信息的情况的图。

当特定画面图像包含特定应用的配置信息时，如果从用户接收到用于选择该特定画面图像的触摸输入，则控制器180基于所述特定应用的所述配置信息来改变所述特定应用的配置。

如实施方式910中所示，如果特定画面图像912包含特定应用的配置信息，则控制器180从用户接收用于在向下方向或向上方向上拖曳该特定画面图像912的触摸输入914。

如实施方式920中所示，控制器180响应于所接收的触摸输入来执行与该特定画面图像有关的特定应用。例如，如果该特定画面图像包含锁定画面应用配置信息，则控制器180执行移动装置的锁定画面配置应用。

当前画面922与锁定画面配置应用的执行画面对应。

如实施方式930中所示，控制器180基于特定画面图像912中所包含的特定应用的配置信息来改变该特定应用的配置。

当前画面932与锁定画面配置应用的执行画面对应。能够看到执行画面按照与特定画面图像912相同的方式发生改变。具体地，与特定画面图像912相似，天气动画项(a)和电源按钮立即锁定项(b)在当前面画932中被检查。

根据本发明，如果应用配置被存储为画面图像并且在将来从用户接收到用于选择该画面图像的输入，则该画面图像能够作为能够基于应用配置信息来改变应用配置的预置图像被利用。

另外，如果包含应用配置信息的画面图像被与对方共享，则不善于使用智能电话的对方能够使用该画面图像来容易地改变应用配置。

图10是针对根据本发明的一个实施方式的画面图像包含移动装置的主画面信息的情况的图。

当特定画面图像包含主画面配置信息时，如果从用户接收到用于选择该特定画面图像的触摸输入，则控制器180显示移动装置的基于所述主画面配置信息发生改变的主画面。

如实施方式1010中所示，如果特定画面图像1012包含主画面配置信息，则控制器180从用户接收用于在向下方向或向上方向上拖曳该特定画面图像102的触摸输入1014。

如实施方式1020中所示，控制器180响应于所接收的触摸输入来执行用于配置主画面的应用。例如，如果特定画面图像包含主画面配置信息，则控制器180执行移动装置的主画面配置应用。

当前画面1022与当前主画面对应。

如实施方式1030中所示，控制器180基于特定画面图像1012中所包含的主画面配置信息来改变主画面的配置。

当前画面1032与改变后的主画面对应。当前画面与特定画面图像1012相同地改变。具体地，与特定画面图像1012相同，多个图标被排列到当前画面1032。

根据本发明，如果主画面被存储为画面图像并且在将来从用户接收到用于选择该画面图像的输入，则该画面图像能够作为能够基于主画面配置信息来改变主画面配置的预置图像被利用。也就是说，如果用户选择了包含主画面配置信息的画面图像，则能够配置与该画面图像相同的主画面，因此增加了用户方便。

图11是根据本发明的一个实施方式的用于按照将多个画面图像彼此组合的方式来实现画面图像形式的方法的图。

如果显示了多个画面图像并且从用户接收到用于从所述多个画面图像中选择特定画面图像的输入，则控制器180显示与该特定画面图像有关的应用执行画面。

如实施方式1110中所示，控制器180能够显示多个画面图像。在这种情况下，所述多个画面图像包括画面图像A 1112、画面图像B 1114和画面图像C 1116。控制器180能够按照将从包括画面图像A 112、画面图像B 1114和画面图像C 1116在内的组中选择的至少一个彼此组合的方式来生成单个画面图像。

例如，控制器180能够通过将画面图像A 1112和画面图像B 1114彼此组合来生成单个画面图像。

另外，控制器180能够按照将画面图像A 112、画面图像B 1114和画面图像C 1116彼此组合的方式来生成单个画面图像。

如实施方式1120中所示，控制器180能够显示多个画面图像。在这种情况下，多个画面图像包括第一画面图像1122、第二画面图像1124和第三画面图像1126。

在这种情况下，第一画面图像1122与画面图像A 1122对应，第二画面图像1124与画面图像B 1114对应，并且第三画面图像1126与画面图像C 1116对应。

控制器180接收用于从多个画面图像中选择与特定画面图像对应的第一画面图像1122的输入。

如实施方式1130中所示，控制器180响应于所接收的输入来显示与第一画面图像1122有关的应用执行画面1132。

例如，如果第一画面图像1122包含音乐应用信息，则控制器180显示音乐应用执行画面1132。

根据本发明，能够按照将多个画面图像彼此组合的方式来配置单个画面图像。因此，用户能够利用用于检查最新的更新状态的项来配置画面图像。如果从用户接收到用于选择特定画面图像的输入，则控制器180执行与该特定画面图像有关的应用，并且显示特定的应用执行画面。

能够按照在空间中设置多个画面图像的方式来将先前的画面图像与后续的画面图像进行比较。

此外，因为画面图像按照图像形式被存储在存储器中，所以容易与其它人共享该画面图像并且容易保持该画面图像。

图12是根据本发明的一个实施方式的用于使用相机来拍摄外部装置画面并且将所拍摄的图像作为被变换为移动装置版本的应用画面的图像存储在存储器中的方法的图。

控制器180使用相机121来拍摄外部装置的画面，从所拍摄的画面中提取标签信息，执行与所拍摄的画面对应的移动装置版本的应用，显示应用的执行画面，并且将应用的执行画面作为特定画面图像存储在存储器170中。

如实施方式1210中所示，控制器180使用相机121来拍摄外部装置的画面1212。

如实施方式1220中所示，控制器180从所拍摄的画面中提取标签信息。具体地，如果拍摄到诸如PC画面、TV画面或平板PC画面这样的大画面，则控制器180识别所拍摄的图像，并且从所识别的图像中自动地提取URL、输入信息、应用信息、应用名称等。

控制器180基于所提取的标签信息来执行移动装置版本的与所拍摄的画面对应的应用。控制器180显示该应用的执行画面，并且将该应用的执行画面作为特定画面图像1222存储在存储器170中。

如实施方式1230中所示，如果从用户接收到用于选择特定画面图像1222的输入，则控制器180执行与该特定画面图像1222有关的特定应用，并且显示该特定应用的执行画面1232。

根据本发明，如果由移动装置的相机拍摄到笔记本画面，则从该笔记本画面的图片中提取标签信息，基于所提取的标签信息来执行与所述图片有关的应用，并且将所述标签信息和所述画面图像两者存储在存储器中。因此，当在多个装置当中执行连续的工作时，能够向用户提供无缝的用户界面。

图13是根据本发明的一个实施方式的用于画面图像包含多媒体回放信息的情况的图。

当特定画面图像包含多媒体回放信息时，如果从用户接收到用于触摸该特定画面图像的输入，则控制器180从该特定画面图像被生成的播放时间开始播放多媒体。

如实施方式1310中所示，控制器180检查画面图像1312是否包含多媒体信息。如果画面图像1312包含了特定回放文件名称、回放按钮图像、回放时间信息、字幕信息等，则控制器180确定画面图像1312包含多媒体信息。另外，当使用被执行的应用信息生成画面图像1312时，控制器180能够确定画面图像1312包含多媒体信息。

在这种情况下，多媒体信息与关于视频播放器的信息和关于音乐播放器的信息对应。

控制器180将画面图像存储在存储器170中。

如实施方式1320中所示，在经过规定时间之后从用户接收到用于选择包含多媒体信息的画面图像1322的输入。

如实施方式1330中所示，如果确定画面图像1322包含多媒体信息，则控制器180显示消息框1332，该消息框1332包含画面图像1322从与生成画面图像1322的时间对应的播放时间开始被播放的内容。

在这种情况下，控制器180在生成画面图像时从所生成的画面图像中提取特定多媒体的回放信息，并且将所提取的特定多媒体的回放信息存储在存储器170中。

如果从用户接收到诸如打开按钮1334这样的特定输入，则控制器180从画面图像被生成的时间开始播放多媒体。

根据本发明，当用户拍摄多媒体回放画面时，如果在将来选择回放画面的画面图像，则能够显示能够播放来自拍摄的场景的视频的消息框并且画面图像能够作为视频和音乐文件中的书签功能被利用，因此增加了用户方便。

图14是根据本发明的一个实施方式的用于画面图像包含导航信息的情况的图。

当特定画面图像包含导航信息时，如果从用户接收到用于选择该特定画面图像的触摸输入，则控制器180显示从与接收该触摸输入的定时对应的出发点到目的地的路线。

如实施方式1410中所示，如果在导航应用被执行的状态下从用户接收到图像拍摄输入，则生成当前画面被拍摄的画面图像1412。

如果画面图像1412包含从包括地图、出发点、中途停留、目的地、当前速度、到目的地花费的时间和到目的地剩余的时间在内的组中选择的至少一项，则控制器180确定画面图像1412包含导航信息。

如实施方式1420中所示，如果画面图像1422包含导航信息，则控制器180从用户接收用于选择画面图像1422的触摸输入1424。

如实施方式1430中所示，控制器180响应于所接收的触摸输入来执行导航应用，并且显示从与从用户接收触摸输入1424的定时对应的出发点到目的地的路线。

因此，在导航画面1432中，被接收到用户的触摸输入1424的点变成出发点，并且到目的地的剩余路线被显示在导航画面中。

根据本发明，在出发点与A点对应，路线与B点和C点对应并且目的地与D点对应的状态下生成画面图像。在经过规定时间之后，如果从用户接收到用于选择画面图像的触摸输入，则执行导航应用，出发点被改变为B点，路线被改变为C点，并且目的地被改变为D点。因此，能够显示反映时间的逝去的应用执行画面，因此增加了用户方便。

图15是根据本发明的一个实施方式的用于画面图像与网络浏览器画面对应的情况的图。

当特定画面图像与网络浏览器画面对应时，如果从用户接收到用于选择该特定画面图像的触摸输入，则控制器180访问在生成该特定画面图像时存储的特定的网络浏览器地址。

如实施方式1510中所示，控制器180检查画面图像1512是否包含网络浏览器画面信息。在这种情况下，如果画面图像1512包括URL域地址、诸如www这样的特定词或特定门户的词，则控制器180确定画面图像1512包含网络浏览器画面信息。

控制器180将画面图像存储在存储器170中。

在实施方式1520中，在经过规定时间之后，从用户接收到用于选择包含网络浏览器画面信息的画面图像1522的输入。

如实施方式1530中所示，如果确定画面图像1522包含网络浏览器画面信息，则控制器180显示包括访问特定的网络浏览器地址的内容的消息框1532。在这种情况下，控制器180在生成画面图像时从所生成的画面图像中提取特定的网络浏览器地址，并且将所提取的特定的网络浏览器地址存储在存储器170中。

如果从用户接收到诸如打开按钮1534这样的特定输入，则控制器180访问特定的网络浏览器地址。

根据本发明，如果从用户接收到用于选择特定画面图像的输入，则能够通过利用深层链接技术来立即访问由特定画面图像指示的特定网站的主页的子概念的地址而不是该特定网站的主页地址。

在这种情况下，深层链接与使得用户链接到不同的网页而不是网站上的主页的超文本链接对应。在这种情况下，诸如深层这样的术语指示页面在网站中的网页的层结构中的深度。

因此，用户访问特定网站的主页，然后可以能够在无需经过许多步骤的情况下立即访问该特定网站的主页的子概念的地址，因此减少了访问时间并增加了用户方便。

根据本发明的一个实施方式，如果接收到用于选择画面图像的输入，则能够仅按照以下方式来使用所述画面图像立即访问应用的子概念信息：使用所述画面图像的标签信息来执行与所述画面图像有关的应用，并且使用深层链接技术来显示应用执行画面。因此，因为用户不必要再次从第一步骤开始执行应用，所以能够增强用户方便。

根据本发明的另一实施方式，如果在显示画面图像的状态下从用户接收到用于在向下方向上拖曳所述画面图像的触摸输入，则能够执行与所述画面图像有关的应用并且显示所述应用的执行画面。因此，因为能够向用户提供由最新信息更新的画面，所以能够增强用户方便。

根据本发明的另一实施方式，当画面图像包含系统配置信息时，如果从用户接收到用于选择所述画面图像的触摸输入，则能够基于所述系统配置信息来改变移动装置的配置。因此，所述画面图像能够被利用为用于在将来改变系统配置的预置信息，并且能够被与不同的移动装置共享。如果被提供所述画面图像的用户不善于使用智能装置，则该用户能够仅使用所述画面图像来容易地改变系统配置。因此，能够增强用户方便。

根据本发明的另一实施方式，当显示了多个画面图像并且从用户接收到用于从所述多个画面图像中选择特定画面图像的输入时，能够显示与所述特定画面图像有关的应用执行画面。因此，用户能够利用用于检查最新的更新状态的多个画面图像来配置画面。如果该用户选择所述特定画面图像，则能够立即显示所述应用执行画面。因此，能够增强用户方便。

虽然已经在本文中参照优选实施方式及其图描述并且例示了本说明书，但是本说明书可以不限于前述实施方式，并且对于本领域的技术人员而言将显而易见的是，能够在不脱离本说明书的精神和范围的情况下对本文做出各种修改和变型。因此，本说明书旨在涵盖本发明的落入所附的权利要求及其等同物的范围内的修改和变型。

本申请要求于2015年11月23日提交的韩国专利申请No.10-2015-0163943的优先权的权利和更早的申请日的权益，该韩国专利申请通过引用的方式被并入到本文中。

Claims (20)

1.一种移动装置，该移动装置包括：

显示器；以及

控制器，该控制器被配置为：

使所述显示器显示多个画面图像；

响应于从所述多个画面图像当中选择第一画面图像的用户输入来获得与所述第一画面图像关联的标签信息；以及

使所述显示器基于所述标签信息来显示与所述第一画面图像有关的特定应用的执行画面。

2.根据权利要求1所述的移动装置，其中，所述控制器还被配置为：

将与所述第一画面图像有关的应用信息与所述第一画面图像的元数据一起存储在存储器中。

3.根据权利要求1所述的移动装置，其中，所述控制器还被配置为：

基于下面的项中的至少一个来识别所述第一画面图像：光学字符识别OCR、所述第一画面图像的布局、所述第一画面图像的设计、或者包含在所述第一画面图像中的文本信息。

4.根据权利要求1所述的移动装置，该移动装置还包括无线通信单元，该无线通信单元被配置为与外部装置进行数据收发，

其中，所述控制器还被配置为经由所述无线通信单元将元数据、所述第一画面图像和所述第一画面图像的所述标签信息发送到所述外部装置。

5.根据权利要求1所述的移动装置，其中，所述控制器还被配置为：

响应于下面的项中的至少一个来使所述显示器显示所述特定应用的所述执行画面：作为在所述第一画面图像处接收的超过阈值时间段的接触触摸的所述用户输入；作为在所述第一画面图像处接收的超过阈值次数的轻拍输入的所述用户输入；或者作为在所述第一画面图像处开始并且向上或向下扩展的拖曳输入的所述用户输入。

6.根据权利要求1所述的移动装置，其中，所述控制器被配置为：

响应于作为在所述第一画面图像处开始并且向上或向下扩展的拖曳输入的所述用户输入，使所述显示器显示所述特定应用的所述执行画面。

7.根据权利要求1所述的移动装置，其中，所述第一画面图像包含系统配置信息，并且其中，所述控制器还被配置为：

响应于选择所述第一画面图像的另外的用户输入，基于所述系统配置信息来改变所述移动装置的配置。

8.根据权利要求1所述的移动装置，其中，所述第一画面图像包含所述特定应用的配置信息，并且其中，所述控制器还被配置为：

响应于选择所述第一画面图像的另外的用户输入，基于所述特定应用的所述配置信息来改变所述特定应用的配置。

9.根据权利要求8所述的移动装置，该移动装置还包括：

发送器，并且其中，所述控制器还被配置为：

经由所述发送器向外部装置发送所述特定应用的所述配置信息和所述第一画面图像两者。

10.根据权利要求1所述的移动装置，其中，所述第一画面图像包含主画面配置信息，并且其中，所述控制器还被配置为：

响应于选择所述第一画面图像的另外的用户输入，使所述显示器基于所述主画面配置信息来显示所述移动装置的主画面。

11.根据权利要求1所述的移动装置，其中，所述控制器还被配置为：

响应于选择所述第一画面图像的所述用户输入，使所述显示器显示所述特定应用的所述执行画面。

12.根据权利要求1所述的移动装置，该移动装置还包括相机，并且其中，所述控制器被配置为：

使用所述相机来拍摄外部装置的画面图像；

从所拍摄的所述外部装置的画面图像获得第二标签信息；

使所述显示器基于所获得的第二标签信息来显示与所拍摄的画面对应的应用的移动装置版本的另外的特定应用的执行画面；以及

将所述另外的特定应用的所述执行画面作为特定画面图像存储在存储器中。

13.根据权利要求1所述的移动装置，其中，所述第一画面图像包含多媒体项的回放信息，并且其中，所述控制器还被配置为：

播放从与显示所述第一画面图像的时间对应的时间开始的所述多媒体项。

14.根据权利要求1所述的移动装置，其中，所述第一画面图像包含导航信息，并且其中，所述控制器还被配置为：

使所述显示器在所述第一画面图像处显示在与被接收到所述用户输入的点对应的出发点处开始到目的地的路线。

15.根据权利要求1所述的移动装置，其中，所述第一画面图像与网络浏览器画面对应，并且其中，所述控制器还被配置为：

当从用户接收到所述用户输入时，访问在所述第一画面图像被显示时存储的特定的网络浏览器地址。

16.一种用于控制移动装置的方法，该方法包括以下步骤：

在显示器上显示多个画面图像；

响应于从所述多个画面图像当中选择第一画面图像的用户输入来获得与所述第一画面图像关联的标签信息；以及

在所述显示器上，基于所述标签信息来显示与所述第一画面图像有关的特定应用的执行画面。

17.根据权利要求16所述的方法，该方法还包括以下步骤：

将与所述第一画面图像有关的应用信息与所述第一画面图像的元数据一起存储在所述移动装置的存储器中。

18.根据权利要求16所述的方法，该方法还包括以下步骤：

基于下面的项中的至少一个来识别所述第一画面图像：光学字符识别OCR、所述第一画面图像的布局、所述第一画面图像的设计、或者包含在所述第一画面图像中的文本信息。

19.根据权利要求16所述的方法，该方法还包括以下步骤：

经由无线通信单元将元数据、所述第一画面图像和所述第一画面图像的所述标签信息发送到外部装置。

20.根据权利要求16所述的方法，该方法还包括以下步骤：

响应于下面的项中的至少一个来在所述显示器上显示所述特定应用的所述执行画面：作为在所述第一画面图像处接收的超过阈值时间段的接触触摸的所述用户输入；作为在所述第一画面图像处接收的超过阈值次数的轻拍输入的所述用户输入；或者作为在所述第一画面图像处开始并且向上或向下扩展的拖曳输入的所述用户输入。