CN107025045A - 移动终端及其控制方法 - Google Patents

Abstract

公开了一种移动终端及其控制方法。本发明在通过执行图库应用以滑动方式显示多个图像的同时，当从第一图像至第二图像的滑动满足预定条件时，在触摸屏上显示与第一图像和第二图像相关的信息。

Description

移动终端及其控制方法

技术领域

本发明涉及移动终端及其控制方法。

背景技术

终端通常可根据其移动性而被分成移动/便携式终端或固定终端。移动终端还可根据用户是否能够直接携带终端而被分成手持终端或车载终端。

移动终端已经变得越来越多功能化。这些功能的示例包括数据和语音通信、经由相机拍摄图像和视频、记录音频、经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加功能，而其它终端被配置成多媒体播放器。最近，移动终端已经被配置为接收允许观看诸如视频和电视节目的内容的广播和多播信号。

人们正在努力以支持和增加移动终端的功能。这些努力包括软件和硬件改进以及结构组件上的改变和改进。

发明内容

因此，本发明的目的在于解决上述和其它问题。

本发明的一个目的是提供一种用于提供用户界面的移动终端及用于控制该移动终端的方法，经由所述用户界面用户可以容易地并且高效地控制移动终端。

本发明的另一目的是提供一种移动终端以及控制该移动终端的方法，所述移动终端用于在执行应用期间将所生成图像的附加信息与图像一起提供从而在使用图库应用显示图像时显示出现的图像。

本发明的又一目的是提供一种移动终端以及控制该移动终端的方法，所述移动终端能够在使用图库应用显示图像时，使用所显示的附加信息在一个应用中以各种方式使用图像而不关闭图库应用。

从本发明可实现的技术任务不限于上述技术任务。另外，本发明所属技术领域的普通技术人员从以下说明可以清楚地理解其它未提及的技术任务。

根据本发明的一个方面，一种移动终端，该移动终端包括：触摸屏；和控制器，所述控制器被配置为执行用于在所述控制器上显示图像的应用，所述控制器按照依次滑动的方式在所述触摸屏上显示多个图像，其中，所述控制器被配置为响应于滑动输入，滑动第一图像的显示并且在所述触摸屏上显示第二图像的至少一部分，并且所述控制器被配置为当确定满足预定条件时，显示与所述第一图像和所述第二图像相关的信息。

其中，所述预定条件包括：用于滑动所述第一图像的拖拽输入的速度小于预定水平，或在显示所述第一图像达至少预定时间后在所述第一图像处接收滑动触摸输入。

其中，所述预定条件包括：在所述触摸屏上显示所述第一图像达至少预定时间而不滑动所述第二图像。

其中，所显示的信息包括所述第一图像和所述第二图像包括的属性信息，其中，所述属性信息包括关于以下信息中的至少一种：捕获所述第一图像和所述第二图像的时间和地点；包括在所述第一图像和所述第二图像中的至少一个人物，和包括在所述第一图像和所述第二图像中的至少一个对象。

其中，所显示的信息包括与第一图像或第二图像一起存储在所述移动终端中的信息或经由通信单元从至少一个外部设备接收的信息。

其中，所显示的信息包括：至少一个缩略图，所述至少一个缩略图与包括在所述第一图像或所述第二图像中的特定人物对应，和至少一个缩略图，所述至少一个缩略图包括当捕获所述第一图像或所述第二图像时没有包括在所述第一图像或所述第二图像中但是在包括在所述第一图像或所述第二图像中的人物附近的特定人物。

其中，响应于在所述第一图像处的触摸输入和在缩略图处的触摸输入，所述控制器被配置为控制要与对应于所述缩略图的用户分享的所述第一图像。

其中，所显示的信息包括以下缩略图中的至少一个：第二图像的代表缩略图，指示在所述第二图像后滑入视野的信息的缩略图，和当所述第二图像是视频时视频的代表缩略图。

其中，所显示的信息包括所述多个图像的下载源，其中，所述控制器被配置为响应于选择所述下载源来执行与所述下载源对应的应用。

其中，所述第一图像是当图像滑入视野时多个图像当中具有公共属性的最后一个图像，其中，所述控制器被配置为当显示所述第一图像时控制所述触摸屏以在所述第一图像与所述第二图像之间显示空白区域并且经由在所述空白区域处的触摸交互确定在所述第一图像之后要显示的第二图像的类型。

其中，所述控制器被配置为在所述触摸屏上显示用于引导在空白空间处的所述触摸交互的引导信息。

其中，所显示的信息包括具有所述第一图像和所述第二图像的特征的图像，其中，所述控制器被配置为将所述图像设置为滑入视野的图像的背景图像并且在所述触摸屏上显示所述背景图像。

其中，所述控制器被配置为在所述触摸屏上显示在所述第一图像和所述第二图像之间显示的信息。

其中，所述控制器被配置为在所述触摸屏上显示在所述触摸屏的除了显示所述第一图像或所述第二图像的至少部分的区域外的区域中所显示的信息。

其中，所述控制器被配置为当满足所述预定条件时，暂时地停止图像滑动并且在所述触摸屏上显示所述信息。

其中，所述控制器被配置为在第一模式或第二模式下执行所述应用以控制所述多个图像滑入视野，其中，所述控制器被配置为控制所述图像以在所述第一模式下经由所述触摸屏依次滑入视野，并且当满足所述预定条件时，在所述第二模式下在所述触摸屏上显示所述信息。

其中，在所述第二模式下显示的至少一个图像被存储为相册文件。

根据本发明的另一方面，一种用于控制移动终端的方法，该方法包括以下步骤：执行用于显示多个图像的应用；接收用于在所述触摸屏上以依次滑动的方式滑动所述多个图像的滑动输入；在所述触摸屏上接收滑动输入以滑动第一图像并且在所述触摸屏上显示第二图像的至少一部分；确定满足了预定条件；以及当确定满足预定条件时，在所述触摸屏上显示与所述第一图像和所述第二图像相关的信息。

该方法还包括以下步骤：当确定满足预定条件时，在所述触摸屏上显示所述第一图像和所述第二图像之间的空白区域；以及在所述空白区域中显示所述信息。

其中，所显示的信息包括与所述图像一起存储的第一信息或经由通信单元从外部设备接收的第二信息，其中，在所述触摸屏上在所述图像上方显示所述第一信息，并且在所述触摸屏上在所述图像下方显示所述第二信息。

根据本发明的移动终端及其控制方法具有以下优点。

根据本发明，能够提供用户能够容易地和高效地控制所述移动终端的用户界面。

根据本发明，在执行应用期间，能够将所生成图像的附加信息与图像一起提供从而在使用图库应用显示图像时，显示出现的图像。

根据本发明，在使用图库应用显示图像时，使用显示的附加信息在一个应用中能够以各种方式使用图像而不关闭图库应用。

根据下文给出的详细描述，本发明的适用性的进一步范围将变得更加明显。然而，应当理解的是，由于根据详细描述，本发明的精神和范围内的各种改变和修改对于本领域技术人员而言将变得显而易见，因此仅通过例示的方式给出了表示本发明的优选实施方式的详细描述和具体示例。

附图说明

根据下文给出的详细描述和附图，本发明将被更加全面地理解，这些附图仅是例示进而不是对本发明的限制，并且，在附图中：

图1是根据本公开的移动终端的框图；

图2例示了实现控制根据本发明的实施方式的移动终端的方法的系统的构造；

图3是例示控制根据本发明的实施方式的移动终端的方法的流程图；

图4至图8是用于解释在图3中示出的实施方式的图；

图9是例示用于控制移动终端的方法的流程图以更详细地解释在图3中例示的实施方式；

图10至图13是用于解释在图9中例示的实施方式的图；

图14是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图；

图15和图16是用于解释在图14中示出的实施方式的图；

图17是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图；

图18是用于解释在图17中例示的实施方式的图；

图19是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图；

图20是用于解释在图19中示出的实施方式的图；

图21是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图；

图22和图23是用于解释在图21中例示的实施方式的图；

图24至图28是用于解释本发明的其它实施方式的图；并且

图29和图30是用于解释本发明的其它实施方式的图。

具体实施方式

现在将参照附图，根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述，可为相同或等同的组件提供相同的标号，其描述将不再重复。通常，诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述，后缀本身并非旨在给予任何特殊含义或功能。在本公开中，为了简明起见，相关领域的普通技术人员熟知的内容已被省略。使用附图来帮助容易地理解各种技术特征，应该理解，本文呈现的实施方式不受附图的限制。因此，本公开应该被解释为扩展至附图中具体示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。

尽管可在本文中使用术语第一、第二等描述各种元件，但是这些元件不应当受这些术语的限制。这些术语一般仅用于将一个元件与另一个元件相区分。

当一个元件被称为“与”另一个元件“连接”时，该元件可以与另一个元件连接或中间元件也可以存在。相反，当一个元件被称为“与”另一个元件“直接连接”时，不存在中间元件。

单数表示可以包括复数表示，除非该单数表示根据上下文表示明确不同的含义。在本文中使用的诸如“包括”或“具有”的术语应当理解为它们旨在指示本说明书中公开的多个部件、功能或步骤的存在，并且还应当理解的是，同样可以使用更多或更少的部件、功能或步骤。

本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、石板PC、平板PC、超级本、可穿戴装置(例如，智能手表、智能眼镜、头戴式显示器(HMD))等。

仅通过非限制性示例，参照特定类型的移动终端进行进一步的描述。然而，这些教导同样适用于其它类型的终端，例如上述那些类型。另外，这些教导也可适用于诸如数字TV、台式计算机等的固定终端。

图1是根据本公开的移动终端的框图。

移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。将理解，不要求实现所示的所有组件，可另选地实现更多或更少的组件。

现在参照图1，移动终端100被示出为具有利用多个通常实现的组件配置的无线通信单元110。例如，无线通信单元110通常包括允许移动终端100与无线通信系统或者移动终端所在的网络之间的无线通信的一个或更多个组件。

无线通信单元110通常包括允许通信(例如，移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。另外，无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信，无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的一个或更多个。

输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如，触摸键、按键、机械键、软键等)。数据(例如，音频、视频、图像等)通过输入单元120来获得，并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。

通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现感测单元140。例如，在图1中，感测单元140被示出为具有接近传感器141和照度传感器142。

如果需要，感测单元140可另选地或另外地包括其它类型的传感器或装置，例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如，相机121)、麦克风122、电池电量计、环境传感器(例如，气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如，电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息，具体地讲，从感测单元140的一个或更多个传感器获得的信息及其组合。

输出单元150通常被配置为输出各种类型的信息，例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。

为了方便触摸屏，显示单元151可具有与触摸传感器的中间层结构或集成结构。触摸屏可在移动终端100与用户之间提供输出接口，并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。

接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如，接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下，移动终端100可响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。

存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如，存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内，针对移动终端100的基本功能(例如，接电话、打电话、接收消息、发送消息等)，通常是这种情况。常见的是，应用程序被存储在存储器170中，被安装在移动终端100中，并由控制器180执行以执行移动终端100的操作(或功能)。

除了与应用程序关联的操作以外，控制器180通常还用于控制移动终端100的总体操作。控制器180可通过处理经由图1A所描绘的各种组件输入或输出的信号、数据、信息等或者激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。作为一个示例，控制器180根据存储在存储器170中的应用程序的执行来控制图1A所示的一些或所有组件。

电源单元190可被配置为接收外部电力或提供内部电力，以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池，所述电池可被配置为嵌入终端主体中，或者被配置为可从终端主体拆卸。

仍参照图1A，现在将更详细地描述该图中描绘的各种组件。关于无线通信单元110，广播接收模块111通常被配置为经由广播频道从外部广播管理实体接收广播信号和/或广播相关信息。广播频道可包括卫星频道、地面频道或这二者。在一些实施方式中，可使用两个或更多个广播接收模块111以方便同时接收两个或更多个广播频道或者支持在广播频道之间切换。

移动通信模块112可向一个或更多个网络实体发送无线信号和/或从其接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分，根据移动通信的技术标准或通信方法(例如，全球移动通信系统(GSM)、码分多址(CDMA)、CDMA2000(码分多址2000)、EV-DO(增强型优化语音数据或增强型仅语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等)来构建所述移动通信网络。经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。

无线互联网模块113被配置为方便无线互联网接入。此模块可从内部或外部连接到移动终端100。无线互联网模块113可根据无线互联网技术经由通信网络发送和/或接收无线信号。

这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可根据这些无线互联网技术以及其它互联网技术中的一个或更多个来发送/接收数据。

在一些实施方式中，当根据例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等实现作为移动通信网络的一部分的无线互联网接入时，无线互联网模块113执行这种无线互联网接入。因此，互联网模块113可与移动通信模块112协作或用作移动通信模块112。

短程通信模块114被配置为方便短距离通信。用于实现这些短距离通信的合适的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短程通信模块114通常经由无线局域网支持移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端100之间的通信或者移动终端与另一移动终端100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。

在一些实施方式中，另一移动终端(可类似于移动终端100来配置)可以是能够与移动终端100交换数据(或者与移动终端100协作)的可穿戴装置(例如，智能手表、智能眼镜或头戴式显示器(HMD))。短程通信模块114可感测或识别可穿戴装置，并允许可穿戴装置与移动终端100之间的通信。另外，当所感测到的可穿戴装置是被验证为与移动终端100进行通信的装置时，例如，控制器180可将在移动终端100中处理的数据的至少一部分经由短程通信模块114发送给可穿戴装置。因此，可穿戴装置的用户可在可穿戴装置上使用在移动终端100中处理的数据。例如，当在移动终端100中接收到呼叫时，用户可利用可穿戴装置来对该呼叫进行应答。另外，当在移动终端100中接收到消息时，用户可利用可穿戴装置来查看所接收到的消息。

位置信息模块115通常被配置为检测、计算、推导或者标识移动终端的位置。例如，位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块或这二者。如果需要，位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作，以获得与移动终端的位置有关的数据。

作为一个示例，当移动终端使用GPS模块时，可利用从GPS卫星发送的信号来获取移动终端的位置。作为另一示例，当移动终端使用Wi-Fi模块时，可基于与无线接入点(AP)有关的信息来获取移动终端的位置，所述无线接入点(AP)向Wi-Fi模块发送无线信号或者从Wi-Fi模块接收无线信号。

输入单元120可以被配置为允许对移动终端100的各种类型的输入。这些输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧可被显示在显示单元151上或者被存储在存储器170中。在一些情况下，相机121可按照矩阵配置布置，以使得具有各种角度或焦点的多个图像能够被输入至移动终端100。作为另一示例，相机121可按照立体布置方式来设置，以获取用于实现立体图像的左图像和右图像。

麦克风122通常被实现为允许向移动终端100输入音频。可根据移动终端100中执行的功能来按照各种方式处理音频输入。如果需要，麦克风122可包括各种噪声去除算法以去除在接收外部音频的过程中生成的不期望的噪声。

用户输入单元123是允许用户输入的组件。这种用户输入可使得控制器180能够控制移动终端100的操作。用户输入单元123可包括机械输入元件(例如，位于移动终端100的正面和/或背面或侧面的键、按钮、薄膜开关、滚轮、触合式开关等)或者触敏输入装置等中的一个或更多个。作为一个示例，触敏输入装置可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在移动终端上的触摸屏以外的位置处的触摸键。另一方面，虚拟键或视觉键可按照各种形状(例如，图形、文本、图标、视频或其组合)显示在触摸屏上。

感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制器180通常与感测单元140协作以基于感测单元140所提供的感测来控制移动终端100的操作或者执行与安装在移动终端中的应用程序关联的数据处理、功能或操作。可利用各种传感器中的任何传感器来实现感测单元140，现在将更详细地描述其中一些传感器。

接近传感器141可包括在没有机械接触的情况下，利用电磁场、红外线等来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可布置在移动终端被触摸屏覆盖的内侧区域处或触摸屏附近。

例如，接近传感器141可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型时，接近传感器141可通过电磁场响应于导电物体的靠近而发生的变化来感测指点器相对于触摸屏的接近。在这种情况下，触摸屏(触摸传感器)也可被归类为接近传感器。

本文中常常将提及术语“接近触摸”以表示指点器被设置为在没有接触触摸屏的情况下接近触摸屏的情景。本文中常常将提及术语“接触触摸”以表示指点器与触摸屏进行物理接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置，这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可感测接近触摸以及接近触摸模式(例如，距离、方向、速度、时间、位置、移动状态等)。

通常，控制器180对与接近传感器141所感测的接近触摸和接近触摸模式对应的数据进行处理，并使得在触摸屏上输出视觉信息。另外，控制器180可根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或者处理不同的数据。

触摸传感器可利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如，显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。

作为一个示例，触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可被配置为不仅感测触摸位置和触摸面积，而且感测触摸压力和/或触摸电容。通常使用触摸物体来对触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。

当通过触摸传感器感测到触摸输入时，可将对应信号发送给触摸控制器。触摸控制器可对所接收到的信号进行处理，然后将对应数据发送给控制器180。因此，控制器180可感测显示单元151的哪一区域被触摸。这里，触摸控制器可以是独立于控制器180的组件、控制器180及其组合。

在一些实施方式中，控制器180可以根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的一种触摸物体来执行相同或不同的控制。例如，根据提供触摸输入的物体是执行相同的控制还是不同的控制可基于移动终端100的当前操作状态或者当前执行的应用程序来决定。

触摸传感器和接近传感器可单独实现或者组合实现，以感测各种类型的触摸。这些触摸包括短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻拂触摸、缩小触摸、放大触摸、轻扫触摸、悬停触摸等。

如果需要，可实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如，控制器180可基于由照度传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快，所以光到达光学传感器的时间远比超声波到达超声传感器的时间短。可利用这一事实来计算波生成源的位置。例如，可以基于作为参考信号的光、利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。

相机121通常包括相机传感器(CCD、CMOS等)、光电传感器(或图像传感器)和激光传感器中的至少一个。

利用激光传感器实现相机121可允许检测物理对象相对于3D立体图像的触摸。光电传感器可被层压在显示装置上或者与显示装置交叠。光电传感器可被配置为对接近触摸屏的物理对象的移动进行扫描。更详细地讲，光电传感器可包括成行和列的光电二极管和晶体管，以利用根据施加的光的量而变化的电信号来对光电传感器处接收的内容进行扫描。即，光电传感器可根据光的变化来计算物理对象的坐标，从而获得物理对象的位置信息。

显示单元151通常被配置为输出在移动终端100中处理的信息。例如，显示单元151可显示在移动终端100处执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。

在一些实施方式中，显示单元151可被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。

音频输出模块152通常被配置为输出音频数据。这些音频数据可从多种不同的源中的任何源获得，使得所述音频数据可从无线通信单元110接收或者可存储在存储器170中。所述音频数据可在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式期间输出。音频输出模块152可提供与移动终端100所执行的特定功能有关的可听输出(例如，呼叫信号接收音、消息接收音等)。音频输出模块152还可被实现为受话器、扬声器、蜂鸣器等。

触觉模块153可被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等可通过用户选择或控制器的设定来控制。例如，触觉模块153可按照组合方式或顺序方式输出不同的振动。

除了振动以外，触觉模块153可产生各种其它触觉效果，包括诸如插针排列向接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、利用能够吸热或发热的元件再现冷和热的感觉的效果等。

除了通过直接接触传递触觉效果以外，触觉模块153还可被实现为使得用户能够通过诸如用户的手指或手臂的肌肉觉来感觉到触觉效果。可根据移动终端100的特定配置设置两个或更多个触觉模块153。

光学输出模块154可输出用于利用光源的光指示事件的发生的信号。移动终端100中发生的事件的示例可包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。

由光学输出模块154输出的信号可被实现为使得移动终端发射单色光或多种颜色的光。例如，随着移动终端感测到用户已查看所发生的事件，信号输出可被终止。

接口单元160用作要与移动终端100连接的外部装置的接口。例如，接口单元160可接收从外部装置发送来的数据，接收电力以传送给移动终端100内的元件和组件，或者将移动终端100的内部数据发送给这种外部装置。接口单元160可包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。

所述标识模块可以是存储用于验证移动终端100的使用权限的各种信息的芯片，并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。另外，具有标识模块的装置(本文中也称作“标识装置”)可采取智能卡的形式。因此，标识装置可经由接口单元160与移动终端100连接。

当移动终端100与外部托架连接时，接口单元160可用作使得能够将来自托架的电力供应给移动终端100的通道，或者可用作使得能够用来将由用户从托架输入的各种命令信号传送给移动终端的通道。从托架输入的各种命令信号或电力可用作用于识别出移动终端被正确安装在托架上的信号。

存储器170可存储用于支持控制器180的操作的程序，并存储输入/输出数据(例如，电话簿、消息、静止图像、视频等)。存储器170可存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。

存储器170可包括一种或更多种类型的存储介质，包括闪存、硬盘、固态盘、硅磁盘、微型多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。移动终端100还可与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。

控制器180通常可控制移动终端100的总体操作。例如，当移动终端的状态满足预设条件时，控制器180可设定或解除用于限制用户相对于应用输入控制命令的锁定状态。

控制器180还可执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理，或者执行模式识别处理以将触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外，控制器180可控制那些组件中的一个或其组合，以便实现本文公开的各种示例性实施方式。

电源单元190接收外部电力或提供内部电力，并且供应对包括在移动终端100中的各个元件和组件进行操作所需的适当电力。电源单元190可包括电池，该电池通常是可再充电的或者以可拆卸的方式连接到终端主体以便于充电。

电源单元190可包括连接端口。该连接端口可被配置为接口单元160的一个示例，用于供应电力以对电池进行再充电的外部充电器可电连接到该连接端口。

作为另一示例，电源单元190可被配置为以无线方式对电池进行再充电，而不使用连接端口。在此示例中，电源单元190可利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发送器传送的电力。

本文所述的各种实施方式可利用例如软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。

图2例示了实现用于控制根据本发明的实施方式的移动终端的方法的系统的构造。

可以在图2中示出的环境中实现用于控制根据本发明的实施方式的移动终端的方法。参照图2，实现用于控制根据本发明的实施方式的移动终端的方法的环境可以包括移动终端100、内容服务器200、外部移动终端300和网络400。

在移动终端100中安装和运行的图库软件应用使用户能够搜索和观看各种类型的内容以与内容交互。内容可以包括静止图像、视频、网页等。

能够经由图库应用提供的内容可以在移动终端100中被本地地存储或(在网络服务器中)被远程地存储。因此，当在移动终端100中存储内容时，移动终端可以是内容源，并且当从外部设备下载内容并且存储内容时，外部设备可以是内容源。

移动终端100可以包括本地内容源10。本地内容源10可以包括经由移动终端100的相机(图1的121)捕获的图像(静止图像或视频)、经由移动终端100的截屏功能捕获的图像等。也就是说，移动终端100可以是存储在移动终端100中的内容(图像)的源。

除了直接生成内容的源以外，移动终端100的本地内容源10还可以包括本地学习模块11。

本地学习模块11是用于实现机器学习服务的模块并且通过使用机器学习方法能够识别用户的移动终端使用模式。机器学习方法收集示例数据并且通过从收集的数据提取特征、对特征进行分类、比较、识别、排列和聚类暗中定义规则，而不是通过系统设计者定义明确的规则。这种过程可以被称为“机器学习”或简单的“学习”。各种已知方法可以用作机器学习方法(或算法)并且在说明书中省略其说明。

在本发明中，除了机器学习以外，还可以执行深度学习。例如，可以检测在经由图库应用提供的图像中包括的对象以生成要在(下文将定义的)实时模式下提供的附加信息。

根据本发明的实施方式，经由机器学习来处理在执行图库应用期间收集的(包括用户输入数据的)数据以学习用户的使用模式。在一个实施方式中，可以从在执行移动终端100中的所有可用应用以及图库应用期间获得的数据来获得用户的使用模式。

例如，移动终端100的控制器180可以在经由图库应用显示预定图像期间，感测针对特定图像的满足预定条件的拖拽输入。在这种情况下，本地学习模块11确定用户对特定的图像感兴趣，并且学习特定模式下和特定图像中的拖拽输入。

根据一个实施方式，不仅在显示经由图库应用生成的图像的过程中可以经由机器学习模块11来进行学习，而且在经由相机获取图像的过程中也可以经由机器学习模块11来进行学习。也就是说，当经由相机捕获图像时，图像捕获时间、日期、位置和关于当前执行的应用的信息可以被获得为图像的附加信息并且与图像内容一起存储。在这种情况下，机器学习模块11可以生成包括图像的附加信息以及使用相机捕获的图像的新的内容。

通过机器学习模块11收集的数据不但可以包括在图像获取过程中收集的数据，而且还设置与移动终端100的使用、呼叫数据(呼叫方、被呼叫方、电话号码、呼叫状态信息等)相关的信息(铃声音量信息、静音设置信息、铃声、亮度级别、电池状态信息等)。

在一个实施方式中，经由本地内容源和机器学习模块11收集的数据用作内容相关数据。也就是说，根据一个实施方式，除了经由图库应用显示图像以外，还能够提供图像的内容相关数据。

根据本发明的实施方式，可以经由外部内容服务器200获得图像及其内容相关数据。

参照图2，内容服务器200可以经由网络400连接至移动终端100并且可以包括消息服务器210、网页服务器220、SNS服务器230、应用服务器240和集体学习模块250。

内容服务器200不限于上述示例，并且可以包括能使移动终端100访问外部服务器以下载内容的任何设备。

当在移动终端100中执行消息应用时，可以使用作为界面的预定聊天窗口经由消息服务器210下载特定的图像。例如，移动终端100可以执行显示预定网页、使用网页作为界面从网络服务器220下载预定内容以及存储所下载内容的网络浏览器。另外，移动终端100可以执行SNS应用，使用SNS服务器230下载经由SNS应用的执行画面提供的内容，并且存储所下载的内容。消息服务器210、网页服务器220和SNS服务器230是内容下载源的示例性部件。

内容服务器200可以包括应用服务器240。当在移动终端100中执行应用时，应用服务器240收集与预定应用相关的数据。例如，当在移动终端100中执行图库应用以显示特定图像的同时移动终端100的用户与其他人分享特定图像或将特定图像上传至SNS服务器时，由应用服务器240收集在分享特定图像的过程中使用的应用数据。当在实时模式下执行图库应用时，所收集的数据可以与图像一起提供。

内容服务器200可以包括集体学习模块250，该集体学习模块250执行与机器学习模块11的与移动终端100的部件对应的功能类似的功能。也就是说，集体学习模块250能够从移动终端100收集用户的交互信息、执行学习过程并且向移动终端100发送经由学习过程生成的数据。集体学习模块的操作可以与上述机器学习模块11相同。另外，集体学习模块250可以与内容服务器200的消息服务器210、网页服务器220和/或SNS服务器230交互操作。

在移动终端100可以下载经由内容服务器200通过其它终端提供的内容时，移动终端100可以生成与外部移动终端设备300连接的预定短程通信链路以直接下载在外部移动设备300中本地存储的内容并且存储所下载的内容。

根据本发明的实施方式，集体学习模块250可以收集关于移动终端100与外部移动设备300之间的交互的数据，并且生成要在实时模式下使用的数据。

根据本发明的实施方式，机器学习模块11包括在移动终端100中，并且因此经由机器学习模块11执行根据用户交互的学习过程，并且可以执行向外部内容服务器200发送基于所学习的数据的内容的请求的操作。例如，当移动终端100被控制为在实时模式下执行图库应用时，可以提供和从内容服务器200接收基于经由集体学习模块250学习的数据而选择的内容。

网络400可以是开放互联网、内联网、防火墙安全网、广域蜂窝网(例如，3G网)、有线网、无线网(Wi-Fi或蓝牙)或它们的组合。

图3是例示用于控制根据本发明的实施方式的移动终端的方法的流程图。

参照图3，移动终端100的控制器180可以执行用于显示图像的应用(S100)。

如上文参照图2所述，移动终端100可以使用相机捕获图像并且将图像存储在存储器中，或将经由外部下载源下载的图像存储在存储器中。可以经由图像管理应用(例如，图库应用)来管理所存储的图像。图像管理应用不限于图库应用，并且可以包括能够显示图像的任何应用。例如，在相机应用的情况下，相机应用可以与图库应用交互操作以经由相机应用的执行画面切换至图库应用从而在显示器上显示通过图库应用提供的图像。

控制器180可以接收从第一图像滑动至第二图像的输入(S110)。

当执行图库应用时，控制器180可以在触摸屏151上显示存储在存储器中的多个图像。控制器180可以基于预定规则将图像分类，并且将分类的图像提供至触摸屏。预定规则可以是图像捕获顺序。也就是说，当执行图库应用时，控制器180可以按在触摸屏151上显示在第一时间存储的第一图像的同时，控制器180经由用户的触摸交互(拖拽输入、轻弹输入)提供在第二时间存储的第二图像的方式以图像捕获(下载)顺序将图像提供至触摸屏151。

除了图像存储时间以外，预定规则还可以包括关于捕获图像的位置的信息和下载路径。控制器180可以根据位置信息和下载路径(下载源)将多个图像分组并且将图像显示为相册。也就是说，可以按相册模式提供基于预定规则分组的多个相册文件夹，并且当选择特定的相册文件夹时，能够提供被分类为所选相册的多个图像。可以将多个图像提供至触摸屏151使得图像根据用户的触摸交互依次滑动。

根据本发明的实施方式，当经由图库应用基于预定规则在触摸屏151上依次显示图像时，不仅可以提供存储在存储器中的图像，而且还可以提供附加信息。也就是说，在经由图库应用显示图像期间可以经由图库应用的执行画面将图像与附加信息一起提供，而不会结束图库应用或执行用于提供附加信息的其它应用。

在本说明书中，提供除了图像以外的附加信息的模式被定义为与在执行图库应用时根据滑动输入依次显示图像的常规模式区分开的实时模式。在实时模式下，通过将附加信息与图像一起显示可以增强图像的出现，并且通过将用户的兴趣反映到其中可以按各种模式显示存储的图像。

控制器180可以感测用于在实时模式下执行图库应用的触发。

当在常规模式下从第一图像至第二图像的滑动输入满足预定条件(S120：是)时，控制器180可以控制在实时模式下要执行的图库应用。当从第一图像至第二图像的滑动输入不满足预定条件(S120：否)时，控制器180控制在常规模式下要执行的图库应用。

预定条件可以包括滑动第一图像的拖拽输入的速度小于预定水平的情况。也就是说，如果在显示第一图像时用于将第二图像滑入视野的用户拖拽输入的速度小于预定水平，则可以确定用户对第一图像更感兴趣。通过拖拽第一图像，用户可以长时间观看第一图像。

将参照图5至图8更详细地描述预定条件。

当根据用户的触摸交互的滑动输入满足预定条件时，控制器180在实时模式下可以在触摸屏151上显示与第一图像和第二图像相关的信息(S130)。

将参照图9更详细地描述与第一图像和第二图像相关的信息。

在本说明书中，在控制器180的控制下实施上述操作。也就是说，控制器180基于输入信号控制要在触摸屏151上与图像一起显示的预定附加信息。在下面的说明中，通过控制器180显示图像和附加信息表示控制器180控制触摸屏151显示图像和附加信息。

图4至图8是用于解释在图3中示出的实施方式的图。

参照图4中的(a)，当执行图库应用时，控制器180可以在触摸屏151上显示多个图像。根据移动终端100的定向或图像的分辨率，可以在触摸屏151的特定区域中显示图像。例如，在移动终端100的人像模式下，在触摸屏151的第一区域151a中显示图像，并且除了第一区域151a以外的第二区域151b和第三区域151c保持空白。在移动终端100的风景模式下，图像显示区域可以与在图4中示出的图像显示区域不同。

参照图4中的(b)，在显示第一图像I1时当接收到用于向左滑动第一图像I1的拖拽输入D1时，第一图像I1滑入到视野中，并且然后第二图像I2(在第一图像之后)滑入到视野中。在滑动期间，第一图像I1和第二图像I2可以滑动为具有它们之间的小距离或保持它们之间的小距离。

图5例示了根据本发明的实施方式的在图像滑动期间当满足预定条件时在实时模式下执行的图库应用的示例。

参照图5中的(a)，控制器180感测针对第一图像I1的向左拖拽输入D2。控制器180可以感测拖拽输入D2的速度从拖拽输入开始点至时间t1增大，然后拖拽输入D2的速度从t1之后减小。在时间t2感测到的拖拽速度减小为小于用于进入实时模式的阈值速度R，然后拖拽输入可以在时间t3在特定点停止。当感测到小于阈值速度R的拖拽输入D2的速度时，控制器180可以控制要在实时模式下执行的图库应用。

参照图5中的(b)，在根据施加至第一图像I1的拖拽输入D2第一图像I1和第二图像I2在触摸屏151上滑入视野的同时当图库应用进入到实时模式时，控制器180可以在除了第一图像I1和第二图像I2以外的至少一个区域(第一区域：A1、第二区域：A2、第三区域：A3)中显示附加信息。

第一区域A1可以是第一图像I1和第二图像I2之间的区域，第二区域A2可以是第一图像I1和/或第二图像I2上方的区域，并且第三区域A3可以是第一图像I1和/或第二图像I2下方的区域。

虽然在上述示例中显示附加信息的区域被划分成第一区域A1、第二区域A2和第三区域A3，但是本发明不限于此。例如，可以经由图库应用在触摸屏151的整个区域中显示多个图像。因此，第一图像I1和第二图像I2滑入视野的区域可以不限于如图5(b)所示的触摸屏151的中间部分，并且由于第一图像I1和第二图像I2具有不同的大小和分辨率，第一图像I1和第二图像I2可以显示在触摸屏151上的不同区域中。在这种情况下，附加信息可以显示在触摸屏151的除了第一图像I1和/或第二图像I2以外的区域中。

将参照图6、图7和图8给出用于进入实时模式的预定条件的另一示例的说明。

参照图6中的(a)，在触摸屏151上长时间显示第一图像I1之后，控制器180可以感测接收到施加至第一图像I1的拖拽输入。长时间是指由用户设置的预定时间，并且用来确定用户对第一图像I1感兴趣从而在实时模式下提供关于第一图像I1的附加信息。如有必要，能够通过经由移动终端100的相机(图1的121)追踪用户的注视来感测用户是否注视第一图像I1达预定时间或更长时间。

参照图6中的(b)，控制器180可以控制图库应用在感测到施加至第一图像I1的向里捏输入时进入实时模式。

参照图6中的(c)，控制器180可以利用在触摸屏151上显示的第一图像I1控制图库应用在感测到施加至提供至移动终端100的主体的区域的用户输入单元123的输入时进入实时模式。

参照图6中的(d)，控制器180可以根据施加至触摸屏151的特定点的力来控制图库应用进入实时模式。例如，控制器180可以利用第一力感测施加至在触摸屏151上显示的第一图像I1的第一点的触摸。触摸屏151包括电容触摸面板使得触摸屏151可以根据用户的触摸输入通过检测与第一点相对应的电极的电容变化来感测施加至第一点的触摸。控制器180可以在保持施加至第一点的触摸的同时通过大于第一力且施加至第一图像I1的第二力来感测电容的变化和/或介电的形式。第一力可以连续地而非分开地改变为第二力，并且当感测到施加至第一点的触摸力变化时，控制器180可以控制要在实时模式下执行的图库应用。在移动终端100根据第二力的应用而切换至实时模式时，当释放触摸输入时实时模式切换至常规模式。

参照图7，可以根据用户的触摸输入在触摸屏151上的移动来改变在触摸屏151上显示的第一图像I1的位置。当用户触摸第一图像I1并且然后在触摸屏151上沿各个方向移动触摸时，控制器180可以确定用户想要关于第一图像I1的附加信息。因此，当检测到第一图像I1的位置在触摸屏151上的变化时，控制器180可以根据施加至第一图像I1的触摸的移动来控制要在实时模式下执行的图库应用。

控制器180可以在实时模式下在触摸屏151上显示与除了第一图像I1以外的第二图像I2和第三图像I3中的至少一个相关的信息。

参照图8，在显示第一图像I1的同时当感测到移动终端100的方向变化时，控制器180可以控制要在实时模式下执行的图库应用。例如，控制器180可以感测从在触摸屏151的整个区域中显示第一图像I1的风景模式切换至移动终端100的人像模式。当在人像模式下显示第一图像I1时，其分辨率改变并且可以在第一图像I1上方和下方产生空白区域。在实时模式下，可以在空白区域中显示附加信息。

将给出当在实时模式下执行图库应用时显示与图像相关的附加信息的过程的详细说明。

图9是例示用于控制移动终端的方法的流程图以更具体地描述在图3中示出的实施方式。

参照图9，当在实时模式下执行图库应用时，控制器180生成与在触摸屏151上显示的图像相关的信息(S131)。

相关信息可以基于经由机器学习模块11学习的数据，如图2所示。另选地，相关信息可以基于经由集体学习模块250应移动终端100的请求而学习的数据。

控制器180可以提取第一图像和第二图像的视频信息(S131a)。控制器180可以接收与视频信息相对应的服务器信息并且将其存储在存储器中(S131b)。

控制器180可以从存储在移动终端100中的信息提取视频信息。

第一图像和/或第二图像可以是经由移动终端100的相机121捕获且存储在存储器170中的图像或从外部服务器下载并且存储在存储器170中的图像。第一图像和/或第二图像可以包括经由移动终端100与外部设备之间的短程通信链路从外部设备接收的图像。

当捕获到图像时，视频信息可以与图像一起自动地存储。例如，视频信息可以包括(由用户设置的)图像的标题、类型(JPEG)、日期、将存储图像的位置(例如，图库应用的特定相册)、大小信息、分辨率和图像特征(光圈、曝光时间和ISO信息)。

另外，视频信息可以是根据用户的设置附加地收集的信息。例如，当关于捕获图像的位置的信息、关于与包括在捕获的图像中的面部对应的人的信息和捕获图像的位置或事件与登记至日历应用的日程信息对应时，日程信息可以作为附加视频信息存储。

另外，视频信息可以是外部服务器的URL信息。也就是说，当存储在存储器中的图像是下载的图像时，下载源信息可以被添加和存储为视频信息。

另外，视频信息可以是除了在捕获图像或下载图像期间所需的信息以外，当从滑入视野的多个图像实时地确定用户兴趣时根据用户兴趣而生成的信息。

视频信息不限于上述示例并且可以包括当存储或下载图像时能够被自动或手动地收集的与图像相关的信息。

视频信息可以被存储在外部服务器中并且应用户的请求而被发送至移动终端100。

虽然已经描述了与图像相关的附加信息与在实时模式下的图像一起显示的示例，但是本发明不限于此。例如，在实时模式下在第一图像之后能够提供反映了用户兴趣的图像。此外，使用在实时模式下提供的附加信息可以以各种方式使用图像。

控制器180可以在触摸屏151上显示所获得的(包括外部服务器信息的)视频信息(S133)。

控制器180可以在第一图像和第二图像之间显示所获得的(与图像相关的)附加信息(S133a)或在除了显示第一图像和第二图像的区域以外的区域中显示所获得的(与图像相关的)附加信息(S133b)。

图10至图13是用于解释在图9中示出的实施方式的图。

参照图10中的(a)，当通过执行图库应用在触摸屏151上显示第一图像I1时，控制器180可以接收用于将第一图像I1变成第二图像I2的滑动输入。当滑动输入满足上述预定条件时，控制器180控制要在实时模式下执行的图库应用。

参照图10中的(b)，在向左移动第一图像I1并且根据滑动输入滑动第二图像I2的同时，控制器180可以在进入实时模式时在触摸屏151上显示与第一图像I1和/或第二图像I2相关的信息。

控制器180可以在图像上方的区域中显示第一相关信息AI1并且在图像下方的区域中显示第二相关信息AI2。

第一相关信息AI1可以是当存储图像时自动存储在移动终端100中的本地信息。例如，当同一天在相同的地点捕获第一图像I1和第二图像I2时，控制器180可以将关于日期和地点的信息10作为第一相关信息AI1来显示。第一相关信息AI1可以是当存储捕获的图像时由用户输入的图像标题11。

第二相关信息AI2可以包括与第一图像I1和第二图像I2的地点相关的服务信息。在这种情况下，第二相关信息AI2可以是服务器信息，该服务器信息在存储所捕获的图像时没有出现并且当在实时模式下执行图库应用时从外部服务器接收。这种服务器信息可以在实时模式结束时消失。

控制器180可以暂时地停止图像滑动使得当图库应用进入实时模式时，用户能够使用在实时模式下提供的信息。

参照图10中的(c)，当在实时模式下接收到拖拽第二图像I2的输入时，控制器180可以在触摸屏151上显示第二图像I2。可以在实时模式下显示第二图像I2或可以在实时模式结束之后显示第二图像I2。

控制器180可以将在实时模式下能够表示第一图像I1和第二图像I2的图像设置为背景图像并且在触摸屏151上显示背景图像。也就是说，可以在第一图像I1和第二图像I2的背景中显示背景图像B1使得第一图像I1和/或第二图像I2在实时模式下在背景图像B1的至少部分处交叠。当在相同的地点捕获到第一图像I1和第二图像I2时，考虑到空间中的照度、颜色和光角，背景图像BI可以被设置为能够表示地点的图像。因此，用户能够直观地识别捕获第一图像I1和/或第二图像I2的地点。

参照图11，在捕获第一图像I1和第二图像I2期间，能够利用第一图像I1和第二图像I2来记录和存储用户的会话。当在实时模式下出现在捕获第一图像I1和第二图像I2期间记录的用户语音时，控制器180可以在第一图像I1和第二图像I2之间显示语言图标12。当选择语音图标12时，可以经由输出单元来输出记录的语音。

参照图12，当在相同的视野捕获的图像滑入实时模式下的视野并且在所述图像中公共地包括对象时，控制器180可以提取公共对象的位置值。控制器180可以对具有位置值变量的公共对象应用动画效果。

例如，控制器可以检测出现第一图像I1和第二图像中的第一对象OB1以及第一图像I1中的第一对象OB1的位置与第二图像I2的第一对象OB1的位置之间的不一致。控制器180可以在实时模式下从第一图像I1至第二图像I2施加表示第一对象OB1飞行的动态动画效果。因此，用户能够直观地识别捕获相同对象的图像连续地滑动到视野中。

参照图13，第一图像I1可以是包括人物的图像或只包括人物的下半身的图像。控制器180可以在实时模式下搜索作为包括人物的上半身的图像的第一图像I1的同时连续地捕获的图像，并且将该图像提供为第二图像I1’。

控制器180可以在实时模式下分析与第一图像I1同时捕获的图像并且提供动画效果A1、A2和A3。另外，控制器180可以从与第一图像I1同时捕获的图像当中设置代表图像作为第一图像I1的背景图像BI，并且显示该背景图像BI。

图14是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图。图15和图16是用于解释在图14中示出的实施方式的图。可以基于在图3中示出的实施方式来实现在图14中示出的实施方式。

当在实时模式下显示与第一图像和第二图像相关的信息时，针对要显示的图像，控制器180可以使用与第一图像和第二图像相关的信息。

参照图14，控制器180接收用于选择相关信息的输入(S200)。控制器180可以基于所选信息来确定在第一图像I1之后要显示的图像。

与在常规模式下经由滑动输入依次显示多个图像不同，可以使用在实时模式下提供的信息来设置要显示的图像。

参照图15，当在第一图像I1之后将要滑入视野中的第二图像I2包括与第一图像I1中包括的人物相同的人物时(例如，将要滑入视野的第一图像至第四图像包括相同的人物)，控制器180能够进入实时模式并且然后将从存储在存储器170中的图像当中包括该人物的多个图像的缩略图提供至触摸屏151。

当接收到用于从缩略图Th当中选择特定的缩略图13的输入(图15中的(a))时，控制器180可以在触摸屏151上显示与所选的缩略图I3相对应的图像I3(图15中的(b))。因此，因为提供之前捕获的包括人物的图像，所以使用在实时模式下提供的附加信息可以立刻给用户提供期望的图像，而不改变用于显示特定图像的画面。

参照图16，当接收到用于选择第一图像I1中包括的除了人物对象OB以外的背景的输入(例如，施加至背景的长触摸输入)时，控制器180可以进入实时模式，然后提供在捕获第一图像I1的位置处捕获的其它图像作为附加信息。控制器180可以从第一图像I1的视频信息提取位置信息并且捕获时间信息。控制器180可以将在对应时间在对应位置位置处捕获的图像的缩略图20提供给触摸屏151。另外，控制器180可以将在与捕获时间同一天捕获的图像的缩略图21提供给触摸屏151。

已经描述了在执行图库应用期间使用在实时模式下提供的附加信息的示例。本发明不限于上述示例，并且可以额外地执行在移动终端100中的除了图库应用的功能以外的功能以使用附加信息。

图17是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图。图18是用于解释在图17中例示的实施方式的图。在图17中例示的实施方式可以基于在图14中示出的实施方式或通过与图14中示出的实施方式相结合来实现。

参照图17，控制器180通过控制要在实时模式下执行的图库应用来显示与第一图像和第二图像相关的信息。相关的信息可以是关于在第一图像I1和/或第二图像I2中包括的特定人物的信息。因此，控制器180可以将与包括在图像中的特定人物相对应的图标S1和S2提供至触摸屏151作为相关信息(S300)。

控制器180可以接收用于选择与特定人物对应的图标S1和S2中的一个图标的输入(S310)。

控制器180可以将与所选图标对应的人设置为接收者，并且向接收者发送图像(S320)。

也就是说，当在实时模式下执行图库应用时，使用在实时模式下提供的附加信息能够在保持图库应用的执行的同时更容易地分享图像，而无需附加地执行图像分享功能和选择接收者。

参照图18，控制器180在触摸屏151上显示的第一图像I1上接收向左滑动的拖拽输入，并且当拖拽输入满足预定条件时，控制要在实时模式下执行的图库应用。

第一图像I1可以是包括多个人物的图像并且控制器180可以从第一图像I1选择特定的人物。控制器180可以从图像当中选择面部明显的人物、注视相机的人物或清晰地捕获了面部形状的人物，并且在触摸屏151上显示对应人物的缩略图S1和S2。可以以各种方式设置选择人物的规则。

在对应人物的代表图像被登记为移动终端100的联系人信息的状态下，当接收到用于选择特定缩略图S1的输入时，控制器180可以向所选择的人“简”发送图像I1。控制器180可以将用于在实时模式下使用缩略图S1和S2的引导信息G与图像和缩略图一起提供给触摸屏151。

图19是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图。图20是用于解释在图19中示出的实施方式的图。在图19中示出的实施方式可以基于在图3、图14和/或图17中示出的实施方式或通过将它们组合来实现。

参照图19，控制器180在实时模式下显示与第一图像和第二图像相关的信息。相关的信息可以包括与显示的图像相关的应用(S400)。

当从在实时模式下显示的多个应用当中选择特定的应用(S410)时，控制器180执行所选择的应用(S420)。

参照图20，当施加至在触摸屏151上显示的第一图像I1的滑动输入满足预定条件时，控制器180控制在实时模式下要执行的图库应用。

如上所述，通过执行图库应用而显示的图像可以不仅包括经由移动终端100的相机捕获的图像，而且还包括下载的图像。

参照图20，控制器180可以在触摸屏151上显示第一图像I1和/或第二图像I2的下载源应用A11。下载源应用A11可以包括消息应用和SNS(社交网络服务)应用。当捕获第一图像I1和/或第二图像I2的日期已经被登记在日程应用中时，控制器180可以将日程应用A12提供为相关信息。

当消息应用A11被选择为下载源时，通过执行消息应用，控制器180可以在触摸屏151上显示包括下载至其的第一图像I1的消息聊天窗口40。消息聊天窗口可以包括除了下载的第一图像I1以外没有被下载的图像I4。可以通过选择图像I4来下载图像I4。

当用户参加登记至日程应用的特定日程以获得第一图像I1时，可以将日程应用A12与图像一起提供以使用户能意识到捕获第一图像I1的日程。因此，能使用户识别通过在实时模式下使用图库应用已经下载相对应的图像的情况。

图21是例示根据本发明的另一实施方式的用于控制移动终端的方法的流程图。图22和图23是用于解释在图21中例示的实施方式的图。在图21中示出的实施方式可以基于在图3、图14、图17和/或图19中的实施方式或通过它们的组合来实现。

在基于预定规则经由滑动输入依次显示多个图像的同时当图库应用进入实时模式时，控制器180可以改变用于显示图像的预定规则并且根据改变的规则提供图像。

参照图21，控制器180可以设置用于在实时模式下显示图像的排序规则(S500)。

控制器180可以根据排序规则选择在第一图像之后要显示的图像并且显示该图像(S510)。

参照图22，当在相同地点捕获的相同人物(第一人物)的多个图像滑入视野时，检查滑动输入是否满足预定条件。预定条件可以包括不存在包括第一图像的更多图像的情况。

当第一图像I1是在滑动输入期间包括第一人物的最后一个图像时，控制器180可以在进入实时模式的同时通过增大第一图像I1和第二图像I2之间的间隙而在触摸屏上提供空白空间。当用于滑动输入的拖拽输入移动到空白空间(b)时，控制器180可以改变图像排序规则使得可以在第一图像I1后显示包括第一人物的图像。这里，当拖拽输入移动时，可以在空白空间中显示第一图像I1的缩略图I3’以告知用户在第一图像I1之后要显示的图像与第一人物相关。

控制器180可以在触摸屏151上显示用于引导用户的用于改变排序规则的触摸交互的信息G使得与第一人物相关的图像与图像一起连续地显示。

控制器180可以感测在用于改变图像排序规则的交互之后的其它滑动输入。控制器180可以在第一图像I1之后显示包括第一人物的另一图像I3。控制器180可以从存储器检索包括第一人物的附加图像并且根据图像排序规则提供该图像。

参照图23，控制器180可以提供候选组，通过该候选组可以在实时模式下选择图像排序规则。例如，控制器180可以基于能够经由第一图像I1提取的至少一条信息来显示第一图像I1和第二图像I2之间的至少一个图像排序规则。

例如，能够经由第一图像I1提取的至少一条信息可以包括第一图像I1中包括的人物S1和S2以及关于获得第一图像I1的位置的信息S3和S4。当选择特定人物“苏基”S2时，控制器180可以控制包括所选人物的图像I2在第一图像I1后滑入视野。控制器180可以从存储器检索包括所选人物的图像并且提供该图像。

图24至图28是用于解释本发明的其它实施方式的图。

参照图24，当在第一图像I1的滑动期间接收到施加至第一图像I1与第二图像I2之间的边界的长触摸输入时，控制器180可以进入实时模式。

控制器180可以在实时模式下在图像上方、图像下方和图像之间显示与第一图像I1和/或第二图像I2相关的信息。相关的信息可以包括关于捕获第一图像I1和第二图像I2的时间和地点的信息41和关于没有被包括在图像中但围绕包括在图像中的人的周围人的信息50。另外，控制器180可以提供用于使用相关信息的引导信息43。

在显示相关信息的同时当接收到施加至第一图像I1的拖拽触摸输入输入至特定人物时，控制器180可以执行与包括在周围人信息50中的特定人物51共享第一图像I1的功能。周围人信息50可以显示在第一图像I1和第二图像I2之间或显示在图像下方。因此，控制器180能在水平方向上经由拖拽输入滑动图像并且经由垂直方向上的拖拽输入共享图像。

参照图25，当在不同地点捕获第一图像I1和第二图像I2时，控制器180可以在实时模式下在第一图像I1和第二图像I2之间显示关于用于从捕获第一图像I1的第一地点移动至捕获第二图像I2的第二地点的交通工具的信息50。在这种情况下，在交通工具与移动终端100之间形成设备到设备通信链路使得当捕获图像时，关于交通工具的信息可以被添加和存储为元数据。

控制器180可以在实时模式下显示关于在第一图像I1附近的第一位置的信息并且显示关于在第二图像I2附近的第二位置的信息。

参照图26，第一图像I1可以是静止图像并且在第一图像I1之后显示的第二图像I2可以是视频。当滑动输入满足预定条件并且因此移动终端进入实时模式下时，控制器180可以在第一图像I1和第二图像I2之间显示指示第二图像I2是视频的图标53。另外，控制器180可以提取视频的静止截图55并且显示该静止截图55。

参照图27，在根据图库应用从多个图像当中显示第一图像I1期间，控制器180进入实时模式。当在第一图像I1之后显示的第二图像I2是用户感兴趣的图像时，控制器180可以显示用于指示要显示的第二图像I2的图标61。当第二图像I2包括多个人，并且因此难以从中选择特定的人时，可以通知用户将经由图像图标61(图27中的(a))来显示用户感兴趣的图像。

当在第一图像I1之后的第二图像I2被确定为用户感兴趣的图像并且出现能够表示图像的中心对象时，中心对象可以被显示为第一图像I1和第二图像I2之间的图标62。

参照图28，当满足预定条件且在第一图像I1的显示期间没有滑动输入时，控制器180可以将第一图像I1的附加信息与第一图像I1一起显示。

附加信息可以包括从移动终端100提取的信息71和与第一图像I1相关并且从外部设备接收的信息72。信息71可以在触摸屏的上部中显示，并且信息72可以在触摸屏的下部中显示。附加信息可以包括通过在第一图像I1中包括的特定对象上进行放大而获得的对象。

例如，当在显示第一图像I1后经过预定时间时，控制器180可以控制要在实时模式下执行的图库应用从而在触摸屏151上显示附加信息。这里，可以对附加信息71、72和73施加动画效果使得在实时模式下在触摸屏151上显示的第一图像I1周围逐渐显示附加信息。

当在风景模式下在触摸屏151上以第一分辨率显示第一图像I1时，在感测到移动终端的方向改变为人像模式时，控制器180控制在实时模式下要执行的图库应用。控制器180控制第一图像I1的分辨率使得第一图像I1与人像模式对应并且在触摸屏151的中间显示第一图像I1。根据分辨率控制在触摸屏151的上部和下部中生成空白区域，并且可以在空白区域中显示附加信息71和72。

已经描述了当在实时模式下执行图库应用时将与预存储图像相关的附加信息与图像一起提供的示例。控制器180可以将在实时模式下提供的图像存储为单独的文件。

图29和图30是用于解释本发明的其它实施方式的图。

当通过执行图库应用并且存储附加信息而在常规模式下提供图像的同时，控制器180可以进入实时模式，由此生成包括关于图像的故事的相册文件，其中，与在实时模式下滑入视野的多个图像一起提供作为与多个图像分开的文件的所述图像。

参照图29，图库应用可以提供用于将存储在移动终端中的图像分类成组并且提供图像组的相册视图菜单。可以经由相册视图菜单提供存储从外部设备下载的图像的相册、存储经由短程通信(蓝牙)从外部设备接收的图像的相册、存储经由移动终端的相机捕获的图像的相册和存储经由消息应用下载的图像的相册。可以以故事相册的形式经由图库应用提供根据本发明的实施方式在实时模式下在图库应用的操作期间提供的图像和附加信息。可以选择故事相册(例如，“汉拿山照片故事”)。

参照图30，通过在实时模式下查看在汉拿山登山期间捕获的多个图像并且然后将其存储而获得故事相册。当执行故事相册时，控制器180可以将触摸屏151的水平轴线设置为虚拟时间轴，将触摸屏151的垂直轴线设置为虚拟高度轴，并且然后排列和显示根据图像捕获时间和在触摸屏151上的高度分类的图像使得图像与提供至触摸屏151的虚拟时间轴和高度轴对应。因此，通过在实时模式下在移动终端100中提供在登山期间捕获的图像，能够经由移动终端100间接地实现实际登山的出现。

以上描述中提到的本发明可利用存储有指令的机器可读介质来实现，所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文所呈现的其它类型的存储介质及其组合。如果期望，机器可读介质可按照载波的形式实现(例如，经由互联网的传输)。处理器可包括移动终端的控制器180。

以上实施方式仅是示例性的，并且不被认为限制本公开。本说明书旨在是说明性的，而不是限制权利要求的范围。对于本领域技术人员而言，许多替代、修改和变型将是显而易见的。在此描述的示例性实施方式的特征、结构、方法和其它特性可以按照各种方式组合以获得另外的和/或另选的示例性实施方式。

由于在不脱离本发明的特性的情况下，本发明的特征可以按照多种形式来具体实现，所以还应该理解，除非另外指明，否则上述实施方式不受以上描述的任何细节限制，而是应该在所附权利要求书中所限定的范围内广义地理解，因此，落入权利要求的范围及其等同范围内的所有改变和修改因此旨在被所附的权利要求书涵盖。

相关申请的交叉引用

本申请要求于2015年12月18日提交的韩国专利申请第10-2015-0181507号的优先权，通过引用将该韩国专利申请的全部内容并入本文。

Claims (20)

1.一种移动终端，该移动终端包括：

触摸屏；和

控制器，所述控制器被配置为执行用于在所述控制器上显示图像的应用，所述控制器按照依次滑动的方式在所述触摸屏上显示多个图像，

其中，所述控制器被配置为响应于滑动输入来滑动第一图像的显示并且在所述触摸屏上显示第二图像的至少一部分，并且

所述控制器被配置为当确定满足预定条件时，显示与所述第一图像和所述第二图像相关的信息。

2.根据权利要求1所述的移动终端，其中，所述预定条件包括：

用于滑动所述第一图像的拖拽输入的速度小于预定水平，或

在显示所述第一图像达至少预定时间后在所述第一图像处接收滑动触摸输入。

3.根据权利要求1所述的移动终端，其中，所述预定条件包括：

在所述触摸屏上显示所述第一图像达至少预定时间而不滑动所述第二图像。

4.根据权利要求1所述的移动终端，其中，所显示的信息包括所述第一图像和所述第二图像所包括的属性信息，其中，所述属性信息包括关于以下各项中的至少一种的信息：

捕获所述第一图像和所述第二图像的时间和地点；

包括在所述第一图像和所述第二图像中的至少一个人物，和

包括在所述第一图像和所述第二图像中的至少一个对象。

5.根据权利要求1所述的移动终端，其中，所显示的信息包括与所述第一图像或所述第二图像一起存储在所述移动终端中的信息或经由通信单元从至少一个外部设备接收的信息。

6.根据权利要求1所述的移动终端，其中，所显示的信息包括：

至少一个缩略图，所述至少一个缩略图与包括在所述第一图像或所述第二图像中的特定人物对应，和

至少一个缩略图，所述至少一个缩略图包括当捕获所述第一图像或所述第二图像时没有包括在所述第一图像或所述第二图像中但是在包括在所述第一图像或所述第二图像中的人物附近的特定人物。

7.根据权利要求6所述的移动终端，其中，所述控制器被配置为响应于在所述第一图像处的触摸输入和在缩略图处的触摸输入，控制要与对应于所述缩略图的用户分享的所述第一图像。

8.根据权利要求1所述的移动终端，其中，所显示的信息包括以下各项中的至少一个：

第二图像的代表缩略图；

指示在所述第二图像后滑入视野的信息的缩略图；和

当所述第二图像是视频时所述视频的代表缩略图。

9.根据权利要求1所述的移动终端，其中，所显示的信息包括所述多个图像的下载源，

其中，所述控制器被配置为响应于所述下载源的选择来执行与所述下载源对应的应用。

10.根据权利要求1所述的移动终端，其中，所述第一图像是当图像滑入视野时多个图像当中具有公共属性的最后一个图像，

其中，所述控制器被配置为：当显示所述第一图像时，控制所述触摸屏以在所述第一图像与所述第二图像之间显示空白区域，并且经由在所述空白区域处的触摸交互来确定在所述第一图像之后要显示的所述第二图像的类型。

11.根据权利要求10所述的移动终端，其中，所述控制器被配置为在所述触摸屏上显示用于引导在空白空间处的所述触摸交互的引导信息。

12.根据权利要求1所述的移动终端，其中，所显示的信息包括具有所述第一图像和所述第二图像的特征的图像，

其中，所述控制器被配置为将所述图像设置为滑入视野的所述图像的背景图像并且在所述触摸屏上显示所述背景图像。

13.根据权利要求1所述的移动终端，其中，所述控制器被配置为在所述触摸屏上显示在所述第一图像和所述第二图像之间显示的信息。

14.根据权利要求1所述的移动终端，其中，所述控制器被配置为在所述触摸屏上显示在所述触摸屏的除了显示所述第一图像或所述第二图像的至少部分的区域外的区域中所显示的信息。

15.根据权利要求1所述的移动终端，其中，所述控制器被配置为当满足所述预定条件时，暂时地停止图像滑动并且在所述触摸屏上显示所述信息。

16.根据权利要求1所述的移动终端，其中，所述控制器被配置为在第一模式或第二模式下执行所述应用以控制所述多个图像滑入视野，

其中，所述控制器被配置为控制所述图像以在所述第一模式下经由所述触摸屏依次滑入视野，并且当满足所述预定条件时，在所述第二模式下在所述触摸屏上显示所述信息。

17.根据权利要求16所述的移动终端，其中，在所述第二模式下显示的至少一个图像被存储为相册文件。

18.一种用于控制移动终端的方法，该方法包括以下步骤：

执行用于显示多个图像的应用；

接收用于在触摸屏上以依次滑动的方式滑动所述多个图像的滑动输入；

在所述触摸屏上接收滑动输入以滑动第一图像并且在所述触摸屏上显示第二图像的至少一部分；

确定满足预定条件；以及

当确定满足所述预定条件时，在所述触摸屏上显示与所述第一图像和所述第二图像相关的信息。

19.根据权利要求18所述的方法，该方法还包括以下步骤：

当确定满足所述预定条件时，在所述触摸屏上显示所述第一图像和所述第二图像之间的空白区域；以及

在所述空白区域中显示所述信息。

20.根据权利要求18所述的方法，其中，所显示的信息包括与所述图像一起存储的第一信息或经由通信单元从外部设备接收的第二信息，

其中，在所述触摸屏上在所述图像上方显示所述第一信息，并且在所述触摸屏上在所述图像下方显示所述第二信息。