CN106331311A - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN106331311A
CN106331311A CN201610307378.5A CN201610307378A CN106331311A CN 106331311 A CN106331311 A CN 106331311A CN 201610307378 A CN201610307378 A CN 201610307378A CN 106331311 A CN106331311 A CN 106331311A
Authority
CN
China
Prior art keywords
touch
application
controller
mobile terminal
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610307378.5A
Other languages
English (en)
Inventor
权允美
李基仙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106331311A publication Critical patent/CN106331311A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416Control or interface arrangements specially adapted for digitisers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04804Transparency, e.g. transparent or translucent windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2201/00Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38Displays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Databases & Information Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)

Abstract

一种移动终端及其控制方法,该移动终端包括:触摸屏,其被配置为显示画面信息;以及控制器,其被配置为响应于对所述画面信息施加的指定所显示的画面信息的部分区域的预设类型的触摸,显示与所显示的画面信息的所指定的部分区域中所包括的特定对象有关的应用的应用图标。

Description

移动终端及其控制方法
技术领域
本公开涉及一种能够输出应用的图标的移动终端及其控制方法。
背景技术
终端通常可被分成移动/便携式终端或固定终端。移动终端还可被分成手持终端或车载终端。移动终端已变得越来越多功能。这些功能的示例包括数据和语言通信、经由相机拍摄图像和视频、记录音频、经由扬声器系统播放音乐文件以及在显示器上显示图像和视频。
一些移动终端包括支持玩游戏的附加功能,而其它终端被配置成多媒体播放器。最近,移动终端已能够接收允许观看诸如视频和电视节目的内容的广播和多媒体信号。正不断进行努力以支持和增加移动终端的功能。这些努力包括软件和硬件改进,以及结构组件上的改变和改进。
另外,可在终端中安装各种程序,并且可在终端中存储关于向用户提供更方便的功能的多个应用的信息。另外,根据情况和信息项可使用的应用的类型多样化并且增加。用户通过各种应用有许多优势和利益,但是出现这样的问题:用户应该根据情况或信息直接搜索要使用的应用并且应该经过多个步骤以执行应用。
发明内容
因此,详细描述的一方面在于提供一种能够基于特定输入立即提供适合于情况或信息的应用的执行图标的移动终端及其控制方法。
为了实现这些优点和其它优点并且根据本说明书的目的,如本文具体实现并广义描述的,一种移动终端包括:存储器,其能够存储至少一个应用的信息;触摸屏,其能够输出画面信息;以及控制器,其能够从基于对画面信息施加的预设类型的触摸指定的画面信息的一个区域提取对象信息,并且控制触摸屏输出所述至少一个应用当中与所述对象信息有关的应用的执行图标。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现并广义描述的,一种移动终端包括:存储器,其能够存储至少一个应用的信息;透明触摸屏,其能够接收触摸输入;相机,其能够捕获外部环境的图像;以及控制器,其能够基于对透明触摸屏施加的预设类型的触摸激活相机,并且在通过相机获得的外部环境的捕获图像中指定与透明触摸屏上基于预设类型的触摸形成的区域的位置对应的一个区域,其中,控制器从在捕获图像中指定的一个区域提取对象的图像信息,并且控制透明触摸屏输出至少一个应用当中与对象的图像信息有关的应用的执行图标。
为了实现这些和其它优点并且根据本说明书的目的,如本文具体实现并广义描述的,一种能够执行至少一个应用的移动终端的控制方法包括:在触摸屏上输出画面信息;当对画面信息施加预设类型的触摸时,基于所述预设类型的触摸指定画面信息的一个区域;从画面信息的所述一个区域提取对象信息;以及输出所述至少一个应用当中与对象信息有关的应用的执行图标。
本申请的进一步的适用范围将从下文给出的详细描述而变得更显而易见。然而,应该理解,仅示意性地在指示本公开的优选实施方式的同时给出详细描述和具体示例,因为对于本领域技术人员而言,通过该详细描述,在本公开的精神和范围内的各种改变和修改将变得显而易见。
附图说明
附图被包括以提供对本公开的进一步理解,并且被并入本说明书并构成本说明书的一部分,附图示出了示例性实施方式并与说明书一起用于说明本公开的原理。
附图中:
图1A是根据本公开的移动终端的框图。
图1B和图1C是从不同方向看的移动终端的一个示例的概念图。
图2A是示出根据本公开的实施方式的移动终端的控制方法的流程图。
图2B是示出根据本公开的实施方式的移动终端的控制方法的代表图。
图3A、图3B和图3C是示出与本公开的控制方法有关的根据触摸屏的输出状态的实施方式的示图。
图4A和图4B是示出与在相同的画面信息中根据预设类型的触摸指定的对象有关的实施方式的示图。
图5A、图5B和图5C是示出与画面信息的区域中包括单个对象的情况有关的实施方式的示图。
图6A和图6B是示出与指定画面信息的区域中所包括的多个对象的至少一部分有关的实施方式的示图。
图7A、图7B和图7C是示出与在执行预设认证功能的前提下输出应用的执行图标的情况有关的实施方式的示图。
图8A和图8B是示出与选择性地输出对象信息相关的应用的执行图标有关的实施方式的示图。
图9A和图9B是示出与通过利用提取的对象信息执行与对象有关的应用有关的实施方式的示图。
具体实施方式
现在将参照附图根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同或相似的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,相关领域的普通技术人员熟知的内容已被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
尽管本文中可使用术语第一、第二等来描述各种元件,这些元件不应受这些术语限制。这些术语通常仅用于将一个元件与另一元件相区分。当元件被称作“与另一元件连接”时,该元件可与该另一元件连接,或者也可存在中间元件。相比之下,当元件被称作“与另一元件直接连接”时,不存在中间元件。
单数表示形式可包括复数表示形式,除非根据上下文其表示明确不同的含义。本文中使用诸如“包括”或“具有”的术语,应该理解其旨在指示存在说明书中所公开的多个组件、功能或步骤,还应该理解同样可使用更多或更少的组件、功能或步骤。
本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、平板(slate)PC、平板(tablet)PC、超级本、可穿戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等。
仅作为非限制性示例,参照特定类型的移动终端进行进一步的描述。然而,这些教导同样适用于其它类型的终端,例如上述那些类型。另外,这些教导也可适用于诸如数字TV、台式计算机等的固定终端。
现在参照图1A至图1C,其中图1A是根据本公开的移动终端的框图,图1B和图1C是从不同方向看的移动终端的一个示例的概念图。移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。不要求实现所示的所有组件,可另选地实现更多或更少的组件。
现在参照图1A,移动终端100被示出为具有无线通信单元110,无线通信单元110被配置有多个通常实现的组件。例如,无线通信单元110通常包括允许移动终端100与无线通信系统或者移动终端所在的网络之间的无线通信的一个或更多个组件。
无线通信单元110通常包括允许通信(例如,移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。另外,无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120来获得,并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。
感测单元140通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。
如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器(G-sensor)、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器获得的信息,及其组合。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。显示单元151可具有与触摸传感器的夹层结构(inter-layered structure)或集成结构,以便方便触摸屏。触摸屏可在移动终端100与用户之间提供输出接口,并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线端口或无线端口、外部电源端口、有线数据端口或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,移动终端100可响应于连接到接口单元160的外部装置而执行与连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如,存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内,对于移动终端100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是,应用程序被存储在存储器170中,被安装在移动终端100中,并由控制器180执行以执行移动终端100的操作(或功能)。
除了与应用程序关联的操作以外,控制器180通常还用于控制移动终端100的总体操作。控制器180可通过处理经由图1A所描绘的各种组件输入或输出的信号、数据、信息等或者激活存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。作为一个示例,控制器180根据存储在存储器170中的应用程序的执行来控制图1A所示的一些或所有组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
上述组件中的至少一些可按照协作方式操作,以实现根据稍后将说明的各种实施方式的眼镜型终端的操作或控制方法。眼镜型终端的操作或控制方法可通过驱动存储在存储器170中的至少一个应用程序来在眼镜型终端上实现。
仍参照图1A,现在将更详细地描述该图中描绘的各种组件。关于无线通信单元110,广播接收模块111通常被配置为经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可包括卫星信道、地面信道或这二者。在一些实施方式中,可使用两个或更多个广播接收模块111以方便同时接收两个或更多个广播信道或者支持在广播信道之间切换。
移动通信模块112可向一个或更多个网络实体发送无线信号和/或从一个或更多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分,所述移动通信网络根据移动通信的技术标准或通信方法(例如,全球移动通信系统(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强型优化语音数据或增强型仅语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等)来构建。经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。
无线互联网模块113被配置为方便无线互联网接入。此模块可从内部或外部连接到移动终端100。无线互联网模块113可根据无线互联网技术经由通信网络发送和/或接收无线信号。
这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可根据这些无线互联网技术以及其它互联网技术中的一个或更多个来发送/接收数据。
在一些实施方式中,当根据(例如)WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LET、LTE-A等实现无线互联网接入时,作为移动通信网络的一部分,无线互联网模块113执行这种无线互联网接入。因此,互联网模块113可与移动通信模块112协作或被用作移动通信模块112。
短距离通信模块114被配置为方便短距离通信。用于实现这些短距离通信的适合的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短距离通信模块114通常经由无线局域网支持移动终端100与无线通信系统之间的无线通信、移动终端100与另一移动终端100之间的通信或者移动终端与另一移动终端100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。
在一些实施方式中,另一移动终端(可类似于移动终端100来配置)可以是能够与移动终端100交换数据(或者与移动终端100协作)的可穿戴装置(例如,智能手表、智能眼镜或头戴式显示器(HMD))。短距离通信模块114可感测或识别可穿戴装置,并允许可穿戴装置与移动终端100之间的通信。另外,当所感测到的可穿戴装置是被验证为与移动终端100进行通信的装置时,例如,控制器180可经由短距离通信模块114将在移动终端100中处理的数据发送给可穿戴装置。因此,可穿戴装置的用户可在可穿戴装置上使用在移动终端100中处理的数据。例如,当在移动终端100中接到电话时,用户可利用可穿戴装置来回电话。另外,当在移动终端100中接收到消息时,用户可利用可穿戴装置来查看所接收到的消息。
位置信息模块115通常被配置为检测、计算、推导或者标识移动终端的位置。例如,位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块或这二者。如果需要,位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作,以获得与移动终端的位置有关的数据。
作为一个示例,当移动终端使用GPS模块时,可利用从GPS卫星发送的信号来获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,可基于与无线接入点(AP)有关的信息来获取移动终端的位置,该无线接入点(AP)向Wi-Fi模块发送无线信号或者从Wi-Fi模块接收无线信号。
输入单元120可以被配置为允许对移动终端100的各种类型的输入。这些输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧可被显示在显示单元151上或存储在存储器170中。在一些情况下,相机121可按照矩阵配置而被设置,以使得具有各种角度或焦点的多个图像能够被输入至移动终端100。作为另一示例,相机121可按照立体设置方式来设置,以获取用于实现立体图像的左图像和右图像。
麦克风122通常被实现为允许向移动终端100输入音频。可根据移动终端100中执行的功能来按照各种方式处理音频输入。如果需要,麦克风122可包括各种噪声去除算法以去除在接收外部音频的过程中产生的不期望的噪声。
用户输入单元123是允许用户输入的组件。这种用户输入可使得控制器180能够控制移动终端100的操作。用户输入单元123可包括机械输入元件(例如,薄膜开关、滚轮、触合式开关、位于移动终端100的正面和/或背面或侧面的键、按钮等)或者触敏输入等中的一个或更多个。作为一个示例,触敏输入可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在移动终端上的触摸屏以外的位置处的触摸键。另外,虚拟键或视觉键可按照各种形状(例如,图形、文本、图标、视频或其组合)显示在触摸屏上。
感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制器180通常与感测单元140协作以基于感测单元140所提供的感测来控制移动终端100的操作或者执行与安装在移动终端中的应用程序关联的数据处理、功能或操作。可利用各种传感器中的任何传感器来实现感测单元140,现在将更详细地描述其中一些传感器。
接近传感器141可包括在没有机械接触的情况下,利用电磁场、红外线等来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可被设置在移动终端被触摸屏覆盖的内侧区域处或触摸屏附近。
例如,接近传感器141可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型时,接近传感器141可通过电磁场响应于导电物体的靠近而发生的变化来感测指点器(pointer)相对于触摸屏的接近。在这种情况下,触摸屏(触摸传感器)也可被归类为接近传感器。
本文中常常将提及术语“接近触摸”以表示指点器被设置成在没有接触触摸屏的情况下接近触摸屏的情景。本文中常常将提及术语“接触触摸”以表示指点器与触摸屏进行物理接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置,这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可感测接近触摸以及接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等)。
通常,控制器180对与接近传感器141所感测的接近触摸和接近触摸模式对应的数据进行处理,并在触摸屏上输出视觉信息。另外,控制器180可根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或处理不同的数据。
触摸传感器可利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如,显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。作为一个示例,触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可被配置为不仅感测触摸位置和触摸面积,而且感测触摸压力和/或触摸电容。通常使用触摸物体来对触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。
当通过触摸传感器感测到触摸输入时,可将相应的信号发送给触摸控制器。触摸控制器可对所接收到的信号进行处理,然后将相应的数据发送给控制器180。因此,控制器180可感测显示单元151的哪一区域被触摸。这里,触摸控制器可以是独立于控制器180的组件、控制器180及其组合。
在一些实施方式中,控制器180可根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的触摸物体的类型来执行相同或不同的控制。例如,可基于移动终端100的当前操作状态或者当前执行的应用程序来决定根据提供触摸输入的物体来执行相同的控制还是不同的控制。
触摸传感器和接近传感器可单独实现或者组合实现,以感测各种类型的触摸。这些触摸包括短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻拂(flick)触摸、缩小触摸、放大触摸、轻扫触摸、悬停触摸等。
如果需要,可实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如,控制器180可基于由照明传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快,所以光到达光学传感器的时间远比超声波到达超声传感器的时间短。可利用这一事实来计算波生成源的位置。例如,可基于光作为参考信号利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等)、光电传感器(或图像传感器)和激光传感器。利用激光传感器实现相机121可允许检测物理对象相对于3D立体图像的触摸。光电传感器可被层合在显示装置上或者与显示装置交叠。光电传感器可被配置为对接近触摸屏的物理对象的移动进行扫描。更详细地讲,光电传感器可包括成行和列的光电二极管和晶体管,以利用根据施加的光的量而变化的电信号来对光电传感器处接收的内容进行扫描。即,光电传感器可根据光的变化来计算物理对象的坐标,从而获得物理对象的位置信息。
显示单元151通常被配置为输出在移动终端100中处理的信息。例如,显示单元151可显示在移动终端100处执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施方式中,显示单元151可被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。
音频输出模块152通常被配置为输出音频数据。这些音频数据可从多种不同的源中的任何源获得,使得所述音频数据可从无线通信单元110接收或者可存储在存储器170中。所述音频数据可在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式下输出。音频输出模块152可提供与移动终端100所执行的特定功能有关的可听输出(例如,呼叫信号接收音、消息接收音等)。音频输出模块152还可被实现为受话器、扬声器、蜂鸣器等。
触觉模块153可被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等可通过用户选择或控制器的设定来控制。例如,触觉模块153可按照组合方式或顺序方式输出不同的振动。
除了振动以外,触觉模块153可产生各种其它触觉效果,包括诸如插针排列向接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、利用能够吸热或发热的元件再现冷和热的感觉的效果等。
除了通过直接接触传递触觉效果以外,触觉模块153还可被实现为使得用户能够通过诸如用户的手指或手臂的肌肉感觉来感觉到触觉效果。可根据移动终端100的特定配置设置两个或更多个触觉模块153。
光学输出模块154可输出用于利用光源的光指示事件的发生的信号。移动终端100中发生的事件的示例可包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。
由光学输出模块154输出的信号可被实现为使得移动终端发射单色光或多种颜色的光。例如,随着移动终端感测到用户已查看所发生的事件,信号输出可被终止。
接口单元160用作要与移动终端100连接的外部装置的接口。例如,接口单元160可接收从外部装置发送来的数据,接收电力以输送给移动终端100内的元件和组件,或者将移动终端100的内部数据发送给这种外部装置。接口单元160可包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
所述标识模块可以是存储用于验证移动终端100的使用权限的各种信息的芯片,并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。另外,具有标识模块的装置(本文中也称作“标识装置”)可采取智能卡的形式。因此,标识装置可经由接口单元160与终端100连接。
当移动终端100与外部托架连接时,接口单元160可用作使得能够将来自托架的电力供应给移动终端100的通道,或者可用作使得能够用来将由用户从托架输入的各种命令信号输送给移动终端的通道。从托架输入的各种命令信号或电力可用作用于识别出移动终端被正确安装在托架上的信号。
存储器170可存储用于支持控制器180的操作的程序,并存储输入/输出数据(例如,电话簿、消息、静止图像、视频等)。存储器170可存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。
存储器170可包括一种或更多种类型的存储介质,包括闪存、硬盘、固态盘、硅磁盘、微型多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。移动终端100还可与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。
控制器180通常可控制移动终端100的总体操作。例如,当移动终端的状态满足预设条件时,控制器180可设定或解除用于限制用户相对于应用输入控制命令的锁定状态。
控制器180还可执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理,或者执行模式识别处理以将在触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外,控制器180可控制那些组件中的一个或其组合,以便实现本文公开的各种示例性实施方式。
电源单元190接收外部电力或提供内部电力,并且供应对包括在移动终端100中的各个元件和组件进行操作所需的适当电力。电源单元190可包括电池,该电池通常是可再充电的或者以可拆卸的方式连接到终端主体以便于充电。
电源单元190可包括连接端口。该连接端口可被配置为接口单元160的一个示例,用于供应电力以对电池进行再充电的外部充电器可电连接到该连接端口。作为另一示例,电源单元190可被配置为以无线方式对电池进行再充电,而不使用连接端口。
在此示例中,电源单元190可利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发射器输送的电力。本文所述的各种实施方式可利用(例如)软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。
现在参照图1B和图1C,参照直板型终端主体描述移动终端100。然而,另选地,移动终端100可按照各种不同配置中的任何配置来实现。这些配置的示例包括手表型、夹子型、眼镜型或者折叠型、翻盖型、滑盖型、旋转型和摆动型(其中两个和更多个主体按照能够相对移动的方式彼此组合)或其组合。本文的讨论将常常涉及特定类型的移动终端(例如,直板型、手表型、眼镜型等)。然而,关于特定类型的移动终端的这些教导将通常也适用于其它类型的移动终端。
移动终端100将通常包括形成终端的外观的壳体(例如,框架、外壳、盖等)。在此实施方式中,壳体利用前壳体101和后壳体102形成。各种电子组件被包含在前壳体101与后壳体102之间所形成的空间中。另外,可在前壳体101与后壳体102之间设置至少一个中间壳体。
显示单元151被示出为设置在终端主体的前侧以输出信息。如图所示,显示单元151的窗口151a可被安装到前壳体101以与前壳体101一起形成终端主体的前表面。
在一些实施方式中,电子组件也可被安装到后壳体102。这些电子组件的示例包括可拆卸电池191、标识模块、存储卡等。后盖103被示出为盖住电子组件,该盖可以可拆卸地连接到后壳体102。因此,当将后盖103从后壳体102拆卸时,安装到后壳体102的电子组件暴露于外。
如图所示,当后盖103连接到后壳体102时,后壳体102的侧表面部分地暴露。在一些情况下,在连接时,后壳体102也可被后盖103完全遮蔽。在一些实施方式中,后盖103可包括开口以用于将相机121b或音频输出模块152b暴露于外。
壳体101、102、103可通过合成树脂的注塑成型来形成,或者可由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。作为多个壳体形成用于容纳组件的内部空间的示例的另选方式,移动终端100可被配置为使得一个壳体形成该内部空间。在此示例中,具有单一体的移动终端100被形成为使得合成树脂或金属从侧表面延伸至后表面。
如果需要,移动终端100可包括用于防止水进入终端主体中的防水单元。例如,防水单元可包括位于窗口151a与前壳体101之间的防水构件、前壳体101与后壳体102之间的防水构件、或者后壳体102与后盖103之间的防水构件,以在那些壳体连接时将内部空间密封。
图1B和图1C描绘了设置在移动终端上的特定组件。然而,另选的设置方式也是可能的,并且在本公开的教导内。一些组件可被省略或重新设置。例如,第一操纵单元123a可位于终端主体的另一表面上,第二音频输出模块152b可位于终端主体的侧表面上。
显示单元151输出在移动终端100中处理的信息。可利用一个或更多个合适的显示装置来实现显示单元151。这些合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、电子墨水显示器及其组合。
可利用两个显示装置(可实现相同或不同的显示技术)来实现显示单元151。例如,多个显示单元151可被设置在一侧,彼此间隔开或者这些装置可被集成,或者这些装置可被设置在不同的表面上。
显示单元151还可包括触摸传感器,该触摸传感器感测在显示单元处接收的触摸输入。当触摸被输入到显示单元151时,触摸传感器可被配置为感测该触摸,并且控制器180(例如)可生成与该触摸对应的控制命令或其它信号。以触摸方式输入的内容可以是文本或数值或者是可按照各种模式指示或指定的菜单项。
设置在窗口151a与窗口151a的后表面上的显示器之间的触摸传感器可按照具有触摸图案的膜配置或者按照直接图案化在窗口151a的后表面上的金属丝的形式来配置。另选地,触摸传感器可与显示器一体地形成。例如,触摸传感器可设置在显示器的基板上或者显示器内。
显示单元151还可与触摸传感器一起形成触摸屏。这里,触摸屏可用作用户输入单元123(参见图1A)。因此,触摸屏可代替第一操纵单元123a的至少一些功能。
第一音频输出模块152a可按照扬声器的形式来实现以输出语音音频、报警音、多媒体音频再现等。显示单元151的窗口151a通常将包括孔径以允许由第一音频输出模块152a生成的音频通过。一个另选方式是允许音频沿着结构体之间的装配间隙(例如,窗口151a与前壳体101之间的间隙)来释放。在这种情况下,从外观上看,独立地形成以输出音频音的孔不可见或者被隐藏,从而进一步简化移动终端100的外观和制造。
光学输出模块154可被配置为输出用于指示事件发生的光。这些事件的示例包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。当用户已查看发生的事件时,控制器可控制光学输出模块154停止光输出。
第一相机121a可处理由图像传感器在拍摄模式或视频呼叫模式下获得的图像帧(例如,静止图像或运动图像)。然后,经处理的图像帧可被显示在显示单元151上或者被存储在存储器170中。
第一操纵单元123a和第二操纵单元123b是用户输入单元123的示例,其可由用户操纵以提供对移动终端100的输入。第一操纵单元123a和第二操纵单元123b还可被共同称作操纵部分,并且可采用允许用户执行诸如触摸、推按、滚动等操纵的任何触觉方法。第一操纵单元123a和第二操纵单元123b还可采用允许用户执行诸如接近触摸、悬停等操纵的任何非触觉方法。
图1B将第一操纵单元123a示出为触摸键,但可能的另选方式包括机械键、按键、触摸键及其组合。在第一操纵单元123a和第二操纵单元123b处接收的输入可按照各种方式来使用。例如,用户可使用第一操纵单元123a来提供对菜单、主屏键、取消、搜索等的输入,用户可使用第二操纵单元123b来提供输入以控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。
作为用户输入单元123的另一示例,后输入单元可被设置在终端主体的后表面上。用户可操纵后输入单元以提供对移动终端100的输入。所述输入可按照各种不同的方式而被使用。例如,用户可使用后输入单元来提供输入以进行电源开/关、开始、结束、滚动、控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。后输入单元可被配置为允许触摸输入、推按输入或其组合。
后输入单元可被设置为在终端主体的厚度方向上与前侧的显示单元151交叠。作为一个示例,后输入单元可被设置在终端主体的后侧的上端部,使得当用户用一只手抓握终端主体时用户可利用食指容易地操纵后输入单元。另选地,后输入单元可至多被设置在终端主体的后侧的任何位置。
包括后输入单元的实施方式可将第一操纵单元123a的一些或全部功能实现在后输入单元中。因此,在从前侧省略第一操纵单元123a的情况下,显示单元151可具有更大的屏幕。
作为又一另选方式,移动终端100可包括扫描用户的指纹的手指扫描传感器。然后控制器180可使用由手指扫描传感器感测到的指纹信息作为验证程序的一部分。手指扫描传感器也可被安装在显示单元151中或实现在用户输入单元123中。麦克风122被示出为设置在移动终端100的端部,但其它位置也是可能的。如果需要,可实现多个麦克风,这种设置方式允许接收立体声。
接口单元160可用作允许移动终端100与外部装置相连接的路径。例如,接口单元160可包括用于连接到另一装置(例如,耳机、外部扬声器等)的连接端子、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于向移动终端100供电的电源端子中的一个或更多个。接口单元160可按照用于容纳外部卡(例如,订户标识模块(SIM)、用户标识模块(UIM)、或者用于信息存储的存储卡)的插槽的形式来实现。
第二相机121b被示出为设置在终端主体的后侧,并且其图像拍摄方向基本上与第一相机单元121a的图像拍摄方向相反。如果需要,可另选地将第二相机121b设置在其它位置或者使其能够移动,以便具有不同于所示图像拍摄方向的图像拍摄方向。
第二相机121b可包括沿着至少一条线设置的多个透镜。多个透镜还可按照矩阵配置来设置。这些相机可被称作“阵列相机”。当第二相机121b被实现为阵列相机时,可利用多个透镜以各种方式拍摄图像,并且图像具有更好的质量。
如图1C所示,闪光灯124被示出为与第二相机121b相邻。当利用相机121b拍摄目标的图像时,闪光灯124可对目标进行照明。如图1C所示,可在终端主体上设置第二音频输出模块152b。第二音频输出模块152b可结合第一音频输出模块152a实现立体声功能,并且还可用于实现呼叫通信的免提模式。
用于无线通信的至少一个天线可设置在终端主体上。天线可被安装在终端主体中或者可由壳体形成。例如,构成广播接收模块111的一部分的天线可收缩到终端主体中。另选地,天线可利用附着到后盖103的内表面的膜或者包含导电材料的壳体来形成。
用于向移动终端100供电的电源单元190可包括电池191,该电池191被安装在终端主体中或者可拆卸地连接到终端主体的外部。电池191可经由连接到接口单元160的电源线来接收电力。另外,电池191可利用无线充电器以无线方式再充电。无线充电可通过磁感应或电磁共振来实现。
后盖103被示出为连接到后壳体102以用于遮蔽电池191,以防止电池191分离并保护电池191免受外部冲击或异物的影响。当电池191能够从终端主体拆卸时,后盖103可以可拆卸地连接到后壳体102。
在移动终端100上可另外设置用于保护外观或者辅助或扩展移动终端100的功能的附件。作为附件的一个示例,可设置用于覆盖或容纳移动终端100的至少一个表面的盖或袋。盖或袋可与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于辅助或扩展对触摸屏的触摸输入的触摸笔。
基于对触摸屏上输出的画面信息施加的预设类型的触摸,根据本公开的实施方式的移动终端可提取与用户所选择的对象对应的对象信息并且立即提供与该对象信息有关的应用的执行图标。
因此,可向用户提供这样的便利:不管触摸屏上输出的画面信息的类型如何,通过简单地对画面信息施加预设类型的触摸来快速且容易地执行与对象信息有关的应用,而无需直接搜索与期望的对象有关的应用的处理。
以下,将参照附图描述与如上所述配置的移动终端中可实现的控制方法有关的示例性实施方式。对于本领域技术人员而言将显而易见的是,在不脱离本发明的精神和范围的情况下,可进行修改和变化。
图2A是示出根据本公开的实施方式的移动终端的控制方法的流程图,图2B是示出根据本公开的实施方式的移动终端的控制方法的代表图。首先,参照图2A,移动终端的存储器170存储关于移动终端100中可执行的至少一个应用的信息(S201)。
更详细地讲,关于至少一个应用的信息可以是至少一个应用的功能信息。例如,与至少一个应用中的每一个对应的程序信息、用于执行至少一个应用中的每一个的控制命令的信息以及根据控制命令的操作信息等可被存储在存储器170中。
另外,至少一个应用的执行信息可被存储在存储器170中。即,存储器170可存储关于至少一个应用的执行的执行信息,例如至少一个应用的执行频率、至少一个应用的执行次数或者至少一个应用最近是否被执行。
另外,触摸屏151输出画面信息(S202),该画面信息可包括触摸屏151上可显示的任何类型的画面信息。例如,画面信息可以是特定应用的执行画面、主页画面、限制控制命令的接收的锁定画面等。即,如图2B的第一张图中所示,由相机121捕获的预览图像20可被输出在触摸屏151上。
因此,当画面信息被输出时,控制器180可基于对画面信息施加的预设类型的触摸从指定的画面信息的区域提取对象信息(S203)。预设类型的触摸可以是指定画面信息的区域的触摸。更详细地讲,预设类型的触摸可包括第一触摸和第二触摸,并且可通过第一触摸和第二触摸的各种组合来限定。例如,预设类型的触摸可通过在维持第一触摸时施加的第二触摸来限制,或者通过继第一触摸之后施加的第二触摸来限定。另外,预设类型的触摸可通过基本上同时施加的第一触摸和第二触摸的组合来限定,或者通过第一触摸以及在距第一触摸的施加终止了预设时间段之后施加的第二触摸的组合来限定。
更详细地讲,例如,预设类型的触摸可被限定为通过两根手指对触摸屏的一个点施加的第一触摸以及作为在不释放第一触摸时通过在不同的方向上张开这两根手指而施加的拖曳输入的第二触摸的组合。即,如图2B的第二张图中所示,当预览画面20被输出时,可通过两根手指对预览图像20上的一个点施加第一触摸。另外,如图2B的第三张图中所示,当通过两根手指施加的第一触摸未被释放时,可对触摸屏151施加通过张开两根手指的手势施加的第二触摸。
在另一示例中,预设类型的触摸可被限定为对画面信息的一个点施加的第一触摸以及对不同于画面信息的所述一个点的另一点施加的第二触摸的组合。这里,第一触摸和第二触摸可基本上同时施加或者顺序地施加。在另一示例中,第一触摸可以是对画面信息的两个不同点同时施加的多触摸,第二触摸可以是对不同于上述两个不同的点的另外的两个点同时施加的多触摸。
另外,预设类型的触摸可被维持预设时间段,使得所述预设类型的触摸可与被施加以控制画面信息的触摸输入相区别。即,第一触摸和第二触摸中的至少一个可在被施加于触摸屏的状态下被维持预设时间段。
例如,当在第一触摸之后继续施加第二触摸并且对画面信息上的一个点施加的触摸被维持预设时间段时,控制器180可将对所述一个点施加的触摸识别为第一触摸。在另一示例中,当对画面信息上的两个不同的点施加的第一触摸和第二触摸中的至少一个被维持预设时间段时,控制器180可将被维持预设时间段的至少一个触摸识别为第一触摸和第二触摸中的至少一个。
控制器180可将基于画面信息上与第一触摸和第二触摸对应的点形成的区域指定为画面信息的一个区域。例如,控制器180可基于画面信息上施加第一触摸和第二触摸的点来指定画面信息的一个区域。
更详细地讲,当作为预设类型的触摸,第一触摸和第二触摸被同时施加于画面信息的两个不同的点时,控制器180可将所述两个不同的点之间的区域指定为画面信息的一个区域。另外,当第一触摸是对两个不同的点施加的多触摸,第二触摸是对另外的两个点施加的多触摸时,控制器180可将通过第一触摸和第二触摸选择的四个点的位置所形成的区域指定为画面信息的一个区域。
在另一示例中,当对画面信息施加第一触摸并且在第一触摸之后继续对画面信息施加第二触摸时,控制器180可指定第一触摸被施加的点以及第二触摸被施加并释放的点。在这种情况下,基于第一触摸被施加的点,控制器180可将从第一触摸被施加的点到第二触摸被释放的点的区域指定为画面信息的一个区域。
即,如图2B的第三张图中所示,控制器180可将从第一触摸被施加的点到第二触摸被释放的点的区域20a指定为画面信息的一个区域20a。因此,当指定画面信息的一个区域20a时,控制器180可输出特定视觉效果(例如,通过虚线来指示特定的一个区域)使得用户可识别根据预设方案形成的一个区域20a。
另选地,控制器180可将基于第一触摸和第二触摸被释放的点形成的区域指定为画面信息的一个区域。另外,当指定画面信息的一个区域时,控制器180可从画面信息的该一个区域提取对象信息。这里,对象信息可以是与画面信息的一个区域中所包括的对象对应的图像信息和文本信息中的至少一个。另外,对象可以是画面信息中所包括的所有对象,例如人、动物、植物、物品、字符和文本。
例如,参照图2B的第三张图,与画面信息的一个区域20a中所包括的字符图像(GGV)1对应的字符被选为对象。在这种情况下,控制器180可控制触摸屏151在对象1中输出特定指示,使得对象1可被识别。另外,控制器180可从预览画面20提取与所选择的对象1对应的图像信息。
当画面信息的一个区域中仅包括一个对象时,控制器180可直接指定这一个对象并且指定画面信息的一个区域。另外,控制器180可从这一个对象提取对象信息。这将在下文中参照图5A、图5B和图5C来描述。
另选地,当画面信息的一个区域中包括多个对象时,控制器180可基于预设类型的触摸从所述多个对象中选择一些对象。例如,当画面信息的一个区域中包括多个对象时,控制器180可在第一触摸和第二触摸被施加的点当中基于至少一个位置选择一个对象。与选择画面信息的一个区域中所包括的对象有关的实施方式将在下文中参照图6A和图6B来描述。
因此,当画面信息的一个区域中所包括的对象被选择时,控制器180可提取与该对象对应的图像信息或文本信息。另外,控制器180可控制触摸屏151使得存储在存储器170中的至少一个应用当中与对象信息有关的应用的执行图标被输出(S204)。
当提取了对象信息时,控制器180可分析对象信息并且在所述至少一个应用当中选择与该对象信息有关的应用。例如,当作为对象信息提取了图像信息时,控制器180可分析该图像信息。即,控制器180可通过图像信息的分析来识别与图像信息对应的对象的类型、含义和来源。
在特定示例中,当图像信息是特定人的脸部图像时,控制器180可通过图像信息的分析来识别与脸部图像对应的特定人。在这种情况下,控制器180可控制无线通信单元110与外部服务器执行无线通信以搜索该特定人。另外,控制器180可利用存储在存储器170中的图像信息来搜索与脸部图像对应的特定人。
在另一示例中,当图像信息是与字符或文本对应的图像信息时,控制器180可利用光学字符阅读器(OCR)方案来提取与图像信息对应的字符或文本。在这种情况下,控制器180可通过利用字符或文本作为关键字执行搜索以识别字符或文本的含义。
类似地,当对象信息是文本信息时,控制器180可通过识别与文本信息对应的文本的含义来分析对象信息。另外,控制器180可基于分析在所述至少一个应用当中选择与对象信息有关的应用。这里,与对象信息有关的应用可以是与通过分析而识别的对象的类型、含义和来源对应的应用。
例如,当通过对象信息的分析获得特定字符或文本时,控制器180可利用所述特定字符或文本作为关键字选择与所述特定字符或文本对应的应用。在这种情况下,控制器180可选择具有与所述特定字符或文本的含义对应的功能或属性信息的应用。
在特定示例中,如图2B的第四张图中所示,控制器180可基于对象1的图像信息的分析来提取与图像信息对应的字符(GGV)。另外,控制器180可利用无线通信单元110从外部服务器搜索字符(GGV)的含义。
即,控制器180可通过搜索来收集关于字符的信息。例如,控制器180可收集关于字符是不是特定公司、品牌或者商店的名称、字符是否指定特定物件或物品、或者字符是不是具有特定含义的文本的首字母缩略词的信息。
控制器180可利用所收集的信息选择所述至少一个应用中的一些。例如,当对象(字符)是特定品牌的名称时,控制器180可在所述至少一个应用当中选择用于搜索与该品牌有关的信息的应用、用于查看该品牌的事件信息或更新信息的应用、或者用于登记与该品牌有关的优惠卷或积分的应用。
另外,当与对象有关的应用为多个时,控制器180可考虑其它条件来设定关于应用的优先级。这里,所述其它条件可包括预设类型的触摸被施加的时间或地点、或者与用户关于该应用的执行有关的历史信息。这将在下文中参照图8A和图8B来详细描述。
因此,如图2B的第三张图中所示,控制器180可从特定对象1的图像来分析与对象1对应的字符(GGV)的含义并且识别出字符(GGV)是特定品牌的剧院的名称。控制器180可选择用于查看该特定品牌的剧院中上映的电影信息的应用、用于预订电影票的应用以及用于对电影信息执行搜索的应用。
在另一示例中,当通过对象信息的分析确定对象是特定人时,控制器180可选择用于搜索该特定人的应用。另外,控制器180可选择可通过利用与该特定人对应的信息而被执行的应用。例如,控制器180可获得与该特定人对应的外部终端的标识信息并且向该外部终端发送信息,或者可选择用于上传与外部终端所对应的标识信息有关的信息的应用。
因此,当与对象信息有关的应用被选择时,控制器180可在触摸屏151上输出所选择的应用的执行图标,使得用户可立即执行所选择的应用。
这里,当所述预设触摸被释放时,控制器180可控制触摸屏151输出与对象信息有关的应用的执行图标。另外,控制器180可控制触摸屏151将与对象信息有关的应用的执行图标输出到与画面信息的一个区域相邻的位置。
即,如图2B的第四张图中所示,控制器180可控制触摸屏151将与对象1有关选择的应用的执行图标1a、1b和1c输出到与画面信息20的一个区域20a对应的位置。随后,如图2B的第四张图中所示,当对任一个执行图标1a施加用户的触摸时,与执行图标1a对应的应用的执行画面21被输出在触摸屏151上。
因此,用户可通过利用预设类型的触摸选择当前输出的画面信息中所包括的对象来容易地执行与对象有关的各种功能。更详细地讲,当用户想要执行与对象有关的各种功能时(即,当用户想要搜索关于对象的信息、想要与外部装置或服务器共享与对象对应的对象信息、或者想要利用对象信息执行特定功能时),可向用户提供甚至在没有单独地搜索应用以执行各种功能中的每一个的步骤的情况下立即执行期望的功能的便利。
以下,将利用预设类型的触摸描述根据本公开的实施方式的控制方法,所述预设类型的触摸是第一触摸和第二触摸的组合,该第一触摸通过两根手指对画面信息的一个点施加,第二触摸是在第一触摸未被释放时张开两根手指的拖曳输入。然而,预设类型的触摸不限于此。如上所述,移动终端100可从画面信息提取对象信息,而不管触摸屏151上输出的画面信息的类型。
图3A、图3B和图3C是示出与本公开的控制方法有关的根据触摸屏的输出状态的实施方式的示图。首先,参照图3A,根据时间的逝去包括连续图像的视频的画面信息被输出在触摸屏151上。当画面信息22被输出时,如图3A的第二张图中所示,通过两根手指对画面信息22的一个点施加第一触摸,并且如图3A的第三张图中所示,紧随第一触摸之后通过两根手指施加作为拖曳输入的第二触摸。
在这种情况下,当在所述一个点处维持第一触摸达预设时间段时,控制器180可识别出通过两根手指施加的触摸是第一触摸。另外,基于紧随第一触摸之后施加的第二触摸,控制器180可将从所述一个点到第二触摸被释放的点的区域指定为画面信息的一个区域22。
因此,如图3A的第三张图中所示,指定画面信息22的一个区域22a。另外,控制器180可从画面信息22提取所指定的一个区域22a中所包括的对象2的对象信息。另外,控制器180可控制触摸屏151,使得基于当前输出的图像根据时间的逝去改变为与下一顺序对应的图像的视频的特性,无误地指定画面信息的一个区域22。即,当对画面信息22施加第一触摸时,控制器180可控制触摸屏151,使得在施加第一触摸的时间点触摸屏151上输出的图像输出被维持。
因此,当与对象2对应的对象信息被提取时,控制器180可通过对象信息的分析识别与对象2对应的物品的类型。另外,控制器180可选择与对象2有关的应用。例如,当对象2是特定手提包时,控制器180可选择用于搜索对象2的品牌或厂商名称的应用、用于购买对象2的应用、或者利用对象2查看时尚或潮流信息的应用。另外,如图3A的第四张图中所示,控制器180可控制触摸屏151输出与对象有关地选择的应用的执行图标2a、2b和2c。
另外,如图3A的第一张图中所示,Web浏览的画面信息23可被输出在触摸屏151上。另外,当如图3B的第二张图中所示,对画面信息23的一个点施加第一触摸时,如图3B的第三张图中所示,可紧随第一触摸之后施加第二触摸。在这种情况下,控制器180可将第一触摸和第二触摸所形成的区域指定为画面信息23的一个区域23a。
另外,在画面信息23的一个区域23a中所包括的对象3被指定之后,可提取与对象3对应的对象信息。控制器180可分析对象信息以确定与该对象信息对应的对象是物品还是人,以及如果对象是物品,它是哪类物品,因此识别对象的类型。
另外,当输出在触摸屏151上的画面信息是包括多条视觉信息的Web浏览画面时,控制器180可利用Web浏览画面来分析所提取的对象信息。即,控制器180可利用当前输出的画面中所包括的信息来识别对象的类型,而无需搜索外部服务器或存储器。因此,如图3B的第三张图中所示,控制器180可基于画面信息23中所包括的信息来识别出与所提取的对象信息对应的对象是特定食物。
另外,与所识别的对象有关,控制器180可在至少一个应用当中选择用于订购特定食物的应用、用于搜索烹饪特定食物的方法的应用、用于提供关于具有特定食物的餐馆的信息的应用。在这种情况下,控制器180可考虑诸如施加预设类型的触摸的时间或位置的信息。例如,当施加预设类型的触摸的时间是深夜时,控制器180可优先从至少一个应用当中选择用于订购特定食物的应用。
因此,如图3B的第四张图中所示,当与对象有关的应用被选择时,控制器180可控制触摸屏151将所选择的应用的执行图标3a、3b和3c输出在Web浏览的画面信息23上。
即,当用户选择用户所感兴趣的特定对象,而不管触摸屏151上输出的画面信息时,可快速且容易地执行与特定对象有关的功能。另外,执行图标的类型可根据用于选择特定对象的预设类型的触摸施加的时间或位置或者触摸屏151上输出的画面信息而变化。因此,可与特定对象有关地向用户提供与他或她的意图所对应的功能对应的执行图标。
另外,即使根据本公开的实施方式的移动终端的触摸屏151处于未输出画面信息的去激活状态,如果提供特定触摸屏,则根据本公开的实施方式的控制方法可应用。
在这方面,参照图3C的第一张图,根据本公开的实施方式的移动终端100’可包括透明触摸屏151’,其由透明材料形成并且可接收触摸输入。当输出画面信息时,透明触摸屏151’可投影位于移动终端100’后表面上的外部环境。
这里,如图3C的第二张图中所示,可对透明触摸屏151’的一个点施加第一触摸。当对一个点施加的触摸被维持达预设时间段时,控制器180可确定对一个点施加的触摸是第一触摸,并且激活相机。因此,基于第一触摸激活的相机可捕获位于移动终端100’背后的周围环境的图像。
随后,如图3C的第三张图中所示,当紧随施加于一个点的第一触摸之后施加第二触摸时,控制器180可指定透明触摸屏151’上基于第一触摸和第二触摸形成的区域。另外,控制器180可在通过激活的相机捕获的外部环境的图像中指定与特定区域对应的一个区域。
换言之,控制器180可确定对透明触摸屏151’施加的预设类型的触摸可以是通过透明触摸屏151’投影的外部环境中所包括的对象的选择输入。另外,为了获得外部环境中所包括的对象的信息,控制器180可分析在移动终端100’的位置处捕获的外部环境的图像。
更详细地讲,控制器180可指定与透明触摸屏151’上基于预设类型的触摸形成的区域的位置对应的位置的一个区域。另外,控制器180可指定在捕获的图像中指定的一个区域中所包括的对象。
控制器180可控制透明触摸屏151’输出指定的对象1’以及关于形成的区域151’a的指示。如果透明触摸屏151’处于照明被关闭的去激活状态,则控制器180可基于根据预设类型的触摸形成的区域的指定和该区域中所包括的对象来激活透明触摸屏151’的至少一部分。
另外,控制器180可从捕获的图像提取指定的对象1’的图像信息并且基于图像信息的分析来搜索与指定的对象1’有关的应用。随后,当预设类型的触摸被释放时,如图3C的第四张图中所示,与指定的对象1’有关的应用的执行图标1’a、1’b和1’c被显示在透明屏幕151’上。
控制器180可控制透明触摸屏151’将与指定的对象1’有关的应用的执行图标1’a、1’b和1’c输出到与透明触摸屏151’上指定的区域151’a对应的位置。因此,可通过与从投影到透明触摸屏151’的外部环境选择的对象相邻的区域向用户提供执行图标。
另外,控制器180可基于对透明触摸屏151’施加的预设类型的触摸来将通过相机捕获的图像输出在透明触摸屏151’上。在这种情况下,用户从捕获的图像更精确地选择用户所期望的对象的效果。
以下,将描述与指定画面信息的一个区域中所包括的对象有关的实施方式。图4A和图4B是示出与在相同的画面信息中根据预设类型的触摸指定的对象有关的实施方式的示图。
首先,参照图4A,视频的画面信息22’可被输出在触摸屏151上。这里,如图4A的第二张图中所示,可对画面信息22’的一个点施加第一触摸,并且如图4A的第三张图中所示,可紧随第一触摸之后施加第二触摸。响应于此,控制器180可将基于画面信息22’的所述一个点和第二触摸被释放的点形成的区域22’a指定为画面信息22’的一个区域。
另外,控制器180可提取与画面信息22’的一个区域22’a中所包括的对象4对应的对象的图像信息。另外,控制器180可分析所提取的对象4的图像信息并且确定对象4是人。
为了识别与对象4的图像信息对应的特定人,控制器180可分析与图像信息对应的脸部图像,并且收集与其有关的信息。例如,当与对象4的脸部图像对应的特定人的信息已被存储在移动终端100中时,相关的应用(例如,能够与该特定人所对应的终端执行信使的功能的应用)可被选择。另选地,当特定人的信息未被存储时,控制器180可通过外部服务器搜索该特定人或者选择能够查看与该特定人有关的信息的应用。
因此,如图4A的第四张图中所示,通过控制器180选择的应用的执行图标4a、4b和4c可被输出在触摸屏151上。这里,如图4A的第四张图中所示,当用户选择一个执行图标4a时,如图4A的第五张图中所示,控制器180可控制触摸屏151输出与执行图标41对应的应用的执行画面24。
另外,当基于对象4的图像信息的分析来获得与对象4对应的特定人的信息时,控制器180可在执行与用户所选择的执行图标对应的应用时使用该特定人的信息。例如,如图4A的第五张图中所示,当搜索与对象4对应的特定人的应用被执行时,控制器180可将该特定人的信息包括在应用的执行画面24中并且输出该信息。
另外,参照图4B,当与图4A相同的画面信息22’被输出在触摸屏151上时,如图4B的第二张图中所示,可对不同于所述一个点的点施加预设类型的触摸。响应于此,如图4B的第三张图中所示,控制器180可基于不同的点指定画面信息的一个区域。
并且,控制器180可从指定的画面信息的一个区域22’b提取对象信息。如图4B的第三张图中所示,对象信息可以是与特定字符5对应的图像信息。在这种情况下,控制器180可利用光学字符阅读器(OCR)方案提取与图像信息对应的特定字符。
另外,控制器180可识别特定字符5的类型和含义。例如,如图4B所示,当特定字符5被识别为国名时,控制器180可选择用于搜索关于该国家的信息的应用或者用于搜索与该国家有关的旅游信息的应用。
因此,如图4B的第四张图中所示,可输出与对象5有关的应用的执行图标5a和5b,并且如图4B的第五张图中所示,基于对一个执行图标5a施加的触摸,旅游信息应用的执行画面25可被输出在触摸屏51上。如图4B所示,控制器180可将与特定对象有关获得的信息(国名)包括在应用的执行画面25中并且输出该信息。
因此,不管相同的画面信息,用户可通过对不同的点施加预设类型的触摸来指定不同的对象。另外,与控制器180所分析的对象信息有关的特定功能的执行画面(例如,当利用对象信息作为搜索词执行搜索功能时)可被输出在触摸屏151上。因此,当应用的执行画面被输出时,可直接向用户提供用户所期望的画面信息,甚至无需执行与对象有关的功能的单独的输入。
另外,画面信息的一个区域中可包括至少一个对象。控制器180可根据一个区域中所包括的对象的数量不同地执行控制。即,当画面信息的一个区域中仅包括一个对象时,控制器180可在指定画面信息的一个区域时立即指定所述一个对象并且提取对象信息。另选地,当画面信息的所述一个区域中包括多个对象时,控制器180可基于第一触摸或第二触摸执行控制,例如仅选择一个对象或者选择多个对象。以下将描述相关的实施方式。
接下来,图5A、图5B和图5C是示出与画面信息的区域中包括单个对象时有关的实施方式的示图。首先,参照图5A,当通过相机121捕获的预览画面20被输出在触摸屏151上时,如图5A的第二张图中所示,可对画面信息20施加第一触摸。另外,如图5A的第三张图中所示,可紧随第一触摸之后施加第二触摸。如图5A的第四张图中所示,控制器180可基于第一触摸和第二触摸指定画面信息20的一个区域20a。
另外,当画面信息20的一个区域20a中包括一个对象时,控制器180可指定一个对象以及指定一个区域20a。并且,如图5A的第四张图中所示,控制器180可控制触摸屏151输出通过利用基于第二触摸的施加从一个对象提取的对象信息选择的应用的图标1a。
控制器180可控制触摸屏151仅输出与基于用户设置指定的对象有关的应用的一个图标或者与至少一个应用有关地存储的用户的执行信息。另外,当一个应用的图标被输出时,如图5A的第五张图中所示,控制器180可控制触摸屏151基于第二触摸的释放输出与应用的图标1a对应的执行画面21。
因此,当画面信息的一个区域中仅包括一个对象时,控制器180可控制触摸屏151基于第二触摸的施加立即输出与对象有关的应用的图标。另外,当仅一个图标被输出时,由于基于第二触摸的释放立即输出执行画面,所以可仅通过一次预设类型的触摸立即向用户提供期望的功能的执行画面。
另外,当与对象信息有关的一个应用的图标被输出时,控制器180可基于紧随第二触摸之后施加的触摸的长度另外提供与所述一个应用的图标有关的应用的图标。即,如图5B的第二张图中所示,当一个图标1a被输出时,如图5B的第三张图中所示,可紧随第二触摸之后另外施加特定触摸。更详细地讲,当第二触摸是在两根手指彼此远离的方向上施加的拖曳触摸时,所述特定触摸可以是在两根手指从施加第二触摸的点进一步彼此远离的方向上施加的拖曳触摸。
因此,当在两根手指从施加第二触摸的各个点进一步彼此远离的方向上施加特定触摸时,控制器180可控制触摸屏151另外输出与所述一个图标1a有关的图标。
这里,与先前输出的图标有关的图标可以是与先前输出的图标所对应的应用的属性(例如,与应用或者使用应用的时机对应的执行功能的类型)相似的应用所对应的图标。在另一示例中,当先前输出的图标是与对象信息有关的应用当中与最高优先级对应的应用的图标时,与先前输出的图标有关的图标可以是与比最高优先级低的优先级对应的应用的图标。
因此,如图5B的第三张图中所示,可基于紧随第二触摸之后施加的特定触摸另外输出与所述一个图标1a有关的图标1a’、1b’和1c’,如图5B的第三张图中所示。另外,控制器180可将所述一个图标1a输出到与基于第二触摸形成的区域20a’相邻的点,并且将图标1a’、1b’和1c’输出到与基于所述特定触摸形成的区域20b’相邻的点。
随后,当所述特定触摸被释放并且对触摸屏151上输出的图标1a、1a’、1b’和1c’当中的一个图标1a’施加触摸时,与该触摸对应的应用的执行画面35可被输出在触摸屏151上。
另外,控制器180可基于在所述特定触摸远离的方向上施加的长度调节另外输出的图标的数量。例如,当所述特定触摸远离开第二触摸达第一长度时,可另外输出与预设的一个对应的图标,当所述特定触摸远离开第二触摸比第一长度更远的第二长度时,可另外输出与比预设的一个更多的两个对应的图标。
这里,根据远离程度而另外输出的图标的数量可由用户不同地设定。因此,可根据设置向用户提供与特定对象有关的适当数量的应用图标,并且用户可使用所述适当数量的图标。
然而,基于所述特定触摸的施加另外输出的图标的数量的特征以及基于所述特定触摸施加的长度而调节输出的图标的数量的特征不限于在画面信息的一个区域中仅包括一个对象。即,即使当画面信息的一个区域中包括多个对象时,也可基于特定触摸调节图标的输出数量,并且首先基于第二触摸输出的图标的数量也可被设定为一个或更多个。
另外,当对象被指定时,控制器180可利用从该对象提取的对象信息来选择与该对象有关的应用。这里,当移动终端100中未安装与对象有关的应用时,控制器180可提供与未安装的应用有关的信息。
即,参照图5C,当基于对输出在触摸屏151上的画面信息20施加的预设类型的触摸指定对象1时,控制器180可根据所指定的对象1的对象信息搜索与对象1有关的应用。例如,控制器180可利用无线通信单元110从外部服务器搜索与从对象1提取的对象信息有关的应用。
另外,当紧随第二触摸之后另外施加特定触摸时,控制器180可提供关于与对象有关地搜索到的各个应用的信息。例如,如图5C的第二张图中所示,所述特定触摸可以是对施加第二触摸的点连续施加的轻敲输入。然而,所述特定触摸可被设定为各种类型,例如紧随第二触摸之后施加的拖曳输入等。
因此,基于特定触摸的施加,控制器180可输出包括关于与对象有关搜索到的所有类型的应用的信息的特定画面20b。例如,如图5C的第三张图中所示,控制器180可将特定画面20b输出到画面信息的一个区域20并且将与所有类型的应用中的每一个对应的图标1a、1b、1c和1d包括在特定画面20b中。
另外,控制器180可在所有类型的应用当中区分移动终端100中安装的应用和移动终端100中未安装的应用。另外,控制器180可控制触摸屏151与未安装的应用的图标1d有关地将关于图标1d的安装的指导信息1d’一起输出在特定画面20b中。
随后,基于对指导信息1d’施加的触摸,如图5C的第四张图中所示,控制器180可控制触摸屏151输出执行图标1d的安装的执行画面36。因此,即使应用未安装在移动终端100中也可通过简单地指定对象来向用户提供立即安装与对象有关的应用并且使用所安装的应用的便利。
类似地,图5C中所包括的特征(即,提供关于与对象有关的所有类型的应用的信息的特征)也可被应用于画面信息的一个区域中包括多个对象时以及画面信息的一个区域中包括一个对象时。
另选地,当画面信息的一个区域中包括多个对象时,控制器180可一次指定基于第一触摸和第二触摸指定的画面信息的一个区域内的不同对象,或者可改变先前指定的对象的选择。
接下来,图6A和图6B是示出与指定画面信息的区域中所包括的多个对象的至少一部分有关的实施方式的示图。首先,参照图6A,当图像的画面信息26被输出在触摸屏151上时,如图6A的第一张图和第二张图中所示,可对画面信息26的一个点施加第一触摸。另外,如图6A的第三张图中所示,当紧随第一触摸之后施加第二触摸时,控制器180可将所述一个点与第二触摸被释放的点之间的区域指定为画面信息的一个区域。
如果画面信息的一个区域26a中包括多个对象,则控制器180可基于第一触摸和第二触摸被施加的至少一个位置指定所述多个对象当中的至少一个对象。例如,控制器180可在画面信息的一个区域中所包括的多个对象当中指定与第一触摸被施加的点的位置对应的对象。即,如图6A的第三张图中所示,控制器180可指定与第一触摸被施加的一个点的位置对应的对象6。这里,控制器180可显示所指定的对象6,使得特定对象6与画面信息的一个区域26a中所包括的其它对象相区分。
另外,控制器180可分析与所指定的对象6对应的对象信息。如果所指定的对象6的对象信息是脸部图像信息,则控制器180可通过脸部图像的分析来识别特定人。另外,如图6A的第四张图中所示,控制器180可搜索特定人的信息或者可在触摸屏161上输出与该特定人所对应的终端执行通信的应用的执行图标6a和6b。
因此,当与所指定的对象6对应的执行图标6a和6b被输出时,可对画面信息的一个区域26a中所包括的不同对象施加特定触摸。例如,特定触摸可以是施加达预设时间段或更长时间的长触摸、轻轻地敲击的轻敲触摸或者简单触摸。
在这种情况下,控制器180可指定与所述特定触摸被施加的点的位置对应的所述不同对象,并且提取与所述不同对象对应的对象信息。另外,控制器180可通过与所述不同对象对应提取的对象信息的分析来选择新应用。
另外,基于所述特定触摸的释放,控制器180可将与所述不同对象有关的应用的执行图标输出在触摸屏151上。即,如图6A的第五张图中所示,与先前指定的对象6有关的执行图标6a和6b可改变为与所述不同对象7有关的应用的执行图标7a和7b。因此,当在画面信息的一个区域中指定与用户意图不同的对象时,用户可利用特定触摸来改变特定对象,而非重新施加预设类型的触摸。
另外,如图6B所示,当画面信息27被输出在触摸屏151上时,可对图6B的第二张图和第三张图施加第一触摸和第二触摸。在这种情况下,控制器180可指定基于所述预设类型的触摸形成的画面信息的一个区域。
如果画面信息的一个区域27a中包括多个对象,则控制器180可指定全部所述多个对象。即,如图6B的第四张图中所示,控制器180可在画面信息的一个区域27a中指定第一对象(人)和第二对象(物品)二者。
因此,当画面信息的一个区域27a内的多个对象被指定时,控制器180可提取并分析与所述多个对象中的每一个对应的对象信息。在这种情况下,基于与第一对象对应的对象信息的分析,控制器180可在至少一个应用当中选择与第一对象有关的应用。另外,基于与第二对象对应的对象信息的分析,控制器180可在至少一个应用当中选择与第二对象有关的应用。
控制器180可选择与第一对象有关地选择的应用以及与第二对象有关地选择的应用中所共同包括的应用。另外,如图6B的第四张图中所示,控制器180可控制触摸屏151输出共同包括的应用的执行图标8a、8b和8c。
这里,当对任一个执行图标8a施加触摸时,如图6B的第五张图中所示,可输出与所述一个执行图标8a对应的应用的执行画面28。另外,控制器180可将通过与第一对象和第二对象中的每一个对应的对象信息的分析而获得的信息包括在应用的执行画面28中并且输出所获得的信息。
因此,当期望通过将触摸屏151上输出的画面信息中所包括的多个对象组合来执行期望的应用时,用户可应用预设类型的触摸,使得所述多个对象全部被包括。另外,在通过预设类型的触摸指定画面信息的一个区域之后,当施加特定触摸(例如,拖曳指示画面信息的一个区域的虚线部分的输入)时,画面信息的一个区域的范围可改变。因此,用户可根据预设类型的触摸被施加的位置和范围来指定各种对象,并且可另外被提供通过施加特定触摸来改变或增加特定对象的便利。
另外,所述至少一个应用可包括可在执行预设认证功能的假设下执行的应用。例如,仅可由授权用户查看的秘密备忘录或者相册的应用、执行支付功能的支付应用、可基于用户的预设标识信息执行的信使应用可被包括在所述应用中。
现在将描述与输出应用的执行图标有关的实施方式。具体地讲,图7A、图7B和图7C是示出与输出在执行预设认证功能的前提下的应用的执行图标时有关的实施方式的示图。
首先,参照图7A,通过相机121捕获的预览画面被输出在触摸屏151上,并且如图7A的第二张图和第三张图中所示,可通过预设类型的触摸指定预览画面的一个区域。控制器180可提取所指定的一个区域中所包括的对象的对象信息并且分析所提取的对象信息。
例如,控制器180可分析所提取的对象信息的含义。在这种情况下,控制器180可通过一起分析预览画面中所包括的其它对象的图像来分析所提取的对象信息的含义。即,如图7A的第三张图中所示,当预览画面包括关于柜台的监视器的图像并且对象信息被分析为价格信息时,控制器180可选择支付功能的应用作为与对象信息有关的应用。
因此,当支付功能的应用被选择时,控制器180可在预设触摸被维持时将支付功能的应用的执行图标9a输出到与所指定的一个区域29a相邻的位置。另外,在预设触摸被维持的同时,控制器180可获得指纹信息并且利用该指纹信息执行预设认证功能。
如果预设指纹信息和所获得的指纹信息相同,则如图7A的第五张图中所示,控制器180可控制触摸屏151基于预设类型的触摸的释放输出与执行图标9a对应的应用的执行画面30。另外,当预设认证功能被成功执行时,与指纹信息对应的支付卡的图像30a可被包括在当支付可用时应用的执行画面30中。
另外,当基于指纹信息的预设认证功能失败时,即使预设触摸被释放,控制器180也可维持执行图标9a的输出。这里,当用户触摸执行图标9a时,用于执行支付功能的应用的预设认证功能可被再次执行。
因此,控制器180可一起分析包括对象的画面信息的类型并且选择更适合于情况的应用。另外,即使相同画面的相同对象被提取,控制器180也可根据预设类型的触摸被施加的时间或位置或者用户的使用模式来输出不同类型的应用的执行图标。
另外,即使相同支付功能的应用的执行图标被输出,控制器180也可根据所指定的对象信息不同地输出应用的执行画面。即,参照图7B,当通过相机121捕获的预览画面31被输出在触摸屏51上,如图7B的第二张图和第三张图所示,可基于预设类型的触摸指定预览画面31的一个区域31a。
控制器180可分析一个区域31a中所包括的对象10的图像信息。如图7B的第三张图中所示,当对象10是特定字符的图像信息时,控制器180可提取该特定字符并且分析所提取的特定字符的含义。并且,控制器180可与特定字符的含义有关地选择应用。
如果与特定字符有关的应用是支付功能的应用,如图7B的第四张图中所示,支付功能的应用的执行图标10a可被输出。另外,如图7B的第五张图中所示,包括所注册的支付卡图像32a的应用的执行画面32可输出。
另选地,如图7C的第二张图和第三张图中所示,所指定的区域31b的范围可在预览画面31中改变,并且所指定的区域31b中所包括的多个对象11和11’可被指定。另外,控制器180可提取与所指定的对象11和11’中的每一个对应的对象信息并且分析所提取的对象信息。
更详细地讲,如图7C的第三张图中所示,可识别出与所指定的第一对象11对应的字符的含义是执行结账的柜台。另外,可识别出与指定的第二对象11’对应的字符的含义是商铺名称的特定品牌。另外,控制器180可一起分析预览画面31中所包括的图像并且识别出用户当前在特定商铺中付账的情况。
因此,如图7C的第四张图中所示,控制器180可在触摸屏151上输出支付功能的应用的执行图标10a。另外,如图7C的第五张图中所示,控制器180可基于对执行图标10a施加的触摸输出包括先前注册的支付卡图像32b的应用的执行画面32。
这里,控制器180可基于第一对象和第二对象的分析输出包括与最适合于执行支付功能的卡对应的卡图像的执行画面。即,控制器180可利用为了分析从画面信息提取的对象信息而收集的信息在执行应用时选择最适合于用户的当前情况的支付卡,并且控制触摸屏151输出包括对应卡图像的执行画面。
换言之,在图7B中,当确定了需要支付的情况时,控制器180可在触摸屏151上输出仅仅包括先前注册的卡的图像的执行画面。然而,在图7C中,当控制器180通过所提取的对象信息的分析来分析需要支付的位置的特性时,控制器180可另外分析与该位置有关的支付信息。即,当在该位置执行支付时,控制器180可对于积分或折扣优惠而言有利的搜索卡,并且当搜索到的卡已在移动终端100中注册时,控制器180可控制触摸屏151输出包括所搜索到的卡的图像的执行画面。
因此,当用户利用应用执行支付时,可向用户提供利用最适合于当前情况的卡执行支付的便利,甚至无需通过不同地设定对象的选择范围来搜索支付卡。
当与对象信息有关的应用为多个时,控制器180可输出所述多个应用的所有执行图标或者选择性地输出应用。即,可通过用户设置向用户提供与对象信息有关的应用的所有执行图标,并且可选择性地仅向用户提供关于一些应用的执行图标。
当多个应用的执行图标被选择性地输出时,控制器180可基于预设基准设定多个应用的优先级。例如,所述预设基准可以是关于用户执行应用的历史信息,例如关于存储在存储器170中的至少一个应用的执行频率或者执行次数或者在预设时间段内执行的应用的类型。
在另一示例中,所述预设基准可以是与当前情况有关的信息,例如预设类型的触摸被施加的时间或位置或者画面信息的类型。基于所述预设基准,控制器180可设定多个应用的优先级并且根据优先级选择性地输出应用的执行图标。
接下来,图8A和图8B是示出与选择性地输出对象信息相关的应用执行图标有关的实施方式的示图。首先,参照图8A,画面信息20被输出在触摸屏151上,并且可基于预设类型的触摸指定包括在所指定的一个区域20a中的对象1。在这种情况下,控制器180可基于与对象1对应的对象信息的分析选择至少一个应用中的一些。
例如,如图8A的第一张图中所示,当控制器180通过对象信息的分析确定对象1的含义是特定品牌的剧院的名称时,控制器180可利用关于该剧院的名称信息选择应用。例如,可通过控制器180选择用于搜索关于该剧院的名称信息的应用、用于查看与该名称对应的剧院中的电影上映信息的应用、用于查看从当前位置到剧院的距离的地图应用以及用于查看剧院可提供的优惠或活动信息的应用。
当以这样的方式选择多个应用时,控制器180可分析关于用户执行应用的历史信息。例如,控制器180可分析用户是否频繁地使用搜索应用、用户是否频繁地利用支付应用预订电影票、用户是否频繁地通过地图应用搜索位置等。
另外,控制器180可考虑输出在触摸屏151上的画面信息是Web浏览画面、通过相机捕获的画面或者先前存储的图像画面以及当前位置和时间来分析当前情况。考虑这些情况,控制器180可设定多个应用的优先级。例如,控制器180可考虑最适合于当前情况的应用或者用户的使用模式将用户可执行的概率最高的应用设定为具有最高优先级。
如图8A的第一张图中所示,当预设类型的触摸被维持时,控制器180可控制触摸屏151输出被设定为具有最高优先级的应用的执行图标1a。在这种状态下,用户可紧随预设类型的触摸之后施加特定触摸(例如,滑动触摸等,即,利用两根手指施加以维持张开状态,合拢两根手指,随后再次张开两根手指的触摸输入),如图8A的第二张图和第三张图中所示。在这种情况下,如图8A的第三张图中所示,控制器180可控制触摸屏151使得执行图标1a改变为被设定为具有次高优先级的应用的执行图标1b。
另外,如图8A的第四张图中所示,当特定触摸被释放时,控制器180可控制触摸屏151输出与特定触摸被释放时输出的执行图标对应的应用的执行画面33。因此,可向用户提供最适合于他或她的使用模式或者当前情况的应用的执行图标,并且当应用不同于他或她的意图时,用户可通过另外施加触摸容易地选择不同的执行图标。
另选地,如图8B的第一张图中所示,当预设类型的触摸被释放时,控制器180可控制触摸屏151输出被设定为具有最高优先级的应用的执行图标1a。如图8B的第一张图和第二张图中所示,可基于特定触摸(在一个方向上施加的拖曳触摸)向用户提供被设定为具有次高优先级的执行图标1b。
即,在这种情况下,首先输出被设定为具有最高优先级的应用的执行图标1a,但是当另外施加用户的特定触摸时,被设定为具有下一优先级的执行图标1b可与被设定为具有最高优先级的应用的执行图标1a一起被提供。
另外,参照图8B的第二张图和第三张图,当再次另外施加特定触摸时,被设定为具有比次高优先级低的优先级的应用的执行图标1c可被另外输出在触摸屏151上。在这种状态下,如图8B的第三张图中所示,当对输出在触摸屏151上的多个执行图标1a、1b和1c当中的至少两个执行图标1b和1c施加触摸时,控制器180可执行分别与被施加触摸的所述至少两个执行图标1b和1c对应的应用。
另外,如图8B的第四张图中所示,控制器180可控制触摸屏151将分别与所述至少两个执行图标1b和1c对应的应用的执行画面一起输出。因此,可向用户提供利用各种触摸方案选择性地同时执行分别与两个或更多个执行图标对应的应用的便利。
以下,将描述应用根据本公开的实施方式的控制方法的另一实施方式。具体地讲,图9A和图9B是示出与利用提取的对象信息执行与对象有关的应用有关的实施方式的示图。
首先,参照图9A,当所捕获的关于特定人的预览画面37被输出在触摸屏151上时,如图9A的第二张图和第三张图中所示,可对预览画面37施加第一触摸和第二触摸。控制器180可基于第一触摸和第二触摸指定预览画面37的一个区域37a并且指定包括在所述一个区域37a中的对象。
另外,控制器180可基于从对象提取的对象信息选择与对象有关的应用。当特定人的脸部图像信息被提取作为对象信息时,控制器180可搜索与脸部图像对应的特定人的信息。例如,控制器180可利用先前存储在移动终端100中的图像信息或者通过无线通信从外部服务器收集的信息来收集特定人的信息。
当所述特定人被确定时,如图9A的第四张图中所示,控制器180可输出与特定人有关的应用的图标11a和11b。例如,与特定人有关的应用可包括用于连接与特定人所对应的外部终端的通话的应用以及与特定人所对应的标识信息有关的信使应用。
当如图9A的第四张图中所示选择用于通话连接的应用的图标11a时,控制器180可从为了确定特定人而收集的信息中提取与该特定人对应的外部终端的信息。另外,控制器180可利用所提取的外部终端的标识信息来执行用于连接与外部终端的通话的功能。因此,如图9A的第五张图中所示,与外部终端的通话连接的执行画面38可被输出在触摸屏151上。
因此,当利用与特定对象有关的信息选择与对象有关的应用的图标时,可立即执行用户所期望的功能,因此向用户提供了便利。另外,控制器180可利用麦克风122收集与对象有关的对象信息。
即,如图9B所示,可通过外部声源装置生成声音事件,并且声源装置的捕获的预览画面38可被输出在触摸屏151上。在这种情况下,如图9B的第二张图和第三张图中所示,可基于对预览画面38施加的预设类型的触摸将声源装置指定为对象。
这里,控制器180可从画面信息38提取指定的对象的图像信息。另外,控制器180可通过指定的对象的图像的分析收集与特定对象有关的附加信息。例如,当所指定的对象的图像是类似收音机的生成声源的对象时,控制器180可控制麦克风122收集与对象所生成的声源有关的声音事件信息。
另外,控制器180可利用外部服务器搜索通过麦克风122输入的声音事件信息。当声音事件是特定音乐信息时,控制器180可选择用于搜索或下载该特定音乐信息的应用作为与特定对象有关的应用。
因此,如图9B的第四张图中所示,与特定对象有关的应用的图标12a和12b可被输出,并且如图9B的第五张图中所示,与一个图标12b对应的应用的执行画面39可基于用户选择被输出在触摸屏151上。这里,控制器180可利用为了分析特定对象而收集的信息来执行与这一个图标12b对应的应用。
因此,当具有特定特性的对象(例如,明显地执行生成声音或者产生振动的功能的对象)被指定时,与对象的特性有关的信息以及关于对象本身的信息可被用于选择应用。因此,用户可与他或她的意图对应地更适合地执行应用。
另外,根据本公开的实施方式的控制方法可通过捕获与应用的图标图像有关的对象的图像并且指定该对象来立即执行各种应用。例如,可通过捕获日历的图像来立即执行日程应用,可通过捕获云或天空的图像来立即执行天气应用,或者可通过捕获时钟的图像来立即执行闹钟应用。因此,为了执行特定应用,用户可立即执行期望的应用,而无需多次施加触摸或者执行搜索。
根据本公开的实施方式的移动终端可基于对触摸屏上当前输出的画面信息施加的预设类型的触摸来指定信息,并且立即输出与其有关的应用的执行图标。因此,可通过简单地施加预设类型的触摸来立即向用户提供用户所期望的应用的执行图标,而不管哪一画面信息被输出。
另外,根据本公开的实施方式的移动终端可提供最适合于指定信息的当前情况的应用的执行图标,并且因此,用户可省略直接搜索最适合于当前情况的应用、选择菜单并且施加输入以输出执行画面的多个步骤。
各种实施方式可利用存储有指令的机器可读介质来实现,所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文所呈现的其它类型存储介质及其组合。如果期望,机器可读介质可按照载波的形式实现(例如,经由互联网的传输)。处理器可包括移动终端的控制器180。
上述实施方式和优点仅是示例性的,不应被视为限制本公开。本教导可容易地应用于其它类型的设备。此说明书旨在为例示性的,而非限制权利要求书的范围。对于本领域技术人员而言,许多替代、修改和变化将是显而易见的。本文所述的示例性实施方式的特征、结构、方法以及其它特性可按照各种方式组合以获得附加和/或替代的示例性实施方式。
由于本发明的特征可在不脱离其特性的情况下按照多种形式具体实现,所以还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节的限制,而是应该在所附权利要求书中限定的范围内广义地理解,因此,落入权利要求书的范围或其等同范围内的所有变化和修改旨在被所附权利要求书涵盖。

Claims (20)

1.一种移动终端,该移动终端包括:
触摸屏,该触摸屏被配置为显示画面信息;以及
控制器,该控制器被配置为:
响应于对所述画面信息施加的指定所显示的画面信息的部分区域的预设类型的触摸,显示与所显示的画面信息的所指定的部分区域中所包括的特定对象有关的应用的应用图标。
2.根据权利要求1所述的移动终端,其中,所述对象包括在所指定的部分区域中所包括的图像信息和文本信息中的至少一个中。
3.根据权利要求2所述的移动终端,其中,当包括在所述图像信息中的所述对象对应于特定字符时,所述控制器还被配置为识别所述特定字符的含义并且基于所识别的含义执行所述应用。
4.根据权利要求1所述的移动终端,该移动终端还包括:
无线通信单元,该无线通信单元被配置为与外部服务器执行无线通信,
其中,所述控制器还被配置为经由所述无线通信单元在所述外部服务器中搜索与所述对象有关的信息。
5.根据权利要求1所述的移动终端,其中,当所述应用未被安装在所述移动终端中时,所述控制器还被配置为在所述触摸屏上显示关于所述应用的安装的指导信息。
6.根据权利要求1所述的移动终端,其中,所述预设类型的触摸包括指定所显示的画面信息的所述部分区域的第一触摸和第二触摸。
7.根据权利要求6所述的移动终端,其中,当所显示的画面信息的所指定的部分区域中包括多个对象时,所述控制器还被配置为基于所述第一触摸已被施加的点和所述第二触摸已被施加的点当中的至少一个位置来显示与包括在所述多个对象中的第一对象有关的应用的对应应用图标。
8.根据权利要求7所述的移动终端,其中,所述控制器还被配置为:
响应于所述预设类型的触摸的释放,显示所述对应应用图标,并且
响应于对包括在所述多个对象中的另一对象施加的特定触摸,显示与所述另一对象有关的另一应用的另一应用图标。
9.根据权利要求8所述的移动终端,其中,所述控制器还被配置为响应于对所述另一对象施加的所述特定触摸的释放,将所述应用图标改变为所述另一应用图标。
10.根据权利要求1所述的移动终端,其中,当所述应用对应于执行预设认证功能时,所述控制器还被配置为在所述触摸屏上维持所述预设类型的触摸的同时获得指纹信息,并且利用所获得的指纹信息执行所述预设认证功能。
11.根据权利要求10所述的移动终端,其中,当所述指纹信息与先前存储的指纹信息匹配时,所述控制器还被配置为基于所述预设类型的触摸的释放显示与所述应用对应的执行画面。
12.根据权利要求1所述的移动终端,其中,当所述应用包括多个应用时,所述控制器还被配置为基于预设基准设定所述多个应用的各个优先级,并且显示被设定为具有所述多个应用当中最高优先级的最高优先级应用的最高优先级应用图标。
13.根据权利要求12所述的移动终端,其中,所述预设基准与所述应用的执行频率或执行次数、在预设时间段内执行的所述应用的类型、所述预设类型的触摸被施加的时间和位置以及所述画面信息的类型中的至少一个有关。
14.根据权利要求12所述的移动终端,其中,所述控制器还被配置为:
响应于紧随所述预设类型的触摸之后施加的特定触摸,将所述最高优先级应用图标改变为与次高优先级应用对应的次高优先级应用图标,并且
响应于所述特定触摸的释放,显示所述次高优先级应用的执行画面。
15.根据权利要求1所述的移动终端,其中,所述应用图标包括分别与第一应用和第二应用对应的第一应用图标和第二应用图标,
其中,所述控制器还被配置为响应于对所述第一应用图标和第二应用图标施加的触摸,显示针对所述第一应用和第二应用的第一执行画面和第二执行画面。
16.一种移动终端,该移动终端包括:
透明触摸屏;
相机,该相机被配置为捕获外部环境的图像;以及
控制器,该控制器被配置为:
基于指定透过所述透明触摸屏能够看到的所述外部环境的部分区域的预设类型的触摸,激活所述相机,并且
显示与包括在所指定的部分区域中的特定对象有关的应用的应用图标。
17.根据权利要求16所述的移动终端,其中,所述控制器还被配置为将所述应用图标显示在与所指定的部分区域对应的位置处。
18.一种控制移动终端的方法,该方法包括以下步骤:
将画面信息显示在所述移动终端的触摸屏上;以及
响应于对所述画面信息施加的指定所显示的画面信息的部分区域的预设类型的触摸,在所述触摸屏上显示与所显示的画面信息的所指定的部分区域中所包括的特定对象有关的应用的应用图标。
19.根据权利要求18所述的方法,其中,所述对象包括在所指定的部分区域中所包括的图像信息和文本信息中的至少一个中。
20.根据权利要求19所述的方法,其中,当包括在所述图像信息中的所述对象对应于特定字符时,所述方法还包括经由所述移动终端的控制器识别所述特定字符的含义并且基于所识别的含义执行所述应用。
CN201610307378.5A 2015-07-02 2016-05-11 移动终端及其控制方法 Pending CN106331311A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020150094807A KR20170004450A (ko) 2015-07-02 2015-07-02 이동단말기 및 그 제어방법
KR10-2015-0094807 2015-07-02

Publications (1)

Publication Number Publication Date
CN106331311A true CN106331311A (zh) 2017-01-11

Family

ID=56116177

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610307378.5A Pending CN106331311A (zh) 2015-07-02 2016-05-11 移动终端及其控制方法

Country Status (4)

Country Link
US (1) US20170003772A1 (zh)
EP (1) EP3113005A1 (zh)
KR (1) KR20170004450A (zh)
CN (1) CN106331311A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111324257A (zh) * 2018-03-29 2020-06-23 维沃移动通信有限公司 一种应用程序图标排列方法及移动终端

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018139878A1 (en) * 2017-01-25 2018-08-02 Samsung Electronics Co., Ltd. Method and electronic device for managing operations and functionality of applications
KR101911747B1 (ko) * 2017-03-20 2018-10-25 주식회사 하이딥 터치종류 판별방법 및 이를 수행하는 터치 입력 장치
USD949890S1 (en) * 2019-09-05 2022-04-26 Hoffmann-La Roche Inc. Portion of a display screen with a graphical user interface
USD897367S1 (en) * 2019-12-18 2020-09-29 Jack Sargeant Display screen with graphical user interface
WO2023199468A1 (ja) * 2022-04-14 2023-10-19 日本電信電話株式会社 重畳表示装置、重畳表示方法及び重畳表示プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080250012A1 (en) * 2007-04-09 2008-10-09 Microsoft Corporation In situ search for active note taking
US20120131520A1 (en) * 2009-05-14 2012-05-24 Tang ding-yuan Gesture-based Text Identification and Selection in Images
US20140149376A1 (en) * 2011-06-23 2014-05-29 Cyber Ai Entertainment Inc. System for collecting interest graph by relevance search incorporating image recognition system
WO2014208783A1 (ko) * 2013-06-25 2014-12-31 엘지전자(주) 이동 단말기 및 이동 단말기의 제어 방법
CN104639736A (zh) * 2013-11-12 2015-05-20 Lg电子株式会社 移动终端及其控制方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101426718B1 (ko) * 2007-02-15 2014-08-05 삼성전자주식회사 휴대단말기에서 터치 이벤트에 따른 정보 표시 장치 및방법
KR101513024B1 (ko) * 2008-04-22 2015-04-17 엘지전자 주식회사 단말기 및 이것의 이미지 인식 방법
US8670597B2 (en) * 2009-08-07 2014-03-11 Google Inc. Facial recognition with social network aiding
EP2375316B1 (en) * 2010-04-06 2019-11-27 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20120158582A1 (en) * 2010-12-20 2012-06-21 Ebay Inc. Payment system using images
KR20130082826A (ko) * 2011-12-20 2013-07-22 주식회사 케이티 콘텐츠의 객체 정보 생성 방법 및 시스템
US20140075393A1 (en) * 2012-09-11 2014-03-13 Microsoft Corporation Gesture-Based Search Queries
KR20150006720A (ko) * 2013-07-09 2015-01-19 엘지전자 주식회사 이동단말기 및 그 제어방법
JP6054892B2 (ja) * 2014-01-14 2016-12-27 レノボ・シンガポール・プライベート・リミテッド 複数のディスプレイに対するアプリケーション画像の表示方法、電子機器およびコンピュータ・プログラム
US10482461B2 (en) * 2014-05-29 2019-11-19 Apple Inc. User interface for payments

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080250012A1 (en) * 2007-04-09 2008-10-09 Microsoft Corporation In situ search for active note taking
US20120131520A1 (en) * 2009-05-14 2012-05-24 Tang ding-yuan Gesture-based Text Identification and Selection in Images
US20140149376A1 (en) * 2011-06-23 2014-05-29 Cyber Ai Entertainment Inc. System for collecting interest graph by relevance search incorporating image recognition system
WO2014208783A1 (ko) * 2013-06-25 2014-12-31 엘지전자(주) 이동 단말기 및 이동 단말기의 제어 방법
CN104639736A (zh) * 2013-11-12 2015-05-20 Lg电子株式会社 移动终端及其控制方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111324257A (zh) * 2018-03-29 2020-06-23 维沃移动通信有限公司 一种应用程序图标排列方法及移动终端

Also Published As

Publication number Publication date
US20170003772A1 (en) 2017-01-05
EP3113005A1 (en) 2017-01-04
KR20170004450A (ko) 2017-01-11

Similar Documents

Publication Publication Date Title
US10395233B2 (en) Mobile terminal and method for controlling the same
US9801009B2 (en) Location based reminder system and method for controlling the same
US10423306B2 (en) Mobile terminal and control method thereof
EP3148166B1 (en) Mobile terminal and control method for the mobile terminal
EP3400565B1 (en) Mobile terminal and method for controlling the same
US10395236B2 (en) Mobile terminal and method for controlling the same
CN106210184A (zh) 移动终端及其控制方法
CN106488002B (zh) 移动终端及控制移动终端的方法
EP2897036A2 (en) Mobile terminal and method for controlling the same
CN106850938A (zh) 移动终端及其控制方法
CN106257909A (zh) 移动终端及其控制方法
CN105744051A (zh) 移动终端及其控制方法
CN106331311A (zh) 移动终端及其控制方法
CN106446728A (zh) 移动终端及其控制方法
CN105204726A (zh) 手表型终端及其控制方法
US20180253717A1 (en) Terminal apparatus and control method for terminal apparatus
US10769413B2 (en) Mobile terminal and control method thereof
CN105830351A (zh) 移动终端及其控制方法
CN105718187A (zh) 移动终端及控制移动终端的内容的方法
CN106406688A (zh) 移动终端及其控制方法
KR101631999B1 (ko) 이동 단말기 및 그 제어 방법
EP3331227A1 (en) Mobile terminal and method for controlling same
US20170024736A1 (en) Mobile terminal and method for controlling the same
CN106325731A (zh) 显示装置及其控制方法
CN106612371A (zh) 移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170111

WD01 Invention patent application deemed withdrawn after publication