CN107040642B - 移动终端及控制其的方法 - Google Patents

移动终端及控制其的方法 Download PDF

Info

Publication number
CN107040642B
CN107040642B CN201610848170.4A CN201610848170A CN107040642B CN 107040642 B CN107040642 B CN 107040642B CN 201610848170 A CN201610848170 A CN 201610848170A CN 107040642 B CN107040642 B CN 107040642B
Authority
CN
China
Prior art keywords
touch
displayed
screen
mobile terminal
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610848170.4A
Other languages
English (en)
Other versions
CN107040642A (zh
Inventor
赵善汇
金东会
朱完昊
罗星菜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN107040642A publication Critical patent/CN107040642A/zh
Application granted granted Critical
Publication of CN107040642B publication Critical patent/CN107040642B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412Digitisers structurally integrated in a display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • G08C2201/32Remote control based on movements, attitude of remote control device
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/91Remote control based on location and proximity
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/93Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/06Consumer Electronics Control, i.e. control of another device by a display or vice versa
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00Aspects of data communication
    • G09G2370/16Use of wireless transmission of display information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

本发明涉及移动终端及控制其的方法。按照本公开的移动终端可以包括:主体;无线通信单元,该无线通信单元被配置为与外部通信设备执行通信;和触摸屏,该触摸屏被形成以显示主屏幕并且感测触摸;和控制器,该控制器被配置为当在显示主屏幕的同时将预先确定类型的触摸施加于触摸屏时,基于经由无线通信单元连接的外部通信设备,控制触摸屏在主体位于的位置处显示用于对外部设备的至少部分的执行控制的控制屏幕。

Description

移动终端及控制其的方法
技术领域
本公开涉及用于与外部通信设备执行通信的移动终端及其控制方法。
背景技术
终端可以按照它们的移动性被划分为移动/便携式终端和固定终端。此外,移动终端可以按照用户是否能够直接携带划分为手持终端和车载终端。
由于其变为多功能的,可以允许移动终端获得静止图像或者活动图像、播放音乐或者视频文件、玩游戏、接收广播等,以被实现为集成的多媒体播放器。
正在进行努力支持和提高移动终端的功能。这样的努力包括软件和硬件改进以及在结构部件方面的变化和改进。
作为用于在软件领域改进的例子,已经实现与将物联网应用到终端相关联的技术开发。
附图说明
将参考以下的附图详细地描述该实施例,在以下的附图中相同的参考数字指代相同的单元,其中:
图1A是根据本公开的移动终端的框图;
图1B和图1C是从不同方向看的移动终端的一个示例的概念图;
图2A是用于解释与按照本公开的预先确定的位置相关联的控制方法的流程图,并且图2B和2C是用于解释图2A的控制方法的概念图;
图3A和3B是用于解释在与本公开相关联的控制屏幕中包括的三维地图图像的概念图;
图4A至4I是用于解释在与本公开相关联的控制屏幕中包括的各种地图之间的相互变换的控制方法的概念图;
图5A和5B是用于解释使用与本公开相关联的图像对象的外部设备的状态信息或者通知信息显示的控制方法的概念图。此外,图5C和5D是用于解释使用图像对象的外部设备的控制方法的概念图;
图6A至6E是用于解释基于经由与本公开相关联的窗口录入的用户输入的外部设备的控制方法的概念图;
图7A和7B是用于解释控制与本公开相关联的多个外部设备的窗口的概念图;
图8A和8B是用于解释与本公开相关联的预先确定位置的控制屏幕的结束相关联的控制方法的概念图;
图9A至9E是用于解释显示在与本公开相关联的外部设备上发生的事件信息的各种实施例的概念图;和
图10A至10D是用于解释当按照本公开的实施例的通知模式被设置为敏感模式时,显示外部设备的通知信息方法的概念图。
具体实施方式
参考附图,现在将根据在此公开的示例性实施例详细地给出描述。为了参考附图简要描述,相同的或者等效的组件可以被设有相同或者相似的附图标记,并且其描述将不会被重复。通常,诸如“模块”和“单元”的后缀可以被用于指代元件或者组件。这样的后缀的使用在此旨在仅有助于说明书的描述,并且后缀本身旨在没有给予任何特定的意义或者功能。在本公开中,为了简要,通常已经省略了在相关领域中对于普通技术人员来说公知的那些。附图被用于帮助容易地理解各种技术特征并且应理解附图没有限制在此提出的实施例。正因如此,本公开应被解释为延伸到除了在附图中特别陈述的之外的任何改变、等同物以及替代。
将要理解的是,尽管在此可以使用术语第一、第二等等以描述各种元件,但是这些元件不应被这些术语限制。这些术语通常仅被用于区分一个元件与另一个元件。
将要理解的是,当元件被称为“连接”另一元件时,元件能够与另一元件连接或者也可以存在中间元件。相反地,当元件被称为“直接地连接”另一元件时,不存在中间元件。
单数表示可以包括复数表示,除非根据上下文其表示明确不同的意义。在此使用诸如“包括”或者“具有”的术语并且应理解它们旨在指示在本说明书中公开的数个组件、功能或者步骤的存在,并且也理解可以同样地利用更多或者更少的组件、功能或者步骤。
可以使用各种不同类型的终端实现在此提出的移动终端。这样的终端的示例包括蜂窝电话、智能电话、用户装置、膝上型计算机、数字广播终端、个人数字助手(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、板式PC、平板PC、超级本、可佩戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等等。
仅通过非限制性示例,将会参考特定类型的移动终端进行进一步的描述。然而,这样的教导同等地应用于其它类型的终端,诸如在上面注明的那些类型。另外,这样的教导也可以被应用于诸如数字TV、桌上型计算机等等的固定终端。
现在参考图1A-1C,其中图1A是根据本公开的移动终端的框图,并且图1B和图1C是从不同的方向看到的移动终端的一个示例的概念视图。
示出移动终端100,其具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180、以及电源单元190的各种组件。理解的是,不要求实现所有图示的组件,并且可以替换地实现更多或者更少的组件。
现在参考图1A,示出移动终端100,该移动终端100具有被配置有数个被共同实现的组件的无线通信单元110。例如,无线通信单元100通常包括允许在移动终端100与无线通信系统或者移动终端位于的网络之间的无线通信的一个或多个组件。
无线通信单元110通常包括一个或者多个模块,其允许诸如在移动终端100和无线通信系统之间的无线通信的通信、在移动终端100和另一移动终端之间的通信、在移动终端100与外部服务器之间通信。此外,无线通信单元110通常包括将移动终端100连接到一个或者多个网络的一个或者多个模块。为了有助于这样的通信,无线通信单元110包括一个或者多个广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、以及位置信息模块115中的一个或者多个。
输入单元120包括:用于获得图像或者视频的相机121;麦克风122,该麦克风122是一种用于输入音频信号的音频输入装置;以及用于允许用户输入信息的用户输入单元123(例如,触摸键、推动键、机械键、软键等等)。数据(例如,音频、视频、图像等等)通过输入单元120被获得并且可以根据装置参数、用户命令、以及其组合通过控制器180分析和处理。
通常使用被配置成感测移动终端的内部信息、移动终端的周围环境、用户信息等等的一个或者多个传感器实现感测单元140。例如,在图1A中,示出具有接近传感器141和照度传感器142的感测单元140。
必要时,感测单元140可以可替选地或者附加地包括其它类型的传感器或者装置,诸如触摸传感器、加速度传感器、磁传感器、G传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射监测传感器、热传感器、以及气体传感器等)、以及化学传感器(例如,电子鼻、医疗传感器、生物传感器等等),举了一些例子。移动终端100可以被配置成利用从感测单元140获得的信息,并且特别地,从感测单元140的一个或者多个传感器及其组合获得的信息。
输出单元150通常被配置成输出诸如音频、视频、触觉输出等等的各种类型的信息。示出具有显示单元151、音频输出模块152、触觉模块153、以及光学输出模块154的输出单元150。
显示单元151可以具有与触摸传感器的层间结构或者集成结构以便于促成触摸屏幕。触摸屏幕可以在移动终端100和用户之间提供输出接口,并且用作在移动终端100和用户之间提供输入接口的用户输入单元123。
接口单元160用作对接能够被耦合到移动终端100的各种类型的外部装置。例如,接口单元160可以包括任何有线或者无线端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。在一些情况下,响应于被连接到接口单元160的外部装置,移动终端100可以执行与被连接的外部装置相关联的各种控制功能。
存储器170通常被实现为存储数据以支持移动终端100的各种功能或者特征。例如,存储器170可以被配置成存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或者指令等等。经由无线通信可以从外部服务器下载这些应用程序中的一些。在制造或者装运时其它的应用程序可以被安装在移动终端100内,其通常是用于移动终端100的基本功能(例如,接收呼叫、拨打电话、接收消息、发送消息等等)的情况。通常,应用程序被存储在存储器170中、安装在移动终端100中,并且通过控制器180执行以执行用于移动终端100的操作(或者功能)。
除了与应用程序相关联的操作之外,控制器180通常用作控制移动终端100的整体操作。控制器180能够通过处理通过在图1A中描述的各种组件输入或者输出的信号、数据、信息等等,或者激活被存储在存储器170中的应用程序来提供或者处理适合于用户的信息或者功能。作为一个示例,控制器180根据已经被存储在存储器170中的应用程序的执行控制在图1A-1C中图示的一些组件或者所有组件。
电源单元190能够被配置成接收外部电力或者提供内部电力以便于供应对于操作被包括在移动终端100中的元件和组件所要求的适当的电力。电源单元190可以包括电池,并且电池可以被配置成被嵌入在终端主体中,或者被配置成从终端主体可拆卸。
这些元件和组件的至少一部分可以按照在此处描述的各种示例性实施例被合并以实现移动终端的操作和控制或者移动终端的控制方法。此外,操作和控制或者移动终端的控制方法可以在移动终端中以激活存储在存储器170中的至少一个应用程序这样的方式实现。
在下文中,在描述通过移动终端100实现的各种实施例之前,将会更加详细地给出参考图1的前述组件的描述。关于无线通信单元110,广播接收模块111通常被配置成经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息。广播信道可以包括卫星信道、陆地信道、或者两者。在一些实施例中,可以利用两个或者更多个广播接收模块111以有助于同时接收两个或者更多个广播信道,或者支持广播信道当中的切换。
移动通信模块112能够将无线信号发送到一个或者多个网络实体并且/或者从一个或者多个网络实体接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等等。这样的网络实体形成移动通信网络的一部分,其根据用于移动通信(例如,全球移动通信系统(GSM)、码分多址(CDMA)、CDMA 2000(码分多址2000)、EV-DO(增强的语音数据优化或者仅增强的语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等等)的技术标准或者通信方法构造。
经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号、或者各种格式的数据以支持文本和多媒体消息的通信。
无线互联网模块113被配置成有助于无线互联网接入。此模块可以被内部地或者外部地耦合到移动终端100。无线互联网模块113可以根据无线互联网技术经由通信网络发送和/或接收无线信号。
这样的无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作(Wimax)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级LTE(LTE-A)等等。无线互联网模块113可以根据一个或者多个这样的无线互联网技术,或者其它的互联网技术发送/接收数据。
在一些实施例中,当根据作为移动通信网络的一部分的例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等等实现无线互联网接入时,无线互联网模块113执行这样的无线互联网接入。这样,无线互联网模块113可以与移动通信模块112协作,或者用作移动通信模块112.
短程通信模块114被配置成有助于短程通信。适合于实现这样的短程通信的技术包括:蓝牙(BLUETOOTHTM)、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等等。经由无线局域网,短程通信模块114通常支持在移动终端100和无线通信系统之间的无线通信,在移动终端100和另一移动终端100之间的通信、或者在移动终端和另一移动终端100(或者外部服务器)位于的网络之间的通信。无线局域网的一个示例是无线个人域网。
在一些实施例中,另一移动终端(可以类似于移动终端100配置)可以是可佩戴设备,例如,智能手表、智能眼镜或者头戴式显示器(HMD),其能够与移动终端100交换数据(或者以其它方式与移动终端100协作)。短程通信模块114可以感测或者识别可佩戴设备,并且允许在可佩戴设备和移动终端100之间的通信。另外,当感测到的可佩戴设备是被授权与移动终端100通信的设备时,例如,控制器180可以使在移动终端100中处理的数据的至少一部分经由短程通信模块114传输到可佩戴设备。因此,可佩戴设备的用户可以在可佩戴设备上使用在移动终端100中处理的数据。例如,当在移动终端100中接收到呼叫时,用户可以使用可佩戴设备应答呼叫。而且,当在移动终端100中接收到消息时,用户能够使用可佩戴设备检查接收到的消息。
位置信息模块115通常被配置成检测、计算、导出或者以其它方式识别移动终端的位置。作为示例,位置信息模块115包括全球定位系统(GPS)模块、Wi-Fi模块、或者两者。如有必要,位置信息模块115可以替换地或附加地与无线通信单元110的任何其它模块起作用以获得与移动终端的位置相关联的数据。
作为一个示例,当移动终端使用GPS模块时,可以使用从GPS卫星发送的信号获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,能够基于将无线信号发送到Wi-Fi模块或者从Wi-Fi模块接收无线信号的无线接入点(AP)有关的信息获取移动终端的位置。
输入单元120可以被配置成允许对移动终端120的各种类型的输入。这样的输入的示例包括音频、图像、视频、数据、以及用户输入。使用一个或者多个相机121经常获得图像和视频输入。这样的相机121可以处理在视频或者图像捕获模式下通过图像传感器获得的静止图片或者视频的图像帧。被处理的图像帧能够被显示在显示单元151上或者被存储在存储器170中。同时,相机121可以以矩阵配置排列以允许具有多个角度或者焦点的多个图像被输入到移动终端100。而且,相机121可以位于立体排列以获取用于实现立体图像的左图像和右图像。
麦克风122一般被实现为准许将音频输入到移动终端100。根据在移动终端100中执行的功能能够以各种方式能够处理音频输入。如有必要,麦克风122可以包括各种噪声去除算法以去除在接收外部音频信号的过程中产生的不想要的噪声。
用户输入单元123是允许用户输入的组件。这样的用户输入可以使控制器180能够控制移动终端100的操作。用户输入单元123可以包括机械输入元件中的一个或者多个(例如,机械键、位于移动终端100的前和/或后表面或者侧表面上的按钮、薄膜开关、滚动轮、滚动开关等等)、或者触摸灵敏的输入元件等等。作为一个示例,触摸灵敏的输入元件可以是通过软件处理被显示在触摸屏上的虚拟键或者软键或者视觉键、或者位于在除了触摸屏之外的位置处的移动终端上的触摸键。另一方面,虚拟键或者视觉键可以以例如,图形、文本、图标、视频、或者其组合的各种形状显示在触摸屏上。
感测单元140通常被配置成感测移动终端的内部信息、移动终端的周围环境信息、用户信息等等中的一个或者多个。控制器180通常与感测单元140协作以基于感测信号控制移动终端100的操作或执行与被安装在移动终端中的应用程序相关联的数据处理、功能或者操作。使用任何种类的传感器可以实现感测单元140,现在将会更加详细地描述其中的一些。
接近传感器141指的是在没有机械接触的情况下通过使用磁场、红外线等等感测接近表面的对象、或者位于表面附近的对象的存在或者不存在的传感器。接近传感器141可以被布置在通过触摸屏覆盖的移动终端的内部区域处,或者触摸屏附近。
例如,接近传感器141可以包括任何透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等等。当触摸屏被实现为电容型时,接近传感器141能够通过电磁场响应于具有导电性的对象的接近的变化来感测指示器相对于触摸屏的接近。在这样的情况下,触摸屏(触摸传感器)也可以被归类成接近传感器。
术语“接近触摸”将会在此被经常引用以表示其中指示器被定位为接近触摸屏而没有接触触摸屏的场景。术语“接触触摸”将会在此被经常引用以表示其中指示器物理接触触摸屏的场景。对于与指示器相对于触摸屏的接近触摸相对应的位置,这样的位置将会对应于其中指示器垂直于触摸屏的位置。接近传感器141可以感测接近触摸,和接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等等)。
通常,控制器180处理与通过接近传感器141感测到的接近触摸和接近触摸模式相对应的数据,并且使在触摸屏上能够输出视觉信息。另外,根据是否相对于触摸屏上的点的触摸是接近触摸或者接触触摸,控制器180能够控制移动终端100执行不同的操作或者处理不同的数据。
使用任何各种触摸方法,触摸传感器能够感测被施加到诸如显示单元151的触摸屏的触摸。这样的触摸方法的示例包括电阻型、电容型、红外型、以及磁场型等等。
作为一个示例,触摸传感器可以被配置成将被施加到显示单元151的特定部分的压力的变化转换成电输入信号,或者将在显示单元151的特定部分处出现的电容转换成电输入信号。触摸传感器也可以被配置成不仅感测被触摸的位置和被触摸的区域,而且感测触摸压力和/或触摸电容。触摸对象通常被用于将触摸输入施加到触摸传感器。典型的触摸对象的示例包括手指、触摸笔、触笔、指示器等等。
当通过触摸传感器感测触摸输入时,相应的信号可以被传送到触摸控制器。触摸控制器可以处理接收到的信号,并且然后将相应的数据传送到控制器180。因此,控制器180可以感测已经触摸显示单元151的哪一个区域。在此,触摸控制器可以是与控制器180分离的组件、控制器180、或者其组合。
在一些实施例中,控制器180可以根据触摸了触摸屏或者除了触摸屏之外被设置的触摸键的触摸对象的类型执行相同或者不同的控制。例如,基于移动终端100的当前操作状态或者当前执行的应用程序,可以决定根据提供触摸输入的对象是否执行相同或者不同的控制。
触摸传感器和接近传感器可以被单独地或者组合实现,以感测各种类型的触摸。这样的触摸包括短(或者轻敲)触摸、长触摸、多点触摸、拖动触摸、轻弹触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。
如有必要,超声传感器可以被实现以使用超声波识别与触摸对象有关的位置信息。例如,控制器180可以基于通过照度传感器和多个超声传感器感测到的信息计算波生成源的位置。因为光比超声波快得多,所以光到达光学传感器的时间远远比超声波到达超声传感器的时间短。使用此事实可以计算波生成源的位置。例如,可以基于光作为参考信号使用与超声波到达传感器的时间的时间差计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等等)、光传感器(或者图像传感器)、以及激光传感器。
实现具有激光传感器的相机121可以允许相对于3D立体图像的物理对象的触摸的检测。光传感器可以被层压在显示设备上,或者与显示设备重叠。光传感器可以被配置成扫描接近触摸屏的物理对象的移动。更加详细地,光传感器可以包括在行和列处的光电二极管和晶体管以使用根据被施加的光的量改变的电信号扫描在光传感器处接收到的内容。即,光传感器可以根据光的变化计算物理对象的坐标从而获得物理对象的位置信息。
显示单元151通常被配置成输出在移动终端100中处理的信息。例如,显示单元151可以显示在移动终端100处执行的应用程序的执行屏幕信息或者响应于执行屏幕信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施例中,显示单元151可以被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可以采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等等的立体显示方案。
音频输出模块152通常被配置成输出音频数据。可以从任何数量的不同的来源获得这样的音频数据,使得可以从无线通信单元110接收音频数据或者可以已经将其存储在存储器170中。可以在诸如信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等等的模式期间输出音频数据。音频输出模块152能够提供与由移动终端100执行的特定功能(例如,呼叫信号接收声音、消息接收声音等等)有关的音频输出。音频输出模块152也可以被实现为接收器、扬声器、蜂鸣器等等。
触觉模块153能够被配置成产生用户能够感觉、感知、或者以其它方式体验的各种触觉效果。通过触觉模块153产生的触觉效果的典型示例是振动。能够通过用户选择或者通过控制器进行设置来控制通过触觉模块155产生的振动的强度、模式等等。例如,触觉模块153可以以组合的方式或者顺序的方式输出不同的振动。
除了振动之外,触觉模块153还能够生成各种其它的触觉效果,包括通过诸如垂直移动以接触皮肤的针排列的刺激的效果、通过喷孔或者吸入口的空气的喷射力或者吸力、对皮肤的触摸、电极的接触、静电力、通过使用能够吸收或者产生热的元件再现冷和暖的感觉的效果等等。
触觉模块153也能够被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感觉触觉效果,以及通过直接接触传递触觉效果。根据移动终端100的特定配置也可以设置两个或者更多个触觉模块153。
光学输出模块154能够使用光源的光输出用于指示事件产生的信号。在移动终端100中产生的事件的示例可以包括消息接收、呼叫信号接收、未接来电、报警、日程表通知、电子邮件接收、通过应用的信息接收等等。
也可以以移动终端发射单色光或者具有多种颜色的光的方式实现通过光学输出模块154输出的信号。例如,当移动终端感测用户已经检查了产生的事件时信号输出可以被结束。
接口单元160用作用于要连接到移动终端100的外部设备的接口。例如,接口单元160能够接收从外部设备发送的数据,接收电力以传送到移动终端100内的元件和组件,或者将移动终端100的内部数据发送到这样的外部设备。接口单元160可以包括有线或者无线头戴式受话器端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有标识模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。
识别模块可以是存储用于认证使用移动终端100的权限的各种信息的芯片并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等等。另外,具有识别模块的设备(在此也被称为“识别设备”)可以采用智能卡的形式。因此,识别设备经由接口单元160能够与终端100相连接。
当移动终端100与外部托架相连接时,接口单元160能够用作允许电力从托架供应到移动终端100的通道或者可以用作允许用户从托架输入的各种命令信号传递到移动终端的通道。从托架输入的各种命令信号或者电力可以作为用于识别移动终端被正确地安装在托架上的信号操作。
存储器170能够存储程序以支持移动终端180的操作并且存储输入/输出数据(例如,电话簿、消息、静止图像、视频等等)。存储器170可以存储与响应于触摸屏上的触摸输入输出的各种模式的振动和音频有关的数据。
存储器170可以包括一种或者多种类型的存储介质,包括闪存型、硬盘型、固态盘(SSD)型、硅盘型、多媒体卡式、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等等。也可以关于在诸如互联网的网络上执行存储器170的存储功能的网络存储设备操作移动终端100。
控制器180可以典型地控制移动终端100的一般操作。例如,当移动终端的状态满足预设条件时,控制器180可以设置或者释放用于限制用户输入与应用有关的控制命令的锁定状态。
控制器180也能够执行与语音呼叫、数据通信、视频呼叫等等相关联的控制和处理,或者执行模式识别处理以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。另外,控制器180能够控制这些组件中的一个或者组合以便于实现在此公开的各种示例性实施例。
电源单元190接收外部电力或者提供内部电力并且供应对于操作被包括在移动终端100中的各自的元件和组件所需的适当的电力。电源单元190可以包括电池,该电池通常是可充电的或者可拆卸地耦合到终端主体,用于充电。
电源单元190可以包括连接端口。连接端口可以被配置为接口单元160的一个示例,用于供应电力以对电池再充电的外部充电器被电气地连接到该接口单元160。
作为另一示例,电源单元190可以被配置成在没有使用连接端口的情况下以无线的方式对电池再充电。在本示例中,使用以磁感应为基础的感应耦合方法或者以电磁谐振为基础的电磁谐振耦合方法,电源单元190能够接收从外部无线电力发射器传递的电力。
可以使用例如软件、硬件、或者其任何组合,以计算机可读介质、机器可读介质、或者类似介质实现在此描述的各种实施例。
另一方面,按照本公开的移动终端提供能够基于移动终端的主体(在下文中,称为“主体”)位于的位置执行有关位置控制的功能。
为此,外部通信设备可以预先安装在预先确定的位置上。外部通信设备可以是能够与主体执行通信的设备。换句话说,外部通信设备可以与主体的无线通信单元110执行通信。
特别地,外部通信设备可以以一个或多个信标实现。作为基于蓝牙4.0的短程无线通信设备的信标可以与在最大距离70m内的设备通信。
例如,当信标安装在预先确定的位置时,可以基于在无线通信单元110处接收的信标的信号强度确定主体是否位于预先确定的位置。
特别地,如果预先确定的位置的大小(或者半径)大约是A(m),并且当主体位于离信标大约A(m)时,信标的接收强度是B(dB),那么,当从主体接收的信标的强度大于B(dB)时,控制器180可以确定主体位于在预先确定的位置内。
另一方面,按照本公开,外部通信设备可以包括信标、Wi-Fi模块等等。在这种情况下,移动终端可以基于将无线信号发送到Wi-Fi模块或者从Wi-Fi模块接收无线信号的无线接入点(AP)的信息获得移动终端的位置。
按照本公开,预先确定的位置可以由用户预先设置。换句话说,外部通信设备可以由用户预先安装在预先确定的位置。
此外,可能存在多个预先确定的位置。在这种情况下,预先确定的位置可以称为第一位置、第二位置、第三位置、…、第n个位置。例如,当预先确定的位置是用户的家庭、办公室和汽车时,位置可以顺序地称为第一位置、第二位置和第三位置。
按照本公开的移动终端可以基于主体位于的位置执行与位置相关联的控制。换句话说,当主体位于第一位置时,移动终端可以执行与第一位置相关联的控制,并且当主体位于第二位置时,执行与第二位置相关联的控制。
另外,每个位置可以被划分为多个区域。例如,第一位置可以被划分为1-1区域、1-2区域、1-3区域、…、第(1-n)个区域。每个区域可以对应于卧室1、卧室2、客厅、浴室等等。
在这种情况下,按照本公开的移动终端可以基于在多个位置之中主体位于的区域,执行与该区域相关联的控制。将稍后参考图3更详细地描述。
此外,在下文中,在参考伴随的附图描述本公开时,当至少两个图像在图(例如,参见图2B)上以2乘2的形式图示时,在左上角图示的图像、在右上角图示的图像、在右下角图示的图像,和在左下角图示的图像将分别地称为第一图、第二图、第三图和第四图。
此外,当至少两个图像在图上以从上到下方向的列图示时,图像将从最上面的图像开始顺序地称为第一图、第二图、…。
此外,当至少两个图像在图上以从左到右方向的行图示时,图像将从最左的图像开始顺序地称为第一图、第二图、…。
另一方面,当用户请求用于执行与预先确定的位置相关联的控制时,按照本公开的移动终端可以显示用于位置控制的控制屏幕。将在下面参考附图详细地描述。
图2A是用于解释按照本公开的与预先确定的位置相关联的控制方法的流程图,并且图2B和2C是用于解释图2A的控制方法的概念图。
参考图2A,控制器180感测主体与安装在预先确定的位置的外部通信设备执行通信(S210)。
特别地,当主体位于预先确定的位置时,主体的无线通信单元110与安装在预先确定的位置的外部通信设备执行通信。在这里,外部通信设备可以包括如上所述的一个或多个信标和Wi-Fi模块的至少一个。
当无线通信单元110以无线方式连接到外部通信设备时,控制器180可以确定主体位于预先确定的位置。做为选择,当从无线通信单元110接收的外部通信设备的信号大于预先确定的强度时,控制器180可以确定主体位于预先确定的位置。
另一方面,当确定主体位于预先确定的位置时,控制器180可以控制显示单元151显示指示对于用户允许关于位置的控制的通知信息。
在这里,通知信息可以以各种方式显示。通知信息可以使用听觉、触觉和视觉模式的至少一个显示。通知信息的输出模式可以由用户预先设置。
对于以视觉模式显示通知信息的示例,参考图2B的第一图,通知信息可以以通知图标210的形式显示。
特别地,当控制器180确定在预先确定的屏幕显示在触摸屏151上的状态下,主体位于预先确定的位置时,通知图标可以显示在状态显示条220的一侧上。
另一方面,在图上图示的是预先确定的屏幕是主屏幕230,但是,预先确定的屏幕也可以是除了主屏幕之外由用户预先设置的应用的锁定屏幕和执行屏幕的至少一个。
尽管在该图中未示出,对于以视觉模式显示通知信息的另一个示例,通知信息可以以通知窗口的形式显示。
特别地,当控制器180确定在预先确定的屏幕显示在触摸屏151上的状态下,主体位于预先确定的位置时,通知窗口可以在触摸屏151的任意位置上显示。
此外,在触摸屏151处于不活动状态的状态下,当控制器180确定主体位于预先确定的位置时,如果预先确定的屏幕被显示,则触摸屏151可以被激活以显示如上所述的通知图标210或者通知窗口。
用户可以经由通知图标210或者通知窗口的显示识别当前允许关于预先确定的位置的控制。
另一方面,控制器180可以接收用于执行与预先确定的位置相关联的控制的用户请求(S220)。随后,控制器180基于被接收的用户请求控制触摸屏151以显示用于执行与预先确定的位置相关联的控制的控制屏幕250(S230)。
在这里,可以以各种方式录入用户请求。
对于一个示例,尽管在该图中未示出,当在移动终端主体中提供的硬件键由用户按压时,可以接收用户请求。另一方面,当硬件键是触摸按键时,可以在触摸施加于触摸按键时接收用户请求。
对于另一个示例,参考图2B,用户请求可以是施加于触摸屏151的预先确定类型的触摸241。
预先确定类型的触摸241与用于执行与预先确定的位置相关联的控制的显示控制屏幕250的功能链接。换句话说,当预先确定类型的触摸241被施加到处于在其上显示预先确定的屏幕230的状态的触摸屏151时,显示用于执行与预先确定的位置相关联的控制的控制屏幕250。换句话说,在触摸屏151上实现从预先确定的屏幕230到控制屏幕250的屏幕变换。
在这里,在图2B的第一图上图示预先确定的屏幕是主屏幕,但是,本公开可以不必受限于此。换句话说,预先确定的屏幕可以是预先确定的应用的主屏幕、锁定屏幕和执行屏幕的任何一个。
此外,图2B图示预先确定类型的触摸241施加于预先确定的屏幕,该预先确定的屏幕处于先前的通知信息(指示使能关于预先确定的位置的控制的通知信息)210显示在其上的状态,但是,本公开可以不必受限于此。换句话说,如果主体和外部通信设备以无线方式互相连接,则控制屏幕可以基于施加于其的预先确定类型的触摸241显示,不管通知图标210是否被显示在其上。
另一方面,可以以各种模式实现与显示控制屏幕的功能链接的预先确定类型的触摸。
参考图2B和2C,预先确定类型的触摸可以是捏放触摸241、多触摸242等等的任何一个。另一方面,本公开可以不必局限于先前的触摸模式。
例如,预先设置类型的触摸可以包括各种类型的触摸。例如,各种类型的触摸可以包括短(或者轻敲)触摸、长触摸、双触摸、多触摸、拖动触摸、轻弹触摸、捏缩触摸、捏放触摸、滑动触摸、悬停触摸等等。
在下文中,将更详细地描述各种类型的触摸。
短(或者轻敲)触摸可以是触摸对象(例如,手指、触笔等等)与触摸屏151(或者施加触摸)接触,然后在预先确定的时间段内释放的触摸。例如,短(或者轻敲)触摸可以是在短时间段内触摸对象与触摸屏接触的触摸,类似于鼠标的单击。
长触摸可以是触摸对象与触摸屏151接触,并且然后保持超过预先确定的时间段的触摸。例如,长触摸可以是由触摸对象将触摸施加于触摸屏151,并且然后触摸被保持超过预先确定的时间段的触摸。更具体地,长触摸可以是触摸在触摸屏上的一个位置保持预先确定的时间段,然后从其释放的触摸。此外,长触摸可以理解为与触摸-和-保持操作相对应的触摸,其中触摸对象的接触状态在触摸屏151上保持超过预先确定的时间段。
双触摸可以是在预先确定的时间段内短触摸连续地施加于触摸屏151至少两次的触摸。
在短触摸、长触摸和双触摸中描述的预先确定的时间段可以通过用户的设置确定。
多触摸可以是在基本相同的时间点在触摸屏151上触摸被施加到至少两个接触位置的触摸。另外,多触摸可以是在触摸屏上施加预先确定数目的两个或更多个接触点超过预先确定的时间段的触摸。
拖动触摸可以是从触摸屏151的第一位置开始的接触沿着一个方向连续地施加在触摸屏上,并且然后接触从不同于第一位置的第二位置释放的触摸。
特别地,拖动触摸可以是施加于触摸屏151的一个位置通过触摸对象连续地延伸,同时在触摸屏151上保持,然后从不同于所述一个位置的位置释放的触摸。
此外,拖动触摸可以表示触摸施加于触摸屏151的一个位置,并且然后连续地从该触摸延伸的触摸。
轻弹触摸可以是在预先确定的时间段内施加拖动触摸的触摸。特别地,轻弹触摸可以是施加拖动触摸的触摸对象在预先确定的时间段内从触摸屏151释放的触摸。换句话说,轻弹触摸可以理解为以高于预先确定的速度的速度施加的拖动触摸。
滑动触摸可以是以直线施加的拖动触摸。
捏缩触摸可以是在触摸屏151上施加于不同的两个位置(分开的两个位置)的第一和第二触摸的至少一个在互相靠近的方向延伸的触摸。例如,捏缩触摸可以是在手指分别与在触摸屏151上分开的两个位置接触的状态下,通过减小在两个手指之间距离的操作实现的触摸。
捏放触摸可以是在触摸屏151上施加于不同的两个位置(分开的两个位置)的第一和第二触摸的至少一个在互相远离的方向延伸的触摸。例如,捏放触摸可以是在手指分别与在触摸屏151上分开的两个位置接触的状态下,通过增加(延伸)在两个手指之间距离的操作实现的触摸。
悬停触摸可以是在远离触摸屏151的空间中对应于触摸对象的操作,同时触摸对象不与触摸屏151接触的触摸,并且对于一个示例,可以是如在图1A中图示的接近触摸。例如,悬停触摸可以是对于超过预先确定的时间段与触摸对象保持在与触摸屏151隔开的一个位置处的操作相对应的触摸。
按照本公开,将描述的是预先设置类型的触摸例如是拖动触摸。但是,先前的各种类型的触摸将以相同或者类似的方式相似地施加于预先设置类型的触摸。
按照本公开,控制屏幕250可以是用于控制在预先确定的位置处布置的外部设备的屏幕。
更具体地说,控制屏幕250可以包括用于预先确定的位置的至少部分区域的地图图像以直观地将在预先确定的位置内的外部设备之间的排列关系等提供给用户。
参考图2B的第四图,控制屏幕250可以与地图图像重叠,并且可以包括对应于外部设备的图像对象251、252。有关对应于图像对象251、252的外部设备的状态信息或者通知信息可以被显示以与图像对象251、252重叠。
此外,当触摸施加于图像对象251、252时,可以实现对与图像对象相对应的外部设备的控制。稍后将进行详细描述。
此外,地图图像可以是用于预先确定的位置的各种区域(第一区域、第二区域、…、第n个区域)的图像。换句话说,预先确定的位置可以是相同的,但是,用于每个区域的地图图像可以是不同的。
例如,当预先确定的位置的地图图像包括用于第一和第二区域的地图图像时,第一和第二区域可以是不同的区域。在这里,第一和第二区域可以是在预先确定的位置处彼此不重叠的区域。做为选择,第一和第二区域可以是任何一个区域包含另一个区域的区域。
更具体地说,当在用于第一区域的地图图像显示在触摸屏151上的状态下施加预先确定类型的第一触摸时,可以显示用于第二区域的地图图像。此外,当在用于第二区域的地图图像显示在其上的状态下施加预先确定类型的第二触摸时,可以显示用于第一区域的地图图像。换句话说,用于第一和第二区域的地图图像可以互相转换,并且显示在触摸屏151上。稍后将进行详细描述。
另一方面,地图图像可以包括各种类型的地图图像。例如,地图图像可以是与预先确定的位置的部分区域相对应的三维地图图像、平面图像和立体视图图像的任何一个。
类似于先前的描述,当在任何一种类型(称为第一类型)的地图图像显示在触摸屏151上的状态下施加预先确定类型的第一触摸时,可以显示另一个类型(称为第二类型)的地图图像。此外,当在第二类型的地图图像显示在其上的状态下施加预先确定类型的第二触摸时,可以再次显示第一类型的地图图像。将稍后参考伴随的附图进行详细地描述。
在下文中,将首先描述在先前类型的地图图像之中的三维地图图像,然后将描述平面视图图像。此外,将描述用于在三维地图图像和平面视图图像之间相互转换的控制方法。
图3A和3B是用于解释包括在与本公开相关联的控制屏幕中的三维地图图像的概念图。
参考图3A的第一图,控制屏幕可以包括用于预先确定的位置的至少部分区域的三维地图图像310。
三维地图图像可以是预先存储在存储器中的三维地图图像或者从在主体中提供的相机实时接收到的图像中的至少一个。
按照本说明书,将基于由用户预先存储的三维地图图像描述三维地图图像。此外,按照本说明书,将在预先确定的位置是用于第一位置(“用户的家庭”)的三维地图图像的假设之下描述三维地图图像。
另一方面,按照本公开,三维地图图像可以被显示以对应于当前位置和在预先确定的位置内感测到的主体的方向。
特别地,如上所述,第一位置可以被分割为多个区域。例如,第一位置可以被分割为1-1区域、1-2区域、1-3区域、…、第(1-n)个区域。在这种情况下,三维地图图像可以包括对应于多个区域的多个外部设备地图图像。
换句话说,在三维地图图像之中的与在其中感测到主体的当前位置的区域相对应的三维地图图像可以被显示在触摸屏上。因此,与用户当前位于其上的区域相对应的三维地图图像可以显示在控制屏幕上。
另外,控制器180可以显示三维地图图像以对应于从感测到的主体指向的方向或者感测到的主体的倾斜方向。
在这里,可以经由在主体中提供的相机感测从主体指向的方向。例如,在这种情况下,可以提取匹配从相机接收的图像的三维地图图像的部分。此外,可以由地磁传感器、陀螺传感器和加速度传感器的至少一个感测主体的倾斜方向。
参考图3A和3B,当从主体指向的方向改变时,显示在触摸屏上的三维地图图像310、320可以改变为对应于变化的方向。
概括地说,外部设备地图图像在触摸屏上显示与主体100的当前位置和方向相对应的部分。
例如,参考图3A,在触摸屏151上显示用于与从移动终端100指向的方向的空间310'相对应的三维地图图像310。因此,三维地图图像310可以包括图像对象311、312,图像对象311、312对应于在与从主体100指向的方向相对应的空间310'中包括的外部设备311'、312'。
参考图3B,当从主体指向的方向被改变时,用于与主体100的变化方向相对应的空间320'的三维地图图像320被显示在触摸屏151上。换句话说,三维地图图像320可以包括图像对象321、322,图像对象321、322对应于在与当前从主体100指向的方向相对应的空间320'中包括的外部设备321'、322'。
因此,与直接地由用户看到的空间相对应的三维地图图像的部分可以被显示在触摸屏151上。换句话说,用户可以以对应于其实际空间的方式直观地观看显示在触摸屏151上的三维地图图像。
做为选择,尽管在该图中未示出,与公开的示例相反,即使从主体指向的方向被改变,显示在触摸屏上的三维地图图像可以按照原样保持最初地显示的图像。在这种情况下,当预先确定的触摸(例如,对应于水平方向的轻弹触摸)被施加于三维地图图像时,可以显示在与对其施加的触摸方向相对应的方向中移动的三维地图图像。
另一方面,预先确定的位置是第一位置(“用户的家庭”)的情形被在图中作为示例图示,但是,基于主体所位于的位置,可能存在各种三维地图图像。
另外,按照本公开,当在电子设备100(例如,移动终端)显示在触摸屏151上的状态下将预先确定类型的触摸施加于触摸屏151时,可以在预先确定的位置内显示用于包括主体的当前位置的部分区域的平面视图图像。
在这里,平面视图图像可以是与其中从顶部看到预先确定的位置的至少部分区域的图像相对应的图像。更具体地说,平面视图图像可以是水平投影图,其中预先确定的位置的至少部分区域在预先确定的高度处在水平面上切割。
例如,当主体的当前位置位于预先确定位置(例如,用户的家庭)的第一区域(例如,客厅)时,平面视图图像可以是图示从顶部看到的第一区域的图像。
另一方面,尽管在该图中未示出,当显示平面视图图像时,平面视图图像可以被显示以对应于从主体指向的方向。例如,平面视图图像可以被以这样的方式显示:在平面视图图像的顶部、底部、左侧和右侧之中,与从主体指向的方向相对应的外部设备被布置在平面视图图像上的顶侧。
此外,如上所述,可以显示对应于外部设备的图像以与平面视图图像重叠。换句话说,图像对象可以位于对应于外部设备布置在平面视图图像上的第一区域上的位置。因此,用户可以以直观的和快速的方式使用平面视图图像控制外部设备。稍后将对其更详细地描述。
另一方面,如上所述,平面视图图像可以被显示以对应于在显示三维地图图像的状态下被施加的预先确定类型的触摸。在下文中,将参考伴随的附图详细描述在图像之间相互转换的控制方法。
图4A至4I是用于解释在与本公开相关联的控制屏幕中包括的各种地图之间的相互变换的控制方法的概念图。
参考图4A的第一和第二图,当预先确定类型的触摸410在三维地图图像411显示在触摸屏151上的状态下施加于三维地图图像411时,显示用于包括主体的当前位置的部分区域的平面视图图像412。
在这里,预先确定类型的触摸410可以是链接到如上所述的显示控制屏幕的功能的预先确定类型的触摸相同类型的触摸。
换句话说,链接到显示控制屏幕的功能的预先确定类型的触摸是捏放触摸或者捏缩触摸,链接到显示平面视图图像的功能的预先确定类型的触摸也可以是捏放触摸或者捏缩触摸。在该图上,图示预先确定类型的触摸是捏放触摸的情形。
参考图4A的第二图,用于预先确定位置的部分区域的平面视图图像412被显示在触摸屏151上。如上所述,该部分区域可以是包括主体的当前位置的第一区域(例如,客厅)。
随后,参考图4A的第二和第三图,当在显示用于第一区域的平面视图图像412的状态下施加预先确定类型的触摸(如上所述的捏放触摸)410时,可以显示用于包括第一区域的第二区域的平面视图图像413。
在这里,第二区域可以表示包括第一区域的大于第一区域的区域。例如,参考图4A的第三图,第二区域本身可以是预先确定的位置(例如,用户的家庭)。
随后,当在显示用于预先确定的位置的平面视图图像413的状态下预先确定类型的触摸(如上所述的捏放触摸)410被施加于平面视图图像413时,可以显示用于预先确定的位置和预先确定的位置的周围位置的图像414。
周围位置可以由用户预先设置。例如,当预先确定的位置是用户的家庭时,周围位置可以是由用户使用的停车场、操场等等。
换句话说,参考图4A,用于预先确定的位置的至少部分区域的地图图像被显示在用于执行与预先确定的位置相关联的控制的控制屏幕上。当预先确定类型的触摸被施加于地图图像时,显示不同于当前显示的地图图像的地图图像。
换句话说,参考图4A,当在显示三维地图图像411的状态下施加捏放触摸410时,显示用于第一区域的平面视图图像412,并且当随后再次施加捏放触摸410时,显示用于包括第一区域的第二区域(在这里,整个预先确定的位置)的平面视图图像413。随后,当捏放触摸410被再次施加时,可以显示用于预先确定的位置和该位置的周围位置的平面视图图像414。换句话说,每当捏放触摸410施加于触摸屏151时,可以显示用于更大的范围的地图图像。
此外,参考图4B,当在显示用于预先确定的位置和该位置的周围位置的平面视图图像414的状态下将捏缩触摸420施加于平面视图图像414时,显示用于预先确定的位置的第二区域的平面视图图像413。随后,当捏缩触摸420被再次施加时,显示用于包括在第二区域中的第一区域的平面视图图像412。随后,当捏缩触摸420再次施加时,可以显示用于第一图像的三维地图图像411。换句话说,每当捏缩触摸420被施加于触摸屏151时,可以显示用于更小的范围的地图图像。
到目前为止,主体位于在预先确定的位置之中的第一位置(例如,用户的家庭)的情形,甚至当主体位于在预先确定的位置之中不同于第一位置的第二或者第三位置时,用于各种范围的区域,诸如第一或者第二位置的地图图像可以与预先确定类型的触摸结合地显示。
例如,当基于位于第二位置(例如,用户的办公室)的主体将预先确定类型的触摸施加于预先确定的屏幕时,显示能够对第二位置执行控制的控制屏幕。
在这种情况下,参考图4C,控制屏幕可以是用于第二位置的至少部分区域的三维地图图像421。如上所述,当捏放触摸410被施加于三维地图图像421时,显示用于第二位置的部分区域的平面视图图像422。当捏放触摸410被施加于平面视图图像422时,显示用于包括部分区域的第二位置的更大的区域的平面视图图像423。随后,当捏放触摸410被施加于平面视图图像423时,可以显示用于第二位置和第二位置的周围位置(例如,停车场)的平面视图图像424。
此外,参考图4D,甚至当主体位于第三位置(例如,用户的汽车)时,用于更大区域的第三位置的地图图像可以与捏放触摸410结合逐渐地显示。
例如,在控制屏幕的录入期间最初显示的地图图像可以是用于驾驶座的三维地图图像431。当捏放触摸410被施加于图像431时,用于驾驶座的平面视图图像432可以显示。随后,用于在用户的汽车内的所有座位的平面视图图像433和用于整个用户的汽车的平面视图图像434可以顺序地显示在触摸屏151上。
如在图4A至4D中所图示的,用户可以使用用于预先确定的位置的区域的各种范围的地图图像更加有效地对预先确定的位置执行控制。
另一方面,参考图4E,当预先确定类型的触摸(例如,轻弹触摸)430被施加到处于用于预先确定的位置的部分区域的平面视图图像441在其上被显示的状态的触摸屏151时,可以显示用于相同区域的立体视图图像442。
换句话说,当在与预先确定的位置的部分区域相对应的第一类型的图像441显示在触摸屏151上的状态下预先确定类型的触摸430被施加于触摸屏151时,可以显示对应于部分区域的第二类型的图像442。
此外,当在与预先确定的位置的部分区域相对应的第二类型的图像442被显示在触摸屏151上的状态下预先确定类型的触摸430'被施加于触摸屏151时,可以显示与部分区域相对应的第一类型的图像441。
另一方面,在按照本公开的移动终端中,不同类型的地图图像可以基于移动终端100的姿势显示在触摸屏151上。
更具体地说,感测单元140可以感测在主体100和地之间的角度。
参考图4F,当在主体100和地之间的角度大于预先确定的值时,可以显示相对于预先确定的位置的部分区域的第一类型的图像(例如,立体视图图像)451。此外,当在主体100和地之间的角度低于预先确定的值时,可以显示用于相同的区域的第二类型的图像(例如,平面视图图像)452。
因此,用户可以使用预先确定的位置的各种类型的地图图像更加有效地对预先确定的位置执行控制。
此外,按照本公开,当在与预先确定的位置的部分区域相对应的图像被显示在触摸屏151上的状态下预先确定类型的触摸被施加于触摸屏时,可以显示与预先确定的位置的不同区域相对应的图像。
参考图4G,当在用于预先确定的位置的第一区域(例如,卧室)的平面视图图像461被显示在触摸屏151上的状态下施加预先确定类型的触摸(例如,相对于触摸屏的一个方向的轻弹触摸)时,显示用于预先确定的位置的第二区域(例如,工作环境)的平面视图图像462。
类似地,当在显示用于第二区域(例如,工作环境)的平面视图图像462的状态下施加预先确定类型的触摸时,显示用于第三区域(例如,休息室)的平面视图图像463。
类似地,当在显示用于第三区域(例如,卧室)的平面视图图像463的状态下施加预先确定类型的触摸时,显示用于第四区域(例如,小房间)的平面视图图像464。
此外,参考图4G,指示用于哪个区域的图像的指示符465被显示在触摸屏151上。
参考图4H的第一图,用于预先确定的位置的第一区域(例如,客厅)的平面视图图像481可以在触摸屏151上与显示预先确定的位置的整个地图的图像对象482一起显示。
参考图4H的第二图,当相对于图像对象482施加预先确定类型的触摸时,可以以放大方式显示图像对象482。此外,图像对象482可以包括对象482a,对象482a高亮显示在预先确定的位置之中主体100当前所位于的一个区域。
另一方面,参考图4H的第二和第三图,当相对于平面视图图像481施加预先确定类型的触摸时,基于施加的触摸的方向,可以在图像对象482上显示对象482b,对象482b高亮显示不同于该一个区域的区域。
另一方面,参考图4H的第三和第四图,在图像对象482上,在高亮显示不同区域的对象482b附近,可以显示在触摸方向中的指南信息483。
更具体地说,在触摸方向中的指南信息483可以包括顶部、底部、左侧和右侧的至少一个方向信息。当基于提供的指南信息483施加对应于顶部、底部、左侧和右侧的至少一个方向的拖动触摸时,可以基于施加的拖动触摸的方向显示在图像对象482上高亮显示另一个区域的对象482c。
尽管在图中未示出,当预先确定类型的触摸相对于图像对象482施加时,图像对象482可以不再显示。此外,可以显示与另一个区域相对应的平面视图图像。
如迄今为止描述的,用于预先确定的位置的各种区域的控制屏幕可以经由用于显示预先确定的位置的地图的图像对象482互相转换。
参考图4I的第一和第二图,当在用于预先确定的位置的任何区域的图像471显示在触摸屏151上的状态下将预先确定类型的触摸(例如,长触摸)施加于包括在图像471中的图像对象472时,可以显示对应于主屏幕的图形对象473。
参考图4I的第二和第三图,当存在多个主屏幕时,可以分别显示对应于主屏幕的多个图形对象。当选择图形对象中的任何一个473a时,链接到与对应于图像对象472的外部设备的控制屏幕的图标474可以被增加给对应于所选择的图形对象的主屏幕。
另一方面,参考图4I,指示符475指示当前显示的图像是在触摸屏151的一个区域中区域可以对其显示的图像。
到此为止,已经描述了各种范围和类型的地图图像互相转换,并且显示在显示单元上的情形。
另一方面,按照本公开,控制屏幕可以包括与地图图像重叠并且对应于外部设备的图像对象。显示外部设备的状态信息和通知信息或者经由图像对象执行外部设备的控制是可允许的。
在下文中,将参考图5A和5B描述经由图像对象显示外部设备的状态信息和通知信息的描述,然后将参考图5C描述经由图像对象执行外部设备的控制的描述。
图5A和5B是解释用于使用与本公开相关联的图像对象的外部设备的状态信息或者通知信息的显示的控制方法的概念图。此外,图5C和5D是用于解释使用图像对象的外部设备的控制方法的概念图。
参考图5A的第一图,用于在触摸屏151上显示的预先确定的位置的部分区域的地图图像510可以包括对应于布置在部分区域中的外部设备的图像对象511、512、513。
特别地,当存在多个外部设备时,在地图图像上分别存在对应于外部设备的多个图像对象511、512、513。
每个图像对象可以具有颜色信息或者边缘信息。有关外部设备的状态信息可以经由图像对象的颜色信息或者边缘信息显示在触摸屏151上。
对于一个实施例,当图像对象511、513具有第一边缘信息514时,其可以是对应于图像对象的外部设备的电源关闭的情形。此外,当图像对象512具有第二边缘信息515时,其可以是对应于图像对象的外部设备的电源开启的情形。
对于一个实施例,当图像对象具有第一颜色信息时,对应于图像对象的外部设备可以处于与主体配对的状态。此外,当图像对象具有第二颜色信息时,对应于图像对象的外部设备可以处于不与主体配对的状态。
此外,参考图5A的第一和第二图,对应于图像对象511、512、513的外部设备的通知图标511'、512'、513'可以在与图像对象重叠或者邻近的位置上显示。当触摸施加于通知图标511'、512'、513'或者图像对象511、512、513时,可以显示外部设备的通知信息。
特别地,通知信息的详细描述可以对于每个外部设备变化。例如,如在图5A的第一和第二图中图示的,当触摸施加到对应于“电话”的图像对象512或者通知图标512’时,可以显示已经由“电话”接收,但是,用户未应答的电话号码的描述、未检查的消息等等。
对于通知信息的另一个示例,如在图5B的第一和第二图中图示的,当触摸施加于对应于“冰箱”的图像对象516或者通知图标516'时,可以显示有关“冰箱”的通知信息。
例如,参考图5B的第二图,控制器180可以将储存在“冰箱”中的食物的有效期与当前日期比较以显示有关到有效期的剩余时段的信息。在这里,当食物储存在冰箱中时,有效期可以由用户预先存储在存储器等中。
到此为止,已经描述使用图像对象的外部设备的状态信息和通知信息的显示模式等。
另一方面,如上所述,按照本公开,基于施加于图像对象的触摸,对与图像对象相对应的外部设备的执行控制是可允许的。换句话说,当预先确定类型的触摸施加于图像对象时,控制器180可以产生与图像对象相对应的外部设备的控制命令。
控制命令可以经由主体的无线通信单元110直接地发送给外部设备。做为选择,控制命令可以经由在预先确定的位置处提供的预先确定的服务器发送给外部设备。
例如,参考图5C,当预先确定类型的触摸施加到与外部设备(例如,“照明灯具”)相对应的图像对象521时,可以对于外部设备(例如,“照明灯具”)实施链接到触摸的控制。
特别地,可以在“照明灯具”的电源关闭的状态下,基于施加于图像对象521的触摸接通“照明灯具”的电源。
对于另一个实施例,当拖动触摸施加于对应于“照明灯具”的图像对象521时,“照明灯具”的亮度可以基于拖动的轨迹的长度而变化。
此外,与“照明灯具”的亮度相关联的亮度显示条522可以在邻近于图像对象521的位置处显示。“照明灯具”的亮度显示条522、522'可以按照“照明灯具”的亮度变化的程度不同地显示。
另一方面,尽管在图中未示出,当拖动触摸施加于与“风扇”相对应的图像对象时,“风扇”的气流率可以基于拖动的轨迹的长度变化。
此外,参考图5D,当预先确定的触摸(例如,捏放触摸)施加于在外部设备之中对应于“TV”530的图像对象531时,当前显示在“TV”530上的屏幕信息532可以发送给主体100。
如上所述,屏幕信息532可以经由另外在“TV”530中提供的无线通信单元110发送给主体100,或者经由预先确定的服务器发送给主体100。
经由此,已经经由电视机显示的视频可以无需复杂的处理显示在移动终端的触摸屏151上。作为确定的结果,甚至当离开他的或者她的家庭时,用户可以经由终端主体连续地观看已经经由电视机观看的视频。
迄今为止,已经描述允许控制器基于施加到包括在触摸屏151上显示的地图图像中的图像对象的预先确定类型的触摸控制与图像对象相对应的外部设备的方法。
另一方面,按照本公开,当触摸施加于图像对象时,在显示用于控制与图像对象相对应的外部设备的窗口之后,可以基于经由窗口录入的用户输入控制外部设备。将在下面参考伴随的附图更详细地描述。
图6A至6E是用于解释基于经由与本公开相关联的窗口录入的用户输入的外部设备的控制方法的概念图。
参考图6A,在触摸屏151上,用于预先确定的位置的部分区域的平面视图图像611包括用于在部分区域中布置的外部设备的图像对象。
例如,当触摸施加于在图像对象之中对应于“空调”的图像对象611a时,可以显示包括温度控制条612a的第一窗口612和包括天气信息的第二窗口613。
可以响应于施加于温度控制条612a的预先确定类型的触摸控制空调吹的风的温度和强度。例如,可以基于在与触摸被释放的位置相对应的温度控制条612a上的位置控制风的温度和强度。
尽管在图中未示出,当预先确定类型的触摸施加于对应于“热水器”的图像对象时,类似于先前的示例,窗口包括“温度控制条”。可以响应于施加于温度控制条的预先确定类型的触摸控制热水器的温度。
参考图6B,类似于先前的示例,当预先确定类型的触摸(例如,短触摸)施加于对应于“冰箱”的图像对象621时,可以显示包括冷藏室和/或冷冻室的温度控制条622a的窗口622。可以响应于施加于温度控制条622a的预先确定类型的触摸控制冷藏室和/或冷冻室的温度。
另外,预先确定类型的触摸(例如,如在图中图示的捏放触摸)被施加于窗口622,可以显示与“冰箱”的内部相关联的图像。图像623可以是从安装在“冰箱”中的相机实时接收的图像。
参考图6C,类似于先前的示例,当预先确定类型的触摸施加于对应于“电视机”或者“机顶盒”的图像对象631时,窗口能够允许用户改变电视频道。
参考图6C的第二和第三图,甚至当预先确定类型的触摸(例如,捏放触摸)施加于窗口632时,当前选择的信道的图像可以显示在终端的触摸屏151上。
做为选择,参考图6C的第三和第四图,对应于移动终端的图标633可以与窗口632一起在触摸屏151上显示。在这种情况下,可以施加将在对应于多个信道的图像对象632a上的位置作为起点,并且在对应于移动终端的图标633上的位置作为释放点的拖动触摸。对应于图像对象632a的信道的图像可以通过拖动触摸显示在触摸屏151上。
另一方面,对应于电视机的图标634可以在触摸屏151上与窗口632一起显示。在这种情况下,可以施加将在对应于多个信道的图像对象632a上的位置作为起点,并且在对应于电视机的图标634上的位置作为释放点的拖动触摸。对应于图像对象632a的信道的图像也可以通过拖动触摸显示在电视机上。
参考图6D,当预先确定的触摸施加于对应于“第一电话”的图像对象641时,用于“第一电话”控制的窗口642被显示在触摸屏151上。
在该窗口上,可以显示对应于与“第一电话”配对的另一个“第二电话”或者“移动终端”的图标。当选择图标中的一个时,在第一电话处接收到的呼叫可以连接到与所选择的图标642a相对应的“移动终端”。
做为选择,当选择图标的一个642a,并且然后触摸施加于用于呼叫转移的虚拟按钮643时,可以形成与将在第一电话接收的呼叫连接到对应于所选择的图标642a的移动终端相关联的控制命令。
随后,参考图6E,当预先确定类型的触摸(例如,捏放触摸)施加于用于“第一电话”控制的窗口642时,可以在“第一电话”的呼叫历史上显示信息644。
至今,已经分别描述允许控制器180以分别地控制外部设备的方法。另一方面,外部设备可以被共同地控制。在下文中,将参考伴随的附图更详细地描述。
图7A和7B是用于解释控制与本公开相关联的多个外部设备的窗口的概念图。
参考图7A,当在用于预先确定的位置的部分区域的地图图像711被显示在触摸屏151上的状态下施加预先确定类型的触摸(例如,在向下方向的轻弹触摸)时,可以显示用于与部分区域的温度、湿度、照度等相关联的控制的窗口712。
更具体地,窗口712可以包括温度控制条713、湿度控制条714和照度控制条715的至少一个。
例如,当预先确定类型的触摸施加于温度控制条713时,部分区域的温度可以经由布置在预先确定的位置的部分区域处的外部设备,诸如空调、风扇等等控制。
此外,参考图7B,当在用于预先确定位置的部分区域的地图图像711被显示在触摸屏151上的状态下施加预先确定类型的触摸(例如,在向上方向的轻弹触摸)时,可以显示布置在该区域中的外部设备的列表和外部设备的状态信息716。
另一方面,尽管在图中未示出,当利用两个手指施加轻弹触摸时,可以显示布置在整个预先确定位置上的外部设备的列表和外部设备的状态信息。
另一方面,当接收到用于结束对预先确定位置的控制的用户请求时,控制器180可以控制触摸屏151不显示控制屏幕。
换句话说,当接收到用于结束对预先确定位置的控制的用户请求时,控制器180可以按照本公开控制触摸屏151显示主屏幕。
图8A和8B是用于解释与预先确定的位置的控制屏幕的结束相关联的控制方法的概念图。
参考图8A,当在预先确定位置的控制屏幕811显示在触摸屏151上的状态下施加预先确定类型的触摸时,屏幕可以从控制屏幕811切换到主屏幕812。
换句话说,如在图中图示的,当以触摸屏151的一个边缘作为起点,并且其另一个边缘作为终点施加拖动触摸时,控制屏幕811可以结束。
在这里,链接到控制屏幕的代表性图标812a可以显示,或者对应于预先确定位置的每个区域的图标813、814、815、816、817可以基于施加的拖动触摸的方向显示在主屏幕812上。
例如,参考图8A的第三和第四图,当在显示控制屏幕811的状态下在一个方向施加拖动触摸时,链接到控制屏幕的代表性图标812a可以显示在主屏幕812上在邻近于拖动触摸结束的位置的区域中。
此外,参考图8A的第一和第二图,当在显示控制屏幕811的状态下,在与这一个方向相反的方向施加拖动触摸时,对应于每个区域的图标813、814、815、816、817可以显示在主屏幕812上在邻近于拖动触摸结束的位置的区域中。
例如,对应于预先确定位置的每个区域的图标813、814、815、816、817可以是在“用户的家庭”对应于“卧室”、“客厅”、“厨房”和“洗手间”的图标。
此外,可以另外显示在区域之中的与主体当前位于其中的区域相对应的图标814。
另一方面,按照当前的实施例,所图示的是当在左侧方向施加拖动触摸时显示代表性图标812a,并且当在显示控制屏幕的状态下,在右侧方向施加拖动触摸时显示对应于每个区域的多个图标813、814、815、816、817,但是,本公开可以不必受限于此。
按照另一个实施例,对应于每个区域的代表性图标812a和图标813、814、815、816、817的任何一个可以基于拖动触摸被施加的轨迹的长度被控制以被显示。
此外,按照再一个实施例,对显示与每个外部设备相对应的多个图标,而不是与每个区域相对应的多个图标813、814、815、816、817来说是可能的。
当在显示主屏幕812的状态下,在外部设备上发生事件时,可以在与对应于其中布置外部设备的区域的图标814重叠或者邻近的位置处显示用于通知该事件的通知图标。
参考图8B的第一和第二图,当预先确定类型的触摸(例如,拖动触摸)施加于对应于该区域的图标814时,可以显示与在其上已经发生事件的外部设备相对应的图标821。
此外,当存在在其上已经发生事件的多个外部设备时,如果拖动触摸的轨迹长度增加,则可以显示分别对应于在其上已经发生事件的多个外部设备的图标821、822。
参考图8B的第三图,多个图标821、822可以以对应于由用户最近使用的外部设备的顺序显示。做为选择,多个图标821、822可以以对应于由用户经常使用的外部设备的顺序显示。
参考图8B的第四图,对应于在其上没有发生事件的外部设备的图标823也可以与对应于在其上已经发生事件的外部设备的图标821、822一起显示。
另一方面,按照本公开,有关在外部设备上发生的事件的信息甚至可以在主屏幕显示在触摸屏上的状态下显示。此外,当预先确定类型的触摸施加于有关事件的信息时,能够进入能够控制外部设备的控制屏幕或者立即控制外部设备。将参考伴随的附图更详细地描述。
图9A至9E是用于解释显示有关在外部设备上发生的事件信息的各种实施例的概念图。
参考图9A,当在布置在主体所位于的预先确定的位置处的至少一个外部设备上发生事件时,用于通知该事件发生的通知图标210可以显示在状态显示条上。当预先确定类型的拖动触摸施加于通知图标210时,可以显示有关在外部设备上发生的事件的信息。
做为选择,当在主屏幕911显示在触摸屏151上的状态下,在布置在主体所位于的预先确定的位置处的外部设备上发生事件时,可以显示有关该事件的信息。
例如,当指示未接来电已经接收的事件在电话上发生时,指示未接来电已经接收的事件信息912可以显示以与主屏幕重叠。此外,当预先确定类型的触摸施加于事件信息时,可以显示该事件信息的详细信息。详细信息可以是有关未接来电的发起者的信息,已经发生未接来电的事件的时间。
另一方面,参考图9B,当与未接来电相关联的事件在移动终端100上发生时,控制器180显示与该事件相关联的信息921,和指示使能在移动终端所位于的位置处的外部设备的控制的图标922。
当触摸施加于图标922时,可以显示对应于移动终端所位于的位置的每个区域的图标923、924。此外,当选择对应于一个区域的图标时,可以显示对应于安装在该区域中的多个电话的图标924a、924b。当选择多个图标924a、924b的任何一个时,呼叫连接信号可以经由对应于所选择的图标924b的电话发送给未接来电的发起者的终端。
另一方面,有关事件的信息921可以是有关与在布置在预先确定的位置处的任何电话上发生的未接来电相关联的事件的信息。在这种情况下,当选择图标922时,呼叫连接信号可以经由移动终端100发送给未接来电的发起者的终端。
做为选择,当预先确定类型的拖动触摸施加于图标922时,可以显示对应于安装在预先确定的位置处的多个电话的图标923、924。当触摸施加于图标的任何一个时,呼叫连接信号可以经由对应于触摸被施加到的图标的电话发送给未接来电的发起者的终端。
参考图9C,与预留的电视节目相关联的通知信息932可以在主屏幕931被显示在触摸屏151上的状态下显示。当触摸施加于通知信息932时,可以显示用于选择应用以显示预留的节目的窗口933。当经由窗口933选择应用的任何一个时,预留的节目934可以经由所选择的应用以视频的形式显示在触摸屏151上。
参考图9D,当在移动终端所位于的预先确定的位置处用于外部设备控制的控制屏幕941显示在触摸屏151上的状态下,在外部设备上发生事件时,控制器180控制触摸屏151以显示指示该事件已经发生的通知信息942。
当触摸施加于通知信息942时,可以显示有关在其上该事件已经发生的外部设备的信息943。当存在在其上事件已经发生的多个外部设备时,有关多个外部设备的信息可以以列表的形式显示。当触摸施加于有关在其上该事件已经发生的外部设备的信息943时,可以显示该事件的详细信息944。
参考图9E,当在预先确定的位置处用于外部设备控制的控制屏幕951被显示在触摸屏151上的状态下,在外部设备上发生事件时,控制器180控制触摸屏151以显示指示该事件已经发生的通知信息952。
当触摸施加于通知信息952时,可以显示对应于在其上已经发生事件的外部设备的图标953、954。当触摸施加于图标中的任何一个953时,可以显示有关与图标相对应的外部设备的事件的详细信息955。
因此,用户立即识别在外部设备上发生的事件,而不管当前显示屏的类型如何。
另一方面,当通知模式被设置为敏感模式时,与本公开相关联的移动终端100可以使用多个不同的通知板显示外部设备的通知信息。
更具体地说,多个通知板可以包括第一和第二通知板。与安装在移动终端100中的应用相关联的通知信息可以显示在第一通知板上,并且与本公开相关联的外部设备的通知信息可以显示在第二通知板上。
图10A至10D是用于解释当按照本公开的一个实施例的通知模式被设置为敏感模式时,显示外部设备的通知信息的方法的概念图。
按照本公开,当通知模式被设置为敏感模式时,甚至当在外部设备上发生事件时,通知信息可以不必显示在触摸屏151上。
换句话说,当通知模式被设置为敏感模式时,即使接收到外部设备的通知信息,与本公开相关联的移动终端100可以不必在第一通知板上显示通知信息。然后,控制器180可以基于从第一通知板(例如,邻近于第一通知板的一个边缘的区域)的一个区域开始,并且在一个方向施加的拖动触摸,在触摸屏151上显示第二通知板,在第二通知板上显示有通知信息。
另一方面,本公开可以以各种方式在触摸屏151上显示,显示有外部设备的通知信息的第二通知板。
例如,当在如图10A的第一图所图示的第一通知板1010被显示的状态下触摸第一通知板1010的一个区域1011时,控制器180可以在如图10A的第二图中图示的一个区域中显示与外部设备相关联的通知图标1010a。
在这里,与外部设备相关联的通知图标1010a可以是用于执行对控制外部设备的控制屏幕访问的应用的图标。
然后,控制器180可以基于如图10A的第三图所图示的从图标1010a开始并且在一个方向(例如,向下方向)施加的拖动触摸,在触摸屏151上显示包括(显示有)外部设备的通知信息1021a、1021b的第二通知板1020。
在这里,外部设备的通知信息1021a、1021b可以是用于通知在布置在主体位于的位置处的外部设备上发生的事件的通知信息。例如,其可以是与在布置在主体位于的位置的电话上发生的“未接来电”相关联的事件的通知信息。
对于另一个示例,如在图10B的第一图中图示的,第一通知板1010可以包括显示有通知信息的特定区域1030。当在特定区域中显示的通知信息的大小(或者通知信息的数目)超过特定区域1030的大小时,控制器180可以基于如图10B的第一和第二图中所图示的施加于特定区域1030的拖动触摸执行滚动。
当在特定区域1030中显示与最后顺序相对应的通知信息的状态下,在与一个方向(向下的方向)相反的方向(向上的方向)将拖动触摸施加于特定区域时,控制器180可以在触摸屏151上显示显示有外部设备的通知信息的第二通知板。
特别地,当如图10B的第二图中图示的在特定区域1030中显示与最后顺序相对应的通知信息1031的状态下,拖动触摸被施加到相反的方向(向上的方向)第一距离(d1)时,控制器180可以在特定区域1030中显示指示由于施加到相反方向的拖动触摸导致的滚动在特定区域1030中被禁止的图形图像1032。
然后,当如图10B的第三图所图示的拖动触摸(在向上的方向施加的拖动触摸)施加大于第一距离(d1)的第二距离(d2)时,控制器180可以在图形图像1032上显示与外部设备相关联的图标1034a。
然后,当拖动触摸(在向上的方向施加的拖动触摸)如在图10B的第四图中图示的施加大于第二距离(d2)的第三距离(d3)时,控制器180可以在触摸屏151上显示包括外部设备的通知信息1021a、1021b的第二通知板1020。
此时,第二通知板1020的部分可以显示在触摸屏151上。
然后,当通过大于第三距离的距离施加的拖动触摸被释放时,控制器180可以如在图10B的第五图中所图示的在触摸屏151上显示包括外部设备的(显示有)通知信息1021、1021b的第二通知板1020。
另一方面,甚至当整个第一通知板不显示时,本公开可以在触摸屏上显示指示外部设备的通知信息的第二通知板。
例如,当如在图10C的第一图中所图示的,触摸被施加于触摸屏151的一个区域220(例如,状态显示条)时,第一通知板的部分1010a可以在触摸屏151的一个区域220中显示。
可以显示第一通知板的部分1010a,同时在触摸屏151上保持触摸。
当如在图10C的第二图中图示的在第一通知板的部分1010a被显示(在保持触摸的状态下)的状态下,具有预先确定模式的触摸被连续地施加于触摸屏时,如在图10C的第三图中所图示的第一通知板的部分1010a可以改变为第二通知板1020a的部分。
预先确定的模式可以是如在图10C的第二图中所图示的,在一个方向前进,然后在与该一个方向相反的方向返回的模式。
当具有预先确定的模式的触摸被连续地施加于触摸屏时,控制器180可以将在触摸屏151的一个区域220中显示的第一通知板的部分1010a改变为能够显示外部设备的通知信息的第二通知板的部分1020a。
然后,如在图10C的第三图中所图示的显示第二通知板的部分1020a(保持具有预先确定的模式的触摸)的状态下,基于在一个方向中连续地施加于具有预先确定的模式的触摸的拖动触摸,如在图10C的第四图中图示的,控制器180可以在触摸屏151上显示第二通知板1020。
在其上已经发生多个事件的外部设备的通知信息1021a、1021b可以显示在如在图10C的第四图中所图示的第二通知板1020上。
对于另一个示例,当从至少两个点开始的拖动触摸被施加于触摸屏151的一个区域(例如,状态显示条)时,控制器180可以在触摸屏151上显示第二通知板,而不是第一通知板。
参考图10D,当如在图10D的第一图中图示的,触摸在触摸屏151的一个区域220中被施加于至少两个点时,控制器180可以如在图10D的第二图中图示的,在一个区域330中显示第二通知板的部分1020a,而不是第一通知板(或者第一通知板的部分)。
然后,当在一个方向施加的拖动触摸(即,从至少两个点开始的拖动触摸)被连续地施加到被施加到至少两个点的触摸时,控制器180可以如在图10D的第二图中图示的,在触摸屏151上显示显示有外部设备的通知信息1021a、1021b显示的第二通知板1020。
经由先前的配置,能够在触摸屏上提供各种用户界面,各种用户界面能够显示第二通知板,第二通知板显示有在其上已经发生事件的外部设备的通知信息。
在按照本公开的移动终端中,当基于与安装在预先确定的位置的外部通信设备执行通信的终端主体,预先确定类型的触摸被施加于触摸屏时,可以显示与预先确定的位置相关联的控制屏幕。因此,用户可以更加方便地进入与预先确定的位置相关联的控制屏幕。
控制屏幕可以包括与预先确定的位置相关联的地图图像和对应于布置在预先确定的位置的外部设备的图像对象。地图图像和图像对象可以提供能够允许用户更加直观地使用控制屏幕的UI/UX。
此外,与预先确定的位置相关联的地图图像可以是用于在预先确定的位置处的各种区域的地图图像。此外,用于各种区域的地图图像可以互相转换。因此,用户可以经由各种地图图像有效地使用控制屏幕。
此外,当预先确定类型的触摸被施加于图像对象时,可以形成用于图像对象的控制命令。因此,用户可以经由控制屏幕更加方便地控制布置在预先确定的位置处的外部设备。
先前的本发明可以实现为在由程序编写的介质上由计算机可读的代码。计算机可读的介质可以包括由计算机系统可读的数据存储在其中的所有类型的记录设备。计算机可读的介质的示例可以包括ROM、RAM、CD-ROM、磁带、软盘和光数据存储设备等等,并且还包括以载波(例如,经由因特网的传输)的形式实现的设备。此外,该计算机可以包括移动终端的控制器180。因此,其详细说明在所有方面将不被解释为是限制性的,而是被解释是说明性的。本发明的范围将由所附的权利要求书的合理的解释来确定,并且在本发明的等效范围内的所有变化包括在本发明的范围中。
本公开的一个方面是提供一种移动终端及能够执行与预先确定的位置相关联的控制的控制方法。
本公开的另一个方面是提供一种移动终端及能够执行与多个预先确定的位置相关联的控制的控制方法。
本公开的再一个方面是提供一种移动终端及能够执行与在多个预先确定的位置之中终端主体当前所位于的预先确定的位置相关联的控制的控制方法。
为了实现先前的任务,按照实施例的移动终端可以包括:主体;无线通信单元,该无线通信单元被配置为与外部通信设备执行通信;触摸屏,该触摸屏被形成以显示主屏幕并且感测触摸;和控制器,当在显示主屏幕的同时预先确定类型的触摸施加于触摸屏时,该控制器被配置为基于经由无线通信单元连接的外部通信设备,控制触摸屏在主体所位于的位置处显示用于对外部设备的至少部分执行控制的控制屏幕。
按照一个实施例,预先确定类型的触摸可以是在触摸屏上施加到至少两个或更多个接触点的多触摸。
按照一个实施例,多触摸可以是用于增加在触摸屏上的两个接触点之间的相对距离的捏放触摸。
按照一个实施例,当主体位于第一位置时,用于控制布置在第一位置处的外部设备的至少部分的第一控制屏幕可以显示在触摸屏上,并且当主体位于不同于第一位置的第二位置处时,用于控制布置在第二位置处的外部设备的至少部分的第二控制屏幕可以显示在触摸屏上。
按照一个实施例,当无线通信单元以无线方式连接到外部通信设备时,控制器可以控制触摸屏以显示指示无线连接的通知信息。
按照一个实施例,控制屏幕可以包括用于预先确定的位置的至少部分区域的地图图像。
在这里,地图图像可以包括用于预先确定的位置的第一区域的第一地图图像,和用于预先确定的位置的第二区域的第二地图图像,并且第一和第二区域可以是不同的区域,或者任何一个区域包含另一个区域的区域。此外,当在触摸屏上显示第一和第二地图图像的任何一个地图图像的状态下预先确定类型的触摸被施加于触摸屏时,控制器可以控制触摸屏以显示另一个地图图像。
此外,地图图像可以是用于预先确定的位置的部分区域的三维地图图像,并且三维地图图像可以是预先存储在主体中的三维地图图像,或者从在主体中提供的相机实时接收的图像。
在这里,三维地图图像可以显示在触摸屏上以对应于在预先确定的位置内感测的主体的当前位置和从主体指向的方向的至少一个。
在这里,当预先确定类型的触摸被施加于三维地图图像时,控制器可以控制触摸屏以显示用于包含在预先确定的位置内的主体的当前位置的部分区域的平面视图图像。
此外,控制屏幕可以包括对应于布置在预先确定的位置处的外部设备并且与地图图像重叠的图像对象和外部设备的状态信息的至少一个。
在这里,外部设备的状态信息可以显示在与对应于外部设备的图像对象重叠或者邻近的位置。
在这里,控制器可以基于施加于图像对象的预先确定类型的触摸产生用于控制外部设备的控制命令。
按照一个实施例,当图像对象是对应于电视机的图像对象时,控制器可以经由无线通信单元接收显示在电视机上的图像信息,并且基于施加于图像对象的预先确定类型的触摸经由触摸屏显示图像信息。
按照一个实施例,当控制屏幕被显示在触摸屏上的状态下,预先确定类型的触摸施加于控制屏幕时,控制器可以控制触摸屏以显示主屏幕,并且主屏幕包括链接到控制屏幕的图标。
按照一个实施例,链接到控制屏幕的图标可以包括对应于在预先确定的位置处的多个区域的多个图标。
按照一个实施例,当在主屏幕被显示在触摸屏上的状态下,在外部设备上发生事件时,在多个图标之中控制器可以在与其中对应于外部设备被布置的区域的图标重叠或者邻近的位置处显示用于通知该事件的通知图标。
按照本公开的一个实施例的移动终端的控制方法可以包括经由无线通信单元与安装在预先确定的位置处的外部通信设备执行通信;以及在基于位于预先确定的位置的主体与外部通信设备执行通信之后,当预先确定类型的触摸被施加于触摸屏时,控制触摸屏以显示用于执行与预先确定的位置有关的控制的控制屏幕。
在本说明书中对“一种实施例”、“一个实施例”、“示例性实施例”等的任何引用指的是与该实施例结合描述的特定的特点、结构或者特征被包括在本发明的至少一个实施例中。在本说明书中,在不同的位置中出现上述短语不必全部指相同的实施例。此外,当与任何实施例结合描述特定特点、结构或者特征被时,认为与这些实施例的另一个结合实施上述的特点、结构或者特征是在本领域技术人员的理解范围之内。
虽然已经参考其许多说明性的实施例描述了实施例,单应该明白,很多其它的改进和实施例可以由本领域技术人员设计,其将落在本公开的原理的精神和范围内。尤其是,在本公开、附图和所附权利要求的范围内的主题组合方案的组件部分和/或排列中,各种变化和改进是允许的。除了在组成部分和/或排列中的变化和改进之外,对于本领域技术人员来说替代的使用也将是显而易见的。

Claims (16)

1.一种移动终端,包括:
主体;
无线通信单元,所述无线通信单元被配置为与外部通信设备执行通信,所述外部通信设备与位于预先确定的空间的多个外部设备耦合;
触摸屏,触摸屏被配置为显示主屏幕,并且感测触摸;以及
控制器,所述控制器被配置为控制所述触摸屏显示控制屏幕以控制在预先确定的位置处的所述外部设备中的一个或多个,
其中,当在显示所述主屏幕的同时预先确定类型的触摸施加于所述触摸屏时,显示所述控制屏幕,并且基于经由所述无线通信单元连接的所述外部通信设备,所述移动终端的主体被确定为在所述预先确定的空间处,
其中,所述控制屏幕包括用于包括所述主体的位置的所述预先确定的位置处的第一区域的第一地图图像,以及
所述控制器进一步配置为:
当在显示所述第一地图图像的同时向所述触摸屏施加第一类型的触摸时,显示包括第二地图图像的所述控制屏幕,所述第二地图图像用于包括所述第一区域的较宽区域;
当在显示所述第二地图图像的同时向所述触摸屏施加第二类型的触摸时,显示包括第三地图图像的所述控制屏幕,所述第三地图图像用于与所述第二地图图像相对应的区域的部分区域;
其中,包括在所述控制屏幕中的地图图像包括分别对应于外部设备的图像对象,所述外部设备被布置在与包括在所述控制屏幕中的所述地图图像相对应的区域中,以及
其中,所述控制器进一步被配置为基于施加到所述控制屏幕中包括的所述图像对象的任意一个的触摸输入,来控制布置在与所述控制屏幕中包括的所述地图图像相对应的区域中的外部设备中的任意一个。
2.根据权利要求1所述的移动终端,其中,所述预先确定类型的触摸是在所述触摸屏上施加于至少两个或更多个接触点的多触摸。
3.根据权利要求2所述的移动终端,其中,所述多触摸是用于增加在所述触摸屏上的两个接触点之间的相对距离的捏放触摸。
4.根据权利要求2所述的移动终端,其中,所述多触摸在所述触摸屏上保持预先确定数目的两个或更多个接触点超过预先确定的时间段。
5.根据权利要求1所述的移动终端,其中,当所述无线通信单元以无线方式连接到外部通信设备时,所述控制器确定所述主体位于所述预先确定的位置,并且控制所述触摸屏以显示指示能够进行与所述预先确定的位置相关的控制的通知信息。
6.根据权利要求1所述的移动终端,其中,在所述主体中提供感测单元,所述感测单元感测所述主体相对于地的角度,以及
当由感测单元感测到的角度大于预先确定的角度时,所述控制器控制所述触摸屏以显示第一类型的地图图像,并且当由所述感测单元感测到的角度低于预先确定的角度时,控制所述触摸屏以显示第二类型的地图图像。
7.根据权利要求1的移动终端,其中,所述地图图像是用于所述预先确定的位置的部分区域的三维地图图像,以及
所述三维地图图像是预先存储在所述主体中的三维地图图像,或者从在所述主体中提供的相机实时接收到的图像。
8.根据权利要求7所述的移动终端,其中,所述三维地图图像被显示在所述触摸屏上以对应于在所述预先确定的位置内感测到的所述主体的当前位置或者相对于所述主体的方向中的至少一个。
9.根据权利要求7所述的移动终端,其中,当将预先确定类型的触摸施加于所述三维地图图像时,所述控制器控制所述触摸屏以显示用于在所述预先确定的位置内包含所述主体的当前位置的部分区域的平面视图图像。
10.根据权利要求1所述的移动终端,其中,所述控制屏幕包括至少一个外部设备的状态信息。
11.根据权利要求10所述的移动终端,其中,所述状态信息被显示在与分别对应于外部设备的所述图像对象重叠或者邻近的位置处。
12.根据权利要求10所述的移动终端,其中,当所述图像对象是与电视机相对应的图像对象时,所述控制器经由所述无线通信单元接收正显示在所述电视机上的图像信息,并且基于施加到所述图像对象的预先确定类型的触摸经由所述触摸屏显示所述图像信息。
13.根据权利要求1所述的移动终端,其中,当在所述控制屏幕被显示在所述触摸屏上的状态下,预先确定类型的触摸被施加到所述控制屏幕时,所述控制器控制所述触摸屏以显示所述主屏幕,并且所述主屏幕包括与所述控制屏幕链接的图标。
14.根据权利要求13所述的移动终端,其中,与所述控制屏幕链接的所述图标包括与在所述预先确定的位置处的多个区域相对应的多个图标。
15.根据权利要求14所述的移动终端,其中,当在所述主屏幕被显示在所述触摸屏上的状态下,在规定的外部设备上发生事件时,所述控制器在重叠或者邻近与布置所述规定的外部设备区域的相对应的所述多个图标中的一个的位置处显示用于所述事件的通知图标。
16.一种控制移动终端的方法,所述方法包括:
经由所述移动终端的无线通信单元与安装在预先确定位置处的外部通信设备执行通信;以及
由控制器控制触摸屏以显示用于对位于所述预先确定位置处的一个或多个外部设备执行控制的控制屏幕,
其中,当在与所述外部通信设备执行通信之后预先确定类型的触摸施加于所述触摸屏时,并且基于所述移动终端是否位于所述预先确定的位置,显示所述控制屏幕,
其中,所述控制屏幕包括用于包括所述移动终端的主体的位置的所述预先确定的位置处的第一区域的第一地图图像,以及
包括在所述控制屏幕中的地图图像包括分别对应于外部设备的图像对象,所述外部设备被布置在与包括在所述控制屏幕中的所述地图图像相对应的区域中,
其中,控制触摸屏幕进一步包括:
当在显示所述第一地图图像的同时向所述触摸屏施加第一类型的触摸时,显示包括第二地图图像的所述控制屏幕,所述第二地图图像用于包括所述第一区域的较宽区域;
当在显示所述第二地图图像的同时向所述触摸屏施加第二类型的触摸时,显示包括第三地图图像的所述控制屏幕,所述第三地图图像用于与所述第二地图图像相对应的区域的部分区域。
CN201610848170.4A 2015-09-23 2016-09-23 移动终端及控制其的方法 Expired - Fee Related CN107040642B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0134878 2015-09-23
KR1020150134878A KR20170035678A (ko) 2015-09-23 2015-09-23 이동 단말기 및 이의 제어 방법

Publications (2)

Publication Number Publication Date
CN107040642A CN107040642A (zh) 2017-08-11
CN107040642B true CN107040642B (zh) 2021-02-12

Family

ID=57003332

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610848170.4A Expired - Fee Related CN107040642B (zh) 2015-09-23 2016-09-23 移动终端及控制其的方法

Country Status (5)

Country Link
US (1) US20170083268A1 (zh)
EP (1) EP3151104A1 (zh)
KR (1) KR20170035678A (zh)
CN (1) CN107040642B (zh)
FR (1) FR3041447B1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102130797B1 (ko) * 2013-09-17 2020-07-03 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
USD809562S1 (en) * 2014-12-22 2018-02-06 Adtile Technologies Inc. Display screen with motion-activated graphical user interface
USD806728S1 (en) * 2015-04-21 2018-01-02 Harsco Technologies LLC Display screen with graphical user interface for a boiler
US10517159B2 (en) * 2016-04-15 2019-12-24 Shenzhen Royole Technologies Co., Ltd. Control device
US10110678B2 (en) * 2016-08-19 2018-10-23 Sony Corporation System and method for data communication based on image processing
KR102638911B1 (ko) * 2017-02-24 2024-02-22 삼성전자 주식회사 복수의 IoT 장치들을 제어하기 위한 방법 및 장치
US10721518B2 (en) * 2017-09-22 2020-07-21 Enseo, Inc. Set-top box with interactive features and system and method for use of same
USD918952S1 (en) * 2018-10-19 2021-05-11 Beijing Xiaomi Mobile Software Co., Ltd. Electronic device with graphical user interface
CN113885734B (zh) * 2021-11-01 2022-04-22 浙江方泰显示技术有限公司 一种基于集成式led显示屏的控制方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7649456B2 (en) * 2007-01-26 2010-01-19 Sony Ericsson Mobile Communications Ab User interface for an electronic device used as a home controller
US8467991B2 (en) * 2008-06-20 2013-06-18 Microsoft Corporation Data services based on gesture and location information of device
US20110088068A1 (en) * 2009-10-09 2011-04-14 Sony Ericsson Mobile Communications Ab Live media stream selection on a mobile device
JP5338821B2 (ja) * 2011-01-25 2013-11-13 コニカミノルタ株式会社 画像形成装置、端末装置、画像形成システム、および制御プログラム
KR20130048533A (ko) * 2011-11-02 2013-05-10 엘지전자 주식회사 원격제어장치의 동작 방법
WO2013122576A1 (en) * 2012-02-15 2013-08-22 Thomson Licensing Proximity based self learning remote
US8464181B1 (en) * 2012-07-03 2013-06-11 Google Inc. Floor selection on an interactive digital map
KR101949737B1 (ko) * 2012-08-28 2019-02-19 엘지전자 주식회사 이동 단말기 및 이의 제어 방법, 이를 위한 기록 매체
US9196139B2 (en) * 2012-09-12 2015-11-24 ACCO Brands Corporation Proximity tag for object tracking
EP2898492B1 (en) * 2012-09-21 2019-01-16 Home Control Singapore Pte. Ltd. Handheld information processing device with remote control output mode
US9652115B2 (en) * 2013-02-26 2017-05-16 Google Inc. Vertical floor expansion on an interactive digital map
TWI526878B (zh) * 2013-10-04 2016-03-21 大同股份有限公司 控制電子裝置的方法、手持電子裝置與監控系統
US20150277571A1 (en) * 2014-03-31 2015-10-01 Kobo Incorporated User interface to capture a partial screen display responsive to a user gesture
US20160062617A1 (en) * 2014-09-02 2016-03-03 Google Inc. Map Zooming Based on Semantic Meaning

Also Published As

Publication number Publication date
KR20170035678A (ko) 2017-03-31
US20170083268A1 (en) 2017-03-23
EP3151104A1 (en) 2017-04-05
FR3041447B1 (fr) 2020-11-20
FR3041447A1 (zh) 2017-03-24
CN107040642A (zh) 2017-08-11

Similar Documents

Publication Publication Date Title
CN107040642B (zh) 移动终端及控制其的方法
CN108632444B (zh) 移动终端及其控制方法
US10416944B2 (en) Watch-type mobile terminal and method of operating the same
US10534453B2 (en) Mobile terminal and mobile terminal control method
US11281359B2 (en) Mobile terminal and control method thereof
KR102351500B1 (ko) 이동단말기 및 그 제어방법
US10165658B2 (en) Mobile terminal and control method therefor
US10191455B2 (en) Watch type terminal
US10303328B2 (en) Mobile terminal and method for controlling the same
US9769295B2 (en) Mobile terminal for displaying notifications and method of controlling the same
US20170168667A1 (en) Mobile terminal and method for controlling the same
KR20150098115A (ko) 이동단말기 및 그 제어방법
US10568536B2 (en) Electronic device and controlling method thereof
KR20180044554A (ko) 실내 공간의 채광을 표시하는 이동 단말기 및 그의 제어 방법
US10827424B2 (en) Mobile terminal and method for controlling the same
US10340968B1 (en) Mobile terminal and method for controlling the same
CN108476261B (zh) 移动装置以及控制移动装置的方法
KR20160016397A (ko) 이동 단말기 및 그 제어방법
KR102528671B1 (ko) 이동 단말기
KR102305625B1 (ko) 이동 단말기
KR20160032915A (ko) 이동 단말기
KR102529106B1 (ko) 실내 공간에 필요한 공기 조화기를 표시하는 이동 단말기 및 그의 제어 방법
KR20160024272A (ko) 이동 단말기 및 그 제어 방법
KR102261141B1 (ko) 전자 기기 및 전자 기기의 제어 방법
KR102535705B1 (ko) 이동 단말기 및 그 제어방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210212

Termination date: 20210923