CN103916534B

CN103916534B - 移动终端

Info

Publication number: CN103916534B
Application number: CN201310751053.2A
Authority: CN
Inventors: 金东翼; 黄正焕; 金南荣
Original assignee: LG Electronics Inc
Current assignee: LG Electronics Inc
Priority date: 2012-12-31
Filing date: 2013-12-31
Publication date: 2016-05-04
Anticipated expiration: 2033-12-31
Also published as: KR20140087628A; CN103916534A; EP2750363B1; US20140189518A1; KR102049977B1; EP2750363A1

Abstract

公开了一种移动终端。该移动终端可确定在感测到用户的命令时是否在执行应用以及用户是否观看执行所述应用的画面，并且基于确定结果，可以改变所述特定功能的执行结果的显示形式。

Description

移动终端

技术领域

本发明涉及移动终端，更具体地讲，涉及可基于用户的命令执行特定功能并可根据使用状态和/或用户的识别条件改变所述特定功能的执行结果的显示形式的移动终端。

背景技术

由于诸如膝上型计算机或智能手机的移动终端恰巧具有多样化的功能，移动终端正在变成可执行多个功能（包括照片或视频拍摄、音乐或视频文件回放、游戏以及广播接收）的多媒体层。

为了支持这些功能或增加更多的功能，可考虑开发终端的架构和/或软件部分。近来，随着移动终端或其它终端提供更多的功能，其菜单相应会变得复杂。

发明内容

发明目的

本发明的目的是提供一种移动终端，其在执行与接收到的用户命令对应的功能时，可考虑终端的操作状态或用户的条件来改变所述功能的执行结果的显示形式。

本发明要实现的目的不限于上述目的，对于本领域技术人员而言，从下面对本发明的详细描述，其它目的会变得明显。

实现目的的手段

为了实现上述目的，根据本发明的实施方式，一种移动终端可包括：显示单元；至少一个感测单元，其感测用户的语音和/或手势命令；以及控制器，其执行与由所述感测单元感测到的用户命令对应的特定功能并在所述显示单元上显示所述特定功能的执行结果。

所述控制器可确定在感测到用户命令时是否在执行应用以及用户是否观看执行所述应用的画面，并且基于确定结果，可以改变所述特定功能的执行结果的显示形式。

具体地讲，在感测到用户命令时，在所述应用的执行显示在所述显示单元上的情况下，如果用户观看执行所述应用的画面，则所述控制器可将所述显示单元的画面的一部分指派为显示所述特定功能的执行结果，如果用户未观看执行所述应用的画面，则所述控制器可将所述显示单元的整个画面指派为显示所述特定功能的执行结果。

为了实现上述目的，根据本发明的另一实施方式，一种移动终端可包括：显示单元；麦克风，其感测用户的语音命令；以及控制器，其基于针对用户的语音命令的语音识别来执行与用户的语音命令对应的特定功能，并将所述特定功能的执行结果显示在所述显示单元上。

例如，在感测到用户命令时，在所述应用的执行显示在所述显示单元上的情况下，如果用户观看执行所述应用的画面，则所述控制器可将所述显示单元的画面的一部分指派为显示所述特定功能的执行结果，如果用户未观看执行所述应用的画面，则所述控制器可将所述显示单元的整个画面指派为显示所述特定功能的执行结果。

发明效果

根据本发明的移动终端可考虑终端的操作状态或用户的条件来改变与接收到的用户命令对应的功能的执行结果的显示形式。

附图说明

图1是示出根据本发明的移动终端的框图。

图2是示出驱动根据本发明的移动终端的示例方法的流程图。

图3是示出驱动根据本发明的移动终端的另一示例方法的流程图。

图4至图10示出与用户命令对应的功能的执行结果显示在移动终端上的示例。

图11是示出驱动根据本发明的移动终端的另一示例方法的流程图。

图12和图13示出通过如图11所示的驱动移动终端的方法来改变与用户命令对应的功能的执行结果的显示位置或区域的示例。

图14是示出驱动根据本发明的移动终端的另一示例方法的流程图。

图15示出通过如图14所示的驱动移动终端的方法控制移动终端的画面的显示状态的示例。

图16是示出驱动根据本发明的移动终端的另一示例方法的流程图。

图17示出通过如图16所示的驱动移动终端的方法控制移动终端的画面的显示状态的示例。

图18是示出驱动根据本发明的移动终端的另一示例方法的流程图。

图19示出通过如图18所示的驱动移动终端的方法控制移动终端的画面的显示状态的示例。

具体实施方式

现在将参照附图更充分地描述本发明，附图中示出了本发明的示例性实施方式。然而，本发明可以按照许多不同的形式实施，而不应被解释为限于本文阐述的实施方式；相反，提供这些实施方式是为了使得本公开将彻底和完整，并将向本领域技术人员充分地传达本发明的概念。

以下将参照附图更详细地描述与本发明有关的移动终端。在下面的描述中，仅考虑描述方便而将后缀“模块”和“单元”赋予移动终端的组件，这些后缀没有彼此相区别的含义或功能。

说明书中描述的移动终端可包括蜂窝电话、智能电话、膝上型计算机、数字广播终端、个人数字助理（PDA）、便携式多媒体播放器（PMP）、导航系统等。

图1是根据本发明的实施方式的移动终端100的框图。移动终端100可包括无线电通信单元110、音频/视频（A/V）输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口170、控制器180和电源190。图1所示的组件不是必要部件，包括在移动终端中的组件的数量可变化。

现在将描述移动终端的组件。

无线电通信单元110可包括实现移动终端100与无线电通信系统之间或者移动终端100与移动终端100所在的网络之间的无线电通信的至少一个模块。例如，无线电通信单元110可包括广播接收模块111、移动通信模块112、无线互联网模块113、近距离通信模块114和位置信息模块115。

广播接收模块111通过广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。

广播信道可包括卫星信道和地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器，或者是接收先前创建的广播信号和/或广播相关信息并且将所述广播信号或广播相关信息发送给终端的服务器。广播信号不仅可包括TV广播信号、无线电广播信号和数据广播信号，而且可包括TV广播信号与无线电广播信号的结合形式的信号。

广播相关信息可以是关于广播信道、广播节目或广播服务提供商的信息。广播相关信息甚至可通过移动通信网络来提供。在这种情况下，广播相关信息可通过移动通信模块112来接收。

广播相关信息可以按照各种形式存在。例如，广播相关信息可以按照数字多媒体广播（DMB）的电子节目指南（EPG）的形式或者手持数字视频广播（DVB-H）的电子服务指南（ESG）的形式存在。

广播接收模块111接收使用各种广播系统的广播信号。具体地讲，广播接收模块111可接收使用诸如地面数字多媒体广播（DMB-T）、卫星数字多媒体广播（DMB-S）、仅媒体前向链路（MediaFLO）、DVB-H和地面综合业务数字广播（ISDB-T）系统的数字广播系统的数字广播信号。广播接收模块111可被构造为适用于上述数字广播系统以外的提供广播信号的广播系统。

通过广播接收模块111接收到的广播信号和/或广播相关信息可存储在存储器160中。移动通信模块112在移动通信网络上向基站、外部终端和服务器中的至少一个发送无线电信号/从其接收无线电信号。所述无线电信号可包括语音呼叫信号、视频电话呼叫信号或者根据文本/多媒体消息的发送和接收的各种形式的数据。

无线互联网模块113表示用于无线互联网接入的模块，其可包括在移动终端100中或从外部附接到移动终端100。可使用无线LAN（WLAN）（Wi-Fi）、无线宽带（Wibro）、全球微波接入互操作性（Wimax）、高速下行链路分组接入（HSDPA）等作为无线互联网技术。

近距离通信模块114表示用于近距离通信的模块。可使用蓝牙、射频识别（RFID）、红外数据协会（IrDA）、超宽带（UWB）和ZigBee作为近距离通信技术。

位置信息模块115确认或获得移动终端的位置。全球定位系统（GPS）模块是位置信息模块115的代表性示例。根据当前技术，GPS模块115可计算关于一个点（对象）与至少三个卫星之间的距离的信息以及关于距离信息的测量时间的信息，并对所获得的距离信息应用三角测量法，以在预定时间根据纬度、经度和海拔获得关于该点（对象）的三维位置信息。

此外，还使用利用三个卫星来计算位置和时间信息，并利用另一卫星来校正所计算出的位置和时间信息的方法。另外，GPS模块115实时地连续计算当前位置并利用位置信息计算速度信息。

参照图1，A/V输入单元120用于输入音频信号或视频信号，并且可包括相机121和麦克风122。相机121处理在视频电话模式或拍照模式下通过图像传感器获得的静止图像或运动图像的图像帧。经处理的图像帧可显示在显示模块151上。

由相机121处理的图像帧可存储在存储器160中，或者通过无线电通信单元110发送给外部装置。根据终端的构造，移动终端100可包括至少两个相机。

麦克风122在呼叫模式、录制模式或语音识别模式下接收外部音频信号，并将所接收到的音频信号处理为电音频数据。在呼叫模式下，可将音频数据转换成能够通过移动通信模块112发送给移动通信基站的形式并将其输出。麦克风122可采用各种噪声去除算法以去除在接收到外部音频信号时生成的噪声。

用户输入单元130从用户接收用于控制终端的操作的输入数据。用户输入单元130可包括键区、薄膜开关（domeswitch）、触摸板（静压/电容）、滚轮（jogwheel）、触合式开关（jogswitch）等。

感测单元140感测移动终端100的当前状态，例如移动终端100的打开/闭合状态、移动终端100的位置、用户是否触摸移动终端100、移动终端100的方向以及移动终端100的加速/减速，并生成用于控制移动终端100的操作的感测信号。例如，当移动终端100是滑盖电话时，感测单元140可以感测滑盖电话是打开还是闭合。并且，感测单元140可感测移动终端100的位置的改变、移动终端的移动或利用手势检测传感器141感测用户的手势。此外，感测单元140可感测电源190是否供电以及接口170是否连接到外部装置。感测单元140可包括接近传感器。

输出单元150生成视觉、听觉或触觉输出，并且可包括显示模块151、音频输出模块152、报警模块153和触觉模块154。

显示模块151显示由移动终端100处理的信息。例如，当移动终端处于呼叫模式时，显示模块151显示与电话呼叫有关的UI或图形用户界面（GUI）。当移动终端100处于视频电话模式或拍照模式时，显示模块151显示拍摄或/和接收到的图像、UI或GUI。

显示模块151可包括液晶显示器、薄膜晶体管液晶显示器、有机发光二极管显示器、柔性显示器和三维显示器中的至少一个。

这些显示器中的一些可为透明型或透光型。这可称为透明显示器。透明显示器包括透明液晶显示器。显示模块151的背面结构也可为透光型。根据此结构，用户可透过移动终端100的主体的被显示模块151占据的区域看到位于移动终端100的主体背后的物体。

根据移动终端100的构造，移动终端100可包括至少两个显示模块151。例如，移动终端100可包括按照预定距离布置在单面上的多个显示器或集成的多个显示器。另外，所述多个显示器可布置在不同的侧面上。

在显示模块151以及感测触摸的传感器（以下称为“触摸传感器”）形成分层结构（以下称为“触摸屏”）的情况下，除了输出装置之外，显示模块151还可用作输入装置。例如，触摸传感器可为触摸膜、触摸片和触摸板的形式。

触摸传感器可被构造为使得其将施加于显示模块151的特定部分的压力的变化或在显示模块151的特定部分处产生的电容的变化转换为电输入信号。触摸传感器可被构造为使得其可感测触摸压力以及触摸的位置和区域。

当对触摸传感器施加触摸输入时，与该触摸输入对应的信号被发送至触摸控制器。触摸控制器处理所述信号，并将与经处理的信号对应的数据发送给控制器180。因此，控制器180可检测显示模块151的被触摸的部分。

可利用设置在移动终端的被触摸屏包围的内部区域中或者触摸屏附近的接近传感器来实现触摸传感器。接近传感器在没有机械接触的情况下，利用电磁力或红外线感测靠近预定感测面的物体或者位于接近传感器附近的物体。接近传感器的寿命比接触型传感器长，并且具有广泛应用。

接近传感器包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容接近传感器、磁性接近传感器、红外接近传感器等。

电容触摸屏被构造为使得通过电场根据指点器的接近而发生的变化来检测指点器的接近。在这种情况下，触摸屏（触摸传感器）可被分类为接近传感器。

为了方便说明，在下面的描述中，在指点器未与触摸屏接触的同时使指点器靠近触摸屏从而识别指点器在触摸屏上的位置的动作称为“接近触摸”，使指点器与触摸屏接触的动作称为“接触触摸”。指点器在触摸屏上的接近触摸点表示当指点器对触摸屏进行接近触摸时指点器与触摸屏垂直对应的触摸屏的点。

接近传感器感测接近触摸和接近触摸模式（例如，接近触摸距离、接近触摸方向、接近触摸速度、接近触摸时间、接近触摸位置和接近触摸移动状态）。与感测到的接近触摸动作和接近触摸模式对应的信息可显示在触摸屏上。

音频输出模块152可在呼叫信号接收模式、电话呼叫模式或录制模式、语音识别模式和广播接收模式下输出从无线电通信单元110接收到的或存储在存储器160中的音频数据。音频输出模块152输出与移动终端100中执行的功能有关的音频信号（例如，呼叫信号到来音、消息到来音等）。音频输出模块152可包括接收器、扬声器、蜂鸣器等。

报警模块153输出用于指示移动终端100的事件的发生的信号。移动终端中产生的事件的示例包括接收到呼叫信号、接收到消息、输入键信号、输入触摸等。报警模块153可输出与视频信号或音频信号不同形式的信号，例如，通过振动指示事件的发生的信号。视频信号或音频信号也可通过显示模块151或音频输出模块152输出。

触觉模块154产生用户能够感觉到的各种触觉效果。触觉效果的代表性示例是振动。触觉模块154所产生的振动的强度和模式可以被控制。例如，不同的振动可以被组合并输出，或者可顺序地输出。

除了振动之外，触觉模块154可产生各种触觉效果，包括根据插针排列相对于接触皮肤表面垂直移动的刺激的效果、根据通过注入孔或抽吸孔对空气的注入力或抽吸力的刺激的效果、根据擦过皮肤的刺激的效果、根据与电极接触的刺激的效果、利用静电力的刺激的效果以及根据利用能够吸热或发热的元件再现冷和热的效果。

触觉模块154不仅可通过直接接触传递触觉效果，而且还可使得用户能够通过他的手指或手臂的肌肉觉来感觉到触觉效果。根据移动终端的构造，移动终端100可包括至少两个触觉模块154。

存储器160可存储用于控制器180的操作的程序，并临时存储输入/输出数据（例如，电话簿、消息、静止图像和运动图像）。存储器160可存储关于当触摸输入施加于触摸屏时输出的各种模式的振动和声音的数据。

存储器160可包括闪存、硬盘型存储器、多媒体卡微型存储器、卡型存储器（例如，SD或XD存储器）、随机存取存储器（RAM）、静态RAM（SRAM）、只读存储器（ROM）、电可擦除可编程ROM（EEPROM）、可编程ROM（PROM）、磁存储器、磁盘和光盘中的至少一个。移动终端100可与在互联网上执行存储器160的存储功能的网络存储器关联地操作。

接口170用作通向连接到移动终端100的所有外部装置的路径。接口170从外部装置接收数据或电力，并将所述数据或电力发送给移动终端100的内部组件，或者将移动终端100的数据发送给外部装置。

例如，接口170可包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于连接具有用户标识模块的装置的端口、音频I/O端口、视频I/O端口、耳机端口等。

标识模块是存储用于验证移动终端100的使用权限的信息的芯片，并可包括用户标识模块（UIM）、订户标识模块（SIM）和全球订户标识模块（USIM）。包括标识模块的装置（以下称为标识装置）可以按照智能卡的形式制造。因此，标识装置可通过包括在接口170中的卡槽连接到移动终端100。

控制器180控制移动终端的总体操作。例如，控制器180执行用于语音通信、数据通信和视频电话的控制和处理。控制器180可包括用于播放多媒体的多媒体模块181。多媒体模块181可包括在控制器180中，或者与控制器180分离。

控制器180可执行能够将施加于触摸屏的手写输入或绘画输入识别为字符或图像的模式识别处理。

在控制器180的控制下，电源190接收外部电力和内部电力并提供移动终端的组件的操作所需的电力。

图2是示出驱动根据本发明的移动终端的示例方法的流程图。以下参照必要的附图描述该驱动方法。

通过感测单元感测用户的语音命令和/或手势命令（S100）。例如，可通过麦克风122感测用户的语音命令，可通过相机121感测用户的手势命令。此外，应用于图2所示的驱动移动终端的方法的用户命令不限于用户的语音命令或手势命令。

然后，控制器180确定移动终端100中当前是否正在执行应用，如果存在执行中的应用，则确定用户是否观看正在执行所述执行中的应用的画面（S110）。然后，基于确定结果，控制器180确定与用户命令对应的特定功能的执行结果的显示形式（S120）。

此后，控制器180执行所述特定功能并将执行结果显示在显示单元151上（S130）。这里，与用户命令对应的特定功能可包括执行特定应用、终端根据语音识别的结果对用户询问的回答以及改变终端的操作状态。然而，示例不限于此。

图3是示出驱动根据本发明的移动终端的另一示例方法的流程图。以下参照必要的附图描述该驱动方法。

通过麦克风122感测用户的语音命令（S200）。然后，控制器180确定应用是否在执行中（S210）。如果不存在执行中的应用，则控制器180将显示单元151的整个画面指派为显示与语音命令对应的特定功能的执行结果（S220）。

不存在执行中的应用的示例可包括当对显示单元151的电力供应完全切断时、等待画面状态或画面锁定状态。然而，本发明不限于此。

然而，如果存在当前正在执行中的应用，则控制器180确定该应用的执行图像是否显示在显示单元151上（S230）。如果该应用的执行未显示在显示单元151上，则控制器180将显示单元151的整个画面指派为显示与语音命令对应的特定功能的执行结果（S220）。

应用的执行未显示在显示单元151上的情况包括当应用正作为后台执行时以及当应用正在执行但显示单元151保持关闭时。然而，本发明不限于此。

在应用的执行显示在显示单元151上的情况下，控制器180确定用户是否观看画面（S240）。例如，控制器180可通过分析经由相机121拍摄的图像来确定用户是否观看画面。然而，移动终端100确定用户是否观看画面的方法不限于此。

如果用户没有观看画面，则控制器180将显示单元151的整个画面指派为显示与语音命令对应的特定功能的执行结果（S220），因为尽管所述执行正显示在显示单元151上，但是用户很可能没有关注画面。然而，在用户观看画面的情况下，控制器180将显示单元151的画面的一部分指派为显示与语音命令对应的特定功能的执行结果（S250）。例如，可显示所述特定功能的执行结果的区域与所述画面的一部分交叠。另外，控制器180可将显示单元151的画面的一部分指派给所述执行，而将显示单元151的画面的另一部分指派给显示所述特定功能的执行结果的区域。

以下，参照图4至图10描述显示特定功能的执行结果的区域的各种类型。

图4(a)示出当显示单元151断电时，用户在观看或未观看显示单元151的同时发出询问今天的天气的语音命令的示例。

此外，控制器180可通过分析由相机121拍摄的图像来确定用户是否观看显示单元151。对于此后看到的示例而言是如此。然而，控制器180确定用户是否观看显示单元151的方法不限于此。

然后，控制器180可将显示单元151的整个画面指派给用于所述询问的回答（即，天气信息）的显示区域151-1，而不管用户是否观看显示单元151。

图5(a)示出在等待状态下，用户在观看显示单元151的同时发出询问今天的天气的语音命令的示例。在感测到语音命令时，如图5(b)所示，控制器180可将显示单元151的整个画面指派给所述询问的回答的显示区域151-1。

图6(a)示出在网络浏览应用的执行显示在显示单元151上的情况下，用户在观看显示单元151的同时发出询问今天的天气的语音命令的示例。当感测到语音命令时，控制器180可将显示单元151的画面的一部分指派给用于所述询问的回答的显示区域151-1。更具体地讲，在这种情况下，控制器180可显示用于回答的显示区域151-1，使得该显示区域151-1与正在执行网络浏览应用的画面151-2的一部分交叠。

图7(a)示出在网络浏览应用的执行显示在显示单元151上的情况下，用户在没有观看显示单元151的同时发出询问今天的天气的语音命令的示例。当检测到语音命令时，如图7(b)所示，控制器180可将显示单元151的整个画面指派给用于所述询问的回答的显示区域151-1。

图8(a)示出在网络浏览应用的执行显示在显示单元151上的情况下，用户在观看显示单元151的同时发出询问汇率的语音命令的示例。当感测到语音命令时，如图8(b)所示，控制器180可将显示单元151的画面的一部分指派给用于所述询问的回答的显示区域151-1。更具体地讲，在这种情况下，控制器180可以按照悬浮形式显示用于回答的显示区域151-1，使得显示区域151-1与正在执行网络浏览应用的画面151-2的一部分交叠。

图9(a)示出在网络浏览应用的执行显示在显示单元151上的情况下，用户在观看显示单元151的同时发出执行相机应用的语音命令的示例。当感测到语音命令时，如图9(b)所示，控制器180可将显示单元151的画面的一部分指派给正执行相机应用的画面151-1。更具体地讲，在这种情况下，控制器180可显示正执行相机应用的画面151-1，使得画面151-1与正执行网络浏览应用的画面151-2交叠。

图10示出当要由相机121拍摄的对象被渲染为大于图9所示的对象时，通过使得画面151-1的执行相机应用的区域对应地增大来反映的示例。

图11是示出驱动根据本发明的移动终端的另一示例方法的流程图。以下参照必要的附图描述该驱动方法。

当接收到用户命令时，控制器180在正执行应用的画面中确定信息显示区域和空白区域（S300）。然后，考虑确定结果，控制器180确定与用户命令对应的特定功能的执行结果的显示区域的位置和面积（S310）。

然后，控制器180执行所述特定功能（S320）并根据所确定的位置和面积将所述特定功能的执行结果显示在显示单元151上（S330）。

此外，“考虑确定结果在显示单元151上显示所述特定功能的执行结果的显示区域”可表示在减少对正在执行应用的画面的提供信息的功能的干扰的同时，显示所述特定功能的执行结果。

例如，可确定所述特定功能的执行结果的显示区域的面积和位置以使得其仅显示在正在执行应用的画面的空白区域上。另外，可确定所述特定功能的执行结果的显示区域的面积和位置以使得与执行应用的画面的信息显示区域的交叠最小化。然而，本发明不限于此。

图12和图13示出通过如图11所示的驱动移动终端的方法来改变与用户命令对应的功能的执行结果的显示位置或面积的示例。

参照图12，根据执行中的网络浏览应用的空白区域，显示关于汇率的用户询问的回答的区域151-1的位置从(a)改变为(b)，或者反之亦然。参照图13，根据执行中的网络浏览应用的空白区域，显示关于汇率的用户询问的回答的区域151-1从(a)改变为(b)，或者反之亦然。

图14是示出驱动根据本发明的移动终端的另一示例方法的流程图。以下参照必要的附图描述该驱动方法。

通过上述方法，控制器180显示与用户命令对应的特定功能的执行结果（S400）。然后，接收对特定功能的执行结果的显示区域的触摸（S410）。

然后，控制器180考虑触摸的方向和/或移动距离来改变特定功能的执行结果的显示区域（S420）。例如，当接收到在特定方向上针对显示区域的轻拂时，控制器180可在所述特定方向上将所述显示区域扩展至最大尺寸。又如，当接收到对显示区域的触摸并拖曳时，控制器180可沿着拖曳的方向扩展或缩小所述显示区域。

图15示出通过如图14所示的驱动移动终端的方法来控制移动终端的画面的显示状态的示例。

图15(a)示出在基于用户的语音命令执行相机应用，并且显示单元151的画面151-1显示所述执行的同时，用户对画面151-1执行轻拂的示例。然后，如图15(b)和图15(c)所示，控制器180可在轻拂的方向上将画面151-1扩展至最大尺寸。相比之下，当在图15(c)所示的状态下通过画面151-1接收到对画面151-1的向下轻拂时，控制器180可将画面151-1恢复到图15(a)所示的状态。

图16是示出驱动根据本发明的移动终端100的另一示例方法的流程图。以下参照必要的附图描述该驱动方法。

在画面锁定状态下通过麦克风122感测用户的语音命令（S500）。然后，控制器180确定在感测到语音命令之后的预定时间间隔内用户是否观看画面（S510）。

例如，控制器180可通过分析经由相机121拍摄的图像来确定用户是否观看画面。然而，移动终端100确定用户是否观看画面的方法不限于此。

如果在所述预定时间间隔内用户观看显示单元151的画面，则控制器180确定是否在预定时间间隔内将锁定画面解锁（S520）。如果在预定时间间隔内将画面解锁，则控制器180显示与语音命令对应的特定功能的执行结果（S530）。结果的显示区域可以是显示单元151的整个画面或者显示单元151的画面的一部分。

如果在步骤S520中确定用户没有在预定时间间隔内将画面解锁，则控制器180不显示与语音命令对应的特定功能的执行结果。

然而，在步骤S510中用户在所述预定时间间隔内没有观看显示单元151的画面的情况下，控制器180控制扬声器152输出语音引导消息以将显示单元151的画面解锁（S540）。例如，引导消息可以是“处于画面锁定状态。将画面解锁”。

根据另一实施方式，如果在步骤S520中确定在预定时间间隔内没有将画面解锁，则控制器180可以执行步骤S540。

在输出引导消息之后，控制器180确定在预定时间间隔内用户是否将画面解锁（S550）。如果在所述预定时间间隔期间将画面解锁，则控制器180显示与语音命令对应的特定功能的执行结果（S530）。

然而，在所述预定时间间隔期间用户未将画面解锁的情况下，控制器180不显示与语音命令对应的特定功能的执行结果。如果在输出所述消息之后用户观看画面，但是用户未执行解锁操作，则控制器180可在显示单元151的画面上显示与语音命令对应的特定功能的执行结果。

图17示出通过如图16所示的驱动移动终端100的方法来控制移动终端的画面的显示状态的示例。

图17(a)示出在画面锁定状态下，当用户未观看显示单元151的画面时，用户发出询问今天的天气的语音命令。

图17(b)示出当在发出语音命令之后的预定时间间隔内用户观看显示单元的画面并且将锁定画面解锁时，语音命令的结果显示在显示单元151的画面上。

图17(c)示出当在发出语音命令之后的预定时间间隔内用户未观看显示单元的画面时，通过扬声器152输出引导消息“处于画面锁定状态”和“将画面解锁”。

图18是示出驱动根据本发明的移动终端100的另一示例方法的流程图。以下参照必要的附图描述该驱动方法。

在画面锁定状态下通过麦克风122感测用户的语音命令（S600）。这里，移动终端100的状态可以是应用执行状态、对显示单元151的电力供应切断的状态、等待画面状态或画面锁定状态。然而，本发明不限于此。

然后，控制器180确定在感测到语音命令之后的预定时间间隔内用户是否观看画面（S610）。

如果在所述预定时间间隔内用户观看显示单元151的画面，则控制器180显示与语音命令对应的特定功能的执行结果（S620）。

然而，在所述预定时间间隔期间用户未观看画面的情况下，控制器180通过扬声器152以语音的形式输出与语音命令对应的特定功能的执行结果（S630）。

图19示出通过如图18所示的驱动移动终端的方法来控制移动终端100的画面的显示状态的示例。

图19(a)示出在等待画面状态下，当用户未观看显示单元151的画面时，用户发出询问今天的天气的语音命令。

图19(b)示出当在发出语音命令之后的预定时间间隔内用户未观看显示单元的画面时，控制器180通过扬声器152输出与语音命令对应的特定功能的执行结果“很好”。

如上所述，根据本发明的移动终端的各个驱动方法可以按照程序来实现，所述程序可由各种计算装置执行并可记录在计算机可读介质中。计算机可读介质可包括（单独的或组合的）程序命令、数据文件和/或数据架构。记录在介质中的程序可针对本发明特殊地设计或配置，或者可以是计算机软件领域的普通技术人员已知的。

例如，计算机可读记录介质可包括：磁介质，例如硬盘、软盘和磁带；光学记录介质，例如CD-ROM和DVD；磁光介质，例如光磁软盘、ROM、RAM、闪存；以及专门配置为存储和执行程序命令的其它硬件装置。例如，所述程序可包括由编译器创建的机器语言代码以及可由计算机利用解释器执行的高级语言代码。硬件装置可配置于执行根据本发明的操作的一个或更多个软件模块中，反之亦然。

尽管描述了本发明的实施方式，但是本领域普通技术人员将理解，在不脱离权利要求限定的本发明的范围的情况下，可对其进行各种形式和细节上的改变。

关键元件的描述

100：移动终端

110：无线电通信单元

116：输入单元

120：A/V输入单元

121：相机122：麦克风

130：用户输入单元140：感测单元

150：输出单元151：显示单元

152：声音输出单元160：存储器

170：接口单元180：控制器

190：电源

Claims

1.一种移动终端，该移动终端包括：

显示单元；

相机；

至少一个感测单元，其用于感测用户的语音和/或手势命令；以及

控制器，其被配置为：

执行与由所述感测单元感测到的用户的命令对应的特定功能，

在所述显示单元上显示所述特定功能的执行结果，并且

通过分析经由所述相机拍摄的图像来确定用户是否正在观看所述显示单元，

其中，所述控制器还被配置为确定在感测到所述用户的命令时是否正在执行应用，并且基于该确定结果来改变所述特定功能的执行结果的显示形式使得：

如果所述用户正在观看执行所述应用的画面，则将所述显示单元的画面的一部分指派为用于显示所述特定功能的执行结果，其中，仅在正在执行所述应用的画面的空白区域上显示所述特定功能的执行结果，并且

如果所述用户未正在观看执行所述应用的画面，则将所述显示单元的整个画面指派为用于显示所述特定功能的执行结果。

2.根据权利要求1所述的移动终端，其中，所述控制器还被配置为在所述显示单元的画面的一部分被指派为显示所述特定功能的执行结果的情况下，显示所述特定功能的执行结果，并且使得所述执行结果与执行所述应用的画面交叠。

3.根据权利要求1所述的移动终端，其中，所述控制器还被配置为在所述显示单元的画面的一部分被指派为显示所述特定功能的执行结果的情况下，将所述显示单元的画面分成执行所述应用的画面的区域和用于显示所述特定功能的执行结果的区域。

4.根据权利要求2或3所述的移动终端，其中，所述控制器还被配置为考虑执行所述应用的画面上的空白区域和信息显示区域，来改变用于显示所述特定功能的执行结果的区域的位置。

5.根据权利要求2或3所述的移动终端，其中，所述控制器还被配置为考虑执行所述应用的画面上的空白区域和信息显示区域，来改变用于显示所述特定功能的执行结果的面积。

6.根据权利要求1所述的移动终端，其中，所述控制器还被配置为在接收到用户的命令时不存在执行中的应用的情况下，将所述显示单元的整个画面指派为用于显示所述特定功能的执行结果。

7.根据权利要求1所述的移动终端，其中，所述控制器还被配置为在接收到用户的命令时存在执行中的应用，但执行所述应用的画面未显示在所述显示单元上的情况下，将所述显示单元的整个画面指派为显示所述特定功能的执行结果。

8.根据权利要求1所述的移动终端，其中，所述控制器还被配置为基于用户的语音命令的语音识别结果来执行所述特定功能。

9.一种移动终端，该移动终端包括：

显示单元；

相机；

麦克风，其感测用户的语音命令；以及

控制器，其被配置为：

基于针对用户的语音命令的语音识别来执行与用户的语音命令对应的特定功能，并将所述特定功能的执行结果显示在所述显示单元上，并且

10.根据权利要求9所述的移动终端，其中，所述控制器还被配置为：在所述显示单元的画面的一部分被指派为显示所述特定功能的执行结果的情况下，显示所述特定功能的执行结果，并且使得所述执行结果与执行所述应用的画面交叠，或者将所述显示单元的画面分成执行所述应用的画面和显示所述特定功能的执行结果的区域。

11.根据权利要求10所述的移动终端，其中，所述控制器还被配置为考虑执行所述应用的画面上的空白区域和信息显示区域，来改变用于显示所述特定功能的执行结果的位置和/或区域。

12.根据权利要求9所述的移动终端，其中，所述控制器还被配置为在接收到用户的命令时不存在执行中的应用的情况下，或者在接收到用户的命令时存在执行中的应用，但执行所述应用的画面未显示在所述显示单元上的情况下，将所述显示单元的整个画面指派为用于显示所述特定功能的执行结果。