CN102668391A - 用于控制移动装置的外部输出的方法和系统 - Google Patents

用于控制移动装置的外部输出的方法和系统 Download PDF

Info

Publication number
CN102668391A
CN102668391A CN2010800577201A CN201080057720A CN102668391A CN 102668391 A CN102668391 A CN 102668391A CN 2010800577201 A CN2010800577201 A CN 2010800577201A CN 201080057720 A CN201080057720 A CN 201080057720A CN 102668391 A CN102668391 A CN 102668391A
Authority
CN
China
Prior art keywords
mutual
mobile device
keyword
input signal
microphone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800577201A
Other languages
English (en)
Inventor
金熙云
张时学
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN102668391A publication Critical patent/CN102668391A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3173—Constructional details thereof wherein the projection device is specially adapted for enhanced portability
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification
    • G10L17/26—Recognition of special voice characteristics, e.g. for use in lie detectors; Recognition of animal voices
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/02—Constructional features of telephone sets
    • H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026—Details of the structure or mounting of specific components
    • H04M1/0272—Details of the structure or mounting of specific components for a projector or beamer module assembly
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/74—Details of telephonic subscriber devices with voice recognition means

Abstract

提供了一种根据经由麦克风接收的控制交互来控制移动装置的外部输出功能的方法和系统。该方法包括：当移动装置进入外部输出模式时，根据预设选项信息来激活麦克风；在外部输出模式下执行外部输出操作；在外部输出模式下基于声音信息来检测交互；根据交互来控制外部输出。

Description

用于控制移动装置的外部输出的方法和系统
技术领域
本发明涉及电子系统。更具体地讲，本发明涉及一种可根据基于麦克风的输入交互来控制从被安装作为移动装置的部件的投影器模块输出的屏幕数据的方法和系统。
背景技术
随着数字技术的发展，已经发布了能够在移动的同时执行通信并处理用户的信息的各种移动装置。移动装置的示例是移动通信装置、个人数字助理(PDA)、电子记事簿等。这些移动装置在它们的显示单元上输出屏幕数据。通常，由于移动装置被制造得较小，因此作为移动装置的部件而被提供的显示单元相对小。
用户经常期望经由他的/她的移动装置来向其他人显示信息。在这种情况下，由于显示单元很小，用户难于与其他人一起观看信息。为了解决该问题，近年来已经开发了配备有电视(TV)输出功能的移动装置，TV输出功能能够将信息从移动装置输出到外部显示系统，从而许多人可观看该信息。然而，为此，移动装置需要附加的大型显示系统以及经由附加连接器与该显示系统的连接。
为了解决需要附加的大型显示系统的问题，已经开发具有投射功能的移动装置，该投射功能能够将大图像投射到例如外部屏幕上。这里，可用投影器单元来实现该投射功能。在这种情况下，移动装置可经由投影器单元将屏幕数据输出在外部屏幕(诸如，墙、地板等)上。具有投射功能的移动装置可将出现在显示单元上的屏幕数据投射到外部屏幕上。
可通过与具有投影器的移动装置分离的无线控制单元来控制移动装置，或可通过应用于被安装作为移动装置的部件的控制单元(诸如，按钮、触摸屏等)的机械力来控制移动装置。
为了控制具有投影器单元的移动装置，当用户将机械触摸施加到移动装置的本体时，移动装置可能会晃动。当按照用户设置的方向和角度将屏幕数据输出到外部屏幕的移动装置晃动时，屏幕数据也晃动并且改变其在外部屏幕上的位置。例如，当在运动装置正在将展示或电影投射在外部屏幕上的同时发生晃动时，用户必须操作移动装置以针对晃动进行校正。这可能会对展示造成干扰或者对电影的欣赏造成干扰。具有投射功能的传统移动装置需要用户重新调整移动装置的位置或者重新设置投射功能的选项以针对晃动进行校正。
此外，当移动装置使用无线控制单元时，用户还必须携带该无线控制单元。
发明内容
技术问题
本发明的一方面在于至少解决上述问题和/或缺点并且提供至少下述优点。因此，本发明的一方面在于提供这样一种能够控制具有投影器模块的移动装置的方法和系统，该移动装置可控制输出到外部屏幕的屏幕数据的输出以及用于控制屏幕数据的输入。
本发明的另一方面在于提供一种能够简单且有效地控制从被安装作为移动装置的部件的投影器模块输出的屏幕数据而无需机械地触摸移动装置的方法和系统。
本发明的另一方面在于提供一种能够根据基于麦克风的输入交互来控制从被安装作为移动装置的部件的投影器模块输出的屏幕数据的方法和系统。
问题的解决方案
根据本发明的一方面，提供一种用于控制移动装置的外部输出的方法。该方法包括：当移动装置进入外部输出模式时，根据预设选项信息激活麦克风；在外部输出模式下执行外部输出操作；在外部输出模式下基于声音信息来检测交互；根据交互来控制外部输出。
根据本发明的另一方面，提供了一种移动装置。该移动装置包括：投影器模块，用于将屏幕数据从移动装置输出到外部屏幕；存储单元，用于存储与移动装置的外部输出功能相关的关键字信息以及选项信息；麦克风，用于在外部输出模式下接收基于声音信息的交互；控制器，用于在外部输出模式下，检测经由麦克风的基于声音信息的交互。控制器还控制与选项信息和关键字信息对应的外部输出的功能。基于投影器模块来操作外部输出模式。
从以下结合附图公开本发明示例性实施例的的详细描述，本发明的其他方面、优点和突出特点对于本领域技术人员将变得清楚。
有益效果
如上所述，根据本发明示例性实施例的方法和系统可允许用户经由被安装作为移动装置的部件的麦克风来简单地控制用于正在输出的屏幕数据的功能，而不用考虑输出屏幕数据的移动装置的环境。根据本发明示例性实施例的方法和系统可允许用户无需接触移动装置，而是经由被安装作为移动装置的组件的麦克风或外部装置来控制外部输出功能，从而屏幕数据可被投射到外部屏幕上，而屏幕数据不会晃动或改变屏幕数据的位置。
此外，当移动装置执行外部输出功能时，根据本发明示例性实施例的方法和系统可基于内部麦克风或外部麦克风来简单地创建控制交互，而不用考虑用户的环境(例如，黑暗的地方或明亮的地方)，并且控制用于输出到外部屏幕的屏幕数据的各种功能，其中，各种功能包括频道切换、屏幕切换、页切换、音量的增加/减小、快进(FF)、后退(REW)、暂停、回放、图像切换、幻灯片显示等。
附图说明
通过下面结合附图进行的描述，本发明特定示例性实施例的上述和其他方面、特点和优点将会变得更加清楚，其中：
图1示出根据本发明示例性实施例的具有全触摸屏的直板型移动装置；
图2示出根据本发明示例性实施例的具有显示单元和输入单元的直板型移动装置；
图3示出根据本发明示例性实施例的移动装置的示意框图；
图4示出描述根据本发明示例性实施例的用于基于语音交互来控制移动装置的外部输出的方法的示图；
图5示出描述根据本发明示例性实施例的用于基于吹气交互来控制移动装置的外部输出的方法的示图；
图6示出描述根据本发明示例性实施例的通过识别用户的交互来控制移动装置的外部输出的方法的流程图；
图7示出描述根据本发明示例性实施例的用于基于麦克风的交互来控制移动装置的外部输出的方法的流程图。
在整个附图中，应该注意相同的标号用于描述相同或类似的元件、特征和结构。
具体实施方式
提供了参照附图进行的以下描述来帮助对由权利要求及其等同物限定的示例性实施例的全面理解。描述包括各种特定细节以帮助所述理解，但是这些特定细节将被理解为仅是示例性的。因此，本领域的普通技术人员将认识到：在不脱离本发明的范围和精神的情况下，可对这里描述的实施例进行各种改变和修改。此外，为了清楚和简明，可省略对公知功能和构造的描述。
在以下描述和权利要求中使用的术语和词语不限于书面含义，而是仅由发明人使用来实现对本发明的清楚和一致的理解。因此，对本领域技术人员清楚的是，仅为了示出的目的而不是限制由权利要求及其等同物限定的本发明的目的来提供本发明的示例性实施例的以下描述。
将理解，单数形式包括复数形式，除非上下文清楚地相反指示。因此，例如，对“组件表面”的参考包括对一个或这样的表面的参考。
在解释本发明示例性实施例之前，将限定使用在以下的本说明书中的术语。在本说明书和权利要求中描述的术语或词语不应由一般含义或词典含义限制，而是应被分析作为这样的含义和概念，发明人通过该含义和概念来定义并描述本发明以符合本发明的构思。因此，本领域的普通技术人员将理解在说明书中公开且在附图中示出的本发明示例性实施例仅是优选实施例。因此，可存在对这些实施例的各种修改、改变和等同，以补充或替换在提交本申请时的本发明示例性实施例。
本发明示例性实施例涉及一种用于控制具有投影器单元的移动装置的外部输出的方法和系统。具体地讲，本发明示例性实施例涉及这样一种方法和系统：当移动装置通过投影器单元将屏幕数据输出到外部屏幕时，能够根据由麦克风接收的交互来控制移动装置的外部输出功能。
该方法和系统能够在移动装置输出屏幕数据时经由麦克风来控制交互，而不用考虑用户的环境(例如，黑暗或明亮的地方)，并且可随后根据接收的控制交互来控制移动装置的外部输出。该方法和系统可经由麦克风识别基于音频信息的交互(诸如，用户的语音交互或吹气交互)。该方法和系统可根据由麦克风接收的交互来控制正输出到外部屏幕的屏幕数据，而不用考虑用户的环境。
本发明示例性实施例的移动装置包括投影器模块、麦克风和控制器。在移动装置的投影器模块正在将屏幕数据输出到外部屏幕上的同时，麦克风用于识别用户的控制交互。控制器分析从麦克风传送的交互并执行与之相应的操作。在本发明示例性实施例中，可用被安装作为移动装置的部件的内部麦克风来实现麦克风，或者可用被安装作为移动装置的部件的外部麦克风(诸如，蓝牙耳机等)来实现麦克风。
接下来的描述示出了根据本发明示例性实施例的具有投影器模块的移动装置的配置。应该理解，本发明不限于示例性实施例。应该注意，可存在对这里描述的示例性实施例的许多修改。
图1和图2示出根据本发明示例性实施例的移动装置的示例性实现。更具体地讲，图1示出根据本发明示例性实施例的具有全触摸屏的直板型移动装置，图2示出具有显示单元和输入单元的直板型移动装置。
参照图1和图2，移动装置包括用于根据相应功能的执行来显示屏幕数据的显示单元100、用于创建用户的输入信号的输入单元200、用于放大屏幕数据并将屏幕数据投射到外部屏幕上的投影器模块300、用于控制投影器模块300的焦点的焦点控制单元350、用于根据相应功能的执行输出各种类型的音频信号的扬声器SPK、用于接收外部音频信号(诸如，用户的语音等)的麦克风MIC。
在本发明示例性实施例中，在移动装置正在经由投影器模块300将屏幕数据输出在外部屏幕上的同时，麦克风从用户接收用户的语音或吹气。可用被安装作为移动装置的部件的内部麦克风来实现该麦克风，或者可用安装作为外部装置的部件的外部麦克风来实现该麦克风。
尽管在本发明示例性实施例中，如图1和图2所示，麦克风被安装作为移动装置的部件，但是应该理解，其安装位置不限于这些示例性实施例。为了根据移动装置的类型适当地控制移动装置的外部输出，麦克风还可被安装在移动装置的其他位置。
此外，尽管图1和图2中显示的移动装置被实现为分别包括一个麦克风，但是应该理解本发明不限于这些示例性实施例。例如，移动装置可被实现为不具有内部麦克风。在这种情况下，经由被安装作为移动装置的部件的外部麦克风来操作移动装置。在本发明另一示例性实施例中，移动装置可被实现为具有多个麦克风。例如，如图1和图2所示，移动装置包括至少两个或更多个麦克风，这被称为多麦克风。如果移动装置被实现为具有两个麦克风，则这两个麦克风可位于相对于前侧的顶部和底部，或者位于相对于前侧的右侧和左侧。同样，如果移动装置被实现为具有四个麦克风，则这四个麦克风可位于顶部、底部、右侧和左侧。
在本发明另一示例性实施例中，可用具有与麦克风MIC相同功能的语音识别模块来替换该麦克风MIC，或者可由该语音识别模块来补充麦克风MIC。
如上所述，移动装置可使用相同或不同类型的麦克风来响应用户的交互。例如，如果移动装置被实现为具有位于顶部和底部的两个麦克风，则可以以这种方式来设置移动装置：用户的交互可彼此不同地被响应，从而移动装置可输出与不同的交互对应的数据。也就是，尽管顶部麦克风和底部麦克风接收并识别相同的语音，但是它们能够对彼此不同的用户交互做出响应，并且分别控制与不同的交互对应的功能。
在本发明示例性实施例中，尽管这里基于如图1和图2所示的直板型来描述具有投影器模块的移动装置，但是将理解本发明类似地应用于所有类型的移动装置(例如，折叠型、滑动型、拖鞋型(flip-flop type)等)。移动装置可被应用于所有的信息通信装置、多媒体装置和它们的应用，只要它们可根据麦克风的操作来控制外部输出功能。例如，移动装置可被应用于所有类型的移动通信装置(所述移动通信装置根据与各种通信系统相应的通信协议操作)，还可被应用相对小尺寸的装置，例如，便携式多媒体播放器(PMP)、数字广播播放器、个人数字助理(PDA)、音频播放器(例如，运动图形专家组(MPEG)-1或MPEG-2音频层3(MP3)播放器)、移动游戏机、智能电话等。移动装置还可被应用与相对中等尺寸以及大尺寸的装置，例如，电视机(TV)、大屏显示器(LFD)、数字标牌(DS)、媒体杆(media pole)、个人计算机、膝上型计算机等。
以下描述参照图3来解释具有投影器模块的移动装置的元件。图3显示根据本发明示例性实施例的具有投影器模块移动装置，该移动装置包括麦克风(即，内部麦克风)。在本发明另一示例性实施例中，移动装置可被实现为不具有内部麦克风。在这种情况下，移动装置可经由具有麦克风的外部装置(即，外部麦克风，例如，蓝牙耳机、有线或无线外部麦克风)来使用其麦克风功能。当经由具有麦克风的外部装置操作本发明的移动装置时，本发明的移动装置可还包括用于从外部装置接收音频信号的接口。
图3示出根据本发明示例性实施例的移动装置的示意框图。
参照图3，移动装置包括显示单元100、输入单元200、投影器模块300、音频处理单元400、存储单元500和控制器600。
输入单元200将与数字和文本信息对应的输入信号、用于设置移动装置的功能的信号以及与该功能相关的控制信号输出到控制器600。输入单元200创建与移动装置的整个操作相关的命令信号。输入单元200包括用于创建信号的功能键和输入键。功能键包括被设置用于执行特定功能(诸如，投射功能)的方向键、侧键、快捷键等。此外，输入单元200可还包括用于调整如图1和图2所示的投影器模块300的焦点的焦点调整单元。
可由触摸板、触摸屏、一般键排列(诸如，3x4或4x3键布置)的键盘、QWERTY键盘、圆顶键(dome key)之一或其组合来实现输入单元200。具体地讲，输入单元200创建用于执行投射功能的输入信号并将该输入信号输出到控制器600。用于执行投射功能的输入信号可以是通过操作输入单元200创建的键信号。可选择地，如果移动装置配备有触摸屏，则可通过触摸触摸屏来创建用于执行投射功能的输入信号。
音频处理单元400包括用于再现来自移动装置的音频信号的扬声器SPK以及用于接收音频信号(例如，用户的语音)的麦克风MIC。音频处理单元400连接到扬声器SPK和麦克风MIC。音频处理单元400将由麦克风MIC接收的音频信号转换为数字数据并且随后将该数字数据输出到控制器600。音频处理单元400还从控制器600接收音频信号，并经由扬声器SPK来输出该音频信号。音频处理单元400还可根据用户的选择来输出在移动装置中创建的各种类型的音频信号。音频信号包括当视频或音频数据被再现时被创建的信号、用于根据投射功能的执行产生警报声音的信号等。
在本发明的示例性实施例中，当移动装置操作在外部输出模式下时，音频处理单元400经由麦克风MIC来接收用于控制外部输出功能的控制交互。音频处理单元400从控制交互创建数据并将该数据传送给控制器600。也就是，音频处理单元400在外部输出模式下经由麦克风MIC接收基于语音信息的交互。基于语音信息的交互包括基于用户的语音的语音交互以及基于用户的吹气的吹气交互。
当移动装置操作在外部输出模式下时，麦克风MIC可在控制器600的控制下操作在总是收听模式或正常收听模式。总是收听模式是指当移动装置操作在外部输出模式下时，移动装置开启麦克风MIC，从而麦克风MIC可接收用户的语音或吹气的模式。正常收听模式是指当移动装置操作在外部输出模式下时，根据用户的选择麦克风MIC从关闭到开启或与此相反的模式。
当在移动装置中执行相应功能时，显示单元100输出各种类型的屏幕。例如，显示单元100可显示移动装置的引导屏幕、空闲屏幕、菜单屏幕、列表屏幕、回放屏幕、应用执行屏幕等。显示单元100显示与移动装置的状态和操作相关的屏幕数据。显示单元100还能够显示从控制器600输出的信号和颜色信息。显示单元100可被实现为液晶显示器(LCD)、等离子显示面板(PDP)、发光二极管(LED)、有机LED(OLED)、有源矩阵OLED(AMOLED)等。如果显示单元100被实现为触摸屏，则触摸屏还可用作输入装置。在这种情况下，根据本发明的移动装置可被配置为不具有输入单元200。
在本发明示例性实施例中，当移动装置操作在外部输出模式下时，即当移动装置执行投射功能时，显示单元100显示从控制器600输出的屏幕数据，或者显示基于用于控制外部输出功能的图形用户界面(GUI)的虚拟项目。当移动装置执行投射功能时，显示单元100可根据控制器600的控制来显示与输出到外部屏幕的屏幕数据相同或不同的屏幕数据。假设显示在显示单元100上的屏幕数据被称为“内部屏幕数据”而显示在外部屏幕上的屏幕数据被称为“外部屏幕数据”。例如，显示单元100可根据控制器600的控制将用作用于控制外部输出功能的虚拟项目的GUI显示在与内部屏幕数据对应的图像上。
存储单元500存储在移动装置中创建或使用的数据。数据是指由移动装置创建或从外部系统(例如，其他外部移动装置、个人计算机等)接收的所有数据。数据的示例是视频数据、音频数据、广播数据、照片数据、消息数据、文本数据、图像数据等。存储单元600可存储用于执行移动装置中的相应功能的应用。应用的示例是执行移动装置中的投射功能。当激活投射功能时，存储单元500可存储用于控制投射功能的虚拟项目。存储单元500还能够存储用于控制投影器模块300当前正在输出到外部屏幕的屏幕数据的功能的软件。
存储单元500存储用于移动装置的外部输出功能的选项信息。选项信息包括接收模式信息、关键字信息等。当移动装置操作在外部输出模式下时，接收模式信息用于操作麦克风MIC。关键字用于识别用于控制外部输出的控制交互。
接收模式信息是指用于设置总是收听模式和正常收听模式的信息。
关键字信息是指关于用于识别用户的正常语音以及用于控制外部输出的语音的关键字的信息。关键字信息包括魔术关键字(magic keyword)和命令关键字。魔术关键字用于在移动装置操作在外部输出模式下时激活用于控制外部输出的交互接收模式。命令关键字用于在根据魔术关键字激活了交互接收模式时识别经由麦克风MIC接收的用户的语音或吹气。以下表1作为关键字信息的示例被显示出。
表1
Figure BDA00001779738200101
在表1中，T表示预设参考时间，S表示预设参考强度值。
如表1中所述，关键字信息被划分为魔术关键字和命令关键字。魔术关键字是指用于激活交互接收模式的命令。在交互接收模式下，当移动装置操作在外部输出模式下时，移动装置接收用于控制经由投影器模块300输出到外部屏幕的屏幕数据的语音或吹气交互。也就是，当移动装置操作在外部输出模式下并且麦克风也操作在总是收听模式下时，移动装置可经由麦克风MIC接收用户的正常语音、当应用执行语音数据或音频数据创建的音频信号、以及噪声。用户的正常语音是指当用户的语音不包含控制命令时的用户的语音。在本发明示例性实施例中，移动装置在通过魔术关键字激活交互接收模式之前，忽略输入到麦克风MIC的音频信号。也就是，移动装置不将这种音频信号处理为用于控制外部输出的交互。然而，移动装置继续确定是否经由麦克风MIC接收到与预设魔术关键字(例如，表1中所述的“魔术”)相应的音频信号。
命令关键字是指用于基于当根据魔术关键字激活交互接收模式时输入的音频信号控制外部输出功能的命令。用作命令关键字的命令被分为如表1所述的语音命令组和吹气命令组。应该理解，命令关键字中的一个命令可被设置为根据麦克风MIC的操作模式来执行各种类型的功能。
如表1中所述，语音命令可用的命令用于执行以下功能：“播放”、“暂停”、“下一个”、“下一个”、“前一个”、“快进”、“回退”、“音量增加”、“音量减小”、“放大”、“缩小”、“开启”、“关闭”等。当移动装置被制造时，作为默认值的语音命令和与其相应的功能可被设置为在移动装置中执行。可选择地，还可根据用户的选择在移动装置中设置语音命令。
吹气命令可用的命令可基于预设参考值如表1所示被分类。
当移动装置采用一个麦克风时，吹气命令可基于参考值(即，接收吹气的时间的预设长度T(被称为“参考时间T”)以及接收吹气的预设参考强度值S(被称为“参考强度值S”))中的至少一个来设置它们的功能。在这种情况下，接收吹气的时间的长度TB(被称为“吹气接收时间TB”)被如下设置。例如，这里TB小于T，或TB等于或大于T。同样，用于接收吹气的强度值SB(被称为“吹气接收强度值SB”)被如下设置。例如，这里SB小于S，或者SB等于或大于S。可选择地，吹气命令还可基于“参考时间T”和“参考强度值S”的组合来设置它们的功能。也就是，命令可被如下设置。这里，“TB小于T并且SB小于S”、“TB小于T并且SB等于或大于S”、“TB等于或大于T并且SB小于S”、“TB等于或大于T并且SB等于或大于S”。当移动装置被制造时，基于参考时间T和参考强度值S中的至少一个，吹气命令和与其相应的功能可被设置为默认值在移动装置中执行。可选择地，也可根据用户的选择在移动装置中设置吹气命令。
尽管表1显示了当使用一个麦克风来管理语音命令的示例，但是应该理解，也可使用两个麦克风来设置这些语音命令。此外，尽管表1描述了使用一个或两个麦克风的示例，但是应该理解本发明不限于这些示例性实施例。例如，移动装置也可被实现为具有两个或更多麦克风。在这种情况下，可通过内部麦克风和外部麦克风的组合来实现麦克风。
应该理解，表1中描述的关键字信息、命令和与该命令相应的功能可作为默认值提供给移动装置，并且可根据用户的设置编辑(诸如，修改、删除和添加)默认值。
存储单元500将显示信息添加到选项信息并存储该显示信息。根据应用的执行，显示信息设置用于控制输出到外部屏幕的屏幕数据的功能的虚拟项目的显示模式。当根据魔术关键字激活交互接收模式时，显示信息被用于将可在相应应用正在运行的同时执行的由用户设置的命令中的至少一个显示在外部屏幕上显示的屏幕数据(被称为外部屏幕数据)上，或将所述命令中的至少一个显示在显示单元100上显示的屏幕数据(被称为内部屏幕数据)上。所述命令是指可执行命令信息并且可以以弹出窗口的格式被显示在内部屏幕数据和/或外部屏幕数据上。此外，存储单元500还可将说明根据特定命令控制并执行相应功能的执行信息的显示模式添加到显示信息，并且还可添加用于显示可执行命令信息的显示模式的显示信息，并且存储所述显示信息。
存储单元500包括临时地存储在移动装置被执行时产生的数据的至少一个或更多缓冲器。例如，存储单元500缓冲经由投影器模块300输出到外部屏幕的屏幕数据。此外，当移动装置操作在外部输出模式下时，存储单元500还缓冲经由麦克风MIC接收的音频信号。
还可用所有类型的可安装在移动装置内部或外部的记录介质(例如，智能卡)来实现存储单元500。存储单元500可包括随机存取存储器(RAM)、只读存储器(ROM)或闪存、或其组合。存储单元500可包括一个或两个集成存储器(例如，多芯片封装(MCP)存储器等)。
投影器模块300可作为移动装置的模块被内部或外部安装。投影器模块300经由透镜将由控制器600提供的屏幕数据输出到外部屏幕。投影器模块300可将由控制器600处理的屏幕数据没有失真地投射到外部屏幕。
控制器600控制移动装置的操作，并且还控制在移动装置的元件之间流动的信号。元件的示例是输入单元200、音频处理单元400、显示单元100、存储单元500、投影器模块300等。
控制器600控制经由投影器模块300的外部输出。控制器600将经由麦克风MIC接收的音频信号处理为用于控制移动装置的功能的交互。控制器600根据接收的交互控制外部输出功能。也就是，控制器600可根据经由麦克风MIC接收的交互来控制外部输出功能。当移动装置进入外部输出模式时，控制器600基于包含在选项信息中的接收模式信息来控制麦克风。当移动装置操作在外部输出模式下时，控制器600分析经由麦克风接收的音频信号。当分析的音频信号对应于预设关键字信息时，控制器600创建与关键字信息相应的交互并根据该交互来控制外部输出功能。
当移动装置执行投射功能时，控制器600经由显示单元100输出屏幕数据(该屏幕数据被称为内部屏幕数据)，并且另外经由投影器模块300输出屏幕数据(该屏幕数据被称为外部屏幕数据)。具体地讲，当投影器模块300将特定应用的屏幕数据输出在外部屏幕上时，控制器600可关闭显示单元100或者可不将内部屏幕数据显示在显示单元100上。可选择地，控制器600可在显示单元100和外部屏幕上显示相同的屏幕数据。在这种情况下，内部屏幕数据与外部屏幕数据相同。此外，控制器600还可将不同的屏幕数据显示在显示单元100和外部屏幕上。在这种情况下，内部屏幕数据与外部屏幕数据不同。例如，作为由移动装置提供的用户界面(UI)的内部屏幕数据可被显示在整个屏幕上。可以以这样的方式来显示外部屏幕数据：根据应用被再现/执行的相应屏幕数据被放大并且随后被输出到外部屏幕。
如上所述，控制器600可控制在外部输出模式下的运动装置的功能。为此，控制器600还包括输入信号提取器610、语音到文本(STT)转换器630、比较器650和交互处理器670。
输入信号提取器610从作为输入到麦克风并从音频处理单元400传送的交互提取输入信号。输入信号可以是与语音或吹气相应的音频信号。输入信号提取器610识别输入信号与基于语音的交互相应还是与基于吹气的交互相应，并输出该识别的结果。
STT转换器630执行将由输入信号提取器610提取的音频信号转换为文本。为此，STT转换器630包括用于将音频信号转换为文本的STT转换单元以及用于将音频信号转换为声压信号的声压转换单元。当由输入信号提取器610提取的音频信号对应于基于语音的交互时，STT转换器630经由STT转换单元将音频信号转换为文本信号。同样，当由输入信号提取器610提取的音频信号对应于基于吹气的交互时，STT转换器630经由声压转换单元将音频信号转换为声压信号。STT转换器630将转换的文本信号和转换的声压信号传送给比较器650。
比较器650将从STT转换器630传送的文本信号的文本与在表1中描述的预设关键字信息中的语音命令进行比较。同样，比较器650将从STT转换器630传送的声压信号与在表1中描述的预设关键字信息中的吹气命令进行比较。比较器650将比较结果传送给交互处理器670。比较器650可将在激活交互接收模式之前接收的文本信号或声压信号与关键字信息中的魔术关键字进行比较。同样，比较器可将在激活交互接收模式之后接收的文本信号或声压信号与关键字信息中的命令关键字(即，语音命令或关键字命令)进行比较。比较器650将根据文本信号或声压信号是否与关键字信息中的相应关键字是否匹配的比较的结果信息输出到交互处理器670。
交互处理器670根据比较器650的比较结果来处理经由麦克风接收的基于输入信号的交互。当文本信号或声压信号与关键字信息不匹配时，交互处理器670忽略经由麦克风接收的输入信号，并且跳过由于输入信号的交互的创建。相反，当文本信号或声压信号与关键字信息匹配时，交互处理器670创建用于执行匹配命令所映射的功能的交互，并且根据该交互控制外部输出功能。
如上所述，当移动装置经由投影器模块300执行外部输出功能时，控制器600从音频处理单元400接收输入到麦克风的交互，并经由输入信号提取器610根据该交互来提取输入信号。输入信号可以是与语音或吹气对应的音频信号。控制器600识别该交互是基于语音的交互还是基于吹气的交互。当移动装置操作在外部输出模式下时，控制器600根据基于麦克风的交互来接收用户的输入信号并确定交互接收模式被激活还是被禁止。当交互接收模式被禁止时，控制器600将输入信号与魔术关键字进行比较。当控制器600确定输入信号与魔术关键字匹配时，控制器600激活交互接收模式并等待用于控制外部输出的交互的接收。相反，当激活交互接收模式时，控制器600将输入信号与命令关键字进行比较。当控制器600确定输入信号与命令关键字匹配时，控制器600基于相应命令控制外部输出。
当控制器600确定该交互是语音交互时，STT转换器630将由输入信号提取器610提取的音频信号转换为文本信号，并创建文本。这可由STT转换功能来实现。控制器600控制比较器650将创建的文本与存储在存储单元500中的关键字信息进行比较。控制器600将在激活交互接收模式之前接收的交互与关键字信息中的魔术关键字进行比较。相反，控制器600将在激活交互接收模式之后接收的交互与关键字信息中的命令关键字进行比较。
控制器600根据比较器650的比较结果来处理相应交互。也就是，当文本与关键字信息不匹配时，交互处理器670忽略该输入信号并跳过该交互的创建。相反，当文本与关键字信息匹配时，交互处理器670根据与关键字信息匹配的语音命令来创建控制交互，并根据创建的控制交互来控制外部输出功能。
同样，当控制器600确定该交互是吹气交互时，STT转换器630将由输入信号提取器610提取的音频信号转换为声压信号。这可由音频信号-声压信号转换功能来实现。控制器600控制比较器650将声压信号与存储在存储单元500中的关键字信息进行比较。控制器600将在激活交互接收模式之前接收的交互与在关键字信息中的魔术关键字进行比较。相反，控制器600将在激活交互接收模式之后接收的交互与在关键字信息中的命令关键字进行比较。
控制器600根据比较器650的比较结果来处理相应交互。也就是，当声压信号与关键字信息不匹配时，交互处理器670忽略输入信号并跳过该交互的创建。相反，当声压信号与关键字信息匹配时，交互处理器670根据与关键字信息匹配的吹气命令来创建控制交互，并根据创建的控制交互来控制外部输出功能。
当控制器600根据上述过程来控制交互接收模式将被激活还是被禁止时，控制器600可基于选项信息中的显示信息来将可执行命令信息显示在内部屏幕数据和外部屏幕数据中的至少一个上。此外，当控制器600根据在交互接收模式下显示可执行命令信息之后接收的交互来控制外部输出功能时，控制器600还能够基于显示信息来显示说明与内部屏幕数据和外部屏幕数据中的至少一个相应的功能被执行的执行信息。
控制器600根据麦克风MIC的操作模式来控制外部输出。也就是，当移动装置采用单个麦克风MIC时，控制器600将输入到单个麦克风MIC的音频信号处理为如表1中描述的交互，并基于该交互来控制外部输出功能。当移动装置采用多个麦克风时，控制器600将输入到相应的多个麦克风的音频信号处理为如表1中描述的交互，并基于该交互来控制外部输出功能。
例如，控制器600可对根据输入到第一麦克风的音频信号的交互与根据输入到第二麦克风的音频信号的交互进行区分，并且随后将它们处理为如表1中描述的交互。当用户将吹气输入到第一麦克风的吹气接收时间TB小于参考时间T时，控制器600可通过参照表1根据吹气交互来控制暂停功能。同样，当用户将吹气输入到第二麦克风的吹气接收时间TB小于参考时间T时，控制器600可通过参照表1根据吹气交互来控制回放功能。这样，尽管用户将相同的输入信号应用到移动装置，但是移动装置可根据哪些麦克风接收输入信号来执行不同的功能。
稍后将参照附图对控制器600的操作进行详细描述。控制器600可根据投影器模块300的操作来控制与外部输出功能相关的整个操作。应该理解，控制器600的控制操作还可用具有算法的软件来实现。
在本发明的示例性实施例中，尽管为了方便的目的图1和图3示意性地显示了移动装置的配置，但是应该理解，本发明不限于这些示例性实施例。
控制器600可包括用于允许移动装置提供移动通信服务的基带模块。在这种情况下，移动装置可还包括用于与移动通信系统建立通信信道并允许移动装置与该移动通信系统通信的RF通信模块。尽管未在图1至图3中显示，移动装置可还包括用于获取关于移动装置的位置信息的位置信息接收器(诸如，全球定位系统(GPS)模块)、用于捕获静止图像或运动图像的相机模块、用于支持视频呼叫服务的相机模块、用于支持蓝牙通信的蓝牙通信模块、用于以移动装置的有线模式或无线模式发送和接收数据的接口单元、用于支持经由互联网的互联网功能的互联网通信模块、用于接收和再现数字广播的数字广播模块等。在另一实施例中，将理解，根据多个目的，可通过从图1至图3中显示的配置中省略特定元件或用其他元件替换该元件来实现移动装置。
前面的描述解释了根据本发明示例性实施例的移动装置的配置。以下描述参照附图解释具有投射功能的移动装置的操作以及控制基于投影器模块300的外部输出功能的方法。然而应该理解，本发明不限于下述示例性实施例。将注意，可存在与示例性实施例的许多改变。
图4示出描述根据本发明示例性实施例的用于基于语音交互来控制移动装置的外部输出的方法的示图。
参照图4，视图401显示了移动装置经由投影器模块300将屏幕数据输出到外部屏幕900的状态。当用户操作移动装置以执行应用时，移动装置经由投影器模块300将屏幕数据输出到外部屏幕900上。外部屏幕900是指投影器模块900将屏幕数据投射到的屏幕。外部屏幕900的示例是被安装到外部系统的部件(例如，白色屏幕等)、墙、地板等。将理解，外部屏幕900可以是任何类型的投影器模块300可将屏幕数据投射到并显示屏幕数据的对象。屏幕数据可以是通过回放应用(例如，运动图像回放应用、数字广播回放应用等)再现的动态屏幕数据。屏幕数据还可以是由阅读器应用(例如，文本阅读器应用、图像浏览器应用等)显示的静态屏幕数据。
如视图401所示，在屏幕数据正显示在外部屏幕900上的同时，用户可创建交互来控制屏幕数据。例如，如视图401和403所示，当用户将屏幕数据输出在外部屏幕900上时，用户可将他的/她的语音输入到移动装置的内部麦克风或被安装作为外部装置的部件的外部麦克风(诸如，蓝牙耳机等)。视图401和403显示了用户输入他的/她的与关键字(例如，表1中描述的“魔术”)对应的语音以激活交互接收模式的示例。在本发明示例性实施例中，用于激活交互接收模式的关键字可被设置为与条件“TB<T并且S≤SB”对应的吹气关键字。在这种情况下，用户可通过将吹气输入到麦克风从而满足条件“TB<T并且S≤SB”，来激活交互接收模式。
控制器600经由麦克风接收与用户的语音对应的输入信号并识别该输入信号对应于语音交互还是吹气交互。视图401和403显示了输入信号是语音交互的示例。控制器600经由STT转换将语音交互的输入信号转换为文本，并将该文本与关键字信息中的魔术关键字进行比较。
当控制器600确定该文本与魔术关键字匹配时，控制器600激活交互接收模式并且随后输出如视图403所示的可执行命令信息800。可执行命令信息800是指关于可在当前输出上执行的命令的信息。当控制器600激活交互接收模式时，控制器600参照预设选项信息(即，显示信息)将可执行命令信息800输出在内部屏幕数据和外部屏幕数据中的至少一个上。应该理解，根据用户的设置可不显示可执行命令信息800。
其后，用户可参照如视图403所示的输出的可执行命令信息800来创建用于控制外部输出功能的交互。例如，用户可将他的/她的语音输入到内部麦克风或外部麦克风。视图403显示了用户将他的/她的与用于控制外部输出功能的关键字(例如，音量增加)对应的语音输入到麦克风的示例。
控制器600经由麦克风来接收与用户的语音相应的输入信号，并识别该输入信号与语音交互对应还是与吹气呼叫对应。视图403显示了输入信号是语音交互的示例。控制器600经由STT转换将语音交互的输入信号转换为文本，并将该文本与关键字信息中的命令关键字(即，语音关键字)进行比较。
当控制器600确定该文本与命令关键字的特定关键字匹配时，控制器600如视图405所示控制与关键字命令中匹配的命令(诸如，音量增加)对应的功能。例如，在屏幕数据正被输出的同时，控制器600可基于识别的命令来增加/减小音频音量(诸如，根据命令的音量增加)。控制器600还可根据相应识别的命令来控制表1中描述的各种功能。
当控制器600基于命令控制功能时，控制器600可如视图405所示输出说明控制功能正在当前外部输出屏幕上执行的执行信息850。当控制器600控制执行信息850的输出时，控制器600可参照预设选项信息(即，显示信息)来将执行信息850输出在内部屏幕数据和外部屏幕数据中的至少一个上。应该理解，可根据用户设置不显示执行信息850。在预设时间段内或者在功能控制操作期间，执行信息850可作为图标或文本被显示在内部屏幕数据和外部屏幕数据中的至少一个上。也就是，执行信息可被显示在内部屏幕数据或外部屏幕数据上，直到预设时间段过去，随后可从内部屏幕数据或外部屏幕数据移除该执行信息。此外，在相应功能被释放之前，执行信息可被显示在内部屏幕数据或外部屏幕数据上，并且随后可从内部屏幕数据或外部屏幕数据移除该执行信息。
在如视图405所示控制用于外部输出的特定功能之后，控制器600可继续控制另一功能。用户可通过如视图403所示输入与魔术关键字对应的他的/她的语音来重新调用可执行命令信息800，或者可通过如视图405所示输入与命令关键字对应的他的/她的语音(即，语音交互或吹气交互)来直接控制另一功能。因此，控制器600可将当如视图401所示已经激活交互接收模式时接收的输入信号与魔术关键字以及命令关键字进行比较。其后，控制器600可根据匹配的关键字来执行相应功能。
相反，当如视图405所示已经控制用于外部输出的相应功能时，用户可继续观看相应屏幕数据。当控制器600在预设时间段内没有经由麦克风接收到新的输入信号时，控制器600可将交互接收模式从激活状态切换为禁止状态。
图5示出描述根据本发明示例性实施例的用于基于吹气交互来控制移动装置的外部输出的方法的示图。
参照图5，视图501显示了移动装置经由投影器模块300将屏幕数据输出到外部屏幕900的状态。当用户操作移动装置以执行应用时，移动装置经由投影器模块300将屏幕数据输出到外部屏幕900上。屏幕数据可以是由回放应用再现的动态屏幕数据或由浏览器应用显示的静态屏幕数据。
在如视图501所示屏幕数据正显示在外部屏幕900上的同时，用户可创建交互以控制屏幕数据。例如，当移动装置如视图501和503所示将屏幕数据输出到外部屏幕900上时，用户可将他的/她的语音输入到移动装置的内部麦克风或被安装作为外部装置的模块的外部麦克风。视图501和503显示用户输入他的/她的与用于激活交互接收模式的关键字(例如，表1中描述的“魔术”)对应的语音的示例。在本发明示例性实施例中，用于激活交互接收模式的关键字可被设置为与条件“TB<T并且S≤SB”对应的吹气关键字。在这种情况下，用户可通过将满足条件“TB<T并且S≤SB”的吹气输入到麦克风来激活交互接收模式。
控制器600经由麦克风来接收与用户的语音对应的输入信号，并且识别该输入信号对应于语音交互还是对应于吹气交互。视图501和503显示了输入信号是语音交互的示例。控制器600经由STT转换将语音交互的输入信号转换为文本，并将该文本与关键字信息中的魔术关键字进行比较。
当控制器600确定该文本与魔术关键字匹配时，控制器600激活交互接收模式。尽管未在图5中显示，但是控制器600可如图4的视图403所示在激活的交互接收模式下将可执行命令信息800输出在内部屏幕数据和外部屏幕数据中的至少一个上。
在与魔术关键字对应的交互被创建并且交互接收模式被激活之后，用户可如视图503所示创建用于控制外部输出功能的另一交互。例如，用户可将他的/她的语音输入到移动装置的内部麦克风或移动装置的外部麦克风。视图503显示了用户将与用于控制外部输出功能的关键字对应的吹气(例如，T≤TB并且S≤SB)输入到麦克风。
控制器600经由麦克风接收与用户的吹气对应的输入信号并且识别该输入信号与语音交互对应还是与吹气交互对应。视图503显示了输入信号是吹气交互的示例。控制器600经由声压转换将吹气交互的输入信号转换为声压信号并将该声压信号与关键字信息中的命令关键字(即，吹气关键字)进行比较。
当控制器600确定声压信号与命令关键字的特定关键字匹配时，控制器600如视图505所示控制与匹配的命令(例如，切换到前一页)对应的功能。例如，控制器600可基于识别的命令来控制用于正被输出的屏幕数据的页切换(例如，根据命令移动到前一页)。控制器600也可根据相应识别的命令来控制表1中描述的各种功能。
此外，尽管未在图5中显示，但是当控制器600基于命令控制功能时，控制器600可如图4的视图405所示将执行信息850输出在内部屏幕数据和外部屏幕数据中的至少一个上。
在如视图505所示的控制用于外部输出的特定功能之后，控制器600可继续控制另一功能。用户可通过输入他的/她的与魔术关键字对应的语音来调用可执行命令信息800，或者可通过输入他的/她的与命令关键字对应的语音(即，语音交互或吹气交互)来直接控制另一功能。因此，控制器600可将当已经激活交互接收模式时接收的输入信号与魔术关键字和命令关键字两者进行比较。其后，控制器600可根据匹配的关键字来执行相应功能。
相反，当如视图505所示已经控制用于外部输出的相应功能时，用户可继续观看相应屏幕数据。当控制器600在预设时间段内没有经由麦克风接收到新的输入信号时，控制器600可将交互接收模式从激活状态切换到禁止状态。
同时，图5显示了移动装置根据基于经由内部麦克风输入的吹气交互的命令关键字控制外部输出功能的示例。在本发明示例性实施例中，可以以这种方式来设置移动装置：吹气交互可仅执行一个特定功能。也就是，根据表1中描述的吹气交互设置命令关键字被省略，所有类型的吹气交互可被设置为直接执行一个特定功能。
尽管未在图5中显示，可经由至少两个或更多麦克风来操作移动装置。例如，当移动装置包括两个麦克风(诸如第一麦克风和第二麦克风)时，第一麦克风和第二麦克风可相对于移动装置的前面被安装在左侧和右侧，如图1所示。在这种情况下，针对吹气交互，移动装置可被设置为根据由麦克风输入的命令关键字来执行一个功能或至少一个功能。
移动装置可省略根据吹气交互来设置命令关键字的处理。然而，移动装置针对如表1中描述的所有类型的吹气交互将不同的功能分别设置到第一麦克风和第二麦克风。例如，第一麦克风可被设置为移动到前一页，第二麦克风可被设置为移动到下一页。在这种情况下，当经由第一麦克风创建吹气交互时，控制器600控制设置到第一麦克风的移动到前一页的功能。同样，当经由第二麦克风创建吹气交互时，控制器600控制设置到第二麦克风的移动到下一页的功能。
接下来，如表1中描述的按照命令关键的各种类型的功能可分别分配给第一麦克风和第二麦克风。因此，当经由第一麦克风创建吹气交互时，控制器600针对第一麦克风识别与吹气交互匹配的命令关键字的命令，并且随后执行相应功能。同样，当经由第二麦克风创建吹气交互时，控制器600针对第二麦克风识别与吹气交互匹配的命令关键字的命令，并且随后执行相应的功能。
图6示出描述根据本发明示例性实施例的通过识别用户的交互来控制移动装置的外部输出的方法的流程图。
参照图6，用户可经由移动装置的输入机构(例如，输入单元200、显示单元100、麦克风等)来激活移动装置的投射功能。在这种情况下，在步骤601，控制器600通过根据用户的请求操作投射器模块300并将用于应用的屏幕数据投射到外部屏幕900上来开始外部输出模式。在操作投影器模块300之前，移动装置可能正在将由用户请求的用于应用的特定屏幕数据显示在显示单元100上。
其后，在步骤603，控制器600激活麦克风。在本发明示例性实施例中，当控制器600操作投影器模块300时，控制器600可自动地激活麦克风。可选择地，控制器600可在用户创建用于操作麦克风的输入信号时手动地激活麦克风。也就是，控制器600可根据预设选项信息中的接收模式信息在总是收听模式或正常收听模式下操作麦克风。
接下来，在步骤605，控制器600在外部输出期间检测输入到麦克风的用户的交互。也就是，用户可将他的/她的用于控制外部输出的语音或吹气输入到移动装置的麦克风。应该理解，用户还可将他的/她的语音或吹气输入到外部装置的麦克风。控制器600可经由麦克风接收输入信号(诸如，用户的语音或吹气等)。在这种情况下，控制器600识别根据输入信号的交互被创建。
在步骤607，控制器600根据输入信号来分析该交互。在步骤609，控制器600提取由麦克风接收的信号，并且基于提取的信号来确定输入信号是否对应于语音交互。
当在步骤609控制器600确定输入信号对应于语音交互时，在步骤611，控制器600基于预设关键字信息根据语音交互来控制外部输出功能。这已经在上面参照图4进行了描述。以下将参照图7进一步对用于在交互分析之后控制外部输出的方法进行详细描述。
相反，当在步骤609控制器600确定输入信号不对应于语音交互时，在步骤613，控制器600还确定该输入信号是否对应于吹气交互。当在步骤613控制器600确定输入信号对应于吹气交互时，在步骤615，控制器600基于预设关键字信息根据吹气交互来控制外部输出功能。这已经在上面参照图5进行了描述。以下将参照图7进一步对用于在交互分析之后控制外部输出的方法进行详细描述。
相反，当在步骤613控制器600确定输入信号与吹气交互不对应时，在步骤619，控制器600忽略相应交互的输入信号。例如，当移动装置根据特定运动图像的再现输出屏幕时，经由扬声器输出音频数据，因此，从扬声器输出的音频数据可被输入到移动装置的麦克风。在这种情况下，控制器600可忽略从扬声器输出并且随后重新输入到麦克风的输入信号，并且可仅接收用户的语音或吹气。这可通过干涉功能(barge-in function)被实现。
图7示出描述根据本发明示例性实施例的用于根据基于麦克风的交互来控制移动装置的外部输出的方法的流程图。
参照图7，在步骤701，当移动装置操作在外部输出模式下时，控制器600检测经由麦克风的基于输入信号的交互。在步骤703，控制器600分析该交互并识别该交互的类型。例如，控制器600可确定该交互是语音交互还是吹气交互。由于以上参照图3至图6描述了交互的分析和确定处理，因此以下不重复其详细描述。
在确定交互的类型之后，在步骤705，控制器600对与交互的类型对应的输入信号执行转换。例如，当交互的类型是语音交互时，控制器600经由STT转换模式将输入信号转换为文本信号。同样，当交互的类型是吹气交互时，控制器600经由声压转换模式将输入信号转换为声压信号。由于以上参照图3至图6描述了这些转换处理，因此以下不重复其详细描述。
在完成对输入信号的转换处理之后，在步骤707，控制器600确定交互接收模式被激活还是禁止。也就是，控制器600确定在从麦克风传送交互之前，是否通过创建与用户的魔术关键字对应的交互激活了交互接收模式。
当在步骤707控制器600确定交互接收模式禁止时，在步骤709控制器600将转换的文本信号或声压信号(以下称为“转换的信号”)与关键字信息进行比较。具体地讲，控制器600可将转换的信号与关键字信息的魔术关键字进行比较。在步骤711，控制器600确定转换的信号与关键字信息的魔术关键字是否匹配。
当在步骤711控制器600确定转换的信号与关键字信息的魔术关键字不匹配时，在步骤713控制器600执行相应功能。例如，控制器600忽略输入到麦克风的输入信号。此外，控制器600将说明用户请求的交互与预设关键字信息不匹配的引导信息显示在内部屏幕数据和外部屏幕数据中的至少一个上，并且还可经由扬声器输出警报声音。
相反，当在步骤711控制器600确定转换的信号与关键字信息的魔术关键字匹配时，在步骤715，控制器600激活交互接收模式。如参照图4的视图403的部分所述，控制器600可根据预设显示信息将可执行命令信息800输出在内部屏幕数据和外部屏幕数据的至少一个上。在步骤715激活交互接收模式之后，控制器600返回步骤701，在步骤701控制器600等待新的交互。当控制器600检测到新的交互时，控制器600执行如上所述的处理。
同时，当在步骤707控制器600确定交互接收模式被激活时，在步骤721，控制器600将转换的信号与关键字信息进行比较。具体地讲，控制器600可将转换的信号与关键字信息的命令关键字进行比较。在步骤723，控制器600确定转换的信号与关键字信息的命令关键字是否匹配。
当在步骤723控制器600确定转换的信号与关键字信息的命令关键字不匹配时，在步骤725控制器600执行相应功能。例如，控制器600忽略输入到麦克风的输入信号。此外，控制器600将说明用户请求的交互与预设关键字信息不匹配的引导信息显示在内部屏幕数据和外部屏幕数据的至少一个上，并且还经由扬声器输出警报声音。
相反，当在步骤723控制器600确定转换的信号与命令关键字匹配时，在步骤727控制器600根据相应命令关键字来控制外部输出功能。当控制器600搜索与转换的信号匹配的命令关键字时，控制器600提取分配给该命令关键字的功能。其后，控制器600根据提取的功能来创建控制交互并且控制外部输出功能。如参照图4的视图405的部分所述，控制器600可根据预设显示信息将执行信息850输出在内部屏幕数据和外部屏幕数据中的至少一个上。
根据本发明示例性实施例的上述方法可被实现在硬件中或实现为可存储在记录介质(诸如，致密盘(CD)ROM、RAM、软盘、硬盘或磁光盘)中或通过网络下载的软件或计算机代码，从而可使用通用计算机或专用处理器在这种软件中实施这里描述的方法，或者可在可编程或专用硬件(诸如，特定应用集成电路(ASIC)或现场可编程门阵列(FPGA))中实施这里描述的方法。如在本领域中将理解，计算机、处理器或可编程硬件包括存储器部件(诸如，RAM、ROM、闪存等)。当由计算机访问并执行软件或计算机代码时，存储器部件可存储或接收软件或计算机代码，处理器或硬件执行这里描述的处理方法。此外，将认识到，当通用计算机访问用于执行这里显示的处理的代码时，代码的执行将通用计算机变换为用于执行这里显示的处理的专用计算机。
尽管已经参照其特定示例性实施例显示和描述了本发明，但是本领域的技术人员应该理解，在不脱离由权利要求及其等同物限定的本发明的精神和范围的情况下，可以对其进行形式和细节上的各种改变。

Claims (15)

1.一种用于控制移动装置的外部输出的方法，该方法包括：
当移动装置进入外部输出模式时，根据预设选项信息来激活麦克风；
在外部输出模式下执行外部输出操作；
在外部输出模式下基于声音信息来检测交互；
根据交互来控制外部输出。
2.如权利要求1所述的方法，其中，检测交互的步骤包括：
提取输入到麦克风的输入信号；
基于提取的输入信号来识别交互的类型；
在与识别的交互的类型对应的转换模式下对输入信号执行转换；
基于转换的输入信号来创建控制交互。
3.如权利要求2所述的方法，其中，控制外部输出的步骤包括：
确定交互接收模式是被激活还是被禁止；
当在交互接收模式被禁止的状态下，转换的输入信号与关键字信息匹配时，激活交互接收模式；
当在交互接收模式被激活的状态下，转换的输入信号与关键字信息匹配时，创建与关键字信息对应的控制交互。
4.如权利要求3所述的方法，其中，控制外部输出的步骤还包括：
当交互的类型是语音交互时，从关键字信息中搜索与转换的输入信号匹配的语音命令关键字；
当交互的类型是吹气交互时，从关键字信息中搜索与转换的输入信号匹配的吹气命令关键字。
5.如权利要求3所述的方法，其中，控制外部输出的步骤包括：
在激活的交互接收模式下，基于输入到麦克风的新的输入信号来识别交互的类型；
在与识别的交互的类型对应的转换模式下对所述新的输入信号执行转换；
将新转换的输入信号与命令关键字进行比较；
基于对应于与新转换的输入信号匹配的命令关键字的控制交互，控制外部输出。
6.如权利要求5所述的方法，还包括：
将可执行命令信息以及执行信息显示在移动装置上显示的内部屏幕数据以及外部屏幕上显示的外部屏幕数据中的至少一个上，
其中，当交互接收模式被激活时执行所述可执行命令信息，所述执行信息说明当根据控制交互控制外部输出时功能被执行。
7.如权利要求1所述的方法，还包括：
当在外部输出模式下根据交互来控制外部屏幕数据时，开启或关闭移动装置的显示单元；
当显示单元被开启时，将与外部屏幕数据相同或不同的内部屏幕数据输出在显示单元上。
8.一种移动装置，包括：
投影器模块，用于将屏幕数据从移动装置输出到外部屏幕上；
存储单元，用于存储与移动装置的外部输出功能相关的关键字信息以及选项信息；
麦克风，用于在外部输出模式下接收基于声音信息的交互；
控制器，用于在外部输出模式下，检测经由麦克风的基于声音信息的交互，并且用于控制与选项信息和关键字信息对应的外部输出的功能，其中，基于投影器模块来操作外部输出模式。
9.如权利要求8所述的移动装置，其中：
基于声音的交互包括输入到麦克风的用户的语音交互以及用户的吹气交互中的一个；
关键字信息包括用于激活交互接收模式的魔术关键字以及用于在语音交互和吹气交互之间进行识别的命令关键字。
10.如权利要求9所述的移动装置，其中，控制器：
在外部输出模式下基于麦克风检测交互；
确定交互接收模式是否被激活；
当交互接收模式被禁止时，根据与交互对应的魔术关键字来激活交互接收模式；
当交互接收模式被激活时，搜索与交互对应的命令关键字；
基于搜索的命令关键字来控制用于外部输出的功能。
11.如权利要求10所述的移动装置，其中，控制器包括：
输入信号提取器，用于提取与输入到麦克风的交互对应的输入信号；
转换器，用于在与交互的类型对应的转换模式下转换输入信号；
比较器，用于将转换的输入信号与关键字信息进行比较，并且基于所述比较来创建结果信息；
交互处理器，用于基于与输入信号匹配的关键字信息来创建控制交互，并且根据控制交互来控制外部输出功能。
12.如权利要求11所述的移动装置，其中，转换器包括：
语音到文本STT转换单元，用于将输入信号转换为文本；
声压转换单元，用于将输入信号转换为声压信号。
13.如权利要求11所述的移动装置，其中，比较器：
将在交互接收模式被激活之前输入的输入信号与关键字信息中的魔术关键字进行比较；
将在交互接收模式被激活之后输入的输入信号与关键字信息中的命令关键字进行比较。
14.如权利要求10所述的移动装置，其中，控制器将关于可被执行的命令的信息以及说明功能被执行的信息输出到显示单元上显示的内部屏幕数据和外部屏幕上显示的外部屏幕数据中的至少一个上。
15.如权利要求10所述的移动装置，其中，控制器：
当在外部输出模式下根据交互控制外部屏幕数据时，开启或关闭移动装置的显示单元；
当开启显示单元时，将与外部屏幕数据相同或不同的内部屏幕数据输出在显示单元上。
CN2010800577201A 2009-12-18 2010-12-17 用于控制移动装置的外部输出的方法和系统 Pending CN102668391A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020090127136A KR101605347B1 (ko) 2009-12-18 2009-12-18 휴대단말의 외부 출력 제어 방법 및 장치
KR10-2009-0127136 2009-12-18
PCT/KR2010/009083 WO2011074917A2 (en) 2009-12-18 2010-12-17 Method and system for controlling external output of a mobile device

Publications (1)

Publication Number Publication Date
CN102668391A true CN102668391A (zh) 2012-09-12

Family

ID=44152342

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800577201A Pending CN102668391A (zh) 2009-12-18 2010-12-17 用于控制移动装置的外部输出的方法和系统

Country Status (5)

Country Link
US (2) US8942984B2 (zh)
EP (1) EP2514105B1 (zh)
KR (1) KR101605347B1 (zh)
CN (1) CN102668391A (zh)
WO (1) WO2011074917A2 (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014059822A1 (zh) * 2012-10-17 2014-04-24 腾讯科技（深圳）有限公司 移动终端图像处理方法及移动终端
CN103869971A (zh) * 2012-12-10 2014-06-18 三星电子株式会社 用于使用语音识别提供情境感知服务的方法和用户装置
CN103945250A (zh) * 2013-01-17 2014-07-23 三星电子株式会社 图像处理设备、其控制方法、以及图像处理系统
CN104063155A (zh) * 2013-03-20 2014-09-24 腾讯科技（深圳）有限公司 内容分享方法、装置及电子设备
CN104715757A (zh) * 2013-12-13 2015-06-17 华为技术有限公司 一种终端声控操作方法及装置
CN104882141A (zh) * 2015-03-03 2015-09-02 盐城工学院 一种基于时延神经网络和隐马尔可夫模型的串口语音控制投影系统
CN105160695A (zh) * 2015-06-30 2015-12-16 广东欧珀移动通信有限公司 一种照片处理方法及移动终端
CN105261360A (zh) * 2015-09-23 2016-01-20 努比亚技术有限公司 翻页装置及方法
CN106325616A (zh) * 2015-07-01 2017-01-11 Lg电子株式会社 移动终端及其控制方法
CN106465006A (zh) * 2014-06-30 2017-02-22 三星电子株式会社 麦克风的操作方法和支持该方法的电子设备
CN107005739A (zh) * 2014-12-05 2017-08-01 微软技术许可有限责任公司 用于基于语音的设备的外部视觉交互
CN109994111A (zh) * 2019-02-26 2019-07-09 维沃移动通信有限公司 一种交互方法、装置及移动终端
CN108766427B (zh) * 2018-05-31 2020-10-16 北京小米移动软件有限公司 语音控制方法及装置

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8175639B2 (en) * 2007-11-26 2012-05-08 Nasrin Chaparian Amirmokri NanoPC mobile personal computing and communication device
KR101605347B1 (ko) * 2009-12-18 2016-03-22 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치
US20130066633A1 (en) * 2011-09-09 2013-03-14 Verisign, Inc. Providing Audio-Activated Resource Access for User Devices
US20130076633A1 (en) * 2011-09-27 2013-03-28 Ctx Virtual Technologies Integrated, portable computing and entertainment device
US9088815B2 (en) * 2011-11-17 2015-07-21 Tip Solutions, Inc. Message injection system and method
CN102692997A (zh) * 2011-11-25 2012-09-26 北京十分科技有限公司 一种控制终端操作的方法
CN102523347A (zh) * 2011-12-16 2012-06-27 广东步步高电子工业有限公司 一种应用于电子产品中的吹气操控方法和装置
CN103383594B (zh) * 2012-05-04 2018-01-05 富泰华工业（深圳）有限公司 电子设备及其控制方法
CN102799266A (zh) * 2012-06-28 2012-11-28 上海华勤通讯技术有限公司 移动终端及其声控方法
CN103064516B (zh) * 2012-12-18 2015-10-28 广东欧珀移动通信有限公司 一种翻页方法以及装置
CN104007809B (zh) * 2013-02-27 2017-09-01 联想(北京)有限公司 一种控制方法及电子设备
CN103218122B (zh) * 2013-04-25 2016-08-31 上海华勤通讯技术有限公司 移动终端及其声控屏幕方法
US20150043311A1 (en) * 2013-08-09 2015-02-12 Your Voice S.P.A. Execution of commands in an electronic device
KR20150040445A (ko) * 2013-10-07 2015-04-15 삼성전자주식회사 사용자 음성을 입력받는 원격 제어 장치 및 그 방법
CN103955278A (zh) * 2014-05-15 2014-07-30 深圳市金立通信设备有限公司 一种终端控制的方法及终端
CN106095073A (zh) * 2016-05-30 2016-11-09 北京小米移动软件有限公司 控制指令的发送方法及装置
US10438583B2 (en) * 2016-07-20 2019-10-08 Lenovo (Singapore) Pte. Ltd. Natural language voice assistant
US10621992B2 (en) 2016-07-22 2020-04-14 Lenovo (Singapore) Pte. Ltd. Activating voice assistant based on at least one of user proximity and context
CN107025201B (zh) * 2017-03-28 2021-09-14 联想(北京)有限公司 用于设备匹配的方法及用户设备
US10664533B2 (en) 2017-05-24 2020-05-26 Lenovo (Singapore) Pte. Ltd. Systems and methods to determine response cue for digital assistant based on context
KR102389041B1 (ko) * 2017-08-11 2022-04-21 엘지전자 주식회사 이동단말기 및 머신 러닝을 이용한 이동 단말기의 제어방법
US11334861B2 (en) 2018-03-30 2022-05-17 Block, Inc. Temporarily provisioning functionality in a multi-device point-of-sale system
US11514452B2 (en) * 2018-03-30 2022-11-29 Block, Inc. Multi-device point-of-sale system having multiple merchant-facing devices
US11328279B2 (en) 2018-03-30 2022-05-10 Block, Inc. Multi-state merchant-facing device
US11308472B2 (en) 2018-03-30 2022-04-19 Block, Inc. Temporarily provisioning functionality in a multi-device point-of-sale system
CN109068087B (zh) * 2018-09-14 2020-04-21 大连成者科技有限公司 智能会议投影系统
US11099635B2 (en) * 2019-09-27 2021-08-24 Apple Inc. Blow event detection and mode switching with an electronic device
CN114207710A (zh) 2019-10-15 2022-03-18 谷歌有限责任公司 检测和/或登记热命令以由自动助理触发响应动作
US11221690B2 (en) 2020-05-20 2022-01-11 Micron Technology, Inc. Virtual peripherals for mobile devices

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5878395A (en) * 1995-12-08 1999-03-02 Intermec Ip Corp. Code reading terminal with integrated vehicular head-up display capability
US6820056B1 (en) * 2000-11-21 2004-11-16 International Business Machines Corporation Recognizing non-verbal sound commands in an interactive computer controlled speech word recognition display system
US20050165609A1 (en) * 1998-11-12 2005-07-28 Microsoft Corporation Speech recognition user interface
CN101546244A (zh) * 2008-03-27 2009-09-30 明基电通（上海）有限公司 手持电子装置及其操作方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7489303B1 (en) * 2001-02-22 2009-02-10 Pryor Timothy R Reconfigurable instrument panels
US6594632B1 (en) 1998-11-02 2003-07-15 Ncr Corporation Methods and apparatus for hands-free operation of a voice recognition system
US6975944B1 (en) * 1999-09-28 2005-12-13 Alpha Mos Method and apparatus for monitoring materials used in electronics
JP2005208292A (ja) 2004-01-22 2005-08-04 Canon Inc 音声認識機能付き情報提示装置
US7769705B1 (en) * 2004-05-21 2010-08-03 Ray Anthony Luechtefeld Method, artificially intelligent system and networked complex for facilitating group interactions
US8898098B1 (en) * 2004-05-21 2014-11-25 Ray Anthony Luechtefeld Method, artificially intelligent system and networked complex for facilitating group interactions
US7329005B2 (en) * 2004-08-31 2008-02-12 Hitachi Global Storage Technologies Netherlands B.V. Method and system for a beam projector having an audio capability device
KR100690611B1 (ko) 2004-12-29 2007-03-09 엘지전자 주식회사 휴대 복합 단말기의 프리젠테이션 기능 구현 장치
US7562383B2 (en) * 2005-04-20 2009-07-14 Fuji Xerox Co., Ltd. Systems and methods for a dynamic user interface proxy using physical keys
US8223242B2 (en) * 2005-12-06 2012-07-17 Panasonic Corporation Digital camera which switches the displays of images with respect to a plurality of display portions
BRPI0810490A2 (pt) * 2007-04-18 2014-10-14 Luidia Inc Método de converter uma parte premontada para uso como aparelho de transcrição eletrônico, aparelho configurado para atualizar aparelho de transcrição eletrônico
US7926958B2 (en) 2007-07-30 2011-04-19 Lg Electronics Inc. Mobile terminal having projector and method for controlling the same
KR20090036227A (ko) 2007-10-09 2009-04-14 (주)케이티에프테크놀로지스 이벤트 구동 빔-프로젝터 이동통신단말기 및 그 동작 방법
KR20090043240A (ko) 2007-10-29 2009-05-06 (주)케이티에프테크놀로지스 메시지 커맨드를 이용한 빔-프로젝터 이동통신단말기 동작방법 및 이를 이용한 빔-프로젝터 이동통신단말기
US8175639B2 (en) * 2007-11-26 2012-05-08 Nasrin Chaparian Amirmokri NanoPC mobile personal computing and communication device
US8471868B1 (en) * 2007-11-28 2013-06-25 Sprint Communications Company L.P. Projector and ultrasonic gesture-controlled communicator
JP2009147410A (ja) * 2007-12-11 2009-07-02 Sony Corp 再生装置、再生方法及び再生システム
KR101476291B1 (ko) 2008-01-07 2014-12-24 엘지전자 주식회사 휴대 단말기의 바람 인터랙션 제어방법
KR101396633B1 (ko) 2008-06-10 2014-05-16 삼성전자주식회사 소리 신호를 이용한 영상 출력 기능 제어 장치 및 방법
KR101513615B1 (ko) 2008-06-12 2015-04-20 엘지전자 주식회사 이동 단말기 및 그 음성 인식 방법
KR101509007B1 (ko) * 2009-03-03 2015-04-14 엘지전자 주식회사 진동 모듈을 구비하는 휴대 단말기 및 그 동작방법
KR101686913B1 (ko) * 2009-08-13 2016-12-16 삼성전자주식회사 전자기기에서 이벤트 서비스 제공 방법 및 장치
KR20110069526A (ko) * 2009-12-17 2011-06-23 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치
KR101605347B1 (ko) * 2009-12-18 2016-03-22 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치
KR20110071349A (ko) * 2009-12-21 2011-06-29 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치
US8359020B2 (en) * 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
KR101919792B1 (ko) * 2012-09-20 2018-11-19 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
KR101978209B1 (ko) * 2012-09-24 2019-05-14 엘지전자 주식회사 이동 단말기 및 이의 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5878395A (en) * 1995-12-08 1999-03-02 Intermec Ip Corp. Code reading terminal with integrated vehicular head-up display capability
US20050165609A1 (en) * 1998-11-12 2005-07-28 Microsoft Corporation Speech recognition user interface
US6820056B1 (en) * 2000-11-21 2004-11-16 International Business Machines Corporation Recognizing non-verbal sound commands in an interactive computer controlled speech word recognition display system
CN101546244A (zh) * 2008-03-27 2009-09-30 明基电通（上海）有限公司 手持电子装置及其操作方法

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103780738B (zh) * 2012-10-17 2017-08-29 腾讯科技（深圳）有限公司 移动终端图像处理方法及移动终端
CN103780738A (zh) * 2012-10-17 2014-05-07 腾讯科技（深圳）有限公司 移动终端图像处理方法及移动终端
WO2014059822A1 (zh) * 2012-10-17 2014-04-24 腾讯科技（深圳）有限公司 移动终端图像处理方法及移动终端
US9977651B2 (en) 2012-10-17 2018-05-22 Tencent Technology (Shenzhen) Company Limited Mobile terminal and image processing method thereof
US10395639B2 (en) 2012-12-10 2019-08-27 Samsung Electronics Co., Ltd. Method and user device for providing context awareness service using speech recognition
US9940924B2 (en) 2012-12-10 2018-04-10 Samsung Electronics Co., Ltd. Method and user device for providing context awareness service using speech recognition
US11721320B2 (en) 2012-12-10 2023-08-08 Samsung Electronics Co., Ltd. Method and user device for providing context awareness service using speech recognition
US11410640B2 (en) 2012-12-10 2022-08-09 Samsung Electronics Co., Ltd. Method and user device for providing context awareness service using speech recognition
US10832655B2 (en) 2012-12-10 2020-11-10 Samsung Electronics Co., Ltd. Method and user device for providing context awareness service using speech recognition
CN103869971A (zh) * 2012-12-10 2014-06-18 三星电子株式会社 用于使用语音识别提供情境感知服务的方法和用户装置
CN103869971B (zh) * 2012-12-10 2018-03-30 三星电子株式会社 用于使用语音识别提供情境感知服务的方法和用户装置
CN103945250B (zh) * 2013-01-17 2018-11-02 三星电子株式会社 图像处理设备、其控制方法、以及图像处理系统
CN103945250A (zh) * 2013-01-17 2014-07-23 三星电子株式会社 图像处理设备、其控制方法、以及图像处理系统
WO2014146442A1 (en) * 2013-03-20 2014-09-25 Tencent Technology (Shenzhen) Company Limited Content sharing method, apparatus and electronic device
CN104063155A (zh) * 2013-03-20 2014-09-24 腾讯科技（深圳）有限公司 内容分享方法、装置及电子设备
CN104063155B (zh) * 2013-03-20 2017-12-19 腾讯科技（深圳）有限公司 内容分享方法、装置及电子设备
US9666193B2 (en) 2013-03-20 2017-05-30 Tencent Technology (Shenzhen) Company Limited Method and apparatus for displaying a sharing page according to a detected voice signal, and non-transitory computer-readable storage medium
CN104715757A (zh) * 2013-12-13 2015-06-17 华为技术有限公司 一种终端声控操作方法及装置
CN106465006A (zh) * 2014-06-30 2017-02-22 三星电子株式会社 麦克风的操作方法和支持该方法的电子设备
US10643613B2 (en) 2014-06-30 2020-05-05 Samsung Electronics Co., Ltd. Operating method for microphones and electronic device supporting the same
CN107005739A (zh) * 2014-12-05 2017-08-01 微软技术许可有限责任公司 用于基于语音的设备的外部视觉交互
CN107005739B (zh) * 2014-12-05 2020-09-29 微软技术许可有限责任公司 用于基于语音的设备的外部视觉交互
US11327711B2 (en) 2014-12-05 2022-05-10 Microsoft Technology Licensing, Llc External visual interactions for speech-based devices
CN104882141A (zh) * 2015-03-03 2015-09-02 盐城工学院 一种基于时延神经网络和隐马尔可夫模型的串口语音控制投影系统
CN105160695A (zh) * 2015-06-30 2015-12-16 广东欧珀移动通信有限公司 一种照片处理方法及移动终端
CN106325616A (zh) * 2015-07-01 2017-01-11 Lg电子株式会社 移动终端及其控制方法
CN105261360A (zh) * 2015-09-23 2016-01-20 努比亚技术有限公司 翻页装置及方法
CN108766427B (zh) * 2018-05-31 2020-10-16 北京小米移动软件有限公司 语音控制方法及装置
CN109994111A (zh) * 2019-02-26 2019-07-09 维沃移动通信有限公司 一种交互方法、装置及移动终端

Also Published As

Publication number Publication date
EP2514105A4 (en) 2013-10-02
EP2514105B1 (en) 2015-10-28
EP2514105A2 (en) 2012-10-24
KR20110070338A (ko) 2011-06-24
KR101605347B1 (ko) 2016-03-22
US9639149B2 (en) 2017-05-02
WO2011074917A2 (en) 2011-06-23
US20110153323A1 (en) 2011-06-23
US8942984B2 (en) 2015-01-27
US20150116211A1 (en) 2015-04-30
WO2011074917A3 (en) 2011-11-10

Similar Documents

Publication Publication Date Title
CN102668391A (zh) 用于控制移动装置的外部输出的方法和系统
CN102064857B (zh) 用于远程控制蓝牙装置的方法和设备
US8700097B2 (en) Method and system for controlling dual-processing of screen data in mobile terminal having projector function
JP6111030B2 (ja) 電子装置及びその制御方法
JP5746111B2 (ja) 電子装置及びその制御方法
CN102763342B (zh) 根据基于图像感测模块的用户交互进行外部输出的移动装置及相关控制方法
CN102668390A (zh) 用于控制移动装置的输出的方法和系统
KR102087654B1 (ko) 수화음 누출을 방지하는 전자 장치
KR101874888B1 (ko) 휴대 단말기의 이어폰 인식 방법 및 장치
JP2013037688A (ja) 電子装置及びその制御方法
CN111599358A (zh) 语音交互方法及电子设备
CN105393302A (zh) 多级语音识别
EP3719631A1 (en) Display device and method for controlling same
CN103973877A (zh) 一种在移动终端中利用文字实现实时通话的方法和装置
CN101873376A (zh) 使用即时消息服务的移动终端以及移动终端中的聊天方法
CN101809524A (zh) 用于字符输入的方法和设备
CN108962220A (zh) 多媒体文件播放场景下的文本显示方法及装置
US20190147889A1 (en) User identification method and apparatus based on acoustic features
CN108538284A (zh) 同声翻译结果的展现方法及装置、同声翻译方法及装置
CN102193628A (zh) 使用颜色传感器提供便携式终端的功能的方法和设备
CN113918077A (zh) 投影方法及投影控制方法和相关装置、投影仪、存储介质
CN101729652A (zh) 具有多媒体功能的便携式电子装置
CN102111471A (zh) 一种控制移动终端的方法、装置及移动终端
CN101243391A (zh) 介绍交互模式与应用功能的方法
US20090055167A1 (en) Method for translation service using the cellular phone

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120912