CN101572953B - 移动终端和控制移动终端的视频呼叫的方法 - Google Patents
移动终端和控制移动终端的视频呼叫的方法 Download PDFInfo
- Publication number
- CN101572953B CN101572953B CN2009100034079A CN200910003407A CN101572953B CN 101572953 B CN101572953 B CN 101572953B CN 2009100034079 A CN2009100034079 A CN 2009100034079A CN 200910003407 A CN200910003407 A CN 200910003407A CN 101572953 B CN101572953 B CN 101572953B
- Authority
- CN
- China
- Prior art keywords
- user
- video call
- portable terminal
- image
- call communication
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 53
- 238000004891 communication Methods 0.000 claims abstract description 68
- 230000008676 import Effects 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 7
- 238000007689 inspection Methods 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 description 61
- 230000004913 activation Effects 0.000 description 12
- 238000005516 engineering process Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 230000011664 signaling Effects 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000001483 mobilizing effect Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000002441 reversible effect Effects 0.000 description 2
- 229910001220 stainless steel Inorganic materials 0.000 description 2
- 239000010935 stainless steel Substances 0.000 description 2
- 239000010409 thin film Substances 0.000 description 2
- 239000010936 titanium Substances 0.000 description 2
- 101150012579 ADSL gene Proteins 0.000 description 1
- 102100020775 Adenylosuccinate lyase Human genes 0.000 description 1
- 108700040193 Adenylosuccinate lyases Proteins 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000005266 casting Methods 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008713 feedback mechanism Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000007769 metal material Substances 0.000 description 1
- 238000000465 moulding Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 229920003023 plastic Polymers 0.000 description 1
- 239000004033 plastic Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04B—TRANSMISSION
- H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
- H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
- H04B1/40—Circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
Abstract
一种移动终端和控制移动终端的视频呼叫的方法,该移动终端包括:输入单元,其被构造为从第一用户接收与至少第二用户执行视频呼叫通信的指令;显示单元;语音识别模块,其被构造为识别在第一用户和第二用户之间的视频呼叫通信期间进行的输入语音陈述;以及控制器,其被构造为基于来自第一用户的指令来进行第一用户和第二用户之间的视频呼叫通信,控制显示单元以显示所述第一用户和第二用户的图像,通过检查由语音识别模块识别的语音陈述来检测来自指定第二用户的第一用户的语音陈述,并基于所检测到的来自第一用户的语音陈述,相对于第一用户的图像强调显示第二用户的图像。
Description
技术领域
本发明涉及移动终端和根据用户语音指令强调显示另一方的图像和允许对指定的一方执行具体功能的相应方法。
背景技术
当前移动终端提供了除基本呼叫服务之外的多种附加服务。例如,目前用户可以接入互联网、玩游戏、收看视频、收听音乐、拍摄图像和视频、记录音频文件等。此外,移动终端目前还提供播送节目,以使得用户可以收看电视演出、体育节目、视频等。用户还可以与其它用户进行视频呼叫。
然而,当用户操作其移动终端以与一个参与者或更多个参与者进行视频呼叫(例如,电话会议)时,移动终端的用户接口(UI)和画面不允许用户选择和以图形方式强调所有参与者中预期参与者,并且不允许方便地对预期参与者执行具体功能。
发明内容
因此,本发明的一个目的是解决上述和其它问题。
本发明的另一目的是提供一种根据用户的语音指令强调显示被指定方的图像的移动终端和对应的方法。
本发明的又一目的是提供了一种在视频呼叫通信期间根据用户的语音指令来指定另一方并对被指定方执行具体功能的移动终端和对应的方法。
本发明的再一目的是提供一种在视频呼叫通信期间通过利用用于指定输入的另一方的名称来检测用户的语音指令的移动终端和对应的方法。
为实现这些和其他优点并且根据本发明的用途,如在此所具体实现和广泛描述的,本发明在一方面提供了一种移动终端,该移动终端包括:输入单元,其被构造为从第一用户接收与至少第二用户执行视频呼叫通信的指令;显示单元;语音识别模块,其被构造为识别在第一用户和第二用户之间的视频呼叫通信期间进行的输入语音陈述;以及控制器,其被构造为基于来自第一用户的指令来进行第一用户和第二用户之间的视频呼叫通信,控制显示单元以显示所述第一用户和第二用户的图像,通过检查由语音识别模块识别的语音陈述来检测来自指定第二用户的第一用户的语音陈述,并基于所检测到的来自第一用户的语音陈述,相比于第一用户的图像强调显示第二用户的图像。
在另一方面,本发明提供了一种用于控制移动终端的方法,该方法包括:从第一用户接收与至少第二用户执行视频呼叫通信的指令;识别在第一用户和第二用户之间的视频呼叫通信期间进行的输入语音陈述;基于来自第一用户的指令来进行第一用户和第二用户之间的视频呼叫通信;显示第一用户和第二用户的图像;通过检查由语音识别模块识别的语音陈述来检测来自指定第二用户的第一用户的语音陈述;以及基于所检测到的来自第一用户的语音陈述,相比于第一用户的图像强调显示第二用户的图像。
本发明的进一步应用范围将从以下给出的详细说明中变得清楚。然而,应当理解,由于本领域的技术人员将根据这些详细说明而清楚本发明的精神和范围内的各种修改例和变型例,因此尽管指示了本发明的优选实施方式,但是该详细说明和具体示例仅作为例示给出。
附图说明
将从以下给出的详细描述和附图中更全面地理解本发明,这些仅作为例示给出,并因此并非用来限制本发明,其中:
图1是根据本发明的一个实施方式的移动终端的示意性框图;
图2是根据本发明的一个实施方式的移动终端的正视图;
图3是图2的移动终端的后视图;
图4是可以与根据本发明的一个实施方式的移动终端一起工作的无线通信系统的框图;
图5是例示控制根据本发明的一个实施方式的移动终端的视频呼叫的方法的流程图;
图6(a)-(d)是例示激活根据本发明的一个实施方式的移动终端的语音识别功能的显示画面的概图;
图7(a)-(c)是例示在根据本发明的一个实施方式的移动终端中的特定菜单的选择的显示画面的概图;
图8是示出用于识别根据本发明的一个实施方式的移动终端的语音指令的数据库的框图;
图9(a)-(c)是例示在根据本发明的一个实施方式的移动终端中利用语音指令来控制视频呼叫的方法的显示画面的概图;
图10(a)-(c)是例示在根据本发明的一个实施方式的移动终端中的强调视频呼叫参与者的方法的显示画面的概图;
图11是示出在根据本发明的一个实施方式的移动终端中的多方视频呼叫方法的概念图;
图12(a)-(c)是例示在根据本发明的一个实施方式的移动终端中在多方视频呼叫期间强调显示指定方的方法的显示画面的概图;
图13是示出在根据本发明的一个实施方式的移动终端中在视频呼叫期间用于强调另一方的图像的环境设定选项的显示画面的概图;以及
图14是(a)-(c)是例示在根据本发明的一个实施方式的移动终端中在多方视频呼叫期间指定另一方以执行具体功能的方法的显示画面的概图。
具体实施方式
下面将详细参照本发明的示例性实施方式,附图中示出了其示例。在参照附图对本发明进行说明时,对执行相同或类似功能的要素使用相同标号。
图1是根据本发明的一个实施方式的移动终端100的框图。如图所示,移动终端100包括具有一个或更多个组件的无线通信单元110,该无线通信单元使得在移动终端100和移动终端所处的无线通信系统或网络之间能够进行无线通信。
例如,无线通信单元110包括经由广播信道从外部广播管理实体接收广播信号和/或广播相关信息的广播接收模块111。广播信道可以包括卫星信道和地面信道。
另外,广播管理实体总体上是指发送广播信号和/或广播相关信息的系统。广播相关信息的示例包括与广播信道、广播节目、广播服务提供商等相关的信息。
另外,广播信号可以实现为电视广播信号、无线电广播信号以及数据广播信号等。广播信号还可以包括与电视广播信号或无线电广播信号组合的广播信号。并且,可以经由(例如,根据诸如3GPP、3GPP2、IEEE、CDMA、GSM、OMA、4G技术等标准运行的)无线通信网络来提供广播相关信息,并且可以由移动通信模块112接收广播相关信息。还可以存在各种形式广播信号。例如,广播信号可以具有数字多媒体广播(DMB:digital multimedia broadcasting)系统的电子节目指南(EPG:electronicprogram guide)、手持数字视频广播(DVB-H:digital videobroadcast-handheld)系统的电子服务指南(ESG:electronic service guide)等形式。
广播接收模块111还被构造为接收从各种类型的广播系统发送的广播信号。例如,该广播系统包括地面数字多媒体广播(DMB-T:digitalmultimedia broadcasting-terrestrial)系统、卫星数字多媒体广播(DMB-S:digital multimedia broadcasting-satellite)系统、手持数字视频广播(DVB-H:digital video broadcast-handheld)系统、被称为仅媒体前向链路(media forward link only)的数据广播系统以及综合业务地面数字广播(ISDB-T:integrated services digital broadcasting-terrestrial)系统等。还可以接收多播信号。此外,可以在适当的装置(例如,存储器160)中存储由广播接收模块111接收的数据。
无线通信单元110还包括向一个或更多个网络实体(例如,接入点、基站、Node-B)、外部实体(例如,其它用户装置)以及服务器或其它网络实体发送或从这些实体中接收无线信号的移动通信模块112。该信号可以是音频、视频、多媒体、控制信令以及数据等。
此外,还包括支持移动终端的互联网接入的无线互联网模块113。模块113可以与终端以内置或外置方式耦接。无线通信单元110还包括协助相对短距离通信的短距离通信模块114。实现该模块的合适技术包括射频识别(RFID:radio frequency identification)、红外数据标准协会(IrDA:Infrared data association)、超宽带(UWB:ultra-wideband)以及通常称为蓝牙或ZigBee的网络技术等。
无线通信单元110还包括定位模块115,该模块用于识别或以其他方式获得移动终端100的位置。可以利用与相关卫星、网络组件以及它们的组合协作的全球定位系统(GPS:global positioning system)组件来实现定位模块115。例如,GPS模块可以测量到三个或更多个卫星的准确时间和距离,并根据基于三个不同距离的三角测量法来准确地计算移动终端的当前位置。还可以采用从三个卫星获取距离和时间信息并用单个卫星执行误差矫正的方法。具体地说,GPS模块根据从卫星接收到的位置信息不仅可以获得纬度、经度的位置和海拔值而且可以与三维速度信息一起获得准确时间。
另外,如图1所示,移动终端100还包括向移动终端100提供音频或视频信号的音频/视频(A/V)输入单元120。如图所示,A/V输入单元120包括相机121和麦克风122。相机121接收并处理静态图片或视频的图像帧。
此外,当便携式装置处于诸如电话呼叫模式、录音模式和语音识别模式的特定模式时,麦克风122接收外部音频信号。接着将接收到的音频信号处理并转换为数字数据。此外,便携式装置(具体地说,A/V输入单元120)通常包括各种噪声去除算法来去除在接收外部音频信号的过程中产生的噪声。另外,由A/V输入单元120生成的数据可以被存储在存储器160中、由输出单元150使用、或经由通信单元110的一个或更多个模块发送。可以根据需要使用两个或更多个麦克风和/或相机。
移动终端100还包括响应于相关一个或多个输入装置的用户操作而生成输入数据的用户输入单元130。这种装置的示例包括键盘、薄膜开关(dome switch)、触摸板(例如静压式或电容式)、滚轮(jog wheel)和拨动开关(jog switch)。具体示例是用户输入单元130与触摸屏显示器协作而构造为触摸板的情况,下面将进行更详细地说明。
移动终端100中还包括检测单元140,该检测单元提供移动终端100的各方面的状态测量值。例如,检测单元140可以检测移动终端100的开/关状态、移动终端100的组件(例如,显示器和键盘)的相对位置、移动终端100或移动终端100的组件的位置变化、与移动终端100的用户接触的存在或消失、移动终端100的取向或加速/减速等。
作为示例,当移动终端100是滑盖型移动终端时,检测单元140可以检测出移动终端100的滑动部是打开还是闭合。其它示例包括检测单元140检测电源190提供的电力是否存在、接口单元170和外部装置之间的耦接或其它连接是否存在等。
此外,接口单元170通常被实现为将移动终端100耦接到外部装置。典型的外部装置包括有线/无线头戴式耳机、外部充电器、电源、被构造为存储数据(例如音频、视频,照片等)的存储装置、耳机以及麦克风等。另外,可以利用有线/无线数据端口、(例如,用于耦接到存储卡或订户识别模块(SIM:subscriber identification module)卡、用户识别模块(UIM:user identity module)卡、可移除用户识别模块(RUIM:removableuser identity module)卡等的)卡槽、音频输入/输出端口和视频输入/输出端口来构造接口单元170。
接口单元170可以用作终端与外部装置交换数据等的通信链路(或通道、路径等)。例如,可以以经由固定方式或无线方式将耳机连接到移动终端的连接端口、短距离通信的端口(例如红外数据标准协会(IrDA:Infrared data association)端口、BluetoothTM端口、无线LAN端口等)、向移动终端供电的电源端口等的形式来实现接口单元170。
输出单元150总体上包括支持移动终端100的输出要求的各种组件。移动终端100还包括可视地显示与移动终端100相关的信息的显示器151。例如,如果移动终端100运行于电话呼叫模式,则显示器151通常会提供包括与拨打、执行和终止电话呼叫相关的信息的用户接口或图形用户接口。作为另一示例,如果移动终端100处于视频呼叫模式或照相模式,则显示器151可以附加地或替代地显示与上述模式相关的图像。
此外,优选的是,显示器151还包括与输入装置(例如,触摸板)协同工作的触摸屏。该构造使得显示器151既能充当输出装置又能充当输入装置。另外,可以利用例如包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器以及三维显示器的显示器技术来实现显示器151。
显示单元151可以输出移动终端100中处理的信息。例如,当移动终端100处于电话呼叫模式时,显示单元151可以显示与呼叫或其它通信(例如文本消息、多媒体文件下载等)相关的用户接口(UI)或图形用户接口(GUI)。另外,当移动终端100处于视频呼叫模式或图像拍摄模式时,显示单元151可以显示拍摄的图像和/或接收到的图像、表示视频或图像的UI或GUI和与此相关的功能等。
移动终端100还可以包括一个或更多个这种显示器。双显示器的实施方式的示例是将一个显示器构造为内部显示器(当终端处于打开位置时可见)而将第二显示器构造为外部显示器(在打开和闭合位置均可见)的移动终端。
图1还示出了具有支持移动终端100的音频输出要求的音频输出模块152的输出单元150。通常利用一个或更多个扬声器、蜂鸣器、其它音频发生装置及它们的组合来实现音频输出模块152。
此外,音频输出模块152在包括呼叫接收模式、呼叫拨打模式、录音模式、语音识别模式以及广播接收模式的多种模式下工作。在工作过程中,音频输出模块152输出与具体功能(例如,收到呼叫、收到消息、以及错误)相关的音频。
另外,输出单元150还显示具有报警器153,该报警器用于信号通知或标识与移动终端100相关的特定事件的发生。典型事件包括收到呼叫、收到消息和收到用户输入。这种输出的示例包括向用户提供触感(例如,振动)。例如,报警器153可以被构造为响应于移动终端100接收到呼叫或消息而振动。
作为另一示例,响应于在移动终端100处接收到用户输入而由报警器153提供振动,由此提供触觉反馈机制。此外,可以分别执行由输出单元150的组件提供的各种输出,或可以利用这些组件的任意组合来执行这些输出。
另外,存储器160通常用于存储各种类型的数据以支持移动终端100的处理、控制和存储要求。这些数据的示例包括用于在移动终端100上操作的应用的程序指令、呼叫历史、联系数据、电话簿数据、消息、照片、视频等。
此外,可以利用任意类型的易失性和非易失性存储器或存储装置或它们的组合来实现图1所示的存储器160,该易失性和非易失性存储器或存储装置包括随机存取存储器(RAM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘、卡式存储器、或其它类似的存储器或数据存储装置。
终端100还包括通常控制移动终端100的整体运行的控制器180。例如,控制器180执行与语音呼叫、数据通信、即时消息通信、视频呼叫、相机操作和记录操作相关的控制和处理。如图1所示,控制器180还可以包括用于提供多媒体回放功能的多媒体模块181。多媒体模块181可以被构造为控制器180的一部分,或可以实现为单独的组件。另外,电源190提供便携式装置的各个组件所使用的电力。提供的电源可以是内部电力、外部电力或它们的组合。
接着,图2是根据本发明的一个实施方式的移动终端100的正视图。如图2所示,移动终端100包括被构造为以滑动方式与第二机体205协作的第一机体200。图1所述的用户输入单元130可以包括第一输入单元(例如,功能键210)、第二输入单元(例如,键盘215)以及第三输入单元(例如,侧键245)。
功能键210与第一机体200关联,而键盘215与第二机体205关联。键盘215包括各种按键(例如,数字、字母以及符号)以使得用户能够拨打电话、编写文本或多媒体消息以其他方式操作移动终端100。
另外,第一机体200相对于第二机体205在打开和闭合位置之间滑动。在闭合位置,第一机体200以键盘215大致或完全由第一机体200遮盖的方式位于第二机体205上。在打开位置,用户可以使用键盘215以及显示器151和功能键210。功能键210便于用户输入例如开始、停止和滚动命令的命令。
此外,移动终端100工作于待机模式(例如能够接收呼叫或消息、接收网络控制信令并对其响应)或活动呼叫模式。通常,在处于闭合位置时移动终端100处于待机模式,并且在处于打开位置时移动终端100处于活动模式。然而,模式配置可根据要求或期望而改变。
另外,第一机体200由第一壳体220和第二壳体225形成,并且第二机体205由第一壳体230和第二壳体235形成。优选的是,第一壳体和第二壳体由合适成型(ridge)材料(例如,注模成型塑料)制成,或由诸如不锈钢(STS:stainless steel)和钛(Ti)等的金属材料制成。
如果需要,可以在第一机体200和第二机体205之一或其两者的第一和第二壳体之间提供一个或更多个中间壳体。另外,典型的是,将第一机体200和第二机体205的大小设计为容纳用于支持移动终端100的操作的电子元件。
并且,第一机体200包括相对于显示器151设置的相机121和被构造为扬声器的音频输出单元152。还可以以相对于第一机体200选择性定位(例如,旋转、转动等)的方式来构造相机121。
此外,靠近显示器151的下部设置功能键210。如上所述,显示器151可以实现为LCD或OLED。显示器151还可构造为具有下层触摸板的触摸屏,该触摸屏响应于对触摸屏的用户接触(例如手指、手写笔等)而生成信号。
并且,第二机体205包括靠近键盘215设置的麦克风122以及作为一种用户输入单元沿第二机体205的侧边设置的侧键245。优选的是,侧键245被构造为热键,以使得侧键245与移动终端100的具体功能相关联。如图所示,靠近侧键245设置接口单元170,并且电池形式的电源190位于第二机体205的下部。
图3是图2所示的移动终端100的后视图。如图3所示,第二机体205包括相机121以及相关的闪光灯250和反射镜255。闪光灯250与第二机体205的相机121协同工作,并且反射镜255用于帮助用户在自拍模式下调整相机121的位置。另外,第二机体205的相机121朝向与图2所示的第一机体200的相机121的朝向相反的方向。
另外,第一机体200和第二机体205的相机121可以分别具有相同或不同的功能。例如,在一个实施方式中,第一机体200的相机121工作的分辨率相对来说低于第二机体205的相机121的分辨率。这种配置在例如反向链路带宽能力有限的视频会议呼叫期间较为适用。此外,第二机体205的相机121(图3)的相对较高的分辨率用于获得更高质量的图像以备以后使用。
第二机体205还包括被构造为扬声器并位于第二机体205的上部的音频输出模块152。第一机体200和第二机体205的音频输出模块还可以彼此协作以提供立体声输出。此外,这些音频输出模块的一个或两者可以被构造为免提电话工作。
终端100还包括位于第二机体205的顶端的广播信号接收天线260。天线260与广播接收模块111(图1)协同工作。根据需要,天线260可以是固定的或被构造为缩进第二机体205。此外,第一机体200的后侧包括滑动模块265,该滑动模块以可滑动方式与位于第二机体205的正面的对应滑动模块耦接。
另外,可以根据需要或期望来修改第一机体200和第二机体205的各个组件的所示配置。通常来说,一个机体中的部分或全部组件可以另选地在另一机体上实现。此外,可以在与这些代表图中示出的位置不同的位置处定位这些组件的位置和相对定位。
另外,图1-图3的移动终端100可以被构造为在经由帧或分组传送数据的通信系统中工作,该通信系统包括无线和有线通信系统以及基于卫星的通信系统。这些通信系统使用不同的空中接口和/或物理层。
由这些通信系统使用的空中接口的示例例如包括频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)以及通用移动电信系统(UMTS)、UMTS的长期演进(LTE)、以及全球移动通信系统(GSM)。做为非限性示例,将针对CDMA通信系统进行进一步说明,但这些技术等同地适用于其它系统类型。
接下来,图4例示了具有多个移动终端100、多个基站270、多个基站控制器(BSC:base station controller)275、以及移动交换中心(MSC:mobile switching center)280的CDMA无线通信系统。
MSC 280被构造为与公共交换电话网络(PSTN:public switchtelephone network)290接口连接,并且MSC 280还被构造为与BSC 275接口连接。此外,BSC 275经由回程线路(backhaul line)耦接到基站270。另外,可以根据例如包括E1/T1、ATM、IP、PPP、帧中继、HDSL、ADSL或xDSL的多种接口的任意接口来构造该回程线路。此外,系统可以包括两个以上的BSC 275。
此外,各基站270可以包括一个或更多个扇区,各扇区具有全向天线或远离基站270沿径向指向特定方向的天线。另选的是,各扇区可以包括两个分集接收天线。另外,各基站270可以被构造为支持多个频率分配,各频率分配具有特定频谱(例如1.25MHz、5MHz)。
扇区和频率分配的交叉部分可以被称为CDMA信道。基站270也可以被称为基站收发子系统(BTS:base station transceiver subsystem)。在一些示例中,术语“基站”可以总体上指BSC 275和一个或更多个基站270。
基站270也可以表示为“小区站点(cell site)”。另选的是,可以将给定基站270的单个扇区称为小区站点。此外,所示的地面数字多媒体广播(DMB:digital multimedia broadcast)发射机295向在系统中工作的移动终端100进行广播。
另外,移动终端100的广播接收模块111(图1)通常被构造为接收由DMB发射机295发送的广播信号。可以对如上述的其它类型的广播和多播信令实现类似的配置。
图4还例示了多个全球定位系统(GPS)卫星300。这些卫星协助确定部分或全部移动终端100的位置。在图4中,示出了两个卫星,但可以由更多或更少的卫星来获得位置信息。
另外,移动终端100的定位模块115(图1)通常被构造为与卫星300协作以获得期望的位置信息。然而另选的是,可以实现其它类型的位置检测技术(例如,可用于补充或替代GPS定位技术的定位技术)。部分或全部GPS卫星300可以替换地或附加地被构造为提供卫星DMB传输。
此外,在无线通信系统的典型操作过程中,基站270从各个移动终端100接收反向链路信号的集合。这些移动终端100参与呼叫、消息收发和其它通信。另外,在基站270中处理由给定基站270接收到的各反向链路信号,并且将所得到的数据转发到相关的BSC 275。BSC 275提供呼叫资源分配和包括在基站270之间的软切换的移动性管理功能。
此外,BSC 275还将接收到的数据路由到MSC 280,该MSC提供附加的路由服务以与PSTN 290接口连接。类似的是,PSTN与MSC 280接口连接,并且MSC 280与BSC 275接口连接。BSC 275还控制基站270以向移动终端100发送前向链路信号的集合。
移动终端还包括语音识别模块,该语音识别模块被构造为识别在第一用户和第二用户之间的视频呼叫通信期间进行的输入语音陈述。控制器180接着基于来自第一用户的指令执行第一用户和第二用户之间的视频呼叫通信,控制显示单元151来显示第一用户和第二用户的图像,通过检查由语音识别模块识别的语音陈述来检测来自指定第二用户的第一用户的语音陈述,并基于所检测到的来自第一用户的语音陈述,相比于第一用户的图像强调显示第二用户的图像。
更具体地说,在以下说明中,关于各种实施方式对适用于上述配置的移动终端100的控制方法进行说明。然而,以下的实施方式可以单独实现或以组合方式实现。另外,在以下的说明中,假设显示器151包括触摸屏。
接下来,图5是例示用于控制根据本发明的一个实施方式的控制移动终端的视频呼叫的方法的流程图。同样参照图1对在本发明进行说明。
如图5所示,控制器180确定用户是否输入或请求视频呼叫操作(S101)并当用户输入或请求视频呼叫操作时执行视频呼叫操作(S102)。控制器180还确定用户是否请求将另一方添加到视频呼叫操作中(S103)。当用户请求添加另一方时(S103中的“是”),控制器108将另一方添加到视频呼叫操作中(S104)。也可以在视频呼叫操作之前或在视频呼叫通信期间添加另一方。
控制器180还在终端的显示单元151上显示添加的另一方(S105)。此外,控制器180可以显示另一方的实际图像或可以显示指定的替代图像或代替另一方的实际图像的替代视频。类似的概念适用于显示主叫用户的图像。另外,可以附加地在各个图像中显示各方的文本类型的信息。此外,可以利用电话簿中登记的信息来自动显示另一方的信息,或可以利用用户任意输入的信息来显示该另一方的信息。
控制器180接着确定用户是否输入了指定在视频呼叫操作中将要强调的另一方的指令或名称(S106)。当用户指定另一方时(S106中的“是”),与用户或其它未指定方的图像相比,控制器180根据预设环境设定选项强调显示指定的另一方的图像(S107)。
接着,控制器180确定用户是否输入了除指定另一方以外的第二指令(S108)。如果用户输入了第二指令(S108中的“是”),则控制器180对指定的另一方执行该第二指令(S109)。例如,当输入了用于在视频呼叫期间传送内容或消息的第二指令时,控制器180对另一方执行所请求的操作。
此外,可以利用例如按键、触摸、接触、手势、按压或语音输入来输入由用户输入的指令。在下文中,上述指令输入方法适用于要描述的全部实施方式,但是为了简洁起见,将对语音指令输入方法进行说明。另外,为了由语音指令执行视频呼叫功能,控制器180激活语音识别模块或语音识别模块中包括的功能。此外,语音识别模块总体上包括用于识别用户进行的语音陈述的软件程序。该语音识别模块可以在控制器180中实现或可以是单独模块。
此外,如果语音识别功能持续保持在激活状态,则增加了终端的资源消耗和电能消耗。由此,控制器180有利地控制语音识别功能激活的启动和终止以减少移动终端的资源消耗和电能消耗。
更具体地说,图6(a)-(d)是例示激活根据本发明的一个实施方式的移动终端的语音识别功能的显示画面的概图。如图6(a)的显示画面410所示,用户可以通过触摸或选择菜单键或软触摸菜单按钮411来激活语音激活功能,并接着选择与语音激活功能相对应的子菜单。还可以在触摸触摸按钮411时立即激活语音激活功能。此外,按钮411可以是硬键、软键、图标、滚轮、热键等。
此外,如图6(b)的显示画面420所示,用户还可以通过触摸显示单元151的任意位置或区域(即未显示按钮或菜单图标的区域)来激活语音识别功能。控制器180接着激活语音识别功能。图6(c)例示了另选实施方式的显示画面430,在该实施方式中用户通过输入声音或特定级别的具体音效来激活语音识别功能。控制器180接着激活语音识别功能。
例如,控制器180可以利用两种模式来驱动语音识别功能:仅检测特定或更高级别的声音的第一模式;以及识别语音指令并且确定其含义的第二模式。另外,首先激活终端的资源消耗或电力消耗较小的第一模式,并且如果在第一模式中输入了特定或更高级别的声音,则激活第二模式以识别语音指令。
图6(d)例示了用于激活语音识别功能的又一实施方式的显示器440。在本实施方式中,控制器180通过检测或感应本地或远程无线信号或经由相机检测到的身体动作信息(例如,用户的手势信号或姿态)来激活语音识别功能。即,移动终端包括被构造为检测对终端的动作或手势的动作检测单元。检测单元140是此类动作检测单元的示例。例如,相机可以与动作检测单元(例如,软件程序)一起使用以检测动作和手势。
更具体地说,图7(a)-(c)例示了用户通过向显示器移动其手指来激活语音识别功能。即,图7(a)例示了用户向特定菜单443所在的位置处的显示画面(参见图7(b))移动他的或她的手指。如图7(c)所示,控制器180接着输出菜单443的下级菜单列表444。
因此,与用户需要执行多个连续触摸操作以选择下级菜单的现有技术相比,在本发明中,可以通过用户的手势来显示下级菜单并接着用户可以利用单个触摸操作来选择所显示的其中一个下级菜单。此外,控制器180可以通过调节菜单列表444的透明度根据接近程度来更清晰地显示下级菜单列表444。
另外,在激活状态保持一定时间之后,控制器180可自动地终止激活状态。或者,仅当执行特定键或触摸操作时才保持激活状态,而当释放该按键或触摸操作时,激活状态可以立即终止。另外,如果在启动激活状态之后超过特定时间没有输入语音,则激活状态可以自动终止。控制器180还可以仅在视频呼叫时段期间激活语音识别功能或模块。
此外,在本发明中,用于激活语音识别功能的按键或菜单不限于上述内容,并且即使在任意一项功能正在执行的同时,也可以在特定时段期间自动激活语音识别功能。
接着,图8是例示了控制器180用来识别根据本发明的一个实施方式的移动终端的语音指令的数据库的框图。即,为了识别语音指令,优选的是,移动终端包括以共振峰、音节、语素、关键词、句子为单位存储用于识别经由麦克风输入的语音(例如,陈述)的语音信息的第一数据库161,存储用于根据识别的语音信息来确定语音陈述或指令的整体含义的信息(例如,语法、发音精度、句子结构等)的第二数据库162,存储移动终端中提供的功能、菜单名称以及电话簿信息的第三数据库163,存储要从终端输出的消息以由此接收用户对所确定的语音指令或语音信息的含义的确认的第四数据库164。在存储器160中还可以存储多个语音识别算法。
另外,控制器180可以利用多个数据库161-164中的至少一个来执行用于确定语音指令中包括的含义的操作,并执行涉及与所确定的语音指令的含义相对应的功能或服务的菜单。在激活语音识别功能之后,控制器180可以根据用户输入的语音指令来激活“视频呼叫功能”。下面将参照图9(a)-(c)描述操作视频呼叫功能的方法。
更具体地说,图9(a)-(c)是示出在根据本发明的一个实施方式的移动终端中利用语音指令来控制视频呼叫的方法的显示画面的概图。如图9(a)的显示画面450所示,用户输入与“视频呼叫功能”相关的特定语音指令(例如,语音呼叫或“我想要开始视频呼叫”),并且控制器180识别语音指令并运行“视频呼叫功能”。
此外,如果语音指令包括与具体功能或菜单准确对应的信息(例如,菜单名称),则语音指令的识别率通常较高,并且移动终端用于识别语音指令的资源消耗降低。然而,语音指令不限于菜单名称,并且控制器180可以识别自然语言语音指令。
例如,如图9(a)所示,如果输入了包括多个词的自然语言语音指令(例如“我想要开始视频呼叫”),则控制器180可以根据与具体功能(例如,视频呼叫)相关的有意义的词(例如,开始、视频、呼叫)来确定自然语言语音指令的整体含义。另外,与人工生成的人工语言相区别的是,自然语言是人类为了通用通信而说或写的语言。
还可以利用自然语言处理算法来处理自然语言。此外,因为自然语言可以包括或可以不包括与具体菜单相关的准确名称,因此控制器180可能无法百分之百地识别语音指令。由此,根据本发明的一个实施方式,如果语音指令的识别率是特定值或更高(例如80%或更高),则控制器180可以确定识别出的语音识别是准确的。
并且,如果存在分别具有这样的识别率的多个词(即,如果输入的语音指令具有包括类似的识别率的多个含义,使得可以以多种方式进行解释),则控制器180可以显示对应的菜单,并接着用户可以选择显示的其中一个菜单以执行至少一个功能或菜单。该识别率也可以由终端制造商设定或由用户进行设定。
另外,可以根据语法信息的语义信息以不同方式确定包括在语音指令中的词是否是与具体功能或菜单相关的有意义的词。例如,在自然语言语音指令(例如“我想要开始视频呼叫:I want to start video call”)中,主语(“我:I”)或介词(“to”)在语法上可以是没有意义的或与菜单不相关的。
如图9(a)所示,控制器还可以利用记录的消息451提醒用户输入更多信息。图9(b)例示了用户输入语音指令452“视频呼叫、Kim或Kim、视频呼叫”,该语音指令提供了关于所请求的视频呼叫的更多的信息。即,在语音指令452中,添加了用于指定目标的名称(例如,登记到电话簿的名称信息或例如电话号码或邮件地址的联系信息)。另外,如果连续地输入了用于指定目标的多个名称(例如,视频呼叫、Kim、James),则控制器180将所有各方连接到视频呼叫操作以进行多方呼叫。
此外,如上所述,如果没有输入用于指定目标的名称并且仅输入了与具体功能(例如,视频呼叫)相关的指令,则控制器180可以输出请求输入目标的消息451(例如“请输入对方以连接视频呼叫”)。此外,如果将用于指定目标的名称称为第一语音指令,则可以将与具体功能的操作相关的语音指令称为第二语音指令,并且在此示例中,可以在第二语音指令之前或之后合并第一语音指令。图9(c)例示了控制器180将一方连接到视频呼叫并且经由输出消息479向用户通告正在连接呼叫。
此外,控制器180自身可以根据移动终端的工作状态来将指定目标的名称单独识别为单个指令。例如,如果在视频呼叫期间仅输入了第一语音指令(例如,指定另一方的名称),则控制器180可以强调显示目标的图像。现在将参照图10(a)-(c)详细描述这一特征。
即,图10(a)-(c)是示出在根据本发明的一个实施方式的移动终端中强调视频呼叫参与者的方法的显示画面的概图。如图10(a)所示,用户(Harry)471与另一方Kim正在进行视频呼叫。接着,用户Harry通过输入语音指令470请求加入另一方Jane。另一方Jane的电话号码可以链接到具有Jane的电话号码的电话簿或联系信息中。
此外,如图10(a)所示,控制器180可以通过将Kim的图像472显示得比主叫方Harry的图像471更大来强调显示对方Kim的图像472。如图10(b)所示,控制器180还输出指示正在向Jane进行视频呼叫连接的信息474。
另外,当显示信息474时,控制器180可以有利地移动Harry的图像471和Kim的图像472的位置并缩小图像,以使得可以以用户Harry 471能够容易地查看消息474的方式来显示消息474。如图10(c)所示,当完成向添加的一方Jane的视频呼叫时,控制器180可以强调显示Jane的图像475。
此外,即使未强调显示连接到视频呼叫的第三方的图像475,当用户Harry对Jane讲话时,控制器180也会强调显示图像475。例如,图10(c)例示了用户Harry向Jane讲话(即,如窗口476所示),并接着控制器180选择性地强调显示被通话方的图像。由此,可以根据当前正与谁讲话而强调显示不同的对方的图像。此外,控制器180可以在接收到语音指令之前激活语音指令识别功能,并在视频呼叫功能运行的同时保持语音指令识别功能的激活状态。
由此,通过重复地添加视频呼叫参与方,用户可以进行多方视频呼叫。此外,如图11所示,在多方视频呼叫时,可以在视频呼叫功能开始运行的同时或在视频呼叫期间添加全部参与方。
接着,图12(a)-(c)是示出在根据本发明的一个实施方式的移动终端中在多方视频呼叫期间强调显示指定另一方的方法的显示画面的概图。如图12(a)-(c)所示,多方包括三个用户(例如Harry、Kim和Jane)。
另外,如移动终端的显示画面510、520、530所示,强调显示被通话者。更具体地说,控制器180从由讲话的用户在视频呼叫期间输入的语音中检测指定被通话方的名称。在本实施方式中,指定另一方的名称是另一方的名字(例如Harry、Kim、Jane)。例如,如图12(a)的显示画面510所示,当在交谈中用户Harry说“Jane,你好吗?”时,控制器180从句子中检测指定另一方的名称Jane并强调显示Jane的图像。控制器180接着在Harry的终端上强调显示Jane的图像。
如图12(b)的显示画面520所示,当用户Jane答复“噢,Harry,我很好”时,在Jane的移动终端的画面上强调显示Harry的图像。同样,如图12(c)的显示画面530所示,如果Kim说“你好,Jane”,则在用户Kim的移动终端的画面上强调显示Jane的图像。另外,在一个另选实施方式中,在各对应终端中的控制器180可以强调显示各讲话者的图像而不是各被通话者的图像。
此外,强调不同用户的方法可根据移动终端而有所区别。例如,可以增加另一方的图像的大小来进行强调,可以以特定颜色显示另一方的图像来进行强调,另一方的图像可以闪烁以进行强调,或另一方的图像可以移动到靠近画面的中部以进行强调。此外,可以通过选择环境设定选项来预先设定当用户在视频呼叫期间输入另一方的名称时强调显示该另一方的图像的功能。
例如,图13是示出在根据本发明的一个实施方式的移动终端中在视频呼叫期间用于强调另一方的图像的环境设定选项的显示画面的概图。如图13所示,与视频呼叫相关的环境设定选项可以包括用于选择是否在视频呼叫期间有区别地识别用户谈话和指令的选项610、用于选择是否在视频呼叫期间强调由用户指定的另一方的图像的选项620、用于选择是否在视频呼叫期间检测被合并为指定另一方的第二指令并执行具体功能的选项630以及当选择了第二选项620时用于强调由用户指定的另一方的图像的方法的选项640。
另外,在环境设定选项列表上显示的各个可选项目的名称可根据移动终端的类型而不同。此外,图12(a)-(c)示出了这样一种方法,即,控制器180将用于指定另一方的名称确定为谈话中用户输入的语音指令(即,强调显示图像的指令),并且强调显示指定的另一方的图像。
由此,在本示例中,并且如图13所示,如果选择了用于选择是否检测指定另一方的第二指令并执行具体功能的选项630,则控制器180可以检测与指定另一方的指令或名称相结合的第二指令并执行第二语音指令。
此外,第二语音指令可以是用于添加另一方以参与视频呼叫的指令或用于指定另一方并在视频呼叫中发送文件或消息的指令。更具体地说,图14(a)-(c)是例示在根据本发明的一个实施方式的移动终端中在多方视频呼叫期间指定另一方以执行具体功能的方法的显示画面的概图。
如图14(a)所示,当在视频呼叫期间用户输入了特定语音指令(例如“向Jane发送消息”)701时,则控制器180从语音指令中检测到作为用于指定另一方的名称(例如,Jane)的第一指令,并检测到在名称之前或之后结合的第二语音指令(例如,短消息)。控制器180接着根据检测到的第二语音指令来显示用于创建要发送到指定的另一方(例如,Jane)的短消息的画面720(如图14(b)所示)。用户可以接着在显示画面722中写入消息。
此外,图14(b)例示了控制器180可以显示的、用于使用户能够写入并向被指定方发送消息的两种不同类型的画面720。图14(b)的上部在写入区的上部示出了Jane(被指定方)的缩略图721。图14(b)的下部在写入区内示出了Jane(被指定方)的背景照片722。由此,写入消息的用户可以容易地确定或记得此消息将发给谁。即,在多方呼叫中,用户可能容易忘记将消息将发送给谁。在本实施方式中,因为在消息区中显示了被指定方,所以用户可容易地确定将该消息发送给谁。
此外,用户可以利用按键、触摸输入法、利用语音命令等在写入区中写入消息。接着,如图14(c)所示,当用户完成写入消息后,用户可以输入指示命令控制器180向被指定方发送消息的指令740。在图14(c)所示的示例中,用户输入语音指令。也可以使用其它输入方法。
另外,如图14(c)所示,控制器180还有利地显示发送到被指定方(Jane)的信件的图像或图标。由此,用户可再次确定正在向正确方成功地发送消息。另外,在一个示例中,控制器180将图14(b)所示的画面改变或替换为图14(c)所示的多方的图像。如上所述,当其中一方被通话时或输入指定对应于另一方的指令时,控制器180可以强调显示其如图14(a)所示的图像。
另外,例如可以利用计算机软件、硬件或它们的组合在计算机可读介质中实现以上各个实施方式可。对于硬件实现而言,可以在专用集成电路(ASIC:application specific integrated circuit)、数字信号处理器(DSP)、数字信号处理器件(DSPS)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计为执行这里所述的功能的其它电子单元中的一个或更多个或它们的选择性组合中实现这里描述的各实施方式。
对于软件实现而言,可以利用分别执行这里所述的一个或更多个功能和操作的单独软件模块(例如,程序和功能)来实现这里描述的实施方式。软件代码可以通过以任意合适的编程语言写成的软件应用程序实现,并可以存储在存储器(例如,存储器160)中,并由控制器或处理器(例如,控制器180)执行。
另外,移动终端100可以以各种不同构造实现。这些构造的示例包括折叠型、滑盖型、直板型、旋转型、旋盖型和它们的组合。移动终端还可以是移动电话、用户设备、智能电话、计算机、数字广播终端、个人数字助理、便携式多媒体播放器(PMP)、导航装置等。
由于在不脱离本发明的特征的情况下可以以多种形式来实现这些示例性实施方式,因此本领域技术人员应当明白,上述实施方式不受以上描述中的任意细节的限制,除非另外指出,否则应该在所附权利要求所限定的范围内进行宽泛的解释。因此,所附权利要求旨在涵盖落入权利要求范围或其等同范围内的各种改进和变型。
Claims (26)
1.一种移动终端,该移动终端包括:
输入单元,其被构造为从第一用户接收与至少第二用户执行视频呼叫通信的指令;
显示单元;
语音识别模块,其被构造为识别在所述第一用户和第二用户之间的所述视频呼叫通信期间进行的输入语音陈述;以及
控制器,其被构造为基于来自所述第一用户的指令来进行所述第一用户和第二用户之间的所述视频呼叫通信,控制所述显示单元以显示所述第一用户和第二用户的图像,通过检查由所述语音识别模块识别的语音陈述来检测来自指定所述第二用户的所述第一用户的语音陈述,并基于所检测到的来自所述第一用户的语音陈述,相比于所述第一用户的图像强调显示所述第二用户的图像。
2.根据权利要求1所述的移动终端,其中所述控制器还被构造为通过以下中的至少一种方式来强调显示所述第二用户的图像:1)增加所述第二用户的显示图像的大小,2)将所述第二用户的显示图像移动到所述显示单元的画面的中部,以及3)闪烁或闪动所述第二用户的显示图像。
3.根据权利要求1所述的移动终端,其中所述输入单元还被构造为经由以下中的至少一种方式从所述第一用户接收与所述至少第二用户进行视频呼叫通信的指令:1)由所述语音识别模块识别的语音指令,2)在所述显示单元的触摸屏上进行的触摸操作,3)通过所述移动终端所包括的麦克风输入的外部声音,以及4)对所述移动终端施加的并由所述移动终端的检测单元检测到的手势动作。
4.根据权利要求3所述的移动终端,其中所述控制器还被构造为控制所述显示单元以显示包括多媒体主菜单选项的多个菜单选项,所述检测单元还被构造为检测向所述多媒体主菜单选项移动的手势,并且所述控制器还被构造为显示包括用于与所述至少第二用户进行视频呼叫通信的选项的多个子菜单选项,并且当选择用于执行所述视频呼叫通信的所述选项时执行该视频呼叫通信。
5.根据权利要求3所述的移动终端,其中当所述控制器不能准确地检测来自所述第一用户的、与至少第二用户进行视频呼叫通信的语音指令时,所述控制器还被构造为输出请求所述第一用户明确所述语音指令以进行所述视频呼叫通信的信息。
6.根据权利要求1所述的移动终端,其中所述输入单元还被构造为从所述第一用户接收向所述视频呼叫通信添加第三用户的指令,并且所述控制器还被构造为与所述第一用户、第二用户和第三用户进行所述视频呼叫通信,并控制所述显示单元以与所述第一用户和第二用户的图像一起显示所述第三用户的图像。
7.根据权利要求6所述的移动终端,其中所述控制器还被构造为通过检查在所述视频呼叫通信期间输入的语音陈述来确定所述第一用户、第二用户和第三用户中的哪一个正在被通话,并强调显示所确定的所述第一用户、第二用户和第三用户中的一个用户的图像。
8.根据权利要求1所述的移动终端,其中所述控制器还被构造为控制所述显示单元以显示多个选项,所述第一用户能够选择所述多个选项以指定所述控制器如何强调显示所述第二用户的图像。
9.根据权利要求1所述的移动终端,其中所述控制器还被构造为确定所述第一用户何时输入与所述移动终端上的具体功能相关并且对所述第二用户指定的功能指令,并基于所输入的功能指令来针对所述第二用户自动执行所述具体功能。
10.根据权利要求9所述的移动终端,其中所述具体功能包括对所述第二用户的消息传输功能和文件传输功能中的至少一种功能。
11.根据权利要求9所述的移动终端,其中所述控制器还被构造为与对所述第二用户指定的具体功能一起将所述第二用户的图像显示为缩略图或具有所述具体功能的背景图片。
12.根据权利要求1所述的移动终端,其中所述第一用户和第二用户的显示图像包括所述第一用户和第二用户的实际图像和所述第一用户和第二用户的替代图像中的一种。
13.根据权利要求1所述的移动终端,其中所述控制器还被构造为仅在所述视频呼叫通信期间激活所述语音识别模块,并在所述视频呼叫通信结束时终止所述语音识别模块。
14.一种控制移动终端的方法,该方法包括以下步骤:
接收步骤,从第一用户接收与至少第二用户执行视频呼叫通信的指令;
识别步骤,识别在所述第一用户和第二用户之间的所述视频呼叫通信期间进行的输入语音陈述;
执行视频呼叫通信的步骤,基于来自所述第一用户的指令来进行所述第一用户和第二用户之间的所述视频呼叫通信;
显示步骤,显示所述第一用户和第二用户的图像;
检测步骤,通过检查由语音识别模块识别的所述语音陈述来检测来自指定所述第二用户的所述第一用户的语音陈述;以及
强调显示步骤,基于所检测到的来自所述第一用户的语音陈述,相比于所述第一用户的图像强调显示所述第二用户的图像。
15.根据权利要求14所述的方法,其中所述强调显示步骤通过以下中的至少一种方式来强调显示所述第二用户的图像:1)增加所述第二用户的显示图像的大小,2)将所述第二用户的显示图像移动到所述显示单元的画面的中部,以及3)闪烁或闪动所述第二用户的显示图像。
16.根据权利要求14所述的方法,其中所述接收步骤经由以下中的至少一种方式从所述第一用户接收与所述至少第二用户进行视频呼叫通信的指令:1)由所述识别步骤识别的语音指令,2)在所述移动终端的触摸屏上进行的触摸操作,3)通过所述移动终端所包括的麦克风输入的外部声音,以及4)对所述移动终端施加的并由所述移动终端的检测单元检测到的手势动作。
17.根据权利要求16所述的方法,该方法还包括:
显示包括多媒体主菜单选项的多个菜单选项;
检测向所述多媒体主菜单选项移动的手势,以及
显示包括用于与所述至少第二用户进行视频呼叫通信的选项的多个子菜单选项;
其中所述执行步骤在选择了用于执行视频呼叫通信的所述选项时执行该视频呼叫通信。
18.根据权利要求16所述的方法,其中当所述检测步骤不能准确地检测来自所述第一用户的、与至少第二用户进行视频呼叫通信的语音指令时,所述方法还包括输出请求所述第一用户明确所述语音指令以进行所述视频呼叫通信的信息。
19.根据权利要求14所述的方法,其中所述接收步骤还包括从所述第一用户接收向所述视频呼叫通信添加第三用户的指令,并且
其中所述执行步骤执行与所述第一用户、第二用户和第三用户的视频呼叫通信,并且所述显示步骤还包括与所述第一用户和第二用户的图像一起显示所述第三用户的图像。
20.根据权利要求19所述的方法,该方法还包括:
通过检查在所述视频呼叫通信期间输入的语音陈述来确定所述第一用户、第二用户和第三用户中的哪一个正在被通话,
其中所述强调显示步骤还包括强调显示所确定的所述第一用户、第二用户和第三用户中的一个用户的图像。
21.根据权利要求14所述的方法,该方法还包括:
显示多个选项,所述第一用户能够选择所述多个选项以指定所述强调显示步骤如何强调显示所述第二用户的图像。
22.根据权利要求14所述的方法,该方法还包括:
确定所述第一用户何时输入与所述移动终端上的具体功能相关并且对所述第二用户指定的功能指令;以及
基于所输入的功能指令来针对所述第二用户自动执行所述具体功能。
23.根据权利要求22所述的方法,其中所述具体功能包括对所述第二用户的消息传输功能和文件传输功能中的至少一种功能。
24.根据权利要求22所述的方法,该方法还包括:
与对所述第二用户指定的具体功能一起将所述第二用户的图像显示为缩略图或具有所述具体功能的背景图片。
25.根据权利要求14所述的方法,其中所述第一用户和第二用户的显示图像包括所述第一用户和第二用户的实际图像和所述第一用户和第二用户的替代图像中的一种。
26.根据权利要求14所述的方法,该方法还包括:
仅在所述视频呼叫通信期间激活在所述移动终端上包括的所述语音识别模块,并在所述视频呼叫通信结束时终止所述语音识别模块。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020080040550 | 2008-04-30 | ||
KR1020080040550A KR101462930B1 (ko) | 2008-04-30 | 2008-04-30 | 이동 단말기 및 그 화상통화 제어방법 |
KR10-2008-0040550 | 2008-04-30 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101572953A CN101572953A (zh) | 2009-11-04 |
CN101572953B true CN101572953B (zh) | 2012-09-19 |
Family
ID=40903345
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009100034079A Expired - Fee Related CN101572953B (zh) | 2008-04-30 | 2009-01-12 | 移动终端和控制移动终端的视频呼叫的方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8233025B2 (zh) |
EP (1) | EP2114073B8 (zh) |
KR (1) | KR101462930B1 (zh) |
CN (1) | CN101572953B (zh) |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8706169B2 (en) * | 2006-12-28 | 2014-04-22 | Yahoo! Inc. | Interface overlay |
KR20090107365A (ko) * | 2008-04-08 | 2009-10-13 | 엘지전자 주식회사 | 이동 단말기 및 그 메뉴 제어방법 |
JP5223824B2 (ja) * | 2009-09-15 | 2013-06-26 | コニカミノルタビジネステクノロジーズ株式会社 | 画像送信装置、画像送信方法および画像送信プログラム |
US8375316B2 (en) * | 2009-12-31 | 2013-02-12 | Verizon Patent And Licensing Inc. | Navigational transparent overlay |
KR101735610B1 (ko) * | 2010-05-06 | 2017-05-15 | 엘지전자 주식회사 | 영상표시장치의 동작 방법 |
US20110306325A1 (en) * | 2010-06-10 | 2011-12-15 | Rajesh Gutta | Streaming video/audio from mobile phone to any device |
WO2012007034A1 (en) * | 2010-07-13 | 2012-01-19 | Nokia Corporation | Sending and receiving information |
KR101166651B1 (ko) * | 2010-11-29 | 2012-07-18 | 엘지이노텍 주식회사 | 위치정보 제공방법 및 위치정보 제공시스템 |
KR20130080937A (ko) * | 2012-01-06 | 2013-07-16 | 삼성전자주식회사 | 플랙서블 디스플레이를 구비하는 단말장치의 화면 표시장치 및 방법 |
JP6248930B2 (ja) | 2012-07-13 | 2017-12-20 | ソニー株式会社 | 情報処理システムおよびプログラム |
CN104641410A (zh) | 2012-11-30 | 2015-05-20 | 日立麦克赛尔株式会社 | 影像显示装置,及其设定变更方法,设定变更程序 |
CN103870106B (zh) * | 2012-12-14 | 2017-09-01 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
KR20140078258A (ko) * | 2012-12-17 | 2014-06-25 | 한국전자통신연구원 | 대화 인식을 통한 이동 단말 제어 장치 및 방법, 회의 중 대화 인식을 통한 정보 제공 장치 |
KR101453979B1 (ko) * | 2013-01-28 | 2014-10-28 | 주식회사 팬택 | 음성 명령에 의한 데이터 송수신 방법, 단말 및 시스템 |
US9104241B2 (en) | 2013-07-17 | 2015-08-11 | Tangome, Inc. | Performing multiple functions by a mobile device during a video conference |
CN103456299B (zh) * | 2013-08-01 | 2016-06-15 | 百度在线网络技术(北京)有限公司 | 一种控制语音识别的方法和装置 |
CN105094957A (zh) * | 2015-06-10 | 2015-11-25 | 小米科技有限责任公司 | 视频会话窗口控制方法及装置 |
JP2017146437A (ja) * | 2016-02-17 | 2017-08-24 | 本田技研工業株式会社 | 音声入力処理装置 |
CN109689000B (zh) * | 2016-09-12 | 2021-05-28 | 株式会社富士 | 介助装置 |
CN106604151A (zh) * | 2016-12-28 | 2017-04-26 | 深圳Tcl数字技术有限公司 | 视频聊天方法及装置 |
CN107277422B (zh) * | 2017-07-27 | 2020-07-03 | 北京小米移动软件有限公司 | 视频通话方法、装置及系统 |
WO2020040517A1 (en) * | 2018-08-20 | 2020-02-27 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
KR102166841B1 (ko) * | 2018-11-26 | 2020-10-16 | 한국전자기술연구원 | 영상 화질 개선 시스템 및 그 방법 |
US11636438B1 (en) | 2019-10-18 | 2023-04-25 | Meta Platforms Technologies, Llc | Generating smart reminders by assistant systems |
US11567788B1 (en) | 2019-10-18 | 2023-01-31 | Meta Platforms, Inc. | Generating proactive reminders for assistant systems |
US11159767B1 (en) * | 2020-04-07 | 2021-10-26 | Facebook Technologies, Llc | Proactive in-call content recommendations for assistant systems |
KR20220083960A (ko) | 2020-12-12 | 2022-06-21 | 임승현 | 내담자들과 심리상담사를 이어주어, 화상 사이버상담을 하는 사업 ‘마음속말’ |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2776457B1 (fr) * | 1998-03-23 | 2000-04-28 | France Telecom | Systeme de visioconference multipoint a presence permanente |
US6493020B1 (en) * | 2000-06-01 | 2002-12-10 | X10 Wireless Technology, Inc. | Television video phone |
US6931113B2 (en) * | 2002-11-08 | 2005-08-16 | Verizon Services Corp. | Facilitation of a conference call |
WO2007052100A2 (en) * | 2005-02-15 | 2007-05-10 | Dspv, Ltd. | System and method of user interface and data entry from a video call |
JP4957119B2 (ja) * | 2006-08-11 | 2012-06-20 | 富士通東芝モバイルコミュニケーションズ株式会社 | 情報処理装置 |
US8503653B2 (en) * | 2008-03-03 | 2013-08-06 | Alcatel Lucent | Method and apparatus for active speaker selection using microphone arrays and speaker recognition |
-
2008
- 2008-04-30 KR KR1020080040550A patent/KR101462930B1/ko active IP Right Grant
- 2008-12-04 EP EP08021074.3A patent/EP2114073B8/en not_active Not-in-force
- 2008-12-22 US US12/341,285 patent/US8233025B2/en active Active
-
2009
- 2009-01-12 CN CN2009100034079A patent/CN101572953B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US8233025B2 (en) | 2012-07-31 |
EP2114073A3 (en) | 2010-12-08 |
KR20090114749A (ko) | 2009-11-04 |
US20090273659A1 (en) | 2009-11-05 |
KR101462930B1 (ko) | 2014-11-19 |
EP2114073B8 (en) | 2018-10-31 |
CN101572953A (zh) | 2009-11-04 |
EP2114073A2 (en) | 2009-11-04 |
EP2114073B1 (en) | 2018-09-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101572953B (zh) | 移动终端和控制移动终端的视频呼叫的方法 | |
JP5481058B2 (ja) | 移動端末機及びそのメニュー制御方法 | |
CN101350905B (zh) | 移动终端和在其中创建多媒体内容的方法 | |
KR101427268B1 (ko) | 이동 단말기 및 그의 전화 연결 방법 | |
KR101466027B1 (ko) | 이동 단말기 및 그 통화내용 관리 방법 | |
CN101557432B (zh) | 移动终端及其菜单控制方法 | |
US9125029B2 (en) | Mobile terminal and method for receiving an incoming call | |
KR101413473B1 (ko) | 이동 단말기 및 그의 키 입력 방법 | |
CN101552839B (zh) | 使用其中的即时消息服务进行对话的终端及方法 | |
CN101355757B (zh) | 无线终端及其中处理呼叫信号的方法 | |
CN101384040B (zh) | 移动终端显示消息的方法及使用该方法的移动终端 | |
CN103491225A (zh) | 移动终端及其控制方法 | |
KR101521909B1 (ko) | 이동 단말기 및 그 메뉴 제어방법 | |
CN110268746A (zh) | 小区切换方法及装置、切换配置方法及装置和用户设备 | |
KR101873762B1 (ko) | 이동단말기 및 그 제어방법 | |
KR101501999B1 (ko) | 이동단말기 및 그 충전 알람 방법 | |
KR101421163B1 (ko) | 이동 단말기 및 그의 전화 통화 제어방법 | |
KR101667702B1 (ko) | 이동 단말기 및 그 제어 방법 | |
KR101435819B1 (ko) | 통신 단말기 및 이것의 동작 제어 방법 | |
KR101405940B1 (ko) | 통신 단말기 및 이것의 메시지 송신 방법 | |
KR101435821B1 (ko) | 이동 단말기 및 이동 단말기의 영상 통화 제어방법 | |
KR101435818B1 (ko) | 이동 통신 단말기 및 이를 이용한 통신 방법 | |
KR101495167B1 (ko) | 이동 단말기 및 그 키패드 표시 방법 | |
KR101422027B1 (ko) | 단말기 및 이것의 방송 제어 방법 | |
KR20100002761A (ko) | 이동통신 단말기 및 이를 이용한 호 처리 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120919 |