CN103941959B - 电子设备以及其控制方法 - Google Patents
电子设备以及其控制方法 Download PDFInfo
- Publication number
- CN103941959B CN103941959B CN201410030729.3A CN201410030729A CN103941959B CN 103941959 B CN103941959 B CN 103941959B CN 201410030729 A CN201410030729 A CN 201410030729A CN 103941959 B CN103941959 B CN 103941959B
- Authority
- CN
- China
- Prior art keywords
- text
- controller
- electronic equipment
- input
- object indicator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000006243 chemical reaction Methods 0.000 claims description 40
- 230000005236 sound signal Effects 0.000 claims description 10
- 238000003780 insertion Methods 0.000 claims description 3
- 230000037431 insertion Effects 0.000 claims description 3
- 230000015654 memory Effects 0.000 description 20
- 238000004891 communication Methods 0.000 description 18
- 230000000875 corresponding effect Effects 0.000 description 12
- 230000000694 effects Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000010295 mobile communication Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 230000001276 controlling effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000003321 amplification Effects 0.000 description 3
- 230000005611 electricity Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000003199 nucleic acid amplification method Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000010409 thin film Substances 0.000 description 2
- PCTMTFRHKVHKIS-BMFZQQSSSA-N (1s,3r,4e,6e,8e,10e,12e,14e,16e,18s,19r,20r,21s,25r,27r,30r,31r,33s,35r,37s,38r)-3-[(2r,3s,4s,5s,6r)-4-amino-3,5-dihydroxy-6-methyloxan-2-yl]oxy-19,25,27,30,31,33,35,37-octahydroxy-18,20,21-trimethyl-23-oxo-22,39-dioxabicyclo[33.3.1]nonatriaconta-4,6,8,10 Chemical compound C1C=C2C[C@@H](OS(O)(=O)=O)CC[C@]2(C)[C@@H]2[C@@H]1[C@@H]1CC[C@H]([C@H](C)CCCC(C)C)[C@@]1(C)CC2.O[C@H]1[C@@H](N)[C@H](O)[C@@H](C)O[C@H]1O[C@H]1/C=C/C=C/C=C/C=C/C=C/C=C/C=C/[C@H](C)[C@@H](O)[C@@H](C)[C@H](C)OC(=O)C[C@H](O)C[C@H](O)CC[C@@H](O)[C@H](O)C[C@H](O)C[C@](O)(C[C@H](O)[C@H]2C(O)=O)O[C@H]2C1 PCTMTFRHKVHKIS-BMFZQQSSSA-N 0.000 description 1
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000007664 blowing Methods 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 230000005672 electromagnetic field Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 230000003387 muscular Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 239000007921 spray Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02G—INSTALLATION OF ELECTRIC CABLES OR LINES, OR OF COMBINED OPTICAL AND ELECTRIC CABLES OR LINES
- H02G3/00—Installations of electric cables or lines or protective tubing therefor in or on buildings, equivalent structures or vehicles
- H02G3/02—Details
- H02G3/08—Distribution boxes; Connection or junction boxes
- H02G3/086—Assembled boxes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
- G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
- G06F3/0233—Character input methods
- G06F3/0236—Character input methods using selection techniques to select from displayed items
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02G—INSTALLATION OF ELECTRIC CABLES OR LINES, OR OF COMBINED OPTICAL AND ELECTRIC CABLES OR LINES
- H02G3/00—Installations of electric cables or lines or protective tubing therefor in or on buildings, equivalent structures or vehicles
- H02G3/02—Details
- H02G3/08—Distribution boxes; Connection or junction boxes
- H02G3/081—Bases, casings or covers
- H02G3/083—Inlets
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02G—INSTALLATION OF ELECTRIC CABLES OR LINES, OR OF COMBINED OPTICAL AND ELECTRIC CABLES OR LINES
- H02G3/00—Installations of electric cables or lines or protective tubing therefor in or on buildings, equivalent structures or vehicles
- H02G3/02—Details
- H02G3/08—Distribution boxes; Connection or junction boxes
- H02G3/16—Distribution boxes; Connection or junction boxes structurally associated with support for line-connecting terminals within the box
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02G—INSTALLATION OF ELECTRIC CABLES OR LINES, OR OF COMBINED OPTICAL AND ELECTRIC CABLES OR LINES
- H02G3/00—Installations of electric cables or lines or protective tubing therefor in or on buildings, equivalent structures or vehicles
- H02G3/02—Details
- H02G3/08—Distribution boxes; Connection or junction boxes
- H02G3/18—Distribution boxes; Connection or junction boxes providing line outlets
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Civil Engineering (AREA)
- Architecture (AREA)
- Structural Engineering (AREA)
- Acoustics & Sound (AREA)
- Artificial Intelligence (AREA)
- User Interface Of Digital Computer (AREA)
- Document Processing Apparatus (AREA)
- Telephone Function (AREA)
Abstract
电子设备以及控制该电子设备的方法。一种电子设备包括触摸屏、语音识别模块以及控制器。所述控制器被配置为:当语音识别模块被激活时,通过该语音识别模块接收语音输入;将语音输入转换成文本;显示用于对所述文本中包含的预设词进行编辑的对象指示符;接收对所述对象指示符的选择;在触摸屏上提供用于将所显示的对象指示符改变为要显示的新文本的编辑选项;以及当选择编辑选项时显示新文本。
Description
技术领域
本发明总体上涉及一种配备有语音识别功能的电子设备,并且更具体地,涉及在电子设备上对语音识别结果进行编辑。
背景技术
随着与包括移动终端在内的各种电子设备有关的硬件和软件技术的飞速发展,电子设备可以高速地向用户提供各种信息。
具体地,为了在电子设备上执行各种功能,用户需要记住复杂的按键顺序和菜单层次结构并输入这些键。然而,记住多个按键顺序和菜单层次非常费时,并且在通过按下预定键来激活期望的功能时存在一些困难。
相关技术的电子设备没有提供简单且直观的方式来编辑文本和图形。因此,需要开发这样一种用户接口,该用户接口允许配备有语音识别功能的电子设备识别用户的语音,以各种方式来编辑用户的语音,并且对它进行应用。
发明内容
本发明的一个方面在于提供一种电子设备,其用于减少或消除与具有触摸屏的电子设备的用户接口相关联的前述问题。
本发明的另一个方面在于提供一种电子设备以及控制该电子设备的方法,该电子设备用于以更加方便的方式来编辑语音识别结果并且对结果进行应用。
本发明的实施方式提供了一种电子设备,该电子设备包括:触摸屏;语音识别模块;以及控制器,所述控制被配置为当所述语音识别模块已被激活时通过该语音识别模块接收语音输入;将所述语音输入转换成文本;以及当在所述触摸屏上显示转换的文本的同时识别出预设词时,在识别出所述预设词的位置处显示用于对所述预设词进行编辑的引导的对象。
所述预设词可以包括与长音节、清音和难以通过语音输入表达的声音信号(例如,从用户输入的用于执行特定操作的声信号)、名词和动词中的至少一个相对应的词。
所述控制器可以被配置为在所述触摸屏上将所述对象显示预定时间量。
所述控制器被配置为在所述预定时间量过去之后从所述触摸屏删除所述对象。
所述控制器可以被配置为在接收到用于选择所述对象的输入时在所述触摸屏上的识别出所述预设词的所述位置处显示包含可以被插入的符号、特殊字符和图形对象中的至少一个的窗口。
用于选择所述对象的所述输入可以包括通过对所述对象的多点触摸而导致的缩小输入,并且所述控制器可以被配置为在经转换的文本的第一个词与第二个词之间的位置处接收到所述缩小输入时扩大所述第一个词与所述第二个词之间的空间并且在扩大的空间中插入所述符号、所述特殊字符和所述图形对象中的至少一个。
所述控制器可以被配置为根据预定的优先次序在所述窗口中布置并显示所述符号、所述特殊字符和所述图形对象中的至少一个。
所述符号、所述特殊字符和所述图形对象都可以由对应的索引指示,并且所述控制器还可以被配置为在接收到指示所述索引的语音输入时编辑与所述索引相对应的所述文本。
所述控制器可以被配置为当接收到所述对象上的预定触摸输入时自动完成可以在显示所述对象的位置处被插入的字符。
所述控制器可以被配置为在将要通过所述自动完成插入多个字符的情况下在所述触摸屏上显示多个候选词。
所述控制器可以被配置为进入用于将所述语音输入转换成文本的模式,在该模式中激活所述语音识别模式,并且在接收到用于选择转换的文本的至少一部分的触摸输入时停用所述语音识别模式并且进入对所选择的文本部分进行编辑的模式。
所述控制器可以被配置为根据接收到的语音输入的模式来修改所述对象的属性。
本发明的另一个方面提供了一种控制电子设备的方法,该方法包括如下步骤:激活语音识别模块;通过所述语音识别模块接收语音输入;将所述语音输入转换成文本;以及当在触摸屏上显示转换的文本的同时识别出预设词时,在识别出所述预设词的位置处显示用于对所述预设词进行编辑的对象。
其它实施方式的细节被包括在详细描述和附图中。
附图说明
附图被包括在本说明书中以提供对本发明所描述的实施方式的进一步理解,并结合到本说明书中且构成本说明书的一部分,附图示出了本发明的实施方式,且与说明书一起用于解释本发明的各个方面和特征。
图1是根据本发明实施方式的移动终端的框图。
图2是例示接近传感器的接近深度的图。
图3是根据本发明实施方式的控制电子设备的方法的流程图。
图4和图5是例示当识别出预设词时显示作为用于编辑文本的引导的对象的示例的图。
图6和图7是例示使用图5的对象来编辑文本的示例的图。
图8至图11是例示考虑到转换的文本的属性来编辑文本的示例的图。
图12是例示显示作为用于编辑文本的引导的对象的示例的图。
图13是例示从转换的文本中选择要编辑的文本块的示例的图。
图14至图17C是例示在转换的文本的词之间插入另一个文本的示例的图。
具体实施方式
现在将参照附图更全面地描述本发明,附图中示出了本发明的示例性实施方式。但是,本发明可以具体实施为许多不同的形式并且不应被解释为限于本文所阐述的实施方式,相反,提供这些实施方式是为了使本公开将是彻底和完整的,并且将充分地向本领域技术人员传达本发明的概念。
在下文中,下面将参照附图更加详细地描述与本发明有关的移动终端。在下面的描述中,仅为了便于描述的目的给予移动终端的部件的后置语“模块”和“单元”,所述后置语不具有相互区别的含义或功能。
在本说明书中描述的移动终端可以包括蜂窝电话、智能电话、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航系统等。
参照图1,参照附图详细描述作为与本发明有关的电子设备100的示例的移动终端100。图1是根据本发明的实施方式的移动终端的框图。如本文中所使用的那样,仅为了便于公开而将后置语‘模块’和‘单元’用于各个元件。因此,没有给予这些后缀本身明显的意义或作用,并且应当理解的是,‘模块’和‘单元’可以一起使用或者互换使用。
参照图1,移动终端100包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180以及电源单元190。尽管图1示出了具有各种部件的移动终端100,但是不需要实现所有例示的部件。可以另选地实现更多或更少的部件。
无线通信单元110包括允许移动终端100与无线通信系统之间或者移动终端100与该移动终端100所在的网络之间的无线通信的一个或更多个部件。例如,无线通信单元110包括广播接收模块111、移动通信模块112、无线因特网模块113、短距离通信模块114和位置定位模块115。对于非移动的终端,无线通信单元110可以被替换为有线通信单元。无线通信单元110和有线通信单元可以统称为通信单元。
广播接收模块111经由广播频道从外部广播管理服务器接收广播信号和/或广播相关信息。广播频道可以包括卫星频道和/或地面频道。
广播管理实体可以指发送广播信号和/或广播相关信息的系统。广播管理实体可以是生成并且发送广播信号和/或广播相关信息的服务器或者是接收之前生成的广播信号和/或广播相关信息并且向移动终端100发送广播信号和/或广播相关信息的服务器。广播信号不仅可以包括TV广播信号、无线电广播信号和数据广播信号,而且还可以包括与无线电广播信号相组合的TV广播信号的形式的信号。
广播相关信息可以是与广播频道、广播节目或广播服务提供商有关的信息。广播相关信息甚至还可以经由移动通信网络来提供。在经由移动通信网络提供广播相关信息的情况下,可以经由移动通信模块112接收广播相关信息。广播相关信息的示例包括数字多媒体广播(DMB)的电子节目指南(EPG)和手持数字视频广播(DVB-H)的电子服务指南(ESG)。
广播接收模块111可以接收从各种类型的广播系统发送的广播信号。作为非限制性示例,广播系统包括地面数字多媒体广播(DMB-T)、卫星数字多媒体广播(DMB-S)、手持数字视频广播(DVB-H)、被称为仅媒体前向链路的数据广播系统和地面综合业务数字广播(ISDB-T)。广播接收模块111还可以接收多播信号。广播接收模块111接收到的广播信号和/或广播相关信息可以存储在诸如存储器160的适合的存储设备中。
移动通信模块112向移动通信网络上的基站、外部终端或服务器中的至少一个发送无线信号/从移动通信网络上的基站、外部终端或服务器中的至少一个接收无线信号。根据文本/多媒体消息的发送/接收,无线信号例如可以代表语音呼叫信号、视频呼叫信号或者各种格式的数据。
无线因特网模块113支持移动终端100的因特网接入。无线因特网模块113可以在内部或从外部耦接到移动终端100。适于无线因特网的技术包括但不限于WLAN(无线LAN)、(无线宽带)、(全球微波接入互操作性)以及HSDPA(高速下行分组接入)。在非移动的终端中,无线因特网模块113可以被替换为有线因特网模块。无线因特网模块113和有线因特网模块可以统称为因特网模块。
短距离通信模块114便于相对短距离的通信。适于短距离通信的技术包括但不限于射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)以及诸如和的联网技术。
位置定位模块115识别或者获得移动终端100的位置。位置定位模块115可以通过使用全球导航卫星系统(GNSS)来获得位置信息。GNSS是用于描述无线电导航卫星系统的术语,无线电导航卫星被配置为在围绕地球转动的同时发送能够确定它们在地球的表面上或者地球的表面的附近的位置的参考信号。GNSS包括:由美国操作的全球定位系统(GPS)、由欧洲操作的Galileo、由俄罗斯操作的全球轨道导航卫星系统(GLONASS)、由中国操作的COMPASS以及由日本操作准天顶卫星系统(QZSS:quasi-zenith satellite system)。
作为GNSS的典型示例,位置定位模块115是GPS模块。位置定位模块115可以计算与一个点或物体与至少3颗卫星之间的距离有关的信息或者与测量距离信息时的时间有关的信息,并且向所获得的距离信息应用三角测量以根据在预定时间的经度、维度和高度来获得与该点或物体有关的三维位置信息。此外,也可以使用利用三颗卫星来计算位置和时间信息并且使用另一个卫星来校正计算出的位置和时间信息的方法。位置定位模块115持续实时地计算当前位置并且基于该位置信息来计算速度信息。
继续参照图1,音频/视频(A/V)输入单元120可以被配置为向移动终端100提供音频或视频信号输入。A/V输入单元120可以包括摄像头121和麦克风122。摄像头121处理在拍摄模式或视频电话模式中由图像传感器获得的静态图片或视频的图像帧。处理后的图像帧可以在显示单元151上显示。
经过摄像头121处理的图像帧可以存储在存储器160中或者通过无线通信单元110发送到外部设备。可选地,在合适的情况下,移动终端100可以包括两个或更多个摄像头121。
麦克风122在移动终端100在诸如电话呼叫模式、记录模式和/或语音识别模式的特定模式中时接收外部音频信号。接收到的音信号被处理并转换成数字数据。在呼叫模式的情况下,处理后的数字数据转换成可经由移动通信模块112向移动通信基站发送的格式并且然后输出。此外,移动终端100特别是A/V输入单元120可以包括噪声去除算法以去除在接收外部音频信号的过程中生成的噪声。
用户输入单元130响应于相关输入设备或多个输入设备的用户操控来生成输入数据。这些设备的示例包括键区、薄膜开关(dome switch)、触摸板(静态压力/电容)、滚轮(jog wheel)以及拨动开关(jog switch)。用户输入单元130的特定示例是其中将触摸板与显示器组合的触摸屏,将在下面描述。
感测单元140提供针对移动终端100的各个方面的状态测量。例如,感测单元140可以检测移动终端100的打开或闭合状态、移动终端100的各个部件(例如,显示器和键盘)的相对定位、移动终端100或移动终端100的部件的位置变化、用户与移动终端100的接触存在与否、移动终端100的朝向和/或移动终端100的加速度/减速度。
作为示例,移动终端100可以被配置为滑盖型移动电话,其中,感测单元140可以感测移动终端100的滑动部分是打开的还是闭合的。感测单元140还可以感测电源单元190是否供电、或者接口单元170与外部设备之间的耦联或其它连接的存在与否。
输出单元150生成与视觉、听觉和触觉相关的输出。输出单元150可以包括显示单元151、音频输出模块153、告警单元153和触觉模块154。
显示单元151显示经过移动终端100处理的信息。例如,当移动终端100处于呼叫模式中时,显示单元151可以显示与呼叫相关的用户界面(UI)或图形用户界面(GUI)。如果移动终端100处于视频通信模式或拍摄模式中时,显示单元151可以显示所拍摄的和/或接收到的图像、UI或GUI。
显示单元151可以包括液晶显示器(LCD)、薄膜晶体管液晶显示器(TFT LCD)、有机发光二极管(OLED)显示器、柔性显示器或三维显示器。显示单元151可以包括这些显示器中的一种或更多种。
显示单元151可以具有透明或透光型构造(下文中称为透明显示器)。透明OLED(TOLED)是透明显示器的一个示例。显示单元151的背面构造也可以具有透光型构造。在这种构造下,用户能够经由被终端主体的显示单元151所占据的区域观看到位于该终端主体后面的物体。
可以设置至少两个显示单元151。例如,可以在移动终端100的单个表面上设置彼此分开或形成为一体的多个显示单元151。另选地,多个显示单元151中的每一个均可以设置在移动终端100的不同表面上。
如果显示单元151和用于检测触摸动作的传感器(下文中被称为‘触摸传感器’)构成被构建为相互层结构(下文中被称为‘触摸屏’),则显示单元151可以用作输入设备和输出设备。例如,触摸传感器可以包括触摸膜、触摸片或触摸板。
触摸传感器可以被配置为将施加至显示单元151的特定部分的压力或者从显示单元151的特定部分产生的静电电容的变化转换成电输入信号。触摸传感器可以检测触摸的压力以及触摸位置或触摸的大小。
如果对触摸传感器进行触摸输入,则与该触摸输入相对应的信号被传送到触摸控制器。触摸控制器处理所述信号,然后将相应的数据发送到控制器180。因此,控制器180可以确定显示单元151的哪个部分被触摸。
继续参照图1,接近传感器141可以被设置在移动终端100内以被触摸屏包围或者围绕触摸屏。接近传感器141可以在没有机械接触的情况下使用电磁场强度或红外线来检测接近特定检测表面的物体或存在于接近传感器141周围的物体。因此,接近传感器141具有比接触型传感器更长的寿命和更大的效用。
接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、镜面反射型光电传感器、无线电频率振荡型接近传感器、静电电容型接近传感器、磁接近传感器或者红外线接近传感器。如果触摸屏是静电型触摸屏,则接近传感器141可以根据指针的接近使用电场的变化来检测指针的接近,并且触摸屏(触摸传感器)可以被归类为接近传感器141。
指针接近触摸屏但不接触触摸屏(仍被识别为位于触摸屏上)的动作被称为‘接近触摸’。指针实质上触摸了触摸屏接触的动作被称为‘接触触摸’。当指针执行接近触摸时,触摸屏上被指针接近触摸的位置是指与触摸屏垂直相对的指针的位置。
接近传感器141可以检测接近触摸和/或接近触摸模式(例如,接近触摸距离、接近触摸持续时间、接近触摸位置、接近触摸移动状态)。可以将与检测到的接近触摸动作和/或检测到的接近触摸模式有关的信息输出到触摸屏上。
控制器180(图1)根据指针的接近深度和位置将接近触摸识别为各种输入信号中的一个。控制器180根据各种输入信号来执行各种操作控制。
再次参照图1,音频输出模块152可以输出例如在呼叫接收模式、呼叫拨打模式、记录模式、语音识别模式或广播接收模式中从无线通信单元110中接收到的音频数据。音频输出模块152可以输出存储在存储器160中的音频数据。音频输出模块152可以输出与移动终端100所执行的功能相关的音频信号(例如,呼叫信号接收声音、消息接收声音等)。音频输出模块152例如可以包括接收器、扬声器或蜂鸣器。
告警单元153输出用于通知与移动终端100相关联的特定事件的发生的信号。典型的事件包括呼叫信号接收、消息接收、键信号输入和触摸输入。告警单元153经由振动以及视频信号或音频信号来输出用于通知事件发生的信号。经由显示单元151输出视频信号或经由音频输出模块152输出音频信号。因此,至少可以将显示单元151或音频输出模块152视为告警单元153的一部分。
触觉模块154可以生成用户能够感觉到的各种触觉效果。振动是触觉模块154生成的代表性触觉效果。从触觉模块154生成的振动的强度和模式是可控的。例如,彼此不同的振动可以合成地输出或顺序地输出。
触觉模块154可以生成除了振动之外的各种触觉效果。例如触觉模块154可以生成由与用户的皮肤接触的垂直移动的针列造成的效果、由通过喷孔或吸孔的空气喷力或空气吸力造成的效果、掠过皮肤表面造成的效果、与电极接触造成的效果、静电力造成的效果以及利用能够吸热或放热装置的热和冷温度的施加造成的效果。
触觉模块154可以被配置为经由直接接触来提供触觉效果。触觉模块154还可以被配置为使得用户能够经由手指或手臂的用户肌肉感觉来感受触觉效果。可以根据移动终端100的配置来提供两个或更多个触觉模块154。
存储器160可以被配置为存储用于控制器180的操作的程序。存储器160可以临时存储输入/输出数据(例如,电话簿、消息、静态图像、移动图像等等)。存储器160可以存储触摸屏接收到触摸输入时以各种模式输出的振动或声音的数据。
存储器160例如可以包括:闪存存储器、硬盘、多媒体卡微型存储器、卡型存储器(例如,SD存储器、XD存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘或光盘。移动终端100可以与经由因特网执行存储器160的存储功能的网络存储器相关联地操作。
接口单元170将移动终端100与外部设备接口连接。接口单元170从外部设备接收数据。接口单元170被供应电力并且可以被配置为将所述电力传递给移动终端100内的部件。接口单元170可以被配置为使得数据能够从移动终端100向外部设备发送。接口单元170可以被配置为包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于与具有身份模块的设备连接的端口、音频输入/输出(I/O)端口、视频I/O端口或耳机端口。
身份模块是存储对移动终端100的使用权限进行验证的各种信息的芯片或卡,并且可以包括用户身份模块(UIM)、订户身份模块(SIM)和/或通用订户身份模块(USIM)等。此外,可以以智能卡的形式来制造具有上述身份模块的设备(在下文中被称为‘身份设备’)。能够经由相应的端口将身份设备连接到移动终端100。
接口单元170可以被配置成从连接到移动终端100的托架向动终端100供应电力的通道。接口单元170可以有助于向移动终端100传递用户经由托架输入的各种命令信号。经由托架输入的各种命令信号或者电力可以用作识别移动终端100被正确地安放在托架中的信号。
控制器180通常控制移动终端100的整体操作。例如,控制器180执行与语音呼叫、数据通信和视频会议相关联的控制和处理。控制器180可以包括提供多媒体回放的多媒体模块181。多媒体模块181可以被配置为控制器180的一部分,或者可以被配置为单独的部件。控制器180可以执行模式识别处理,从而将在触摸屏上执行的手写输入识别为字符和/或将在触摸屏上执行的绘图输入识别为字符或图像。
电源单元190提供移动终端100的各个部件所需的电力。所述电力可以是内部电力、外部电力或它们的组合。
可以使用软件、硬件或它们的组合在能够由计算机或类似于计算机的设备读取的记录介质内实现下面的描述中所描述的本发明的各实施方式。对于硬件实现,可以使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器或被设计为执行其它功能的电子单元中的至少一个来实现方案和实施方式。也可以由控制器180实现这些实施方式。
对于软件实现,可以以多个单独的软件模块(诸如过程和功能)来实现本文所描述的方案和实施方式,所述单独的软件模块中的每一个可以执行本文所描述的功能和操作中的至少一个。软件代码可以利用以任何适当的编程语言编写的软件应用来实现,并且软件代码可以被存储在存储器160中并由控制器180执行。
接下来,图2是例示接近传感器的接近深度的视图。如图2所示,当指针(诸如用户的手指)接近触摸屏时,位于触摸屏内部或附近的接近传感器141可以感测到指针的接近,并且可以输出接近信号。
可以将接近传感器141构成为使得该接近传感器根据接近触摸屏的指针与触摸屏之间的距离(称为“接近深度”)来输出接近信号。
指针接近触摸屏时输出接近信号的距离可以被称为检测距离。接近深度可以利用具有不同的检测距离的多个接近传感器并且通过对分别从多个接近传感器输出的接近信号进行比较来确定。
图2示出了其中可以设置能够感测三个接近深度的接近传感器的触摸屏的截面。可以在触摸屏中设置能够感测少于三个或多于四个接近深度的接近传感器。
更具体地说,当指针与触摸屏完全接触时(D0),可以将它识别为接触触摸。当指针与触摸屏相距的距离在距离D1内时,可以将其识别为第一触摸深度的接近触摸。当指针位于离开触摸屏的距离D1与距离D2之间的范围中时,可以将其识别为第二接近深度的接近触摸。
当指针位于离开触摸屏的距离D2与距离D3之间的范围中时,可以将其识别为第三接近深度的接近触摸。当指针位于离开触摸屏的大于距离D3的位置时,可以将其识别为取消接近触摸。
因此,控制器180可以根据指针相对于触摸屏的接近距离和接近位置而将接近触摸识别为各种输入信号,并且控制器810可以根据输入信号来执行各种操作控制。
在下文中,将描述本发明的示例性实施方式。
在本发明中,为了便于描述,假设显示单元151包括触摸屏151。如上所述,触摸屏151可以执行显示和输入信息两种功能。然而,本发明不限于此。此外,在本说明书中描述的触摸可以包括接触触摸和接近触摸二者。描述可以在外部设备200的显示模块230也是触摸屏的假设下进行。
接下来,图3是根据本发明实施方式的电子设备的控制方法的流程图。根据本发明实施方式的电子设备的控制方法可以由参照图1描述的电子设备100实现。
如图3所示,电子设备100的控制器180激活语音识别模块(S110)。当语音识别模块被激活后,可以接收到用户所说的语音输入(S120)。
此外,语音识别模块与图1的麦克风122连接并且通过麦克风122识别语音输入。语音识别模块可以通过执行自然语言识别应用来激活。如果该应用被执行,则麦克风122自动地启动。
语言识别模块可以与自然语言数据库连接从而识别用户表达的内容。例如,自然语言数据库确定来自用户的任何语音输入是否与存储在自然语音数据库中的文本相匹配。如果发现了匹配的语音,则用户表达的内容被视为存储在该数据库中的文本的内容。
在语音识别模块被激活之后接收到的语音输入可以包括用户讲话的语音和存储在电子设备100中的音频文件。之后,控制器180可以将在语音识别模块处于激活状态时实时识别的语音输入转换成文本,并且在触摸屏151上显示转换的文本。
控制器180确定转换的文本是否是预设词(S140)。如果在触摸屏151上显示的转换的文本中存在预设词(S140:是),则控制器180可以接着在识别出预设词的位置处显示作为用于编辑该预设词的引导的对象(S150)。
如在本文所使用的那样,预设词可以由用户预先设置。例如,如果用户的实时语音输入是长音节,则可以基于预设词来识别和编辑该长音节。此外,如果预设词是讲话的特定部分,则可以执行与该讲话的部分相关的编辑。
预设词不限于前述的延长的声音或讲话的特定部分。例如,如果识别出由用户预设的特定字母、符号和特定字符等,控制器180进行操作以根据本发明的实施方式执行编辑。
此外,如果通过语音识别模块识别出难以转换成文本的清音(voiceless sound)、掌声等,则控制器180可以进入对当前转换中的文本进行编辑的模式。同时,因为清音或掌声不能被转换成文本,所以控制器180可以用符号来替换清音或掌声并且显示所述符号。
控制器180还可以通过对作为用于编辑转换的文本的引导的对象进行操控来编辑转换的文本。所述对象可以以指示要被编辑的文本被在的位置的光标的形式显示在触摸屏151上。所述对象还可以显示为图形对象。
此外,所述对象的形状可以通过用户的触摸输入而修改。例如,在显示了具有预定宽度的对象之后,可以通过用户的缩小输入来增加该对象的宽度。对象可以在触摸屏151上显示预定时间量,并且该对象可以在经过了预定时间量之后自动从触摸屏151消失。
即,在对象显示在触摸屏151上时,文本编辑模式被视为活跃的。因此,当对象从触摸屏151消失时,控制器180可以从文本编辑模式切换回到语音输入模式。
根据上述实施方式,当实时地将用户所说的语音输入转换成文本时,电子设备100可以通过用户的触摸输入实时地编辑转换的文本。同时,电子设备100可以通过经由语音输入来输入字符并且以各种方式修改输入的字符来发送文本消息,这相比于现有技术的字符输入方法是有利的。
当用户的语音输入转换成文本后,控制器180可以考虑上下文感知,诸如用户的语音模式、情感、语调、语音时间、地点等。因此,根据本发明的实施方式,在对用户所说的语音进行转换时,上下文可以自动或者由用户手动地应用于转换后的文本。
尽管已经针对文本编辑描述了根据本发明的实施方式的上下文应用的示例,本发明不限于此而是可以进行各种修改。
接下来,图4和图5是例示当预设词被识别出时显示作为用于编辑文本的引导的对象的示例的视图。参照图4,当语音识别模块被激活时,控制器180在触摸屏151的区域中显示用于检测用户所说的语音输入的用户界面,例如,麦克风状的图形对象10和指示语音正在被输入的对象11。
控制器180接收用户所说的语音,将所述语音转换成文本,并且在触摸屏151上显示转换后的文本ST。当在语音中识别出拖长的声音T1时,控制器180显示用于自动或手动编辑长音节(例如,图4中的)的对象OB,使得在所识别的长音节后面显示所述对象OB,如图5所示。
具体地说,当特定字符难以被用户的语音输入时,或者当预设长音节被说出时,控制器180在长音节附近显示可以被使用或选择以将长音节更改为其它字符的对象OB。此外,可以通过操控对象OB来插入或修改期望的字符、字母等。
接下来,图6和图7是例示使用图5的对象来编辑文本的示例的图。参照图6,当通过用户的语音输入长音节时,控制器180在从用户的语音转换而来的文本ST旁边显示对象OB。然后,当接收到用于选择对象OB的输入时,控制器180在触摸屏151上显示用于替换长音节或要在长音节之后插入的候选符号或候选字符的列表L。
控制器180可以监视用户频繁使用的特定字符、字符输入模式等,并且以累积的方式将用户的字符输入模式转换成数据。控制器180可以参照用户的字符输入模式来推荐要插入到对象OB中的候选符号或候选字符。
如上所述,列表L可以包括难以通过用户的语音输入来输入的特定字符、符号和预定的图形对象。列表L中的符号和字符可以用数据进行索引。例如,波浪号“~”可以用数字“1”进行索引,星号“*”可以用数字“2”进行索引,并且星星可以用数字“3”进行索引。其它的符号和字符可以同样地用数字“4”、“5”、“6”、“7”和“8”进行索引。
参照图6,当在触摸屏151上显示列表L时,并且在控制器180接收包括数字索引的语音输入的情况下,控制器180用与数字相对应的符号或字符来替换对象OB。
可以按照上述来自用户的语音输入方法之外的各种方式来实现选择列表L中的符号或字符的方法。例如,用户可以选择电子设备100上的硬键或触摸屏151上显示的软键按钮。
参照图7,如果用户说出图6中的数字“1”,则与“1”相对应的波浪号“~”T2替换了对象OB。即,根据本发明的实施方式,即使难以通过用户的语音接收的特殊符号或字符也可以更加方便地输入为文本。
根据本发明的实施方式,如果用户所说的内容是“Joo hyun i波浪号”,则控制器180可以将所说的内容中与“Joo hyun i”相对应的部分转换成文本并且将与“波浪号”相对应的其它部分自动转换成与该波浪号相对应的符号“~”。
接下来,图8至图11是例示考虑转换的文本的属性来编辑文本的示例的图。根据本发明的实施方式,当考虑用户的字符输入模式而将用户的语音转换成文本时,如果转换的文本与频繁使用的模式的字符相同,则控制器1800可以通过控制作为用于编辑文本的引导的上述对象OB而对文本进行编辑。通过以预设程序连续地监视用户的字符输入模式并且将所监视的结果存储到数据库中来获得频繁使用的模式的字符。
由程序监视的字符输入模式可以包括在特殊词之后输入的特殊字符、符号等。要监视的其它事情可以包括特定词语的频度。
例如,参照图8,在将用户的发声转换成文本并且实时地显示在触摸屏151上的同时,控制器180接收到由用户所说的特定词,并且在识别出该特定词(例如,“Young-Su”)后就立即在该特定词之后显示作为用于对文本进行编辑的引导的对象OB。
另外,可以设置用于引导文本编辑的多个对象OB。即,参照图9,如果单词“Young-Su”和“is good”是预设词,则控制器180可以将所述词分别匹配到与作为用于对文本进行编辑的引导的对象OB。即,可以显示用于编辑“Young-Su”的第一对象OB1,并且可以显示用于编辑“is good”的第二对象OB2。
还可以顺序地显示第一对象OB1和第二对象OB2。此外,当在触摸屏151上显示了预定时间量之后,第一对象OB1和第二对象OB2都可以自动消失。如果在显示对象之后经过了预定时间量,则当没有针对对象的触摸输入时,所述对象可以从触摸屏151自动消失。
参照图10,当接收到用于对显示在转换的文本ST中的预设词中的特定一个词的附近的对象OB进行选择的触摸输入时,控制器180可以在触摸屏151上显示包括用于替换对象OB的候选项的列表L。
可以根据将使用频度考虑在内的预定优先次序来排列并显示列表L。此外,当从列表L中所示的至少一项中选择了任一项时,控制器180使用所选择的项C1来替换对象OB,如图11所示。
接下来,图12是例示显示作为用于编辑文本的引导的对象的示例的图。参照图12,当用户的语音实时地转换成文本并显示在触摸屏151上时,并且如果预定的事件出现在文本中,则控制器180可以在触摸屏151上显示作为用于对转换的文本进行编辑的引导的对象OB。
预定事件可以包括识别出预设词时、或者控制器180在用户的语音被输入并转换成文本后通过接收预定输入而进入STT(语音到文本)模式时、或者在通过语音识别模块识别的用户语音被实时转换成文本并显示在触摸屏上时在显示之前的文本之后在预定的时间量内不存在额外的语音输入时。
在用户的语音输入之后显示对转换的文本进行编辑的对象的预定事件不限于上述示例。
另外,在转换的文本附近显示对象OB之后,控制器180可以在经过了预定的时间量之后自动删除作为用于对文本进行编辑的引导的对象OB。
一旦在触摸屏151上显示了对象OB,控制器180就可以临时地停止语音识别模式。即,当由于操控对象OB而停止了语音识别模式时,控制器180可以编辑转换的文本。另一方面,如果对象OB从触摸屏151消失,则控制器180可以自动地进入语音识别模式,接收用户的语音输入,并且对语音输入进行识别。
接下来,图13是例示从转换的文本中选择要编辑的文本块的示例的图。参照图13,控制器180接收对与从用户的语音转换来的文本ST的至少一些词的触摸输入。控制器180也可以形成包含与接收到触摸输入的位置相对应的词的文本块。
例如,图13中的接收到触摸输入的位置是“Gye”,并且控制器180识别包含“Gye”的“Dan Gye’s”作为单个文本块并且在每个文本块的基础上对它进行编辑。即,控制器180可以通过在所形成的文本块上实现前述实施方式,将用户的语音转换成文本并实时编辑文本。
接下来,图14至图17C是例示在转换的文本的词之间插入另一个文本的示例的图。具体地说,根据本发明的实施方式,可以通过多点触摸输入来编辑从用户的语音输入转换来的文本。
即,多点触摸输入可以是缩小输入或放大输入。多点触摸输入还可以插入在转换的文本中的特定词之间。此外,通过在特定词中的一个与另一个特定词之间插入多点触摸输入的用户界面,可以通过特定的用户操控对用户的语音输入进行恰当的编辑。
参照图14,控制器180接收缩小输入以扩大转换的文本ST中的第一个词“Dan”与第二个词“Gye”之间的空间。当接收到转换的文本ST的一些部分上的多点触摸输入时,控制器180终止语音识别模式并进入文本编辑模式。
参照图15A,响应于缩小输入,控制器180将作为用于对文本进行编辑的引导的对象OB插入在第一个词与第二个词之间的空间中。而且,控制器180可在触摸屏151上显示用户界面31,该用户界面31用于输入要插入在第一个词与第二个词之间的文本。
在用户界面31上接收到触摸输入时,控制器180可以重新开始语音识别模式。此外,控制器180可在触摸屏151上显示用于标识语音识别模式的重新开始的标识符12。在这种情况下,控制器180可以重新开始语音识别模式并同时保持对用户界面31的触摸输入(例如,指示要插入特定文本的空间的指示块)。
因此,在保持对用户界面31的触摸输入的同时接收到用户的语音输入“ABCD”时,控制器180可以将输入的语音转换成文本并且在用户界面31上显示转换的文本,如图15C所示。
另一方面,参照图15C,如果释放了对用户界面31的触摸输入,则控制器180可以终止语音识别模式并显示指示语音识别模式的终止的符号11。之后,当语音识别模式终止时,控制器180可以在接收到缩小输入的位置通过用户界面31来插入文本23,如图15D所示。
参照图15B,当接收到用于选择转换的文本ST中的特定词的输入时,控制器180可以在触摸屏151上显示放大窗口51。控制器180可以在放大窗口51通过用户的触摸操作来编辑文本。
上面的实施方式描述了用户可以在用户的语音输入转换成文本之后在转换的文本的期望部分上通过缩小输入来容易地编辑文本。然而,图16A至图17C是例示上面说明的实施方式的另一个方面的图。
参照图16A,在接收到用户的语音之后,控制器180将语音转换成文本。当转换的文本显示在触摸115上时,控制器180可以接收用于选择要编辑的特定词块40的输入。此外,控制器180可以在特定词块40中的第一个词与第二个词之间的空间中放置用于插入预定字符或符号的条41,并且在向左和向右移动条41时选择特定位置。
一旦选择了特定位置,控制器180就可以在触摸屏151上显示要插入到所述特定位置的至少一个符号或字符的列表L。如图16B所示,列表L中的至少一个符号或字符用数字进行索引。当接收到说出了数字索引中的任一个的语音输入时,控制器180就在所述特定位置处插入与该数字输入相对应的符号(参见图16C)。
参照图17A至图17C,列表L可以包含能够插入的多个词。因此,根据本发明的实施方式,当选择了文本中的特定位置时,在用户的语音输入转换成文本之后,可以推荐能够插入在该特定位置处的多个候选词。
当接收到用于选择所推荐的候选词中的任一个的输入(例如,语音输入“1”)时,控制器180可以在该特定位置处插入并显示多个候选词中的特定一个词,如图17C所示。
根据本发明的实施方式,当接收到被认为是用户为了编辑的目的而给出的预定输入(例如,对转换的文本的触摸输入)时,控制器180可以对文本的上下文进行分析并且使用自动完成功能插入适当的词。
根据本发明的实施方式,可以在触摸屏151上显示可自动完成的候选,并且可以通过自动完成插入由用户选择的项。
根据本发明实施方式的移动终端的控制方法可以被记录在计算机可读记录介质中作为用于在计算机中执行的程序并且被提供。此外,根据本发明的实施方式的移动终端的控制方法可以由软件执行。当由软件执行时,本发明的实施方式的要素是执行所需操作的代码段。程序或代码段可以存储在处理器可读介质中或者可以在传输介质或通信网络中由与载体连接的数据信号发送。
计算机可读记录介质包括存储可由计算机系统读取的数据的任何种类的记录设备。计算机可读记录设备包括ROM、RAM、CD-ROM、DVD、DVD±ROM、DVD-RAM、磁带、软盘、硬盘、光学数据存储装置等。此外,以分布方式分布在通过网络连接的计算机设备中并能够由计算机读取的代码被存储在计算机可读记录介质中并被执行。
本发明包括针对本文所讨论的示例和实施方式中的每一个的各种变型。根据本发明,在上面一个实施方式或示例中描述的一个或多个特征可同样适用于上述另一个实施方式或示例。上面描述的一个或多个实施方式或示例的特征可以组合到上面描述的实施方式或示例的每一个中。本发明的一个或多个实施方式或示例的任何全部或部分组合也是本发明的一部分。
由于本发明的特征可以在不脱离其特性的情况下以多种形式来具体实施,因此还应当理解,除非另有规定,否则上面描述的实施方式不受前述说明书的任何细节的限制,而应当广义地认为在如所附权利要求中限定的范围内,并且因此落在权利要求的界限内的所有改变和修改,或者这些界限的等同物旨在被所附的权利要求涵盖。
相关申请的交叉引用
本申请要求2013年1月23日提交的韩国专利申请No.10-2013-0007461的优先权,此处以引证的方式并入其全部内容。
Claims (18)
1.一种电子设备,该电子设备包括:
触摸屏;
语音识别模块;以及
控制器,所述控制器被配置为:
在所述语音识别模块在语音输入模式下已被激活时,通过所述语音识别模块接收语音输入;
将所述语音输入转换成文本并且在所述触摸屏上显示转换的文本;
当在所述触摸屏上显示转换的文本的同时识别出所述文本中包含的预设词时,自动显示用于编辑所述预设词的对象指示符,其中,所述预设词与延长的声音对应,其中,在显示所述对象指示符的同时激活文本编辑模式,
其中,所述对象指示符是用于编辑所述预设词的引导的图形用户界面,并且被显示在识别出所述预设词的位置处,并且所述对象指示符以指示要编辑的文本所在的位置的光标的形式被显示;
接收用于选择所述对象指示符的输入;
在所述触摸屏上提供用于将所显示的对象指示符改变为要显示的新文本的编辑选项;
在所述编辑选项被选择时用所述新文本代替与所述延长的声音对应的所述预设词,所述新文本包括用于插入以替换所述延长的声音的符号,以及
当所述对象指示符消失时,从所述文本编辑模式切换到所述语音输入模式。
2.根据权利要求1所述的电子设备,其中,所述控制器还被配置为在所述触摸屏上的与所述控制器识别出所述预设词的位置相对应的位置处显示所述对象指示符。
3.根据权利要求1所述的电子设备,其中,所述预设词不被转换并显示为文本,而是显示为所述对象指示符。
4.根据权利要求1所述的电子设备,其中,所述预设词还包括清音或音频信号中的至少一个。
5.根据权利要求1所述的电子设备,其中,所述控制器还被配置为在所述触摸屏上将所述对象指示符显示预定时间量,然后在所述预定时间量过去之后停止显示所述对象指示符。
6.根据权利要求2所述的电子设备,其中,所述控制器还被配置为在显示所述对象指示符的位置处显示包括要插入的符号、特殊字符和图形对象中的至少一个的窗口。
7.根据权利要求6所述的电子设备,其中,所述控制器还被配置为根据预定的优先次序在所述窗口中布置并显示符号、特殊字符和图形对象中的所述至少一个。
8.根据权利要求6所述的电子设备,其中,所述控制器还被配置为:
在各个符号、特殊字符和图形对象后显示索引;以及
插入与说出的索引相对应的对应符号、特殊字符或图形对象作为所述新文本。
9.根据权利要求1所述的电子设备,其中,所述控制器还被配置为:
通过所述文本上的多点触摸而接收缩小输入,以在所述文本之间创建间隙,所述间隙是转换的文本中的第一词与第二词之间的空间;
在所述间隙中显示所述对象指示符;以及
在所述间隙处插入所述新文本。
10.根据权利要求1所述的电子设备,其中,所述控制器还被配置为当在所述对象指示符上接收到预定的触摸输入时,自动完成能够在显示所述对象指示符的位置处被插入的字符。
11.根据权利要求10所述的电子设备,其中,所述控制器还被配置为在将要通过所述自动完成插入多个字符的情况下在所述触摸屏上显示多个候选词。
12.根据权利要求1所述的电子设备,其中,所述控制器还被配置为:
当接收到用于选择转换的文本的至少一部分的触摸输入时,停用所述语音识别模块并且进入用于对转换的文本的所选择部分进行编辑的模式。
13.一种控制电子设备的方法,该方法包括如下步骤:
当语音识别模块在语音输入模式下已被激活时,经由所述语音识别模块接收语音输入;
经由控制器将所述语音输入转换成文本并且显示转换的文本;
当在触摸屏上显示转换的文本的同时识别出所述文本中包含的预设词时,经由所述触摸屏自动显示用于对所述预设词进行编辑的对象指示符,其中,所述预设词与延长的声音对应,其中,在显示所述对象指示符的同时激活文本编辑模式;
其中,所述对象指示符以指示要编辑的文本所在的位置的光标的形式被显示,
经由所述控制器接收用于选择所述对象指示符的输入;
经由所述控制器在所述触摸屏上提供用于将所显示的对象指示符改变为要显示的新文本的编辑选项;
当所述编辑选择被选择时,用所述新文本代替与所述延长的声音对应的所述预设词,所述新文本包括用于插入以替换所述延长的声音的符号;以及
当所述对象指示符消失时,从所述文本编辑模式切换到所述语音输入模式。
14.根据权利要求13所述的方法,其中,所述预设词不被转换并显示为文本,而是被显示为所述对象指示符。
15.根据权利要求13所述的方法,其中,所述预设词还包括清音或音频信号中的至少一个。
16.根据权利要求13所述的方法,该方法还包括如下步骤:
在所述触摸屏上将所述对象指示符显示预定时间量,然后在所述预定时间量过去之后停止显示所述对象指示符。
17.根据权利要求13所述的方法,该方法还包括如下步骤:
在显示所述对象指示符的位置处显示包括要被插入的符号、特殊字符和图形对象中的至少一个的窗口。
18.根据权利要求17所述的方法,该方法还包括如下步骤:
根据预定的优先次序在所述窗口中布置并显示符号、特殊字符和图形对象中的所述至少一个。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2013-0007461 | 2013-01-23 | ||
KR1020130007461A KR102057284B1 (ko) | 2013-01-23 | 2013-01-23 | 전자 기기 및 전자 기기의 제어 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103941959A CN103941959A (zh) | 2014-07-23 |
CN103941959B true CN103941959B (zh) | 2019-02-05 |
Family
ID=50101683
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410030729.3A Expired - Fee Related CN103941959B (zh) | 2013-01-23 | 2014-01-22 | 电子设备以及其控制方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9304737B2 (zh) |
EP (1) | EP2760017B1 (zh) |
JP (1) | JP5837627B2 (zh) |
KR (1) | KR102057284B1 (zh) |
CN (1) | CN103941959B (zh) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130293483A1 (en) * | 2012-05-04 | 2013-11-07 | Roberto Speranza | Selectable object display method and apparatus |
KR101992191B1 (ko) * | 2012-11-01 | 2019-06-24 | 엘지전자 주식회사 | 이동 단말기 및 그 제어방법 |
KR20150053339A (ko) * | 2013-11-08 | 2015-05-18 | 삼성전자주식회사 | 전자 디바이스의 입력 처리 방법 및 장치 |
CN105810197B (zh) * | 2014-12-30 | 2019-07-26 | 联想(北京)有限公司 | 语音处理方法、语音处理装置和电子设备 |
KR102254894B1 (ko) * | 2015-01-05 | 2021-05-24 | 엘지전자 주식회사 | 음성 인식 검색 결과를 이용하여 카테고리를 배열하는 디스플레이 디바이스 및 그 제어 방법 |
US10248640B2 (en) * | 2015-02-05 | 2019-04-02 | Microsoft Technology Licensing, Llc | Input-mode-based text deletion |
US10726197B2 (en) * | 2015-03-26 | 2020-07-28 | Lenovo (Singapore) Pte. Ltd. | Text correction using a second input |
JP6367748B2 (ja) * | 2015-04-10 | 2018-08-01 | 日本電信電話株式会社 | 認識装置、映像コンテンツ提示システム |
US9978370B2 (en) * | 2015-07-31 | 2018-05-22 | Lenovo (Singapore) Pte. Ltd. | Insertion of characters in speech recognition |
CN105759984B (zh) * | 2016-02-06 | 2019-07-02 | 上海触乐信息科技有限公司 | 二次输入文本的方法和装置 |
KR102384641B1 (ko) * | 2017-02-20 | 2022-04-08 | 엘지전자 주식회사 | 다국어 처리를 수행하는 인공 지능 시스템의 제어 방법 |
KR20180098079A (ko) * | 2017-02-24 | 2018-09-03 | 삼성전자주식회사 | 비전 기반의 사물 인식 장치 및 그 제어 방법 |
CN107832036B (zh) * | 2017-11-22 | 2022-01-18 | 北京小米移动软件有限公司 | 语音控制方法、装置及计算机可读存储介质 |
JP2019135609A (ja) * | 2018-02-05 | 2019-08-15 | 東京瓦斯株式会社 | 文字入力支援システム、文字入力支援制御装置、文字入力支援プログラム |
KR102036279B1 (ko) * | 2018-02-09 | 2019-10-24 | 충북대학교 산학협력단 | 사용자의 발표 패턴을 이용한 프리젠테이션 제어 시스템 및 방법 |
CN109739425B (zh) * | 2018-04-19 | 2020-02-18 | 北京字节跳动网络技术有限公司 | 一种虚拟键盘、语音输入方法、装置及电子设备 |
JP7176272B2 (ja) * | 2018-07-26 | 2022-11-22 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置およびプログラム |
CN110794282B (zh) * | 2018-08-02 | 2021-11-02 | 大陆汽车投资(上海)有限公司 | 基于dSPACE-HIL系统的用于与电子设备通信的方法和装置 |
CN109917982B (zh) * | 2019-03-21 | 2021-04-02 | 科大讯飞股份有限公司 | 一种语音输入方法、装置、设备及可读存储介质 |
JP2019159333A (ja) * | 2019-05-14 | 2019-09-19 | 東京瓦斯株式会社 | 文字入力支援システム、文字入力支援プログラム |
JP7109498B2 (ja) * | 2020-04-09 | 2022-07-29 | 励至 鈴木 | 音声入力装置 |
TWI740496B (zh) * | 2020-05-12 | 2021-09-21 | 宏碁股份有限公司 | 調整墨水物件間距的觸控系統及方法以及電腦可讀取媒體 |
KR102559006B1 (ko) * | 2020-11-06 | 2023-07-25 | 윤경 | 태몽과 관련된 이미지를 획득하는 방법 및 디바이스 |
US20220382964A1 (en) * | 2021-05-26 | 2022-12-01 | Mitomo MAEDA | Display apparatus, display system, and display method |
CN116992829A (zh) * | 2022-04-26 | 2023-11-03 | 华为技术有限公司 | 一种文本编辑方法及电子设备 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1707409A (zh) * | 2003-09-19 | 2005-12-14 | 美国在线服务公司 | 用户字和用户操作的上下文预测 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5909667A (en) * | 1997-03-05 | 1999-06-01 | International Business Machines Corporation | Method and apparatus for fast voice selection of error words in dictated text |
US7149970B1 (en) | 2000-06-23 | 2006-12-12 | Microsoft Corporation | Method and system for filtering and selecting from a candidate list generated by a stochastic input method |
KR100668297B1 (ko) | 2002-12-31 | 2007-01-12 | 삼성전자주식회사 | 음성인식방법 및 장치 |
US8095364B2 (en) * | 2004-06-02 | 2012-01-10 | Tegic Communications, Inc. | Multimodal disambiguation of speech recognition |
JP2007003669A (ja) * | 2005-06-22 | 2007-01-11 | Murata Mach Ltd | 文書作成装置 |
US7542029B2 (en) * | 2005-09-20 | 2009-06-02 | Cliff Kushler | System and method for a user interface for text editing and menu selection |
US20080005269A1 (en) * | 2006-06-29 | 2008-01-03 | Knighton Mark S | Method and apparatus to share high quality images in a teleconference |
WO2008099505A1 (ja) * | 2007-02-16 | 2008-08-21 | Pioneer Corporation | テキスト表示制御装置及びコンピュータプログラム |
US20090210229A1 (en) | 2008-02-18 | 2009-08-20 | At&T Knowledge Ventures, L.P. | Processing Received Voice Messages |
KR101503835B1 (ko) * | 2008-10-13 | 2015-03-18 | 삼성전자주식회사 | 멀티터치를 이용한 오브젝트 관리 방법 및 장치 |
JP2012008375A (ja) * | 2010-06-25 | 2012-01-12 | Nec Corp | 音声記録装置、そのデータ処理方法、およびプログラム |
US20120016671A1 (en) | 2010-07-15 | 2012-01-19 | Pawan Jaggi | Tool and method for enhanced human machine collaboration for rapid and accurate transcriptions |
JP2012181358A (ja) | 2011-03-01 | 2012-09-20 | Nec Corp | テキスト表示時間決定装置、テキスト表示システム、方法およびプログラム |
-
2013
- 2013-01-23 KR KR1020130007461A patent/KR102057284B1/ko active IP Right Grant
- 2013-12-09 US US14/100,581 patent/US9304737B2/en not_active Expired - Fee Related
-
2014
- 2014-01-20 EP EP14151835.7A patent/EP2760017B1/en not_active Not-in-force
- 2014-01-21 JP JP2014008530A patent/JP5837627B2/ja not_active Expired - Fee Related
- 2014-01-22 CN CN201410030729.3A patent/CN103941959B/zh not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1707409A (zh) * | 2003-09-19 | 2005-12-14 | 美国在线服务公司 | 用户字和用户操作的上下文预测 |
Also Published As
Publication number | Publication date |
---|---|
KR102057284B1 (ko) | 2020-01-22 |
EP2760017A1 (en) | 2014-07-30 |
JP2014142934A (ja) | 2014-08-07 |
EP2760017B1 (en) | 2018-08-22 |
US9304737B2 (en) | 2016-04-05 |
CN103941959A (zh) | 2014-07-23 |
JP5837627B2 (ja) | 2015-12-24 |
US20140208209A1 (en) | 2014-07-24 |
KR20140094871A (ko) | 2014-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103941959B (zh) | 电子设备以及其控制方法 | |
CN101729656B (zh) | 移动终端及其控制方法 | |
KR102196671B1 (ko) | 전자 기기 및 전자 기기의 제어 방법 | |
US8627235B2 (en) | Mobile terminal and corresponding method for assigning user-drawn input gestures to functions | |
EP2261784B1 (en) | Mobile terminal and method of displaying information in mobile terminal | |
KR102063766B1 (ko) | 이동 단말기 및 그것의 제어방법 | |
KR101912409B1 (ko) | 이동 단말기 및 이동 단말기의 제어 방법 | |
US8473297B2 (en) | Mobile terminal | |
US20130250034A1 (en) | Mobile terminal and control method thereof | |
US20120094719A1 (en) | Mobile terminal and method of controlling the same | |
CN104679402A (zh) | 移动终端及其控制方法 | |
CN103811005A (zh) | 移动终端及其控制方法 | |
CN107066172A (zh) | 移动终端的文件传输方法及装置 | |
KR102053196B1 (ko) | 전자장치 및 전자 장치의 일정 자동 생성 방법 | |
KR101914548B1 (ko) | 음성 인식 기능을 구비한 이동 단말기 및 그 검색 결과 제공 방법 | |
CN105677711A (zh) | 信息显示方法和装置 | |
KR101987461B1 (ko) | 이동 단말기 및 이동 단말기의 제어 방법 | |
KR20150065045A (ko) | 단말기 및 그 제어 방법 | |
CN104020933B (zh) | 菜单显示方法及装置 | |
KR101448650B1 (ko) | 단말기 및 그 제어 방법 | |
CN105183407A (zh) | 移动终端及其控制方法 | |
KR20100115226A (ko) | 이동 단말기 및 이동 단말기의 그래픽사용자인터페이스 제공 방법 | |
KR20110106046A (ko) | 이동 단말기, 및 이를 이용한 콘텐츠 재생 방법 | |
KR20140044618A (ko) | 이동 단말기 및 이동 단말기의 제어 방법 | |
KR101997448B1 (ko) | 이동 단말기 및 이동 단말기 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190205 Termination date: 20210122 |