CN110534086A - 用于语言交互的配件、移动终端及交互系统 - Google Patents
用于语言交互的配件、移动终端及交互系统 Download PDFInfo
- Publication number
- CN110534086A CN110534086A CN201910829041.4A CN201910829041A CN110534086A CN 110534086 A CN110534086 A CN 110534086A CN 201910829041 A CN201910829041 A CN 201910829041A CN 110534086 A CN110534086 A CN 110534086A
- Authority
- CN
- China
- Prior art keywords
- module
- text
- accessory
- voice
- mobile terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 31
- 230000002452 interceptive effect Effects 0.000 title claims abstract description 14
- 238000004891 communication Methods 0.000 claims abstract description 50
- 238000006243 chemical reaction Methods 0.000 claims description 45
- 238000013519 translation Methods 0.000 claims description 25
- 230000004044 response Effects 0.000 claims description 3
- 206010011878 Deafness Diseases 0.000 abstract description 13
- 230000010370 hearing loss Effects 0.000 abstract description 13
- 231100000888 hearing loss Toxicity 0.000 abstract description 13
- 208000016354 hearing loss disease Diseases 0.000 abstract description 13
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000000034 method Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000001755 vocal effect Effects 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 241000209140 Triticum Species 0.000 description 1
- 235000021307 Triticum Nutrition 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000003930 cognitive ability Effects 0.000 description 1
- 208000030251 communication disease Diseases 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L13/00—Speech synthesis; Text to speech systems
- G10L13/08—Text analysis or generation of parameters for speech synthesis out of text, e.g. grapheme to phoneme translation, prosody generation or stress or intonation determination
- G10L13/086—Detection of language
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/065—Adaptation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L21/10—Transforming into visible information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W76/00—Connection management
- H04W76/10—Connection setup
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
- G10L2021/065—Aids for the handicapped in understanding
Landscapes
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephone Function (AREA)
Abstract
本发明涉及电子设备领域,公开了一种用于语言交互的配件、移动终端及交互系统,该配件包括壳体以及设置在壳体中的第一通讯模块、音频采集模块以及处理器,其中:第一通讯模块,用于建立配件与相适配的移动终端的通讯连接;音频采集模块,用于采集当前用户的交流对象的待识别语音;以及处理器,包括语音识别模块,并与音频采集模块电性连接,用于通过第一通讯模块获取待识别语音,并将该待识别语音转换成当前用户设定的语种所对应的文字,通过第一通讯模块将文字发送至移动终端进行显示。本发明实现听力损失的用户与交流对象的无障碍交流。
Description
技术领域
本发明涉及电子设备领域,具体地涉及交互系统。
背景技术
现阶段,听力损失的用户或处于外语环境中的用户,由于具有听力和/ 或语言的障碍,往往不能与交流对象进行正常的交流。现有技术中,这类用户可以通过两种方式来与交流对象进行交流,第一是针对听力损失的用户,其可以通过打字来直接进行交流,但是打字方式过于繁琐,且前提是交流对象需要具有打字能力;第二是针对两类用户,都可以通过手语来进行交流,但是,前提用户及其交流对象都要会使用手语。因此,无论是上述的哪一种交流方式,都需要苛刻的前提条件。
发明内容
本发明的目的是提供一种用于语言交互的配件、移动终端及交互系统,用于解决部分语言交互场景中需要满足的苛刻的前提条件的问题。
为了实现上述目的,本发明一方面提供一种用于语言交互的配件,该配件包括壳体以及设置在所述壳体中的第一通讯模块、音频采集模块以及处理器,其中:所述第一通讯模块,用于建立所述配件与相适配的移动终端的通讯连接;所述音频采集模块,用于采集当前用户的交流对象的待识别语音;以及所述处理器,包括语音识别模块,并与所述音频采集模块电性连接,用于通过所述第一通讯模块获取所述待识别语音,将该待识别语音转换成当前用户设定的语种所对应的文字,并通过所述第一通讯模块将所述文字发送至所述移动终端进行显示
本发明第二方面提供用于语言交互的移动终端,该移动终端包括:第二通讯模块,用于建立所述移动终端与相适配的配件的通讯连接,其中所述配件被配置用于将当前用户的交流对象的待识别语音转换成当前用户设定的语种所对应的文字,以及将当前用户输入至所述移动终端的待转换文字转换成当前用户设定的语种所对应的语音;显示器,用于通过所述第二通讯模块获取所述配件所转换成的文字;输入模块,用于获取当前用户输入的待转换文字,并通过所述第二通讯模块将所述待转换文字发送至所述配件以转换成与当前用户设定的语种所对应的语音
另外,本发明还提供一种交互系统,该交互系统包括:上述的用于语言交互的配件;以及上述用于语言交互的移动终端。
通过上述技术方案,可以通过音频采集模块实现待识别语音的采集,将所述待识别语音转换成当前用户设定的语种所对应的文字,并将所述文字发送至移动终端,以在移动终端上进行显示,从而实现了听力损失的用户或处于外语环境中的用户对交流对象发出的语音的“听”,另外,在该方案中,听力损失的用户或处于外语环境中的用户和所述交流对象都不需要会手语,并且交流对象不需要会打字,避免了部分语言交互场景中需要满足的苛刻的前提条件的问题。
附图说明
附图是用来提供对本发明实施例的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本发明实施例,但并不构成对本发明实施例的限制。在附图中:
图1是说明本发明的一种配件的连接框图;
图2是说明本发明的一种配件的结构示意图;
图3是说明本发明的一种移动终端的结构框图;以及
图4a是说明本发明的一种交互系统的“收听模式”下的工作流程图;以及
图4b是说明本发明的一种交互系统的“应答模式”下的工作流程图。
附图标记说明
1 麦克风 2 上盖
3 底壳 4 夹板
5 扭簧 6 连接轴
7 按键 8 电源
100 配件 101 第一通讯模块
102 处理器 102a 语音识别模块
102b 文字转换模块 103 音频采集模块
200 移动终端 201 第二通讯模块
202 显示器 203 输入模块
具体实施方式
以下结合附图对本发明的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本发明,并不用于限制本发明。
现阶段,针对听力损失的用户或处于外语环境中的用户,并未有让其可以与交流对象进行正常交流的设备,为了实现交流,现阶段的用户只能通过手语或打字来进行交流,但无论哪种交流方式,都需要苛刻的前提条件,因此本发明实施例给出了用于降低上述的前提条件的方案。其中,在下述实施例中,听力损失的用户或处于外语环境中的用户需要具备针对至少一种语言的识字能力。
实施例一
图1是实施例一的配件结构的模块连接图,其中,该模块连接结构可以实现语言的交互。
如图1所示,提供一种用于语言交互的配件,该配件包括壳体以及设置在所述壳体中的第一通讯模块101、音频采集模块103以及处理器102。
其中,所述壳体为常规外壳结构,该结构主要作用在于方便用户的携带及保护并固定内部第一通讯模块101、音频采集模块103以及处理器102等模块的作用。为了便于携带,还可在壳体上设计有夹扣和弹簧的结构,使得该配件可以佩戴在用户的胸前,方便采集当前用户的交流对象的待识别语音,其中佩戴位置要最大可能地模拟正常的人耳拾音和语音发声位置。
下面将结合附图1对设置在壳体中的第一通讯模块101、音频采集模块 103以及处理器102进行进一步的描述。
其中,所述第一通讯模块101,用于建立所述配件100与相适配的移动终端的通讯连接。具体的,所述第一通讯模块101可以是蓝牙模块,主要用于与移动终端上的蓝牙模块进行通讯,并进行数据的交互。
其中,所述音频采集模块103,用于采集当前用户的交流对象的待识别语音。具体的,所述音频采集模块包括远场拾音麦克风阵列,该远场拾音麦克风阵列中例如包括2个麦克风,其中,所述麦克风的数量可以根据实际需要进行设置,可以为2个,还可以是4、6、7、8等任意数据的麦克风,设计的麦克风越多,所采集的待识别语音越清晰。为了提高所采集的待识别语音的清晰度,在所述壳体的对应于所述麦克风的位置还可设置有拾音孔。
其中,所述处理器102为本发明的核心部件,主要用于执行核心的转换步骤,并包括语音识别模块102a其与所述音频采集模块电性连接,,用于通过所述第一通讯模块101获取所述待识别语音,并将该待识别语音转换成当前用户设定的语种所对应的文字,通过所述第一通讯模块101将所述文字发送至所述移动终端进行显示。
具体的,所述处理器102为了实现上述的功能,所述语音识别模块102a 可以包括:识别子模块(图中未示出),其采用了“文字合成语音(TTS)”的技术,用于将所述待识别语音转换为文字;以及第一翻译子模块(图中未示出),用于将从所述识别子模块获取的文字翻译为当前用户设定的语种所对应的文字。
其中,所述识别子模块的输入为语音,输出为该语音对应的文字,因此,可以在输入端输入待识别语音,在输出端获得所述待识别语音转换的文字。需要强调的是,在此时,所获得的文字实际为与语音语种相同的文字,如果还需要转换需要再进行翻译,另外,在本实施例中,为了实现外语环境上的交流,特别设计了第一翻译子模块,该第一翻译子模块主要基于当前用户设定的语种,将上述识别子模块转换的文字翻译为对应语种的文字。例如,获取到交流对象的英语语音,采用识别子模块将英语语音转换为英语单词,再通过翻译模块可以将英语直接转换为当前用户设定的中文文字(并不限定中文,该用户设定的语种需要是用户可认知的语种的文字),并通过所述第一通讯模块101将所述中文文字发送至所述移动终端进行显示的方式,实现用户获得交流对象的待识别语音中的文字,通过该方式,用户可以观察到翻译后的文字(其中用户可以识别的语种是已知的,可以提前设定的,在此不再赘述),从而实现了听力损失的用户或处于外语环境中的用户的正常交流。
通过上述的方式,可以实现听力损失的用户或处于外语环境中的用户的“听”,使得听力损失的用户或处于外语环境中的用户能够观察到交流对象所说的待识别语音中的文字,其中该文字为用户可以认知的文字。
进一步优选的,在该配件100中,除了上述的模块之外,本实施例中的所述处理器102还可以包括文字转换模块102b,用于通过所述第一通讯模块 101获取来自所述移动终端的当前用户输入的待转换文字,并通过所述文字转换模块102b将该待转换文字转换成对应的语音。并且,与其配合的是,在所述壳体中设置有与所述处理器102电性连接的音频播放模块,该音频播放模用于播放所述文字转换模块102b所转换的与所述待转换文字对应的语音,为了更好的进行音频的播放,在所述外壳的对应于所述音频播放模块的位置设置有开孔。
其中,所述文字转换模块102b的输入为待转换文字,且所述文字转换模块102b的输出为对应的语音,其具体包括了下述的子模块:第二翻译子模块,用于将所述待转换文字翻译为当前用户设定的语种所对应的文字。
其中,所述第二翻译子模块主要用于实现待转换文字的翻译,其与第一翻译子模块一样都用于文字的翻译。两个翻译子模块可独立设置,也可集成为同一翻译模块,但无论何种方式都不影响本发明实施例的实现。其中,在所述第一翻译子模块与所述第二翻译子模块为同一翻译模块的情况下,通过输入文字和输出文字的不同,获得不同的与当前用户设定的语种对应的文字实现相应的第一翻译子模块和第二翻译子模块的功能。
其中,所述文字转换模块102b还包括转换子模块,其主要采用了“文字合成语音(TTS)”的技术,用于将从所述第二翻译模块获取的所述文字转换成对应的语音。所述转换子模块的作用在于文字与语音的转换,其对应的语音实际为翻译后文字对应的语音。实质上,本实施例中无论是转换子模块又或是第二翻译子模块都需要基于当前用户设定的语种来进行处理,其中当前用户设定的语种需要包括交流对象可获知听明白语义的语种。
举例而言,通过手机输入用户想要表达的待转换文字,并将该文字发送至文字转换模块102b,通过所述文字转换模块102b转换成能够读出所述待转换文字的语音,再通过手机将能够读出所述待转换文字的语音发送至音频播放模块执行语音的播放,最终实现了听力损失的用户对交流对象的“说”。
进一步优选地,所述处理器还可以包括:模式确定模块,用于响应于来自所述移动终端的模式选择信号的类型,确定所述配件的工作模式,其中所述工作模式包括收听模式和应答模式。并且,所述音频采集模块和所述语音识别模块用于在所述收听模式下工作,以及所述文字转换模块和所述音频播放模块在所述应答模式下工作。
其中,模式确定模块主要用于确定配件的工作模式,并发出与工作模式相对应的信号的类型,所述处理器根据所述工作模式,选择执行工作的模块及选择控制的模块。
进一步优选地,所述语音识别模块可以包括:用于将所述待识别语音转换成当前用户设定的语种所对应的文字的在线语音识别模块或离线语音识别模块;和/或所述文字转换模块可以包括:用于将所述待转换文字转换成当前用户设定的语种所对应的语音的在线文字转换模块或离线文字转换模块。
其中,所述在线语音识别模块用于联网实现语音识别,相应的离线语音识别模块为本地实现语音识别,其中,离线语音识别模块需要下载识别语音数据包。同样的,在线文字转换模块用于联网实现文字转换,相应的离线文字转换模块为本地实现文字转换,,其中,离线文字转换模块需要下载文字转换数据包。
如上所述,本发明实施例的处理器102及其内部设计的模式确定模块、语音识别模块102a、文字转换模块102b可采用常规的微控制器或单片机等进行配置,其在本发明实施例中所具有的模式判定(例如上述的模式确定模块所判定的收听模式和应答模式)、语音识别(例如上述的语音识别模块102a 所识别的语音中的文字)、文字转换(例如上述的文字转换模块102b所转换的文字中的语音)及信号传输等功能均为微控制器或单片机等的常规功能,故只需要对微控制器或单片机等进行适应性配置而并不需要进行计算机程序的实质性修改。
通过上述的实施方式,通过处理器控制各模块的相应工作,并且可以通过处理器实现了文字和语音的相互转换,最终实现听力损失的用户或在不同语言交流环境中的用户与交流对象的交流,其中使用该配件的用户和所述交流对象都不需要会手语,且交流对象不需要会打字,两者之间可以进行无障碍的进行交流。
图2是根据实施例一中的示例性的配件100的装配示意图,其中,如图 2所示,所述配件100包括:麦克风1、壳体、电源8以及包括处理器102 的主板。所述麦克风1作为音频采集模块,所述壳体包括相互连接以限定出容纳腔室的上盖2和底壳3,所述主板沿底壳3指向上盖2的方向依次设置在容纳腔室中。所述电源8与麦克风1、处理器102及第一通讯模块101电性连接。在本发明中,电源8可以是便携式电源,例如纽扣电池。
进一步优选地,当使用者在使用小型化的该配件时,为了能够方便佩戴,可选的,配件100包括能够夹持于使用者身上的夹持件,夹持件安装于底壳 3。夹持件可以是别针、系扣、挂带等方式,在本发明的一些实施方式中,可选的,夹持件包括夹板4、扭簧5以及连接轴6;夹板4的一端设有轴座,另一端能够夹持于使用者身上;连接轴6穿设于轴座,扭簧5套设在连接轴 6上,扭簧5的一端与底壳3连接,另一端与夹板4连接。为了保证本发明的语音识别交互设备的使用寿命,可选的,壳体开设有散热孔,能够将各个电子器件工作时产生的热量及时散出。
进一步地,所述配件100的壳体上还设计有按键7,按键7与音频采集模块、处理器及第一通讯模块中的至少一者连接以控制其操作,即通过按键 7对音频采集模块、处理器及第一通讯模块等进行控制,达到了方便控制的效果。其中,控制包括开关等操作。
其中,所述按键7可以设置在第一供电回路和/或第二供电回路中,其中所述第一供电回路为给所述音频采集模块供电的电路,第二供电回路中为给所述音频播放模块供电的电路,该设置的主要目的在于控制所述音频采集模块和所述音频播放模块获得电能,从而控制所述音频采集模块和所述音频播放模块的开关。
通过上述的方式,可以控制所述音频采集模块和所述音频播放模块的工作,通过响应于用户对象的操作事件(即按压操作),最终实现了控制所述音频采集模块和音频播放模块的工作。
实施例二
图3是实施例二的移动终端200的模块连接图。
如图3所示,所述移动终端200包括:第二通讯模块201,用于建立所述移动终端200与相适配的配件的通讯连接,其中所述配件被配置用于将当前用户的交流对象的待识别语音转换成当前用户设定的语种所对应的文字,以及将当前用户输入至所述移动终端的待转换文字转换成当前用户设定的语种所对应的语音。
其中,所述第二通讯模块201主要用于与所述实施例一中的第一通讯模块进行连接,因此,所述第二通讯模块201也可以是蓝牙模块。
所述移动终端200还包括:显示器202,用于通过所述第二通讯模块201 获取所述配件所转换成的文字。
其中,所述显示器202主要用于显示当前用户的交流对象的待识别语音转换成的文字,其中在本实施例中不限制显示器202的类型,只要可以显示文字即可。实际上本实施例中的配件可以是实施例一种的配件,其主要用于实现实施例一中的功能,在此不再赘述。
所述移动终端200还包括:输入模块203,用于获取当前用户输入的待转换文字,并通过所述第二通讯模块201将所述待转换文字发送至所述配件以转换成与当前用户设定的语种所对应的语音。
其中,所述输入模块203用于输入待转换文字,待转换文字的内容即为用户想要说出的内容,其中,输入的文字的语种需要是预先设定的语种,在该语种下可以实现“听”和“说”,从而实现与交流对象的交互。
进一步优选地,所述移动终端200包括集成有所述配件的移动终端200。其中,所述移动终端200中集成有实施例一种的配件,并且通过移动终端200 的麦克风实现所述音频采集模块的功能,通过移动终端200中的APP功能模块实现所述处理器的功能,并通过移动终端200中的扬声器实现音频播放模块的功能,集成在一起的方式,进一步增加了使用时的便捷性。
通过上述的实施方式,可以实现听力损失的用户或处于外语环境中的用户与交流对象的正常无障碍交流,避免了交流对象与用户之间的交流障碍。
实施例三
通过实施例一与实施例二的结合可以得出一个交互系统,其中,图4a 和图4b是实施例三的交互系统的流程图。其中,图4a为在“收听模式”下,移动终端与配件的交互;图4b为在“应答模式”下,移动终端与配件的交互。
如图4a所示,用于语言交互的方法包括在“收听模式”下,
S11,移动终端向配件发起配对请求;
S12,配件接收来自所述移动终端的配对请求,实现与所述移动终端的配对;
S13,移动终端发送开启收听的控制信号至所述配件;
S14,所述配件采集当前用户的交流对象的待识别语音;
S15,所述配件将该待识别语音转换成对应的文字;
S16,所述配件将所述文字发送至所述移动终端;
S17,所述移动终端显示所述待识别语音转换后的文字。
如图4b所示,用于语言交互的方法包括在“应答模式”下,
S21,移动终端向配件发起配对请求;
S22,配件接收来自所述移动终端的配对请求,实现与所述移动终端的配对;
S23,移动终端发送开启应答的控制信号;
S24,移动终端发送待转换文字;
S25,配件通过所述文字转换模块将该待转换文字转换成对应的语音;
S26,配件播放所述文字转换模块处理器所转换的语音。
其中,当已经实现配对时,可以忽略S11、S12、S21、S22。直接执行后续的步骤。
两者相配合使用的方式,实现了语言的交互。另外,上述的方式与现有技术相比具有和实施例一的配件及实施例二中的移动终端相同的技术效果,在此不再赘述。
以上所述仅为发明的较佳实施方式而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (11)
1.一种用于语言交互的配件,其特征在于,该配件包括壳体以及设置在所述壳体中的第一通讯模块(101)、音频采集模块(103)以及处理器(102),其中:
所述第一通讯模块(101),用于建立所述配件与相适配的移动终端的通讯连接;
所述音频采集模块(103),用于采集当前用户的交流对象的待识别语音;以及
所述处理器(102),包括语音识别模块(102a),并与所述音频采集模块电性连接,用于通过所述第一通讯模块(101)获取所述待识别语音,并将该待识别语音转换成当前用户设定的语种所对应的文字,通过所述第一通讯模块(101)将所述文字发送至所述移动终端进行显示。
2.根据权利要求1所述的用于语言交互的配件,其特征在于,所述壳体包括:相互连接以限定出容纳腔室的上盖(2)和底壳(3),所述第一通讯模块(101)、音频采集模块(103)以及处理器(102)设置在所述容纳腔室中。
3.根据权利要求2所述的用于语言交互的配件,其特征在于,所述配件还包括能够夹持于使用者身上的夹持件,所述夹持件安装于所述底壳(3);其中,所述夹持件包括夹板(4)、扭簧(5)以及连接轴(6);
所述夹板(4)的一端设有轴座,另一端能够夹持于使用者身上;
所述连接轴(6)穿设于所述轴座,所述扭簧(5)套设在所述连接轴(6)上,所述扭簧(5)的一端与所述底壳(3)连接,另一端与所述夹板(4)连接。
4.根据权利要求1所述的用于语言交互的配件,其特征在于,所述语音识别模块包括:
识别子模块,用于识别所述待识别语音的语种,并获取与该待识别语音的语种相对应的文字;
第一翻译子模块,用于将从所述识别子模块获取的文字翻译为当前用户设定的语种所对应的文字。
5.根据权利要求1-4中任意一项所述的用于语言交互的配件,其特征在于,所述处理器还包括文字转换模块(102b),且所述处理器(102)还用于通过所述第一通讯模块(101)获取来自所述移动终端的当前用户输入的待转换文字,并通过所述文字转换模块(102b)将该待转换文字转换成当前用户设定的语种所对应的语音;
并且,该配件还包括:设置在所述壳体中的音频播放模块,与所述处理器(102)电性连接,用于播放所述处理器(102)通过所述文字转换模块(102b)所转换成的语音。
6.根据权利要求5中所述的用于语言交互的配件,其特征在于,所述文字转换模块包括:
第二翻译子模块(102b),用于将所述待转换文字翻译为当前用户设定的语种所对应的文字;以及
转换子模块,用于将从所述第二翻译模块获取的所述文字转换成对应的语音。
7.根据权利要求5中所述的用于语言交互的配件,其特征在于,所述处理器(101)还包括:
模式确定模块,用于响应于来自所述移动终端的模式选择信号的类型,确定所述配件的工作模式,其中所述工作模式包括收听模式和应答模式;
并且,所述音频采集模块和所述语音识别模块用于在所述收听模式下工作,以及所述文字转换模块和所述音频播放模块在所述应答模式下工作。
8.根据权利要求5所述的用于语言交互的配件,其特征在于,所述语音识别模块(102a)包括:用于将所述待识别语音转换成当前用户设定的语种所对应的文字的在线语音识别模块或离线语音识别模块;和/或
所述文字转换模块(102b)包括:用于将所述待转换文字转换成当前用户设定的语种所对应的语音的在线文字转换模块或离线文字转换模块。
9.一种用于语言交互的移动终端,其特征在于,该移动终端包括:
第二通讯模块(201),用于建立所述移动终端与相适配的配件的通讯连接,其中所述配件被配置用于将当前用户的交流对象的待识别语音转换成当前用户设定的语种所对应的文字,以及将当前用户输入至所述移动终端的待转换文字转换成当前用户设定的语种所对应的语音;
显示器(202),用于通过所述第二通讯模块(201)获取所述配件所转换成的文字;
输入模块(203),用于获取当前用户输入的待转换文字,并通过所述第二通讯模块(201)将所述待转换文字发送至所述配件以转换成与当前用户设定的语种所对应的语音。
10.根据权利要求9所述的用于语言交互的移动终端,其特征在于,所述移动终端中集成有权利要求1-8中任意一项所述的配件,且该配件的壳体被配置为采用所述移动终端的壳体。
11.一种交互系统,其特征在于,该交互系统包括:
权利要求1-8中任意一项所述的用于语言交互的配件;以及
权利要求9或10所述用于语言交互的移动终端。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910829041.4A CN110534086A (zh) | 2019-09-03 | 2019-09-03 | 用于语言交互的配件、移动终端及交互系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910829041.4A CN110534086A (zh) | 2019-09-03 | 2019-09-03 | 用于语言交互的配件、移动终端及交互系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110534086A true CN110534086A (zh) | 2019-12-03 |
Family
ID=68666449
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910829041.4A Pending CN110534086A (zh) | 2019-09-03 | 2019-09-03 | 用于语言交互的配件、移动终端及交互系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110534086A (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101115088A (zh) * | 2007-08-07 | 2008-01-30 | 周运南 | 聋哑人专用手机 |
CN102821196A (zh) * | 2012-07-25 | 2012-12-12 | 江西好帮手电子科技有限公司 | 一种移动终端文字语音对等通话方法及其移动终端 |
CN103838714A (zh) * | 2012-11-22 | 2014-06-04 | 北大方正集团有限公司 | 一种语音信息转换方法及装置 |
US20150287408A1 (en) * | 2014-04-02 | 2015-10-08 | Speakread A/S | Systems and methods for supporting hearing impaired users |
CN105957514A (zh) * | 2016-07-11 | 2016-09-21 | 吉林宇恒光电仪器有限责任公司 | 一种便携式聋哑人交流设备 |
CN107924395A (zh) * | 2015-08-24 | 2018-04-17 | 微软技术许可有限责任公司 | 个人翻译器 |
CN108334197A (zh) * | 2018-01-26 | 2018-07-27 | 北京千丁互联科技有限公司 | 一种用于听障人士的沟通工具 |
CN108702580A (zh) * | 2016-02-19 | 2018-10-23 | 微软技术许可有限责任公司 | 具有自动语音转录的听力辅助 |
CN211319717U (zh) * | 2019-09-03 | 2020-08-21 | 北京佳珥医学科技有限公司 | 用于语言交互的配件、移动终端及交互系统 |
-
2019
- 2019-09-03 CN CN201910829041.4A patent/CN110534086A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101115088A (zh) * | 2007-08-07 | 2008-01-30 | 周运南 | 聋哑人专用手机 |
CN102821196A (zh) * | 2012-07-25 | 2012-12-12 | 江西好帮手电子科技有限公司 | 一种移动终端文字语音对等通话方法及其移动终端 |
CN103838714A (zh) * | 2012-11-22 | 2014-06-04 | 北大方正集团有限公司 | 一种语音信息转换方法及装置 |
US20150287408A1 (en) * | 2014-04-02 | 2015-10-08 | Speakread A/S | Systems and methods for supporting hearing impaired users |
CN107924395A (zh) * | 2015-08-24 | 2018-04-17 | 微软技术许可有限责任公司 | 个人翻译器 |
CN108702580A (zh) * | 2016-02-19 | 2018-10-23 | 微软技术许可有限责任公司 | 具有自动语音转录的听力辅助 |
CN105957514A (zh) * | 2016-07-11 | 2016-09-21 | 吉林宇恒光电仪器有限责任公司 | 一种便携式聋哑人交流设备 |
CN108334197A (zh) * | 2018-01-26 | 2018-07-27 | 北京千丁互联科技有限公司 | 一种用于听障人士的沟通工具 |
CN211319717U (zh) * | 2019-09-03 | 2020-08-21 | 北京佳珥医学科技有限公司 | 用于语言交互的配件、移动终端及交互系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20070042712A1 (en) | Bluetooth Earphone | |
CN103260124B (zh) | 移动终端的音频测试方法及其测试系统 | |
CN109890018A (zh) | 音频的蓝牙传输方法、蓝牙收发器及计算机可读存储介质 | |
CN109068209A (zh) | 蓝牙耳机、充电盒、蓝牙耳机组件及其交互方法 | |
JPH0432880Y2 (zh) | ||
CN105208479A (zh) | 一种自动翻译的蓝牙耳机 | |
JP2021150946A (ja) | ワイヤレスイヤホンデバイスとその使用方法 | |
JPH1198590A (ja) | イヤホンシステム | |
CN109545216A (zh) | 一种语音识别方法和语音识别系统 | |
CN111492365A (zh) | 使用辅助设备盒子进行翻译 | |
CN205665468U (zh) | 实时显示的增强现实智能眼镜 | |
CN208190881U (zh) | 一种一键启动蓝牙智能终端语音助理应用的蓝牙耳机 | |
CN205510026U (zh) | 一种微型对讲机 | |
CN107071603A (zh) | 一种用于实时语音识别的话筒及系统 | |
CN211741726U (zh) | 一种导音智能眼镜腿及智能眼镜 | |
CN110534086A (zh) | 用于语言交互的配件、移动终端及交互系统 | |
CN211319717U (zh) | 用于语言交互的配件、移动终端及交互系统 | |
CN113411417A (zh) | 无线扩音系统及终端 | |
CN109508914A (zh) | 一种变电站运维设备 | |
CN110035346A (zh) | 蓝牙耳机的通信方法、装置、蓝牙耳机及存储介质 | |
CN211982264U (zh) | 一种电子设备 | |
CN106412785A (zh) | 多功能骨传导助听器 | |
CN107172521A (zh) | 一种用于实时语音识别的蓝牙耳机及系统 | |
CN113645573A (zh) | 耳机配置数据共享方法、耳机及存储介质 | |
CN112804613A (zh) | 骨传导通信装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |