CN105513596A - 一种语音控制方法和控制设备 - Google Patents
一种语音控制方法和控制设备 Download PDFInfo
- Publication number
- CN105513596A CN105513596A CN201610006363.5A CN201610006363A CN105513596A CN 105513596 A CN105513596 A CN 105513596A CN 201610006363 A CN201610006363 A CN 201610006363A CN 105513596 A CN105513596 A CN 105513596A
- Authority
- CN
- China
- Prior art keywords
- place
- echo
- local meeting
- energy
- voice
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 34
- 238000001514 detection method Methods 0.000 claims abstract description 36
- 230000000694 effects Effects 0.000 claims abstract description 22
- 238000012360 testing method Methods 0.000 claims description 109
- 238000001914 filtration Methods 0.000 claims description 25
- 238000000926 separation method Methods 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000012546 transfer Methods 0.000 claims description 3
- 108010001267 Protein Subunits Proteins 0.000 claims description 2
- 238000004891 communication Methods 0.000 abstract description 10
- 241001269238 Data Species 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 238000010168 coupling process Methods 0.000 description 5
- 238000005859 coupling reaction Methods 0.000 description 5
- 230000008878 coupling Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 206010038743 Restlessness Diseases 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/26—Speech to text systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/563—User guidance or feature selection
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Quality & Reliability (AREA)
- Telephonic Communication Services (AREA)
- Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)
Abstract
本发明实施例提供一种语音控制方法和控制设备,涉及通信领域,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。其方法为:通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作。本发明实施例用于会议中进行语音控制。
Description
技术领域
本发明涉及通信领域,尤其涉及一种语音控制方法和控制设备。
背景技术
在现有会议电话场景下,可以通过按键、Web等实现会控操作,解决了会议电话在会议中实现语音会控不便的问题,但是操作起来不太方便。语音识别技术可以使得语音控制简化复杂的会议控制方式,例如Cisco(思科)有语音助手类的产品,但主要用于会议互通之前,辅助完成语音呼叫,查看邮件等操作,并没有在会议中进行语音控制的方案。
另外,非本地会场的声音会影响语音识别的效果,而在现有的技术方案中,大多在进行语音控制的时候,本地会场可以通过按键或者拨号等触发方式,向MCU(MultipointControlUnit,多点控制单元)请求进入语音识别模式,MCU将本地会场闭音,即停止发送其他会场的声音到本地会场,终止IVR(InteractiveVoiceResponse,交互式语音应答)等语音相关操作,本地会场再接收控制语音数据到MCU的语音识别单元,该语音识别单元进行语音识别后使得MCU执行相应的会控操作,在此过程中,MCU会把非本地会场送入的声音屏蔽,即采用对本地扬声器闭音的方式,以减少其他会场对本地会场语音控制的干扰。上述实现过程存在的问题是,在这种会控模式下,将无法接收到非本地会场的任何声音,本地会场的用户可能就会获取不到关键会议信息。
发明内容
本发明的实施例提供一种语音控制方法和控制设备,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,提供一种语音控制方法,包括:
接收本地会场的语音控制请求信号,启用语音控制模式;
对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,所述双讲检测结果为近端单讲,或远端单讲,或双讲;
根据所述双讲检测结果,确定所述本地会场中扬声器的音量,并在所述双讲检测结果为所述近端单讲或所述双讲时,对所述本地会场获取的语音数据进行语音识别,获取语音识别结果;
从所述语音识别结果中获取会控操作指令,并根据所述会控操作指令执行相应的会控操作。
结合第一方面,在第一方面的第一种可能实现的方式中,所述通过对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果包括:
判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和;
若所述回声能量不大于所述回声抵消输出能量的两倍与所述第一阈值的和,根据所述回声能量是否小于所述本地会场的背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述回声能量不小于所述背景噪声能量的两倍与所述第二阈值的和,则所述本地会场讲话,并根据所述远端会场的参考信号是否小于通过所述语音活动侦测获取的远端噪音能量的两倍与第三阈值的和判断所述远端会场是否讲话,所述参考信号为所述远端会场的语音信号经网络传输还未经过所述本地会场的扬声器播放的语音信号;
若所述参考信号小于所述远端噪音能量的两倍与第三阈值的和,则所述远端会场没有讲话,所述双讲检测结果为所述近端单讲;
若所述参考信号不小于所述远端噪音能量的两倍与第三阈值的和,则所述远端会场讲话,所述双讲检测结果为所述双讲。
结合第一方面或第一方面的第一种可能实现的方式,在第一方面的第二种可能实现的方式中,所述通过对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果还包括:
若所述回声能量大于所述回声抵消输出能量的两倍与所述第一阈值的和,根据所述回声能量是否小于所述背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述回声能量小于所述背景噪声能量的两倍与第二阈值的和,则所述本地会场没有讲话,所述双讲检测结果为所述远端单讲。
结合第一方面或第一方面的第二种可能实现的方式,在第一方面的第三种可能实现的方式中,在判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和之前,所述方法还包括:
对所述本地会场中麦克风采集的语音信号进行混音分离,以使得所述本地会场的语音信号不传输至所述远端会场;
根据所述本地会场的语音信号幅度获取所述本地会场和所述远端会场的回声能量大小,并通过语音活动侦测获取所述本地会场的背景噪声能量;
通过自适应滤波器中的前台滤波器对所述本地会场和所述远端会场的回声信号进行自适应滤波,将所述回声信号乘以滤波系数,所述回声信号乘以所述滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
结合第一方面或第一方面的第三种可能实现的方式,在第一方面的第四种可能实现的方式中,所述根据所述双讲检测结果,确定所述本地会场中扬声器的音量,并在所述双讲检测结果为所述近端单讲和所述双讲时,对所述本地会场获取的语音数据进行语音识别,获取语音识别结果包括:
若所述双讲检测结果为所述远端单讲,则保持所述本地会场中扬声器的音量不变;
若所述双讲检测结果为所述近端单讲,则保持所述本地会场中扬声器的音量不变,并将所述本地会场获取的近端单讲时的语音数据发送至语音识别器进行语音识别,获取所述语音识别结果;
若所述双讲检测结果为所述双讲,则将所述扬声器的音量降低到第四阈值,并将所述本地会场获取的双讲时的语音数据发送至所述语音识别器进行语音识别,获取所述语音识别结果。
结合第一方面或第一方面的第四种可能实现的方式,在第一方面的第五种可能实现的方式中,所述获取所述语音识别结果包括:
若所述双讲检测结果为所述近端单讲,则所述语音识别器将所述近端单讲时的语音数据与控制命令集进行比较,若所述近端单讲时的语音数据与所述控制命令集匹配,则获取所述语音识别结果;
若所述双讲检测结果为所述双讲,则对所述双讲时远端会场的语音数据进行回声抵消,并通过所述语音识别器将回声抵消后的语音数据与所述控制命令集进行比较,若所述回声抵消后的语音数据与所述控制命令集匹配,则获取所述语音识别结果。
结合第一方面或第一方面的第一种可能实现的方式至第五种可能实现的方式,在第一方面的第六种可能实现的方式中,所述方法还包括:
若所述前台滤波器对所述回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值,则将所述前台滤波器的滤波系数备份至所述自适应滤波器的后台滤波器中;
通过所述后台滤波器将所述回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数获取衰减后的回声抵消输出能量。
第二方面,提供一种控制设备,包括:
会控启动单元,用于接收本地会场的语音控制请求信号,启用语音控制模式;
双讲检测单元,用于对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,所述双讲检测结果为近端单讲,或远端单讲,或双讲;
会控管理单元,用于根据所述双讲检测结果,确定所述本地会场中扬声器的音量,并在所述双讲检测结果为所述近端单讲或所述双讲时,对所述本地会场获取的语音数据进行语音识别,获取语音识别结果;
会控执行单元,用于从所述语音识别结果中获取会控操作指令,并根据所述会控操作指令执行相应的会控操作。
结合第二方面,在第二方面的第一种可能实现的方式中,所述双讲检测单元包括:
第一判断子单元,用于判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和;
若所述第一判断子单元确定所述回声能量不大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过第二判断子单元判断所述回声能量是否小于所述本地会场的背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元确定所述回声能量不小于所述背景噪声能量的两倍与所述第二阈值的和,则所述第二判断子单元确定所述本地会场讲话,并通过第三判断子单元判断所述远端会场的参考信号是否小于通过所述语音活动侦测获取的远端噪音能量的两倍与第三阈值的和确定所述远端会场是否讲话,所述参考信号为所述远端会场的语音信号经网络传输还未经过所述本地会场的扬声器播放的语音信号;
若所述第三判断子单元确定所述参考信号小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元确定所述远端会场没有讲话,所述第三判断子单元确定所述双讲检测结果为所述近端单讲;
若所述第三判断子单元确定所述参考信号不小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元确定所述远端会场讲话,所述第三判断子单元确定所述双讲检测结果为所述双讲。
结合第二方面或第二方面的第一种可能实现的方式,在第二方面的第二种可能实现的方式中,所述双讲检测单元还用于:
若所述第一判断子单元确定所述回声能量大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过所述第二判断子单元判断所述回声能量是否小于所述背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元确定所述回声能量小于所述背景噪声能量的两倍与第二阈值的和,则所述第二判断子单元确定所述本地会场没有讲话,所述第二判断子单元确定所述双讲检测结果为所述远端单讲。
结合第二方面或第二方面的第二种可能实现的方式,在判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和之前,所述双讲检测单元还包括:
控制子单元,用于通过对所述本地会场中麦克风采集的语音信号进行混音分离,以使得所述本地会场的语音信号不传输至所述远端会场;
获取子单元,用于根据所述本地会场的语音信号幅度获取所述本地会场和所述远端会场的回声能量大小,并通过语音活动侦测获取所述本地会场的背景噪声能量;
滤波子单元,用于通过自适应滤波器中的前台滤波器对所述本地会场和所述远端会场的回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数,所述回声信号乘以所述滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
结合第二方面或第二方面的第三种可能实现的方式,在第二方面的第四种可能实现的方式中,所述会控管理单元具体用于:
若所述双讲检测结果为所述远端单讲,则保持所述本地会场中扬声器的音量不变;
若所述双讲检测结果为所述近端单讲,则保持所述本地会场中扬声器的音量不变,并将所述本地会场获取的近端单讲时的语音数据发送至语音识别器进行语音识别,获取所述语音识别结果;
若所述双讲检测结果为所述双讲,则将所述扬声器的音量降低到第四阈值,并将所述本地会场获取的双讲时的语音数据发送至所述语音识别器进行语音识别,获取所述语音识别结果。
结合第二方面或第二方面的第四种可能实现的方式,在第二方面的第五种可能实现的方式中,所述会控管理单元还用于:
若所述双讲检测结果为所述近端单讲,则所述语音识别器将所述近端单讲时的语音数据与控制命令集进行比较,若所述近端单讲时的语音数据与所述控制命令集匹配,则获取所述语音识别结果;
若所述双讲检测结果为所述双讲,则对所述双讲时远端会场的语音数据进行回声抵消,并通过所述语音识别器将回声抵消后的语音数据与所述控制命令集进行比较,若所述回声抵消后的语音数据与所述控制命令集匹配,则获取所述语音识别结果。
结合第二方面或第二方面的第一种可能实现的方式至第五种可能实现的方式,在第二方面的第六种可能实现的方式中,所述滤波子单元还用于:
若所述前台滤波器对所述回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值,则将所述前台滤波器的滤波系数备份至所述自适应滤波器的后台滤波器中;
通过所述后台滤波器将所述回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数获取衰减后的回声抵消输出能量。
本发明实施例提供一种语音控制方法和控制设备,通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种语音控制方法流程示意图;
图2为本发明另一实施例提供的一种语音控制方法流程示意图;
图3为本发明又一实施例提供的一种控制设备结构示意图;
图4为本发明又一实施例提供的一种控制设备结构示意图;
图5为本发明又一实施例提供的一种控制设备结构示意图;
图6为本发明又一实施例提供的一种控制设备结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种语音控制方法,如图1所示,包括:
101、控制设备接收本地会场的语音控制请求信号,启用语音控制模式。
其中,控制设备可以为MCU(MultipointControlUnit,多点控制单元),为一种用来控制多个用户相互通信的一种网络实体。该MCU可以应用于多点视频会议系统中,或者电话会议中等。
语音控制请求信号可以为语音唤醒信号,或手势识别信号,或通过按键或拨号等触发信号。
示例性的,MCU接收本地会场的语音控制请求信号,若语音控制请求信号与预设的语音会控激活语音匹配,则启用语音控制模式;或,接收本地会场的手势识别信号,若手势识别信号与预设的语音会控激活手势匹配,则启用语音控制模式。
102、控制设备对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲。
示例性的,MCU在对本地会场的语音信号和远端会场的语音信号进行双讲检测时,可以根据本地会场的语音信号幅度,本地会场和远端会场的回声能量大小,背景噪声能量,本地会场和远端会场的回声抵消输出能量等进行处理,并根据处理结果判断双讲检测结果是否为近端单讲,或远端单讲或双讲。
具体的,在开启语音控制模式之后,可以对本地会场中麦克风采集的语音信号进行混音分离,以使得本地会场的语音信号不传输至远端会场。而后根据本地会场的语音信号幅度获取本地会场和远端会场的回声能量大小,并通过语音活动侦测获取本地会场的背景噪声能量,通过自适应滤波器中的前台滤波器对本地会场和远端会场的回声信号进行自适应滤波,将回声信号乘以滤波系数,回声信号乘以滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
103、控制设备根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果。
具体的,若双讲检测结果为远端单讲,则保持本地会场扬声器的音量不变,不将远端单讲的语音数据输送至MCU的语音识别器进行语音识别;若双讲检测结果为近端单讲,则保持本地会场中扬声器的音量不变,并将本地会场获取的近端单讲时的语音数据发送至语音识别器进行语音识别,获取语音识别结果,而后语音识别器将近端单讲时的语音数据与控制命令集进行比较,若近端单讲时的语音数据与控制命令集匹配,则获取语音识别结果;若双讲检测结果为双讲,则将扬声器的音量降低到第四阈值,并将本地会场获取的双讲时的语音数据发送至语音识别器进行语音识别,获取语音识别结果,进而对双讲时远端会场的语音数据进行回声抵消,并通过语音识别器将回声抵消后的语音数据与控制命令集进行比较,若回声抵消后的语音数据与控制命令集匹配,则获取语音识别结果。
104、控制设备从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作。
本发明实施例提供一种语音控制方法,通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。
本发明另一实施例提供一种语音控制方法,以MCU为控制设备进行说明,如图2所示,包括:
201、控制设备接收本地会场的语音控制请求信号,启用语音控制模式。
示例性的,在电话会议或者当控制设备为MCU时,该MCU可以从本地会场接收会控者输入的语音控制请求信号,该语音控制请求信号可以为语音唤醒信号,或手势识别信号,或通过按键或拨号等触发信号。
例如,当会控者输入的是语音唤醒词时,该语音唤醒词可以是文本,也可以是语音,通过本地会场的麦克风采集与会人的语音控制请求信号,若该语音控制请求信号与预设的语音会控激活语音匹配,则启用语音控制模式,即触发语音会控;
当会控者输入的是手势识别信号时,该手势识别信号可以通过触摸屏感知或者摄像机识别,若该手势识别信号与预设的语音会控激活手势匹配,则启用语音控制模式,即触发语音会控。
其中,MCU获取的语音唤醒词或者手势识别信号也可以通过本地会场的会议终端设备获取会控者的语音数据或者手势信号。
在触发语音会控之后,MCU可以对本地会场进行混音控制,使得本地会场的声音信号不通过本地会场是麦克风传送至远端会场。
202、控制设备根据本地会场的语音信号幅度获取本地会场和远端会场的回声能量大小,并通过语音活动侦测获取本地会场的背景噪声能量。
其中,在开启语音控制模式之后,在对本地会场的语音信号和远端会场的语音信号进行双讲检测之前,对本地会场中麦克风采集的语音信号进行混音分离,以使得本地会场的语音信号不传输至远端会场,远端会场在本地会场进行语音控制期间,不接收本地会场的语音信号。
示例性的,当会控者启动语音会控后,MCU可以通过语音信号幅度获取回声能量大小,回声能量大小为语音信号幅度的平方。其中,回声能量为近端会场和远端会场同时在说话时的回声输入。同时,MCU可以通过VAD(VoiceActivityDetection,语音活动侦测)检测获取背景噪声能量大小,其中,背景噪声可以亦称本底噪音,一般指电声系统中除有用信号以外的总噪声,或物体自身振动、外来干扰而形成的固有的噪声。
203、控制设备通过自适应滤波器中的前台滤波器对本地会场和远端会场的回声信号进行自适应滤波,将回声信号乘以滤波系数,回声信号乘以滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
示例性的,当会控者启动语音会控后,MCU开始对本地会场和远端会场进行双讲检测,并持续记录双讲检测的结果。具体的,可以利用MCU中的两个基于NLMS(NormalizedLeastMeanSquare,归一化最小均方)算法的自适应滤波器对回声信号进行自适应滤波。该自适应滤波器可以包括前台滤波器和后台滤波器。
具体的,可以通过前台滤波器进行自适应滤波来收敛本地会场和远端会场的回声信号的语音分贝,即让回声信号发生衰减,获取滤波后的回声抵消输出能量。其中,随着近端会场和远端会场与会人的语音信号的变化,前台滤波器可以通过参考信号和回声信号获取前台滤波器系数,将回声信号乘以该系数,可以获取衰减后的回声抵消输出能量。同时,当前台滤波器收敛较好时,可以将前台滤波器系数备份到后台滤波器,当前台滤波器对回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值时,更新前台滤波器系数到后台滤波器,通过该后台滤波器将回声信号进行自适应滤波,将回声信号乘以滤波系数获取滤波后的回声抵消输出能量。其中,回声信号为本地会场与远端会场都在讲话时的声音信号。
其中,回声抵消输出能量可以为本地会场的与会人语音经过对端空间传输,又被对端麦克风采集到的语音信号传回到本地会场的语音能量。参考信号可以为远端会场的语音信号还未经过本地会场的扬声器播放的语音信号。
204、控制设备判断回声能量是否大于回声抵消输出能量的两倍与第一阈值的和,若回声能量大于回声抵消输出能量的两倍与第一阈值的和,则进入步骤205,若回声能量不大于回声抵消输出能量的两倍与第一阈值的和,则进入步骤208。
205、控制设备双讲检测结果为单讲。
具体的,在获取了滤波后的回声能量后,可以判断回声能量是否大于回声抵消输出能量的两倍与第一阈值,来判断双讲检测结果是否为单讲。具体可以表示为Pd>2*Pwf+T1,其中,Pd表示回声能量,Pwf表示前台滤波回声抵消输出能量,T1表示第一阈值。即当Pd>2*Pwf+T1时,双讲检测结果可以为单讲。第一阈值T1可以根据所在的会议场景的空间大小进行调节。该单讲可以为远端单讲或近端单讲。
另外,也可以根据回声输入与回声抵消输出能量的差,是否大于6dB与第一阈值的和,来判断双讲检测结果是否为单讲。具体可以表示为Pd-Pwf>6dB+T1,其中,Pd表示回声能量,Pwf表示前台滤波回声抵消输出能量,T1表示第一阈值。即当Pd-Pwf>6dB+T1时,双讲检测结果为单讲。
当自适应滤波器是滤波系数发散而发生变化时,本地会场的回声路径变化,可以根据后台滤波器回声抵消输出能量是否大于前台滤波器的回声抵消输出能量与第六阈值的和,若后台滤波器的回声抵消输出能量大于前台滤波器的回声抵消输出能量与第六阈值的和,判定双讲检测结果为单讲。具体可以表示为:Pwb>Pwf+T2,其中,Pwb表示后台滤波器的回声抵消输出,Pwf表示前台滤波回声抵消输出,T2表示第六阈值,可以根据本地会场的空间大小来确定。即当Pwb>Pwf+T2时,可以确定双讲检测结果为单讲。
其中,回声路径变化可以是由于多种原因导致的,例如本地会场的麦克风的位置发生变化,或本地会场的扬声器的音量发生变化等,当回声路径发生变化时,使得自适应滤波器的灵敏度发生变化,即自适应滤波器的系数发散而发生变化。
206、控制设备判断回声能量是否小于背景噪声能量的两倍与第二阈值的和,若回声能量小于背景噪声能量的两倍与第二阈值的和,则进入步骤207,若回声能量不小于背景噪声能量的两倍与第二阈值的和,则返回步骤204。
207、控制设备双讲检测结果为远端单讲,而后进入步骤212。
具体的,在确定了双讲检测结果为单讲后,可以判断回声能量是否小于背景噪声能量的两倍与第二阈值的和,来判断近端是否讲话,具体可以表示为:Pd<2*Pn+T3,其中,Pd表示回声能量,Pn表示本地会场的背景噪声能量,T3表示第二阈值,可以根据本地会场的空间大小来确定。当Pd<2*Pn+T3时,近端没有讲话,可以确定双讲检测结果为远端单讲。
也可以判断回声能量与背景噪声能量的差值,是否小于6dB与T3的和,来判断近端是否讲话,具体可以表示为:Pd-Pn<6dB+T3,其中,Pd表示回声能量,Pn表示本底会场的背景噪声能量,T3表示第二阈值,当满足Pd-Pn<6dB+T3时,近端没有讲话,可以确定双讲检测结果为远端单讲。
208、若回声能量小于背景噪声能量的两倍与第二阈值的和,则控制设备确定本地会场没有讲话,若回声能量不小于背景噪声能量的两倍与第二阈值的和,则进入步骤209。
具体的,当回声能量不大于回声抵消输出能量的两倍与第一阈值的和时,即当Pd≤2*Pwf+T1时,若回声能量小于背景噪声能量的两倍与第二阈值的和,即当Pd<2*Pn+T3时,则可以确定本地会场没有讲话,其中,Pd表示回声能量,Pn表示本地会场的背景噪声能量,Pwf表示前台滤波回声抵消输出,T1表示第一阈值,T3表示第二阈值。
209、控制设备判断参考信号是否小于通过语音活动侦测获取的远端噪音能量的两倍与第三阈值的和,若参考信号小于远端噪音能量的两倍与第三阈值的和,则进入步骤210,若参考信号不小于远端噪音能量的两倍与第三阈值的和,则进入步骤211。
具体的,当回声能量不小于背景噪声能量的两倍与第二阈值的和时,可以判定本地会场讲话,具体可以表示为:当Pd≥2*Pn+T3时,再判断参考信号是否小于远端噪音能量的两倍与第四阈值的和,来判断远端是否讲话,具体可以表示为:Pref<2*Pnfar+T4,其中,Pref表示自适应滤波器的参考信号,Pnfar表示远端噪声,T4表示第三阈值。其中,参考信号可以为远端会场的语音信号经过网络传输还未经过本地会场的扬声器播放的语音信号。
210、控制设备双讲检测结果为近端单讲,而后进入步骤213。
具体的,当回声能量不小于背景噪声能量的两倍与第三阈值的和时,本地会场讲话,即当Pd≥2*Pn+T3时,若参考信号小于远端噪音能量的两倍与第三阈值的和时,确定远端没有讲话,即当Pref<2*Pnfar+T4时,远端没有讲话,双讲检测结果为近端单讲。
也可以根据参考信号与远端噪声的差值,是否小于6dB与第三阈值的和,具体可以表示为:Pref-Pnfar<6dB+T4,其中,Pref表示自适应滤波器的参考信号,Pnfar表示远端噪声,T4表示第三阈值。即当Pref-Pnfar<6dB+T4时,远端没有讲话,双讲检测结果为近端单讲。
211、控制设备双讲检测结果为双讲,而后进入步骤214。
具体的,当回声能量不大于回声抵消输出能量的两倍于第一阈值的和时,若回声能量不小于背景噪声能量的两倍与第二阈值的和,则本地会场讲话,即当Pd≤2*Pwf+T1时,若Pd≥2*Pn+T3,则本地会场讲话,且若远端会场的参考信号不小于远端噪音能量的两倍于第三阈值的和,远端会场讲话,即Pref≥2*Pnfar+T4,远端会场讲话,这样一来,可以确定双讲检测结果为双讲,即本地会场与远端会场都在讲话。
212、控制设备保持本地会场中扬声器的音量不变。
示例性的,当确定了双讲检测结果为远端单讲时,MCU不调节本地会场的扬声器的音量,当本地会场的麦克风通过麦克风采集到远端单讲的语音数据时,MCU不将语音数据传送至语音识别器,该语音识别器不对该语音数据进行语音识别。其中,该语音识别器在MCU中。
213、控制设备保持本地会场中扬声器的音量不变,并将本地会场获取的近端单讲时的语音数据发送至语音识别器进行语音识别,而后进入步骤215。
示例性的,当MCU确定了双讲检测结果为近端单讲时,不调节本地会场中扬声器的音量,并将近端单讲的语音数据发送至语音识别器,以便于语音识别器对近端单讲的语音数据进行语音识别。
214、控制设备将扬声器的音量降低到第四阈值,并将本地会场获取的双讲时的语音数据发送至语音识别器进行语音识别。
示例性的,当MCU确定了双讲检测结果为双讲时,MCU将本地会场的扬声器音量调小,可以降到预设的第四阈值,该第四阈值的范围例如可以降至5dB~10dB。这样,在双讲状态时,远端会场的声音经过本地会场的扬声器传输出来的声音减小,降低了远端会场声音对本地会场进行语音控制的影响,同时,本地会场还可以听到远端会场的声音信息。
215、控制设备获取语音识别结果。
具体的,当双讲检测结果为远端单讲时,MCU在获取到了远端单讲的语音数据后,MCU的语音识别器不对该远端单讲的语音数据进行语音识别;当双讲检测结果为近端单讲,则语音识别器将近端单讲时的语音数据与控制命令集进行比较,若近端单讲时的语音数据与控制命令集匹配,则获取语音识别结果;当双讲检测结果为双讲时,MCU则对双讲时远端会场的语音数据进行回声抵消,并通过语音识别器将回声抵消后的语音数据与控制命令集进行比较,若回声抵消后的语音数据与控制命令集匹配,则获取语音识别结果,若该语音数据与控制命令集中的控制命令匹配,则该语音数据为有效的语音控制数据。
216、控制设备从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作。
示例性的,当语音数据与控制命令集匹配时,MCU根据识别出的控制命令实施语音呼叫或语音控制操作。例如,该语音呼叫可以为切换到1会场等。
若要退出语音控制模式,则控制设备接收退出请求信号,退出请求信号包括语音退出信号,或手势退出信号,或按键或拨号等触发方式中的触发信号。
示例性的,MCU在执行了响应的会控操作后,若要退出语音控制模式,则可以向MCU发送退出请求信号,以便于MCU退出语音控制模式。若退出请求信号与预设的语音会控退出语音匹配,或退出请求信号与预设的语音会控退出手势匹配,则控制设备退出语音控制模式。
示例性的,该退出请求信号可以为语音退出信号或者手势退出信号。当该退出请求信号与语音识别器中预设的语音会控退出语音匹配时,或者与预设的语音会控退出手势匹配时,MCU就可以退出语音控制模式。
本发明实施例提供一种语音控制方法,通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。
本发明又一实施例提供一种控制设备01,如图3所示,包括:
会控启动单元011,用于接收本地会场的语音控制请求信号,启用语音控制模式。
双讲检测单元012,用于对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲。
会控管理单元013,用于根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果。
会控执行单元014,用于从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作。
可选的,如图4所示,双讲检测单元012可以包括:
第一判断子单元0121,用于判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和;
若所述第一判断子单元0121确定所述回声能量不大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过第二判断子单元0122判断所述回声能量是否小于所述本地会场的背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元0122确定所述回声能量不小于所述背景噪声能量的两倍与所述第二阈值的和,则所述第二判断子单元0122确定所述本地会场讲话,并通过第三判断子单元0123判断所述远端会场的参考信号是否小于通过所述语音活动侦测获取的远端噪音能量的两倍与第三阈值的和确定所述远端会场是否讲话,所述参考信号为所述远端会场的语音信号经网络传输还未经过所述本地会场的扬声器播放的语音信号;
若所述第三判断子单元0123确定所述参考信号小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元0123确定所述远端会场没有讲话,所述第三判断子单元0123确定所述双讲检测结果为所述近端单讲;
若所述第三判断子单元0123确定所述参考信号不小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元0123确定所述远端会场讲话,所述第三判断子单元0123确定所述双讲检测结果为所述双讲。
可选的,双讲检测单元012还可以用于:
若所述第一判断子单元0121确定所述回声能量大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过所述第二判断子单元0122判断所述回声能量是否小于所述背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元0122确定所述回声能量小于所述背景噪声能量的两倍与第二阈值的和,则所述第二判断子单元0122确定所述本地会场没有讲话,所述第二判断子单元0122确定所述双讲检测结果为所述远端单讲。
可选的,如图5所示,在判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和之前,双讲检测单元012还可以包括:
控制子单元0124,用于通过对所述本地会场中麦克风采集的语音信号进行混音分离,以使得所述本地会场的语音信号不传输至所述远端会场;
获取子单元0125,用于根据所述本地会场的语音信号幅度获取所述本地会场和所述远端会场的回声能量大小,并通过语音活动侦测获取所述本地会场的背景噪声能量;
滤波子单元0126,用于通过自适应滤波器中的前台滤波器对所述本地会场和所述远端会场的回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数,所述回声信号乘以所述滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
可选的,会控管理单元013可以具体用于:
若双讲检测结果为远端单讲,则保持本地会场中扬声器的音量不变;
若双讲检测结果为近端单讲,则保持本地会场中扬声器的音量不变,并将本地会场获取的近端单讲时的语音数据发送至语音识别器进行语音识别,获取语音识别结果;
若双讲检测结果为双讲,则将扬声器的音量降低到第四阈值,并将本地会场获取的双讲时的语音数据发送至语音识别器进行语音识别,获取语音识别结果。
可选的,会控管理单元013还可以用于:
若双讲检测结果为近端单讲,则语音识别器将近端单讲时的语音数据与控制命令集进行比较,若近端单讲时的语音数据与控制命令集匹配,则获取语音识别结果;
若双讲检测结果为双讲,则对双讲时远端会场的语音数据进行回声抵消,并通过语音识别器将回声抵消后的语音数据与控制命令集进行比较,若回声抵消后的语音数据与控制命令集匹配,则获取语音识别结果。
可选的,滤波子单元0126还可以用于:
若前台滤波器对回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值,则将前台滤波器的滤波系数备份至自适应滤波器的后台滤波器中;
通过后台滤波器将回声信号进行自适应滤波,将回声信号乘以滤波系数获取衰减后的回声抵消输出能量。
本发明实施例提供一种控制设备,通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。
本发明又一实施例提供一种控制设备02,如图6所示,包括:
处理器(Processor)021,通信接口(CommunicationInterfaces)022,存储器(Memory)023,通信总线024。
处理器021,通信接口022,存储器023通过通信总线024完成相互间的通信。
通信接口022,用于与会控设备通信,比如会议电话、手机、会议终端遥控器、视频会议设备等。
处理器021,用于执行程序025,具体可以执行上述图1或图2所示的方法实施例中的相关步骤。
具体的,程序025可以包括程序代码,程序代码包括计算机操作指令。
处理器021可能是一个中央处理器CPU(CentralProcessingUnit),或者是特定集成电路ASIC(ApplicationSpecificIntegratedCircuit),或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器023,用于存放程序025。存储器023可能包含高速RAM(RandomAccessMemory)存储器,也可能还包括非易失性存储器(Non-volatileMemory),例如至少一个磁盘存储器。程序025具体可以包括:
会控启动单元011,用于接收本地会场的语音控制请求信号,启用语音控制模式。
双讲检测单元012,用于对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲。
会控管理单元013,用于根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果。
会控执行单元014,用于从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作。
程序025中各模块的具体实现可以参见图3至图5所示实施例中的相应模块,在此不赘述。
本发明实施例提供一种控制设备,通过接收本地会场的语音控制请求信号,启用语音控制模式,对本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,双讲检测结果为近端单讲,或远端单讲,或双讲,根据双讲检测结果,确定本地会场中扬声器的音量,并在双讲检测结果为近端单讲或所双讲时,对本地会场获取的语音数据进行语音识别,获取语音识别结果,进而从语音识别结果中获取会控操作指令,并根据会控操作指令执行相应的会控操作,能够在语音控制场景下接收到其他会场的声音信息,并简化了会议控制方式,提升了语音识别的效果。
在本申请所提供的几个实施例中,应该理解到,所揭露的方法和设备,可以通过其它的方式实现。例如,以上所描述的设备实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,在本发明各个实施例中的设备和系统中,各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理包括,也可以两个或两个以上单元集成在一个单元中。且上述的各单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:U盘、移动硬盘、只读存储器(ReadOnlyMemory,简称ROM)、随机存取存储器(RandomAccessMemory,简称RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (16)
1.一种语音控制方法,其特征在于,包括:
接收本地会场的语音控制请求信号,启用语音控制模式;
对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,所述双讲检测结果为近端单讲,或远端单讲,或双讲;
根据所述双讲检测结果,确定所述本地会场中扬声器的音量,并在所述双讲检测结果为所述双讲时,将所述本地会场的扬声器的音量降低到预设的音量阈值,并对所述本地会场获取的语音数据进行语音识别,获取语音识别结果;
从所述语音识别结果中获取会控操作指令,并根据所述会控操作指令执行相应的会控操作。
2.根据权利要求1所述的方法,其特征在于,所述预设的音量阈值所属的范围为5dB(分贝)至10dB。
3.根据权利要求1或2所述的方法,其特征在于,所述对所述本地会场获取的语音数据进行语音识别具体包括:将所述本地会场获取的语音数据发送至语音识别器进行语音识别。
4.根据权利要求1或2所述的方法,其特征在于,所述对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果包括:
判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和;
若所述回声能量不大于所述回声抵消输出能量的两倍与所述第一阈值的和,根据所述回声能量是否小于所述本地会场的背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述回声能量不小于所述背景噪声能量的两倍与所述第二阈值的和,则所述本地会场讲话,并根据所述远端会场的参考信号是否小于通过所述语音活动侦测获取的远端噪音能量的两倍与第三阈值的和判断所述远端会场是否讲话,所述参考信号为所述远端会场的语音信号经网络传输还未经过所述本地会场的扬声器播放的语音信号;
若所述参考信号小于所述远端噪音能量的两倍与第三阈值的和,则所述远端会场没有讲话,所述双讲检测结果为所述近端单讲;
若所述参考信号不小于所述远端噪音能量的两倍与第三阈值的和,则所述远端会场讲话,所述双讲检测结果为所述双讲。
5.根据权利要求4所述的方法,其特征在于,所述通过对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果还包括:
若所述回声能量大于所述回声抵消输出能量的两倍与所述第一阈值的和,根据所述回声能量是否小于所述背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述回声能量小于所述背景噪声能量的两倍与第二阈值的和,则所述本地会场没有讲话,所述双讲检测结果为所述远端单讲。
6.根据权利要求5所述的方法,其特征在于,在判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和之前,所述方法还包括:
对所述本地会场中麦克风采集的语音信号进行混音分离,以使得所述本地会场的语音信号不传输至所述远端会场;
根据所述本地会场的语音信号幅度获取所述本地会场和所述远端会场的回声能量大小,并通过语音活动侦测获取所述本地会场的背景噪声能量;
通过自适应滤波器中的前台滤波器对所述本地会场和所述远端会场的回声信号进行自适应滤波,将所述回声信号乘以滤波系数,所述回声信号乘以所述滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
7.根据权利要求1所述的方法,其特征在于,所述获取语音识别结果包括:
对所述双讲时远端会场的语音数据进行回声抵消,并通过所述语音识别器将回声抵消后的语音数据与所述控制命令集进行比较,若所述回声抵消后的语音数据与所述控制命令集匹配,则获取所述语音识别结果。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
若所述前台滤波器对所述回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值,则将所述前台滤波器的滤波系数备份至所述自适应滤波器的后台滤波器中;
通过所述后台滤波器将所述回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数获取衰减后的回声抵消输出能量。
9.一种控制设备,其特征在于,包括:
会控启动单元,用于接收本地会场的语音控制请求信号,启用语音控制模式;
双讲检测单元,用于对所述本地会场的语音信号和远端会场的语音信号进行双讲检测,获取双讲检测结果,所述双讲检测结果为近端单讲,或远端单讲,或双讲;
会控管理单元,用于在所述双讲检测结果为所述双讲时,将所述本地会场的扬声器音量降低到预设的阈值,并对所述本地会场获取的语音数据进行语音识别,获取语音识别结果;
会控执行单元,用于从所述语音识别结果中获取会控操作指令,并根据所述会控操作指令执行相应的会控操作。
10.根据权利要求9所述的控制设备,其特征在于,所述预设的阈值所属的范围为5dB(分贝)至10dB。
11.根据权利要求9或10所述的控制设备,其特征在于,所述会控管理单元用于对所述本地会场获取的语音数据进行语音识别,具体包括:所述会控管理单元用于将所述本地会场获取的语音数据发送至语音识别器进行语音识别。
12.根据权利要求9或10所述的控制设备,其特征在于,所述双讲检测单元包括:
第一判断子单元,用于判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和;
若所述第一判断子单元确定所述回声能量不大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过第二判断子单元判断所述回声能量是否小于所述本地会场的背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元确定所述回声能量不小于所述背景噪声能量的两倍与所述第二阈值的和,则所述第二判断子单元确定所述本地会场讲话,并通过第三判断子单元判断所述远端会场的参考信号是否小于通过所述语音活动侦测获取的远端噪音能量的两倍与第三阈值的和确定所述远端会场是否讲话,所述参考信号为所述远端会场的语音信号经网络传输还未经过所述本地会场的扬声器播放的语音信号;
若所述第三判断子单元确定所述参考信号小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元确定所述远端会场没有讲话,所述第三判断子单元确定所述双讲检测结果为所述近端单讲;
若所述第三判断子单元确定所述参考信号不小于所述远端噪音能量的两倍与第三阈值的和,则所述第三判断子单元确定所述远端会场讲话,所述第三判断子单元确定所述双讲检测结果为所述双讲。
13.根据权利要求12所述的控制设备,其特征在于,所述双讲检测单元还用于:
若所述第一判断子单元确定所述回声能量大于所述回声抵消输出能量的两倍与所述第一阈值的和,则通过所述第二判断子单元判断所述回声能量是否小于所述背景噪声能量的两倍与第二阈值的和判断所述本地会场是否讲话;
若所述第二判断子单元确定所述回声能量小于所述背景噪声能量的两倍与第二阈值的和,则所述第二判断子单元确定所述本地会场没有讲话,所述第二判断子单元确定所述双讲检测结果为所述远端单讲。
14.根据权利要求13所述的控制设备,其特征在于,在判断所述本地会场和所述远端会场的回声能量是否大于所述本地会场和所述远端会场的回声抵消输出能量的两倍与第一阈值的和之前,所述双讲检测单元还包括:
控制子单元,用于通过对所述本地会场中麦克风采集的语音信号进行混音分离,以使得所述本地会场的语音信号不传输至所述远端会场;
获取子单元,用于根据所述本地会场的语音信号幅度获取所述本地会场和所述远端会场的回声能量大小,并通过语音活动侦测获取所述本地会场的背景噪声能量;
滤波子单元,用于通过自适应滤波器中的前台滤波器对所述本地会场和所述远端会场的回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数,所述回声信号乘以所述滤波系数后的回声信号对应的能量为滤波后的回声抵消输出能量。
15.根据权利要求9所述的控制设备,其特征在于,所述会控管理单元还用于:对所述双讲时远端会场的语音数据进行回声抵消,并通过所述语音识别器将回声抵消后的语音数据与所述控制命令集进行比较,若所述回声抵消后的语音数据与所述控制命令集匹配,则获取所述语音识别结果。
16.根据权利要求14所述的控制设备,其特征在于,所述滤波子单元还用于:
若所述前台滤波器对所述回声信号进行衰减时的连续N帧的语音分贝数达到第五阈值,则将所述前台滤波器的滤波系数备份至所述自适应滤波器的后台滤波器中;
通过所述后台滤波器将所述回声信号进行自适应滤波,将所述回声信号乘以所述滤波系数获取衰减后的回声抵消输出能量。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610006363.5A CN105513596B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310206738.9A CN103337242B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
CN201610006363.5A CN105513596B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310206738.9A Division CN103337242B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105513596A true CN105513596A (zh) | 2016-04-20 |
CN105513596B CN105513596B (zh) | 2020-03-27 |
Family
ID=49245385
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610006363.5A Active CN105513596B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
CN201310206738.9A Active CN103337242B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310206738.9A Active CN103337242B (zh) | 2013-05-29 | 2013-05-29 | 一种语音控制方法和控制设备 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN105513596B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106033673A (zh) * | 2015-03-09 | 2016-10-19 | 电信科学技术研究院 | 一种近端语音信号检测方法及装置 |
CN107968969A (zh) * | 2017-09-13 | 2018-04-27 | 深圳中泰智丰物联网科技有限公司 | 一种用户语音的响应方法、装置及终端设备 |
CN108429994A (zh) * | 2017-02-15 | 2018-08-21 | 阿里巴巴集团控股有限公司 | 音频识别、回声消除方法、装置及设备 |
CN108877825A (zh) * | 2018-06-26 | 2018-11-23 | 珠海宏桥高科技有限公司 | 一种基于语音激励和逻辑控制的网络回声消除装置及方法 |
CN109068012A (zh) * | 2018-07-06 | 2018-12-21 | 南京时保联信息科技有限公司 | 一种用于音频会议系统的双端通话检测方法 |
CN109524018A (zh) * | 2017-09-19 | 2019-03-26 | 华为技术有限公司 | 一种回声处理方法及设备 |
CN110602327A (zh) * | 2019-09-24 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 语音通话方法、装置、电子设备及计算机可读存储介质 |
CN110865789A (zh) * | 2019-11-20 | 2020-03-06 | 随锐科技集团股份有限公司 | 基于语音识别的智能开启麦克风的方法及系统 |
CN111383648A (zh) * | 2018-12-27 | 2020-07-07 | 北京搜狗科技发展有限公司 | 一种回波消除方法和装置 |
CN111556210A (zh) * | 2020-04-23 | 2020-08-18 | 深圳市未艾智能有限公司 | 通话语音处理方法与装置、终端设备和存储介质 |
CN113038340A (zh) * | 2021-03-24 | 2021-06-25 | 睿云联(厦门)网络通讯技术有限公司 | 基于安卓设备的声学回音消除调优方法、系统及存储介质 |
CN114302197A (zh) * | 2021-03-19 | 2022-04-08 | 海信视像科技股份有限公司 | 一种语音分离控制方法及显示设备 |
WO2024073573A1 (en) * | 2022-09-28 | 2024-04-04 | Shure Acquisition Holdings, Inc. | Wideband doubletalk detection for optimization of acoustic echo cancellation |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104301487A (zh) * | 2014-09-30 | 2015-01-21 | 成都英博联宇科技有限公司 | 一种带特征识别的智能会议电话机 |
CN107750038B (zh) * | 2017-11-09 | 2020-11-10 | 广州视源电子科技股份有限公司 | 音量调节方法、装置、设备及存储介质 |
CN107910014B (zh) * | 2017-11-23 | 2021-11-09 | 苏州科达科技股份有限公司 | 回声消除的测试方法、装置及测试设备 |
US10867601B2 (en) * | 2018-01-17 | 2020-12-15 | Citrix Systems, Inc. | In-band voice-assistant/concierge for controlling online meetings |
CN108540680B (zh) * | 2018-02-02 | 2021-03-02 | 广州视源电子科技股份有限公司 | 讲话状态的切换方法及装置、通话系统 |
CN108986818A (zh) * | 2018-07-04 | 2018-12-11 | 百度在线网络技术(北京)有限公司 | 视频通话挂断方法、装置、设备、服务端及存储介质 |
CN109545237B (zh) * | 2018-10-24 | 2022-01-28 | 广东思派康电子科技有限公司 | 一种计算机可读存储介质和应用该介质的语音交互音箱 |
CN109951519A (zh) * | 2019-01-22 | 2019-06-28 | 视联动力信息技术股份有限公司 | 一种会议业务的控制方法和装置 |
CN111049848B (zh) | 2019-12-23 | 2021-11-23 | 腾讯科技(深圳)有限公司 | 通话方法、装置、系统、服务器及存储介质 |
CN111081246B (zh) * | 2019-12-24 | 2022-06-24 | 北京达佳互联信息技术有限公司 | 直播机器人唤醒方法、装置、电子设备及存储介质 |
CN112489413B (zh) * | 2020-11-27 | 2022-01-11 | 京东方科技集团股份有限公司 | 遥控器的控制方法及系统、存储介质、电子设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060268751A1 (en) * | 2005-05-25 | 2006-11-30 | Cisco Technology, Inc. | Method and system for maintaining video connectivity |
CN101067927A (zh) * | 2007-04-19 | 2007-11-07 | 北京中星微电子有限公司 | 音量调整方法及装置 |
US20080101622A1 (en) * | 2004-11-08 | 2008-05-01 | Akihiko Sugiyama | Signal Processing Method, Signal Processing Device, and Signal Processing Program |
CN101183963A (zh) * | 2007-11-09 | 2008-05-21 | 深圳华为通信技术有限公司 | 一种视讯通信的控制方法和设备 |
US20080267420A1 (en) * | 2007-04-30 | 2008-10-30 | Majid Fozunbal | Methods and systems for reducing acoustic echoes in multichannel audio-communication systems |
CN101702762A (zh) * | 2006-09-30 | 2010-05-05 | 华为技术有限公司 | 一种实现多语言会议的多点控制单元和会议终端 |
CN102164210A (zh) * | 2010-01-08 | 2011-08-24 | 科尼桑特系统股份有限公司 | 用于回声消除和回声抑制的系统和方法 |
CN102404542A (zh) * | 2010-09-09 | 2012-04-04 | 华为终端有限公司 | 多屏视频会议中对与会者图像显示进行调整的方法及装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1917386B (zh) * | 2006-09-05 | 2010-06-02 | 华为技术有限公司 | 一种回波抵消中双讲状态的检测方法 |
CN102160296B (zh) * | 2009-01-20 | 2014-01-22 | 华为技术有限公司 | 双端通话检测方法及装置 |
CN103064379A (zh) * | 2012-12-20 | 2013-04-24 | 黑龙江省电力有限公司信息通信分公司 | 基于语音识别的会议室智能控制方法 |
-
2013
- 2013-05-29 CN CN201610006363.5A patent/CN105513596B/zh active Active
- 2013-05-29 CN CN201310206738.9A patent/CN103337242B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080101622A1 (en) * | 2004-11-08 | 2008-05-01 | Akihiko Sugiyama | Signal Processing Method, Signal Processing Device, and Signal Processing Program |
US20060268751A1 (en) * | 2005-05-25 | 2006-11-30 | Cisco Technology, Inc. | Method and system for maintaining video connectivity |
CN101702762A (zh) * | 2006-09-30 | 2010-05-05 | 华为技术有限公司 | 一种实现多语言会议的多点控制单元和会议终端 |
CN101067927A (zh) * | 2007-04-19 | 2007-11-07 | 北京中星微电子有限公司 | 音量调整方法及装置 |
US20080267420A1 (en) * | 2007-04-30 | 2008-10-30 | Majid Fozunbal | Methods and systems for reducing acoustic echoes in multichannel audio-communication systems |
CN101183963A (zh) * | 2007-11-09 | 2008-05-21 | 深圳华为通信技术有限公司 | 一种视讯通信的控制方法和设备 |
CN102164210A (zh) * | 2010-01-08 | 2011-08-24 | 科尼桑特系统股份有限公司 | 用于回声消除和回声抑制的系统和方法 |
CN102404542A (zh) * | 2010-09-09 | 2012-04-04 | 华为终端有限公司 | 多屏视频会议中对与会者图像显示进行调整的方法及装置 |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106033673A (zh) * | 2015-03-09 | 2016-10-19 | 电信科学技术研究院 | 一种近端语音信号检测方法及装置 |
CN106033673B (zh) * | 2015-03-09 | 2019-09-17 | 电信科学技术研究院 | 一种近端语音信号检测方法及装置 |
CN108429994A (zh) * | 2017-02-15 | 2018-08-21 | 阿里巴巴集团控股有限公司 | 音频识别、回声消除方法、装置及设备 |
CN108429994B (zh) * | 2017-02-15 | 2020-10-09 | 阿里巴巴集团控股有限公司 | 音频识别、回声消除方法、装置及设备 |
CN107968969A (zh) * | 2017-09-13 | 2018-04-27 | 深圳中泰智丰物联网科技有限公司 | 一种用户语音的响应方法、装置及终端设备 |
CN107968969B (zh) * | 2017-09-13 | 2019-08-20 | 深圳中泰智丰物联网科技有限公司 | 一种用户语音的响应方法、装置及终端设备 |
CN109524018A (zh) * | 2017-09-19 | 2019-03-26 | 华为技术有限公司 | 一种回声处理方法及设备 |
CN109524018B (zh) * | 2017-09-19 | 2022-06-10 | 华为技术有限公司 | 一种回声处理方法及设备 |
CN108877825A (zh) * | 2018-06-26 | 2018-11-23 | 珠海宏桥高科技有限公司 | 一种基于语音激励和逻辑控制的网络回声消除装置及方法 |
CN109068012A (zh) * | 2018-07-06 | 2018-12-21 | 南京时保联信息科技有限公司 | 一种用于音频会议系统的双端通话检测方法 |
CN111383648A (zh) * | 2018-12-27 | 2020-07-07 | 北京搜狗科技发展有限公司 | 一种回波消除方法和装置 |
CN111383648B (zh) * | 2018-12-27 | 2024-05-14 | 北京搜狗科技发展有限公司 | 一种回波消除方法和装置 |
CN110602327A (zh) * | 2019-09-24 | 2019-12-20 | 腾讯科技(深圳)有限公司 | 语音通话方法、装置、电子设备及计算机可读存储介质 |
US11875808B2 (en) | 2019-09-24 | 2024-01-16 | Tencent Technology (Shenzhen) Company Limited | Voice call method and apparatus, electronic device, and computer-readable storage medium |
CN110865789A (zh) * | 2019-11-20 | 2020-03-06 | 随锐科技集团股份有限公司 | 基于语音识别的智能开启麦克风的方法及系统 |
CN111556210A (zh) * | 2020-04-23 | 2020-08-18 | 深圳市未艾智能有限公司 | 通话语音处理方法与装置、终端设备和存储介质 |
CN114302197A (zh) * | 2021-03-19 | 2022-04-08 | 海信视像科技股份有限公司 | 一种语音分离控制方法及显示设备 |
CN113038340A (zh) * | 2021-03-24 | 2021-06-25 | 睿云联(厦门)网络通讯技术有限公司 | 基于安卓设备的声学回音消除调优方法、系统及存储介质 |
CN113038340B (zh) * | 2021-03-24 | 2022-04-15 | 睿云联(厦门)网络通讯技术有限公司 | 基于安卓设备的声学回音消除调优方法、系统及存储介质 |
WO2024073573A1 (en) * | 2022-09-28 | 2024-04-04 | Shure Acquisition Holdings, Inc. | Wideband doubletalk detection for optimization of acoustic echo cancellation |
Also Published As
Publication number | Publication date |
---|---|
CN103337242B (zh) | 2016-04-13 |
CN103337242A (zh) | 2013-10-02 |
CN105513596B (zh) | 2020-03-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103337242B (zh) | 一种语音控制方法和控制设备 | |
EP1722545B1 (en) | A method and a system to reduce training time of an acoustic echo canceller in a full-duplex beamforming-based audio conferencing system | |
CN106797508B (zh) | 用于改善音质的方法及耳机 | |
CN108681440A (zh) | 一种智能设备音量控制方法及系统 | |
CN110602327B (zh) | 语音通话方法、装置、电子设备及计算机可读存储介质 | |
CN106791067B (zh) | 一种通话音量调节方法、装置及移动终端 | |
CN102591455A (zh) | 语音数据的选择性传输 | |
CN110968353A (zh) | 中央处理器的唤醒方法、装置、语音处理器以及用户设备 | |
CN106603254A (zh) | 用于群组聊天的控制方法、系统及电子设备 | |
CN102624961A (zh) | 一种防止外放扬声器与麦克风声音串扰的方法及终端 | |
CN111128166B (zh) | 连续唤醒识别功能的优化方法和装置 | |
CN112735398B (zh) | 人机对话模式切换方法及系统 | |
CN103024224B (zh) | 一种多人语音通信中的语音控制方法及装置 | |
CN104202469A (zh) | 管理通话连接的方法、装置和终端 | |
CN111199751B (zh) | 一种麦克风的屏蔽方法、装置和电子设备 | |
CN103677582A (zh) | 一种控制电子设备的方法及一种电子设备 | |
CN108429946A (zh) | 一种控制麦克风使用的方法、装置及麦克风 | |
CN110517682A (zh) | 语音识别方法、装置、设备及存储介质 | |
CN105244037A (zh) | 语音信号处理方法及装置 | |
CN115665602A (zh) | 回声消除方法、装置、会议系统、电子设备和存储介质 | |
WO2021004067A1 (zh) | 一种显示装置 | |
CN113115164A (zh) | 一种基于anc降噪的通话蓝牙耳机 | |
CN115019816A (zh) | 一种回声状态检测方法、装置、计算机存储介质及芯片 | |
CN111565252A (zh) | 移动终端及其通话控制方法 | |
CN109243452A (zh) | 一种用于声音控制的方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |