CN109275025A

CN109275025A - 智能电视中实现语音播报时弱化背景音的方法

Info

Publication number: CN109275025A
Application number: CN201811116650.7A
Authority: CN
Inventors: 罗迪
Original assignee: Sichuan Changhong Electric Co Ltd
Current assignee: Sichuan Changhong Electric Co Ltd
Priority date: 2018-09-25
Filing date: 2018-09-25
Publication date: 2019-01-25

Abstract

本发明公开了智能电视中实现语音播报时弱化背景音的方法，包括：将语音播报音固定在一个独立的音频流S中播放，并将语音播报音的与其他软解背景音分开控制音量，硬解音频均作为背景音处理；当语音播报开启时，语音应用启动并通知AudioService处于播报状态，播报音频流S的实际音量保持为系统音量Vm不变，逐渐降低其他音频流的实际音量和硬解音频音量为Vbg；当语音播报结束时，语音应用退出并通知AudioService处于非播报状态，逐渐恢复非播报音频流的实际音量和硬解音频音量为系统音量值Vm。本发明可以使播报音更清晰可辨，并提高了远场语音模块的人声采集识别率。

Description

智能电视中实现语音播报时弱化背景音的方法

技术领域

本发明涉及一种音量控制方法，具体涉及一种智能电视中实现语音播报时弱化背景音的方法，属于智能电视系统的音量控制技术领域。

背景技术

现今智能电视系统中普遍搭载了智能语音功能。通过遥控器或者远场语音，用户可以自由地与电视交互，更显智能电视的人性化。智能电视系统对于语音播报音和其他各种来源的声音并没有特殊区别，都是混合后一起输出。

因为现在的智能电视系统并没有对语音播报时背景音量的自动管理措施，由于其他声音的干扰，用户听到的播报音就不清晰；同时对于远场语音，过大的背景音量也影响到了语音的人声识别率，影响用户体验。

在这种情况下，本专利提出了一种语音播报时弱化背景音的方法，使语音播报时，背景音量控制在播报音的一定比例之内，并在语音播报开始和结束时，拥有背景音淡出淡入效果，从而使得播报音更清晰可辨，并提高了远场语音模块的人声采集识别率。

发明内容

在对本发明进行说明之前，首先对目前智能电视的音频、音量及其控制原理进行大致的说明，如下：

智能电视系统中存在软解和硬解码两大类音频数据，他们的音量控制方式并不相同，最终软解和硬解的声音都送给音频播放设备(如扬声器)，转换为声音输出。

软解码的音频可分为多种不同的音频流(STREAM)，不同来源的声音可以指定在不同的音频流中播放。比如，音乐在STREAM_MUSIC中播放，提示音在STREAM_NOTIFICATION中播放。各个音频流也可以设定不同的音量值。

系统的AudioService服务对外提供了系统音量的设置、存储、获取等功能。而让音量真正生效的是底层的AudioFlinger服务。AudioFlinger服务设置各个音频流的音量值并混合所有音频流后，输出到扬声器。

用户调整音量需要使用系统AudioService提供的音量调整接口。当用户调整到一个音量Vm时，AudioService首先存储了系统音量值为Vm，再告知AudioFlinger各个音频流的音量已变化；接下来AudioFlinger将使用AudioService设置下来的音量值调整各个音频流实际的输出音量。

硬解码的音频如TV声音等，其声音直接输出到扬声器，其音量是独立控制的。音量调整时，AudioService直接通过硬件接口调整硬解音量。

而本申请提供的智能电视中实现语音播报时弱化背景音的方法，需要实现的目标为：

当播报开始语音应用启动时，系统自动降低包括软硬解在内的背景音量，当播报结束语音应用退出，自动恢复包括软硬解在内的背景音量；语音播报时，其他应用从AudioService拿到的系统音量值不会因为对背景音的压低而产生变化；语音播报时调整音量，不会打破背景音弱化的状态；语音播报开始和结束时，背景音有淡出、淡入效果。

即：假设播报开始前系统音量值为Vm，在语音播报时把背景音量从Vm按一定百分比例A减小为Vbg＝Vm*A，播报结束后把背景音量恢复为Vm。

为达到上述的目的，本发明是这样实现的：

智能电视中实现语音播报时弱化背景音的方法，包括：

将语音播报音固定在一个独立的音频流S中播放，并将语音播报音的与其他软解背景音分开控制音量，硬解音频均作为背景音处理；

当语音播报开启时，语音应用启动并通知AudioService处于播报状态，播报音频流S的实际音量保持为系统音量Vm不变，逐渐降低其他音频流的实际音量和硬解音频音量为Vbg；当语音播报结束时，语音应用退出并通知AudioService处于非播报状态，逐渐恢复非播报音频流的实际音量和硬解音频音量为系统音量值Vm。

其中，更具体的降低及恢复软解背景音音量的方法如下：

当语音播报开始时，AudioService通过一个变量B标记为播报状态。AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值。这时AudioService检测到变量B标记为播报状态，把非播报流的音量都重新调整为Vbg。

当语音播报结束时，AudioService通过一个变量B标记为非播报状态。AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值。这时AudioService检测到变量B标记为非播报状态，把非播报流的音量都恢复为Vm。

更进一步的方案是：

为了实现软解背景音音量的逐渐降低和逐渐恢复，具体如下：

若语音播报时用户调节了系统音量，新的系统音量为Vm1。由于AudioService通过一个变量B标记为播报状态，所以当AudioService向AudioFlinger设置新的音量值时，按照以上所述软解音频播报状态实际音量的计算规则，新的播报音频流S的音量值变为Vm1，新的非播报流音量值变为Vbg1＝Vm1*A，非播报流音量与播报音量的比值Vbg1:Vm1＝Vbg1:(Vm1*A)＝A，即背景音量仍然按比例A保持在弱化的状态。

其中，更具体的降低及恢复硬解背景音音量的方法如下：

硬解背景音是独立控制的，由于应用不会直接获取硬解音频的音量，所以语音播报开始时，直接通过硬件接口降低硬解背景音量即可。具体如下：

当语音播报开始时，AudioService通过一个变量B标记为播报状态。AudioService再通过硬件接口发送音量设置命令调整硬解音频音量。这时AudioService检测到变量B标记为播报状态，把硬解音量都调整为Vbg。

当语音播报结束时，AudioService通过一个变量B标记为非播报状态。AudioService再通过硬件接口发送音量设置命令调整硬解音频音量。这时AudioService检测到变量B标记为非播报状态，把硬解音量都恢复为当前系统音量Vm。

更进一步的方案是：

为了实现硬解背景音音量的逐渐降低和逐渐恢复，具体如下：

若语音播报时用户调节了系统音量，新的系统音量为Vm1。由于AudioService通过一个变量B标记为播报状态，按照以上所述硬解音频播报状态实际音量的计算规则，新的播报音频流S的音量值变为Vm1，新的硬解音量值变为Vbg1＝Vm1*A，硬解音量与播报音量的比值Vbg1:Vm1＝Vbg1:(Vm1*A)＝A，即硬解背景音量仍然按比例A保持在弱化的状态。

更进一步的，为了实现语音播报开始、结束时，背景音淡出和淡入，采用如下的技术方案：

实现背景音淡出

当语音播报开始时，在AudioService中启动一个线程连续调整背景音量。在总时间T内，每隔一小段时间Δt调整一次软硬解背景音量，总共调整n次，第i次(i取值为1～n)调整时的背景音量值Vbgi为：

Vbgi＝Vbg+(Vm-Vbg)*(n-i)/n

实现背景音淡入

当语音播报结束时，在AudioService中启动一个线程连续调整背景音量。在总时间T内，每隔一小段时间Δt调整一次软硬解背景音量，总共调整n次，第i次(i取值为1～n)调整时的背景音量值Vbgi为：

Vbgi＝Vbg+(Vm-Vbg)*i/n

通过本发明的技术方案，可以在智能电视中，实现语音播报时背景音量控制在播报音的一定比例之内，并在语音播报开始和结束时，拥有背景音淡出淡入效果，从而使得播报音更清晰可辨，并提高了远场语音模块的人声采集识别率。

附图说明

图1为播报音和背景音的分离状态示意图；

图2进入语音播报背景音淡化的流程图；

图3退出语音播报背景音还原的流程图；

图4非播报状态调整音量的流程图；

图5语音播报时调整音量的流程图。

具体实施方式

下面结合附图和具体实施例对本发明作进一步的说明。

智能电视中实现语音播报时弱化背景音的方法，包括：

如附图1所示，将语音播报音固定在一个独立的音频流S中播放，并将语音播报音的与其他软解背景音分开控制音量，硬解音频均作为背景音处理；由于语音播报音本身是软解音频，将他固定在一个不常用的音频流S中播放(如STREAM_NOTIFICATION)，以使得播报音与其他软解背景音可以分开控制音量；而硬解的音频都将被当作背景音来处理。

播报时需要降低非播报音频流的实际音量，但是这里不能直接使用系统AudioService提供的音量调整接口，把非语音播报所在流的音量调低，因为：1、这样的方式会使得语音播报时，其他应用从AudioService拿到的系统音量产生变化；2、如果在语音播报的同时用户又调整了系统音量，会导致之前设置好的背景音量从弱化的值恢复为系统音量值，背景音弱化的状态被打破，达不到本发明的目标。

因此，设计将背景音量控制的实施点放在AudioService向AudioFlinger设置音量这一步。仅改变AudioService向AudioFlinger传递的音量值，不改变AudioService本身存储的系统音量值Vm。这样就可以实现即不影响上层AudioService存储的当前系统音量值，又可以自由调整底层AudioFlinger中实际输出的音量大小。

其中，更具体的降低及恢复软解背景音音量的方法如下：

如附图2所示，当语音播报开始时，AudioService通过一个变量B标记为播报状态。AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值。这时AudioService检测到变量B标记为播报状态，把非播报流的音量都重新调整为Vbg。

如附图3所示，当语音播报结束时，AudioService通过一个变量B标记为非播报状态。AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值。这时AudioService检测到变量B标记为非播报状态，把非播报流的音量都恢复为Vm。

更进一步的方案是：

如附图5所示，若语音播报时用户调节了系统音量，新的系统音量为Vm1。由于AudioService通过一个变量B标记为播报状态，所以当AudioService向AudioFlinger设置新的音量值时，按照以上所述软解音频播报状态实际音量的计算规则，新的播报音频流S的音量值变为Vm1，新的非播报流音量值变为Vbg1＝Vm1*A，非播报流音量与播报音量的比值Vbg1:Vm1＝Vbg1:(Vm1*A)＝A，即背景音量仍然按比例A保持在弱化的状态。

另外，如附图4所示，在非播报状态下，需要调整新的系统音量为Vm，由于AudioService通过一个变量B标记为非播报状态，因此，根据要求，通过硬解硬件设备调整硬解音量为Vm，通过AudioFlinger设置新的软解音量为Vm，其中软解音量包括播报流音量和非播报流音量。

其中，更具体的降低及恢复硬解背景音音量的方法如下：

更进一步的方案是：

实现背景音淡出

Vbgi＝Vbg+(Vm-Vbg)*(n-i)/n

比如调整n＝5次，

第1次调整Vbgi＝Vbg+(Vm-Vbg)*4/5

第2次调整Vbgi＝Vbg+(Vm-Vbg)*3/5

…

第5次调整Vbgi＝Vbg+(Vm-Vbg)*0/5＝Vbg

从而把实际背景音量从Vm逐渐减小到Vbg。

例如：

用户唤起语音播报，语音应用启动，系统在T＝0.5秒内，每隔Δt＝0.1秒调整1次音量，总共调整5次，将背景音量Vbg逐渐降低为当前系统音量Vm的30％(假设百分比A＝30％)，用户可以听到背景音淡出效果。

用户在语音播报时增大系统音量，系统同步增大播报音量和背景音量，并使得背景音量还是按一定比例A保持在弱化的状态，用户可以清晰听见播报音。

实现背景音淡入

当语音播报结束时，在AudioService中启动一个线程连续调整背景音量。在总时间T内，每隔一小段时间Δt调整一次软硬解背景音量(方法按照3.2.2.2和3.2.3.2所述)，总共调整n次，第i次(i取值为1～n)调整时的背景音量值Vbgi为：

Vbgi＝Vbg+(Vm-Vbg)*i/n

比如调整n＝5次，

第1次调整Vbg+(Vm-Vbg)*1/5

第2次调整Vbgi＝Vbg+(Vm-Vbg)*2/5

…

第5次调整Vbgi＝Vbg+(Vm-Vbg)*5/5＝Vbg+Vm-Vbg＝Vm

从而把实际背景音量从Vbg逐渐恢复为Vm。

例如：

用户结束语音播报，语音应用退出，系统在T＝0.5秒内，每隔Δt＝0.1秒调整1次音量，总共调整5次，将背景音量Vbg逐渐恢复为当前系统音量Vm，用户可以听到背景音淡入效果。

尽管这里参照本发明的解释性实施例对本发明进行了描述，上述实施例仅为本发明较佳的实施方式，本发明的实施方式并不受上述实施例的限制，应该理解，本领域技术人员可以设计出很多其他的修改和实施方式，这些修改和实施方式将落在本申请公开的原则范围和精神之内。

Claims

1.智能电视中实现语音播报时弱化背景音的方法，其特征在于包括：

2.根据权利要求1所述智能电视中实现语音播报时弱化背景音的方法，其特征在于：

降低及恢复软解背景音音量的方法如下：

当语音播报开始时，AudioService通过一个变量B标记为播报状态；AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值；这时AudioService检测到变量B标记为播报状态，把非播报流的音量都重新调整为Vbg；

当语音播报结束时，AudioService通过一个变量B标记为非播报状态；AudioService再向AudioFlinger发送音量设置命令，设置一遍所有音频流的音量值；这时AudioService检测到变量B标记为非播报状态，把非播报流的音量都恢复为Vm。

3.根据权利要求1所述智能电视中实现语音播报时弱化背景音的方法，其特征在于：

降低及恢复硬解背景音音量的方法如下：

当语音播报开始时，AudioService通过一个变量B标记为播报状态；AudioService再通过硬件接口发送音量设置命令调整硬解音频音量；这时AudioService检测到变量B标记为播报状态，把硬解音量都调整为Vbg；

当语音播报结束时，AudioService通过一个变量B标记为非播报状态；AudioService再通过硬件接口发送音量设置命令调整硬解音频音量；这时AudioService检测到变量B标记为非播报状态，把硬解音量都恢复为当前系统音量Vm。

4.根据权利要求1或2所述智能电视中实现语音播报时弱化背景音的方法，其特征在于：

当语音播报时用户调节了系统音量，新的系统音量为Vm1；由于AudioService通过一个变量B标记为播报状态，所以当AudioService向AudioFlinger设置新的音量值时，新的播报音频流S的音量值变为Vm1，新的非播报流音量值变为Vbg1＝Vm1*A，非播报流音量与播报音量的比值Vbg1:Vm1＝Vbg1:(Vm1*A)＝A，即背景音量仍然按比例A保持在弱化的状态。

5.根据权利要求4所述智能电视中实现语音播报时弱化背景音的方法，其特征在于：

所述背景音量包括软解背景音量和硬解背景音量。

6.根据权利要求1所述智能电视中实现语音播报时弱化背景音的方法，其特征在于：

所述智能电视中实现语音播报时弱化背景音的方法，还包括实现背景音淡出和实现背景音淡入的过程，具体包括：

实现背景音淡出

当语音播报开始时，在AudioService中启动一个线程连续调整背景音量；在总时间T内，每隔一小段时间Δt调整一次软硬解背景音量，总共调整n次，第i次调整时的背景音量值Vbgi为：

Vbgi＝Vbg+(Vm-Vbg)*(n-i)/n

实现背景音淡入

当语音播报结束时，在AudioService中启动一个线程连续调整背景音量；在总时间T内，每隔一小段时间Δt调整一次软硬解背景音量，总共调整n次，第i次调整时的背景音量值Vbgi为：

Vbgi＝Vbg+(Vm-Vbg)*i/n；

其中i取值为1～n。