CN116367076A - 车辆内音频处理方法、设备及存储介质 - Google Patents
车辆内音频处理方法、设备及存储介质 Download PDFInfo
- Publication number
- CN116367076A CN116367076A CN202310351187.9A CN202310351187A CN116367076A CN 116367076 A CN116367076 A CN 116367076A CN 202310351187 A CN202310351187 A CN 202310351187A CN 116367076 A CN116367076 A CN 116367076A
- Authority
- CN
- China
- Prior art keywords
- processing
- audio signal
- signal
- vehicle
- original audio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 296
- 238000003672 processing method Methods 0.000 title claims description 49
- 230000005236 sound signal Effects 0.000 claims abstract description 227
- 238000000034 method Methods 0.000 claims abstract description 43
- 230000008569 process Effects 0.000 claims description 19
- 230000006870 function Effects 0.000 claims description 14
- 238000012546 transfer Methods 0.000 claims description 14
- 238000001914 filtration Methods 0.000 claims description 11
- 238000000926 separation method Methods 0.000 claims description 10
- 230000004044 response Effects 0.000 claims description 7
- 230000004807 localization Effects 0.000 claims description 5
- 230000009466 transformation Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 description 13
- 230000002708 enhancing effect Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 230000007547 defect Effects 0.000 description 3
- 230000001419 dependent effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0272—Voice signal separating
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Stereophonic System (AREA)
Abstract
本发明公开了一种车辆内音频处理方法、设备及存储介质,该方法包括:获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;输出对所述原始音频信号进行结合处理后所得到的目标音频信号。本申请提升了用户的车载音频体验。
Description
技术领域
本发明涉及音频处理领域,尤其涉及一种车辆内音频处理方法、设备及存储介质。
背景技术
目前,新能源汽车的快速发展给车载音频市场带来新的机会,即越来越多的企业希望用户在车载场景下也能享受沉浸式的音频体验,然而,现有沉浸式音频体验主要集中在电影院等,电影院中的沉浸式音频体验往往依赖于其空间声场布置,而车内声场空间分布相较于电影院具有特殊性和差异性,现有车载场景下,大多只有均衡或者简单的环绕处理,关注在车内空间反射造成的低频缺失问题,在音乐的空间感、声像位置、音质清晰度及丰富程度关注不足,导致用户的车载音频体验较差。
发明内容
本申请的主要目的在于提供一种车辆内音频处理方法、设备及存储介质,用于解决现有车载场景下,在音乐的空间感、声像位置、音质清晰度及丰富程度关注不足,致使用户的车载音频体验较差的技术问题。
为实现上述目的,本申请提供了一种车辆内音频处理方法,所述车辆内音频处理方法包括:
获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
在本申请的一种可能实施方式中,所述获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤之后,包括:
获取原始音频信号,并接收用户所关闭的目标信号处理方式;
基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理,其中,其他信号处理方式按照相应顺序执行。
在本申请的一种可能实施方式中,所述输出对所述原始音频信号进行结合处理后所得到的目标音频信号的步骤,包括:
确定每种信号处理方式先后对原始音频信号进行处理后所得到的处理信号,其中,在先的目标信号处理方式处理得到相应音频信号后,将其输出以基于在后的目标信号处理方式继续进行处理,最终得到目标音频信号。
在本申请的一种可能实施方式中,在所述信号处理方式包括增强环绕处理时,所述基于头枕扬声器对所述原始音频信号进行增强环绕信号处理方式的处理步骤,包括:
确定所述原始音频信号中的环境声音信号;
对所述环境声音信号进行滤波和信号变换处理,并对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,得到所述环境声音信号中的人声信息和伴奏信息;
基于所述伴奏信息,以及基于平衡和去噪处理后的人声信息对所述原始音频信号进行增强环绕处理。
在本申请的一种可能实施方式中,在所述信号处理方式包括声像扩展处理时,所述基于头枕扬声器对所述原始音频信号进行声像扩展信号处理方式的处理步骤,包括;
确定所述原始音频信号在左声道和右声道分别传输时的时间差和强度差,其中,所述时间差和强度差符合预设声源定位理论;
基于所述时间差和强度差,对所述原始音频信号进行处理。
在本申请的一种可能实施方式中,在所述信号处理方式包括虚拟环绕处理时,所述基于头枕扬声器对所述原始音频信号进行虚拟环绕信号处理方式的处理步骤,包括:
基于座椅头枕位置,确定头相关冲激响应HRIR数据集;
基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息;
根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理。
在本申请的一种可能实施方式中,所述基于头枕扬声器对所述原始音频信号进行均衡信号处理方式的处理步骤,包括:
确定原始音频信号中的低频音频信号;
基于头枕扬声器中设置的IIR滤波器而不是FIR滤波器,调节所述低频音频信号的增益,实现对所述原始音频信号的处理。
在本申请的一种可能实施方式中,所述基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤,包括:
基于头枕扬声器对所述原始音频信号进行增强环绕信号处理方式处理,得到第一音频信号;
对所述第一音频信号进行声像扩展信号处理方式处理,得到第二音频信号;
对所述第二音频信号进行虚拟多声源的环绕信号处理方式处理,得到第三音频信号;
对所述第三音频信号进行均衡信号处理方式处理,得到目标音频信号。
本申请还提供一种车辆内音频处理装置,所述车辆内音频处理装置包括:
获取模块,用于获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
输出模块,用于输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
本申请还提供一种车辆内音频处理设备,所述车辆内音频处理方法设备包括:存储器、处理器以及存储在存储器上的用于实现所述车辆内音频处理方法的程序,
所述存储器用于存储实现车辆内音频处理方法的程序;
所述处理器用于执行实现所述车辆内音频处理方法的程序,以实现如上所述车辆内音频处理方法的步骤。
本申请还提供一种储存介质,所述存储介质上存储有实现上述车辆内音频处理方法的程序,所述实现车辆内音频处理方法的程序被处理器执行以实现如上所述车辆内音频处理方法的步骤。
本申请提供了一种车辆内音频处理方法、设备及存储介质,与现有车载场景下,在音乐的空间感、声像位置、音质清晰度及丰富程度关注不足,致使用户的车载音频体验较差相比。本申请通过获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;输出对所述原始音频信号进行结合处理后所得到的目标音频信号。可以理解,在本申请中,在得到原始音频信号后,考虑车辆内声学场景和车辆内扬声器分布,基于头枕扬声器以及先后结合多种音效算法即先后对原始音频信号进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理(增强环绕、声像扩展、虚拟环绕以及均衡等信号处理方式均可提升用户的车载音频体验,即增强环绕用来增强音质和环境信息,声像扩展用来增强声像偏移,虚拟环绕突出空间感,均衡处理增加低频效果,从而得到车内立体声环绕效果),即本申请提升了用户的车载音频体验。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本申请的实施例,并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请车辆内音频处理方法第一实施例的流程示意图;
图2为本申请车辆内音频处理方法中基于头枕扬声器对所述原始音频信号进行增强环绕处理的第一示意图;
图3为本申请车辆内音频处理方法中基于头枕扬声器对所述原始音频信号进行增强环绕处理的第二示意图;
图4为本申请实施例方案涉及的硬件运行环境的设备结构示意图;
图5是本申请车辆内音频处理方法中基于头枕扬声器对所述原始音频信号进行均衡处理的示意图;
图6为本申请车辆内音频处理方法中基于头枕扬声器对所述原始音频信号进行声像扩展处理的示意图;
图7为本申请中基于头枕扬声器对所述原始音频信号进行多声源虚拟环绕处理的示意图;
图8为本申请基于头枕扬声器对所述原始音频信号进行多种目标信号处理方式的结合处理的示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供一种车辆内音频处理方法,在本申请车辆内音频处理方法的第一实施例中,参考图1,所述车辆内音频处理方法包括:
步骤S10,获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
步骤S20,输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
在本实施例中,针对的场景为:现有沉浸式音频体验主要集中在电影院等,电影院中的沉浸式音频体验往往依赖于其空间声场布置,而车内声场空间分布相较于电影院具有特殊性和差异性,现有车载场景下,大多只有均衡或者简单的环绕处理,关注在车内空间反射造成的低频缺失问题,在音乐的空间感、声像位置、音质清晰度及丰富程度关注不足,导致用户的车载音频体验较差。
本实施例旨在,提升用户的车载音频体验。
具体步骤如下:
步骤S10,获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
作为一种示例,车辆内音频处理方法可以应用于车辆内音频处理装置,车辆内音频处理装置部署在车载终端。
作为一种示例,车辆内音频处理装置具体部署在车载终端中的头枕扬声器中。
作为一种示例,原始音频信号指的是未经过头枕扬声器处理而直接输出或者播放的声音信号。
作为一种示例,原始音频信号可以指的是车载终端中音乐APP或者视频APP所输出的音频信号。
作为一种示例,原始音频信号是音乐APP或者视频APP对应处理但是未经过头枕扬声器处理后所输出的音频信号。
在获取原始音频信号后,基于头枕扬声器对所述原始音频信号进行多种目标信号处理方式的结合处理。
作为一种示例,由于用户在车辆内一般靠近头枕,因而,基于头枕扬声器对所述原始音频信号进行处理,可以使用户感受到空间环绕声。
作为一种示例,基于头枕扬声器对所述原始音频信号进行多种目标信号处理方式的结合处理;
其中,所述目标信号处理方式包括虚拟环绕处理、增强环绕处理、声像扩展处理以及均衡处理中的多项。
作为一种示例,基于头枕扬声器对所述原始音频信号进行4种目标信号处理方式的结合处理。
由于虚拟环绕处理、增强环绕处理、声像扩展处理以及均衡处理等处理均可提升用户的音频体验,因而,可以基于头枕扬声器对所述原始音频信号进行多种目标信号处理方式的结合处理,很显然,可以提升用户车载音频体验。
特别地,在本实施例中,是基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理。
作为一种示例,对原始音频信号进行增强环绕用来增强音质和环境信息,对原始音频信号进行声像扩展用来增强声像偏移,对原始音频信号进行虚拟环绕突出空间感,对原始音频信号进行均衡处理增加低频效果,本实施例中,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理,因而,本实施例中结合了多种信号处理方式,从而得到车内立体声环绕效果。
其中,所述获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤之后,包括:
步骤S11,获取原始音频信号,并接收用户所关闭的目标信号处理方式;
步骤S12,基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理,其中,其他信号处理方式按照相应顺序执行。
作为一种示例,获取原始音频信号后,先确定用户所选择的多种信号处理方式或者确定用户所关闭的目标信号处理方式,基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理,其中,其他信号处理方式按照上述顺序执行(除目标信号处理方式外,其他按照增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的顺序,例如目标信号处理方式为虚拟环绕,则顺序为增强环绕、声像扩展以及均衡信号处理方式的顺序)。
作为一种示例,获取原始音频信号后,基于用户在车载终端的显示界面上所关闭的目标信号处理方式(车载终端的显示界面上提供可选择的信号处理方式,用户选择后,头枕扬声器接收到选择信息,并基于除目标信号处理方式外其他相应信号处理方式对原始音频信号进行处理,其中,用户可以是通过相应开关选择关闭目标信号处理方式的)。
作为一种示例,基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理(先后进行声像扩展、虚拟环绕以及均衡信号处理方式的结合处理)。
作为一种示例,基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理(先后进行增强环绕、虚拟环绕以及均衡信号处理方式的处理)。
其中,在所述信号处理方式包括增强环绕处理时,所述基于头枕扬声器对所述原始音频信号进行增强环绕信号处理方式的处理步骤,包括:
步骤S13,确定所述原始音频信号中的环境声音信号;
作为一种示例,确定所述原始音频信号中的环境声音信号即原始音频信号的背景信息。
步骤S14,对所述环境声音信号进行滤波和信号变换处理,并对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,得到所述环境声音信号中的人声信息和伴奏信息;
步骤S15,基于所述伴奏信息,以及基于平衡和去噪处理后的人声信息对所述原始音频信号进行增强环绕处理。
作为一种示例,整体地,如图2所示,对环境声音信号进行人声和节拍声(包括声场乐器节拍以及混响等)的分离处理,然后基于人声和节拍声,对原始音频信号进行增强环绕处理。
作为一种示例,对原始音频信号进行增强环绕处理(增强左右环绕)的实现公式为:
L1′=L+Δi(R-L),R1′=R+Δi(L-R)
其中,Δi为权重因子,L为左声道音频数据,R为右边声道音频数据,L1′为增强环绕处理后得到的左声道音频数据,R1′为增强环绕处理后得到的右声道音频数据。
进行增强环绕处理的更为具体的过程:
首先对所述环境声音信号进行滤波和信号变换处理,并对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,得到所述环境声音信号中的人声信息和伴奏信息。
如图3所示,不同于基于左右声道成分的差异性分离背景信息的方法,在本实施例中,提出基于盲源分离的增强环绕处理方法,具体地,通过滤波和变换(快速傅里叶变换和短时傅里叶变换)的信号处理方法,对原始音频信号进行处理,然后对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,即对滤波和信号变换处理后的环境声音信号进行人声和伴奏分离,基于所述伴奏信息,以及基于平衡和去噪处理后的人声信息对所述原始音频信号进行增强环绕处理,进而丰富音乐细节,提升音质。
其中,在所述信号处理方式包括均衡处理时,所述基于头枕扬声器对所述原始音频信号进行均衡信号处理方式的处理步骤,包括:
步骤S16,确定原始音频信号中的低频音频信号;
由于车内声场环境的特殊性,空间反射对扬声器的低频有较大影响,因而,在本实施例中,针对因低频失真,导致扬声器的频响特性不足,降低音频听感问题,进行了进一步的均衡处理。
步骤S17,基于头枕扬声器中设置的IIR滤波器而不是FIR滤波器,调节所述低频音频信号的增益,实现对所述原始音频信号的处理。
具体地,如图5所示,在本实施例中,基于头枕扬声器中设置的IIR滤波器而不是FIR滤波器,调节所述低频音频信号的增益,而采用IIR滤波器而不是FIR滤波器,可以减少滤波器级联时系数的精度误差。同时,IIR滤波器仅需很少的阶数就可以达到与FIR滤波器相同的均衡效果。
步骤S20,输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
在本实施例中,基于头枕扬声器,输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
本申请提供了一种车辆内音频处理方法、设备及存储介质,与现有车载场景下,在音乐的空间感、声像位置、音质清晰度及丰富程度关注不足,致使用户的车载音频体验较差相比。本申请通过获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;输出对所述原始音频信号进行结合处理后所得到的目标音频信号。可以理解,在本申请中,在得到原始音频信号后,考虑车辆内声学场景和车辆内扬声器分布,基于头枕扬声器以及先后结合多种音效算法即先后对原始音频信号进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理(增强环绕、声像扩展、虚拟环绕以及均衡等信号处理方式均可提升用户的车载音频体验,即增强环绕用来增强音质和环境信息,声像扩展用来增强声像偏移,虚拟环绕突出空间感,均衡处理增加低频效果,从而得到车内立体声环绕效果),即本申请提升了用户的车载音频体验。
进一步地,基于上述本申请车辆内音频处理方法第一实施例,提出第二实施例,在该实施例中,所述输出对所述原始音频信号进行结合处理后所得到的目标音频信号的步骤,包括:
步骤A1,确定每种信号处理方式先后对原始音频信号进行处理后所得到的处理信号,其中,在先的目标信号处理方式处理得到相应音频信号后,将其输出以基于在后的目标信号处理方式继续进行处理,最终得到目标音频信号。
在本实施例中,若目标信号处理方式有4种即e、f、g、h,则确定e目标信号处理方式对原始音频信号进行处理后所得到的第一处理信号,并确定f目标信号处理方式对第一处理信号进行处理后所得到的第二处理信号,确定g目标信号处理方式对第二处理信号进行处理后所得到的第三处理信号,确定h目标信号处理方式对第三处理信号进行处理后所得到的第四处理信号,并输出第四处理信号。
在本实施例中,通过确定每种目标信号处理方式先后对原始音频信号进行处理后所得到的处理信号,其中,在先的目标信号处理方式处理得到相应音频信号后,将其输出以基于在后的目标信号处理方式继续进行处理,最终得到目标音频信号并输出,在本实施例中,通过具体结合方式,对原始音频信号进行处理,满足用户的需求。
进一步地,基于上述本申请车辆内音频处理方法第一实施例和第二实施例,提出第三实施例,其中,在所述信号处理方式包括声像扩展处理时,所述基于头枕扬声器对所述原始音频信号进行声像扩展信号处理方式的处理步骤,包括:
步骤B1,确定所述原始音频信号在左声道和右声道分别传输时的时间差和强度差,其中,所述时间差和强度差符合预设声源定位理论;
步骤B2,基于所述时间差和强度差,对所述原始音频信号进行处理。
目前,汽车内路噪、风噪、胎噪等不稳定噪声对座椅头枕用户的主观听音影响较大,因而,在本实施例中,考虑采用声像扩展的方法,将声像拓展到人耳边,模拟一种丽音效果,可增强用户的听音感受。
具体地,如图6所示,在本实施例中,确定所述原始音频信号在左声道和右声道分别传输时的时间差(ITD)和强度差(ILD),其中,所述时间差和强度差符合预设声源定位理论,且可以是预先设定的,基于所述时间差和强度差,基于头枕扬声器对所述原始音频信号进行处理,其中,基于所述时间差和强度差,基于头枕扬声器对所述原始音频信号进行处理,可以使处于中间的立体声音频扩展到耳边,能够得到声像扩展效果。
作为一种示例,确定所述原始音频信号在左声道和右声道分别传输时的时间差(ITD)为20-30ms,强度差ILD为预设相对强度值。
在本实施例中,确定所述原始音频信号在左声道和右声道分别传输时的时间差和强度差,其中,所述时间差和强度差符合预设声源定位理论;基于所述时间差和强度差,对所述原始音频信号进行处理,可以使处于中间的立体声音频扩展到耳边,能够得到声像扩展效果,进而可以提升或者增强用户的听音感受。
进一步地,基于上述本申请车辆内音频处理方法第一实施例、第二实施例和第三实施例,所述基于头枕扬声器对所述原始音频信号进行虚拟环绕信号处理方式的处理步骤,包括:
步骤C1,基于座椅头枕位置,确定头相关冲激响应HRIR数据集;
步骤C2,基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息;
步骤C3,根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理。
在本实施例中,实现虚拟多声源环绕处理,具体地,首先建立一个高精度的数据集,该数据集为座椅头枕位置到前方、头部后方以一定仰角θ和平面角φ形成的头相关冲激响应(HRIR)数据集。基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息,即可通过前述位置测量获取车内每个座椅处的电声传递函数,进而模拟座椅头枕处周围声场,通过信号处理,使用户感受到空间环绕声。
如图7所示,左前方FL虚拟声源方位信息设置为仰角60度,水平角30度;左后方BL方位信息设置为仰角60度,水平角120度;右后方BR方位信息设置为仰角60度,水平角240度;右前方FR方位信息设置为仰角60度,水平角330度,进而确定车辆内每个座椅头枕位置处的电声传递函数信息。
其中,根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理,具体如下公式所示:
L2′=L*(HRTFflL+HRTFblL+HRTFfrL+HRTFbrL);
R2′=R*(HRTFflR+HRTFblR+HRTFfrR+HRTFbrR);
其中,L2′与R2′为虚拟环绕处理后的左声道音频数据和右声道音频数据。
在本实施例中,基于座椅头枕位置,确定头相关冲激响应HRIR数据集;基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息;根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理,可以实现使用户感受到空间环绕声,提升用户体验。
进一步地,基于上述本申请车辆内音频处理方法第一实施例、第二实施例、第三实施例和第四实施例,所述基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤,包括:
步骤D1,基于头枕扬声器对所述原始音频信号进行增强环绕处理,得到第一音频信号;
步骤D2,对所述第一音频信号进行声像扩展处理,得到第二音频信号;
步骤D3,对所述第二音频信号进行虚拟多声源的环绕处理,得到第三音频信号;
步骤D4,对所述第三音频信号进行均衡处理,得到目标音频信号。
具体地,如图8所示,其中PcmIn包括音频的左右声道,PcmOut为经过处理的左右声道音频。
在本实施例中,作为车辆内音频处理的优选实施例,可以在各个维度提升用户在车辆场景内的车载音频体验,具体地,基于头枕扬声器对所述原始音频信号进行增强环绕处理,得到第一音频信号;对所述第一音频信号进行声像扩展处理,得到第二音频信号;对所述第二音频信号进行虚拟多声源的环绕处理,得到第三音频信号,对所述第三音频信号进行均衡处理,得到目标音频信号。即本实施例结合多种多信号处理的方法,实现通过增强环绕来增强音质和环境信息,通过声像扩展来增强声像偏移,通过虚拟环绕来突出空间感,通过均衡处理来增加低频效果,从而得到车内立体声环绕效果。
参照图4,图4是本申请实施例方案涉及的硬件运行环境的设备结构示意图。
如图4所示,该车辆内音频处理设备可以包括:处理器1001,存储器1005,通信总线1002。通信总线1002用于实现处理器1001和存储器1005之间的连接通信。
可选地,该车辆内音频处理设备还可以包括用户接口、网络接口、摄像头、RF(Radio Frequency,射频)电路,传感器、WiFi模块等等。用户接口可以包括显示屏(Display)、输入子模块比如键盘(Keyboard),可选用户接口还可以包括标准的有线接口、无线接口。网络接口可以包括标准的有线接口、无线接口(如WI-FI接口)。
本领域技术人员可以理解,图4中示出的车辆内音频处理设备结构并不构成对车辆内音频处理设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图4所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块以及车辆内音频处理程序。操作系统是管理和控制车辆内音频处理设备硬件和软件资源的程序,支持车辆内音频处理程序以及其它软件和/或程序的运行。网络通信模块用于实现存储器1005内部各组件之间的通信,以及与车辆内音频处理系统中其它硬件和软件之间通信。
在图4所示的车辆内音频处理的设备中,处理器1001用于执行存储器1005中存储的车辆内音频处理程序,实现上述任一项所述的车辆内音频处理方法的步骤。
本申请降低端口功耗的设备具体实施方式与上述车辆内音频处理方法各实施例基本相同,在此不再赘述。
本申请还提供一种车辆内音频处理装置,所述车辆内音频处理装置包括:
获取模块,用于获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
输出模块,用于输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
在本申请的一种可能实施方式中,所述获取模块包括:
获取单元,用于获取原始音频信号,并接收用户所关闭的目标信号处理方式;
结合单元,用于基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理,其中,其他信号处理方式按照相应顺序执行。
在本申请的一种可能实施方式中,所述获取模块包括:
第一确定单元,用于确定每种信号处理方式先后对原始音频信号进行处理后所得到的处理信号,其中,在先的目标信号处理方式处理得到相应音频信号后,将其输出以基于在后的目标信号处理方式继续进行处理,最终得到目标音频信号。
在本申请的一种可能实施方式中,在所述信号处理方式包括增强环绕处理时,所述获取模块包括:
第二确定单元,用于确定所述原始音频信号中的环境声音信号;
分离处理单元,用于对所述环境声音信号进行滤波和信号变换处理,并对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,得到所述环境声音信号中的人声信息和伴奏信息;
增强环绕单元,用于基于所述伴奏信息,以及基于平衡和去噪处理后的人声信息对所述原始音频信号进行增强环绕处理。
在本申请的一种可能实施方式中,在所述信号处理方式包括声像扩展处理时,所述获取模块包括:
第三确定单元,用于确定所述原始音频信号在左声道和右声道分别传输时的时间差和强度差,其中,所述时间差和强度差符合预设声源定位理论;
基于所述时间差和强度差,对所述原始音频信号进行处理。
在本申请的一种可能实施方式中,所述获取模块还用于实现:
基于座椅头枕位置,确定头相关冲激响应HRIR数据集;
基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息;
根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理。
在本申请的一种可能实施方式中,在所述信号处理方式包括均衡处理时,所述获取模块还用于实现:
确定原始音频信号中的低频音频信号;
基于头枕扬声器中设置的IIR滤波器而不是FIR滤波器,调节所述低频音频信号的增益,实现对所述原始音频信号的处理。
本申请车辆内音频处理装置的具体实施方式与上述降低端口功耗的方法各实施例基本相同,在此不再赘述。
本申请还提供一种存储介质,所述存储介质上存储有车辆内音频处理的程序,所述车辆内音频处理的程序被处理器执行时实现如上述任一项所述的车辆内音频处理的方法的步骤。
本申请存储介质具体实施方式与上述车辆内音频处理的各实施例基本相同,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
以上仅为本申请的优选实施例,并非因此限制本申请的专利范围,凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本申请的专利保护范围内。
Claims (10)
1.一种车辆内音频处理方法,其特征在于,所述车辆内音频处理方法包括:
获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理;
输出对所述原始音频信号进行结合处理后所得到的目标音频信号。
2.如权利要求1所述的车辆内音频处理方法,其特征在于,所述获取原始音频信号,基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤之后,包括:
获取原始音频信号,并接收用户所关闭的目标信号处理方式;
基于头枕扬声器对所述原始音频信号进行除所述目标信号处理方式外的其他信号处理方式的结合处理,其中,其他信号处理方式按照相应顺序执行。
3.如权利要求1所述的车辆内音频处理方法,其特征在于,所述输出对所述原始音频信号进行结合处理后所得到的目标音频信号的步骤,包括:
确定每种信号处理方式先后对原始音频信号进行处理后所得到的处理信号,其中,在先的目标信号处理方式处理得到相应音频信号后,将其输出以基于在后的目标信号处理方式继续进行处理,最终得到目标音频信号。
4.如权利要求1所述的车辆内音频处理方法,其特征在于,在所述信号处理方式包括增强环绕处理时,所述基于头枕扬声器对所述原始音频信号进行增强环绕信号处理方式的处理步骤,包括:
确定所述原始音频信号中的环境声音信号;
对所述环境声音信号进行滤波和信号变换处理,并对滤波和信号变换处理后的环境声音信号进行盲源分离的增强环绕处理,得到所述环境声音信号中的人声信息和伴奏信息;
基于所述伴奏信息,以及基于平衡和去噪处理后的人声信息对所述原始音频信号进行增强环绕处理。
5.如权利要求1所述车辆内音频处理的方法,其特征在于,在所述信号处理方式包括声像扩展处理时,所述基于头枕扬声器对所述原始音频信号进行声像扩展信号处理方式的处理步骤,包括;
确定所述原始音频信号在左声道和右声道分别传输时的时间差和强度差,其中,所述时间差和强度差符合预设声源定位理论;
基于所述时间差和强度差,对所述原始音频信号进行处理。
6.如权利要求1所述的车辆内音频处理方法,其特征在于,在所述信号处理方式包括虚拟环绕处理时,所述基于头枕扬声器对所述原始音频信号进行虚拟环绕信号处理方式的处理步骤,包括:
基于座椅头枕位置,确定头相关冲激响应HRIR数据集;
基于所述HRIR数据集,确定车辆内每个座椅头枕位置处的电声传递函数信息;
根据所述电声传递函数信息,对基于头枕扬声器对所述原始音频信号进行虚拟环绕处理。
7.如权利要求1所述车辆内音频处理的方法,其特征在于,在所述信号处理方式包括均衡处理时,所述基于头枕扬声器对所述原始音频信号进行均衡信号处理方式的处理步骤,包括:
确定原始音频信号中的低频音频信号;
基于头枕扬声器中设置的IIR滤波器而不是FIR滤波器,调节所述低频音频信号的增益,实现对所述原始音频信号的处理。
8.如权利要求1所述车辆内音频处理的方法,其特征在于,所述基于头枕扬声器对所述原始音频信号先后进行增强环绕、声像扩展、虚拟环绕以及均衡信号处理方式的结合处理的步骤,包括:
基于头枕扬声器对所述原始音频信号进行增强环绕信号处理方式处理,得到第一音频信号;
对所述第一音频信号进行声像扩展信号处理方式处理,得到第二音频信号;
对所述第二音频信号进行虚拟多声源的环绕信号处理方式处理,得到第三音频信号;
对所述第三音频信号进行均衡信号处理方式处理,得到目标音频信号。
9.一种车辆内音频处理设备,其特征在于,所述车辆内音频处理方法设备包括:存储器、处理器以及存储在存储器上的用于实现所述车辆内音频处理方法的程序,
所述存储器用于存储实现车辆内音频处理方法的程序;
所述处理器用于执行实现所述车辆内音频处理方法的程序,以实现如权利要求1至8中任一项所述车辆内音频处理方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有实现车辆内音频处理方法的程序,所述实现车辆内音频处理方法的程序被处理器执行以实现如权利要求1至8中任一项所述车辆内音频处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310351187.9A CN116367076A (zh) | 2023-03-30 | 2023-03-30 | 车辆内音频处理方法、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310351187.9A CN116367076A (zh) | 2023-03-30 | 2023-03-30 | 车辆内音频处理方法、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116367076A true CN116367076A (zh) | 2023-06-30 |
Family
ID=86921338
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310351187.9A Pending CN116367076A (zh) | 2023-03-30 | 2023-03-30 | 车辆内音频处理方法、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116367076A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117676450A (zh) * | 2024-02-02 | 2024-03-08 | 苏州清听声学科技有限公司 | 一种车载虚拟声像的音频播放方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2015085924A1 (zh) * | 2013-12-11 | 2015-06-18 | 苏州上声电子有限公司 | 一种扬声器自动均衡方法 |
CN105210391A (zh) * | 2013-05-07 | 2015-12-30 | 伯斯有限公司 | 用于基于头枕的音频系统的信号处理 |
CN110662138A (zh) * | 2013-05-07 | 2020-01-07 | 伯斯有限公司 | 模块化的基于头枕的音频系统 |
WO2020034779A1 (zh) * | 2018-08-14 | 2020-02-20 | Oppo广东移动通信有限公司 | 音频处理方法、存储介质及电子设备 |
CN111918175A (zh) * | 2020-07-10 | 2020-11-10 | 瑞声新能源发展(常州)有限公司科教城分公司 | 车载沉浸式声场系统的控制方法、装置及车辆 |
CN112019994A (zh) * | 2020-08-12 | 2020-12-01 | 武汉理工大学 | 一种基于虚拟扬声器构建车内扩散声场环境的方法及装置 |
US20200404422A1 (en) * | 2019-06-19 | 2020-12-24 | Faurecia Clarion Electronics Europe | Autonomous audio system for seat headrest, seat headrest and associated vehicle |
-
2023
- 2023-03-30 CN CN202310351187.9A patent/CN116367076A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105210391A (zh) * | 2013-05-07 | 2015-12-30 | 伯斯有限公司 | 用于基于头枕的音频系统的信号处理 |
CN110662138A (zh) * | 2013-05-07 | 2020-01-07 | 伯斯有限公司 | 模块化的基于头枕的音频系统 |
WO2015085924A1 (zh) * | 2013-12-11 | 2015-06-18 | 苏州上声电子有限公司 | 一种扬声器自动均衡方法 |
WO2020034779A1 (zh) * | 2018-08-14 | 2020-02-20 | Oppo广东移动通信有限公司 | 音频处理方法、存储介质及电子设备 |
US20200404422A1 (en) * | 2019-06-19 | 2020-12-24 | Faurecia Clarion Electronics Europe | Autonomous audio system for seat headrest, seat headrest and associated vehicle |
CN111918175A (zh) * | 2020-07-10 | 2020-11-10 | 瑞声新能源发展(常州)有限公司科教城分公司 | 车载沉浸式声场系统的控制方法、装置及车辆 |
CN112019994A (zh) * | 2020-08-12 | 2020-12-01 | 武汉理工大学 | 一种基于虚拟扬声器构建车内扩散声场环境的方法及装置 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117676450A (zh) * | 2024-02-02 | 2024-03-08 | 苏州清听声学科技有限公司 | 一种车载虚拟声像的音频播放方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8160282B2 (en) | Sound system equalization | |
EP2279628B1 (en) | Surround sound generation from a microphone array | |
US9154895B2 (en) | Apparatus of generating multi-channel sound signal | |
JP4921470B2 (ja) | 頭部伝達関数を表すパラメータを生成及び処理する方法及び装置 | |
EP2806664B1 (en) | Sound system for establishing a sound zone | |
EP2052580B1 (en) | A device for and a method of processing an audio signal | |
JP2004529515A (ja) | マルチチャンネル・オーディオを再構築するために2チャンネル・マトリックス符号化オーディオを復号する方法 | |
KR20160001712A (ko) | 음향 신호의 렌더링 방법, 장치 및 컴퓨터 판독 가능한 기록 매체 | |
US9820073B1 (en) | Extracting a common signal from multiple audio signals | |
US10798511B1 (en) | Processing of audio signals for spatial audio | |
US10645513B2 (en) | Stereophonic sound reproduction method and apparatus | |
CN116367076A (zh) | 车辆内音频处理方法、设备及存储介质 | |
AU2016240348B2 (en) | Apparatus and method for processing stereo signals for reproduction in cars to achieve individual three-dimensional sound by frontal loudspeakers | |
EP1843636B1 (en) | Method for automatically equalizing a sound system | |
TW201342363A (zh) | 用於降轉混音一多聲道音訊信號之方法與裝置 | |
CN114143699B (zh) | 一种音频信号处理方法、装置及计算机可读存储介质 | |
CN108966110B (zh) | 声音信号处理方法、装置及系统、终端及存储介质 | |
CN109923877B (zh) | 对立体声音频信号进行加权的装置和方法 | |
WO2018200000A1 (en) | Immersive audio rendering | |
CN111510847A (zh) | 微型扬声器阵列、车内声场控制方法及装置、存储装置 | |
KR102380232B1 (ko) | 입체 음향 재생 방법 및 장치 | |
KR102443055B1 (ko) | 입체 음향 재생 방법 및 장치 | |
Piazza et al. | Advanced cis architecture and algorithms for enhanced in-car audio listening | |
Savić et al. | Analysis of a noise-based loudness compensation module for immersive audio systems within the car cabin | |
CN117652161A (zh) | 用于回放沉浸式音频的音频处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |