CN113329320A - 一种基于对象的环屏扬声器阵列的声像合成算法及其应用 - Google Patents

一种基于对象的环屏扬声器阵列的声像合成算法及其应用 Download PDF

Info

Publication number
CN113329320A
CN113329320A CN202110585245.5A CN202110585245A CN113329320A CN 113329320 A CN113329320 A CN 113329320A CN 202110585245 A CN202110585245 A CN 202110585245A CN 113329320 A CN113329320 A CN 113329320A
Authority
CN
China
Prior art keywords
sound
speaker array
loudspeaker
sound source
equation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110585245.5A
Other languages
English (en)
Other versions
CN113329320B (zh
Inventor
赵茜
王祥贵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Soundking Electroacoustic Co ltd
Original Assignee
Soundking Electroacoustic Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Soundking Electroacoustic Co ltd filed Critical Soundking Electroacoustic Co ltd
Priority to CN202110585245.5A priority Critical patent/CN113329320B/zh
Publication of CN113329320A publication Critical patent/CN113329320A/zh
Application granted granted Critical
Publication of CN113329320B publication Critical patent/CN113329320B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers

Abstract

本发明涉及一种基于对象的环屏扬声器阵列的声像合成算法及其应用，其特征在于：声源类型为点声源的声像合成算法，扬声器的驱动方程为：
Figure DDA0003087846300000011
其中A(w)与角频率w有关的函数，扬声器的坐标为(xsn，ysn，zsn)，点声源的坐标为(xo，yo，zo)，v为声速。H(w)为点声源的傅里叶变换。本发明算法可以在观众前方合成上下、左右、纵深三个维度的合成多个声像，声音也随着图像在空间位置上统一，这样可以提高观众的沉浸感和临场感。

Description

一种基于对象的环屏扬声器阵列的声像合成算法及其应用
技术领域
本发明涉及一种基于对象的环屏扬声器阵列的声像合成算法及其应用。
背景技术
目前，电影还音制式主要分为基于声道的还音制式，基于对象(Audio Object)的还音制式和基于声道和对象混合应用的还音制式这三大类。与基于声道还音制式不同，基于对象的还音制式把声源进行对象化处理，在声场的不同位置，观众能听到的声音真实的，沉浸式的。在基于对象的还音制式中，一个声源可以是一个对象例如人物的对话声，脚步声。背景氛围声也可以是一个对象，例如雨声，车流声。这是按照声音的内容类型进行分类。其中每个对象都有固定的位置。对象按照声源类型可分为面声源，点声源，线声源。基于对象的还音制式中，当画面出现某一内容对象时，比如汽车，此时声音出现汽车鸣笛声。这时创作者只需要思考故事情节中声音的位置，无需考虑该声音信号被分配在哪个声道，大大的简化了创作者的创作，同时声音的还音效果与画面紧密相连，提高了观众的沉浸感。
发明内容
本发明设计了一种基于对象的环屏扬声器阵列的声像合成算法及其应用，其解决的技术问题是(1)基于对象的环屏扬声器阵列的声像合成问题；(2)基于对象的环屏扬声器阵列的多个对象组合问题。为了解决上述存在的技术问题，本发明采用了以下方案：
一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源类型为点声源的声像合成算法，上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000021
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000022
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000023
右侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000024
其中A1(w)，A2(w)，A3(w)，A4(w)与w有关的函数，L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xo，yo，zo)，v为声速， H(w)为点声源的傅里叶变换。
优选地，声源点驱动方程在频域是原驱动信号频域的共轭表达式。
优选地，上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000025
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000026
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000027
右侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000031
一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源类型为线声源的声像合成算法，仅需上下扬声器阵列即可，左右两侧扬声器阵列不发声；
上侧扬声器阵列的驱动信号方程为：
Figure BDA0003087846280000032
下侧扬声器阵列的驱动信号方程为：
Figure BDA0003087846280000033
其中d为扬声器间隔，n为扬声器阵列的数量，α为线声源的偏转的角度。
一种基于对象的环屏扬声器阵列的声像合成算法，声源类型为面声源的声像合成算法，所有扬声器阵列同时发声即可实现，
上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000034
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000035
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000041
右侧扬声器阵列的驱动方程为：
Figure 1
一种家庭影院，使用环屏扬声器阵列，其特征在于：所述环屏扬声器阵列应用上述的算法。
该基于对象的环屏扬声器阵列的声像合成算法及其应用具有以下有益效果：
本发明算法可以在观众前方合成上下、左右、纵深三个维度的合成多个声像，声音也随着图像在空间位置上统一，这样可以提高观众的沉浸感和临场感。
附图说明
图1：本发明基于对象环屏扬声器阵列还音示意图；
图2：本发明声像合成空间坐标系示意图；
图3：本发明各扬声器编号示意图；
图4：本发明环屏扬声器阵列合成算法的声场测量图；
具体实施方式
下面结合图1至图4，对本发明做进一步说明：
本发明的声像合成算法是基于环屏扬声器阵列基础上进行声像合成。如图1所示在鸟作为点声源在屏幕前方坐标(1,1,2)，河流的声音作为线声源在屏幕后方3米处。雨声作为面声源，在屏幕的整个平面内。在前方结合视频上的3D画面后，如图1所示，那么此时声音也随着图像在空间位置上统一，这样可以提高观众的沉浸感和临场感。
假设生成的声源为点声源也就是脉动球形声源，首先讨论脉动球形声源的辐射特性。设有一半径为r0的球体，其表面做均匀的微小涨缩震动，也就是他的半径在r0附近以微量dr做简谐的变化，从而在周围的媒质中辐射了声波，因为球面的振动过程具有各向均匀的脉动性质，因而它所产生的声波波阵面是球面辐射的是均匀球面波。取球坐标系比较简单，坐标原点取在球心，因而波阵面是球面的，所以在距离r处的波阵面面积就是球面面积S＝4πr2，在这种情况下可以方便的运用特殊形式的波动方程式：
Figure BDA0003087846280000051
其中c0代表声速，t为时间，p代表声压，r表示波阵面的半径。
将S＝4πr2代入上式，则成为
Figure BDA0003087846280000052
现在作变量变换，令Y＝pr，那么上式就可化为：
Figure BDA0003087846280000053
因此可以直接得到这个上式的一般解为：
Y＝Aej(wt-kr)+Bej(wt+kr) (4)
其中A和B为两个待定常数，t为时间，k为波数
解得Y就可以(2)得的一般解为
Figure BDA0003087846280000054
上式第一项代表向外辐射的球面波；第二项代表向球心反射的球面波。我们现在讨论的为向无界空间辐射的自由行波，因而没有反射波，这里常数B＝0.这样公式5就称为
Figure BDA0003087846280000055
公式6作为声像合成中驱动扬声器的基本公式。
声像合成首先需要建立空间坐标系，如图2所示，环屏阵列的下阵列的横向坐标轴作为空间坐标系中的X轴，位于环屏阵列底部并且垂直于环屏阵列横向坐标轴的法线为Y轴，环屏阵列的竖直方向上的纵向坐标轴作为空间坐标系的Z轴。
设生成声源O点的三维坐标设为(x0，y0，z0)，环屏阵列中上下每排扬声器数量为n，左右每列扬声器数量为m，L为环屏扬声器阵列宽度。
声像合成中驱动扬声器的基本公式为：
Figure BDA0003087846280000061
上式中k为波数，
Figure BDA0003087846280000062
w为角频率，v为声速，r为虚拟声源到扬声器的距离。因此上式可转换形式为
Figure BDA0003087846280000063
其中ejwt为需要生成的声信号，与驱动单个扬声器的算法控制无关。
因此可以得到扬声器的基本驱动方程为：
Figure BDA0003087846280000064
其中H(w)表示的需要生成的声信号的傅里叶变换。
如图3所示，设各个扬声器的位置：上侧扬声器阵列为S11、 S12、……S1n。下侧扬声器阵列为S21、S22、……S2n。左侧扬声器阵列为S31、S32、……S3m。右侧扬声器阵列为S41、S42、……S4m。其中上侧扬声器S1n的三维坐标设为(xs1n，ys1n，zs1n)，其它方向以此类推。
在上面的基本公式中r为虚拟声源到扬声器的距离，扬声器三维坐标设为(xsn，ysn，zsn)，因此在上侧扬声器阵列中
Figure BDA0003087846280000071
为了更精准的合成声像，其中扬声器的权值A也应与角频率w有关，用A(w)表示，基本驱动方程转化为：
Figure BDA0003087846280000072
本发明中采用的环屏扬声器阵列的结构生成声像，在屏幕中央区域并没有实际的扬声器发声单元。对象按照声源类型可分为面声源，点声源，线声源。首先讨论点声源的声像合成算法。为了在屏幕中央区域生成声像，需要环屏扬声器阵列中上下左右这四组扬声器阵列同时进行驱动发声。在此提出一种多组扬声器阵列联动算法。设生成声源O 点的为(x0，y0，z0)，此时当x0＝0，也就是当声源点位于扬声器横坐标的中心位置时，此时驱动上侧扬声器阵列和下侧扬声器阵列发声，左侧和右侧扬声器阵列不发声。随着x0向右移动，上侧和下侧扬声器阵列驱动信号的权值减小，右侧扬声器阵列的驱动信号的权值增加。采用线性移动的方式改变权值。当
Figure BDA0003087846280000073
L为环屏扬声器阵列的x轴方向上的宽度。声源点位于环屏扬声器阵列横坐标中心位置靠右1/2处时，上侧和下侧扬声器阵列的权值是总权值的1/2，右侧扬声器阵列的驱动信号的权值为总权值的1/2。当
Figure BDA0003087846280000074
也就是当声源点位于环屏扬声器阵列横坐标最右侧时，此时只有右侧扬声器阵列发声，也就是权值为1，其余阵列不发声及权值为0。
整理成公式可得，
上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000081
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000082
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000083
右侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000084
其中A1(w)，A2(w)，A3(w)，A4(w)与w有关的函数，L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xo，yo，zo)，v为声速， H(w)为点声源的傅里叶变换。
聚焦声源时扬声器的驱动信号是点声源的时间逆序，也就是当生成的声源在环屏扬声器前向方向，但不能超过听音者的位置处。也就是原声信号向外发散传播，变为向内收敛，在信号处理中，时域上信号的时间逆序，它的傅里叶变换是原信号的傅里叶变换的共轭函数，因此在频域是原驱动信号频域的共轭表达式。
上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000085
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000091
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000092
右侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000093
在基于对象的还音制式中，对象也可以是线声源，下面是环屏扬声器阵列线声源合成算法，此时仅需上下扬声器阵列即可，左右两侧扬声器阵列不发声。
上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000094
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000095
其中d为扬声器间隔，n为扬声器阵列的数量，α为线声源的偏转的角度。
在基于对象的还音制式中，对象也可以是面声源，在环屏扬声器阵列面声源合成算法中，所有扬声器阵列同时发声即可实现。
当形成多个点声源对象时，假设对象1定义为obj1，对象2定义为 obj2，……对象k定义为objk。则各对象的声信号频率响应为Hobj1(w)， Hobj2(w)，……，Hobjk(w)。各对象虚拟声源点坐标为obj1 (x1,y1,z1),obj2(x2,y2,z2),objk(xk,yk,zk)。
那么此时各扬声器阵列的驱动函数为各对象原驱动函数之和整理成公式可得
上侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000101
下侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000102
左侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000103
右侧扬声器阵列的驱动方程为：
Figure BDA0003087846280000104
图4为环屏扬声器阵列合成算法的声场测量图，当声像合成坐标从中心点向右移动时，声场能量的聚焦点的位置也向右移动。并且能量聚焦点的位置与合成声源的坐标一致，说明算法有效。
上面结合附图对本发明进行了示例性的描述，显然本发明的实现并不受上述方式的限制，只要采用了本发明的方法构思和技术方案进行的各种改进，或未经改进将本发明的构思和技术方案直接应用于其它场合的，均在本发明的保护范围内。

Claims (7)

1.一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源类型为点声源的声像合成算法，扬声器的驱动方程为：
Figure FDA0003087846270000011
其中A(w)与角频率w有关的函数，扬声器的坐标为(xsn，ysn，zsn)，点声源的坐标为(xo，yo，zo)，v为声速，H(w)为点声源的傅里叶变换。
2.根据权利要求1所述的基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源点驱动方程在频域是原驱动信号频域的共轭表达式:
Figure FDA0003087846270000012
其中A(w)与角频率w有关的函数，扬声器的坐标为(xsn，ysn，zsn)，点声源的坐标为(xo，yo，zo)，v为声速，H(w)为点声源的傅里叶变换。
3.根据权利要求1所述的基于对象的环屏扬声器阵列的声像合成算法，其特征在于：
上侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000013
下侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000014
左侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000015
右侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000021
其中A1(w)，A2(w)，A3(w)，A4(w)与w有关的函数，L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xo，yo，zo)，v为声速，H(w)为点声源的傅里叶变换。
4.一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源类型为线声源的声像合成算法，仅需上下扬声器阵列即可，左右两侧扬声器阵列不发声；
上侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000022
下侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000023
其中d为扬声器间隔，n为扬声器阵列的数量，α为线声源的偏转的角度。
5.一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：声源类型为面声源的声像合成算法，所有扬声器阵列同时发声即可实现。
6.一种基于对象的环屏扬声器阵列的声像合成算法，其特征在于：当形成多个点声源对象时，假设对象1定义为obj1，对象2定义为obj2，……对象k定义为objk，则各对象的声信号频率响应为Hobj1(w)，
Hobj2(w)，……，Hobjk(w)；各对象虚拟声源点坐标为obj1(x1,y1,z1),obj2(x2,y2,z2),objk(xk,yk,zk)；
上侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000024
下侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000031
左侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000032
右侧扬声器阵列的驱动方程为：
Figure FDA0003087846270000033
7.一种家庭影院，使用环屏扬声器阵列，其特征在于：所述环屏扬声器阵列应用权利要求1-6中任何一项所述的算法。
CN202110585245.5A 2021-05-27 2021-05-27 一种基于对象的环屏扬声器阵列的声像合成方法及其应用 Active CN113329320B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110585245.5A CN113329320B (zh) 2021-05-27 2021-05-27 一种基于对象的环屏扬声器阵列的声像合成方法及其应用

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110585245.5A CN113329320B (zh) 2021-05-27 2021-05-27 一种基于对象的环屏扬声器阵列的声像合成方法及其应用

Publications (2)

Publication Number Publication Date
CN113329320A true CN113329320A (zh) 2021-08-31
CN113329320B CN113329320B (zh) 2023-03-24

Family

ID=77421790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110585245.5A Active CN113329320B (zh) 2021-05-27 2021-05-27 一种基于对象的环屏扬声器阵列的声像合成方法及其应用

Country Status (1)

Country Link
CN (1) CN113329320B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170070838A1 (en) * 2014-11-13 2017-03-09 Huawei Technologies Co., Ltd. Audio Signal Processing Device and Method for Reproducing a Binaural Signal
CN109040908A (zh) * 2018-09-04 2018-12-18 音王电声股份有限公司 一种具有指向性的环屏扬声器阵列及其控制方法
CN109151661A (zh) * 2018-09-04 2019-01-04 音王电声股份有限公司 一种环屏扬声器阵列及虚拟声源的形成方法
CN109151660A (zh) * 2018-09-04 2019-01-04 音王电声股份有限公司 一种数字影院还音系统及其控制方法
CN109417678A (zh) * 2016-07-05 2019-03-01 索尼公司 声场形成装置和方法以及程序
CN208707935U (zh) * 2018-09-04 2019-04-05 音王电声股份有限公司 一种环屏扬声器阵列
CN110248303A (zh) * 2019-05-30 2019-09-17 北京航天计量测试技术研究所 一种用于麦克风阵列精确校准装置及方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170070838A1 (en) * 2014-11-13 2017-03-09 Huawei Technologies Co., Ltd. Audio Signal Processing Device and Method for Reproducing a Binaural Signal
CN109417678A (zh) * 2016-07-05 2019-03-01 索尼公司 声场形成装置和方法以及程序
US20190327573A1 (en) * 2016-07-05 2019-10-24 Sony Corporation Sound field forming apparatus and method, and program
CN109040908A (zh) * 2018-09-04 2018-12-18 音王电声股份有限公司 一种具有指向性的环屏扬声器阵列及其控制方法
CN109151661A (zh) * 2018-09-04 2019-01-04 音王电声股份有限公司 一种环屏扬声器阵列及虚拟声源的形成方法
CN109151660A (zh) * 2018-09-04 2019-01-04 音王电声股份有限公司 一种数字影院还音系统及其控制方法
CN208707935U (zh) * 2018-09-04 2019-04-05 音王电声股份有限公司 一种环屏扬声器阵列
WO2020047930A1 (zh) * 2018-09-04 2020-03-12 音王电声股份有限公司 一种环屏扬声器阵列及虚拟声源的形成方法
US20200351589A1 (en) * 2018-09-04 2020-11-05 Qian Zhao Surround-screen speaker array and the formation method of virtual sound source
CN110248303A (zh) * 2019-05-30 2019-09-17 北京航天计量测试技术研究所 一种用于麦克风阵列精确校准装置及方法

Also Published As

Publication number Publication date
CN113329320B (zh) 2023-03-24

Similar Documents

Publication Publication Date Title
AU713105B2 (en) A four dimensional acoustical audio system
US10531222B2 (en) Active acoustics control for near- and far-field sounds
KR102621416B1 (ko) 음성 처리 장치 및 방법, 그리고 프로그램
WO2018008395A1 (ja) 音場形成装置および方法、並びにプログラム
CN109151660B (zh) 一种数字影院还音系统
US20130028424A1 (en) Method and apparatus for processing audio signal
BR9712912B1 (pt) método e dispositivo para a projeção de ondas sonoras em alto-falantes.
CN109314832A (zh) 音频信号处理方法和设备
JP2006067295A (ja) 音響生成方法、音響生成装置、音響再生方法及び音響再生装置
CN111641898B (zh) 发声装置、显示装置、发声控制方法及装置
CN109151661B (zh) 一种环屏扬声器阵列及虚拟声源的形成方法
EP3474576B1 (en) Active acoustics control for near- and far-field audio objects
CN113329320B (zh) 一种基于对象的环屏扬声器阵列的声像合成方法及其应用
CN1188586A (zh) 产生三维声象的声频系统
CN114143697A (zh) 一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用
JP5941373B2 (ja) スピーカアレイ駆動装置およびスピーカアレイ駆動方法
CN113329319B (zh) 一种扬声器阵列的沉浸声还音制式方法及其应用
CN208707935U (zh) 一种环屏扬声器阵列
WO2018066376A1 (ja) 信号処理装置および方法、並びにプログラム
Otani et al. Effects of spatial aliasing in sound field reproduction: Reproducibility of binaural signals
Zhang et al. Active control of scattering effects in 2.5 D multizone reproduction
Palacino et al. Spatial sound pick-up with a low number of microphones
RU67885U1 (ru) Система инсталляции в пространстве помещения объемных эффектов (варианты)
Kimura et al. Theoretical study of near 3D sound field reproduction based on wave field synthesis
CN114928788A (zh) 一种基于稀疏平面波分解的声场重放空间解码方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant