CN114143697A - 一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用 - Google Patents
一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用 Download PDFInfo
- Publication number
- CN114143697A CN114143697A CN202110583827.XA CN202110583827A CN114143697A CN 114143697 A CN114143697 A CN 114143697A CN 202110583827 A CN202110583827 A CN 202110583827A CN 114143697 A CN114143697 A CN 114143697A
- Authority
- CN
- China
- Prior art keywords
- speaker array
- sound source
- drive equation
- equation
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000015572 biosynthetic process Effects 0.000 title claims abstract description 23
- 238000003786 synthesis reaction Methods 0.000 title claims abstract description 23
- 230000006870 function Effects 0.000 claims description 17
- 230000000694 effects Effects 0.000 claims description 9
- 230000002194 synthesizing effect Effects 0.000 claims 3
- 238000003491 array Methods 0.000 description 11
- 238000009432 framing Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000007654 immersion Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 210000000003 hoof Anatomy 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/403—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers loud-speakers
Landscapes
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
本发明涉及一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用,本发明的声像合成算法是基于环屏扬声器阵列基础上进行声像合成,解决了不同声源类型的运动的连贯性不佳的问题,在声场的不同位置,观众能听到的声音跟随图像移动,可以提高整体还音制式的真实感和沉浸感的。
Description
技术领域
本发明涉及一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用。
背景技术
目前,电影还音制式主要分为基于声道的还音制式,基于对象(Audio Object)的还音制式和基于声道和对象混合应用的还音制式这三大类。与基于声道还音制式不同,基于对象的还音制式把声源进行对象化处理,在声场的不同位置,观众能听到的声音真实的,沉浸式的。在基于对象的还音制式中,一个声源可以是一个对象例如人物的对话声,脚步声。背景氛围声也可以是一个对象,例如雨声,车流声。这是按照声音的内容类型进行分类对象按照声源类型可分为面声源,点声源,线声源。按照状态可分为静态声源和运动声源。在运动声源中,对象的位置不是固定不变的,而是拥有特定的运动轨迹。此时声音可以跟画面中对象的位置的移动而移动。运动声源首先需要建立对象的空间坐标系。声源在可以随着坐标进行移动,这样把声源进行对象化处理。
发明内容
本发明设计了一种基于对象的环屏扬声器阵列的运动声源合成算法及其应用,其解决的技术问题是:(1)基于对象的环屏扬声器阵列的不同运动声源类型的合成算法问题;(2)基于对象的环屏扬声器阵列的多个运动声源的组合问题。
为了解决上述存在的技术问题,本发明采用了以下方案:
一种基于对象的环屏扬声器阵列的运动声源合成算法,其特征在于:对象按照声源类型为点声源时,
上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
其中A1(w),A2(w),A3(w),A4(w)与w有关的函数。L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xo,yo,zo),v为声速,H(w)为点声源的傅里叶变换。
优选地,在频域是原驱动信号频域的共轭表达式:
其中A(w)与角频率w有关的函数,扬声器的坐标为(xsn,ysn,zsn),点声源的坐标为(xo,yo,zo),v为声速,H(w)为点声源的傅里叶变换。
一种基于对象的环屏扬声器阵列的运动声源合成算法,其特征在于:对象按照声源类型为运动声源时:
上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
其中A1(w),A2(w),A3(w),A4(w)与w有关的函数,L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xΔt,yΔt,zΔt)。其中f为听到的频率,fs为原信号频率,每帧帧长为Δt,v为声速,vs为运动声源的速度。原信号经过多普勒效应处理后为
优选地,当运动声源在屏幕前方运动时,需要合成聚焦声源,
上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
其中A1(w),A2(w),A3(w),A4(w)与w有关的函数,L为环屏扬声器阵列的x轴方向上的宽度.点声源的坐标为(xΔt,yΔt,zΔt)。其中f为听到的频率,fs为原信号频率,每帧帧长为Δt,v为声速,vs为运动声源的速度。原信号经过多普勒效应处理后为
优选地,形成多个运动对象时,
上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
其中A1(w),A2(w),A3(w),A4(w)与w有关的函数,L为环屏扬声器阵列的x轴方向上的宽度.第k个点声源的坐标为(xΔtk,yΔtk,zΔtk)。其中f为听到的频率,fs为原信号频率,每帧帧长为Δt,v为声速,vs为运动声源的速度。第k个目标经过多普勒效应处理后为
一种家庭影院,使用环屏扬声器阵列,其特征在于:所述环屏扬声器阵列应用上述的算法。
该基于对象的环屏扬声器阵列的运动声源合成算法及其应用具有以下有益效果:
本发明的声像合成算法是基于环屏扬声器阵列基础上进行声像合成,解决了不同声源类型的运动的连贯性不佳的问题,在声场的不同位置,观众能听到的声音跟随图像移动,可以提高整体还音制式的真实感和沉浸感的。
附图说明
图1:本发明建立的基于对象的环屏扬声器阵列的空间坐标系。
图2:本发明声像合成空间坐标系示意图。
图3:本发明各扬声器编号示意图。
具体实施方式
下面结合图1至图3,对本发明做进一步说明:
如图1所示,图中建立了基于对象的环屏扬声器阵列的空间坐标系。在该坐标系中,有两个对象,这两个对象均为运动声源。马蹄的声音从屏幕的后方坐标(1,-3,0)处移动到屏幕前方坐标(2,-1,4)处。鸟叫的声音从屏幕前方坐标(0,0,2)移动到屏幕后方坐标(-1,4,0)处。此时在声场的不同位置,观众能听到的声音跟随图像移动,可以提高整体还音制式的真实感和沉浸感的。
假设生成的声源为点声源也就是脉动球形声源,首先讨论脉动球形声源的辐射特性。设有一半径为r0的球体,其表面做均匀的微小涨缩震动,也就是他的半径在r0附近以微量dr做简谐的变化,从而在周围的媒质中辐射了声波,因为球面的振动过程具有各向均匀的脉动性质,因而它所产生的声波波阵面是球面辐射的是均匀球面波。取球坐标系比较简单,坐标原点取在球心,因而波阵面是球面的,所以在距离r处的波阵面面积就是球面面积S=4πr2,在这种情况下可以方便的运用特殊形式的波动方程式:
其中c0代表声速,t为时间,p代表声压,r表示波阵面的半径。
将S=4πr2代入上式,则成为
现在作变量变换,令Y=pr,那么上式就可化为:
因此可以直接得到这个上式的一般解为:
Y=Aej(wt-kr)+Bej(wt+kr) (4)
其中A和B为两个待定常数
解得Y就可以(2)得的一般解为
上式第一项代表向外辐射的球面波;第二项代表向球心反射的球面波。我们现在讨论的为向无界空间辐射的自由行波,因而没有反射波,这里常数B=0.这样公式5就称为
公式6作为声像合成中驱动扬声器的基本公式。
声像合成首先需要建立空间坐标系,如图2所示,环屏阵列的下阵列的横向坐标轴作为空间坐标系中的X轴,位于环屏阵列底部并且垂直于环屏阵列横向坐标轴的法线为Y轴,环屏阵列的竖直方向上的纵向坐标轴作为空间坐标系的Z轴。
设生成声源O点的三维坐标设为(x0,y0,z0),环屏阵列中上下每排扬声器数量为n,左右每列扬声器数量为m,L为环屏扬声器阵列宽度。
声像合成中驱动扬声器的基本公式为:
其中ejwt为需要生成的声信号,与驱动单个扬声器的算法控制无关。
因此可以得到扬声器的基本驱动方程为:
其中H(w)表示的需要生成的声信号的傅里叶变换。
如图3所示,设各个扬声器的位置:上侧扬声器阵列为S11、S12、……S1n。下侧扬声器阵列为S21、S22、……S2n。左侧扬声器阵列为S31、S32、……S3m。右侧扬声器阵列为S41、S42、……S4m。其中上侧扬声器S1n的三维坐标设为(xs1n,ys1n,zs1n),其它方向以此类推。
在上面的基本公式中r为虚拟声源到扬声器的距离,扬声器三维坐标设为(xsn,ysn,zsn),因此在上侧扬声器阵列中为了更精准的合成声像,其中扬声器的权值A也应与角频率w有关,用A(w)表示,基本驱动方程转化为:
本发明中采用的环屏扬声器阵列的结构生成声像,在屏幕中央区域并没有实际的扬声器发声单元。对象按照声源类型可分为面声源,点声源,线声源。首先讨论点声源的声像合成算法。为了在屏幕中央区域生成声像,需要环屏扬声器阵列中上下左右这四组扬声器阵列同时进行驱动发声。在此提出一种多组扬声器阵列联动算法。设生成声源O点的为(x0,y0,z0),此时当x0=0,也就是当声源点位于扬声器横坐标的中心位置时,此时驱动上侧扬声器阵列和下侧扬声器阵列发声,左侧和右侧扬声器阵列不发声。随着x0向右移动,上侧和下侧扬声器阵列驱动信号的权值减小,右侧扬声器阵列的驱动信号的权值增加。采用线性移动的方式改变权值。当L为环屏扬声器阵列的x轴方向上的宽度。声源点位于环屏扬声器阵列横坐标中心位置靠右1/2处时。上侧和下侧扬声器阵列的权值是总权值的1/2,右侧扬声器阵列的驱动信号的权值为总权值的1/2。当也就是当声源点位于环屏扬声器阵列横坐标最右侧时,此时只有右侧扬声器阵列发声,也就是权值为1,其余阵列不发声及权值为0。
整理成公式可得上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
其中A1(w),A2(w),A3(w),A4(w)与w有关的函数。
聚焦声源时扬声器的驱动信号是点声源的时间逆序,也就是当生成的声源在环屏扬声器前向方向,但不能超过听音者的位置处。也就是原声信号向外发散传播,变为向内收敛,在信号处理中,时域上信号的时间逆序,它的傅里叶变换是原信号的傅里叶变换的共轭函数,因此在频域是原驱动信号频域的共轭表达式:
在基于对象的还音制式中,对象也可以是线声源,下面是环屏扬声器阵列线声源合成算法,此时仅需上下扬声器阵列即可,左右两侧扬声器阵列不发声。
上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
其中d为扬声器间隔,n为扬声器阵列的数量,α为线声源的偏转的角度。
以上为静态声源的声像合成算法。运动声源的算法在静态声源的基础上进行声像合成。
本发明中采用对运动声源信号分帧的方法进行声像合成,每帧帧长应为Δt。假设运动声源对象mobj坐标是与时间t有关的函数。设为mobj(x(t),y(t),z(t))。则每帧的坐标为mobj(xΔt,yΔt,zΔt)其中对信号进行分帧。原信号的频域函数为H(w),则分帧后每帧的频域函数为HΔt(w)。
本发明涉及到运动声源,需要做相应的多普勒效应处理,多普勒效应的公式如下所示
可得上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
当运动声源在屏幕前方运动时,需要合成聚焦声源。因此可得上侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
当形成多个运动对象时,假设对象1定义为obj1,对象2定义为obj2,……对象k定义为objk。则各对象的声信号频率响应为Hobj1(w),Hobj2(w),……,Hobjk(w)。各对象的声信号经过分帧后的频率响应为各运动声源对象每帧的坐标为obj1(xΔt1,yΔt1,zΔt1),obj2(xΔt2,yΔt2,zΔt2),objk(xΔtk,yΔtk,zΔtk)。
那么此时各扬声器阵列的驱动函数为各对象原驱动函数之和
下侧扬声器阵列的驱动方程为:
下侧扬声器阵列的驱动方程为:
左侧扬声器阵列的驱动方程为:
右侧扬声器阵列的驱动方程为:
上面结合附图对本发明进行了示例性的描述,显然本发明的实现并不受上述方式的限制,只要采用了本发明的方法构思和技术方案进行的各种改进,或未经改进将本发明的构思和技术方案直接应用于其它场合的,均在本发明的保护范围内。
Claims (6)
6.一种家庭影院,使用环屏扬声器阵列,其特征在于:所述环屏扬声器阵列应用权利要求1-5中任何一项所述的算法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110583827.XA CN114143697B (zh) | 2021-05-27 | 2021-05-27 | 基于对象的环屏扬声器阵列的点声源合成方法及其应用 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110583827.XA CN114143697B (zh) | 2021-05-27 | 2021-05-27 | 基于对象的环屏扬声器阵列的点声源合成方法及其应用 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114143697A true CN114143697A (zh) | 2022-03-04 |
CN114143697B CN114143697B (zh) | 2024-10-11 |
Family
ID=80438865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110583827.XA Active CN114143697B (zh) | 2021-05-27 | 2021-05-27 | 基于对象的环屏扬声器阵列的点声源合成方法及其应用 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114143697B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109100727A (zh) * | 2018-06-06 | 2018-12-28 | 江苏大学 | 一种使用运动虚拟声源识别声源运动轨迹的方法 |
CN109151661A (zh) * | 2018-09-04 | 2019-01-04 | 音王电声股份有限公司 | 一种环屏扬声器阵列及虚拟声源的形成方法 |
CN110248303A (zh) * | 2019-05-30 | 2019-09-17 | 北京航天计量测试技术研究所 | 一种用于麦克风阵列精确校准装置及方法 |
US20190373393A1 (en) * | 2016-10-14 | 2019-12-05 | Japan Science And Technology Agency | Spatial sound generation device, spatial sound generation system, spatial sound generation method, and spatial sound generation program |
CN111458008A (zh) * | 2020-04-16 | 2020-07-28 | 浙江大学 | 基于单固定水听器和单移动声源的海洋地声参数反演方法 |
CN111464932A (zh) * | 2020-04-07 | 2020-07-28 | 武汉轻工大学 | 基于多个听音点的声场重建方法、装置、设备及存储介质 |
-
2021
- 2021-05-27 CN CN202110583827.XA patent/CN114143697B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20190373393A1 (en) * | 2016-10-14 | 2019-12-05 | Japan Science And Technology Agency | Spatial sound generation device, spatial sound generation system, spatial sound generation method, and spatial sound generation program |
CN109100727A (zh) * | 2018-06-06 | 2018-12-28 | 江苏大学 | 一种使用运动虚拟声源识别声源运动轨迹的方法 |
CN109151661A (zh) * | 2018-09-04 | 2019-01-04 | 音王电声股份有限公司 | 一种环屏扬声器阵列及虚拟声源的形成方法 |
US20200351589A1 (en) * | 2018-09-04 | 2020-11-05 | Qian Zhao | Surround-screen speaker array and the formation method of virtual sound source |
CN110248303A (zh) * | 2019-05-30 | 2019-09-17 | 北京航天计量测试技术研究所 | 一种用于麦克风阵列精确校准装置及方法 |
CN111464932A (zh) * | 2020-04-07 | 2020-07-28 | 武汉轻工大学 | 基于多个听音点的声场重建方法、装置、设备及存储介质 |
CN111458008A (zh) * | 2020-04-16 | 2020-07-28 | 浙江大学 | 基于单固定水听器和单移动声源的海洋地声参数反演方法 |
Non-Patent Citations (2)
Title |
---|
庄庆鸿;李宁;丁莹;龚光红;: "虚拟环境中的低成本实时立体声显示", 计算机仿真, no. 08, 15 August 2009 (2009-08-15) * |
张羽霓;王庆庆;唐俊;闫磊;李永亮;: "应用于传声器阵列定位校准的空间点声源声场拟合方法", 声学技术, no. 04, 15 August 2020 (2020-08-15) * |
Also Published As
Publication number | Publication date |
---|---|
CN114143697B (zh) | 2024-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US5764777A (en) | Four dimensional acoustical audio system | |
US9838825B2 (en) | Audio signal processing device and method for reproducing a binaural signal | |
US20190116450A1 (en) | Active Acoustics Control for Near- and Far-Field Sounds | |
WO2018008395A1 (ja) | 音場形成装置および方法、並びにプログラム | |
US8472652B2 (en) | Audio reproduction system comprising narrow and wide directivity loudspeakers | |
EP2807833A2 (en) | Audio rendering system and method therefor | |
EP3363212A1 (en) | Distributed audio capture and mixing | |
WO2020047932A1 (zh) | 一种数字影院还音系统及其控制方法 | |
CN109151661B (zh) | 一种环屏扬声器阵列及虚拟声源的形成方法 | |
CN108632709B (zh) | 一种沉浸式宽带3d声场重放方法 | |
US20160205474A1 (en) | Method for operating an arrangement of sound transducers according to the wave field synthesis principle | |
Casey et al. | Vision steered beam-forming and transaural rendering for the artificial life interactive video environment (alive) | |
CN114143697B (zh) | 基于对象的环屏扬声器阵列的点声源合成方法及其应用 | |
CN113329320B (zh) | 一种基于对象的环屏扬声器阵列的声像合成方法及其应用 | |
Bai et al. | Localization and separation of acoustic sources by using a 2.5-dimensional circular microphone array | |
CN1188586A (zh) | 产生三维声象的声频系统 | |
JP5941373B2 (ja) | スピーカアレイ駆動装置およびスピーカアレイ駆動方法 | |
CN113329319B (zh) | 一种扬声器阵列的沉浸声还音制式方法及其应用 | |
CN208707935U (zh) | 一种环屏扬声器阵列 | |
Naoe et al. | Performance evaluation of 3D sound field reproduction system using a few loudspeakers and wave field synthesis | |
CN116684784B (zh) | 一种基于参量阵扬声器阵列的声重放方法及系统 | |
Otani et al. | Effects of spatial aliasing in sound field reproduction: Reproducibility of binaural signals | |
Sakamoto et al. | Improvement of accuracy of three-dimensional sound space synthesized by real-time SENZI, a sound space information acquisition system using spherical array with numerous microphones | |
WO2022181678A1 (ja) | 音響システム | |
CN110049429A (zh) | 一种用于视听设备的跟随式动态立体声系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |