CN110049429A - 一种用于视听设备的跟随式动态立体声系统 - Google Patents
一种用于视听设备的跟随式动态立体声系统 Download PDFInfo
- Publication number
- CN110049429A CN110049429A CN201910388685.4A CN201910388685A CN110049429A CN 110049429 A CN110049429 A CN 110049429A CN 201910388685 A CN201910388685 A CN 201910388685A CN 110049429 A CN110049429 A CN 110049429A
- Authority
- CN
- China
- Prior art keywords
- face
- matrix member
- acoustic matrix
- loudspeaker
- sound
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
- H04S7/303—Tracking of listener position or orientation
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Circuit For Audible Band Transducer (AREA)
- Stereophonic System (AREA)
Abstract
本发明公开了一种用于视听设备的跟随式动态立体声系统,包括扬声器阵列系统、人脸位置获取系统、扬声器延时系统;人脸位置获取系统可识别人脸并获取人脸的位置,经过预设的程序计算可以获得人脸的坐标位置以及扬声器阵列系统中指向性声波波束的偏转角度和相邻声阵元的延时信号差值,通过扬声器延时系统改变声波波束的指向性,以实现声音对人脸的动态跟随。
Description
技术领域
本发明涉及一种用于视听设备的跟随式动态立体声系统。
背景技术
目前的立体声设备众多,使用较多的设备主要有三种:一是采用声阵列的方式形成固定方向的立体声波束;二是采用左右两声道的立体声音箱;三是采用多声道输出的环绕音箱。
虽然现在的立体声视听设备使用广泛,但是无论是上述三种立体声设备方式中的哪一种,都只能在固定的角度或区域内有良好的立体声效果,也就是说,听众必须要在指定的区域内才能享受较好的收听效果;当听众离开了指定区域或者在区域内走动时,收听的效果会大打折扣,甚至获得很差的视听体验。
现有的专利:组合式线阵音箱系统CN206024074U和一种线阵列控制系统及其组成的线阵列音响系统CN101242686A都在空间中只有音响系统的正前方的一定区域内才能获得良好的视听体验,离开该区域后声音会减弱变小,视听体验效果会在一定程度上变差。非阵列式立体声设备无法实现指向性的改变,而阵列式立体声设备如果要改变扬声器的指向角度,就必须对每个扬声器结构做出改变,不仅给整个扬声器系统的安装、调试带来了非常大的难度,导致系统的安装,调试的工作量增大,难以获得令人满意的声场音效,为使用带来了一定的限制和不便。当前的视听设备都在一定程度上存在着此类问题。
发明内容
本发明的目的是提供一种用于视听设备的跟随式动态立体声系统,能够对人脸进行识别并获取坐标,实现动态的立体声跟随。
为达到上述目的,本发明采用的技术方案是:
一种用于视听设备的跟随式动态立体声系统,包括扬声器阵列系统、人脸位置获取系统、扬声器延时系统;
所述扬声器阵列系统,由多个扬声器按照需要的结构排列组合形成,用于产生立体声;
所述人脸位置获取系统,用于识别人脸并获取人脸位置,还用于根据人脸位置计算扬声器阵列波束的偏转角度以及相邻声阵元的延时信号差值;
所述扬声器延时系统,用于根据相邻声阵元的延时信号差值改变所述扬声器阵列系统的相位,使扬声器阵列波束改变方向,形成对人脸的动态跟随;
当扬声器阵列波束的偏转角度为θ时,相邻声阵元的波程差为:
l=d×sinθ;其中d为相邻声阵元中心间距;
相邻声阵元的相位差为:
其中λ为声波波长;
为了实现相邻声阵元的同相偏转,需满足:
其中w为声波频率,Δτ0为相邻声阵元的延时信号差值;
联立以上三式,得到相邻声阵元的延时信号差值为:
Δτ0=d×sinθ/c;其中c为声速。
优选地,当多个扬声器依次排列成一横行时,所述人脸位置获取系统通过以下方法计算扬声器阵列波束的偏转角度θ0和每个声阵元的延时信号τn:
以视听设备的图像中心为坐标原点,采集人脸位置的坐标为x,采集到画面边缘的坐标为x0、采集人脸与所述扬声器阵列系统的平均距离为d0,采集到画面所对应的实际图像的空间长度为l0,相邻声阵元中心间距为d;
Δτ0=d×sinθ0/c;
从一侧的声阵元开始编号,依次为1,2,……,n;则第n个声阵元的延时信号为τn=n×Δτ0;
所述延时信号,用于输入所述扬声器延时系统,以改变所述扬声器阵列系统的相位,使扬声器阵列波束改变方向,形成对人脸的动态跟随。
优选地,所述人脸位置获取系统包括用于识别人脸并获取人脸位置的定位器,所述定位器位于所述扬声器阵列系统的中心。
更优选地,所述定位器为光学摄像头。
更优选地,所述定位器为激光雷达。
由于上述技术方案的运用,本发明与现有技术相比具有下列优点:本发明一种用于视听设备的跟随式动态立体声系统,人脸位置获取系统可识别人脸并获取人脸的位置,经过预设的程序计算可以获得人脸的坐标位置以及扬声器阵列系统中指向性声波波束的偏转角度和相邻声阵元的延时信号差值,通过扬声器延时系统改变声波波束的指向性,以实现声音对人脸的动态跟随。
附图说明
附图1为扬声器阵列系统偏转示意图;
附图2为单通道音箱摆放示意图;
附图3为实施例1中位置关系图。
其中:1、采集到画面;2、实际图像。
具体实施方式
下面结合附图来对本发明的技术方案作进一步的阐述。
上述一种用于视听设备的跟随式动态立体声系统,包括扬声器阵列系统、人脸位置获取系统、扬声器延时系统。
扬声器阵列系统由多个扬声器按照需要的结构排列组合形成,用于产生立体声。每个扬声器产生的声波可以在整个声场中产生耦合,就可以在空间中的一定范围内产生品质一致的声音,即产生声波波束在一个方向上传播,也就是声场所具有的指向性。利用扬声器阵列的性质,可以将音箱设备按照一定的结构排列组合成一个阵列系统,产生立体声的指向性。
人脸位置获取系统用于识别人脸并获取人脸位置,还用于根据人脸位置计算扬声器阵列波束的偏转角度以及相邻声阵元的延时信号差值。人脸位置获取系统可识别人脸并获取人脸的位置,经过预设的程序计算可以获得人脸的坐标位置以及扬声器阵列系统中指向性声波波束的偏转角度和相邻声阵元的延时信号差值。
扬声器延时系统用于根据相邻声阵元的延时信号差值改变扬声器阵列系统的相位,使扬声器阵列波束改变方向,随着人脸的移动而移动,形成对人脸的动态跟随。
参见图1所示,当扬声器阵列波束的偏转角度为θ时,相邻声阵元的波程差为:
l=d×sinθ;其中d为相邻声阵元中心间距;
相邻声阵元的相位差为:
其中λ为声波波长;
为了实现相邻声阵元的同相偏转,需满足:
其中w为声波频率,Δτ0为相邻声阵元的延时信号差值;
联立以上三式,得到相邻声阵元的延时信号差值为:
Δτ0=d×sinθ/c;其中c为声速。
通过将相邻声阵元的延时信号差值Δτ0输入扬声器延时系统中,可以改变扬声器阵列系统的相位,使扬声器阵列波束改变方向,随着人脸的移动而移动,形成对人脸的动态跟随。
上述人脸位置获取系统包括用于识别人脸并获取人脸位置的定位器,定位器位于扬声器阵列系统的中心。
参见图2所示,对于单通道音箱,可根据系统设计需求,将音箱阵列设置成一横行,调整好音箱的高度与角度之后使音箱阵列形成的波束与常人身高相近。将定位器置于声阵列中点处,再通过一些现有的普适性的程序对人脸进行识别后进行方向定位。
对于多通道的立体声音箱,根据需要设置多行声阵列后按照单通道音箱的方式进行具体实施即可,并在每个声阵列中点设置一个定位器,采用多通道的立体声音箱可使空间产生的声场为立体声声场,听众可获得更佳的视听体验。
实施例1:
参见图3所示,可采用光学摄像头作为人脸位置的捕捉设备,将光学摄像头置于音箱阵列的中点处。利用OpenCV对光学摄像头所捕获到的画面进行人脸识别,当多个扬声器依次排列成一横行时,人脸位置获取系统通过以下方法计算扬声器阵列波束的偏转角度θ0和每个声阵元的延时信号τn:
以视听设备的图像中心为坐标原点,采集人脸位置的坐标为x,采集到画面1边缘的坐标为x0、采用景深传感器采集人脸与扬声器阵列系统的平均距离为d0,采集到画面1所对应的实际图像2的空间长度为l0,相邻声阵元中心间距为d;
Δτ0=d×sinθ0/c;
从一侧的声阵元开始编号,依次为1,2,……,n;则第n个声阵元的延时信号为τn=n×Δτ0。
通过将每个声阵元的延时信号τn输入扬声器延时系统中,也可以改变扬声器阵列系统的相位,使扬声器阵列波束改变方向,随着人脸的移动而移动,形成对人脸的动态跟随。显然,也可以将相邻声阵元的延时信号差值Δτ0直接输入扬声器延时系统中,以改变扬声器阵列波束方向,随着人脸的移动而移动,形成对人脸的动态跟随。
实施例2:
采取激光雷达作为人脸位置的捕捉设备,使激光雷达对人脸位置、速度等特征量进行探测与采集,经过适当处理后可直接获取到人脸的距离与方位角,再通过应用实例1中的公式计算可得到每个扬声器声阵元所需要的延时信号τn。
采用本发明的跟随式动态立体声系统可使听众突破空间上的限制,不再局限于音箱设备或声音阵列的正前方也可享受到同样的视听体验。听众可在更大的区域内自由移动,同时享受到与静止时相同的收听体验。应用于视听长廊或展览画廊等场景的参观讲解或介绍活动中时,听众可不受到移动的影响而获得声音一致的视听感受。相较传统的视听设备的定向定点播放立体声,有了较大的改进创新。
上述实施例只为说明本发明的技术构思及特点,其目的在于让熟悉此项技术的人士能够了解本发明的内容并加以实施,并不能以此限制本发明的保护范围,凡根据本发明精神实质所作的等效变化或修饰,都应涵盖在本发明的保护范围内。
Claims (5)
1.一种用于视听设备的跟随式动态立体声系统,其特征在于:包括扬声器阵列系统、人脸位置获取系统、扬声器延时系统;
所述扬声器阵列系统,由多个扬声器按照需要的结构排列组合形成,用于产生立体声;
所述人脸位置获取系统,用于识别人脸并获取人脸位置,还用于根据人脸位置计算扬声器阵列波束的偏转角度以及相邻声阵元的延时信号差值;
所述扬声器延时系统,用于根据相邻声阵元的延时信号差值改变所述扬声器阵列系统的相位,使扬声器阵列波束改变方向,形成对人脸的动态跟随;
当扬声器阵列波束的偏转角度为θ时,相邻声阵元的波程差为:l=d×sinθ;其中d为相邻声阵元中心间距;
相邻声阵元的相位差为:
其中λ为声波波长;
为了实现相邻声阵元的同相偏转,需满足:
其中w为声波频率,Δτ0为相邻声阵元的延时信号差值;
联立以上三式,得到相邻声阵元的延时信号差值为:
Δτ0=d×sinθ/c;其中c为声速。
2.根据权利要求1所述的一种用于视听设备的跟随式动态立体声系统,其特征在于:当多个扬声器依次排列成一横行时,所述人脸位置获取系统通过以下方法计算扬声器阵列波束的偏转角度θ0和每个声阵元的延时信号τn:
以视听设备的图像中心为坐标原点,采集人脸位置的坐标为x,采集到画面边缘的坐标为x0、采集人脸与所述扬声器阵列系统的平均距离为d0,采集到画面所对应的实际图像的空间长度为l0,相邻声阵元中心间距为d;
Δτ0=d×sinθ0/c;
从一侧的声阵元开始编号,依次为1,2,……,n;则第n个声阵元的延时信号为τn=n×Δτ0;
所述延时信号,用于输入所述扬声器延时系统,以改变所述扬声器阵列系统的相位,使扬声器阵列波束改变方向,形成对人脸的动态跟随。
3.根据权利要求1所述的一种用于视听设备的跟随式动态立体声系统,其特征在于:所述人脸位置获取系统包括用于识别人脸并获取人脸位置的定位器,所述定位器位于所述扬声器阵列系统的中心。
4.根据权利要求3所述的一种用于视听设备的跟随式动态立体声系统,其特征在于:所述定位器为光学摄像头。
5.根据权利要求3所述的一种用于视听设备的跟随式动态立体声系统,其特征在于:所述定位器为激光雷达。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910388685.4A CN110049429A (zh) | 2019-05-10 | 2019-05-10 | 一种用于视听设备的跟随式动态立体声系统 |
PCT/CN2020/089195 WO2020228608A1 (zh) | 2019-05-10 | 2020-05-08 | 一种用于视听设备的跟随式动态立体声系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910388685.4A CN110049429A (zh) | 2019-05-10 | 2019-05-10 | 一种用于视听设备的跟随式动态立体声系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110049429A true CN110049429A (zh) | 2019-07-23 |
Family
ID=67281471
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910388685.4A Pending CN110049429A (zh) | 2019-05-10 | 2019-05-10 | 一种用于视听设备的跟随式动态立体声系统 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110049429A (zh) |
WO (1) | WO2020228608A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020228608A1 (zh) * | 2019-05-10 | 2020-11-19 | 苏州静声泰科技有限公司 | 一种用于视听设备的跟随式动态立体声系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101754085A (zh) * | 2010-01-21 | 2010-06-23 | 上海大学 | 一种利用多波束实现环绕立体声的重发装置 |
CN103026735A (zh) * | 2010-07-26 | 2013-04-03 | 高通股份有限公司 | 用于声学图像空间的经增强产生的系统、方法和设备 |
CN104185116A (zh) * | 2014-08-15 | 2014-12-03 | 南京琅声声学科技有限公司 | 一种自动确定声辐射模式的方法 |
CN106686520A (zh) * | 2017-01-03 | 2017-05-17 | 南京地平线机器人技术有限公司 | 能跟踪用户的多声道音响系统和包括其的设备 |
CN109379687A (zh) * | 2018-09-03 | 2019-02-22 | 华南理工大学 | 一种线阵列扬声器系统垂直指向性的测量和推算方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2564601A2 (en) * | 2010-04-26 | 2013-03-06 | Cambridge Mechatronics Limited | Loudspeakers with position tracking of a listener |
WO2016162058A1 (en) * | 2015-04-08 | 2016-10-13 | Huawei Technologies Co., Ltd. | Apparatus and method for driving an array of loudspeakers |
CN107727742B (zh) * | 2017-10-11 | 2020-07-31 | 哈尔滨工业大学 | 一种电磁超声相控阵系统 |
CN110049429A (zh) * | 2019-05-10 | 2019-07-23 | 苏州静声泰科技有限公司 | 一种用于视听设备的跟随式动态立体声系统 |
-
2019
- 2019-05-10 CN CN201910388685.4A patent/CN110049429A/zh active Pending
-
2020
- 2020-05-08 WO PCT/CN2020/089195 patent/WO2020228608A1/zh active Application Filing
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101754085A (zh) * | 2010-01-21 | 2010-06-23 | 上海大学 | 一种利用多波束实现环绕立体声的重发装置 |
CN103026735A (zh) * | 2010-07-26 | 2013-04-03 | 高通股份有限公司 | 用于声学图像空间的经增强产生的系统、方法和设备 |
CN104185116A (zh) * | 2014-08-15 | 2014-12-03 | 南京琅声声学科技有限公司 | 一种自动确定声辐射模式的方法 |
CN106686520A (zh) * | 2017-01-03 | 2017-05-17 | 南京地平线机器人技术有限公司 | 能跟踪用户的多声道音响系统和包括其的设备 |
CN109379687A (zh) * | 2018-09-03 | 2019-02-22 | 华南理工大学 | 一种线阵列扬声器系统垂直指向性的测量和推算方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020228608A1 (zh) * | 2019-05-10 | 2020-11-19 | 苏州静声泰科技有限公司 | 一种用于视听设备的跟随式动态立体声系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2020228608A1 (zh) | 2020-11-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9641929B2 (en) | Audio signal processing method and apparatus and differential beamforming method and apparatus | |
US10972835B2 (en) | Conference system with a microphone array system and a method of speech acquisition in a conference system | |
US11140502B2 (en) | Filter selection for delivering spatial audio | |
US9924290B2 (en) | Method and system for generation of sound fields | |
US10262665B2 (en) | Method and apparatus for processing audio signals using ambisonic signals | |
KR20130122516A (ko) | 청취자의 위치를 추적하는 확성기 | |
US6430535B1 (en) | Method and device for projecting sound sources onto loudspeakers | |
EP2320676A1 (en) | Method, communication device and communication system for controlling sound focusing | |
WO2012122132A1 (en) | Dynamic distribution of acoustic energy in a projected sound field and associated systems and methods | |
US20120070021A1 (en) | Apparatus for reproducting wave field using loudspeaker array and the method thereof | |
JP2008543143A (ja) | 音響変換器のアセンブリ、システムおよび方法 | |
US20150189455A1 (en) | Transformation of multiple sound fields to generate a transformed reproduced sound field including modified reproductions of the multiple sound fields | |
CN108989721A (zh) | 用于局域化感知音频的技术 | |
KR20140007794A (ko) | 어레이 라우드스피커 시스템 | |
EP1259097A3 (en) | Surround sound field reproduction system and surround sound field reproduction method | |
Padois et al. | Acoustic source localization using a polyhedral microphone array and an improved generalized cross-correlation technique | |
CN106603947A (zh) | 电视机伴音播放的控制方法及装置 | |
CN110049429A (zh) | 一种用于视听设备的跟随式动态立体声系统 | |
CN214014501U (zh) | 声场调节装置、音箱及音响设备 | |
Nakadai et al. | Exploiting auditory fovea in humanoid-human interaction | |
US20140169595A1 (en) | Sound reproduction control apparatus | |
Kothig et al. | A bayesian system for noise-robust binaural sound localisation for humanoid robots | |
CN114697803A (zh) | 声场调节装置、音箱及音响设备 | |
TR201702870A2 (tr) | Vi̇deo görüntüleme aparati ve bunu çaliştirma metodu | |
Lim et al. | An approach to immersive audio rendering with wave field synthesis for 3D multimedia content |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190723 |