CN1832633A - 一种声源定位方法 - Google Patents
一种声源定位方法 Download PDFInfo
- Publication number
- CN1832633A CN1832633A CN 200510051313 CN200510051313A CN1832633A CN 1832633 A CN1832633 A CN 1832633A CN 200510051313 CN200510051313 CN 200510051313 CN 200510051313 A CN200510051313 A CN 200510051313A CN 1832633 A CN1832633 A CN 1832633A
- Authority
- CN
- China
- Prior art keywords
- subband
- omega
- sound
- microphone
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明提供一种声源定位方法,其核心为:根据预定三维空间坐标将拾音范围内的三维空间划分为若干个空间搜索点,根据预定频点分别确定所述各空间搜索点的三维搜索位置矢量,根据所述各空间搜索点的三维搜索位置矢量、声源信号确定各空间搜索点在各预定频点的三维空间谱矩阵,根据所述各三维空间谱矩阵确定声源的三维位置信息。本发明实现了声源三维空间定位,使声源定位更加准确;从而实现了提高声源定位精度、提高拾音系统语音通信质量的目的。
Description
技术领域
本发明涉及多媒体通信技术领域的音频处理技术,具体涉及一种声源定位方法。
背景技术
在基于麦克风的拾音系统中,声源定位技术能够确定感兴趣的声音,使拾音系统能够对其接收的信号进行声音去噪、声源跟踪、语音提取和分离等处理。准确的声源定位能够有效提高嘈杂背景下的语音通信质量。
传统的拾音工具一般为单个孤立的麦克风。单个麦克风会将其拾音范围内的任何声音包括噪声等全部接收,即单个麦克风接收的信号是由环境噪声、多个声源发出的声音组成的混合信号。
单个麦克风不能够自适应的对准并跟踪感兴趣的说话人,主要采用在频谱域进行功率谱抵消(spectral subtraction)和滤波等技术来抑制噪声。然而,麦克风接收的语音信号和噪声信号通常在时间上和频谱上是相互重叠的,因此,要从单个麦克风接收的混合信号中分离出不同的声音,并有效抑制不感兴趣的声音如噪声等是相当困难。
因而,基于单个麦克风拾音系统的语音通信质量差,使得感兴趣的说话人的声音难以听清。
麦克风阵列技术是语音信号处理的一个新领域。麦克风阵列由多个麦克风按照一定的拓扑结构组成,典型的麦克风阵列如附图1,附图2、附图3和附图4所示。
目前,麦克风阵列主要采用三种方法实现声源定位:
方法一、采用时延估计(Time-Delay estimator)技术和延迟求和波束形成(Delay Sum Beamformer,DSB)技术来进行声源定位。由于时延估计和延迟求和波束形成技术的定位精度较低,所以,该方法在三维定位、多声源定位、非语音信号处理等方面的应用局限性大。
方法二、采用极大似然估计类算法和高阶估计类算法进行声源定位。该方法中的算法复杂度高、计算量大,一般仅用于理论研究,作为评价算法的标准。
方法三、采用近场声源定位技术来实现声源定位,该方法通过谱峰的空间搜索来获得声源的方位和距离信息。
具体方法为:首先把M个普通全向麦克风按照一定的拓扑结构组成麦克风阵列,如将8个全向麦克风均匀分布在一个直径为50厘米的圆周上,组成均匀圆形麦克风阵列,来拾取声源发出的声音信号和其他处于麦克风接收范围内的所有语音信号。
用数学公式表示麦克风阵列的接收信号F(t)为:
F(t)=[f1(t) L fi(t) L fM(t)]T (1)
然后,对每个麦克风接收到的信号进行AD(模数)变换:
F(n)=[f1(n) L fi(n) L fM(n)]T (2)
再从公式(2)计算出的每路信号中选取一帧信号进行短时傅立叶变换:
其中:w(n)为窗函数,m为窗函数每次移动的点数,N为帧长。
对公式(3)的S(ω)的每一频率点S(ωi):
作如下4个步骤的处理:
1、获取语音帧的频域相关矩阵R(i):R(i)=E{S(ωi)SH(ωi)} (5)
2、对上述相关矩阵进行特征值分解,求出特征值和对应的特征向量;
3、按照特征值的大小把特征向量组成的信号空间分解成为噪声子空间S和信号子空间G:
4、根据公式(8)获取每一搜索位置的位置矢量ai(r,θ):
其中:rm是从搜索点(r,θ)到第m个麦克风的距离;τm声源从搜索点(r,θ)到第m个麦克风的传播时间;ωi表示第i个频率点。
定义bi(r,θ)为:
求出第i个频率点的二维空间谱矩阵为:
通过上面4个步骤的处理后,选择一个频率范围并求出该频率范围内的平均空间谱为:
其中:ωL,ωH分别为该频率范围的下界和上界频率,K=ωH-ωL+1。
对P(r,θ)进行二维谱峰搜索,从而找到目标信号的位置,即在二维空间谱矩阵P(r,θ)中找出峰值,峰值对应的坐标就是声源位置估计值:(r,θ)。
该方法存在如下缺点:
1、只能够进行二维声源定位,不能实现三维声源定位,定位不准确,从而使声音去噪、声源跟踪、语音提取和分离等方面的处理受到影响,降低了语音通信质量。
2、该方法中搜索位置矢量a(r,θ)的幅度衰减因子和时间延迟因子没有体现麦克风之间的空间相对位置关系,这与子空间理论的基本假设有一定的差异,使声源定位性能下降。
3、该方法在没有语音时拾音系统也进行声源定位,浪费了大量的资源,而且使位置估计错误比率高。
4、大量非白高斯噪声会使声源定位性能显著下降。
5、该方法对所有频率点均求空间谱,运算量大、实时性低、实现成本高。
6、该方法在搜索目标位置时,采用频率范围内的每一频率点的空间谱的简单平均,没有考虑语音信号的频率特性,使声源定位性能下降。
综上所述,现有的麦克风阵列的声源定位方法不能够实现三维空间定位,存在声源定位不准确、拾音系统的语音通信质量低等问题。
发明内容
本发明的目的在于,提供一种声源定位方法,以克服现有技术的声源二维空间定位存在的声源定位精度差的缺点。
为达到上述目的,本发明提供的技术方案具体为:
一种声源定位方法,包括:
a、根据预定三维空间坐标将拾音范围内的三维空间划分为若干个空间搜索点;
b、根据预定频点确定所述各空间搜索点的三维搜索位置矢量;
c、根据所述各空间搜索点的三维搜索位置矢量、声源信号确定各空间搜索点在各预定频点的三维空间谱矩阵;
d、根据所述各三维空间谱矩阵确定声源的三维位置信息。
所述步骤a中预定三维空间坐标具体是指:以麦克风阵列的中心位置为坐标原点的三维空间坐标或以麦克风阵列中任一麦克风的位置为坐标原点的三维空间坐标。
所述步骤b具体包括如下步骤:
b1、根据预定三维空间坐标确定各麦克风的三维空间矢量pm为:
pm={xm,ym,zm}=rm*((sinθm cosm,sinθm sinm,cosθm)),i=1,L,M;
其中:x、y、z为第m个麦克风的坐标位置,rm为第m个麦克风距坐标原点的距离,θ为第m个麦克风的坐标矢量与Z轴正方向的夹角,为第m个麦克风坐标矢量在XOY平面的投影与X轴正方向的夹角;
b2、根据各麦克风的三维空间矢量确定所述各空间搜索点分别在各预定频点的三维搜索位置矢量。
所述步骤b2具体包括如下步骤:
b21、根据语音信号的频率确定预定个数的子带;
b22、分别确定所述各子带的中心频率;
b23、分别根据各子带的中心频率、各麦克风的三维空间矢量确定所述各空间搜索点在所述各子带的三维搜索位置矢量。
所述步骤b23具体包括如下步骤:
设定空间搜索点(r,θ,φ)的坐标矢量S分别为:
S=r*[sinθcosφ sinθsinφ cosθ];
其中:r为空间搜索点距坐标原点的距离,θ为空间搜索点的坐标矢量与Z轴正方向的夹角,为空间搜索点在XOY平面的投影与X轴正方向的夹角;
确定空间搜索点(r,θ,φ)到第m个麦克风的相对幅度衰减因子m为:
其中:pm为第m个麦克风的三维空间矢量,‖*‖表示矢量*的范数;
确定空间搜索点(r,θ,φ)到第m个麦克风的相对时间延迟因子τm为:
其中:c为声音在空气中的传播速度,‖*‖表示矢量*的范数;
确定空间搜索点(r,θ,φ)在所述各子带的三维搜索位置矢量ai(r,θ,φ)为:
其中:ωi为各子带的中心频率。
所述步骤c具体包括如下步骤:
c1、各麦克风根据预定采样频率获取声源信号;
c2、将所述声源信号进行AD转换:F(n)=[f1(n) L fi(n) L fM(n)]T;
c3、从所述AD转换后的声源信号中选取信号帧进行短时傅立叶变换:
c4、确定所述傅立叶变换后的语音帧;
c5、根据所述各空间搜索点在各预定频点的位置矢量、所述语音帧确定各空间搜索点在所述各子带的三维空间谱矩阵。
所述步骤c4具体包括如下步骤:
判断所述傅立叶变换后的信号帧是否为语音帧;
如果为非语音帧,将所述信号帧存储为当前估计噪声谱;
如果为语音帧,根据当前估计噪声谱将所述语音帧进行谱抵消去噪:
其中:
为当前估计噪声谱,NFFT为短时傅立叶变换的频率采样点数。
所述步骤c5具体包括如下步骤:
确定谱抵消去噪后的语音帧在各子带的频域相关矩阵R(i):
R(i)=E{S(ωi)SH(ωi)};
其中:S(ωi)为第i个子带的信号分量,且
根据所述R(i)的奇异值分解
确定各频域相关矩阵对应的奇异向量和奇异值;
其中:λ1,L,λM为R(i)的奇异值,Ui和Vi是对应的奇异向量组成的矩阵;
根据奇异值的大小、声源个数确定语音帧在各子带的噪声子空间;
根据所述语音帧在各子带的噪声子空间确定各空间搜索点在所述各子带的三维空间谱矩阵为:
其中:Gi为语音帧在第i个子带的噪声子空间,ai(r,θ,φ)为空间搜索点(r,θ,φ)在第i个子带的三维搜索位置矢量。
所述步骤d具体包括如下步骤:
d1、将所述各三维空间谱矩阵的各三维谱峰坐标分别作为声源信号在各子带的位置坐标;
d2、将所述声源信号在各子带的位置加权平均值确定为声源信号的位置坐标为:
其中:K为子带的预定个数,wi为第i个子带的权值,且wi为:
S(ωi)为第i个子带的信号分量,(θi,φi,γi)为声源信号在第i个子带的位置坐标。
所述步骤d具体包括如下步骤:
d3、根据所述各三维空间谱矩阵进行加权平均:
其中:wi为第i个子带的权值,且wi为:
S(ωi)为第i个子带的信号分量,Pi(ri,θi,φi,ωi)为各空间搜索点在第i个子带的三维空间谱矩阵;
d4、将所述加权平均后的三维空间谱矩阵的三维谱峰坐标作为声源信号的位置坐标。
所述步骤d1、d4中的wi可替换为:
其中:K为子带的预定个数。
通过上述技术方案的描述可知,本发明通过空间搜索点的三维搜索位置矢量实现了声源三维空间定位,提高了声源定位的精度;通过参考麦克风的位置来确定空间搜索点的幅度衰减因子和时延因子,使本发明与子空间理论的模型假设一致,减少了模型误差,提高了声源位置估计性能;通过设置子带,大大减少了频域相关矩阵的运算量,减少了算法复杂度,提高了拾音系统的实时性,节约了硬件成本;通过对每个子带分别估计出声源位置坐标,并进行加权求和,使声源位置的估计值更加准确;通过语音检测使本发明在没有语音输入时,拾音系统不进行声源位置估计,提高了声源位置估计性能,降低了系统资源消耗;通过采用谱抵消去噪,减少了非白高斯噪声的影响;从而通过本发明提供的技术方案实现了提高声源定位精度、提高拾音系统语音通信质量的目的。
附图说明
图1是麦克风阵列示意图1;
图2是麦克风阵列示意图2;
图3是麦克风阵列示意图3;
图4是麦克风阵列示意图4;
图5是本发明的声源定位方法的流程图。
具体实施方式
在麦克风的实际拾音环境中,声源的位置可能会因为说话人的走动、起坐等原因在三维空间中发生变化,如果在声源定位时,能够进行三维声源定位,则能够提高麦克风的声源定位准确性,从而使拾音系统能够对声源准确跟踪,提高拾音系统的语音通信质量。
因此,本发明的核心是:根据预定三维空间坐标将拾音范围内的三维空间划分为若干个空间搜索点,根据预定频点分别确定所述各空间搜索点的三维搜索位置矢量,根据所述各空间搜索点的三维搜索位置矢量、声源信号确定各空间搜索点在各预定频点的三维空间谱矩阵,根据所述各三维空间谱矩阵确定声源的三维位置信息。
下面基于本发明的核心思想对本发明提供的技术方案做进一步的描述。
本发明中的麦克风可以为普通的全向麦克风,且多个麦克风按照一定的拓扑结构组成的麦克风阵列可以为任意阵列形式,如8个普通全向麦克风组成的如附图1所示的均匀直线麦克风阵列,如8个普通全向麦克风组成的如附图2所示的均匀圆形麦克风阵列,如18个普通全向麦克风组成的如附图3所示的均匀球面形麦克风阵列,再如10个普通全向麦克风组成的如附图4所示的三维均匀直线麦克风阵列。
麦克风阵列在其拾音距离内拾取声源发出的声源信号和其他处于麦克风拾取范围内的所有语音信号。
麦克风的拾音距离可根据具体的应用环境来确定,如房间大小为长5米、宽10米、高4米,则可以要求麦克风阵列对该房间内的所有声音进行处理,麦克风的拾音距离应至少为10米。
本发明对构成麦克风的支架材料不限,但是,麦克风的支架几何尺寸要越小越好,以减少支架对声音的反射,从而减少多径效应。
本发明首先需要在麦克风阵列的拾音范围内的三维空间中设置三维空间坐标,三维空间坐标的原点可以为麦克风阵列的中心位置,也可以为麦克风阵列中的任意一个麦克风的位置,或其他位置。
在确定三维空间坐标后,应根据三维空间坐标确定各麦克风的坐标矢量和各空间搜索点的坐标矢量。
设第m个麦克风的坐标矢量为:
pm={xm,ym,zm}=rm*((sinθmcosm,sinθmsinm,cosθm)),i=1,L,M (12)
其中:ri为第i个麦克风距麦克风阵列中心即三维空间坐标原定的距离,θ为第i个麦克风的坐标矢量与三维空间坐标Z轴正方向的夹角,为第i个麦克风坐标矢量在三维空间坐标XOY平面的投影与X轴正方向的夹角。
M个麦克风的坐标矢量组成整个麦克风阵列的坐标矩阵为:
设三维空间坐标中任一空间搜索点(r,θ,φ)的坐标矢量S为:
S=r*[sinθcosφ sinθsinφ cosθ] (14)
其中:r为空间搜索点(r,θ,φ)距麦克风阵列中心即三维空间坐标原定的距离,θ为空间搜索点(r,θ,φ)坐标矢量与三维空间坐标Z轴正方向的夹角,为空间搜索点(r,θ,φ)的坐标矢量在三维空间坐标XOY平面的投影与X轴正方向的夹角。
在三维空间坐标中划分空间搜索点可根据具体的应用环境来确定,如当声源为人时,在20厘米×20厘米×20厘米的空间内一般情况下不可能出现两个声源,此时,可以选择水平角步长为5°,俯仰角步长为5°,距离步长为15厘米就可以了,如果选择更小的步长,如水平角、俯仰角步长均为1°,距离步长为5厘米,则对拾音系统的运算能力要求会很高,普通的DSP(数字信号处理)芯片实现困难,在声源为人的拾音系统中是没有必要的。
在确定了各麦克风的坐标矢量、空间搜索点的坐标矢量后,麦克风阵列接收的声源信号可以用数学公式表示为:
F(t)=[f1(t) L fi(t) L fM(t)]T (15)
其中:fi(t)表示第i个麦克风接收到的声源信号;i=1,L,M;M为麦克风阵列中麦克风的个数;[●]T表示对“●”矩阵的转置运算。
对麦克风阵列中每个麦克风接收到的声源信号进行AD变换。在进行AD变换时可以根据对声音质量的要求对接收的声源信号采用16KHz,22KHz,44Khz或其它的采样频率,采样精度可以选用8bit,16bit,32bit或其它采样精度。采样的技术和使用的采样芯片不限。
采样后形成多路数字语音信号,即:F(n)=[f1(n) L fi(n) L fM(n)]T (16)
从AD变换后的每路声源信号中选取一帧信号如选取帧长为32ms的信号帧进行短时傅立叶变换,短时傅立叶变换可以选用汉明窗或其它窗函数。
如果采用512点的FFT(快速傅立叶变换)来实现短时傅立叶变换,则短时傅立叶变换后的信号帧为:
对短时傅立叶变换后的信号帧进行语音检测,以确定该声源信号帧是语音帧,还是非语音帧。检测语音帧可采用过零率、短时能量相结合的语音检测技术来实现,也可通过其他语音检测技术来实现。
对于非语音帧,可将其存储为当前估计噪声谱,对于语音帧,则继续进行下面的声源定位过程。通过语音检测使本发明在没有语音输入时,拾音系统不进行声源位置估计,提高了声源位置估计性能,降低了系统资源消耗。
在检测为语音帧后,对语音帧采用谱抵消方法,如减谱法进行谱抵消去噪,以去除拾音系统中的噪声。由于谱抵消去噪技术在一定程度上能够解决非白高斯噪声的影响,所以,对语音帧进行谱抵消去噪后,使拾音系统的声源定位更加准确,提高了声源定位的估计性能。
当前估计噪声谱的初始值可设为0矩阵。
设定当前估计噪声谱为:
其中:M为麦克风的个数,512为512点FFT的短时傅立叶变换。
将语音帧进行谱抵消去噪后的语音帧信号为:
其中:M为麦克风的个数,512为512点FFT的短时傅立叶变换。
对于经过谱抵消去噪后的语音帧信号,应分别确定各空间搜索点在语音帧信号的各频点的三维搜索位置矢量。
为减少运算的复杂程度,提高声源定位性能,本发明可以根据语音帧信号的特点划分子带,即选取感兴趣的K个频率ωi,i=1,...K,把这些频率作为每一个子带的中心频率,将各空间搜索点在各子带中心频率点的三维搜索位置矢量确定为各空间搜索点在各子带的各频点的三维搜索位置矢量。
设定第i个子带的信号分量S(ωi)为:
对每一子带的信号分量S(ωi)作如下处理:
获取语音帧的频域相关矩阵R(i):
R(i)=E{S(ωi)SH(ωi)} (21)
将上述相关矩阵R(i)奇异值分解为:
其中:λ1,L,λM为R(i)的奇异值,Ui和Vi是对应的奇异向量组成的矩阵,即:V1=[v1 L vM],其中的v1 L vM为λ1,L,λM对应的奇异向量。
根据奇异值λ1,L,λM的大小和声源个数对Vi分块为:
其中:D为需要估计声源位置的声源个数,声源个数可以由系统预先设定,v1 L vD为D个较大的奇异值对应的奇异向量,vD+1 L vM为其余的奇异向量。
根据公式(23)可以确定语音帧在各子带的信号子空间Si和噪声子空间Gi。
在对语音帧的每一子带进行上述处理后,应根据各空间搜索点在第i个子带的三维搜索位置矢量ai(r,θ,φ)与各子带的噪声子空间Gi确定语音信号在第i个子带的三维空间谱矩阵。
空间搜索点的三维搜索位置矢量ai(r,θ,φ)可根据各空间搜索与各麦克风的相对位置求出,具体过程为:
设第m个麦克风的坐标矢量为Pm,任一空间搜索点(r,θ,φ)的坐标矢量为S,即:
S=r*[sinθcosφ sinθsinφ cosθ] (24)
Pm=rm*[sinθmcosm sinθmsinm cosθm] (25)则从空间搜索点(r,θ,φ)到第m个麦克风的相对幅度衰减因子m为:
从空间搜索点(r,θ,φ)到第m个麦克风的相对时间延迟因子τm为:
其中:c为声音在空气中的传播速度,在室温时取340米/秒。
任一空间搜索点(r,θ,φ)在第i个子带的三维搜索位置矢量ai(r,θ,φ)为:
在确定了各空间搜索点在第i个子带的三维搜索位置矢量后,可确定语音信号在第i个子带的三维空间谱矩阵为:
其中:Gi为第i个子带的噪声子空间。
对Pi(ri,θi,φi,ωi)进行三维谱峰搜索目标信号的位置,即在三维空间谱矩阵Pi(θi,φi,ri,ωi)中找出峰值,该峰值对应的坐标就是声源信号的第i个子带的位置估计值:(θi,φi,ri)。
根据上述方法对划分的K个子带分别求出K个声源信号的位置估计值,对这K个声源信号的位置估计值进行加权平均,即可得到声源信号的三维位置估计值:
其中:K为子带的预定个数,wi为第i个子带的权值,且wi为:
其中:S(ωi)为第i个子带的信号分量,K为子带的预定个数。
上述公式30中的权值wi可以结合声源的特点进行相应的变化,以增强部分子带的估计结果,例如当已知声源为男声,则可以提高低频部分子带的权值,从而获得更加准确的声源位置估计值。
在获取语音信号在第i个子带的三维空间谱矩阵后,也可以对各三维空间谱矩阵求加权平均,即:
从上述加权平均后的三维空间谱矩阵
P(r,θ,φ)中搜索峰值,将该峰值对应的坐标位置(r,θ,φ)确定为声源信号的坐标位置,从而实现声源三维定位。
下面以8个全向麦克风组成的如附图1所示的均匀直线麦克风阵列确定一个声源位置为例,结合附图5对本发明的技术方案进行详细说明。
设定三维空间坐标的原点设置在附图1中的第一个麦克风处,则各麦克风的位置矢量组成的矩阵为:
在步骤500,麦克风阵列中的各麦克风接收模拟声源信号,设麦克风接收的模拟声源信号为:{f1(t),L,f8(t)}。
到步骤510,取采样频率为16KHz,采样精度为16bit,将接收的模拟声源信号进行AD变换,AD变换后的声源信号为:{f1(n),L,f8(n)}。
到步骤520,从上述AD变换后的声源信号帧中选择32毫秒长的一帧数据,即帧长为512的信号帧:
取频率采样点数为512,对上述选择的信号帧进行加汉明(hamming)窗的短时傅立叶变换:
到步骤530,对上述短时傅立叶变换后的声源信号帧进行语音检测,如采用过零率、短时能量相结合的语音检测技术对F(ω)进行语音检测,判断F(ω)是语音信号还是非语音信号如噪声等,如果F(ω)是非语音信号到步骤531,将该非语音信号存储为当前估计噪声谱N(ω),即当前估计噪声谱N(ω)=F(ω),到步骤532。
在步骤530,如果F(ω)是语音信号,到步骤532,采用谱抵消去噪的方法对语音帧进行去噪处理。设定当前估计噪声谱为:
谱抵消去噪后的语音信号为:
到步骤540,根据语音帧的特点划分子带,如对语音信号的谱进行分析,一般语音信号频率在300Hz~3400Hz之间,对于512点FFT变换可以选取11点到100点间共90个点为语音信号,由对称性可知在267~356之间也为语音信号,把公式37中的非语音信号点置零,并把90个点分成9个子带。
到步骤550,对每一个子带进行相关运算,得到每一个子带的相关矩阵{R1(ω)8×8,L,R9(ω)8×8},对{R1(ω)8×8,L,R9(ω)8×8}进行奇异值分解,获得每个相关矩阵的奇异值和奇异向量,并进行空间分解,得到信号子空间和噪声子空间。
对第i个子带的相关矩阵进行特征值分解得:
Ri(ω)8×8=VΛUH (38)
其中:Λ=diag(λ1 L λ8),λ1>L>λ8为奇异值组成的对角阵,U、V为对应的奇异矩阵。U可以划分为信号子空间和噪声子空间:
U=[UsMUN] (39)
由于预先设定只有一个声源,故UN为U矩阵的后7列。
到步骤560,假设三维空间搜索范围和步长分别是:θ为0°~90°,搜索步长为5°;φ为0°~90°搜索步长为5°;r为50厘米~500厘米,搜索步长为15厘米,则三维空间共有19×19×31个空间搜索点。
根据公式
确定各空间搜索点分别在9个子带中的三维空间搜索位置矢量,根据公式
确定上述各三维空间搜索位置矢量的三维空间谱矩阵Pi(ri,θi,φi,ωi),该矩阵的尺寸为:19×19×31。
对这9个子带应分别求出9个三维空间谱矩阵。
到步骤570,每个三维空间谱矩阵确定了一个三维空间的曲面,找出各三维空间曲面的峰值点即矩阵的最大值点。
到步骤580,将各三维空间谱矩阵中的峰值点对应的三维坐标确定为声源信号在第i个子带的声源位置的估计值:ri,θi,φi。
其中:各子带的权值
各子带的权值也可以简化为
到步骤591,输出声源信号的三维位置估计值。
虽然通过实施例描绘了本发明,本领域普通技术人员知道,本发明有许多变形和变化而不脱离本发明的精神,本发明的申请文件的权利要求包括这些变形和变化。
Claims (11)
1、一种声源定位方法,其特征在于,包括步骤:
a、根据预定三维空间坐标将拾音范围内的三维空间划分为若干个空间搜索点:
b、根据预定频点确定所述各空间搜索点的三维搜索位置矢量;
c、根据所述各空间搜索点的三维搜索位置矢量、声源信号确定各空间搜索点在各预定频点的三维空间谱矩阵;
d、根据所述各三维空间谱矩阵确定声源的三维位置信息。
2、如权利要求1所述的一种声源定位方法,其特征在于,所述步骤a中预定三维空间坐标具体是指:以麦克风阵列的中心位置为坐标原点的三维空间坐标或以麦克风阵列中任一麦克风的位置为坐标原点的三维空间坐标。
3、如权利要求1所述的一种声源定位方法,其特征在于,所述步骤b具体包括如下步骤:
b1、根据预定三维空间坐标确定各麦克风的三维空间矢量pm为:
pm={xm,ym,zm}=rm*((sinθm cosm,sinθm sinm,cosθm)),i=1,L,M;
其中:x、y、z为第m个麦克风的坐标位置,rm为第m个麦克风距坐标原点的距离,θ为第m个麦克风的坐标矢量与Z轴正方向的夹角,为第m个麦克风坐标矢量在XOY平面的投影与X轴正方向的夹角;
b2、根据各麦克风的三维空间矢量确定所述各空间搜索点分别在各预定频点的三维搜索位置矢量。
4、如权利要求3所述的一种声源定位方法,其特征在于,所述步骤b2具体包括如下步骤:
b21、根据语音信号的频率确定预定个数的子带;
b22、分别确定所述各子带的中心频率;
b23、分别根据各子带的中心频率、各麦克风的三维空间矢量确定所述各空间搜索点在所述各子带的三维搜索位置矢量。
5、如权利要求4所述的一种声源定位方法,其特征在于,所述步骤b23具体包括如下步骤:
设定空间搜索点(r,θ,φ)的坐标矢量S分别为:
S=r*[sinθcosφsinθsinφcosθ];
其中:r为空间搜索点距坐标原点的距离,θ为空间搜索点的坐标矢量与Z轴正方向的夹角,为空间搜索点在XOY平面的投影与X轴正方向的夹角;
确定空间搜索点(r,θ,φ)到第m个麦克风的相对幅度衰减因子m为:
其中:pm为第m个麦克风的三维空间矢量,‖*‖表示矢量*的范数;
确定空间搜索点(r,θ,φ)到第m个麦克风的相对时间延迟因子τm为:
其中:c为声音在空气中的传播速度,‖*‖表示矢量*的范数;
确定空间搜索点(r,θ,φ)在所述各子带的三维搜索位置矢量ai(r,θ,φ)为:
其中:ωi为各子带的中心频率。
6、如权利要求4所述的一种声源定位方法,其特征在于,所述步骤c具体包括如下步骤:
c1、各麦克风根据预定采样频率获取声源信号;
c2、将所述声源信号进行AD转换:F(n)=[f1(n)L fi(n)L fM(n)]T;
c3、从所述AD转换后的声源信号中选取信号帧进行短时傅立叶变换:
c4、确定所述傅立叶变换后的语音帧;
c5、根据所述各空间搜索点在各预定频点的位置矢量、所述语音帧确定各空间搜索点在所述各子带的三维空间谱矩阵。
7、如权利要求6所述的一种声源定位方法,其特征在于,所述步骤c4具体包括如下步骤:
判断所述傅立叶变换后的信号帧是否为语音帧;
如果为非语音帧,将所述信号帧存储为当前估计噪声谱;
如果为语音帧,根据当前估计噪声谱将所述语音帧进行谱抵消去噪:
其中:
为当前估计噪声谱,NFFT为短时傅立叶变换的频率采样点数。
8、如权利要求7所述的一种声源定位方法,其特征在于,所述步骤c5具体包括如下步骤:
确定谱抵消去噪后的语音帧在各子带的频域相关矩阵R(i):
R(i)=E{S(ωi)SH(ωi)};
其中:S(ωi)为第i个子带的信号分量,且
根据所述R(i)的奇异值分解
确定各频域相关矩阵对应的奇异向量和奇异值;
其中:λ1,L,λM为R(i)的奇异值,Ui和Vi是对应的奇异向量组成的矩阵;
根据奇异值的大小、声源个数确定语音帧在各子带的噪声子空间;
根据所述语音帧在各子带的噪声子空间确定各空间搜索点在所述各子带的三维空间谱矩阵为:
其中:Gi为语音帧在第i个子带的噪声子空间,ai(r,θ,φ)为空间搜索点(r,θ,φ)在第i个子带的三维搜索位置矢量。
9、如权利要求4所述的一种声源定位方法,其特征在于,所述步骤d具体包括如下步骤:
d1、将所述各三维空间谱矩阵的各三维谱峰坐标分别作为声源信号在各子带的位置坐标;
d2、将所述声源信号在各子带的位置加权平均值确定为声源信号的位置坐标为:
其中:K为子带的预定个数,wi为第i个子带的权值,且wi为:
S(ωi)为第i个子带的信号分量,(θi,φi,γi)为声源信号在第i个子带的位置坐标。
10、如权利要求4所述的一种声源定位方法,其特征在于,所述步骤d具体包括如下步骤:
d3、根据所述各三维空间谱矩阵进行加权平均:
其中:wi为第i个子带的权值,且wi为:
S(ωi)为第i个子带的信号分量,Pi(ri,θi,φi,ωi)为各空间搜索点在第i个子带的三维空间谱矩阵;
d4、将所述加权平均后的三维空间谱矩阵的三维谱峰坐标作为声源信号的位置坐标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200510051313 CN1832633A (zh) | 2005-03-07 | 2005-03-07 | 一种声源定位方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN 200510051313 CN1832633A (zh) | 2005-03-07 | 2005-03-07 | 一种声源定位方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN1832633A true CN1832633A (zh) | 2006-09-13 |
Family
ID=36994587
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN 200510051313 Pending CN1832633A (zh) | 2005-03-07 | 2005-03-07 | 一种声源定位方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN1832633A (zh) |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101957443A (zh) * | 2010-06-22 | 2011-01-26 | 嘉兴学院 | 声源定位方法 |
WO2011091754A1 (zh) * | 2010-01-27 | 2011-08-04 | 华为终端有限公司 | 声源定位方法和装置 |
CN102621526A (zh) * | 2012-04-13 | 2012-08-01 | 湖北中试电力科技有限公司 | 一种蜂窝式音频定位传感器及其定位方法 |
CN101595739B (zh) * | 2007-01-26 | 2012-11-14 | 微软公司 | 多传感器声源定位 |
CN103135790A (zh) * | 2011-11-25 | 2013-06-05 | 丽智科技股份有限公司 | 标的物的空间位置侦测方法及系统 |
CN103167373A (zh) * | 2011-12-09 | 2013-06-19 | 现代自动车株式会社 | 定位声源的方法和系统 |
CN104053107A (zh) * | 2014-06-06 | 2014-09-17 | 重庆大学 | 用于噪声环境下声源分离和定位的助听装置及方法 |
CN104536585A (zh) * | 2014-12-31 | 2015-04-22 | 无锡清华信息科学与技术国家实验室物联网技术中心 | 一种基于动态条件随机场的键盘输入侦测方法 |
CN104898086A (zh) * | 2015-05-19 | 2015-09-09 | 南京航空航天大学 | 适用于微型麦克风阵列的声强估计声源定向方法 |
CN105068048A (zh) * | 2015-08-14 | 2015-11-18 | 南京信息工程大学 | 基于空间稀疏性的分布式麦克风阵列声源定位方法 |
CN105204001A (zh) * | 2015-10-12 | 2015-12-30 | Tcl集团股份有限公司 | 一种声源定位的方法及系统 |
CN105263093A (zh) * | 2015-10-12 | 2016-01-20 | 深圳东方酷音信息技术有限公司 | 一种全方位声音采集装置、编辑装置及系统 |
CN105911523A (zh) * | 2016-04-13 | 2016-08-31 | 东北石油大学 | 基于半球型麦克风阵列的点声源定位系统智能检测前端 |
CN106251857A (zh) * | 2016-08-16 | 2016-12-21 | 青岛歌尔声学科技有限公司 | 声源方向判断装置、方法及麦克风指向性调节系统、方法 |
CN106872944A (zh) * | 2017-02-27 | 2017-06-20 | 海尔优家智能科技(北京)有限公司 | 一种基于麦克风阵列的声源定位方法及装置 |
CN107121669A (zh) * | 2016-02-25 | 2017-09-01 | 松下电器(美国)知识产权公司 | 声源探测装置、声源探测方法及非瞬时性记录介质 |
CN108107407A (zh) * | 2017-12-18 | 2018-06-01 | 黑龙江大学 | 一种基于空间分布式麦克风的三维声源定位方法 |
CN108198568A (zh) * | 2017-12-26 | 2018-06-22 | 太原理工大学 | 一种多声源定位的方法及系统 |
CN108292508A (zh) * | 2015-12-02 | 2018-07-17 | 日本电信电话株式会社 | 空间相关矩阵估计装置、空间相关矩阵估计方法和空间相关矩阵估计程序 |
CN108322855A (zh) * | 2018-02-11 | 2018-07-24 | 北京百度网讯科技有限公司 | 用于获取音频信息的方法及装置 |
WO2018133056A1 (zh) * | 2017-01-22 | 2018-07-26 | 北京时代拓灵科技有限公司 | 一种声源定位的方法和装置 |
CN109270493A (zh) * | 2018-10-16 | 2019-01-25 | 苏州思必驰信息科技有限公司 | 声源定位方法和装置 |
CN110211600A (zh) * | 2019-05-17 | 2019-09-06 | 北京华控创为南京信息技术有限公司 | 用于定向监听通信的智能麦克风阵列模块 |
CN110238844A (zh) * | 2019-04-30 | 2019-09-17 | 北京云迹科技有限公司 | 机器人转身处理方法及装置 |
CN110677782A (zh) * | 2018-07-03 | 2020-01-10 | 国际商业机器公司 | 信号自适应噪声过滤器 |
CN113064118A (zh) * | 2021-03-19 | 2021-07-02 | 维沃移动通信有限公司 | 声源定位方法和装置 |
-
2005
- 2005-03-07 CN CN 200510051313 patent/CN1832633A/zh active Pending
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101595739B (zh) * | 2007-01-26 | 2012-11-14 | 微软公司 | 多传感器声源定位 |
WO2011091754A1 (zh) * | 2010-01-27 | 2011-08-04 | 华为终端有限公司 | 声源定位方法和装置 |
CN101957443B (zh) * | 2010-06-22 | 2012-07-11 | 嘉兴学院 | 声源定位方法 |
CN101957443A (zh) * | 2010-06-22 | 2011-01-26 | 嘉兴学院 | 声源定位方法 |
CN103135790A (zh) * | 2011-11-25 | 2013-06-05 | 丽智科技股份有限公司 | 标的物的空间位置侦测方法及系统 |
CN103135790B (zh) * | 2011-11-25 | 2015-10-28 | 丽智科技股份有限公司 | 标的物的空间位置侦测方法及系统 |
CN103167373A (zh) * | 2011-12-09 | 2013-06-19 | 现代自动车株式会社 | 定位声源的方法和系统 |
CN102621526A (zh) * | 2012-04-13 | 2012-08-01 | 湖北中试电力科技有限公司 | 一种蜂窝式音频定位传感器及其定位方法 |
CN104053107A (zh) * | 2014-06-06 | 2014-09-17 | 重庆大学 | 用于噪声环境下声源分离和定位的助听装置及方法 |
CN104053107B (zh) * | 2014-06-06 | 2018-06-05 | 重庆大学 | 一种用于噪声环境下声源分离和定位方法 |
CN104536585B (zh) * | 2014-12-31 | 2017-11-10 | 无锡清华信息科学与技术国家实验室物联网技术中心 | 一种基于动态条件随机场的键盘输入侦测方法 |
CN104536585A (zh) * | 2014-12-31 | 2015-04-22 | 无锡清华信息科学与技术国家实验室物联网技术中心 | 一种基于动态条件随机场的键盘输入侦测方法 |
CN104898086A (zh) * | 2015-05-19 | 2015-09-09 | 南京航空航天大学 | 适用于微型麦克风阵列的声强估计声源定向方法 |
CN105068048A (zh) * | 2015-08-14 | 2015-11-18 | 南京信息工程大学 | 基于空间稀疏性的分布式麦克风阵列声源定位方法 |
CN105204001A (zh) * | 2015-10-12 | 2015-12-30 | Tcl集团股份有限公司 | 一种声源定位的方法及系统 |
CN105263093A (zh) * | 2015-10-12 | 2016-01-20 | 深圳东方酷音信息技术有限公司 | 一种全方位声音采集装置、编辑装置及系统 |
CN105263093B (zh) * | 2015-10-12 | 2018-06-26 | 深圳东方酷音信息技术有限公司 | 一种全方位声音采集装置、编辑装置及系统 |
CN108292508A (zh) * | 2015-12-02 | 2018-07-17 | 日本电信电话株式会社 | 空间相关矩阵估计装置、空间相关矩阵估计方法和空间相关矩阵估计程序 |
CN108292508B (zh) * | 2015-12-02 | 2021-11-23 | 日本电信电话株式会社 | 空间相关矩阵估计装置、空间相关矩阵估计方法和记录介质 |
CN107121669B (zh) * | 2016-02-25 | 2021-08-20 | 松下电器(美国)知识产权公司 | 声源探测装置、声源探测方法及非瞬时性记录介质 |
CN107121669A (zh) * | 2016-02-25 | 2017-09-01 | 松下电器(美国)知识产权公司 | 声源探测装置、声源探测方法及非瞬时性记录介质 |
CN105911523A (zh) * | 2016-04-13 | 2016-08-31 | 东北石油大学 | 基于半球型麦克风阵列的点声源定位系统智能检测前端 |
CN106251857A (zh) * | 2016-08-16 | 2016-12-21 | 青岛歌尔声学科技有限公司 | 声源方向判断装置、方法及麦克风指向性调节系统、方法 |
CN106251857B (zh) * | 2016-08-16 | 2019-08-20 | 青岛歌尔声学科技有限公司 | 声源方向判断装置、方法及麦克风指向性调节系统、方法 |
US10856094B2 (en) | 2017-01-22 | 2020-12-01 | Nanjing Twirling Technology Co., Ltd. | Method and device for sound source localization |
WO2018133056A1 (zh) * | 2017-01-22 | 2018-07-26 | 北京时代拓灵科技有限公司 | 一种声源定位的方法和装置 |
CN106872944A (zh) * | 2017-02-27 | 2017-06-20 | 海尔优家智能科技(北京)有限公司 | 一种基于麦克风阵列的声源定位方法及装置 |
CN108107407A (zh) * | 2017-12-18 | 2018-06-01 | 黑龙江大学 | 一种基于空间分布式麦克风的三维声源定位方法 |
CN108198568A (zh) * | 2017-12-26 | 2018-06-22 | 太原理工大学 | 一种多声源定位的方法及系统 |
CN108198568B (zh) * | 2017-12-26 | 2020-10-16 | 太原理工大学 | 一种多声源定位的方法及系统 |
CN108322855A (zh) * | 2018-02-11 | 2018-07-24 | 北京百度网讯科技有限公司 | 用于获取音频信息的方法及装置 |
CN110677782A (zh) * | 2018-07-03 | 2020-01-10 | 国际商业机器公司 | 信号自适应噪声过滤器 |
CN109270493A (zh) * | 2018-10-16 | 2019-01-25 | 苏州思必驰信息科技有限公司 | 声源定位方法和装置 |
CN110238844A (zh) * | 2019-04-30 | 2019-09-17 | 北京云迹科技有限公司 | 机器人转身处理方法及装置 |
CN110211600A (zh) * | 2019-05-17 | 2019-09-06 | 北京华控创为南京信息技术有限公司 | 用于定向监听通信的智能麦克风阵列模块 |
CN113064118A (zh) * | 2021-03-19 | 2021-07-02 | 维沃移动通信有限公司 | 声源定位方法和装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1832633A (zh) | 一种声源定位方法 | |
CN1866356A (zh) | 一种宽带波束形成方法和装置 | |
CN1835416A (zh) | 到达方向跟踪的方法和装置及其在基站的波束成形的应用 | |
CN1781335A (zh) | 具有二次指向图形的麦克风阵列 | |
CN1837846A (zh) | 用于处理声音信号的装置和方法 | |
CN111044973B (zh) | 一种用于麦克风方阵的mvdr目标声源定向拾音方法 | |
CN1643571A (zh) | 用于与通信系统一起使用的麦克风和声音活动检测(vad)配置 | |
KR101340215B1 (ko) | 멀티채널 신호의 반향 제거를 위한 시스템, 방법, 장치 및 컴퓨터 판독가능 매체 | |
CN1193644C (zh) | 用频谱减少来降低双送话器信号噪声的系统和方法 | |
CN1739221A (zh) | 改进偏振信号源定位的智能天线系统 | |
CN1831554A (zh) | 声音信号处理设备和声音信号处理方法 | |
CN1905006A (zh) | 噪声抑制系统与方法及程序 | |
CN1830009A (zh) | 声音检测和定位系统 | |
CN1735922A (zh) | 处理音频数据的方法和实行这个方法的声音获取设备 | |
CN1297822C (zh) | 一种基于td-scdma无线定位来波方向的估计方法 | |
CN1169788A (zh) | 谱削减噪声抑制方法 | |
CN1452425A (zh) | 利用指向性波束的通道检索电路、无线接收装置及无线发射装置 | |
CN1838235A (zh) | 将声场分成非降低和降低区域以再现声音的设备和方法 | |
CN1711799A (zh) | 阵列装置以及便携式终端 | |
CN1333994A (zh) | 双路立体声信号处理技术 | |
CN1967658A (zh) | 小尺度麦克风阵列语音增强系统和方法 | |
CN1898943A (zh) | 用于处理输入信号的设备和方法 | |
CN1115039C (zh) | 免提电话机 | |
CN1874368A (zh) | 一种无线电话机及多层描述无线通信传输系统 | |
CN1282424A (zh) | 叠加地震痕迹的方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Open date: 20060913 |