CN101512374A - 声源位置检测装置 - Google Patents

声源位置检测装置 Download PDF

Info

Publication number
CN101512374A
CN101512374A CNA2007800321570A CN200780032157A CN101512374A CN 101512374 A CN101512374 A CN 101512374A CN A2007800321570 A CNA2007800321570 A CN A2007800321570A CN 200780032157 A CN200780032157 A CN 200780032157A CN 101512374 A CN101512374 A CN 101512374A
Authority
CN
China
Prior art keywords
sound
microphones
frequency signal
sound source
source position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800321570A
Other languages
English (en)
Other versions
CN101512374B (zh
Inventor
芳泽伸一
中藤良久
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101512374A publication Critical patent/CN101512374A/zh
Application granted granted Critical
Publication of CN101512374B publication Critical patent/CN101512374B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S3/00Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
    • G01S3/80Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
    • G01S3/802Systems for determining direction or deviation from predetermined direction
    • G01S3/808Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems
    • G01S3/8083Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems determining direction of source
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166Microphone arrays; Beamforming
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/40Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
    • H04R2201/403Linear arrays of transducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)

Abstract

本发明提供一种可以检测抽取声的声源位置的声源位置检测装置,其具有:至少两个麦克风;对含有分别输入到两个麦克风的噪声的混合声进行频率分析,输出频率信号的分析部(103);以及抽取部(105),其生成多个包含在混合声中的抽取声的声源候补位置,按照声源候补位置对对应于两个麦克风的频率信号的时间轴进行调整以使从该声源候补位置到两个麦克风的混合声的时间差为零,求出表示时间轴调整后的对应于两个麦克风的频率信号中两个麦克风间的频率信号的差异程度的差分距离在阈值以下的频率信号,根据所求出的频率信号中对应于两个麦克风的频率信号彼此的一致程度,从声源候补位置中抽取抽取声的声源位置。

Description

声源位置检测装置
技术领域
本发明涉及消除规定的噪声的影响而检测上述噪声以外的声的声源方向或声源位置的声源位置检测装置、声源位置检测方法以及程序。特别涉及消除自身车辆的发动机声的影响而检测自身车辆周围存在的其他车辆的声源方向或声源位置的车载用的声源位置检测装置等。
背景技术
作为检测声源位置的第一现有技术,提案有将输入麦克风的多个音响信号彼此延迟而叠加,求得平方误差、利用平方误差的值为最小时的延迟量来特定上述声源信号的声源方向(例如,参照专利文献1)。
作为检测从含有噪声的混合声中抽取的对象的抽取声的声源位置的第二现有技术,提案有检测自身车辆的发动机转速,通过去除发动机转速的基波成分以及高次谐波成分,减轻自身车辆的发动机声的影响(例如,参照专利文献2)。
图1是用于说明通过第二现有技术去除自身车辆的发动机声的方法的图。
在第二现有技术中,首先,利用检测自身车辆的发动机转速的传感器决定发动机声的基波成分fkHz。然后,利用基波成分fkHz求得发动机声的高次谐波成分2fkHz、3fkHz、……。在图1(a)中,表示了通过音响麦克风采集的声的波形的频率信号。横轴表示频率纵轴表示信号电平。在此,从图1(a)表示的频率信号中去除刚才求得的基波成分fkHz以及高次谐波成分2fkHz、3fkHz、……的频带的信号(参照图1(b))。其结果,如图1(c)所示,得到去除了发动机声的基波成分fkHz和高次谐波成分2fkHz、3fkHz、……的频带的信号的频率信号。利用该去除后的频率信号求得自身车辆周边的车辆的声源位置。
专利文献1:日本特开平6-83371号公报(权利要求2)
专利文献2:日本特开平5-85288号公报(权利要求2、图4)
但是,在第一现有技术中,由于没有区别作为从含有噪声的混合声中抽取的对象的抽取声的单元,很难利用混合声检测抽取声的声源位置。
另外,在第二现有技术中,只是单纯地去除了从发动机的转速求得的发动机声的基波成分以及高次谐波成分的频带的信号。因此,不能完全去除自身车辆的发动机声的影响。其具体例在以下说明。
图2是通过声谱图表示车载用麦克风输入的自身车辆的发动机声(空转声)的图。该声谱图中纵轴表示频率横轴表示时间。另外,在该声谱图中,颜色越浅的点表示的声压级(信号电平)越大,颜色越浓的点表示的声压级越小。
通过图2所示的声谱图,了解到并不是仅发动机声的基波成分以及高次谐波成分单纯地出现,在其他的频带也会有信号成分复杂地出现。作为其原因之一,认为在发动机声从发动机室传递到麦克风时,由于发动机罩的影响使波形产生畸变。因此,只是单纯地去除发动机声的基波成分以及高次谐波成分不能完全地去除自身车辆的发动机声的影响。另外,为了容易把握声谱图,在图3中对图2所示的声谱图的浓淡值进行了二值化。
发明内容
本发明是鉴于上述问题点而作出的,其目的在于,提供一种声源位置检测装置等,其可以去除规定的噪声的影响而检测上述噪声以外的声的声源方向或声源位置。
特别地,其目的在于,提供一种车载用的声源位置检测装置等,其可以去除自身车辆的发动机声的影响而检测存在于自身车辆周边的其他车辆的声源方向或声源位置。
为了达成上述目的,本发明的声源位置检测装置,从含有噪声的混合声中检测出作为抽取对象的抽取声的声源方向或声源位置,其特征在于:具有分析单元和抽取单元,所述分析单元对从离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;所述抽取单元,对于所述混合声中含有的抽取声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从声源方向或声源位置的候补中抽取所述抽取声的声源方向或声源位置,设定所述阈值,使得在所述抽取声输入到所述多个麦克风的情况下,对该抽取声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,并且,设定所述阈值,使得在作为去除对象的规定的噪声输入到该多个麦克风的情况下,对该规定的噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
由此,通过阈值处理比较差分距离的大小,可以区别作为去除对象的噪声与作为抽取对象的抽取声,基于麦克风输入的混合声的频率信号选择地去除对应于上述噪声的频率信号的部分,由此,可以去除上述噪声的影响而检测上述抽取声的声源方向或声源位置。
图4A表示了噪声(自身车辆的发动机声)在各个麦克风中的声谱图的一例。图4B表示了噪声在各个麦克风中的频率信号(功率谱)的一例。另外,图5A表示了抽取声(自身车辆周边存在的摩托车声)的各个麦克风中的声谱图。图5B以及图5C分别表示了抽取声在各个麦克风中的频率信号(功率谱)的一例。各麦克风安装在自身车辆的前方保险杠的左侧和右侧。
图4A和图5A表示声谱图,纵轴表示频率,横轴表示时间。在该声谱图中,颜色越浅的点声压级(信号电平)越大,颜色越深的点声压级越小。图4B、图5B、图5C表示功率谱,纵轴表示功率谱,横轴表示频率。图中的两条实线表示各个麦克风的功率谱。
图4B表示了图4A的时刻A中的功率谱,可以了解到存在有噪声(自身车辆的发动机声)的频率即频率A1和频率A2中的功率谱在各个麦克风的值非常不同。另外,图5B表示了图5A的时刻B(摩托车位置在距离自身车辆40m的地点)中的功率谱,了解到存在有抽取声(自身车辆的周边存在的摩托车声)的频率即频率B1和频率B2中的功率谱在各个麦克风的值大致相同。另外,图5C表示了图5A的时刻C(摩托车位置在距离自身车辆10m的地点)中的功率谱,了解到存在有抽取声(存在于自身车辆周边的摩托车声)的频率即频率C1和频率C2中的功率谱的在各个麦克风中的值大致相同。由此可以了解到,通过阈值处理而对差分距离进行比较可以区别噪声和抽取声。在该例中,噪声是自身车辆的发动机声,自身车辆上搭载的各个麦克风上,由于发动机罩的影响或传播距离的不同等而输入了不同频率信号的噪声。由此,差分距离变大。另外,抽取声是存在于离开各个麦克风的位置的摩托车声,从摩托车位置到各个麦克风的距离大致相等,因此,距离衰减造成的声压级的差小,进而在空气中传播导致的传输畸变小,在各个麦克风中输入了类似的频率信号的摩托车声。由此差分距离变小。
另外,从图5B和图5C的虚线包围的背景噪声部分的声谱图来看,了解到各个麦克风中的值非常不同。由此可以知道背景噪声的部分也可以作为噪声被去除。
优选为,对于所述噪声的声源位置与所述各麦克风的距离,利用距离大的除以距离小的而求出比率,对于所述抽取声的声源位置与所述各麦克风的距离,利用距离大的除以距离小的而求出比率,对上述两比率进行比较,将所述各麦克风配置在比较结果大的位置上。
由此,可以使噪声到达各个麦克风时的频率信号(功率谱)的差异程度比抽取声到达各个麦克风时的频率信号(功率谱)的差异程度(在为远方的声源的情况下认为近似于零)大。这一事实是基于声压级相对于距离(或距离的平方)反比例衰减这一技术知识的。在通过以不同距离配置在噪声附近的麦克风(噪声和各个麦克风的距离比率比1大)检测远方的抽取声的情况下,远方抽取声和各个麦克风的距离的比率近似为1,适用于该条件。
优选为,在所述噪声传播到各麦克风的介质的一部分上,利用具有在麦克风间不同的传输特性的物质。
由此,可以使噪声到达各个麦克风时的频率信号(功率谱或相位谱)的差异程度变大,因此容易进行阈值的设定。例如,在噪声和各个麦克风之间夹着声压级的衰减率不同的物质的情况下,可以使噪声到达各个麦克风时的频率信号(功率谱)的差异程度增变大。例如,可以通过将密度不同的金属和塑料夹在噪声源和各个麦克风之间而实现。在噪声源和各个麦克风之间夹着相位特性不同的物质的情况下,可将噪声到达各个麦克风时的频率信号(相位谱)的差异程度变大。
优选为,所述差分距离为各麦克风间的所述频率信号的功率谱的差异程度。
由此,在以不同的距离配置在噪声附近的麦克风检测远方的抽取声的情况下,基于声压级相对于距离(或距离的平方)成反比例衰减的技术知识可以直接判断声压级的差异程度。另外,即使在噪声和各麦克风之间夹着声压级的衰减率不同的物质的情况下,也可以直接判断声压级的差异程度。
优选为,所述差分距离按照具有规定的时间宽度的时间区间求出。
由此,可以去除麦克风间的频率信号有时只短时间一致的部分。图6中,表示了两个麦克风的800Hz中的频率信号(复频谱)。虚线表示麦克风A中的频率信号,实线表示麦克风B中的频率信号。在此,频率信号是复频谱,因此实部和虚部在不同的图中表示。在该例中,表示了声源方向的候补为+30度的情况下的结果。图6的虚线包围的部分602是各时刻的复空间的差分距离小的部分的频率信号。通过图6,可以了解到在按照时刻求取差分距离的情况下,可以去除麦克风间的频率信号有时只是短时间一致的部分。但是,在按照时间区间求取差分距离的情况下,可以去除有时只是短时间一致的部分。
优选为,所述差分距离为通过所述多个麦克风的所述频率信号的功率谱的平均值进行正规化后的所述频率信号的差异程度。
由此,由于差分距离不依存于声压级,阈值的设定容易。例如,相对于声压级高的抽取声和声压级低的抽取声,也可以容易地进行阈值的设定。
另外,为了达成上述目的,本发明的车载用的声源位置检测装置,从含有自身车辆产生的噪声的混合声中检测出存在于自身车辆周边的车辆声的声源方向或声源位置,其特征在于:具有分析单元和抽取单元,所述分析单元对从在自身车辆上离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;所述抽取单元,对于所述混合声中含有的存在于自身车辆周边的车辆声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从所述多个声源方向或声源位置的候补中抽取所述车辆声的声源方向或声源位置,设定所述阈值,使得在所述车辆声输入到所述多个麦克风的情况下,对该车辆声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,并且,设定所述阈值,使得在自身车辆产生的噪声输入到所述多个麦克风的情况下,对该噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
由此,通过阈值处理对差分距离进行比较,可以对自身车辆产生的噪声与自身车辆周边存在的车辆声进行区别,基于麦克风输入的混合声的频率信号可以选择地去除对应于上述噪声的频率信号的部分,由此可以去除自身车辆产生的噪声(自身车辆的发动机声等)的影响而检测自身车辆的周边存在的车辆声的声源方向或声源位置。例如,作为发动机罩的材质,在发动机位置到各个麦克风之间利用具有不同密度或不同形状的物质,由此可以增大各麦克风间的发动机声的频率信号的差分距离。另外,在将各个麦克风埋入到保险杠的情况下,即使在麦克风与保险杠的接合部分(麦克风露出自身车辆以外的部分之外的全体部分)利用具有麦克风间不同传输特性的物质,也可以增大各麦克风间的发动机声的频率信号的差分距离。从而可以容易地设定阈值。
另外,本发明除了作为具有这样的特征单元的声源位置检测装置可以实现外,也可以作为将声源位置检测装置含有的特征单元作为步骤的声源位置检测方法而实现,或是作为将声源位置检测方法中含有的特征步骤在计算机上执行的程序而实现。这样的程序当然可以通过CD-ROM(Compact Disc-Read Only Memory)等存储介质或因特网等通信网络进行流通。
发明的效果:
如上所述,通过对差分距离的大小进行比较可以对作为去除对象的噪声和作为抽取对象的抽取声进行区别。因此,可以基于麦克风输入的混合声的频率信号选择地去除对应于上述噪声的频率信号的部分,可以去除上述噪声的影响而检测上述抽取声的声源方向或声源位置。特别地,可以去除利用车载用麦克风时成为问题的自身车辆产生的发动机声的影响,因此效果非常大。
附图说明
图1是用于说明现有技术中的发动机声的去除方法的图。
图2是表示自身车辆的发动机声的声谱图的一例的图。
图3是将图2所示的声谱图的浓淡值进行二值化的图。
图4A是表示噪声的声谱图的一例的图。
图4B是表示噪声的频率信号(功率谱)的一例的图。
图5A是表示抽取声的声谱图的一例的图。
图5B是表示抽取声的频率信号(功率谱)的一例的图。
图5C是表示抽取声的频率信号(功率谱)的一例的图。
图6是表示混合声的频率信号的一例的图。
图7是表示本发明的实施方式的声源位置检测装置的整体构成的框图。
图8是说明麦克风的配置方法的图。
图9是表示在自身车辆的麦克风之间利用了具有不同的传输特性的物质的构成例的图。
图10是表示具有散热器的自身车辆的构成的图。
图11A是表示自身车辆的发动机声的声谱图的图。
图11B是表示自身车辆的发动机声的声谱图的图。
图12A是将图11A表示的声谱图的浓淡值进行二值化的图。
图12B是将图11B表示的声谱图的浓淡值进行二值化的图。
图13是用于说明声源方向的图。
图14是表示声源位置检测装置的动作顺序的流程图。
图15A是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图15B是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图16A是对图15A所示的图的浓淡值进行二值化的图。
图16B是对图15B所示的图的浓淡值进行二值化的图。
图17A是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图17B是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图18A是对图17A所示的图的浓淡值进行二值化的图。
图18B是对图17B所示的图的浓淡值进行二值化的图。
图19A是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图19B是表示对自身车辆的发动机声的声源方向进行分析的结果的一例的图。
图20A是对图19A所示的图的浓淡值进行二值化的图。
图20B是对图19B所示的图的浓淡值进行二值化的图。
图21是表示混合声的频率信号的一例的图。
图22是表示混合声的频率信号的一例的图。
图23A是表示利用混合声抽取声源方向的结果的一例的图。
图23B是表示利用混合声抽取声源方向的结果的一例的图。
图24A是对图23A所示的图的浓淡值进行二值化的图。
图24B是对图23B所示的图的浓淡值进行二值化的图。
图25A是表示利用混合声抽取声源方向的结果的一例的图。
图25B是表示利用混合声抽取声源方向的结果的一例的图。
图26A是对图25A所示的图的浓淡值进行二值化的图。
图26B是对图25B所示的图的浓淡值进行二值化的图。
图27A是表示利用混合声抽取声源方向的结果的一例的图。
图27B是表示利用混合声抽取声源方向的结果的一例的图。
图28A是对图27A所示的图的浓淡值进行二值化的图。
图28B是对图27B所示的图的浓淡值进行二值化的图。
图29是表示摩托车的发动机声的声源位置的图。
符号说明
100:声源位置检测装置
101a:自身车辆的发动机声
101b:摩托车的发动机声
102a~102n:麦克风
103:分析部
104:阈值
105:抽取部
具体实施方式
下面参照附图对本发明的实施方式进行说明。
图7是表示本发明的实施方式中的声源位检测装置的构成的框图。在此,以在车载用途中使用本发明的声源位置检测装置的情况为例进行说明。
声源位置检测装置100是检测自身车辆的周边存在的其他车辆的声源方向或声源位置的装置,具有两个以上的麦克风102a~102n、分析部103以及抽取部105,在此所述的麦克风为将通过介质(气体、固体、液体)传播来的音响信号转变为电信号的装置。
麦克风102a~102n被配置为,在使到达各麦克风102a~102n的时间差为零地调整了时间轴的、对自身车辆的发动机声101a(作为去除的对象的声)进行频率分析的频率信号中,调整了时间轴的频率信号的麦克风之间的差分距离比阈值104(阈值)大。关于求“差分距离”的方法在下面详细说明。
图8是表示在自身车辆的前方部的保险杠上配置4个麦克风的一例。在该例子中,麦克风A与B的间隔以及麦克风C与D的间隔为17.5cm,麦克风B与C的间隔约为1M
距离每增加两倍声压级衰减6dB。另外,自身车辆的发动机与麦克风的距离近。由此,声源与各麦克风的距离的比变大,输入到4个麦克风A、B、C、D的自身车辆的发动机声的声压级不同。
相对于此,与麦克风之间的距离远的摩托车的发动机声,声源与各麦克风的距离的比大致为1,在4个麦克风的声压级大致相等。
另外,考虑到自身车辆的发动机声由于发动机罩的影响等,在输入到4个麦克风的波形中产生畸变。另外,考虑到有意地在4个麦克风与自身车辆的连接部分上使用声的传输特性不同的物质也会使输入到4个麦克风的波形产生畸变。
在从发动机位置到各麦克风的发动机声的传递路径中,存在通过发动机罩的路径和没有通过发动机罩的路径的情况下或通过发动机罩的距离不同的情况下,各麦克风接收的频率信号不同。这是因为,通过发动机罩的路径的密度高、没有通过发动机罩的路径(例如,在空气中传播)的密度低等的传播路径上存在的物质密度的不同,发动机声的衰减率也不同。
所以,即使从发动机位置到各麦克风的发动机声的传递路线的距离为大致相等的距离,由于在从发动机位置到各麦克风之间利用了具有不同密度的物质或具有不同形状的物质的构成,可以在各麦克风接收的波形中产生畸变,可以增大差分距离。
另外,在将各麦克风埋入到保险杠等的情况下,构成为在麦克风与保险杠的接合部分(麦克风露出在自身车辆之外的部分以外的全部)利用具有在麦克风之间有不同传输特性的物质。在此,“不同的传输特性”是指声阻抗(介质的密度×介质中传播的声波的速度)不同。声波在具有不同的声阻抗的物质间传播时,在其边界进行反射。该反射的程度随声阻抗的差而变化,进行传播的物质间的声阻抗的差越大则反射越大。所以,在发动机位置与各麦克风之间,利用具有不同传输特性的物质,可以在各麦克风接收的波形中产生畸变,增大差分距离。
在图9中,表示了在自身车辆的麦克风之间利用了具有不同传输特性的物质的构成例。自身车辆具有发动机、接收该发动机发出的发动机声的麦克风A以及麦克风B。另外,在发动机和麦克风A之间具有金属,在发动机和麦克风B之间具有塑料。从发动机到麦克风A或麦克风B传播发动机声(波线)。发动机声由于金属中传播时和在塑料中传播时其反射程度不同,因此可以在麦克风A和麦克风B接收的波形间产生畸变,可以增大差分距离。在此为金属和塑料,但是若为具有不同传输特性的物质,就会具有可以增大差分距离的效果。在此,记载了一方为金属,另一方为塑料的例子,但是,只在一方具有金属或塑料等或者是一方具有金属和塑料另一方具有塑料也会达到相同的效果。
在图10中,与图9相同,具有发动机、麦克风A、麦克风B。在图10中,在发动机和麦克风A之间具有散热器,在发动机与麦克风B之间有意地没有设置任何物品。从发动机传播到麦克风A的发动机声由于散热器的存在,其一部分反射。这是由于散热器内的液体与发动机声传播来的空气中之间的声阻抗的差大,发动机声被散热器反射。通过该反射,可以在麦克风A和麦克风B接收的波形间产生畸变,可以增大差分距离。所以,在一个麦克风和发动机之间具有与空气的声阻抗的差大的物质,另一个麦克风和发动机之间不夹有空气以外的任何物质或只夹有与空气的声阻抗大致相同的物质,可以增大差分距离。
在图11A以及图11B中,表示了实验结果的一例,该实验结果为配置成使自身车辆的发动机声101a(空转声)中麦克风A与麦克风D之间的差分距离大于阈值104的情况下的实验结果。图11A表示了输入到麦克风A的自身车辆的发动机声101a的声谱图,图11B表示了输入到麦克风D的自身车辆的发动机声101a的声谱图。各声谱图的横轴表示时间轴,纵轴表示频率轴。另外,声谱图的各点,颜色越浅声压级(信号电平)越大,颜色越浓声压级越小。
对图11A表示的声谱图与图11B表示的声谱图进行比较,两个声谱图在整体上存在不同。特别是在虚线包围的区域中,肉眼就可以看到在两个声谱图之间自身车辆的发动机声101a的频率信号畸变而不同。另外,为了容易把握声谱图,在图12A以及图12B中分别表示对图11A以及图11B所示的声谱图的浓淡值进行了二值化。
分析部103对麦克风102a~102n输入的含有自身车辆的发动机声101a(作为去除对象的声)和摩托车的发动机声101b(作为抽取对象的声)的混合声进行频率分析,制作对应于各麦克风的频率信号。
抽取部105对分析部103分析的频率信号的时间轴进行调整,使从摩托车的发动机声101b(作为抽取对象的声)的声源方向的候补到达各麦克风102a~102n的时间差为零。时间轴的调整,换而言之,为对与各麦克风102a~102n对应的频率信号的时间轴进行调整,以使在假定来自摩托车的摩托车声到达各麦克风102a~102n时的到达时间差消除。
另外,抽取部105将调整了时间轴的频率信号的麦克风之间的差分距离比阈值104大的部分的频率信号去除,利用剩下的部分的频率信号抽取声源方向。
在此,声源方向通过-90度到90度的方向(角度)表示。图13是用于说明声源方向的图。声源方向在自身车辆的直向前进方向以及后退方向为0度时,相对于直向前进方向正交的轴中,右手方向为90度,左手方向为-90度。
另外,设定阈值104,以使对应于摩托车的发动机声101b(作为抽取对象的声)的差分距离在阈值104以下。若用其他方法,则配置麦克风102a~102n,以使对应于摩托车的发动机声101b(作为抽取对象的声)的差分距离在设定的阈值104以下。在该例中,对麦克风的配置、该配置中的对应于自身车辆的发动机声101a的差分距离、对应于摩托车的发动机声101b的差分距离进行比较,以实验地求出可以检测到摩托车的发动机声101b的声源方向的阈值104的值。
这样,利用声源位置检测装置100,可以去除自身车辆的发动机声的影响,抽取接近的摩托车等的声源方向而告知驾驶者。因此,声源位置检测装置100作为安全驾驶支援的一个功能是非常有用的。
下面,对如下构成的声源位置检测装置100的动作进行说明。
图14是表示声源位置检测装置100的动作顺序的流程图。
在该例中,如图8所示,在自身车辆的前方部的保险杠上配置有4个麦克风A、B、C、D。另外,相对于如图8所示的麦克风的配置,根据对应于自身车辆的发动机声101a的差分距离和对应于摩托车的发动机声101b的差分距离实验求得阈值104(步骤S901)。在该例中,阈值104为30%。
在图15A以及图15B中,表示了利用图8所示的麦克风A和麦克风D,不利用阈值处理而利用现有的方法分析自身车辆的发动机声101a的声源方向的结果的一例。
图15A以及图15B表示的图表示,横轴为时间,纵轴为声源方向(-90度~90度)。另外,在该图中,颜色越浓的点表示的声源方向上声源存在的概率越高,颜色越浅的点表示的声源方向上声源存在的概率越低。
在图15A中,表示了利用对应于自身车辆的发动机声101a的差分距离大于阈值104的部分和小于阈值104的部分这样的两部分的频率信号(没有利用阈值处理)、通过麦克风A和麦克风D之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。通过图15A,可以了解在-90度~90度的广阔的方向上出现自身车辆的发动机声101a。
在图15B中,表示了利用将对应于自身车辆的发动机声101a的差分距离大于阈值104的部分去除后剩下的部分的频率信号(利用本发明的阈值处理),通过麦克风A和麦克风D之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。将图15A和图15B进行比较,可以了解到通过去除对应于自身车辆的发动机声101a的差分距离大于阈值104的部分,可以大幅地去除自身车辆的发动机声101a的影响。另外,为了容易对图进行把握,在图16A以及图16B中分别表示了对图15A以及图15B所示的图的浓淡值进行二值化。
在图17A以及图17B中,表示了利用图8所示的麦克风A和麦克风B分析自身车辆的发动机声101a的声源方向的结果的一例。图17A以及图17B的图的意思与图15A以及图15B说明的一样。
图17A中,表示了利用对应于自身车辆的发动机声101a的差分距离大于阈值104的部分和小于阈值104的部分这样的两部分的频率信号(没有利用阈值处理)、通过麦克风A和麦克风B之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。在图17B中,表示了利用将对应于自身车辆的发动机声101a的差分距离大于阈值104的部分去除后剩下的部分的频率信号(利用本发明的阈值处理),通过麦克风A和麦克风B之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。将图17A和图17B进行比较,可以了解到通过去除对应于自身车辆的发动机声101a的差分距离大于阈值104的部分,可以大幅地去除自身车辆的发动机声101a的影响。另外,为了容易对图进行把握,在图18A以及图18B中分别表示了对图17A以及图17B所示的图的浓淡值进行二值化。
在图19A以及图19B中,表示了利用图8所示的麦克风C和麦克风D分析自身车辆的发动机声101a的声源方向的结果的一例。图19A以及图19B所示的图的意思与图15A以及图15B说明的一样。
图19A中,表示了利用对应于自身车辆的发动机声101a的差分距离大于阈值104的部分和小于阈值104的部分这样的两部分的频率信号(没有利用阈值处理)、通过麦克风C和麦克风D之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。在图19B中,表示了利用将对应于自身车辆的发动机声101a的差分距离大于阈值104的部分去除后剩下的部分的频率信号(利用本发明的阈值处理),通过麦克风C和麦克风D之间的自身车辆的发动机声101a的到达时间差分析声源方向的结果。将图19A和图19B进行比较,可以了解到通过去除对应于自身车辆的发动机声101a的差分距离大于阈值104的部分,可以大幅地去除自身车辆的发动机声101a的影响。另外,为了容易对图进行把握,在图20A以及图20B中分别表示了对图19A以及图19B所示的图的浓淡值进行二值化。
由此可知,图8所示的麦克风的配置为使对应于自身车辆的发动机声101a的差分距离大于阈值104的配置。但是,如从图15B、图17B、图19B了解到的那样,在该例中,由于未能完全去除自身车辆的发动机声101a的影响,因此,可以去除的自身车辆的发动机声101a的部分成为作为去除的对象的规定的噪声。在此,设定阈值以使摩托车的发动机声的声源方向不会被去除。
另外,将一个麦克风配置在发动机附近的位置,将一个麦克风配置在离发动机远的位置,以使得自身车辆的发动机和各麦克风的距离的比率(距离大的除以距离小的时的比率)大,从而可以增大相对于自身车辆的发动机声的差分距离而容易地进行阈值的设定。另外,作为发动机罩的材质使用在发动机位置和各麦克风之间利用具有不同密度的物质或不同形状的物质的构成,由此,可以增大相对于自身车辆的发动机声的差分距离,容易进行阈值的设定。
然后,麦克风102a~102n输入含有自身车辆的发动机声(作为去除的对象的声)和摩托车的发动机声101b(作为抽取对象的声)的混合声(步骤S902)。
然后,分析部103对麦克风102a~102n输入的混合声进行频率分析,制作对应于各麦克风的频率信号(步骤S903)。在此,取样频率44.1kHz的混合声的离散傅里叶变换的窗长为128点,以20Hz的间隔在0~2000Hz的频带中相对于各麦克风制作频率信号。
然后,抽取部105对分析部103分析的频率信号的时间轴进行调整,以使从摩托车的发动机声101b(作为抽取对象的声)的声源方向的候补到达各麦克风102a~102n的时间差为零。另外,抽取部105,利用调整了时间轴的频率信号的、去除麦克风间的差分距离大于阈值104的部分的频率信号后剩下的部分的频率信号,抽取声源方向(步骤S904)。
在图21中表示,相对于麦克风A和麦克风B输入的混合声,对800Hz的频带中的频率信号以使从声源方向的候补(+50度)到达各麦克风的时间差成为零的方式调整了时间轴后的频率信号。
虚线表示麦克风A中的频率信号,实线表示麦克风B中的频率信号。横轴表示时间轴,纵轴表示振幅。在此,由于频率信号为复信号,实部和虚部在不同的图中表示。
在此对求差分距离的方法的一例进行说明。在该例中,在图21所示的时间区间(具有规定的时间宽度的时间区间)中,将各时刻的频率信号的差分值大于规定的值的时刻的部分300占时间区间整体的比例作为“差分距离”。这里的规定的值通过实验求得。另外,这里的差分值是对振幅的大小进行了正规化的值。例如,关于振幅值的畸变程度,认为振幅值越大则畸变的振幅值的绝对量越大。例如,声压级衰减为一半的情况下,在衰减前的振幅值为10的情况下,衰减后的衰减值为5,差分为5。另外,在衰减前的振幅值为2的情况下,衰减后的振幅值为1,差分为1。由此,振幅值越大,畸变的振幅值的绝对量越大。由此,利用对频率信号的大小进行正规化的差分值,可以去除振幅的大小带来的影响。在该例子中,通过下式求得“差分值”。由此,由于差分距离不依存于声压级,例如,即使相对于声压级大的抽取声和声压级小的抽取声都可以容易地设定阈值。
[式1]
( x A - x B ) 2 + ( y A - y B ) 2 ( x A + x B 2 ) 2 + ( y A + y B 2 ) 2
差分值由于通过麦克风A和麦克风B的频率信号的功率谱的平均值进行了正规化,所以可以不依存于分析的频率的声压级大小而设定阈值。在此,xA和yA分别表示麦克风A中的频率信号的某时刻的实部和虚部的值,xB和yB分别表示麦克风B中的频率信号对应的时刻的实部和虚部的值。另外,在该例中的规定值为0.5,阈值104为30%。差分值由于通过功率谱的大小进行了正规化,因此无需考虑相对于频带的功率谱的大小。因此,规定值在全部的频带中为相同值。图21的虚线包围的部分300是差分值比规定值大的部分的频率信号。通过图21可以了解到,在假定+50度的方向上存在声源位置而调频率信号的时间轴的情况下,虚线包围的部分300占时间区间整体的比例大。在该差分距离即比例大于阈值104即30%的情况下,去除该时间区间整体的频率信号而求得声源方向。此时,解释为相对于800Hz的频带在+50度的方向上不存在作为抽取对象的声源。
在图22中表示,相对于麦克风A和麦克风B输入的混合声,对800Hz的频带中的频率信号以使从其他声源方向的候补(—30度)到达各麦克风的时间差成为零的方式调整了时间轴后的频率信号。
虚线表示麦克风A中的频率信号,实线表示麦克风B中的频率信号。横轴表示时间轴,纵轴表示振幅。在此,由于频率信号为复信号,实部和虚部在不同的图中表示。
在此,在与图21所示的时间区间相同的时间区间(具有规定的时间宽度的时间区间)中,使用同样的定义来求出差分距离。虚线包围的部分302是差分值比规定值大的部分的频率信号。通过图22可以了解到,在假定—30度的方向上存在声源位置而调频率信号的时间轴的情况下,虚线包围的部分302占时间区间整体的比例小。在该差分距离即比例小于阈值104即30%的情况下,不去除该时间区间整体的频率信号而求得声源方向。在该例中,在求得声源方向时,在该时间区间的各时刻中的差分值为规定值以下的部分的麦克风间的相关值(一致程度)具有没有被去除而剩下的全部的声源方向(角度)中的相互相关值中的最大值的情况下,判定为在相对于800Hz的频带—30度的方向上存在作为抽取对象的声源。例如,相对于800Hz的频带,若一30度、—40度、—50度的候补中剩余有声源方向的候补,则将各候补中的相互相关值中对应于最大的值的声源方向的候补特定为抽取声的声源方向。另外也可以将对应于相关值超过第二规定阈值的声源方向的候补特定为抽取声的声源方向。该情况下,可以对应于求出多个声源方向。另外,也可以将相对于声源方向的轴而对应于相关值取极大值的声源方向的候补特定为抽取声的声源方向。另外,作为其他的一致程度也可以将差分距离为阈值以下的全部方向特定为声源方向。另外,也可以将差分距离为最小或极小值的方向作为声源方向。
在图23A、图23B、图25A、图25B、图27A以及图27B中,表示了相对于0~2000Hz中含有的100个频带对利用现有方法和本发明的方法求得的声源方向绘制了直方图。在图23A以及图23B中表示了利用麦克风A和麦克风D的结果,在图25A以及图25B中表示了利用麦克风A和麦克风B的结果,在图27A以及图27B中表示了利用麦克风C和麦克风D的结果。
横轴表示时间轴,纵轴表示声源方向。颜色的浓度表示频数的大小,颜色越浓的部分表示的频数越大的部分。图23A、图25A、图27A表示了利用比阈值大的部分和比阈值小的部分(没有利用阈值处理)抽取声源方向的现有技术的结果。另外,图23B、图25B、图27B表示了利用去除了比阈值大的部分的频率信号(利用阈值处理)抽取声源方向的本发明的结果。另外,为了易于把握图,在图24A、图24B、图26A、图26B、图28A以及图28B中分别表示了对图23A、图23B、图25A、图25B、图27A以及图27B中所示的图的浓淡值进行了二值化。
在图29中,模式地表示了对应于时刻的摩托车的发动机声101b的声源位置。在时刻3秒时,从麦克风A和麦克风B看的声源方向大致为0度的方向(从麦克风C和麦克风D看的声源方向大致为+30度方向)、在时刻5秒时,从麦克风A和麦克风B看的声源方向大致为+90度方向,之后朝向0度方向。
在图15A、图17A、图19A中,表示了自身车辆的发动机声101a(空转声)的声源方向,从图23B、图25B、图27B的结果可以了解到本发明的发明点,即通过进行阈值处理去除自身车辆的发动机声101a的声源方向,可以抽取摩托车的发动机声101b的声源方向。另外,从图19A和图27B可以了解到,即使自身车辆的发动机声101a的声源方向与摩托车的发动机声101b的声源方向重叠也可以去除自身车辆的发动机声101a的影响。
如上所述,可以了解到通过对差分距离的大小进行比较而进行阈值处理可以区别作为去除对象的噪声和作为抽取对象的抽取声。因此,通过基于麦克风输入的混合声的频率信号,选择地去除对应于噪声的频率信号的部分,可以去除噪声的影响而正确地检测出抽取声的声源位置。特别地,由于可以去除在利用车载用的麦克风时成为问题的自身车辆发生的发动机声的影响,因此具有极大的效果。
在该例中,差分距离为在具有规定的时间宽度的时间区间中各时刻的频率信号的振幅值的差分值比规定的值大的时刻的部分所占时间区间整体的比例,但是作为其他的差分距离,也可以定义为在具有规定的时间宽度的时间区间中,对在时间上连续的振幅形状进行矢量表现,将矢量间的差分值作差分距离。在该情况下,也通过具有规定时间宽度的时间区间求得差分距离。由此,可以将麦克风间的频率信号的振幅值由于频率信号的振幅变动而有时只短时间一致的部分去除。另外,在该例中,利用了复频谱空间中的差分距离,但是也可以利用功率频谱或相位频谱的差分距离。
如上所述,通过在每个具有时间宽度的时间区间计算差分距离,可以去除麦克风间的频率信号的振幅值由于频率信号的振幅变动而有时只短时间一致的部分。另外,可以去除由于多个声的混合造成的振幅值畸变的影响。
另外,由于摩托车移动,在离自身车辆远的地方声压级变小,在距离自身车辆近的地方声压级变大,因此利用各麦克风间的频率信号的功率频谱的平均值正规化了的差分距离是有效的。
另外,根据麦克风A和麦克风B的抽取结果以及麦克风C和麦克风D的抽取结果,通过三角测量可以求得声源位置。另外,对从声源位置的候补到达各麦克风的到达时间差进行调整,对一致程度进行比较,可以直接求得声源位置。
如上述说明,由于通过对差分距离的大小进行比较而进行阈值处理,可以对作为去除对象的噪声和作为抽取对象的抽取声进行区别,因此基于麦克风输入的混合声的频率信号选择地将对应于噪声的频率信号的部分去除,由此可以去除噪声的影响而检测抽取声的声源方向。特别地,由于可以去除利用车载用麦克风时成为问题的自身车辆产生的发动机声的影响,因此效果很大。
另外,从抽取部105的结果(例如,自身车辆的发动机声101a的声源方向的去除程度、摩托车的发动机声101b的声源方向的抽取结果)进行判断,可以进一步地对阈值104的值进行调整。
另外,考虑到背景噪声或风噪声在各麦克风的频率信号不同,也可以将这些声或噪声去除。另外,在各麦克风之间输入了不同的声的情况下,由于各麦克风的频率信号不同,也可以作为该情况下的声或噪声去除而防止输出错误的声源方向或声源位置。
产业上的可利用性
本发明的声源位置检测装置在(例如去除自身车辆的发动机声的影响)通过声来检测接近车辆的安全驾驶支援装置、(例如,去除照相机的马达声的影响)自动将照相机朝向声响的声源位置的安全照相机、(去除电视会议的对方一侧的发声的影响)可以使指向性朝向发声者的方向进行收音的电视会议装置等广泛领域的制品中的应用价值都是很高的。

Claims (9)

1、一种声源位置检测装置,从含有噪声的混合声中检测出作为抽取对象的抽取声的声源方向或声源位置,其特征在于:
具有分析单元和抽取单元,
所述分析单元对从离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;
所述抽取单元,对于所述混合声中含有的抽取声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从声源方向或声源位置的候补中抽取所述抽取声的声源方向或声源位置,
设定所述阈值,使得在所述抽取声输入到所述多个麦克风的情况下,对该抽取声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,
并且,设定所述阈值,使得在作为去除对象的规定的噪声输入到该多个麦克风的情况下,对该规定的噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
2、如权利要求1所述的声源位置检测装置,其特征在于:
对于所述噪声的声源位置与所述各麦克风的距离,利用距离大的除以距离小的而求出比率,对于所述抽取声的声源位置与所述各麦克风的距离,利用距离大的除以距离小的而求出比率,对上述两比率进行比较,将所述各麦克风配置在比较结果大的位置上。
3、如权利要求1所述的声源位置检测装置,其特征在于:
在所述噪声传播到各麦克风的介质的一部分上,利用具有在麦克风间不同的传输特性的物质。
4、如权利要求1所述的声源位置检测装置,其特征在于:
所述差分距离为各麦克风间的所述频率信号的功率谱的差异程度。
5、如权利要求1所述的声源位置检测装置,其特征在于:
所述差分距离按照具有规定的时间宽度的时间区间求出。
6、如权利要求1所述的声源位置检测装置,其特征在于:
所述差分距离为通过所述多个麦克风的所述频率信号的功率谱的平均值进行正规化后的所述频率信号的差异程度。
7、一种车载用的声源位置检测装置,从含有自身车辆产生的噪声的混合声中检测出存在于自身车辆周边的车辆声的声源方向或声源位置,其特征在于:
具有分析单元和抽取单元,
所述分析单元对从在自身车辆上离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;
所述抽取单元,对于所述混合声中含有的存在于自身车辆周边的车辆声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从所述多个声源方向或声源位置的候补中抽取所述车辆声的声源方向或声源位置,
设定所述阈值,使得在所述车辆声输入到所述多个麦克风的情况下,对该车辆声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,
并且,设定所述阈值,使得在自身车辆产生的噪声输入到所述多个麦克风的情况下,对该噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
8、一种声源位置检测方法,从含有噪声的混合声中检测出作为抽取对象的抽取声的声源方向或声源位置,其特征在于:
具有分析步骤和抽取步骤,
所述分析步骤对从离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;
所述抽取步骤,对于所述混合声中含有的抽取声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从声源方向或声源位置的候补中抽取所述抽取声的声源方向或声源位置,
设定所述阈值,使得在所述抽取声输入到所述多个麦克风的情况下,对该抽取声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,
并且,设定所述阈值,使得在作为去除对象的规定的噪声输入到该多个麦克风的情况下,对该规定的噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
9、一种程序,从含有噪声的混合声中检测出作为抽取对象的抽取声的声源方向或声源位置,其特征在于:
使计算机执行分析步骤和抽取步骤,
所述分析步骤对从离开配置的多个麦克风分别输入的含有噪声的混合声进行频率分析,输出频率信号;
所述抽取步骤,对于所述混合声中含有的抽取声的多个声源方向或声源位置的候补的各个,(a)调整对应于所述多个麦克风的频率信号的时间轴,以使从该声源方向或声源位置的候补到达所述多个麦克风的所述混合声的时间差消除,(b)求出表示时间轴调整后的对应于所述多个麦克风的频率信号中所述多个麦克风间的所述频率信号的差异程度的差分距离在阈值以下的频率信号,(c)根据所求出的频率信号中对应于所述多个麦克风的频率信号彼此的一致程度,从声源方向或声源位置的候补中抽取所述抽取声的声源方向或声源位置,
设定所述阈值,使得在所述抽取声输入到所述多个麦克风的情况下,对该抽取声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离在所述阈值以下,
并且,设定所述阈值,使得在作为去除对象的规定的噪声输入到该多个麦克风的情况下,对该规定的噪声进行频率分析后的频率信号的所述多个麦克风间的所述差分距离比所述阈值大。
CN2007800321570A 2006-11-09 2007-11-06 声源位置检测装置 Expired - Fee Related CN101512374B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006304507 2006-11-09
JP304507/2006 2006-11-09
PCT/JP2007/071524 WO2008056649A1 (fr) 2006-11-09 2007-11-06 Détecteur de position de source sonore

Publications (2)

Publication Number Publication Date
CN101512374A true CN101512374A (zh) 2009-08-19
CN101512374B CN101512374B (zh) 2012-04-11

Family

ID=39364464

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800321570A Expired - Fee Related CN101512374B (zh) 2006-11-09 2007-11-06 声源位置检测装置

Country Status (6)

Country Link
US (1) US8184827B2 (zh)
EP (1) EP2090895B1 (zh)
JP (1) JP4177452B2 (zh)
CN (1) CN101512374B (zh)
DE (1) DE602007011807D1 (zh)
WO (1) WO2008056649A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957442A (zh) * 2010-06-04 2011-01-26 河北工业大学 一种声源定位装置
CN102438191A (zh) * 2010-09-08 2012-05-02 Akg声学有限公司 用于声学信号跟踪的方法
CN103119461A (zh) * 2011-09-20 2013-05-22 丰田自动车株式会社 声源检测装置
CN103930791A (zh) * 2011-09-20 2014-07-16 丰田自动车株式会社 声源检测系统和声源检测方法
CN103988090A (zh) * 2011-11-24 2014-08-13 丰田自动车株式会社 声源检测装置
CN104380378A (zh) * 2012-05-31 2015-02-25 丰田自动车株式会社 声源检测装置、噪声模型生成装置、噪声抑制装置、声源方位推定装置、接近车辆检测装置以及噪声抑制方法
CN105487047A (zh) * 2015-11-23 2016-04-13 浙江大学 一种高参数减压阀噪声源位置及噪声指向性的确定方法
CN108353225A (zh) * 2015-10-30 2018-07-31 三菱电机株式会社 免提控制装置

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006037014A2 (en) 2004-09-27 2006-04-06 Nielsen Media Research, Inc. Methods and apparatus for using location information to manage spillover in an audience monitoring system
US8155346B2 (en) * 2007-10-01 2012-04-10 Panasonic Corpration Audio source direction detecting device
CN101980890B (zh) * 2008-09-26 2013-04-24 松下电器产业株式会社 死角车辆检测装置以及检测方法
EP2312579A1 (en) * 2009-10-15 2011-04-20 Honda Research Institute Europe GmbH Speech from noise separation with reference information
WO2011060145A1 (en) 2009-11-12 2011-05-19 Paul Reed Smith Guitars Limited Partnership A precision measurement of waveforms using deconvolution and windowing
US8620976B2 (en) 2009-11-12 2013-12-31 Paul Reed Smith Guitars Limited Partnership Precision measurement of waveforms
WO2011060130A1 (en) 2009-11-12 2011-05-19 Paul Reed Smith Guitars Limited Partnership Domain identification and separation for precision measurement of waveforms
KR101081752B1 (ko) * 2009-11-30 2011-11-09 한국과학기술연구원 인공귀 및 이를 이용한 음원 방향 검지 방법
US8124864B2 (en) * 2009-12-04 2012-02-28 Roland Corporation User interface apparatus for displaying vocal or instrumental unit signals in an input musical tone signal
JP5607416B2 (ja) * 2010-04-30 2014-10-15 トヨタ自動車株式会社 車外音検出装置
JP2011232292A (ja) * 2010-04-30 2011-11-17 Toyota Motor Corp 車外音検出装置
US8922645B1 (en) 2010-12-22 2014-12-30 Google Inc. Environmental reproduction system for representing an environment using one or more environmental sensors
CN103069297A (zh) * 2011-01-18 2013-04-24 松下电器产业株式会社 车辆方向确定装置、车辆方向确定方法及其程序
US9245539B2 (en) 2011-02-01 2016-01-26 Nec Corporation Voiced sound interval detection device, voiced sound interval detection method and voiced sound interval detection program
WO2012105385A1 (ja) * 2011-02-01 2012-08-09 日本電気株式会社 有音区間分類装置、有音区間分類方法、及び有音区間分類プログラム
JP5516455B2 (ja) * 2011-02-23 2014-06-11 トヨタ自動車株式会社 接近車両検出装置及び接近車両検出方法
JP5310760B2 (ja) * 2011-03-04 2013-10-09 トヨタ自動車株式会社 接近車両検出装置
US9435873B2 (en) 2011-07-14 2016-09-06 Microsoft Technology Licensing, Llc Sound source localization using phase spectrum
CN102300140B (zh) * 2011-08-10 2013-12-18 歌尔声学股份有限公司 一种通信耳机的语音增强方法及降噪通信耳机
US8548494B2 (en) 2011-08-23 2013-10-01 Microsoft Corporation Localization of mobile computing devices in indoor environments
CN102539084A (zh) * 2012-01-03 2012-07-04 北京爱社时代科技发展有限公司 一种基于时差定位原理的气体泄漏点扫描仪
EP2810453B1 (en) * 2012-01-17 2018-03-14 Koninklijke Philips N.V. Audio source position estimation
WO2013145216A1 (ja) * 2012-03-29 2013-10-03 トヨタ自動車株式会社 運転支援装置
CN104335263B (zh) * 2012-05-25 2016-08-31 丰田自动车株式会社 接近车辆检测装置及驾驶辅助系统
US20150331095A1 (en) * 2012-12-26 2015-11-19 Toyota Jidosha Kabushiki Kaisha Sound detection device and sound detection method
CN104335600B (zh) * 2013-02-25 2017-08-08 展讯通信(上海)有限公司 多麦克风移动装置中检测及切换降噪模式的方法
US9021516B2 (en) 2013-03-01 2015-04-28 The Nielsen Company (Us), Llc Methods and systems for reducing spillover by measuring a crest factor
US9118960B2 (en) 2013-03-08 2015-08-25 The Nielsen Company (Us), Llc Methods and systems for reducing spillover by detecting signal distortion
US9191704B2 (en) 2013-03-14 2015-11-17 The Nielsen Company (Us), Llc Methods and systems for reducing crediting errors due to spillover using audio codes and/or signatures
US9197930B2 (en) * 2013-03-15 2015-11-24 The Nielsen Company (Us), Llc Methods and apparatus to detect spillover in an audience monitoring system
DE112013007229T5 (de) * 2013-07-11 2016-04-28 Toyota Jidosha Kabushiki Kaisha Objekterfassungsvorrichtung und Objekterfassungsverfahren
JP6156012B2 (ja) * 2013-09-20 2017-07-05 富士通株式会社 音声処理装置及び音声処理用コンピュータプログラム
CN103731768B (zh) * 2013-12-25 2018-11-16 深圳Tcl新技术有限公司 一种声音拾取方法及装置
JP2016031243A (ja) * 2014-07-25 2016-03-07 シャープ株式会社 位相差算出装置、音源方向検知装置、および位相差算出方法
US9924224B2 (en) 2015-04-03 2018-03-20 The Nielsen Company (Us), Llc Methods and apparatus to determine a state of a media presentation device
TWI660160B (zh) * 2015-04-27 2019-05-21 維呈顧問股份有限公司 移動噪音源的檢測系統與方法
US10726863B2 (en) * 2015-04-27 2020-07-28 Otocon Inc. System and method for locating mobile noise source
JP6603919B2 (ja) * 2015-06-18 2019-11-13 本田技研工業株式会社 音声認識装置、および音声認識方法
US9848222B2 (en) 2015-07-15 2017-12-19 The Nielsen Company (Us), Llc Methods and apparatus to detect spillover
KR20170017401A (ko) * 2015-08-06 2017-02-15 엘지이노텍 주식회사 이미지 처리 장치
US9996080B2 (en) 2016-02-26 2018-06-12 Ford Global Technologies, Llc Collision avoidance using auditory data
KR101748276B1 (ko) 2016-03-10 2017-06-16 현대자동차주식회사 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량
KR101759143B1 (ko) 2016-03-10 2017-07-18 현대자동차주식회사 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량
KR101807616B1 (ko) * 2016-04-21 2017-12-11 현대자동차주식회사 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량
KR101898663B1 (ko) * 2017-01-02 2018-09-13 경희대학교 산학협력단 소리를 이용하는 휴대 기기의 확장 입력 장치 및 확장 입력 방법
KR101989127B1 (ko) * 2017-05-31 2019-09-30 네이버랩스 주식회사 번역 장치, 번역 방법 및 번역 컴퓨터 프로그램
JP7013789B2 (ja) * 2017-10-23 2022-02-01 富士通株式会社 音声処理用コンピュータプログラム、音声処理装置及び音声処理方法
JP7245034B2 (ja) * 2018-11-27 2023-03-23 キヤノン株式会社 信号処理装置、信号処理方法およびプログラム
US10811032B2 (en) * 2018-12-19 2020-10-20 Cirrus Logic, Inc. Data aided method for robust direction of arrival (DOA) estimation in the presence of spatially-coherent noise interferers
JP7291451B2 (ja) * 2019-08-06 2023-06-15 直之 村上 コンピユーターの目(pceye)
KR20190103086A (ko) * 2019-08-15 2019-09-04 엘지전자 주식회사 지능형 진단 디바이스와 이를 구비하는 냉장고
WO2021049285A1 (ja) * 2019-09-13 2021-03-18 シチズン時計株式会社 検出装置および検出システム
DE102020107777A1 (de) 2020-03-20 2021-09-23 Bayerische Motoren Werke Aktiengesellschaft Ortung von akustischen signalen
KR20210136569A (ko) * 2020-05-08 2021-11-17 삼성전자주식회사 경보 장치, 상기 장치를 포함하는 경보 시스템, 및 경보 방법
CN112367495B (zh) * 2021-01-13 2021-04-13 北京电信易通信息技术股份有限公司 一种基于多摄像头的图像处理系统及方法

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2496031A (en) * 1947-12-30 1950-01-31 Rca Corp Dual microphone sound detector system
US3794766A (en) * 1973-02-08 1974-02-26 Bell Telephone Labor Inc Delay equalizing circuit for an audio system using multiple microphones
US4283767A (en) 1979-05-03 1981-08-11 Raytheon Company Multiple correlator reference processor
JP2776092B2 (ja) 1991-09-27 1998-07-16 日産自動車株式会社 車両警報装置
JP3146233B2 (ja) 1991-10-03 2001-03-12 ヤマハ発動機株式会社 スノーモビルのキャリア部構造
JPH0592767U (ja) * 1992-05-18 1993-12-17 株式会社豊田中央研究所 接近車両認識装置
JPH0683371A (ja) 1992-08-31 1994-03-25 Sanyo Electric Co Ltd 集音補正装置
US5657393A (en) * 1993-07-30 1997-08-12 Crow; Robert P. Beamed linear array microphone system
JP2658852B2 (ja) * 1993-12-27 1997-09-30 日本電気株式会社 異常音検査装置
US5581620A (en) * 1994-04-21 1996-12-03 Brown University Research Foundation Methods and apparatus for adaptive beamforming
US5778082A (en) * 1996-06-14 1998-07-07 Picturetel Corporation Method and apparatus for localization of an acoustic source
US6987856B1 (en) * 1996-06-19 2006-01-17 Board Of Trustees Of The University Of Illinois Binaural signal processing techniques
US6130949A (en) * 1996-09-18 2000-10-10 Nippon Telegraph And Telephone Corporation Method and apparatus for separation of source, program recorded medium therefor, method and apparatus for detection of sound source zone, and program recorded medium therefor
JP3355598B2 (ja) 1996-09-18 2002-12-09 日本電信電話株式会社 音源分離方法、装置及び記録媒体
JP3797751B2 (ja) * 1996-11-27 2006-07-19 富士通株式会社 マイクロホンシステム
JP2000098015A (ja) * 1998-09-25 2000-04-07 Honda Motor Co Ltd 接近車両検出装置およびその方法
JP2000099853A (ja) 1998-09-25 2000-04-07 Honda Motor Co Ltd 接近車両検出装置およびその方法
JP2000105274A (ja) 1998-09-30 2000-04-11 Honda Motor Co Ltd 接近車両検出装置およびその方法
JP2000111633A (ja) * 1998-10-01 2000-04-21 Honda Motor Co Ltd 接近車両検出装置
JP2000121719A (ja) 1998-10-20 2000-04-28 Oki Systec Tokai:Kk 音源位置標定装置
DE69939272D1 (de) * 1998-11-16 2008-09-18 Univ Illinois Binaural-signal-verarbeitungstechniken
WO2001060029A1 (en) * 2000-02-08 2001-08-16 Cetacean Networks, Inc. Speakerphone accessory for a telephone instrument
US20010028718A1 (en) * 2000-02-17 2001-10-11 Audia Technology, Inc. Null adaptation in multi-microphone directional system
US7236838B2 (en) * 2000-08-29 2007-06-26 Matsushita Electric Industrial Co., Ltd. Signal processing apparatus, signal processing method, program and recording medium
DE10136981A1 (de) * 2001-07-30 2003-02-27 Daimler Chrysler Ag Verfahren und Vorrichtung zur Ermittlung eines stationären und/oder bewegten Objektes
US20040001597A1 (en) * 2002-07-01 2004-01-01 Tandberg Asa Audio communication system and method with improved acoustic characteristics
NO318096B1 (no) * 2003-05-08 2005-01-31 Tandberg Telecom As Arrangement og fremgangsmate for lokalisering av lydkilde
TWI230023B (en) * 2003-11-20 2005-03-21 Acer Inc Sound-receiving method of microphone array associating positioning technology and system thereof
KR101086398B1 (ko) * 2003-12-24 2011-11-25 삼성전자주식회사 다수의 마이크로폰을 이용한 지향성 제어 가능 스피커시스템 및 그 방법
CN1727911A (zh) * 2004-07-26 2006-02-01 松下电器产业株式会社 声控定位系统及方法
JP2006060720A (ja) * 2004-08-24 2006-03-02 Hitachi Ltd 集音システム
JP4247195B2 (ja) * 2005-03-23 2009-04-02 株式会社東芝 音響信号処理装置、音響信号処理方法、音響信号処理プログラム、及び音響信号処理プログラムを記録した記録媒体
US8233353B2 (en) * 2007-01-26 2012-07-31 Microsoft Corporation Multi-sensor sound source localization

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957442A (zh) * 2010-06-04 2011-01-26 河北工业大学 一种声源定位装置
CN102438191A (zh) * 2010-09-08 2012-05-02 Akg声学有限公司 用于声学信号跟踪的方法
CN102438191B (zh) * 2010-09-08 2015-09-02 Akg声学有限公司 用于声学信号跟踪的方法
CN103119461B (zh) * 2011-09-20 2015-08-26 丰田自动车株式会社 声源检测装置
CN103930791A (zh) * 2011-09-20 2014-07-16 丰田自动车株式会社 声源检测系统和声源检测方法
CN103119461A (zh) * 2011-09-20 2013-05-22 丰田自动车株式会社 声源检测装置
CN103930791B (zh) * 2011-09-20 2016-03-02 丰田自动车株式会社 声源检测系统和声源检测方法
US9299334B2 (en) 2011-09-20 2016-03-29 Toyota Jidosha Kabushiki Kaisha Sound source detecting system and sound source detecting method
CN103988090A (zh) * 2011-11-24 2014-08-13 丰田自动车株式会社 声源检测装置
US9277339B2 (en) 2011-11-24 2016-03-01 Toyota Jidosha Kabushiki Kaisha Sound source detection apparatus
CN104380378A (zh) * 2012-05-31 2015-02-25 丰田自动车株式会社 声源检测装置、噪声模型生成装置、噪声抑制装置、声源方位推定装置、接近车辆检测装置以及噪声抑制方法
CN108353225A (zh) * 2015-10-30 2018-07-31 三菱电机株式会社 免提控制装置
CN108353225B (zh) * 2015-10-30 2020-09-22 三菱电机株式会社 免提控制装置
CN105487047A (zh) * 2015-11-23 2016-04-13 浙江大学 一种高参数减压阀噪声源位置及噪声指向性的确定方法

Also Published As

Publication number Publication date
US20090285409A1 (en) 2009-11-19
JP4177452B2 (ja) 2008-11-05
CN101512374B (zh) 2012-04-11
WO2008056649A1 (fr) 2008-05-15
EP2090895A1 (en) 2009-08-19
US8184827B2 (en) 2012-05-22
EP2090895B1 (en) 2011-01-05
JPWO2008056649A1 (ja) 2010-02-25
DE602007011807D1 (de) 2011-02-17
EP2090895A4 (en) 2009-12-09

Similar Documents

Publication Publication Date Title
CN101512374B (zh) 声源位置检测装置
US20200031337A1 (en) Use of sound with assisted or autonomous driving
JP2018200173A (ja) ゴースト除去方法及びレーダ装置
US9632178B2 (en) Apparatus and method for removing noise of ultrasonic system
CN106461772A (zh) 雷达装置以及雷达装置中的信号处理方法
CN106537175A (zh) 用于运载工具的周围环境对象的声学检查的设备和方法
JP4919681B2 (ja) 車載用レーダ装置
CN110767215A (zh) 一种训练语音识别模型、识别语音的方法及装置
CN104608768B (zh) 一种前方目标车辆进入弯道和进行换道的辨别装置及方法
KR101964600B1 (ko) 차량의 고속주행 적응형 초음파 센서 정보 처리 방법
KR101558438B1 (ko) 부분 푸리에 변환을 이용한 특징벡터 추출 및 능동표적 식별 방법 및 장치
Jang et al. The development of the vehicle sound source localization system
CN104316929A (zh) 一种功率谱识别方法及装置
CN106482912B (zh) 一种真空设备泄漏检测及定位方法
Okopal et al. Dispersion-invariant features for classification
CN110020520B (zh) 一种基于声音信号的人脸识别辅助认证方法和系统
CN106501860A (zh) 一种应用于海洋物探的全局解算定位方法
JP2001296359A (ja) バイスタティック処理装置
Ou et al. Underwater ordnance classification using time-frequency signatures of backscattering signals
KR20170082080A (ko) 수중 고정표적과 클러터 식별을 위한 가변 데이터 맵 및 가변 통계적 특징정보를 적용하는 방법 및 장치
Lei et al. Detection of sound field aberrations caused by forward scattering from underwater intruders using unsupervised machine learning
Yin et al. Simultaneous multiple bands time delay and frequency component estimation based on expectation–maximization
JPH05333138A (ja) ソナー信号処理装置
JP2001154688A (ja) 車両用音声入力装置
SE521402C2 (sv) Metod och anordning för detektering av föremål under radarhorisonten

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120411

Termination date: 20211106

CF01 Termination of patent right due to non-payment of annual fee