JP2010181448A - Sound adjusting device and sound adjusting method - Google Patents

Sound adjusting device and sound adjusting method Download PDF

Info

Publication number
JP2010181448A
JP2010181448A JP2009022458A JP2009022458A JP2010181448A JP 2010181448 A JP2010181448 A JP 2010181448A JP 2009022458 A JP2009022458 A JP 2009022458A JP 2009022458 A JP2009022458 A JP 2009022458A JP 2010181448 A JP2010181448 A JP 2010181448A
Authority
JP
Japan
Prior art keywords
sound
sound source
partial
source signal
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2009022458A
Other languages
Japanese (ja)
Inventor
Isao Wakabayashi
功 若林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP2009022458A priority Critical patent/JP2010181448A/en
Publication of JP2010181448A publication Critical patent/JP2010181448A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Circuit For Audible Band Transducer (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a sound adjusting device capable of accurately specifying acoustic characteristics of space by using a sound signal of colored notes, and to provide a sound adjusting method. <P>SOLUTION: The sound adjusting device for adjusting sound in a prescribed space comprises: a dividing means for dividing a sound source signal of colored notes which is reproduced by a loudspeaker, and a collected signal which is collected by a microphone, into a plurality of partial frequency bands; a determination means for determining whether or not the sound source signal is effective to estimate a transfer function on the basis of a signal level of a sound source signal in the partial frequency band; an estimation means for estimating the partial sound transfer function in the partial frequency band of the sound source signal and the collected signal on the basis of the sound source signal and the collected signal, which are determined to be effective by the determination means; and a synthesizing means for synthesizing the partial sound transfer functions estimated by the estimation means for a plurality of partial frequency bands. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、音響調整装置及び音響調整方法に関するものである。   The present invention relates to an acoustic adjustment device and an acoustic adjustment method.

従来より、所定の空間内においてスピーカとスピーカから発せられる音楽等を聴取する聴取者との間における音響伝達関数を推定(同定)し、その音響伝達関数に基づいてフィルタ係数を設定した適応フィルタを通して音声信号をスピーカから出力させることによって、聴取者が聴取する音声(例えば音楽等)の臨場感を向上させる技術が知られている。   Conventionally, an acoustic transfer function is estimated (identified) between a speaker and a listener who listens to music or the like emitted from the speaker in a predetermined space, and through an adaptive filter in which a filter coefficient is set based on the acoustic transfer function. A technique for improving the sense of reality of sound (for example, music) listened to by a listener by outputting an audio signal from a speaker is known.

音響伝達関数の同定を行う方法としては、テスト用に生成した所定の信号(以下、「ホワイトノイズ」という。)を用いる方法が一般的である。この方法で音響伝達関数の同定を行う場合、聴取者が音楽を聴取する位置にマイクを設置しておき、このマイクによってスピーカから発せられたホワイトノイズを集音する。   As a method for identifying an acoustic transfer function, a method using a predetermined signal generated for testing (hereinafter referred to as “white noise”) is generally used. When the acoustic transfer function is identified by this method, a microphone is installed at a position where the listener listens to music, and white noise emitted from the speaker is collected by the microphone.

図1は、従来の音響伝達関数の同定方法の説明図である。図1(a)に示すように、ホワイトノイズは低周波から高周波にわたり一定の信号レベルをもつ信号である。そのため、このホワイトノイズをマイクにより集音し、その結果得られる信号の周波数特性や信号レベルを解析することによって、図1(b)に示すように、スピーカ−マイク間の空間における低周波から高周波までの求めたい音響特性を満遍なく算出することができ、この測定結果に基づいて音響伝達関数の同定を行うことができる。   FIG. 1 is an explanatory view of a conventional acoustic transfer function identification method. As shown in FIG. 1A, white noise is a signal having a constant signal level from low frequency to high frequency. Therefore, this white noise is collected by a microphone, and the frequency characteristics and signal level of the signal obtained as a result are analyzed, so that a low frequency to a high frequency in the space between the speaker and the microphone is obtained as shown in FIG. The acoustic characteristics desired to be obtained can be calculated uniformly, and the acoustic transfer function can be identified based on the measurement results.

このように、ホワイトノイズは、低周波から高周波までの広い周波数帯域を含んでいるため、音響伝達関数の同定に用いるには有効な信号であるが、あくまでノイズであるため、聴取者にとっては耳障りな音である。そのため、ホワイトノイズによる音響周波数の同定は、予め、聴取者が居ないときや音楽等を再生する前の時点で行われていた。   As described above, white noise includes a wide frequency band from low frequency to high frequency, so it is an effective signal for use in identifying an acoustic transfer function. It is a sound. Therefore, the identification of the acoustic frequency due to white noise has been performed in advance when there is no listener or before music or the like is reproduced.

このように、予め音響伝達関数の同定を行った場合、その後、音楽等の再生中に空間の温度や湿度、スピーカと聴取者の位置関係が変化した場合には、スピーカ−聴取者間の空間における音響特性が変化するおそれがある。そのため、音響伝達関数の同定は随時行うことが望ましいが、上記のようにホワイトノイズは聴取者にとって耳障りな音なため、音楽等の再生中にホワイトノイズによる音響伝達関数の同定を随時行うと、聴取者の快適性を阻害してしまうという問題が生じるおそれがある。   As described above, when the acoustic transfer function is identified in advance, the space between the speaker and the listener is changed when the temperature or humidity of the space or the positional relationship between the speaker and the listener changes during reproduction of music or the like. There is a possibility that the acoustic characteristics in the case change. Therefore, it is desirable to identify the acoustic transfer function at any time, but since white noise is annoying sound for the listener as described above, identifying the acoustic transfer function by white noise during playback of music, etc. There may be a problem that the comfort of the listener is disturbed.

かかる問題を解消する技術として、ホワイトノイズではなく、音楽の再生中にスピーカへ出力される音楽信号を用いて、空間の音響特性を同定する技術が考案されている(たとえば、特許文献1参照。)。   As a technique for solving such a problem, a technique for identifying the acoustic characteristics of a space using a music signal output to a speaker during music playback instead of white noise has been devised (see, for example, Patent Document 1). ).

特開2007−243242号公報JP 2007-243242 A

しかしながら、上記従来技術のように音楽信号を用いた場合、空間の音響特性を精度よく測定することができない場合があり、空間の音響特性を正しく同定できないおそれがあった。   However, when a music signal is used as in the above prior art, the acoustic characteristics of the space may not be accurately measured, and the acoustic characteristics of the space may not be correctly identified.

音楽信号は、メロディーの進行に伴って音階や音の強弱が変化する音声(以下、「有色音」という。)を信号化したものであるため、ホワイトノイズのように低周波から高周波までの周波数帯域において一定の信号レベルをもたない場合が多い。   Since the music signal is a voice signal that changes the scale and the intensity of the sound as the melody progresses (hereinafter referred to as “colored sound”), the frequency ranges from low to high frequencies like white noise. In many cases, there is no constant signal level in the band.

たとえば、図1(c)に示すように、ある時刻(t)における有色音の音声信号が、比較的周波数の低い帯域(以下、「低周波帯域」という。)における信号レベルが十分に高く、比較的周波数の高い帯域(以下、「高周波帯域」という。)における信号レベルが非常に低かった場合を考える。   For example, as shown in FIG. 1C, a colored sound signal at a certain time (t) has a sufficiently high signal level in a relatively low frequency band (hereinafter referred to as “low frequency band”), Consider a case where the signal level in a relatively high frequency band (hereinafter referred to as “high frequency band”) is very low.

この場合、ある空間における実際の音響特性が、仮に図1(b)に示した音響特性であったとすると、計算により求めた音響特性は、図1(d)に示すように、低周波帯域については、音楽信号の信号レベルが十分に高いため、良好に音響特性を再現することができるが、高周波領域については、音楽信号の信号レベルが非常に低いため、音響特性を良好に再現することができず、実際の音響特性(図1(d)中の一点鎖線)よりも信号レベルが低い音響特性が再現されてしまう。   In this case, if the actual acoustic characteristic in a certain space is the acoustic characteristic shown in FIG. 1B, the acoustic characteristic obtained by calculation is about the low frequency band as shown in FIG. Can reproduce sound characteristics satisfactorily because the signal level of the music signal is high enough, but in the high frequency range, the signal level of music signals is very low, so the sound characteristics can be reproduced well. This is not possible, and an acoustic characteristic having a signal level lower than that of the actual acoustic characteristic (the one-dot chain line in FIG. 1D) is reproduced.

一方、図1(e)に示すように、ある時刻(t+1)における有色音の音声信号が、低周波帯域における信号レベルが非常に低く、高周波帯域における信号レベルが十分に高かった場合は、図1(f)に示すように、高周波帯域については、音楽信号の信号レベルが十分に高いため、良好に音響特性を再現することができるが、低周波領域については、音楽信号の信号レベルが非常に低いため、音響特性を良好に再現することができず、実際の音響特性(図1(f)中の一点鎖線)よりも信号レベルが低い音響特性が再現されてしまう。   On the other hand, as shown in FIG. 1 (e), when a colored sound signal at a certain time (t + 1) has a very low signal level in the low frequency band and a sufficiently high signal level in the high frequency band. As shown in FIG. 1 (f), since the signal level of the music signal is sufficiently high in the high frequency band, the acoustic characteristics can be reproduced satisfactorily, but the signal level of the music signal is in the low frequency region. Is very low, the acoustic characteristics cannot be reproduced satisfactorily, and the acoustic characteristics having a signal level lower than the actual acoustic characteristics (the one-dot chain line in FIG. 1F) are reproduced.

このように、ある空間の音響伝達関数等の音響特性を有色音の音声信号を用いて同定した場合には、音声信号の周波数特性が時間的に変化するので、空間の音響特性を精度よく測定することができない場合があり、空間の音響特性を正しく同定できないおそれがあった。   In this way, when the acoustic characteristics such as the acoustic transfer function of a certain space are identified using a colored sound signal, the frequency characteristics of the sound signal change over time, so the sound characteristics of the space can be measured accurately. In some cases, the acoustic characteristics of the space cannot be correctly identified.

そこで、本発明は、有色音の音声信号を用いて、空間の音響特性を正しく同定することができる音響調整装置、および音響調整方法を提供することを目的とする。   Accordingly, an object of the present invention is to provide an acoustic adjustment device and an acoustic adjustment method that can correctly identify the acoustic characteristics of a space using a colored sound signal.

本発明では、スピーカと前記スピーカが再生する音声を集音するマイクとの間における音響伝達関数を推定することで所定の空間における音響を調整する音響調整装置であって、前記スピーカによって再生される有色音の音源信号を複数の部分周波数帯域へ分割するとともに、前記マイクによって集音された集音信号についても前記部分周波数帯域へ分割する分割手段と、前記部分周波数帯域における音源信号の信号レベルに基づいて当該音源信号が伝達関数の推定に有効であるか否かを判定する判定手段と、前記判定手段によって有効であると判定された前記音源信号および前記集音信号に基づいて、当該音源信号および集音信号の前記部分周波数帯域における前記音響伝達関数をあらわす部分音響伝達関数を推定する推定手段と、前記推定手段によって推定された前記部分音響伝達関数を複数の前記部分周波数帯域について合成する合成手段とを備えた音響調整装置を提供することとした。   The present invention is an acoustic adjustment device that adjusts sound in a predetermined space by estimating an acoustic transfer function between a speaker and a microphone that collects sound reproduced by the speaker, and is reproduced by the speaker. A sound source signal of colored sound is divided into a plurality of partial frequency bands, and a sound collecting signal collected by the microphone is also divided into the partial frequency bands, and a signal level of the sound source signal in the partial frequency band is determined. Based on the sound source signal determined based on the sound source signal and the sound collection signal determined to be effective by the determination unit, the determination unit determining whether the sound source signal is effective in estimating the transfer function based on the sound source signal And an estimation means for estimating a partial acoustic transfer function representing the acoustic transfer function in the partial frequency band of the collected sound signal; It was decided to provide an acoustic adjustment apparatus and a combining means for combining said partial acoustic transfer function estimated by means for a plurality of said partial frequency bands.

本発明によれば、有効と判定された音源信号と、その音源信号と同一の部分周波数帯域の集音信号とに基づいて、伝達関数の推定に有効と判定された音源信号の部分周波数帯域における部分音響伝達関数を推測し、各部分周波数帯域毎に推定した部分音響伝達関数同士を合成するため、有色音の音声信号を用いて、ある空間の音響伝達関数等の音響特性を同定した場合に、空間の音響特性を精度よく測定することができ、空間の音響特性を正しく同定することができる。   According to the present invention, based on a sound source signal determined to be valid and a sound collection signal in the same partial frequency band as the sound source signal, the sound source signal determined to be effective for estimating the transfer function in the partial frequency band In order to estimate the partial acoustic transfer function and synthesize the partial acoustic transfer functions estimated for each partial frequency band, when identifying acoustic characteristics such as acoustic transfer functions in a certain space using colored sound signals The acoustic characteristics of the space can be accurately measured, and the acoustic characteristics of the space can be correctly identified.

従来の音響伝達関数の同定方法の説明図である。It is explanatory drawing of the identification method of the conventional acoustic transfer function. 本実施形態に係る音響調整装置の適用例を示す説明図である。It is explanatory drawing which shows the example of application of the acoustic adjustment apparatus which concerns on this embodiment. 本実施形態に係る音響調整装置の構成を示す機能ブロック図である。It is a functional block diagram which shows the structure of the acoustic adjustment apparatus which concerns on this embodiment. 本実施形態に係る音響調整装置による音響伝達関数の同定方法の説明図である。It is explanatory drawing of the identification method of the acoustic transfer function by the acoustic adjustment apparatus which concerns on this embodiment. 記憶部に各部分音響伝達関数が記憶される手順を示す説明図である。It is explanatory drawing which shows the procedure in which each partial acoustic transfer function is memorize | stored in a memory | storage part. 本実施形態に係る音響調整装置の詳細な構成を示す説明図である。It is explanatory drawing which shows the detailed structure of the acoustic adjustment apparatus which concerns on this embodiment. DSPのCPUが音響調整プログラムを実行するときの処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a process when CPU of DSP runs an acoustic adjustment program.

以下、本発明に係る音響調整装置および音響調整方法の一実施形態について、添付図面を参照して具体的に説明する。図2は、本実施形態に係る音響調整装置の適用例を示す説明図である。図2に示すように、本実施形態に係る音響調整装置10は、CD(Compact Disc)やDVD(Digital Versatile Disc)といった可搬型記憶媒体に記憶された音楽や音声、ラジオ、テレビ、カーナビゲーションシステム等の音楽や音声を出力する再生装置200から入力される音声や音楽の信号(以下、「音源信号」という。)を、後述の適応フィルタ部62(図6参照)を通してスピーカ201へ出力させることによって、空間における音響を調整し、聴取者203が聴取する音楽等の臨場感を向上させる装置である。   Hereinafter, an embodiment of an acoustic adjustment device and an acoustic adjustment method according to the present invention will be specifically described with reference to the accompanying drawings. FIG. 2 is an explanatory diagram illustrating an application example of the acoustic adjustment device according to the present embodiment. As shown in FIG. 2, the acoustic adjustment device 10 according to the present embodiment includes music and voice stored in a portable storage medium such as a CD (Compact Disc) and a DVD (Digital Versatile Disc), a radio, a television, and a car navigation system. The audio or music signal (hereinafter referred to as “sound source signal”) input from the playback device 200 that outputs music or audio such as is output to the speaker 201 through the adaptive filter unit 62 (see FIG. 6) described later. Is a device that adjusts the sound in the space and improves the sense of reality of music or the like that the listener 203 listens to.

図2中の符号202は、聴取者203の近傍に設置され、スピーカ201から出力された音楽等の有色音を集音するマイクである。このマイク202は、集音した有色音を音声信号(以下、「集音信号」という。)に変換して音響調整装置10へ出力する。ここで、有色音とは、メロディー等の進行に伴って音階や音の強弱が変化する音のことである。   Reference numeral 202 in FIG. 2 is a microphone that is installed near the listener 203 and collects colored sounds such as music output from the speaker 201. The microphone 202 converts the collected colored sound into a sound signal (hereinafter referred to as “sound collection signal”) and outputs the sound signal to the sound adjustment device 10. Here, the colored sound is a sound whose scale and intensity change with the progress of a melody or the like.

この音響調整装置10では、再生装置200から入力される音源信号とマイク202から入力される集音信号とに基づいて、スピーカ201と聴取者203との間における空間の音響伝達関数を随時推定する。そして、この音響調整装置10は、推定した音響伝達関数に基づいて計算したフィルタ係数を調整した適応フィルタを通して音源信号をスピーカ201へ出力する。   In the acoustic adjustment device 10, the acoustic transfer function of the space between the speaker 201 and the listener 203 is estimated as needed based on the sound source signal input from the playback device 200 and the sound collection signal input from the microphone 202. . Then, the acoustic adjustment device 10 outputs a sound source signal to the speaker 201 through an adaptive filter in which a filter coefficient calculated based on the estimated acoustic transfer function is adjusted.

ここで、本実施形態の音響調整装置10の構成について、図3を参照して説明する。図3は、音響調整装置10の構成を示す機能ブロック図である。図3に示すように、分割部20と、判定部30と、推定部40と、記憶部50と、合成部60とを備えている。   Here, the structure of the acoustic adjustment apparatus 10 of this embodiment is demonstrated with reference to FIG. FIG. 3 is a functional block diagram showing the configuration of the acoustic adjustment device 10. As shown in FIG. 3, a dividing unit 20, a determining unit 30, an estimating unit 40, a storage unit 50, and a combining unit 60 are provided.

分割部20は、スピーカ201によって再生される有色音の音源信号を複数の部分周波数帯域へ分割するとともに、マイク202によって集音された集音信号についても、音源信号の部分周波数帯域と同じ部分周波数帯域に分割する分割手段として機能する処理部である。   The dividing unit 20 divides the colored sound source signal reproduced by the speaker 201 into a plurality of partial frequency bands, and the sound collection signal collected by the microphone 202 also has the same partial frequency as the partial frequency band of the sound source signal. It is a processing unit that functions as a dividing unit that divides the data into bands.

本実施形態において、分割部20は、再生装置200から入力される音源信号を可聴域(人に聞こえる周波数の範囲)における中間周波数を境として、中間周波数よりも高い周波数帯域(以下、「高周波帯域H」という。)と、中間周波数以下の周波数帯域(以下、「低周波帯域L」という。)という2つの部分周波数帯域に分割して、判定部30へ出力する。   In the present embodiment, the dividing unit 20 has a frequency band higher than the intermediate frequency (hereinafter referred to as “high frequency band”) with the intermediate frequency in the audible range (frequency range audible to humans) as the boundary for the sound source signal input from the playback device 200. H ”) and a frequency band equal to or lower than the intermediate frequency (hereinafter referred to as“ low frequency band L ”), and outputs the result to the determination unit 30.

また、分割部20は、マイク202から入力される集音信号を音源信号と同様に、周波数が中間周波数よりも高い高周波帯域Hと、周波数が中間周波数以下の低周波帯域Lという2つの部分周波数帯域に分割する。この集音信号を分割した各部分周波数帯域毎の集音信号は、それぞれ推定部40へ出力される。   Similarly to the sound source signal, the dividing unit 20 has two partial frequencies, a high frequency band H whose frequency is higher than the intermediate frequency and a low frequency band L whose frequency is equal to or lower than the intermediate frequency. Divide into bands. The sound collection signal for each partial frequency band obtained by dividing the sound collection signal is output to the estimation unit 40.

なお、本実施形態では、分割部20により音源信号と集音信号とをそれぞれ2つの部分周波数帯域に分割しているが、分割する部分周波数帯域数は、これに限定するものではなく、任意の部分周波数帯域に分割してもよい。ただし、音源信号及び集音信号を3つ以上の部分周波数領域に分割する場合であっても、音源信号及び集音信号は、それぞれ同じ周波数幅で分割する。   In the present embodiment, the sound source signal and the collected sound signal are each divided into two partial frequency bands by the dividing unit 20, but the number of partial frequency bands to be divided is not limited to this and is arbitrary. You may divide | segment into a partial frequency band. However, even when the sound source signal and the sound collection signal are divided into three or more partial frequency regions, the sound source signal and the sound collection signal are each divided by the same frequency width.

判定部30は、分割部20から入力された各部分周波数帯域における各音源信号の信号レベルに基づいて、当該音源信号が音響伝達関数の推定に有効であるか否かを判定する処理部である。この判定部30は、高周波帯域H及び低周波帯域Lのそれぞれの音源信号が所定の信号レベル以上であった場合に、その音源信号を音響伝達関数の推定に有効であると判定して推定部40へ出力する。   The determination unit 30 is a processing unit that determines whether the sound source signal is effective for estimating the acoustic transfer function based on the signal level of each sound source signal in each partial frequency band input from the dividing unit 20. . The determination unit 30 determines that the sound source signal is effective for estimating the acoustic transfer function when each of the sound source signals in the high frequency band H and the low frequency band L is equal to or higher than a predetermined signal level. Output to 40.

すなわち、この判定部30は、分割部20から入力される各部分周波数帯域毎の音源信号が音響伝達関数の推定に有効か無効かを判定する基準として、所定の閾値を備えている。ここで設定する閾値としては、たとえば、ホワイトノイズの信号レベルの値を用いる。そして、音源信号の信号レベルがこの閾値以上であった場合に、その音源信号を音響伝達関数の推定に有効と判定するのである。また、この判定部30は、音源信号の信号レベルが所定の信号レベルに達していなかった場合には、その音源信号を推定部40へ出力することなく破棄する。   That is, the determination unit 30 includes a predetermined threshold as a reference for determining whether the sound source signal for each partial frequency band input from the dividing unit 20 is valid or invalid for estimation of the acoustic transfer function. As the threshold value set here, for example, the value of the signal level of white noise is used. And when the signal level of a sound source signal is more than this threshold value, it determines with the sound source signal being effective for estimation of an acoustic transfer function. Further, when the signal level of the sound source signal has not reached the predetermined signal level, the determination unit 30 discards the sound source signal without outputting it to the estimation unit 40.

たとえば、ある時刻(t)において、図4(a)に示すような音源信号が分割部20に入力された場合、図4(a)の中央に示す一点鎖線よりも左側の領域に示す音源信号が低周波帯域Lの音源信号として判定部30へ入力され、図4(a)の中央に示す一点鎖線よりも右側の領域に示す音源信号が高周波帯域Hの音源信号として判定部30へ入力される。   For example, when a sound source signal as shown in FIG. 4A is input to the dividing unit 20 at a certain time (t), the sound source signal shown in the region on the left side of the one-dot chain line shown in the center of FIG. Is input to the determination unit 30 as a sound source signal in the low frequency band L, and a sound source signal shown in a region on the right side of the dashed line shown in the center of FIG. The

この場合、判定部30は、時刻(t)における低周波帯域Lの音源信号の信号レベルが閾値以上であるため音響伝達関数の推定に有効と判定し、その音源信号を後段の推定部40へ出力する。一方、判定部30は、時刻(t)における高周波帯域Hの音声信号の信号レベルが閾値未満であるため無効と判断して、その音源信号を後段の推定部40へ出力することなく破棄する。   In this case, the determination unit 30 determines that the signal level of the sound source signal in the low frequency band L at the time (t) is equal to or higher than the threshold value, so that the sound source signal is effective for estimation of the sound transfer function. Output. On the other hand, the determination unit 30 determines that the signal level of the audio signal in the high frequency band H at time (t) is less than the threshold value, and discards the sound source signal without outputting it to the estimation unit 40 at the subsequent stage.

その後、時刻(t+1)において、図4(c)に示すような音源信号が分割部20に入力された場合、図4(c)の中央に示す一点鎖線よりも左側の領域に示す音源信号が低周波帯域Lの音源信号として判定部30へ入力され、図4(c)の中央に示す一点鎖線よりも右側の領域に示す音源信号が高周波帯域Hの音源信号として判定部30へ入力される。   Thereafter, when a sound source signal as shown in FIG. 4C is input to the dividing unit 20 at time (t + 1), the sound source shown in the region on the left side of the alternate long and short dash line shown in the center of FIG. The signal is input to the determination unit 30 as a sound source signal in the low frequency band L, and the sound source signal shown in the region on the right side of the dashed line shown in the center of FIG. 4C is input to the determination unit 30 as the sound source signal in the high frequency band H. Is done.

この場合、判定部30は、時刻(t+1)における低周波帯域Lの音源信号の信号レベルが閾値未満であるため無効と判定し、その音源信号を後段の推定部40へ出力することなく破棄する。一方、判定部30は、時刻(t+1)における高周波帯域Hの音源信号の信号レベルが閾値以上であるため音響伝達関数の推定に有効と判定し、その音源信号を後段の推定部40へ出力する。   In this case, the determination unit 30 determines that the signal level of the sound source signal in the low frequency band L at time (t + 1) is less than the threshold value, so that it is invalid, and does not output the sound source signal to the subsequent estimation unit 40. Discard. On the other hand, the determination unit 30 determines that the signal level of the sound source signal in the high frequency band H at the time (t + 1) is equal to or higher than the threshold value, so that it is effective for estimating the acoustic transfer function, and sends the sound source signal to the estimation unit 40 in the subsequent stage. Output.

本実施形態では、判定部40により、信号レベルが所定の信号レベル以上の音源信号を音響伝達関数の推定に有効と判定しているが、音源信号の信号レベルが所定範囲内であった場合に、当該音源信号が音響伝達関数の推定に有効であると判定するように構成してもよい。かかる構成により、ノイズや違法電波等の不必要に信号レベルの高い音源信号が入力された場合に、その音源信号を音響伝達関数の推定に有効と判定することがないので、後段の推定部40による部分音響伝達関数の推定精度の低下を未然に防止することができる。   In the present embodiment, the determination unit 40 determines that the sound source signal having a signal level equal to or higher than the predetermined signal level is effective for estimating the acoustic transfer function. However, when the signal level of the sound source signal is within the predetermined range. The sound source signal may be determined to be effective for estimating the acoustic transfer function. With this configuration, when a sound source signal with an unnecessarily high signal level such as noise or illegal radio waves is input, the sound source signal is not determined to be effective for estimating the acoustic transfer function. It is possible to prevent a reduction in the estimation accuracy of the partial acoustic transfer function due to.

なお、音源信号が音響伝達関数の推定に有効であるか否かは、各音源信号の電圧値、電流値、振幅値等、音源信号の強度を判定できるものであれば、任意の値に基づいて判定を行ってもよい。   Whether the sound source signal is effective for estimating the acoustic transfer function is based on an arbitrary value as long as the intensity of the sound source signal can be determined, such as the voltage value, current value, amplitude value, etc. of each sound source signal. Determination may be performed.

推定部40は、判定部30によって音響伝達関数の推定に有効であると判定された音源信号および集音信号とに基づいて、当該音源信号及び集音信号の部分周波数帯域における音響伝達関数をあらわす部分音響伝達関数を推定する処理部である。   The estimation unit 40 represents an acoustic transfer function in a partial frequency band of the sound source signal and the sound collection signal based on the sound source signal and the sound collection signal determined to be effective for estimating the sound transfer function by the determination unit 30. It is a process part which estimates a partial acoustic transfer function.

この推定部40は、音響伝達関数を算出する周知の演算式により、信号レベルが所定の信号レベル以上の音源信号と、その音源信号と同じ部分周波数帯域の集音信号との差分から、スピーカ201―マイク202間の空間における各部分周波数帯域での音響特性を計算し、その音響特性から理想的な部分音響伝達関を計算し、その計算結果を記憶部50へ出力する。   The estimation unit 40 uses a known arithmetic expression for calculating an acoustic transfer function to calculate the speaker 201 based on the difference between a sound source signal having a signal level equal to or higher than a predetermined signal level and a sound collection signal in the same partial frequency band as the sound source signal. The acoustic characteristics in each partial frequency band in the space between the microphones 202 are calculated, the ideal partial acoustic transmission function is calculated from the acoustic characteristics, and the calculation result is output to the storage unit 50.

たとえば、推定部40は、時刻(t)において、図4(a)に示すような音源信号が分割部20に入力された場合、判定部30から低周波領域Lの音源信号が入力されるので、図4(b)に示すように、低周波帯域Lに関する音響特性だけを計算し、その音響特性から得られた低周波帯域Lに関する部分音響伝達関数を後段の記憶部50に記憶させる。   For example, when the sound source signal as shown in FIG. 4A is input to the dividing unit 20 at time (t), the estimation unit 40 receives the sound source signal of the low frequency region L from the determination unit 30. As shown in FIG. 4B, only the acoustic characteristics related to the low frequency band L are calculated, and the partial acoustic transfer function related to the low frequency band L obtained from the acoustic characteristics is stored in the storage unit 50 in the subsequent stage.

上記のように、このとき判定部30に入力される低周波帯域Lの音源信号は、その信号レベルが閾値以上であり、ホワイトノイズと同様に一定の信号レベルを備えた信号であるため、判定部30は、低周波帯域Lに関しては、ホワイトノイズを用いたときと同様の再現性で空間の音響特性を計算することができる。   As described above, the sound source signal of the low frequency band L input to the determination unit 30 at this time is a signal having a signal level equal to or higher than a threshold value and a constant signal level similar to white noise. The unit 30 can calculate the acoustic characteristics of the space for the low frequency band L with the same reproducibility as when white noise is used.

また、推定部40は、時刻(t+1)において、図4(c)に示すような音源信号が分割部20に入力された場合、判定部30から高周波帯域Hの音源信号だけが入力されるので、図4(d)に示すように、高周波帯域Hに関する音響特性だけを計算し、その音響特性から得られた高周波帯域Hに関する部分音響伝達関数を後段の記憶部50に記憶させる。   In addition, when a sound source signal as shown in FIG. 4C is input to the dividing unit 20 at time (t + 1), the estimation unit 40 receives only a sound source signal in the high frequency band H from the determination unit 30. Therefore, as shown in FIG. 4D, only the acoustic characteristics relating to the high frequency band H are calculated, and the partial acoustic transfer function relating to the high frequency band H obtained from the acoustic characteristics is stored in the storage unit 50 in the subsequent stage.

このとき、判定部30に入力される高周波帯域Hの音源信号は、その信号レベルが閾値以上であり、ホワイトノイズと同様に一定の信号レベルを備えた信号であるため、判定部30は、高周波帯域Hに関しては、ホワイトノイズを用いたときと同様の再現性で空間の音響特性を計算することができる。   At this time, the sound source signal in the high frequency band H input to the determination unit 30 is a signal having a signal level equal to or higher than the threshold value and a constant signal level similar to white noise. Regarding the band H, the acoustic characteristics of the space can be calculated with the same reproducibility as when white noise is used.

記憶部50は、各部分周波数帯域毎に部分音響伝達関数を記憶する。この記憶部50は、後述の合成フィルタ部51、52(図6参照)において部分音響伝達関数およびフィルタ係数が設定されるメモリに相当するものである。   The storage unit 50 stores a partial acoustic transfer function for each partial frequency band. The storage unit 50 corresponds to a memory in which a partial acoustic transfer function and a filter coefficient are set in later-described synthesis filter units 51 and 52 (see FIG. 6).

ここで、図5を参照して、記憶部50に各部分音響伝達関数が記憶(設定)される手順について説明する。図5は、記憶部に各部分音響伝達関数が記憶される手順を示す説明図である。図5(a)〜(e)では、高周波帯域HをH、低周波帯域LをL、部分音響関数をYで示しており、高周波帯域Hにおける部分音響伝達関数YをYH、低周波領域Lにおける部分音響伝達関数YをYLで示している。なお、YH、YL横のカッコ内は、音響調整装置10に音源信号が入力された時刻を示している。   Here, with reference to FIG. 5, a procedure for storing (setting) each partial acoustic transfer function in the storage unit 50 will be described. FIG. 5 is an explanatory diagram illustrating a procedure in which each partial acoustic transfer function is stored in the storage unit. 5A to 5E, the high frequency band H is indicated by H, the low frequency band L is indicated by L, the partial acoustic function is indicated by Y, the partial acoustic transfer function Y in the high frequency band H is indicated by YH, and the low frequency region L is indicated. The partial acoustic transfer function Y at is indicated by YL. The parentheses beside YH and YL indicate the time when the sound source signal is input to the acoustic adjustment device 10.

本実施形態の音響調整装置10に音源信号が入力される前の状態(時刻(0))において、記憶部50には、図5(a)に示すように、初期値として標準的な高周波帯域における部分音響伝達関数YH(0)と、標準的な低周波帯域における部分音響伝達関数YL(0)が記憶されている。   In the state (time (0)) before the sound source signal is input to the acoustic adjustment device 10 of the present embodiment, the storage unit 50 has a standard high frequency band as an initial value as shown in FIG. And a partial acoustic transfer function YL (0) in a standard low frequency band are stored.

その後、時刻(t)において、音響調整装置10に音源信号が入力されたとする。このとき、入力された音源信号に関して、高周波帯域Hの音源信号だけが音響伝達関数の推定に有効と判定された場合、記憶部50には、図5(b)に示すように、時刻(t)における高周波帯域Hの部分音響伝達関数YH(t)が記憶される。ここでは、低周波帯域Lにおける音源信号が無効と判定されるため、初期値として記憶されている低周波帯域Lの部分音響伝達関数YL(0)は更新されることなく保持される。   Thereafter, it is assumed that a sound source signal is input to the acoustic adjustment device 10 at time (t). At this time, when it is determined that only the sound source signal in the high frequency band H is effective for estimating the acoustic transfer function with respect to the input sound source signal, the storage unit 50 stores the time (t) as shown in FIG. ), The partial acoustic transfer function YH (t) of the high frequency band H is stored. Here, since the sound source signal in the low frequency band L is determined to be invalid, the partial acoustic transfer function YL (0) of the low frequency band L stored as the initial value is held without being updated.

次に、時刻(t+1)において、音響調整装置10に入力された音源信号に関して、低周波帯域Lだけが音響伝達関数の推定に有効と判定された場合、記憶部50には、図5(c)に示すように、低周波帯域Lにおける部分音響伝達関数Yが時刻(t+1)における低周波領域Lの部分音響伝達関数YL(t+1)に更新されて記憶される。ここでは、高周波帯域Hにおける音源信号が無効と判定されるため、高周波帯域Hの部分音響伝達関数YH(t)は更新されることなく保持される。   Next, when it is determined at time (t + 1) that only the low frequency band L is effective for estimating the acoustic transfer function with respect to the sound source signal input to the acoustic adjustment device 10, the storage unit 50 stores FIG. As shown in (c), the partial acoustic transfer function Y in the low frequency band L is updated and stored as the partial acoustic transfer function YL (t + 1) in the low frequency region L at time (t + 1). Here, since the sound source signal in the high frequency band H is determined to be invalid, the partial acoustic transfer function YH (t) in the high frequency band H is held without being updated.

その後、時刻(t+2)において、音響調整装置10に入力された音源信号に関して、高周波帯域Hだけが音響伝達関数の推定に有効と判断された場合、記憶部50には、図5(d)に示すように、高周波帯域Hの部分音響伝達関数YH(t+1)がYH(t+2)に更新され、低周波帯域Lの部分音響伝達関数YL(t+1)は保持される。   Thereafter, when it is determined at time (t + 2) that only the high frequency band H is valid for the estimation of the acoustic transfer function with respect to the sound source signal input to the acoustic adjustment device 10, the storage unit 50 stores FIG. ), The partial acoustic transfer function YH (t + 1) in the high frequency band H is updated to YH (t + 2), and the partial acoustic transfer function YL (t + 1) in the low frequency band L is retained. .

そして、時刻(t+3)において、音響調整装置10に入力された音源信号に関して、低周波帯域Lだけが音響伝達関数の推定に有効と判断された場合、同様に、高周波帯域Hの部分音響伝達関数YH(t+2)が保持され、低周波帯域Lの部分音響伝達関数YL(t+1)がYL(t+3)に更新される。   Then, at time (t + 3), when it is determined that only the low frequency band L is effective for estimating the acoustic transfer function with respect to the sound source signal input to the acoustic adjustment device 10, the partial sound in the high frequency band H is similarly applied. The transfer function YH (t + 2) is held, and the partial acoustic transfer function YL (t + 1) in the low frequency band L is updated to YL (t + 3).

合成部60は、推定部40によって推定された部分音響伝達関数を複数の部分周波数帯域について合成する処理部である。この合成部60は、記憶部50に記憶している各部分周波数帯域毎の部分音響伝達関数を合成することによって、可聴域における全周波数帯域の音響特性に対応する音響伝達関数を生成する。   The synthesis unit 60 is a processing unit that synthesizes the partial acoustic transfer functions estimated by the estimation unit 40 for a plurality of partial frequency bands. The synthesizing unit 60 generates an acoustic transfer function corresponding to the acoustic characteristics of all frequency bands in the audible range by synthesizing the partial acoustic transfer functions for each partial frequency band stored in the storage unit 50.

たとえば、合成部60は、推定部40により、図4(b)及び(d)に示したような音響特性が算出され、これらの音響特性から得られた部分音響伝達関数が記憶部50に記憶されていた場合、そのときに記憶部50に記憶されている低周波帯域Lの部分音響伝達関数と高周波帯域Hの部分音響伝達関数とを合成することによって、図4(e)に示すように、可聴域における全周波数帯域について良好に空間の音響特性を再現することができる。   For example, the synthesizing unit 60 calculates acoustic characteristics as shown in FIGS. 4B and 4D by the estimating unit 40, and stores the partial acoustic transfer function obtained from these acoustic characteristics in the storage unit 50. 4E, by combining the partial acoustic transfer function of the low frequency band L and the partial acoustic transfer function of the high frequency band H stored in the storage unit 50 at that time, as shown in FIG. The acoustic characteristics of the space can be reproduced well for all frequency bands in the audible range.

このように、本実施形態の音響調整装置10では、再生装置200から入力される有色音の音源信号を複数の部分周波数帯域に分割し、分割した各音源信号の信号レベルが所定の信号レベル以上であると判定された場合に、その音源信号を用いて、その音源信号の部分周波数帯域における部分音響伝達関数を推定するように構成している。   As described above, in the acoustic adjustment device 10 of the present embodiment, the colored sound source signal input from the playback device 200 is divided into a plurality of partial frequency bands, and the signal level of each divided sound source signal is equal to or higher than a predetermined signal level. When the sound source signal is determined to be, the partial sound transfer function in the partial frequency band of the sound source signal is estimated using the sound source signal.

そのため、この音響調整装置10では、推定部40により推定された部分周波数帯域毎の各部分音響伝達関数が、それぞれホワイトノイズを用いた場合と同様に、一定の信号レベルを備えた音源信号を用いて各周波数帯域毎の部分音響伝達関数を推定することができるので、これらの各部分音響伝達関数を合成部60によって合成することで、可聴域における全周波数帯域について良好に空間の音響特性を再現することができる。   Therefore, in this acoustic adjustment device 10, each partial acoustic transfer function for each partial frequency band estimated by the estimation unit 40 uses a sound source signal having a constant signal level as in the case of using white noise. Therefore, the partial acoustic transfer function for each frequency band can be estimated, and by combining these partial acoustic transfer functions by the synthesizing unit 60, the acoustic characteristics of the space can be reproduced well for all frequency bands in the audible range. can do.

しかも、この音響調整装置10では、音源信号の入力中に、音源信号が音響伝達関数の推定に有効と判定される度に記憶部50に記憶している部分音響伝達関数を最新のものに更新するため、たとえば、音楽の再生中に空間の音響特性が変化した場合であっても、その音響特性の変化に応じて部分音響伝達関数を随時変更して、環境の変化に応じた理想的な音響伝達関数を得ることができる。   In addition, in the acoustic adjustment device 10, the partial acoustic transfer function stored in the storage unit 50 is updated to the latest one every time the sound source signal is determined to be effective for estimating the acoustic transfer function during the input of the sound source signal. Therefore, for example, even when the acoustic characteristics of the space change during music playback, the partial acoustic transfer function is changed as needed according to the change in the acoustic characteristics, and ideally suited to changes in the environment. An acoustic transfer function can be obtained.

ここで、本実施形態に係る音響調整装置10の更に具体的な構成および音響調整装置10における信号の流れについて、図6を参照して説明する。図6は、音響調整装置10の詳細な構成を示す説明図である。   Here, a more specific configuration of the acoustic adjustment device 10 according to the present embodiment and a signal flow in the acoustic adjustment device 10 will be described with reference to FIG. FIG. 6 is an explanatory diagram showing a detailed configuration of the acoustic adjustment device 10.

図6に示すように、音響調整装置10は、同期部71、音源信号用の周波数変換部81、集音信号用の周波数変換部82、音源信号用のハイパスフィルタ部21、ローパスフィルタ部22、1/2ダウンサンプル部91、92、集音信号用のハイパスフィルタ部23、ローパスフィルタ部24、1/2ダウンサンプル部93、94、音源信号用のレベルチェック部31、32、適応制御部41、42、2アップサンプル部95、96、合成フィルタ部51、52、加算部61、適応フィルタ部62、逆周波数変換部100を備えている。   As shown in FIG. 6, the acoustic adjustment device 10 includes a synchronization unit 71, a frequency conversion unit 81 for sound source signals, a frequency conversion unit 82 for sound collection signals, a high-pass filter unit 21 for sound source signals, a low-pass filter unit 22, 1/2 down-sampling units 91 and 92, high-pass filter unit 23 for collected signal, low-pass filter unit 24, 1/2 down-sampling units 93 and 94, level check units 31 and 32 for sound source signals, and adaptive control unit 41 , 42, 2 upsampling units 95 and 96, synthesis filter units 51 and 52, addition unit 61, adaptive filter unit 62, and inverse frequency conversion unit 100.

この音響調整装置10は、CPU(Central Processing Unit)とROM(Read Only Memory)とRAM(Random Access Memory)とを備えたDSP(Digital Signal Processor)により構成しており、このDSPのCPUがROMに記憶している所定の音響調整プログラムをRAMを作業領域として実行することによって、上記同期部71、周波数変換部81、周波数変換部82、ハイパスフィルタ部21、ローパスフィルタ部22、1/2ダウンサンプル部91、92、ハイパスフィルタ部23、ローパスフィルタ部24、1/2ダウンサンプル部93、94、レベルチェック部31、32、適応制御部41、42、2アップサンプル部95、96、合成フィルタ部51、52、加算部61、適応フィルタ部62、逆周波数変換部100等として機能する。   The acoustic adjustment apparatus 10 is configured by a DSP (Digital Signal Processor) including a CPU (Central Processing Unit), a ROM (Read Only Memory), and a RAM (Random Access Memory). The CPU of the DSP is stored in the ROM. By executing the stored predetermined sound adjustment program using the RAM as a work area, the synchronization unit 71, the frequency conversion unit 81, the frequency conversion unit 82, the high pass filter unit 21, the low pass filter unit 22, and 1/2 downsample Units 91 and 92, high-pass filter unit 23, low-pass filter unit 24, 1/2 down-sampling units 93 and 94, level check units 31 and 32, adaptive control units 41 and 42, up-sampling units 95 and 96, synthesis filter unit 51, 52, an adder 61, an adaptive filter 62, an inverse frequency converter 100, and the like.

同期部71は、再生装置200から入力される音源信号を遅延処理することによって、音源信号と集音信号との位相を同期させた後、音源信号を周波数変換部81へ出力する。   The synchronization unit 71 delays the sound source signal input from the playback device 200 to synchronize the phases of the sound source signal and the sound collection signal, and then outputs the sound source signal to the frequency conversion unit 81.

音源信号用の周波数変換部81は、同期部71から入力された音源信号をFFT(Fast Fourier Transform:高速フーリエ変換)により周波数領域へと変換した後、ハイパスフィルタ部21およびローパスフィルタ部22へ出力すると共に、この周波数領域に変換した音源信号を適応フィルタ62へ出力する。   The frequency conversion unit 81 for the sound source signal converts the sound source signal input from the synchronization unit 71 into a frequency domain by FFT (Fast Fourier Transform), and then outputs it to the high pass filter unit 21 and the low pass filter unit 22. At the same time, the sound source signal converted into the frequency domain is output to the adaptive filter 62.

集音信号用の周波数変換部82は、マイク202から入力される集音信号をFFTにより周波数領域へと変換した後、ハイパスフィルタ部23およびローパスフィルタ部24へ出力する。   The frequency conversion unit 82 for the sound collection signal converts the sound collection signal input from the microphone 202 into the frequency domain by FFT, and then outputs it to the high pass filter unit 23 and the low pass filter unit 24.

音源信号用のハイパスフィルタ部21は、周波数領域に変換された音源信号の低周波帯域L成分をカットし、高周波帯域H成分のみの音源信号を生成して1/2ダウンサンプル部91へ出力する。また、音源信号用のローパスフィルタ部22は、周波数領域に変換された音源信号の高周波帯域H成分をカットし、低周波帯域Lのみの音源信号を生成して1/2ダウンサンプル部92へ出力する。   The high-pass filter unit 21 for the sound source signal cuts the low frequency band L component of the sound source signal converted into the frequency domain, generates a sound source signal having only the high frequency band H component, and outputs the sound source signal to the 1/2 down-sampling unit 91. . Further, the low-pass filter unit 22 for the sound source signal cuts the high frequency band H component of the sound source signal converted into the frequency domain, generates a sound source signal of only the low frequency band L, and outputs it to the 1/2 down-sampling unit 92 To do.

同様に、集音信号用のハイパスフィルタ部23は、高周波帯域H成分のみの集音信号を1/2ダウンサンプル部93へ出力し、集音信号用のローパスフィルタ部24は、低周波帯域L成分のみの集音信号を1/2ダウンサンプル部94へ出力する。   Similarly, the high-pass filter unit 23 for the sound collection signal outputs a sound collection signal having only the high frequency band H component to the 1/2 down-sampling unit 93, and the low-pass filter unit 24 for the sound collection signal has a low frequency band L The collected sound signal of only the component is output to the 1/2 downsampling unit 94.

音源信号用の1/2ダウンサンプル部91、92は、それぞれに入力される各音源信号を音源信号周波数の1/2倍のサンプリング周波数でサンプリング(ダウンサンプル)した後、各1/2ダウンサンプル部91、92の後段のレベルチェック部31、32へ出力する。   The sound source signal 1/2 down-sampling units 91 and 92 sample (down-sample) each sound source signal input thereto at a sampling frequency that is 1/2 times the sound source signal frequency, and then each 1/2 down-sample. The data is output to the level check units 31 and 32 following the units 91 and 92.

集音信号用の1/2ダウンサンプル部93、94は、それぞれに入力される集音信号を集音信号周波数の1/2倍のサンプリング周波数でサンプリング(ダウンサンプル)した後、1/2ダウンサンプル部93、94の後段の適応制御部41、42へ出力する。   The sound collection signal 1/2 down-sampling units 93 and 94 sample (down-sample) the input sound collection signal at a sampling frequency that is 1/2 times the sound collection signal frequency, and then perform 1/2 down-sampling. The data is output to the adaptive control units 41 and 42 following the sample units 93 and 94.

レベルチェック部31、32は、それぞれに入力される音源信号の信号レベルが所定の信号レベル以上であるか否かを判定し、信号レベルが所定の信号レベル以上であると判定した音源信号をそれぞれ後段の適応制御部41、42へ出力する。一方、このレベルチェック部31、32は、信号レベルが所定の信号レベルに達していないと判定した場合、その信号を適応制御部41、42へ出力することなく破棄する。   The level check units 31 and 32 determine whether or not the signal level of the sound source signal input to each is higher than or equal to a predetermined signal level, and each of the sound source signals determined to be higher than or equal to the predetermined signal level. The data is output to the adaptive control units 41 and 42 at the subsequent stage. On the other hand, when it is determined that the signal level has not reached the predetermined signal level, the level check units 31 and 32 discard the signal without outputting it to the adaptive control units 41 and 42.

適応制御部41、42は、それぞれに入力される音源信号と集音信号とに基づいて、それぞれ各部分周波数帯域における音響特性を計算し、得られた各音響特性に応じた部分音響伝達関数を求めて(推定して)同定処理を行い、同定処理後の部分音響伝達関数を適用した信号を各適応制御部41、42の後段の2アップサンプル部95、96へ出力する。   The adaptive control units 41 and 42 calculate the acoustic characteristics in the respective partial frequency bands based on the sound source signal and the collected sound signal respectively input thereto, and obtain partial acoustic transfer functions corresponding to the obtained acoustic characteristics. The identification processing is performed (estimated) by obtaining, and a signal to which the partial acoustic transfer function after the identification processing is applied is output to the 2-upsampling units 95 and 96 following the adaptive control units 41 and 42.

2アップサンプル部95、96は、それぞれに入力される信号を、その信号周波数の2倍のサンプリング周波数でサンプリング(アップサンプル)した後、後段の合成フィルタ部51、52へ出力する。   The two up-sampling units 95 and 96 sample (up-sample) the input signals at a sampling frequency twice as high as the signal frequency, and then output the signals to the subsequent synthesis filter units 51 and 52.

合成フィルタ部51、52は、周知の最適化アルゴリズムに従って、各部分周波数帯域における部分音響伝達関数を自己適応させる適応型フィルタ(adaptive filter)であり、それぞれに入力される信号に基づいて、各部分周波数帯域における部分音響伝達関数を適用したフィルタ係数を自己適応させる。これらの各合成フィルタ部51、52は、前段の2アップサンプル部95、96から信号が入力されるたびに、その信号に基づいて、部分音響伝達関数とフィルタ係数とを更新する。   The synthesis filter units 51 and 52 are adaptive filters that self-adapt a partial acoustic transfer function in each partial frequency band in accordance with a known optimization algorithm. Self-adapt the filter coefficients applying the partial acoustic transfer function in the frequency band. Each of these synthesis filter units 51 and 52 updates the partial acoustic transfer function and filter coefficient based on the signal each time a signal is input from the two-upsampling units 95 and 96 in the previous stage.

加算部61は、高周波帯域用Hの合成フィルタ51と低周波帯域Lの合成フィルタ52とを加算処理する。この加算部61の加算処理により、後段の適応フィルタ部62におけるフィルタ係数が決定することとなる。すなわち、この加算処理の結果、合成フィルタ部51のフィルタ係数が適応フィルタ部62の高周波帯域Hにおけるフィルタ係数として設定され、合成フィルタ部52のフィルタ係数が適応フィルタ部62の低周波帯域Lにおけるフィルタ係数として設定される。   The adder 61 adds the high frequency band H synthesis filter 51 and the low frequency band L synthesis filter 52. By the addition processing of the adding unit 61, the filter coefficient in the subsequent adaptive filter unit 62 is determined. That is, as a result of this addition processing, the filter coefficient of the synthesis filter unit 51 is set as the filter coefficient in the high frequency band H of the adaptive filter unit 62, and the filter coefficient of the synthesis filter unit 52 is the filter in the low frequency band L of the adaptive filter unit 62. Set as a coefficient.

適応フィルタ部62は、周波数変換部81から入力される周波数領域に変換された音源信号に対して、そのとき設定されているフィルタ係数に応じたフィルタ処理を施して逆周波数変換部100へ出力する。   The adaptive filter unit 62 subjects the sound source signal converted into the frequency domain input from the frequency conversion unit 81 to filter processing according to the filter coefficient set at that time, and outputs the result to the inverse frequency conversion unit 100. .

逆周波数変換部100は、適応フィルタ部62から入力される周波数領域の音源信号をIFFT(Inverse Fast Fourier Transform:逆高速フーリエ変換)により時間領域へと変換した後、スピーカ201へ出力する。   The inverse frequency transform unit 100 converts the frequency domain sound source signal input from the adaptive filter unit 62 into the time domain by IFFT (Inverse Fast Fourier Transform), and then outputs the converted signal to the speaker 201.

次に、音響調整装置10が音響調整を行う際にDSPのCPUが実行する処理について、図7を参照して説明する。図7は、DSPのCPUが音響調整プログラムを実行するときの処理の流れを示すフローチャートである。   Next, processing executed by the CPU of the DSP when the acoustic adjustment device 10 performs acoustic adjustment will be described with reference to FIG. FIG. 7 is a flowchart showing the flow of processing when the CPU of the DSP executes the sound adjustment program.

図7に示すように、CPUは、まず音源信号と集音信号との位相を同期させる同期処理を実行し(ステップS101)、その後、音源信号および集音信号を周波数領域へと変換する周波数変換処理を実行する(ステップS102)。   As shown in FIG. 7, the CPU first executes a synchronization process for synchronizing the phases of the sound source signal and the sound collection signal (step S101), and then converts the sound source signal and the sound collection signal into the frequency domain. Processing is executed (step S102).

続いて、CPUは、周波数領域に変換された音源信号と集音信号とをそれぞれ高周波帯域Hと低周波帯域Lとに分割する分割処理を実行し(ステップS103)、その後、各信号周波数の1/2倍のサンプリング周波数によるダウンサンプル処理を実行する(ステップS104)。   Subsequently, the CPU executes a dividing process of dividing the sound source signal and the collected sound signal converted into the frequency domain into the high frequency band H and the low frequency band L, respectively (step S103), and thereafter, 1 for each signal frequency. A downsampling process with a sampling frequency of / 2 is executed (step S104).

ここで、CPUは、ダウンサンプル処理が施された各部分周波数帯域の音源信号毎に、信号レベルが所定の信号レベル以上であるか否かを判定することによって、その音源信号が音響伝達関数の推定に有効か否かを判定する処理を実行する(ステップS105)。   Here, the CPU determines whether or not the signal level is equal to or higher than a predetermined signal level for each sound source signal of each partial frequency band subjected to the down-sampling process, so that the sound source signal is the acoustic transfer function. Processing for determining whether or not the estimation is effective is executed (step S105).

そして、CPUは、音源信号が音響伝達関数の推定に有効であると判定した場合(ステップS105:Yes)、その音源信号と部分周波数帯域が同じ集音信号とに基づいて、その部分周波数帯域における部分音響伝達関数を推定する同定処理を実行し(ステップS106)、その後、設定中の部分音響伝達関数を今回の同定処理により得た部分音響伝達関数に更新する更新処理を実行して(ステップS107)、処理をステップS108へ移す。一方、CPUは、ステップS105において音源信号が音響伝達関数の推定に有効でないと判定した場合に(ステップS105:No)、処理をステップS108へ移す。   Then, when the CPU determines that the sound source signal is effective for estimation of the acoustic transfer function (step S105: Yes), based on the sound source signal and the collected sound signal having the same partial frequency band, in the partial frequency band An identification process for estimating the partial sound transfer function is executed (step S106), and then an update process for updating the partial sound transfer function being set to the partial sound transfer function obtained by the current identification process is executed (step S107). ), And the process proceeds to step S108. On the other hand, if the CPU determines in step S105 that the sound source signal is not effective for estimating the acoustic transfer function (step S105: No), the process proceeds to step S108.

続いて、CPUは、アップサンプル処理を実行し(ステップ108)、その後、高周波帯域Hの合成フィルタ部51と低周波帯域Lの合成フィルタ部52とを合成する合成処理を実行する(ステップS109)。   Subsequently, the CPU executes an upsampling process (step 108), and then executes a synthesis process for synthesizing the synthesis filter unit 51 in the high frequency band H and the synthesis filter unit 52 in the low frequency band L (step S109). .

そして、CPUは、音源信号に対して適応フィルタ部62による畳み込み処理を実行し(ステップS110)、その後、畳み込み処理が施された音源信号を時間領域へと変換する逆周波数変換処理を実行して(ステップS111)、スピーカ201へ出力した後処理を終了する。   Then, the CPU executes convolution processing by the adaptive filter unit 62 on the sound source signal (step S110), and then executes inverse frequency conversion processing for converting the sound source signal subjected to the convolution processing into the time domain. (Step S111), the post-processing output to the speaker 201 is terminated.

このように、本実施形態の音響調整装置10では、音響伝達関数の同定に、ホワイトノイズではなく、再生装置200から入力される有色音である音源信号を用いるため、音楽等の再生中に随時音響伝達関数の同定を行っても聴取者の快適性を阻害することがない。   As described above, in the acoustic adjustment device 10 according to the present embodiment, the sound source signal that is a colored sound input from the reproduction device 200 is used instead of white noise for identification of the acoustic transfer function. Even if the acoustic transfer function is identified, the comfort of the listener is not hindered.

また、この音響調整装置10は、再生装置200から入力される音源信号を周波数領域へと変換したうえで複数の部分周波数帯域に分割し、各部分周波数帯域毎に音源信号の信号レベルをチェックして、信号レベルが所定の信号レベル以上であると判定された音源信号と、その音源信号と同じ部分周波数帯域の集音信号とに基づいて、当該部分周波数帯域における部分音響伝達関数を同定するので、再生装置200から入力される信号レベルが時刻によって変化する場合であっても、音源信号の信号レベルが所定の信号レベル以上となっている部分周波数帯域では、良好に空間の音響特性を再現することができるので、好適に部分音響伝達関数の同定を行うことができる。   In addition, the sound adjustment device 10 converts the sound source signal input from the reproduction device 200 into a frequency domain and then divides the sound source signal into a plurality of partial frequency bands, and checks the signal level of the sound source signal for each partial frequency band. Thus, the partial acoustic transfer function in the partial frequency band is identified based on the sound source signal determined to have a signal level equal to or higher than the predetermined signal level and the sound collection signal in the same partial frequency band as the sound source signal. Even if the signal level input from the playback device 200 changes with time, the acoustic characteristics of the space are reproduced well in the partial frequency band where the signal level of the sound source signal is equal to or higher than the predetermined signal level. Therefore, the partial acoustic transfer function can be preferably identified.

そして、この音響調整装置10では、部分周波数帯域毎に分割された音源信号の信号レベルが所定の信号レベル以上であると判定された部分周波数帯域においては、当該部分周波数帯域に対応する合成フィルタ部51、52のフィルタ係数を更新し、音源信号の信号レベルが所定の信号レベルに満たないと判定された部分周波数帯域においては、当該部分周波数帯域に対応する合成フィルタ部51、52のフィルタ係数を更新せずに、前回更新されたフィルタ係数を保持する。   In the acoustic adjustment device 10, in the partial frequency band in which the signal level of the sound source signal divided for each partial frequency band is determined to be equal to or higher than the predetermined signal level, the synthesis filter unit corresponding to the partial frequency band In the partial frequency band in which the filter coefficients of 51 and 52 are updated and the signal level of the sound source signal is determined to be less than the predetermined signal level, the filter coefficients of the synthesis filter units 51 and 52 corresponding to the partial frequency band are changed. The filter coefficient updated last time is held without updating.

そのため、この音響調整装置10では、非常に信号レベルの低い音源信号等、部分音響伝達関数の同定に適さない音源信号が入力された場合に、その音源信号に基づいて合成フィルタ部51、52のフィルタ係数を更新することがないので、音響特性の再現性が低減することを防止することができる。   Therefore, in this acoustic adjustment device 10, when a sound source signal that is not suitable for identification of a partial acoustic transfer function, such as a sound source signal with a very low signal level, is input, the synthesis filter units 51, 52 are based on the sound source signal. Since the filter coefficient is not updated, it is possible to prevent the reproducibility of the acoustic characteristics from being reduced.

また、上記した実施形態では、音響調整装置10に音源信号が入力される前の状態において、記憶部50に、初期値として標準的な高周波帯域における部分音響伝達関数と、標準的な低周波帯域における部分音響伝達関数とを記憶させているが、音源信号の入力が停止された場合に、記憶部50は、そのときに記憶されている各部分音響伝達関数を次に音源信号が入力されるまで保持する。   Further, in the above-described embodiment, the partial acoustic transfer function in the standard high frequency band as the initial value and the standard low frequency band are stored in the storage unit 50 before the sound source signal is input to the acoustic adjustment device 10. Are stored, but when the input of the sound source signal is stopped, the storage unit 50 inputs the sound source signal next to each of the partial sound transfer functions stored at that time. Hold up.

これにより、この音響調整装置10を車載型のオーディオシステム等に適用した場合に、音楽の再生中にエンジンを停止させても、エンジンを再始動させたときに記憶部50には、エンジンを停止させた際の各部分音響伝達関数が保持されているため、音響伝達関数の同定までに要する時間を短縮することができる。   Thereby, when this acoustic adjustment device 10 is applied to an in-vehicle audio system or the like, even if the engine is stopped during music playback, the engine is stopped in the storage unit 50 when the engine is restarted. Since each partial acoustic transfer function is held, the time required to identify the acoustic transfer function can be shortened.

10 音響調整装置
20 分割部
30 判定部
40 推定部
50 記憶部
60 合成部
200 再生装置
201 スピーカ
202 マイク
203 聴取者
DESCRIPTION OF SYMBOLS 10 Acoustic adjustment apparatus 20 Dividing part 30 Determination part 40 Estimation part 50 Storage part 60 Synthesis | combination part 200 Playback apparatus 201 Speaker 202 Microphone 203 Listener

Claims (3)

スピーカと前記スピーカが再生する音声を集音するマイクとの間における音響伝達関数を推定することで所定の空間における音響を調整する音響調整装置であって、
前記スピーカによって再生される有色音の音源信号を複数の部分周波数帯域へ分割するとともに、前記マイクによって集音された集音信号についても前記部分周波数帯域へ分割する分割手段と、
前記部分周波数帯域における音源信号の信号レベルに基づいて当該音源信号が伝達関数の推定に有効であるか否かを判定する判定手段と、
前記判定手段によって有効であると判定された前記音源信号および前記集音信号に基づいて、当該音源信号および集音信号の前記部分周波数帯域における前記音響伝達関数をあらわす部分音響伝達関数を推定する推定手段と、
前記推定手段によって推定された前記部分音響伝達関数を複数の前記部分周波数帯域について合成する合成手段と、
を備えたことを特徴とする音響調整装置。
An acoustic adjustment device that adjusts sound in a predetermined space by estimating an acoustic transfer function between a speaker and a microphone that collects sound reproduced by the speaker,
A dividing unit that divides a colored sound source signal reproduced by the speaker into a plurality of partial frequency bands, and also divides a collected signal collected by the microphone into the partial frequency band;
Determining means for determining whether the sound source signal is effective for estimating a transfer function based on a signal level of the sound source signal in the partial frequency band;
Estimation that estimates a partial sound transfer function representing the sound transfer function in the partial frequency band of the sound source signal and the sound collection signal based on the sound source signal and the sound collection signal determined to be effective by the determination unit Means,
Synthesizing means for synthesizing the partial acoustic transfer functions estimated by the estimating means for a plurality of the partial frequency bands;
An acoustic adjustment device comprising:
前記部分音響伝達関数を各前記部分周波数帯域毎に記憶する記憶手段を備え、
前記推定手段は、前記判定手段により伝達関数の推定に有効であると判定された前記音源信号と前記集音信号とに基づいて推定した前記部分音響伝達関数を前記記憶手段に記憶させ、
前記合成手段は、前記記憶手段に記憶している各部分周波数帯域毎の前記部分音響伝達関数を合成することを特徴とする請求項1に記載の音響調整装置。
Storage means for storing the partial acoustic transfer function for each partial frequency band;
The estimation means causes the storage means to store the partial acoustic transfer function estimated based on the sound source signal and the sound collection signal determined to be effective for estimation of a transfer function by the determination means,
2. The acoustic adjustment apparatus according to claim 1, wherein the synthesizing unit synthesizes the partial acoustic transfer function for each partial frequency band stored in the storage unit.
スピーカと前記スピーカが再生する音声を集音するマイクとの間における音響伝達関数を推定することで所定の空間における音響を調整する音響調整装置による音響調整方法であって、
前記音響調整装置が、
前記スピーカによって再生される有色音の音源信号を複数の部分周波数帯域へ分割するとともに、前記マイクによって集音された集音信号についても前記部分周波数帯域へ分割する分割ステップと、
前記部分周波数帯域における音源信号の信号レベルに基づいて当該音源信号が伝達関数の推定に有効であるか否かを判定する判定ステップと、
前記判定ステップによって有効であると判定された前記音源信号および前記集音信号に基づいて、有効であると判定された前記音源信号の前記部分周波数帯域における前記音響伝達関数をあらわす部分音響伝達関数を推定する推定ステップと、
前記推定ステップによって推定された前記部分音響伝達関数を複数の前記部分周波数帯域について合成する合成ステップと
を備えたことを特徴とする音響調整方法。
An acoustic adjustment method by an acoustic adjustment device that adjusts sound in a predetermined space by estimating an acoustic transfer function between a speaker and a microphone that collects sound reproduced by the speaker,
The acoustic adjustment device is
A division step of dividing the colored sound source signal reproduced by the speaker into a plurality of partial frequency bands, and also dividing the collected sound signal collected by the microphone into the partial frequency band;
A determination step of determining whether the sound source signal is effective for estimating a transfer function based on the signal level of the sound source signal in the partial frequency band;
A partial acoustic transfer function representing the acoustic transfer function in the partial frequency band of the sound source signal determined to be effective based on the sound source signal determined to be effective and the sound collection signal determined by the determination step; An estimation step to estimate;
And a synthesis step of synthesizing the partial acoustic transfer functions estimated in the estimation step for a plurality of the partial frequency bands.
JP2009022458A 2009-02-03 2009-02-03 Sound adjusting device and sound adjusting method Withdrawn JP2010181448A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009022458A JP2010181448A (en) 2009-02-03 2009-02-03 Sound adjusting device and sound adjusting method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009022458A JP2010181448A (en) 2009-02-03 2009-02-03 Sound adjusting device and sound adjusting method

Publications (1)

Publication Number Publication Date
JP2010181448A true JP2010181448A (en) 2010-08-19

Family

ID=42763060

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009022458A Withdrawn JP2010181448A (en) 2009-02-03 2009-02-03 Sound adjusting device and sound adjusting method

Country Status (1)

Country Link
JP (1) JP2010181448A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014127734A (en) * 2012-12-25 2014-07-07 Yamaha Corp Multitrack sound recording apparatus
JP2015139060A (en) * 2014-01-21 2015-07-30 キヤノン株式会社 Sound field correction device, control method thereof, and program
US10063966B2 (en) 2015-09-29 2018-08-28 Honda Motor Co., Ltd. Speech-processing apparatus and speech-processing method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014127734A (en) * 2012-12-25 2014-07-07 Yamaha Corp Multitrack sound recording apparatus
JP2015139060A (en) * 2014-01-21 2015-07-30 キヤノン株式会社 Sound field correction device, control method thereof, and program
US10063966B2 (en) 2015-09-29 2018-08-28 Honda Motor Co., Ltd. Speech-processing apparatus and speech-processing method

Similar Documents

Publication Publication Date Title
US9414158B2 (en) Single-channel, binaural and multi-channel dereverberation
JP6572894B2 (en) Information processing apparatus, information processing method, and program
CN104715750B (en) Sound system including engine sound synthesizer
JP6111319B2 (en) Apparatus and method for improving perceived quality of sound reproduction by combining active noise canceling and perceptual noise compensation
JP5042823B2 (en) Audio signal echo cancellation
CN106796792B (en) Apparatus and method for enhancing audio signal, sound enhancement system
US20090232318A1 (en) Output correcting device and method, and loudspeaker output correcting device and method
JP2004023481A (en) Acoustic signal processing apparatus and method therefor, and audio system
US20100217606A1 (en) Signal bandwidth expanding apparatus
JP2004198485A (en) Device and program for decoding sound encoded signal
JP4130779B2 (en) Sound field control system and sound field control method
JP2010181448A (en) Sound adjusting device and sound adjusting method
JP2008070878A (en) Voice signal pre-processing device, voice signal processing device, voice signal pre-processing method and program for voice signal pre-processing
JP2008072600A (en) Acoustic signal processing apparatus, acoustic signal processing program, and acoustic signal processing method
JP5883580B2 (en) Filter coefficient determination device
JP4522509B2 (en) Audio equipment
JPH06334457A (en) Automatic sound volume controller
JP2023012347A (en) Acoustic device and acoustic control method
CN114268875A (en) Circuit, system and method for eliminating low-frequency resonance effect
CN115942224A (en) Sound field expansion method and system and electronic equipment
Santos et al. Towards blind reverberation time estimation for non-speech signals
JP2010169972A (en) Filter control method, filter controller, and filter control circuit

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120120

A072 Dismissal of procedure

Free format text: JAPANESE INTERMEDIATE CODE: A073

Effective date: 20130528

A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20130604