JP2015037207A - 音場収音再生装置、方法及びプログラム - Google Patents
音場収音再生装置、方法及びプログラム Download PDFInfo
- Publication number
- JP2015037207A JP2015037207A JP2013167502A JP2013167502A JP2015037207A JP 2015037207 A JP2015037207 A JP 2015037207A JP 2013167502 A JP2013167502 A JP 2013167502A JP 2013167502 A JP2013167502 A JP 2013167502A JP 2015037207 A JP2015037207 A JP 2015037207A
- Authority
- JP
- Japan
- Prior art keywords
- sound
- speaker
- sound source
- speakers
- sound field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 16
- 238000006243 chemical reaction Methods 0.000 claims abstract description 22
- 239000011159 matrix material Substances 0.000 claims description 13
- 238000012546 transfer Methods 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 abstract description 18
- 238000001514 detection method Methods 0.000 abstract description 7
- 230000009466 transformation Effects 0.000 abstract description 2
- 230000004807 localization Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 230000006866 deterioration Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000005404 monopole Effects 0.000 description 3
- 238000004088 simulation Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000001308 synthesis method Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000001172 regenerating effect Effects 0.000 description 1
- 238000011069 regeneration method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Landscapes
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
- Stereophonic System (AREA)
- Circuit For Audible Band Transducer (AREA)
Abstract
Description
本発明では、マイクロホンアレイで収音した音圧と、収音側のおおまかな音源の位置とを併用した信号変換を行い、空間エイリアシングによる誤差を軽減する。空間フーリエ変換を行う代わりに、音源の位置を利用することで、空間フーリエ変換によるエイリアシングの影響を低減することができ、目的音源の再生音の音色をよくすることができる。
第一実施形態の音場収音再生装置及び方法は、図1に示すように、収音側の空間に配置されているM個のマイクロホン1−iで構成されるマイクロホンアレイと、再生側の空間に配置されているL個のスピーカ2−pで構成されるスピーカアレイとを用いて、収音側の空間の音源Sで発生した音によって形成された収音側の空間の音場を再生側の空間で再現する。なお、収音側の空間及び再生側の空間は互いに異なる空間であってもよいし、同じ空間であってもよい。図1では、再生側の空間においてL個のスピーカ2−pで再現された音源を音源S'(以下、「仮想音源S’」とも表現する)と表現している。
音源位置検出部101は、収音側の空間で、話者や演奏者などの音源Sの位置r- ps=(xps,yps,zps)を検出し、出力する。位置検出においては従来技術を用いればよい。例えば、カメラ3等の画像を入力として、画像から位置r- psを検出してもよいし、マイクロホンアレイで収音した信号pi(t)を入力として、信号pi(t)から音源定位を行って位置r- psを検出してもよい。
フィルタ計算部103は、音源の位置r- ps=(xps,yps,zps)を入力とし、フィルタF(ω)を計算し、出力する。
周波数変換部111は、マイクロホン1−iで収音された信号pi(t)をフーリエ変換により周波数領域信号Pi(ω)に変換する(S1)。生成された周波数領域信号Pi(ω)は、変換フィルタ部113に送られる。ωは周波数である。なお、ωを音速cで割った値k=ω/cを波数として定義する。波数とは、いわゆる空間周波数又は角度スペクトルのことである。例えば、短時間離散フーリエ変換により周波数領域信号Pi(ω)が生成される。もちろん、他の既存の方法により周波数領域信号Pi(ω)を生成してもよい。また、オーバーラップアド等の方法を用いて周波数領域信号Pi(ω)を生成してもよい。入力信号が長い場合や、リアルタイム処理のように連続して信号が入力される場合には、例えば10msごとといったフレームごとに処理を行う。周波数領域信号Pi(ω)は、例えば次式のように定義される。
変換フィルタ部113は、周波数領域信号Pi(ω)とフィルタF(ω)とを入力とし、周波数領域信号Pi(ω)に対してフィルタF(ω)を適用してフィルタ処理後信号Dp(ω)を生成する(S4)。フィルタ処理後信号D(ω)は、周波数逆変換部115に送信される。
周波数逆変換部115は、周波数領域信号Dp(ω)を逆フーリエ変換により時間領域信号dp(t)に変換する(S6)。逆フーリエ変換によりフレーム毎に得られた時間領域信号dp(t)は適宜シフトされて線形和が取られて、連続した時間領域信号となる。逆フーリエ変換は短時間離散逆フーリエ変換等の既存の方法を用いればよい。例えば、離散逆フーリエ変換(IDFT)は例えば次式で定義される。
このような構成により、マイクロホンアレイで収音した音圧と、収音側のおおまかな音源位置とを併用した信号変換を行い、空間エイリアシングによる誤差を軽減することができる。再現された音場における、音質や定位感の劣化の改善を可能にする。特に従来技術では、マイクロホンの数がスピーカの数よりも少ない場合に顕著に音質や定位感の劣化が生じるが、本実施形態であれば、マイクロホンの数がスピーカの数よりも少ない場合にも劣化を改善できる。
なお、制御点4−iは、スピーカアレイの前面に、マイクロホンアレイのマイクロホン1−iに対応するように配置する。マイクロホン1−iと制御点4−iとは、配置が対応していればよく、その配置の形状は、平面状である必要はなく、自由に配置してよい。
第一実施形態と異なる部分を中心に説明する。
第二実施形態では、直線状にスピーカアレイを配置した場合について説明する。
フィルタ計算部103は、音源の位置r- ps=(xps,yps,zps)を入力とし、フィルタF(ω)を計算し、出力する。
このような構成により、第一実施形態と同様の効果を得ることができる。なお、第二実施形態においても、第一実施形態の変形例と同様の変形を行うことができる。
音場収音再生装置を構成する各部は、収音側の空間に配置された収音装置と再生側の空間に配置された再生装置の何れに備えられていてもよい。換言すれば、周波数変換部111、変換フィルタ部113、周波数逆変換部115、音源位置検出部101及びフィルタ計算部103のそれぞれの処理は、収音側の空間に配置された収音装置で実行されてもよいし、再生側の空間に配置された再生装置で実行されてもよい。収音装置で生成された信号は、再生装置に送信される。
Claims (8)
- 複数のマイクロホンが配置されている空間には音源が一つ以上存在し、複数のスピーカが直線状または平面状に波面の進行方向に対し制御点よりも後方に配置されるものとし、ωを周波数とし、
前記複数のスピーカにより再現される仮想音源の位置と前記複数のスピーカの位置とに基づいて求まるスピーカの駆動信号の振幅の予測分布と、前記複数のスピーカの各位置から複数の前記制御点の各位置までの伝達特性とに基づいて求まり、前記仮想音源の位置からの波面を前記制御点で実現するフィルタF(ω)を、前記複数のマイクロホンで収音された信号それぞれの周波数領域信号P(ω)に対して適用してフィルタ処理後信号D(ω)を生成する変換フィルタ部を含む、
音場収音再生装置。 - 請求項5の音場収音再生装置であって、
前記変換フィルタ部は、周波数ωごとに、異なる音源の位置に対するフィルタF(ω)を適用する、
音場収音再生装置。 - 複数のマイクロホンが配置されている空間には音源が一つ以上存在し、複数のスピーカが直線状または平面状に波面の進行方向に対し制御点よりも後方に配置されるものとし、ωを周波数とし、
前記複数のスピーカにより再現される仮想音源の位置と前記複数のスピーカの位置とに基づいて求まるスピーカの駆動信号の振幅の予測分布と、前記複数のスピーカの各位置から複数の前記制御点の各位置までの伝達特性とに基づいて求まり、前記仮想音源の位置からの波面を前記制御点で実現するフィルタF(ω)を、前記複数のマイクロホンで収音された信号それぞれの周波数領域信号P(ω)に対して適用してフィルタ処理後信号D(ω)を生成する変換フィルタステップを含む、
音場収音再生方法。 - 請求項1から請求項6の何れかの音場収音再生装置として、コンピュータを機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013167502A JP5986966B2 (ja) | 2013-08-12 | 2013-08-12 | 音場収音再生装置、方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013167502A JP5986966B2 (ja) | 2013-08-12 | 2013-08-12 | 音場収音再生装置、方法及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015037207A true JP2015037207A (ja) | 2015-02-23 |
JP5986966B2 JP5986966B2 (ja) | 2016-09-06 |
Family
ID=52687529
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013167502A Expired - Fee Related JP5986966B2 (ja) | 2013-08-12 | 2013-08-12 | 音場収音再生装置、方法及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5986966B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2016056410A1 (ja) * | 2014-10-10 | 2017-07-20 | ソニー株式会社 | 音声処理装置および方法、並びにプログラム |
JP2019134314A (ja) * | 2018-01-31 | 2019-08-08 | キヤノン株式会社 | 信号処理装置、信号処理方法、及びプログラム |
WO2021049652A1 (ja) * | 2019-09-12 | 2021-03-18 | 国立大学法人東京大学 | 音響出力装置及び音響出力方法 |
CN113435116A (zh) * | 2021-06-24 | 2021-09-24 | 武汉理工大学 | 一种基于虚拟驾驶台架的声品质自适应设计方法与装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006086921A (ja) * | 2004-09-17 | 2006-03-30 | Sony Corp | オーディオ信号の再生方法およびその再生装置 |
JP2011244306A (ja) * | 2010-05-20 | 2011-12-01 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
JP2012049965A (ja) * | 2010-08-30 | 2012-03-08 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
JP2013048359A (ja) * | 2011-08-29 | 2013-03-07 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
-
2013
- 2013-08-12 JP JP2013167502A patent/JP5986966B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006086921A (ja) * | 2004-09-17 | 2006-03-30 | Sony Corp | オーディオ信号の再生方法およびその再生装置 |
JP2011244306A (ja) * | 2010-05-20 | 2011-12-01 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
JP2012049965A (ja) * | 2010-08-30 | 2012-03-08 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
JP2013048359A (ja) * | 2011-08-29 | 2013-03-07 | Nippon Telegr & Teleph Corp <Ntt> | 音場収音再生装置、方法及びプログラム |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPWO2016056410A1 (ja) * | 2014-10-10 | 2017-07-20 | ソニー株式会社 | 音声処理装置および方法、並びにプログラム |
JP2019134314A (ja) * | 2018-01-31 | 2019-08-08 | キヤノン株式会社 | 信号処理装置、信号処理方法、及びプログラム |
JP7146404B2 (ja) | 2018-01-31 | 2022-10-04 | キヤノン株式会社 | 信号処理装置、信号処理方法、及びプログラム |
WO2021049652A1 (ja) * | 2019-09-12 | 2021-03-18 | 国立大学法人東京大学 | 音響出力装置及び音響出力方法 |
JPWO2021049652A1 (ja) * | 2019-09-12 | 2021-03-18 | ||
JP7373810B2 (ja) | 2019-09-12 | 2023-11-06 | 国立大学法人 東京大学 | 音響出力装置及び音響出力方法 |
CN113435116A (zh) * | 2021-06-24 | 2021-09-24 | 武汉理工大学 | 一种基于虚拟驾驶台架的声品质自适应设计方法与装置 |
Also Published As
Publication number | Publication date |
---|---|
JP5986966B2 (ja) | 2016-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10382849B2 (en) | Spatial audio processing apparatus | |
JP5986966B2 (ja) | 音場収音再生装置、方法及びプログラム | |
WO2015137146A1 (ja) | 音場収音装置および方法、音場再生装置および方法、並びにプログラム | |
JP5734329B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP6087856B2 (ja) | 音場収音再生装置、システム、方法及びプログラム | |
JP5603307B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP5713964B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP6650245B2 (ja) | インパルス応答生成装置及びプログラム | |
Gao et al. | Multizone sound reproduction with adaptive control of scattering effects | |
JP5628219B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP6323901B2 (ja) | 収音装置および収音方法、並びにプログラム | |
JP6087760B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP2017130899A (ja) | 音場推定装置、その方法及びプログラム | |
JP5749221B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP6044043B2 (ja) | 音場平面波展開方法、装置及びプログラム | |
JP5954713B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP5713988B2 (ja) | 音場収音再生装置、方法、およびプログラム | |
JP5713933B2 (ja) | 音源距離測定装置、音響直間比推定装置、雑音除去装置、それらの方法、及びプログラム | |
JP5698164B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP5734328B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP2017112415A (ja) | 音場推定装置、その方法及びプログラム | |
JP5734327B2 (ja) | 音場収音再生装置、方法及びプログラム | |
JP5734267B2 (ja) | 音場収音再生装置、方法、およびプログラム | |
Chern et al. | Voice Direction-Of-Arrival Conversion | |
JP6087850B2 (ja) | 音響伝達特性測定装置、音響伝達特性測定方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150811 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20160715 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160802 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160808 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5986966 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |