JP2024043430A - 音場臨場感再現装置及び音場臨場感再現方法 - Google Patents

Abstract

【課題】アンビソニックスマイクを用いて収音した収音空間内の客席側臨場感の雰囲気を少なくとも１つのサテライト会場内において高精度に再現する。【解決手段】音場臨場感再現装置は、収音空間内に配置される収音デバイスにより収音される収音信号と、収音空間内の１以上の音源の音源信号とを取得する取得部と、音源信号を参照信号とし、収音信号に含まれる参照信号の成分を消去する消去処理を実行する消去部と、消去処理後の信号を符号化処理する符号化部と、符号化処理後の信号に基づいて、収音空間とは異なる再現空間内に配置される複数のスピーカごとに、収音空間内の音場臨場感を再現空間内において再現するためのスピーカ駆動信号を生成する生成部と、複数のスピーカのそれぞれから、スピーカごとのスピーカ駆動信号を出力する音場再生部と、を備える。【選択図】図５

Description

本開示は、音場臨場感再現装置及び音場臨場感再現方法に関する。

昨今、リアルタイムに音場再現（再生）を行うためにシーンベース立体音響再生技術が注目されている。シーンベース立体音響再生技術とは、複数の無指向性マイク素子が剛球上に又は複数の指向性マイクが中空球面上に配置されているアンビソニックスマイクを用いて収音した多チャンネル信号に対して信号処理を施すことにより、視聴環境（空間）を取り囲むように配置されたスピーカを用いてあたかもリスナー（聴取者）がアンビソニックスマイクの設置箇所に存在しているかのような立体的な音場をリアルタイムに再現（再生）する方式である。

音場再現に関する先行技術として、例えば特許文献１が知られている。特許文献１は、被写体に装着されたワイヤレスマイクの収音信号を受信し、複数のマイクロフォンにより音声を収音した各音声信号を基にしてマルチチャネル音声信号を生成する音声収録装置を開示している。この音声収録装置は、ワイヤレスマイクの収音信号をマルチチャネル音声信号の１つ以上の任意のチャネルに割り当て、それぞれ任意の合成比で合成して撮像画像信号とともに記録媒体に記録する。

特開２００６－３１４０７８号公報

ここで、上述したシーンベース立体音響再生技術を用いて、例えば広範なコンサートホール等のライブ会場の客席側にアンビソニックスマイク（上述参照）を配置し、メインステージ等で繰り広げられている演劇等の上演中の客席側の拍手、どよめき、ざわめき、歓声等の臨場感（以下、「客席側臨場感」と称する場合がある）を収音し、その客席側臨場感をライブ会場とは異なる１つ以上のサテライト会場において再現することを想定する。特許文献１には、マイクロフォンにより収音された音場の雰囲気とワイヤレスマイクにより収音された音場の雰囲気との関係が詳細に開示されておらず、上述した想定の実現に特許文献１の技術を適用することが困難であると考えられる。また、アンビソニックスマイクは、客席側に配置されたとしても、客席側臨場感だけでなく例えばステージ上の役者等の演者の台詞等の発話音声、効果音、ＢＧＭ（Ｂａｃｋｇｒｏｕｎｄ Ｍｕｓｉｃ）、独自音源等の演奏音がライブ会場内の空間を伝播した音信号を収音する可能性が高い。この場合、ライブ会場内の客席側臨場感以外の他の音成分が混入するため、サテライト会場にいる聴取者に向けて客席側臨場感の音場を高精度に再現することが困難であったと考えられる。特許文献１では、上述したライブ会場内を収音した客席側臨場感による音場をサテライト会場内において高感度に再現するための解決の道筋が提示されていない。

本開示は、上述した従来の状況に鑑みて案出され、アンビソニックスマイクを用いて収音した収音空間内の客席側臨場感の雰囲気を少なくとも１つのサテライト会場内において高精度に再現する音場臨場感再現装置及び音場臨場感再現方法を提供することを目的とする。

本開示は、収音空間内に配置される収音デバイスにより収音される収音信号と、前記収音空間内の１以上の音源の音源信号とを取得する取得部と、前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行する消去部と、前記消去処理後の信号を符号化処理する符号化部と、前記符号化処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成する生成部と、前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力する音場再生部と、を備える、音場臨場感再現装置を提供する。

また、本開示は、収音空間内に配置される収音デバイスにより収音される収音信号を少なくとも取得する取得部と、前記収音空間内の１以上の音源の音源信号を符号化処理する符号化部と、前記符号化処理後の前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行する消去部と、前記消去処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成する生成部と、前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力する音場再生部と、を備える、音場臨場感再現装置を提供する。

また、本開示は、収音空間内に配置される収音デバイスにより収音される収音信号と、前記収音空間内の１以上の音源の音源信号とを取得するステップと、前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行するステップと、前記消去処理後の信号を符号化処理するステップと、前記符号化処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成するステップと、前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力するステップと、を有する、音場臨場感再現方法を提供する。

また、本開示は、収音空間内に配置される収音デバイスにより収音される収音信号を少なくとも取得するステップと、前記収音空間内の１以上の音源の音源信号を符号化処理するステップと、前記符号化処理後の前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行するステップと、前記消去処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成するステップと、前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力するステップと、を有する、音場臨場感再現方法を提供する。

なお、これらの包括的または具体的な態様は、システム、装置、方法、集積回路、コンピュータプログラム、または、記録媒体で実現されてもよく、システム、装置、方法、集積回路、コンピュータプログラムおよび記録媒体の任意な組み合わせで実現されてもよい。

本開示によれば、アンビソニックスマイクを用いて収音した収音空間内の客席側臨場感の雰囲気を少なくとも１つのサテライト会場内において高精度に再現できる。

アンビソニックスマイクを用いたシーンベース立体音響再生技術における音場収音から音場再現までの概念を模式的に示す図 次数ｎ及び度数ｍに対する球面調和関数展開に基づくアンビソニックス成分の基底の一例を示す図 音場臨場感再現システムの動作概要例を模式的に示す図 実施の形態１に係る音場臨場感再現システムのシステム構成例を示すブロック図 図４の音場臨場感再現システムにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図 実施の形態１に係る音場臨場感再現装置による音場臨場感再現の動作手順例を時系列に示すフローチャート 実施の形態１の変形例に係る音場臨場感再現システムのシステム構成例を示すブロック図 図７の音場臨場感再現システムにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図 実施の形態１の変形例に係る音場臨場感再現装置による音場臨場感再現の動作手順例を時系列に示すフローチャート 実施の形態２に係る音場臨場感再現システムのシステム構成例を示すブロック図 図１０の音場臨場感再現システムにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図 実施の形態２に係る音場臨場感再現装置による音場臨場感再現の動作手順例を時系列に示すフローチャート 実施の形態２の変形例に係る音場臨場感再現システムのシステム構成例を示すブロック図 図１３の音場臨場感再現システムにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図 実施の形態２の変形例に係る音場臨場感再現装置による音場臨場感再現の動作手順例を時系列に示すフローチャート

以下、図面を適宜参照して、本開示に係る音場臨場感再現装置及び音場臨場感再現方法を具体的に開示した実施の形態について、詳細に説明する。ただし、必要以上に詳細な説明は省略する場合がある。例えば、すでによく知られた事項の詳細説明及び実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面及び以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の記載の主題を限定することは意図されていない。

以下の実施の形態では、収音空間（例えばライブ会場）内の音、音楽、人の声等の音源信号を収音する収音デバイスとしてアンビソニックスマイクを用いたシーンベース立体音響再生技術を例示して説明する。このシーンベース立体音響再生技術では、アンビソニックスマイクを構成する複数のマイク素子で収音した信号（収音信号）或いはモノラル信号として表現可能な点音源を、球面調和関数を用いた中間表現ＩＴＭＲ１（図１参照）或いはＢフォーマット信号として表現する（エンコードする）ことにより、全方位から到来する音場をアンビソニックス信号領域（後述参照）において統一的に取り扱う。更に、この中間表現をデコード（復号化）することによりスピーカ駆動信号を生成し、再現空間（例えばサテライト会場）内での所望の音場再現を実現する。

以下、「音場」とは、音が広がる空間（場所を含む）のことと定義する。音場内に伝播する音には、対象となる空間内で伝播している１以上の音源からの音が含まれる。ここで、音源とは、例えばライブ会場ＬＶ１等の収音空間のメインステージ上で行われている各種の演奏（例えばバンド演奏、ミュージカル演劇）の音源だけでなく、ライブ会場ＬＶ１内のメインステージから離れた客席側で生じる歓声、ざわめき、どよめき、拍手等の臨場感を与える音も含まれる。

（実施の形態１）
まず、図１を参照して、シーンベース立体音響再生技術の概念について説明する。図１は、アンビソニックスマイクＡＭＢ１を用いたシーンベース立体音響再生技術における音場収音から音場再現までの概念を模式的に示す図である。アンビソニックスマイクＡＭＢ１は、収音空間（例えばライブ会場ＬＶ１）内の客席側所定位置に配置される。ライブ会場ＬＶ１では、その空間内を伝搬している音信号がアンビソニックスマイクＡＭＢ１により収音される。例えば、ライブ会場ＬＶ１のメインステージで複数人によるバンド演奏がなされていれば、ボーカル（歌声）、ベース、ギター、ドラム等の各種の音源による音信号が収音される。また、ミュージカル演劇がなされていれば、１人以上の役者等の演者（音源）の発話による音声信号が収音される。一方、客席側で生じる歓声、ざわめき、どよめき、拍手等の客席側臨場感を与える音信号も、アンビソニックスマイクＡＭＢ１により収音される。

収音デバイスの一例としてのアンビソニックスマイクＡＭＢ１は、４つのマイク素子Ｍｃ１、Ｍｃ２、Ｍｃ３、Ｍｃ４を備える。マイク素子Ｍｃ１～Ｍｃ４のそれぞれは、方向Ｄｒ１を正面方向とした場合に、図１中の立方体ＣＢ１の中心から４つの頂点を向くように中空配置され、各頂点方向に対する単一指向性を有している。マイク素子Ｍｃ１は、アンビソニックスマイクＡＭＢ１の前方左上（ＦＬＵ：Ｆｒｏｎｔ Ｌｅｆｔ Ｕｐ）を向き、その前方左上（ＦＬＵ）の方向の音を主に収音する。マイク素子Ｍｃ２は、アンビソニックスマイクＡＭＢ１の前方右下（ＦＲＤ：Ｆｒｏｎｔ Ｒｉｇｈｔ Ｄｏｗｎ）を向き、その前方右下（ＦＲＤ）の方向の音を主に収音する。マイク素子Ｍｃ３は、アンビソニックスマイクＡＭＢ１の後方左下（ＢＬＤ：Ｂａｃｋ Ｌｅｆｔ Ｄｏｗｎ）を向き、その後方左下の方向の音を主に収音する。マイク素子Ｍｃ４は、アンビソニックスマイクＡＭＢ１の後方右上（ＢＲＵ：Ｂａｃｋ Ｒｉｇｈｔ Ｕｐ）を向き、その後方右上の方向の音を主に収音する。

これらの４方向（つまり、ＦＬＵ、ＦＲＤ、ＢＬＤ、ＢＲＵ）の音の収音信号は、Ａフォーマット信号と呼ばれる。Ａフォーマット信号は、そのままでは使用できず、指向特性（指向性）を有する中間表現ＩＴＭＲ１としてのＢフォーマット信号に変換される。Ｂフォーマット信号は、例えば、全方向（全方位）の音のＢフォーマット信号Ｗ、前後方向の音のＢフォーマット信号Ｘ、左右方向の音のＢフォーマット信号Ｙ、上下方向の音のＢフォーマット信号Ｚを有する。Ａフォーマット信号は、次に示す変換式により、Ｂフォーマット信号に変換される。

Ｗ＝ＦＬＵ＋ＦＲＤ＋ＢＬＤ＋ＢＲＵ
Ｘ＝ＦＬＵ＋ＦＲＤ－ＢＬＤ－ＢＲＵ
Ｙ＝ＦＬＵ－ＦＲＤ＋ＢＬＤ－ＢＲＵ
Ｚ＝ＦＬＵ－ＦＲＤ－ＢＬＤ＋ＢＲＵ

Ｂフォーマット信号Ｗ、Ｘ、Ｙ、Ｚを合成することにより、前後、左右、上下の全方位の音の信号が得られる。そして、Ｂフォーマット信号Ｗ、Ｘ、Ｙ、Ｚのそれぞれの信号レベルを変更させて合成することにより、前後、左右、上下の全方位のうち任意の指向特性を有する音の信号を生成することができる。例えば図１に示すように、立方体でモデル化される再現空間（例えばサテライト会場ＳＴＬ１）内の各頂点部分に、合計８つのサテライトスピーカＳＰｋ１、ＳＰｋ２、ＳＰｋ３、ＳＰｋ４、ＳＰｋ５、ＳＰｋ６、ＳＰｋ７、ＳＰｋ８が配置され、収音空間（例えばライブ会場ＬＶ１）と同様（つまり、前後、左右、上下の方向が平行或いは同方向）の３次元座標系を考える。なお、ここでは説明を分かり易くするために、サテライトスピーカの個数を８であると例示しているが、その個数は８に限定されないことは言うまでもない。

なお、サテライトスピーカＳＰｋ１～ＳＰｋ８のそれぞれの位置は、再現空間（例えばサテライト会場ＳＴＬ１）の基準位置（例えば中心位置ＬＳＰ１）からの既定距離と角度（方位角θ_ｉ及び仰角φ_ｉ）とにより特定可能である。図１において、ｉは再現空間（例えばサテライト会場ＳＴＬ１）内に配置されているサテライトスピーカを示す変数であり、図１の例では１から８までのいずれかの整数をとる。

再現空間（例えばサテライト会場ＳＴＬ１）の中心位置ＬＳＰ１にユーザであるリスナー（聴取者）が存在し、正面方向（Ｆｒｏｎｔ）を向いているとする。このような状況下において、収音空間（例えばライブ会場ＬＶ１）内で収音されたＡフォーマット信号を用いた符号化処理により得られたＢフォーマット信号Ｗ、Ｘ、Ｙ、Ｚのデータと再現空間（例えばサテライト会場ＳＴＬ１）内のサテライトスピーカＳＰｋ１～ＳＰｋ８のそれぞれの方向とに基づいて、収音空間（例えばライブ会場ＬＶ１）内の音場を再現空間（例えばサテライト会場ＳＴＬ１）内で自由に再現することができる。つまり、再現空間（例えばサテライト会場ＳＴＬ１）にユーザであるリスナー（聴取者）が存在する場合に、リスナーの正面方向を基準方向とし、その基準方向から任意の３次元方向の音を再現出力することが可能となる。

次に、図２を参照して、次数ｎ及び度数ｍに対する球面調和関数展開に基づくアンビソニックス成分の基底について説明する。図２は、次数ｎ及び度数ｍに対する球面調和関数展開に基づくアンビソニックス成分の基底の一例を示す図である。

図２の横軸（ｍ）は度数（ｄｅｇｒｅｅ）を示し、図２の縦軸（ｎ）は次数（ｏｒｄｅｒ）を示す。度数ｍは、－ｎから＋ｎまでの値をとる。ｎ＝Ｎ次までの球面調和関数は合計（Ｎ＋１）^２個の基底を含む。例えば、ｎ＝Ｎ＝０である場合、１個の基底（つまり、全方位のＢフォーマット信号Ｗ）が得られる。また例えば、ｎ＝Ｎ＝１である場合、４個の基底（つまり、（ｎ、ｍ）＝（０、０）に対応する全方位のＢフォーマット信号Ｗ、（ｎ、ｍ）＝（１、－１）に対応する前後方向のＢフォーマット信号Ｘ、（ｎ、ｍ）＝（１、０）に対応する上下方向のＢフォーマット信号Ｚ、（ｎ、ｍ）＝（１、１）に対応する左右方向のＢフォーマット信号Ｙ）が得られる。なお、ｎ＝Ｎ＝２以降も同様であるため、説明を省略する。

球面調和関数はｎとｍの増加に対して空間的な周期性が増す性質を有することが知られている。このため、ｎとｍの組み合わせによって異なる方向パターン（指向特性）のＢフォーマット信号を表現することが可能となる。次数ｎ及び度数ｍに対する次元をアンビソニックスチャネルナンバリング（ＡＣＮ：Ａｍｂｉｓｏｎｉｃｓ Ｃｈａｎｎｅｌ Ｎｕｍｂｅｒｉｎｇ）に基づいてＫ＝ｎ（ｎ＋１）＋ｍと定義すると、球面調和関数を式（１）のようにベクトル形式で表現可能である。式（１）において、上添字のＴは転置を示す。

次に、図３を参照して、音場臨場感再現システムの動作概要例について説明する。図３は、音場臨場感再現システムの動作概要例を模式的に示す図である。図３では、アンビソニックスマイクＡＭＢ１が配置される収音空間は、例えばボーカル、ベース、ギター、ドラム等の各種の音源によるバンド演奏が行われるライブ会場ＬＶ１を例示して説明する。但し、上述したように、収音空間であるライブ会場ＬＶ１ではバンド演奏に限らず、１人以上の役者等の演者が演じているミュージカルの上演、複数の楽器の演奏によるコンサート若しくはオーケストラの演奏であってもよく、以下同様である。

図３に示すように、ライブ会場ＬＶ１にはメインステージＳＴＧ１が設けられ、このメインステージＳＴＧ１上においてバンド演奏が行われている。バンド演奏では、例えばボーカル（音源の一例）による歌声等の音声信号ＳＳ２、ベース（音源の一例）によるベース音の音信号ＳＳ１、ギター（音源の一例）によるギター音の音信号ＳＳ３が広くライブ会場ＬＶ１内の空間内を伝搬して客席側に到達する。これらの信号は各音源位置から直接空間内を伝達して客席側に到達することもあれば、ライブ会場ＬＶ１内に備えられたスピーカなどの拡声装置を通じて再生されて客席側に到達することもある。アンビソニックスマイクＡＭＢ１は、客席側臨場感の音を主に収音することを目的として、ライブ会場ＬＶ１の客席側所定位置（例えば客席の中心位置）に配置されている。このため、アンビソニックスマイクＡＭＢ１は、上述したバンド演奏中の客席側の歓声、どよめき、ざわつき、拍手等の客席側臨場感を与える音を主に収音する。

ところが、上述したように、バンド演奏中のベースの音信号ＳＳ１、ボーカルの音声信号ＳＳ２、ギターの音信号ＳＳ３は、ライブ会場ＬＶ１の空間内を伝搬する。このため、音信号ＳＳ１、音声信号ＳＳ２、音信号ＳＳ３の拡散音（残響音を含む。以下同様。）の成分ＤＳ１、ＤＳ２、ＤＳ３がアンビソニックスマイクＡＭＢ１により音信号として収音されてしまう。従って、アンビソニックスマイクＡＭＢ１には、本来収音されて欲しくない拡散音の成分ＤＳ１、ＤＳ２、ＤＳ３が収音されることにより、従来のシーンベース立体音響再生技術では、サテライト会場ＳＴＬ１においてライブ会場ＬＶ１の客席側臨場感の音を高精度に再現することは難しかった。

そこで、以下の実施の形態では、アンビソニックスマイクを用いて収音した収音空間内の客席側臨場感の雰囲気を少なくとも１つのサテライト会場内において高精度に再現する音場臨場感再現システムの例を説明する。

次に、図４及び図５を参照して、実施の形態１に係る音場臨場感再現システム１００のシステム構成並びに動作概要について説明する。図４は、実施の形態１に係る音場臨場感再現システム１００のシステム構成例を示すブロック図である。図５は、図４の音場臨場感再現システム１００における音場臨場感収音から音場臨場感再現までの動作概要例を示す図である。

音場臨場感再現システム１００は、音場臨場感収音装置１０と、音場臨場感再現装置２０とを含む。音場臨場感収音装置１０と音場臨場感再現装置２０とはネットワークＮＷ１を介して互いにデータ通信が可能に接続されている。ネットワークＮＷ１は、有線ネットワークでもよいし、無線ネットワークでもよい。有線ネットワークは、例えば有線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、有線ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、電力線通信（ＰＬＣ：Ｐｏｗｅｒ Ｌｉｎｅ Ｃｏｍｍｕｎｉｃａｔｉｏｎ）のうち少なくとも１つが該当し、他の有線通信可能なネットワーク構成でもよい。一方、無線ネットワークは、Ｗｉ－Ｆｉ（登録商標）等の無線ＬＡＮ、無線ＷＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信、４Ｇ或いは５Ｇ等の移動体携帯通信網のうち少なくとも１つが該当し、他の無線通信可能なネットワーク構成でもよい。

音場臨場感収音装置１０は、収音空間（例えばライブ会場ＬＶ１）に配置され、アンビソニックスマイクＡＭＢ１と、Ａ／Ｄ変換部７と、個別収音マイクＭ１、…、Ｍｎとを含む。ここでいうｎは、ライブ会場ＬＶ１内の個別音源（例えばバンド演奏であればボーカル、ベース、ギター等の独立した音源）の数を示し、具体的には２以上の整数である。なお、音場臨場感収音装置１０は、少なくともアンビソニックスマイクＡＭＢ１を有していればよく、Ａ／Ｄ変換部７は音場臨場感再現装置２０に設けられてもよい。

アンビソニックスマイクＡＭＢ１は、４つのマイク素子Ｍｃ１、Ｍｃ２、Ｍｃ３、Ｍｃ４を備え、マイク素子Ｍｃ１において前方左上方向（図１参照）の音を収音し、マイク素子Ｍｃ２において前方右下方向（図１参照）の音を収音し、マイク素子Ｍｃ３において後方左下方向（図１参照）の音を収音し、後方右上方向（図１参照）の音を収音する。なお、アンビソニックスマイクＡＭＢ１は、中空配置された４つのマイク素子Ｍｃ１、Ｍｃ２、Ｍｃ３、Ｍｃ４よりも多くの単一指向性を有するマイク素子を備えていてもよく、また、剛球上に配置された無指向性を有するマイク素子を備えていても良い。多数のマイク素子を備えたアンビソニックスマイクを用いることにより、音場臨場感再現装置２０の符号化部１３において、２次以上オーダーのアンビソニックス信号を合成することが可能となる。アンビソニックスマイクＡＭＢ１を構成する各マイク素子により収音された信号（収音信号）は、Ａ／Ｄ変換部７に入力される。

少なくともＡ／Ｄ変換部７は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＧＰＵ（Ｇｒａｐｈｉｃａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の電子デバイスのうち少なくとも１つが実装された半導体チップ若しくは専用のハードウェアにより構成される。

Ａ／Ｄ変換部７は、アンビソニックスマイクＡＭＢ１を構成する各マイク素子からのアナログ形式の収音信号をディジタル形式の収音信号に変換する。この変換後の収音信号は、音場臨場感収音装置１０が備える通信インターフェース（図示略）及びネットワークＮＷ１を介して、音場臨場感再現装置２０に送信される。

個別収音マイクＭ１は、ライブ会場ＬＶ１のメインステージＳＴＧ１（図３参照）上のバンド演奏或いはミュージカル演劇等のイベント発生中のユニークな音源（例えばバンド演奏のボーカル、或いはミュージカル演劇の演者）から生じる個別音源音（第１の音源）を収音する。個別収音マイクＭ１は、例えばバンド演奏のボーカル、或いはミュージカル演劇の演者により装着されるヘッドセットマイクでよい。個別収音マイクＭ１により収音された個別音源音信号は、音場臨場感収音装置１０が備える通信インターフェース（図示略）及びネットワークＮＷ１を介して、音場臨場感再現装置２０に送信される。

同様に、個別収音マイクＭｎは、ライブ会場ＬＶ１のメインステージＳＴＧ１（図３参照）上のバンド演奏或いはミュージカル演劇等のイベント発生中のユニークな音源（例えばバンド演奏のギター、或いはミュージカル演劇中の効果音若しくはＢＧＭ（Ｂａｃｋｇｒｏｕｎｄ Ｍｕｓｉｃ））から生じる個別音源音（第ｎの音源）を収音する。個別収音マイクＭｎは、例えばバンド演奏のギター奏者により装着されるヘッドセットマイク、或いはミュージカル演劇中の効果音若しくはＢＧＭを収音可能なマイクでよい。個別収音マイクＭｎにより収音された個別音源音信号は、音場臨場感収音装置１０が備える通信インターフェース（図示略）及びネットワークＮＷ１を介して、音場臨場感再現装置２０に送信される。

音場臨場感再現装置２０は、再現空間（例えばサテライト会場ＳＴＬ１）に配置され、エコーキャンセル部２１、…、２ｎと、符号化部２２と、マイク素子方向指定部２３と、スピーカ方向指定部２４と、復号化部２５と、音場再生部２６と、サテライトスピーカＳＰｋ１、…、ＳＰｋｐとを含む。ここでいうｐは、サテライト会場ＳＴＬ１内に配置されるサテライトスピーカの数を示し、具体的には２以上の整数である。また、エコーキャンセル部２１～２ｎの個数を示すｎと、個別収音マイクＭ１～Ｍｎの個数を示すｎとは同一である。つまり、個別収音マイクが収音する音源の種類数と同数のエコーキャンセル部が音場臨場感再現装置２０内に設けられる。

エコーキャンセル部２１は、音場臨場感収音装置１０（Ａ／Ｄ変換部７側）から送られたアンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号を入力し、更に、音場臨場感収音装置１０（個別収音マイクＭ１側）から送られた第１の音源（上述参照）の個別音源音信号を第１の参照信号Ｍ１Ｓとして入力する。エコーキャンセル部２１は、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる第１の参照信号Ｍ１Ｓ（つまり、個別収音マイクＭ１が収音した個別音源音信号）の成分を消去するための消去処理（例えばエコーキャンセル処理）を実行する。エコーキャンセル部２１は、消去処理後の信号（第１の収音信号）を符号化部２２に出力する。

同様に、エコーキャンセル部２ｎは、音場臨場感収音装置１０（Ａ／Ｄ変換部７側）から送られたアンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号を入力し、更に、音場臨場感収音装置１０（個別収音マイクＭｎ側）から送られた第ｎの音源（上述参照）の個別音源音信号を第ｎの参照信号ＭｎＳとして入力する。エコーキャンセル部２ｎは、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる第ｎの参照信号ＭｎＳ（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を消去するための消去処理（例えばエコーキャンセル処理）を実行する。エコーキャンセル部２ｎは、消去処理後の信号（第ｎの収音信号）を符号化部２２に出力する。

ここで、エコーキャンセル部２１～２ｎのそれぞれは、例えば時間領域上で動作する適応フィルタを用いたエコーキャンセラとして構成してよい。このエコーキャンセラは、例えばＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成することができる。従って、図５に示すように、エコーキャンセル部２１～２ｎのそれぞれは、アンビソニックスマイクＡＭＢ１のマイク素子の数（例えば４）と同数のＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒを用いて構成可能である。このＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒは、例えば参考非特許文献において開示されている構成でよい。この構成を用いることにより、特に参照信号間に相関が無い場合（言い換えると、クロストーク成分が実質的に含まれないと見做せる程度の所定閾値未満となる場合）には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる参照信号（つまり、個別収音マイクが収音した個別音源音信号）の成分を高精度に消去（抑圧）することが可能となる。また、エコーキャンセル部２１～２ｎは時間領域信号をＤＦＴ（Ｄｉｓｃｒｅｔｅ Ｆｏｕｒｉｅｒ Ｔｒａｎｓｆｏｒｍ）などにより順変換した上で周波数領域上やサブバンド領域上の適応フィルタを用いたエコーキャンセル処理として実現しても良く、キャンセル後の信号をＩＦＦＴ（Ｉｎｖｅｒｓｅ Ｆａｓｔ Ｆｏｕｒｉｅｒ Ｔｒａｎｓｆｏｒｍ）などにより時間領域へと逆変換した上で後段の処理を行っても良い。

＜参考非特許文献＞ ５章 音響エコーキャンセラ、「適応フィルタの構成例」（図５・２参照）、ｐ４／（１７）、電子情報通信学会、２０１２年、［令和４年９月２日検索］、インターネット＜ＵＲＬ：ｈｔｔｐｓ：／／ｗｗｗ．ｉｅｉｃｅ－ｈｂｋｂ．ｏｒｇ／ｆｉｌｅｓ／０２／０２ｇｕｎ＿０６ｈｅｎ＿０５．ｐｄｆ＞

なお、エコーキャンセル部２１～２ｎのそれぞれは収音空間（例えばライブ会場ＬＶ１）内を伝搬した個別音源音を消去（抑圧）することを目的として設けられる。このため、エコーキャンセル部２１～２ｎのそれぞれは、符号化部２２とともに収音空間（例えばライブ会場ＬＶ１）側に設けられてもよいし、符号化部２２とともに再現空間（例えばサテライト会場ＳＴＬ）側に設けられていてもよい。この場合、収音空間（例えばライブ会場ＬＶ１）側に設けた場合、符号化部２２の出力である１次オーダーアンビソニックス信号（つまり、客席側臨場感）の成分のみが音場臨場感再現装置２０に送られることになる。一方、再現空間（例えばサテライト空間ＳＴＬ１）側に設けた場合、符号化部２２の出力である１次オーダーアンビソニックス信号（つまり、客席側臨場感）の成分と個別音源音信号とが音場臨場感再現装置２０に送られることになる。また、エコーキャンセル部２１～２ｎのみを収音空間（例えばライブ会場ＬＶ１）側に設け、符号化部２２を再現空間（例えばサテライト会場ＳＴＬ）に設けても良い。この場合、エコーキャンセル部２ｎの出力信号の成分のみが音場臨場感再現装置２０に送られることになる。

また、再現空間（例えばサテライト会場ＳＴＬ１）側では、音場臨場感再現装置２０は、音場臨場感収音装置１０の個別収音マイクＭ１～Ｍｎのそれぞれにより収音された個別音源音信号を音場臨場感の再現目的のためにサテライトスピーカＳＰｋ１～ＳＰｋｐのそれぞれ、或いは個別音源音信号用に設けた他のサテライトスピーカ（図示略）から出力してもよい。

ここで、符号化部２２による符号化処理の詳細について説明する。

一般的に、球面上の任意の角度（θ、φ）に対し半径ｒの位置で観測（収音）される音圧ｐは波動方程式の球面調和関数領域における内部問題の解として、波数ｋに対し式（２）の球面調和関数を基底として式（４）と展開されることが知られている。式（４）において、Ａ^ｍ _ｎは展開係数であり、Ｒ_ｎ（ｋｒ）は動径関数項である。また、次数ｎに関する無限和は有限次数Ｎで打ち切ることで近似され、この打ち切り次数Ｎに応じて音場再現の精度が変化する。以下、打ち切り次数をＮとして表現する。

式（６）において、ｉは虚数単位であり、ｊ_ｎ（ｋｒ）はｎ次の球ベッセル関数、ｊ^’ _ｎ（ｋｒ）はその導関数である。本開示においては、この平面波に対する展開係数ベクトルγ^ｍ _ｎを、符号化部２２による符号化処理の出力であるＢフォーマット信号（中間表現）として取り扱う。以下、この展開係数ベクトルを、時間領域と異なるアンビソニックス領域上のアンビソニックス領域信号（ａｍｂｉｓｏｎｉｃｓ ｄｏｍａｉｎ ｓｉｇｎａｌ）又は単にアンビソニックス信号と称する場合がある。

より具体的には、符号化部２２による符号化処理では、エコーキャンセル部２１～２ｎのそれぞれから出力された参照信号の成分の消去処理後の時間領域信号（ｔｉｍｅ ｄｏｍａｉｎ ｓｉｇｎａｌ）である収音信号をアンビソニックス信号（例えば１次オーダーアンビソニックス信号）へと変換し、このアンビソニックス信号（例えば１次オーダーアンビソニックス信号）は復号化部２５によりデコード処理されてスピーカ駆動信号に変換される。

音場再生部２６は、復号化部２５から出力されたサテライトスピーカごとのディジタル形式のスピーカ駆動信号をアナログ形式のスピーカ駆動信号に変換して信号増幅し、対応するサテライトスピーカから出力（再生）する。

サテライトスピーカＳＰｋ１、…、ＳＰｋｐは、立方体でモデル化される再現空間（例えばサテライト会場ＳＴＬ１）の各頂点部分（図１参照）に配置され、音場再生部２６からのスピーカ駆動信号に基づいて音場を再生（再現）する。なお、スピーカ設置数は再現したい音場によって変化させてよく、特定の方位に対する再現を行わない場合や、トランスオーラルシステムやＶＢＡＰ（Ｖｅｃｔｏｒ Ｂａｓｅｄ Ａｍｐｌｉｔｕｄｅ Ｐａｎｎｉｎｇ）法など一般的に知られた仮想音像生成方式を組み合わせることによりｐ個（例えば図１の例では８個）よりも少ないサテライトスピーカを用いて音場再現を行っても良い。逆に、ｐ個（例えば図１の例では８個）よりも多くのサテライトスピーカを用いた音場再現を行っても良い。また、スピーカ設置位置はサテライト会場ＳＴＬ１の基準位置（例えば中心位置ＬＳＰ１）を取り囲むように設置されていれば再現空間（例えばサテライト会場ＳＴＬ１）の各頂点部分以外であっても良い。音場再生部２６はサテライトスピーカの代わりに聴取者（ユーザ）が装着しているヘッドホンやイヤホンなどの両耳への再生装置に信号を出力しても良い。また、音場再生部２８は、聴取者（ユーザ）の両耳への再生装置（例えば、上述したヘッドホンやイヤホン）に信号を供給する際は後述するデコード処理によって方位角＋－９０°に対応した再生信号を生成しても良いし、頭部を包囲する複数の方向に対して仮想音像を生成し、それら複数の角度に対応したＨＲＴＦ（Ｈｅａｄ Ｒｅｌａｔｅｄ Ｔｒａｎｓｆｅｒ Ｆｕｎｃｔｉｏｎ）などの立体音像をユーザに知覚させるための伝達特性を対応した方向の仮想音像に対して周波数領域で乗算又は時間領域で畳み込むことで再生信号を生成しても良い。これにより、サテライト会場ＳＴＬ１に配置されたサテライトスピーカＳＰｋ１～ＳＰｋｐのそれぞれからに限った音場再現となるのではなく、サテライト会場ＳＴＬ１に配置された聴取者（ユーザ）が装着している再生装置（例えば、上述したヘッドホンやイヤホン）への音場再現も可能となる。

ここで、復号化部２５による処理の詳細について説明する。

次に、図６を参照して、音場臨場感再現装置２０による音場臨場感再現の動作手順について説明する。図６は、実施の形態１に係る音場臨場感再現装置２０による音場臨場感再現の動作手順例を時系列に示すフローチャートである。

図６において、音場臨場感収音装置１０のアンビソニックスマイクＡＭＢ１は、収音空間（例えばライブ会場ＬＶ１）内で配置されている客席側所定位置の周囲で生じている音（例えば客席側臨場感を与える音）を収音する（ステップＳｔ２１）。このステップＳｔ２１で収音されたアンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号は、音場臨場感再現装置２０Ｂに送信される。但し、上述したように、ステップＳｔ２１で収音される音には、客席側臨場感を与える音だけでなく、収音空間（例えばライブ会場ＬＶ１）のメインステージＳＴＧ１（図３参照）での演奏或いは演劇等による１以上の音源からの音も含まれる。また、収音空間（例えばライブ会場ＬＶ１）のメインステージＳＴＧ１（図３参照）での演奏或いは演劇等による１以上の音源からの個別収音マイクＭ１～Ｍｎのそれぞれにより収音された個別音源音（言い換えると、第１の参照信号Ｍ１Ｓ～第ｎの参照信号ＭｎＳ）も音場臨場感再現装置２０に送信される（ステップＳｔ２１）。

音場臨場感再現装置２０は、エコーキャンセル部２１～２ｎのそれぞれにおいて、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号を主信号、個別収音マイクＭ１～Ｍｎのそれぞれの収音信号を参照信号としたエコーキャンセル処理（上述参照）を時間軸上で参照信号ごとに繰り返して実行する（ステップＳｔ２２）。より具体的には、音場臨場感再現装置２０のエコーキャンセル部２１は、ステップＳｔ２１で送られた各種の信号（具体的には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号、対応する第１の参照信号Ｍ１Ｓ）を入力し、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる第１の参照信号Ｍ１Ｓ（つまり、個別収音マイクＭ１が収音した個別音源音信号）の成分を消去するための消去処理（例えばエコーキャンセル処理）を時間軸上で実行する（ステップＳｔ２２）。同様に、音場臨場感再現装置２０のエコーキャンセル部２ｎは、ステップＳｔ２１で送られた各種の信号（具体的には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号、対応する第ｎの参照信号ＭｎＳ）を入力し、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる第ｎの参照信号ＭｎＳ（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を消去するための消去処理（例えばエコーキャンセル処理）を時間軸上で実行する（ステップＳｔ２２）。

以上により、実施の形態１に係る音場臨場感再現装置２０は、収音空間（ライブ会場ＬＶ１）内に配置される収音デバイス（アンビソニックスマイクＡＭＢ１）により収音される収音信号（拡散音の成分ＤＳ１～ＤＳ３）と、収音空間内の１以上の音源の音源信号（音信号ＳＳ１、音声信号ＳＳ２、音信号ＳＳ３）とを取得する取得部（エコーキャンセル部２１～２ｎ）と、その音源信号を参照信号とし、収音信号に含まれる参照信号の成分を消去する消去処理を時間軸上で実行する消去部（エコーキャンセル部２１～２ｎ）と、消去処理後の信号を符号化処理する符号化部２２と、符号化処理後の信号に基づいて、収音空間とは異なる再現空間（サテライト会場ＳＴＬ１）内に配置される複数のスピーカ（サテライトスピーカＳＰｋ１～ＳＰｋｐ）ごとに、収音空間内の音場臨場感を再現空間内において再現するためのスピーカ駆動信号を生成する生成部（復号化部２５）と、複数のスピーカのそれぞれから、スピーカごとのスピーカ駆動信号を出力する音場再生部２６と、を備える。これにより、実施の形態１に係る音場臨場感再現装置２０は、アンビソニックスマイクＡＭＢ１が主に収音した収音空間（ライブ会場ＬＶ１）内の客席側臨場感の雰囲気を、アンビソニックスマイクＡＭＢ１により収音されるライブ会場ＬＶ１内の１以上の個別音源（参照信号）の成分を時間軸上で消去することにより、少なくとも１つのサテライト会場内において高精度に再現することができる。

また、音場臨場感再現装置２０は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備える複数のマイク素子Ｍｃ１～Ｍｃ４の方向情報を指定するマイク素子方向指定部２３を更に備える。符号化部２２は、複数のマイク素子Ｍｃ１～Ｍｃ４のそれぞれの方向情報と消去処理後の信号とを用いて、符号化処理を実行する。これにより、音場臨場感再現装置２０は、アンビソニックスマイクＡＭＢ１が備えるマイク素子Ｍｃ１～Ｍｃ４のそれぞれの方向情報を加味して複数の方向解像度（図１のＢフォーマット信号参照）を有するアンビソニックス信号を生成できる。

また、音場臨場感再現装置２０は、再現空間（サテライト会場ＳＴＬ１）内の複数のスピーカ（サテライトスピーカＳＰｋ１～ＳＰｋｐ）の方向情報を指定するスピーカ方向指定部２４を更に備える。生成部（復号化部２５）は、複数のスピーカのそれぞれの方向情報と符号化処理後の信号とを用いて、複数のスピーカのそれぞれごとのスピーカ駆動信号をアンビソニックス領域上で生成する。これにより、音場臨場感再現装置２０は、サテライト会場ＳＴＬ１の空間内に配置されている複数のサテライトスピーカＳＰｋ１～ＳＰｋｐのそれぞれの基準位置（例えば聴取者の位置に相当する中心位置ＬＳＰ１参照）からの方向情報を加味してライブ会場ＬＶ１内の客席側臨場感を再現可能なスピーカ駆動信号を生成できる。

また、音場臨場感再現装置２０の消去部（エコーキャンセル部２１～２ｎ）は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備えるマイク素子Ｍｃ１～Ｍｃ４の数と音源の数とに基づいて定められる個数分のシングルエコーキャンセラ（図５参照）により構成される。それぞれのシングルエコーキャンセラは、対応する音源の音源信号（例えば個別収音マイクによる音信号若しくは音声信号）を入力して消去処理（エコーキャンセル処理）を時間軸上で実行する。これにより、特に参照信号間に相関が無い場合（言い換えると、クロストーク成分が実質的に含まれないと見做せる程度の所定閾値未満となる場合）には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる参照信号（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を高精度に消去（抑圧）することが可能となる。クロストーク成分が実質的に含まれないとは、例えばメインステージＳＴＧ１（図３参照）上にいるボーカルが歌った時の音声が他の個別収音マイクにより収音されない或いは収音されてもその音圧レベルが上述した所定閾値未満となる場合が該当する。

（実施の形態１の変形例）
実施の形態１では、音場臨場感再現装置において、エコーキャンセル部２１～２ｎのそれぞれをＳｉｎｇｌｅ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成した例を説明した。実施の形態１の変形例では、音場臨場感再現装置において、エコーキャンセル部２１～２ｎの代わりに、複数の音声チャネルを取り扱うマルチチャンネルエコーキャンセラとして構成した例を説明する。なお、実施の形態１の変形例において、実施の形態１と重複する構成、内容については対応する共通の符号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

まず、図７及び図８を参照して、実施の形態１の変形例に係る音場臨場感再現システム１００Ａのシステム構成並びに動作概要について説明する。図７は、実施の形態１の変形例に係る音場臨場感再現システム１００Ａのシステム構成例を示すブロック図である。図８は、図７の音場臨場感再現システム１００Ａにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図である。

音場臨場感再現システム１００Ａは、音場臨場感収音装置１０と、音場臨場感再現装置２０Ａとを含む。音場臨場感収音装置１０と音場臨場感再現装置２０ＡとはネットワークＮＷ１を介して互いにデータ通信が可能に接続されている。

音場臨場感再現装置２０Ａは、再現空間（例えばサテライト会場ＳＴＬ１）に配置され、マルチチャンネルエコーキャンセル部２１Ａと、符号化部２２と、マイク素子方向指定部２３と、スピーカ方向指定部２４と、復号化部２５と、音場再生部２６と、サテライトスピーカＳＰｋ１、…、ＳＰｋｐとを含む。つまり、実施の形態１の変形例では、実施の形態１のエコーキャンセル部２１～２ｎの代わりに、ｎ個の個別収音マイクのそれぞれが収音する音源の音源信号を入力するマルチチャンネルエコーキャンセル部２１Ａが音場臨場感再現装置２０Ａ内に設けられる。

マルチチャンネルエコーキャンセル部２１Ａは、音場臨場感収音装置１０（Ａ／Ｄ変換部７側）から送られたアンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号を入力し、更に、音場臨場感収音装置１０（個別収音マイクＭ１側）から送られた第１の音源（上述参照）～第ｎの音源（上述参照）のそれぞれの個別音源音信号を第１の参照信号Ｍ１Ｓ～第ｎの参照信号ＭｎＳとして入力する。マルチチャンネルエコーキャンセル部２１Ａは、アンビソニックスマイクＡＭＢ１の収音信号に含まれる、第１の参照信号Ｍ１Ｓ（つまり、個別収音マイクＭ１が収音した個別音源音信号）～第ｎの参照信号ＭｎＳ（つまり、個別収音マイクＭｎが収音した個別音源音信号）のそれぞれの成分を消去するための消去処理（例えばマルチチャンネルエコーキャンセル処理）を時間領域上で実行する。マルチチャンネルエコーキャンセル部２１Ａは、消去処理後の信号（第１の収音信号～第ｎの収音信号）を符号化部２２に出力する。

ここで、マルチチャンネルエコーキャンセル部２１Ａは、例えば時間領域上で動作する適応フィルタを用いたエコーキャンセラとして構成してよい。このエコーキャンセラは、例えばＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成することができる。なお、このＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒの構成としては、参考非特許文献に示されるステレオエコーキャンセラを参考にしてよく、このステレオエコーキャンセラはＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒに入力される参照信号の数を２つ設けた場合の例となる。従って、図８に示すように、マルチチャンネルエコーキャンセル部２１Ａは、アンビソニックスマイクＡＭＢ１のマイク素子の数（例えば４）と同数のＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒ若しくはステレオエコーキャンセラを用いて構成可能である。このＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒ若しくはステレオエコーキャンセラは、例えば参考非特許文献において開示されている構成或いはその構成を参照することで得られる構成でよい。この構成を用いることにより、たとえ参照信号間に相関がある場合（言い換えると、クロストーク成分が含まれないと見做せる程度の所定閾値以上となる場合）でも、アンビソニックスマイクＡＭＢ１の収音信号に含まれる参照信号（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を高精度に消去（抑圧）することが可能となる。また、マルチチャンネルエコーキャンセル部２１Ａは時間領域信号をＤＦＴなどにより順変換した上で周波数領域上やサブバンド領域上の適応フィルタを用いたエコーキャンセル処理として実現しても良く、キャンセル後の信号をＩＦＦＴなどにより時間領域へと逆変換した上で後段の処理を行っても良い。

＜参考非特許文献＞ ５章 音響エコーキャンセラ、「ステレオエコーキャンセラの構成例」（図５・８参照）、電子情報通信学会、２０１２年、［令和４年９月２日検索］、インターネット＜ＵＲＬ：ｈｔｔｐｓ：／／ｗｗｗ．ｉｅｉｃｅ－ｈｂｋｂ．ｏｒｇ／ｆｉｌｅｓ／０２／０２ｇｕｎ＿０６ｈｅｎ＿０５．ｐｄｆ＞

次に、図９を参照して、音場臨場感再現装置２０Ａによる音場臨場感再現の動作手順について説明する。図９は、実施の形態１の変形例に係る音場臨場感再現装置による音場臨場感再現の動作手順例を時系列に示すフローチャートである。図９の説明において、図６の説明と重複する内容については同一のステップ番号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

図９において、音場臨場感再現装置２０Ａは、マルチチャンネルエコーキャンセル部２１Ａにおいて、アンビソニックスマイクＡＭＢ１の収音信号を主信号、個別収音マイクＭ１～Ｍｎのそれぞれの収音信号を参照信号としたマルチチャンネルエコーキャンセル処理（上述参照）を時間領域上で実行する（ステップＳｔ２２Ａ）。より具体的には、音場臨場感再現装置２０Ａのマルチチャンネルエコーキャンセル部２１Ａは、ステップＳｔ２１で送られた各種の信号（具体的には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号、第１の参照信号Ｍ１Ｓ～第ｎの参照信号ＭｎＳ）を入力し、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる、第１の参照信号Ｍ１Ｓ（つまり、個別収音マイクＭ１が収音した個別音源音信号）の成分～第ｎの参照信号ＭｎＳ（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を消去するための消去処理（例えばマルチチャンネルエコーキャンセル処理）を時間軸上で実行する（ステップＳｔ２２Ａ）。ステップＳｔ２２Ａ以降の処理は図６と重複するので、説明は省略する。

以上により、実施の形態１の変形例に係る音場臨場感再現システム１００Ａでは、音場臨場感再現装置２０Ａの消去部（マルチチャンネルエコーキャンセル部２１Ａ）は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備えるマイク素子Ｍｃ１～Ｍｃ４の数に基づいて定められる個数分のマルチチャンネルエコーキャンセラにより構成される（図８参照）。それぞれのマルチチャンネルエコーキャンセラは、複数の音源のそれぞれに対応する音源信号（音源音信号）を入力して消去処理（マルチキャンセルエコーキャンセル処理）を実行する。これにより、たとえ参照信号間に相関がある場合（言い換えると、クロストーク成分が含まれないと見做せる程度の所定閾値以上となる場合）でも、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に含まれる参照信号（つまり、個別収音マイクが収音した個別音源音信号）の成分を高精度に消去（消去）することが可能となる。

（実施の形態２）
実施の形態１では、音場臨場感再現装置において、１次オーダーアンビソニックス信号を生成するための符号化処理を実行する前に、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号と収音空間（例えばライブ会場ＬＶ１）内の音源ごとの音源音信号（参照信号）とを用いて時間領域上でエコーキャンセル処理を実行する例を説明した。実施の形態２では、音場臨場感再現装置において、１次オーダーアンビソニックス信号と収音空間（例えばライブ会場ＬＶ１）内の音源ごとの方向指定別の音源音信号とを用いてアンビソニックス領域上でエコーキャンセル処理を実行する例を説明する。なお、実施の形態２において、実施の形態１と重複する構成、内容については対応する共通の符号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

まず、図１０及び図１１を参照して、実施の形態２に係る音場臨場感再現システム１００Ｂのシステム構成並びに動作概要について説明する。図１０は、実施の形態２に係る音場臨場感再現システム１００Ｂのシステム構成例を示すブロック図である。図１１は、図１０の音場臨場感再現システム１００Ｂにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図である。

音場臨場感再現システム１００Ｂは、音場臨場感収音装置１０Ｂと、音場臨場感再現装置２０Ｂとを含む。音場臨場感収音装置１０Ｂと音場臨場感再現装置２０ＢとはネットワークＮＷ１を介して互いにデータ通信が可能に接続されている。

音場臨場感収音装置１０Ｂは、収音空間（例えばライブ会場ＬＶ１）に配置され、アンビソニックスマイクＡＭＢ１と、Ａ／Ｄ変換部７と、符号化部８と、マイク素子方向指定部９と、個別収音マイクＭ１、…、Ｍｎと、を含む。なお、音場臨場感収音装置１０は、少なくともアンビソニックスマイクＡＭＢ１を有していればよく、Ａ／Ｄ変換部７、符号化部８及びマイク素子方向指定部９は音場臨場感再現装置２０Ｂに設けられてもよい。

音場臨場感再現装置２０Ｂは、再現空間（例えばサテライト会場ＳＴＬ１）に配置され、エコーキャンセル部２１Ｂ、…、２ｎＢと、符号化部３１、…、３ｎと、音源位置指定部４１、…、４ｎと、スピーカ方向指定部２４と、復号化部２５Ｂと、音場再生部２６と、サテライトスピーカＳＰｋ１、…、ＳＰｋｐとを含む。また、エコーキャンセル部２１～２ｎの個数を示すｎと、符号化部３１～３ｎの個数を示すｎと、音源位置指定部４１～４ｎの個数を示すｎと、個別収音マイクＭ１～Ｍｎの個数を示すｎとは同一である。つまり、個別収音マイクが収音する音源の種類数と同数のエコーキャンセル部、符号化部及び音源位置指定部が音場臨場感再現装置２０Ｂ内に設けられる。

ここで、エコーキャンセル部２１Ｂ～２ｎＢのそれぞれは、例えばアンビソニックス領域で動作する適応フィルタを用いたエコーキャンセラとして構成してよい。このエコーキャンセラは、例えばＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成することができる。従って、図１１に示すように、エコーキャンセル部２１Ｂ～２ｎＢのそれぞれは、アンビソニックスマイクＡＭＢ１のマイク素子の数（例えば４）と同数のＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒを用いて構成可能である。このＳｉｎｇｌｅ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒは、例えば参考非特許文献において開示されている構成でよい。この構成を用いることにより、たとえ参照信号間に相関が無い場合（言い換えると、クロストーク成分が実質的に含まれないと見做せる程度の所定閾値未満となる場合）には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に基づく信号成分（例えば図１に示すＷ、Ｘ、Ｙ、Ｚの各方向解像度を有する信号）に含まれる参照信号（つまり、個別収音マイクが収音した個別音源音信号）の成分を高精度に消去（抑圧）することが可能となる。

＜参考非特許文献＞ ５章 音響エコーキャンセラ、「適応フィルタの構成例」（図５・２参照）、ｐ４／（１７）、電子情報通信学会、２０１２年、［令和４年９月２日検索］、インターネット＜ＵＲＬ：ｈｔｔｐｓ：／／ｗｗｗ．ｉｅｉｃｅ－ｈｂｋｂ．ｏｒｇ／ｆｉｌｅｓ／０２／０２ｇｕｎ＿０６ｈｅｎ＿０５．ｐｄｆ＞

次に、図１２を参照して、音場臨場感再現装置２０Ｂによる音場臨場感再現の動作手順について説明する。図１２は、実施の形態２に係る音場臨場感再現装置２０Ｂによる音場臨場感再現の動作手順例を時系列に示すフローチャートである。図１２の説明において、図６の説明と重複する内容については同一のステップ番号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

以上により、実施の形態２に係る音場臨場感再現システム１００Ｂにおいて、音場臨場感再現装置２０Ｂは、収音空間（ライブ会場ＬＶ１）内に配置される収音デバイス（アンビソニックスマイクＡＭＢ１）により収音される収音信号（拡散音の成分ＤＳ１～ＤＳ３）を少なくとも取得する取得部（エコーキャンセル部２１Ｂ～２ｎＢ）と、収音空間内の１以上の音源の音源信号（音信号ＳＳ１、音声信号ＳＳ２、音信号ＳＳ３）を符号化処理する符号化部３１～３ｎと、符号化処理後の音源信号を参照信号とし、収音信号に含まれる参照信号の成分を消去する消去処理を実行する消去部（エコーキャンセル部２１Ｂ～２ｎＢ）と、消去処理後の信号に基づいて、収音空間とは異なる再現空間（サテライト会場ＳＴＬ１）内に配置される複数のスピーカ（サテライトスピーカＳＰｋ１～ＳＰｋｐ）ごとに、収音空間内の音場臨場感を再現空間内において再現するためのスピーカ駆動信号を生成する生成部（復号化部２５Ｂ）と、複数のスピーカのそれぞれから、スピーカごとのスピーカ駆動信号を出力する音場再生部２６と、を備える。これにより、実施の形態２に係る音場臨場感再現装置２０Ｂは、アンビソニックスマイクＡＭＢ１が主に収音した収音空間（ライブ会場ＬＶ１）内の客席側臨場感の雰囲気を、アンビソニックスマイクＡＭＢ１により収音されるライブ会場ＬＶ１内の１以上の個別音源（参照信号）の成分を時間領域上ではなくアンビソニックス領域上で消去することにより、高い方向解像度を有して少なくとも１つのサテライト会場内において高精度に再現することができる。

また、取得部（エコーキャンセル部２１Ｂ～２ｎＢ）により取得される収音信号は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備える複数のマイク素子Ｍｃ１～Ｍｃ４のそれぞれの方向情報を用いて符号化処理された信号である。これにより、音場臨場感再現装置２０Ｂは、消去部（エコーキャンセル部２１Ｂ～２ｎＢのそれぞれ）における消去処理の対象として入力する信号として、高い方向解像度を有する１次オーダーアンビソニックス信号を取得できる。

また、音場臨場感再現装置２０Ｂは、再現空間（サテライト会場ＳＴＬ１）内の複数のスピーカ（サテライトスピーカＳＰｋ１～ＳＰｋｐ）の方向情報を指定するスピーカ方向指定部２４を更に備える。生成部（復号化部２５Ｂ）は、複数のスピーカのそれぞれの方向情報と消去処理後の信号とを用いて、複数のスピーカのそれぞれごとのスピーカ駆動信号を生成する。これにより、音場臨場感再現装置２０Ｂは、アンビソニックス領域上での消去処理後の信号を用いて復号化処理を施すことにより、複数のサテライトスピーカＳＰｋ１～ＳＰｋｐのそれぞれの基準位置（例えば聴取者の位置に相当する中心位置ＬＳＰ１参照）からの方向情報を加味してライブ会場ＬＶ１内の客席側臨場感を再現可能であってかつ高い方向解像度を有するスピーカ駆動信号を高精度に生成できる。

また、音場臨場感再現装置２０Ｂは、収音空間（ライブ会場ＬＶ１）内の１以上の音源の位置情報を指定する音源位置指定部４１～４ｎを更に備える。符号化部３１～３ｎのそれぞれは、対応する音源の音源信号及び位置情報を用いて、符号化処理を実行する。これにより、音場臨場感再現装置２０Ｂは、ライブ会場ＬＶ１内の個別音源の存在する方向を加味して消去部（エコーキャンセル部２１Ｂ～２ｎＢ）の消去処理に必要となる高精度な参照信号を生成できる。

また、消去部（エコーキャンセル部２１Ｂ～２ｎＢ）は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備えるマイク素子Ｍｃ１～Ｍｃ４の数（例えば４）と音源の数（例えばｎ個）とに基づいて定められる個数分（例えば４ｎ（＝４×ｎ）個）のシングルエコーキャンセラにより構成される。シングルエコーキャンセラは、対応する音源の音源信号が符号化処理された後の信号を入力して消去処理を実行する。これにより、音場臨場感再現装置２０Ｂは、特に参照信号間に相関が無い場合（言い換えると、クロストーク成分が実質的に含まれないと見做せる程度の所定閾値未満となる場合）には、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に基づく信号成分（例えば図１に示すＷ、Ｘ、Ｙ、Ｚの各方向解像度を有する信号）に含まれる参照信号（つまり、個別収音マイクＭｎが収音した個別音源音信号と個別音源方向とに基づく１次オーダーアンビソニックス信号）の成分を高精度に消去（抑圧）することが可能となる。

（実施の形態２の変形例）
実施の形態２では、音場臨場感再現装置において、エコーキャンセル部２１Ｂ～２ｎＢのそれぞれをＳｉｎｇｌｅ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成した例を説明した。実施の形態２の変形例では、音場臨場感再現装置において、エコーキャンセル部２１Ｂ～２ｎＢの代わりに、時間領域上ではなくアンビソニックス領域上において複数の音声チャネルを取り扱うマルチチャンネルエコーキャンセラとして構成した例を説明する。なお、実施の形態２の変形例において、実施の形態１、２と重複する構成、内容については対応する共通の符号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

まず、図１３及び図１４を参照して、実施の形態２の変形例に係る音場臨場感再現システム１００Ｃのシステム構成並びに動作概要について説明する。図１３は、実施の形態２の変形例に係る音場臨場感再現システム１００Ｃのシステム構成例を示すブロック図である。図１４は、図１３の音場臨場感再現システム１００Ｃにおける音場臨場感収音から音場臨場感再現までの動作概要例を示す図である。

音場臨場感再現システム１００Ｃは、音場臨場感収音装置１０Ｂ（図１０参照）と、音場臨場感再現装置２０Ｃとを含む。音場臨場感収音装置１０Ｂと音場臨場感再現装置２０ＣとはネットワークＮＷ１を介して互いにデータ通信が可能に接続されている。

ここで、マルチチャンネルエコーキャンセル部２１Ｃは、例えばアンビソニックス領域で動作する複数の適応フィルタを用いたエコーキャンセラとして構成してよい。このエコーキャンセラは、例えばＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒとして構成することができる。なお、このＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒの構成としては、参考非特許文献に示されるステレオエコーキャンセラを参考にしてよく、このステレオエコーキャンセラはＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒに入力される参照信号の数を２つ設けた場合の例となる。従って、図１４に示すように、マルチチャンネルエコーキャンセル部２１Ｃは、アンビソニックスマイクＡＭＢ１のマイク素子の数（例えば４）と同数のＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒ若しくはステレオエコーキャンセラを用いて構成可能である。このＭｕｌｔｉ Ｃｈａｎｎｅｌ ＥｃｈｏＣａｎｃｅｌｌｅｒ若しくはステレオエコーキャンセラは、例えば参考非特許文献において開示されている構成或いはその構成を参照することで得られる構成でよい。この構成を用いることにより、たとえ参照信号間に相関がある場合（言い換えると、クロストーク成分が含まれないと見做せる程度の所定閾値以上となる場合）でも、アンビソニックスマイクＡＭＢ１の収音信号に基づく信号成分（例えば図１に示すＷ、Ｘ、Ｙ、Ｚの各方向解像度を有する信号）に含まれる参照信号（つまり、個別収音マイクＭｎが収音した個別音源音信号）の成分を高精度に消去（抑圧）することが可能となる。

＜参考非特許文献＞ ５章 音響エコーキャンセラ、「ステレオエコーキャンセラの構成例」（図５・８参照）、電子情報通信学会、２０１２年、［令和４年９月２日検索］、インターネット＜ＵＲＬ：ｈｔｔｐｓ：／／ｗｗｗ．ｉｅｉｃｅ－ｈｂｋｂ．ｏｒｇ／ｆｉｌｅｓ／０２／０２ｇｕｎ＿０６ｈｅｎ＿０５．ｐｄｆ＞

次に、図１５を参照して、音場臨場感再現装置２０Ｃによる音場臨場感再現の動作手順について説明する。図１５は、実施の形態２の変形例に係る音場臨場感再現装置２０Ｃによる音場臨場感再現の動作手順例を時系列に示すフローチャートである。図１５の説明において、図６、図９或いは図１２の説明と重複する内容については同一のステップ番号を付与して説明を簡略化或いは省略し、異なる内容について説明する。

以上により、実施の形態２の変形例に係る音場臨場感再現装置２０Ｃにおいて、消去部（マルチチャンネルエコーキャンセル部２１Ｃ）は、収音デバイス（アンビソニックスマイクＡＭＢ１）が備えるマイク素子Ｍｃ１～Ｍｃ４の数に基づいて定められる個数分のマルチチャンネルエコーキャンセラにより構成される。マルチチャンネルエコーキャンセラは、複数の音源のそれぞれに対応する音源信号が符号化処理された後の信号を入力して消去処理（マルチチャンネルエコーキャンセル処理）を実行する。これにより、音場臨場感再現装置２０Ｃは、たとえ参照信号間に相関がある場合（言い換えると、クロストーク成分が含まれないと見做せる程度の所定閾値以上となる場合）でも、アンビソニックスマイクＡＭＢ１のマイク素子ごとの収音信号に基づく信号成分（例えば図１に示すＷ、Ｘ、Ｙ、Ｚの各方向解像度を有する信号）に含まれる参照信号（つまり、個別収音マイクが収音した個別音源音信号）の成分をアンビソニックス領域上で高精度に消去（抑圧）することが可能となる。

以上、添付図面を参照しながら実施の形態について説明したが、本開示はかかる例に限定されない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても本開示の技術的範囲に属すると了解される。また、発明の趣旨を逸脱しない範囲において、上述した実施の形態における各構成要素を任意に組み合わせてもよい。

本開示は、アンビソニックスマイクを用いて収音した収音空間内の客席側臨場感の雰囲気を少なくとも１つのサテライト会場内において高精度に再現する音場臨場感再現装置及び音場臨場感再現方法として有用である。

７ Ａ／Ｄ変換部
８、２２、３１、３ｎ 符号化部
９、２３ マイク素子方向指定部
１０、１０Ｂ 音場臨場感収音装置
２０、２０Ａ、２０Ｂ、２０Ｃ 音場臨場感再現装置
２１、２ｎ、２１Ｂ、２ｎＢ エコーキャンセル部
２１Ａ、２１Ｃ マルチチャンネルエコーキャンセル部
２４ スピーカ方向指定部
２５、２５Ｂ、２５Ｃ 復号化部
２６ 音場再生部
４１、４ｎ 音源位置指定部
１００、１００Ａ、１００Ｂ、１００Ｃ 音場臨場感再現システム
ＡＭＢ１ アンビソニックスマイク
Ｍ１、Ｍｎ 個別収音マイク
ＳＰｋ１、ＳＰｋｐ サテライトスピーカ

Claims (13)

1. 収音空間内に配置される収音デバイスにより収音される収音信号と、前記収音空間内の１以上の音源の音源信号とを取得する取得部と、
   前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行する消去部と、
   前記消去処理後の信号を符号化処理する符号化部と、
   前記符号化処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成する生成部と、
   前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力する音場再生部と、を備える、
   音場臨場感再現装置。
2. 前記収音デバイスが備える複数のマイク素子の方向情報を指定するマイク素子方向指定部、を更に備え、
   前記符号化部は、前記複数のマイク素子のそれぞれの方向情報と前記消去処理後の信号とを用いて、前記符号化処理を実行する、
   請求項１に記載の音場臨場感再現装置。
3. 前記再現空間内の前記複数のスピーカの方向情報を指定するスピーカ方向指定部、を更に備え、
   前記生成部は、前記複数のスピーカのそれぞれの方向情報と前記符号化処理後の信号とを用いて、前記複数のスピーカのそれぞれごとの前記スピーカ駆動信号を生成する、
   請求項１に記載の音場臨場感再現装置。
4. 前記消去部は、前記収音デバイスが備えるマイク素子の数と前記音源の数とに基づいて定められる個数分のシングルエコーキャンセラにより構成され、
   前記シングルエコーキャンセラは、対応する前記音源の音源信号を入力して前記消去処理を実行する、
   請求項１に記載の音場臨場感再現装置。
5. 前記消去部は、前記収音デバイスが備えるマイク素子の数に基づいて定められる個数分のマルチチャンネルエコーキャンセラにより構成され、
   前記マルチチャンネルエコーキャンセラは、複数の前記音源のそれぞれに対応する前記音源信号を入力して前記消去処理を実行する、
   請求項１に記載の音場臨場感再現装置。
6. 収音空間内に配置される収音デバイスにより収音される収音信号を少なくとも取得する取得部と、
   前記収音空間内の１以上の音源の音源信号を符号化処理する符号化部と、
   前記符号化処理後の前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行する消去部と、
   前記消去処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成する生成部と、
   前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力する音場再生部と、を備える、
   音場臨場感再現装置。
7. 前記収音信号は、前記収音デバイスが備える複数のマイク素子の方向情報を用いて符号化処理された信号である、
   請求項６に記載の音場臨場感再現装置。
8. 前記再現空間内の前記複数のスピーカの方向情報を指定するスピーカ方向指定部、を更に備え、
   前記生成部は、前記複数のスピーカのそれぞれの方向情報と前記消去処理後の信号とを用いて、前記複数のスピーカのそれぞれごとの前記スピーカ駆動信号を生成する、
   請求項６に記載の音場臨場感再現装置。
9. 前記収音空間内の１以上の前記音源の位置情報を指定する音源位置指定部、を更に備え、
   前記符号化部は、対応する前記音源の音源信号及び前記位置情報を用いて、前記符号化処理を実行する、
   請求項６に記載の音場臨場感再現装置。
10. 前記消去部は、前記収音デバイスが備えるマイク素子の数と前記音源の数とに基づいて定められる個数分のシングルエコーキャンセラにより構成され、
    前記シングルエコーキャンセラは、対応する前記音源の音源信号が前記符号化処理された後の信号を入力して前記消去処理を実行する、
    請求項９に記載の音場臨場感再現装置。
11. 前記消去部は、前記収音デバイスが備えるマイク素子の数に基づいて定められる個数分のマルチチャンネルエコーキャンセラにより構成され、
    前記マルチチャンネルエコーキャンセラは、複数の前記音源のそれぞれに対応する前記音源信号が前記符号化処理された後の信号を入力して前記消去処理を実行する、
    請求項９に記載の音場臨場感再現装置。
12. 収音空間内に配置される収音デバイスにより収音される収音信号と、前記収音空間内の１以上の音源の音源信号とを取得するステップと、
    前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行するステップと、
    前記消去処理後の信号を符号化処理するステップと、
    前記符号化処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成するステップと、
    前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力するステップと、を有する、
    音場臨場感再現方法。
13. 収音空間内に配置される収音デバイスにより収音される収音信号を少なくとも取得するステップと、
    前記収音空間内の１以上の音源の音源信号を符号化処理するステップと、
    前記符号化処理後の前記音源信号を参照信号とし、前記収音信号に含まれる前記参照信号の成分を消去する消去処理を実行するステップと、
    前記消去処理後の信号に基づいて、前記収音空間とは異なる再現空間内に配置される複数のスピーカごとに、前記収音空間内の音場臨場感を前記再現空間内において再現するためのスピーカ駆動信号を生成するステップと、
    前記複数のスピーカのそれぞれから、前記スピーカごとの前記スピーカ駆動信号を出力するステップと、を有する、
    音場臨場感再現方法。

Images