JP2013514696A - 第１のパラメトリック空間オーディオ信号を第２のパラメトリック空間オーディオ信号に変換する装置および方法 - Google Patents

Abstract

空間オーディオシーンにおける第１の聴取位置または第１の聴取方向を示している第１のパラメトリック空間オーディオ信号（１１２、１１４）を、第２の聴取位置または第２の聴取方向を示している第２のパラメトリック空間オーディオ信号（２１２、２１４）に変換するための装置（３００）であって、その装置は、第２のパラメトリック空間オーディオ信号（２１２、２１４）を得るために、第１の聴取位置または第１の聴取方向の変化に依存して、第１のパラメトリック空間オーディオ信号（１１２、１１４）を修正するように構成された空間オーディオ信号修正装置（３０１、３０２）であって、第２の聴取位置または第２の聴取方向は、変化によって変更された第１の聴取位置または第１の聴取方向に対応することを特徴とする空間オーディオ信号修正装置（３０１、３０２）を含むことを特徴とする装置。
【選択図】図２

Description

本発明は、オーディオ処理の分野、特に第１のパラメトリック空間オーディオ信号を第２のパラメトリック空間オーディオ信号に変換するためのパラメトリック空間オーディオ処理の分野に関する。

空間音響録音（ｓｐａｔｉａｌ ｓｏｕｎｄ ｒｅｃｏｒｄｉｎｇ）は、再生側で聴取者が音像を知覚するように、複数のマイクロホンを用いて、音場を捉えることを目指している。空間音響録音のための標準のアプローチは、例えば、アンビソニックス（Ａｍｂｉｓｏｎｉｃｓ）において使用され、Ｍ．Ａ．ガーゾン著の「Ｐｅｒｉｐｈｏｎｙ（取り囲み音響）：幅―高さサウンド再生」（オーディオ技術協会誌、２１巻、Ｎｏ．１、ページ２〜１０、１９７３年）によって説明されるＢ−フォーマット・マイクロホンなどの、単純なステレオマイクロホンまたは指向性マイクロホンのより精巧な組み合わせを使用する。一般に、これらの方法は、コインシデント・マイクロホン（ｃｏｉｎｃｉｄｅｎｔ−ｍｉｃｒｏｐｈｏｎｅ）テクニックと呼ばれる。

代わりの方法として、音場のパラメトリック表現に基づいた方法を適用することができ、それはパラメトリック空間オーディオ符号器と呼ばれる。これらの方法は、それは空間音響の知覚に関連する、対応する空間補助情報と共に、ダウンミックスオーディオ信号を決定する。例としては、以下では［ＤｉｒＡＣ］として参照される、プルキ，Ｖ．著の「空間音響再生およびステレオアップミキシングにおける方向性オーディオ符号化」（ＡＥＳ第１２８回国際コンフェレンスの予稿集、ページ２５１〜２５８、ピテ、スウェーデン、２００６年６月３０日〜７月２日）において説明されるような方向オーディオ符号化（Ｄｉｒｅｃｔｉｏｎａｌ Ａｕｄｉｏ Ｃｏｄｉｎｇ）（ＤｉｒＡＣ）、または、以下では［ＳＡＭ］として参照される、ファーラー，Ｃ．著の「空間オーディオ符号器のためのマイクロホン・フロントエンド」（ＡＥＳ第１２５回国際コンフェレンスの予稿集、サンフランシスコ、２００８年１０月）において提案されたいわゆる空間オーディオマイクロホン（ｓｐａｔｉａｌ ａｕｄｉｏ ｍｉｃｒｏｐｈｏｎｅｓ）（ＳＡＭ）アプローチが挙げられる。空間キュー（ｃｕｅ）情報は、基本的に、音の到来方向（ｄｉｒｅｃｔｉｏｎ−ｏｆ−ａｒｒｉｖａｌ）（ＤＯＡ）および周波数サブバンドにおける音場の拡散からなる。合成段階において、再生のための所望のスピーカ信号は、ダウンミックス信号およびパラメトリック補助情報に基づいて決定される。

換言すれば、ダウンミックス信号および対応する空間補助情報は、オーディオシーンが録音された時に使用された様々な音響源に関して、セットアップ、例えばマイクロホンの方向および／または位置によって、オーディオシーンを示す。

Ｍ．Ａ．ガーゾン著、「Ｐｅｒｉｐｈｏｎｙ（取り囲み音響）：幅―高さサウンド再生」、オーディオ技術協会誌、２１巻、Ｎｏ．１、ページ２〜１０、１９７３年（Ｍ．Ａ．Ｇｅｒｚｏｎ，"Ｐｅｒｉｐｈｏｎｙ： Ｗｉｄｔｈ−Ｈｅｉｇｈｔ Ｓｏｕｎｄ Ｒｅｐｒｏｄｕｃｔｉｏｎ，" Ｊ． Ａｕｄ． Ｅｎｇ． Ｓｏｃ．， Ｖｏｌ．２１， Ｎｏ．１， ｐｐ２−１０， １９７３） プルキ，Ｖ．著、「空間音響再生およびステレオアップミキシングにおける方向性オーディオ符号化」、ＡＥＳ第１２８回国際コンフェレンスの予稿集、ページ２５１〜２５８、ピテ、スウェーデン、２００６年６月３０日〜７月２日（Ｐｕｌｋｋｉ，Ｖ．， "Ｄｉｒｅｃｔｉｏｎａｌ ａｕｄｉｏ ｃｏｄｉｎｇ ｉｎ ｓｐａｔｉａｌ ｓｏｕｎｄ ｒｅｐｒｏｄｕｃｔｉｏｎ ａｎｄ ｓｔｅｒｅｏ ｕｐｍｉｘｉｎｇ，" ｉｎ Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ Ｔｈｅ ＡＥＳ ２８ｔｈ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｃｏｎｆｅｒｅｎｃｅ， ｐｐ． ２５１−２５８， Ｐｉｔｅａａ， Ｓｗｅｄｅｎ， Ｊｕｎｅ ３０ − Ｊｕｌｙ ２， ２００６） ファーラー，Ｃ．著、「空間オーディオ符号器のためのマイクロホン・フロントエンド」、ＡＥＳ第１２５回国際コンフェレンスの予稿集、サンフランシスコ、２００８年１０月（Ｆａｌｌｅｒ，Ｃ．， "Ｍｉｃｒｏｐｈｏｎｅ Ｆｒｏｎｔ−Ｅｎｄｓ ｆｏｒ Ｓｐａｔｉａｌ Ａｕｄｉｏ Ｃｏｄｅｒｓ"， ｉｎ Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ｔｈｅ ＡＥＳ １２５ｔｈ Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｃｏｎｖｅｎｔｉｏｎ， Ｓａｎ Ｆｒａｎｃｉｓｃｏ， Ｏｃｔ． ２００８） プルキ，Ｖ．著、「ベクトルベースの振幅パニングを使用した仮想音源位置決め」、オーディオ技術協会誌、４５巻、ページ４５６〜４６６、１９９７年６月（Ｐｕｌｋｋｉ，Ｖ．， "Ｖｉｒｔｕａｌ ｓｏｕｎｄ ｓｏｕｒｃｅ ｐｏｓｉｔｉｏｎｉｎｇ ｕｓｉｎｇ ｖｅｃｔｏｒ ｂａｓｅ ａｍｐｌｉｔｕｄｅ ｐａｎｎｉｎｇ，" Ｊ．Ａｕｄｉｏ Ｅｎｇ．Ｓｏｃ．， Ｖｏｌ．４５， ｐｐ４５６−４６６， Ｊｕｎｅ １９９７）

本発明の目的は、録音されたオーディオシーンの柔軟な適用のための構想を提供することである。

この目的は、請求項１に記載の装置、請求項１７に記載の方法、および請求項１８に記載のコンピュータプログラムによって解決される。

すべての上述した方法は、それらが再生側で音場をそれが録音位置で知覚されたように与えることを目指すという共通点がある。録音位置、すなわちマイクロホンの位置は、基準聴取位置とも呼ぶことができる。録音されたオーディオシーンの修正は、これらの周知の空間音響捕捉方法においては想定されない。

一方、視像の修正は、例えば、映像捕捉（ｖｉｄｅｏ ｃａｐｔｕｒｉｎｇ）に関連して、共通に適用される。例えば、光学ズームは、カメラの仮想位置を変えるためにビデオカメラにおいて使用され、映像を異なる視点から撮影した印象を与える。これは、カメラ位置の平行移動によって説明される。他の単純なピクチャ修正は、その軸を中心にしたカメラの水平または垂直回転である。垂直回転は、パニングまたはチルティングとも呼ばれる。

本発明の実施形態は、視覚の動きに従って、聴取位置および／または方向を変えることも可能にする装置および方法を供給する。換言すれば、本発明は、それがマイクロホンの実際の物理的位置以外の仮想位置および／または方向で位置付けられるマイクロホン構成を使用して得られた録音に対応するように、聴取者が再生の間、知覚する音像を変えることを可能にする。こうすることによって、録音された音像は、対応する修正されたビデオ画像と整合されることができる。例えば、画像の特定の領域に対するビデオズームの効果は、矛盾のない方法で、録音された空間音像に適用されうる。本発明によれば、このことは、空間オーディオ符号器のパラメトリック領域において空間キュー・パラメータおよび／またはダウンミックス信号を適切に修正することによって達成される。

本発明の実施形態は、異なるマイクロホン設定、例えばオーディオ信号源に関する録音マイクロホンセットアップの異なる位置および／または方向によって空間オーディオシーンを録音する必要なく、一定の空間オーディオシーンの範囲内で聴取者の位置および／または方向を柔軟に変えることを可能にする。換言すれば、本発明の実施形態は、空間オーディオシーンが録音された時に、録音位置または聴取位置と異なる仮想聴取位置および／または仮想聴取方向を定めることを可能にする。

本発明の特定の実施形態は、変更された聴取位置および／または方向を反映するために、ダウンミックス信号、および／または、空間補助情報を適応させるために、１つまたはいくつかのダウンミックス信号、および／または、空間補助情報、例えば、到来方向（ｄｉｒｅｃｔｉｏｎ−ｏｆ−ａｒｒｉｖａｌ）および拡散を使用するだけである。換言すれば、これらの実施形態は、いかなる更なるセットアップ情報、例えば最初の録音位置に関する様々な音響源の幾何的情報も必要としない。

更なる本発明の実施形態は、更に、空間補助情報として、特定の空間オーディオフォーマットによるパラメトリック空間オーディオ信号、例えば到来方向および拡散を有するモノラルまたはステレオダウンミックス信号を受けて、制御信号、例えば、ズームまたは回転制御信号によってこのデータを変換して、同じ空間オーディオフォーマットで、すなわち、関連した到来方向および拡散パラメータを有するモノラルまたはステレオダウンミックス信号として、修正されたまたは変換されたデータを出力する。

特定の実施形態において、本発明の実施形態は、ビデオカメラまたは他のビデオソースと結合されて、例えば、オーディオ体験をビデオ体験に同期させて、例えば、ビデオズームが実行される場合には、音響ズームを実行するために、および／または、例えば、ビデオカメラが回転されて、マイクロホンがカメラに取り付けられていないので、マイクロホンがカメラとともに物理的に回転しない場合には、オーディオシーンの範囲内でオーディオ回転を実行するために、ビデオカメラによって供給されたズーム制御または回転制御信号によって、受信したまたは最初の空間オーディオデータを、修正された空間オーディオデータに修正する。

本発明の実施形態について、以下の図を使用して詳述する。

図１は、パラメトリック空間オーディオ符号器のブロック図を示す。 図２は、空間オーディオ符号器の空間オーディオ分析装置と空間オーディオ合成装置との間に結合された空間パラメータ修正ブロックの実施形態を伴った図１の空間オーディオ符号器を示す。 図３Ａは、図２に対応しており、空間パラメータ修正ブロックの詳細な実施形態を示す。 図３Ｂは、図２に対応しており、空間パラメータ修正ブロックの更に詳細な実施形態を示す。 図４は、音響ズームの典型的な幾何学の概要を示す。 図５Ａは、到来方向（ＤＯＡ）マッピングのための方向マッピング関数ｆ_p（ｋ，ｎ，φ，ｄ）の例を示す。 図５Ｂは、拡散マッピングのための拡散マッピング関数ｆ_d（ｋ，ｎ，φ，ｄ）の例を示す。 図６は、ズーム比に依存した直接音成分の重み付けフィルタＨ₁（ｋ，ｎ，φ，ｄ）のための様々な利得窓を示す。 図７は、拡散成分のための重み付けフィルタＨ₂（ｋ，ｎ，φ，ｄ）のための典型的なサブカージオイドの窓を示す。

等しいかまたは同等である要素、または、等しいか同等の要素を有する機能は、等しいかまたは同等である参照番号によって、図の以下の説明において表される。

以下に、空間パラメータの計算において含まれる、または、換言すれば、空間オーディオ分析装置１００によって実行されるものとしての空間オーディオ分析のための基本的なステップについて、更に詳細に説明する。例えば、マイクロホン信号は、例えば、短時間フーリエ変換（ＳＴＦＴ）またはその他のフィルタバンクも適用することによって、適切な時間／周波数表現において、処理される。分析段階において決定された空間補助情報は、分析された音場の直接および拡散音響の関係を示す、音響の到来の方向（ＤＯＡ）に対応する尺度および音場の拡散の尺度を含む。

ＤｉｒＡＣにおいて、アクティブ・インテンシティ・ベクトルの反対方向として音響のＤＯＡを決定することが提案されている。関連した音響情報は、デカルト座標系の軸と整合される双極子ピックアップ・パターンを供給しているマイクロホン構成によって得られた音圧および速度に対応するいわゆるＢ−フォーマット・マイクロホン入力から得られる。換言すれば、Ｂ−フォーマットは、４つの信号、すなわち、ｗ（ｔ）、ｘ（ｔ）、ｙ（ｔ）、およびｚ（ｔ）から成る。第１のものは、全指向性マイクロホンで測定される圧力に対応するが、後者の３つは、デカルト座標系の３本の軸に向けられた８の字形ピックアップ・パターンを有するマイクロホンの信号である。信号ｘ（ｔ）、ｙ（ｔ）、およびｚ（ｔ）は、それぞれ、ｘ、ｙおよびｚを向いた粒子速度ベクトルの成分に比例している。あるいは、ＳＡＭに提案されたアプローチは、音響のＤＯＡを決定するために、ステレオマイクロホンの指向性パターンについての演繹的な知識を使用する。

ＤｉｒＡＣにおいて提案されるように、拡散尺度は、アクティブ音響インテンシティ（ａｃｔｉｖｅ ｓｏｕｎｄ ｉｎｔｅｎｓｉｔｙ）を音場の全体のエネルギーと関連づけることによって得られることができる。代わりの方法として、ＳＡＭにおいて説明したような方法は、異なるマイクロホン信号間の可干渉性を評価することを提案する。拡散が、推定されたＤＯＡのための一般の信頼性尺度とみなすこともできる点に留意する必要がある。一般性を失わずに、以下では、拡散性が［１、０］の範囲にあり、１の値が単に拡散音場を示し、０の値が直接音だけが存在するケースに対応すると仮定される。他の実施形態において、拡散のための他の範囲および値は、使用できる。

補助情報１１４を伴うダウンミックス信号１１２は、マイクロホン入力信号から計算される。それは、モノラルでありえるまたは複数のオーディオチャンネルを含むことがありえる。ＤｉｒＡＣの場合には、一般に、全指向性マイクロホンによって得られるような、音圧に対応するモノラルの信号だけが考慮される。ＳＡＭアプローチのために、２チャネルステレオ信号は、ダウンミックス信号として使用される。

しかし、ＳＡＭにおいて、（１）と同じ信号モデルが適用されるが、直接および拡散音成分は、その代わりにステレオダウンミックス信号に基づいて計算される。

図２は、図１の典型的な環境において組み込まれた、すなわち、空間分析装置１００および空間オーディオ合成装置２００との間に組み込まれた本発明の実施形態のブロック図を示す。図１に基づいて説明されるように、最初のオーディオシーンは、異なるオーディオ音源と関連して位置および方向（指向性マイクロホンの場合）を特定しているマイクロホンの特定の録音セットアップによって録音される。Ｎ個のマイクロホンは、Ｎ個の物理的マイクロホン信号またはチャンネル信号を供給し、それらは、１つまたはいくつかのダウンミックス信号Ｗ１１２および空間補助情報１１４、例えば到来方向（ＤＯＡ）φ１１４ａおよび拡散Ψ１１４ｂを生成するために空間オーディオ分析装置１００によって処理される。図１とは対照的に、これらの空間オーディオ信号１１２、１１４ａ、１１４ｂが、空間オーディオ合成装置２００に直接供給されずに、空間オーディオシーンにおける第１の聴取位置および／または第１の聴取方向（この例においては、録音位置および録音方向）を示している第１のパラメトリック空間オーディオ信号１１２、１１４ａ、１１４ｂを、第２のパラメトリック空間オーディオ信号２１２、２１４ａ、２１４ｂ、すなわち、第１の聴取位置および／または第１の聴取方向とは異なる第２の聴取位置および／または第２の聴取方向を示している修正されたダウンミックス信号Ｗ_mod２１２、修正された到来方向信号φ_mod２１４ａおよび／または修正された拡散信号Ψ_mod２１４ｂに、変換するまたは修正するための装置によって修正される。修正された到来方向２１４ａおよび修正された拡散２１４ｂは、修正された空間オーディオ情報２１４とも呼ばれる。装置３００は、空間オーディオ信号修正装置または空間オーディオ信号修正ブロック３００とも呼ばれる。図３Ａの装置３００は、例えば外部の、制御装置４００によって供給された制御信号ｄ４０２に依存している第１のパラメトリック空間オーディオ信号１１２、１１４を修正するように構成される。制御信号４０２は、例えば、ビデオカメラのズーム制御および／または回転制御装置４００によって供給された、ズーム比ｄまたはズームパラメータｄを定めているまたはそれ自体であるズーム制御信号、あるいは、回転制御信号４０２でありえる。特定の方向のズームおよび同方向の平行移動は、その特定の方向への仮想の動きを示しているちょうど２つの異なる方法（ズーム比によるズーム、絶対距離による、または、参照距離と関連する相対距離による平行移動）であることに留意されたい。従って、ズーム制御信号に関して本願明細書における説明は、対応して、平行移動制御信号に当てはまり、そして、その逆も同様である。そして、ズーム制御信号４０２も、平行移動制御信号に関連する。用語ｄは、一方で、制御信号４０２自体を示し、そして、他方で、制御信号に含まれた制御情報またはパラメータを示しうる。更なる実施形態において、制御パラメータｄは、すでに制御信号４０２を示す。制御パラメータまたは制御情報ｄは、距離、ズーム比および／または回転角および／または回転方向でありえる。

図２から分かるように、装置３００は、それが受けたパラメトリック空間オーディオ信号１１２、１１４と同じフォーマットのパラメトリック空間オーディオ信号２１２、２１４（ダウンミックス信号および関連補助情報／パラメータ）を供給するように構成される。従って、空間オーディオ合成装置２００は、最初のまたは録音された空間オーディオ信号１１２、１１４と同様に、修正された空間オーディオ信号２１２、２１４を処理することが（修正なしで）できて、修正された空間オーディオシーンへの、換言すれば、他の場合は変化のない空間オーディオシーンの範囲内の修正された聴取位置および／または修正された聴取方向への音響体験を生成するために、それらをＭ個の物理スピーカ信号に変換する。

換言すれば、新規な装置または方法の実施形態のブロック略図は、図２に示される。図から分かるように、空間オーディオ符号器１００の出力１１２、１１４は、音響捕捉のために使用された最初の位置において使用されたものとは異なる聴取位置に対応する空間オーディオ表現２１２、２１４を得るために、外部の制御情報４０２に基づいて修正される。より正確に言うと、ダウンミックス信号１１２および空間補助情報１１４は、適切に変えられる。修正ストラテジーは、カメラ４００から直接に、または、カメラの実際の位置またはズームに関する情報を供給する他のユーザーインターフェース４００からも得られることができる外部制御４００により決定される。この実施形態において、そのアルゴリズムのタスクは、修正装置３００が、光学ズームまたはカメラ回転が傍観者の観点を変えるのと同じ方法で、音響シーンの空間印象を変えることである。換言すれば、修正装置３００は、ビデオズームまたはビデオ回転に対応する、対応音響ズームまたはオーディオ回転体験を提供するように構成される。

図３Ａは、「音響ズーム装置」と呼ばれる装置３００の実施形態のブロック図またはシステム概要を示す。図３Ａの装置３００の実施形態は、パラメータ修正装置３０１とダウンミックス修正装置３０２を含む。パラメータ修正装置３０１は、さらに、到来方向修正装置３０１ａと拡散修正装置３０１ｂを含む。パラメータ修正装置３０１は、到来方向パラメータ１１４ａを受けて、修正されたまたは第２の到来方向パラメータ２１４ａを得るために、制御信号ｄ４０２に依存して、第１のまたは受けた到来方向パラメータ１１４ａを修正するように構成される。パラメータ修正装置３０１は、第１のまたは最初の拡散パラメータ１１４ｂを受けて、制御信号４０２に依存して、第２のまたは修正された拡散パラメータ２１４ｂを得るために、拡散修正装置３０１ｂにより拡散パラメータ１１４ｂを修正するように更に構成される。ダウンミックス修正装置３０２は、一つ以上のダウンミックス信号１１２を受けて、第１のまたは最初の到来方向パラメータ１１４ａ、第１のまたは最初の拡散パラメータ１１４ｂおよび／または制御信号４０２に依存して、第２または修正されたダウンミックス信号２１２を得るために、第１のまたは最初のダウンミックス信号１１２を修正するように構成される。

カメラがマイクロホン１０２とは独立して制御される場合、本発明の実施形態は、カメラ制御４０２によってオーディオシーンまたはオーディオ知覚の変化を合成させる可能性を供給する。加えて、カメラ４００がズーミングなしで水平に回転するだけである場合、すなわち、ズーミング制御信号はないが回転制御信号のみが適用される場合、ダウンミックス信号１１２を修正せずに、その方向は、変化しうる。これは、図２および図３の「回転制御装置」によって説明される。

回転修正は、指向性の再マッピングまたは方向の再マッピングについてのセクションにおいて更に詳細に説明される。拡散およびダウンミックス修正についてのセクションは、平行移動またはズーミング応用例に関連がある。

本発明の実施形態は、例えば、まず回転修正、その後、平行移動若しくはズーム修正、またはその逆を実行することによって、回転修正および平行移動若しくはズーム修正を実行するように、または、対応する方向性マッピング関数を供給することによって、同時に両方を実行するように構成されうる。

音響ズーミング効果を得るために、聴取位置は、仮想的に変更される。そして、それは、適切に分析方向を再マッピングすることによってなされる。修正された音響シーンの正しい全体の印象を得るために、ダウンミックス信号は、再マップされた方向依存フィルタによって処理される。このフィルタは、例えば、より近い音響がレベルにおいて増加するように、利得を変える。その一方で、関心のない（ｏｕｔ−ｏｆ−ｉｎｔｅｒｅｓｔ）領域からの音響は、減衰させられうる。また、拡散は、例えば、新しい聴取位置のより近くに現れる音響が、以前よりも拡散が小さく再生される必要があるように、同じ仮定によってスケールされる。

以下に、装置３００によって実行されたアルゴリズムまたは方法のより詳細な説明が与えられる。音響のズーム装置の概要が、図３Ａで与えられる。まず、方向の再マッピングが説明され（ブロック３０１ａ、ｆ_p（ｋ，ｎ，φ，ｄ））、そして、拡散修正（ブロック３０１ｂ、ｆ_d（ｋ，ｎ，φ，ｄ））のためのフィルタが示される。ブロック３０２は、ズーム制御および最初の空間パラメータに依存しているダウンミックス修正を説明する。

以下のセクションにおいて、方向の再マッピング、また、例えば、方向修正ブロック３０１ａによって実行されるような到来方向パラメータの再マッピングは、説明される。

一般性を失わずに、ＤＯＡ再マッピングの例は、提示を簡単にするために、二次元の場合に関して与えられる（図４）。三次元のＤＯＡの再マッピングは、同様の考慮によってなされる。

図４において、上述のように、ズームパラメータｄが最初の聴取位置Ｓと修正された聴取位置Ｓ２間の平行移動距離ｄとして表されるが、ｄはまた、倍率、例えば４倍または８倍ズームのような光学ズームでもありえる。特に、幅またはフィルタ制御に関して、ｄを倍率とみなし、距離とはみなさないことは、音響ズームの簡単な実施態様を可能にする。換言すれば、ズームパラメータｄは、この場合、実質上の距離である、または少なくとも距離に比例する。

更に、本発明の実施形態はまた、上記のような「ズームイン」、例えば対象までの（例えば、位置Ｓから位置Ｓ２まで移動することによって図４の対象Ａまでの）距離を縮めることの他もサポートするように構成され、同様に、「ズームアウト」、例えば対象までの（例えば、位置Ｓ２から位置Ｓまで移動することによって図４の対象Ａまでの）距離を増加させることもサポートするように構成されうる点に留意する必要がある。この場合、聴取者の側面に位置した対象（例えば位置Ｓ２に関する対象Ｂ）は、聴取者が位置Ｓに移動するときに、聴取者の正面へ移動するので、説明されたようなズームインと比較して、逆の考慮が適用される。換言すれば、角度の大きさは（例えばβからαまで）低減される。

方向の再マッピングまたはベクトル変換は、到来方向修正装置３０１ａによって実行される。図５Ａは、図４に示されたシナリオのための到来方向のための（ズーム比ｄに依存している）模範としてのマッピング関数を示す。図５Ａのダイヤグラムは、１から２の範囲のｘ軸上のズーム比およびｙ軸上の修正されたまたはマップされた角度βを示す。１のズーム比に関して、β＝α、すなわち、最初の角度は、修正されない。参照符号５１２は、α＝１０°に関するマッピング関数ｆ_pに関連し、参照符号５１４は、α＝３０°に関するマッピング関数ｆ_pに関連し、参照符号５１６は、α＝５０°に関するマッピング関数ｆ_p（ｋ，ｎ，φ，ｄ）に関連し、参照符号５１８は、α＝７０°に関するマッピング関数ｆ_p（ｋ，ｎ，φ，ｄ）に関連し、参照符号５２０は、α＝９０°に関するマッピング関数ｆ_p（ｋ，ｎ，φ，ｄ）に関連する。

本発明の実施形態は、ｋおよびｎによって定義された全ての時間および周波数ビン値に関する同じマッピング関数ｆ_pを使用するように構成でき、または、異なる時間値および／または周波数ビンに関して異なるマッピング関数を使用しうる。

上記説明から明らかとなるように、フィルタｆ_dの後についての考えは、それがズームイン方向（φ＜｜γ｜）に関しては拡散を低下させ、焦点がはずれる方向（φ＞｜γ｜）に関しては拡散を増加させるように、拡散ψを変えることである。

マップされた角度βの決定を単純化するために、修正装置３０１ａの特定の実施形態は、方向だけを使用し、音響の到来方向を定めているすべての音源、例えばＡおよびＢが第１の聴取位置まで同じ距離を有する、例えば単位半径上に配置されると仮定するように構成される。

正面方向から来ている音響を再生するだけであるスピーカ・セットアップ、例えば典型的ステレオスピーカ・セットアップの場合、マッピング関数ｆ（）は、ＤＯＡが再マッピングされる最大角度が制限されるように、設計することができる。例えば、スピーカが±６０°に位置決めされるとき、±６０°の最大角度が選択される。このように、ズームが使用されるとき、全部の音響シーンは正面のままであり、広がるだけである。

上述した説明から分かるように、回転の変化または差は、第１の参照または０°方向を定めている方向をそれぞれ最初に見ている第１の聴取方向（例えば観察者、聴取者の「鼻」の方向）から始まって得られる。聴取方向が変化するとき、参照または０°方向はそれに応じて変化する。従って、本発明の実施形態は、第２の方向パラメータがオーディオシーンにおける同じ「到来方向」を示すが新しい参照方向または座標系と関連しているように、新しい参照または０°方向によって、音響の最初の角度または到来方向、すなわち、第１の方向パラメータを変える。同様の考慮は平行移動またはズームに適用する。ここで、知覚された到来方向は、第１の聴取方向の平行移動またはズームイン方向によって変化する（図４参照）。

第１の方向パラメータ１１４ａおよび第２の方向パラメータ２１４ａは、二次元または三次元のベクトルでありえる。加えて、第１の方向パラメータ１１４ａは、ベクトルでありえる。制御信号４０２は、回転角（例えば前述の例における２０°）を定めている回転制御信号、および（前述の二次元例における右への）回転方向であり、そして、パラメータ修正装置３０１、３０１ａは、第２の方向パラメータ、すなわち、第２のまたは修正されたベクトル２１４ａを得るために、回転方向と逆方向の回転角（前述の例におけるβ＝α−２０°）だけベクトルを回転させるように構成される。

以下のセクションにおいて、例えば、拡散修正装置によって実行されたような拡散スケーリング３０１ｂが更に詳細に説明される。

拡散は、ＤＯＡに依存する窓によってスケールされる。ある実施形態において、拡散Ψ（ｋ，ｎ）の値は、ズームインされた方向に関しては減少し、その一方で、関心の外にある方向に関する拡散値は増加する。これは、音源が聴取位置の近くに置かれる場合、それらがより拡散されず知覚されるという観測に対応する。従って、例えば、最小ズーム比（例えばｄ＝１）に関しては、拡散は、修正されない。カメラ像によってカバーされる視角の範囲は、拡散値が増減されるスケーリングのためのコントローラとしてみなされうる。

ズームイン方向（ｚｏｏｍｅｄ−ｉｎ−ｄｅｒｅｃｔｉｏｎｓ）または関心のある方向（ｄｉｒｅｃｔｉｏｎｓ−ｏｆ−ｉｎｔｅｒｅｓｔ）は、角度の中央範囲（ｃｅｎｔｒａｌ ｒａｎｇｅ）とも呼ばれ、第１のまたは最初の聴取方向、例えば最初の０°参照方向の中心に配置される関心のある角形の窓（ａｎｇｕｌａｒ ｗｉｎｄｏｗ ｏｆ ｉｎｔｅｒｅｓｔ）に関連する。角形の窓または中央範囲は、角形の窓の境界を定めている角度値γで決定される。角形の窓および角形の窓の幅は、負の境界角度−γおよび正の境界角度γによって定義できる。ここで、負の境界角度の大きさは、正の境界角度と異なりうる。他の好ましい実施形態において、負の境界角度および正の境界角度は、同じ大きさ（第１の聴取方向を中心とした対称窓または角度の中央範囲）を有する。境界角度の大きさは、角度幅とも呼ばれ、そして、（負の境界角度から正の境界角度まで）窓の幅は、全体の角度幅とも呼ばれる。

本発明の実施形態によれば、到来方向パラメータ、拡散パラメータ、および／または、直接または拡散成分は、最初の到来方向パラメータが関心のある窓内にあるかどうか、例えば第１の聴取位置と関連するＤＯＡ角度またはＤＯＡ角度の大きさが境界角度の大きさまたは角度幅γより小さいかどうか、または、最初の到来方向パラメータが関心のある窓の外にあるかどうか、例えばＤＯＡ角度または第１の聴取位置と関連するＤＯＡ角度の大きさが境界角度の大きさまたは角度幅γより大きいかどうかに、異なって依存して、修正されうる。これは、方向依存（ｄｉｒｅｃｔｉｏｎ−ｄｅｐｅｎｄｅｎｔ）とも呼ばれ、そして、対応するフィルタ関数は、方向依存フィルタ関数と呼ばれる。ここで、角度幅または境界角度γは、対応するフィルタがパラメータの増加からパラメータの減少まで、あるいはその逆に、変化させる角度を定める。

拡散修正装置３０１ｂを参照して、拡散修正装置３０１ｂは、関数ｆ_d（ｋ，ｎ，φ，ｄ）、または、時間／周波数インデックスｋ、ｎ、最初の到来方向φおよびズームコントローラｄに依存しているｆ_dによって、拡散を修正するように構成される。図５Ｂは、フィルタ関数ｆ_dの実施形態を示す。フィルタｆ_dは、拡散範囲、例えば範囲［０〜１］に合うように適合された、後に説明されるフィルタ関数Ｈ₁の逆変換として実行されうる。図５Ｂは、マッピング関数またはフィルタｆ_dを示す。ここで、ｘ軸は、０から１までの範囲にある、最初のまたは第１の拡散ψを示し、図５Ｂにおいてψ_inと呼ばれ、そして、ｙ軸は、第２のまたは修正された拡散ψ_modを示し、同様に０から１の範囲である。ズームが使用されない（ｄ＝０）場合、フィルタｆ_dは、全く拡散を変化させず、バイパス、すなわちψ_mod＝ψ_inにそれぞれセットされる。参照符号５５２は、バイパスラインを表す。

最初の到来方向が角度幅γ内にある場合、拡散は減少する。最初の到来方向が角度幅γの外にある場合、拡散は増加する。図５Ｂは、ｆ_dのいくつかのプロトタイプ関数、すなわち、観察幅または角度幅γに依存している５６２、５６４、５７２および５７４を示す。図５Ｂに示される例において、角度幅は、γ₁よりγ₂が小さい、すなわちγ₂＜γ₁である。このように、γ₂は、γ₁よりも高いズーム比ｄに対応する。

最初の到来方向φが、フィルタｆ_dによるマッピングの後、最初の拡散値ψ_inまたはψと比較して、修正された拡散値ψ_modの減少によって反映される角度幅γ内にある場合、バイパスライン５５２の下の領域は、修正された拡散値ψ_modを定める。最初の到来方向φが、窓の外にある場合、バイパスライン５５２より上の領域は、修正された拡散値ψ_modに最初の拡散ψのマッピングを示す。換言すれば、バイパスライン５５２より上の領域は、マッピングの後、拡散の増加を示す。他の好ましい実施形態では、角度幅γは、ズーム比ｄの増加とともに減少する。換言すれば、ズーム比ｄが高くなるほど、角度幅γは小さくなる。加えて、実施形態は、ズーム比ｄまたは平行移動情報が、フィルタ関数ｆ_dの角度幅γに影響するだけでなく、それが窓内にある場合に拡散が増加する角度またはファクタ、そして、それが角度幅γによって定義される窓の外にある場合に拡散ψが減少する角度またはファクタに影響するように、構成されうる。この種の実施形態は、図５Ｂに示される。ここで、角度幅γ₁は、ズーム比ｄ₁に対応し、角度幅γ₂は、ズーム比ｄ₂に対応する。ここで、ｄ₂は、ｄ₁より大きく、したがって、角度幅γ₂は角度幅γ₁より小さい。加えて、参照符号５６４により示され、より大きいズーム比ｄ₂に対応する関数ｆ_dは、最初の拡散値ψ_inを、より低いズーム比ｄ₁に対応する５６２によって示されたフィルタ関数ｆ_dより低い修正された拡散値ψ_modにマップする。換言すれば、フィルタ関数の実施形態は、角度幅γが小さいほど大きく最初の拡散を減少させるように構成されうる。それに対応することが、逆の方法で、バイパスライン５５２より上の領域に当てはまる。換言すれば、フィルタ関数ｆ_dの実施形態は、最初の拡散ψ_inを、ズーム比ｄおよび角度幅γに依存している修正された拡散ψ_modにマップするように構成されうる。または、ズーム比ｄが高いほど、角度幅γは小さい、および／または、窓の外の到来方向φのための拡散の増加は高くなる。

更なる実施形態において、同じ方向依存する窓またはフィルタ関数ｆ_d（ｋ，ｎ，φ，ｄ）は、すべてのズーム比に適用される。しかしながら、より高い平行移動またはズーム比に関するより小さい角度幅を有する異なる方向依存する窓またはフィルタ関数の使用は、ユーザのオーディオ体験により良く整合して、より現実的なオーディオ知覚を供給する。異なるズーム比に関する異なるマッピング値（窓内の到来方向値φに関してズーム比の増加と共に拡散の減少が大きくなる、そして、到来方向値φが角度幅γの外にある場合に、高いズーム比に関して拡散値は増加するまたは高くなる）のアプリケーションは、現実的なオーディオ知覚を改善する。

以下では、例えば、ダウンミックス修正装置３０２によって実行されるようなダウンミックス修正の実施形態について、更に詳細に説明する。

ダウンミックス信号のためのフィルタは、出力信号の直接および拡散部分の利得を修正するために使用される。空間オーディオ符号器構想の直接的な結果として、スピーカ信号は、このように修正される。ズームインされた領域の音響は増幅され、その一方で、関心のない方向からの音響は、減衰させられうる。

ダウンミックス信号１１２が、方向オーディオ符号化（ＤｉｒＡＣ）または空間オーディオマイクロホン（ＳＡＭ）のためのモノラルまたはステレオ信号でありえるので、以下では、修正の２つの異なる実施形態について説明する。

ここで、Ｓ（ｋ，ｎ）は、ダウンミックス信号の直接音成分を示し、Ｎ（ｋ，ｎ）は、最初のダウンミックス信号における拡散音成分を示し、そして、ｋは、信号が示す時間インデックスまたは時刻を示し、そして、ｎは、一定の時刻ｋに信号の周波数ビンまたは周波数チャンネルを示す。

両方のフィルタは、方向依存重み付け関数である。例えば、マイクロホンのカージオイド形のピックアップ・パターンは、この種の重み付け関数のための設計基準としてとられうる。

フィルタＨ₁（ｋ，ｎ，φ，ｄ）は、直接音がズームインされた領域の方向のために増幅され、他方向から来ている音響のレベルは減衰されるように、二乗余弦窓（ｒａｉｓｅｄ ｃｏｓｉｎｅ ｗｉｎｄｏｗ）として実行できる。一般に、異なる窓形状は、直接および拡散音響成分にそれぞれ適用できる。

その窓によって実行された利得フィルタは、実際の平行移動またはズーム制御ファクタｄによって制御できる。例えば、ズームは、焦点合せされた方向に関して等しい利得の幅および一般の利得の幅を制御する。異なる利得窓に関する例が、図６に与えられる。

図６は、重み付けフィルタＨ₁（ｋ，ｎ，φ，ｄ）のための異なる利得窓を示す。４つの異なる利得プロトタイプが示される。
１．実線：ズームは使用されない、利得はすべての方向に関して０ｄＢである（６１２参照）。
２．破線：１．３のズーム比が適用される、窓幅は最大利得に関して２１０°の幅を有し、そして、最大利得は２．３ｄＢである（６１４参照）。
３．点線：２．１のズーム比が適用される、最大利得のためのチャネル幅は１４０°まで減少する、そして、最大利得は３ｄＢで、最小は−２．５ｄＢである（６１６参照）。
４．一点短鎖線：ズーム比は２．８である、チャネル幅は最大利得に関して３０°である、そして、利得は最大＋３ｄＢおよび最小−６ｄＢに限定される（６１８参照）。

図６から分かるように、図６の０°によって示された第１の聴取方向は、異なるズーム比に依存する方向に依存する窓の中心を形成する。ここで、方向に依存する窓の所定の中央範囲または幅は、ズーム比が大きいほど、小さい。中央範囲または窓の境界は、利得が０ｄＢである角度γによって定義される。図６は、同じ大きさを有する正および負の境界を有する対称窓を示す。

窓６１４は、最大利得に関して２１０°の幅を、そして、＋／−１３０°の境界＋／−γ₂による２６０°の幅を有する。ここで、所定の中央領域内の直接成分は、増加し、そして、所定の中央領域の外の直接成分は、減少する（利得＝０ｄＢ）。

窓６１６は、最大利得に関して１４０°の幅を、そして、＋／−９０°の境界＋／−γ₃による１８０°の幅を有する。ここで、所定の中央領域内の直接成分は、増加し、そして、所定の中央領域の外の直接成分は、減少する（負の利得−２．５ｄＢ）。

窓６１８は、最大利得に関して３０°の幅を、そして、＋／−３０°の境界＋／−γ₄による６０°の幅を有する。ここで、所定の中央領域内の直接成分は、増加し、そして、所定の中央領域の外の直接成分は、減少する（負の利得−６ｄＢ）。

従って、ある実施形態において、ズーム比ｄは、幅、すなわち、負および正の境界や全体の幅、およびプロトタイプ窓の利得を制御する。このように、窓は、幅および利得が最初の到来方向φに正しく適用されるようにすでに設計されうる。

出力信号の歪みを回避するために、最大利得は、制限される必要がある。窓の幅、またはここに示されたような厳密な形状は、ズーム比が利得窓のさまざまな態様をどのように制御するかについての図示例とみなされるべきである。他の実施態様は、さまざまな実施形態において使用されうる。

フィルタＨ₂（ｋ，ｎ，φ，ｄ）は、拡散尺度Ψ（ｋ，ｎ）がどのように修正されて、図７で示すようなサブカージオイドの窓としてどのように実行できるかの方法に類似して、ダウンミックス信号の拡散部分１１２ａを修正するように使用される。この種の窓を適用することによって、関心のない方向からの拡散部分は、わずかに減衰させられるが、ズームインされた方向は、不変のまま、または、ほとんど不変のままである。図７は、サブカージオイドの窓を示し、それは、最初の到来方向φの最初の方向の−３０°と３０°の間の領域において拡散成分をほとんど不変に保つ、そして、最初の到来方向φの、偏差、すなわち、０°方向から始まる角度が高いほど拡散成分を減衰させる。換言すれば、ズームインされた領域のために、ダウンミックス信号の拡散信号成分は、不変のままである。これは、ズーム方向のより直接の音再生を生じさせる。マイクロホンが実質的に離れて置かれるので、すべての他方向から来る音響は、より拡散するようになされる。このように、それらの拡散部分は、最初のダウンミックス信号のそれらと比較して減らされる。明白なことに、所望の利得フィルタは、先に述べた二乗余弦窓を使用して設計することもできる。しかし、スケーリングが直接音修正の場合よりも明白でない点に留意されたい。更なる実施形態において、窓は、ズーム比に依存しうる。ここで、窓関数７０２のスロープは、ズーム比が高いほど、急である。

以下では、ステレオダウンミックス修正の実施形態、すなわち、ステレオダウンミックス信号Ｗの修正について説明される。

さらにまた、信号Ｓ（ｋ，ｎ）は、直接音を示し、一方、Ｎ_iは、ｉ番目のマイクロホンのための拡散音を示す。（２）、（３）に類似して、直接および拡散音成分は、拡散尺度に基づいてダウンミックスチャネルから決定できる。利得係数ｃは、２つのダウンミックスチャネルと関連した異なる指向性パターンから生じる異なるステレオチャネルにおける直接音成分の異なるスケーリングに対応する。直接音のスケーリングファクタおよびＤＯＡの関係に関する詳細は、ＳＡＭにおいて見つけることができる。このスケーリングが観察された音場の音響のＤＯＡに依存するので、その値は、修正された仮想録音位置から生じるＤＯＡ再マッピングによって修正されなければならない。

モノラルダウンミックスの場合に関して述べられたように、利得フィルタＧ_ij（ｋ，ｎ，φ，ｄ）の計算は、対応する利得フィルタＨ_i（ｋ，ｎ，φ，ｄ）によって実行される。新しい仮想録音位置に対応するように、新しいステレオスケーリングファクタｃ_modは、修正されたＤＯＡの関数として、決定される。

図２および図３Ａを参照して、本発明の実施形態は、第２の聴取位置または第２の聴取方向を示している第２のパラメトリック空間オーディオ信号２１２、２１４に、空間オーディオシーンにおける第１の聴取位置または第１の聴取方向を示している第１のパラメトリック空間オーディオ信号１１２、１１４を変換するための装置３００を供給する。第２の聴取位置または第２の聴取方向は、第１の聴取位置または第１の聴取方向とは異なる。その装置は、第２のパラメトリック空間オーディオ信号２１２、２１４を得るために、第１の聴取位置または第１の聴取方向の変更に依存している第１のパラメトリックの誤ったオーディオ信号１１２、１１４を修正するように構成された空間オーディオ信号修正装置３０１、３０２を含む。ここで、第２の聴取位置または第２の聴取方向は、その変化によって変更された第１の聴取位置または第１の聴取方向に対応する。

装置３００の実施形態が、一つの補助情報だけ、例えば到来方向１１４ａまたは拡散パラメータ１１４ｂ、または、オーディオダウンミックス信号１１２だけ、または、上述した信号およびパラメータのいくつかまたはすべてを変換するように構成できる。

前述のように、方向オーディオ符号化（ＤｉｒＡＣ）を使用した実施形態において、アナログマイクロホン信号は、デジタル化されて、時間ごとまたはブロックｋごとに、周波数表現を示しているマイクロホン信号のダウンミックスされた時間／周波数表現Ｗ（ｋ，ｎ）を供給するように処理される。そして、周波数またはスペクトル表現の各周波数ビンは、インデックスｎによって示される。ダウンミックス信号１１２に加えて、空間オーディオ分析装置１００は、周波数ビンｎごとに、そして、時刻ｋごとに、方向パラメータまたは情報を供給している１つの単位ベクトルｅ_DOA（方程式（４）を与える）を、時刻ｋごとに、そして、対応する時刻ｋに関する周波数ビンｎごとに決定する。加えて、空間オーディオ分析装置１００は、時刻ｋごとに、そして、周波数ビンｎごとに、直接の音またはオーディオ成分の拡散の音またはオーディオ成分との間の関係を定めている拡散パラメータψを決定する。ここで、拡散成分は、例えば、２以上の音響源によって、および／または、音響源からのオーディオ信号の反射によって生じる。

ＤｉｒＡＣは、それが、オーディオシーン、例えば、オーディオ源、反射、マイクロホンおよび各聴取者の位置および方向を定めている空間オーディオ情報を、対応する１つの（モノラル）ダウンミックスオーディオ信号Ｗ（ｋ，ｎ）またはいくつかの（例えばステレオの）ダウンミックスオーディオ信号Ｗ₁（ｋ，ｎ）およびＷ₂（ｋ，ｎ）と関連した、１つの方向情報、すなわち、単位ベクトルｅ_DOA（ｋ，ｎ）および０から１の間の１つの拡散値ψ（ｋ，ｎ）に低減させるので、非常に処理効率がよく、メモリ効率のよい符号化である。

従って、上述した方向オーディオ符号化（ＤｉｒＡＣ）を使用した実施形態は、時刻ｋごとおよび周波数ビンｎごとに、対応するダウンミックス値Ｗ（ｋ，ｎ）をＷ_mod（ｋ，ｎ）に、対応する到来方向パラメータ値ｅ（ｋ，ｎ）を（φおよびφmodそれぞれによって示された図１〜図３における）ｅmod（ｋ，ｎ）に、および／または、拡散パラメータ値ψ（ｋ，ｎ）をψmod（ｋ，ｎ）に修正するように構成される。

空間オーディオ信号修正装置は、例えばパラメータ修正装置３０１およびダウンミックス修正装置３０２を含むまたはそれにより形成される。好ましい実施形態によれば、パラメータ修正装置３０１は、修正された方向パラメータ２１４ａを決定するために最初のパラメータ１１４ａを処理するように、最初の方向パラメータφ、それぞれ１１４ａに依存している拡散パラメータψを処理するために、最初の拡散パラメータψ、それぞれ１１４ｂを使用している方程式（２）および（３）を用いてダウンミックス信号１１２を分割するように、最初の方向パラメータφ、１１４ａに依存している方向に依存するフィルタリングＨ₁（ｋ，ｎ，φ，ｄ）およびＨ₂（ｋ，ｎ，φ，ｄ）を適用するように構成される。前に説明されたように、これらの修正は、時刻ｋごとおよび周波数ビンｎごとに、時刻ｋおよび周波数インスタントｎごとに、各修正された信号および／またはパラメータを得るために実行される。

一実施形態によれば、装置３００は、制御信号４０２、例えば回転制御信号またはズーム制御信号に依存して、第２のパラメトリック空間オーディオ信号の第２の方向パラメータ２１４ａを得るために、第１のパラメトリック空間オーディオ信号の第１の方向パラメータ１１４ａを修正するだけであるように構成される。聴取位置／方向の変更が回転だけを含み、平行移動またはズームは含まない場合、方向パラメータφ（ｋ，ｎ）１１４ａの対応する修正またはシフトは、充分である。対応する拡散パラメータおよびダウンミックス信号成分は、第２のダウンミックス信号２１２が、第１のダウンミックス信号１１２に対応するように、そして、第２の拡散パラメータ２１４ｂは第１の拡散パラメータ１１４ｂに対応するように、修正されないままにされうる。

平行移動の変化の場合には、例えば、ズームが実行される場合、図５Ａに示すような再マッピング関数による方向パラメータφ（ｋ，ｎ）１１４ａの修正は、すでに音響体験を改善して、（拡散パラメータまたはダウンミックス信号を修正なしで）修正されないまたは最初のパラメトリック空間オーディオ信号と比較して、オーディオ信号と、例えば、ビデオ信号との間のより良い同期を提供する。

フィルタｆ_pによって到来方向を適合させるまたは再マッピングすることを含むだけである上記２つの実施形態は、すでにズーミング効果のより良い印象を供給する。

他の実施形態によれば、装置３００は、フィルタＨ₁（ｋ，ｎ，φ，ｄ）を適用するように構成される。換言すれば、この実施形態は、到来方向の再マッピングまたは拡散修正を実行しない。この実施形態は、例えば、ダウンミックス信号１１２から直接成分１１２ａだけを決定するように、そして、直接の成分の方向依存して重み付けされたバージョンを生成するためにフィルタ関数Ｈ₁を直接成分に適用させるように構成される。この種の実施形態は、直接成分の方向依存して重み付けされたバージョンを、修正されたダウンミックス信号Ｗ_mod２１２として使用するように、または、最初のダウンミックスＷ１１２から直接成分１１２ｂを決定して、直接成分の方向依存して重み付けされたバージョンと最初のまたは変化していない拡散成分１１２ｂを加算すること、または一般には組み合わせることによって、修正されたダウンミックス信号Ｗ_mod２１２を生成するように、更に構成されうる。しかし、音響ズーミングの改善された印象を得ることができ、到来方向が修正されないので、ズーム効果は制限される。

しかし、更なる実施形態において、フィルタＨ₁（ｋ，ｎ，φ，ｄ）およびＨ₂（ｋ，ｎ，φ，ｄ）は、両方とも適用されるが、到来方向の再マッピングまたは拡散修正は、実行されない。音響印象は、修正されないまたは最初のパラメトリック空間オーディオ信号１１２、１１４と比較して改善される。ズーミング印象はまた、拡散音が存在するが、到来方向φが修正されないので、なお制限される場合、直接成分にフィルタ関数Ｈ₁（ｋ，ｎ，φ，ｄ）だけを適用するよりも良い（Ｈ₁（ｋ，ｎ，φ，ｄ）だけを使用した上述の実施形態より良い）。

更なる実施形態において、フィルタｆ_dだけが適用される、または、換言すれば、拡散成分ψだけが修正される。ズーミング効果は、ズームした領域（関心がある領域）の拡散が減少し、関心のないところの拡散値は増加するので、最初のパラメトリック空間オーディオ信号１１２、１１４と比較して、改善される。

更なる実施形態は、フィルタＨ₁（ｋ，ｎ，φ，ｄ）のみを適用することと組合せて、フィルタ関数ｆ_pによって、到来方向φを再マッピングすることを実行するように構成される。換言すれば、この種の実施形態は、フィルタ関数ｆ_dによる拡散修正を実行せず、第２のフィルタ関数Ｈ₂（ｋ，ｎ，φ，ｄ）を最初のダウンミックス信号Ｗ１１２の拡散成分に適用しない。この種の実施形態は、到来方向の再マッピングを適用しているだけよりも非常に良いズーム印象を供給する。

両方のフィルタ関数Ｈ₁（ｋ，ｎ，φ，ｄ）およびＨ₂（ｋ，ｎ，φ，ｄ）を使用したダウンミックス修正と組合せた関数ｆ_pによる到来方向再マッピングを適用している実施形態は、第１のフィルタ関数Ｈ₁のみを適用することと組み合わせた到来方向の再マッピングを適用するだけよりさらに良いズーム印象を供給する。

関数ｆ_p、フィルタＨ₁（ｋ，ｎ，φ，ｄ）およびＨ₂（ｋ，ｎ，φ，ｄ）を使用したダウンミックス修正および関数ｆ_dを使用した拡散修正による到来方向再マッピングを適用することは、最高の音響のズーム実施態様を供給する。

到来方向だけを再マッピングする実施形態を振り返ると、加えて、更なる拡散パラメータ１１４ｂを修正することは、オーディオ体験を改善する、または、換言すれば、空間オーディオシーンの範囲内の変更位置に関して、音響体験の適合を改善する。従って、更なる実施形態において、装置３００は、方向パラメータφ（ｋ，ｎ）および拡散パラメータψ（ｋ，ｎ）を修正するようにだけ構成されるが、ダウンミックス信号Ｗ（ｋ，ｎ）１００を修正しないように構成されうる。

上記したような装置３００の好ましい実施形態は、空間オーディオシーンの変更位置に関して、更にオーディオ体験さえ改善するためにダウンミックス信号Ｗ（ｋ，ｎ）を修正することも含む。

従って、第１の方向パラメータφ（ｋ，ｎ）１１４ａがベクトルである実施形態において、パラメータ修正装置３０１は、第２の方向パラメータφ_mod（ｋ，ｎ）２１４ａを得るために、回転制御信号によって定められた方向に逆方向の回転制御信号によって定められた角度によって、第１の方向パラメータをシフトするまたは修正するように構成される。

更なる実施形態において、パラメータ修正装置３０１は、第１の方向パラメータφ（ｋ，ｎ）およびズーム制御信号４０２によって定められたズーム比ｄまたは変化信号によって定められた別の平行移動制御情報に依存して第２の方向パラメータ２１４ａを定めている（例えば、図５Ａに示されるような）非線形のマッピング関数を使用して、第２の方向パラメータ２１４ａを得るように構成される。

上述の通り、更なる実施形態において、パラメータ修正装置３０１は、第１の方向パラメータφ（ｋ，ｎ）１１４ａに依存した第２の拡散パラメータψ_mod（ｋ，ｎ）２１４ｂを得るために、第１のパラメトリック空間オーディオ信号の第１の拡散パラメータψ（ｋ，ｎ）１１４ｂを修正するように構成されうる。パラメータ修正装置は、第１の方向パラメータφ（ｋ，ｎ）が所定の中央範囲内、例えば最初の参照方向のγ＝＋／−３０°にある場合（図５Ｂ参照）に、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るために、第１の拡散パラメータψ（ｋ，ｎ）を減少させるように、および／または、第１の方向パラメータφ（ｋ，ｎ）が所定の中央範囲外、例えば二次元の場合における０°の最初の参照方向から＋γ＝＋３０°および−γ＝−３０°により定められた中央範囲外にある場合に、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るために、第１の拡散パラメータψ（ｋ，ｎ）を増加させるように構成された方向依存関数を使用して、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るように更に構成されうる。

換言すれば、特定の実施形態において、パラメータ修正装置３０１、３１０ｂは、第１の方向パラメータ１１４ａが、所定の二次元または三次元の中央範囲の中心を形成している第２のまたは変更された聴取方向を有する第２を有する第２の方向パラメータの所定の中央範囲内にある場合に、第２の拡散パラメータ２１４ｂを得るために、第１の拡散パラメータ１１４ｂを減少させるように、および／または、第１の方向パラメータ１１４ａが所定の中央範囲外にある場合に、第２の拡散パラメータを得るために、第１の拡散パラメータ１１４ｂを増加させるように構成された方向依存関数を使用して、第２の拡散パラメータ２１４ｂを得るように構成される。第１のまたは最初の聴取方向は、第１の方向パラメータの所定の中央範囲の中心、例えば０°を定める。ここで、所定の中央範囲の正および負の境界は、第２の聴取方向が二次元であるか三次元のベクトルであるかとは独立した二次元（例えば水平）面（例えば＋／−３０°）にある正および負の角度γによって、または、三次元の第１の聴取方向中心の直円錐を定めている対応する角γ（例えば３０°）によって定められる。更なる実施形態は、第１の聴取方向または第１の聴取方向を定めているベクトルに配置されるまたはそれを中心にした、対称および非対称の異なる所定の中央領域または窓を含みうる。

更なる実施形態において、方向依存関数ｆ_d（ｋ，ｎ，φ，ｄ）は、変化信号、例えばズーム制御信号に依存する。ここで、所定の中央範囲、その中央範囲の負および正の境界（または一般に境界）を定めている値γは、平行移動変化が大きいほど、または、ズーム制御信号によって定められたズーム比が高いほど、小さい。

更なる実施形態において、空間オーディオ信号修正装置は、第１の方向パラメータφ（ｋ，ｎ）および第１の拡散パラメータψ（ｋ，ｎ）に依存した第２のパラメトリック空間オーディオ信号の第２のダウンミックス信号Ｗ_mod（ｋ，ｎ）を得るために、第１のパラメトリック空間オーディオ信号の第１のダウンミックスオーディオ信号Ｗ（ｋ，ｎ）を修正するように構成されたダウンミックス修正装置３０２を含む。ダウンミックス修正装置３０２の実施形態は、第１のダウンミックスオーディオ信号Ｗを、例えば、方程式（２）および（３）に基づいた第１の拡散パラメータψ（ｋ，ｎ）に依存している直接成分Ｓ（ｋ，ｎ）１１２ａおよび拡散成分Ｎ（ｋ，ｎ）１１２ｂに分割するように構成されうる。

更なる実施形態において、ダウンミックス修正装置３０２は、直接成分の方向依存して重み付けされたバージョンを得るために、第１の方向に依存する関数Ｈ₁（ｋ，ｎ，φ，ｄ）を適用するように、および／または、拡散成分の方向依存して重み付けされたバージョンを得るために、第２の方向に依存する関数Ｈ₂（ｋ，ｎ，φ，ｄ）を拡散成分に適用するように構成される。ダウンミックス修正装置３０２は、更なる方向依存関数Ｈ₁（ｋ，ｎ，φ，ｄ）を直接成分に適用することによって、直接成分１１２ａの方向依存して重み付けされたバージョンを生み出すように構成されうる。そして、その更なる方向依存関数は、第１の方向パラメータ１１４ａが第１の方向パラメータの更に所定の中央範囲内にあるという場合に、直接成分１１２ａを増加するように、および／または、第１の方向パラメータ１１４ａが第２の方向パラメータの更なる所定の範囲の外にある場合に、直接成分１１２ａを減少させるように、構成される。更なる実施形態においてさえ、ダウンミックス修正装置は、方向依存関数Ｈ₂（ｋ，ｎ，φ，ｄ）を拡散成分１１２ｂに適用することによって、拡散成分１１２ｂの方向依存して重み付けされたバージョンを生み出すように構成されうる。そして、その方向依存関数は、第１の方向パラメータ１１４ａが第１の方向パラメータの所定の中央範囲内にある場合に、拡散成分を減少させるように、および／または、第１の方向パラメータ１１４ａが第２の方向パラメータの所定の範囲の外にある場合に、拡散成分１１２ｂを増加させるように構成される。

他の実施形態において、ダウンミックス修正装置３０２は、直接の成分１１２ａの方向依存して重み付けされたバージョンおよび拡散成分１１２ｂの方向依存して重み付けされたバージョンの組み合わせ、例えば和に基づく第２のダウンミックス信号２１２を得るように構成される。しかし、更なる実施形態は、修正されたダウンミックス信号２１２を得るために、２つの成分を合計することとは別のアルゴリズムを適用しうる。

上で説明したように、ダウンミックス修正装置３０２の実施形態は、２つの乗法子、すなわち（ψ）^1/2および（１−ψ）^1/2によって、拡散部分または成分１１２ｂおよび非拡散または直接の部分または成分１１２ａに、ダウンミックス信号Ｗを分割して、フィルタ関数Ｈ₁によって非拡散部分１１２ａにフィルタをかけ、フィルタ関数Ｈ₂によって拡散部分１１２ｂをフィルタにかけるように構成されうる。フィルタ関数Ｈ₁またはＨ₁（ｋ，ｎ，φ，ｄ）は、時間／周波数インデックスｋ、ｎ、最初の到来方向φおよびズームパラメータｄに依存しうる。加えて、フィルタ関数Ｈ₁は、拡散ψに依存しうる。フィルタ関数Ｈ₂またはＨ₂（ｋ，ｎ，φ，ｄ）は、時間／周波数インデックスｋ、ｎ、最初の到来方向φおよびズームパラメータｄに依存しうる。加えて、フィルタ関数Ｈ₂は、拡散ψに依存しうる。上で説明されたように、フィルタ関数Ｈ₂は、到来方向φから独立して、図７に示されたようなサブカージオイドの窓として、または、単純な減衰率として、実行されることができる。

上記説明を参照すると、ズームパラメータｄは、フィルタＨ₁、Ｈ₂およびモディファイヤーまたは関数ｆ_dおよびｆ_pを制御するために使用されうる（図３Ａ参照）。フィルタ関数Ｈ₁およびｆ_dに関して、ズームパラメータｄは、適用された窓または中央領域の観察幅または角度幅γ（また、境界角度γとも呼ばれる）を制御することもできる。幅γは、例えばフィルタ関数が０ｄＢを有する角度として、定められる（例えば図６の０ｄＢの線を参照）。角度幅γおよび／または利得は、ズームパラメータｄによって制御されうる。γに関する異なる値および異なる最大利得および最小利得の例は、図６に与えられる。

方向依存関数および重み付けが第１または最初の方向パラメータφに依存する（図３Ａ参照）ことを特徴とする装置の実施形態が上で説明されたが、他の実施形態は、第２のまたは修正された拡散ψ_modおよび／または第２のまたは修正された方向パラメータφ_modに依存しているフィルタ関数Ｈ₁およびＨ₂の一方または両方を決定するように構成されうる。最初の方向パラメータφに対応し、（ズームインに関して）修正された方向パラメータφ_modに対応する図４から決定できるように、ズーム比ｄが高いほど、対象Ｂが中心または正面の位置から、側面位置に、または、（図４に示されるよりさらに高いズーム比ｄの場合には）実質的に修正された位置の後ろの位置にさえ移動する。換言すれば、ズーム比ｄが高いほど、聴取者の前の領域にある位置を示している最初に小さい角度の大きさはより大きく増加する。ここで、より高い角度は、聴取者の横の領域の位置を示す。方向パラメータのこの修正は、図５Ａに示すような関数を適用することによって考慮される。加えて、他のパラメータのための、そして、直接のおよび拡散成分のための方向に依存する窓または関数は、例えば図５Ａに示すような到来方向または方向パラメータマッピングに対応する非線形な方法で、ズームｄの増加と共に角度幅γを減少させることによって、最初の方向パラメータまたは角度の修正を考慮するように設計されうる。したがって、これらの方向に依存する窓または関数は、最初の方向パラメータが（例えば関数ｆ_pによる前もっての修正なしで）直接使用されるように、あるいは別な方法として、まず方向パラメータマッピングが実行されて、その後、修正された方向パラメータに基づいた方向に依存した重み付けｆ_d、Ｈ₁および／またはＨ₂が同様の方法で実行されるように構成されうる。再度図４を参照すると、このように、最初の方向パラメータを直接参照する、示している方向依存関数ｆ_d、Ｈ₁およびＨ₂、または、修正された方向パラメータを参照する、示している方向依存関数ｆ_d、Ｈ₁およびＨ₂の両方とも可能である。

修正された方向パラメータを使用した実施形態は、最初の方向パラメータを使用している実施形態と同様に、異なるズーム比のための異なる角度幅および／または異なる利得を有する異なる窓、または、（方向パラメータが異なるズーム比を反映するためにすでにマップされているので）同じ角度幅および同じ利得を有する同じ窓、または同じ角度幅であるが利得が異なる窓を使用することができる。ここで、高いズーム比は、高い利得を生じさせる（図６の窓に類似）。

図３Ｂは、装置の更なる実施形態を示す。図３Ｂの空間オーディオ信号修正装置は、例えば、パラメータ修正装置３０１およびダウンミックス修正装置３０２を含む、またはそれらにより形成される。別の実施形態によれば、パラメータ修正装置３０１は、まず、修正された方向パラメータ２１４ａを決定するために最初のパラメータ１１４ａをまず処理し、次に、修正された方向パラメータφ_modに依存した拡散パラメータψを処理し、図３Ａに基づいて説明されたように、方程式（２）および（３）および最初の拡散パラメータψ、それぞれ１１４ｂを用いてダウンミックス信号１１２を分割し、修正された方向パラメータφ_modを依存した方向依存フィルタリングＨ₁およびＨ₂を適用するように構成される。前に説明されるように、これらの修正は、時刻ｋおよび周波数インスタントｎごとに、各修正された信号および／またはパラメータを得るために、時刻ｋおよび周波数ビンｎごとに、実行される。

図３Ｂの装置３００の他の別の実施形態によれば、パラメータ修正装置３０１は、修正された方向パラメータ２１４ａを決定するために最初のパラメータ１１４ａを処理し、最初の方向パラメータφまたは１１４ａに依存した拡散パラメータψを処理し、修正された拡散パラメータψ_modまたは２１４ｂを決定し、図３Ａに基づいて説明されたように、方程式（２）および（３）および最初の拡散パラメータψを使用してダウンミックス信号１１２または１１４ｂを分割し、そして、修正された方向パラメータφ_modまたは２１４ａに方向依存するフィルタリングＨ₁およびＨ₂を適用するように構成される。

一実施形態によれば、図３Ｂの装置３００は、制御信号４０２、例えば回転制御信号またはズーム制御信号に依存する第２のパラメトリック空間オーディオ信号の第２の方向パラメータ２１４ａを得るために、第１のパラメトリック空間オーディオ信号の第１の方向パラメータ１１４ａを変更するだけであるように構成される。聴取位置／方向の変更が回転だけを含み、平行移動またはズームを含まない場合、方向パラメータφ（ｋ，ｎ）１１４ａの対応する修正またはシフトは充分である。対応する拡散パラメータおよびダウンミックス信号成分は、第２のダウンミックス信号２１２が第１のダウンミックス信号１１２に対応し、第２の拡散パラメータ２１４ｂが第１の拡散パラメータ１１４ｂに対応するように、修正されないままにされうる。

平行移動の変化、例えば、ズームが実行される場合、図５Ａに示すように再マッピング関数による方向パラメータφ（ｋ，ｎ）１１４ａの修正は、すでに音響体験を改善して、（拡散パラメータまたはダウンミックス信号を修正せずに）修正されていないまたは最初のパラメトリック空間オーディオ信号と比較して、オーディオ信号と、例えば、ビデオ信号との間のより良い同期を提供する。

更なる拡散パラメータ１１４ｂを修正することは、オーディオ体験を改善する、または、換言すれば、空間オーディオシーンの範囲内の変更位置に関して、音響体験の適合を改善する。従って、更なる実施形態において、装置３００は、方向パラメータφ（ｋ，ｎ）および拡散パラメータψ（ｋ，ｎ）のみを修正するように構成され、後者は、修正された方向パラメータφ_mod（ｋ，ｎ）に依存し、ダウンミックス信号Ｗ（ｋ，ｎ）１００を修正しない。

図３Ｂによる装置３００の好ましい実施形態はまた、空間オーディオシーンの変更位置に関して更にオーディオ体験を改善するために、最初の拡散ψ（ｋ，ｎ）および修正された方向パラメータφ_mod（ｋ，ｎ）に依存して、ダウンミックス信号Ｗ（ｋ，ｎ）を変更することを含む。

従って、第１の方向パラメータφ（ｋ，ｎ）１１４ａがベクトルである実施形態において、パラメータ修正装置３０１は、第２の方向パラメータφ_mod（ｋ，ｎ）２１４ａを得るために、回転制御信号によって定められた方向に逆方向の回転制御信号によって定められた角度によって第１の方向パラメータをシフトするまたは修正するように構成される。

更なる実施形態において、パラメータ修正装置３０１は、ズーム制御信号４０２によって定められた第１の方向パラメータφ（ｋ，ｎ）およびズーム比ｄまたは変化信号によって定められた他の平行移動の制御情報に依存する第２の方向パラメータ２１４ａを定めている（例えば、図５Ａに示されるような）非線形マッピング関数を使用して第２の方向パラメータ２１４ａを得るように構成される。

上述のように、更なる実施形態において、パラメータ修正装置３０１は、第２の方向パラメータφ_mod（ｋ，ｎ）２１４ａに依存した第２の拡散パラメータψ_mod（ｋ，ｎ）２１４ｂを得るために、第１のパラメトリック空間オーディオ信号の第１の拡散パラメータψ（ｋ，ｎ）１１４ｂを変更するように構成されうる。パラメータ修正装置は、第２の方向パラメータφ_mod（ｋ，ｎ）が所定の中央範囲内、例えば、最初の０°方向を参照とした最初の参照方向の＋／−３０°内にある場合、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るために、第１の拡散パラメータψ（ｋ，ｎ）を減少させるように、および／または、第２の方向パラメータφ_mod（ｋ，ｎ）が所定の中央範囲外、例えば、二次元の場合において０°の最初の参照方向から＋３０°および−３０°により定められた中央範囲の外にある場合、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るために、第１の拡散パラメータψ（ｋ，ｎ）を増加させるように構成された方向依存関数を使用して、第２の拡散パラメータψ_mod（ｋ，ｎ）を得るように構成される。

換言すれば、特定の実施形態において、パラメータ修正装置３０１、３１０ｂは、第２の方向パラメータ２１４ａが所定の二次元または三次元の中央範囲の中心を形成している第１のまたは最初の聴取方向に関する第２の方向パラメータの所定の中央範囲内にある場合に、第２の拡散パラメータ２１４ｂを得るために、第１の拡散パラメータ１１４ｂを減少させるように、および／または、第２の方向パラメータ２１４ａが所定の中央範囲の外にある場合に、第２の拡散パラメータを得るために、第１の拡散パラメータ１１４ｂを増加させるように構成された方向依存関数を使用して、第２の拡散パラメータ２１４ｂを得るように構成される。第１の聴取方向は、第２の方向パラメータの所定の中央範囲の中心、例えば０°を定める。ここで、所定の中央範囲の正および負の境界は、第１の聴取方向が二次元または三次元のベクトルであるかどうかと独立した二次元（例えば水平）面（例えば＋／−３０°）にある正および負の角度によって、または、三次元の第２の聴取方向中心の直円錐を定めている対応する角度（例えば３０°）によって定められる。更なる実施形態は、第１の聴取方向または第１の聴取方向を定めているベクトル中心に配置される、対称および非対称の、異なる所定の中央領域を含みうる。

更なる実施形態において、方向依存関数ｆ_d（ψ）は、変化信号、例えば、ズーム制御信号に依存する。ここで、所定の中央範囲、中央範囲の負および正の境界（または一般に境界）を定めている各値は、平行移動変化が大きいほど、または、ズーム制御信号により定められたズーム比が高いほど、小さい。

更なる実施形態において、空間オーディオ信号修正装置は、第２の方向パラメータφ_mod（ｋ，ｎ）および第１の拡散パラメータψ（ｋ，ｎ）に依存した第２のパラメトリック空間オーディオ信号の第２のダウンミックス信号Ｗ_mod（ｋ，ｎ）を得るために、第１のパラメトリック空間オーディオ信号の第１のダウンミックスオーディオ信号Ｗ（ｋ，ｎ）を修正するように構成されたダウンミックス修正装置３０２を含む。ダウンミックス修正装置３０２の実施形態は、第１のダウンミックスオーディオ信号Ｗを、例えば、方程式（２）および（３）に基づいた第１の拡散パラメータψ（ｋ，ｎ）に依存している直接成分Ｓ（ｋ，ｎ）１１２ａおよび拡散成分Ｎ（ｋ，ｎ）１１２ｂに分割するように構成されうる。

更なる実施形態において、ダウンミックス修正装置３０２は、直接成分の方向依存して重み付けされたバージョンを得るために第１の方向依存関数Ｈ₁を適用するように、および／または、拡散成分の方向依存して重み付けされたバージョンを得るために、第２の方向依存関数Ｈ₂を拡散成分に適用するように構成される。ダウンミックス修正装置３０２は、更なる方向依存関数Ｈ₁を直接の成分に適用することによって、直接の成分１１２ａの方向に依存して重み付けされたバージョンを生み出すように構成されうる。そして、その更なる方向依存関数は、第２の方向パラメータ２１４ａが第２の方向パラメータの更に所定の範囲内にある場合に、直接成分１１２ａを増加させるように、および／または、第２の方向パラメータ２１４ａが第２の方向パラメータの更に所定の中央範囲外にある場合に、直接成分１１２ａを減少させるように構成される。更なる実施形態において、ダウンミックス修正装置は、方向依存関数Ｈ₂を拡散成分１１２ｂに適用することによって、拡散成分１１２ｂの方向依存して重み付けされたバージョンを生み出すように構成されうる。そして、その方向依存関数は、第２の方向パラメータ２１４ａが第２の方向パラメータの所定の範囲内にある場合に、拡散成分１１２ｂを減少させるように、および／または、第２の方向パラメータ２１４ａが第２の方向パラメータの所定の中央範囲外にある場合に、拡散成分１１２ｂを増加させるように構成される。

他の実施態様において、ダウンミックス修正装置３０２は、直接成分１１２ａの方向依存して重み付けされたバージョンおよび拡散成分１１２ｂの方向依存して重み付けされたバージョンの組合せ、例えば和に基づいて、第２のダウンミックス信号を得るように構成される。しかし、更なる実施形態は、修正されたダウンミックス信号２１２を得るために、２つの成分を合計することとは別のアルゴリズムを適用しうる。

前に説明されたように、図３Ｂのダウンミックス修正装置３０２の実施形態は、２つの乗法子、すなわち（ψ）^1/2および（１−ψ）^1/2によって拡散の部分または成分１１２ｂおよび非拡散または直接の部分または成分１１２ａに、ダウンミックス信号Ｗを分けて、フィルタ関数Ｈ₁によって非拡散部分１１２ａにフィルタをかけて、フィルタ関数Ｈ₂によって拡散部分１１２ｂにフィルタをかけるように構成されうる。フィルタ関数Ｈ₁またはＨ₁（φ，ψ）は、時間／周波数インデックスｋ、ｎ、修正された到来方向およびズームパラメータｄに依存しうる。加えて、フィルタ関数Ｈ₁は、拡散ψに依存しうる。フィルタ関数Ｈ₂またはＨ₂（φ，ψ）は、時間／周波数インデックスｋ、ｎ、最初の到来方向φおよびズームパラメータｄに依存していることがありえる。フィルタ関数Ｈ₂またはＨ₂（φ，ψ）は、加えて、拡散ψに依存しうる。前に説明されたように、フィルタ関数Ｈ₂は、図７で示すようなサブカージオイドの窓として、または、修正された到来方向φ_modから独立した単純な減衰率として実行されうる。

上記説明を参照すると、図３Ｂの実施形態においても同様に、ズームパラメータｄは、フィルタＨ₁、Ｈ₂およびモディファイヤーまたは関数ｆ_dおよびｆ_pを制御するために使用されうる。フィルタ関数Ｈ₁およびｆ_dに関して、ズームパラメータｄはまた、適用された窓または中央領域の角度幅γ（また、境界角度γとも呼ばれる）を制御できる。幅γは、例えばフィルタ関数が（図６の０ｄＢの線に類似して）０ｄＢを有する角度として、定められる。角度幅γおよび／または利得は、ズームパラメータｄによって制御されうる。一般に、図３Ａの実施形態に関して与えられた説明が、同じ方法で、または、少なくとも類似した方法で図３Ｂの実施形態に適用される点に留意する必要がある。

以下に、本発明の実施形態が、知覚された音像をビデオカメラのズーム制御に合わせることによってジョイントビデオ／オーディオ再生の改善された体験に導く典型的なアプリケーションが説明される。

テレビ会議において、自動的にカメラを活発発言者（ａｃｔｉｖｅ ｓｐｅａｋｅｒ）に向けることは、最新の技術である。これは、通常、話者へのズーミングクロッサによって接続する。音響は、従来、ピクチャに整合されない。本発明の実施形態はまた、音響的に、活発発言者へのズーミングインの可能性を提供する。これは、ピクチャだけがフォーカスにおいて変化するだけでなく、音響も、注意の所望の変化に整合するので、全体の印象が遠隔ユーザにとってより現実的であるということだった。要するに、音響キューは、視覚キューに対応する。

例えば、家庭用娯楽機器のために、最新のビデオカメラは、サラウンドサウンドを録音できて、強力な光学ズームを備えている。しかしながら、録音された空間音響は、カメラの実際の位置、しかるに、カメラ自体に搭載されたマイクロホンの実際の位置に依存するだけであるので、光学ズームと録音された音響間の知覚的な同等の相互関係はない。クローズアップモードで撮影されたシーンの場合、本発明は、音像をそれに応じて調整することを可能にする。このことは、音響がピクチャとともにズームされるようなより自然で矛盾のない消費者体験につながる。

最初のマイクロホン信号がビデオとともに変化されずに録音され、更なる処理がなされなかった場合に、本発明はまた後処理段階において適用されうること言及される必要がある。最初のズーム長が分かっていなくても、本発明は、創造的なオーディオ−ヴィジュアル後処理ツールボックスにおいて使用されることができる。任意のズーム長は選択されえ、そして、音響のズームは、ピクチャを整合するために、ユーザに向けられうる。あるいは、ユーザは、自分自身の好ましい空間効果をつくることができる。いずれにせよ、最初のマイクロホン録音位置は、ユーザが定めた仮想録音位置に変えられる。

本発明の方法の特定の実施態様の要求事項に応じて、本発明の方法は、ハードウェアにおいて、または、ソフトウェアにおいて実行できる。その実施態様は、本発明の方法の実施形態が実行されるように、プログラミング可能な計算機システムと協動するその上に格納された電子的に読み込み可能な制御信号を有するデジタル記憶媒体、特に、ディスク、ＣＤ、ＤＶＤまたはブルーレイ・ディスクを使用して実行できる。通常、本発明の実施形態は、従って、機械で読み取り可能なキャリアに格納されたプログラムコードによってつくられたコンピュータプログラムである。そして、コンピュータプログラム製品がコンピュータ上で動作するときに、プログラムコードが本発明の方法を実行するように作動する。換言すれば、コンピュータプログラムがコンピュータ上で動作するときに、本発明の方法の実施形態は、従って、本発明の方法のうちの少なくとも１つを実行するためのプログラムコードを有するコンピュータプログラムである。

前述のことは、特にその特定の実施形態に関して、図と共に記載された。形態および詳細におけるさまざまな他の変形がその趣旨および範囲から逸脱することなく、なされうることは、当業者によって理解されるだろう。従って、さまざまな変形が本願明細書において開示され、続く請求項によって理解されるより広い構想から逸脱することなく、様々な実施形態を適応させる際になされることができると理解される。

Claims (18)

1. 空間オーディオシーンにおける第１の聴取位置または第１の聴取方向を示している第１のパラメトリック空間オーディオ信号（１１２、１１４）を、第２の聴取位置または第２の聴取方向を示している第２のパラメトリック空間オーディオ信号（２１２、２１４）に変換するための装置（３００）であって、前記装置は、
   前記第２のパラメトリック空間オーディオ信号（２１２、２１４）を得るために、前記第１の聴取位置または前記第１の聴取方向の変化に依存して、前記第１のパラメトリック空間オーディオ信号（１１２、１１４）を修正するように構成された空間オーディオ信号修正装置（３０１、３０２）であって、前記第２の聴取位置または前記第２の聴取方向は、前記変化によって変更された前記第１の聴取位置または前記第１の聴取方向に対応することを特徴とする空間オーディオ信号修正装置（３０１、３０２）を含むことを特徴とする、装置。
2. 前記空間オーディオ信号修正装置（３０１、３０２）は、
   前記変化に対応している情報を供給している制御信号（４０２）に依存して、前記第２のパラメトリック空間オーディオ信号（２１２、２１４）の第２の方向パラメータ（２１４ａ）を得るために、前記第１のパラメトリック空間オーディオ信号（１１２、１１４）の第１の方向パラメータ（１１４ａ）を修正するように構成されたパラメータ修正装置（３０１、３０１ａ）を含むことを特徴とする、請求項１に記載の装置。
3. 前記第１の方向パラメータ（１１４ａ）および前記第２の方向パラメータ（２１４ａ）は、二次元または三次元ベクトルであることを特徴とする、請求項２に記載の装置。
4. 前記第１の方向パラメータ（１１４ａ）は、ベクトルであること、前記制御信号は、回転角および回転方向を定めている回転制御信号であること、および、前記パラメータ修正装置（３０１、３０１ａ）は、前記第２の方向パラメータ（２１４ａ）を得るために、前記回転方向と逆方向に、前記回転角だけ前記ベクトルを回転させるように構成されることを特徴とする、請求項２又は請求項３に記載の装置。
5. 前記制御信号は、前記第１の聴取方向の平行移動（ｄ）を定めている平行移動制御信号（４０２）であること、前記パラメータ修正装置（３０１、３０１ａ）は、前記第１の方向パラメータ（１１４ａ）、および前記制御信号によって定められた前記平行移動（ｄ）に依存して、前記第２の方向パラメータを定めている非線形のマッピング関数（ｆ_p）を用いて、前記第２の方向パラメータ（２１４ａ）を得るように構成されることを特徴とする、請求項２〜請求項４のいずれか一項に記載の装置。
6. 前記制御信号は、前記第１の聴取方向のズーム比（ｄ）を定めているズーム制御信号（４０２）であること、前記パラメータ修正装置（３０１、３０１ａ）は、前記第１の方向パラメータ（１１４ａ）、および前記ズーム制御信号によって定められた前記ズーム比（ｄ）に依存して、前記第２の方向パラメータを定めている非線形のマッピング関数（ｆ_p）を用いて、前記第２の方向パラメータ（２１４ａ）を得るように構成されることを特徴とする、請求項２〜請求項４のいずれか一項に記載の装置。
7. 前記パラメータ修正装置（３０１、３０１ｂ）は、前記第１の方向パラメータ（１１４ａ）に依存して、または、前記第２の方向パラメータ（２１４ａ）に依存して、前記第２のパラメトリック空間オーディオ信号の第２の拡散パラメータ（２１４ｂ）を得るために、前記第１のパラメトリック空間オーディオ信号の第１の拡散パラメータ（１１４ｂ）を修正するように構成されることを特徴とする、請求項２〜請求項６のいずれか一項に記載の装置。
8. 前記パラメータ修正装置（３０１、３１０ｂ）は、前記第１の方向パラメータ（１１４ａ）が、前記第１の方向パラメータの所定の中央範囲内にある場合に、前記第２の拡散パラメータ（２１４ｂ）を得るために、前記第１の拡散パラメータ（１１４ｂ）を減少させるように、および／または、前記第１の方向パラメータ（１１４ａ）が、前記所定の中央範囲の外にある場合に、前記第２の拡散パラメータを得るために、前記第１の拡散パラメータ（１１４ｂ）を増加させるように適合された方向依存関数（ｆ_d）を使用して、前記第２の拡散パラメータ（２１４ｂ）を得るように構成されること、または、
   前記パラメータ修正装置（３０１、３１０ｂ）は、前記第２の方向パラメータ（２１４ａ）が、前記第２の方向パラメータの所定の中央範囲内にある場合に、前記第２の拡散パラメータ（２１４ｂ）を得るために、前記第１の拡散パラメータ（１１４ｂ）を減少させるように、および／または、前記第２の方向パラメータ（２１４ａ）が、前記所定の中央範囲の外にある場合に、前記第２の拡散パラメータを得るために、前記第１の拡散パラメータ（１１４ｂ）を増加させるように適合された方向依存関数（ｆ_d）を使用して、前記第２の拡散パラメータ（２１４ｂ）を得るように構成されることを特徴とする、請求項７に記載の装置。
9. 前記制御信号は、前記第１の聴取方向の平行移動（ｄ）を定めている平行移動制御信号（４０２）であること、前記方向依存関数は、前記平行移動に依存すること、および、前記所定の中央範囲は、前記平行移動制御信号によって定められた前記平行移動が大きいほど、小さいことを特徴とする、または、前記制御信号は、前記第１の聴取方向のズームを定めているズーム制御信号（４０２）であること、前記方向依存関数は、前記ズームに依存すること、および、前記所定の中央範囲は、前記ズーム制御信号によって定められたズーム比（ｄ）が大きいほど、小さいことを特徴とする、請求項８に記載の装置。
10. 前記空間オーディオ信号修正装置（３００）は、
    前記第１の方向パラメータ（１１４ａ）および／または前記第１の拡散パラメータ（１１４ｂ）に依存して、前記第２のパラメトリック空間オーディオ信号の第２のダウンミックス信号（２１２）を得るために、前記第１のパラメトリック空間オーディオ信号の第１のダウンミックスオーディオ信号（１１２）を修正するように構成されたダウンミックス修正装置（３０２）、または、
    前記第２の方向パラメータ（２１４ａ）および／または前記第１の拡散パラメータ（１１４ｂ）に依存して、前記第２のパラメトリック空間オーディオ信号の前記第２のダウンミックス信号（２１２）を得るために、前記第１のパラメトリック空間オーディオ信号の前記第１のダウンミックスオーディオ信号（１１２）を修正するように構成されたダウンミックス修正装置（３０２）を含むことを特徴とする、請求項７〜請求項９のいずれか一項に記載の装置。
11. 前記ダウンミックス修正装置（３０２）は、前記第１の拡散パラメータ（１１４ｂ）に依存して、前記第１のダウンミックスオーディオ信号（１１２）から直接成分（１１２ａ）を、および／または、第１のダウンミックスオーディオ信号（１１２）から拡散成分（１１２ｂ）を得るように構成されることを特徴とする、請求項１０に記載の装置。
12. 
13. 前記ダウンミックス修正装置（３０２）は、前記直接成分（１１２ａ）の方向依存して重み付けされたバージョン、前記拡散成分（１１２ｂ）の方向依存して重み付けされたバージョンに基づいて、または、前記直接成分（１１２ａ）の前記方向依存して重み付けされたバージョンと前記拡散成分（１１２ｂ）の前記方向依存して重み付けされたバージョンの組合せに基づいて、前記第２のダウンミックス信号（２１２）を得るように構成されることを特徴とする、請求項１１又は請求項１２に記載の装置。
14. 前記ダウンミックス修正装置（３０２）は、前記直接成分に更なる方向依存関数（Ｈ₁）を適用することによって、前記直接成分（１１２ａ）の前記方向依存して重み付けされたバージョンを生み出すように構成され、前記更なる方向依存関数は、前記第１の方向パラメータ（１１４ａ）が前記第１の方向パラメータの更なる所定の中央範囲内にある場合に、前記直接成分（１１２ａ）を増加させるように、および／または、前記第１の方向パラメータ（１１４ａ）が前記第１の方向パラメータの前記更なる所定の範囲の外にある場合に、前記直接成分（１１２ａ）を減少させるように構成されることを特徴とする、請求項１３に記載の装置。
15. 前記ダウンミックス修正装置は、方向依存関数（Ｈ₂）を前記拡散成分（１１２ｂ）に適用することによって、前記拡散成分（１１２ｂ）の前記方向依存して重み付けされたバージョンを生み出すように構成され、
    前記方向依存関数は、前記第１の方向パラメータ（１１４ａ）が前記第１の方向パラメータの所定の中央範囲内にある場合に、前記拡散成分を減少させるように、および／または、前記第１の方向パラメータ（１１４ａ）が前記第１の方向パラメータの前記所定の範囲の外にある場合に、前記拡散成分（１１２ｂ）を増加させるように構成されること、または、
    前記方向依存関数は、前記第２の方向パラメータ（２１４ａ）が前記第２の方向パラメータの所定の中央範囲内にある場合に、前記拡散成分を減少させるように、および／または、前記第２の方向パラメータ（２１４ａ）が前記第２の方向パラメータの前記所定の範囲の外にある場合に、前記拡散成分（１１２ｂ）を増加させるように構成されることを特徴とする、請求項１３又は請求項１４に記載の装置。
16. 請求項１〜請求項１５のいずれか一項に記載の装置、および、
    前記装置がビデオカメラに接続されて、制御信号としてビデオ回転またはビデオズーム信号を受けるように構成される前記ビデオカメラを含むことを特徴とする、システム。
17. 空間オーディオシーンにおける第１の聴取位置または第１の聴取方向を示している第１のパラメトリック空間オーディオ信号（１１２、１１４）を、第２の聴取位置または第２の聴取方向を示している第２のパラメトリック空間オーディオ信号（２１２、２１４）に変換する方法であって、前記方法は、
    前記第２のパラメトリック空間オーディオ信号を得るために、前記第１の聴取位置または前記第１の聴取方向の変化に依存して、前記第１のパラメトリック空間オーディオ信号を修正するステップであって、前記第２の聴取位置または前記第２の聴取方向が、前記変化によって変更された前記第１の聴取位置または前記第１の聴取方向に対応するステップを含むことを特徴とする、前記方法。
18. プログラムがコンピュータ上で動作するときに、請求項１７に記載の方法を実行するためのプログラムコードを有する前記コンピュータプログラム。

Images