JP6219527B2 - ジョイント・マルチチャネル符号化のための方法および装置 - Google Patents

Description

関連出願への相互参照
本願は2013年9月12日に出願された米国仮特許出願第61/877,189号の優先権を主張するものである。同出願はここに参照によってその全体において組み込まれる。

技術分野
本稿に開示される発明は、概括的にはオーディオ・エンコードおよびデコードに関する。特に、複数のステレオ変換を実行することによってマルチチャネル・オーディオ・システムのチャネルをエンコードおよびデコードするよう適応されたオーディオ・エンコーダおよびオーディオ・デコーダに関する。

マルチチャネル・オーディオ・システムのチャネルをエンコードするための従来技術の技法がある。マルチチャネル・オーディオ・システムの例は、中央チャネル（C）、左前方チャネル（Lf）、右前方チャネル（Rf）、左サラウンド・チャネル（Ls）、右サラウンド・チャネル（Rs）および低域効果（Lfe）チャネルを含む5.1チャネル・システムである。そのようなシステムを符号化するある既存のアプローチは、中央チャネルCを別個に符号化し、前方チャネルLfおよびRfのジョイントステレオ符号化およびサラウンド・チャネルLsおよびRsのジョイントステレオ符号化を実行するというものである。Lfeチャネルも別個に符号化され、以下では常に別個に符号化されると想定される。

この既存のアプローチは、いくつかの欠点がある。たとえば、LfおよびLsチャネルが同様の音量の同様のオーディオ信号を有する状況を考えてみる。そのようなオーディオ信号は、LfスピーカーとLsスピーカーの空いたに位置する仮想音源からくるかのように聞こえる。しかしながら、上記のアプローチは、そのようなオーディオ信号を効率的に符号化することができない。LfおよびLsチャネルのジョイント符号化を実行する代わりに、LfチャネルがRfチャネルと一緒に符号化されることを規定しているからである。このように、LfおよびLsスピーカーのオーディオ信号の間の類似性が効率的な符号化を達成するために活用できない。

よって、マルチチャネル・システムの符号化に関する限り、さらなる柔軟性をもつエンコード／デコード・フレームワークが必要とされている。

以下では、例示的実施形態が付属の図面を参照してより詳細に記述される。
ａは、例示的な二チャネル・セットアップを示し、ｂおよびｃは一例に基づくステレオ・エンコードおよびデコード・コンポーネントを示す。 ａは、例示的な三チャネル・セットアップを示し、ｂおよびｃは一例に基づく三チャネル・セットアップのためのそれぞれエンコード装置およびデコード装置を示す。 ａは、例示的な四チャネル・セットアップを示し、ｂおよびｃはある例示的実施形態に基づく四チャネル・セットアップのためのそれぞれエンコード装置およびデコード装置を示す。 ａは、例示的な五チャネル・セットアップを示し、ｂおよびｃはある例示的実施形態に基づく五チャネル・セットアップのためのそれぞれエンコード装置およびデコード装置を示す。 例示的なマルチチャネル・セットアップを示す。 ある例示的実施形態に基づくマルチチャネル・セットアップのためのエンコード装置を示す。 ある例示的実施形態に基づくマルチチャネル・セットアップのためのデコード装置を示す。 ａ、ｂ、ｃ、ｄ、ｅは一例に基づく五チャネル・オーディオ・システムの符号化構成を示す。 諸実施形態に基づくデコード装置を示す。

上記に鑑み、マルチチャネル・オーディオ・システムのチャネルの柔軟かつ効率的な符号化を提供するエンコード装置およびデコード装置ならびに関連する方法を提供することが目的である。

〈Ｉ．概観――エンコーダ〉
第一の側面によれば、マルチチャネル・オーディオ・システムにおけるエンコード方法、エンコード装置およびコンピュータ・プログラム・プロダクトが提供される。

例示的実施形態によれば、少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード方法であって、第一の対の入力チャネルおよび第二の対の入力チャネルを受領する段階と；前記第一の対の入力チャネルを第一のステレオ・エンコードにかける段階と；前記第二の対の入力チャネルを第二のステレオ・エンコードにかける段階と；前記第一のステレオ・エンコードから帰結する第一のチャネルおよび前記第二のステレオ・エンコードから帰結する第一のチャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力チャネルを得る段階と；前記第一のステレオ・エンコードから帰結する第二のチャネルおよび前記第二のステレオ・エンコードから帰結する第二のチャネルを第四のステレオ・エンコードにかけて第二の対の出力チャネルを得る段階と；前記第一および第二の対の出力チャネルの出力とを含む、方法が提供される。

入力チャネルの前記第一の対および前記第二の対は、エンコードされるべきチャネルに対応する。出力チャネルの前記第一の対および前記第二の対は、エンコードされたチャネルに対応する。

Lfチャネル、Rfチャネル、LsチャネルおよびRsチャネルを含む例示的なオーディオ・システムを考える。LfチャネルおよびLsチャネルが前記第一の対の入力チャネルに関連付けられ、RfチャネルおよびRsチャネルが前記第二の対の入力チャネルに関連付けられるとすると、上記の例示的実施形態は、LfおよびLsチャネルが合同で〔ジョイントで〕符号化され、RfおよびRsチャネルが合同で符号化されることを含意する。換言すれば、それらのチャネルはまず前後方向に符号化される。第一の（前後の）符号化の結果は次いで再び符号化される。つまり、左右方向で符号化が適用される。

もう一つのオプションは、LfチャネルおよびRfチャネルを前記第一の対の入力チャネルに、LsチャネルおよびRsチャネルを前記第二の対の入力チャネルに関連付けることである。チャネルのそのようなマッピングは、まず左右方向の符号化が実行され、前後方向の符号化がそれに続くことを含意する。

換言すれば、上記のエンコード方法は、マルチチャネル・システムのチャネルをどのようにジョイント符号化するかについての増大した柔軟性を許容する。

例示的実施形態によれば、前記第二のステレオ・エンコードから帰結する前記第一のチャネルに関連付けられた前記オーディオ・チャネルは、前記第二のステレオ・エンコードから帰結する前記第一のチャネルである。そのような実施形態は、四チャネル・セットアップのための符号化を実行するときに効率的である。

他の例示的実施形態によれば、前記第一のステレオ・エンコードから帰結する前記第二のチャネルは、前記第四のステレオ・エンコードにかけられる前にさらに符号化される。たとえば、本エンコード方法はさらに：第五の入力チャネルを受領する段階と；前記第五の入力チャネルおよび前記第二のステレオ・エンコードから帰結する前記第一のチャネルを第五のステレオ・エンコードにかける段階とを含み、前記第二のステレオ・エンコードから帰結する前記第一のチャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・エンコードから帰結する第一のチャネルであり、前記第五のステレオ・エンコードから帰結する第二のチャネルが第五の出力チャネルとして出力される。

このようにして、前記第五の入力チャネルはこうして前記第一のステレオ・エンコードから帰結する前記第二のチャネルと一緒にジョイント符号化される。たとえば、前記第五の入力チャネルは前記中央チャネルに対応していてもよく、前記第一のステレオ・エンコードから帰結する前記第二のチャネルはRfおよびRsチャネルのジョイント符号化またはLfおよびLsチャネルのジョイント符号化に対応してもよい。換言すれば、例によれば、中央チャネルCは、前記チャネル・セットアップの左側または右側に関してジョイント符号化されうる。

上記に開示された例示的実施形態は、四つまたは五つのチャネルを含むオーディオ・システムに関する。しかしながら、本稿に開示される原理は、六つのチャネル、七つのチャネルなどに拡張されうる。特に、入力チャネルの追加的な対が四チャネル・セットアップに追加されて、六チャネル・セットアップとなってもよい。同様に、入力チャネルの追加的な対が五チャネル・セットアップに追加されて、七チャネル・セットアップとなってもよい。

特に、例示的実施形態によれば、本エンコード方法はさらに：第三の対の入力チャネルを受領する段階と；前記第一の対の入力チャネルの第二のチャネルおよび前記第三の対の入力チャネルの第一のチャネルを第六のステレオ・エンコードにかける段階と；前記第二の対の入力チャネルの第二のチャネルおよび前記第三の対の入力チャネルの第二のチャネルを第七のステレオ・エンコードにかける段階であって前記第六のステレオ・エンコードから帰結する第一のチャネルおよび前記第一の対の入力チャネルの第一のチャネルは前記第一のステレオ・エンコードにかけられ、前記第七のステレオ・エンコードから帰結する第一のチャネルおよび前記第二の対の入力チャネルの第一のチャネルは前記第二のステレオ・エンコードにかけられる、段階と；前記第六のステレオ・エンコードから帰結する第二のチャネルおよび前記第七のステレオ・エンコードから帰結する第二のチャネルを第八のステレオ・エンコードにかけて第三の対の出力チャネルを得る段階とを含んでいてもよい。

上記は、チャネル・セットアップに追加的なチャネル対を追加する柔軟なアプローチを提供する。

例示的実施形態によれば、前記第一、第二、第三および第四のステレオ・エンコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、左右符号化（LR符号化）、和差符号化（またはミッド‐サイド符号化、MS符号化）および向上された和差符号化（または向上されたミッド‐サイド符号化、向上されたMS符号化）を含む符号化方式に従ってステレオ・エンコードを実行することを含む。

これは、前記システムの柔軟性にさらに追加するという点で有理である。より詳細には、異なる型の符号化方式を選択することにより、符号化は、扱っているオーディオ信号のための符号化を最適化するために適応されうる。

下記では種々の符号化方式についてより詳細に述べる。しかしながら、手短かには、左右符号化とは、入力信号が素通りさせられることを意味する（出力信号は入力信号に等しい）。和差符号化とは、出力信号の医歩婦は入力信号の和であり、他方の出力信号は入力信号の差であることを意味する。向上されたMS符号化は、出力信号の一方が入力信号の重み付けされた和であり、他方の出力信号が入力信号の重み付けされた差であることを意味する。

前記第一、第二、第三および第四のステレオ・エンコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、みな同じステレオ符号化方式を適用してもよい。しかしながら、前記第一、第二、第三および第四のステレオ・エンコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、異なるステレオ・エンコード方式を適用してもよい。

例示的実施形態によれば、異なる周波数帯域について異なる符号化方式が使用されてもよい。このようにして、符号化は、種々の周波数帯域におけるオーディオ・コンテンツに関して最適化されてもよい。たとえば、耳が最も敏感である低周波数帯域においては（符号化に費やされるビット数の点で）より洗練された符号化が適用されてもよい。

例示的実施形態によれば、異なる時間フレームについて異なる符号化方式が使用されてもよい。このようにして、符号化は、種々の時間フレームにおけるオーディオ・コンテンツに関して適応され、最適化されてもよい。たとえば、耳が最も敏感である低周波数帯域においては（符号化に費やされるビット数の点で）より洗練された符号化が適用されてもよい。

前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、臨界サンプリングされた修正離散コサイン変換MDCT領域において実行される。臨界サンプリングされたとは、符号化された信号のサンプル数がもとの信号のサンプル数に等しいことを意味する。

MDCTは信号を時間領域からMDCT領域に、窓シーケンスに基づいて変換する。一部の例外的な場合のほかは、諸入力チャネルは、窓サイズおよび変換長の両方の点で同じ窓を使ってMDCT領域に変換される。これは、ステレオ符号化が、信号のミッド‐サイドおよび向上されたMS符号化を適用することを可能にする。

例示的実施形態は、上記に開示したエンコード方法のいずれかを実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクトにも関する。コンピュータ可読媒体は、非一時的なコンピュータ可読媒体であってもよい。

例示的実施形態によれば、少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード装置であって、第一の対の入力チャネルおよび第二の対の入力チャネルを受領するよう構成された受領コンポーネントと；前記第一の対の入力チャネルを第一のステレオ・エンコードにかけるよう構成された第一のステレオ・エンコード・コンポーネントと；
前記第二の対の入力チャネルを第二のステレオ・エンコードにかけるよう構成された第二のステレオ・エンコード・コンポーネントと；前記第一のステレオ・エンコードから帰結する第一のチャネルおよび前記第二のステレオ・エンコードから帰結する第一のチャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力チャネルを提供するよう構成された第三のステレオ・エンコード・コンポーネントと；前記第一のステレオ・エンコードから帰結する第二のチャネルおよび前記第二のステレオ・エンコードから帰結する第二のチャネルを第四のステレオ・エンコードにかけて第二の対の出力チャネルを得るよう構成された第四のステレオ・エンコード・コンポーネントと；前記第一および第二の対の出力チャネルを出力するよう構成された出力コンポーネントとを有する、エンコード装置が提供される。

例示的実施形態は、上記に基づくエンコード装置を有するオーディオ・システムをも提供する。

〈ＩＩ．概観――デコーダ〉
第二の側面によれば、マルチチャネル・オーディオ・システムにおけるデコード方法、デコード装置およびコンピュータ・プログラム・プロダクトが提供される。

第二の側面は、第一の側面と一般に同じ特徴および利点をもちうる。

例示的実施形態によれば、少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード方法であって、第一の対の入力チャネルおよび第二の対の入力チャネルを受領する段階と；前記第一の対の入力チャネルを第一のステレオ・デコードにかける段階と；前記第二の対の入力チャネルを第二のステレオ・デコードにかける段階と；前記第一のステレオ・デコードから帰結する第一のチャネルおよび前記第二のステレオ・デコードから帰結する第一のチャネルを第三のステレオ・デコードにかけて第一の対の出力チャネルを得る段階と；前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のチャネルを第四のステレオ・デコードにかけて第二の対の出力チャネルを得る段階と；前記第一および第二の対の出力チャネルの出力とを含む、方法が提供される。

入力チャネルの前記第一の対および前記第二の対は、デコードされるべきエンコードされたチャネルに対応する。出力チャネルの前記第一の対および前記第二の対は、デコードされたチャネルに対応する。

たとえば、前記第一のステレオ・デコードから帰結する前記第二のチャネルに関連付けられた前記オーディオ・チャネルは、前記第一のステレオ・デコードから帰結する前記第二のチャネルに等しくてもよい。

たとえば、本方法はさらに：第五の入力チャネルを受領する段階と；前記第五の入力チャネルおよび前記第一のステレオ・デコードから帰結する前記第二のチャネルを第五のステレオ・デコードにかける段階とを含み、前記第一のステレオ・デコードから帰結する前記第二のチャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・デコードから帰結する第一のチャネルに等しく、前記第五のステレオ・デコードから帰結する第二のチャネルが第五の出力チャネルとして出力される。

本デコード方法はさらに：第三の対の入力チャネルを受領する段階と；前記第三の対の入力チャネルを第六のステレオ・デコードにかける段階と；前記第一の対の出力チャネルの第二のチャネルおよび前記第六のステレオ・デコードから帰結する第一のチャネルを第七のステレオ・デコードにかける段階と；前記第二の対の出力チャネルの第二のチャネルおよび前記第六のステレオ・デコードから帰結する第二のチャネルを第八のステレオ・デコードにかける段階と；前記第一の対の出力チャネルの前記第一のチャネル、前記第七のステレオ・デコードから帰結するチャネル対、前記第二の対の出力チャネルの前記第一のチャネルおよび前記第八のステレオ・デコードから帰結するチャネル対の出力とを含んでいてもよい。

例示的実施形態によれば、前記第一、第二、第三および第四のステレオ・デコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、左右符号化、和差符号化および向上された和差符号化を含む符号化方式に従ってステレオ・デコードを実行することを含む。

異なる周波数帯域について異なる符号化方式が使用される。異なる時間フレームについて異なる符号化方式が使用される。

前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、好ましくは、臨界サンプリングされた修正離散コサイン変換MDCT領域において実行される。好ましくは、すべての入力チャネルが窓形状および変換長の両方に関して同じ窓を使ってMDCT領域に変換される。

前記第二の対の入力チャネルは、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有していてもよい。ここで、前記第二のステレオ・デコードから帰結するチャネル対は、前記第一の周波数閾値より上の周波数帯域については0に等しい。たとえば、前記第二の対の入力チャネルのスペクトル内容は、デコーダに伝送されるべきデータの量を減らすために、エンコーダ側で0に設定される必要があってもよい。

前記第二の対の入力チャネルが、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有し、前記第一の対の入力チャネルが、前記第一の周波数閾値より大きい第二の周波数閾値までの周波数帯域に対応するスペクトル内容を有する場合、本方法はさらに、前記第二の対の入力チャネルの周波数制限を補償するために前記第一の周波数より上の周波数についてパラメトリック・アップミックス技法を適用してもよい。特に、本方法は、前記第一の対の出力チャネルを第一の和信号および第一の差信号として表現し、前記第二の対の出力チャネルを第二の和信号および第二の差信号として表現し；高周波再構成を実行することにより前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長し；前記第一の和信号および前記第一の差信号を混合し、ここで、前記第一の周波数閾値より下の周波数については、該混合は前記第一の和信号および前記第一の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、該混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第一の和信号の部分のパラメトリック・アップミックスを実行することを含み；前記第二の和信号および前記第二の差信号を混合し、ここで、前記第一の周波数閾値より下の周波数については、該混合は前記第二の和信号および前記第二の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、該混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第二の和信号の部分のパラメトリック・アップミックスを実行することを含む。

前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長する段階、前記第一の和信号および前記第一の差信号を混合する段階および前記第二の和信号および前記第二の差信号を混合する段階は、好ましくは、直交ミラー・フィルタQMF領域で実行される。これは、典型的にはMDCT領域で実行される前記第一、第二、第三および第四のステレオ・デコードと対照的である。

例示的実施形態によれば、上記請求項のいずれか一項の方法を実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクトが提供される。コンピュータ可読媒体は、非一時的なコンピュータ可読媒体であってもよい。

例示的実施形態によれば、少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード装置であって、第一の対の入力チャネルおよび第二の対の入力チャネルを受領するよう構成された受領コンポーネントと；前記第一の対の入力チャネルを第一のステレオ・デコードにかけるよう構成された第一のステレオ・デコード・コンポーネントと；前記第二の対の入力チャネルを第二のステレオ・デコードにかけるよう構成された第二のステレオ・デコード・コンポーネントと；前記第一のステレオ・デコードから帰結する第一のチャネルおよび前記第二のステレオ・デコードから帰結する第一のチャネルを第三のステレオ・デコードにかけて第一の対の出力チャネルを得るよう構成された第三のステレオ・デコード・コンポーネントと；前記第一のステレオ・デコードから帰結する前記第二のチャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のチャネルを第四のステレオ・デコードにかけて第二の対の出力チャネルを得るよう構成された第四のステレオ・デコード・コンポーネントと；前記第一および第二の対の出力チャネルを出力するよう構成された出力コンポーネントとを有する、デコード装置が提供される。

例示的実施形態によれば、上記に基づくデコード装置を有するオーディオ・システムが提供される。

〈ＩＩＩ．概観――信号伝達フォーマット〉
第三の側面によれば、少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムのオーディオ・コンテンツを表わす信号をデコードするときに使う符号化構成をエンコーダによってデコーダに指示するための信号伝達フォーマットが提供される。ここで、前記少なくとも四つのチャネルは複数の構成に基づいて異なるグループに分割可能であり、各グループはジョイント・エンコードされるチャネルに対応する。当該信号伝達フォーマットは、前記デコーダによって適用されるべき前記複数の構成の一つを指示する少なくとも二つのビットを有する。

これは、複数の可能な符号化構成のうちのどの符号化構成をデコード時に使うべきかをデコーダに伝える効率的な仕方を提供する点で有理である。

符号化構成は、識別番号に関連付けられていてもよい。このため、前記少なくとも二つのビットは、前記複数の構成の一つを、前記複数の構成の前記一つの識別番号を指示することによって指示する。

例示的実施形態によれば、前記マルチチャネル・オーディオ・システムは五つのチャネルを含み、上記の複数の符号化構成は、五つのチャネルのジョイント符号化；四つのチャネルのジョイント符号化および最後のチャネルの別個の符号化；三つのチャネルのジョイント符号化および他の二つのチャネルの別個のジョイント符号化；および二つのチャネルのジョイント符号化、他の二つのチャネルの別個のジョイント符号化および最後のチャネルの別個の符号化に対応する。

前記少なくとも二つのビットが二つのチャネルのジョイント符号化、他の二つのチャネルの別個のジョイント符号化および最後のチャネルの別個の符号化を指示する場合、前記少なくとも二つのビットはさらに、どの二つのチャネルがジョイント符号化されるべきで、どの他の二つのチャネルがジョイント符号化されるべきかを指示するビットを含んでいてもよい。

〈ＩＶ．例示的実施形態〉
図１のａは、この場合左スピーカーLに対応する第一のチャネル１０２と、この場合右スピーカーRに対応する第二のチャネル１０４とを含むオーディオ・システムのチャネル・セットアップ１００を示している。第一１０２および第二１０４のチャネルは、ジョイントステレオ・エンコードおよびデコードにかけられてもよい。

図１のｂは、図１のａの第一のチャネル１０２および第二のチャネル１０４のジョイントステレオ・エンコードを実行するために使われうるステレオ・エンコード・コンポーネント１１０を示している。一般に、ステレオ・エンコード・コンポーネント１１０は、ここでLnで表わされる第一のチャネル１１２（図１のａの第一のチャネル１０２など）およびここでRnで表わされる第二のチャネル１１４（図１のａの第二のチャネル１０４など）をここでAnで表わされる第一の出力チャネル１１６およびここでBnで表わされる第二の出力チャネル１１８に変換する。エンコード・プロセスの間、ステレオ・エンコード・コンポーネント１１０は、のちにより詳細に論じるパラメータを含むサイド情報１１５を抽出してもよい。パラメータは、異なる周波数帯域については異なっていてもよい。

エンコード・コンポーネント１１０は第一の出力チャネル１１６、第二の出力チャネル１１８およびサイド情報１１５を量子化し、それをビットストリームの形に符号化して、該ビットストリームが対応するデコーダに送られる。

図１のｃは、対応するステレオ・デコード・コンポーネント１２０を示している。ステレオ・デコード・コンポーネント１２０はエンコード装置１１０からビットストリームを受領し、（エンコーダ側での第一の出力チャネル１１６に対応する）第一のチャネル１１６’An、（エンコーダ側での第二の出力チャネル１１８に対応する）第二のチャネル１１８’Bnおよびサイド情報１１５’をデコードし、量子化解除する。ステレオ・デコード・コンポーネント１２０は、第一の出力チャネル１１２’Lnおよび第二の出力チャネル１１４’Rnを出力する。ステレオ・デコード・コンポーネント１２０はさらに、サイド情報１１５’を入力として取ってもよい。これはエンコーダ側で抽出されたサイド情報１１５に対応する。

ステレオ・エンコード／デコード・コンポーネント１１０、１２０は、異なる符号化方式を適用してもよい。どの符号化方式を適用すべきかは、エンコード・コンポーネント１１０によってサイド情報１１５においてデコード・コンポーネント１２０に信号伝達されてもよい。エンコード・コンポーネント１１０は、後述する三つの異なる符号化方式のどれを使うべきかを決定する。この決定は、信号適応的であり、よってフレームからフレームへと時間とともに変わることができる。さらに、異なる周波数帯域の間で変わることもできる。エンコーダにおける実際の決定プロセスはきわめて複雑であり、典型的にはMDCT領域での量子化／符号化の効果ならびに知覚的側面およびサイド情報のコストを考慮に入れる。

本稿で左右符号化「LR符号化」と称される第一の符号化方式によれば、ステレオ変換コンポーネント１１０および１２０の入力および出力チャネルは、次式によって関係付けられる：
Ln＝An; Rn＝Bn
換言すれば、LR符号化は単に入力チャネルの素通しを含意する。そのような符号化は、入力チャネルが非常に異なっている場合に有用でありうる。

本稿でミッド‐サイド符号化（または和差符号化）「MS符号化」と称される第二の符号化方式によれば、ステレオ・エンコード／デコード・コンポーネント１１０および１２０の入力および出力チャネルは、次式によって関係付けられる：
Ln＝(An＋Bn); Rn＝(An−Bn)
エンコーダの観点からは、対応する式は：
An＝0.5(Ln＋Rn); Bn＝0.5(Ln−Rn)
となる。換言すれば、MS符号化は、入力チャネルの和と差を計算することに関わる。このため、チャネルAn（エンコーダ側での第一の出力チャネル１１６およびデコーダ側での第一の入力チャネル１１６’）は第一および第二のチャネルLnおよびRnのミッド信号（和信号）と見なされてもよく、チャネルBnは第一および第二のチャネルLnおよびRnのサイド信号（差信号）と見なされてもよい。MS符号化は、入力チャネルLnおよびRnが信号形状および音量に関して似通っている場合に有用でありうる。そのような場合には、サイド信号Bnは0に近くなるからである。そのような状況では、音源はあたかも図１のａの第一のチャネル１０２と第二のチャネル１０４の間の中間に位置しているかのように聞こえる。

ミッド‐サイド符号化方式は、本稿で「向上されたMS符号化」（または向上された和差符号化）と称される第三の符号化方式に一般化されうる。向上されたMS符号化では、ステレオ・エンコード／デコード・コンポーネント１１０および１２０の入力および出力チャネルは、次式によって関係付けられる：
Ln＝(1＋α)An＋Bn; Rn＝(1−α)An−Bn
ここで、αはサイド情報１１５、１１５’の一部をなし得るパラメータである。上式は、デコーダの観点からの、すなわちAn、BnからLn、Rnへのプロセスを記述している。この場合も、信号Anはミッド信号と考えられてもよく、信号Bnは修正されたサイド信号と考えられてもよい。特に、α＝0については、向上されたMS符号化方式はミッド‐サイド符号化に帰着する。向上されたMS符号化は、似通っているが異なる音量の信号を符号化するために有用でありうる。たとえば、図１のａの左チャネル１０２および右チャネル１０４が同じ信号を含むが音量が左チャネル１０２のほうが大きい場合、音源は、図１のａの項目１０５によって示されるように、左側により近く位置しているかのように聞こえる。そのような状況では、ミッド‐サイド符号化は0でないサイド信号を生成することになる。だが、0から1までの間のαの適切な値を選択することによって、修正されたサイド信号Bnは0に等しくまたは0に近くなりうる。同様に、0からマイナス1までの間のαの値は右チャネルの音量のほうが大きい場合に対応する。

上記によれば、ステレオ・エンコード／デコード・コンポーネント１１０および１２０は、このように、種々のステレオ符号化方式を適用するよう構成されていてもよい。ステレオ・エンコード／デコード・コンポーネント１１０および１２０はまた、異なる周波数帯域について異なるステレオ符号化方式を適用してもよい。たとえば、第一のステレオ符号化方式が第一の周波数までの周波数に適用されてもよく、第二のステレオ符号化方式が該第一の周波数より上の周波数帯域に適用されてもよい。さらに、パラメータαは周波数依存であることができる。

ステレオ・エンコード／デコード・コンポーネント１１０および１２０は、重複窓シーケンス領域である臨界サンプリングされた修正された離散コサイン変換（MDCT）領域で動作するよう構成される。臨界サンプリングされたとは、周波数領域信号におけるサンプル数が時間領域信号におけるサンプル数に等しいことを意味する。ステレオ・エンコード／デコード・コンポーネント１１０および１２０がLR符号化方式を適用するよう構成されている場合、入力チャネル１１２および１１４は異なる窓を使って符号化されてもよい。しかしながら、ステレオ・エンコード／デコード・コンポーネント１１０および１２０がMS符号化または向上されたMS符号化のいずれかを適用するよう構成されている場合には、入力信号は、窓形状および変換長に関して同じ窓を使って符号化される必要がある。

ステレオ・エンコード／デコード・コンポーネント１１０および１２０は、三つ以上のチャネルを含むオーディオ・システムについて柔軟な符号化／復号方式を実装するために構成ブロックとして使われてもよい。原理を例解するために、マルチチャネル・オーディオ・システムの三チャネル・セットアップ２００が図２のａに示されている。オーディオ・システムは、第一のオーディオ・チャネル２０２（ここでは左チャネルL）、第二のオーディオ・チャネル２０４（ここでは右チャネルR）および第三のチャネル２０６（ここでは中央チャネルC）を含む。

図２のｂは、図２のａの三つのチャネル２０２、２０４、２０６をエンコードするためのエンコード装置２１０を示している。エンコード装置２１０は、縦続して結合されている第一のステレオ・エンコード・コンポーネント２１０ａおよび第二のステレオ・エンコード・コンポーネント２１０ｂを有する。

エンコード装置２１０は、第一の入力チャネル２１２（たとえば図２のａの第一のチャネル２０２に対応）、第二の入力チャネル２１４（たとえば図２のａの第二のチャネル２０４に対応）、第三の入力チャネル２１６（たとえば図２のａの第三のチャネル２０６に対応）を受領する。第一のチャネル２１２および第三の入力チャネル２１６は、上記のステレオ符号化方式のいずれかに従ってステレオ・エンコードを実行する第一のステレオ・エンコード・コンポーネント２１０ａに入力される。結果として、第一のステレオ・エンコード・コンポーネント２１０ａは、第一の中間出力チャネル２１３および第二の中間出力チャネル２１５を出力する。本稿での用法では、中間出力チャネルはステレオ・エンコードまたはステレオ・デコードの結果をいう。中間出力チャネルは典型的には、必ず生成されるまたは実際的な実装において測定できるという意味での物理的な信号ではない。むしろ、中間出力チャネルは本稿では、異なるステレオ・エンコードまたはデコード・コンポーネントが互いにどのように組み合わされおよび／または配列されうるかを示すために使われる。中間的とは、出力チャネル２１３および２１５が、前記エンコードされたチャネルを表わす出力チャネルではなく、エンコード装置２１０の中間的な段を表わしていることを意味する。たとえば、第一の中間出力チャネル２１３はミッド信号であることができ、第二の中間出力チャネル２１５は修正されたサイド信号であることができる。

図１のａの例示的なチャネル・セットアップを参照するに、第一のステレオ・エンコード・コンポーネント２１０ａによって実行される処理は、たとえば、左チャネル２０２および中央チャネル２０６のジョイントステレオ符号化２０７に対応することができる。異なる音量の左チャネル２０２および中央チャネル２０６における同様の信号の場合には、そのようなジョイントステレオ符号化は、左チャネル２０２および中央チャネル２０６の間に位置される仮想音源２０５を捕捉するのに効率的でありうる。

第一の中間的出力チャネル２１３および第二の入力チャネル２１４が次いで、上記のステレオ符号化方式のいずれかに従ってステレオ・エンコードを実行する第二のステレオ・エンコード・コンポーネント２１０ｂに入力される。第二のステレオ・エンコード・コンポーネント２１０ｂは第一の出力チャネル２１７および第二の出力チャネル２１８を出力する。図１のａの例示的なチャネル・セットアップを参照するに、第二のステレオ・エンコード・コンポーネント２１０ｂによって実行される処理は、たとえば、右チャネル２０４と、第一のステレオ・エンコード・コンポーネント２１０ａによって生成された左チャネル２０２および中央チャネル２０６のミッド信号とのジョイントステレオ符号化２０８に対応することができる。

エンコード装置２１０は、第一の出力チャネル２１７、第二の出力チャネル２１８および第三の出力チャネルとしての第二の中間チャネル２１５を出力する。たとえば、第一の出力チャネル２１７はミッド信号に対応してもよく、第二および第三の出力チャネル２１８および２１５はそれぞれ修正されたサイド信号に対応してもよい。

エンコード装置２１０は、それらの出力信号を量子化して、サイド情報と一緒に、デコーダに伝送されるべきビットストリームに符号化する。

対応するデコード装置２２０が図２ｃに示されている。デコード装置２２０は第一のステレオ・デコード・コンポーネント２２０ｂおよび第二のステレオ・デコード・コンポーネント２２０ａを有する。デコード装置２２０における第一のステレオ・デコード・コンポーネント２２０ｂは、エンコーダ側の第二のステレオ・エンコード・コンポーネント２１０ｂの符号化方式の逆である符号化方式を適用するよう構成される。同様に、デコード装置２２０における第二のステレオ・デコード・コンポーネント２２０ａは、エンコーダ側の第一のステレオ・エンコード・コンポーネント２１０ａの符号化方式の逆である符号化方式を適用するよう構成される。デコーダ側で適用すべき符号化方式は、エンコード装置２１０からデコード装置２２０に送られるビットストリーム中での信号伝達によって示されてもよい。これはたとえば、LR符号化、MS符号化または向上されたMS符号化のどれをステレオ・デコーダ・コンポーネント２２０ｂおよび２２０ａが適用すべきかを指示することを含む。さらに、中央チャネルが左チャネルまたは右チャネルのどちらと一緒に符号化されるべきかを示す一つまたは複数のビットがあってもよい。

デコード装置２２０は、エンコード装置２１０から送信されるビットストリームを受領し、デコードし、量子化解除する。このようにして、デコード装置２２０は、第一の入力チャネル２１７’（エンコード装置２１０の第一の出力チャネルに対応）、第二の入力チャネル２１８’（エンコード装置２１０の第二の出力チャネルに対応）および第三の入力チャネル２１５’（エンコード装置２１０の第三の出力チャネルに対応）を受領する。第一および第二の入力チャネル２１７’および２１８’は第一のステレオ・デコード・コンポーネント２２０ｂに入力される。第一のステレオ・デコード・コンポーネント２２０ｂは、エンコーダ側で第二のステレオ・エンコード・コンポーネント２１０ｂにおいて適用された逆符号化方式に従ってステレオ・デコードを実行する。その結果として、第一の中間出力チャネル２１３’および第二の中間出力チャネル２１４’が第一のステレオ・デコード・コンポーネント２２０ｂから出力される。次に、第一の中間出力チャネル２１３’および第三の入力チャネル２１５’が第二のステレオ・デコード・コンポーネント２２０ａに入力される。第二のステレオ・デコード・コンポーネント２２０ａは、エンコーダ側での第一のステレオ・エンコード・コンポーネント２１０ａにおいて適用された符号化方式の逆である符号化方式に従ってその入力信号のステレオ・デコードを実行する。第二のステレオ・デコード・コンポーネント２２０ａは、第一の出力チャネル２１２’（エンコーダ側での第一の入力信号２１２に対応）、第二の出力チャネル２１４’（エンコーダ側での第二の入力信号２１４に対応）および第三の出力チャネル２１６’としての第二の中間出力チャネル２１４’（エンコーダ側での第三の入力信号２１６に対応）を出力する。

上記の例では、第一の入力チャネル２１２は左チャネル２０２に対応してもよく、第二の入力チャネル２１４は右チャネル２０４に対応してもよく、第三の入力チャネル２１６は中央チャネル２０６に対応してもよい。しかしながら、第一、第二および第三の入力チャネル２１２、２１４、２１６は、任意の順列に従って図２のａのチャネル２０２、２０４、２０６に対応しうる。このように、エンコード装置およびデコード装置２１０、２２０は、図２のａの三つのチャネル２０２、２０４、２０６をエンコード／デコードするための非常に柔軟な方式を提供する。さらに、ステレオ・エンコード・コンポーネント２１０ａおよび２１０ｂの符号化方式は任意の仕方で選択されうるという点で柔軟性は一層高められる。たとえば、ステレオ・エンコード・コンポーネント２１０ａおよび２１０ｂは両方とも、向上されたMS符号化のような同じ符号化方式を、あるいは異なる符号化方式を適用してもよい。さらに、符号化方式は符号化されるべき周波数帯域に依存しておよび／または符号化されるべき時間フレームに依存して変わってもよい。適用すべき符号化方式は、エンコード装置２１０からデコード装置２２０にサイド情報として信号伝達されてもよい。

ここで図３のａ〜ｃを参照して例示的な実施形態を述べる。図３のａは、マルチチャネル・オーディオ・システムの四チャネル・セットアップ３００を示している。オーディオ・システムは、第一のチャネル３０２（ここでは左前方スピーカーLfに対応）、第二のチャネル３０４（ここでは右スピーカーRfに対応）、第三のチャネル３０６（ここでは左サラウンド・スピーカーLsに対応）および第四のチャネル３０８（ここでは右サラウンド・スピーカーRsに対応）を含む。

図３のｂおよびｃはそれぞれ、図３のａの四つのチャネル３０２、３０４、３０６、３０８をエンコード／デコードするために使用されうるエンコード装置３１０およびデコード装置３２０を示している。

エンコード装置３１０は、第一のステレオ・エンコード・コンポーネント３１０ａ、第二のステレオ・エンコード・コンポーネント３１０ｂ、第三のステレオ・エンコード・コンポーネント３１０ｃおよび第四のステレオ・エンコード・コンポーネント３１０ｄを有する。エンコード装置３１０の動作についてここで説明する。

エンコード装置３１０は、入力チャネルの第一の対を受領する。入力チャネルの第一の対は第一の入力チャネル３１２（たとえば図３のａのLfチャネル３０２に対応してもよい）および第二の入力チャネル３１６（たとえば図３のａのLsチャネル３０６に対応してもよい）を含む。エンコード装置３１０はさらに、入力チャネルの第二の対を受領する。入力チャネルの第二の対は第一の入力チャネル３１４（たとえば図３のａのRfチャネル３０４に対応してもよい）および第二の入力チャネル３１８（たとえば図３のａのRsチャネル３０８に対応してもよい）を含む。第一および第二の対の入力チャネル３１２、３１６、３１４、３１８は典型的にはMDCTスペクトルの形で表わされる。

第一の対の入力チャネル３１２、３１６は第一のステレオ・エンコード・コンポーネント３１０ａに入力される。該第一のステレオ・エンコード・コンポーネント３１０ａは、第一の対の入力チャネル３１２、３１６を先述したステレオ符号化方式のいずれかに基づくステレオ・エンコードにかける。第一のステレオ・エンコード・コンポーネント３１０ａは、第一のチャネル３１３および第二のチャネル３１７を含む第一の対の中間出力チャネルを出力する。例として、MS符号化または向上されたMS符号化が適用される場合、第一のチャネル３１３はミッド信号に対応してもよく、第二のチャネル３１７は修正されたサイド信号に対応してもよい。

同様に、第二の対の入力チャネル３１４、３１８は第二のステレオ・エンコード・コンポーネント３１０ｂに入力される。該第二のステレオ・エンコード・コンポーネント３１０ｂは、第二の対の入力チャネル３１４、３１８を先述したステレオ符号化方式のいずれかに基づくステレオ・エンコードにかける。第二のステレオ・エンコード・コンポーネント３１０ｂは、第一のチャネル３１５および第二のチャネル３１９を含む第二の対の中間出力チャネルを出力する。例として、MS符号化または向上されたMS符号化が適用される場合、第一のチャネル３１５はミッド信号に対応してもよく、第二のチャネル３１９は修正されたサイド信号に対応してもよい。

図３のａのチャネル・セットアップを考えると、第一のステレオ・エンコード・コンポーネント３１０ａによって適用される処理は、Lfチャネル３０２およびLsチャネル３０６のジョイントステレオ符号化３０３を実行することに対応してもよい。同様に、第二のステレオ・エンコード・コンポーネント３１０ｂによって適用される処理は、Rfチャネル３０４およびRsチャネル３０８のジョイントステレオ符号化３０５を実行することに対応してもよい。

中間出力チャネルの第一の対の第一のチャネル３１３および中間出力チャネルの第二の対の第一のチャネル３１５は次いで、第三のステレオ・エンコード・コンポーネント３１０ｃに入力される。第三のステレオ・エンコード・コンポーネント３１０ｃは、チャネル３１３および３１５を、上記のステレオ符号化方式のいずれかに基づくステレオ・エンコードにかける。第三のステレオ・エンコード・コンポーネント３１０ｃは、第一の出力チャネル３２２および第二の出力チャネル３２４からなる出力チャネルの第一の対を出力する。

同様に、中間出力チャネルの第一の対の第二のチャネル３１７および中間出力チャネルの第二の対の第二のチャネル３１９は、第四のステレオ・エンコード・コンポーネント３１０ｄに入力される。第四のステレオ・エンコード・コンポーネント３１０ｄは、チャネル３１７および３１９を、上記のステレオ符号化方式のいずれかに基づくステレオ・エンコードにかける。第四のステレオ・エンコード・コンポーネント３１０ｄは、第一の出力チャネル３２６および第二の出力チャネル３２８からなる出力チャネルの第二の対を出力する。

再び図３のａのチャネル・セットアップを考えると、第三および第四のステレオ・エンコード・コンポーネント３１０ｃおよび３１０ｄによって実行される処理は、該チャネル・セットアップの左および右側のジョイントステレオ符号化３０７に似ていることがありうる。たとえば、中間出力チャネルの第一および第二の対のそれぞれ第一のチャネル３１３および３１５がミッド信号である場合、第三のステレオ・エンコード・コンポーネント３１０ｃは、それらのミッド信号のジョイントステレオ符号化を実行する。同様に、中間出力チャネルの第一および第二の対のそれぞれ第二のチャネル３１７および３１９が（修正された）サイド信号である場合、第三のステレオ・エンコード・コンポーネント３１０ｃは、それらの（修正された）サイド信号のジョイントステレオ符号化を実行する。例示的実施形態によれば、（修正された）サイド信号３１７および３１９は、ある周波数閾値より上の周波数についてなど、より高い周波数範囲については0に設定されてもよい（ミッド信号３１３および３１５についてエネルギー補償が必要）。例として、周波数閾値は10kHzであってもよい。

エンコード装置３１０は、それらの出力信号３２２、３２４、３２６、３２８を量子化し、符号化し、デコード装置に送られるビットストリームを生成する。

ここで図３のｃを参照するに、対応するデコード装置３２０が示されている。デコード装置３２０は第一のステレオ・デコード・コンポーネント３２０ｃ、第二のステレオ・デコード・コンポーネント３２０ｄ、第三のステレオ・デコード・コンポーネント３２０ａおよび第四のステレオ・デコード・コンポーネント３２０ｂを有する。デコード装置３２０の動作についてここで説明する。

デコード装置３２０は、エンコード装置３１０から受領されるビットストリームを受領し、デコードし、量子化解除する。このようにして、デコード装置３２０は、第一のチャネル３２２’（図３のｂの出力チャネル３２２に対応）および第二のチャネル３２４’（図３のｂの出力チャネル３２４に対応）からなる第一の対の入力チャネルを受領する。エンコード装置３２０はさらに、第一のチャネル３２６’（図３のｂの出力チャネル３２６に対応）および第二のチャネル３２８’（図３のｂの出力チャネル３２８に対応）からなる第二の対の入力チャネルを受領する。第一および第二の対の入力チャネルは典型的にはMDCTスペクトルの形である。

第一の対の入力チャネル３２２’、３２４’は第一のステレオ・デコード・コンポーネント３２０ｃに入力され、そこでエンコーダ側の第三のステレオ・エンコード・コンポーネント３１０ｃによって適用されたステレオ符号化方式の逆であるステレオ・デコード方式に基づくステレオ・デコードにかけられる。第一のステレオ・デコード・コンポーネント３２０ｃは、第一のチャネル３１３’および第二のチャネル３１５’を含む第一の対の中間チャネルを出力する。

同様に、第二の対の入力チャネル３２６’、３２８’は第二のステレオ・デコード・コンポーネント３２０ｄに入力され、該第二のステレオ・デコード・コンポーネント３２０ｄはエンコーダ側の第四のステレオ・エンコード・コンポーネント３１０ｄによって適用されたステレオ符号化方式の逆であるステレオ・コード方式を適用する。第二のステレオ・デコード・コンポーネント３２０ｄは、第一のチャネル３１７’および第二のチャネル３１９’からなる第二の対の中間チャネルを出力する。

中間出力チャネルの第一および第二の対の第一のチャネル３１３’および３１７’は次いで、第三のステレオ・デコード・コンポーネント３２０ａに入力される。該第三のステレオ・デコード・コンポーネント３２０ａは、エンコーダ側の第一のステレオ・エンコード・コンポーネント３１０ａにおいて適用されたステレオ符号化方式の逆であるステレオ・コード方式を適用する。第三のステレオ・デコード・コンポーネント３２０ａは、出力チャネル３１２’（エンコーダ側での入力チャネル３１２に対応）および出力チャネル３１６’（エンコーダ側での入力チャネル３１６に対応）を含む出力チャネルの第一の対を出力する。

同様に、中間出力チャネルの第一および第二の対の第二のチャネル３１５’および３１９’は、第四のステレオ・デコード・コンポーネント３２０ｂに入力される。該第四のステレオ・デコード・コンポーネント３２０ｂは、エンコーダ側の第一のステレオ・エンコード・コンポーネント３１０ｂにおいて適用されたステレオ符号化方式の逆であるステレオ・コード方式を適用する。このようにして、第三のステレオ・デコード・コンポーネント３２０ａは、出力チャネル３１２’（エンコーダ側での入力チャネル３１２に対応）および出力チャネル３１６’（エンコーダ側での入力チャネル３１６に対応）を含む出力チャネルの第二の対を出力する。

上記の例では、第一の入力チャネル３１２はLfチャネル３０２に対応し、第二の入力チャネル３１６はLsチャネル３０６に対応し、第三の入力チャネル３１４はRfチャネル３０４に対応し、第四の入力チャネルはRsチャネル３０８に対応する。しかしながら、図３のｂの入力チャネル３１２、３１４、３１６、３１８に対する図３のａのチャネル３０２、３０４、３０６、３０８の任意の順列が等しく可能である。このように、エンコード／デコード装置３１０、３２０は、どの順序でどのチャネルをペアごとにエンコードするよう選択するかについて柔軟なフレームワークをなす。選択は、たとえば、チャネル間の類似性に関係する事情に基づいていてもよい。

ステレオ・エンコード・コンポーネント３１０ａ、３１０ｂ、３１０ｃ、３１０ｄによって適用される符号化方式が選択されうるので、さらなる柔軟性が加えられる。符号化方式は好ましくは、エンコーダからデコーダへ伝送されるデータの総量が最小化されるよう選ばれる。デコーダ側の種々のステレオ・デコード・コンポーネント３２０ａ〜ｄによって使用されるべき符号化方式の選択は、エンコーダ装置３１０によってサイド情報としてデコーダ装置３２０に信号伝達されてもよい（図１のｂ〜ｃの項目１１５、１１５’参照）。ステレオ変換コンポーネント３１０ａ、３１０ｂ、３１０ｃ、３１０ｄはこのように、異なるステレオ符号化方式を適用してもよい。しかしながら、いくつかの実施形態では、すべてのステレオ変換コンポーネント３１０ａ、３１０ｂ、３１０ｃ、３１０ｄは同じステレオ変換方式、たとえば向上されたMS符号化方式を適用する。

ステレオ・エンコード・コンポーネント３１０ａ、３１０ｂ、３１０ｃ、３１０ｄはさらに、異なる周波数帯域について異なるステレオ符号化方式を適用しうる。さらに、異なる時間フレームについて異なるステレオ符号化方式が適用されてもよい。

上記で論じたように、ステレオ・エンコード／デコード・コンポーネント３１０ａ〜ｄおよび３２０ａ〜ｄは、臨界サンプリングされたMDCT領域で動作する。窓の選択は、適用されるステレオ符号化方式によって制約される。より詳細には、ステレオ・エンコード・コンポーネント３１０ａ〜ｄはMS符号化または向上されたMS符号化を適用する場合、その入力信号は、窓形状および変換長の両方に関して同じ窓を使って符号化される必要がある。このように、いくつかの実施形態では、入力信号３１２、３１４、３１６および３１８のすべては同じ窓を使って符号化される。

ある例示的実施形態について、ここで図４ａ〜ｃを参照して述べる。図４のａは、オーディオ・システムの五チャネル・セットアップ４００を示している。図３のａを参照して論じた四チャネル・セットアップ３００と同様に、五チャネル・セットアップは、第一のチャネル４０２、第二のチャネル４０４、第三のチャネル４０６および第四のチャネル４０８を含み、それぞれLfスピーカー、Rfスピーカー、Lsスピーカー、Rsスピーカーに対応する。加えて、五チャネル・セットアップ４００は中央スピーカーCに対応する第五のチャネル４０９を含む。

図４のｂはそれぞれ、たとえば図４のａの五チャネル・セットアップの五つのチャネルをエンコードするために使用されうるエンコード装置４１０を示している。図４のｂのエンコード装置４１０は、さらに第五のステレオ・エンコード・コンポーネント４１０ｅを有しているという点で、図３のａのエンコード装置３１０と異なる。さらに、動作の間、エンコード装置４１０は第五の入力チャネル４１９（これはたとえば、図４のａの中央チャネル４０９に対応しうる）を受領する。第五の入力チャネル４１９と、第二の対の中間出力チャネルの第一のチャネル３１７とが第五のステレオ・エンコード・コンポーネント４１０ｅに入力される。該第五のステレオ・エンコード・コンポーネント４１０ｅは、上記に開示したステレオ符号化方式のいずれかに従ってステレオ・エンコードを実行する。第五のステレオ・エンコード・コンポーネント４１０ｅは、第一のチャネル４１７および第二のチャネル４２１からなる第三の対の中間出力チャネルを出力する。第三の対の中間出力チャネルの第一のチャネル４１７と、第一の対の中間出力チャネルの第一のチャネル３１３とが次いで、出力チャネル４２２、４２４の第一の対を生成するために第三のステレオ・エンコード・コンポーネント３１０ｃに入力される。エンコード装置４１０は、五つの出力チャネル、すなわち第一の対の出力チャネル４２２、４２４、第五のステレオ・エンコード・コンポーネント４１０ｅから出力される第三の中間対の出力チャネルの第二のチャネル４２１および第四のステレオ・エンコード・コンポーネント３１０ｄから出力される第二の対の出力チャネル３２６、３２８を出力する。

出力チャネル４２２、４２４、４２１、３２６、３２８は、対応するデコード装置に伝送されるべきビットストリームを生成するために、量子化され、符号化される。

図４のａの五チャネル・セットアップと、入力チャネル３１２へのLfチャネル４０２、入力チャネル３１６へのLsチャネル４０６、入力チャネル４１９へのCチャネル、入力チャネル３１４へのRfチャネル４０２および入力チャネル３１８へのRsチャネル３１８を考えると、以下の実装が得られる。第一に、第一および第二のステレオ・エンコード・コンポーネント３１０ａおよび３１０ｂは、LfとLsチャネル、RfとRsチャネルのジョイントステレオ・エンコードをそれぞれ実行する。第二に、第五のステレオ・エンコード・コンポーネント４１０ｅは中央チャネルCの、RfとRsチャネルのジョイント符号化の結果とのジョイントステレオ符号化を実行する。第三に、第三および第四のステレオ・エンコード・コンポーネント３１０ｃおよび３１０ｄは、チャネル・セットアップ４００の左側と右側の間のジョイントステレオ符号化を実行する。一例によれば、ステレオ・エンコード・コンポーネント３１０ａおよび３１０ｂが素通しに、すなわちLR符号化を実行するよう設定されている場合、エンコード装置４１０は三つの前方チャネルC、Lf、Rfを合同してエンコードし、二つのサラウンド・チャネルLsおよびRsが合同して符号化される。しかしながら、先の諸実施形態との関連で論じたように、チャネル・セットアップ４００における五つのチャネルの入力チャネル３１２、３１４、３１６、３１８、４１９へのマッピングはいかなる入れ替えに従って実行されてもよい。たとえば、中央チャネル４０９は、チャネル・セットアップの右側ではなく、チャネル・セットアップの左側と合同で符号化されてもよい。さらに、第五のステレオ・エンコード・コンポーネント４１０ｅがLR符号化、すなわちその入力信号の素通しを実行する場合、エンコード装置４１０は、エンコード装置３１０と同様の入力チャネル３１２、３１４、３１６、３１８のジョイント符号化と、入力チャネル４１９の別個の符号化を実行することを注意しておく。

図４のｃはエンコード装置４１０に対応するデコード装置４２０を示している。図３のｃのデコード装置と比べ、デコード装置４２０は、第五のステレオ・デコード・コンポーネント４２０ｅを有している。第一の対の入力チャネル４２２’、４２４’および第二の対の入力チャネル３２６’、３２８’に加えて、デコード装置４２０は、エンコーダ側での出力チャネル４２１に対応する第五の入力チャネル４２１’を受領する。第一の対の入力チャネル４２２’、４２４’を第一のステレオ・デコード・コンポーネント３２０ａにおけるステレオ・デコードにかけたのち、該第一のステレオ・デコード・コンポーネント３２０ａの第二の出力チャネル４１７’および第五の入力チャネル４２１が第五のステレオ・デコード・コンポーネント４２０ｅに入力される。第五のステレオ・デコード・コンポーネント４２０ｅは、エンコーダ側での第五のステレオ・エンコード・コンポーネント４１０ｅによって適用されたステレオ符号化方式の逆であるステレオ符号化方式を適用する。第五のステレオ・デコード・コンポーネント４２０ｅは、第一のチャネル３１５’および第二のチャネル４１９’からなる第三の対の中間出力チャネルを出力する。第一のチャネル３１５’は次いで、第二の対の中間出力チャネルの第二のチャネル３１９’と一緒に、第四のステレオ・デコード・コンポーネント３２０ｄに入力される。デコード装置４２０は、第三の出力デコード・コンポーネント３２０ｃの出力チャネル３１２’、３１６’、第三の対の中間出力チャネルの第二のチャネル４１９’および第四の出力デコード・コンポーネント３２０ｄの出力チャネル３１４’、３１８’を出力する。

上記において、中間出力チャネルの概念は、ステレオ・エンコード／デコード・コンポーネントが互いに対してどのように組み合わされうるまたは配列されうるかを説明するために使われた。しかしながら、上記でさらに論じたように、中間出力チャネルは単に、ステレオ・エンコードまたはステレオ・デコードの結果をいう。特に、中間出力チャネルは典型的には、必ず生成されるまたは実際的な実装において測定できるという意味での物理的な信号ではない。行列演算に基づく実装の例についてこれから説明する。

図３のａ〜ｃ（四チャネルの場合）および図４のａ〜ｃ（五チャネルの場合）を参照して述べたエンコード／デコード方式は、行列演算を実行することによって実装されてもよい。たとえば、第一のデコード・コンポーネント３２０ｃは第一の2×2行列A1と関連付けられていてもよく、第二のデコード・コンポーネント３２０ｄは第二の2×2行列B1と関連付けられていてもよく、第三のデコード・コンポーネント３２０ａは第三の2×2行列A2と関連付けられていてもよく、第四のデコード・コンポーネント３２０ｂは第四の2×2行列B2と関連付けられていてもよく、第五のデコード・コンポーネント４２０ｅは第五の2×2行列Aと関連付けられていてもよい。対応するエンコード・コンポーネント３１０ａ、３１０ｂ、４１０ｅ、３１０ｃ、３１０ｄは同様に、デコーダ側での対応する行列の逆である2×2行列に関連付けられてもよい。

一般的な場合、これらの行列は次のように定義される。

上記の行列の要素は、適用される符号化方式（LR符号化、MS符号化、向上されたMS符号化）に依存する。たとえば、LR符号化については、対応する2×2行列は恒等行列に等しい。すなわち、

MS符号化については、対応する2×2行列は次から得られる：

向上されたMS符号化については、対応する2×2行列は次から得られる：

適用されるべき符号化方式は、エンコーダからデコーダにサイド情報として信号伝達される。

いくつかの異なる例がここで開示される。これらの例の目的のためには、チャネル３１２、３１２’はLfチャネル４０２と同定され、チャネル３１６、３１６’はLsチャネル４０６と同定され、チャネル４１９はCチャネル４０９と同定され、チャネル３１４、３１４’はRfチャネル４０４と同定され、チャネル３１８、３１８’はRsチャネル４０８と同定される。さらに、チャネル４２２’、４２４’、４２１’、３２６’および３２８’はそれぞれx1,x2,x3,x4およびx5と記される。

〈例１：四つのチャネルのジョイント符号化および中央チャネルの別個の符号化〉
この例によれば、Lf、Ls、Rf、Rsチャネルはジョイント符号化され、Cチャネルは別個に符号化される。そのような符号化構成の図解はたとえば図６のｄを参照。Lf、Ls、RfおよびRsチャネルを合同して符号化するために、これらのチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。

中央チャネルの別個の符号化を達成するために、デコード・コンポーネント４２０ｅは素通し（LR符号化）するよう設定される。これは、行列Aが恒等行列に等しいことを含意する。

Lf、Ls、RfおよびRsチャネルは次の行列演算に従って合同でデコードされうる：

〈例２：四つのチャネルの対ごとの符号化および中央チャネルの別個の符号化〉
この例によれば、LfおよびLsチャネルは合同で符号化される。さらに、RfおよびRsチャネルは（RfおよびRsチャネルとは別個に）合同で符号化され、Cチャネルは別個に符号化される。そのような符号化構成の図解についてはたとえば図６のｂを参照。（図６のａの事例はチャネルの入れ替えによって達成できる。）
中央チャネルの別個の符号化を達成するために、デコード・コンポーネント４２０ｅは素通し（LR符号化）するよう設定される。これは、行列Aが恒等行列に等しいことを含意する。

さらに、Lf/LsおよびRf/Rsの別個の符号化を達成するために、デコード・コンポーネント３２０ｃ、３２０ｄは素通し（LR符号化）するよう設定される。これは、行列A1およびB1が恒等行列に等しいことを含意する。さらに、LfおよびLsチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。また、RfおよびRsチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。しかしながら、Lf/Lsについての窓はRf/Rsについての窓とは異なっていてもよい。Lf、Ls、RfおよびRsチャネルは次の行列演算に従ってデコードされうる：

〈例３：五つのチャネルのジョイント符号化〉
この例によれば、Lf、Ls、Rf、RsおよびCチャネルが合同で符号化される。そのような符号化構成の図解についてはたとえば図６のｅを参照。Lf、Ls、Rf、RsおよびCチャネルを合同で符号化するために、これらのチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。Lf、Ls、RfおよびRsチャネルは次の行列演算に従ってデコードされうる：

ここで、Mは、上記の例１の行列Mと同様に、行列A1、B1、A、A2、B2によって定義される。

〈例４：前方チャネルのジョイント符号化およびサラウンド・チャネルのジョイント符号化〉
この例によれば、C、LfおよびRfチャネルが合同で符号化され、Rs、Lsチャネルが合同で符号化される。そのような符号化構成の図解についてはたとえば図６のｃを参照。C、LfおよびRfチャネルを合同で符号化するために、これらのチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。また、RsおよびLsチャネルを表わすMDCTスペクトルが、窓形状および変換長に関して共通の窓を用いて符号化されるべきである。しかしながら、C/Lf/Rfについての窓はRs/Lsについての窓とは異なっていてもよい。前方チャネルおよびサラウンド・チャネルの別個の符号化を達成するためには、行列A2およびB2は恒等行列に設定されるべきである。
前方チャネルは

に従ってデコードされてもよい。ここで、MはA1およびAによって定義される。サラウンド・チャネルは

に従ってデコードされてもよい。

いくつかの場合には、エンコード装置３１０および４１０は、出力チャネル３２６、３２８の第二の対を、ここで第一の周波数と称されるある周波数より上では0に設定してもよい（第一の対の出力チャネル３２２、３２４または４２２、４２４についてのエネルギー補償が必要とされる）。その理由は、エンコード装置３１０、４１０から対応するデコード装置３２０、４２０に送られるデータの量を減らすことである。そのような場合、デコーダ側における入力チャネル３２６’、３２８’の第二の対は、第一の周波数より上の周波数帯域については0に等しい。これは、第二の対の中間チャネル３１７’、３１９’も第一の周波数より上ではスペクトル内容をもたないことを含意する。例示的な諸実施形態によれば、第二の対の入力チャネル３２６’、３２８’は（修正された）サイド信号であるという解釈をもつ。こうして、上記の状況は、第一の周波数より上の周波数については、第三および第四のデコード・コンポーネント３２０ａ、３２０ｂへの（修正された）サイド信号がないことを含意する。

図７は、デコード装置３２０および４２０の変形であるデコード装置７２０を示している。デコード装置７２０は、図３のｃおよび図４のｃの第二の対の入力チャネル３２６’、３２８’の限られたスペクトル内容について補償する。特に、第二の対の入力チャネル３２６’、３２８’がある第一の周波数までの周波数帯域に対応するスペクトル内容をもち、第一の対の入力チャネル３２２’、３２４’（または４２２’、４２４’）が、前記第一の周波数より大きい第二の周波数までの周波数帯域に対応するスペクトル内容をもつことが想定される。

デコード装置７２０は、デコード装置３２０または４２０のいずれかに対応する第一のデコード・コンポーネントを有する。デコード装置７２０はさらに、第一の対の出力チャネル３１２’、３１６’を第一の和信号７１２および第一の差信号７１６として表わすよう構成されている表現コンポーネント７２２を有する。より詳細には、第一の周波数より下の周波数帯域については、表現コンポーネント７２２は、上記の式に従って、図３のｃまたは図４のｃの第一の対の出力チャネル３１２’、３１６’を左右フォーマットからミッド‐サイド・フォーマットに変換する。第一の周波数より上の周波数帯域については、表現コンポーネント７２２は、図３のｃまたは図４のｃのチャネル３１３’のスペクトル内容を第一の和信号にマッピングする（そして第一の差信号は、第一の周波数より上の周波数帯域については0に等しい）。

同様に、表現コンポーネント７２２は、第二の対の出力チャネル３１４’、３１８’を第二の和信号７１４および第二の差信号７１８として表わす。より詳細には、前記第一の周波数より下の周波数帯域については、表現コンポーネント７２２は、上記の式に従って、図３のｃまたは図４のｃの第二の対の出力チャネル３１４、３１８を左右フォーマットからミッド‐サイド・フォーマットに変換する。第一の周波数より上の周波数帯域については、表現コンポーネント７２２は、図３のｃまたは図４のｃのチャネル３１５’のスペクトル内容を第二の和信号にマッピングする（そして第二の差信号は、第一の周波数より上の周波数帯域については0に等しい）。

デコード装置７２０はさらに、周波数拡張コンポーネント７２４を有する。周波数拡張コンポーネント７２４は、高周波再構成を実行することによって、第一の和信号および第二の和信号を第二の周波数閾値より上の周波数範囲に拡張するよう構成されている。周波数拡張された第一および第二の和信号は７２８および７３０によって表わされる。たとえば、周波数拡張コンポーネント７２４は、第一および第二の和信号をより高い周波数に拡張するためにスペクトル帯域複製技法を適用してもよい（たとえばEP1285436B1参照）。

デコード装置７２０はさらに、混合コンポーネント７２６を有する。混合コンポーネント７２６は周波数拡張された和信号７２８および第一の差信号７１６の混合を実行する。第一の周波数より下の周波数については、該混合は、周波数拡張された第一の和と第一の差信号の逆和差変換を実行することを含む。結果として、混合コンポーネント７２６の出力チャネル７３２、７３４は、第一の周波数より下の周波数帯域については、図３のｃおよび図４のｃの第一の対の出力チャネル３１２’、３１６’に等しい。

第一の周波数閾値より上の周波数については、前記混合は、第一の周波数閾値より上の周波数帯域に対応する周波数拡張された第一の和信号の部分の（一つの信号から二つの信号７３２、７３４への）パラメトリック・アップミックスを実行することを含む。適用可能なパラメトリック・アップミックス手順はたとえばEP1410687B1に記載されている。パラメトリック・アップミックスは、周波数拡張された第一の和信号７２８の脱相関されたバージョンを生成し、それが次いで、混合コンポーネント７２６に入力されるパラメータ（エンコーダ側で抽出される）に従って、前記周波数拡張された第一の和信号７２８と混合されることを含んでいてもよい。このように、第一の周波数より上の周波数については、混合コンポーネント７２６の出力チャネル７３２、７３４は周波数拡張された第一の和信号７２８のアップミックスに対応する。

同様に、混合コンポーネントは周波数拡張された第二の和信号７３０および第二の差信号７１８を処理する。

五チャネル・システムの場合（デコード装置７２０がデコード装置４２０であるとき）、周波数拡張コンポーネント７２４は第五の出力チャネル４１９を周波数拡張にかけて、拡張された第五の出力チャネル７４０を生成してもよい。

第一の和信号７１２および第二の和信号７１４を第二の周波数より上の周波数に拡張し、第一の和信号７２８および第一の差信号７１６を混合し、第二の和信号７３０および第二の差信号７１８を混合する工程は、典型的には直交ミラー・フィルタQMF領域において実行される。したがって、デコード装置７２０は、周波数拡張および混合を実行するのに先立ち、和および差信号７１２、７１６、７１４、７１８（および第五の出力チャネル４１９）をQMF領域に変換するQMF変換コンポーネントを有していてもよい。さらに、デコード装置７２０は、出力信号７３２、７３４、７３６、７３８（および７４０）を時間領域に変換する逆QMF変換コンポーネントを有していてもよい。

図５のａ、ｂおよびｃは、図１のａ〜ｃ、図２ののａ〜ｃ、図３ののａ〜ｃおよび図４ののａ〜ｃに関して述べたエンコード／デコード・フレームワークにどのようにして追加的なチャネル対が含められうるかを示している。図５のａは、第一のチャネル・セットアップ５０２および二つの追加的なチャネル５０６および５０８を含むマルチチャネル・セットアップ５００を示している。第一のチャネル・セットアップ５０２は少なくとも二つのチャネル５０２ａおよび５０２ｂを有し、たとえば、図１のａ、図２のａ、図３のａおよび図４のａに示されるチャネル・セットアップの任意のものに対応してもよい。図示した例では、第一のチャネル・セットアップ５０２は五つのチャネルを含み、よって図４のａのチャネル・セットアップに対応する。図示した例では、二つの追加的なチャネル５０６、５０８はたとえば、左後方サラウンド・スピーカーLbsおよび右後方サラウンド・スピーカーRbsに対応してもよい。

図５のｂは、チャネル・セットアップ５００をエンコードするために使われてもよい。エンコード装置５１０を示している。

エンコード装置５１０は、第一のエンコード・コンポーネント５１０ａと、第二のエンコード・コンポーネント５１０ｂと、第三のエンコード・コンポーネント５１０ｃと、第四のエンコード・コンポーネント５１０ｄとを有する。第一５１０ａ、第二５１０ｂおよび第四５１０ｄのエンコード・コンポーネントは、図１のｂに示したもののような、ステレオ・エンコード・コンポーネントである。

第三のエンコード・コンポーネント５１０ｃは、少なくとも二つの入力チャネルを受領し、それらを同数の出力チャネルに変換するよう構成されている。たとえば、第三のエンコード・コンポーネント５１０ｃは、図１のｂ、図２のｂ、図３のｂ、図４のｂのエンコード装置１１０、２１０、３１０、４１０のいずれに対応していてもよい。しかしながら、より一般に、第三のエンコード・コンポーネント５１０ｃは、少なくとも二つの入力チャネルを受領し、それらを同数の出力チャネルに変換するよう構成されている任意のエンコード・コンポーネントであってもよい。

エンコード装置５１０は第一のチャネル・セットアップ５０２のチャネル数に対応する第一の数の入力チャネルを受領する。よって、上記によれば、第一の数は少なくとも2に等しく、第一の数の入力チャネルは第一の入力チャネル５１２ａおよび第二の入力チャネル５１２ｂ（および可能性としてはいくつかの残りのチャネル５１２ｃも）を含む。図示した例では、第一および第二の入力チャネル５１２ａ、５１２ｂは、図５のａのチャネル５０２ａおよび５０２ｂに対応してもよい。

エンコード装置５１０はさらに、二つの追加的な入力チャネル、第一の追加的入力チャネル５１６および第二の追加的入力チャネル５１８を受領する。入力チャネル５１２ａ〜ｃ、５１６、５１８は典型的にはMDCTスペクトルとして表現される。

第一の入力チャネル５１２ａおよび第一の追加的チャネル５１６は第一のステレオ・エンコード・コンポーネント５１０ａに入力される。第一のステレオ・エンコード・コンポーネント５１０ａは、上記に開示したステレオ符号化方式のいずれかに従ってステレオ・エンコードを実行する。第一のステレオ・エンコード・コンポーネント５１０ａは、第一のチャネル５１３および第二のチャネル５１７を含む第一の対の中間出力チャネルを出力する。

同様に、第二の入力チャネル５１２ｂおよび第二の追加的チャネル５１８は第二のステレオ・エンコード・コンポーネント５１０ｂに入力される。第二のステレオ・エンコード・コンポーネント５１０ｂは、上記に開示したステレオ符号化方式のいずれかに従ってステレオ・エンコードを実行する。第二のステレオ・エンコード・コンポーネント５１０ａは、第一のチャネル５１５および第二のチャネル５１９を含む第二の対の中間出力チャネルを出力する。

図５のａの例示的なチャネル・セットアップを考えると、第一および第二のステレオ・エンコード・コンポーネント５１０ａ、５１０ｂによって実行される処理は、それぞれLbsチャネル５０６のLsチャネル５０２ａとのステレオ符号化およびRbsチャネル５０８のRsチャネル５０２ｂとのステレオ符号化に対応する。しかしながら、他の例示的チャネル・セットアップでは他の解釈が得られることは理解しておくものとする。

第一の対の中間出力チャネルの第一のチャネル５１３と、第二の対の中間出力チャネルの第一のチャネル５１５とが次いで、第一の入力チャネル５１２ａおよび第二の入力チャネル５１２ｂを別にした前記第一の数の入力チャネル５１２ｃと一緒に、第三のエンコード・コンポーネント５１０ｃに入力される。第三のエンコード・コンポーネント５１０ｃは、その入力チャネル５１３、５１５、５１２ｃを変換して、第一の対の出力チャネル５２２、５２４および該当するならさらなる出力チャネル５２１を含む同量の出力チャネルを生成する。第三のエンコード・コンポーネントはたとえば、その入力チャネル５１３、５１５、５１２ｃを、図１のｂ、図２のｂ、図３のｂおよび図４のｂに関して開示したのと同様に変換してもよい。

同様に、第一の対の中間出力チャネルの第二のチャネル５１７と、第二の対の中間出力チャネルの第二のチャネル５１９とが第四のステレオ・エンコード・コンポーネント５１０ｄに入力される。該第四のステレオ・エンコード・コンポーネント５１０ｄは、上記で論じたステレオ・エンコード方式のいずれかに従ってステレオ・エンコードを実行する。第四のステレオ・エンコード・コンポーネントは第二の対の出力チャネル５２６、５２８を出力する。

出力チャネル５２１、５２２、５２４、５２６、５２８は量子化され、符号化されて、対応するデコード装置に伝送されるべきビットストリームを形成する。

図５のｃは、対応するデコード装置５２０を示している。デコード装置５２０は、第一のデコード・コンポーネント５２０ｃ、第二のデコード・コンポーネント５２０ｄ、第三のデコード・コンポーネント５２０ａおよび第四のデコード・コンポーネント５２０ｂを有する。第二５２０ｄ、第三５２０ａおよび第四５２０ｂのデコード・コンポーネントは、図１のｃに示したもののような、ステレオ・デコード・コンポーネントである。

第一のデコード・コンポーネント５２０ａは、少なくとも二つの入力チャネルを受領し、それらを同数の出力チャネルに変換するよう構成されている。たとえば、第一のデコード・コンポーネント５２０ｃは、図１のｂ、図２のｂ、図３のｂ、図４のｂのデコード装置１２０、２２０、３２０、４２０のいずれに対応していてもよい。しかしながら、より一般には、第一のデコード・コンポーネント５２０ｃは、少なくとも二つの入力チャネルを受領し、それらを同数の出力チャネルに変換するよう構成されている任意のデコード・コンポーネントであってもよい。

デコード装置５２０は、エンコード装置５１０によって伝送されたビットストリームを受領し、デコードし、量子化解除する。このようにして、デコード装置５２０は、エンコード装置５１０の出力チャネル５２１、５２２、５２４に対応する第一の数の入力チャネル５２１’、５２２’、５２４’を受領する。上記によれば、第一の数の入力チャネルは第一の入力チャネル５２２’および第二の入力チャネル５２４’を（および可能性としてはいくつかの残りのチャネル５２１’も）含む。

デコード装置５２０はさらに、二つの追加的な入力チャネル、第一の追加的入力チャネル５２６’および第二の追加的入力チャネル５２８’（エンコーダ側の出力チャネル５２６、５２８に対応）を受領する。

第一の数の入力チャネル５２１’、５２２’、５２４’は第一のデコード・コンポーネント５２０ｃに入力される。第一のデコード・コンポーネント５２０ｃは、その入力チャネル５２１’、５２２’、５２４’を変換して、第一の対の中間出力チャネル５１３’、５１５’および該当するならさらなる出力チャネル５１２ｃ’を含む同量の出力チャネルを生成する。第一のデコード・コンポーネント５２０ｃはたとえば、その入力チャネル５２１’、５２２’、５２４’を、図１のｃ、図２のｃ、図３のｃおよび図４のｃに関して開示したのと同様に変換してもよい。特に、第一のデコード・コンポーネント５２０ｃは、エンコーダ側で第三のエンコード・コンポーネント５１０ｃによって実行されたエンコードの逆であるデコードを実行するよう構成される。

第一の追加的入力チャネル５２６および第二の追加的入力チャネル５２８は第二のステレオ・デコード・コンポーネント５２０ｄに入力される。該第二のステレオ・デコード・コンポーネント５２０ｄは、エンコーダ側で第四のステレオ・エンコード・コンポーネント５１０ｄによって実行されたエンコードの逆に対応するステレオ・デコードを実行する。第二のステレオ・デコード・コンポーネント５２０ｄは、第二の対の中間出力チャネル５１７’、５１９’を出力する。

第一の対の中間出力チャネルの第一のチャネル５１３’と、第二の対の中間出力チャネルの第一のチャネル５１７’とが、第三のステレオ・デコード・コンポーネント５２０ａに入力される。第三のステレオ・デコード・コンポーネント５２０ａは、エンコーダ側で第一のステレオ・エンコード・コンポーネント５１０ａによって実行されたエンコードの逆に対応するステレオ・デコードを実行する。第三のステレオ・デコード・コンポーネント５２０ａは、第一のチャネル５１２ａ’および第二のチャネル５１６’を含む第一の対の出力チャネルを出力する。

同様に、第一の対の中間出力チャネルの第二のチャネル５１５’と、第二の対の中間出力チャネルの第二のチャネル５１９’とが、第四のステレオ・デコード・コンポーネント５２０ｂに入力される。第四のステレオ・デコード・コンポーネント５２０ｂは、エンコーダ側で第二のステレオ・エンコード・コンポーネント５１０ｂによって実行されたエンコードの逆に対応するステレオ・デコードを実行する。第四のステレオ・デコード・コンポーネント５２０ａは、第一のチャネル５１２ｂ’および第二のチャネル５１８’を含む第二の対の出力チャネルを出力する。

図６のａ、ｂ、ｃ、ｄおよびｅは、五チャネル・システムの五つのチャネルを示している。五つのチャネルは異なる符号化構成を形成するために異なるグループに分割されてもよい。各グループは、上記に従ってエンコード装置を使うことによって合同してエンコードされるチャネルに対応する。

第一の符号化構成６１０が図６のａに示されている。第一の符号化構成６１０は、一つのチャネル（ここでは中央チャネルC）からなる第一のグループ６１２、二つのチャネル（ここではLfおよびRfチャネル）からなる第二のグループ６１４および二つのチャネル（ここではLsおよびRsチャネル）からなる第三のグループ６１６を含む。第一のグループ６１２のチャネルは別個に符号化され、第二のグループ６１４のチャネルは合同して符号化され、第三のグループ６１６のチャネルは合同して符号化される。そのようなエンコードはたとえば、図４のｂのエンコード装置４１０によって、Lfチャネルを入力チャネル３１２に、Lsチャネルを入力チャネル３１６に、Cチャネルを入力チャネル４１９に、Rfチャネルを入力チャネル３１４に、Rsチャネルを入力チャネル３１８にマッピングすることによって、達成されることができる。さらに、第一３１０ａ、第二３１０ｂおよび第四４１０ｅのステレオ・エンコード・コンポーネントの符号化方式はLR符号化（入力信号の素通し）に設定されるべきである。図６のｂは、第一の符号化構成６１０の変形６１０’を示す。第一の符号化構成の変形６１０’では、第二のグループ６１４’がLfおよびLsチャネルに対応し、第三のグループ６１６’がRfおよびRsチャネルに対応する。図６のａおよびｂの符号化構成は、以下では1-2-2符号化構成と称される。

第二の符号化構成６２０が図６のｃに示されている。第二の符号化構成６２０は、三つのチャネル（ここでは中央チャネルC、LfチャネルおよびRfチャネル）からなる第一のグループ６２２および二つのチャネル（ここではLsおよびRsチャネル）からなる第二のグループ６２４を含む。図６のｃの符号化構成は、以下では2-3符号化構成と称される。第一のグループ６２２のチャネルは合同して符号化され、第二のグループ６２４のチャネルは第一のグループとは別個に合同して符号化される。そのようなエンコードはたとえば、図４のｂのエンコード装置４１０によって、Lfチャネルを入力チャネル３１２に、Lsチャネルを入力チャネル３１６に、Cチャネルを入力チャネル４１９に、Rfチャネルを入力チャネル３１４に、Rsチャネルを入力チャネル３１８にマッピングすることによって、達成されることができる。さらに、第一３１０ａ、第二３１０ｂのステレオ・エンコード・コンポーネントの符号化方式はLR符号化（入力信号の素通し）に設定されるべきである。

第三の符号化構成６３０が図６のｄに示されている。第三の符号化構成６２０は、一つのチャネル（ここでは中央チャネルC）からなる第一のグループ６３２、四つのチャネル（ここではLfおよびRfチャネル）からなる第二のグループ６３４を含む。図６のｄの符号化構成は、以下では1-4符号化構成と称される。第一のグループ６３２のチャネルは別個に符号化され、第二のグループ６３４のチャネルは合同して符号化される。そのようなエンコードはたとえば、図４のｂのエンコード装置４１０によって、Lfチャネルを入力チャネル３１２に、Lsチャネルを入力チャネル３１６に、Cチャネルを入力チャネル４１９に、Rfチャネルを入力チャネル３１４に、Rsチャネルを入力チャネル３１８にマッピングすることによって、達成されることができる。さらに、第五のステレオ・エンコード・コンポーネント４１０ｅの符号化方式はLR符号化（入力信号の素通し）に設定されるべきである。

第四の符号化構成６４０が図６のｅに示されている。第四の符号化構成６４０は、五つ全部のチャネルからなる単一のグループ６４２を含む。つまり、全部のチャネルがジョイント符号化される。図６のｅの符号化構成は以下では0-5符号化と称される。たとえば、それらのチャネルは、図４のｂのエンコード装置４１０によって、Lfチャネルを入力チャネル３１２に、Lsチャネルを入力チャネル３１６に、Cチャネルを入力チャネル４１９に、Rfチャネルを入力チャネル３１４に、Rsチャネルを入力チャネル３１８にマッピングすることによって、合同してエンコードされうる。

上記の符号化構成は五チャネル・システムに関して説明したが、四つ以上のチャネルをもつシステムにも等しく適用可能である。

このように、エンコード装置は、種々の符号化構成６１０、６１０’、６２０、６３０、６４０に従ってマルチチャネル・システム構成のオーディオ・コンテンツを符号化してもよい。エンコーダ側で使われた符号化構成はデコーダに通信される必要がある。この目的のために、具体的な信号伝達フォーマットが使用されてもよい。少なくとも四つのチャネルを含むオーディオ・システムについて、信号伝達フォーマットは、デコーダ側で適用されるべき前記複数の構成６１０、６１０’、６２０、６３０、６４０の一つを指示する少なくとも二つのビットを含む。たとえば、各符号化構成は、識別番号に関連付けられてもよく、前記少なくとも二つのビットは、デコーダにおいて適用すべき符号化構成の識別番号を指示してもよい。

図６のａ〜ｅに示される五チャネル・システムについては、1-2-2構成、2-3構成、1-4または0-5構成の間で選択をするために、二つのビットが使われてもよい。該二つのビットが1-2-2構成を指示する場合は、信号伝達フォーマットは、1-2-2構成のどの変形を選択すべきか、すなわち図６のａの左右符号化構成または図６のｂの前後構成のどちらが適用されるべきかを指示する第三のビットを含んでいてもよい。次の擬似コードは、これがどのように実装されうるかの例を与える。

switch(high_mid_coding_config){
case l_2_2_coding:
1_2_2_channel_mapping /* 0=Lf/Rf, Ls/Rs; 1=Lf/Ls+Rf/Rs */
two_channel_data(); /* Lf/Rf または Lf/Ls */
two_channel_data(); /* Ls/Rs または Rf/Rs */
mono_data() /* C */
break;
case 3ch_joint_coding:
three_channel_data() /* L/R/C */
two_channel_data() /* Ls/Rs */
break;
case 4ch_joint_coding:
four_channel_data() /* L/R/Ls/Rs */
mono_data() /* C */
break;
case 5ch_joint_coding:
five_channel_data()
break;
}
上記の擬似コードに関し、信号伝達フォーマットは、パラメータhigh_mid_coding_configを符号化するために2ビットを使い、パラメータ1_2_channel_,mappingを符号化するために1ビットを使う。

〈等価物、拡張、代替その他〉
上記の記述を吟味すれば、当業者には本開示のさらなる実施形態が明白になるであろう。本稿および図面は実施形態および例を開示しているが、本開示はこれらの個別的な例に制約されるものではない。付属の請求項によって定義される本開示の範囲から外れることなく数多くの修正および変形をなすことができる。請求項に現われる参照符号があったとしても、その範囲を限定するものと理解されるものではない。

さらに、図面、本開示および付属の請求項の吟味から、本開示を実施する当業者によって、開示される実施形態に対する変形が理解され、実施されることができる。請求項において、「有する／含む」の語は他の要素またはステップを排除するものではなく、単数形の表現は複数を排除するものではない。ある種の施策が互いに異なる従属請求項に記載されているというだけの事実がこれらの施策の組み合わせが有利に使用できないことを示すものではない。

上記で開示されたシステムおよび方法は、ソフトウェア、ファームウェア、ハードウェアまたはそれらの組み合わせとして実装されうる。ハードウェア実装では、上記の記述で言及された機能ユニットの間でのタスクの分割は必ずしも物理的なユニットへの分割に対応しない。逆に、一つの物理的コンポーネントが複数の機能を有していてもよく、一つのタスクが協働していくつかの物理的コンポーネントによって実行されてもよい。ある種のコンポーネントまたはすべてのコンポーネントは、デジタル信号プロセッサまたはマイクロプロセッサによって実行されるソフトウェアとして実装されてもよく、あるいはハードウェアとしてまたは特定用途向け集積回路として実装されてもよい。そのようなソフトウェアは、コンピュータ記憶媒体（または非一時的な媒体）および通信媒体（または一時的な媒体）を含みうるコンピュータ可読媒体上で頒布されてもよい。当業者にはよく知られているように、コンピュータ記憶媒体という用語は、コンピュータ可読命令、データ構造、プログラム・モジュールまたは他のデータのような情報の記憶のための任意の方法または技術において実装される揮発性および不揮発性、リムーバブルおよび非リムーバブル媒体を含む。コンピュータ記憶媒体は、これに限られないが、RAM、ROM、EEPROM、フラッシュメモリまたは他のメモリ技術、CD-ROM、デジタル多用途ディスク（DVD）または他の光ディスク記憶、磁気カセット、磁気テープ、磁気ディスク記憶または他の磁気記憶デバイスまたは、所望される情報を記憶するために使用されることができ、コンピュータによってアクセスされることができる他の任意の媒体を含む。さらに、通信媒体が典型的にはコンピュータ可読命令、データ構造、プログラム・モジュールまたは他のデータを、搬送波または他の転送機構のような変調されたデータ信号において具現し、任意の情報送達媒体を含むことは当業者にはよく知られている。
いくつかの態様を記載しておく。
〔態様１〕
少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード方法であって、
第一の対の入力チャネルおよび第二の対の入力チャネルを受領する段階と；
前記第一の対の入力チャネルを第一のステレオ・デコードにかける段階と；
前記第二の対の入力チャネルを第二のステレオ・デコードにかける段階と；
前記第一のステレオ・デコードから帰結する第一のチャネルおよび前記第二のステレオ・デコードから帰結する第一のチャネルを第三のステレオ・デコードにかけて第一の対の出力チャネルを得る段階と；
前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のチャネルを第四のステレオ・デコードにかけて第二の対の出力チャネルを得る段階と；
前記第一および第二の対の出力チャネルの出力とを含む、
デコード方法。
〔態様２〕
前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられた前記オーディオ・チャネルは、前記第一のステレオ・デコードから帰結する前記第二のチャネルである、態様１記載のデコード方法。
〔態様３〕
第五の入力チャネルを受領する段階と；
前記第五の入力チャネルおよび前記第一のステレオ・デコードから帰結する前記第二のチャネルを第五のステレオ・デコードにかける段階とをさらに含み、
前記第一のステレオ・デコードから帰結する前記第二のチャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・デコードから帰結する第一のチャネルに等しく、
前記第五のステレオ・デコードから帰結する第二のチャネルが第五の出力チャネルとして出力される、
態様１記載のデコード方法。
〔態様４〕
第三の対の入力チャネルを受領する段階と；
前記第三の対の入力チャネルを第六のステレオ・デコードにかける段階と；
前記第一の対の出力チャネルの第二のチャネルおよび前記第六のステレオ・デコードから帰結する第一のチャネルを第七のステレオ・デコードにかける段階と；
前記第二の対の出力チャネルの第二のチャネルおよび前記第六のステレオ・デコードから帰結する第二のチャネルを第八のステレオ・デコードにかける段階と；
前記第一の対の出力チャネルの前記第一のチャネル、前記第七のステレオ・デコードから帰結するチャネル対、前記第二の対の出力チャネルの前記第一のチャネルおよび前記第八のステレオ・デコードから帰結するチャネル対の出力と
をさらに含む、態様１ないし３のうちいずれか一項記載のデコード方法。
〔態様５〕
前記第一、第二、第三および第四のステレオ・デコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、左右符号化、和差符号化および向上された和差符号化を含む符号化方式に従ってステレオ・デコードを実行することを含む、態様１ないし４のうちいずれか一項記載のデコード方法。
〔態様６〕
異なる周波数帯域について異なる符号化方式が使用される、態様５記載のデコード方法。
〔態様７〕
異なる時間フレームについて異なる符号化方式が使用される、態様５または６記載のデコード方法。
〔態様８〕
前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、臨界サンプリングされた修正離散コサイン変換（MDCT）領域において実行される、態様１ないし７のうちいずれか一項記載のデコード方法。
〔態様９〕
すべての入力チャネルが同じ窓を使ってMDCT領域に変換される、態様８記載のデコード方法。
〔態様１０〕
前記第二の対の入力チャネルは、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有し、前記第二のステレオ・デコードから帰結するチャネル対は、前記第一の周波数閾値より上の周波数帯域については0に等しい、態様１ないし９のうちいずれか一項記載のデコード方法。
〔態様１１〕
前記第二の対の入力チャネルが、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有し、前記第一の対の入力チャネルが、前記第一の周波数閾値より大きい第二の周波数閾値までの周波数帯域に対応するスペクトル内容を有しており、当該方法はさらに、
前記第一の対の出力チャネルを第一の和信号および第一の差信号として表現し、前記第二の対の出力チャネルを第二の和信号および第二の差信号として表現する段階と；
高周波再構成を実行することにより前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長する段階と；
前記第一の和信号および前記第一の差信号を混合する段階であって、前記第一の周波数閾値より下の周波数については、前記混合は前記第一の和信号および前記第一の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、前記混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第一の和信号の部分のパラメトリック・アップミックスを実行することを含む、段階と；
前記第二の和信号および前記第二の差信号を混合する段階であって、前記第一の周波数閾値より下の周波数については、前記混合は前記第二の和信号および前記第二の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、前記混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第二の和信号の部分のパラメトリック・アップミックスを実行することを含む、段階とを含む、
態様１ないし１０のうちいずれか一項記載のデコード方法。
〔態様１２〕
前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長する段階、前記第一の和信号および前記第一の差信号を混合する段階および前記第二の和信号および前記第二の差信号を混合する段階は、直交ミラー・フィルタ（QMF）領域で実行される、態様１１記載の方法。
〔態様１３〕
態様１ないし１２のうちいずれか一項記載の方法を実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクト。
〔態様１４〕
少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード装置であって、
第一の対の入力チャネルおよび第二の対の入力チャネルを受領するよう構成された受領コンポーネントと；
前記第一の対の入力チャネルを第一のステレオ・デコードにかけるよう構成された第一のステレオ・デコード・コンポーネントと；
前記第二の対の入力チャネルを第二のステレオ・デコードにかけるよう構成された第二のステレオ・デコード・コンポーネントと；
前記第一のステレオ・デコードから帰結する第一のチャネルおよび前記第二のステレオ・デコードから帰結する第一のチャネルを第三のステレオ・デコードにかけて第一の対の出力チャネルを得るよう構成された第三のステレオ・デコード・コンポーネントと；
前記第一のステレオ・デコードから帰結する前記第二のチャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のチャネルを第四のステレオ・デコードにかけて第二の対の出力チャネルを得るよう構成された第四のステレオ・デコード・コンポーネントと；
前記第一および第二の対の出力チャネルを出力するよう構成された出力コンポーネントとを有する、
デコード装置。
〔態様１５〕
態様１４記載のデコード装置を有するオーディオ・システム。
〔態様１６〕
少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード方法であって、
第一の対の入力チャネルおよび第二の対の入力チャネルを受領する段階と；
前記第一の対の入力チャネルを第一のステレオ・エンコードにかける段階と；
前記第二の対の入力チャネルを第二のステレオ・エンコードにかける段階と；
前記第一のステレオ・エンコードから帰結する第一のチャネルおよび前記第二のステレオ・エンコードから帰結する第一のチャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力チャネルを得る段階と；
前記第一のステレオ・エンコードから帰結する第二のチャネルおよび前記第二のステレオ・エンコードから帰結する第二のチャネルを第四のステレオ・エンコードにかけて第二の対の出力チャネルを得る段階と；
前記第一および第二の対の出力チャネルの出力とを含む、
エンコード方法。
〔態様１７〕
前記第二のステレオ・エンコードから帰結する前記第一のチャネルに関連付けられた前記オーディオ・チャネルは、前記第二のステレオ・エンコードから帰結する前記第一のチャネルである、態様１６記載のエンコード方法。
〔態様１８〕
第五の入力チャネルを受領する段階と；
前記第五の入力チャネルおよび前記第二のステレオ・エンコードから帰結する前記第一のチャネルを第五のステレオ・エンコードにかける段階とをさらに含み、
前記第二のステレオ・エンコードから帰結する前記第一のチャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・エンコードから帰結する第一のチャネルであり、
前記第五のステレオ・エンコードから帰結する第二のチャネルが第五の出力チャネルとして出力される、
態様１６記載のエンコード方法。
〔態様１９〕
第三の対の入力チャネルを受領する段階と；
前記第一の対の入力チャネルの第二のチャネルおよび前記第三の対の入力チャネルの第一のチャネルを第六のステレオ・エンコードにかける段階と；
前記第二の対の入力チャネルの第二のチャネルおよび前記第三の対の入力チャネルの第二のチャネルを第七のステレオ・エンコードにかける段階であって、
前記第六のステレオ・エンコードから帰結する第一のチャネルおよび前記第一の対の入力チャネルの第一のチャネルは前記第一のステレオ・エンコードにかけられ、
前記第七のステレオ・エンコードから帰結する第一のチャネルおよび前記第二の対の入力チャネルの第一のチャネルは前記第二のステレオ・エンコードにかけられる、段階と；
前記第六のステレオ・エンコードから帰結する第二のチャネルおよび前記第七のステレオ・エンコードから帰結する第二のチャネルを第八のステレオ・エンコードにかけて第三の対の出力チャネルを得る段階とを含む、
態様１６ないし１８のうちいずれか一項記載のエンコード方法。
〔態様２０〕
前記第一、第二、第三および第四のステレオ・エンコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、左右符号化、和差符号化および向上された和差符号化を含む符号化方式に従ってステレオ・エンコードを実行することを含む、態様１６ないし１９のうちいずれか一項記載のエンコード方法。
〔態様２１〕
異なる周波数帯域について異なる符号化方式が使用される、態様２０記載のエンコード方法。
〔態様２２〕
異なる時間フレームについて異なる符号化方式が使用される、態様２０または２１記載のエンコード方法。
〔態様２３〕
前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、臨界サンプリングされた修正離散コサイン変換（MDCT）領域において実行される、態様１６ないし２２のうちいずれか一項記載のエンコード方法。
〔態様２４〕
すべての入力チャネルが、同じ窓を使ってMDCT領域に変換される、態様２３記載のエンコード方法。
〔態様２５〕
態様１６ないし２４のうちいずれか一項記載の方法を実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクト。
〔態様２６〕
少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード装置であって、
第一の対の入力チャネルおよび第二の対の入力チャネルを受領するよう構成された受領コンポーネントと；
前記第一の対の入力チャネルを第一のステレオ・エンコードにかけるよう構成された第一のステレオ・エンコード・コンポーネントと；
前記第二の対の入力チャネルを第二のステレオ・エンコードにかけるよう構成された第二のステレオ・エンコード・コンポーネントと；
前記第一のステレオ・エンコードから帰結する第一のチャネルおよび前記第二のステレオ・エンコードから帰結する第一のチャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力チャネルを提供するよう構成された第三のステレオ・エンコード・コンポーネントと；
前記第一のステレオ・エンコードから帰結する第二のチャネルおよび前記第二のステレオ・エンコードから帰結する第二のチャネルを第四のステレオ・エンコードにかけて第二の対の出力チャネルを得るよう構成された第四のステレオ・エンコード・コンポーネントと；
前記第一および第二の対の出力チャネルを出力するよう構成された出力コンポーネントとを有する、
エンコード装置。
〔態様２７〕
態様２６記載のエンコード装置を有するオーディオ・システム。
〔態様２８〕
少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムのオーディオ・コンテンツを表わす信号をデコードするときに使う符号化構成をエンコーダによってデコーダに指示するための信号伝達フォーマットであって、前記少なくとも四つのチャネルは複数の構成に基づいて異なるグループに分割可能であり、各グループはジョイント・エンコードされるチャネルに対応し、当該信号伝達フォーマットは、前記デコーダによって適用されるべき前記複数の構成の一つを指示する少なくとも二つのビットを有する、信号伝達フォーマット。
〔態様２９〕
前記少なくとも二つのビットは、前記複数の構成の一つを、前記複数の構成の前記一つの識別番号を指示することによって指示する、態様２８記載の信号伝達フォーマット。
〔態様３０〕
前記マルチチャネル・オーディオ・システムは五つのチャネルを含み、前記複数の符号化構成は、
五つのチャネルのジョイント符号化；
四つのチャネルのジョイント符号化および最後のチャネルの別個の符号化；
三つのチャネルのジョイント符号化および他の二つのチャネルの別個のジョイント符号化；および
二つのチャネルのジョイント符号化、他の二つのチャネルの別個のジョイント符号化および最後のチャネルの別個の符号化
に対応する、態様２８または２９記載の信号伝達フォーマット。
〔態様３１〕
前記少なくとも二つのビットが二つのチャネルのジョイント符号化、他の二つのチャネルの別個のジョイント符号化および最後のチャネルの別個の符号化を指示する場合、前記少なくとも二つのビットは、どの二つのチャネルがジョイント符号化されるべきで、どの他の二つのチャネルがジョイント符号化されるべきかを指示するビットを含む、態様３０記載の信号伝達フォーマット。

Claims (36)

1. 少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード方法であって、
   第一の対の入力オーディオ・チャネルおよび前記第一の対の入力オーディオ・チャネルとは異なる第二の対の入力オーディオ・チャネルを受領する段階と；
   前記第一の対の入力オーディオ・チャネルを第一のステレオ・デコードにかける段階と；
   前記第二の対の入力オーディオ・チャネルを第二のステレオ・デコードにかける段階と；
   前記第一のステレオ・デコードから帰結する第一のオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第一のオーディオ・チャネルを第三のステレオ・デコードにかけて第一の対の出力オーディオ・チャネルを得る段階と；
   前記第一のステレオ・デコードから帰結する第二のオーディオ・チャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のオーディオ・チャネルを第四のステレオ・デコードにかけて前記第一の対の出力オーディオ・チャネルとは異なる第二の対の出力オーディオ・チャネルを得る段階であって、前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられた前記オーディオ・チャネルは、前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルである、または第五の入力オーディオ・チャネルおよび前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルの第五のステレオ・デコードから帰結するオーディオ・チャネルである、段階と；
   前記第一および第二の対の出力チャネルの出力とを含み、
   前記第一、第二、第三および第四のステレオ・デコードのうち少なくとも二つは、少なくとも一つの周波数帯域および少なくとも一つの時間フレームについて、それぞれのステレオ・デコードにかけられた二つのオーディオ・チャネルの重み付けされたまたは重み付けされない和と、それぞれのステレオ・デコードにかけられた二つのオーディオ・チャネルの間の重み付けされたまたは重み付けされない差とを形成することを含む、
   デコード方法。
2. サイド情報を受領する段階を含み、
   前記第一、第二、第三および第四のステレオ・デコードについて、
   前記サイド情報に基づいて、左右符号化、和差符号化および向上された和差符号化を含む群から符号化方式を選択し、
   選択された符号化方式に従ってステレオ・デコードを実行することを含む、
   請求項１記載のデコード方法。
3. 前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられた前記オーディオ・チャネルは、前記第一のステレオ・デコードから帰結する前記第二のチャネルである、請求項１または２記載のデコード方法。
4. 前記第五の入力オーディオ・チャネルを受領する段階と；
   前記第五の入力オーディオ・チャネルおよび前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルを前記第五のステレオ・デコードにかける段階とをさらに含み、
   前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・デコードから帰結する第一のオーディオ・チャネルに等しく、
   前記第五のステレオ・デコードから帰結する第二のオーディオ・チャネルが第五の出力チャネルとして出力される、
   請求項１または２記載のデコード方法。
5. 第三の対の入力オーディオ・チャネルを受領する段階と；
   前記第三の対の入力オーディオ・チャネルを第六のステレオ・デコードにかける段階と；
   前記第一の対の出力オーディオ・チャネルの第二のオーディオ・チャネルおよび前記第六のステレオ・デコードから帰結する第一のオーディオ・チャネルを第七のステレオ・デコードにかける段階と；
   前記第二の対の出力オーディオ・チャネルの第二のオーディオ・チャネルおよび前記第六のステレオ・デコードから帰結する第二のオーディオ・チャネルを第八のステレオ・デコードにかける段階と；
   前記第一の対の出力オーディオ・チャネルの前記第一のオーディオ・チャネル、前記第七のステレオ・デコードから帰結するオーディオ・チャネル対、前記第二の対の出力チャネルの前記第一のオーディオ・チャネルおよび前記第八のステレオ・デコードから帰結するオーディオ・チャネル対の出力と
   をさらに含む、請求項１ないし４のうちいずれか一項記載のデコード方法。
6. 前記第一、第二、第三および第四のステレオ・デコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、左右符号化、和差符号化および向上された和差符号化を含む群からの符号化方式に従ってステレオ・デコードを実行することを含む、請求項１ないし５のうちいずれか一項記載のデコード方法。
7. 異なる周波数帯域について異なる符号化方式が使用される、請求項６記載のデコード方法。
8. 異なる時間フレームについて異なる符号化方式が使用される、請求項６または７記載のデコード方法。
9. 前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・デコードは、臨界サンプリングされた修正離散コサイン変換（MDCT）領域において実行される、請求項１ないし８のうちいずれか一項記載のデコード方法。
10. すべての入力オーディオ・チャネルが同じ窓を使ってMDCT領域に変換される、請求項９記載のデコード方法。
11. 前記第二の対の入力オーディオ・チャネルは、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有し、前記第二のステレオ・デコードから帰結するチャネル対は、前記第一の周波数閾値より上の周波数帯域については0に等しい、請求項１ないし１０のうちいずれか一項記載のデコード方法。
12. 前記第二の対の入力オーディオ・チャネルが、第一の周波数閾値までの周波数帯域に対応するスペクトル内容を有し、前記第一の対の入力オーディオ・チャネルが、前記第一の周波数閾値より大きい第二の周波数閾値までの周波数帯域に対応するスペクトル内容を有しており、当該方法はさらに、
    前記第一の対の出力オーディオ・チャネルを第一の和信号および第一の差信号として表現し、前記第二の対の出力オーディオ・チャネルを第二の和信号および第二の差信号として表現する段階と；
    高周波再構成を実行することにより前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長する段階と；
    前記第一の和信号および前記第一の差信号を混合する段階であって、前記第一の周波数閾値より下の周波数については、前記混合は前記第一の和信号および前記第一の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、前記混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第一の和信号の部分のパラメトリック・アップミックスを実行することを含む、段階と；
    前記第二の和信号および前記第二の差信号を混合する段階であって、前記第一の周波数閾値より下の周波数については、前記混合は前記第二の和信号および前記第二の差信号の逆和差変換を実行することを含み、前記第一の周波数閾値より上の周波数については、前記混合は前記第一の周波数閾値より上の周波数帯域に対応する前記第二の和信号の部分のパラメトリック・アップミックスを実行することを含む、段階とを含む、
    請求項１ないし１１のうちいずれか一項記載のデコード方法。
13. 前記第一の和信号および前記第二の和信号を前記第二の周波数閾値より上の周波数範囲に延長する段階、前記第一の和信号および前記第一の差信号を混合する段階および前記第二の和信号および前記第二の差信号を混合する段階は、直交ミラー・フィルタ（QMF）領域で実行される、請求項１２記載の方法。
14. 請求項１ないし１３のうちいずれか一項記載の方法を実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクト。
15. 少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるデコード装置であって、
    第一の対の入力オーディオ・チャネルおよび前記第一の対の入力オーディオ・チャネルとは異なる第二の対の入力オーディオ・チャネルを受領するよう構成された受領コンポーネントと；
    前記第一の対の入力オーディオ・チャネルを第一のステレオ・デコードにかけるよう構成された第一のステレオ・デコード・コンポーネントと；
    前記第二の対の入力オーディオ・チャネルを第二のステレオ・デコードにかけるよう構成された第二のステレオ・デコード・コンポーネントと；
    前記第一のステレオ・デコードから帰結する第一のオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第一のオーディオ・チャネルを第三のステレオ・デコードにかけて第一の対の出力オーディオ・チャネルを得るよう構成された第三のステレオ・デコード・コンポーネントと；
    前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルに関連付けられたオーディオ・チャネルおよび前記第二のステレオ・デコードから帰結する第二のオーディオ・チャネルを第四のステレオ・デコードにかけて前記第一の対の出力オーディオ・チャネルとは異なる第二の対の出力オーディオ・チャネルを得るよう構成された第四のステレオ・デコード・コンポーネントであって、前記第一のステレオ・デコードから帰結する第二のチャネルに関連付けられた前記オーディオ・チャネルは、前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルである、または第五の入力オーディオ・チャネルおよび前記第一のステレオ・デコードから帰結する前記第二のオーディオ・チャネルの第五のステレオ・デコードから帰結するオーディオ・チャネルである、第四のステレオ・デコード・コンポーネントと；
    前記第一および第二の対の出力オーディオ・チャネルを出力するよう構成された出力コンポーネントとを有しており、
    前記第一、第二、第三および第四のステレオ・デコードのうち少なくとも二つは、少なくとも一つの周波数帯域および少なくとも一つの時間フレームについて、それぞれのステレオ・デコードにかけられた二つのオーディオ・チャネルの重み付けされたまたは重み付けされない和と、それぞれのステレオ・デコードにかけられた二つのオーディオ・チャネルの間の重み付けされたまたは重み付けされない差とを形成することを含む、
    デコード装置。
16. サイド情報を受領するよう構成されており、
    前記第一、第二、第三および第四のステレオ・デコード・コンポーネントについて、
    前記サイド情報に基づいて、左右符号化、和差符号化および向上された和差符号化を含む群から符号化方式を選択し、
    選択された符号化方式に従ってステレオ・デコードを実行するよう構成されている、
    請求項１５記載のデコード装置。
17. 請求項１５または１６記載のデコード装置を有するオーディオ・システム。
18. 少なくとも四つのオーディオ・チャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード方法であって、
    第一の対の入力オーディオ・チャネルおよび前記第一の対の入力オーディオ・チャネルとは異なる第二の対の入力オーディオ・チャネルを受領する段階と；
    前記第一の対の入力オーディオ・チャネルを第一のステレオ・エンコードにかける段階と；
    前記第二の対の入力オーディオ・チャネルを第二のステレオ・エンコードにかける段階と；
    前記第一のステレオ・エンコードから帰結する第一のオーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する第一のオーディオ・チャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力オーディオ・チャネルを得る段階と；
    前記第一のステレオ・エンコードから帰結する第二のオーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する第二のオーディオ・チャネルを第四のステレオ・エンコードにかけて前記第一の対の出力オーディオ・チャネルとは異なる第二の対の出力オーディオ・チャネルを得る段階と；
    前記第一および第二の対の出力オーディオ・チャネルの出力とを含み、
    前記第二のステレオ・エンコードから帰結する第一のオーディオ・チャネルに関連付けられた前記オーディオ・チャネルは、前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルである、または第五の入力オーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルの第五のステレオ・エンコードから帰結するオーディオ・チャネルであり、
    前記第一、第二、第三および第四のステレオ・エンコードのうち少なくとも二つは、少なくとも一つの周波数帯域および少なくとも一つの時間フレームについて、それぞれのステレオ・エンコードにかけられた二つのオーディオ・チャネルの重み付けされたまたは重み付けされない和と、それぞれのステレオ・エンコードにかけられた二つのオーディオ・チャネルの間の重み付けされたまたは重み付けされない差とを形成することを含む、
    エンコード方法。
19. 前記第一、第二、第三および第四のステレオ・エンコードについて、
    左右符号化、和差符号化および向上された和差符号化を含む群から符号化方式を選択し、
    選択された符号化方式に従ってステレオ・エンコードを実行することを含み、
    当該エンコード方法はさらに、
    選択された符号化方式を指示するサイド情報を出力することを含む、
    請求項１８記載のエンコード方法。
20. 前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルに関連付けられた前記オーディオ・チャネルは、前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルである、請求項１８または１９記載のエンコード方法。
21. 前記第五の入力オーディオ・チャネルを受領する段階と；
    前記第五の入力オーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルを前記第五のステレオ・エンコードにかける段階とをさらに含み、
    前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルに関連付けられた前記オーディオ・チャネルは前記第五のステレオ・エンコードから帰結する第一のオーディオ・チャネルであり、
    前記第五のステレオ・エンコードから帰結する第二のオーディオ・チャネルが第五の出力オーディオ・チャネルとして出力される、
    請求項１８または１９記載のエンコード方法。
22. 第三の対の入力オーディオ・チャネルを受領する段階と；
    前記第一の対の入力オーディオ・チャネルの第二のオーディオ・チャネルおよび前記第三の対の入力オーディオ・チャネルの第一のオーディオ・チャネルを第六のステレオ・エンコードにかける段階と；
    前記第二の対の入力オーディオ・チャネルの第二のオーディオ・チャネルおよび前記第三の対の入力オーディオ・チャネルの第二のオーディオ・チャネルを第七のステレオ・エンコードにかける段階であって、
    前記第六のステレオ・エンコードから帰結する第一のオーディオ・チャネルおよび前記第一の対の入力オーディオ・チャネルの第一のオーディオ・チャネルは前記第一のステレオ・エンコードにかけられ、
    前記第七のステレオ・エンコードから帰結する第一のオーディオ・チャネルおよび前記第二の対の入力チャネルの第一のオーディオ・チャネルは前記第二のステレオ・エンコードにかけられる、段階と；
    前記第六のステレオ・エンコードから帰結する第二のオーディオ・チャネルおよび前記第七のステレオ・エンコードから帰結する第二のオーディオ・チャネルを第八のステレオ・エンコードにかけて第三の対の出力オーディオ・チャネルを得る段階とを含む、
    請求項１８ないし２１のうちいずれか一項記載のエンコード方法。
23. 前記第一、第二、第三および第四のステレオ・エンコードならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、左右符号化、和差符号化および向上された和差符号化を含む群からの符号化方式に従ってステレオ・エンコードを実行することを含む、請求項１８ないし２２のうちいずれか一項記載のエンコード方法。
24. 異なる周波数帯域について異なる符号化方式が使用される、請求項２３記載のエンコード方法。
25. 異なる時間フレームについて異なる符号化方式が使用される、請求項２３または２４記載のエンコード方法。
26. 前記第一、第二、第三および第四ならびに該当する場合には前記第五、第六、第七および第八のステレオ・エンコードは、臨界サンプリングされた修正離散コサイン変換（MDCT）領域において実行される、請求項１８ないし２５のうちいずれか一項記載のエンコード方法。
27. すべての入力オーディオ・チャネルが、同じ窓を使ってMDCT領域に変換される、請求項２６記載のエンコード方法。
28. 請求項１８ないし２７のうちいずれか一項記載の方法を実行するための命令をもつコンピュータ可読媒体を有するコンピュータ・プログラム・プロダクト。
29. 少なくとも四つのチャネルをもつマルチチャネル・オーディオ・システムにおけるエンコード装置であって、
    第一の対の入力オーディオ・チャネルおよび前記第一の対の入力オーディオ・チャネルとは異なる第二の対の入力オーディオ・チャネルを受領するよう構成された受領コンポーネントと；
    前記第一の対の入力オーディオ・チャネルを第一のステレオ・エンコードにかけるよう構成された第一のステレオ・エンコード・コンポーネントと；
    前記第二の対の入力オーディオ・チャネルを第二のステレオ・エンコードにかけるよう構成された第二のステレオ・エンコード・コンポーネントと；
    前記第一のステレオ・エンコードから帰結する第一のオーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する第一のオーディオ・チャネルに関連付けられたオーディオ・チャネルを第三のステレオ・エンコードにかけて第一の対の出力オーディオ・チャネルを提供するよう構成された第三のステレオ・エンコード・コンポーネントと；
    前記第一のステレオ・エンコードから帰結する第二のオーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する第二のオーディオ・チャネルを第四のステレオ・エンコードにかけて前記第一の対の出力オーディオ・チャネルとは異なる第二の対の出力オーディオ・チャネルを得るよう構成された第四のステレオ・エンコード・コンポーネントと；
    前記第一および第二の対の出力オーディオ・チャネルを出力するよう構成された出力コンポーネントとを有しており、
    前記第二のステレオ・エンコードから帰結する第一のオーディオ・チャネルに関連付けられた前記オーディオ・チャネルは、前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルである、または第五の入力オーディオ・チャネルおよび前記第二のステレオ・エンコードから帰結する前記第一のオーディオ・チャネルの第五のステレオ・エンコードから帰結するオーディオ・チャネルであり、
    前記第一、第二、第三および第四のステレオ・エンコードのうち少なくとも二つは、少なくとも一つの周波数帯域および少なくとも一つの時間フレームについて、それぞれのステレオ・エンコードにかけられた二つのオーディオ・チャネルの重み付けされたまたは重み付けされない和と、それぞれのステレオ・エンコードにかけられた二つのオーディオ・チャネルの間の重み付けされたまたは重み付けされない差とを形成することを含む、
    エンコード装置。
30. 前記第一、第二、第三および第四のステレオ・エンコード・コンポーネントについて、
    左右符号化、和差符号化および向上された和差符号化を含む群から符号化方式を選択し、
    選択された符号化方式に従ってステレオ・エンコードを実行するよう構成されており、
    当該エンコード装置はさらに、
    選択された符号化方式を指示するサイド情報を出力するよう構成されている、
    請求項２９記載のエンコード装置。
31. 請求項３０記載のエンコード装置を有するオーディオ・システム。
32. 請求項２記載の方法であって、前記マルチチャネル・オーディオ・システムの前記少なくとも四つのチャネルは複数の構成に基づいて異なるグループに分割可能であり、各グループはジョイント・エンコードされるオーディオ・チャネルに対応し、前記サイド情報は、デコードするときに適用されるべき前記複数の構成の一つを指示する少なくとも二つのビットを有し、それぞれのステレオ・デコードの符号化方式は指示された構成に従って選択される、方法。
33. 請求項１９記載の方法であって、前記マルチチャネル・オーディオ・システムの前記少なくとも四つのチャネルは複数の構成に基づいて異なるグループに分割可能であり、各グループはジョイント・エンコードされるオーディオ・チャネルに対応し、当該方法は、前記複数の構成の一つを選択することを含み、それぞれのステレオ・エンコードの符号化方式は選択された構成に従って選択され、前記サイド情報は選択された構成を指示する少なくとも二つのビットを有する、方法。
34. 前記少なくとも二つのビットは、前記複数の構成の一つの構成を、前記複数の構成の前記一つの構成の識別番号を指示することによって指示する、請求項３２または３３記載の方法。
35. 前記マルチチャネル・オーディオ・システムは五つのオーディオ・チャネルを含み、前記複数の構成は、
    五つのオーディオ・チャネルのジョイント符号化；
    四つのオーディオ・チャネルのジョイント符号化および最後のオーディオ・チャネルの別個の符号化；
    三つのオーディオ・チャネルのジョイント符号化および他の二つのオーディオ・チャネルの別個のジョイント符号化；および
    二つのオーディオ・チャネルのジョイント符号化、他の二つのオーディオ・チャネルの別個のジョイント符号化および最後のオーディオ・チャネルの別個の符号化
    に対応する、請求項３２ないし３４のうちいずれか一項記載の方法。
36. 前記少なくとも二つのビットが二つのオーディオ・チャネルのジョイント符号化、他の二つのオーディオ・チャネルの別個のジョイント符号化および最後のオーディオ・チャネルの別個の符号化を指示する場合、前記少なくとも二つのビットは、どの二つのオーディオ・チャネルがジョイント符号化されるべきで、どの他の二つのオーディオ・チャネルがジョイント符号化されるべきかを指示するビットを含む、請求項３５記載の方法。
    

Images