JP5258967B2 - オーディオ信号の処理方法及び装置 - Google Patents

Description

本発明は、オーディオ信号の処理方法及び装置に係り、特に、デジタル媒体、放送信号などにより受信されたオーディオ信号を処理することができるオーディオ信号の処理方法及び装置に関するものである。

複数個のオブジェクトを含むオーディオ信号を、モノまたはステレオ信号にダウンミキシングしてダウンミックス信号を生成する過程において、オブジェクトからパラメータ（または情報）が抽出される。これらのパラメータ（または、情報）は、ダウンミキシングされた信号をデコーディングする過程で用いられ、オブジェクトの位置（ｐｏｓｉｔｉｏｎ）及びゲイン（ｇａｉｎ）はパラメータの他に、ユーザーの選択によってコントロールすることができる。

ダウンミックス信号に含まれているオブジェクトは、ユーザーの選択によって調節しなければならないが、ユーザーによってオブジェクトを制御する場合、直接全てのオブジェクト信号を制御しなければならないという面倒さがあり、専門家によって制御される場合に比べて、多数個のオブジェクトを含むオーディオ信号を最適の状態に再現し難いという問題があった。

従って、本発明は、オーディオ信号を処理するための装置とその方法に関するものであり、関連技術における制限と不利点による１つ以上の問題を実質的に取り除く。

本発明の目的は、上記問題点を解決するために創案されたもので、既に設定されたプリセットレンダリングパラメータ及びプリセットメタデータを含むプリセット情報を用いてオブジェクトのレベルと位置をコントロールできるオーディオ信号の処理方法及び装置を提供することにある。

本発明の他の目的は、ダウンミックス信号と別に入力されたビットストリームに含まれた外部プリセット情報を用いてオブジェクトのレベルと位置を調節できるオーディオ信号の処理方法及び装置を提供することにある。

本発明のさらに他の目的は、音源の特性によってダウンミックス信号と一緒に入力されたプリセット情報の属性を示すプリセット属性情報を用いて、ダウンミックス信号と別のビットストリームとして入力された外部プリセット情報をダウンミックス信号全体にまたはダウンミックス信号のデータ領域に適用することでダウンミックス信号に含まれたオブジェクトを調節できるオーディオ信号の処理方法及び装置を提供することにある。

本発明のさらに他の目的は、ユーザーの選択に基づいて画面に表示された外部プリセットメタデータのうち一つを選択し、これに対応する外部プリセットレンダリングパラメータを用いてオブジェクトのレベルと位置をコントロールできるオーディオ信号の処理方法及び装置を提供することにある。

本発明のさらに他の目的は、外部プリセットレンダリングパラメータが適用されて調節されたオブジェクト及び選択された外部プリセットメタデータを画面に表示することによってユーザーからフィードバック情報を受けることができるオーディオ信号の処理方法及び装置を提供することにある。

本発明は、下記のような効果及び利点を有する。

第一に、音源の特性によって前記プリセット情報をデータ領域（またはフレーム単位）に個別的に選択して適用したり、ダウンミックス信号全体に同一のプリセット情報を選択して適用することによって、オーディオ信号を効率的に復元することができる。

第二に、それぞれのオブジェクトに対するユーザーの設定なしに、既に設定されたプリセット情報の他に、複数個の外部プリセットレンダリングパラメータのうち一つを、複数個の外部プリセットメタデータを用いて選択することによって、容易にオブジェクトの出力チャンネルのレベルを調節することができる。

第三に、外部プリセット情報が適用されて調節されたオブジェクト及び選択されたプリセットメタデータを画面から確認することによってより適切な外部プリセット情報を選択し、オブジェクトの出力チャンネルのレベルまたは位置を調節することができる。

本発明の更なる理解を提供するために添付され、組み込まれ、及び本明細書の一部を構成する図面は、本発明の実施例を説明し、明細書と共に、本発明の原理を説明する。

本発明の一実施例によるプリセット属性情報によってプリセット情報を適用してダウンミックス信号に含まれたオブジェクトを調節する概念図である。 本発明の一実施例によるプリセット属性情報によってプリセット情報を適用してダウンミックス信号に含まれたオブジェクトを調節する概念図である。 本発明の一実施例による外部プリセット情報を用いてダウンミックス信号に含まれたオブジェクトを調節する概念図である。 ダウンミックス信号に含まれたオブジェクトに適用される外部プリセット情報の概念図である。 本発明の一実施例によるオーディオ信号の処理装置を示す図である。 本発明の一実施例による固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部の概略的な構成を示すブロック図である。 本発明の一実施例による固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部の概略的な構成を示すブロック図である。 本発明の一実施例による外部プリセット情報受信部及びレンダリング部の概略的な構成を示すブロック図である。 本発明の図５Ａ乃至図６のプリセットレンダリングパラメータ受信部の概略的な構成を示すブロック図である。 本発明の一実施例によるオーディオ信号の処理装置を示す図である。 外部プリセット情報のビットストリーム構造を示す図である。 本発明の他の実施例によるプリセット情報と関連するシンタックス（ｓｙｎｔａｘ）を様々な方法で表現したものである。 本発明の他の実施例によるプリセット情報と関連するシンタックス（ｓｙｎｔａｘ）を様々な方法で表現したものである。 本発明の他の実施例によるプリセット情報と関連するシンタックス（ｓｙｎｔａｘ）を様々な方法で表現したものである。 本発明のさらに他の実施例によるオーディオ信号の処理装置を示すブロック図である。 本発明のさらに他の実施例によるオーディオ信号の処理装置のディスプレイ部の一例を示す図である。 本発明のさらに他の実施例によって外部プリセット情報が適用されたオブジェクトを表示する一つ以上の図形的オブジェクトを示す図である。 本発明のさらに他の実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部が具現された製品の概略的な構成を示す図である。 本発明のさらに他の実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部が具現された製品の関係を示す図である。 本発明のさらに他の実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部が具現された製品の関係を示す図である。 本発明のさらに他の実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部が具現された放送信号デコーディング装置の概略的な構成を示す図である。

本発明の更なる特徴及び利点は、以下の詳細な説明で記述され、部分的には、詳細な説明から明らかになるか、発明の実行から理解されるであろう。発明の目的及びその他の利点は、添付図面の他に、明細書及び請求項に特に記載された構成によって実現または獲得されるであろう。

前記のような目的を達成するために、本発明によるオーディオ信号の処理装置は、一つ以上のオブジェクトを含むダウンミックス信号、前記ダウンミックス信号に含まれた少なくとも一つのオブジェクトをレンダリングするための複数個のプリセット情報を受信する信号受信部；外部から入力され、レンダリングデータ及び前記レンダリングデータが適用されるダウンミックス信号に含まれたオブジェクトの個数を示す適用オブジェクト個数情報を含む複数個の外部プリセット情報を受信する外部プリセット情報受信部；前記適用オブジェクト個数情報に基づいて前記複数個の外部プリセット情報が前記ダウンミックス信号に適用されるか否かを判断する外部プリセット適用判断部；前記複数個の外部プリセット情報が選択された場合、前記複数個の外部プリセット情報のうち一つの外部プリセット情報を選択する外部プリセット情報選択部；及び、前記選択された外部プリセット情報を前記ダウンミックス信号の全てのデータ領域に適用することによって前記オブジェクトを調節するレンダリング部を含み、前記外部プリセット情報は、前記ダウンミックス信号をレンダリングするための外部プリセットレンダリングパラメータ、及び前記外部プリセットレンダリングパラメータの属性を表示するための外部プリセットメタデータを含むことができる。

前記外部プリセット情報適用判断部は、前記外部プリセット情報を前記ダウンミックス信号に適用するか否かを示す外部メタデータ情報をさらに用いることができる。

前記外部プリセット情報受信部は、外部プリセットレンダリングパラメータを受信する外部プリセットレンダリングパラメータ受信部、及び前記外部プリセットメタデータを受信する外部プリセットメタデータ受信部を含むことができる。

前記一つの外部プリセット情報を選択するために、前記複数個の外部プリセット情報に含まれた複数個の外部プリセットメタデータを表示するディスプレイ部；及び、前記複数個の外部プリセットメタデータのうち一つの外部プリセットメタデータを選択する選択信号が入力されるプリセット情報入力部をさらに含み、前記プリセット情報選択部は、前記選択信号に基づいて前記一つの外部プリセット情報を選択することができる。

前記ディスプレイ部は、前記選択信号に基づいて選択された前記一つの外部プリセットメタデータをさらに表示することができる。

前記ディスプレイ部は、前記オブジェクトのレベルまたは位置を示す一つ以上の図形要素（graphical element）を含むことができる。

前記図形要素は、前記オブジェクトのレベルまたは位置及び活性化を示すために変形されることができる。

前記ディスプレイ部は、前記外部プリセット選択部と連結されて動作する場合、前記複数個の外部プリセットメタデータを一回表示することができる。

前記オーディオ信号の処理装置は、前記調節されたオブジェクトを出力する出力部；及び、前記選択された一つの外部プリセット情報を格納する格納部をさらに含むことができる。

本発明の目的を達成するために、本発明の実施例に係るオーディオ信号の処理方法は、一つ以上のオブジェクトを含むダウンミックス信号、前記ダウンミックス信号に含まれた少なくとも一つのオブジェクトをレンダリングするための複数個のプリセット情報、外部から入力される複数個の外部プリセット情報、及び前記外部プリセット情報が適用されるオブジェクトの個数を示す適用オブジェクト個数情報を受信する段階；前記適用オブジェクト個数情報に基づいて前記複数個の外部プリセット情報が前記ダウンミックス信号に適用されるか否かを判断する段階；前記複数個の外部プリセット情報が選択された場合、前記複数個の外部プリセット情報のうち一つの外部プリセット情報を選択する段階；及び、前記選択された一つの外部プリセット情報を前記ダウンミックス信号の全てのデータ領域に適用することによって前記オブジェクトを調節する段階を含み、前記外部プリセット情報は、前記ダウンミックス信号をレンダリングするための外部プリセットレンダリングパラメータ、及び前記外部プリセットレンダリングパラメータの属性を表示するための外部プリセットメタデータを含むことができる。

好適には、前記判断する段階は、外部プリセット情報がダウンミックス信号に適用されるか否かを示す外部メタデータ情報をさらに使用する。

好適には、前記方法は、レンダリング後、オブジェクトの調整されたレベル、及び選択された外部プリセットメタデータを表示する段階をさらに含む。

好適には、前記方法は、レンダリング後、選択された外部プリセット情報を格納する段階をさらに含む。

当然のことであるが、前記の一般的な記載、及び以下の詳細な記載は、典型的なもの、及び説明のためのものであり、請求項に記載される本発明の更なる説明を提供することを目的としている。

以下、添付の図面を参照しつつ、本発明の好適な実施例について詳細に説明する。これに先立ち、本明細書及び請求の範囲で使われた用語や単語は、通常的または辞書的な意味に限定して解釈してはならず、発明者は自身の発明を最善の方法で説明するために用語の概念を適宜定義することができるという原則に立って、本発明の技術的思想に符合する意味と概念として解釈しならなければならない。したがって、本明細書に記載された実施例と図面に示された構成は、本発明の好適な一実施例に過ぎないもので、本発明の技術的思想を全部示すものではないので、本出願時点においてこれらに取って代わる様々な均等物及び変形例がありうるということを理解すべきである。

特に、本明細書でいう情報（ｉｎｆｏｒｍａｔｉｏｎ）は、値（ｖａｌｕｅｓ）、パラメータ（ｐａｒａｍｅｔｅｒｓ）、係数（ｃｏｅｆｆｉｃｉｅｎｔｓ）、成分（ｅｌｅｍｅｎｔｓ）などを総称するもので、場合によってその意味は別々に解釈することができ、よって、これに本発明が限定されることはない。

図１Ａ及び図１Ｂは、本発明の一実施例によるプリセット属性情報（ｐｒｅｓｅｔ ａｔｔｒｉｂｕｔｅ ｉｎｆｏｒｍａｔｉｏｎ）によってプリセット情報（ｐｒｅｓｅｔ ｉｎｆｏｒｍａｔｉｏｎ）を適用して、ダウンミックス信号に含まれたオブジェクトを調節する概念図である。本発明のオーディオ信号は、エンコーダでダウンミックス信号（ｄｏｗｎｍｉｘ ｓｉｇｎａｌ）及びオブジェクト情報（ｏｂｊｅｃｔ ｉｎｆｏｒｍａｔｉｏｎ）にエンコーディングされ、これらは一つのビットストリームまたは別個のビットストリームの形態でデコーダに転送される。プリセット情報は、オブジェクト情報に含まれるもので、ダウンミックス信号に含まれたオブジェクトのレベルまたはパニングなどを調節するためにあらかじめ設定された情報を指す。プリセット情報は、様々なモードを含むことができ、実際にオブジェクトを調節するレンダリングパラメータと、モードの特性を示すメタデータを含むことができ、これについては図２及び図３を参照して詳細に後述する。

図１Ａ及び図１Ｂを参照すると、ビットストリームに含まれたオブジェクト情報は、具体的に、構成情報領域（ｃｏｎｆｉｇｕｒａｔｉｏｎ ｉｎｆｏｒｍａｔｉｏｎ ｒｅｇｉｏｎ）と複数個のデータ領域（データ領域１、データ領域２、…、データ領域ｎ（ｄａｔａ ｒｅｇｉｏｎ １、ｄａｔａ ｒｅｇｉｏｎ ２、…、ｄａｔａ ｒｅｇｉｏｎ ｎ））とで構成される。構成情報領域は、オブジェクト情報のビットストリームにおいて前側に位置している領域で、オブジェクト情報の全てのデータ領域に共通して適用される情報を含む。例えば、ツリー構造などを含む構成情報（データ領域長さ情報（ｄａｔａ ｒｅｇｉｏｎ ｌｅｎｇｔｈ ｉｎｆｏｒｍａｔｉｏｎ）及びオブジェクトの個数情報（ｏｂｊｅｃｔ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ））などを含むことができる。

一方、データ領域は、構成情報領域に含まれたデータ領域長さ情報に基づいて、全体オーディオ信号の時間ドメインを分割したユニットであり、フレーム（ｆｒａｍｅ）を含むことができる。オブジェクト情報のデータ領域は、ダウンミックス信号のデータ領域に対応し、対応するデータ領域のオブジェクトの属性に基づくオブジェクトレベル情報、オブジェクトゲイン情報などのオブジェクトデータ情報を含む。

まず、本発明の一実施例によるオーディオ信号の処理方法では、ビットストリームのオブジェクト情報からプリセット属性情報（ｐｒｅｓｅｔ＿ａｔｔｒｉｂｕｔｅ＿ｉｎｆｏｒｍａｔｉｏｎ）を読む。このプリセット属性情報は、プリセット情報がビットストリームにおいてどの領域に含まれているかを示すもので、詳細には、プリセット情報がオブジェクト情報の構成情報領域に含まれるか、または、データ領域に含まれるかを示す。その詳細な意味は、下記の表１の通りである。

まず、図１Ａを参照すると、プリセット属性情報が０であって、プリセット情報が構成情報領域に含まれる場合、構成情報領域から抽出されたプリセット情報は、ダウンミックス信号の全てのデータ領域に同一に適用されてレンダリングを行う。

一方、図１Ｂを参照すると、プリセット属性情報が１であって、プリセット情報がデータ領域に含まれる場合、データ領域から抽出されたプリセット情報は、対応するダウンミックス信号のデータ領域に適用されてレンダリングを行う。例えば、データ領域１から抽出されたプリセット情報は、ダウンミックス信号のデータ領域１に適用され、データ領域ｎから抽出されたプリセット情報は、ダウンミックス信号のデータ領域ｎに適用されることができる。

また、プリセット属性情報は、プリセット情報が変動であるかまたは固定であるかを示すことができる。プリセット属性情報が０であって、プリセット情報が構成情報領域に含まれる場合、プリセット情報は固定（ｓｔａｔｉｃ）であるとすることができる。このとき、プリセット情報は、全てのデータ領域に固定的に同一に適用される。

一方、プリセット属性情報が１であって、プリセット情報がデータ領域に含まれる場合、プリセット情報は変動（ｄｙｎａｍｉｃ）であるとすることができる。このとき、プリセット情報は該当のデータ領域にのみ適用されて対応するデータ領域のダウンミックス信号をレンダリングするから、データ領域別に変動的に適用される。この場合、プリセット情報は、変動（ｄｙｎａｍｉｃ）である場合は、データ領域の拡張領域（ｅｘｔｅｎｓｉｏｎ ｒｅｇｉｏｎ）に存在することが好ましく、固定（ｓｔａｔｉｃ）である場合は、構成情報領域の拡張領域に存在することが好ましい。

したがって、本発明の一実施例によるオーディオ信号の処理方法は、プリセット属性情報に基づいて、音源の特性に応じてデータ領域別に適切なプリセット情報を用いたり、同一のプリセット情報を全体データ領域に用いたりして、ダウンミックス信号をレンダリングすることができる。

図２は、本発明の一実施例による外部プリセット情報を適用してダウンミックス信号に含まれたオブジェクトを調節する概念図である。

本発明のオーディオ信号は、エンコーダでダウンミックス信号（ａ ｄｏｗｎｍｉｘ ｓｉｇｎａｌ）及びオブジェクト情報（ｏｂｊｅｃｔ ｉｎｆｏｒｍａｔｉｏｎ）にエンコーディングされ、これらは、図１Ａ及び図１Ｂを参照して説明した通り、一つのビットストリームまたは別個のビットストリームの形態でデコーダに転送される。この時、転送されたビットストリームのオブジェクト情報は、プリセット属性情報、プリセット情報に加えて、ダウンミックス信号に含まれたオブジェクトの個数を示すオブジェクト個数情報（ｏｂｊｅｃｔ ｎｕｍｎｅｒ ｉｎｆｏｒｍａｔｉｏｎ）を含むことができる。

一方、ダウンミックス信号をレンダリングするためにエンコーダから転送されるオブジェクト情報に含まれたプリセット情報の他に、外部プリセット情報（ｅｘｔｅｒｎａｌ ｐｒｅｓｅｔ ｉｎｆｏｒｍａｔｉｏｎ）が外部から外部ビットストリームの形態でデコーダに入力される（エンコーダから入力されるものではない。）。オブジェクトを調節するためにあらかじめ設定された情報の集合であって、エンコーダではなく外部から入力されたプリセット情報を、本明細書では外部プリセット情報（ｅｘｔｅｒｎａｌ ｐｒｅｓｅｔ ｉｎｆｏｒｍａｔｉｏｎ）と称する。外部ビットストリームに含まれた外部プリセット情報は、オブジェクトのゲイン及び／またはパニングを調節する外部プリセットレンダリングパラメータ及び外部プリセットレンダリングパラメータの属性を示す外部プリセットメタデータを含むことができる。また、外部ビットストリームは、この外部プリセット情報の他に、外部プリセット情報が適用されるダウンミックス信号に含まれるオブジェクトの個数を示す適用オブジェクト個数情報（ａｐｐｌｉｅｄ ｏｂｊｅｃｔ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ）及び外部プリセット情報が用いられるか否かを示す外部メタデータ情報をさらに含むことができる。

オブジェクト個数情報及び適用オブジェクト個数情報を用いて、外部プリセット情報またはプリセット情報を用いるか否かを決定することができ、これについては図４を参照して詳細に後述する。外部プリセット情報を用いると決定される場合、外部プリセット情報はダウンミックス信号の全てのデータ領域に固定的に同一に適用されてオブジェクトを調節することができる。

図３は、本発明の実施例によるダウンミックス信号に含まれたオブジェクトに適用される外部プリセット情報の概念図である。

外部プリセット情報は、オーディオ信号の特性または聴取環境に応じてユーザーが選択できる様々なモードを示すことができ、一つ以上を含むことができる。また、外部プリセット情報は、オブジェクトを調節するために適用される外部プリセットレンダリングパラメータ及びこの外部プリセットレンダリングパラメータの属性などを表現するためのメタデータである外部プリセットメタデータを含む。外部プリセットメタデータは、テキストの形態で表示することができ、外部プリセットレンダリングパラメータの属性（例えば、コンサートホールモード、カラオケモード、ニュースモード等）を示す他、外部プリセット情報の属性を示すこともできる。

また、外部プリセットメタデータは、外部プリセットレンダリングパラメータの作成者、作成日、外部プリセットレンダリングパラメータが適用されるオブジェクトの名称などを含む外部プリセットレンダリングパラメータを表現するための関連情報とプリセット情報のファイル形態を示すファイル拡張子情報などを含むことができる。一方、外部プリセットレンダリングパラメータは実質的にオブジェクトに適用されるデータで、外部プリセットメタデータと相互対応し、様々な形態、例えばマトリクス形態で表現されることができる。

図３を参照すると、外部プリセット情報１は、音楽信号をコンサートホールで聞くような音場感を提供するコンサートホールモード（ｃｏｎｃｅｒｔ ｈａｌｌ ｍｏｄｅ）とすることができ、外部プリセット情報２は、オーディオ信号においてボーカル（ｖｏｃａｌ）オブジェクトのレベルを減少させたカラオケモード（ｋａｒａｏｋｅ ｍｏｄｅ）とすることができ、外部プリセット情報ｎは、音声オブジェクトのレベルを増加させたニュースモード（ｎｅｗｓ ｍｏｄｅ）とすることができる。また、外部プリセット情報は、外部プリセットメタデータ及び外部プリセットレンダリングパラメータを含む。万一、ユーザーから外部プリセット情報２が選択された場合、外部プリセットメタデータ２であるカラオケモードがディスプレイ部に表示され、該外部プリセットメタデータ２に関連する外部プリセットレンダリングパラメータ２がオブジェクトに適用されてレベルを調節することができる。

この場合、外部プリセットレンダリングパラメータは、外部モノプリセットレンダリングパラメータ（ｅｘｔｅｒｎａｌ ｍｏｎｏ ｐｒｅｓｅｔ ｒｅｎｄｅｒｉｎｇ ｐａｒａｍｅｔｅｒ）、外部ステレオプリセットレンダリングパラメータ（ｅｘｔｅｒｎａｌ ｓｔｅｒｅｏ ｐｒｅｓｅｔ ｒｅｎｄｅｒｉｎｇ ｐａｒａｍｅｔｅｒ）及び外部マルチチャンネルプリセットレンダリングパラメータ（ｅｘｔｅｒｎａｌ ｍｕｌｔｉ−ｃｈａｎｎｅｌ ｐｒｅｓｅｔ ｒｅｎｄｅｒｉｎｇ ｐａｒａｍｅｔｅｒ）を含むことができる。この外部プリセットレンダリングパラメータは、オブジェクトの最終出力チャンネル（または、オブジェクトを含むダウンミックス信号の最終出力チャンネル）によって決定される。外部モノプリセットレンダリングパラメータは、オブジェクトの出力チャンネルがモノである場合に適用される外部プリセットレンダリングパラメータであり、外部ステレオプリセットレンダリングパラメータは、オブジェクトの出力チャンネルがステレオである場合に、外部マルチチャンネルプリセットレンダリングパラメータは、オブジェクトの出力チャンネルがマルチチャンネルである場合に適用される外部プリセットレンダリングパラメータである。オブジェクトの出力チャンネルが構成情報によって決定されると、これに基づいて外部プリセットレンダリングパラメータのタイプが決定され、該外部プリセットレンダリングパラメータを全てのデータ領域に適用して、ダウンミックス信号に含まれたオブジェクトを調節するようになる。

図４は、本発明の実施例によるオーディオ信号の処理装置４００を示す図である。

図４を参照すると、オーディオ信号の処理装置４００は、ダウンミキシング部４１０、プリセット情報生成部４２０、外部プリセット情報受信部４３０、外部プリセット情報適用判断部４４０、固定プリセット情報受信部４５０、変動プリセット情報受信部４６０及びレンダリング部４７０を含むことができる。

ダウンミキシング部４１０は、入力される少なくとも一つのオブジェクト（ｏｂｊｅｃｔ １，２，３，…，ｎ）をダウンミキシングすることによってダウンミックス信号（ａ ｄｏｗｎｍｉｘ ｓｉｇｎａｌ）を生成する。ここで、オブジェクトは、音源（ｓｏｕｒｃｅ）を指すもので、例えば、ボーカル（ｖｏｃａｌ）、ギター（ｇｕｉｔａｒ）、ピアノ（ｐｉａｎｏ）などを含むことができる。ダウンミックス信号は、入力される信号に比べて少ない数のチャンネルを有し、当該オブジェクトを全て含むことができる。

プリセット情報生成部４２０は、オーディオ信号に含まれたオブジェクトをレンダリング時に調節するためのプリセット情報を生成し、プリセットレンダリングパラメータ、プリセット情報及び該プリセット情報の属性を示すプリセット属性情報を生成することができる。プリセット情報生成部４２０は、プリセット属性決定部、プリセットレンダリングパラメータ生成部及びプリセットメタデータ生成部を含むことができ、これは、図１３を参照して後述する。

外部プリセット情報受信部４３０は、本発明の一実施例によるオーディオ信号の処理装置４００の外部から入力された外部プリセット情報を受信する。外部プリセット情報は、複数個の外部プリセットレンダリングパラメータ及びこれに対応する複数個の外部プリセットメタデータを含み、外部プリセットレンダリングパラメータが適用されるオブジェクトの個数を示す適用オブジェクト個数情報を含むことができる。本発明の一実施例による外部プリセット情報のビットストリーム構造は、図９を参照して後述する。

外部プリセット情報適用判断部４４０は、プリセット情報生成部４２０から入力されたプリセット情報及び外部プリセット情報受信部４３０から入力された外部プリセット情報を受信してそれを適用するか否かを判断する。まず、外部プリセット情報受信部４３０に含まれた適用オブジェクト個数情報受信部４３１から、外部プリセット情報が適用されるオブジェクトの個数を示す適用オブジェクト個数情報（ａｐｐｌｉｅｄ ｏｂｊｅｃｔ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ）を受信する。この適用オブジェクト個数情報をプリセット情報に含まれたオブジェクト個数情報と比較し、両者が同一であると、外部プリセット情報を優先的に用いるものと判断することができる。

万一、適用オブジェクト個数情報がオブジェクト個数情報と異なると、プリセット情報生成部４２０から入力されたプリセット情報の属性を示すプリセット属性情報を抽出して、該プリセット情報がビットストリームの構成情報領域に含まれるかまたはデータ領域に含まれるか判断する。好ましくは、プリセット属性情報は、プリセット情報がビットストリームの構成情報領域の拡張領域またはデータ領域の拡張領域に含まれたか判断する（図示せず）。この場合、プリセット情報がビットストリームの構成情報領域に含まれていると判断すると、固定プリセット情報受信部４５０が活性化され、プリセット情報がビットストリームのデータ領域に含まれていると判断すると、変動プリセット情報受信部４６０が活性化される。

プリセット属性情報によって、固定プリセット情報受信部４５０が活性化される場合（表１のｐｒｅｓｅｔ＿ａｔｔｒｉｂｕｔｅ＿ｉｎｆｏｒｍａｔｉｏｎ＝０の場合）、活性化された固定プリセット情報受信部４５０にプリセット情報が入力されて動作する。固定プリセット情報受信部４５０は、全てのデータ領域に対応するプリセットメタデータを受信する固定プリセットメタデータ受信部、及びプリセット情報を受信する固定プリセット情報受信部を含むことができ、これについての詳細は、図１３を参照して後述する。

変動プリセット情報受信部４６０は、プリセット属性情報が、プリセット情報がデータ領域に含まれている旨を示す場合（表１のｐｒｅｓｅｔ＿ａｔｔｒｉｂｕｔｅ＿ｆｌａｇ＝１の場合）に動作する。変動プリセット情報受信部４６０は、該当のデータ領域に対応するプリセットメタデータを受信する変動プリセットメタデータ受信部、及びデータ領域別プリセット情報を受信する変動プリセット情報受信部を含むことができる。変動プリセットメタデータ受信部は、選択されたプリセットメタデータを受信して出力し、変動プリセット情報受信部はプリセット情報を受信する。これについての詳細は、図１１を参照して後述する。

レンダリング部４７０は、複数個のオブジェクトを含むオーディオ信号をダウンミキシングして生成されたダウンミックス信号と、固定プリセット情報受信部４５０または変動プリセット情報受信部４６０から出力されたプリセットレンダリングパラメータとを受信する。一方、外部プリセット情報適用判断部４４０で外部プリセット情報が適用されると決定された場合、レンダリング部４７０は、外部プリセットレンダリングパラメータ受信部４３２から外部プリセットレンダリングパラメータを受信する。プリセット情報または外部プリセットレンダリングパラメータは、ダウンミックス信号に含まれたオブジェクトに適用されて、該オブジェクトのレベルを調節したりオブジェクトの位置を調節したりできる。

また、オーディオ信号の処理装置４００がディスプレイ部（図示せず）を含む場合、変動プリセットメタデータ受信部から出力される選択されたプリセットメタデータ、固定プリセットメタデータ受信部で出力される選択されたプリセットメタデータ、または外部プリセットメタデータ受信部４３３から出力される選択された外部プリセットメタデータを、画面に表示することができる。

図５Ａ及び図５Ｂは、本発明の実施例によるプリセット情報がレンダリング部に適用される方法を示すブロック図である。まず、図５Ａは、固定プリセット情報受信部４５０から出力されたプリセット情報がレンダリング部５７０で適用される方法を示す図である。固定プリセット情報受信部４５０は、図４の固定プリセット情報受信部４５０と同一のもので、固定プリセットメタデータ受信部４５１及び固定プリセットレンダリングパラメータ受信部４５２を含む。

固定プリセットレンダリングパラメータ受信部４５２は、ダウンミックス信号の全てのデータ領域に適用されてオブジェクトを調節するためのプリセットレンダリングパラメータを受信する。プリセットレンダリングパラメータは、複数個のプリセット情報から選択された一つのプリセット情報に含まれたレンダリングパラメータとすることができる。一方、固定プリセットメタデータ受信部４５１は、一つのプリセットレンダリングパラメータに対応し、プリセットレンダリングパラメータの属性を示すプリセットメタデータを受信する。

固定プリセット情報受信部４５０は、全てのデータ領域に対応するプリセットメタデータ及びプリセットレンダリングパラメータを受信して出力し、レンダリング部５７０は、プリセットレンダリングパラメータを受信する。

レンダリング部５７０は、プリセットレンダリングパラメータの他に、ダウンミックス信号も受信し、データ領域別にレンダリングを行い、データ領域１のレンダリング部５７１、データ領域２のレンダリング部５７２、…、データ領域ｎのレンダリング部５７ｎを含む。この場合、レンダリング部５７０の全てのデータ領域のレンダリング部５７Ｘで受信したプリセットレンダリングパラメータをダウンミックス信号に同一に適用することによってレンダリングする。例えば、固定プリセットレンダリングパラメータ受信部４５２から出力されたプリセットレンダリングパラメータが、カラオケモードを示す外部リセットレンダリングパラメータ２の場合、１番目のデータ領域からｎ番目のデータ領域までの全データ領域にカラオケモードを適用することができる。

図５Ｂは、変動プリセット情報受信部４６０から出力されたプリセット情報がレンダリング部５７０で適用される方法を示す図である。変動プリセット情報受信部４６０は、図４の変動プリセット情報受信部４６０と同一のもので、変動プリセットメタデータ受信部４６１及び変動プリセットレンダリングパラメータ受信部４６２を含む。

変動プリセット情報受信部４６０は、データ領域ごとに変動プリセットレンダリングパラメータ受信部４６２でプリセットレンダリングパラメータを受信し、変動プリセットメタデータ受信部４６１でプリセットメタデータを受信して出力し、プリセットレンダリングパラメータはレンダリング部５７０に入力される。

レンダリング部５７０は、プリセットレンダリングパラメータの他に、ダウンミックス信号も受信して、データ領域別にレンダリングを行い、データ領域１のレンダリング部５７１、データ領域２のレンダリング部５７２、…、データ領域ｎのレンダリング部５７ｎを含む。この場合、レンダリング部５７０のそれぞれのデータ領域のレンダリング部５７Ｘはそれぞれデータ領域に対応するプリセットレンダリングパラメータを受信してダウンミックス信号に適用することによってレンダリングを行う。

例えば、１番目のデータ領域は、コンサートホールモードであるプリセット情報＿１が適用され、２番目のデータ領域は、クラシックモードであるプリセット情報＿３が適用され、６番目のデータ領域は、カラオケモードであるプリセット情報＿２（ここで、プリセット情報＿ｎのｎは、外部プリセットモードのインデックスを表す。）が適用されることができる。この時、それぞれのプリセットレンダリングパラメータに対応するプリセットメタデータもデータ領域ごとに出力されることは勿論である。

図６は、本発明の実施例による外部プリセット情報がレンダリング部で適用される方法を示すブロック図である。外部プリセット情報受信部４３０は、図４の外部プリセット情報受信部４３０と同一のもので、外部プリセットメタデータ受信部４３３及び外部プリセットレンダリングパラメータ受信部４３２を含む。

外部プリセットレンダリングパラメータ受信部４３２は、ダウンミックス信号の全てのデータ領域に適用されてオブジェクトを調節するための外部プリセットレンダリングパラメータを受信する。この外部プリセットレンダリングパラメータは、複数個のプリセット情報から選択された一つの外部プリセット情報に含まれたレンダリングパラメータとすることができる。一方、外部プリセットメタデータ受信部４３３は、一つの外部プリセットレンダリングパラメータに対応し、該外部プリセットレンダリングパラメータの属性を示す外部プリセットメタデータを受信する。

外部プリセット情報受信部４３０は、全てのデータ領域に対応する外部プリセットメタデータ及び外部プリセットレンダリングパラメータを受信して出力し、該外部プリセットレンダリングパラメータはレンダリング部６７０に入力される。

レンダリング部６７０は、外部プリセットレンダリングパラメータの他に、ダウンミックス信号も受信し、データ領域別にレンダリングを行い、データ領域１のレンダリング部６７１、データ領域２のレンダリング部６７２、…、データ領域ｎのレンダリング部６７ｎを含む。この場合、レンダリング部６７０の全てのデータ領域のレンダリング部６７Ｘで受信した外部プリセットレンダリングパラメータをダウンミックス信号に同一に適用することによってレンダリングを行う。例えば、外部プリセットレンダリングパラメータ受信部４３２から出力された外部プリセットレンダリングパラメータが、クラシックモードを示す外部プリセットレンダリングパラメータ３の場合、１番目のデータ領域からｎ番目のデータ領域までの全データ領域にクラシックモードを適用することができる。

図７は、本発明のオーディオ信号の処理装置４００の固定プリセット情報受信部４５０に含まれる固定プリセットレンダリングパラメータ受信部４５２、変動プリセット情報受信部４６０に含まれる変動プリセット情報受信部４６２、及び外部プリセット情報受信部４３０に含まれる外部プリセットレンダリングパラメータ受信部４３２の概略的な構成を示す図である。

変動、固定または外部プリセットレンダリングパラメータ受信部４５２，４６２，４３２は、出力チャンネル情報受信部４５２ａ，４６２ａ，４３２ａ及びプリセットレンダリングパラメータ決定部４５２ｂ，４６２ｂ，４３２ｂを含む。出力チャンネル情報受信部４５２ａ，４６２ａ，４３２ａは、ダウンミックス信号に含まれたオブジェクトが再生される出力チャンネルの個数を示す出力チャンネル情報（ｏｕｔｐｕｔ ｃｈａｎｎｅｌ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ）を受信して出力する。出力チャンネル情報は、モノチャンネル、ステレオチャンネルまたはマルチチャンネル（５．１チャンネル）とすることができるが、これに限定されることはない。

プリセットレンダリングパラメータ決定部４５２ｂ，４６２ｂ，４３２ｂは、出力チャンネル情報受信部４５２ａ，４６２ｂ，４３２ｂから入力された出力チャンネル情報に基づいて該当するプリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを受信して出力する。外部プリセットレンダリングパラメータは、外部モノプリセットレンダリングパラメータ、外部ステレオプリセットレンダリングパラメータまたは外部マルチチャンネルプリセットレンダリングパラメータのいずれかであり、プリセットレンダリングパラメータは、モノプリセットレンダリングパラメータ、ステレオプリセットレンダリングパラメータまたはマルチチャンネルプリセットレンダリングパラメータでありうる。プリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータがマトリクスタイプの場合、それらの次元はオブジェクトの数及び出力チャンネルの数に基づいて決定することができ、プリセットマトリクスまたは外部プリセットマトリクスは、（オブジェクトの数）＊（出力チャンネルの数）の形態を有することができる。例えば、ダウンミックス信号に含まれたオブジェクトがｎ個であり、出力チャンネル情報受信部４５２ａ，４６２ａ，４３２ａから５．１チャンネル、すなわち、６個のチャンネルを示す出力チャンネル情報が出力される場合、プリセットレンダリングパラメータ決定部４５２ｂ，４６２ｂ，４３２ｂは、ｎ＊６の形態に具現されたマルチチャンネルプリセットレンダリングパラメータまたは外部マルチチャンネルプリセットレンダリングパラメータを出力することができる。ここで、マトリクスの成分（ｅｌｅｍｅｎｔ）は、ａ番目のオブジェクトがｉ番目のチャンネルに含まれる度合を示すゲイン値である。

図８は、本発明の他の実施例によるオーディオ信号の処理装置８００を示す図である。オーディオ信号の処理装置８００は、主として、ダウンミキシング部８１０、オブジェクト情報生成部８２０、プリセット情報生成部８３０、ダウンミックス信号処理部８４０、情報処理部８５０及びマルチチャンネルデコーディング部８６０を含む。

複数個のオブジェクト（オブジェクト１、オブジェクト２、…オブジェクトｎ）は、ダウンミキシング部８１０に入力されてモノまたはステレオダウンミックス信号を生成する。また、これらのオブジェクトはオブジェクト情報生成部８２０に入力されて、オブジェクトのレベルを示すオブジェクトレベル情報（ｏｂｊｅｃｔ ｌｅｖｅｌ ｉｎｆｏｒｍａｔｉｏｎ）、ダウンミックス信号に含まれるオブジェクトのゲイン値及び／またはステレオダウンミックス信号の場合、ダウンミックスチャンネルに含まれるオブジェクトの度合を示すオブジェクトゲイン情報（ｏｂｊｅｃｔ ｇａｉｎ ｉｎｆｏｒｍａｔｉｏｎ）、オブジェクト間の相関有無を示すオブジェクト相関情報（ｏｂｊｅｃｔ ｃｏｒｒｅｌａｔｉｏｎ ｉｎｆｏｒｍａｔｉｏｎ）を含むオブジェクト情報（ｏｂｊｅｃｔ ｉｎｆｏｒｍａｔｉｏｎ）などを生成する。次に、ダウンミックス信号及びオブジェクト情報は、プリセット情報生成部８３０に入力されて、プリセット情報がビットストリームにおいてデータ領域に含まれるか、または、ビットストリームにおいて構成情報領域に含まれるかを示すプリセット属性情報、オブジェクトのレベルまたは位置を調節してレンダリングするためにあらかじめ設定されたプリセットレンダリングパラメータ、及びプリセットレンダリングパラメータを表現するためのプリセットメタデータを含むプリセット情報を生成する。このプリセット属性情報、プリセットレンダリングパラメータ及びプリセットメタデータが生成される過程は、図１乃至図４のオーディオ信号の処理装置及び方法において説明した通りであり、その詳細な説明は省略する。

また、プリセット情報生成部８３０は、プリセット情報がビットストリームに存在するか否かを示すプリセット存在情報（ｐｒｅｓｅｔ ｐｒｅｓｅｎｃｅ ｉｎｆｏｒｍａｔｉｏｎ）、プリセット情報の個数を示すプリセット個数情報（ｐｒｅｓｅｔ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ）及びプリセットメタデータの長さを示すプリセットメタデータ長さ情報（ｐｒｅｓｅｔ ｍｅｔａｄａｔａ ｌｅｎｇｔｈ ｉｎｆｏｒｍａｔｉｏｎ）をさらに生成することができる。オブジェクト情報生成部８２０で生成されたオブジェクト情報とプリセット情報生成部８３０で生成されたプリセット属性情報、プリセット情報、プリセットメタデータ、プリセット存在情報、プリセット個数情報及びプリセットメタデータ長さ情報は、ＳＡＯＣビットストリームに含まれて転送されることもでき、ダウンミックス信号も含まれた一つのビットストリームの形態として転送されることもできる。この場合、ダウンミックス信号及びプリセット関連情報を含むビットストリームは、デコーディング装置の信号受信部（図示せず）に入力されることができる。

情報処理部８５０は、オブジェクト情報処理部８５１、外部プリセット情報受信部８５２、外部プリセット情報適用判断部８５３、固定プリセット情報受信部８５４及び変動プリセット情報受信部８５５を含み、ＳＡＯＣビットストリームを受信する。固定プリセット情報受信部８５４が活性化されるか、または、変動プリセット情報受信部８５５が活性化されるかは、図１乃至図７を参照して上述した通り、ＳＡＯＣビットストリームに含まれたプリセット属性情報に基づいて決定される。

外部プリセット情報受信部８５２は、本発明の一実施例によるオーディオ信号の処理装置８００の外部から入力される外部プリセット情報を受信し、外部プリセット情報適用判断部８５３でオブジェクトを調節するために外部プリセット情報を用いるか否かを決定する。

外部プリセット情報を用いる場合、外部プリセット情報受信部８５２から受信した外部プリセット情報がオブジェクト情報処理部８５１に直接入力される。一方、ＳＡＯＣビットストリームに含まれたプリセット情報を用いる場合には、ＳＡＯＣビットストリームに含まれたプリセット属性情報に基づいてプリセット情報が固定プリセット情報受信部８５４または変動プリセット情報受信部８５５に入力される。

固定プリセット情報受信部８５４及び変動プリセット情報受信部８５５は、ＳＡＯＣビットストリームから上述のプリセット属性情報を受信し、外部プリセット情報受信部８５２は外部プリセット存在情報、外部プリセット個数情報、外部プリセットメタデータ、出力チャンネル情報及び外部プリセットレンダリングパラメータ（例えば、外部プリセットマトリクス）を受信し、その他図１乃至図７のオーディオ信号の処理方法及び装置で説明された様々な実施例による方法を用いる。

固定プリセット情報受信部８５４、変動プリセット情報受信部８５５または外部プリセット情報受信部８５２は、ＳＡＯＣビットストリームから受信したプリセットメタデータとプリセットレンダリングデータまたは外部ビットストリームから受信した外部プリセットメタデータと外部プリセット情報を出力し、オブジェクト情報処理部８５１は、これらを受信して、ＳＡＯＣビットストリームに含まれたオブジェクト情報と共に用いてダウンミックス信号を前処理（ｐｒｅ−ｐｒｏｃｅｓｓｉｎｇ）するためのダウンミックス処理情報（ｄｏｗｎｍｉｘ ｐｒｏｃｅｓｓｉｎｇ ｉｎｆｏｒｍａｔｉｏｎ）とダウンミックス処理情報を用いて前処理されたダウンミックス信号をアップミキシングするためのマルチチャンネル情報（ｍｕｌｔｉ−ｃｈａｎｎｅｌ ｉｎｆｏｒｍａｔｉｏｎ）を生成する。

この時、固定プリセット情報受信部８５４から出力されるプリセットレンダリングパラメータ及びプリセットメタデータと外部プリセット情報受信部８５２から出力される外部プリセットレンダリングパラメータ及び外部プリセットメタデータは、全体データ領域に対応するものであり、変動プリセット情報受信部８５５から出力されるプリセット情報及びプリセットメタデータは一つのデータ領域に対応するものである。

以降、ダウンミックス処理情報はダウンミックス信号処理部８４０に入力されて、ダウンミックス信号に含まれたオブジェクトが含まれるチャンネルを変動させることによってパニングを行うことができる。このように前処理されたダウンミックス信号は、情報処理部８５０から出力されたマルチチャンネル情報と共にマルチチャンネルデコーディング部８６０に入力されてアップミキシングされることで、マルチチャンネルオーディオ信号を生成することができる。

このように、本発明の他の実施例によるオーディオ信号の処理装置は、複数個のオブジェクトを含むダウンミックス信号を、マルチチャンネル情報を用いてマルチチャンネル信号にデコーディングする際に、外部から別のビットストリームとして入力された外部プリセットレンダリングパラメータ及び外部プリセットメタデータをさらに用いることによって容易にオブジェクトのレベルを調節することができる。

図９は、本発明の一実施例による外部プリセット情報のビットストリーム構造を示す図である。

図９を参照すると、ＳＡＯＣビットストリームとの互換性のために、外部プリセット情報は、ファイルＩＤ ９１０、外部プリセットレンダリングパラメータ９２０及び外部プリセットメタデータ９３０を含む領域で構成される。

ファイルＩＤ ９１０は、外部プリセット情報がダウンミックス信号へと適用可能か否かを判断するための、すなわち、ＳＡＯＣビットストリームとの同期化が可能か否かを判断するための外部プリセット情報が適用されるオブジェクトの個数を示すオブジェクト個数情報を含むことができる。また、別に定義された同期化のためのシンクワード（ｓｙｎｃ ｗｏｒｄ）を含むことができ、外部プリセット情報の個数を示す外部プリセット個数情報をさらに含むことができ、適用オブジェクト個数にかかわらずに優先して外部プリセット情報を用いるように設定された識別子（ｉｄｅｎｔｉｆｉｅｒ）を含むこともできる。

外部プリセットレンダリングパラメータ９２０は、ＳＡＯＣビットストリームに含まれたプリセットレンダリングパラメータのような内容を含めることもでき、図３を参照して上述した様々な外部プリセットレンダリングパラメータを含むこともできる。また、マトリクス形態のレンダリングパラメータの他にも、ユーザー設定形態のレンダリングデータを含むこともでき、外部プリセット情報の個数及び出力チャンネルの個数を示す出力チャンネル情報をさらに含むことができる。

一方、外部プリセットメタデータ９３０は、外部プリセットレンダリングパラメータ９２０に対応するメタデータを含む。

図１０乃至図１２は、本発明の他の実施例によるプリセット情報と関連したシンタックス（ｓｙｎｔａｘ）を様々な方法で表現したものである。

図１０を参照すると、プリセット情報は、構成情報の拡張領域に含まれるように構成されることができる。

ビットストリームの構成情報領域（ＳＡＯＣＳｐｅｃｉｆｉｃＣｏｎｆｉｇ()）は、拡張領域（ＳＡＯＣＥｘｔｅｎｓｉｏｎＣｏｎｆｉｇ()）を有し、プリセット情報が受信される場合は、ＳＡＯＣＥｘｔｅｎｓｉｏｎＣｏｎｆｉｇ(９)形態のコンテナタイプで示すことができ、その意味は、下記の表２の通りである。図１０を参照すると、ＳＡＯＣＥｘｔｅｎｓｉｏｎＣｏｎｆｉｇ(９)の拡張領域は、プリセット情報（ＰｒｅｓｅｔＣｏｎｆｉｇ()）を含む。

このプリセット情報（ＰｒｅｓｅｔＣｏｎｆｉｇ()）は、図１０に示すように、プリセット情報の個数を示すプリセット個数情報（ｂｓＮｕｍＰｒｅｓｅｔｓ）、プリセット情報の属性を示すメタデータであるプリセットメタデータを表現するバイトの個数を示すプリセットメタデータ長さ情報（ｂｓＮｕｍＣｈａｒＰｒｅｓｅｔＬａｂｅｌ[ｉ]）、プリセットメタデータ（ｂｓＰｒｅｓｅｔＬａｂｅｌ[ｉ][ｊ]）及びレンダリングデータを示すマトリクスタイプのプリセットレンダリングパラメータ（ｂｓＰｒｅｓｅｔＭａｔｒｉｘ）を含むことができる。

このようにビットストリームの構成情報領域に含まれたプリセット情報を用いてより便利にオーディオ信号をレンダリングして再生することができる。

一方、図１１を参照すると、プリセット情報は、構成情報領域ではなくデータ領域の拡張領域に含まれることができる。データ領域（ＳＡＯＣＦｒａｍｅ()）は拡張領域（ＳＡＯＣＥｘｔｅｎｓｉｏｎＦｒａｍｅ()）を有し、このうち、プリセット情報のための拡張領域（ＳＡＯＣＥｘｔｅｎｓｉｏｎＦｒａｍｅ(９)）は、図８のプリセット情報（ＰｒｅｓｅｔＣｏｎｆｉｇ()）のようなプリセット情報を含むことができ、データ領域の拡張領域の意味は、下記表３の通りである。

万一、図１乃至図９を参照して上述した外部プリセット情報が用いられる場合、図１０及び図１１のプリセット情報（ＰｒｅｓｅｔＣｏｎｆｉｇ()）の代わりに、外部プリセット情報に含まれた対応する情報を抽出して、ダウンミックス信号に含まれたオブジェクトを調節するために用いることができる。

一方、図１１のデータ領域の拡張領域は、ＳＡＯＣＥｘｔｅｎｓｉｏｎＦｒａｍｅ()シンタックスに表すようなプリセットレンダリングパラメータなど、データ領域ごとに更新（ｕｐｄａｔｅ）が必要な情報のみを含むことができる。この場合、実質的なレンダリングデータであるプリセットレンダリングパラメータ（ＰｒｅｓｅｔＭａｔｒｉｘＤａｔｅ()）は、プリセットレンダリングパラメータのタイプを示すレンダリングパラメータタイプ（ｂｓＰｒｅｓｅｔＭａｔｒｉｘＴｙｐｅ）のような更新されない値を含む。

なお、図１２では本発明のさらに他の実施例によるシンタックスを提案する。図１２を参照すると、データ領域の拡張領域（ＳＡＯＣＥｘｔｅｎｓｉｏｎＦｒａｍｅ(９)）は、プリセットレンダリングパラメータ（ｂｓＰｒｅｓｅｔＭａｔｒｉｘＥｌｅｍｅｎｔｓ[ｉ][ｊ]）のみを含む。

このように、本発明の一実施例によるオーディオ信号の処理方法は、更新されない情報を構成情報領域に含めることによって、プリセット情報のために転送されるビットの数を減少させることができる。

図１３は、本発明のさらに他の実施例によるオーディオ信号の処理装置を示すブロック図である。オーディオ信号の処理装置１３００は、主に、プリセット情報生成部１３１０、プリセット属性受信部１３１５、外部プリセット情報受信部１３２０、外部プリセット適用判断部１３２５、適用プリセット入力部１３３０、適用プリセット判断部１３３５、プリセット情報入力部１３４０、プリセット情報選択部１３４５、固定プリセット情報受信部１３５０、変動プリセット情報受信部１３５５、レンダリング部１３６０及びディスプレイ部１３６５を含むことができる。

図１３のプリセット属性受信部１３１５、外部プリセット情報受信部１３２０、固定プリセット情報受信部１３５０、変動プリセット情報受信部１３５５及びレンダリング部１３６０は、図４の外部プリセット情報受信部４３０、外部プリセット情報適用判断部４４０、固定プリセット情報受信部４５０、変動プリセット情報受信部４６０及びレンダリング部４７０と構成及び機能が同一なので、その詳細な説明は省略する。

図１３を参照すると、プリセット情報生成部１３１０は、プリセット属性決定部１３１１、プリセットメタデータ生成部１３１２及びプリセットレンダリングパラメータ生成部１３１３を含む。

プリセット属性決定部１３１１は、上述した通り、プリセット情報を構成情報領域に含めて全てのデータ領域に適用するか、または、データ領域に含めてデータ領域別に適用するかを示すプリセット属性情報を決定する。以降、プリセット属性情報に基づいて、プリセットメタデータ生成部１３１２及びプリセットレンダリングパラメータ生成部１３１３は、一つのプリセットメタデータ及びプリセットレンダリングパラメータまたはデータ領域数だけのプリセットメタデータ及びプリセットレンダリングパラメータを生成することができる。

プリセットメタデータ生成部１３１２は、プリセットレンダリングパラメータを表現するテキスト情報を受信してプリセットメタデータを生成できる。一方、オブジェクトのレベルを調節するためのゲイン及び／またはオブジェクトの位置がプリセットレンダリングパラメータ生成部１３１３に入力される場合、該オブジェクトに適用されるプリセットレンダリングパラメータを生成することができる。このプリセットレンダリングパラメータは、オブジェクトごとに適用されるように生成されることができ、様々なタイプ、例えば、チャンネルレベル差（ＣＬＤ：Ｃｈａｎｎｅｌ Ｌｅｖｅｌ Ｄｉｆｆｅｒｅｎｃｅ）パラメータ、マトリクス（ｍａｔｒｉｘ）などの形態に具現することができる。

また、プリセットレンダリングパラメータ生成部１３１３は、オブジェクトの出力チャンネルの個数を示す出力チャンネル情報をさらに生成することができる。プリセットメタデータ生成部１３１２で生成されたプリセットメタデータ及びプリセットレンダリングパラメータ生成部１３１３で生成されたプリセットレンダリングパラメータ、出力チャンネル情報などは、一つのビットストリームに含まれて転送されることができ、特に、ダウンミックス信号を含むビットストリームの補助領域（ａｎｃｉｌｌａｒｙ ｒｅｇｉｏｎ）に含まれて転送されることもでき、ダウンミックス信号と別のビットストリームとして転送することもできる。

一方、プリセット情報生成部１３１０は、プリセットメタデータ、プリセットレンダリングパラメータ及び出力チャンネル情報がビットストリームに含まれたことを示すプリセット存在情報（ｐｒｅｓｅｔ ｐｒｅｓｅｎｃｅ ｉｎｆｏｒｍａｔｉｏｎ）をさらに生成することができる。このプリセット存在情報は、プリセット情報などがビットストリームのどの領域に含まれているかを示すコンテナタイプ（ｃｏｎｔａｉｎｅｒ ｔｙｐｅ）にすることもでき、どの領域に含まれるかは示さず、単にビットストリームに含まれたか否かを示すフラグタイプ（ｆｌａｇ ｔｙｐｅ）にすることもできるが、これに限定されることはない。

プリセット情報生成部１３１０は、複数個のプリセット情報を生成することができ、それぞれのプリセット情報は、プリセットレンダリングパラメータ、プリセットメタデータ及び出力チャンネル情報を含む。このとき、プリセット情報生成部１３１０は、プリセット情報の個数を示すプリセット個数情報（ｐｒｅｓｅｔ ｎｕｍｂｅｒ ｉｎｆｏｒｍａｔｉｏｎ）をさらに生成することができる。

このように、プリセット情報生成部１３１０は、プリセット属性情報、プリセットメタデータ及びプリセットレンダリングパラメータをビットストリームの形態で生成して出力することができる。

プリセット属性受信部１３１５は、プリセット情報生成部１３１０からプリセット属性情報を受信して出力する。このプリセット属性情報の意味は、上記の表１の通りである。

外部プリセット適用判断部１３２５は、外部プリセット情報受信部１３２０から外部プリセット情報を受信し、該外部プリセット情報に含まれたオブジェクト個数情報に基づいて外部プリセット情報がダウンミックス信号に適用されうるか否かを判断することができる。この外部プリセット情報は、図９のビットストリーム構造を有することができる。また、エンコーダから入力されたプリセット情報に含まれるプリセットレンダリングパラメータ、プリセットメタデータ、プリセット存在情報、プリセット個数情報、オブジェクト個数情報及び出力チャンネル情報と同じ構成及び機能を有し、エンコーダではなく外部から入力されるビットストリームに含まれた外部プリセットレンダリングパラメータ、外部プリセットメタデータ、外部プリセット存在情報、外部プリセット個数情報、オブジェクト個数情報及び出力チャンネル情報を含むことができる。

オブジェクト個数情報がダウンミックス信号に含まれたオブジェクトの個数と同一の場合に、外部プリセット情報をダウンミックス信号に適用することができる。万一、オブジェクト個数情報がダウンミックス信号に含まれたオブジェクトの個数と異なる場合には、外部プリセット情報は適用しない。

適用プリセット入力部１３３０は、外部プリセット適用判断部１３２５で外部プリセット情報が適用されると判断した場合、オブジェクトを調節するために外部プリセット情報を用いるかまたはプリセット情報を用いるかを決定するメタデータを表示し、適用される情報を選択する選択信号を受信することができる。本発明の他の実施例では、外部プリセット適用判断部１３２５で外部プリセット情報が利用可能なものと判断された場合、この段階を省いて、優先的に外部プリセット情報を用いることもできる。

適用プリセット判断部１３３５は、外部プリセット適用判断部１３２５で外部プリセット情報が利用可能なものと判断される場合、プリセット情報受信部１３１０からプリセット情報を、外部プリセット適用判断部１３２５から外部プリセット情報を受信する。また、適用プリセット判断部１３３５は、適用プリセット入力部１３３０から入力された選択信号が示すプリセット情報または外部プリセット情報を選択して出力することができる。

適用プリセット判断部１３３５でプリセット情報が選択されると、プリセット属性受信部１３１５から出力されたプリセット属性情報に基づいて、プリセット情報が含まれている拡張領域と対応するダウンミックス信号のデータ領域または全体データ領域にプリセット情報が適用されてオブジェクトを調節することができる。一方、適用プリセット判断部１３３５で外部プリセット情報が選択される場合には、プリセット属性受信部１３１５から出力されたプリセット属性情報によらずに外部プリセット情報はダウンミックス信号の全てのデータ領域に同一に適用される。

適用プリセット判断部１３３５で適用プリセット入力部１３３０から入力された選択信号に基づいて外部プリセット情報が選択される場合、プリセット情報入力部１３４０は、外部プリセットメタデータ受信部１３２２から受信した複数個の外部プリセットメタデータをまずディスプレイ部１３６５の画面に表示し、これらのうち一つの外部プリセットメタデータを選択する選択信号を受信する。プリセット情報選択部１３４５は、当該選択信号によって選択された一つの外部プリセットメタデータと該外部プリセットメタデータに対応する外部プリセットレンダリングパラメータを選択する。

外部プリセット情報が用いられる場合、固定プリセット情報受信部１３５０のみが活性化される。プリセット情報選択部１３４５で選択された外部プリセットメタデータと該外部プリセットメタデータと対応する外部プリセットレンダリングパラメータを、固定プリセット情報受信部１３５０の固定プリセットメタデータ受信部１３５１及び固定プリセットレンダリングパラメータ受信部１３５２にそれぞれ入力する。この場合、ディスプレイ部１３６５、プリセット情報入力部１３４０及びプリセット情報選択部１３４５は１回のみ上記動作を行うことができる。

一方、適用プリセット判断部１３３５で、プリセット情報生成部１３１０から入力されたプリセット情報を用いると決定された場合は、プリセット属性受信部１３１５から受信したプリセット属性情報によって固定プリセット情報受信部１３５０または変動プリセット情報受信部１３５５が活性化される。

この時、プリセット属性決定部１３１１から受信するプリセット属性情報が、プリセット情報が構成情報領域の拡張領域に含まれることを示す場合、プリセット情報選択部１３４５で選択されたプリセットメタデータと該プリセットメタデータに対応するプリセットレンダリングパラメータを、固定プリセット情報受信部１３５０のプリセットメタデータ受信部１１５１及びプリセットレンダリングパラメータ受信部１１５２にそれぞれ入力する。

一方、プリセット属性決定部１３１１から受信するプリセット属性情報が、プリセット情報がデータ領域の拡張領域に含まれることを示す場合、プリセット情報選択部１３４５で選択されたプリセットメタデータと該プリセットメタデータに対応するプリセットレンダリングパラメータ情報を、変動プリセット情報受信部１３５５のプリセットメタデータ受信部１３５６及びプリセットレンダリングパラメータ受信部１３５７にそれぞれ入力する。この場合、ディスプレイ部１３６５、プリセット情報入力部１３４０及びプリセット情報選択部１３４５はデータ領域の数だけ繰り返して上記動作を行うことができる。

また、選択された外部プリセットレンダリングパラメータまたはプリセットレンダリングパラメータはレンダリング部１３６０に出力され、選択された外部プリセットメタデータまたはプリセットレンダリングパラメータはディスプレイ部１３６５に出力されて画面に表示される。ディスプレイ部１３６５は、プリセット情報入力部１３４０が選択信号を受信できるように複数個のプリセットメタデータまたは外部プリセットメタデータを表示するユニットと同一のユニットにしても良く、それぞれ異なるユニットにしても良い。ディスプレイ部１３６５とプリセット情報入力部１３４０のためにプリセットメタデータまたは外部プリセットメタデータを表示するディスプレイ部を同一のユニットとする場合、画面に表示される説明（例えば、プリセット情報を選択してください、プリセット情報Ｎが選択されました等）、視覚的オブジェクト、文字などを別に構成することによって、それぞれの動作を区別することができる。

図１４は、オーディオ信号の処理装置１４００のディスプレイ部１３６５の一例を示す図である。ディスプレイ部１３６５は、選択されたプリセットメタデータまたは外部プリセットメタデータの他に、該プリセットメタデータまたは外部プリセットメタデータに対応するプリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを用いて調節されたオブジェクトのレベルまたは位置を示す一つ以上の図形オブジェクトを含むことができる。図１４を参照すると、まず、図１３のディスプレイ部１３６５に表示された複数個のプリセットメタデータまたは外部プリセットメタデータ（例えば、競技場モード、洞窟モード、ニュースモード、ライブモード等）のうち、プリセット情報選択部１３４０によってニュースモードが選択された場合、ニュースモードに対応するプリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータが、ダウンミックス信号に含まれた各オブジェクトに適用される。この場合、ボーカルのレベルは増加し、その他のオブジェクト（ギター、バイオリン、ドラム、…チェロ）のレベルは減少する。

ディスプレイ部１３６５に含まれた図形オブジェクトは、オブジェクトのレベルまたは位置の活性化または変化を示すために変形される。例えば、図１４に示すように、ボーカルを示す図形オブジェクトのスイッチは右に移動し、他のオブジェクトを示す図形オブジェクトのスイッチは左に移動することができる。

この図形オブジェクトは、様々な方法でプリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを用いて調節されたオブジェクトのレベルまたは位置を示すことができる。各オブジェクトを示す図形オブジェクトは一つ以上とすることができ、この場合、第１図形オブジェクトは、プリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを適用する以前のオブジェクトのレベルまたは位置を示し、第２図形オブジェクトは、プリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを適用して調節されたオブジェクトのレベルまたは位置を示すことができる。こうすると、プリセットレンダリングパラメータまたは外部プリセットレンダリングパラメータを適用する前・後のオブジェクトのレベルまたは位置を容易に比較することができ、よって、プリセット情報または外部プリセット情報が各オブジェクトをどのように調節するかが容易にわかる。

図１５は、プリセット情報または外部プリセット情報が適用されたオブジェクトを示す他の形状の一つ以上の図形オブジェクトを示す図である。図１５を参照すると、第１図形オブジェクトは、バー（ｂａｒ）形態であり、第２図形オブジェクトは、第１図形オブジェクトの内部に延びた線（ｅｘｔｅｎｓｉｖｅ ｌｉｎｅ）にすることができる。この場合、第１図形オブジェクトは、プリセット情報または外部プリセット情報を適用する前のオブジェクトのレベルまたは位置を示し、第２図形オブジェクトは、プリセット情報または外部プリセット情報を適用して調節されたオブジェクトのレベルまたは位置を示す。

図１５に示すように、上端の図形オブジェクトは、プリセット情報または外部プリセット情報が適用される前のオブジェクトのレベルが、適用された後のオブジェクトのレベルと同じ場合を示す。中央の図形オブジェクトは、プリセット情報または外部プリセット情報が適用されて調節されたオブジェクトのレベルが、適用前に比べて大きい場合を示し、下端の図形オブジェクトは、プリセット情報または外部プリセット情報が適用されることによってオブジェクトのレベルが減少した場合を示す。

このように、プリセット情報または外部プリセット情報を適用する前と適用した後のオブジェクトのレベルまたは位置を示す一つ以上の図形オブジェクトを使用することによって、プリセット情報または外部プリセット情報が各オブジェクトをどのように調節するかを容易に確認できるようにする。また、プリセット情報または外部プリセット情報の特徴を容易に把握できるため、ユーザーは必要によって適切なプリセット情報または外部プリセット情報をより容易に選択することができる。

図１６は、本発明の一実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信部及びレンダリング部が具現された製品の概略的な構成を示す図であり、図１７Ａ及び図１７Ｂは、本発明の実施例による外部プリセット情報受信部、外部プリセット情報適用判断部、固定プリセット情報受信部、変動プリセット情報受信及びレンダリング部が具現された製品間の関係を示す図である。

図１６を参照すると、有無線通信部１６１０は、有無線通信方式を用いてビットストリームを受信する。具体的に、有無線通信部１６１０は、有線通信部１６１１、赤外線通信部１６１２、ブルートゥース部１６１３、無線ＬＡＮ通信部１６１４のうち一つ以上を含むことができる。

ユーザー認証部１６２０は、ユーザー情報を受信してユーザー認証を行うもので、指紋認識部１６２１、虹彩認識部１６２２、顔認識部１６２３、及び音声認識部１６２４のうち一つ以上を含むことができ、それぞれ指紋、虹彩情報、顔の輪郭情報、音声情報を受信してユーザー情報に変換し、ユーザー情報及び既存に登録されているユーザーデータとが一致するか否かを判断することでユーザー認証を行うことができる。

入力部１６３０は、ユーザーが種々の命令を入力するための入力装置で、キーパッド部１６３１、タッチパッド部１６３２、リモコン部１６３３のうち一つ以上を含むことができるが、本発明はこれに限定されない。

一方、後述する外部プリセット情報受信部１６４１から入力された外部プリセット情報と有無線通信部１６１０から入力されたプリセット情報のうち、用いられる情報を選択するための情報がディスプレイ部１６６２で画面に表示される場合に、入力部１６３０を介してユーザーが選択信号を入力でき、選択された信号に基づいて選択された外部プリセット情報（または、プリセット情報）が制御部１６５０に入力される。また、 外部プリセット情報受信部１６４１から出力される複数個の外部プリセットレンダリングパラメータに対する外部プリセットメタデータがディスプレイ部１６６２で画面に表示される場合に、入力部１６３０を介してユーザーが外部プリセットメタデータを選択することができ、選択された外部プリセットメタデータに関する情報が制御部１６５０に入力される。

信号デコーディング部１６４０は、外部プリセット情報受信部１６４１、外部プリセット情報適用判断部１６４２、固定プリセット情報受信部１６４３、変動プリセット情報受信部１６４４及びレンダリング部１６４５を含み、これは、図４の外部プリセット情報受信部４３０、外部プリセット情報適用判断部４４０、固定プリセット情報受信部４５０及び変動プリセット情報受信部４６０と構成及び機能が同一なので、その詳細な説明を省略する。

制御部１６５０は、入力装置などから入力信号を受信し、信号デコーディング部１６４０と出力部１６６０のプロセス全般を制御する。上述した通り、入力部１６３０から制御部１６５０に、選択されたプリセットメタデータまたは外部プリセットメタデータに関する情報及び選択されたプリセット情報または外部プリセット情報の種類が選択信号の形態として入力され、有無線通信部１６１０からプリセット情報がビットストリームのどの領域に含まれるかを示すプリセット属性情報（ｐｒｅｓｅｔ＿ａｔｔｒｉｂｕｔｅ＿ｉｎｆｏｒｍａｔｉｏｎ）が入力される場合、固定プリセット情報受信部１６４３及び変動プリセット情報受信部１６４４は、プリセット属性情報及び選択信号に基づいて、選択されたプリセットメタデータに対応するプリセットレンダリングパラメータを受信し、これを用いてオーディオ信号をデコーディングする。

一方、外部プリセット情報を用いると決定された場合、プリセット属性情報によらず、選択信号に基づいて、選択された外部プリセットメタデータに対応する外部プリセットレンダリングパラメータを固定プリセット情報受信部１６４３に入力する。

出力部１６６０は、信号デコーディング部１６４０で生成された出力信号などが出力される構成要素として、オーディオ信号出力部１６６１及びディスプレイ部１６６２を含むことができる。出力信号がオーディオ信号であれば、出力信号はオーディオ信号出力部１６６１から出力され、ビデオ信号であれば、出力信号はディスプレイ部１６６２から出力される。また、制御部１６５０から選択されたプリセットメタデータまたは外部プリセットメタデータをディスプレイ部１６６２で画面に表示する。

図１７Ａ及び図１７Ｂは、図１６に示す製品に該当する端末と端末との関係及び端末とサーバーとの関係をそれぞれ示す図である。

図１７Ａを参照すると、第１端末１７１０及び第２端末１７２０が各端末の有無線通信部を介してデータやビットストリームを両方向で通信できることがわかる。有無線通信部を介して通信するデータまたはビットストリームは、本発明の図１Ａ、図１Ｂ、図２及び図９のビットストリームの形態のものであっても良く、図１乃至図１６を参照して説明した本発明のプリセット属性情報、プリセットレンダリングパラメータ、プリセットメタデータ、外部プリセットレンダリングパラメータ、外部プリセットメタデータなどを含むデータであっても良い。

図１７Ｂを参照すると、サーバー１７３０及び第１端末１７４０も同様、互いに有無線通信を行うことができる。

図１８は、本発明の一実施例によるプリセット属性判断部、外部プリセット情報受信部、固定または変動プリセット情報受信部及びレンダリング部を含むオーディオデコーダが具現されている放送信号デコーディング装置１８００の概略的な構成を示す図である。

図１８を参照すると、デマルチプレクサ１８２０は、チューナー１８１０からＴＶ放送と関連したデータを受信する。これら受信したデータはデマルチプレクサ１８２０で分離及び選択され、データデコーダ１８３０でデコーディングされる。一方、デマルチプレクサ１８２０で選択されたデータは、ＨＤＤのような記憶媒体１８５０に格納されることができる。

デマルチプレクサ１８２０で選択されたデータは、オーディオデコーダ１８４１及びビデオデコーダ１８４２を含むデコーダ１８４０に入力されてオーディオ信号及びビデオ信号をデコーディングする。オーディオデコーダ１８４１は、本発明の一実施例による外部プリセット情報受信部１８４１ａ、外部プリセット情報適用判断部１８４１ｂ、固定プリセット情報受信部１８４１ｃ、変動プリセット情報受信部１８４１ｄ及びレンダリング部１８４１ｅを含み、これらは、図４の外部プリセット情報受信部４３０、外部プリセット情報適用判断部４４０、固定プリセット情報受信部４５０及び変動プリセット情報受信部４６０の構成及び機能と同一なので、詳細な説明を省略する。

オーディオデコーダ１８４１は、受信したビットストリーム、プリセットメタデータ及びプリセットレンダリングパラメータまたは外部プリセットメタデータ及び外部プリセットレンダリングパラメータを用いて、オーディオ信号をデコーディングして出力信号を生成し、プリセットメタデータまたは外部プリセットメタデータをテキスト形態として出力する。

ディスプレイ部１８７０は、ビデオデコーダ１８４２から出力されたビデオ信号とオーディオデコーダ１８４１から出力された外部プリセットメタデータを画面に表示する。また、ディスプレイ部１８７０は、スピーカー部（図示せず）を含み、オーディオデコーダ１８４１から出力されるオブジェクトのレベルが外部プリセット情報を用いて調節されたオーディオ信号を、ディスプレイ部１８７０に含まれたスピーカー部から出力する。また、デコーダ１８４０でデコーディングされたデータは、ＨＤＤのような記憶媒体１８５０に格納することができる。

一方、信号デコーディング装置１８００は、ユーザーから情報を受け取って、受信したデータを制御できるアプリケーションマネジャー１８６０をさらに含むことができる。アプリケーションマネジャー１８６０は、ユーザーインターフェースマネジャー１８６１及びサービスマネジャー１８６２を含み、ユーザーインターフェースマネジャー１８６１はユーザーから情報を受け取るためのインターフェース（ｉｎｔｅｒｆａｃｅ）を制御する。例えば、ディスプレイ部１８７０に表示されるテキストの書体、画面の明るさ、メニュー構成などを制御することができる。一方、サービスマネジャー１８６２は、デコーダ１８４０及びディスプレイ部１８７０で放送信号をデコーディングして出力する場合、受信する放送信号を、ユーザーから入力される情報を用いて制御することができる。例えば、放送チャンネルの設定、アラーム機能設定、成人認証機能などを提供することができる。アプリケーションマネジャー１８６０から出力されるデータは、デコーダ１８４０の他に、ディスプレイ部１８７０にも送られて利用可能である。

本発明は、オーディオ信号のエンコーディング及びデコーディングに適用することができる。

以上では限定された実施例及び図面に基づいて本発明を説明してきたが、本発明は、それらの具体例に限定されず、本発明の技術思想及び添付の特許請求の範囲とその均等範囲内で様々な修正及び変形が可能であるということは、本発明の属する技術の分野における通常の知識を有する者にとっては明らかである。

Claims (11)

1. ａ）少なくとも一つのオブジェクトを含むダウンミックス信号、ｂ）前記オブジェクトの属性を示し、オブジェクト個数情報を含むオブジェクト情報、及びｃ）前記ダウンミックス信号をレンダリングするためのプリセット情報を受信する段階と、
   ｄ）外部から入力され、外部プリセットレンダリングパラメータと外部プリセットメタデータを含む外部プリセット情報、及びｅ）前記外部プリセット情報が適用されるオブジェクトの個数を示す適用オブジェクト個数情報を受信する段階と、
   前記適用オブジェクト個数情報が、前記オブジェクト個数情報と同一であるか否かを判断する段階と、
   前記適用オブジェクト個数情報が前記オブジェクト個数情報と同一である場合、前記外部プリセット情報を用いて前記ダウンミックス信号をレンダリングする段階と、
   を含み、
   前記オブジェクト個数情報は、前記少なくとも一つのオブジェクトの個数を示し、前記ダウンミックス信号、前記オブジェクト情報、及び前記プリセット情報は、第１ビットストリームから受信され、
   前記外部プリセット情報及び前記適用オブジェクト個数情報は、第２ビットストリームから受信され、
   前記外部プリセットレンダリングパラメータは、前記ダウンミックス信号に含まれた前記オブジェクトをレンダリングし、前記外部プリセットメタデータは、前記外部プリセットレンダリングパラメータの属性を示すことを特徴とする、オーディオ信号の処理方法。
2. 前記外部プリセットレンダリングパラメータは、前記適用オブジェクト個数情報及び前記ダウンミックス信号の出力チャンネルの個数を示す出力チャンネル情報に基づく外部プリセットマトリクスを含むことを特徴とする、請求項１に記載のオーディオ信号の処理方法。
3. 前記レンダリングする段階は、前記外部プリセットマトリクスを用いて前記オブジェクトの出力レベルを調節する段階をさらに含むことを特徴とする、請求項２に記載のオーディオ信号の処理方法。
4. 前記外部プリセットレンダリングパラメータは、前記ダウンミックス信号の出力チャンネルの個数に従って、外部モノプリセットレンダリングパラメータ、外部ステレオプリセットレンダリングパラメータ及び外部マルチチャンネルプリセットレンダリングパラメータを含むことを特徴とする、請求項１に記載のオーディオ信号の処理方法。
5. 前記オブジェクト情報及び前記外部プリセット情報を用いて、前記ダウンミックス信号のパニングまたはゲインを調節するダウンミックス処理情報、及び前記ダウンミックス信号をアップミキシングするためのマルチチャンネル情報を生成する段階と、
   前記ダウンミックス処理情報を用いて前記ダウンミックス信号を修正する段階と、
   をさらに含むことを特徴とする、請求項１に記載のオーディオ信号の処理方法。
6. ａ）少なくとも一つのオブジェクトを含むダウンミックス信号、ｂ）前記オブジェクトの属性を示し、オブジェクト個数情報を含むオブジェクト情報、及びｃ）前記ダウンミックス信号をレンダリングするためのプリセット情報を受信する信号受信部と、
   ｄ）外部から入力される外部プリセット情報、及びｅ）前記外部プリセット情報が適用されるオブジェクトの個数を示す適用オブジェクト個数情報を受信する外部プリセット情報受信部と、
   前記適用オブジェクト個数情報が、前記オブジェクト個数情報と同一であるか否かを判断する外部プリセット情報適用判断部と、
   前記適用オブジェクト個数情報が前記オブジェクト個数情報と同一である場合、前記外部プリセット情報を用いて前記ダウンミックス信号をレンダリングするレンダリング部と、
   を含み、
   前記オブジェクト個数情報は、前記少なくとも一つのオブジェクトの個数を示し、前記ダウンミックス信号、前記オブジェクト情報、及び前記プリセット情報は、第１ビットストリームから受信され、
   前記外部プリセット情報及び前記適用オブジェクト個数情報は、第２ビットストリームから受信され、
   前記外部プリセット情報は、前記ダウンミックス信号に含まれる前記オブジェクトをレンダリングするための外部プリセットレンダリングパラメータ、及び前記外部プリセットレンダリングパラメータの属性を示す外部プリセットメタデータを含むことを特徴とする、オーディオ信号の処理装置。
7. 前記外部プリセット情報適用判断部は、前記外部プリセット情報が前記ダウンミックス信号に適用されるか否かを示す外部メタデータ情報をさらに用いることを特徴とする、請求項６に記載のオーディオ信号の処理装置。
8. 前記外部プリセットレンダリングパラメータは、前記適用オブジェクト個数情報及び前記ダウンミックス信号の出力チャンネルの個数を示す出力チャンネル情報に基づく外部プリセットマトリクスを含むことを特徴とする、請求項６に記載のオーディオ信号の処理装置。
9. 前記外部プリセット情報受信部は、前記外部プリセットレンダリングパラメータを受信する外部プリセットレンダリングパラメータ受信部、及び前記外部プリセットメタデータを受信する外部プリセットメタデータ受信部を含むことを特徴とする、請求項６に記載のオーディオ信号の処理装置。
10. 前記レンダリング部は、前記ダウンミックス信号のデータ領域をレンダリングする複数のデータ領域レンダリング部を含むことを特徴とする、請求項６に記載のオーディオ信号の処理装置。
11. 前記外部プリセットレンダリングパラメータが前記外部プリセット情報受信部から受信される場合、前記外部プリセットレンダリングパラメータが前記複数のデータ領域レンダリング部に適用されることを特徴とする、請求項１０に記載のオーディオ信号の処理装置。

Images