JP6912612B2

JP6912612B2 - 動的フォーマット変換をサポートするオーディオメタデータ提供装置及びオーディオデータ再生装置、前記装置が行う方法、並びに前記動的フォーマット変換が記録されたコンピュータで読み出し可能な記録媒体

Info

Publication number: JP6912612B2
Application number: JP2020018862A
Authority: JP
Inventors: ユ、ジェ、ヒョン; イ、テ、ジン; イ、ソク、ジン
Original assignee: Electronics and Telecommunications Research Institute ETRI
Current assignee: Electronics and Telecommunications Research Institute ETRI
Priority date: 2014-09-24
Filing date: 2020-02-06
Publication date: 2021-08-04
Anticipated expiration: 2035-09-16
Also published as: JP2021170798A; KR20190076934A; JP2020092439A; KR20220044457A; JP6663147B2; KR20210033963A; JP2016072973A; KR102533824B1; KR102231750B1; JP7166398B2; KR20230071107A; KR20160035963A; KR101993348B1; KR102380279B1

Description

本発明は多チャネルオーディオデータ再生方法に関し、より詳しくは、多チャネルオーディオデータの様々なフォーマット間の変換方法に関する。

３ＤＴＶ、３Ｄシネマ、ＵＨＤＴＶなど次世代コンテンツ再生環境に対する研究開発が持続しながら、オーディオも多チャネルラウドスピーカを用いる音響再生環境に素早い変化が行われている。

映画館及びＨＤＴＶのための立体音響の５．１チャネルシステム以後に上りチャネルを含む様々なマルチャネルオーディオシステムが導入され、ＩＴＵ−Ｒ（ＩｎｔｅｒｎａｔｉｏｎａｌＴｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎＵｎｉｏｎＲａｄｉｏｃｏｍｍｕｎｉｃａｔｉｏｎｓＳｅｃｔｏｒ）では、最近ＲｅｃｏｍｍｅｎｄａｔｉｏｎＢＳ．２０５１を制定して１０．２チャネル、１３．１チャネル、２２．２チャネルなどをはじめとする総８個の多チャネルフォーマットを次世代オーディオシステム（ａｄｖａｎｃｅｄｓｏｕｎｄｓｙｓｔｅｍ）として定義した。したがって、これからは様々なフォーマットにベースを置いたオーディオコンテンツが製造される可能性が極めて高まっている。

このような環境では、１つのフォーマットに製造されたコンテンツが異なるフォーマットに再生する可能性も極めて高いため、コンテンツ間の適切な変換方法が求められている。従来には、コンテンツの多チャネルオーディオフォーマットから再生環境側の新しい多チャネルオーディオフォーマットにフォーマット変換することにおいて一括的な変換を行った。しかし、このような一括の変換方法は、コンテンツ著作者の著作意図を毀損し、意図とは異なる変換を行う恐れがあるという短所がある。

本発明の目的は、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるようにフォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提案する。

本発明の目的は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境による第２フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供する。

本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別して第１フォーマットから第２フォーマットに多チャネルオーディオデータを変換した後再生する多チャネルオーディオデータ再生装置及び方法を提供する。

本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供する。

本発明の一実施形態に係るオーディオメタデータ提供装置は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別する変換情報識別部と、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するオーディオメタデータ生成部とを含む。

前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。

前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。

前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。

前記複数のフォーマット変換方式は、前記第１フォーマットから第２フォーマットに変換するためのマトリックスを含んでもよい。

前記動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定されてもよい。

本発明の一実施形態に係る多チャネルオーディオデータ再生装置は、第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するデータ識別部と、前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するオーディオデータ変換部と、前記第２フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部とを含む。

前記多チャネルオーディオデータ変換部の再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。

前記多チャネルオーディオデータ変換部のフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換してもよい。

本発明の一実施形態に係るオーディオメタデータ提供方法は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するステップとを含む。

本発明の一実施形態に係る多チャネルオーディオデータ再生方法は、第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するステップと、前記第２フォーマットに変換された多チャネルオーディオデータを再生するステップとを含む。

本発明の一実施形態に係るコンピュータで読み出し可能な記録媒体は、１つ以上のチャネルから構成された多チャネルオーディオデータと、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報が含まれたオーディオメタデータとが記録される。

本発明の一実施形態によると、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるよう、フォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法、及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提供することができる。

本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供することができる。

本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別し、第１フォーマットから第２フォーマットに多チャネルオーディオデータを変換した後、再生する多チャネルオーディオデータ再生装置及び方法を提供することができる。

本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供することができる。

本発明の一実施形態に係るオーディオメタデータ提供装置とオーディオメタデータ及び多チャネルオーディオデータ再生装置を示す図である。本発明の一実施形態に係る多チャネルオーディオデータのフォーマットを一括的に変換する一例を示す図である。本発明の一実施形態に係る動的フォーマット変換情報に多チャネルオーディオデータのフォーマットを変換する一例を示す図である。本発明の一実施形態に係る１つ以上の動的フォーマット変換情報を含むオーディオメタデータを示す図である。本発明の一実施形態に係るマトリックス方式を用いてフォーマット間の変換を行う実施形態を説明するための図である。本発明の一実施形態に係るオーディオメタデータ提供装置が動的フォーマット変換情報の含まれたオーディオメタデータを提供する動作を示したフローチャートである。本発明の一実施形態に係る多チャネルオーディオデータ再生装置が多チャネルオーディオデータのフォーマットを変換した後、これを再生する動作を示したフローチャートである。

以下、本発明の実施形態について添付の図面を参照しながら詳細に説明する。

図１は、本発明の一実施形態に係るオーディオメタデータ提供装置１１０とオーディオメタデータ１４０及び多チャネルオーディオデータ再生装置１６０を示す図である。

図１を参考すると、オーディオメタデータ提供装置１１０は、動的フォーマット変換情報を識別する変換情報識別部１２０及び識別された動的フォーマット変換情報を含むオーディオメタデータ１４０を生成するオーディオメタデータ生成部１３０を含む。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。

本発明の一実施形態によると、変換情報識別部１２０は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。更なる実施形態によると、変換情報識別部１２０は、１つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。

本発明の一実施形態によると、変換情報識別部１２０で識別された動的フォーマット変換情報に基づいてオーディオメタデータを生成するオーディオメタデータ生成部１３０が提供される。オーディオメタデータ生成部１３０は、オーディオメタデータに識別された複数の動的フォーマット変換情報を含む。本発明の一実施形態によると、オーディオメタデータ生成部１３０は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態に含むことができる。更なる実施形態によると、オーディオメタデータ生成部１３０は、メタデータに識別された動的フォーマット変換情報と共に、メタデータに一般的に含まれる情報（例えば、著作者、レコード名、発売年度など）を含んでもよい。

本発明の一実施形態によると、オーディオメタデータ提供装置１１０は、多チャネルオーディオデータ提供装置の一部の構成として含まれている。

オーディオメタデータ提供装置１１０から動的フォーマット変換情報１５０を含むオーディオメタデータ１４０が提供される。本発明の一実施形態によると、オーディオメタデータ１４０は、動的フォーマット変換情報１５０だけではなく、メタデータに一般的に含まれる情報を含んでもよい。本発明の他の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供され得る。本発明の更なる一実施形態によると、オーディオメタデータ１４０は、リアルタイムで多チャネルオーディオデータ再生装置１６０に送信されたり、又は、多チャネルオーディオデータ再生装置１６０に予め送信されて多チャネルオーディオデータ再生装置１６０のバッファ、メモリのような格納媒体に格納され得る。又は、オーディオメタデータ１４０は、ＣＤ−ＲＯＭ、ＣＤ−ＲＷ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷなどのような光記録媒体に格納されて配布され得る。

多チャネルオーディオデータを動的フォーマット変換情報によってフォーマット間に変換した後、これを再生できる多チャネルオーディオデータ再生装置１６０が提供される。
多チャネルオーディオデータ再生装置１６０は、動的フォーマット変換情報を識別するデータ識別部１７０、識別された動的フォーマット変換情報でフォーマット間の変換を行うオーディオデータ変換部１８０、及び変換された多チャネルオーディオデータを再生するオーディオデータ再生部１９０を含む。

本発明の一実施形態によると、データ識別部１７０は、オーディオメタデータ１４０で多チャネルオーディオデータの再生環境に基づいた第２フォーマットに該当する動的フォーマット変換情報を識別する。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。本発明の一実施形態によると、データ識別部１７０は、オーディオメタデータに記録された１つ以上の動的フォーマット変換情報のうち、第２フォーマットに対応する動的フォーマット変換情報を選択して識別することができる。

本発明の一実施形態によると、オーディオデータ変換部１８０は、識別した動的フォーマット変換情報によって多チャネルオーディオデータを多チャネルオーディオ著作者が設定した第１フォーマットから多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換する。動的フォーマット変換情報は、第１フォーマットと第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。

本発明の一実施形態によると、オーディオデータ変換部１８０は、再生時間により動的フォーマット変換情報から再生時間を含む再生区間を識別し、動的フォーマット変換情報で当該再生区間に設定されたフォーマット変換方式を識別して第１フォーマットと第２フォーマットとの間のフォーマット変換を行う。本発明の一実施形態によると、複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、オーディオデータ変換部１８０は、動的フォーマット変換情報によって再生区間ごとに互いに異なるフォーマット変換方式を用いて変換するか、又は部分的にフォーマット変換方式を繰り返されるように用いて変換することができる。

本発明の一実施形態によると、第２フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部１９０が提供される。第２フォーマットは多チャネルオーディオデータの再生環境に基づいて、多チャネルオーディオデータの再生環境は多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。オーディオデータ再生部１９０は、１つ以上のスピーカの出力部から構成される。オーディオデータ再生部１９０は、第２フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。

本発明の一実施形態によると、オーディオデータ再生部１９０は、出力部に接続されたスピーカの個数を把握して多チャネルオーディオデータの再生環境を識別する。さらに、オーディオデータ再生部１９０は、スピーカの個数だけではなく、各スピーカの位置を識別したり、ユーザから再生環境に関する情報が入力されることで再生環境を識別することができる。

図２は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマットを一括的に変換する一例を示す図である。

多チャネルオーディオデータは、多チャネルオーディオデータの著作者が設定した多チャネルオーディオデータフォーマットの第１フォーマットに合わせて製作される。多チャネルオーディオデータを再生する側の多チャネルオーディオデータフォーマットの第２フォーマットは、多チャネルオーディオデータの再生環境に基づく。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されるため、第２フォーマットは、多チャネルオーディオデータの第１フォーマットと異なり得る。本発明の一実施形態によると、多チャネルオーディオデータの再生環境に基づく第２フォーマットが第１フォーマットと異なる場合、多チャネルオーディオデータ再生装置のオーディオデータ変換部は、一括的なフォーマット変換方式２００により変換を行うことができる。

図２を参照すると、第１フォーマットは、１０．２チャネルフォーマットであると仮定する。一括的なフォーマット変換方式２００によると、第２フォーマットが５．１チャネルフォーマットである場合、聴者の左側の前面スピーカＬは第１フォーマットの左側の前面スピーカＬと左側上段スピーカＬＨの線形結合（ｌｉｎｅａｒｃｏｍｂｉｎａｔｉｏｎ）として決定される。他の例として、第２フォーマットが７．１チャネルフォーマットである場合、右側の後面スピーカＲＢは、第１フォーマットの右側の後面スピーカＲＢと中央スピーカＣＨの線形結合に決定される。

一括的なフォーマット変換方式２００によると、フォーマット変換方式はチャネル間の線形結合であることから、非線形変換はできない。また、再生区間ごとにフォーマット変換方式は変化されない。本発明の一実施形態によると、多チャネルオーディオデータの再生区間ごとに１つ以上のフォーマット変換方式が設定された動的フォーマット変換情報が提供される。また、第１フォーマットと第２フォーマットとの間の非線形変換をサポートするフォーマット変換方式が提供される。

図３は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマット変換を行うことのできる動的フォーマット変換情報を示す図である。

図３を参考すると、動的フォーマット変換情報３１０は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式（例えば、フォーマット変換方式Ｋ３２０、Ｌ３４０、Ｍ３３０）が多チャネルオーディオデータの再生区間ごとに設定されたものである。

本発明の一実施形態によると、それぞれのフォーマット変換方式は、同一の第２フォーマットにフォーマットを変換する。ただし、変換する方式は互いに異なってもよい。図３を参照して説明すると、フォーマット変換方式Ｋ３２０は、第１フォーマットの複数の左側スピーカＬｅｆｔ_１とＬｅｆｔ_２の線形結合で第２フォーマットの左側スピーカＬｅｆｔの出力データを決定する。フォーマット変換方式Ｍ３３０は、第１フォーマットの複数の左側スピーカのうちの１つであるＬｅｆｔ_１だけで第２フォーマットの左側スピーカＬｅｆｔの出力データを決定する。本発明の一実施形態によると、それぞれの変換方式は非線形変換を含むことができる。

本発明の一実施形態によると、多チャネルオーディオデータ再生装置は、動的フォーマット変換情報から再生区間ごとに設定されたフォーマット変換方式を識別して変換することができる。図３を参照すると、多チャネルオーディオデータ再生装置は、再生区間ｔ＝０からｔ＝ｔ_１まで多チャネルオーディオデータをフォーマット変換方式Ｋ３２０によって変換する。多チャネルオーディオデータ再生装置は、以後の再生区間ｔ＝ｔ_１からｔ＝ｔ_２まで多チャネルオーディオデータをフォーマット変換方式Ｍ３３０によって変換する。同様に、多チャネルオーディオデータ再生装置は、再生区間ｔ＝ｔ_３からｔ＝ｔ_４まではフォーマット変換方式Ｌ３４０によって変換を行い、以後の再生区間でも同じ作業を繰り返す。

本発明の一実施形態によると、動的フォーマット変換情報３１０は、多チャネルオーディオデータの再生区間ごとにフォーマット変換方式を相異に設定するか、又は部分的に繰り返されるように設定してもよい。図３を参照すると、フォーマット変換方式Ｋ３２０は、再生区間ｔ＝０からｔ＝ｔ_１だけではなく、再生区間ｔ＝ｔ_２からｔ＝ｔ_３でも再び設定され得る。本発明の一実施形態によると、フォーマット変換方式は、一括的なフォーマット変換方式や線形結合による変換だけではなく、非線形変換も含むことができる。

本発明の一実施形態によると、フォーマット変換方式が設定されたそれぞれの再生区間は互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。図３を参照すると、再生区間ｔ＝ｔ_１からｔ＝ｔ_２と再生区間ｔ＝ｔ_７からｔ＝ｔ_８は互いに同じ再生長さを有し得る。

図４は、本発明の一実施形態に係る１つ以上の動的フォーマット変換情報を含むオーディオメタデータを示す図である。

図４を参考すると、多チャネルオーディオデータの再生環境が様々であるため、オーディオメタデータ１４０は、１つ以上の動的フォーマット変換情報４２０、４３０を含む。
多チャネルオーディオデータ再生装置１６０は、多チャネルオーディオデータの再生環境に基づいた第２フォーマットに該当する動的フォーマット変換情報を選択し、多チャネルオーディオデータのフォーマットを変換する。再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。

図４を参照すると、多チャネルオーディオデータの著作者が設定した第１フォーマットが２２．２チャネルフォーマットであり、多チャネルオーディオデータの再生環境に基づいた第２フォーマットが１０．２チャネルフォーマットであると仮定する。多チャネルオーディオデータ再生装置１６０のデータ識別部１７０は、オーディオメタデータの複数の動的フォーマット変換情報４２０、４３０のうち第２フォーマットに対応する動的フォーマット変換情報（１）４２０を識別する。同様に、多チャネルオーディオデータの再生環境に基づいた第２フォーマットが５．１チャネルフォーマットであれば、多チャネルオーディオデータ再生装置のデータ識別部１７０は動的フォーマット変換情報（２）４３０を識別する。

先に仮定した１０．２チャネルフォーマットで、オーディオデータ変換部１８０は、識別された動的フォーマット変換情報（１）４２０によって多チャネルオーディオデータのフォーマットを変換する。すなわち、オーディオデータ変換部１８０は、再生区間ごとに設定された複数のフォーマット変換方式４４０に基づいて多チャネルオーディオデータを再生区間ｔ＝０からｔ＝ｔ_１まではフォーマット変換方式Ｋ４５０によって変換し、再生区間ｔ＝ｔ_１からｔ＝ｔ２まではフォーマット変換方式Ｍ４６０によって変換する。本発明の一実施形態によると、動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定され得る。また、フォーマット変換方式が設定されたそれぞれの再生区間の再生長さも互いに異なるか、同じであってもよい。図４を参考すると、フォーマット変換方式Ｋ４５０は、再生区間ｔ＝_０からｔ＝ｔ１で用いられるが、その後の再生区間でも繰り返し用いてもよい。また、再生区間ｔ＝０からｔ＝ｔ_１と再生区間ｔ＝ｔ_１からｔ＝ｔ_２の再生長さも互いに異なるか、同じであってもよい。

図５は、本発明の一実施形態に係るマトリックス方式を用いてフォーマット間の変換を行う実施形態を説明するための図である。

図５を参考すると、動的フォーマット変換情報でそれぞれのフォーマット変換方式は、変換マトリックス５３０、５４０に格納され得る。変換マトリックスは、多チャネルオーディオデータの著作者が設定した第１フォーマットから多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換するためのマトリックスである。オーディオデータ変換部は、第１フォーマットチャネルマトリックスを変換マトリックスに適用して第２フォーマットチャネルマトリックスを出力することで、第１フォーマットから第２フォーマットに変換することができる。

図５を参照すると、多チャネルオーディオデータの著作者は、１０．２チャネルフォーマット（第１フォーマット）に多チャネルオーディオデータを製作５１０したと仮定し、多チャネルオーディオデータの再生環境は、５．１チャネルフォーマット（第２フォーマット）であると仮定する。この場合、フォーマット変換５５０を参考すると、オーディオデータ変換部は、第１フォーマットチャネルマトリックス５８０（チャネルマトリックスの各元素は各チャネルに対応する）を変換マトリックス５７０に適用して第２フォーマットチャネルマトリックス５６０を出力する方式によりフォーマットを変換する。したがって、図５に示す場合、第１フォーマットの１０．２チャネルフォーマットは１２個のチャネルを有し、第２フォーマットの５．１チャネルフォーマットは６個のチャネルを有するため、フォーマット変換方式に関する情報を含む変換マトリックス５３０、５４０は６行１２列に構成される。

また、オーディオデータ変換部は、再生区間ごとに設定されたフォーマット変換方式に合わせて変換マトリックス５７０を交換して変換することができる。例えば、図５に示す動的フォーマット変換情報５２０で、再生区間ｔ＝０からｔ＝ｔ_１まで変換方式Ｋが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス５７０を変換方式Ｋに対する変換マトリックス５３０に設定して変換を行う。再生区間ｔ＝ｔ_１からｔ＝ｔ_２まで変換方式Ｍが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス５７０を変換方式Ｍに対する変換マトリックス５４０に設定して変換を行う。

図６は、本発明の一実施形態に係るオーディオメタデータ提供装置が動的フォーマット変換情報の含まれたオーディオメタデータを提供する動作を示したフローチャートである。

ステップＳ６１０において、オーディオメタデータ提供装置は、動的フォーマット変換情報を識別する。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。本発明の一実施形態によると、オーディオメタデータ提供装置は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。本発明の他の実施形態によると、多チャネルオーディオデータ再生装置は、１つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。

ステップＳ６２０において、オーディオメタデータ提供装置は、識別された動的フォーマット変換情報を含むオーディオメタデータを生成する。ここで、オーディオメタデータ提供装置は、オーディオメタデータに一般的に含まれる情報（例えば、著作者、レコード名、発売年度など）を含んでもよい。本発明の一実施形態によると、オーディオメタデータ提供装置は、複数の動的フォーマット変換情報をオーディオメタデータに含み得る。本発明の一実施形態によると、オーディオメタデータ提供装置は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態（例えば、図５に示す変換マトリックス５３０、５４０）にオーディオメタデータに記録することができる。

図７は、本発明の一実施形態に係る多チャネルオーディオデータ再生装置が多チャネルオーディオデータのフォーマットを変換した後、これを再生する動作を示したフローチャートである。

ステップＳ７１０において、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ及びオーディオメタデータを受信する。本発明の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供されたり、別に提供されてもよい。本発明の一実施形態によると、オーディオメタデータは、リアルタイムで多チャネルオーディオデータ再生装置に受信されたり、又は、多チャネルオーディオデータ再生装置に予め送信されて多チャネルオーディオデータ再生装置のバッファ、メモリのような格納媒体に格納されてもよい。また、オーディオメタデータは、ＣＤ−ＲＯＭ、ＣＤ−ＲＷ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷなどのような光記録媒体に格納されて受信され得る。

ステップＳ７２０において、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットが異なる場合、多チャネルオーディオデータ再生装置は、オーディオメタデータで動的フォーマット変換情報を識別することになる。本発明の一実施形態によると、オーディオメタデータは、１つ以上の動的フォーマット変換情報を含んでもよく、この場合、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ再生装置の第２フォーマットに対応する動的フォーマット変換情報を識別することができる。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。

オーディオメタデータで識別した動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。動的フォーマット変換情報の複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。動的フォーマット変換情報の再生区間ごとに設定されたフォーマット変換方式は、相異に設定されるか、又は部分的に繰り返されるように設定され得る。

ステップＳ７３０において、多チャネルオーディオデータ再生装置は、識別した動的フォーマット変換情報によって多チャネルオーディオデータの著作者が設定した第１フォーマットで多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換を行う。本発明の一実施形態によると、変換する再生区間は、動的フォーマット変換情報によって同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、フォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換したり、部分的に繰り返されるように変換してもよい。

ステップＳ７４０において、多チャネルオーディオデータ再生装置は、変換された多チャネルオーディオデータを再生する。多チャネルオーディオデータ再生装置は、第２フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとが互いに同一な場合、多チャネルオーディオデータ再生装置は変換を行うことなく、多チャネルオーディオデータを再生することができる。

本発明の実施形態に係る方法は、多様なコンピュータ手段を介して様々な処理を実行することができるプログラム命令の形態で実現され、コンピュータで読取可能な記録媒体に記録されてもよい。コンピュータ読取可能な媒体は、プログラム命令、データファイル、データ構造などのうち１つまたはその組合せを含んでもよい。媒体に記録されるプログラム命令は、本発明の目的のために特別に設計されて構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知のものであり、使用可能なものであってもよい。コンピュータ読取可能な記録媒体の例としては、ハードディスク、フロッピー（登録商標）ディスク及び磁気テープのような磁気媒体、ＣＤ−ＲＯＭ、ＤＶＤのような光記録媒体、光ディスクのような光磁気媒体、及びＲＯＭ、ＲＡＭ、フラッシュメモリなどのようなプログラム命令を保存して実行するように特別に構成されたハードウェア装置が含まれてもよい。プログラム命令の例には、コンパイラによって作られるような機械語コードだけでなく、インタープリタなどを用いてコンピュータによって実行できる高級言語コードが含まれる。前記したハードウェア装置は、本発明の動作を行うために１つ以上のソフトウェアモジュールとして動作するように構成されてもよく、その逆も同様である。

上述したように、本発明を限定された実施形態と図面によって説明したが、本発明は、上記の実施形態に限定されることなく、本発明が属する分野における通常の知識を有する者であれば、このような実施形態から多様な修正及び変形が可能である。

したがって、本発明の範囲は、開示された実施形態に限定されるものではなく、特許請求の範囲だけではなく特許請求の範囲と均等なものなどによって定められるものである。

３１０：動的フォーマット変換情報
３２０：フォーマット変換方式Ｋ
３３０：フォーマット変換方式Ｍ
３４０：フォーマット変換方式Ｌ

Claims

第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するデータ識別部と、
前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するオーディオデータ変換部と、
前記第２フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部と、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、多チャネルオーディオデータ再生装置。
前記多チャネルオーディオデータの再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有する、請求項１に記載の多チャネルオーディオデータ再生装置。
前記多チャネルオーディオデータのフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換する、請求項１に記載の多チャネルオーディオデータ再生装置。
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される、請求項１に記載の多チャネルオーディオデータ再生装置。
多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、
前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、オーディオメタデータ提供方法。
前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有する、請求項５に記載のオーディオメタデータ提供方法。
第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、
前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するステップと、
前記第２フォーマットに変換された多チャネルオーディオデータを再生するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットと間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、多チャネルオーディオデータ再生方法。
前記多チャネルオーディオデータの再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有する、請求項７に記載の多チャネルオーディオデータ再生方法。
前記多チャネルオーディオデータのフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換する、請求項７に記載の多チャネルオーディオデータ再生方法。
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される、請求項７に記載の多チャネルオーディオデータ再生方法。