JP7166398B2 - Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion - Google Patents
Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion Download PDFInfo
- Publication number
- JP7166398B2 JP7166398B2 JP2021113487A JP2021113487A JP7166398B2 JP 7166398 B2 JP7166398 B2 JP 7166398B2 JP 2021113487 A JP2021113487 A JP 2021113487A JP 2021113487 A JP2021113487 A JP 2021113487A JP 7166398 B2 JP7166398 B2 JP 7166398B2
- Authority
- JP
- Japan
- Prior art keywords
- audio data
- format
- channel audio
- format conversion
- dynamic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
- H04S5/02—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation of the pseudo four-channel type, e.g. in which rear channel signals are derived from two-channel stereo signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
Description
本発明は多チャネルオーディオデータ再生方法に関し、より詳しくは、多チャネルオーディオデータの様々なフォーマット間の変換方法に関する。 The present invention relates to a method for reproducing multi-channel audio data, and more particularly to a method for converting between various formats of multi-channel audio data.
３ＤＴＶ、３Ｄシネマ、ＵＨＤＴＶなど次世代コンテンツ再生環境に対する研究開発が持続しながら、オーディオも多チャネルラウドスピーカを用いる音響再生環境に素早い変化が行われている。 As the research and development of the next-generation contents reproduction environment such as 3DTV, 3D cinema, and UHDTV continues, the sound reproduction environment using multi-channel loudspeakers is rapidly changing.
映画館及びＨＤＴＶのための立体音響の５．１チャネルシステム以後に上りチャネルを含む様々なマルチャネルオーディオシステムが導入され、ＩＴＵ－Ｒ（Ｉｎｔｅｒｎａｔｉｏｎａｌ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎ Ｕｎｉｏｎ Ｒａｄｉｏｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｓｅｃｔｏｒ）では、最近Ｒｅｃｏｍｍｅｎｄａｔｉｏｎ ＢＳ．２０５１を制定して１０．２チャネル、１３．１チャネル、２２．２チャネルなどをはじめとする総８個の多チャネルフォーマットを次世代オーディオシステム（ａｄｖａｎｃｅｄ ｓｏｕｎｄ ｓｙｓｔｅｍ）として定義した。したがって、これからは様々なフォーマットにベースを置いたオーディオコンテンツが製造される可能性が極めて高まっている。 After stereophonic 5.1 channel systems for movie theaters and HDTV, various multi-channel audio systems including uplink channels were introduced, and the International Telecommunication Union Radiocommunications Sector (ITU-R) recently released the Recommendation BS. 2051 was enacted and a total of 8 multi-channel formats including 10.2 channel, 13.1 channel and 22.2 channel were defined as an advanced sound system. Therefore, it is highly likely that audio content based on various formats will be produced in the future.
このような環境では、１つのフォーマットに製造されたコンテンツが異なるフォーマットに再生する可能性も極めて高いため、コンテンツ間の適切な変換方法が求められている。従来には、コンテンツの多チャネルオーディオフォーマットから再生環境側の新しい多チャネルオーディオフォーマットにフォーマット変換することにおいて一括的な変換を行った。しかし、このような一括の変換方法は、コンテンツ著作者の著作意図を毀損し、意図とは異なる変換を行う恐れがあるという短所がある。 In such an environment, it is very likely that content produced in one format will be played back in a different format, so an appropriate conversion method between content is required. Conventionally, collective conversion was performed in format conversion from the multi-channel audio format of the content to the new multi-channel audio format of the playback environment. However, such a batch conversion method has the disadvantage that it may damage the author's intention of authoring the content, and may result in a conversion that is not intended.
本発明の目的は、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるようにフォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提案する。 SUMMARY OF THE INVENTION An object of the present invention is to provide an audio metadata providing apparatus and method for providing a dynamic format conversion method for converting between various formats of multi-channel audio data so as to completely preserve the copyright intention of the author. Also proposed is an apparatus and method for converting and reproducing a format by a dynamic format conversion method, and a recording medium on which the dynamic format conversion method is recorded.
本発明の目的は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境による第２フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供する。 An object of the present invention is to include dynamic format conversion information capable of converting between a first format set by the author of multi-channel audio data and a second format according to the reproduction environment of multi-channel audio data. Provided is an audio metadata providing apparatus and method capable of generating audio metadata.
本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別して第１フォーマットから第２フォーマットに多チャネルオーディオデータを変換した後再生する多チャネルオーディオデータ再生装置及び方法を提供する。 An object of the present invention is to reproduce multi-channel audio data by identifying audio metadata including multi-channel audio data and dynamic format conversion information, converting the multi-channel audio data from a first format to a second format, and reproducing the multi-channel audio data. An apparatus and method are provided.
本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供する。 SUMMARY OF THE INVENTION An object of the present invention is to provide a computer-readable recording medium on which audio metadata including multi-channel audio data and dynamic format conversion information is recorded.
本発明の一実施形態に係るオーディオメタデータ提供装置は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別する変換情報識別部と、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するオーディオメタデータ生成部とを含む。 An apparatus for providing audio metadata according to an embodiment of the present invention provides multi-channel audio data with a first format set by the author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data. and an audio metadata generator for generating audio metadata including the identified dynamic format conversion information.
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。 The dynamic format conversion information includes a plurality of format conversion methods between a first format set by the author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data. It is set for each playback segment.
前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections for which the plurality of format conversion methods are set may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 A reproduction environment for the multi-channel audio data may be determined based on a layout of speakers for reproducing the multi-channel audio data.
前記複数のフォーマット変換方式は、前記第１フォーマットから第２フォーマットに変換するためのマトリックスを含んでもよい。 The plurality of format conversion schemes may include a matrix for converting from the first format to the second format.
前記動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定されてもよい。 The dynamic format conversion information may be set differently for each playback section of multi-channel audio data, or may be set to be partially repeated.
本発明の一実施形態に係る多チャネルオーディオデータ再生装置は、第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するデータ識別部と、前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するオーディオデータ変換部と、前記第２フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部とを含む。 A multi-channel audio data reproducing apparatus according to an embodiment of the present invention reproduces multi-channel audio data produced in a first format and a first format set by an author of multi-channel audio data from audio metadata and multi-channel audio data. a data identification unit for identifying dynamic format conversion information between a data reproduction environment and a second format; and converting the first format multi-channel audio data to a second format using the dynamic format conversion information. an audio data conversion unit for converting; and an audio data reproduction unit for reproducing the multi-channel audio data converted into the second format.
前記多チャネルオーディオデータ変換部の再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections of the multi-channel audio data converter may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータ変換部のフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換してもよい。 The format conversion method of the multi-channel audio data converter may be different for each playback section of the multi-channel audio data, or may be partially repeated.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 A reproduction environment for the multi-channel audio data may be determined based on a layout of speakers for reproducing the multi-channel audio data.
本発明の一実施形態に係るオーディオメタデータ提供方法は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するステップとを含む。 A method for providing audio metadata according to an embodiment of the present invention is a method for providing multi-channel audio data in which a first format set by an author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data are converted. and generating audio metadata including the identified dynamic format conversion information.
前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections for which the plurality of format conversion methods are set may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 A reproduction environment for the multi-channel audio data may be determined based on a layout of speakers for reproducing the multi-channel audio data.
前記複数のフォーマット変換方式は、前記第１フォーマットから第２フォーマットに変換するためのマトリックスを含んでもよい。 The plurality of format conversion schemes may include a matrix for converting from the first format to the second format.
前記動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定されてもよい。 The dynamic format conversion information may be set differently for each playback section of multi-channel audio data, or may be set to be partially repeated.
本発明の一実施形態に係る多チャネルオーディオデータ再生方法は、第１フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するステップと、前記第２フォーマットに変換された多チャネルオーディオデータを再生するステップとを含む。 A method for reproducing multi-channel audio data according to an embodiment of the present invention includes multi-channel audio data produced in a first format, and multi-channel audio data in a first format set by an author of multi-channel audio data from audio metadata and multi-channel audio data. identifying dynamic format conversion information to and from a second format based on the playback environment of the data; and converting multi-channel audio data in said first format to a second format using said dynamic format conversion information. and playing back the multi-channel audio data converted to the second format.
前記多チャネルオーディオデータ変換部の再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections of the multi-channel audio data converter may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータ変換部のフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換してもよい。 The format conversion method of the multi-channel audio data converter may be different for each playback section of the multi-channel audio data, or may be partially repeated.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 A reproduction environment for the multi-channel audio data may be determined based on a layout of speakers for reproducing the multi-channel audio data.
本発明の一実施形態に係るコンピュータで読み出し可能な記録媒体は、１つ以上のチャネルから構成された多チャネルオーディオデータと、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の動的フォーマット変換情報が含まれたオーディオメタデータとが記録される。 A computer-readable recording medium according to an embodiment of the present invention includes multi-channel audio data composed of one or more channels, and a first format set by the author of the multi-channel audio data in the multi-channel audio data. and audio metadata including dynamic format conversion information between the multi-channel audio data and a second format based on the playback environment of the multi-channel audio data.
本発明の一実施形態によると、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるよう、フォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法、及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提供することができる。 According to one embodiment of the present invention, providing audio metadata to provide a dynamic format conversion method for converting between various formats of multi-channel audio data so that the author's authoring intent is fully preserved. It is possible to provide an apparatus, a method, and a recording medium in which the format is converted and played back by the dynamic format conversion method, the method, and the dynamic format conversion method are recorded.
本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供することができる。 According to one embodiment of the present invention, a dynamic format conversion capable of converting between a first author-set format of the multi-channel audio data and a second format based on the playback environment of the multi-channel audio data. It is possible to provide an audio metadata providing apparatus and method capable of generating audio metadata including information.
本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別し、第１フォーマットから第２フォーマットに多チャネルオーディオデータを変換した後、再生する多チャネルオーディオデータ再生装置及び方法を提供することができる。 According to an embodiment of the present invention, the multi-channel audio data and the audio metadata including the dynamic format conversion information are identified, the multi-channel audio data is converted from the first format to the second format, and then played back. A channel audio data reproduction apparatus and method can be provided.
本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供することができる。 According to an embodiment of the present invention, it is possible to provide a computer-readable recording medium on which audio metadata including multi-channel audio data and dynamic format conversion information is recorded.
以下、本発明の実施形態について添付の図面を参照しながら詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
図１は、本発明の一実施形態に係るオーディオメタデータ提供装置１１０とオーディオメタデータ１４０及び多チャネルオーディオデータ再生装置１６０を示す図である。
FIG. 1 is a diagram showing an audio
図１を参考すると、オーディオメタデータ提供装置１１０は、動的フォーマット変換情報を識別する変換情報識別部１２０及び識別された動的フォーマット変換情報を含むオーディオメタデータ１４０を生成するオーディオメタデータ生成部１３０を含む。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。
Referring to FIG. 1, the audio
本発明の一実施形態によると、変換情報識別部１２０は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。更なる実施形態によると、変換情報識別部１２０は、１つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。
According to one embodiment of the present invention,
本発明の一実施形態によると、変換情報識別部１２０で識別された動的フォーマット変換情報に基づいてオーディオメタデータを生成するオーディオメタデータ生成部１３０が提供される。オーディオメタデータ生成部１３０は、オーディオメタデータに識別された複数の動的フォーマット変換情報を含む。本発明の一実施形態によると、オーディオメタデータ生成部１３０は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態に含むことができる。更なる実施形態によると、オーディオメタデータ生成部１３０は、メタデータに識別された動的フォーマット変換情報と共に、メタデータに一般的に含まれる情報（例えば、著作者、レコード名、発売年度など）を含んでもよい。
According to one embodiment of the present invention, an
本発明の一実施形態によると、オーディオメタデータ提供装置１１０は、多チャネルオーディオデータ提供装置の一部の構成として含まれている。
According to one embodiment of the present invention,
オーディオメタデータ提供装置１１０から動的フォーマット変換情報１５０を含むオーディオメタデータ１４０が提供される。本発明の一実施形態によると、オーディオメタデータ１４０は、動的フォーマット変換情報１５０だけではなく、メタデータに一般的に含まれる情報を含んでもよい。本発明の他の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供され得る。本発明の更なる一実施形態によると、オーディオメタデータ１４０は、リアルタイムで多チャネルオーディオデータ再生装置１６０に送信されたり、又は、多チャネルオーディオデータ再生装置１６０に予め送信されて多チャネルオーディオデータ再生装置１６０のバッファ、メモリのような格納媒体に格納され得る。又は、オーディオメタデータ１４０は、ＣＤ－ＲＯＭ、ＣＤ－ＲＷ、ＤＶＤ－Ｒ、ＤＶＤ－ＲＷなどのような光記録媒体に格納されて配布され得る。
多チャネルオーディオデータを動的フォーマット変換情報によってフォーマット間に変換した後、これを再生できる多チャネルオーディオデータ再生装置１６０が提供される。多チャネルオーディオデータ再生装置１６０は、動的フォーマット変換情報を識別するデータ識別部１７０、識別された動的フォーマット変換情報でフォーマット間の変換を行うオーディオデータ変換部１８０、及び変換された多チャネルオーディオデータを再生するオーディオデータ再生部１９０を含む。
A multi-channel audio
本発明の一実施形態によると、データ識別部１７０は、オーディオメタデータ１４０で多チャネルオーディオデータの再生環境に基づいた第２フォーマットに該当する動的フォーマット変換情報を識別する。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。本発明の一実施形態によると、データ識別部１７０は、オーディオメタデータに記録された１つ以上の動的フォーマット変換情報のうち、第２フォーマットに対応する動的フォーマット変換情報を選択して識別することができる。
According to an embodiment of the present invention, the
本発明の一実施形態によると、オーディオデータ変換部１８０は、識別した動的フォーマット変換情報によって多チャネルオーディオデータを多チャネルオーディオ著作者が設定した第１フォーマットから多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換する。動的フォーマット変換情報は、第１フォーマットと第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。
According to an embodiment of the present invention, the audio
本発明の一実施形態によると、オーディオデータ変換部１８０は、再生時間により動的フォーマット変換情報から再生時間を含む再生区間を識別し、動的フォーマット変換情報で当該再生区間に設定されたフォーマット変換方式を識別して第１フォーマットと第２フォーマットとの間のフォーマット変換を行う。本発明の一実施形態によると、複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、オーディオデータ変換部１８０は、動的フォーマット変換情報によって再生区間ごとに互いに異なるフォーマット変換方式を用いて変換するか、又は部分的にフォーマット変換方式を繰り返されるように用いて変換することができる。
According to an embodiment of the present invention, the audio
本発明の一実施形態によると、第２フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部１９０が提供される。第２フォーマットは多チャネルオーディオデータの再生環境に基づいて、多チャネルオーディオデータの再生環境は多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。オーディオデータ再生部１９０は、１つ以上のスピーカの出力部から構成される。オーディオデータ再生部１９０は、第２フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。
An embodiment of the present invention provides an audio
本発明の一実施形態によると、オーディオデータ再生部１９０は、出力部に接続されたスピーカの個数を把握して多チャネルオーディオデータの再生環境を識別する。さらに、オーディオデータ再生部１９０は、スピーカの個数だけではなく、各スピーカの位置を識別したり、ユーザから再生環境に関する情報が入力されることで再生環境を識別することができる。
According to an embodiment of the present invention, the audio
図２は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマットを一括的に変換する一例を示す図である。 FIG. 2 is a diagram showing an example of collectively converting the format of multi-channel audio data according to an embodiment of the present invention.
多チャネルオーディオデータは、多チャネルオーディオデータの著作者が設定した多チャネルオーディオデータフォーマットの第１フォーマットに合わせて製作される。多チャネルオーディオデータを再生する側の多チャネルオーディオデータフォーマットの第２フォーマットは、多チャネルオーディオデータの再生環境に基づく。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されるため、第２フォーマットは、多チャネルオーディオデータの第１フォーマットと異なり得る。本発明の一実施形態によると、多チャネルオーディオデータの再生環境に基づく第２フォーマットが第１フォーマットと異なる場合、多チャネルオーディオデータ再生装置のオーディオデータ変換部は、一括的なフォーマット変換方式２００により変換を行うことができる。
The multi-channel audio data is produced according to the first format of the multi-channel audio data format established by the author of the multi-channel audio data. A second format of the multi-channel audio data format on the side that reproduces the multi-channel audio data is based on the reproduction environment of the multi-channel audio data. The second format may differ from the first format of the multi-channel audio data because the playback environment for the multi-channel audio data is determined based on the layout of the speakers through which the multi-channel audio data is played. According to one embodiment of the present invention, when the second format based on the reproduction environment of the multi-channel audio data is different from the first format, the audio data conversion unit of the multi-channel audio data reproducing apparatus performs the batch
図２を参照すると、第１フォーマットは、１０．２チャネルフォーマットであると仮定する。一括的なフォーマット変換方式２００によると、第２フォーマットが５．１チャネルフォーマットである場合、聴者の左側の前面スピーカＬは第１フォーマットの左側の前面スピーカＬと左側上段スピーカＬＨの線形結合（ｌｉｎｅａｒ ｃｏｍｂｉｎａｔｉｏｎ）として決定される。他の例として、第２フォーマットが７．１チャネルフォーマットである場合、右側の後面スピーカＲＢは、第１フォーマットの右側の後面スピーカＲＢと中央スピーカＣＨの線形結合に決定される。
Referring to FIG. 2, assume that the first format is a 10.2 channel format. According to the collective
一括的なフォーマット変換方式２００によると、フォーマット変換方式はチャネル間の線形結合であることから、非線形変換はできない。また、再生区間ごとにフォーマット変換方式は変化されない。本発明の一実施形態によると、多チャネルオーディオデータの再生区間ごとに１つ以上のフォーマット変換方式が設定された 動的フォーマット変換情報が提供される。また、第１フォーマットと第２フォーマットとの間の非線形変換をサポートするフォーマット変換方式が提供される。
According to the collective
図３は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマット変換を行うことのできる動的フォーマット変換情報を示す図である。 FIG. 3 is a diagram illustrating dynamic format conversion information capable of format conversion of multi-channel audio data according to an embodiment of the present invention.
図３を参考すると、動的フォーマット変換情報３１０は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式（例えば、フォーマット変換方式Ｋ３２０、Ｌ３４０、Ｍ３３０）が多チャネルオーディオデータの再生区間ごとに設定されたものである。
Referring to FIG. 3, the dynamic
本発明の一実施形態によると、それぞれのフォーマット変換方式は、同一の第２フォーマットにフォーマットを変換する。ただし、変換する方式は互いに異なってもよい。図３を参照して説明すると、フォーマット変換方式Ｋ３２０は、第１フォーマットの複数の左側スピーカＬｅｆｔ１とＬｅｆｔ２の線形結合で第２フォーマットの左側スピーカＬｅｆｔの出力データを決定する。フォーマット変換方式Ｍ３３０は、第１フォーマットの複数の左側スピーカのうちの１つであるＬｅｆｔ１だけで第２フォーマットの左側スピーカＬｅｆｔの出力データを決定する。本発明の一実施形態によると、それぞれの変換方式は非線形変換を含むことができる。 According to one embodiment of the invention, each format conversion scheme converts formats to the same second format. However, the conversion methods may be different from each other. Referring to FIG. 3, the format conversion method K320 determines the output data of the left speaker Left of the second format by linearly combining the plurality of left speakers Left 1 and Left 2 of the first format. The format conversion method M330 determines the output data of the second format left speaker Left using only Left 1 , which is one of the plurality of left speakers of the first format. According to one embodiment of the invention, each transform scheme may include a non-linear transform.
本発明の一実施形態によると、多チャネルオーディオデータ再生装置は、動的フォーマット変換情報から再生区間ごとに設定されたフォーマット変換方式を識別して変換することができる。図３を参照すると、多チャネルオーディオデータ再生装置は、再生区間ｔ＝０からｔ＝ｔ１まで多チャネルオーディオデータをフォーマット変換方式Ｋ３２０によって変換する。多チャネルオーディオデータ再生装置は、以後の再生区間ｔ＝ｔ１からｔ＝ｔ２まで多チャネルオーディオデータをフォーマット変換方式Ｍ３３０によって変換する。同様に、多チャネルオーディオデータ再生装置は、再生区間ｔ＝ｔ３からｔ＝ｔ４まではフォーマット変換方式Ｌ３４０によって変換を行い、以後の再生区間でも同じ作業を繰り返す。 According to an embodiment of the present invention, a multi-channel audio data reproducing apparatus can identify and convert a format conversion method set for each reproduction interval from dynamic format conversion information. Referring to FIG. 3, the multi-channel audio data reproducing apparatus converts the multi-channel audio data from the reproduction interval t= 0 to t=t1 by the format conversion method K320. The multi-channel audio data reproducing apparatus converts the multi-channel audio data from the subsequent reproduction interval t =t1 to t=t2 by the format conversion method M330. Similarly, the multi - channel audio data reproducing apparatus performs conversion by the format conversion method L340 in the reproduction interval from t=t3 to t=t4, and repeats the same operation in subsequent reproduction intervals.
本発明の一実施形態によると、動的フォーマット変換情報３１０は、多チャネルオーディオデータの再生区間ごとにフォーマット変換方式を相異に設定するか、又は部分的に繰り返されるように設定してもよい。図３を参照すると、フォーマット変換方式Ｋ３２０は、再生区間ｔ＝０からｔ＝ｔ１だけではなく、再生区間ｔ＝ｔ２からｔ＝ｔ３でも再び設定され得る。本発明の一実施形態によると、フォーマット変換方式は、一括的なフォーマット変換方式や線形結合による変換だけではなく、非線形変換も含むことができる。
According to an embodiment of the present invention, the dynamic
本発明の一実施形態によると、フォーマット変換方式が設定されたそれぞれの再生区間は互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。図３を参照すると、再生区間ｔ＝ｔ１からｔ＝ｔ２と再生区間ｔ＝ｔ７からｔ＝ｔ８は互いに同じ再生長さを有し得る。 According to an embodiment of the present invention, each playback section set with the format conversion method may have the same playback length or different playback lengths. Referring to FIG. 3, the playback interval t=t1 to t = t2 and the playback interval t= t7 to t=t8 may have the same playback length.
図４は、本発明の一実施形態に係る１つ以上の動的フォーマット変換情報を含むオーディオメタデータを示す図である。 FIG. 4 is a diagram illustrating audio metadata including one or more dynamic format conversion information according to one embodiment of the invention.
図４を参考すると、多チャネルオーディオデータの再生環境が様々であるため、オーディオメタデータ１４０は、１つ以上の動的フォーマット変換情報４２０、４３０を含む。多チャネルオーディオデータ再生装置１６０は、多チャネルオーディオデータの再生環境に基づいた第２フォーマットに該当する動的フォーマット変換情報を選択し、多チャネルオーディオデータのフォーマットを変換する。再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。
Referring to FIG. 4, the
図４を参照すると、多チャネルオーディオデータの著作者が設定した第１フォーマットが２２．２チャネルフォーマットであり、多チャネルオーディオデータの再生環境に基づいた第２フォーマットが１０．２チャネルフォーマットであると仮定する。多チャネルオーディオデータ再生装置１６０のデータ識別部１７０は、オーディオメタデータの複数の動的フォーマット変換情報４２０、４３０のうち第２フォーマットに対応する動的フォーマット変換情報（１）４２０を識別する。同様に、多チャネルオーディオデータの再生環境に基づいた第２フォーマットが５．１チャネルフォーマットであれば、多チャネルオーディオデータ再生装置のデータ識別部１７０は動的フォーマット変換情報（２）４３０を識別する。
Referring to FIG. 4, the first format set by the author of the multi-channel audio data is the 22.2-channel format, and the second format based on the reproduction environment of the multi-channel audio data is the 10.2-channel format. Assume. The
先に仮定した１０．２チャネルフォーマットで、オーディオデータ変換部１８０は、識別された動的フォーマット変換情報（１）４２０によって多チャネルオーディオデータのフォーマットを変換する。すなわち、オーディオデータ変換部１８０は、再生区間ごとに設定された複数のフォーマット変換方式４４０に基づいて多チャネルオーディオデータを再生区間ｔ＝０からｔ＝ｔ１まではフォーマット変換方式Ｋ４５０によって変換し、再生区間ｔ＝ｔ１からｔ＝ｔ２まではフォーマット変換方式Ｍ４６０によって変換する。本発明の一実施形態によると、動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定され得る。また、フォーマット変換方式が設定されたそれぞれの再生区間の再生長さも互いに異なるか、同じであってもよい。図４を参考すると、フォーマット変換方式Ｋ４５０は、再生区間ｔ＝０からｔ＝ｔ１で用いられるが、その後の再生区間でも繰り返し用いてもよい。また、再生区間ｔ＝０からｔ＝ｔ１と再生区間ｔ＝ｔ１からｔ＝ｔ２の再生長さも互いに異なるか、同じであってもよい。
With the 10.2 channel format assumed above, the
図５は、本発明の一実施形態に係るマトリックス方式を用いてフォーマット間の変換を行う実施形態を説明するための図である。 FIG. 5 is a diagram for explaining an embodiment of converting between formats using a matrix scheme according to an embodiment of the present invention.
図５を参考すると、動的フォーマット変換情報でそれぞれのフォーマット変換方式は、変換マトリックス５３０、５４０に格納され得る。変換マトリックスは、多チャネルオーディオデータの著作者が設定した第１フォーマットから多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換するためのマトリックスである。オーディオデータ変換部は、第１フォーマットチャネルマトリックスを変換マトリックスに適用して第２フォーマットチャネルマトリックスを出力することで、第１フォーマットから第２フォーマットに変換することができる。
Referring to FIG. 5, each format conversion scheme in dynamic format conversion information may be stored in
図５を参照すると、多チャネルオーディオデータの著作者は、１０．２チャネルフォーマット（第１フォーマット）に多チャネルオーディオデータを製作５１０したと仮定し、多チャネルオーディオデータの再生環境は、５．１チャネルフォーマット（第２フォーマット）であると仮定する。この場合、フォーマット変換５５０を参考すると、オーディオデータ変換部は、第１フォーマットチャネルマトリックス５８０（チャネルマトリックスの各元素は各チャネルに対応する）を変換マトリックス５７０に適用して第２フォーマットチャネルマトリックス５６０を出力する方式によりフォーマットを変換する。したがって、図５に示す場合、第１フォーマットの１０．２チャネルフォーマットは１２個のチャネルを有し、第２フォーマットの５．１チャネルフォーマットは６個のチャネルを有するため、フォーマット変換方式に関する情報を含む変換マトリックス５３０、５４０は６行１２列に構成される。
Referring to FIG. 5, it is assumed that the author of the multi-channel audio data produced 510 the multi-channel audio data in 10.2 channel format (first format), and the reproduction environment of the multi-channel audio data is 5.1. Assume the channel format (second format). In this case, referring to the
また、オーディオデータ変換部は、再生区間ごとに設定されたフォーマット変換方式に合わせて変換マトリックス５７０を交換して変換することができる。例えば、図５に示す動的フォーマット変換情報５２０で、再生区間ｔ＝０からｔ＝ｔ１まで変換方式Ｋが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス５７０を変換方式Ｋに対する変換マトリックス５３０に設定して変換を行う。再生区間ｔ＝ｔ１からｔ＝ｔ２まで変換方式Ｍが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス５７０を変換方式Ｍに対する変換マトリックス５４０に設定して変換を行う。
Also, the audio data conversion unit can convert by exchanging the
図６は、本発明の一実施形態に係るオーディオメタデータ提供装置が動的フォーマット変換情報の含まれたオーディオメタデータを提供する動作を示したフローチャートである。 FIG. 6 is a flowchart illustrating an operation of providing audio metadata including dynamic format conversion information by an audio metadata providing apparatus according to an embodiment of the present invention.
ステップＳ６１０において、オーディオメタデータ提供装置は、動的フォーマット変換情報を識別する。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。本発明の一実施形態によると、オーディオメタデータ提供装置は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。本発明の他の実施形態によると、多チャネルオーディオデータ再生装置は、１つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。 In step S610, the audio metadata provider identifies dynamic format conversion information. The dynamic format conversion information indicates that a plurality of format conversion methods between a first format set by the author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data are used to reproduce the multi-channel audio data. It is set for each section. According to one embodiment of the invention, the audio metadata provider identifies dynamic format conversion information from authors of multi-channel audio data. According to another embodiment of the present invention, a multi-channel audio data playback device identifies a plurality of dynamic format conversion information from one or more audio metadata.
ステップＳ６２０において、オーディオメタデータ提供装置は、識別された動的フォーマット変換情報を含むオーディオメタデータを生成する。ここで、オーディオメタデータ提供装置は、オーディオメタデータに一般的に含まれる情報（例えば、著作者、レコード名、発売年度など）を含んでもよい。本発明の一実施形態によると、オーディオメタデータ提供装置は、複数の動的フォーマット変換情報をオーディオメタデータに含み得る。本発明の一実施形態によると、オーディオメタデータ提供装置は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態（例えば、図５に示す変換マトリックス５３０、５４０）にオーディオメタデータに記録することができる。
In step S620, the audio metadata provider generates audio metadata including the identified dynamic format conversion information. Here, the audio metadata providing apparatus may include information generally included in audio metadata (for example, author, record name, release year, etc.). According to one embodiment of the present invention, the audio metadata provider may include multiple pieces of dynamic format conversion information in the audio metadata. According to an embodiment of the present invention, the audio metadata providing apparatus records each format conversion method of the dynamic format conversion information into audio metadata in the form of a matrix (for example,
図７は、本発明の一実施形態に係る多チャネルオーディオデータ再生装置が多チャネルオーディオデータのフォーマットを変換した後、これを再生する動作を示したフローチャートである。 FIG. 7 is a flow chart showing an operation of reproducing multi-channel audio data after converting the format of the multi-channel audio data by the multi-channel audio data reproducing apparatus according to an embodiment of the present invention.
ステップＳ７１０において、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ及びオーディオメタデータを受信する。本発明の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供されたり、別に提供されてもよい。本発明の一実施形態によると、オーディオメタデータは、リアルタイムで多チャネルオーディオデータ再生装置に受信されたり、又は、多チャネルオーディオデータ再生装置に予め送信されて多チャネルオーディオデータ再生装置のバッファ、メモリのような格納媒体に格納されてもよい。また、オーディオメタデータは、ＣＤ－ＲＯＭ、ＣＤ－ＲＷ、ＤＶＤ－Ｒ、ＤＶＤ－ＲＷなどのような光記録媒体に格納されて受信され得る。 In step S710, the multi-channel audio data reproducing device receives multi-channel audio data and audio metadata. According to one embodiment of the invention, audio metadata may be provided with multi-channel audio data or provided separately. According to an embodiment of the present invention, the audio metadata is received by the multi-channel audio data reproducing device in real time, or transmitted in advance to the multi-channel audio data reproducing device and stored in the buffer, memory of the multi-channel audio data reproducing device. may be stored in a storage medium such as Audio metadata may also be stored and received on optical recording media such as CD-ROM, CD-RW, DVD-R, DVD-RW, and the like.
ステップＳ７２０において、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットが異なる場合、多チャネルオーディオデータ再生装置は、オーディオメタデータで動的フォーマット変換情報を識別することになる。本発明の一実施形態によると、オーディオメタデータは、１つ以上の動的フォーマット変換情報を含んでもよく、この場合、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ再生装置の第２フォーマットに対応する動的フォーマット変換情報を識別することができる。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。 In step S720, if the first format set by the author of the multi-channel audio data and the second format based on the playback environment of the multi-channel audio data are different, the multi-channel audio data playback device uses the audio metadata to generate a dynamic format. It will identify transformation information. According to one embodiment of the present invention, the audio metadata may include one or more dynamic format conversion information, in which case the multi-channel audio data reproducing device converts Corresponding dynamic format conversion information can be identified. The reproduction environment for multi-channel audio data is determined based on the layout of speakers that reproduce the multi-channel audio data.
オーディオメタデータで識別した動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。動的フォーマット変換情報の複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。動的フォーマット変換情報の再生区間ごとに設定されたフォーマット変換方式は、相異に設定されるか、又は部分的に繰り返されるように設定され得る。 The dynamic format conversion information identified in the audio metadata includes multiple format conversion schemes between a first format established by the author of the multi-channel audio data and a second format based on the playback environment of the multi-channel audio data. It is set for each reproduction section of multi-channel audio data. Playback segments in which a plurality of format conversion methods of dynamic format conversion information are set may have the same playback length or different playback lengths. The format conversion method set for each playback section of the dynamic format conversion information may be set differently or set to be partially repeated.
ステップＳ７３０において、多チャネルオーディオデータ再生装置は、識別した動的フォーマット変換情報によって多チャネルオーディオデータの著作者が設定した第１フォーマットで多チャネルオーディオデータの再生環境に基づいた第２フォーマットに変換を行う。本発明の一実施形態によると、変換する再生区間は、動的フォーマット変換情報によって同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、フォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換したり、部分的に繰り返されるように変換してもよい。 In step S730, the multi-channel audio data reproducing apparatus converts the first format set by the author of the multi-channel audio data into a second format based on the reproduction environment of the multi-channel audio data according to the identified dynamic format conversion information. conduct. According to an embodiment of the present invention, the playback segments to be converted may have the same playback length or different playback lengths according to the dynamic format conversion information. According to an embodiment of the present invention, the format conversion method may be different for each reproduction section of multi-channel audio data or may be partially repeated.
ステップＳ７４０において、多チャネルオーディオデータ再生装置は、変換された多チャネルオーディオデータを再生する。多チャネルオーディオデータ再生装置は、第２フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとが互いに同一な場合、多チャネルオーディオデータ再生装置は変換を行うことなく、多チャネルオーディオデータを再生することができる。 In step S740, the multi-channel audio data reproducing device reproduces the converted multi-channel audio data. The multi-channel audio data reproducing device outputs audio data from speakers corresponding to each channel with respect to the multi-channel audio data converted into the second format. According to an embodiment of the present invention, when the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are the same, the multi-channel audio data reproducing apparatus Multi-channel audio data can be played without conversion.
本発明の実施形態に係る方法は、多様なコンピュータ手段を介して様々な処理を実行することができるプログラム命令の形態で実現され、コンピュータで読取可能な記録媒体に記録されてもよい。コンピュータ読取可能な媒体は、プログラム命令、データファイル、データ構造などのうち１つまたはその組合せを含んでもよい。媒体に記録されるプログラム命令は、本発明の目的のために特別に設計されて構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知のものであり、使用可能なものであってもよい。コンピュータ読取可能な記録媒体の例としては、ハードディスク、フロッピー（登録商標）ディスク及び磁気テープのような磁気媒体、ＣＤ－ＲＯＭ、ＤＶＤのような光記録媒体、光ディスクのような光磁気媒体、及びＲＯＭ、ＲＡＭ、フラッシュメモリなどのようなプログラム命令を保存して実行するように特別に構成されたハードウェア装置が含まれてもよい。プログラム命令の例には、コンパイラによって作られるような機械語コードだけでなく、インタープリタなどを用いてコンピュータによって実行できる高級言語コードが含まれる。前記したハードウェア装置は、本発明の動作を行うために１つ以上のソフトウェアモジュールとして動作するように構成されてもよく、その逆も同様である。 The methods according to the embodiments of the present invention may be implemented in the form of program instructions capable of executing various processes through various computer means, and may be recorded in computer-readable recording media. Computer-readable media may include one or a combination of program instructions, data files, data structures, and the like. The program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be those well known and available to those having skill in the computer software arts. may Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as optical discs, and ROMs. , RAM, flash memory, etc., specially configured to store and execute program instructions. Examples of program instructions include machine language code, such as produced by a compiler, as well as high-level language code that can be executed by a computer, such as using an interpreter. The hardware devices described above may be configured to act as one or more software modules to perform the operations of the present invention, and vice versa.
上述したように、本発明を限定された実施形態と図面によって説明したが、本発明は、上記の実施形態に限定されることなく、本発明が属する分野における通常の知識を有する者であれば、このような実施形態から多様な修正及び変形が可能である。 As described above, the present invention has been described with limited embodiments and drawings. , various modifications and variations are possible from such embodiments.
したがって、本発明の範囲は、開示された実施形態に限定されるものではなく、特許請求の範囲だけではなく特許請求の範囲と均等なものなどによって定められるものである。 Accordingly, the scope of the invention is not to be limited to the disclosed embodiments, but is to be defined by the appended claims and their equivalents, etc.
３１０：動的フォーマット変換情報
３２０：フォーマット変換方式Ｋ
３３０：フォーマット変換方式Ｍ
３４０：フォーマット変換方式Ｌ
310: Dynamic format conversion information 320: Format conversion method K
330: format conversion method M
340: format conversion method L
Claims (5)
前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するステップと、
前記第２フォーマットに変換された多チャネルオーディオデータを再生するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式を含み、
前記再生環境は、多チャネルオーディオデータが再生されるとき、スピーカのレイアウトに基づいて決定される、多チャネルオーディオデータ再生方法。 Multi-channel audio data produced in a first format and dynamically between an author-set first format of the multi-channel audio data from the audio metadata and a second format based on the playback environment of the multi-channel audio data identifying format conversion information;
converting multi-channel audio data in the first format to a second format using the dynamic format conversion information;
playing back the multi-channel audio data converted to the second format;
including
The dynamic format conversion information includes a plurality of format conversion methods between a first format set by the author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data;
A multi-channel audio data reproduction method, wherein the reproduction environment is determined based on a speaker layout when the multi-channel audio data is reproduced.
前記動的フォーマット変換情報を用いて前記第１フォーマットの多チャネルオーディオデータを第２フォーマットに変換するステップと、
前記第２フォーマットに変換された多チャネルオーディオデータを再生するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第１フォーマットと多チャネルオーディオデータの再生環境に基づいた第２フォーマットとの間の複数のフォーマット変換方式を含み、
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生されるスピーカのレイアウトに基づいて決定され、
前記多チャネルオーディオデータの再生環境に基づいた第２フォーマットが第１フォーマットと異なる場合、前記多チャネルオーディオデータの再生環境に基づいた第２フォーマットに応じて動的フォーマット変換情報が選択され、前記選択された動的フォーマット変換情報により多チャネルオーディオデータの第１フォーマットが第２フォーマットに変換される、多チャネルオーディオデータ再生方法。 Multi-channel audio data produced in a first format and dynamically between an author-set first format of the multi-channel audio data from the audio metadata and a second format based on the playback environment of the multi-channel audio data identifying format conversion information;
converting multi-channel audio data in the first format to a second format using the dynamic format conversion information;
playing back the multi-channel audio data converted to the second format;
including
The dynamic format conversion information includes a plurality of format conversion methods between a first format set by the author of the multi-channel audio data and a second format based on the reproduction environment of the multi-channel audio data;
a reproduction environment for the multi-channel audio data is determined based on a layout of speakers for reproducing the multi-channel audio data;
dynamic format conversion information is selected according to the second format based on the reproduction environment of the multi-channel audio data, if the second format based on the reproduction environment of the multi-channel audio data is different from the first format; A method for reproducing multi-channel audio data, wherein a first format of the multi-channel audio data is converted to a second format according to the dynamic format conversion information.
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20140127751 | 2014-09-24 | ||
| KR10-2014-0127751 | 2014-09-24 | ||
| KR1020150059445A KR101993348B1 (en) | 2014-09-24 | 2015-04-28 | Audio metadata encoding and audio data playing apparatus for supporting dynamic format conversion, and method for performing by the appartus, and computer-readable medium recording the dynamic format conversions |
| KR10-2015-0059445 | 2015-04-28 | ||
| JP2020018862A JP6912612B2 (en) | 2014-09-24 | 2020-02-06 | An audio metadata providing device and an audio data playback device that support dynamic format conversion, a method performed by the device, and a computer-readable recording medium on which the dynamic format conversion is recorded. |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020018862A Division JP6912612B2 (en) | 2014-09-24 | 2020-02-06 | An audio metadata providing device and an audio data playback device that support dynamic format conversion, a method performed by the device, and a computer-readable recording medium on which the dynamic format conversion is recorded. |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2021170798A JP2021170798A (en) | 2021-10-28 |
| JP7166398B2 true JP7166398B2 (en) | 2022-11-07 |
Family
ID=55799280
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015183123A Active JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
| JP2020018862A Active JP6912612B2 (en) | 2014-09-24 | 2020-02-06 | An audio metadata providing device and an audio data playback device that support dynamic format conversion, a method performed by the device, and a computer-readable recording medium on which the dynamic format conversion is recorded. |
| JP2021113487A Active JP7166398B2 (en) | 2014-09-24 | 2021-07-08 | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion |
Family Applications Before (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015183123A Active JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
| JP2020018862A Active JP6912612B2 (en) | 2014-09-24 | 2020-02-06 | An audio metadata providing device and an audio data playback device that support dynamic format conversion, a method performed by the device, and a computer-readable recording medium on which the dynamic format conversion is recorded. |
Country Status (2)
| Country | Link |
|---|---|
| JP (3) | JP6663147B2 (en) |
| KR (5) | KR101993348B1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA3219540A1 (en) | 2017-10-04 | 2019-04-11 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus, method and computer program for encoding, decoding, scene processing and other procedures related to dirac based spatial audio coding |
| KR102062260B1 (en) * | 2017-11-23 | 2020-01-03 | 구본희 | Apparatus for implementing multi-channel sound using open-ear headphone and method for the same |
| WO2024062757A1 (en) * | 2022-09-21 | 2024-03-28 | ヤマハ株式会社 | Information processing device, information processing system and information processing method |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008288935A (en) | 2007-05-18 | 2008-11-27 | Panasonic Corp | Sound processor |
| JP2011193164A (en) | 2010-03-12 | 2011-09-29 | Nippon Hoso Kyokai <Nhk> | Down-mix device of multi-channel acoustic signal and program |
Family Cites Families (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH06165079A (en) * | 1992-11-25 | 1994-06-10 | Matsushita Electric Ind Co Ltd | Down mixing device for multichannel stereo use |
| KR101177677B1 (en) * | 2004-10-28 | 2012-08-27 | 디티에스 워싱턴, 엘엘씨 | Audio spatial environment engine |
| US8577483B2 (en) * | 2005-08-30 | 2013-11-05 | Lg Electronics, Inc. | Method for decoding an audio signal |
| US9014377B2 (en) * | 2006-05-17 | 2015-04-21 | Creative Technology Ltd | Multichannel surround format conversion and generalized upmix |
| JP5406276B2 (en) * | 2008-04-16 | 2014-02-05 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
| KR101061128B1 (en) * | 2008-04-16 | 2011-08-31 | 엘지전자 주식회사 | Audio signal processing method and device thereof |
| JP5174527B2 (en) * | 2008-05-14 | 2013-04-03 | 日本放送協会 | Acoustic signal multiplex transmission system, production apparatus and reproduction apparatus to which sound image localization acoustic meta information is added |
| KR102033071B1 (en) * | 2010-08-17 | 2019-10-16 | 한국전자통신연구원 | System and method for compatible multi channel audio |
| WO2013192111A1 (en) * | 2012-06-19 | 2013-12-27 | Dolby Laboratories Licensing Corporation | Rendering and playback of spatial audio using channel-based audio systems |
-
2015
- 2015-04-28 KR KR1020150059445A patent/KR101993348B1/en active IP Right Grant
- 2015-09-16 JP JP2015183123A patent/JP6663147B2/en active Active
-
2019
- 2019-06-20 KR KR1020190073485A patent/KR102231750B1/en active IP Right Grant
-
2020
- 2020-02-06 JP JP2020018862A patent/JP6912612B2/en active Active
-
2021
- 2021-03-18 KR KR1020210035360A patent/KR102380279B1/en active IP Right Grant
- 2021-07-08 JP JP2021113487A patent/JP7166398B2/en active Active
-
2022
- 2022-03-24 KR KR1020220036830A patent/KR102533824B1/en active IP Right Grant
-
2023
- 2023-05-12 KR KR1020230061564A patent/KR20230071107A/en not_active Application Discontinuation
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008288935A (en) | 2007-05-18 | 2008-11-27 | Panasonic Corp | Sound processor |
| JP2011193164A (en) | 2010-03-12 | 2011-09-29 | Nippon Hoso Kyokai <Nhk> | Down-mix device of multi-channel acoustic signal and program |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20220044457A (en) | 2022-04-08 |
| KR20190076934A (en) | 2019-07-02 |
| KR20160035963A (en) | 2016-04-01 |
| JP2021170798A (en) | 2021-10-28 |
| KR102380279B1 (en) | 2022-03-30 |
| KR102533824B1 (en) | 2023-05-26 |
| JP2020092439A (en) | 2020-06-11 |
| KR20230071107A (en) | 2023-05-23 |
| KR101993348B1 (en) | 2019-06-26 |
| JP2016072973A (en) | 2016-05-09 |
| JP6663147B2 (en) | 2020-03-11 |
| KR20210033963A (en) | 2021-03-29 |
| KR102231750B1 (en) | 2021-03-25 |
| JP6912612B2 (en) | 2021-08-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7166398B2 (en) | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion | |
| KR102182761B1 (en) | Signaling audio rendering information in a bitstream | |
| US11671780B2 (en) | Audio metadata providing apparatus and method, and multichannel audio data playback apparatus and method to support dynamic format conversion | |
| JP4979837B2 (en) | Improved reproduction of multiple audio channels | |
| JP2000222822A5 (en) | Recording medium and recording device and playback device, recording method and playback method | |
| JP6174326B2 (en) | Acoustic signal generating device and acoustic signal reproducing device | |
| JP2015534656A (en) | Audio data generating apparatus and method, audio data reproducing apparatus and method | |
| KR20130115779A (en) | Apparatus and method for providing the audio metadata, apparatus and method for providing the audio data, apparatus and method for playing the audio data | |
| KR102455549B1 (en) | Apparatus and method for transforming audio signal using location of the user and the speaker | |
| KR100942143B1 (en) | Method and apparatus of wfs reproduction to reconstruct the original sound scene in conventional audio formats | |
| KR102370348B1 (en) | Apparatus and method for providing the audio metadata, apparatus and method for providing the audio data, apparatus and method for playing the audio data | |
| KR101421201B1 (en) | Method and apparatus for encoding/decoding scalable digital audio using uncompressed audio channel data and compressed audio channel data | |
| KR101454343B1 (en) | Method and apparatus for encoding/decoding scalable digital audio using direct audio channel data and undirect audio channel data | |
| KR20170120407A (en) | System and method for reproducing audio object signal | |
| KR20170095105A (en) | Apparatus and method for generating metadata of hybrid audio signal | |
| JP2009246481A (en) | Voice output apparatus and voice output method | |
| KR20110102719A (en) | Audio up-mixing apparatus and method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210804 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220624 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220922 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221004 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221025 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7166398 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |