JP2020092439A - Audio metadata provision device and audio data reproduction device capable of supporting dynamic format conversion, method executed by the same, and computer readable recording medium with dynamic format conversion recorded - Google Patents
Audio metadata provision device and audio data reproduction device capable of supporting dynamic format conversion, method executed by the same, and computer readable recording medium with dynamic format conversion recorded Download PDFInfo
- Publication number
- JP2020092439A JP2020092439A JP2020018862A JP2020018862A JP2020092439A JP 2020092439 A JP2020092439 A JP 2020092439A JP 2020018862 A JP2020018862 A JP 2020018862A JP 2020018862 A JP2020018862 A JP 2020018862A JP 2020092439 A JP2020092439 A JP 2020092439A
- Authority
- JP
- Japan
- Prior art keywords
- audio data
- channel audio
- format
- format conversion
- reproduction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000006243 chemical reaction Methods 0.000 title claims abstract description 220
- 238000000034 method Methods 0.000 title claims description 89
- 239000011159 matrix material Substances 0.000 description 20
- 238000010586 diagram Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 4
- 230000001771 impaired effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S5/00—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation
- H04S5/02—Pseudo-stereo systems, e.g. in which additional channel signals are derived from monophonic signals by means of phase shifting, time delay or reverberation of the pseudo four-channel type, e.g. in which rear channel signals are derived from two-channel stereo signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
- H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
Abstract
Description
本発明は多チャネルオーディオデータ再生方法に関し、より詳しくは、多チャネルオーディオデータの様々なフォーマット間の変換方法に関する。 The present invention relates to a method for reproducing multi-channel audio data, and more particularly to a method for converting multi-channel audio data between various formats.
3DTV、3Dシネマ、UHDTVなど次世代コンテンツ再生環境に対する研究開発が持続しながら、オーディオも多チャネルラウドスピーカを用いる音響再生環境に素早い変化が行われている。 While the research and development on the next-generation content reproduction environment such as 3DTV, 3D cinema, and UHDTV continues, the audio reproduction environment using the multi-channel loudspeaker is rapidly changing.
映画館及びHDTVのための立体音響の5.1チャネルシステム以後に上りチャネルを含む様々なマルチャネルオーディオシステムが導入され、ITU−R(International Telecommunication Union Radiocommunications Sector)では、最近Recommendation BS.2051を制定して10.2チャネル、13.1チャネル、22.2チャネルなどをはじめとする総8個の多チャネルフォーマットを次世代オーディオシステム(advanced sound system)として定義した。したがって、これからは様々なフォーマットにベースを置いたオーディオコンテンツが製造される可能性が極めて高まっている。 After the 5.1 channel system of stereophonic sound for movie theaters and HDTV, various mal-channel audio systems including upstream channels have been introduced, and recently, in ITU-R (International Telecommunications Union Radiocommunications Sector), Recommendation BS. 2051 was established, and a total of eight multi-channel formats including 10.2 channels, 13.1 channels, 22.2 channels, etc. were defined as a next-generation audio system (advanced sound system). Therefore, it is extremely likely that audio contents based on various formats will be manufactured.
このような環境では、1つのフォーマットに製造されたコンテンツが異なるフォーマットに再生する可能性も極めて高いため、コンテンツ間の適切な変換方法が求められている。従来には、コンテンツの多チャネルオーディオフォーマットから再生環境側の新しい多チャネルオーディオフォーマットにフォーマット変換することにおいて一括的な変換を行った。しかし、このような一括の変換方法は、コンテンツ著作者の著作意図を毀損し、意図とは異なる変換を行う恐れがあるという短所がある。 In such an environment, there is a very high possibility that contents produced in one format will be reproduced in different formats, and therefore an appropriate conversion method between contents is required. In the past, batch conversion was performed in the format conversion from the multi-channel audio format of contents to the new multi-channel audio format on the playback environment side. However, such a batch conversion method has a disadvantage in that the intention of the content creator is impaired and there is a risk of performing conversion different from the intention.
本発明の目的は、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるようにフォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提案する。 An object of the present invention is to provide an audio metadata providing apparatus and method for providing a dynamic format conversion method for converting a format so that the author's copyright intent is completely preserved between various formats of multi-channel audio data. An apparatus and method for converting and reproducing a format by the dynamic format conversion method, and a recording medium on which the dynamic format conversion method is recorded are proposed.
本発明の目的は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境による第2フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供する。 The object of the present invention includes dynamic format conversion information capable of converting between the first format set by the author of multi-channel audio data and the second format according to the reproduction environment of multi-channel audio data. An audio metadata providing apparatus and method capable of generating audio metadata.
本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別して第1フォーマットから第2フォーマットに多チャネルオーディオデータを変換した後再生する多チャネルオーディオデータ再生装置及び方法を提供する。 An object of the present invention is to reproduce multi-channel audio data by identifying multi-channel audio data and audio metadata including dynamic format conversion information, converting the multi-channel audio data from the first format to the second format, and then reproducing the converted multi-channel audio data. An apparatus and method are provided.
本発明の目的は、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供する。 An object of the present invention is to provide a computer-readable recording medium on which audio metadata including multi-channel audio data and dynamic format conversion information is recorded.
本発明の一実施形態に係るオーディオメタデータ提供装置は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の動的フォーマット変換情報を識別する変換情報識別部と、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するオーディオメタデータ生成部とを含む。 An audio metadata providing apparatus according to an exemplary embodiment of the present invention provides multi-channel audio data between a first format set by an author of multi-channel audio data and a second format based on a reproduction environment of multi-channel audio data. Of the dynamic format conversion information, and an audio metadata generation section for generating audio metadata including the identified dynamic format conversion information.
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。 In the dynamic format conversion information, a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are the multi-channel audio data. It is set for each playback section.
前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections in which the plurality of format conversion methods are set may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 The reproduction environment of the multi-channel audio data may be determined based on the layout of the speakers reproduced by the multi-channel audio data.
前記複数のフォーマット変換方式は、前記第1フォーマットから第2フォーマットに変換するためのマトリックスを含んでもよい。 The plurality of format conversion methods may include a matrix for converting the first format to the second format.
前記動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定されてもよい。 The dynamic format conversion information may be set differently for each reproduction section of multi-channel audio data, or may be set to be partially repeated.
本発明の一実施形態に係る多チャネルオーディオデータ再生装置は、第1フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の動的フォーマット変換情報を識別するデータ識別部と、前記動的フォーマット変換情報を用いて前記第1フォーマットの多チャネルオーディオデータを第2フォーマットに変換するオーディオデータ変換部と、前記第2フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部とを含む。 A multi-channel audio data reproducing apparatus according to an exemplary embodiment of the present invention includes multi-channel audio data produced according to a first format, and first format and multi-channel audio set by an author of multi-channel audio data from audio metadata. A data identification unit for identifying dynamic format conversion information between the multi-channel audio data of the first format and the second format based on the reproduction environment of the data, and the multi-channel audio data of the first format to the second format by using the dynamic format conversion information. An audio data conversion unit for converting and an audio data reproduction unit for reproducing the multi-channel audio data converted into the second format are included.
前記多チャネルオーディオデータ変換部の再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections of the multi-channel audio data conversion unit may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータ変換部のフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換してもよい。 The format conversion method of the multi-channel audio data conversion unit may be differently converted for each reproduction section of the multi-channel audio data, or may be partially repeated.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 The reproduction environment of the multi-channel audio data may be determined based on the layout of the speakers reproduced by the multi-channel audio data.
本発明の一実施形態に係るオーディオメタデータ提供方法は、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するステップとを含む。 According to an embodiment of the present invention, there is provided an audio metadata providing method between a first format set by an author of multi-channel audio data and a second format based on a reproduction environment of multi-channel audio data. Identifying the dynamic format conversion information, and generating audio metadata including the identified dynamic format conversion information.
前記複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections in which the plurality of format conversion methods are set may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 The reproduction environment of the multi-channel audio data may be determined based on the layout of the speakers reproduced by the multi-channel audio data.
前記複数のフォーマット変換方式は、前記第1フォーマットから第2フォーマットに変換するためのマトリックスを含んでもよい。 The plurality of format conversion methods may include a matrix for converting the first format to the second format.
前記動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定されてもよい。 The dynamic format conversion information may be set differently for each reproduction section of multi-channel audio data, or may be set to be partially repeated.
本発明の一実施形態に係る多チャネルオーディオデータ再生方法は、第1フォーマットにより製作された多チャネルオーディオデータ、及びオーディオメタデータから多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の動的フォーマット変換情報を識別するステップと、前記動的フォーマット変換情報を用いて前記第1フォーマットの多チャネルオーディオデータを第2フォーマットに変換するステップと、前記第2フォーマットに変換された多チャネルオーディオデータを再生するステップとを含む。 A multi-channel audio data reproducing method according to an exemplary embodiment of the present invention is directed to a multi-channel audio data produced according to a first format and a first format and a multi-channel audio set by an author of multi-channel audio data from audio metadata. Identifying dynamic format conversion information to and from a second format based on a data reproduction environment; and converting the first format multi-channel audio data to a second format using the dynamic format conversion information. And reproducing the multi-channel audio data converted into the second format.
前記多チャネルオーディオデータ変換部の再生区間は、互いに同一の再生長さを有するか、又は互いに異なる再生長さを有してもよい。 The reproduction sections of the multi-channel audio data conversion unit may have the same reproduction length or different reproduction lengths.
前記多チャネルオーディオデータ変換部のフォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換するか、又は部分的に繰り返されるように変換してもよい。 The format conversion method of the multi-channel audio data conversion unit may be differently converted for each reproduction section of the multi-channel audio data, or may be partially repeated.
前記多チャネルオーディオデータの再生環境は、前記多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されてもよい。 The reproduction environment of the multi-channel audio data may be determined based on the layout of the speakers reproduced by the multi-channel audio data.
本発明の一実施形態に係るコンピュータで読み出し可能な記録媒体は、1つ以上のチャネルから構成された多チャネルオーディオデータと、多チャネルオーディオデータで多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の動的フォーマット変換情報が含まれたオーディオメタデータとが記録される。 A computer-readable recording medium according to an exemplary embodiment of the present invention includes multi-channel audio data composed of one or more channels, and a first format of multi-channel audio data set by an author of the multi-channel audio data. And audio metadata including dynamic format conversion information between the second format and the second format based on the reproduction environment of the multi-channel audio data are recorded.
本発明の一実施形態によると、多チャネルオーディオデータの様々なフォーマット間に著作者の著作意図が完全に保持されるよう、フォーマットを変換する動的フォーマット変換方法を提供するためのオーディオメタデータ提供装置、方法、及び動的フォーマット変換方法によりフォーマットを変換して再生する装置、方法、並びに動的フォーマット変換方法が記録された記録媒体を提供することができる。 According to one embodiment of the present invention, an audio metadata providing method for converting a format so that the author's copyright intent is completely preserved between various formats of multi-channel audio data. It is possible to provide an apparatus, a method, and an apparatus, method, and a recording medium on which the dynamic format conversion method is recorded, by which the format is converted and reproduced.
本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の変換を行うことのできる動的フォーマット変換情報が含まれたオーディオメタデータを生成できるオーディオメタデータ提供装置及び方法を提供することができる。 According to an embodiment of the present invention, a dynamic format conversion capable of converting between a first format set by an author of multi-channel audio data and a second format based on a reproduction environment of multi-channel audio data. An audio metadata providing apparatus and method capable of generating audio metadata containing information can be provided.
本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータを識別し、第1フォーマットから第2フォーマットに多チャネルオーディオデータを変換した後、再生する多チャネルオーディオデータ再生装置及び方法を提供することができる。 According to an embodiment of the present invention, audio metadata including multi-channel audio data and dynamic format conversion information is identified, and multi-channel audio data is converted from a first format to a second format and then reproduced. A channel audio data reproducing apparatus and method can be provided.
本発明の一実施形態によると、多チャネルオーディオデータ及び動的フォーマット変換情報が含まれたオーディオメタデータが記録されたコンピュータで読み出し可能な記録媒体を提供することができる。 According to an embodiment of the present invention, it is possible to provide a computer-readable recording medium on which audio metadata including multi-channel audio data and dynamic format conversion information is recorded.
以下、本発明の実施形態について添付の図面を参照しながら詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.
図1は、本発明の一実施形態に係るオーディオメタデータ提供装置110とオーディオメタデータ140及び多チャネルオーディオデータ再生装置160を示す図である。
FIG. 1 is a diagram showing an audio
図1を参考すると、オーディオメタデータ提供装置110は、動的フォーマット変換情報を識別する変換情報識別部120及び識別された動的フォーマット変換情報を含むオーディオメタデータ140を生成するオーディオメタデータ生成部130を含む。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。
Referring to FIG. 1, the audio
本発明の一実施形態によると、変換情報識別部120は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。更なる実施形態によると、変換情報識別部120は、1つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。
According to one embodiment of the present invention, the conversion
本発明の一実施形態によると、変換情報識別部120で識別された動的フォーマット変換情報に基づいてオーディオメタデータを生成するオーディオメタデータ生成部130が提供される。オーディオメタデータ生成部130は、オーディオメタデータに識別された複数の動的フォーマット変換情報を含む。本発明の一実施形態によると、オーディオメタデータ生成部130は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態に含むことができる。更なる実施形態によると、オーディオメタデータ生成部130は、メタデータに識別された動的フォーマット変換情報と共に、メタデータに一般的に含まれる情報(例えば、著作者、レコード名、発売年度など)を含んでもよい。
According to an embodiment of the present invention, an audio
本発明の一実施形態によると、オーディオメタデータ提供装置110は、多チャネルオーディオデータ提供装置の一部の構成として含まれている。
According to an embodiment of the present invention, the audio
オーディオメタデータ提供装置110から動的フォーマット変換情報150を含むオーディオメタデータ140が提供される。本発明の一実施形態によると、オーディオメタデータ140は、動的フォーマット変換情報150だけではなく、メタデータに一般的に含まれる情報を含んでもよい。本発明の他の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供され得る。本発明の更なる一実施形態によると、オーディオメタデータ140は、リアルタイムで多チャネルオーディオデータ再生装置160に送信されたり、又は、多チャネルオーディオデータ再生装置160に予め送信されて多チャネルオーディオデータ再生装置160のバッファ、メモリのような格納媒体に格納され得る。又は、オーディオメタデータ140は、CD−ROM、CD−RW、DVD−R、DVD−RWなどのような光記録媒体に格納されて配布され得る。
The
多チャネルオーディオデータを動的フォーマット変換情報によってフォーマット間に変換した後、これを再生できる多チャネルオーディオデータ再生装置160が提供される。
多チャネルオーディオデータ再生装置160は、動的フォーマット変換情報を識別するデータ識別部170、識別された動的フォーマット変換情報でフォーマット間の変換を行うオーディオデータ変換部180、及び変換された多チャネルオーディオデータを再生するオーディオデータ再生部190を含む。
There is provided a multi-channel audio
The multi-channel audio
本発明の一実施形態によると、データ識別部170は、オーディオメタデータ140で多チャネルオーディオデータの再生環境に基づいた第2フォーマットに該当する動的フォーマット変換情報を識別する。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。本発明の一実施形態によると、データ識別部170は、オーディオメタデータに記録された1つ以上の動的フォーマット変換情報のうち、第2フォーマットに対応する動的フォーマット変換情報を選択して識別することができる。
According to an exemplary embodiment of the present invention, the
本発明の一実施形態によると、オーディオデータ変換部180は、識別した動的フォーマット変換情報によって多チャネルオーディオデータを多チャネルオーディオ著作者が設定した第1フォーマットから多チャネルオーディオデータの再生環境に基づいた第2フォーマットに変換する。動的フォーマット変換情報は、第1フォーマットと第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。
According to an embodiment of the present invention, the audio
本発明の一実施形態によると、オーディオデータ変換部180は、再生時間により動的フォーマット変換情報から再生時間を含む再生区間を識別し、動的フォーマット変換情報で当該再生区間に設定されたフォーマット変換方式を識別して第1フォーマットと第2フォーマットとの間のフォーマット変換を行う。本発明の一実施形態によると、複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、オーディオデータ変換部180は、動的フォーマット変換情報によって再生区間ごとに互いに異なるフォーマット変換方式を用いて変換するか、又は部分的にフォーマット変換方式を繰り返されるように用いて変換することができる。
According to an embodiment of the present invention, the audio
本発明の一実施形態によると、第2フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部190が提供される。第2フォーマットは多チャネルオーディオデータの再生環境に基づいて、多チャネルオーディオデータの再生環境は多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。オーディオデータ再生部190は、1つ以上のスピーカの出力部から構成される。オーディオデータ再生部190は、第2フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。
According to an embodiment of the present invention, an audio
本発明の一実施形態によると、オーディオデータ再生部190は、出力部に接続されたスピーカの個数を把握して多チャネルオーディオデータの再生環境を識別する。さらに、オーディオデータ再生部190は、スピーカの個数だけではなく、各スピーカの位置を識別したり、ユーザから再生環境に関する情報が入力されることで再生環境を識別することができる。
According to an embodiment of the present invention, the audio
図2は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマットを一括的に変換する一例を示す図である。 FIG. 2 is a diagram showing an example of collectively converting the format of multi-channel audio data according to an embodiment of the present invention.
多チャネルオーディオデータは、多チャネルオーディオデータの著作者が設定した多チャネルオーディオデータフォーマットの第1フォーマットに合わせて製作される。多チャネルオーディオデータを再生する側の多チャネルオーディオデータフォーマットの第2フォーマットは、多チャネルオーディオデータの再生環境に基づく。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定されるため、第2フォーマットは、多チャネルオーディオデータの第1フォーマットと異なり得る。本発明の一実施形態によると、多チャネルオーディオデータの再生環境に基づく第2フォーマットが第1フォーマットと異なる場合、多チャネルオーディオデータ再生装置のオーディオデータ変換部は、一括的なフォーマット変換方式200により変換を行うことができる。
The multi-channel audio data is produced according to the first multi-channel audio data format set by the author of the multi-channel audio data. The second format of the multi-channel audio data format on the side of reproducing the multi-channel audio data is based on the reproduction environment of the multi-channel audio data. Since the reproduction environment of the multi-channel audio data is determined based on the layout of the speaker in which the multi-channel audio data is reproduced, the second format may be different from the first format of the multi-channel audio data. According to an embodiment of the present invention, when the second format based on the reproduction environment of the multi-channel audio data is different from the first format, the audio data conversion unit of the multi-channel audio data reproduction device uses the collective
図2を参照すると、第1フォーマットは、10.2チャネルフォーマットであると仮定する。一括的なフォーマット変換方式200によると、第2フォーマットが5.1チャネルフォーマットである場合、聴者の左側の前面スピーカLは第1フォーマットの左側の前面スピーカLと左側上段スピーカLHの線形結合(linear combination)として決定される。他の例として、第2フォーマットが7.1チャネルフォーマットである場合、右側の後面スピーカRBは、第1フォーマットの右側の後面スピーカRBと中央スピーカCHの線形結合に決定される。
Referring to FIG. 2, the first format is assumed to be 10.2 channel format. According to the collective
一括的なフォーマット変換方式200によると、フォーマット変換方式はチャネル間の線形結合であることから、非線形変換はできない。また、再生区間ごとにフォーマット変換方式は変化されない。本発明の一実施形態によると、多チャネルオーディオデータの再生区間ごとに1つ以上のフォーマット変換方式が設定された 動的フォーマット変換情報が提供される。また、第1フォーマットと第2フォーマットとの間の非線形変換をサポートするフォーマット変換方式が提供される。
According to the batch
図3は、本発明の一実施形態に係る多チャネルオーディオデータのフォーマット変換を行うことのできる動的フォーマット変換情報を示す図である。 FIG. 3 is a diagram showing dynamic format conversion information capable of performing format conversion of multi-channel audio data according to an embodiment of the present invention.
図3を参考すると、動的フォーマット変換情報310は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式(例えば、フォーマット変換方式K320、L340、M330)が多チャネルオーディオデータの再生区間ごとに設定されたものである。
Referring to FIG. 3, the dynamic
本発明の一実施形態によると、それぞれのフォーマット変換方式は、同一の第2フォーマットにフォーマットを変換する。ただし、変換する方式は互いに異なってもよい。図3を参照して説明すると、フォーマット変換方式K320は、第1フォーマットの複数の左側スピーカLeft1とLeft2の線形結合で第2フォーマットの左側スピーカLeftの出力データを決定する。フォーマット変換方式M330は、第1フォーマットの複数の左側スピーカのうちの1つであるLeft1だけで第2フォーマットの左側スピーカLeftの出力データを決定する。本発明の一実施形態によると、それぞれの変換方式は非線形変換を含むことができる。 According to one embodiment of the present invention, each format conversion scheme converts the format to the same second format. However, the conversion methods may be different from each other. Referring to FIG. 3, the format conversion method K320 determines the output data of the left speaker Left in the second format by linearly combining the left speakers Left 1 and Left 2 in the first format. The format conversion method M330 determines the output data of the left speaker Left of the second format only by Left 1 which is one of the left speakers of the first format. According to an embodiment of the present invention, each conversion scheme may include a non-linear conversion.
本発明の一実施形態によると、多チャネルオーディオデータ再生装置は、動的フォーマット変換情報から再生区間ごとに設定されたフォーマット変換方式を識別して変換することができる。図3を参照すると、多チャネルオーディオデータ再生装置は、再生区間t=0からt=t1まで多チャネルオーディオデータをフォーマット変換方式K320によって変換する。多チャネルオーディオデータ再生装置は、以後の再生区間t=t1からt=t2まで多チャネルオーディオデータをフォーマット変換方式M330によって変換する。同様に、多チャネルオーディオデータ再生装置は、再生区間t=t3からt=t4まではフォーマット変換方式L340によって変換を行い、以後の再生区間でも同じ作業を繰り返す。 According to an embodiment of the present invention, the multi-channel audio data reproducing device can identify and convert the format conversion method set for each reproduction section from the dynamic format conversion information. Referring to FIG. 3, the multi-channel audio data reproducing device converts the multi-channel audio data from the reproduction section t=0 to t=t 1 by the format conversion method K320. The multi-channel audio data reproducing device converts the multi-channel audio data from the subsequent reproduction section t=t 1 to t=t 2 by the format conversion method M330. Similarly, the multi-channel audio data reproducing device performs conversion by the format conversion method L340 from the reproduction section t=t 3 to t=t 4, and repeats the same operation in the subsequent reproduction sections.
本発明の一実施形態によると、動的フォーマット変換情報310は、多チャネルオーディオデータの再生区間ごとにフォーマット変換方式を相異に設定するか、又は部分的に繰り返されるように設定してもよい。図3を参照すると、フォーマット変換方式K320は、再生区間t=0からt=t1だけではなく、再生区間t=t2からt=t3でも再び設定され得る。本発明の一実施形態によると、フォーマット変換方式は、一括的なフォーマット変換方式や線形結合による変換だけではなく、非線形変換も含むことができる。
According to an exemplary embodiment of the present invention, the dynamic
本発明の一実施形態によると、フォーマット変換方式が設定されたそれぞれの再生区間は互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。図3を参照すると、再生区間t=t1からt=t2と再生区間t=t7からt=t8は互いに同じ再生長さを有し得る。 According to an exemplary embodiment of the present invention, the respective reproduction sections for which the format conversion method is set may have the same reproduction length or different reproduction lengths. Referring to FIG. 3, the reproduction sections t=t 1 to t=t 2 and the reproduction sections t=t 7 to t=t 8 may have the same reproduction length.
図4は、本発明の一実施形態に係る1つ以上の動的フォーマット変換情報を含むオーディオメタデータを示す図である。 FIG. 4 is a diagram illustrating audio metadata including one or more pieces of dynamic format conversion information according to an exemplary embodiment of the present invention.
図4を参考すると、多チャネルオーディオデータの再生環境が様々であるため、オーディオメタデータ140は、1つ以上の動的フォーマット変換情報420、430を含む。
多チャネルオーディオデータ再生装置160は、多チャネルオーディオデータの再生環境に基づいた第2フォーマットに該当する動的フォーマット変換情報を選択し、多チャネルオーディオデータのフォーマットを変換する。再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。
Referring to FIG. 4, the
The multi-channel audio
図4を参照すると、多チャネルオーディオデータの著作者が設定した第1フォーマットが22.2チャネルフォーマットであり、多チャネルオーディオデータの再生環境に基づいた第2フォーマットが10.2チャネルフォーマットであると仮定する。多チャネルオーディオデータ再生装置160のデータ識別部170は、オーディオメタデータの複数の動的フォーマット変換情報420、430のうち第2フォーマットに対応する動的フォーマット変換情報(1)420を識別する。同様に、多チャネルオーディオデータの再生環境に基づいた第2フォーマットが5.1チャネルフォーマットであれば、多チャネルオーディオデータ再生装置のデータ識別部170は動的フォーマット変換情報(2)430を識別する。
Referring to FIG. 4, the first format set by the author of multi-channel audio data is 22.2 channel format, and the second format based on the reproduction environment of multi-channel audio data is 10.2 channel format. I assume. The
先に仮定した10.2チャネルフォーマットで、オーディオデータ変換部180は、識別された動的フォーマット変換情報(1)420によって多チャネルオーディオデータのフォーマットを変換する。すなわち、オーディオデータ変換部180は、再生区間ごとに設定された複数のフォーマット変換方式440に基づいて多チャネルオーディオデータを再生区間t=0からt=t1まではフォーマット変換方式K450によって変換し、再生区間t=t1からt=t2まではフォーマット変換方式M460によって変換する。本発明の一実施形態によると、動的フォーマット変換情報は、多チャネルオーディオデータの再生区間ごとに相異に設定されるか、又は部分的に繰り返されるように設定され得る。また、フォーマット変換方式が設定されたそれぞれの再生区間の再生長さも互いに異なるか、同じであってもよい。図4を参考すると、フォーマット変換方式K450は、再生区間t=0からt=t1で用いられるが、その後の再生区間でも繰り返し用いてもよい。また、再生区間t=0からt=t1と再生区間t=t1からt=t2の再生長さも互いに異なるか、同じであってもよい。
The audio
図5は、本発明の一実施形態に係るマトリックス方式を用いてフォーマット間の変換を行う実施形態を説明するための図である。 FIG. 5 is a diagram illustrating an embodiment in which conversion between formats is performed using a matrix method according to an embodiment of the present invention.
図5を参考すると、動的フォーマット変換情報でそれぞれのフォーマット変換方式は、変換マトリックス530、540に格納され得る。変換マトリックスは、多チャネルオーディオデータの著作者が設定した第1フォーマットから多チャネルオーディオデータの再生環境に基づいた第2フォーマットに変換するためのマトリックスである。オーディオデータ変換部は、第1フォーマットチャネルマトリックスを変換マトリックスに適用して第2フォーマットチャネルマトリックスを出力することで、第1フォーマットから第2フォーマットに変換することができる。
Referring to FIG. 5, each format conversion method in the dynamic format conversion information may be stored in the
図5を参照すると、多チャネルオーディオデータの著作者は、10.2チャネルフォーマット(第1フォーマット)に多チャネルオーディオデータを製作510したと仮定し、多チャネルオーディオデータの再生環境は、5.1チャネルフォーマット(第2フォーマット)であると仮定する。この場合、フォーマット変換550を参考すると、オーディオデータ変換部は、第1フォーマットチャネルマトリックス580(チャネルマトリックスの各元素は各チャネルに対応する)を変換マトリックス570に適用して第2フォーマットチャネルマトリックス560を出力する方式によりフォーマットを変換する。したがって、図5に示す場合、第1フォーマットの10.2チャネルフォーマットは12個のチャネルを有し、第2フォーマットの5.1チャネルフォーマットは6個のチャネルを有するため、フォーマット変換方式に関する情報を含む変換マトリックス530、540は6行12列に構成される。
Referring to FIG. 5, it is assumed that the author of the multi-channel audio data has produced the
また、オーディオデータ変換部は、再生区間ごとに設定されたフォーマット変換方式に合わせて変換マトリックス570を交換して変換することができる。例えば、図5に示す動的フォーマット変換情報520で、再生区間t=0からt=t1まで変換方式Kが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス570を変換方式Kに対する変換マトリックス530に設定して変換を行う。再生区間t=t1からt=t2まで変換方式Mが設定されているため、当該の再生区間でオーディオデータ変換部は、変換マトリックス570を変換方式Mに対する変換マトリックス540に設定して変換を行う。
Further, the audio data conversion unit can exchange and convert the
図6は、本発明の一実施形態に係るオーディオメタデータ提供装置が動的フォーマット変換情報の含まれたオーディオメタデータを提供する動作を示したフローチャートである。 FIG. 6 is a flowchart illustrating an operation of providing audio metadata including dynamic format conversion information by the audio metadata providing apparatus according to an exemplary embodiment of the present invention.
ステップS610において、オーディオメタデータ提供装置は、動的フォーマット変換情報を識別する。動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。本発明の一実施形態によると、オーディオメタデータ提供装置は、多チャネルオーディオデータの著作者から動的フォーマット変換情報を識別する。本発明の他の実施形態によると、多チャネルオーディオデータ再生装置は、1つ以上のオーディオメタデータから複数の動的フォーマット変換情報を識別する。 In step S610, the audio metadata providing apparatus identifies the dynamic format conversion information. As the dynamic format conversion information, a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are used to reproduce the multi-channel audio data. It is set for each section. According to an embodiment of the present invention, an audio metadata providing apparatus identifies dynamic format conversion information from an author of multi-channel audio data. According to another embodiment of the present invention, a multi-channel audio data reproducing device identifies a plurality of dynamic format conversion information from one or more audio metadata.
ステップS620において、オーディオメタデータ提供装置は、識別された動的フォーマット変換情報を含むオーディオメタデータを生成する。ここで、オーディオメタデータ提供装置は、オーディオメタデータに一般的に含まれる情報(例えば、著作者、レコード名、発売年度など)を含んでもよい。本発明の一実施形態によると、オーディオメタデータ提供装置は、複数の動的フォーマット変換情報をオーディオメタデータに含み得る。本発明の一実施形態によると、オーディオメタデータ提供装置は、動的フォーマット変換情報の各フォーマット変換方式をマトリックスの形態(例えば、図5に示す変換マトリックス530、540)にオーディオメタデータに記録することができる。
In operation S620, the audio metadata providing apparatus generates audio metadata including the identified dynamic format conversion information. Here, the audio metadata providing device may include information generally included in the audio metadata (for example, author, record name, release year, etc.). According to an embodiment of the present invention, the audio metadata providing apparatus may include a plurality of dynamic format conversion information in the audio metadata. According to an embodiment of the present invention, the audio metadata providing apparatus records each format conversion method of the dynamic format conversion information in the audio metadata in the form of a matrix (for example, the
図7は、本発明の一実施形態に係る多チャネルオーディオデータ再生装置が多チャネルオーディオデータのフォーマットを変換した後、これを再生する動作を示したフローチャートである。 FIG. 7 is a flowchart showing an operation of the multi-channel audio data reproducing apparatus according to an embodiment of the present invention, which converts the format of multi-channel audio data and then reproduces the converted format.
ステップS710において、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ及びオーディオメタデータを受信する。本発明の一実施形態によると、オーディオメタデータは、多チャネルオーディオデータと共に提供されたり、別に提供されてもよい。本発明の一実施形態によると、オーディオメタデータは、リアルタイムで多チャネルオーディオデータ再生装置に受信されたり、又は、多チャネルオーディオデータ再生装置に予め送信されて多チャネルオーディオデータ再生装置のバッファ、メモリのような格納媒体に格納されてもよい。また、オーディオメタデータは、CD−ROM、CD−RW、DVD−R、DVD−RWなどのような光記録媒体に格納されて受信され得る。 In step S710, the multi-channel audio data reproducing device receives multi-channel audio data and audio metadata. According to an embodiment of the present invention, the audio metadata may be provided together with the multi-channel audio data or separately. According to an embodiment of the present invention, the audio metadata is received by the multi-channel audio data reproducing device in real time, or is transmitted to the multi-channel audio data reproducing device in advance, and the buffer and the memory of the multi-channel audio data reproducing device are transmitted. It may be stored in a storage medium such as. Also, the audio metadata can be stored and received in an optical recording medium such as a CD-ROM, a CD-RW, a DVD-R, a DVD-RW, or the like.
ステップS720において、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットが異なる場合、多チャネルオーディオデータ再生装置は、オーディオメタデータで動的フォーマット変換情報を識別することになる。本発明の一実施形態によると、オーディオメタデータは、1つ以上の動的フォーマット変換情報を含んでもよく、この場合、多チャネルオーディオデータ再生装置は、多チャネルオーディオデータ再生装置の第2フォーマットに対応する動的フォーマット変換情報を識別することができる。多チャネルオーディオデータの再生環境は、多チャネルオーディオデータが再生するスピーカのレイアウトに基づいて決定される。 In step S720, if the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are different, the multi-channel audio data reproduction device uses the dynamic format in the audio metadata. The conversion information will be identified. According to an embodiment of the present invention, the audio metadata may include one or more dynamic format conversion information, in which case the multi-channel audio data reproducing device is in the second format of the multi-channel audio data reproducing device. The corresponding dynamic format conversion information can be identified. The reproduction environment of the multi-channel audio data is determined based on the layout of the speaker that reproduces the multi-channel audio data.
オーディオメタデータで識別した動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである。動的フォーマット変換情報の複数のフォーマット変換方式が設定された再生区間は、互いに同一の再生長さを有するか、互いに異なる再生長さを有し得る。動的フォーマット変換情報の再生区間ごとに設定されたフォーマット変換方式は、相異に設定されるか、又は部分的に繰り返されるように設定され得る。 The dynamic format conversion information identified by the audio metadata includes a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data. It is set for each reproduction section of multi-channel audio data. The reproduction sections in which a plurality of format conversion methods of the dynamic format conversion information are set may have the same reproduction length or different reproduction lengths. The format conversion method set for each reproduction section of the dynamic format conversion information may be set differently or set to be partially repeated.
ステップS730において、多チャネルオーディオデータ再生装置は、識別した動的フォーマット変換情報によって多チャネルオーディオデータの著作者が設定した第1フォーマットで多チャネルオーディオデータの再生環境に基づいた第2フォーマットに変換を行う。本発明の一実施形態によると、変換する再生区間は、動的フォーマット変換情報によって同一の再生長さを有するか、互いに異なる再生長さを有し得る。本発明の一実施形態によると、フォーマット変換方式は、多チャネルオーディオデータの再生区間ごとに相異に変換したり、部分的に繰り返されるように変換してもよい。 In step S730, the multi-channel audio data reproduction device converts the identified dynamic format conversion information into the second format based on the reproduction environment of the multi-channel audio data in the first format set by the author of the multi-channel audio data. To do. According to an embodiment of the present invention, the playback sections to be converted may have the same playback length or different playback lengths according to the dynamic format conversion information. According to an exemplary embodiment of the present invention, the format conversion method may perform different conversion for each reproduction section of multi-channel audio data, or may perform partial conversion.
ステップS740において、多チャネルオーディオデータ再生装置は、変換された多チャネルオーディオデータを再生する。多チャネルオーディオデータ再生装置は、第2フォーマットに変換された多チャネルオーディオデータに対して各チャネルに対応するスピーカからオーディオデータを出力する。本発明の一実施形態によると、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとが互いに同一な場合、多チャネルオーディオデータ再生装置は変換を行うことなく、多チャネルオーディオデータを再生することができる。 In step S740, the multi-channel audio data reproducing device reproduces the converted multi-channel audio data. The multi-channel audio data reproducing device outputs audio data from the speaker corresponding to each channel with respect to the multi-channel audio data converted into the second format. According to an embodiment of the present invention, when the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are the same, the multi-channel audio data reproducing device is Multi-channel audio data can be played back without conversion.
本発明の実施形態に係る方法は、多様なコンピュータ手段を介して様々な処理を実行することができるプログラム命令の形態で実現され、コンピュータで読取可能な記録媒体に記録されてもよい。コンピュータ読取可能な媒体は、プログラム命令、データファイル、データ構造などのうち1つまたはその組合せを含んでもよい。媒体に記録されるプログラム命令は、本発明の目的のために特別に設計されて構成されたものでもよく、コンピュータソフトウェア分野の技術を有する当業者にとって公知のものであり、使用可能なものであってもよい。コンピュータ読取可能な記録媒体の例としては、ハードディスク、フロッピー(登録商標)ディスク及び磁気テープのような磁気媒体、CD−ROM、DVDのような光記録媒体、光ディスクのような光磁気媒体、及びROM、RAM、フラッシュメモリなどのようなプログラム命令を保存して実行するように特別に構成されたハードウェア装置が含まれてもよい。プログラム命令の例には、コンパイラによって作られるような機械語コードだけでなく、インタープリタなどを用いてコンピュータによって実行できる高級言語コードが含まれる。前記したハードウェア装置は、本発明の動作を行うために1つ以上のソフトウェアモジュールとして動作するように構成されてもよく、その逆も同様である。 The method according to the embodiments of the present invention may be implemented in the form of program instructions capable of performing various processes via various computer means, and may be recorded in a computer-readable recording medium. Computer readable media may include one or a combination of program instructions, data files, data structures, and so on. The program instructions recorded on the medium may be those specially designed and configured for the purpose of the present invention, and are known and usable by those skilled in the art of computer software. May be. Examples of computer-readable recording media include hard disks, magnetic media such as floppy (registered trademark) disks and magnetic tapes, optical recording media such as CD-ROMs and DVDs, magneto-optical media such as optical disks, and ROMs. , RAM, flash memory, etc., and hardware devices specially configured to store and execute program instructions may be included. Examples of program instructions include not only machine language code such as that produced by a compiler, but also high level language code that can be executed by a computer using an interpreter or the like. The hardware devices described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.
上述したように、本発明を限定された実施形態と図面によって説明したが、本発明は、上記の実施形態に限定されることなく、本発明が属する分野における通常の知識を有する者であれば、このような実施形態から多様な修正及び変形が可能である。 As described above, the present invention has been described by the limited embodiments and the drawings. However, the present invention is not limited to the above embodiments, and a person having ordinary knowledge in the field to which the present invention belongs can be used. Various modifications and variations are possible from such an embodiment.
したがって、本発明の範囲は、開示された実施形態に限定されるものではなく、特許請求の範囲だけではなく特許請求の範囲と均等なものなどによって定められるものである。 Therefore, the scope of the present invention is not limited to the disclosed embodiments, but is defined not only by the claims but also by equivalents to the claims.
310:動的フォーマット変換情報
320:フォーマット変換方式K
330:フォーマット変換方式M
340:フォーマット変換方式L
310: Dynamic format conversion information 320: Format conversion method K
330: Format conversion method M
340: Format conversion method L
Claims (10)
前記動的フォーマット変換情報を用いて前記第1フォーマットの多チャネルオーディオデータを第2フォーマットに変換するオーディオデータ変換部と、
前記第2フォーマットに変換された多チャネルオーディオデータを再生するオーディオデータ再生部と、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、多チャネルオーディオデータ再生装置。 Dynamic data between the multi-channel audio data produced by the first format and the first format set by the author of the multi-channel audio data from the audio metadata and the second format based on the reproduction environment of the multi-channel audio data. A data identification section for identifying format conversion information,
An audio data conversion unit for converting the multi-channel audio data of the first format into a second format using the dynamic format conversion information;
An audio data reproducing unit for reproducing the multi-channel audio data converted into the second format,
Including,
In the dynamic format conversion information, a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are the multi-channel audio data. A multi-channel audio data reproducing device which is set for each reproducing section.
前記識別された動的フォーマット変換情報を含むオーディオメタデータを生成するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットとの間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、オーディオメタデータ提供方法。 Identifying dynamic format conversion information in the multi-channel audio data between a first format set by the author of the multi-channel audio data and a second format based on the playback environment of the multi-channel audio data;
Generating audio metadata including the identified dynamic format conversion information;
Including,
In the dynamic format conversion information, a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are the multi-channel audio data. A method for providing audio metadata, which is set for each playback section.
前記動的フォーマット変換情報を用いて前記第1フォーマットの多チャネルオーディオデータを第2フォーマットに変換するステップと、
前記第2フォーマットに変換された多チャネルオーディオデータを再生するステップと、
を含み、
前記動的フォーマット変換情報は、多チャネルオーディオデータの著作者が設定した第1フォーマットと多チャネルオーディオデータの再生環境に基づいた第2フォーマットと間の複数のフォーマット変換方式が多チャネルオーディオデータの再生区間ごとに設定されたものである、多チャネルオーディオデータ再生方法。 Dynamic data between the first format set by the author of the multi-channel audio data from the multi-channel audio data produced by the first format and the audio metadata and the second format based on the reproduction environment of the multi-channel audio data. Identifying the format conversion information,
Converting the multi-channel audio data of the first format into a second format using the dynamic format conversion information;
Playing the multi-channel audio data converted to the second format;
Including,
In the dynamic format conversion information, a plurality of format conversion methods between the first format set by the author of the multi-channel audio data and the second format based on the reproduction environment of the multi-channel audio data are used to reproduce the multi-channel audio data. A multi-channel audio data playback method that is set for each section.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021113487A JP7166398B2 (en) | 2014-09-24 | 2021-07-08 | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion |
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR20140127751 | 2014-09-24 | ||
KR10-2014-0127751 | 2014-09-24 | ||
KR1020150059445A KR101993348B1 (en) | 2014-09-24 | 2015-04-28 | Audio metadata encoding and audio data playing apparatus for supporting dynamic format conversion, and method for performing by the appartus, and computer-readable medium recording the dynamic format conversions |
KR10-2015-0059445 | 2015-04-28 | ||
JP2015183123A JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015183123A Division JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021113487A Division JP7166398B2 (en) | 2014-09-24 | 2021-07-08 | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020092439A true JP2020092439A (en) | 2020-06-11 |
JP6912612B2 JP6912612B2 (en) | 2021-08-04 |
Family
ID=55799280
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015183123A Active JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
JP2020018862A Active JP6912612B2 (en) | 2014-09-24 | 2020-02-06 | An audio metadata providing device and an audio data playback device that support dynamic format conversion, a method performed by the device, and a computer-readable recording medium on which the dynamic format conversion is recorded. |
JP2021113487A Active JP7166398B2 (en) | 2014-09-24 | 2021-07-08 | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015183123A Active JP6663147B2 (en) | 2014-09-24 | 2015-09-16 | Audio metadata providing apparatus and audio data reproducing apparatus supporting dynamic format conversion, method performed by the apparatus, and computer-readable recording medium on which dynamic format conversion is recorded |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021113487A Active JP7166398B2 (en) | 2014-09-24 | 2021-07-08 | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion |
Country Status (2)
Country | Link |
---|---|
JP (3) | JP6663147B2 (en) |
KR (5) | KR101993348B1 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA3219540A1 (en) | 2017-10-04 | 2019-04-11 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Apparatus, method and computer program for encoding, decoding, scene processing and other procedures related to dirac based spatial audio coding |
KR102062260B1 (en) * | 2017-11-23 | 2020-01-03 | 구본희 | Apparatus for implementing multi-channel sound using open-ear headphone and method for the same |
WO2024062757A1 (en) * | 2022-09-21 | 2024-03-28 | ヤマハ株式会社 | Information processing device, information processing system and information processing method |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008519491A (en) * | 2004-10-28 | 2008-06-05 | ニューラル オーディオ コーポレイション | Acoustic space environment engine |
JP2008288935A (en) * | 2007-05-18 | 2008-11-27 | Panasonic Corp | Sound processor |
JP2009506706A (en) * | 2005-08-30 | 2009-02-12 | エルジー エレクトロニクス インコーポレイティド | Audio signal decoding method and apparatus |
JP2009278381A (en) * | 2008-05-14 | 2009-11-26 | Nippon Hoso Kyokai <Nhk> | Acoustic signal multiplex transmission system, manufacturing device, and reproduction device added with sound image localization acoustic meta-information |
JP2011523247A (en) * | 2008-04-16 | 2011-08-04 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06165079A (en) * | 1992-11-25 | 1994-06-10 | Matsushita Electric Ind Co Ltd | Down mixing device for multichannel stereo use |
US9014377B2 (en) * | 2006-05-17 | 2015-04-21 | Creative Technology Ltd | Multichannel surround format conversion and generalized upmix |
KR101061128B1 (en) * | 2008-04-16 | 2011-08-31 | 엘지전자 주식회사 | Audio signal processing method and device thereof |
JP5417227B2 (en) | 2010-03-12 | 2014-02-12 | 日本放送協会 | Multi-channel acoustic signal downmix device and program |
KR102033071B1 (en) * | 2010-08-17 | 2019-10-16 | 한국전자통신연구원 | System and method for compatible multi channel audio |
WO2013192111A1 (en) * | 2012-06-19 | 2013-12-27 | Dolby Laboratories Licensing Corporation | Rendering and playback of spatial audio using channel-based audio systems |
-
2015
- 2015-04-28 KR KR1020150059445A patent/KR101993348B1/en active IP Right Grant
- 2015-09-16 JP JP2015183123A patent/JP6663147B2/en active Active
-
2019
- 2019-06-20 KR KR1020190073485A patent/KR102231750B1/en active IP Right Grant
-
2020
- 2020-02-06 JP JP2020018862A patent/JP6912612B2/en active Active
-
2021
- 2021-03-18 KR KR1020210035360A patent/KR102380279B1/en active IP Right Grant
- 2021-07-08 JP JP2021113487A patent/JP7166398B2/en active Active
-
2022
- 2022-03-24 KR KR1020220036830A patent/KR102533824B1/en active IP Right Grant
-
2023
- 2023-05-12 KR KR1020230061564A patent/KR20230071107A/en not_active Application Discontinuation
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008519491A (en) * | 2004-10-28 | 2008-06-05 | ニューラル オーディオ コーポレイション | Acoustic space environment engine |
JP2009506706A (en) * | 2005-08-30 | 2009-02-12 | エルジー エレクトロニクス インコーポレイティド | Audio signal decoding method and apparatus |
JP2008288935A (en) * | 2007-05-18 | 2008-11-27 | Panasonic Corp | Sound processor |
JP2011523247A (en) * | 2008-04-16 | 2011-08-04 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
JP2009278381A (en) * | 2008-05-14 | 2009-11-26 | Nippon Hoso Kyokai <Nhk> | Acoustic signal multiplex transmission system, manufacturing device, and reproduction device added with sound image localization acoustic meta-information |
Also Published As
Publication number | Publication date |
---|---|
KR20220044457A (en) | 2022-04-08 |
KR20190076934A (en) | 2019-07-02 |
KR20160035963A (en) | 2016-04-01 |
JP2021170798A (en) | 2021-10-28 |
KR102380279B1 (en) | 2022-03-30 |
KR102533824B1 (en) | 2023-05-26 |
KR20230071107A (en) | 2023-05-23 |
KR101993348B1 (en) | 2019-06-26 |
JP2016072973A (en) | 2016-05-09 |
JP6663147B2 (en) | 2020-03-11 |
KR20210033963A (en) | 2021-03-29 |
KR102231750B1 (en) | 2021-03-25 |
JP6912612B2 (en) | 2021-08-04 |
JP7166398B2 (en) | 2022-11-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7166398B2 (en) | Audio metadata providing device and audio data reproducing device supporting dynamic format conversion, method performed by said device, and computer readable recording medium recording said dynamic format conversion | |
KR102182761B1 (en) | Signaling audio rendering information in a bitstream | |
US11671780B2 (en) | Audio metadata providing apparatus and method, and multichannel audio data playback apparatus and method to support dynamic format conversion | |
JP5496235B2 (en) | Improved reproduction of multiple audio channels | |
CN1327436C (en) | Method and apparatus for mixing audio stream, and information storage medium | |
JP2015534656A (en) | Audio data generating apparatus and method, audio data reproducing apparatus and method | |
CN106303686A (en) | Video generation method, video-generating device and terminal unit | |
KR102455549B1 (en) | Apparatus and method for transforming audio signal using location of the user and the speaker | |
JP5552764B2 (en) | Signal processing apparatus and program | |
KR102631005B1 (en) | Apparatus and method for generating multimedia data, method and apparatus for playing multimedia data | |
KR20130127344A (en) | Method and apparatus for providing audio data, method and apparatus for providing audio metadata, method and apparatus for playing audio data | |
KR102217997B1 (en) | Apparatus and method for generating multimedia data, method and apparatus for playing multimedia data | |
KR102421292B1 (en) | System and method for reproducing audio object signal | |
Batke | On the use of spherical microphone arrays in a classical musical recording scenario | |
KR101454343B1 (en) | Method and apparatus for encoding/decoding scalable digital audio using direct audio channel data and undirect audio channel data | |
JP2018121310A (en) | Audio processing device, audio output device, television receiver, audio processing method, program, and recording medium for program | |
Hoffmann | STEREOPHONIC RECORDING | |
JP2009246481A (en) | Voice output apparatus and voice output method | |
KR20110102719A (en) | Audio up-mixing apparatus and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200304 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210226 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210526 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210611 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210708 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6912612 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |