JP2013137546A - Apparatus for encoding and decoding audio signal and method thereof - Google Patents
Apparatus for encoding and decoding audio signal and method thereof Download PDFInfo
- Publication number
- JP2013137546A JP2013137546A JP2013003356A JP2013003356A JP2013137546A JP 2013137546 A JP2013137546 A JP 2013137546A JP 2013003356 A JP2013003356 A JP 2013003356A JP 2013003356 A JP2013003356 A JP 2013003356A JP 2013137546 A JP2013137546 A JP 2013137546A
- Authority
- JP
- Japan
- Prior art keywords
- bits
- audio signal
- time slots
- bitstream
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005236 sound signal Effects 0.000 title claims abstract description 106
- 238000000034 method Methods 0.000 title claims abstract description 50
- 238000009432 framing Methods 0.000 claims description 31
- 238000006243 chemical reaction Methods 0.000 description 28
- 238000010586 diagram Methods 0.000 description 28
- 230000006870 function Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 8
- 230000000875 corresponding effect Effects 0.000 description 7
- 230000015654 memory Effects 0.000 description 6
- 230000009977 dual effect Effects 0.000 description 5
- 239000000284 extract Substances 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 238000005070 sampling Methods 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000007493 shaping process Methods 0.000 description 3
- 230000001174 ascending effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 229920001690 polydopamine Polymers 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/0017—Lossless audio signal coding; Perfect reconstruction of coded audio signal by transmission of coding error
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/167—Audio streaming, i.e. formatting and decoding of an encoded audio signal representation into a data stream for transmission or storage purposes
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
- H03M7/42—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code using table look-up for the coding or decoding process, e.g. using read-only memory
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L27/00—Modulated-carrier systems
- H04L27/26—Systems using multi-frequency codes
- H04L27/2601—Multicarrier modulation systems
- H04L27/2602—Signal structure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/007—Two-channel systems in which the audio signals are in digital form
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Mathematical Physics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Stereophonic System (AREA)
Abstract
Description
本発明は主としてオーディオ信号処理に関する。 The present invention mainly relates to audio signal processing.
通常、空間音声コーディング(SAC:Spatial Audio Coding)と呼ばれるマルチチャンネルオーディオのコーディングを認識するための新たなアプローチ方式が研究開発中にある。SACは、マルチチャンネルオーディオを低いビットレートにて送信可能にすることから、種々のオーディオ適用分野(例えば、インターネットストリーミング、音楽のダウンロードなど)に向いている。 A new approach for recognizing multi-channel audio coding, usually called Spatial Audio Coding (SAC), is currently under research and development. SAC is suitable for various audio application fields (for example, Internet streaming, music download, etc.) because it enables multi-channel audio to be transmitted at a low bit rate.
SACは、個別のオーディオ入力チャンネルを分散コーディングするよりも簡単なセットのパラメータでマルチチャンネルオーディオ信号の空間イメージを取得する。このようなパラメータは、デコーダーに送信されてオーディオ信号の空間特性を合成したり再構成するのに用いられる。 SAC obtains a spatial image of a multi-channel audio signal with a simpler set of parameters than distributed coding of individual audio input channels. Such parameters are sent to the decoder and used to synthesize and reconstruct the spatial characteristics of the audio signal.
一部のSAC適用分野においては、空間パラメータがビットストリームの一部としてデコーダーに送信される。このようなビットストリームは複数の空間フレームを含み、これらの空間フレームは空間パラメータが適用可能に並べられたタイムスロットセットを含む。また、ビットストリームは位置情報を含むが、デコーダーはこのような位置情報を用いて所定のパラメータセットが適用される正確なタイムスロットを識別することができる。 In some SAC application fields, spatial parameters are sent to the decoder as part of the bitstream. Such a bitstream includes a plurality of spatial frames, which include a time slot set in which spatial parameters are arranged to be applicable. Also, although the bitstream includes position information, the decoder can use the position information to identify an accurate time slot to which a predetermined parameter set is applied.
一部のSAC適用分野においては、エンコーディング/デコーディング経路に概念的なエレメントを用いる。そのようなエレメントの一つとしては、通常 OTT(One−To−Two)と呼ばれるものがあり、他のエレメントとしては、通常TTT(Two−To−Three)と呼ばれるものがあるが、このような名称は、それぞれ対応デコーダー要素の入力チャンネルと出力チャンネルの個数を意味している。OTTエンコーダーエレメントは、2つの空間パラメータを抽出して、ダウンミックス信号とレジデュアル信号(residual signal)を生成する。TTTエレメントは、3つのオーディオ信号を1つのダウンミックス信号と1つのレジデュアル信号にダウンミックスする。これらのエレメントが組み合わせられて種々の構成の空間オーディオ環境(例えば、サラウンドサウンドなど)を提供することができる。 Some SAC application fields use conceptual elements in the encoding / decoding path. One of such elements is usually called OTT (One-To-Two), and the other element is usually called TTT (Two-To-Three). The name means the number of input channels and output channels of the corresponding decoder element, respectively. The OTT encoder element extracts two spatial parameters and generates a downmix signal and a residual signal. The TTT element downmixes three audio signals into one downmix signal and one residual signal. These elements can be combined to provide various configurations of spatial audio environments (eg, surround sound, etc.).
一部のSAC適用分野は、ノンガイド動作モードにて動作可能であるが、このような動作モードにおいては空間パラメータを送信する必要がなく、ステレオダウンミックス信号だけがエンコーダーからデコーダーに送信される。デコーダーは、ダウンミックス信号から空間パラメータを合成してマルチチャンネルオーディオ信号の生成に用いる。 Some SAC application fields can operate in a non-guided operation mode, but in such an operation mode it is not necessary to transmit spatial parameters and only a stereo downmix signal is transmitted from the encoder to the decoder. The decoder synthesizes spatial parameters from the downmix signal and uses them to generate a multi-channel audio signal.
オーディオ信号に関連する空間情報は、デコーダーに送信されるか、または、記録媒体に記録可能なビットストリームにエンコーディングされる。このようなビットストリームは、時間、周波数及び空間エリアに関連する異なるシンタックスを含むことができる。一部の実施形態において、ビットストリームはパラメータが適用可能に並べられたセットのスロットを含む1以上のデータ構造(例えば、フレーム)を含むことができる。このようなデータ構造は、固定されたものであっても、可変的なものであってもよい。デコーダーがデータ構造タイプを判定して適切なデコーディング処理を呼び出せるようにするデータ構造タイプ表示子がビットストリームに含まれうる。データ構造は位置情報を含むことができ、デコーダーはこのような位置情報を用いて所定のパラメータセットが適用される正確なスロットを識別することができる。スロット位置情報は、データ構造タイプ表示子が表示するデータ構造タイプに応じて、固定個数のビットまたは可変個数のビットでエンコーディング可能である。可変データ構造タイプについて、スロット位置情報は前記並べられたセットのスロットにおいて当該スロットの位置により可変個数のビットでエンコーディング可能である。 Spatial information associated with the audio signal is transmitted to a decoder or encoded into a bitstream that can be recorded on a recording medium. Such a bitstream may include different syntax related to time, frequency and spatial area. In some embodiments, the bitstream can include one or more data structures (eg, frames) that include a set of slots in which parameters are appropriately arranged. Such a data structure may be fixed or variable. A data structure type indicator may be included in the bitstream that allows the decoder to determine the data structure type and invoke the appropriate decoding process. The data structure can include location information, and the decoder can use such location information to identify the exact slot to which a given parameter set is applied. The slot position information can be encoded with a fixed number of bits or a variable number of bits according to the data structure type displayed by the data structure type indicator. For variable data structure types, slot position information can be encoded with a variable number of bits according to the position of the slot in the ordered set of slots.
一部の実施形態において、オーディオ信号をエンコーディングする方法は、フレーミングタイプを決定するステップと、タイムスロットの個数及び1以上のパラメータを含むパラメータセットの個数を決定するステップと、オーディオ信号を並べられたセットのタイムスロットを含むフレームを含むビットストリームにエンコーディングするステップと、前記ビットストリームにフレーミングタイプ表示子を挿入するステップと、前記フレームタイプ表示が可変フレーミングを示す場合、並べられたセットのタイムスロットのうちパラメータがセットが適用される少なくとも一つのタイムスロットの位置を示す情報を生成するステップと、前記並べられたセットのタイムスロットのうち前記タイムスロットの位置を示す可変個数のビットを前記ビットストリームに挿入するステップと、を含み、前記可変個数のビットは前記タイムスロット位置により決定されることを特徴とする。 In some embodiments, a method for encoding an audio signal includes aligning an audio signal, determining a framing type, determining a number of time slots and a number of parameter sets including one or more parameters, and Encoding into a bitstream including a frame including a set of time slots; inserting a framing type indicator into the bitstream; and if the frame type indication indicates variable framing, A step of generating information indicating a position of at least one time slot to which the set is applied, and a variable number of bits indicating the position of the time slot among the time slots of the arranged set. Includes a step of inserting in the bitstream, the bit of the variable number is being determined by the time slot position.
一部の実施形態において、オーディオ信号をデコーディングする方法は、オーディオ信号を示しかつフレームを含むビットストリームを受信するステップと、前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定するステップと、前記ビットストリームからフレーミングタイプを決定するステップと、前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定するステップと、前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングするステップと、を含み、前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とする。 In some embodiments, a method of decoding an audio signal includes receiving a bitstream that represents an audio signal and includes a frame, and a parameter set that includes a number of time slots and one or more parameters from the bitstream. A step of determining a number, a step of determining a framing type from the bit stream, and a time slot to which a parameter set is applied among time slots of a set arranged from the bit stream when the framing type is variable framing Determining position information indicating the position of the audio signal, and decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information. Characterized in that it is represented by a variable number of bits based on the serial time slot position.
システム、方法、装置、データ構造及びコンピュータにて読取り可能な媒体に関する多数フレームタイプのタイムスロット位置コーディングの他の実施形態も開示される。 Other embodiments of multiple frame type time slot position coding for systems, methods, apparatus, data structures and computer readable media are also disclosed.
上述した通常の説明及び以下の実施形態の詳細な説明はいずれも例示的に説明するためのものであり、特許請求の範囲において請求される本発明の理解を容易にするためのものであるという点が理解されなければならない。 The foregoing general description and the following detailed description of the embodiments are for illustrative purposes only and are intended to facilitate the understanding of the present invention as claimed in the claims. The point must be understood.
本発明への理解を容易にするために含まれる添付図面は本発明の実施形態を示すものであり、この明細書と一緒に本発明の原理を説明するためのものである。 The accompanying drawings, which are included to facilitate understanding of the present invention, illustrate embodiments of the present invention and together with the description serve to explain the principles of the invention.
図1は、本発明の一実施形態により空間情報を生成する原理を示す図である。マルチチャンネルオーディオ信号に対するコーディング方式の概念は、人間がオーディオ信号を3次元的に認識するということに基づく。オーディオ信号の3次元空間は空間情報を用いて表わすことができ、これは、チャンネルレベル差分(CLD;Channel Level Difference)と、チャンネル間相関/コーヒーレンス(ICC;Inter−channel Correlation/Coherence)と、チャンネル時間差分(CTD;Channel Time Difference)と、チャンネル予測係数(CPC:Channel Prediction Coefficients)などを含むが、これらに制限されるものではない。CLDは2つのオーディオチャンネル間エネルギー(レベル)差分を意味し、ICCは2つのオーディオチャンネル間相関またはコーヒーレンスの量を意味し、CTDは2チャンネル間の時間差分を意味する。 FIG. 1 is a diagram illustrating the principle of generating spatial information according to an embodiment of the present invention. The concept of coding schemes for multi-channel audio signals is based on the fact that humans recognize audio signals three-dimensionally. The three-dimensional space of the audio signal can be represented using spatial information, which includes channel level difference (CLD), inter-channel correlation / coherence (ICC), and channel level difference (CLD). Including, but not limited to, channel time difference (CTD) and channel prediction coefficient (CPC). CLD means the energy (level) difference between two audio channels, ICC means the amount of correlation or coherence between the two audio channels, and CTD means the time difference between the two channels.
図1にCTDとCLDパラメータの生成を示す。遠距離サウンドソース101から第1のダイレクトサウンド波103が人間の左耳107に達し、第2のダイレクトサウンド波102が人間の頭の周りにおいて回折された後、人間の右耳106に達する。2つのサウンド波102及び103は到達時間とエネルギーレベルにおいて互いに異なる。CTDパラメータとCLDパラメータはサウンド波102と103の到達時間及びエネルギーレベル差分に基づき生成される。また、反射されたサウンド波104及び105が両耳106及び107にそれぞれ達し、これらは互いに相関がない。ICCパラメータはサウンド波104及び105間相関に基づき生成可能である。
FIG. 1 shows the generation of CTD and CLD parameters. The first
エンコーダーにおいては、マルチチャンネルオーディオ信号において空間情報(例えば、空間パラメータなど)が抽出され、ダウンミックス信号が生成される。ダウンミックス信号と空間パラメータはデコーダーに転送される。これに制限されるものではないが、モノ信号、ステレオ信号またはマルチチャンネルオーディオ信号を含むダウンミックス信号に任意の個数のオーディオチャンネルが使用可能である。デコーダーにおいては、ダウンミックス信号と空間パラメータからマルチチャンネルアップミックス信号が生成される。 In the encoder, spatial information (for example, spatial parameters) is extracted from the multi-channel audio signal, and a downmix signal is generated. The downmix signal and the spatial parameters are transferred to the decoder. Although not limited thereto, an arbitrary number of audio channels can be used for a downmix signal including a mono signal, a stereo signal, or a multi-channel audio signal. In the decoder, a multi-channel upmix signal is generated from the downmix signal and the spatial parameters.
図2は、本発明の一実施形態によりオーディオ信号をエンコーディングするエンコーダーのブロック図である。エンコーダーは、ダウンミキシング部202と、空間情報生成部203と、ダウンミックス信号エンコーディング部207とマルチプレクシング部209と、を備える。エンコーダーの他の構成も採用可能である。エンコーダーはハードウェアまたはソフトウェアにより実現されるか、あるいは、ハードウェアとソフトウェアとの組み合わせにより実現可能である。エンコーダーは集積回路チップ、チップセット、システムオンチップ(SoC:System on Chip)、デジタル信号プロセッサー、汎用プロセッサー及び種々のデジタル装置とアナログ装置により実現可能である。
FIG. 2 is a block diagram of an encoder for encoding an audio signal according to an embodiment of the present invention. The encoder includes a
ダウンミキシング部202は、マルチチャンネルオーディオ信号201からダウンミックス信号204を生成する。図2において、x1、…、xnは入力オーディオチャンネルを示す。上述したように、ダウンミックス信号204は、モノ信号であっても、ステレオ信号であっても、オーディオ信号であってもよい。図示の例において、x’1、…、x’mはダウンミックス信号204のチャンネル番号を示す。一部の実施形態において、エンコーダーはダウンミックス信号204に代えて外部供給ダウンミックス信号205(例えば、精度よいダウンミックスなど)を処理する。
The
空間情報生成部203は、マルチチャンネルオーディオ信号201から空間情報を抽出する。この場合、「空間情報」とは、デコーダーにおいてダウンミックス信号204をマルチチャンネルオーディオ信号にアップミキシングするのに用いられるオーディオ信号チャンネルに関連する情報を意味している。ダウンミックス信号204は、マルチチャンネルオーディオ信号をダウンミックスすることにより生成される。空間情報はエンコーディングされて、エンコーディングされた空間情報信号206を与える。
The spatial
ダウンミックス信号エンコーディング部207は、ダウンミキシング部202において生成されたダウンミックス信号204をエンコーディングして、エンコーディングされたダウンミックス信号208を生成する。
The downmix
マルチプレクシング部209は、エンコーディングされたダウンミックス信号208とエンコーディングされた空間情報信号206とを含むビットストリーム210を生成する。ビットストリーム210はダウンストリームデコーダーに転送され、及び/または、記録媒体に記録される。
The
図3は、本発明の一実施形態により、エンコーディングされたオーディオ信号をデコーディングするデコーダーのブロック図である。デコーダーは、デマルチプレクシング部302と、ダウンミックス信号デコーディング部305と、空間情報デコーディング部307と、アップミキシング部309と、を備える。デコーダーは、ハードウェアやソフトウェアにより、または、ハードウェアとソフトウェアとの組み合わせにより実現可能である。デコーダーは、集積回路チップ、チップセット、システムオンチップ(SoC)、デジタル信号プロセッサー、汎用プロセッサー及び種々のデジタル装置やデバイスにより実現可能である。
FIG. 3 is a block diagram of a decoder for decoding an encoded audio signal according to an embodiment of the present invention. The decoder includes a
一部の実施形態において、デマルチプレクシング部302は、オーディオ信号を示すビットストリーム301を受信して、このビットストリーム301から、エンコーディングされたダウンミックス信号303とエンコーディングされた空間情報信号304とを分離する。図3において、x’1、…、x’mはダウンミックス信号303のチャンネルを示す。ダウンミックス信号デコーディング部305は、エンコーディングされたダウンミックス信号303をデコーディングして、デコーディングされたダウンミックス信号306を出力する。デコーダーがマルチチャンネルオーディオ信号を出力することができない場合、ダウンミックス信号デコーディング部305はダウンミックス信号306を直接的に出力することができる。図3において、y’1、…、y’mはダウンミックス信号デコーディング部305の直接出力チャンネルを示す。
In some embodiments, the
空間情報信号デコーディング部307は、エンコーディングされた空間情報信号304から空間情報信号の構成情報を抽出し、抽出された構成情報を用いて空間情報信号304をデコーディングする。
The spatial information
アップミキシング部309は、抽出された空間情報308を用いてダウンミックス信号306をマルチチャンネルオーディオ信号310にアップミックスすることができる。図3において、 y1、…、ynはアップミキシング部309の出力チャンネル番号を示す。
The
図4は、図3に示すデコーダーのアップミキシング部309に含まれうるチャンネル変換モジュールのブロック図である。一部の実施形態において、アップミキシング部309は複数のチャンネル変換モジュールを含むことができる。チャンネル変換モジュールは、特定の情報を用いて入力チャンネルの個数と出力チャンネルの個数を区別可能な概念的な装置である。
FIG. 4 is a block diagram of a channel conversion module that can be included in the
一部の実施形態において、チャンネル変換モジュールは、1本チャンネルを2本チャンネル及び装置などに変換するOTT(One−To−Two)ボックスと、2本チャンネルを3本チャンネル及び装置などに変換するTTT(Two−To−Three)ボックスを含む。OTTボックス及び/またはTTTボックスは種々の有用な構成にて配置可能である。例えば、図3に示すアップミキシング部309は、5−1−5構成、5−2−5構成、7−2−7構成、7−5−7構成などを含むことができる。5−1−5構成においては、5本のチャンネルを1本のチャンネルにダウンミキシングして1本のチャンネルを有するダウンミックス信号が生成されるが、これは、今後、5本のチャンネルにアップミックス可能である。OTTボックスとTTTボックスの種々の組み合わせを用いる他の構成も同様に生成可能である。
In some embodiments, the channel conversion module includes an OTT (One-To-Two) box that converts one channel into two channels and devices, and a TTT that converts two channels into three channels and devices. (Two-To-Three) box. The OTT box and / or the TTT box can be arranged in various useful configurations. For example, the
図4には、アップミキシング部400の5−2−5構成例が示してある。5−2−5構成においては、2本チャンネルを有するダウンミックス信号401がアップミキシング部400に入力される。図示の例には、左側のチャンネルLと右側のチャンネルRがアップミキシング部400への入力として与えられる。この実施形態において、アップミキシング部400は、1つのTTTボックス402と3つのOTTボックス406、407及び408を備える。2本チャンネルを有するダウンミックス信号401がTTTボックスTTT0に対する入力として与えられ、TTTボックスはダウンミックス信号401を処理して3本の出力チャンネル403、404及び405を与える。TTTボックス402に対する入力として、1以上の空間パラメータ(例えば、CPC、CLD、ICCなど)が与えられて、後述するように、ダウンミックス信号401を処理するのに使用可能である。この場合、CPCは2本のチャンネルから3本のチャンネルを生成する予測係数として説明可能である。
FIG. 4 shows a 5-2-5 configuration example of the
TTTボックス402からの出力として与えられるチャンネル403は、1以上の空間パラメータを用いて2本の出力チャンネルを生成するOTTボックス406に対する入力として与えられる。図示の例において、2本の出力チャンネルは、例えば、サラウンドサウンド環境における前左側(FL;Front Left)スピーカー位置と後左側(BL;Backward Left)スピーカー位置を示す。チャンネル404は1以上の空間パラメータを用いて2本の出力チャンネルを生成するOTTボックス407に対する入力として与えられる。図示の例において、2本の出力チャンネルは前右側(FR;Front Right)のスピーカー位置と後右側(BR;Backward Right)のスピーカー位置を示す。チャンネル405は2本の出力チャンネルを生成するOTTボックス408に対する入力として与えられる。図示の例において、2本の出力チャンネルはセンター(C;Center)スピーカー位置と低周波拡張(LFE;Low Frequency Enhancement)チャンネルを示す。この場合、空間情報(例えば、CLD、ICCなど)はOTTボックスのそれぞれに対する入力として与えられる。一部の実施形態においては、レジデュアル信号Res1、Res2がOTTボックス406及び407に対する入力として与えられうる。この実施形態において、レジデュアル信号はセンターチャンネルとLFEチャンネルを出力するOTTボックス408に対する出力として与えられないことがある。
The
図4に示す構成は、チャンネル変換モジュール用の構成の一例である。OTTボックスとTTTボックスの種々の組み合わせを含むチャンネル変換モジュール用の他の構成も採用可能である。チャンネル変換モジュールのそれぞれは周波数エリアにおいて動作可能であるため、チャンネル変換モジュールのそれぞれに適用されるパラメータ帯域の個数が定義可能である。パラメータ帯域は一つのパラメータに適用可能な少なくとも一つの周波数帯域を意味している。パラメータ帯域の個数については図6Bに基づき説明する。 The configuration shown in FIG. 4 is an example of a configuration for a channel conversion module. Other configurations for channel conversion modules including various combinations of OTT boxes and TTT boxes can also be employed. Since each of the channel conversion modules can operate in the frequency area, the number of parameter bands applied to each of the channel conversion modules can be defined. The parameter band means at least one frequency band applicable to one parameter. The number of parameter bands will be described with reference to FIG. 6B.
図5は、本発明の一実施形態によりオーディオ信号のビットストリームを構成する方法を示す図である。図5の(a)は、空間情報信号だけを含むオーディオ信号のビットストリームを示し、図5の(b)及び(c)は、ダウンミックス信号と空間情報信号を含むオーディオ信号のビットストリームを示す。 FIG. 5 is a diagram illustrating a method of constructing a bit stream of an audio signal according to an embodiment of the present invention. 5A shows a bit stream of an audio signal including only a spatial information signal, and FIGS. 5B and 5C show a bit stream of an audio signal including a downmix signal and a spatial information signal. .
図5の(a)を参照すると、オーディオ信号のビットストリームは、構成情報501とフレーム503を含むことができる。フレーム503は、ビットストリームにおいて繰り返し可能であり、一部の実施形態においては、空間オーディオ情報を含む1枚の空間フレーム502を含む。
Referring to (a) of FIG. 5, the bit stream of the audio signal can include
一部の実施形態において、構成情報501は1枚の空間フレーム502内におけるタイムスロットの総数と、オーディオ信号の周波数範囲を拡張するパラメータ帯域の総数と、OTTボックスにおけるパラメータ帯域の個数と、TTTボックスにおけるパラメータ帯域の個数と、レジデュアル信号におけるパラメータ帯域の個数を示す情報を含む。構成情報501には所望に応じて他の情報が含まれ得る。
In some embodiments, the
一部の実施形態において、空間フレーム502は、1以上の空間パラメータ(例えば、CLD、ICCなど)と、フレームタイプと、1枚のフレーム内におけるパラメータセットの個数とパラメータセットが適用可能なタイムスロットと、を含む。所望に応じて、空間フレーム502には他の情報が含まれうる。図6〜図10に基づき、構成情報501及び空間フレーム502に含まれる情報の意味と用途を説明する。
In some embodiments, the
図5の(b)を参照すると、オーディオ信号のビットストリームは、構成情報504と、ダウンミックス信号505と、空間フレーム506と、を含む。この場合、1枚のフレーム507は、ダウンミックス信号505と空間フレーム506を含み、これらのフレーム507がビットストリームにおいて繰り返し可能である。
Referring to (b) of FIG. 5, the bit stream of the audio signal includes
図5の(c)を参照すると、オーディオ信号のビットストリームは、ダウンミックス信号508と、構成情報509と、空間フレーム510と、を含む。この場合、1枚のフレーム511は、構成情報509と空間フレーム510を含み、フレーム511は、ビットストリームにおいて繰り返し可能である。各フレーム511に構成情報509が挿入される場合、オーディオ信号は再生装置により任意の位置において再生可能である。
Referring to (c) of FIG. 5, the bit stream of the audio signal includes a downmix signal 508,
図5の(c)は、構成情報509がフレーム511ごとにビットストリームに挿入されることを示しているが、周期的にまたは非周期的に繰り返される複数のフレームごとに構成情報509がビットストリームに挿入可能であるということはいうまでもない。
FIG. 5C shows that the
図6Aと図6Bは、本発明の一実施形態によるパラメータセット、タイムスロット及びパラメータ帯域間の関係を示す図である。パラメータセットとは、1個のタイムスロットに適用される1以上の空間パラメータのことを言う。空間パラメータは、CLD、ICC、CPCなどの空間情報を含むことができる。タイムスロットとは、空間パラメータが適用可能なオーディオ信号の時間間隔のことをいう。1枚の空間フレームは1以上のタイムスロットを含むことができる。 6A and 6B are diagrams illustrating a relationship among parameter sets, time slots, and parameter bands according to an embodiment of the present invention. A parameter set refers to one or more spatial parameters applied to one time slot. Spatial parameters may include spatial information such as CLD, ICC, CPC. A time slot refers to a time interval of an audio signal to which a spatial parameter can be applied. One spatial frame can include one or more time slots.
図6Aを参照すると、多数のパラメータセット1、…、Pが空間フレームに使用可能であり、各パラメータセットは1以上のデータフィールド1、…、Q−1を含むことができる。オーディオ信号の全体の周波数範囲に一つのパラメータセットが適用可能であり、このようなパラメータセットにおける各空間パラメータは当該周波数帯域の1以上の位置に適用可能である。例えば、パラメータセットが20個の空間パラメータを含む場合、オーディオ信号の全体の周波数帯域は20個のエリア(以下、「パラメータ帯域」と言う。)に分割可能であり、パラメータセットの20個の空間パラメータがこれらの20個のパラメータ帯域に適用可能である。パラメータは、所望に応じて、パラメータ帯域に適用可能である。例えば、低周波パラメータ帯域に空間パラメータが密に適用され、高周波パラメータ帯域には疎らに適用可能である。
Referring to FIG. 6A, a number of parameter sets 1,..., P can be used for a spatial frame, and each parameter set can include one or
図6Bには、パラメータセットとタイムスロットとの間の関係を示す時間/周波数グラフが示している。図示の例においては、1枚の空間フレームに12個のタイムスロットに並べられたセットに3つのパラメータセット(パラメータセット1、パラメータセット2、パラメータセット3)が適用される。この場合、オーディオ信号の全体の周波数範囲は9個のパラメータ帯域に分割される。このため、水平軸はタイムスロットの個数を示し、垂直軸はパラメータ帯域の個数を示す。3つのパラメータセットのそれぞれが特定のタイムスロットに適用される。例えば、最初のパラメータセット(パラメータセット1)はタイムスロット#1に適用され、2番目のパラメータセット(パラメータセット2)はタイムスロット#5に適用され、3番目のパラメータセット(パラメータセット3)はタイムスロット#9に適用される。タイムスロットにこれらのパラメータセットを補間及び/またはコピーすることにより、残りのタイムスロットにもこれらのパラメータセットが適用可能である。一般的に、パラメータセットの個数はタイムスロットの個数以下であってもよく、パラメータ帯域の個数はオーディオ信号の周波数帯域の個数以下であってもよい。オーディオ信号の全体の時間−周波数エリアの代わりに、オーディオ信号の一部の時間−周波数エリアに関する空間情報をエンコーディングすることにより、エンコーダーからデコーダーに送られる空間情報の量を低減することができる。このようなデータの低減が可能になる理由は、公知のオーディオコーディング認識の原理によれば、時間−周波数エリアにおける空間情報は、ほとんどの場合、人間の聴覚認識に十分であるためである。
FIG. 6B shows a time / frequency graph showing the relationship between parameter sets and time slots. In the illustrated example, three parameter sets (parameter set 1, parameter set 2, parameter set 3) are applied to a set arranged in 12 time slots in one spatial frame. In this case, the entire frequency range of the audio signal is divided into nine parameter bands. Therefore, the horizontal axis indicates the number of time slots, and the vertical axis indicates the number of parameter bands. Each of the three parameter sets is applied to a specific time slot. For example, the first parameter set (parameter set 1) is applied to
開示された実施形態の重要な特徴は、パラメータセットが適用されるタイムスロットの位置を、固定個数のビットまたは可変個数のビットを用いてエンコーディングしかつデコーディングする、というところにある。また、パラメータ帯域の個数も固定個数のビットまたは可変個数のビットで表わすことができる。これに制限されるものではないが、空間オーディオコーディングに用いられる他の情報として、時間エリア、空間エリア及び/または周波数エリアに関連する情報を含む情報にも可変コーディング方式が適用可能である(例えば、フィルターバンクから出力される多数の周波数副帯域に適用される)。 An important feature of the disclosed embodiment is that the time slot position to which the parameter set is applied is encoded and decoded using a fixed number of bits or a variable number of bits. The number of parameter bands can also be represented by a fixed number of bits or a variable number of bits. Although not limited thereto, as other information used for spatial audio coding, a variable coding scheme can be applied to information including information related to a time area, a spatial area, and / or a frequency area (for example, Applied to a number of frequency subbands output from the filter bank).
図7Aは、本発明の一実施形態による空間情報の構成情報を示すシンタックスを示している。このような構成情報は多数のビットが割当て可能な複数のフィールド701〜718を含む。
FIG. 7A shows a syntax indicating configuration information of spatial information according to an embodiment of the present invention. Such configuration information includes a plurality of
「bsSamplingFrequencyIndex」フィールド701は、オーディオ信号のサンプリング処理から取得されるサンプリング周波数を示す。サンプリング周波数を示すために、「bsSamplingFrequencyIndex」フィールド701には4ビットが割り当てられる。「bsSamplingFrequencyIndex」フィールド701の値が15、すなわち、2進数「1111」であれば、サンプリング周波数を示すために、「bsSamplingFrequency」フィールド702が追加される。この場合、「bsSamplingFrequency」フィールド702には24ビットが割り当てられる。
A “bsSamplingFrequencyIndex”
「bsFrameLength」フィールド703は、1枚の空間フレーム内のタイムスロットの総数(以下、「numSlots」という。)を示し、「numSlots」と「bsFrameLength」フィールド703との間には、「numSlots=bsFrameLength+1」という関係が成り立つ。
The “bsFrameLength”
「bsFreqRes」フィールド704は、オーディオ信号の全体の周波数エリアを拡張するパラメータ帯域の総数を示す。「bsFreqRes」フィールド704については図7Bに基づき説明する。
The “bsFreqRes”
「bsTreeConfg」フィールド705は、図4に基づき説明したように、複数のチャンネル変換モジュールを含むツリー構成のための情報を示す。このようなツリー構成のための情報は、チャンネル変換モジュールのタイプ、チャンネル変換モジュールの個数、チャンネル変換モジュールに用いられた空間情報のタイプ、オーディオ信号の入力/出力チャンネルの個数などの情報を含む。
The “bsTreeConfig”
ツリー構成は、チャンネル変換モジュールのタイプまたはチャンネルの個数に応じて、5−1−5構成、5−2−5構成、7−2−7構成、7−5−7構成などのうちいずれかであってもよい。ツリー構成のうち5−2−5構成が図4に示してある。 The tree configuration is one of the 5-1-5 configuration, the 5-2-5 configuration, the 7-2-7 configuration, the 7-5-7 configuration, etc., depending on the type of channel conversion module or the number of channels. There may be. Of the tree configuration, the 5-2-5 configuration is shown in FIG.
「bsQuantMode」フィールド706は、空間情報の量子化モード情報を示す。
A “bsQuantMode”
「bsOneIcc」フィールド707は、1つのICCパラメータサブセットが全体のOTTボックスに対して用いられるか否かを示す。この場合、パラメータサブセットは、特定のタイムスロット及び特定のチャンネル変換モジュールに適用されるパラメータセットを意味する。
The “bsOneIcc”
「bsArbitraryDownmix」フィールド708は、任意のダウンミックスゲインの存否を示す。
A “bsArbitraryDownmix”
「bsFixedGainS(登録商標)ur」フィールド709は、LS(左側のサラウンド)及びRS(右側のサラウンド)などのサラウンドチャンネルに適用されるゲインを示す。
A “bsFixedGainS® ur”
「bsFixedGainLFE」は、LFEチャンネルに適用されるゲインを示す。 “BsFixedGainLFE” indicates a gain applied to the LFE channel.
「bsFixedGainDM」は、ダウンミックス信号に適用されるゲインを示す。 “BsFixedGainDM” indicates a gain applied to the downmix signal.
「bsMatrixMode」フィールド712は、ステレオダウンミックス信号と互換可能な行列がエンコーダーから生成されるか否かを示す。
The “bsMatrixMode”
「bsTempShapeConfig」フィールド713は、デコーダーにおける臨時の形態(例えば、TES(Temporal Envelope Shaping)及び/またはTP(Temporal Shaping))の動作モードを示す。
The “bsTempShapeConfig”
「bsDecorrConfig」フィールド714は、デコーダーの相関分離器の動作モードを示す。
The “bsDecorrConfig”
最後に、「bs3DaudioMode」フィールド715は、ダウンミックス信号が3D信号にエンコーディングされるか否かと、逆HRTF処理が用いられるか否かを示す。
Finally, the “bs3DaudioMode”
エンコーダー/デコーダーにおいて各フィールドの情報が決定/抽出された後、チャンネル変換モジュールに適用されるパラメータ帯域の個数に関する情報がエンコーダー/デコーダーにおいて決定/抽出される。先ず、OTTボックスに適用されるパラメータ帯域の個数が決定/抽出され(716)てから、TTTボックスに適用されるパラメータ帯域の個数が決定/抽出される(717)。OTTボックス及び/またはTTTボックスに対するパラメータ帯域の個数は、以下、図8A〜図9Bに基づき詳述する。 After the information of each field is determined / extracted in the encoder / decoder, information on the number of parameter bands applied to the channel conversion module is determined / extracted in the encoder / decoder. First, the number of parameter bands applied to the OTT box is determined / extracted (716), and then the number of parameter bands applied to the TTT box is determined / extracted (717). The number of parameter bands for the OTT box and / or the TTT box will be described in detail below with reference to FIGS. 8A to 9B.
拡張フレームが存在する場合、「spatialExtensionConfig」ブロック718は、拡張フレームに関する構成情報を含む。「spatialExtensionConfig」ブロック718に含まれている情報について、以下、図10A〜図10Dに基づき説明する。
If an extension frame is present, a “spatialExtensionConfig”
図7Bは、本発明の一実施形態による空間情報信号のパラメータ帯域の個数を示す表である。「numBands」は、オーディオ信号の全体の周波数エリアに対するパラメータ帯域の個数を示し、「bsFreqRes」は、パラメータ帯域の個数に関するインデックス情報を示す。例えば、オーディオ信号の全体の周波数エリアは、所望に応じて、パラメータ帯域の個数(例えば、4、5、7、10、14、20、28など)に分割可能である。 FIG. 7B is a table showing the number of parameter bands of the spatial information signal according to an embodiment of the present invention. “NumBands” indicates the number of parameter bands for the entire frequency area of the audio signal, and “bsFreqRes” indicates index information regarding the number of parameter bands. For example, the entire frequency area of the audio signal can be divided into the number of parameter bands (eg, 4, 5, 7, 10, 14, 20, 28, etc.) as desired.
一部の実施形態においては、各パラメータ帯域に一つのパラメータが適用可能である。例えば、「numBands」が28である場合、オーディオ信号の全体の周波数エリアは28個のパラメータ帯域に分割され、これらの28個のパラメータ帯域のそれぞれに28個のパラメータがそれぞれ適用可能である。他の例において、「numBands」が4である場合、所定のオーディオ信号の全体の周波数エリアは4個のパラメータ帯域に分割され、これらの4個のパラメータ帯域のそれぞれには4個のパラメータがそれぞれ適用可能である。図7Bにおいて、「Reserve」は、所定のオーディオ信号の全体の周波数エリアに対するパラメータ帯域の個数が決定されていないことを意味する。 In some embodiments, one parameter can be applied to each parameter band. For example, when “numBands” is 28, the entire frequency area of the audio signal is divided into 28 parameter bands, and 28 parameters can be applied to each of these 28 parameter bands. In another example, when “numBands” is 4, the entire frequency area of a given audio signal is divided into four parameter bands, each of which has four parameters. Applicable. In FIG. 7B, “Reserve” means that the number of parameter bands for the entire frequency area of the predetermined audio signal has not been determined.
人間の聴覚機関は、コーディング方式において用いられるパラメータ帯域の個数に敏感ではないということに留意する必要がある。このため、少数のパラメータ帯域を用いてもより多数のパラメータ帯域が用いられた場合に比べて、聴取者に類似する空間オーディオ効果を奏することができる。 It should be noted that the human auditory engine is not sensitive to the number of parameter bands used in the coding scheme. For this reason, even if a small number of parameter bands are used, a spatial audio effect similar to that of the listener can be achieved as compared with the case where a larger number of parameter bands are used.
「numBands」とは異なり、図7Aに示す「bsFramelength」フィールド703が示す「numSlots」は、全体の値を示すことができる。しかしながら、1枚の空間フレーム内のサンプルの個数が「numSlots」により明確に分割される場合、「numSlots」の値は制限される。このため、実質的に表わされるべき「numSlots」の最大値が「b」であれば、「bsFrameLength」フィールド703の全体の値はceil{log2(b)}ビットで表わすことができる。この場合、「ceil(x)」は、値「x」以上の最大の整数を意味する。例えば、1枚の空間フレームが72個のタイムスロットを含む場合、ceil{log2(72)}=7ビットが「bsFrameLength」フィールド703に割当て可能であり、チャンネル変換モジュールに適用されるパラメータ帯域の個数は「numBands」内において決定可能である。
Unlike “numBands”, “numSlots” indicated by the “bsFramelength”
図8Aは、本発明の一実施形態により、OTTボックスに適用されるパラメータ帯域の個数を固定個数のビットで表わすシンタックスを示している。図7Aと図8Aを参照すると、「i」は「0」において「numOttBoxes−1」の値を有し、「numOttBoxes」はOTTボックスの総数である。すなわち、「i」の値が各OTTボックスを示し、各OTTボックスに適用されるパラメータ帯域の個数は「i」の値により表わされる。OTTボックスがLFEチャンネルモードを有する場合、OTTボックスのLFEチャンネルに適用される帯域の個数(以下、「bsOttBands」という。)は固定個数のビットを用いて表わすことができる。図示の例においては、「bsOttBands」フィールド801に5ビットが割り当てられる。OTTボックスがLFEチャンネルモードを有さない場合、総数のパラメータ帯域numBandsがOTTボックスのチャンネルに割り当てられる。
FIG. 8A shows a syntax for representing the number of parameter bands applied to an OTT box by a fixed number of bits according to an embodiment of the present invention. Referring to FIGS. 7A and 8A, “i” has a value of “numOttBoxes−1” at “0”, and “numOttBoxes” is the total number of OTT boxes. That is, the value of “i” indicates each OTT box, and the number of parameter bands applied to each OTT box is represented by the value of “i”. When the OTT box has the LFE channel mode, the number of bands applied to the LFE channel of the OTT box (hereinafter referred to as “bsOttBands”) can be expressed using a fixed number of bits. In the illustrated example, 5 bits are assigned to the “bsOttBands”
図8Bは、本発明の一実施の形態により、OTTボックスに適用されるパラメータ帯域の個数を可変個数のビットで表わすシンタックスを示している。図8Bは、図8Aとほとんど同様であるが、図8Bに示す「bsOttBands」フィールド802が可変個数のビットで表わすという点で図8Aとは異なる。具体的に、「numBands」以下の値を有する「bsOttBands」フィールド802は、「numBands」を用いる可変個数のビットで表わすことができる。
FIG. 8B shows a syntax representing the number of parameter bands applied to an OTT box by a variable number of bits according to an embodiment of the present invention. FIG. 8B is almost the same as FIG. 8A, but differs from FIG. 8A in that the “bsOtBands”
「numBands」が2^(n−1)以上2^(n)未満の範囲に収まると、「bsOttBands」フィールド802は可変nビットで表わすことができる。
When “numBands” falls within the range of 2 ^ (n−1) or more and less than 2 ^ (n), the “bsOttBands”
例えば、(a)「numBands」が40である場合、「bsOttBands」フィールド802は6ビットで表わされ、(b)「numBands」が28または20である場合、「bsOttBands」フィールド802は5ビットで表わされ、(c)「numBands」が14または10である場合、「bsOttBands」フィールド802は4ビットで表わされ、(d)「numBands」が7、5または4である場合、「bsOttBands」フィールド802は3ビットで表わされる。
For example, if (a) “numBands” is 40, the “bsOtBands”
「numBands」が2^(n−1)超え2^(n)以下の範囲に収まると、「bsOttBands」フィールド802は可変nビットで表わすことができる。
When “numBands” falls within the range of 2 ^ (n−1) to 2 ^ (n), the “bsOttBands”
例えば、(a)「numBands」が40である場合、「bsOttBands」フィールド802は6ビットで表わされ、(b)「numBands」が28または20である場合、「bsOttBands」フィールド802は5ビットで表わされ、(c)「numBands」が14または10である場合、「bsOttBands」フィールド802は4ビットで表わされ、(d)「numBands」が7または5である場合、「bsOttBands」フィールド802は3ビットで表わされ、(e)「numBands」が4である場合、「bsOttBands」フィールド802は2ビットとなる。
For example, if (a) “numBands” is 40, the “bsOtBands”
「bsOttBands」フィールド802は、「numBands」を変数として取って最も近い整数に切り上げる関数(以下、「切り上げ関数」と言う。)により可変個数のビットで表わすことができる。
The “bsOttBands”
具体的に、i)0<bsOttBands<numBandsまたは0≦bsOttBands<numBandsである場合、「bsOttBands」フィールド802はceil(log2numBands)の値に対応する数のビットで表わされるか、あるいは、ii)0≦bsOttBands≦numBandsである場合、「bsOttBands」フィールド802はceil(log2(numBands+1))で表わすことができる。
Specifically, if i) 0 <bsOtBands <numBands or 0 ≦ bsOttBands <numBands, then the “bsOtBands”
「numBands」(以下、「numberBands」という。)以下の値が任意に決定される場合、「bsBands」フィールド802は、「numberBands」を変数として取って切り上げ関数により可変個数のビットで表わすことができる。
“NumBands” (hereinafter referred to as “numberBands”) When the following values are arbitrarily determined, the “bsBands”
具体的に、i)0<bsOttBands≦numberBandsまたは0≦bsOttBands<numberBandsである場合、「bsOttBands」フィールド802はceil(log2(numberBands))ビットで表わされるか、あるいは、ii)0≦bsOttBands≦numberBandsである場合、「bsOttBands」フィールド802はceil(log2(numberBands+1)で表わすことができる。
Specifically, if i) 0 <bsOtBands ≦ numberBands or 0 ≦ bsOtBands <numberBands, then the “bsOtBands”
1以上のOTTボックスが用いられる場合、「bsOttBands」の組み合わせは以下の〔式1〕で表わすことができる: If more than one OTT box is used, the combination of “bsOttBands” can be represented by the following [Equation 1]:
ここで、bsOttBandsiはi番目の「bsOttBands」を示す。例えば、OTTボックスが3個存在し、「bsOttBands」フィールド802に対して3つの値(N=3)が存在するとする。この例において、3つのOTTボックスに適用される「bsOttBands」フィールド802の3つの値(以下、それぞれa1、a2、a3とする。)はそれぞれ2ビットで表わすことができる。このため、a1、a2、a3の値を表わすために、合計で6ビットが必要となる。しかしながら、a1、a2、a3の値がグループで表わされる場合、27個(=3*3*3)の場合が発生可能であり、これは5ビットで表わすことができ、1ビットを節約することになる。「numBands」が3であり、かつ、5ビットで表わされるグループ値が15である場合、グループ値は15=1x(3^2)+2*(3^1)+0*(3^0)で表わすことができる。このため、デコーダーは〔式1〕の逆を適用してグループ値15から「bsOttBands」フィールド802の3つの値a1、a2、a3をそれぞれ1、2、0に決定することができる。
Here, bsOttBands i indicates the i-th “bsOttBands”. For example, it is assumed that there are three OTT boxes and three values (N = 3) exist for the “bsOttBands”
多数のOTTボックスの場合、「bsOttBands」の組み合わせは「numberBands」を用いて、〔式2〕ないし〔式4〕の内のいずれかとして表わすことができる。
「numberBands」を用いる「bsOttBands」の表現は〔式1〕における「numBands」を用いる表現とほとんど同様であるため、詳細な説明は省き、その式だけを以下に示す。
In the case of a large number of OTT boxes, the combination of “bsOttBands” can be expressed as one of [Expression 2] to [Expression 4] using “numberBands”.
Since the expression “bsOtBands” using “numberBands” is almost the same as the expression using “numBands” in [Expression 1], detailed description is omitted, and only the expression is shown below.
図9Aは、本発明の一実施形態により、TTTボックスに適用されるパラメータ帯域の個数を固定個数のビットで示すシンタックスを示している。図7Aと図9Aを参照すると、「i」は「0」において「numTttBoxes−1」の値を有し、「numTttBoxes」はTTTボックスの総数である。すなわち、「i」の値が各TTTボックスを示す。各TTTボックスに適用されるパラメータ帯域の個数は「i」の値により表わされる。一部の実施形態において、TTTボックスは低周波帯域範囲と高周波帯域範囲とに分割可能であり、これらの低周波帯域範囲と高周波帯域範囲には異なる処理が適用可能である。異なる分割も行うことが可能である。 FIG. 9A illustrates a syntax indicating the number of parameter bands applied to a TTT box with a fixed number of bits according to an embodiment of the present invention. Referring to FIGS. 7A and 9A, “i” has a value of “numTttBoxes-1” at “0”, and “numTttBoxes” is the total number of TTT boxes. That is, the value of “i” indicates each TTT box. The number of parameter bands applied to each TTT box is represented by a value of “i”. In some embodiments, the TTT box can be divided into a low frequency band range and a high frequency band range, and different processing can be applied to these low frequency band range and high frequency band range. Different divisions are possible.
「bsTTTDualMode」フィールド901は、所定のTTTボックスが低周波帯域範囲と高周波帯域範囲に対してそれぞれ異なるモード(以下、「デュアルモード」という。)にて動作するか否かを示す。例えば、「bsTTTDualMode」フィールド901の値が「0」である場合、低周波帯域範囲と高周波帯域範囲を区別することなく、全体の帯域範囲に対して単一のモードが用いられる。「bsTTTDualMode」フィールド901の値が「1」である場合、低周波帯域範囲と高周波帯域範囲に対してそれぞれ異なるモードが用いられる。
The “bsTTDualMode”
「bsTttModeLow」フィールド902は、所定のTTTボックスの動作モードを示すものであり、これは種々の動作モードを有することができる。例えば、TTTボックスは、CPCパラメータとICCパラメータなどを用いる予測モード、CLDパラメータを用いるエネルギー基盤のモードなどを有することができる。TTTボックスがデュアルモードを有する場合、高周波帯域範囲に関する追加情報が必要になる。
The “bsTttModeLow”
「bsTttModeHigh」フィールド903は、TTTボックスがデュアルモードを有する場合に高周波帯域範囲の動作モードを示す。
The “bsTttModeHigh”
「bsTttBandsLow」フィールド904は、TTTボックスに適用されるパラメータ帯域の個数を示す。
A “bsTttBandsLow”
「bsTttBandsHigh」フィールド905は、「numBands」を有する。
The “bsTttBandsHigh”
TTTボックスがデュアルモードを有する場合、低帯域範囲は「0」以上「bsTttBandsLow」未満であり、高帯域範囲は「bsTttBandsLow」以上「bsTttBandsHigh」未満である。 When the TTT box has a dual mode, the low band range is “0” or more and less than “bsTttBandsLow”, and the high band range is “bsTttBandsLow” or more and less than “bsTttBandsHigh”.
TTTボックスがデュアルモードを有さない場合、TTTボックスに適用されるパラメータ帯域の個数は「0」以上「numBands」未満である(907)。 If the TTT box does not have a dual mode, the number of parameter bands applied to the TTT box is greater than or equal to “0” and less than “numBands” (907).
「bsTttBandsLow」フィールド904は、固定個数のビットで表わすことができる。例えば、図9Aに示すように、「bsTttBandsLow」フィールド904を表わすために5ビットが割当て可能である。
The “bsTttBandsLow”
図9Bは、本発明の一実施形態により、TTTボックスに適用されるパラメータ帯域の個数を可変個数のビットで表わすシンタックスを示している。図9Bは、図9Aとほとんど同様であるが、図9Bにおいては、「bsTttBandsLow」フィールド907を可変個数のビットで表わし、図9Aにおいては、「bsTttBandsLow」フィールド904を固定個数のビットで表わすという点において図9Aと図9Bとは異なっている。具体的に、「bsTttBandsLow」フィールド907は「numBands」以下の値を有するため、「bsTttBandsLow」フィールド907は「numBands」を用いる可変個数のビットで表わすことができる。
FIG. 9B shows a syntax for representing the number of parameter bands applied to a TTT box by a variable number of bits according to an embodiment of the present invention. 9B is almost the same as FIG. 9A, except that in FIG. 9B the “bsTttBandsLow”
具体的に、「numBands」が2^(n−1)以上2^(n)未満の範囲に収まると、「bsTttBandsLow」フィールド907はnビットで表わすことができる。
Specifically, when “numBands” falls within the range of 2 ^ (n−1) or more and less than 2 ^ (n), the “bsTttBandsLow”
例えば、(i)「numBands」が40である場合、「bsTttBandsLow」フィールド907は6ビットで表わされ、(ii)「numBands」が28または20である場合、「bsTttBandsLow」フィールド907は5ビットで表わされ、(iii )「numBands」が14または10である場合、「bsTttBandsLow」フィールド907は4ビットで表わされ、(iv)「numBands」が7、5または4である場合、「bsTttBandsLow」フィールド907は3ビットで表わされる。
For example, if (i) “numBands” is 40, the “bsTttBandsLow”
「numBands」が2^(n−1)超え2^(n)以下の範囲に収まると、「bsTttBandsLow」フィールド907は可変nビットで表わすことができる。
When “numBands” falls within the range of 2 ^ (n−1) to 2 ^ (n), the “bsTttBandsLow”
例えば、(i)「numBands」が40である場合、「bsTttBandsLow」フィールド907は6ビットで表わされ、(ii)「numBands」が28または20である場合、「bsTttBandsLow」フィールド907は5ビットで表わされ、(iii )「numBands」が14または10である場合、「bsTttBandsLow」フィールド907は4ビットで表わされ、(iv)「numBands」が7または5である場合、「bsTttBandsLow」フィールド907は3ビットで表わされ、(v)「numBands」が4である場合、「bsOttBands」フィールド802は2ビットで表わされる。
For example, if (i) “numBands” is 40, the “bsTttBandsLow”
「bsTttBandsLow」フィールド907は、「numBands」を変数として取って最も近い整数に切り上げて決定される個数のビットで表わすことができる。
The “bsTttBandsLow”
例えば、i)0<bsOttBandsLow≦numBandsまたは0≦bsOttBandsLow<numBandsである場合、「bsTttBandsLow」フィールド907はceil(log2(numBands))の値に対応する数のビットで表わされるか、あるいは、ii)0≦bsOttBandsLow≦numBandsである場合、「bsTttBandsLow」フィールド907はceil(log2(numBands+1))で表わすことができる。
For example, if i) 0 <bsOtBandsLow ≦ numBands or 0 ≦ bsOttBandsLow <numBands, then the “bsTttBandsLow”
「numBands」、すなわち、「numberBands」以下の値が任意に決定される場合、「bsTttBandsLow」フィールド907は、「numberBands」を用いて可変個数のビットで表わすことができる。
If “numBands”, that is, a value less than “numberBands” is arbitrarily determined, the “bsTttBandsLow”
具体的に、i)0<bsOttBandsLow≦numberBandsまたは0≦bsOttBandsLow<numberBandsである場合、「bsTttBandsLow」フィールド907はceil(log2(numberBands))の値に対応する数のビットで表わされるか、あるいは、ii)0≦bsOttBandsLow≦numberBandsである場合、「bsTttBandsLow」フィールド907はceil(log2(numberBands+1)の値に対応する数のビットで表わすことができる。
Specifically, i) if 0 <bsOtBandsLow ≦ numberBands or 0 ≦ bsOttBandsLow <numberBands, then the “bsTttBandsLow”
多数のTTTボックスが用いられる場合、「bsTttBandsLow」の組み合わせは以下の〔式5〕で表わすことができる: When multiple TTT boxes are used, the combination of “bsTttBandsLow” can be expressed by the following [Equation 5]:
ここで、bsTttBandsLowiはi番目の「bsTttBandsLow」を示す。〔式5〕の意味は〔式1〕の意味と同様であるため、〔式5〕の詳細な説明は省く。
多数のTTTボックスの場合、「bsTttBandsLow」の組み合わせは「numberBands」を用いる〔式6〕乃至〔式8〕の意味は〔式2〕乃至〔式4〕の意味と同一であるので、〔式6〕乃至〔式8〕についての詳細な説明は省略する。
Here, bsTttBandsLow i indicates the i-th “bsTttBandsLow”. Since the meaning of [Formula 5] is the same as the meaning of [Formula 1], a detailed description of [Formula 5] is omitted.
In the case of a large number of TTT boxes, the combination of “bsTttBandsLow” uses “numberBands”. The meaning of [Expression 6] to [Expression 8] is the same as the meaning of [Expression 2] to [
OTT及び/またはTTボックスに適用されるパラメータ帯域の個数が一旦決定されると、前記パラメータ帯域の個数の範囲内において各OTTボックス及び/または各TTTボックスに適用可能なパラメータセットが決定される。各OTTボックス及び/または各TTTボックスには各パラメータセットがタイムスロット単位で適用可能である。すなわち、1個のタイムスロットに一つのパラメータセットが適用可能である。 Once the number of parameter bands to be applied to the OTT and / or TT box is determined, a parameter set applicable to each OTT box and / or each TTT box is determined within the number of parameter bands. Each parameter set can be applied to each OTT box and / or each TTT box in units of time slots. That is, one parameter set can be applied to one time slot.
以上の述べたように、1枚の空間フレームは複数のタイムスロットを含むことができる。空間フレームが固定フレームタイプである場合、複数のタイムスロットには等間隔にてパラメータセットが適用可能である。空間フレームが可変フレームタイプである場合、パラメータが適用されるタイムスロットの位置情報が必要となる。これについては、図13A〜13Cに基づき後述する。 As described above, one spatial frame can include a plurality of time slots. When the spatial frame is a fixed frame type, a parameter set can be applied to a plurality of time slots at equal intervals. When the spatial frame is a variable frame type, position information of the time slot to which the parameter is applied is necessary. This will be described later with reference to FIGS.
図10Aは、本発明の一実施形態により空間拡張フレームに関する空間拡張構成情報を示すシンタックスを示している。空間拡張構成情報は、「bsSacExtType」フィールド1001と、「bsSacExtLen」フィールド1002と、「bsSacExtLenAdd」フィールド1003と、「bsSacExtLenAddAdd」フィールド1004と、「bsFillBits」フィールド1007と、を含む。他のフィールドも採用可能である。
FIG. 10A illustrates a syntax indicating spatial extension configuration information regarding a spatial extension frame according to an embodiment of the present invention. The spatial extension configuration information includes a “bsSacExtType”
「bsSacExtType」フィールド1001は、空間拡張フレームのデータタイプを示す。例えば、空間拡張フレームは、「0」、レジデュアル信号データ、任意のダウンミックスレジデュアル信号データまたは任意のツリーデータで詰め込むことができる。
A “bsSacExtType”
「bsSacExtLen」フィールド1002は、空間拡張構成情報のバイト数を示す。
A “bsSacExtLen”
「bsSacExtLenAdd」フィールド1003は、空間拡張構成情報のバイト数が、例えば15以上である場合、空間拡張構成情報の追加バイト数を示す。
The “bsSacExtLenAdd”
「bsSacLenAddAdd」フィールド1004は、空間拡張構成情報のバイト数が、例えば270以上である場合、空間拡張構成情報の追加バイト数を示す。
The “bsSacLenAddAdd”
エンコーダー/デコーダーにおいて各フィールドが決定/抽出された後、空間拡張フレームに含まれるデータタイプに関する構成情報が決定される(1005)。 After each field is determined / extracted in the encoder / decoder, configuration information regarding the data type included in the spatial extension frame is determined (1005).
上述したように、空間拡張フレームにはレジデュアル信号データ、任意のダウンミックスレジデュアル信号データ、ツリー構成データなどが含まれ得る。 As described above, the spatial extension frame may include residual signal data, arbitrary downmix residual signal data, tree configuration data, and the like.
続けて、空間拡張構成情報の長さのうち未使用のビットの個数が算出される(1006)。 Subsequently, the number of unused bits in the length of the spatial extension configuration information is calculated (1006).
「bsFillBits」フィールド1007は、未使用のビットを詰め込むために見逃しうるデータのビット数を示す。
The “bsFillBits”
図10Bと図10Cは、本発明の一実施形態により、空間拡張フレームにレジデュアル信号が含まれる場合、レジデュアル信号のための空間拡張情報を示すシンタックスを示している。 10B and 10C illustrate a syntax indicating spatial extension information for a residual signal when the residual signal is included in the spatial extension frame according to an embodiment of the present invention.
図10Bを参照すると、「bsResidualSamplingFrequencyIndex」フィールド1008は、レジデュアル信号のサンプリング周波数を示す。
Referring to FIG. 10B, a “bsResidualSamplingFrequencyIndex”
「bsResidualFramesPerSpatialFrame」フィールド1009は、空間フレーム当たりのレジデュアルフレームの本数を示す。例えば、1枚の空間フレームに1枚、2枚 、3枚または4枚のレジデュアルフレームが含まれうる。
The “bsResidualFramesPerSpatialFrame”
「ResidualConfig」フィールド1010は、各OTT及び/またはTTTボックスに適用されるレジデュアル信号に対するパラメータ帯域の個数を示す。
The “ResidualConfig”
図10Cを参照すると、「bsResidualPresent」フィールド1011は、各OTT及び/またはTTTボックスにレジデュアル信号が適用されるか否かを示す。
Referring to FIG. 10C, a “bsResidualPresent”
「bsResidualBands」フィールド1012は、各OTT及び/又はTTTボックスにレジデュアル信号が存在する場合、各OTT及び/又はTTTボックスに存在するレジデュアル信号のパラメータ帯域の個数を示す。レジデュアル信号のパラメータ帯域の個数は固定個数のビットまたは可変個数のビットで表わすことができる。パラメータ帯域の個数が固定個数のビットで表わされる場合、レジデュアル信号はオーディオ信号のパラメータ帯域の総数以下の値を有することができる。このため、全体のパラメータ帯域の個数を示すために必要となるビット数(例えば、図10Cにおける5ビットなど)が割当て可能である。
The “bsResidualBands”
図10Dは、本発明の一実施形態により、レジデュアル信号のパラメータ帯域の個数を可変個数のビットで表わすシンタックスを示している。「beResidualBands」フィールド1014は、「numBands」を用いる可変個数のビットで表わすことができる。
FIG. 10D illustrates a syntax that represents the number of parameter bands of a residual signal with a variable number of bits according to an embodiment of the present invention. The “beResidualBands”
「numBands」が2^(n−1)以上2^(n)未満であれば、「beResidualBands」フィールド1014はnビットで表わすことができる。
If “numBands” is greater than or equal to 2 ^ (n−1) and less than 2 ^ (n), the “beResidualBands”
例えば、(i)「numBands」が40である場合、「beResidualBands」フィールド1014は6ビットで表わされ、(ii)「numBands」が28または20である場合、「beResidualBands」フィールド1014は5ビットで表わされ、(iii )「numBands」が14または10である場合、「beResidualBands」フィールド1014は4ビットで表わされ、(iv)「numBands」が7、5または4である場合、「beResidualBands」フィールド1014は3ビットで表わされる。
For example, if (i) “numBands” is 40, the “beResidualBands”
「numBands」が2^(n−1)超え2^(n)以下であれば、「beResidualBands」フィールド1014は可変nビットで表わすことができる。
If “numBands” is greater than 2 ^ (n−1) and less than or equal to 2 ^ (n), the “beResidualBands”
例えば、(i)「numBands」が40である場合、「beResidualBands」フィールド1014は6ビットで表わされ、(ii)「numBands」が28または20である場合、「beResidualBands」フィールド1014は5ビットで表わされ、(iii )「numBands」が14または10である場合、「beResidualBands」フィールド1014は4ビットで表わされ、(iv)「numBands」が7または5である場合、「beResidualBands」フィールド1014は3ビットで表わされ、(v)「numBands」が4である場合、「beResidualBands」フィールド1014は2ビットで表わされる。
For example, if (i) “numBands” is 40, the “beResidualBands”
また、「beResidualBands」フィールド1014は、「numBands」を変数として取って最も近い整数に切り上げて決定される切り上げ関数により決定されるビット数で表わすことができる。
Further, the “beResidualBands”
具体的に、i)0<beResidualBands≦numBandsまたは0≦beResidualBands<numBandsである場合、「beResidualBands」フィールド1014はceil(log2(numBands))ビットで表わされるか、あるいは、ii)0≦beResidualBands≦numBandsである場合、「beResidualBands」フィールド1014はceil(log2(numBands+1))ビットで表わすことができる。
Specifically, if i) 0 <beResidualBands ≦ numBands or 0 ≦ beResidualBands <numBands, the “beResidualBands”
一部の実施形態においては、「numBands」以下の値「numberBands」を用いて「beResidualBands」フィールド1014を表わすことができる。
In some embodiments, a “beResidualBands”
具体的に、i)0<beResidualBands≦numberBandsまたは0≦beResidualBands<numberBandsである場合、「beResidualBands」フィールド1014はceil(log2(numberBands))ビットで表わされるか、あるいは、ii)0≦beResidualBands≦numberBandsである場合、「beResidualBands」フィールド1014はceil(log2(numberBands+1))の値で表わすことができる。
Specifically, if i) 0 <beResidualBands ≦ numberBands or 0 ≦ beResidualBands <numberBands, then the “beResidualBands”
複数のレジデュアル信号Nが存在する場合、「beResidualBands」の組み合わせは、以下の〔式9〕で表わすことができる: When there are a plurality of residual signals N, the combination of “beResidualBands” can be expressed by the following [Equation 9]:
この場合、bsResidualBandsiはi番目の「bsResidualBands」を示す。
〔式9〕の意味は〔式1〕の意味と同一であるため、〔式9〕の詳細な説明は省略する。
In this case, bsResidualBands i indicates the i-th “bsResidualBands”.
Since the meaning of [Formula 9] is the same as the meaning of [Formula 1], a detailed description of [Formula 9] is omitted.
多数のレジデュアル信号が存在する場合、「bsResidualBands」の組み合わせは「numberBands」を用いる〔式10〕乃至〔式12〕の内のいずれかとして表わすことができる。「numberBands」を用いて「bsResidualBands」を表わすことは〔式2〕乃至〔式4〕とほとんど同様であるため、詳細な説明を省く。 When there are a large number of residual signals, the combination of “bsResidualBands” can be expressed as any one of [Equation 10] to [Equation 12] using “numberBands”. Representing “bsResidualBands” using “numberBands” is almost the same as [Formula 2] to [Formula 4], and thus detailed description is omitted.
レジデュアル信号のパラメータ帯域の個数は「numBands」の分割値として表わすことができる。この場合、上述した分割値は、「numBands」の半分値または特定の値で「numBands」を割った結果値を用いる。 The number of parameter bands of the residual signal can be expressed as a divided value of “numBands”. In this case, as the above-described division value, a half value of “numBands” or a result value obtained by dividing “numBands” by a specific value is used.
レジデュアル信号はダウンミックス信号及び空間情報信号と共にオーディオ信号のビットストリームに含まれてもよく、このようなビットストリームはデコーダーに転送可能である。デコーダーは、このようなビットストリームから前記ダウンミックス信号と、空間情報信号及びレジデュアル信号を抽出することができる。 The residual signal may be included in the audio signal bit stream along with the downmix signal and the spatial information signal, and such bit stream can be transferred to the decoder. The decoder can extract the downmix signal, the spatial information signal, and the residual signal from such a bitstream.
続けて、ダウンミックス信号は空間情報を用いてアップミックスされる。一方、レジデュアル信号はアップミックスの過程においてダウンミックス信号に適用される。具体的に、ダウンミックス信号は空間情報を用いる複数のチャンネル変換モジュールにおいてアップミックスされる。このような過程において、レジデュアル信号がチャンネル変換モジュールに適用される。以上述べたように、チャンネル変換モジュールは複数のパラメータ帯域を有し、パラメータセットはタイムスロット単位でチャンネル変換モジュールに適用される。レジデュアル信号がチャンネル変換モジュールに適用される場合、レジデュアル信号が適用されるオーディオ信号のチャンネル間相関情報を更新するためにはレジデュアル信号が必要となる。このような更新されたチャンネル間相関情報はアップミキシング処理に用いられる。 Subsequently, the downmix signal is upmixed using spatial information. On the other hand, the residual signal is applied to the downmix signal in the upmix process. Specifically, the downmix signal is upmixed in a plurality of channel conversion modules using spatial information. In this process, the residual signal is applied to the channel conversion module. As described above, the channel conversion module has a plurality of parameter bands, and the parameter set is applied to the channel conversion module in units of time slots. When the residual signal is applied to the channel conversion module, the residual signal is required to update the inter-channel correlation information of the audio signal to which the residual signal is applied. Such updated inter-channel correlation information is used for the upmixing process.
図11Aは、本発明の一実施形態によるノンガイドコーディングのためのデコーダーを示すブロック図である。ノンガイドコーディングは、オーディオ信号のビットストリームに空間情報が含まれていないことを意味する。 FIG. 11A is a block diagram illustrating a decoder for non-guided coding according to an embodiment of the present invention. Non-guide coding means that spatial information is not included in the bit stream of the audio signal.
一部の実施形態において、デコーダーは、解析フィルターバンク1102と、解析部1104と、空間合成部1006と、合成フィルターバンク1108と、を備える。図11Aにはステレオ信号タイプのダウンミックス信号が示されているが、他のタイプのダウンミックス信号が使用可能である。
In some embodiments, the decoder includes an
動作に際し、デコーダーはダウンミックス信号1101を受信し、解析フィルターバンク1102は前記受信されたダウンミックス信号1101を周波数エリア信号1103に変換する。解析部1104は、前記変換されたダウンミックス信号1103から空間情報を生成する。解析部1104がスロット単位で処理を行い、複数のスロットごとに空間情報1105を生成することができる。この場合、スロットはタイムスロットを含む。
In operation, the decoder receives a
空間情報は2ステップで生成可能である。第一に、ダウンミックス信号からダウンミックスパラメータが生成される。第二に、前記ダウンミックスパラメータは空間パラメータなどの空間情報に変換される。一部の実施形態において、ダウンミックスパラメータはダウンミックス信号の行列演算により生成可能である。 Spatial information can be generated in two steps. First, a downmix parameter is generated from the downmix signal. Second, the downmix parameter is converted into spatial information such as a spatial parameter. In some embodiments, the downmix parameter can be generated by matrix operation of the downmix signal.
空間合成部1106は、前記生成された空間情報1105とダウンミックス信号1103とを合成してマルチチャンネルオーディオ信号1107を生成する。前記生成されたマルチチャンネルオーディオ信号1107は、合成フィルターバンク1108を通過して時間エリアオーディオ信号1109に変換される。
The
空間情報は所定のスロット位置に生成可能である。このような位置間距離は同じであってもよい(すなわち、等距離)。例えば、空間情報は4個のスロットごとに生成可能である。また、空間情報は可変スロット位置に生成可能である。この場合、空間情報が生成される位置情報がビットストリームから抽出可能である。前記位置情報は可変個数のビットで表わすことができる。前記位置は以前のスロット位置情報からの絶対値及び差分値として表わすことができる。 Spatial information can be generated at a predetermined slot position. Such inter-position distances may be the same (ie, equidistant). For example, the spatial information can be generated every four slots. Spatial information can be generated at variable slot positions. In this case, position information where spatial information is generated can be extracted from the bitstream. The position information can be represented by a variable number of bits. The position can be expressed as an absolute value and a difference value from previous slot position information.
ノンガイドコーディングを用いる場合、オーディオ信号の各チャンネルに対するパラメータ帯域の個数(以下、「bsNumguidedBlindBands」という。)は、固定個数のビットで表わすことができる。「bsNumguidedBlindBands」は、「numBands」を用いる可変個数のビットで表わすことができる。例えば、「numBands」が2^(n−1)以上2^(n)未満であれば、「bsNumguidedBlindBands」は可変nビットで表わすことができる。 When non-guide coding is used, the number of parameter bands for each channel of the audio signal (hereinafter referred to as “bsNumgedBlindBands”) can be represented by a fixed number of bits. “BsNumbiddedBlindBands” can be represented by a variable number of bits using “numBands”. For example, if “numBands” is 2 ^ (n−1) or more and less than 2 ^ (n), “bsNumbiddedBlindBands” can be represented by variable n bits.
具体的に、(a)「numBands」が40である場合、「bsNumguidedBlindBands」は6ビットで表わされ、(b)「numBands」が28または20である場合、「bsNumguidedBlindBands」は5ビットで表わされ、(c)「numBands」が14または10である場合、「bsNumguidedBlindBands」は4ビットで表わされ、(d)「numBands」が7、5または4である場合、「bsNumguidedBlindBands」は3ビットで表わされる。 Specifically, when (a) “numBands” is 40, “bsNumbiddedBlindBands” is represented by 6 bits, and (b) when “numBands” is 28 or 20, “bsNumbiddedBlindBands” is represented by 5 bits. (C) If “numBands” is 14 or 10, “bsNumbiddedBlindBands” is represented by 4 bits; (d) If “numBands” is 7, 5 or 4, “bsNummudedBandBands” is 3 bits Represented.
「numBands」が2^(n−1)超え2^(n)以下であれば、「bsNumguidedBlindBands」は可変nビットで表わすことができる。 If “numBands” is greater than 2 ^ (n−1) and less than or equal to 2 ^ (n), “bsNumbiddenBlindBands” can be represented by variable n bits.
例えば、(a)「numBands」が40である場合、「bsNumguidedBlindBands」は6ビットで表わされ、(b)「numBands」が28または20である場合、「bsNumguidedBlindBands」は5ビットで表わされ、(c)「numBands」が14または10である場合、「bsNumguidedBlindBands」は4ビットで表わされ、(d)「numBands」が7または5である場合、「bsNumguidedBlindBands」は3ビットで表わされ、(e)「numBands」が4である場合、「bsNumguidedBlindBands」は2ビットで表わされる。 For example, if (a) “numBands” is 40, “bsNumbiddedBlindBands” is represented by 6 bits, and (b) if “numBands” is 28 or 20, “bsNumbiddedBlindBands” is represented by 5 bits, (C) If “numBands” is 14 or 10, “bsNumbiddedBlindBands” is represented by 4 bits; (d) If “numBands” is 7 or 5, “bsNumbiddedBandBands” is represented by 3 bits; (E) When “numBands” is 4, “bsNumbiddenBlindBands” is represented by 2 bits.
また、「bsNumguidedBlindBands」は「numBands」を変数として取る切り上げ関数を用いて可変個数のビットで表わすことができる。 Also, “bsNumbiddedBlindBands” can be represented by a variable number of bits using a round-up function that takes “numBands” as a variable.
例えば、i)0<bsNumguidedBlindBands≦numBandsまたは0≦bsNumguidedBlindBands<numBandsである場合、「bsNumguidedBlindBands」はceil(log2(numBands)ビットで表わされるか、あるいは、ii)0≦bsNumguidedBlindBands≦numBandsである場合、「bsNumguidedBlindBands」はceil(log2(numBands+1))ビットで表わすことができる。 For example, if i) 0 <bsNumbiddedBindBands ≦ numBands or 0 ≦ bsNumgedBlindBands <numBands, then “bsNumbiddedBlindBands” is represented by ceil (log 2 (numBands) bits, or sidBid ≦ Band bsNumbiddedBlindBands "can be represented by ceil (log 2 (numBands + 1)) bits.
「numBands」以下の値、すなわち、「numberBands」が任意に決定される場合、「bsNumguidedBlindBands」は以下のように表わすことができる。 If a value less than “numBands”, ie “numberBands” is arbitrarily determined, “bsNumbiddedBlindBands” can be expressed as:
具体的に、i)0<bsNumguidedBlindBands≦numberBandsまたは0≦bsNumguidedBlindBands<numberBandsである場合、「bsNumguidedBlindBands」はceil(log2(numberBands))ビットで表わされるか、あるいは、ii)0≦bsNumguidedBlindBands≦numberBandsである場合、「bsNumguidedBlindBands」はceil(log2(numberBands+1))で表わすことができる。 Specifically, if i) 0 <bsNumbiddedBands ≦ numberBands or 0 ≦ bsNumbiddedBlindBands <numberBands, then “bsNumbiddedBinderBand” is represented by ceil (log 2 (numberBands), or sidBid is represented by sid, and sidBand In this case, “bsNumeratedBlindBands” can be expressed as ceil (log 2 (numberBands + 1)).
多数のチャンネルNが用いられる場合、「bsNumguidedBlindBands」の組み合わせは以下の〔式13〕で表わすことができる: When multiple channels N are used, the combination of “bsNumbiddedBlindBands” can be expressed by the following [Equation 13]:
ここで、「bsNumGuidedBlindBandsi」はi番目の「bsNumguidedBlindBands」を示す。
〔式13〕の意味は〔式1〕の意味と同様であるため、〔式13〕の詳細な説明は省く。
Here, “bsNumGuidedBandBands i ” indicates the i-th “bsNumgedBlindBands”.
Since the meaning of [Formula 13] is the same as the meaning of [Formula 1], a detailed description of [Formula 13] is omitted.
多数のチャンネルが存在する場合、「bsNumguidedBlindBands」は「numberBands」を用いる〔式14〕乃至〔式16〕の内のいずれかとして表わすことができる。「numberBands」を用いる「bsNumguidedBlindBands」の表現は〔式2〕乃至〔式4〕の表現と同様であるため、〔式14〕乃至〔式16〕の詳細な説明は省く。 When there are a large number of channels, “bsNumbiddedBlindBands” can be expressed as any one of [Equation 14] to [Equation 16] using “numberBands”. Since the expression “bsNumbiddedBlindBands” using “numberBands” is the same as the expression [Expression 2] to [Expression 4], detailed description of [Expression 14] to [Expression 16] is omitted.
図11Bは、本発明の一実施形態によりパラメータ帯域の個数をグループとして表わす方法を示している。パラメータ帯域の個数は、チャンネル変換モジュールに適用されるパラメータ帯域の個数情報と、レジデュアル信号に適用されるパラメータ帯域の個数情報と、ノンガイドコーディングを用いる場合にオーディオ信号の各チャンネルに関するパラメータ帯域の個数情報と、を含む。パラメータ帯域の個数情報が複数存在する場合、複数の個数情報(例えば、「bsOttBands」、「bsTttBands」、「bsResidualBands」及び/または「bsNumguidedBlindBands」など)は少なくとも一つのグループとして表わすことができる。 FIG. 11B illustrates a method for representing the number of parameter bands as a group according to an embodiment of the present invention. The number of parameter bands includes the number of parameter bands applied to the channel conversion module, the number of parameter bands applied to the residual signal, and the parameter band for each channel of the audio signal when non-guide coding is used. Number information. When there are a plurality of pieces of parameter band number information, the plurality of pieces of piece number information (for example, “bsOttBands”, “bsTttBands”, “bsResidualBands”, and / or “bsNumbiddedBlindBands”) can be represented as at least one group.
図11Bを参照すると、パラメータ帯域の個数情報が(kN+L)個存在し、かつ、各パラメータ帯域の個数情報を表わすのにQビットが必要となる場合、複数のパラメータ帯域の個数情報は以下のグループで表わすことができる。この場合、「k」と「N」は「0」ではない任意の整数であり、「L」は0≦L<Nを満たす任意の整数である。 Referring to FIG. 11B, when there are (kN + L) number information of parameter bands and Q bits are required to represent the number information of each parameter band, the number information of a plurality of parameter bands is as follows: It can be expressed as In this case, “k” and “N” are arbitrary integers that are not “0”, and “L” is an arbitrary integer that satisfies 0 ≦ L <N.
グループ化方法は、パラメータ帯域の個数情報N個を束ねてk個のグループを生成するステップと、最後のパラメータ帯域の個数情報L個を束ねて最終のグループを生成するステップと、を含む。K個のグループはMビットで表わすことができ、最終のグループはpビットで表わすことができる。この場合、Mビットが、好ましくは、パラメータ帯域の個数情報のそれぞれをグループ化することなく表わす場合に用いられるN*Qビットよりも小さい。Pビットが、好ましくは、パラメータ帯域の個数情報のそれぞれをグループ化することなく表わす場合に用いられるL*Qビット以下である。 The grouping method includes a step of bundling N parameter band number information to generate k groups, and a step of bundling L last parameter band number information to generate a final group. The K groups can be represented by M bits and the final group can be represented by p bits. In this case, the M bits are preferably smaller than the N * Q bits used to represent each piece of parameter band number information without grouping. P bits are preferably less than or equal to L * Q bits used when representing each piece of parameter band number information without grouping.
例えば、パラメータ帯域の個数情報の2つがそれぞれb1とb2であるとする。b1とb2がそれぞれ5個の値を有する場合、b1とb2のそれぞれを表わすのに3ビットが必要である。この場合、たとえ3ビットは8個の値を表わすことができるとしても、実質的には5個の値が必要となる。このため、b1とb2のそれぞれは3個の余分を有する。しかしながら、b1とb2を束ねてグループとして表わす場合には、6ビット(=3ビット+3ビット)の代わりに5ビットが用いられる。具体的に、b1とb2との全ての組み合わせは25個(=5*5)のタイプを有するため、b1とb2のグループは5ビットで表わすことができる。5ビットは32個の値を表わすことができるため、グループ化表現の場合、7個の余分が生成される。しかしながら、b1とb2をグループ化して表わす場合、その余分はb1とb2をそれぞれ3ビットで表わす場合の余分よりも小さい。複数のパラメータ帯域の個数情報をグループとして表わす方法は、以下のような種々の方式により実現可能である。 For example, assume that two pieces of parameter band number information are b1 and b2, respectively. If b1 and b2 each have 5 values, 3 bits are required to represent each of b1 and b2. In this case, even if 3 bits can represent 8 values, substantially 5 values are required. For this reason, each of b1 and b2 has three extras. However, when b1 and b2 are combined and expressed as a group, 5 bits are used instead of 6 bits (= 3 bits + 3 bits). Specifically, since all combinations of b1 and b2 have 25 types (= 5 * 5), the group of b1 and b2 can be represented by 5 bits. Since 5 bits can represent 32 values, 7 extras are generated in the grouped representation. However, when b1 and b2 are expressed as a group, the surplus is smaller than that when b1 and b2 are each represented by 3 bits. The method of expressing the number information of a plurality of parameter bands as a group can be realized by the following various methods.
複数のパラメータ帯域の個数情報がそれぞれ40種類の値を有する場合、Nとして2、3、4、5または6を用いてk個のグループが生成される。これらのk個のグループはそれぞれ11ビット、16ビット、22ビット、27ビット、32ビットとして表わすことができる。あるいは、これらのk個のグループは各場合を組み合わせて表わされる。 When the number information of the plurality of parameter bands has 40 types of values, k groups are generated by using 2, 3, 4, 5 or 6 as N. These k groups can be represented as 11 bits, 16 bits, 22 bits, 27 bits, and 32 bits, respectively. Alternatively, these k groups are represented by combining each case.
複数のパラメータ帯域の個数情報がそれぞれ28種類の値を有する場合、Nとして6を用いてk個のグループが生成され、kは29ビットで表わすことができる。 When the number information of the plurality of parameter bands has 28 values, k groups are generated using 6 as N, and k can be represented by 29 bits.
複数のパラメータ帯域の個数情報がそれぞれ20種類の値を有する場合、Nとして2、3、4、5、6または7を用いてk個のグループが生成される。これらのk個のグループはそれぞれ9ビット、13ビット、18ビット、22ビット、26ビット及び31ビットとして表わすことができる。あるいは、これらのk個のグループは各場合を組み合わせて表わすことができる。 When the number information of the plurality of parameter bands has 20 types of values, k groups are generated using 2, 3, 4, 5, 6 or 7 as N. These k groups can be represented as 9 bits, 13 bits, 18 bits, 22 bits, 26 bits and 31 bits, respectively. Alternatively, these k groups can be represented by combining each case.
複数のパラメータ帯域の個数情報がそれぞれ14種類の値を有する場合、Nとして6を用いてk個のグループが生成される。これらのk個のグループは23ビットで表わすことができる。 When the number information of the plurality of parameter bands has 14 types of values, k groups are generated using 6 as N. These k groups can be represented by 23 bits.
複数のパラメータ帯域の個数情報がそれぞれ10種類の値を有する場合、Nとして2、3、4、5、6、7、8または9を用いてk個のグループが生成される。これらのk個のグループはそれぞれ7、10、14、17、20、24、27及び30ビットで表わすことができる。あるいは、これらのk個のグループは各場合を組み合わせて表わすことができる。 When the number information of a plurality of parameter bands has 10 types of values, k groups are generated using 2, 3, 4, 5, 6, 7, 8 or 9 as N. These k groups can be represented by 7, 10, 14, 17, 20, 24, 27 and 30 bits, respectively. Alternatively, these k groups can be represented by combining each case.
複数のパラメータ帯域の個数情報がそれぞれ7種類の値を有する場合、Nとして6、7、8、9、10または11を用いてk個のグループが生成される。これらのk個のグループはそれぞれ17、20、23、26、29及び31ビットで表わすことができる。あるいは、これらのk個のグループは各場合を組み合わせて表わすことができる。 When the number information of the plurality of parameter bands has 7 types of values, k groups are generated using 6, 7, 8, 9, 10 or 11 as N. These k groups can be represented by 17, 20, 23, 26, 29 and 31 bits, respectively. Alternatively, these k groups can be represented by combining each case.
複数のパラメータ帯域の個数情報がそれぞれ5種類の値を有する場合、Nとして2、3、4、5、6、7、8、9、10、11、12または13を用いてk個のグループが生成可能である。これらのk個のグループはそれぞれ5、7、10、12、13、17、19、21、24、26、28及び31ビットで表わすことができる。あるいは、これらのk個のグループは各場合を組み合わせて表わすことができる。 When the number information of the plurality of parameter bands has 5 types of values, k groups are formed by using 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12 or 13 as N. Can be generated. These k groups can be represented by 5, 7, 10, 12, 13, 17, 19, 21, 24, 26, 28 and 31 bits, respectively. Alternatively, these k groups can be represented by combining each case.
また、複数のパラメータ帯域の個数情報は、上述したグループとして表わされるように構成可能であるか、または、パラメータ帯域の個数情報のそれぞれを独立したビットシーケンスとして連続して表わされるように構成可能である。 Further, the number information of a plurality of parameter bands can be configured to be expressed as the above-described group, or the number information of parameter bands can be configured to be expressed continuously as independent bit sequences. is there.
図12は、本発明の一実施形態により空間フレームの構成情報を示すシンタックスを示している。空間フレームは、「FraminInfo」ブロック1201と、「bsIndependencyFlag」ブロック1201と、「Ottdata」ブロック1203と、「Tttdata」ブロック1204と、「SmgData」ブロック1205と、「TempShapeData」ブロック1206と、を含む。
FIG. 12 shows a syntax indicating spatial frame configuration information according to an embodiment of the present invention. The spatial frame includes a “FrameInfo”
「FramingInfo」ブロック1201は、パラメータセットの個数に関する情報と、各パラメータが適用されるタイムスロットに関する情報と、を含む。「FramingInfo」ブロック1201については、図13Aに基づき詳述する。
The “FramingInfo”
「bsIndependencyFlag」フィールド1202は、現在のフレームが以前フレームに関する知識無しにデコーディング可能であるか否かを示す。
The “bsIndependencyFlag”
「OttData」ブロック1203は、全体のOTTボックスに関する全体の空間パラメータ情報を含む。
The “OttData”
「TttData」ブロック1204は、全体のTTTボックスに関する全体の空間パラメータ情報を含む。
The “TttData”
「SmgData」ブロック1205は、非量子化された空間パラメータに適用される臨時平坦化に関する情報を含む。
The “SmgData”
「TempShapeData」ブロック1206は、非相関信号に適用される臨時エンベロープ形状化に関する情報を含む。
The “TempShapeData”
図13Aは、本発明の一実施形態により、パラメータセットが適用されるタイムスロット位置情報を示すシンタックスを示している。「bsFramingType」フィールド1301はオーディオ信号の空間フレームが固定フレームタイプであるか、あるいは、可変フレームタイプであるかを示す。固定フレームとは、予め設定されたタイムスロットにパラメータセットが適用されるフレームのことを言う。例えば、等間隔にて予め設定されたタイムスロットにパラメータセットが適用される。可変フレームとは、パラメータセットが適用されるタイムスロットの位置情報を別途に受信するフレームのことを言う。
FIG. 13A shows a syntax indicating time slot position information to which a parameter set is applied according to an embodiment of the present invention. A “bsFramingType”
「bsNumParamSets」フィールド1302は、1枚の空間フレーム内においてパラメータセットの個数を示し(以下、「numParamSets」という。)、「numParamSets」と「bsNumParamSets」との間には「numParamSets=bsNumparaSets+1」の関係が成り立つ。
The “bsNumParamSets”
例えば、図13Aの「bsNumParasets」フィールド1302に3ビットが割り当てられると、1枚の空間フレーム内には最大8個のパラメータセットが提供可能である。割り当てられるビットの個数については制限がないため、空間フレーム内により多くのパラメータセットが提供可能である。
For example, if 3 bits are assigned to the “bsNumParases”
空間フレームが固定フレームタイプである場合、パラメータセットが適用されるタイムスロットの位置情報は予め設定された規則により決定可能であり、パラメータセットが適用されるタイムスロットの追加的な位置情報は不要である。しかしながら、空間フレームが可変フレームタイプである場合、パラメータセットが適用される位置情報が必要となる。 When the spatial frame is a fixed frame type, the position information of the time slot to which the parameter set is applied can be determined by a preset rule, and the additional position information of the time slot to which the parameter set is applied is unnecessary. is there. However, when the spatial frame is a variable frame type, position information to which the parameter set is applied is necessary.
「bsParamSlot」フィールド1303は、パラメータセットが適用されるタイムスロットの位置情報を示す。「bsParamSlot」フィールド1303は、1枚の空間フレーム内におけるタイムスロットの個数、すなわち、「numSlots」を用いて可変個数のビットで表わすことができる。具体的に、「numSlots」が2^(n−1)以上2^(n)未満の範囲に収まると、「bsParamSlot」フィールド1303はnビットで表わすことができる。
The “bsParamSlot”
例えば、(i)「numSlots」が64と127との間の範囲にある場合、「bsParamSlot」フィールド1303は7ビットで表わされ、(ii)「numSlots」が32と63との間の範囲にある場合、「bsParamSlot」フィールド1303は6ビットで表わされ、(iii )「numSlots」が16と31との間の範囲にある場合、「bsParamSlot」フィールド1303は5ビットで表わされ、(iv)「numSlots」が8と15との間の範囲にある場合、「bsParamSlot」フィールド1303は4ビットで表わされ、(v)「numSlots」が4と7との間の範囲にある場合、「bsParamSlot」フィールド1303は3ビットで表わされ、(vi)「numSlots」が2と3との間の範囲にある場合、「bsParamSlot」フィールド1303は2ビットで表わされ、(vii )「numSlots」が1である場合、「bsParamSlot」フィールド1303は1ビットで表わされ、(viii)「numSlots」が0である場合、「bsParamSlot」フィールド1303は0ビットで表わすことができる。これと同様に、「numSlots」が64と127との間の範囲にある場合、「bsParamSlot」フィールド1303は7ビットで表わすことができる。
For example, (i) if “numSlots” is in the range between 64 and 127, the “bsParamSlot”
多数のパラメータセットNが存在する場合、「bsParamSlot」の組み合わせは〔式17〕により表わすことができる。 When there are a large number of parameter sets N, the combination of “bsParamSlot” can be expressed by [Equation 17].
この場合、「bsParamSloti」はI番目のパラメータセットが適用されるタイムスロットを示す。例えば、「numSlots」が3であり、かつ、「bsParamSlot」フィールド1303が10個の値を有することができるとする。この場合、「bsParamSlot」フィールド1303に関する3つの情報(以下、それぞれ、c1、c2、c3という。)が必要となる。c1、c2、c3のそれぞれを表わすためには4ビットが必要であるため、合計で12ビットが必要となる。c1、c2、c3をグループに束ねて表わす場合、1、000個(=10*10*10)の場合が発生可能であり、これは10ビットで表わされ、2ビットを節約することになる。「numSlots」が3であり、かつ、5ビットで表わされるグループ値が31である場合、グループ値は31=1x(3^2)+5*(3^1)+7*(3^0)で表わすことができる。このため、デコーダー装置は〔式9〕の逆を適用してc1、c2、c3をそれぞれ1、5、7に決定することができる。
In this case, “bsParamSlot i ” indicates a time slot to which the I-th parameter set is applied. For example, assume that “numSlots” is 3 and the “bsParamSlot”
図13Bは、本発明の一実施形態によりパラメータセットが絶対値及び差分値として適用されるタイムスロットの位置情報を示すシンタックスを示している。空間フレームが可変フレームタイプである場合、図13Aにおける「bsParamSlot」フィールド1301は「bsParamSlot」情報が単調増加するということを用いて絶対値及び差分値で表わすことができる。
FIG. 13B shows a syntax indicating time slot position information to which a parameter set is applied as an absolute value and a difference value according to an embodiment of the present invention. When the spatial frame is a variable frame type, the “bsParamSlot”
例えば、(i)最初のパラメータセットが適用されるタイムスロットの位置は絶対値、すなわち、「bsParamSlot[0]」として生成可能であり、(ii)2番目以上のパラメータセットが適用されるタイムスロットの位置は絶対値、すなわち、「bsParamSlot[ps]」と「bsParamSlot[ps−1]」との間の「difference value」または「difference value−1」として生成可能である(以下、「bsDiffParamSlot[ps]」という。)。この場合、「ps」はパラメータセットを意味する。 For example, (i) the position of the time slot to which the first parameter set is applied can be generated as an absolute value, that is, “bsParamSlot [0]”, and (ii) the time slot to which the second or more parameter set is applied. Can be generated as an absolute value, ie, “difference value” or “difference value-1” between “bsParamSlot [ps]” and “bsParamSlot [ps−1]” (hereinafter referred to as “bsDiffParamSlot [ps”). ] "). In this case, “ps” means a parameter set.
「bsParamSlot[0]」フィールド1304は「numSlots」と「numParamSets」を用いて算出される個数のビットで表わすことができる(以下、「nBitsParamSlot(0)」という。)。
The “bsParamSlot [0]”
「bsDiffParamSlot[ps]」フィールド1305は、「numSlots」、「numParamSetst」及び以前のパラメータセットが適用されたタイムスロットの位置を用いて算出される個数のビットで表わすことができる(以下、「nBitParamSlot(ps)」という。)。
The “bsDiffParamSlot [ps]”
具体的に、最小数のビットで「bsParamSlot[ps]」を表わすために、「bsParamSlot[ps]」を表わすビットの個数は以下の規則により決定可能である:(i)複数の「bsParamSlot[ps]」は昇順に増加する(bsParamSlot[ps]>bsParamSlot[ps−1])、(ii)「bsParamSlot[0]」の最大値は「numSlots−NumParamSets」であり、(iii )0<ps<numParamSetsである場合、「bsParamSlot[ps]」は「bsParamSlot[ps−1]+1」と「numSlots−numParamSets+ps」との間の値だけを有する。 Specifically, in order to represent “bsParamSlot [ps]” with the minimum number of bits, the number of bits representing “bsParamSlot [ps]” can be determined by the following rules: (i) Multiple “bsParamSlot [ps] ] ”Increases in ascending order (bsParamSlot [ps]> bsParamSlot [ps−1]), (ii) The maximum value of“ bsParamSlot [0] ”is“ numSlots−NumParamSets ”, and (iii) 0 <ps <numParamSets , “BsParamSlot [ps]” has only a value between “bsParamSlot [ps−1] +1” and “numSlots−numParamSets + ps”.
例えば、「numSlots」が10であり、かつ、「numParamSets」が3である場合、「bsParamSlot[ps]」は昇順に増加するため、「bsParamSlot[0]」の最大値は「10−3=7」となる。すなわち、「bsParamSlot[0]」は0〜7の値から選ばれる必要がある。これは、「bsParamSlot[0]」が7以上の値を有する場合、残りのパラメータセットに対するタイムスロットの個数が十分ではないためである。 For example, when “numSlots” is 10 and “numParamSets” is 3, since “bsParamSlot [ps]” increases in ascending order, the maximum value of “bsParamSlot [0]” is “10−3 = 7”. " That is, “bsParamSlot [0]” needs to be selected from values of 0 to 7. This is because when “bsParamSlot [0]” has a value of 7 or more, the number of time slots for the remaining parameter sets is not sufficient.
「bsParamSlot[0]」が5である場合、2番目のパラメータセットに対するタイムスロット位置bsParamSlot[1]は「5+1=6」と「10−3+1=8」との間の値から選ばれる必要がある。 When “bsParamSlot [0]” is 5, the time slot position bsParamSlot [1] for the second parameter set needs to be selected from a value between “5 + 1 = 6” and “10-3 + 1 = 8”. .
「bsParamSlot[1]」が7であれば、「bsParamSlot[2]」は8または9になりうる。「bsParamSlot[1]」が8であれば、「bsParamSlot[2]」は9になりうる。 If “bsParamSlot [1]” is 7, “bsParamSlot [2]” can be 8 or 9. If “bsParamSlot [1]” is 8, “bsParamSlot [2]” can be 9.
このため、「bsParamSlot[ps]」は、固定ビットとして表わされる代わりに、上記の特徴を用いて可変個数のビットで表わすことができる。 For this reason, “bsParamSlot [ps]” can be represented by a variable number of bits using the above feature instead of being represented as fixed bits.
「bsParamSlot[ps]」をビットストリームに構成するに当たって、「ps」が0である場合、「bsParamSlot[0]」は「nBitsParamSlot(0)」に対応する数のビットにより絶対値として表わすことができる。「ps」が0よりも大きな場合、「bsParamSlot[ps]」は「nBitsParaSlot(ps)」に対応する数により絶対値として表わすことができる。ビットストリームから上記のように構成された「bsParamSlot[ps]」を読み取るとき、各データに対するビットストリームの長さ、すなわち、「nBitsParamSlot[ps]」は〔式10〕を用いて表わすことができる。 In configuring “bsParamSlot [ps]” into a bitstream, if “ps” is 0, “bsParamSlot [0]” can be represented as an absolute value by the number of bits corresponding to “nBitsParamSlot (0)”. . When “ps” is greater than 0, “bsParamSlot [ps]” can be expressed as an absolute value by a number corresponding to “nBitsParaSlot (ps)”. When “bsParamSlot [ps]” configured as described above is read from the bitstream, the length of the bitstream for each data, that is, “nBitsParamSlot [ps]” can be expressed using [Equation 10].
具体的に、「nBitsParamSlot[ps]」はnBitsParamSlot[0]=fb(numSlots−numParaSets+1)で表わすことができる。0<ps<numParamSetsであれば、「nBitsParamSlot[ps]」はnBitsParamSlot[ps]=fb(numSlots−numParaSets+ps−bsParamSlot[ps−1])で表わすことができる。「nBitsParamSlot[ps]」は〔式18〕を7ビットまで延長した〔式19〕を用いて決定可能である。 Specifically, “nBitsParamSlot [ps]” can be expressed as nBitsParamSlot [0] = f b (numSlots−numParaSets + 1). If 0 <ps <numParamSets, “nBitsParamSlot [ps]” can be expressed as nBitsParamSlot [ps] = f b (numSlots−numParaSets + ps−bsParamSlot [ps−1]). “NBitsParamSlot [ps]” can be determined using [Expression 19] obtained by extending [Expression 18] to 7 bits.
関数fb(x)の例について後述する。「numSlots」が15であり、かつ、「numParamSets」が3である場合、上記の関数はnBitsParamSlot「1」=fb(15−3+1−7)=3ビットを求めることができる。この場合、「bsDiffParamSlot[1]」フィールド1305は3ビットで表わすことができる。
An example of the function fb (x) will be described later. If “numSlots” is 15 and “numParamSets” is 3, the above function can determine nBitsParamSlot “1” = fb (15-3 + 1-7) = 3 bits. In this case, the “bsDiffParamSlot [1]”
3ビットで表わされる値が3である場合、「bsParamSlot[1]」は7+3=10となる。このため、nBitsParamSlot[2]=fb(15−3+2−10)=2ビットとなる。この場合、「bsDiffParamSlot[1]」フィールド1305は2ビットで表わすことができる。レジデュアルタイムスロットの個数がレジデュアルパラメータセットの個数と同数である場合、「bsDiffParamSlot[ps]」フィールドには0ビットが割り当てられる。換言すると、パラメータセットが適用されるタイムスロットの位置を表わすための追加情報が不要である。
When the value represented by 3 bits is 3, “bsParamSlot [1]” is 7 + 3 = 10. Therefore, nBitsParamSlot [2] = f b (15−3 + 2−10) = 2 bits. In this case, the “bsDiffParamSlot [1]”
このため、「bsParamSlot[ps]」に対するビットの個数は可変的に決定可能である。「bsParamSlot[ps]」に対するビットの個数はデコーダーにおいて関数fb(x)を用いてビットストリームから読取り可能である。一部の実施形態において、関数fb(x)は関数ceil(log2(x))を含むことができる。 Therefore, the number of bits for “bsParamSlot [ps]” can be variably determined. The number of bits for “bsParamSlot [ps]” can be read from the bitstream using the function f b (x) at the decoder. In some embodiments, the function f b (x) can include the function ceil (log 2 (x)).
絶対値と差分値で表わされる「bsParamSlot[ps]」に関する情報をデコーダーにおいてビットストリームから読み取るとき、先ず、ビットストリームから「bsParamSlot[0]」が読み取られてから、0<ps<numParamSetsに対する「bsDiffParamSlot[ps]」が読み取られる。そして、0≦ps<numParamSets間隔に対する「bsParamSlot[ps]」は「bsParamSlot[0]」と「bsDiffParamSlot[ps]」を用いて求めることができる。例えば、図13Bに示すように、「bsParamSlot[ps]」は、「bsParamSlot[ps−1]」に「bsDiffParamSlot[ps]+1」を加えて求めることができる。
When reading information about “bsParamSlot [ps]” represented by the absolute value and the difference value from the bitstream at the decoder, first, “bsParamSlot [0]” is read from the bitstream, and then “bsDiffParamSlot for 0 <ps <numParamSets”. [Ps] "is read. Then, “bsParamSlot [ps]” for the
図13Cは、本発明の一実施形態により、パラメータセットが適用されるタイムスロットの位置情報を示すシンタックスを示す図である。複数のパラメータセットが存在する場合、複数のパラメータセットに対する複数の「bsParamSlots」1307は少なくとも一つのグループとして表わすことができる。 FIG. 13C is a diagram illustrating a syntax indicating time slot position information to which a parameter set is applied according to an embodiment of the present invention. If there are multiple parameter sets, multiple “bsParamSlots” 1307 for multiple parameter sets can be represented as at least one group.
「bsParamSlots」1307の個数が(kN+L)であり、かつ、「bsParamSlots」1307のそれぞれを表わすのにQビットが必要となる場合、「bsParamSlots」1307は以下のグループとして表わすことができる。この場合、「k」と「N」は「0」ではない任意の整数であり、「L」は0≦L<Nを満たす任意の整数である。 If the number of “bsParamSlots” 1307 is (kN + L) and Q bits are required to represent each of “bsParamSlots” 1307, then “bsParamSlots” 1307 can be represented as the following group. In this case, “k” and “N” are arbitrary integers that are not “0”, and “L” is an arbitrary integer that satisfies 0 ≦ L <N.
グループ化方法は、N個の「bsParamSlots」1307を束ねてk個のグループを生成するステップと、最後のL個の「bsParamSlots」1307を束ねて最終グループを生成するステップと、を含む。k個のグループはMビットで表わすことができ、最終グループはpビットで表わすことができる。この場合、Mビットが、好ましくは、「bsParamSlots」1307のそれぞれをグループ化することなく表わす場合に用いられるN*Qビットよりも小さい。Pビットが、好ましくは、「bsParamSlots」1307のそれぞれをグループ化することなく表わす場合に用いられるL*Qビット以下である。 The grouping method includes a step of bundling N “bsParamSlots” 1307 to generate k groups, and a step of bundling the last L “bsParamSlots” 1307 to generate a final group. The k groups can be represented by M bits and the final group can be represented by p bits. In this case, the M bits are preferably smaller than the N * Q bits used to represent each of the “bsParamSlots” 1307 without grouping. The P bits are preferably less than or equal to the L * Q bits used to represent each of the “bsParamSlots” 1307 without grouping.
例えば、2つのパラメータセットに対する1対の「bsParamSlots」1307がそれぞれd1とd2であるとする。d1とd2がそれぞれ5個の値を有する場合、d1とd2のそれぞれを表わすのに3ビットが必要となる。この場合、たとえ3ビットは8個の値を表わすことができるとしても、実質的には5個の値が必要となる。このため、d1とd2のそれぞれは3個の余分を有する。しかしながら、d1とd2を束ねてグループとして表わす場合には、6ビット(=3ビット+3ビット)の代わりに5ビットが用いられる。具体的に、d1とd2との全ての組み合わせは25個(=5*5)のタイプを有するため、d1とd2のグループは5ビットで表わすことができる。5ビットは32個の値を表わすことができるため、グループ化表現の場合、7個の余分が生成される。しかしながら、d1とd2をグループ化して表わす場合、その余分はd1とd2をそれぞれ3ビットで表わす場合の余分よりも小さい。 For example, it is assumed that a pair of “bsParamSlots” 1307 for two parameter sets is d1 and d2, respectively. If d1 and d2 each have 5 values, 3 bits are required to represent each of d1 and d2. In this case, even if 3 bits can represent 8 values, substantially 5 values are required. For this reason, each of d1 and d2 has three extras. However, when d1 and d2 are combined and represented as a group, 5 bits are used instead of 6 bits (= 3 bits + 3 bits). Specifically, since all combinations of d1 and d2 have 25 types (= 5 * 5), the group of d1 and d2 can be represented by 5 bits. Since 5 bits can represent 32 values, 7 extras are generated in the grouped representation. However, when d1 and d2 are represented as a group, the surplus is smaller than that when d1 and d2 are each represented by 3 bits.
グループを構成するとき、グループに関するデータは、初期値に対する「bsParamSlot[0]」と、2番目以上の値に対する「bsParamSlot[ps]」との組間の差分値を用いて構成可能である。 When configuring a group, data relating to the group can be configured using a difference value between a pair of “bsParamSlot [0]” for the initial value and “bsParamSlot [ps]” for the second or more values.
グループを構成するとき、パラメータセットの個数が1であれば、グループ化することなくビットが直接的に割当て可能であり、パラメータセットの個数が2以上であれば、グループ化を完了してからビットが割当て可能である。 When configuring a group, if the number of parameter sets is 1, bits can be directly assigned without grouping. If the number of parameter sets is 2 or more, the bit is set after grouping is completed. Can be assigned.
図14は、本発明の一実施形態によるエンコーディング方法のフローチャートである。以下、本発明によるオーディオ信号のエンコーディング方法及びエンコーダーの動作を説明する。 FIG. 14 is a flowchart of an encoding method according to an embodiment of the present invention. Hereinafter, an audio signal encoding method and an encoder operation according to the present invention will be described.
まず、1枚の空間フレームにおいてタイムスロットの総数numSlotsとオーディオ信号のパラメータ帯域の総数numBandsが決定される(S1401)。 First, the total number of time slots numSlots and the total number of parameter bands numBands of audio signals in one spatial frame are determined (S1401).
そして、チャンネル変換モジュールに適用されるパラメータの個数及び/またはレジデュアル信号が決定される(S1402)。 Then, the number of parameters and / or residual signals applied to the channel conversion module are determined (S1402).
OTTボックスがLFEチャンネルモードを有する場合、OTTボックスに適用されるパラメータ帯域の個数は別途に決定される。 When the OTT box has the LFE channel mode, the number of parameter bands applied to the OTT box is determined separately.
OTTボックスがLFEチャンネルモードを有さない場合、OTTボックスに適用されるパラメータ帯域の個数として「numBands」が用いられる。 When the OTT box does not have the LFE channel mode, “numBands” is used as the number of parameter bands applied to the OTT box.
続けて、空間フレームのタイプが判定される。この場合、空間フレームは固定フレームタイプと可変フレームタイプとに大別できる。 Subsequently, the type of spatial frame is determined. In this case, the spatial frame can be roughly divided into a fixed frame type and a variable frame type.
空間フレームが可変フレームタイプである場合(S1403)、1枚の空間フレーム内において用いられるパラメータセットの個数が決定される(S1406)。この場合、パラメータセットはタイムスロット単位でチャンネル変換モジュールに適用可能である。 When the spatial frame is a variable frame type (S1403), the number of parameter sets used in one spatial frame is determined (S1406). In this case, the parameter set can be applied to the channel conversion module in units of time slots.
続けて、パラメータセットが適用されるタイムスロットの位置が決定される(S1407)。この場合、パラメータセットが適用されるタイムスロットの位置は絶対値と差分値として表わすことができる。例えば、最初のパラメータセットが適用されるタイムスロットの位置は絶対値として表わすことができ、2番目以上のパラメータセットが適用されるタイムスロットの位置は以前のタイムスロットの位置からの差分値として表わすことができる。この場合、パラメータセットが適用されるタイムスロットの位置は可変個数のビットとして表わすことができる。 Subsequently, the position of the time slot to which the parameter set is applied is determined (S1407). In this case, the position of the time slot to which the parameter set is applied can be expressed as an absolute value and a difference value. For example, the time slot position to which the first parameter set is applied can be expressed as an absolute value, and the time slot position to which the second or more parameter set is applied is expressed as a difference value from the previous time slot position. be able to. In this case, the position of the time slot to which the parameter set is applied can be represented as a variable number of bits.
具体的に、最初のパラメータセットが適用されるタイムスロットの位置は、タイムスロットの総数とパラメータセットの総数を用いて算出されるビットの個数で表わすことができる。2番目以上のパラメータセットが適用されるタイムスロットの位置は、タイムスロットの総数と、パラメータセットの総数と、以前のパラメータセットが適用されるタイムスロットの位置を用いて算出されるビットの個数で表わすことができる。 Specifically, the position of the time slot to which the first parameter set is applied can be represented by the number of bits calculated using the total number of time slots and the total number of parameter sets. The position of the time slot to which the second or more parameter set is applied is the total number of time slots, the total number of parameter sets, and the number of bits calculated using the position of the time slot to which the previous parameter set is applied. Can be represented.
空間フレームが固定フレームタイプである場合、1枚の空間フレームに用いられたパラメータセットの個数が決定される(S1404)。この場合、パラメータセットが適用されるタイムスロットの位置は予め設定された規則を用いて決定される。例えば、パラメータセットが適用されるタイムスロットの位置は、以前のパラメータセットが適用されるタイムスロットの位置から等間隔を有するように決定可能である(S1405)。 If the spatial frame is a fixed frame type, the number of parameter sets used for one spatial frame is determined (S1404). In this case, the position of the time slot to which the parameter set is applied is determined using a preset rule. For example, the position of the time slot to which the parameter set is applied can be determined to have an equal interval from the position of the time slot to which the previous parameter set is applied (S1405).
続けて、ダウンミキシング部と空間生成部は、先に決定されたタイムスロットの総数と、パラメータ帯域の総数と、チャンネル変換部に適用されるべきパラメータ帯域の総数と、1枚の空間フレームにおけるパラメータセットの総数と、パラメータセットが適用されるタイムスロットの位置情報を用いて、ダウンミックス信号と空間情報をそれぞれ生成する(S1408)。 Subsequently, the downmixing unit and the space generation unit perform the total number of time slots determined previously, the total number of parameter bands, the total number of parameter bands to be applied to the channel conversion unit, and the parameters in one spatial frame. A downmix signal and spatial information are generated using the total number of sets and the position information of the time slot to which the parameter set is applied (S1408).
最後に、マルチプレクシング部は、ダウンミックス信号と空間情報を含むビットストリームを生成して(S1409)、この生成されたビットストリームをデコーダーに転送する(S1409)。 Finally, the multiplexing unit generates a bitstream including a downmix signal and spatial information (S1409), and transfers the generated bitstream to the decoder (S1409).
図15は、本発明の一実施形態によるデコーディング方法のフローチャートである。以下、本発明によるオーディオ信号のデコーディング方法及びデコーダーの動作を説明する。 FIG. 15 is a flowchart of a decoding method according to an embodiment of the present invention. Hereinafter, an audio signal decoding method and a decoder operation according to the present invention will be described.
まず、デコーダーは、オーディオ信号のビットストリームを受信する(S1501)。デマルチプレクシング部は、受信されたビットストリームからダウンミックス信号と空間情報信号とを分離する(S1502)。続けて、空間情報信号デコーディング部は、空間情報信号の構成情報から、1枚の空間フレームにおけるタイムスロットの総数、パラメータ帯域の総数及びチャンネル変換モジュールに適用されるパラメータ帯域の個数に関する情報を抽出する(S1503)。 First, the decoder receives a bit stream of an audio signal (S1501). The demultiplexing unit separates the downmix signal and the spatial information signal from the received bitstream (S1502). Subsequently, the spatial information signal decoding unit extracts information on the total number of time slots, the total number of parameter bands, and the number of parameter bands applied to the channel conversion module in one spatial frame from the configuration information of the spatial information signal. (S1503).
空間フレームが可変フレームタイプである場合(S1504)、1枚の空間フレームにおけるパラメータセットの個数とパラメータセットが適用されるタイムスロットの位置情報が空間フレームから抽出される(S1505)。タイムスロットの位置情報は、固定個数のビットまたは可変個数のビットで表わすことができる。この場合、最初のパラメータセットが適用されるタイムスロットの位置情報は絶対値として表わすことができ、2番目以上のパラメータセットが適用されるタイムスロットの位置情報は差分値として表わすことができる。2番目以上のパラメータセットが適用されるタイムスロットの実際の位置情報は、以前のパラメータセットが適用されたタイムスロットの位置情報に差分値を加えて求められる。 When the spatial frame is a variable frame type (S1504), the number of parameter sets in one spatial frame and the time slot position information to which the parameter sets are applied are extracted from the spatial frame (S1505). Time slot position information can be represented by a fixed number of bits or a variable number of bits. In this case, the position information of the time slot to which the first parameter set is applied can be expressed as an absolute value, and the position information of the time slot to which the second or more parameter set is applied can be expressed as a difference value. The actual position information of the time slot to which the second or more parameter set is applied is obtained by adding a difference value to the position information of the time slot to which the previous parameter set is applied.
最後に、抽出された情報を用いてダウンミックス信号がマルチチャンネルオーディオ信号に変換される(S1506)。 Finally, the downmix signal is converted into a multi-channel audio signal using the extracted information (S1506).
この明細書に記載の実施形態は、従来のオーディオコーディング方式に比べて種々のメリットを与える。 The embodiments described in this specification provide various advantages over conventional audio coding schemes.
最初に、マルチチャンネルオーディオ信号のコーディングにおいて、パラメータセットが適用されるタイムスロットの位置を可変個数のビットで表わすことにより、転送データ量を低減することができる。 First, in the coding of a multi-channel audio signal, the amount of transferred data can be reduced by representing the position of the time slot to which the parameter set is applied by a variable number of bits.
第二に、最初のパラメータセットが適用されるタイムスロットの位置を絶対値で表わし、2番目以上のパラメータセットが適用されるタイムスロットの位置を差分値で表わすことにより、転送データ量を低減することができる。 Second, the amount of transferred data is reduced by expressing the position of the time slot to which the first parameter set is applied as an absolute value and the position of the time slot to which the second or more parameter set is applied as a difference value. be able to.
第三に、OTTボックス及び/又はTTTボックスなどに適用されるパラメータ帯域の個数を固定個数のビットまたは可変個数のビットで表わすことにより、転送データ量を低減することができる。この場合、パラメータセットが適用されるタイムスロットの位置は、上述した原理を用いて表わすことができ、ここで、パラメータセットはパラメータ帯域の個数範囲内に存在する。 Third, the amount of transferred data can be reduced by expressing the number of parameter bands applied to the OTT box and / or the TTT box by a fixed number of bits or a variable number of bits. In this case, the position of the time slot to which the parameter set is applied can be expressed using the above-described principle, where the parameter set exists within the number of parameter bands.
図16は、図1〜図15に基づき説明されたオーディオエンコーダー/デコーダーを実現する装置構造1600の一例を示すブロック図である。この装置構造1600は、パソコン、サーーバコンピュータ、家電装置、移動電話、PDA、電子タブレット、テレビシステム、テレビセットトップボックス、ゲームコンソール、媒体再生器、音楽再生器、ナビゲーションシステム及びオーディオ信号をデコーディング可能な任意のその他の装置を含む種々の装置に適用可能であるが、これらに制限されるものではない。これらの装置の一部はハードウェアとソフトウェアとの組み合わせを用いて変更された構造を実現することができる。
FIG. 16 is a block diagram illustrating an example of a
この構造1600は、1以上のプロセッサー1602(例えば、PowerPC(登録商標)、Intel Pentium(登録商標) 4など)と、1以上のディスプレイ装置1604(例えば、CRT、LCDなど)と、オーディオサブシステム1606(例えば、オーディオハードウェア/ソフトウェア)と、1以上のネットワークインタフェース1608(例えば、Ethernet(登録商標)、FireWire(登録商標)、USBなど)と、入力装置1610(例えば、キーボード、マウスなど)と、1以上のコンピュータにて読取り可能な媒体1612(例えば、RAM、ROM、SDRAM、ハードディスク、光ディスク、フラッシュメモリなど)と、を備える。これらの構成要素は1以上のバス1614(例えば、EISA、PCI、PCI Expressなど)を介して通信し、データをやり取りすることができる。
The
「コンピュータにて読取り可能な媒体」というターミノロジーは、プロセッサー1602に実行用命令語を与える任意の媒体をいい、不揮発性媒体(例えば、光ディスクや磁気ディスクなど)、揮発性媒体(例えば、メモリーなど)及び転送媒体を含むが、これらに制限されるものではない。転送媒体は、同軸ケーブル、銅配線及び光ファイバを含むが、これらに制限されるものではない。また、転送媒体は、音響波、光波または無線周波数波形の形態が採用可能である。
The term “computer-readable medium” refers to any medium that gives execution instructions to the
コンピュータにて読取り可能な媒体1612は、オペレーティングシステム1616(例えば、MacOS(登録商標)、Windows(登録商標)、Linux(登録商標)など)と、ネットワーク通信モジュール1618と、オーディオコーデック1620と、1以上のアプリケーション1622と、をさらに含む。
The computer readable medium 1612 includes an operating system 1616 (eg, MacOS (registered trademark), Windows (registered trademark), Linux (registered trademark), etc.), a
オペレーティングシステム1616は、マルチユーザー、マルチプロセッシング、マルチタスキング、マルチスレッディング、リアルタイムなどであってもよい。オペレーティングシステム1616は、入力装置1610から入力を認識し、ディスプレイ装置1604とサブシステム1606に出力を送り、コンピュータにて読取り可能な媒体1612(例えば、メモリーまたは記録装置など)の上にファイルとディレクトリを保持し、周辺装置(例えば、ディスクドライブ、プリンターなど)を制御し、1以上のバス1614上におけるトラフィックを管理する基本的なタスクを行うが、これらに制限されるものではない。
The
ネットワーク通信モジュール1618は、ネットワーク接続を確立して保持する種々の構成要素(例えば、TCP/IP、HTTP、Ethernet(登録商標)などの通信プロトコルを実現するソフトウェアなど)を含む。ネットワーク通信モジュール1618は、装置構造1600のオペレーターに情報(例えば、オーディオコンテンツなど)を探索してネットワーク(例えば、インターネットなど)を検索可能にするブラウザーを含むことができる。
The
オーディオコーデック1620は、図1〜図15に基づき説明したエンコーディング及び/またはデコーディングプロセスの全部または一部を実現する役割を果たす。一部の実施形態において、オーディオコーデックはハードウェア(例えば、プロセッサー1602、オーディオサブシステム1606など)と連動してこの明細書に記載の本発明によりオーディオ信号をエンコーディング及び/またはデコーディングすることをはじめとしてオーディオ信号を処理する。
The
アプリケーション1622は、オーディオコンテンツに関連する任意のソフトウェアを含むことができ、オーディオコンテンツは、媒体再生器、音楽再生器(例えば、MP3再生器など)、移動電話アプリケーション、PDA、テレビシステム、セットトップボックスなどにおいてエンコーディング及び/またはデコーディングされるが、これらに制限されるものではない。一実施形態において、オーディオコーデックはアプリケーションサービスプロバイダーがネットワーク(例えば、インターネットなど)を介してエンコーディング/デコーディングサービスを提供するのに使用可能である。
以上の説明においては、説明の目的から、本発明の完全な理解を提供するための種々の特定の詳細について開示している。しかしながら、当業者であれば、本発明がこれらの特定の詳細なしにも実行可能であるということが理解できるであろう。なお、本発明を不明にすることを防ぐために、構造及び装置はブロック図として示してある。 In the foregoing description, for the purposes of explanation, various specific details are set forth in order to provide a thorough understanding of the present invention. However, one skilled in the art will understand that the invention may be practiced without these specific details. In order to avoid obscuring the present invention, the structure and apparatus are shown as a block diagram.
特に、当業者であれば、他の構造及びグラフィック環境が使用可能であり、上述とは異なるグラフィックツールと製品を用いて本発明が実現可能であるという点が理解できるであろう。特に、クライアント/サーバーアプローチは本発明のダッシュボード機能を与える構造の一例に過ぎず、当業者であれば、クライアント/サーバーアプローチではない他のものが使用可能であるという点が理解できるであろう。 In particular, those skilled in the art will appreciate that other structures and graphic environments can be used, and that the present invention can be implemented using different graphic tools and products than those described above. In particular, the client / server approach is only one example of a structure that provides the dashboard functionality of the present invention, and those skilled in the art will understand that other than the client / server approach can be used. .
詳細な説明の一部は、コンピュータメモリ内におけるデータビットに対する演算のアルゴリズムとシンボル表現で実現されている。これらのアルゴリズム説明と表現は、データ処理分野の当業者が他の当業者に自分の作業の本質を最も有効に伝えるための手段である。一般的に、そしてこの明細書において、アルゴリズムは所望の結果に至るステップの一連のシーケンスとして認識される。これらのステップは物理量の操作を必要とする。一般に、必ずしもその限りではないが、このような量は貯蔵されたり、転送されたり、組み合わせられたり、比較されたり、他に操作可能な電気信号または磁気信号の形態をとる。主として、通常の用途の理由から、これらの信号をビット、値、エレメント、シンボル、キャラクター、述語、ナンバーなどと呼んだ方が便利である。 Part of the detailed description is implemented by algorithms and symbolic representations of operations on data bits in computer memory. These algorithmic descriptions and representations are the means by which those skilled in the data processing arts will most effectively convey the substance of their work to others skilled in the art. In general, and in this specification, an algorithm is recognized as a sequence of steps leading to a desired result. These steps require manipulation of physical quantities. In general, though not necessarily, such quantities take the form of electrical or magnetic signals capable of being stored, transferred, combined, compared, and otherwise manipulated. It is more convenient to call these signals bits, values, elements, symbols, characters, predicates, numbers, etc. mainly for reasons of normal use.
しかしながら、これらの用語及びこれに類似する用語はあらゆる適切な物理量に関連するものであり、単にこれらの量に適用される便利な命名に過ぎない。論議から明らかなように、特に断わりのない限り、この明細書において、「処理」または「コンピューティング」または「算出」または「決定」または「表示」などのターミノロジーを用いるということは、コンピュータシステムのレジスターとメモリ内において物理(電気)量として表わされるデータを操作し、これをコンピュータシステムメモリまたはレジスターや他の情報の貯蔵、転送または表示装置において物理量で表わされるデータに変換するコンピュータシステムまたはこれに類似する電子計算装置のアクション及び処理を言う。 However, these terms and similar terms are associated with any suitable physical quantity and are merely convenient nomenclature applied to these quantities. As is apparent from the discussion, unless otherwise specified, the use of terminology, such as “processing” or “computing” or “calculation” or “decision” or “display” in this specification, is a computer system. A computer system for manipulating data represented as physical (electrical) quantities in registers and memories, and for converting them into data represented by physical quantities in a computer system memory or register or other information storage, transfer or display device Refers to actions and processing of an electronic computing device similar to.
本発明はこのような動作を行う装置に関する。この装置は、求められる目的により特殊に構成可能であるか、あるいは、コンピュータに格納されたコンピュータプログラムにより選択的に活性化されるか、あるいは、再構成される汎用のコンピュータを含むことができる。このようなコンピュータプログラムは、フロッピー(登録商標)ディスク、光ディスク、CD−ROM、磁気光ディスクをはじめとする任意タイプのディスク、読込み専用メモリー(ROM)、ランダムアクセスメモリ(RAM)、EPROM、EEPROM、磁気カードまたは光カード、または電子的な命令語を格納するのに適した任意タイプの媒体を含み、コンピュータシステムに接続されるコンピュータ貯蔵媒体に格納可能である。 The present invention relates to an apparatus for performing such an operation. The apparatus can be specially configured for the required purpose, or it can include a general purpose computer selectively activated or reconfigured by a computer program stored in the computer. Such computer programs include floppy (registered trademark) disks, optical disks, CD-ROMs, arbitrary types of disks including magnetic optical disks, read only memory (ROM), random access memory (RAM), EPROM, EEPROM, magnetic It can be stored on a computer storage medium connected to a computer system, including a card or optical card, or any type of medium suitable for storing electronic instructions.
明細書に記載のアルゴリズムとモジュールが元々任意の特定のコンピュータや他の装置に関するものではない。この明細書に記載の技術によるプログラムに種々の汎用システムが使用可能であり、方法ステップを行う上でより特定化した装置を構成することが便利になることがある。このような種々のシステムに必要となる構造については、後述する。この明細書に記載の本発明の教示事項を実現するために種々のプログラミング言語が使用可能である。また、当業者にとって自明であるように、本発明のモジュール、特徴、属性、方法論及びその他の態様は、ソフトウェア、ハードウェア、ファームウェアまたはこれらの3種類に対する任意の組み合わせにより実現可能である。もちろん、本発明の構成要素がソフトウェアとして実現される場合、これらの構成要素は独自のプログラムとして、より大きなプログラムの一部として、複数の個別プログラムとして、静的にまたは動的にリンクされるライブラリーとして、カーネルロード型モジュールとして、デバイスドライバーとして実現されるか、あるいは、コンピュータプログラミングの分野における当業者に現在周知の、または、将来に周知になる予定のあらゆる任意の方式により実現可能である。また、本発明が任意の特定のオペレーティングシステムや環境において実現されることに制限されることはない。 The algorithms and modules described herein are not inherently related to any particular computer or other apparatus. Various general-purpose systems can be used for the program according to the technique described in this specification, and it may be convenient to configure a more specialized apparatus for performing the method steps. The structure required for such various systems will be described later. A variety of programming languages can be used to implement the teachings of the invention as described herein. Also, as will be apparent to those skilled in the art, the modules, features, attributes, methodologies, and other aspects of the present invention can be implemented by software, hardware, firmware, or any combination of these three types. Of course, if the components of the present invention are implemented as software, these components can be statically or dynamically linked as unique programs, as part of a larger program, as multiple individual programs. It may be implemented as a library, as a kernel-loaded module, as a device driver, or by any arbitrary scheme now known to or will be known in the future to those skilled in the field of computer programming. In addition, the present invention is not limited to being implemented in any specific operating system or environment.
当業者には本発明の思想または範囲から逸脱することなく、この明細書に記載の実施形態に種々の変形及び変更がなされうるということは自明であろう。よって、本発明は、このような変形及び変更が特許請求の範囲及びその等価物の範囲内にあるものである限り、開示された実施形態のこのような変形及び変更をいずれもカバーするものである。 It will be apparent to those skilled in the art that various modifications and variations can be made to the embodiments described herein without departing from the spirit or scope of the invention. Accordingly, the present invention covers any such modifications and variations of the disclosed embodiments as long as such modifications and variations are within the scope of the claims and their equivalents. is there.
Claims (22)
タイムスロットの個数及び1以上のパラメータを含むパラメータセットの個数を決定するステップと、
オーディオ信号を並べられたセットのタイムスロットを含むフレームを含むビットストリームにエンコーディングするステップと、
前記ビットストリームにフレーミングタイプ表示子を挿入するステップと、
前記フレームタイプ表示が可変フレーミングを示す場合、並べられたセットのタイムスロットのうちパラメータがセットが適用される少なくとも一つのタイムスロットの位置を示す情報を生成するステップと、
前記並べられたセットのタイムスロットのうち前記タイムスロットの位置を示す可変個数のビットを前記ビットストリームに挿入するステップと、を含み、
前記可変個数のビットは前記タイムスロット位置により決定されることを特徴とするオーディオ信号のエンコーディング方法。 Determining a framing type;
Determining the number of time slots and the number of parameter sets including one or more parameters;
Encoding the audio signal into a bitstream that includes frames that include an ordered set of time slots;
Inserting a framing type indicator into the bitstream;
If the frame type indication indicates variable framing, the step of generating information indicating a position of at least one time slot to which the parameter is applied in the set of time slots of the set;
Inserting a variable number of bits indicating the position of the time slot of the arranged set of time slots into the bitstream;
The method of encoding an audio signal, wherein the variable number of bits is determined by the time slot position.
前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定するステップと、
前記ビットストリームからフレーミングタイプを決定するステップと、
前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定するステップと、
前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングするステップと、を含み、
前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とするオーディオ信号のデコーディング方法。 Receiving a bitstream indicative of an audio signal and including frames;
Determining a number of time slots and a number of parameter sets including one or more parameters from the bitstream;
Determining a framing type from the bitstream;
When the framing type is variable framing, determining position information indicating a position of a time slot to which a parameter set is applied among a set of time slots arranged from the bitstream; and
Decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information;
The audio signal decoding method according to claim 1, wherein the position information is represented by a variable number of bits based on the time slot position.
タイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定する手段と、
前記オーディオ信号を並べられたセットのタイムスロットを含むフレームを含むビットストリームにエンコーディングする手段と、
前記ビットストリームにフレーミングタイプ表示子を挿入する手段と、
前記フレームタイプ表示が可変フレーミングを示す場合、並べられたセットのタイムスロットのうちパラメータがセットが適用される少なくとも一つのタイムスロットの位置を示す情報を生成する手段と、
前記並べられたセットのタイムスロットのうち前記タイムスロットの位置を示す可変個数のビットを前記ビットストリームに挿入する手段と、を備え、
前記可変個数のビットは前記タイムスロット位置により決定されることを特徴とするオーディオ信号のエンコーディング装置。 Means for determining a framing type;
Means for determining the number of time slots and the number of parameter sets including one or more parameters;
Means for encoding the audio signal into a bitstream including frames including a set of time slots;
Means for inserting a framing type indicator in the bitstream;
Means for generating information indicating a position of at least one time slot to which the parameter applies in the set of time slots when the frame type indication indicates variable framing;
Means for inserting, into the bitstream, a variable number of bits indicating the position of the time slot among the set of time slots;
The audio signal encoding apparatus, wherein the variable number of bits is determined by the time slot position.
前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定する手段と、
前記ビットストリームからフレーミングタイプを決定する手段と、
前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定する手段と、
前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングする手段と、を備え、
前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とするオーディオ信号のデコーディング装置。 Means for receiving a bitstream indicative of an audio signal and comprising a frame;
Means for determining from the bitstream the number of time slots and the number of parameter sets comprising one or more parameters;
Means for determining a framing type from the bitstream;
If the framing type is variable framing, means for determining position information indicating a position of a time slot to which a parameter set is applied among a set of time slots arranged from the bitstream;
Means for decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information;
The audio signal decoding apparatus, wherein the position information is represented by a variable number of bits based on the time slot position.
タイムスロットの個数を含む第1のフィールドと、
パラメータスロットの個数を含む第2のフィールドと、
フレーミングタイプ表示子を含む第3のフィールドと、
パラメータセットが適用されるタイムスロットの位置を決定する位置情報を含む第4のフィールドと、を含み、
前記位置情報は前記タイムスロット位置と前記フレーミングタイプ表示子に基づく可変個数のビットで表わされることを特徴とするデータ構造。 In a data structure that includes a bitstream representing an audio signal,
A first field containing the number of time slots;
A second field containing the number of parameter slots;
A third field including a framing type indicator;
A fourth field containing location information that determines the location of the time slot to which the parameter set applies;
The data structure is characterized in that the position information is represented by a variable number of bits based on the time slot position and the framing type indicator.
前記動作は、
オーディオ信号を示しかつフレームを含むビットストリームを受信するステップと、
前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定するステップと、
前記ビットストリームからフレーミングタイプを決定するステップと、
前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定するステップと、
前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングするステップと、を含み、
前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とコンピュータにて読取り可能な媒体。 In a computer readable medium storing instructions that, when executed by a processor, cause the processor to:
The operation is
Receiving a bitstream indicative of an audio signal and including frames;
Determining a number of time slots and a number of parameter sets including one or more parameters from the bitstream;
Determining a framing type from the bitstream;
When the framing type is variable framing, determining position information indicating a position of a time slot to which a parameter set is applied among a set of time slots arranged from the bitstream; and
Decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information;
The computer-readable medium is characterized in that the position information is represented by a variable number of bits based on the time slot position.
前記プロセッサーにより実行されれば、プロセッサーに以下の動作を行わせる命令語が格納されたコンピュータにて読取り可能な媒体と、を備え、
前記動作は、
オーディオ信号を示し且つフレームを含むビットストリームを受信するステップと、
前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定するステップと、
前記ビットストリームからフレーミングタイプを決定するステップと、
前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定するステップと、
前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングするステップと、を含み、
前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とするシステム。 A processor;
When executed by the processor, a computer-readable medium storing a command word that causes the processor to perform the following operations, and
The operation is
Receiving a bitstream indicative of an audio signal and comprising a frame;
Determining a number of time slots and a number of parameter sets including one or more parameters from the bitstream;
Determining a framing type from the bitstream;
When the framing type is variable framing, determining position information indicating a position of a time slot to which a parameter set is applied among a set of time slots arranged from the bitstream; and
Decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information;
The system is characterized in that the position information is represented by a variable number of bits based on the time slot position.
前記ビットストリームからタイムスロットの個数と1以上のパラメータを含むパラメータセットの個数を決定する手段と、
前記ビットストリームからフレーミングタイプを決定する手段と、
前記フレーミングタイプが可変フレーミングである場合、前記ビットストリームから並べられたセットのタイムスロットのうちパラメータセットが適用されるタイムスロットの位置を示す位置情報を決定する手段と、
前記タイムスロットの個数、前記パラメータセットの個数及び前記位置情報に基づき前記オーディオ信号をデコーディングする手段と、を備え、
前記位置情報は前記タイムスロット位置に基づく可変個数のビットで表わされることを特徴とするシステム。 Means for receiving a bitstream indicative of an audio signal and comprising a frame;
Means for determining from the bitstream the number of time slots and the number of parameter sets comprising one or more parameters;
Means for determining a framing type from the bitstream;
If the framing type is variable framing, means for determining position information indicating a position of a time slot to which a parameter set is applied among a set of time slots arranged from the bitstream;
Means for decoding the audio signal based on the number of time slots, the number of parameter sets, and the position information;
The system is characterized in that the position information is represented by a variable number of bits based on the time slot position.
前記タイムスロット位置は固定個数のビットで表わされることを特徴とする請求項2に記載のオーディオ信号のデコーディング方法。 Decoding the audio signal based on the number of time slots and the number of parameter sets if the framing type indicator indicates fixed framing;
3. The audio signal decoding method according to claim 2, wherein the time slot position is represented by a fixed number of bits.
Applications Claiming Priority (24)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US71211905P | 2005-08-30 | 2005-08-30 | |
US60/712,119 | 2005-08-30 | ||
US71920205P | 2005-09-22 | 2005-09-22 | |
US60/719,202 | 2005-09-22 | ||
US72300705P | 2005-10-04 | 2005-10-04 | |
US60/723,007 | 2005-10-04 | ||
US72622805P | 2005-10-14 | 2005-10-14 | |
US60/726,228 | 2005-10-14 | ||
US72922505P | 2005-10-24 | 2005-10-24 | |
US60/729,225 | 2005-10-24 | ||
KR1020060004062A KR20070037974A (en) | 2005-10-04 | 2006-01-13 | Method of effective bitstream composition for the spatial parameter band number for non-guided coding in multi-channel audio coding |
KR10-2006-0004051 | 2006-01-13 | ||
KR10-2006-0004065 | 2006-01-13 | ||
KR10-2006-0004057 | 2006-01-13 | ||
KR1020060004057A KR20070025904A (en) | 2005-08-30 | 2006-01-13 | Method of effective bitstream composition for the spatial parameter band number of a lfe-channel for multi-channel audio coding |
KR1020060004051A KR20070025903A (en) | 2005-08-30 | 2006-01-13 | Method of effective bitstream composition for the spatial parameter band number of residual signal in multi-channel audio coding |
KR10-2006-0004063 | 2006-01-13 | ||
KR20060004065 | 2006-01-13 | ||
KR20060004055 | 2006-01-13 | ||
KR1020060004063A KR20070025907A (en) | 2005-08-30 | 2006-01-13 | Method of effective bitstream composition for the parameter band number of channel conversion module in multi-channel audio coding |
KR10-2006-0004062 | 2006-01-13 | ||
KR10-2006-0004055 | 2006-01-13 | ||
US76253606P | 2006-01-27 | 2006-01-27 | |
US60/762,536 | 2006-01-27 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008528945A Division JP5231225B2 (en) | 2005-08-30 | 2006-08-30 | Apparatus and method for encoding and decoding audio signals |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013137546A true JP2013137546A (en) | 2013-07-11 |
JP5319846B2 JP5319846B2 (en) | 2013-10-16 |
Family
ID=39805382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013003356A Expired - Fee Related JP5319846B2 (en) | 2005-08-30 | 2013-01-11 | Apparatus and method for encoding and decoding audio signals |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP5319846B2 (en) |
KR (8) | KR100891685B1 (en) |
HK (1) | HK1124681A1 (en) |
MX (1) | MX2008002713A (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150009474A (en) * | 2013-07-15 | 2015-01-26 | 한국전자통신연구원 | Encoder and encoding method for multi-channel signal, and decoder and decoding method for multi-channel signal |
KR101536855B1 (en) * | 2014-01-23 | 2015-07-14 | 재단법인 다차원 스마트 아이티 융합시스템 연구단 | Encoding apparatus apparatus for residual coding and method thereof |
EA034371B1 (en) * | 2015-08-25 | 2020-01-31 | Долби Лэборетериз Лайсенсинг Корпорейшн | Audio decoder and decoding method |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2004008806A1 (en) * | 2002-07-16 | 2004-01-22 | Koninklijke Philips Electronics N.V. | Audio coding |
WO2004097794A2 (en) * | 2003-04-30 | 2004-11-11 | Coding Technologies Ab | Advanced processing based on a complex-exponential-modulated filterbank and adaptive time signalling methods |
JP2008501948A (en) * | 2004-06-02 | 2008-01-24 | アストラゼネカ・アクチエボラーグ | Diameter measuring device |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
NL9000338A (en) | 1989-06-02 | 1991-01-02 | Koninkl Philips Electronics Nv | DIGITAL TRANSMISSION SYSTEM, TRANSMITTER AND RECEIVER FOR USE IN THE TRANSMISSION SYSTEM AND RECORD CARRIED OUT WITH THE TRANSMITTER IN THE FORM OF A RECORDING DEVICE. |
ES2087522T3 (en) | 1991-01-08 | 1996-07-16 | Dolby Lab Licensing Corp | DECODING / CODING FOR MULTIDIMENSIONAL SOUND FIELDS. |
DE4209544A1 (en) | 1992-03-24 | 1993-09-30 | Inst Rundfunktechnik Gmbh | Method for transmitting or storing digitized, multi-channel audio signals |
US5481643A (en) | 1993-03-18 | 1996-01-02 | U.S. Philips Corporation | Transmitter, receiver and record carrier for transmitting/receiving at least a first and a second signal component |
EP0827312A3 (en) | 1996-08-22 | 2003-10-01 | Marconi Communications GmbH | Method for changing the configuration of data packets |
US6016473A (en) | 1998-04-07 | 2000-01-18 | Dolby; Ray M. | Low bit-rate spatial coding method and system |
EP1493146B1 (en) | 2002-04-11 | 2006-08-02 | Matsushita Electric Industrial Co., Ltd. | Encoding and decoding devices, methods and programs |
-
2006
- 2006-08-30 MX MX2008002713A patent/MX2008002713A/en active IP Right Grant
- 2006-08-30 KR KR1020087006785A patent/KR100891685B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006787A patent/KR100880645B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006786A patent/KR100880644B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006788A patent/KR100880646B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006921A patent/KR100880647B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006790A patent/KR100891687B1/en active IP Right Grant
- 2006-08-30 KR KR1020087021422A patent/KR101165641B1/en active IP Right Grant
- 2006-08-30 KR KR1020087006789A patent/KR100891686B1/en active IP Right Grant
-
2009
- 2009-02-27 HK HK09101883.9A patent/HK1124681A1/en not_active IP Right Cessation
-
2013
- 2013-01-11 JP JP2013003356A patent/JP5319846B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2004008806A1 (en) * | 2002-07-16 | 2004-01-22 | Koninklijke Philips Electronics N.V. | Audio coding |
WO2004097794A2 (en) * | 2003-04-30 | 2004-11-11 | Coding Technologies Ab | Advanced processing based on a complex-exponential-modulated filterbank and adaptive time signalling methods |
JP2008501948A (en) * | 2004-06-02 | 2008-01-24 | アストラゼネカ・アクチエボラーグ | Diameter measuring device |
Also Published As
Publication number | Publication date |
---|---|
KR100880644B1 (en) | 2009-01-30 |
KR20080037106A (en) | 2008-04-29 |
KR20080086551A (en) | 2008-09-25 |
HK1124681A1 (en) | 2009-07-17 |
KR100891685B1 (en) | 2009-04-03 |
KR100880647B1 (en) | 2009-01-30 |
KR20080049747A (en) | 2008-06-04 |
KR20080037104A (en) | 2008-04-29 |
KR100880646B1 (en) | 2009-01-30 |
KR20080037105A (en) | 2008-04-29 |
JP5319846B2 (en) | 2013-10-16 |
KR20080037111A (en) | 2008-04-29 |
MX2008002713A (en) | 2008-03-18 |
KR100880645B1 (en) | 2009-01-30 |
KR20080049746A (en) | 2008-06-04 |
KR101165641B1 (en) | 2012-07-17 |
KR20080036232A (en) | 2008-04-25 |
KR100891686B1 (en) | 2009-04-03 |
KR100891687B1 (en) | 2009-04-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5231225B2 (en) | Apparatus and method for encoding and decoding audio signals | |
JP5319846B2 (en) | Apparatus and method for encoding and decoding audio signals |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130611 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130711 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5319846 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |