JP2006337767A - Device and method for parametric multichannel decoding with low operation amount - Google Patents
Device and method for parametric multichannel decoding with low operation amount Download PDFInfo
- Publication number
- JP2006337767A JP2006337767A JP2005163125A JP2005163125A JP2006337767A JP 2006337767 A JP2006337767 A JP 2006337767A JP 2005163125 A JP2005163125 A JP 2005163125A JP 2005163125 A JP2005163125 A JP 2005163125A JP 2006337767 A JP2006337767 A JP 2006337767A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- unit
- filter
- reverberation
- coefficient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
本発明は、MPEG−4 Audio Extension 2に準拠したパラメトリックマルチチャンネル復号処理を低演算量で実行する装置および方法に関するものである。 The present invention relates to an apparatus and method for executing parametric multi-channel decoding processing compliant with MPEG-4 Audio Extension 2 with a low amount of computation.
マルチチャンネル信号をより少ないチャンネル数の信号に変換することを一般的にダウンミックスと呼ぶ。MPEG(Moving Picture Expert Group)により標準化されたMPEG−4 Audio Extension 2に準拠したパラメトリックステレオコーディング処理は、これに限定されるわけではないが、特にステレオ信号をモノラル信号にダウンミックスして送受信するブロードキャスティングなど低ビットレートの用途などで有用である(例えば、非特許文献1参照)。
Converting a multi-channel signal into a signal having a smaller number of channels is generally called downmix. Parametric stereo coding processing conforming to MPEG-4 Audio Extension 2 standardized by MPEG (Moving Picture Expert Group) is not limited to this, but in particular, it is a broad transmission that transmits and receives a stereo signal by downmixing it to a monaural signal. This is useful for low bit rate applications such as casting (see Non-Patent
MPEG−4 Audio Extension 2に準拠したパラメトリックステレオコーディング処理によるダウンミックスの原理は、両耳キュー符号化(binaural cue coding)に基づいている。両耳キューとはステレオ信号がモノラル信号にダウンミックスされる際に抽出された信号で、モノラル信号からステレオ信号を復元するために用いられるIID(inter-channel level/intensity difference:チャンネル間レベル/強度差)キュー情報、IPD(interchannel phase/delay difference:チャンネル間位相/遅延差)キュー情報、ICC(interchannel coherence/correlation:チャンネル間干渉性/相関)キュー情報を含む。 The principle of downmix by parametric stereo coding processing based on MPEG-4 Audio Extension 2 is based on binaural cue coding. A binaural cue is a signal extracted when a stereo signal is downmixed to a monaural signal, and is an IID (inter-channel level / intensity difference: inter-channel level / intensity difference) Difference) queue information, IPD (interchannel phase / delay difference) queue information, and ICC (interchannel coherence / correlation) queue information.
IIDキュー情報は、2つの信号の大きさの比率を示す信号である。IPDキュー情報は、2つの信号の位相差を示す信号である。ICCキュー情報は、2つの信号(この場合では左チャンネルと右チャンネル)の間の類似性を示す信号である。一般的に、2つの信号のレベル/強度の比率を表すIIDキュー情報と2つの信号の位相/遅延の差を表すIPDキュー情報は、音のバランスと定位方向を制御し、2つの信号の干渉性/相関を表すICCキュー情報は、音像の幅と広がり感を制御するためのパラメータとして有用である。これらのキュー情報は、聞き手が心理的に聴覚情景を構築することを支援する空間パラメータを構成している。 The IID queue information is a signal indicating the ratio of the magnitudes of the two signals. The IPD queue information is a signal indicating a phase difference between two signals. The ICC queue information is a signal indicating the similarity between two signals (in this case, the left channel and the right channel). In general, the IID cue information representing the level / intensity ratio of two signals and the IPD cue information representing the phase / delay difference between the two signals control the sound balance and localization direction, and interfere with the two signals. The ICC cue information representing the sex / correlation is useful as a parameter for controlling the width and spread of the sound image. These cue information constitutes spatial parameters that support the listener psychologically constructing an auditory scene.
図6はパラメトリックステレオコーディングの原理の概要を説明する図である。図6に示すように従来のパラメトリックステレオコーディングはダウンミックス部700、両耳キュー抽出部702、音声信号符号化部704、多重化部706とを備えた符号化処理を実行する符号化装置と、多重分離部708、音声信号復号化部710、ステレオ復号部712とを備えた復号化処理を実行する復号装置とで実行される(例えば、特許文献2参照)。
FIG. 6 is a diagram for explaining the outline of the principle of parametric stereo coding. As shown in FIG. 6, the conventional parametric stereo coding is an encoding device that performs an encoding process including a
まず、符号化装置で実行される符号化処理について説明する。 First, an encoding process executed by the encoding device will be described.
符号化装置において信号はフレーム単位で処理される。ダウンミックス部700は図示されていない入力部から左チャンネル信号Lと右チャンネル信号Rからなるステレオ信号を入力してモノラル信号Mを生成する。ここで生成されるモノラル信号Mは、左チャンネル信号Lと右チャンネル信号Rを所定の比率で混合して得られている。
In the encoding device, the signal is processed in units of frames. The
次に、両耳キュー抽出部702は入力部から左チャンネル信号Lと右チャンネル信号Rを、ダウンミックス部700からモノラル信号Mを入力して両耳キューBCInfoを生成する。
Next, the binaural
音声信号符号化部704はモノラル信号Mを符号化して圧縮ビットストリームを生成する。音声信号符号化部704は例えば、MP3(MPEG 1 Audio Layer 3)またはAAC(Advanced Audio Coding)に準拠したオーディオエンコーダにより構成される。
The audio
多重化部706は、音声信号符号化部704により符号化されて圧縮されたモノラル信号Mと両耳キュー抽出部702により抽出され図示されていない量子化部により量子化された両耳キューBCInfoを多重化してビットストリームを生成する。
The
次に復号装置で実行される復号処理について説明する。 Next, a decoding process executed by the decoding device will be described.
復号装置では、符号化装置により生成されたビットストリームを復号装置が入力されると、復号装置を構成する多重分離部708がビットストリームから符号化されて圧縮されたモノラル信号M'と量子化された両耳キューBCInfoを分離する。
In the decoding device, when the bit stream generated by the encoding device is input to the decoding device, the
音声信号復号化部710は符号化されて圧縮されたモノラル信号M'を入力して復号を行い、モノラル信号M'を復元する。音声信号復号化部710は音声信号符号化部704に対応した方式に準拠したオーディオデコーダにより構成される。
The audio
ステレオ復号部712は、多重分離部708により分離され図示されていない逆量子化部により逆量子化された両耳キューBCInfoと音声信号復号化部710により復元されたモノラル信号M'を合成して左チャンネル信号L'と右チャンネル信号R'からなるステレオ信号が復元される。
The
図7を参照して、ステレオ復号部712の構成についてより詳細に説明する。
With reference to FIG. 7, the configuration of
ステレオ復号部712は、複素分析フィルタ部800と、複素残響信号生成部806と、補間部804と、信号分配部808と、複素合成フィルタ部812とを備えている。
The
複素分析フィルタ部800は、復元された時間信号であるモノラル信号M'を、それぞれが32のサンプルを有する64のサブバンド(周波数帯)信号からなるサブバンド信号に変換し、さらに所定の低周波数域のサブバンド信号については、さらに複数の副サブバンド信号に変換する。複素分析フィルタ部800が使用する複素値フィルタ係数は、Mri(k,n)とGqi pである。
The complex
補間部804は、両耳キューBCInfoを実際に適用する前に線形補間を実行して処理係数を生成する。
The
複素残響信号生成部806は、複素分析フィルタ部800により処理されたモノラル信号Sk(z)と補間部804により補間された両耳キューBCInfoに含まれるICCキュー情報に基づいてモノラル信号Sk(z)と無相関の残響信号Dk(z)を生成する。複素残響信号生成部806はオールパスフィルタを有しており、このオールパスフィルタには以下の非整数遅延を持つことを特徴とする複素値フィルタ係数Hki(z)が適用される。
Complex
信号分配部808は、補間部804により補間された両耳キューBCInfoに含まれるICCキュー情報およびIIDキュー情報に基づいて、複素分析フィルタ部800により処理されたモノラル信号Sk(z)に複素残響信号生成部806により生成された残響信号Dk(z)を付加して左チャンネル信号L'と右チャンネル信号R'を生成する。ここで、複素分析フィルタ部800により処理されたモノラル信号Sk(z)に残響信号Dk(z)を付加する比率はICCキュー情報に基づいて決定され、残響信号Dk(z)をモノラル信号Sk(z)に付加して左チャンネル信号L'と右チャンネル信号R'に分配される比率はIIDキュー情報に基づいて決定される。
The
複素合成フィルタ部812はフィルタバンクから構成され、左チャンネル信号L'と右チャンネル信号R'を時間周波数信号から時間信号に変換する。
The complex
複素合成フィルタ部812が使用するフィルタ係数Nri(k,n)は以下の通りである。
The filter coefficients Nri (k, n) used by the complex
しかしながら、従来のパラメトリックステレオコーディングに使用されるステレオ復号部は、複数のフィルタを使用し、それぞれが複素値フィルタ係数を使用しているため、演算量、処理出力およびメモリ容量が増大するという問題があった。 However, since the stereo decoding unit used in the conventional parametric stereo coding uses a plurality of filters, and each uses complex filter coefficients, there is a problem that the amount of calculation, the processing output, and the memory capacity increase. there were.
本発明は、メモリと演算量、処理出力の要件を削減して、携帯端末などのバッテリの容量に制限のある機器や、低ビットレートの用途で利用可能な、モノラル信号などのダウンミックスされた信号からステレオ信号などのマルチチャンネル信号を復号するパラメトリックマルチチャンネル復号装置を提供することを目的とする。 The present invention reduces the requirements for memory, computation amount, and processing output, and downmixed monaural signals and the like that can be used in devices with limited battery capacity such as portable terminals and low bit rate applications. An object of the present invention is to provide a parametric multi-channel decoding device that decodes a multi-channel signal such as a stereo signal from a signal.
本発明のパラメトリックマルチチャンネル復号装置は、分析フィルタ係数を用いてダウンミックス信号を複数のサブバンド信号に変換する分析フィルタ手段と、両耳キュー情報に線形補間を実行して処理係数を生成する補間手段と、前記分析フィルタ手段により変換された前記サブバンド信号と前記補間手段により生成された前記処理係数に基づいてオールパスフィルタ係数を用いて前記サブバンド信号と無相関の残響信号を生成するオールパスフィルタ部を有する残響信号生成手段と、前記サブバンド信号と前記残響信号生成手段により生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配手段と、合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタ手段とを備えたパラメトリックマルチチャンネル復号装置において、前記パラメトリックマルチチャンネル復号装置はさらに、前記分析フィルタ手段が用いる前記分析フィルタ係数、前記残響信号生成手段を形成する前記オールパスフィルタ部が用いる前記オールパスフィルタ係数、前記合成フィルタ手段が用いる前記合成フィルタ係数のいずれか一つ以上を実数値とする構成を有している。 The parametric multi-channel decoding device of the present invention includes an analysis filter unit that converts a downmix signal into a plurality of subband signals using an analysis filter coefficient, and an interpolation that generates a processing coefficient by performing linear interpolation on binaural cue information And an all-pass filter that generates an uncorrelated reverberation signal with the sub-band signal using an all-pass filter coefficient based on the sub-band signal converted by the analysis filter means and the processing coefficient generated by the interpolation means A reverberation signal generating means, a signal distribution means for generating a multichannel signal by mixing the subband signal and the reverberation signal generated by the reverberation signal generating means based on the processing coefficient, and a synthesis filter coefficient Convert the multi-channel signal from subband signal to time signal using In the parametric multi-channel decoding device, the parametric multi-channel decoding device further includes the analysis filter coefficient used by the analysis filter unit and the all-pass filter unit forming the reverberation signal generation unit. One or more of the all-pass filter coefficient and the synthesis filter coefficient used by the synthesis filter means are used as real values.
ここでマルチチャンネル信号をチャンネル数の削減された信号に変換することを「ダウンミックス」と呼び、所定の数のチャンネル数のマルチチャンネル信号からダウンミックスにより変換されたチャンネル数の削減された信号を「ダウンミックス信号」と呼ぶものとする。 Here, converting a multi-channel signal into a signal with a reduced number of channels is called “downmix”, and a signal with a reduced number of channels converted by downmixing from a multichannel signal with a predetermined number of channels. It shall be called “downmix signal”.
この構成により、本発明のパラメトリックマルチチャンネル復号装置はマルチチャンネル信号を復号する際に、負荷の多い複素数演算を削減して負荷の少ない実数演算によるフィルタ処理を行うことができるので、例えば携帯端末などのバッテリの容量に制限のある機器や、ステレオ信号をモノラル信号にダウンミックスして送受信するブロードキャスティングなど低ビットレートの用途において、メモリと演算量、処理出力の要件を削減することができる。 With this configuration, the parametric multi-channel decoding device according to the present invention can perform filtering by a real number calculation with a low load by reducing a complex number calculation with a large load when decoding a multi-channel signal. In a device with limited battery capacity or a low bit rate application such as broadcasting for down-mixing a stereo signal into a monaural signal, it is possible to reduce the requirements for memory, calculation amount, and processing output.
また、本発明のパラメトリックマルチチャンネル復号装置は、前記分析フィルタ手段が用いるフィルタ係数を以下の実数値、すなわち Further, the parametric multi-channel decoding device of the present invention uses the following real values, that is, the filter coefficients used by the analysis filter means:
とする構成を有している。
The configuration is as follows.
この構成により、本発明のパラメトリックマルチチャンネル復号装置は、分析フィルタ手段が負荷の少ない実数演算によるフィルタ処理を行うことができるので、メモリと演算量、処理出力の要件を削減することができる。 With this configuration, the parametric multi-channel decoding device according to the present invention can perform filter processing by real number calculation with a light load on the analysis filter means, so that requirements for memory, calculation amount, and processing output can be reduced.
また、本発明のパラメトリックマルチチャンネル復号装置は、前記残響信号生成手段を形成する前記オールパスフィルタ部が用いるオールパスフィルタ係数を以下の実数値、すなわち Further, the parametric multi-channel decoding device of the present invention uses an all-pass filter coefficient used by the all-pass filter unit forming the reverberation signal generating means as the following real value, that is,
とする構成を有している。
The configuration is as follows.
この構成により、本発明のパラメトリックマルチチャンネル復号装置は、残響信号生成手段を構成するオールパスフィルタ部が負荷の少ない実数演算によるフィルタ処理を行うことができるので、メモリと演算量、処理出力の要件を削減することができる。 With this configuration, the parametric multi-channel decoding device of the present invention allows the all-pass filter unit constituting the reverberation signal generating means to perform filter processing by real number calculation with a low load. Can be reduced.
また、本発明のパラメトリックマルチチャンネル復号装置は、前記合成フィルタ手段が用いるフィルタ係数を以下の実数値、すなわち Also, the parametric multi-channel decoding device of the present invention uses the following real values, that is, the filter coefficients used by the synthesis filter means:
とする構成を有している。
The configuration is as follows.
この構成により、本発明のパラメトリックマルチチャンネル復号装置は、合成フィルタ手段が負荷の少ない実数演算によるフィルタ処理を行うことができるので、メモリと演算量、処理出力の要件を削減することができる。 With this configuration, the parametric multi-channel decoding device of the present invention can perform filter processing by real number calculation with a low load on the synthesis filter means, so that requirements for memory, calculation amount, and processing output can be reduced.
また、本発明のパラメトリックマルチチャンネル復号装置は、前記両耳キュー情報がIID(inter-channel level/intensity difference)キュー情報、IPD(interchannel phase/delay difference)キュー情報、ICC(interchannel coherence/correlation)キュー情報を含む構成を有している。 In the parametric multi-channel decoding device according to the present invention, the binaural queue information includes IID (inter-channel level / intensity difference) queue information, IPD (interchannel phase / delay difference) queue information, and ICC (interchannel coherence / correlation) queue. It has a configuration that includes information.
この構成により、本発明のパラメトリックマルチチャンネル復号装置は、ダウンミックス信号から高品質のマルチチャンネル信号を復元することができる。 With this configuration, the parametric multi-channel decoding device of the present invention can restore a high-quality multi-channel signal from the downmix signal.
また、本発明のパラメトリックマルチチャンネル復号装置は、前記残響信号生成手段は、前記サブバンド信号と無相関の残響信号を生成する際に、前記補間手段により生成された前記処理係数に含まれる前記ICCキュー情報を用いる構成を有している。 In the parametric multi-channel decoding device according to the present invention, when the reverberation signal generation unit generates a reverberation signal uncorrelated with the subband signal, the ICC included in the processing coefficient generated by the interpolation unit. It has a configuration using queue information.
この構成により、本発明のパラメトリックマルチチャンネル復号装置は、無相関の残響信号を適切に生成することができる。 With this configuration, the parametric multi-channel decoding device of the present invention can appropriately generate an uncorrelated reverberation signal.
本発明のパラメトリックマルチチャンネル復号装置は、分析フィルタ係数を用いてダウンミックス信号を複数のサブバンド信号に変換する分析フィルタ手段と、両耳キュー情報に線形補間を実行して処理係数を生成する補間手段と、前記分析フィルタ手段により変換された前記サブバンド信号と前記補間手段により生成された前記処理係数に基づいてオールパスフィルタ係数を用いて前記サブバンド信号と無相関の残響信号を生成するオールパスフィルタ部を有する残響信号生成手段と、前記サブバンド信号と前記残響信号生成手段により生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配手段と、合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタ手段と、前記分析フィルタ手段が用いる前記分析フィルタ係数、前記残響信号生成手段を形成する前記オールパスフィルタ部が用いる前記オールパスフィルタ係数、前記合成フィルタ手段が用いる前記合成フィルタ係数を選択的に複素数値または実数値に切り替えるフィルタ係数選択手段とを備えた構成を有している。 The parametric multi-channel decoding device of the present invention includes an analysis filter unit that converts a downmix signal into a plurality of subband signals using an analysis filter coefficient, and an interpolation that generates a processing coefficient by performing linear interpolation on binaural cue information And an all-pass filter that generates an uncorrelated reverberation signal with the sub-band signal using an all-pass filter coefficient based on the sub-band signal converted by the analysis filter means and the processing coefficient generated by the interpolation means A reverberation signal generating means, a signal distribution means for generating a multichannel signal by mixing the subband signal and the reverberation signal generated by the reverberation signal generating means based on the processing coefficient, and a synthesis filter coefficient Convert the multi-channel signal from subband signal to time signal using And the synthesis filter coefficient used by the analysis filter means, the all-pass filter coefficient used by the all-pass filter unit forming the reverberation signal generation means, and the synthesis filter coefficient used by the synthesis filter means are selectively selected. And a filter coefficient selection means for switching to a complex value or a real value.
この構成により本発明のパラメトリックマルチチャンネル復号装置は、分析フィルタ手段、残響信号生成手段を構成するオールパスフィルタ部、合成フィルタ手段の用いるフィルタ係数をそれぞれ選択的に複素数値と実数値に切り替えるフィルタ係数選択手段を設けているので、フィルタ係数選択手段を操作して分析フィルタ部手段、残響信号生成手段を構成するオールパスフィルタ部、合成フィルタ部手段の用いるフィルタ係数をいずれも複素数値として複素数演算を実行する高品質モードと、フィルタ係数選択手段を操作して分析フィルタ手段、残響信号生成手段を構成するオールパスフィルタ部、合成フィルタ手段の用いるフィルタ係数の一つ以上を実数値として低演算量を実行する低出力モードの二つ以上のモードをサポートすることができるため、例えばバッテリ出力が高い場合は高品質モード、ユーザが出力を節約したい場合は低出力モードと用途に応じて切り替えることが可能である。 With this configuration, the parametric multi-channel decoding device according to the present invention enables filter coefficient selection to selectively switch the filter coefficients used by the analysis filter means, the all-pass filter section constituting the reverberation signal generation means, and the synthesis filter means to complex values and real values, respectively. Since the filter coefficient selection means is operated, the filter coefficient used by the analysis filter means, the all-pass filter part constituting the reverberation signal generation means, and the filter coefficient used by the synthesis filter part means are all complex values and complex arithmetic is executed. Low-quality mode and low-computation amount with one or more of the filter coefficients used by the analysis filter means, reverberation signal generation means, and synthesis filter means as real values by operating the filter coefficient selection means Support more than one output mode Since it is, for example, when the battery output is high if you want to save the high-quality mode, the user is output can be switched in response to the low power mode and applications.
本発明のパラメトリックマルチチャンネル復号方法は、分析フィルタ係数を用いてダウンミックス信号を複数のサブバンド信号に変換する分析フィルタステップと、両耳キュー情報に線形補間を実行して処理係数を生成する補間ステップと、前記分析フィルタステップにより変換された前記サブバンド信号と前記補間ステップにより生成された前記処理係数に基づいて前記サブバンド信号と無相関の残響信号を生成する、オールパスフィルタ係数を用いたオールパスフィルタ処理を含む残響信号生成ステップと、前記サブバンド信号と前記残響信号生成ステップにより生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配ステップと、合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタステップとを含むパラメトリックマルチチャンネル復号方法において、前記分析フィルタ係数、前記オールパスフィルタ係数、および前記合成フィルタ係数のいずれか一つ以上が実数値である構成を有している。 The parametric multi-channel decoding method of the present invention includes an analysis filter step for converting a downmix signal into a plurality of subband signals using an analysis filter coefficient, and an interpolation for generating a processing coefficient by performing linear interpolation on binaural cue information And an all-pass filter coefficient that generates a reverberation signal uncorrelated with the sub-band signal based on the sub-band signal converted by the analysis filter step and the processing coefficient generated by the interpolation step. A reverberation signal generation step including filter processing, a signal distribution step of generating a multichannel signal by mixing the reverberation signal generated by the subband signal and the reverberation signal generation step based on the processing coefficient, and a synthesis filter The multi-channel signal is supported using a coefficient. A parametric multi-channel decoding method including a synthesis filter step for converting a band signal into a time signal, wherein at least one of the analysis filter coefficient, the all-pass filter coefficient, and the synthesis filter coefficient is a real value. is doing.
この構成により、本発明のパラメトリックマルチチャンネル復号方法は、マルチチャンネル信号を復号する際に、負荷の多い複素数演算を削減して負荷の少ない実数演算によるフィルタ処理を行うことができるので、例えば携帯端末などのバッテリの容量に制限のある機器や、ステレオ信号をモノラル信号にダウンミックスして送受信するブロードキャスティングなど低ビットレートの用途において、メモリと演算量、処理出力の要件を削減することができる。 With this configuration, the parametric multi-channel decoding method of the present invention can perform filtering by real number calculation with low load by reducing complex calculation with large load when decoding a multi-channel signal. In a device with a limited battery capacity, such as broadcasting with a stereo signal downmixed to a monaural signal and transmitted / received, the requirements for memory, computation, and processing output can be reduced.
本発明は、従来のステレオ復号部と比較して、メモリと演算量、処理出力を削減することができるパラメトリックマルチチャンネル復号装置および方法を提供するものである。 The present invention provides a parametric multi-channel decoding apparatus and method capable of reducing memory, calculation amount, and processing output as compared with a conventional stereo decoding unit.
以下、本発明の一実施の形態について、図面を参照しながら説明する。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
(第1の実施の形態)
本発明の第1の実施の形態に係るパラメトリックマルチチャンネル復号装置を図1から図4を参照して説明する。
(First embodiment)
A parametric multi-channel decoding device according to a first embodiment of the present invention will be described with reference to FIGS.
図1に示すように、本実施の形態に係るパラメトリックマルチチャンネル復号装置は、実数分析フィルタ部100と、補間部104と、実数残響信号生成部106と、信号分配部108と、実数合成フィルタ部112とを備えている。
As shown in FIG. 1, the parametric multi-channel decoding device according to the present embodiment includes a real number
実数分析フィルタ部100は、QMF(Quadrature Mirror Filter)フィルタバンクから構成され、復元された時間信号であるモノラル信号M'を、それぞれが32のサンプルを有する64のサブバンド(周波数帯)信号からなるサブバンド信号に変換する。実数分析フィルタ部100は分析フィルタ手段を構成する。ここで、実数分析フィルタ部100は従来の複素分析フィルタ部800が使用する複素値フィルタ係数Mri(k,n)およびGqi pに代わって実数値フィルタ係数Mrr(k,n)およびGqr pを使用して処理を高速で実行する。複素値フィルタ係数Mri(k,n)と、実数値フィルタ係数Mrr(k,n)と,複素値フィルタ係数Gqi pと、実数値フィルタ係数Gqr pは以下の式で表される。
The real number
上述の実数分析フィルタ部100の高速処理については信号処理の文献で公知であるため説明を省略する。
Since the high-speed processing of the real number
補間部104は、両耳キューBCInfoを実際に適用する前に線形補間を実行して処理係数を生成する。補間部104は補間手段を構成する。補間部104は信号のタイプ(複素型か実数型)とは独立して処理を実行する。本実施の形態で両耳キューBCInfoは、QMF(Quadrature Mirror Filter)などにより変換して得られた左チャンネル信号L、右チャンネル信号Rのサブバンド信号に基づいて抽出されている。
The
実数残響信号生成部106は、実数分析フィルタ部100により処理されて生成されたモノラル信号Sk(z)と補間部104により補間された両耳キューBCInfoに含まれるICCキュー情報に基づいてモノラル信号Sk(z)と無相関の残響信号Dk(z)を生成する。実数残響信号生成部106は実数残響信号生成手段を構成する。実数残響信号生成部106はオールパスフィルタを有している。ここで、実数残響信号生成部106はオールパスフィルタのフィルタ係数として従来の複素残響信号生成部806が使用する複素値オールパスフィルタ係数Hki(z)に代わって実数値オールパスフィルタ係数Hkr(z)にを使用する。複素値オールパスフィルタ係数Hki(z)と実数値オールパスフィルタ係数Hkr(z)は以下の式で表される。
The real number reverberation
信号分配部108は、補間部104により補間された両耳キューBCInfoに含まれるIIDキュー情報とICCキュー情報に基づいて、実数分析フィルタ部100により処理されたモノラル信号Sk(z)に実数残響信号生成部106により生成された残響信号Dk(z)を付加および分配して左チャンネル信号Lk(Z)と右チャンネル信号Rk(Z)を生成する。この処理は本実施の形態における音像の再生において最も重要なステップであり、信号のタイプが複素型か実数型に応じて異なる。信号分配部108は信号分配手段を構成する。
Based on the IID queue information and ICC queue information included in the binaural queue BCInfo interpolated by the
図2を参照して信号分配部108で実行される機能について説明する。実数分析フィルタ部100により処理されたモノラル信号Sk(z)に残響信号Dk(z)を付加する比率はICCキュー情報に基づいて決定され、残響信号Dk(z)をモノラル信号Sk(z)に付加して左チャンネル信号L'と右チャンネル信号R'に分配される比率はIIDキュー情報に基づいて決定される。
A function executed by the
本実施の形態に係るパラメトリックマルチチャンネル復号装置では残響信号を付加する付加係数は以下の式で算出される。 In the parametric multichannel decoding apparatus according to the present embodiment, the additional coefficient for adding the reverberation signal is calculated by the following equation.
ここでc1(b)は右チャンネルのゲイン係数であり、c2(b)は左チャンネルのゲイン係数であり、共にIIDより算出される。h11(b)はモノラル信号Sk(z)を左チャンネル信号に付加する場合の付加係数であり、h12(b)はモノラル信号Sk(z)を右チャンネル信号に付加する場合の付加係数であり、h21(b)は残響信号Dk(z)を左チャンネル信号に付加する場合の付加係数であり、h22(b)は残響信号Dk(z)を右チャンネルに付加する場合の付加係数である。図2に示すように、左チャンネル信号Lk(Z)はモノラル信号Sk(z)にh11(b)を乗じたh11と残響信号Dk(z)にh21(b)を乗じたh21を加えて生成され、右チャンネル信号Rk(Z)はモノラル信号Sk(z)にh12(b)を乗じたh12と残響信号Dk(z)にh22(b)を乗じたh22を加えて生成される。
なお、本実施の形態では、信号分配部108は上述の式を用いて残響信号を付加する係数を算出したが、本発明はこれに限定されるものではなく、残響信号を付加する比率を表す付加係数を算出するものであれば他の式を適用してもよい。
Here, c 1 (b) is a gain coefficient for the right channel, and c 2 (b) is a gain coefficient for the left channel, both of which are calculated from IID. h 11 (b) is an addition coefficient when the monaural signal S k (z) is added to the left channel signal, and h 12 (b) is an addition coefficient when the monaural signal S k (z) is added to the right channel signal. H 21 (b) is an addition coefficient when the reverberation signal D k (z) is added to the left channel signal, and h 22 (b) is the addition coefficient of the reverberation signal D k (z) to the right channel. Is an additional coefficient. As shown in FIG. 2, multiplied by the left channel signal L k (Z) h 21 to h 11 (b) multiplied by h 11 and the reverberation signal D k (z) to the monaural signal S k (z) (b) It is generated by adding h 21 was, right channel signal R k (Z) h 22 to h 12 (b) multiplied by h 12 and the reverberation signal D k (z) to the monaural signal S k (z) (b) Generated by adding h 22 multiplied by.
In the present embodiment, the
例えば、付加係数は、左チャンネル信号、右チャンネル信号、およびモノラル信号の関係をモデル化して導くこともできる。図3を参照してモデル化による付加係数の取得方法を説明する。 For example, the additional coefficient can be derived by modeling the relationship between the left channel signal, the right channel signal, and the monaural signal. With reference to FIG. 3, a method for obtaining an additional coefficient by modeling will be described.
図3はベクター空間で、左チャンネル信号、右チャンネル信号、およびモノラル信号をL、R、Mで表されるベクターとしてモデル化した場合、以下の関係が成り立つ。 FIG. 3 shows a vector space. When the left channel signal, the right channel signal, and the monaural signal are modeled as vectors represented by L, R, and M, the following relationship is established.
さらに、LとRとが形成する角度θ(b)は以下の式で表される。 Further, the angle θ (b) formed by L and R is expressed by the following equation.
左チャンネル信号Lとモノラル信号Mとが形成する角度θL(b)、右チャンネル信号Rとモノラル信号Mとが形成する角度θR(b)は以下の式で表される。 The angle θ L (b) formed by the left channel signal L and the monaural signal M and the angle θ R (b) formed by the right channel signal R and the monaural signal M are expressed by the following equations.
実数合成フィルタ部112はフィルタバンクから構成され、左チャンネル信号L'と右チャンネル信号R'をサブバンド信号から時間信号に変換する。実数合成フィルタ部112は合成フィルタ手段を構成する。
The real number
実数合成フィルタ部112は、合成QMF(Quadrature Mirror Filter)フィルタバンクから構成される。ここで、実数合成フィルタ部112は従来の複素合成フィルタ部812が使用する数複素値フィルタ係数Nri(k,n)に代わって実数値フィルタ係数Nrr(k,n)を使用して処理を高速で実行する。複素値フィルタ係数Nri(k,n)と実数値フィルタ係数Nrr(k,n)は以下の式で表される。
The real number
上述の実数合成フィルタ部112の高速処理については信号処理の文献で公知であるため説明を省略する。
The high-speed processing of the real number
実数分析フィルタ部100、補間部104、実数残響信号生成部106、信号分配部108、実数合成フィルタ部112は例えばDSP(Digital Signal Processor)で構成してもよい。
The real number
以下、本実施の形態に係るパラメトリックマルチチャンネル復号装置の動作について説明する。 Hereinafter, the operation of the parametric multichannel decoding apparatus according to the present embodiment will be described.
まず、実数分析フィルタ部100は、上述の実数値フィルタ係数を用いて復元された時間信号であるモノラル信号M'を、それぞれが32のサンプルを有する64のサブバンド(周波数帯)信号からなるサブバンド信号Sk(Z)に変換する(ステップS1)。次に、補間部104は、両耳キューBCInfoに線形補間を実行して処理係数を生成する(ステップS2)。実数残響信号生成部106は、実数分析フィルタ部100により処理されて生成されたモノラル信号Sk(z)と補間部104により補間された両耳キューBCInfoに含まれるICCキュー情報に基づいてモノラル信号Sk(z)と無相関の残響信号Dk(z)を生成する(ステップS3)。実数残響信号生成部106はオールパスフィルタを有している。ここで、実数残響信号生成部106はオールパスフィルタのフィルタ係数として上述の実数値フィルタ係数を用いて処理を実行する。
First, the real number
信号分配部108は、補間部104により補間された両耳キューBCInfoに含まれるIIDキュー情報とICCキュー情報に基づいて、実数分析フィルタ部100により処理されたモノラル信号Sk(z)に実数残響信号生成部106により生成された残響信号Dk(z)を付加して左チャンネル信号Lk(Z)と右チャンネル信号Rk(Z)を生成する(ステップS4)。
Based on the IID queue information and ICC queue information included in the binaural queue BCInfo interpolated by the
実数合成フィルタ部112は左チャンネル信号Lk(Z)と右チャンネル信号Rk(Z)をサブバンド信号から時間信号L'、R'に変換する(ステップS5)。実数合成フィルタ部112は上述の実数値フィルタ係数を用いて処理を実行する。
The real number
以上説明したように、本発明のパラメトリックマルチチャンネル復号装置は、ステレオ信号を復号する際に、負荷の多い複素数演算を削減して負荷の少ない実数演算によるフィルタ処理を行うことができるので、メモリと演算量、処理出力の要件を削減することができ、また、例えばDSP(Digital Signal Processor)などで構成することができるため、チップのサイズを小型化することも可能である。 As described above, when decoding a stereo signal, the parametric multi-channel decoding device according to the present invention can perform a filtering process based on a real number calculation with a low load by reducing a complex number calculation with a large load. It is possible to reduce the amount of calculation and processing output, and for example, it can be configured by a DSP (Digital Signal Processor) or the like, so that the chip size can be reduced.
本実施の形態では説明を容易にするため、実数分析フィルタ部100、実数残響信号生成部106を構成するオールパスフィルタ部、実数合成フィルタ部112のいずれにも実数値のフィルタ係数が用いられるものとしたが、実数分析フィルタ部100が用いるフィルタ係数、実数残響信号生成部106を構成するオールパスフィルタ部が用いるフィルタ係数、実数合成フィルタ部112が用いるフィルタ係数のいずれか一つまたは二つを実数値としてもよい。
In the present embodiment, for ease of explanation, real value filter coefficients are used for all of the real number
(第2の実施の形態)
本発明の第2の実施の形態に係るパラメトリックマルチチャンネル復号装置を図5に示す。なお、本発明の第2の実施の形態に係るパラメトリックマルチチャンネル復号装置の各構成において、本発明の第1の実施の形態に係るパラメトリックマルチチャンネル復号装置の各構成と略同一なものについては同一の符号を付して説明を省略する。
(Second Embodiment)
FIG. 5 shows a parametric multi-channel decoding device according to the second embodiment of the present invention. In addition, in each configuration of the parametric multichannel decoding device according to the second embodiment of the present invention, the same components as those of the parametric multichannel decoding device according to the first embodiment of the present invention are the same. The description will be omitted.
図5に示すように、本実施の形態に係るパラメトリックマルチチャンネル復号装置は、フィルタ係数選択部201と、実数分析フィルタ部100、実数残響信号生成部106、実数合成フィルタ部112(図1参照)に代えて分析フィルタ部200、残響信号生成部206、合成フィルタ部212を第1の実施の形態に係るパラメトリックマルチチャンネル復号装置(図1参照)が備えた構成と同様である。
As shown in FIG. 5, the parametric multi-channel decoding apparatus according to the present embodiment includes a filter
フィルタ係数選択部201は分析フィルタ部200、残響信号生成部206、合成フィルタ部212に選択的に実数値または複素数値のフィルタ係数を出力する。フィルタ係数選択部201はフィルタ係数選択手段を構成する。
The filter
分析フィルタ部200の構成は、フィルタ係数として選択的に複素数値および実数値を使用することができる機能を実数分析フィルタ部100が備えた構成と同様である。分析フィルタ部200は分析フィルタ手段を構成する。
The configuration of the
残響信号生成部206の構成は、実数残響信号生成部106が有するオールパスフィルタ部が、フィルタ係数として選択的に複素数値および実数値を使用することができる機能を実数残響信号生成部106が備えた構成と同様である。残響信号生成部206は残響信号生成手段を構成する。
The configuration of the reverberation
合成フィルタ部212の構成は、フィルタ係数として選択的に複素数値および実数値を使用することができる機能を実数合成フィルタ部112が備えた構成と同様である。合成フィルタ部212は合成フィルタ手段を構成する。
The configuration of the
次に、本実施の形態に係るパラメトリックマルチチャンネル復号装置の動作について説明する。 Next, the operation of the parametric multichannel decoding apparatus according to this embodiment will be described.
フィルタ係数選択部201は分析フィルタ部200、残響信号生成部206、合成フィルタ部212に選択的に実数値または複素数値のフィルタ係数を出力する。
The filter
分析フィルタ部200は、フィルタ係数選択部201により選択的に出力されたフィルタ係数を用いて復元された時間信号であるモノラル信号M'を、それぞれが32のサンプルを有する64のサブバンド(周波数帯)信号からなるサブバンド信号Sk(Z)に変換する。次に、補間部104は、両耳キューBCInfoに線形補間を実行して処理係数を生成する。残響信号生成部206は、分析フィルタ部200により処理されて生成されたモノラル信号Sk(z)と補間部104により補間された両耳キューBCInfoに含まれるICCキュー情報に基づいてモノラル信号Sk(z)と無相関の残響信号Dk(z)を生成する。残響信号生成部206はオールパスフィルタを有している。ここで、残響信号生成部206はオールパスフィルタのフィルタ係数としてフィルタ係数選択部201により選択的に出力されたフィルタ係数を用いて処理を実行する。
The
信号分配部108は、補間部104により補間された両耳キューBCInfoに含まれるIIDキュー情報とICCキュー情報に基づいて、分析フィルタ部200により処理されたモノラル信号Sk(z)に残響信号生成部206により生成された残響信号Dk(z)を付加して左チャンネル信号Lk(Z)と右チャンネル信号Rk(Z)を生成する。
Based on the IID queue information and the ICC queue information included in the binaural queue BCInfo interpolated by the
合成フィルタ部212は左チャンネル信号Lk(Z)と右チャンネル信号Rk(Z)をサブバンド信号から時間信号L'、R'に変換する。実数合成フィルタ部212はフィルタ係数選択部201により選択的に出力されたフィルタ係数を用いて処理を実行する。
The
本実施の形態に係るパラメトリックマルチチャンネル復号装置は、分析フィルタ部200、残響信号生成部206を構成するオールパスフィルタ部、合成フィルタ部212の用いるフィルタ係数をそれぞれ複素数値と実数値に選択的に切り替えるフィルタ係数選択部201を設けているので、フィルタ係数選択部201を操作して分析フィルタ部200、残響信号生成部206を構成するオールパスフィルタ部、合成フィルタ部212の用いるフィルタ係数をいずれも複素数値として複素数演算を実行する高品質モードと、フィルタ係数選択部201を操作して分析フィルタ部200、残響信号生成部206を構成するオールパスフィルタ部、合成フィルタ部212の用いるフィルタ係数の一つ以上を実数値として低演算量を実行する低出力モードの二つ以上のモードをサポートすることができ、例えばバッテリ出力が高い場合は高品質モード、ユーザが出力を節約したい場合は低出力モードと用途に応じて切り替えることができる。分析フィルタ部200、残響信号生成部206を構成するオールパスフィルタ部、合成フィルタ部212のいずれにも実数値のフィルタ係数を用いたとしても、これにより生じる若干の音質の低下は、本発明がもたらすメモリと演算量、処理出力の削減、チップサイズの大幅な削減を考慮すると、特に低ビットレートの用途では許容の範囲である。
The parametric multi-channel decoding apparatus according to the present embodiment selectively switches the filter coefficients used by
以上説明したように、本発明のパラメトリックマルチチャンネル復号装置は、MPEG−4 Audio Extension 2に準拠したパラメトリックステレオコーディング技術でビットストリームのシンタックスを変更することなく複素数の処理を削減することが可能である。さらにフィルタ係数選択部を操作して、例えばバッテリ出力が高い場合は高品質モード、ユーザが出力を節約したい場合は低出力モードと用途に応じて切り替えることができる。低出力モードで作動した場合に生じる音質の若干の低下は、本発明がもたらす処理およびチップサイズの大幅な削減を考慮すると、特に低ビットレートの用途で許容の範囲である。 As described above, the parametric multi-channel decoding device according to the present invention can reduce complex processing without changing the syntax of the bitstream by the parametric stereo coding technique based on MPEG-4 Audio Extension 2. is there. Further, by operating the filter coefficient selection unit, for example, when the battery output is high, the high-quality mode can be switched, and when the user wants to save the output, the low-power mode can be switched according to the use. The slight degradation in sound quality that occurs when operating in the low power mode is acceptable, especially in low bit rate applications, taking into account the significant reduction in processing and chip size provided by the present invention.
上述の本実施の形態において両耳キューは、左チャンネル信号と右チャンネル信号をQMF(Quadrature Mirror Filter)などによりサブバンド信号に変換し、こうして得られた左チャンネル信号L、右チャンネル信号Rのサブバンド信号に基づいて抽出しているが、本発明はこれに限定されることはなく、左チャンネル信号および右チャンネル信号のスペクトル情報を平均化してスペクトル変換を実行し、これらの左チャンネル信号および右チャンネル信号の情報をスペクトルバンドに基づいて比較して両耳キューを算出してもよい。 In the above-described embodiment, the binaural cue converts the left channel signal and the right channel signal into subband signals using a QMF (Quadrature Mirror Filter) or the like, and subchannels of the left channel signal L and the right channel signal R thus obtained are obtained. Although extraction is performed based on band signals, the present invention is not limited to this. Spectral conversion is performed by averaging spectral information of the left channel signal and right channel signal, and the left channel signal and right channel signal are extracted. The binaural cues may be calculated by comparing channel signal information based on spectrum bands.
本発明は上記の各実施の形態に限定されるものではなく、この外その要旨を逸脱しない範囲で種々変形して実施することができる。本発明は、複素数値を使用したビットストリームにも適用可能である。本実施の形態では、理解を容易にするために2チャンネルシステムを想定して説明したが、本発明のパラメトリックステレオコーディング技術は、マルチチャンネル符号化に無理なく応用することが可能であり、例えば5.1チャンネルなどのマルチチャンネルシステムに適用可能である。本発明は他にも家庭用シアターシステム、カーオーディオシステム、電子ゲームシステムなどにも適用可能である。 The present invention is not limited to the above-described embodiments, and various modifications can be made without departing from the scope of the invention. The present invention can also be applied to a bit stream using complex values. Although the present embodiment has been described assuming a two-channel system for easy understanding, the parametric stereo coding technique of the present invention can be applied to multi-channel coding without difficulty, for example, 5 It is applicable to multi-channel systems such as 1 channel. The present invention is also applicable to home theater systems, car audio systems, electronic game systems, and the like.
以上のように、本発明にかかる画像符号化装置は、従来の画像符号化装置と比較して、時間を要せずに圧縮パラメータを決定することができるという効果を有し、動画像を構成する画像を圧縮符号化する画像符号化装置等として有用である。 As described above, the image coding apparatus according to the present invention has an effect that it is possible to determine a compression parameter in less time than a conventional image coding apparatus, and configures a moving image. This is useful as an image encoding device for compressing and encoding an image to be compressed.
100 実数分析フィルタ部(分析フィルタ手段)
104 補間部(補間手段)
106 実数残響信号生成部(残響信号生成手段)
108 信号分配部(信号分配手段)
112 実数合成フィルタ部(合成フィルタ手段)
200 分析フィルタ部(分析フィルタ手段)
201 フィルタ係数選択部(フィルタ係数選択手段)
206 残響信号生成部(残響信号生成手段)
212 合成フィルタ部(合成フィルタ手段)
700 ダウンミックス部
702 両耳キュー抽出部
704 音声信号符号化部
706 多重化部
708 多重分離部
710 音声信号復号化部
712 ステレオ復号部
800 複素分析フィルタ部
804 補間部
806 複素残響信号生成部
808 信号分配部
812 複素合成フィルタ部
100 Real number analysis filter section (analysis filter means)
104 Interpolation unit (interpolation means)
106 Real number reverberation signal generator (reverberation signal generator)
108 Signal distribution part (signal distribution means)
112 Real number synthesis filter unit (synthesis filter means)
200 Analysis filter section (analysis filter means)
201 Filter coefficient selection unit (filter coefficient selection means)
206 Reverberation signal generator (reverberation signal generator)
212 synthesis filter unit (synthesis filter means)
700
Claims (8)
両耳キュー情報に線形補間を実行して処理係数を生成する補間手段と、
前記分析フィルタ手段により変換された前記サブバンド信号と前記補間手段により生成された前記処理係数に基づいてオールパスフィルタ係数を用いて前記サブバンド信号と無相関の残響信号を生成するオールパスフィルタ部を有する残響信号生成手段と、
前記サブバンド信号と前記残響信号生成手段により生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配手段と、
合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタ手段とを備え、
前記分析フィルタ手段が用いる前記分析フィルタ係数、前記残響信号生成手段を形成する前記オールパスフィルタ部が用いる前記オールパスフィルタ係数、前記合成フィルタ手段が用いる前記合成フィルタ係数のいずれか一つ以上を実数値とすることを特徴とするパラメトリックマルチチャンネル復号装置。 Analysis filter means for converting the downmix signal into a plurality of subband signals using the analysis filter coefficient;
Interpolation means for performing linear interpolation on binaural queue information to generate processing coefficients;
An all-pass filter unit that generates a reverberation signal uncorrelated with the sub-band signal using an all-pass filter coefficient based on the sub-band signal converted by the analysis filter unit and the processing coefficient generated by the interpolation unit; Reverberation signal generating means;
Signal distribution means for generating a multichannel signal by mixing the subband signal and the reverberation signal generated by the reverberation signal generation means based on the processing coefficient;
Synthesis filter means for converting the multichannel signal from a subband signal to a time signal using a synthesis filter coefficient;
Any one or more of the analysis filter coefficient used by the analysis filter unit, the all-pass filter coefficient used by the all-pass filter unit forming the reverberation signal generation unit, and the synthesis filter coefficient used by the synthesis filter unit are real values. A parametric multi-channel decoding device.
とすることを特徴とする請求項1に記載のパラメトリックマルチチャンネル復号装置。 The filter coefficients used by the analysis filter means are the following real values:
The parametric multi-channel decoding device according to claim 1, wherein
とすることを特徴とする請求項1に記載のパラメトリックマルチチャンネル復号装置。 The all-pass filter coefficient used by the all-pass filter unit forming the reverberation signal generating unit is expressed by the following real value, that is,
The parametric multi-channel decoding device according to claim 1, wherein
とすることを特徴とする請求項1に記載のパラメトリックマルチチャンネル復号装置。 The complex value filter coefficients used by the synthesis filter means are the following real values:
The parametric multi-channel decoding device according to claim 1, wherein
両耳キュー情報に線形補間を実行して処理係数を生成する補間手段と、
前記分析フィルタ手段により変換された前記サブバンド信号と前記補間手段により生成された前記処理係数に基づいてオールパスフィルタ係数を用いて前記サブバンド信号と無相関の残響信号を生成するオールパスフィルタ部を有する残響信号生成手段と、
前記サブバンド信号と前記残響信号生成手段により生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配手段と、
合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタ手段と、
前記分析フィルタ手段が用いる前記分析フィルタ係数、前記残響信号生成手段を形成する前記オールパスフィルタ部が用いる前記オールパスフィルタ係数、前記合成フィルタ手段が用いる前記合成フィルタ係数を選択的に複素数値または実数値に切り替えるフィルタ係数選択手段とを備えたことを特徴とするパラメトリックマルチチャンネル復号装置。 Analysis filter means for converting the downmix signal into a plurality of subband signals using the analysis filter coefficient;
Interpolation means for performing linear interpolation on binaural queue information to generate processing coefficients;
An all-pass filter unit that generates a reverberation signal uncorrelated with the sub-band signal using an all-pass filter coefficient based on the sub-band signal converted by the analysis filter unit and the processing coefficient generated by the interpolation unit; Reverberation signal generating means;
Signal distribution means for generating a multichannel signal by mixing the subband signal and the reverberation signal generated by the reverberation signal generation means based on the processing coefficient;
Synthesis filter means for converting the multi-channel signal from a subband signal to a time signal using a synthesis filter coefficient;
The analysis filter coefficient used by the analysis filter means, the all-pass filter coefficient used by the all-pass filter section forming the reverberation signal generation means, and the synthesis filter coefficient used by the synthesis filter means are selectively converted into complex values or real values. A parametric multi-channel decoding device comprising: a filter coefficient selection unit for switching.
両耳キュー情報に線形補間を実行して処理係数を生成する補間ステップと、
前記分析フィルタステップにより変換された前記サブバンド信号と前記補間ステップにより生成された前記処理係数に基づいて前記サブバンド信号と無相関の残響信号を生成するオールパスフィルタ係数を用いたオールパスフィルタ処理を含む残響信号生成ステップと、
前記サブバンド信号と前記残響信号生成ステップにより生成された前記残響信号を前記処理係数に基づいて混合してマルチチャンネル信号を生成する信号分配ステップと、
合成フィルタ係数を用いて前記マルチチャンネル信号をサブバンド信号から時間信号に変換する合成フィルタステップとを含むパラメトリックマルチチャンネル復号方法において、
前記分析フィルタ係数、前記オールパスフィルタ係数、および前記合成フィルタ係数のいずれか一つ以上を実数値とすることを特徴とするパラメトリックマルチチャンネル復号方法。 An analysis filter step for converting the downmix signal into a plurality of subband signals using the analysis filter coefficients;
An interpolation step for performing linear interpolation on binaural cue information to generate processing coefficients;
An all-pass filter process using an all-pass filter coefficient that generates a reverberation signal uncorrelated with the sub-band signal based on the processing coefficient generated by the sub-band signal converted by the analysis filter step and the interpolation step. A reverberation signal generation step;
A signal distribution step of generating a multichannel signal by mixing the subband signal and the reverberation signal generated by the reverberation signal generation step based on the processing coefficient;
A parametric multi-channel decoding method including a synthesis filter step of converting the multi-channel signal from a subband signal to a time signal using a synthesis filter coefficient;
One or more of the analysis filter coefficient, the all-pass filter coefficient, and the synthesis filter coefficient are real values, and the parametric multichannel decoding method.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005163125A JP2006337767A (en) | 2005-06-02 | 2005-06-02 | Device and method for parametric multichannel decoding with low operation amount |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005163125A JP2006337767A (en) | 2005-06-02 | 2005-06-02 | Device and method for parametric multichannel decoding with low operation amount |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006337767A true JP2006337767A (en) | 2006-12-14 |
Family
ID=37558373
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005163125A Pending JP2006337767A (en) | 2005-06-02 | 2005-06-02 | Device and method for parametric multichannel decoding with low operation amount |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006337767A (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008102527A1 (en) * | 2007-02-20 | 2008-08-28 | Panasonic Corporation | Multi-channel decoding device, multi-channel decoding method, program, and semiconductor integrated circuit |
JP2010518452A (en) * | 2007-02-13 | 2010-05-27 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
JP2012516596A (en) * | 2009-01-28 | 2012-07-19 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | Upmixer, method, and computer program for upmixing a downmix audio signal |
CN108449704A (en) * | 2013-10-22 | 2018-08-24 | 韩国电子通信研究院 | Generate the method and its parametrization device of the filter for audio signal |
WO2019058927A1 (en) * | 2017-09-25 | 2019-03-28 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Encoding device and encoding method |
-
2005
- 2005-06-02 JP JP2005163125A patent/JP2006337767A/en active Pending
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010518452A (en) * | 2007-02-13 | 2010-05-27 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
JP2010518460A (en) * | 2007-02-13 | 2010-05-27 | エルジー エレクトロニクス インコーポレイティド | Audio signal processing method and apparatus |
WO2008102527A1 (en) * | 2007-02-20 | 2008-08-28 | Panasonic Corporation | Multi-channel decoding device, multi-channel decoding method, program, and semiconductor integrated circuit |
JP5328637B2 (en) * | 2007-02-20 | 2013-10-30 | パナソニック株式会社 | Multi-channel decoding device, multi-channel decoding method, program, and semiconductor integrated circuit |
JP2012516596A (en) * | 2009-01-28 | 2012-07-19 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | Upmixer, method, and computer program for upmixing a downmix audio signal |
US9099078B2 (en) | 2009-01-28 | 2015-08-04 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Upmixer, method and computer program for upmixing a downmix audio signal |
CN108449704A (en) * | 2013-10-22 | 2018-08-24 | 韩国电子通信研究院 | Generate the method and its parametrization device of the filter for audio signal |
WO2019058927A1 (en) * | 2017-09-25 | 2019-03-28 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Encoding device and encoding method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5358691B2 (en) | Apparatus, method, and computer program for upmixing a downmix audio signal using phase value smoothing | |
JP4918490B2 (en) | Energy shaping device and energy shaping method | |
JP4887307B2 (en) | Near-transparent or transparent multi-channel encoder / decoder configuration | |
KR101212900B1 (en) | audio decoder | |
JP5694279B2 (en) | Encoder | |
JP4589962B2 (en) | Apparatus and method for generating level parameters and apparatus and method for generating a multi-channel display | |
US20080294444A1 (en) | Method and Apparatus for Decoding an Audio Signal | |
JP5227946B2 (en) | Filter adaptive frequency resolution | |
JP6329629B2 (en) | Method and apparatus for compressing and decompressing sound field data in a region | |
JP2008536184A (en) | Adaptive residual audio coding | |
CA3089550C (en) | Audio scene encoder, audio scene decoder and related methods using hybrid encoder/decoder spatial analysis | |
US20070160236A1 (en) | Audio signal encoding device, audio signal decoding device, and method and program thereof | |
JP4892184B2 (en) | Acoustic signal encoding apparatus and acoustic signal decoding apparatus | |
TW202105365A (en) | Parameter encoding and decoding | |
WO2009125046A1 (en) | Processing of signals | |
JP2024512953A (en) | Combining spatial audio streams | |
KR100917845B1 (en) | Apparatus and method for decoding multi-channel audio signal using cross-correlation | |
JP2006337767A (en) | Device and method for parametric multichannel decoding with low operation amount | |
JP2007187749A (en) | New device for supporting head-related transfer function in multi-channel coding | |
JP2006323314A (en) | Apparatus for binaural-cue-coding multi-channel voice signal | |
Gorlow et al. | Multichannel object-based audio coding with controllable quality | |
CN116762127A (en) | Quantizing spatial audio parameters | |
TWI843389B (en) | Audio encoder, downmix signal generating method, and non-transitory storage unit | |
EP3424048A1 (en) | Audio signal encoder, audio signal decoder, method for encoding and method for decoding | |
JP2023541250A (en) | Processing parametrically encoded audio |