JP4351684B2 - Digital signal decoding method, apparatus, program, and recording medium - Google Patents
Digital signal decoding method, apparatus, program, and recording medium Download PDFInfo
- Publication number
- JP4351684B2 JP4351684B2 JP2006106021A JP2006106021A JP4351684B2 JP 4351684 B2 JP4351684 B2 JP 4351684B2 JP 2006106021 A JP2006106021 A JP 2006106021A JP 2006106021 A JP2006106021 A JP 2006106021A JP 4351684 B2 JP4351684 B2 JP 4351684B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- signal
- decoded
- digital signal
- provisional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Description
この発明は音声、音楽などの音響信号や画像信号などの各種ディジタル信号を表現するビット数を削減した符号に直す復号化方法、装置、プログラム及び記録媒体に関する。 The present invention relates to a decoding method, apparatus, program, and recording medium for converting into a code with a reduced number of bits representing various digital signals such as audio signals, music signals, and image signals.
音声、画像などの情報を圧縮する方法として歪を許す非可逆な符号化と、歪を許さない可逆な符号化がある。非可逆な圧縮としてはITU-T(International Telecommunications Union-Telecom Standardization)やISO/IEC MPEG (International Organization for Standardization/International Electrotechnical Commission Moving Picture Experts Group)の標準として種々の方法が知られている。これらの非可逆圧縮方法を使うとわずかの歪に押さえつつ、もとのディジタル信号を1/10以下までに圧縮することが可能である。しかし、その歪は符号化条件や入力信号に依存し、用途によっては再生信号の劣化が問題となる場合がある。 There are irreversible encoding that allows distortion and reversible encoding that does not allow distortion as methods of compressing information such as sound and image. As irreversible compression, various methods are known as standards of ITU-T (International Telecommunications Union-Telecom Standardization) and ISO / IEC MPEG (International Organization for Standardization / International Electrotechnical Commission Moving Picture Experts Group). By using these lossy compression methods, it is possible to compress the original digital signal to 1/10 or less while suppressing a slight distortion. However, the distortion depends on the encoding condition and the input signal, and deterioration of the reproduction signal may be a problem depending on the application.
一方、もとの信号を完全に再現できる可逆な圧縮方法として、コンピュータのファイルやテキストの圧縮によく使われているユニバーサルな圧縮符号化が知られている。これは入力系列の統計を学習しながら、どのような信号に対しても圧縮が可能で、テキストなどには1/2程度まで圧縮できるが、音声や画像のデータに直接適用しても圧縮効果は2割程度にとどまる。
圧縮率の高い非可逆の符号化を行い、その再生信号と原信号の誤差を可逆に圧縮することを組み合わせることで圧縮率の高い非可逆符号化と可逆の圧縮との両方を柔軟に使い分けることが可能となる。
On the other hand, as a reversible compression method capable of completely reproducing the original signal, universal compression coding often used for compression of computer files and texts is known. It can compress any signal while learning the statistics of the input sequence, and can compress up to about 1/2 for text etc., but even if it is applied directly to audio or image data, the compression effect Only around 20%.
Performs irreversible encoding with a high compression ratio and reversibly compresses the error between the reproduced signal and the original signal to flexibly use both lossy encoding with high compression ratio and lossless compression. Is possible.
この組み合わせ圧縮方法を特許文献1で本発明者は提案した。この方法は前記公報に詳細に示されているが、以下図1を参照して簡単に説明する。
符号器では、ディジタル入力信号(以下、入力信号サンプル系列とも呼ぶ)が、入力端子100から入力され、フレーム分割部110で、その入力信号サンプル系列が、例えば1024個の入力信号サンプルからなるフレーム単位に、順次分割される。
The present inventor proposed this combination compression method in
In the encoder, a digital input signal (hereinafter also referred to as an input signal sample sequence) is input from the
非可逆量子化部120で、フレーム分割部110の出力が非可逆圧縮符号化される。この符号化は、復号化時に元のディジタル入力信号をある程度再現できる方式であれば、入力信号に適した如何なる方式でもよい。例えば、上記入力信号が音声信号であればITU-Tの音声符号化などが利用でき、音楽であればMPEGまたはTwinVQ(Transform-Domain Weighted Interleaved Vector Quantization)などが利用でき、映像であればMPEGなどが利用できる。その他、前記公報で示す各種非可逆量子化法を用いることもできる。なお、非可逆量子化部120からの出力を「非可逆圧縮符号I(n)」と称する。
The
非可逆量子化部120に対応する復号部(即ち、逆量子化部230)と同様構成の逆量子化部130で、非可逆圧縮符号I(n)から局部再生信号が生成される。局部再生信号と元のディジタル入力信号との誤差信号が減算部140で求められる。通常、この誤差信号の振幅は、元のディジタル入力信号の振幅よりもかなり小さい。よって、ディジタル入力信号をそのまま可逆圧縮符号化するよりも、誤差信号を可逆圧縮符号化する方が情報量を小さくできる。
この可逆圧縮符号化の効率を上げるために、並び替え部160が、誤差信号(即ち、ビット列)のビットを並び替える。並び替え部160による処理の詳細を図2を参照して以下に説明する。ディジタル入力信号(図2A)では、2の補数表現で、各サンプル値(振幅)の正負の整数が表現される。ディジタル入力信号とそのディジタル入力信号に対応する局部再生信号との誤差信号サンプルを図2Bに示す。並び替え部160は、この誤差信号(即ち、ビット列)を、2の補数表現によるビット列から、符号絶対値表現(極性と絶対値の2進数)によるビット列へ変換する(図2C)。変換後の誤差信号では、MSB(Most Significant Bit:最上位ビット)〜第2LSB(Least Significant Bit:最下位ビット)が振幅の絶対値を示し、LSBが振幅の極性符号を示す。
A local reproduction signal is generated from the irreversible compression code I (n) by the
In order to increase the efficiency of the lossless compression encoding, the
次に、並び替え部160は、符号絶対値表現に変換後の誤差信号サンプルを、それぞれの対応ビット位置(MSB,第2MSB,…,LSB)毎に、即ち、図2の時間軸方向に連結する(図2D)。この各ビット列(即ち、同じビット位置の1024個のビットからなるビット列)を以下「等位ビット列」と称する。以上の並び替えでは、各誤差信号の値はまったく変らない。ところが、誤差信号は振幅が小さいので、並び替え部160の出力では、上位のビットは全て“0”となることが多い。その結果、“0”が連続することによって、誤差信号の可逆圧縮符号化効率が上がる。
Next, the
次に、可逆符号化部150で、並び替え部160の出力が可逆圧縮符号化される。可逆符号化部150は、例えば、連続する系列がある場合や頻繁に出現する系列がある場合を利用した、ハフマン符号化や算術符号化などのエントロピィ符号化などにより等位ビット列を可逆圧縮符号化し、復号器20に送る。並び替え部160の出力に、テキスト等を可逆に圧縮するユニバーサル符号化を適用することでも圧縮効率が改善される。
以上の処理によって、符号器は、非可逆量子化部120からの非可逆圧縮符号I(n)と可逆符号化部150からの可逆圧縮符号I(e)とを出力する。
Next, the
Through the above processing, the encoder outputs the lossy compression code I (n) from the
復号器20では、可逆復号化部210が、可逆圧縮符号I(e)を復号化する。そして、並び替え部220が、並び替え部160と逆の処理を行うことによって、誤差信号をフレーム単位で順次出力する。また、逆量子化部230が、非可逆圧縮符号I(n)を復号化する。加算部240が、逆量子化部230の出力と並び替え部160の出力とを加算する。最後に、フレーム合成部250が、加算部240の出力を順次連結することによって、元の入力信号サンプル系列を再生する。以上の処理によって、該入力信号サンプル系列が、出力端子260から出力される。
この従来の符号化方法は、伝送路上においてビット欠落が生じると復号器20の並び替え部により再構築する各サンプルに他のサンプルのビットが混入し、復号信号に大きな品質劣化が生じる問題がある。また、実現可能な圧縮率は約1/2程度であり、品質をほとんど損なわずに1/3とか1/4の圧縮や精度を保障した圧縮は実現できない。
また原信号の振幅を表現するディジタル値のビット数を1ビット削減しても削減しない場合と同じ精度を保障した波形再生が可能であるが、一般に4ビット以上削減すると聴感上、大きな量子化雑音が聞こえてしまうという問題があった。
This conventional coding method has a problem that if a bit loss occurs on the transmission path, bits of other samples are mixed in each sample reconstructed by the rearrangement unit of the
In addition, waveform reproduction that guarantees the same accuracy as when the number of bits of the digital value representing the amplitude of the original signal is reduced by 1 bit is possible. There was a problem that I could hear.
この発明の第1の目的は、伝送路でビット欠落が生じても、復号信号にそれほど大きな品質劣化が生じない符号化方法と復号方法及びそれらの装置を提供することである。この発明の第2の目的は、ディジタル信号を制御された歪内で、その情報を圧縮することと広い範囲のビットレートで精度を保障しながら圧縮効率を高める符号化方法、その復号化方法、これらの装置を提供することにある。 A first object of the present invention is to provide an encoding method, a decoding method, and an apparatus thereof that do not cause a great quality degradation in a decoded signal even if a bit loss occurs in a transmission line. A second object of the present invention is to compress a digital signal within a controlled distortion and to encode the signal to ensure high accuracy with a wide range of bit rates, a decoding method thereof, It is to provide these devices.
この発明によれば、複数のサンプルを含む各フレームごとにディジタル信号を符号化する符号化方法は、以下のステップを含む。
(a) フレームごとのディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成し、
(b) 上記データの組を符号で出力する。
According to the present invention, an encoding method for encoding a digital signal for each frame including a plurality of samples includes the following steps.
(a) Generate a plurality of pairs of reversible data of bit strings straddling digital signal samples for each frame at each bit position, or reversible data sets of irreversible data and error signals derived from the irreversible data. ,
(b) The above data set is output as a code.
この発明によれば、フレームごとにディジタル信号のサンプルを再生する復号化方法であり、
(a) 入力符号を復号してディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成するステップと、
(b) 上記複数の組のデータに基づいてディジタル信号を再生するステップ、
とを含む。
According to the present invention, there is provided a decoding method for reproducing a sample of a digital signal for each frame,
(a) Multiple sets of reversible data of bit strings obtained by decoding input codes and straddling digital signal samples at their respective bit positions, or reversible data sets of error signals derived from irreversible data and the irreversible data A step of generating
(b) regenerating a digital signal based on the plurality of sets of data;
Including.
この発明によれば、複数のサンプルからなる各フレームごとにディジタル信号を符号化する符号化器であり、
フレーム毎に上記ディジタル信号のサンプルを,それらの各ビット位置で跨いだビット列の可逆データの複数の組,又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成する手段と、
上記データの組を符号瀬出力する出力手段、
とを含む。
According to the present invention, an encoder for encoding a digital signal for each frame composed of a plurality of samples,
Means for generating a plurality of sets of reversible data of bit strings straddling the digital signal samples for each frame at each bit position, or a set of reversible data of error signals derived from the irreversible data and the irreversible data for each frame When,
An output means for outputting the code set of the data;
Including.
この発明によれば、複数のサンプルから成る各フレーム毎にディジタル信号のサンプルを再生する復号器であり、
入力符号を復号してディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの復数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成するデータ生成手段と、
上記データの組からディジタル信号を再生する手段、
とを含む。
According to the present invention, there is provided a decoder for reproducing a sample of a digital signal for each frame composed of a plurality of samples,
Decodes the input code and generates a reversible set of reversible data of the bit string straddling digital signal samples at each bit position, or a reversible set of error signals derived from the irreversible data and the irreversible data. Data generation means for
Means for reproducing a digital signal from the data set;
Including.
この発明による上記符号化方法、符号器及び復号方法、復号器によれば伝送記録単位データごとにパケット化するため、符号化処理において伝送容量、記憶容量などに応じてパケットを故意に欠落させて情報量を減少させても、この発明の復号化方法によれば、パケットの欠落に対し伝送記録単位データを補正することができる。 According to the above encoding method, encoder and decoding method, and decoder according to the present invention, packetization is performed for each transmission record unit data. Therefore, in the encoding process, packets are intentionally dropped according to transmission capacity, storage capacity, etc. Even if the amount of information is reduced, according to the decoding method of the present invention, transmission record unit data can be corrected for packet loss.
この発明の可逆符号化方法によれば伝送記録単位データごとにパケット化するため、伝送容量、記憶容量などに応じてパケットを故意に欠落させて情報量を減少させ、つまり1/3とか1/4の圧縮としても、この発明の可逆復号化方法によれば、パケットの欠落に対し伝送記録単位データを補正することができる。
なおこの明細書においては情報量を調整するために意図的に1フレーム中のパケットを除去したために、復号器において1フレーム中のパケットが全て入力されない場合、あるいは通信網のトラフィック輻輳による交換局などで一部パケットを送出しないために基づく、又は伝送路障害、記録再生装置の異常などに基くパケット欠落の場合、更に入力されたパケット中に誤りがあり、その伝送記録単位データを解読できず、使用することができない場合などを総称でパケット欠落と記す。
According to the lossless encoding method of the present invention, packetization is performed for each transmission record unit data, so that the amount of information is reduced by intentionally dropping packets according to transmission capacity, storage capacity, etc., that is, 1/3 or 1 / 4, according to the lossless decoding method of the present invention, transmission record unit data can be corrected for packet loss.
In this specification, packets in one frame are intentionally removed in order to adjust the amount of information, so that all the packets in one frame are not input to the decoder, or an exchange station due to traffic congestion in the communication network. In case of packet loss based on not sending out some packets or due to transmission path failure, recording / reproducing device abnormality, etc., there is an error in the input packet, and the transmission record unit data cannot be decoded, A case where it cannot be used is generically referred to as packet loss.
以下この発明の実施形態を実施例により図面を参照して説明する。各図において既に説明した図と対応する部分には同一番号を付けて説明する。
第1実施例
図3にこの発明による符号器10及び復号器20の各実施例を示す。この実施例が図1の従来技術と異なる点は、ヘッダ付加部320を設け、パケットで信号を送出することにより、伝送路でのビット欠落による復号信号への品質劣化の影響を軽減するよう構成したことである。
Embodiments of the present invention will be described below with reference to the drawings. In each figure, the same reference numerals are given to the parts corresponding to those already explained.
First Embodiment FIG. 3 shows embodiments of the
符号器10において、入力端子からの入力信号サンプル系列はフレーム分割部110で例えば1024個の入力信号サンプル(即ち、n=1024点のサンプル)からなるフレーム単位に順次分割され、この分割された各フレームごとに、入力信号サンプル系列は並び替え部160によりそれぞれのサンプルの振幅ビット列における対応ビット位置のビットがそのフレームにわたって時間方向に連結される。この際入力信号サンプルは正または負の整数の振幅が2の補数表現されているが、その2の補数表現された各サンプルを、従来技術の説明と同様に、この2の補数表現によるビット列を極性絶対値変換部161で、極性符号と絶対値から成るmビット2進数表現に変換し、その後、1フレームn個のmビットサンプルに対し、ビット配列変換部162で、それぞれのmビットサンプルの各対応ビット位置のビットをフレームにわたって時間方向に連結したビット配列(即ち、等位ビット列)に並び替えることが好ましい。しかし図中破線で示すように、極性絶対値変換部161を介することなく、ビット配列変換部162で変換、つまり2の補数表現のまま、各対応ビット位置のビットをフレームにわたって時間方向に連結した等位ビット列に並び替えてもよい。
In the
この発明では並び替え部160からの等位ビット列は伝送記録単位分割部310で伝送単位あるいは記録単位のデータに分割される。この単位を以下ブロックと呼ぶが、伝送単位で一般に使用されるパケットとも呼ぶ。これら各分割された伝送記録単位データは必要に応じて、可逆符号化部150により可逆圧縮符号化され、ヘッダ付加部320により、復号時に、互いに分離された伝送記録単位データを1つのフレームとして再構成可能なように例えば連続番号を含むヘッダが取付けられ、パケットとして出力端子170に出力される。なお可逆符号化部150は従来技術の可逆符号化部150と同様なものである。
In the present invention, the equidistant bit string from the
通常の入力信号サンプルは2の補数で正負の整数を表現するが、この例では、ディジタル入力信号を極性符号と振幅の絶対値の2進数に変換したあとのフレーム毎の数値列のビット配列組替え、つまり等位ビット列への変換と、伝送記録単位データへの分割の例を図4Aに示す。極性符号と絶対値表現された各mビットサンプル(振幅ビット列)は図4A中の左側に示すように1フレーム分が時間方向に配列されている。n番目のサンプルの振幅ビット列の様子を理解し易いように、太線で囲んだ振幅ビット列DV(n)として示す。nはフレーム内の時間軸方向のサンプル番号を表わし、例えばn=1, 2, …, 1024である。後述のように、例えば入力データが音声信号であれば、伝送路でのパケットの欠落によるビットの欠落が生じる場合、各振幅ビット列DV(n)の上位ビット程大きな歪を再生音声品質に与え、極性符号は最も大きな歪を与えることになるので、この例では各振幅ビット列DV(n)の極性符号を絶対値のMSBと隣接させ、図ではMSBの直上に極性符号を位置させている。 A normal input signal sample expresses a positive or negative integer in two's complement. In this example, the bit sequence is rearranged in a numerical sequence for each frame after the digital input signal is converted into a binary number having a polarity code and an absolute value of amplitude. That is, FIG. 4A shows an example of conversion to a coordinate bit string and division into transmission recording unit data. Each m-bit sample (amplitude bit string) expressed as a polarity code and an absolute value is arranged in the time direction as shown in the left side of FIG. 4A. In order to easily understand the state of the amplitude bit string of the nth sample, it is shown as an amplitude bit string DV (n) surrounded by a thick line. n represents a sample number in the time axis direction in the frame, for example, n = 1, 2,. As will be described later, for example, if the input data is an audio signal, if bit loss occurs due to packet loss in the transmission path, higher-order bits of each amplitude bit string DV (n) are given distortion to the reproduced audio quality, Since the polarity code gives the largest distortion, in this example, the polarity code of each amplitude bit string DV (n) is adjacent to the MSB of the absolute value, and in the figure, the polarity code is positioned immediately above the MSB.
このようなサンプル列を、図4Aの右側に示すようにこの例ではまず各サンプルの振幅値の極性ビット(符号)のみを時間軸方向に連結して、フレーム内で等位ビット列を作る。次にmビット振幅値のMSBのみをフレーム内で連結して等位ビット列を作り、以下同様にして、順次、各対応ビット位置ごとにフレームにわたってビットを時間方向に連結して等位ビット列を作り、最後にLSBのみをフレーム内で連結して等位ビット列を作る。それらの等位ビット列の1つの例を図4A中右側のビット配列中に太枠でDH(i)として示す。iは振幅ビット列DV(n)における各ビット位置を示し、例えばMSB側からi=1, 2, …, 17である。以上の並び替えではフレーム中に含まれるデータの中身は全く変らない。 In this example, as shown on the right side of FIG. 4A, such a sample string is first connected in the time axis direction with only the polarity bit (sign) of the amplitude value of each sample to create a coordinate bit string within the frame. Next, only MSBs with m-bit amplitude values are connected in a frame to create a coordinate bit string, and in the same manner, bits are sequentially connected in the time direction over the frame for each corresponding bit position to create a coordinate bit string. Finally, only the LSB is concatenated in the frame to create a coordinate bit string. One example of these coordinate bit strings is shown as DH (i) with a thick frame in the right bit arrangement in FIG. 4A. i indicates each bit position in the amplitude bit string DV (n), for example, i = 1, 2,..., 17 from the MSB side. With the above rearrangement, the content of the data contained in the frame does not change at all.
伝送記録単位分割部310で、各等位ビット列DH(i)ごとに又は隣接する複数の等位ビット列DH(i)ごとに伝送記録単位データに分割する。この場合、1フレーム中において、伝送記録単位データとして1つの等位ビット列で構成されるものと複数の等位ビット列で構成されるものとが混在してもよい。
このように分割された各伝送記録単位データはヘッダ付加部320で、例えば図4Bに示すようにヘッダ31がその伝送記録単位データ(ペイロード)32に付けられる。ヘッダ31には例えばフレーム番号とフレーム内の伝送記録単位データの番号よりなるパケット番号33と、必要に応じてそのパケットの優先度34及びデータ長35が設けられ、復号側でそれらに基づいて各フレームごとにディジタル信号列を再構成できるようにしている。
The transmission record
Each transmission record unit data divided in this way is added by a
データ長35は伝送記録単位データ32のデータ長が固定であれば必要ないが、可逆符号化部150で圧縮符号化された場合などはデータ長がパケットにより異なることがある。
更に一般にはパケット全体に誤りが生じているか否かを検出するためのCRC符号などの誤り検出符号36が最後に付加されて1つのパケット30が構成され、このパケット30が出力端子170から出力される。
パケット30に優先順位がつけられる場合は、振幅ビット列の、より上位のビット位置に対応する伝送記録単位データを含むパケットに、より高い優先度を示す符号を与える。つまり、各等位ビット列DH(i)ごとに伝送記録単位データに分割する場合はDH(i)のiが小さいデータを含むパケット程、高い優先度を与える。従って、図4Aの例では、i=1に対応する極性等位ビット列を含むDH(1)に最も高い優先度が与えられる。優先度は振幅ビット列のLSB〜MSBに対し必ずしも全て単調増加の異なる優先度を与える必要はなく、例えば上位複数ビットにはそれぞれ異なる優先度を与え、下位複数ビットに対しては同じ優先度と与えてもよい。即ち、予め決めた優先度の数は振幅ビット列のビット数と等しいか、それより小さくしてもよい。なお後述するが従来技術で説明したように高圧縮の非可逆量子化を併用する場合は、その高圧縮符号化符号を表わすビット列に最も高い優先度を与えてもよい。
The
More generally, an
When priority is given to the
復号器20においては入力端子200からのパケット30はその伝送記録単位データが可逆圧縮されている場合は可逆復号化部210(従来技術の可逆復号化部210と同一)で可逆復号され、各伝送記録単位データは伝送記録単位統合部410でそのパケット番号に基づき、複数のパケットより1フレーム分を統合し、例えば図4Aの右側の等位ビット列DH(i)に示すように統合される。この統合された等位ビット列は並び替え部220で振幅ビット列DV(n)、つまりサンプル列(波形サンプル列)に変換される。この際、各サンプルが極性符号と絶対値で表現したものから伝送記録単位データが作られたものである場合はビット配列逆変換部221で、図4Aで説明した並び替えと逆に等位ビット列を振幅ビット列に並び替えた後、2の補数変換部222で各振幅ビット列を、2の補数表現に変換する。なお、伝送記録単位データが、2の補数表現された振幅ビット列から等位ビット列に直接並び替えたものに基づくものである場合は、図3中に破線で示すようにビット配列逆変換部221からの振幅ビット列はそのまま復号サンプルとしてフレーム合成部250へ供給される。
In the
この発明では入力されたパケットの一連のパケット番号に欠落が生じていることを欠落検出部420が検出すると、そのパケット番号のパケットが欠落していると判定し、並び替え部220からの振幅ビット列はフレーム合成部250へ直接供給されることなく、欠落補正部430へ供給され、欠落情報に対する補正が振幅ビット列(サンプル)に対して行われ、フレーム合成部250へ供給される。
欠落補正部430における補正は既知の情報から欠落した情報を推定して行う。一部のパケット、通常優先度の低いLSB側のビットが収容されたパケットが欠落した場合、その欠落部分に対応するビットの値が確定できないので小さい数値、例えば0か、その欠落部分のとりうる値の中間値を使って波形を再生せざるを得ない。この場合MSB側の確定したビット数の精度は保てるが、ビット欠落による聴覚的ひずみは大きい。この理由は図5に示す模式図のように原音のスペクトルは実線に示すように低域にエネルギーが偏る場合が多く、これに対してビットの欠落によるひずみ成分は破線に示すように平坦に近いスペクトル形状となるのでその高域成分が原音より大きく、雑音として聞こえてしまう。そこで不確定の成分のスペクトルが平均的なスペクトルまたはフレーム毎に確定したスペクトルに近いように不確定な波形の値を補正する。これにより、補正後の歪み成分のスペクトルは図5中の1点鎖線のように高域成分が小さくなり、ひずみが原音にマスクされて品質が改善される。
In the present invention, when the
The correction in the
つまり、過去の数フレームの平均的スペクトル、又は後で述べるように別に得られたそのフレームにおける確定したスペクトルが例えば図5中の実線に近いような場合、当該フレームの欠落情報以外の情報から得られるスペクトルが、図5中の実線に近づくように、欠落情報に対する補正を行う。この補正の好ましい手法は後の実施例で述べる。簡単な手法としては、欠落補正部430でその入力再生サンプル列を低域通過フィルタに通して平滑化して高域の雑音成分を除去すればよい。その低域通過フィルタの遮断特性は、原信号のスペクトル形状(包絡)が予め知られていれば、その特性に応じて高域成分を減衰させるように選定する。あるいは、前述のように平均的なスペクトルを求め又はフレームごとの確定したスペクトルの形状に合せて遮断特性を適応的に変更してもよい。
In other words, when the average spectrum of the past several frames or the determined spectrum obtained separately in that frame as described later is close to the solid line in FIG. 5, for example, it is obtained from information other than the missing information of the frame. The missing information is corrected so that the obtained spectrum approaches the solid line in FIG. A preferred technique for this correction will be described in a later embodiment. As a simple method, the missing
このように復号器20でパケット欠落にもとづく情報欠落を補正できるため、必要に応じてLSB側パケットを意図的に送らず、符号化圧縮効率を大としても、復号器20で復号が可能となる、あるいは聴感上問題にならない再生を行うことができる。
第2実施例
図6にこの発明の第2実施例を示す。この第2実施例では符号器10においてフレーム分割部110でフレームごとに分割された入力信号サンプル系列は補助情報生成部350に与えられる。補助情報生成部350はスペクトル包絡算出部351とパワー算出部354と、補助情報符号化部352とから構成されている。フレーム分割部110でフレームごとに分割された入力信号サンプル列はスペクトル包絡算出部351でスペクトル包絡を表現するパラメータが、例えば線形予測分析により線形予測係数LPCとして求められ、またパワー算出部354でフレームごとの入力信号サンプル列の平均パワーPaが求められる。
Since the
Second Embodiment FIG. 6 shows a second embodiment of the present invention. In the second embodiment, the input signal sample sequence divided for each frame by the
あるいは求めた線形予測係数LPCに基づき構成された逆フィルタ355に入力信号サンプル列を入力してスペクトル包絡を平坦化処理して、その平坦化された信号の平均パワーが平坦化パワー算出部356で求められる。線形予測係数LPC及び平均パワーPaは補助情報符号化部352により、例えば30〜50ビット程度の低ビットで符号化されて補助情報とされる。この補助情報はヘッダ付加部320へ供給され、各フレームの代表パケット、例えば極性符号を含む伝送記録単位データを含むパケット内に付加され、あるいは独立したパケットとして出力される。
Alternatively, the input signal sample sequence is input to the
なお、スペクトル包絡算出部351により求められるスペクトル包絡係数はフレーム長を長くしてもそれ程大きな変化はなく、また、補助情報符号化部340により符号化されたスペクトル包絡係数の情報量もそれ程変化しないので、図中に破線で示すように並び替え部160に与えるディジタル入力信号のフレーム長より長いフレーム長でフレーム分割部110'により分割して補助情報生成部350に与え、可逆圧縮の効率を高めるようにしてもよい。
復号器20においては入力端子200に入力されたパケットは分離部440において伝送記録単位データと、補助情報とに分離され、伝送記録単位データは可逆復号化部210へ供給され、補助情報は補助情報復号部450へ供給され、補助情報復号部450は当該フレームのスペクトル包絡を表すパラメータ、ここでは線形予測係数LPCと平均パワーPaを復号し、このスペクトル包絡係数LPCと平均パワーPaを欠落補正部430へ供給する。欠落補正部430はこのスペクトル包絡係数LPCと平均パワーPaを、欠落情報の補正に用い、例えば実施例1で述べたように欠落情報に対する補正を行う。
Note that the spectrum envelope coefficient obtained by the spectrum
In the
あるいは欠落情報(ビット)のとり得る値の各組み合せを、各サンプル値に加算し、補正サンプル列(波形)の候補を作り、これら候補のスペクトル包絡を求め、そのスペクトル包絡が補助情報の復号スペクトル包絡と最も近いものと対応する補正サンプル列(波形)候補を、補正サンプル列としてフレーム合成部250へ出力する。なお図6において可逆符号化部150、可逆復号化部210を省略してもよい。
補助情報による補正
欠落情報の取り得る値の各組み合わせを用いて補正サンプル列の候補を作る場合、欠落情報(ビット)が多くなると、補正サンプル列(波形)候補が著しく多くなり、処理量が非現実的になるおそれがある。このような問題がないようにする欠落補正部430の処理、及びその機能構成について以下に説明する。
Alternatively, each combination of possible values of missing information (bits) is added to each sample value to create correction sample string (waveform) candidates, and the spectrum envelopes of these candidates are obtained, and the spectrum envelope is the decoded spectrum of the auxiliary information. A correction sample sequence (waveform) candidate corresponding to the closest envelope is output to the
When candidates for correction sample sequences are created using combinations of possible values of correction missing information by auxiliary information, if the missing information (bits) increases, the number of correction sample sequence (waveform) candidates increases significantly, and the processing amount is reduced. May become realistic. The processing of the
図7にその処理手順の一例を、図8に欠落補正部430の機能構成の一例をそれぞれ示す。まず暫定波形生成部431に並び替え部220から入力された確定しているビットのみを使ってフレーム内の暫定波形(暫定的なサンプル列)を再生する(S1)。
この暫定波形の再生は欠落しているビットは例えば0に固定するか、欠落ビットが取り得る値の中間値とする。例えば下位4ビットが欠落しているとすると、欠落4ビットの値は0〜15までの値のどれかであるが、仮に8または7に設定する。
FIG. 7 shows an example of the processing procedure, and FIG. 8 shows an example of the functional configuration of the
In the reproduction of the provisional waveform, missing bits are fixed to 0, for example, or set to an intermediate value that can be taken by missing bits. For example, if the lower 4 bits are missing, the value of the missing 4 bits is any value from 0 to 15, but is set to 8 or 7.
次にこの暫定波形のスペクトル包絡係数をスペクトル包絡算出部432で計算する(S2)。例えば音声分析で使われている全極型の線形予測分析を暫定波形に対し行えばスペクトル包絡係数を推定できる。一方、誤差計算部433で、受信された補助情報Axが補助情報復号部450で復号されて原音のスペクトル包絡係数が得られ、その原音スペクトル包絡を暫定波形のスペクトル包絡係数と比較して、誤差が許容範囲内であれば暫定波形を補正された出力波形信号としてスイッチSW1を介してフレーム合成部250へ出力する(S3)。
Next, the spectrum
ステップS3において、推定スペクトル包絡係数と復号スペクトル包絡係数との誤差が許容範囲内でない場合には、まず推定した暫定波形のスペクトル包絡係数の逆特性を暫定波形に与える(S4)。具体的にはステップS2で求めた暫定波形のスペクトル包絡係数を表す線形予測計数を用いて例えば全極型の線形予測係数の逆フィルタ(全零型)434にスイッチSW2を介して与えられた暫定波形を通過させることで暫定波形のスペクトルを平坦化する。
次にこのスペクトルが平坦化された波形信号の平均パワーをパワー計算部438で計算し、その平均パワーと、補助情報復号部450からの復号された平均パワーとから補正量を補正量計算部439で計算し、例えば両者の比又は差をとり、その補正量によりパワー補正部501で平坦化信号に対し振幅補正を行う。つまり、逆フィルタ434の出力に対し補正量を乗算又は加算して復号パワーに合わせる(S5)。次に振幅補正された平均化信号に対して補助情報のスペクトル包絡係数を乗算してスペクトル包絡係数が補正された暫定波形を生成する(S6)。即ち補助情報のスペクトル包絡を表わすパラメータLPCを用いた全極型の合成フィルタ435にパワー補正部501の出力を通してスペクトル補正波形を作る。この結果の波形のスペクトル包絡は原音に近いものになる。
If the error between the estimated spectral envelope coefficient and the decoded spectral envelope coefficient is not within the allowable range in step S3, first, the inverse characteristic of the estimated spectral envelope coefficient of the provisional waveform is given to the temporary waveform (S4). Specifically, using the linear prediction coefficient that represents the spectrum envelope coefficient of the provisional waveform obtained in step S2, for example, the provisional signal given to the all-pole linear prediction coefficient inverse filter (all zero type) 434 via the switch SW2. The spectrum of the provisional waveform is flattened by passing the waveform.
Next, the average power of the waveform signal whose spectrum is flattened is calculated by the
ただしこのスペクトル補正波形の振幅値は欠落波形の振幅値中のすでに確定されているビットと矛盾するビットを含む可能性があるので、正しい値に修正部436で修正する(S7)。例えば16ビット精度の振幅の値のうち、下位4ビットが不明である場合、各サンプルのとりうる値の不確定幅は16であるので、それらの取り得る値中からスペクトル補正波形と最も近い値に修正する。つまり各サンプルにおいて補正したサンプル値がとり得る範囲(XXXXXXXXXXXX0000〜XXXXXXXXXXXX1111)から外れた場合は、とり得る範囲のスペクトル補正波形のサンプルと最も近い限界値に修正する。この修正で振幅値の確定しているビットはすべて一致して同時にスペクトル包絡も原音のものに近づく。
However, since the amplitude value of the spectrum correction waveform may include a bit inconsistent with the already determined bit in the amplitude value of the missing waveform, the
この修正波形をステップS1の暫定波形としてスイッチSW3を介して暫定波形生成部431に戻してステップS2以後の処理を繰り返すことができる。なお波形(サンプル値)は整数値が前提であるが、フィルタ計算では実数扱いとなり、フィルタの出力値の整数化が必要になる。合成フィルタの場合にはサンプルごとに整数化するか、フレーム毎にあとで一括して整数化するかで結果は異なるが、どちらも可能である。
図7及び図8中に破線で示すように、ステップS4で暫定波形を平坦化した後、まずこの平坦化された暫定波形(平坦化信号)を合成フィルタ435へ通して、スペクトル包絡補正した再構成サンプル系列(波形)を得(S5′)、そのスペクトル包絡補正された波形に対しパワー補正部501'で振幅補正をして(S6’)、ステップS7に移るようにしてもよい。この場合は、合成フィルタ435からのスペクトル包絡補正された波形の平均パワーがパワー計算部438'で計算され、この平均パワーと、補助情報の復号パワー(符号器10中のパワー算出部356の出力)とにより補正量計算部439'で補正量が求められ、その補正量により合成フィルタ435の出力に対してパワー補正部501'で振幅補正が行われる。
This corrected waveform can be returned to the provisional
As shown by broken lines in FIG. 7 and FIG. 8, after the provisional waveform is flattened in step S4, the flattened provisional waveform (flattened signal) is first passed through the
次に補助情報を用いた欠落情報補正処理の他の例を図9を参照して説明する。
ステップS1〜S3、S6は図7に示した処理中のステップS1〜S3、S7とそれぞれ同一処理である。この例では図9のステップS4において、ステップS2で推定したスペクトル包絡に対する逆特性の逆フィルタ434と補助情報中のスペクトル包絡を表す線形予測係数LPCを用いた合成フィルタ435とを合体した1つの合成フィルタ部435'のフィルタ係数を計算し(S4)、ステップS5でこの合成フィルタに暫定波形を通して補正波形を合成する。その補正されたスペクトル包絡波形に対し振幅補正を行う(S6)。この振幅補正は図8中に破線で示すパワー計算部438'、補正量計算部439'、パワー補正部501'により行う。
Next, another example of missing information correction processing using auxiliary information will be described with reference to FIG.
Steps S1 to S3 and S6 are the same processes as steps S1 to S3 and S7 in the process shown in FIG. In this example, in step S4 of FIG. 9, one synthesis is performed by combining the
図9に示した処理の機能構成は、図8中に破線で示すように、スペクトル包絡算出部432からの推定スペクトル包絡係数と補助情報復号部450からの復号スペクトル包絡係数とから、逆フィルタ434と合成フィルタ435を組み合せたひとつの合成フィルタ部435'のフィルタ係数が合成スペクトル包絡計算部437で計算され、そのフィルタ係数が合成フィルタ部435'に設定され、この合成フィルタ部435'に暫定波形が通される。その合成フィルタ438の出力に対し、パワー補正部501'で振幅補正が行われる。
The functional configuration of the process shown in FIG. 9 is based on the estimated spectral envelope coefficient from the spectral
この合成フィルタ部435'のフィルタ係数の計算は例えば図10に示すように、暫定波形スペクトル包絡係数として得た線形予測係数を係数変換部437aで線形予測ケプストラム係数Caに変換し、また補助情報復号スペクトル包絡係数として得た線形予測係数を係数変換部437bで線形予測ケプストラム係数Cbに変換し、これら係数Ca,Cbを減算部437cで減算してCb-Caを求め、このCb-Caを逆変換部437dで線形予測係数に逆変換し、この線形予測係数を合成フィルタ438のフィルタ係数に用いればよい。この予測係数への変換は例えば特開平8-248996号「ディジタルフィルタのフィルタ係数決定方法」に記述されている方法を使えばよい。
As shown in FIG. 10, for example, the
この図9に示した処理では、合成スペクトル包絡計算部437による計算が必要であるが、暫定波形に対するフィルタ処理演算は1回ですむ。図7及び図9に示した補正処理を周波数領域に変換して行ってもよい。
図7及び図9に示した各フローチャートのループ中でステップS6(又はS5’),S5における補助情報から復号されたLPCに基づくスペクトル補正は原音と再生信号のスペクトル歪を小さくするもので、ステップS7の補正は原音と再生信号の波形歪を小さくするものであり、補正量を小さくして補正波形の発散を防ぐことができる。その方法として、図7、図9に示した例では逆フィルタ434の線形予測係数αk及び合成フィルタ435,438の線形予測係数βk, βk'の両方ともに1未満の定数γのk乗(γk)をかける方法がある(kはパラメータの次数)。図10に示した例では線形予測ケプストラム係数Ca, Cbすべてに1未満の定数をかければよい。また図7及び図9における繰り返し処理の場合でも、繰り返しの最初はγを1に近い値に設定し、収束するにつれて、γの値を小さくして推定誤差を小さくすることも可能である。
In the processing shown in FIG. 9, calculation by the combined spectrum
Spectral correction based on LPC decoded from auxiliary information in steps S6 (or S5 ′) and S5 in the loops of the flowcharts shown in FIGS. 7 and 9 is to reduce the spectral distortion of the original sound and the reproduced signal. The correction of S7 is to reduce the waveform distortion of the original sound and the reproduction signal, and the correction amount can be reduced to prevent the correction waveform from being divergenced. 7 and 9, the linear prediction coefficient α k of the
なお前記αk, βk, βk'にγkを乗算すること、線形予測ケプストラム係数に1未満の定数を乗算することは、スペクトル包絡特性の帯域を拡大した予測計数を乗算することになり、暫定波形(サンプル列)のスペクトル包絡、補助情報の復号スペクトル包絡をそれぞれなまらせることになる。
図7及び図9において、ステップS3を省略し、ステップS1,S2,S4,S5(S5’),S6(S6’)、S7を1回だけ、あるいは決められた回数だけ繰り返して、修正波形(サンプル列)を出力してもよい。また図中に示すように、ステップS3において繰り返しが規定回数以上になると、その最終に得られた修正波形を出力してもよい。
第3実施例
従来技術の図1を参照して説明した、圧縮率の高い非可逆符号化と、その再生信号と原信号の誤差信号の可逆圧縮とを組み合せる符号化方法にこの発明を適用した第3実施例を図11に示す。図1で説明したと同様に符号器10では入力端子100からのディジタル入力信号列は圧縮率の高い非可逆量子化部120により、非可逆量子化され、その量子化情報は逆量子化部130で逆量子化(即ち復号)され、この逆量子化された信号(再生信号)と入力端子100からの原ディジタル入力信号列との差が減算部140でとられ、この差分信号である誤差信号がフレーム分割部110へ供給される。つまりこのフレームごとの誤差信号に対し、前述したようにビット配列の並び替え、伝送記録単位データへ分割、伝送記録単位データの可逆圧縮が行われ、ヘッダ付加部320でヘッダ31が付けられてパケット化される。
Multiplying α k , β k , β k ′ by γ k, and multiplying the linear prediction cepstrum coefficient by a constant less than 1 will multiply the prediction coefficient by expanding the band of the spectral envelope characteristic. The spectrum envelope of the provisional waveform (sample sequence) and the decoded spectrum envelope of the auxiliary information are each rounded.
7 and 9, step S3 is omitted, and steps S1, S2, S4, S5 (S5 ′), S6 (S6 ′), and S7 are repeated only once or a predetermined number of times, and a corrected waveform ( Sample sequence) may be output. Further, as shown in the figure, when the number of repetitions exceeds the specified number in step S3, the corrected waveform obtained at the end may be output.
Third Embodiment The present invention is applied to a coding method that combines the lossy coding with a high compression ratio and the lossless compression of the reproduced signal and the error signal of the original signal, as described with reference to FIG. 1 of the prior art. The third embodiment is shown in FIG. As in FIG. 1, in the
非可逆量子化部120からの量子化符号I(n)もヘッダ付加部320へ供給されて、ヘッダ31が付けられてパケットを構成する。この際、優先度を付ける場合にこの量子化符号のビット列に対して最も高い優先度を示す符号を与える。また、図4には線で示したように、誤差信号又サンプル列は原入力信号サンプル列のスペクトル包絡を表現するパラメータと平均パワーとが補助情報として補助情報生成部350で生成され、独立したパケットとして、又は優先度の高いパケット内に格納されて送出される。
The quantization code I (n) from the
復号器20は原音合成後、即ち、逆量子化により再生した原音信号波形の概形と誤差波形を加算器240で加算して原音信号波形を再生した後に補正を行う例であって、入力端子200に入力されたパケットから非可逆量子化符号I(n)と、補助情報と、伝送記録単位データとが分離部440で分離され、非可逆量子化符号I(n)は逆量子化部230で逆量子化され、補助情報は補助情報復号部450で復号され、復号されたスペクトル包絡を表すパラメータ及び平均パワーが欠落補正部430へ供給される。一方、伝送記録単位データは前述したように可逆伸張、伝送記録単位統合、並び替えが順次行われ、振幅ビット列、つまり誤差信号サンプル列が再生され、この再生誤差信号と逆量子化部230からの逆量子化信号とが加算部240で加算される。この加算信号は、欠落検出部420よりパケット欠落が検出された場合は欠落補正部430へ供給される。
The
欠落補正部430における補正方法は上述した各種の手法の何れを用いてもよい。補助情報復号スペクトル包絡を表わすパラメータを利用する場合に、逆量子化部230で対応スペクトル包絡を表わすパラメータを得ることができる場合は、これを利用してもよい。あるいは図中に破線で示すように符号器10ではフレーム分割部110の出力誤差信号、又はフレーム分割部110'によりフレームに分割された入力端子100からの入力信号から補助情報生成部350で補助情報を生成し、この補助情報を何れかのパケット内に加えるか、独立したパケットにより出力する。復号器20では分離部440で補助情報を分離し、その補助情報を補助情報復号部450で復号して欠落補正部430へ供給すればよい。
Any of the various methods described above may be used as the correction method in the
このように非可逆量子化符号と誤差信号を用いる場合は、復号器20において原音合成前の誤差信号に対し、欠落情報補正を行ってもよい。即ち、例えば図12に示すように並び替え部220からの並び替え出力をパケット欠落の場合は欠落補正部430へ供給して欠落情報を補正して、フレーム合成部250へ供給する。この欠落補正部430での補正は前述した各種の手法を用いることができ、補助情報復号スペクトル包絡を用いる場合は、補助情報復号部450の復号化出力を用い、あるいは逆量子化部230で対応するスペクトル包絡を表わすパラメータが得られる場合はこれを利用してもよい。フレーム合成部250から再生誤差信号と逆量子化部230からの逆量子化信号とを加算部240で加算して原音信号を再生する。
When the lossy quantization code and the error signal are used in this way, the
図11及び12で示した実施例においても、補助情報として平均パワーを使用しないでもよい。
図11に示したように符号器10において、誤差信号に対してフレーム分割部110でフレーム分割する場合は、非可逆量子化部120における量子化処理のフレーム(例えば1024サンプル)に対し、フレーム分割部110の分割フレームを長く、例えば16倍程度にすることにより、可逆符号化部150における圧縮効率を高くすることができる。しかしフレーム分割部110での分割フレーム長を余り長くすると復号の際にそれだけ遅れが長くなる。
Also in the embodiment shown in FIGS. 11 and 12, the average power may not be used as auxiliary information.
As shown in FIG. 11, in the
図6、図11に示した各実施例において、並び替え部160は必ずしも極性絶対値変換部161を設けなくてもよい。つまり2の補数表現のままビット配列並び替えを行ってもよい。この場合は可逆符号化の効率が下がるが、圧縮率より振幅分解能の選択(振幅精度のスケーラビリティ)のみが問題となる用途に有効である。
図11、図12に示した例においては、再生信号の忠実性の要求に応じて端子260からの信号のみならず、逆量子化部230からの出力を再生信号としてもよい。
上述した各実施例において符号器10、復号器20はそれぞれコンピュータにより可逆符号化プログラム、可逆復号化プログラムを実行させて機能させることもできる。これらの場合は、そのコンピュータのプログラムメモリに、可逆符号化プログラム、可逆復号化プログラムを、CD-ROM、可撓性磁気ディスクなどから、又は通信回線を通じてダウンロードして利用することになる。
In each embodiment shown in FIGS. 6 and 11, the
In the example shown in FIGS. 11 and 12, not only the signal from the terminal 260 but also the output from the
In each of the above-described embodiments, the
この発明の効果を計算機シミュレーションを、第3実施例(符号化は図11、復号化は図12)について行った。誤差信号のサンプル値の桁数(極性信号を含める)を16とし、第6〜10ビットが欠落し、欠落補正部430で誤差信号を低域通過フィルタにより平滑化して補正し、復号信号(出力端子260)の聴感補正したSNR(Weighted SNR)と、復号信号の原音信号に対するケプストラム距離(スペクトル包絡の歪)とを求めた。その結果を図13A,13Bに示す。参考のために欠落情報の補正を行わない場合のSNRとケプストラム距離も示した。これらより、第6ビットが欠落した場合、この発明による欠落の情報補正(欠落補正)をした場合は、欠落補正しない場合より可成り改善されることが理解される。
第4実施例
図14にこの発明による符号器10及び復号器20の他の実施例を示す。この実施例は図6の実施例における補助情報生成部350を変形したものである。前述のように、符号器10において、入力端子100からの入力信号サンプル系列はフレーム分割部110で例えば1024個のサンプルからなるフレーム単位に順次分割される。この実施例では、補助情報生成部350内の有効桁数検出部353でフレームごとの入力ディジタル信号の絶対値の最大値を表現する桁数が有効桁数Feとして検出される。
The effect of the present invention was calculated by computer simulation for the third embodiment (FIG. 11 for encoding and FIG. 12 for decoding). The number of digits of the sample value of the error signal (including the polarity signal) is 16, the 6th to 10th bits are missing, and the missing
Fourth Embodiment FIG. 14 shows another embodiment of the
フレーム分割部110で分割された各フレームごとに、入力信号サンプル系列はその有効桁数以内の部分のみが並び替え部160により各サンプル(振幅ビット列)における対応ビットが時間方向に配列される。この際、各入力信号サンプルは正または負の整数の振幅が2の補数表現されているが、その2の補数表現された各サンプルを、従来技術の説明と同様に、極性絶対値変換部161で、極性符号と絶対値の2進数表現に変換し、その後、ビット配列変換部162で、それぞれのサンプル(振幅ビット列)の対応ビット(桁)を時間方向に連結したビット配列(等位ビット列)にならびかえることが好ましい。しかし図中破線で示すように、極性絶対値変換部161を介することなく、つまり2の補数表現のまま、ビット配列変換部162で各対応ビットを時間方向にビット結合した等位ビット列にならびかえてもよい。
For each frame divided by the
つまり、通常の入力信号サンプルは2の補数で正負の整数を表現するが、この例では、入力信号サンプルを極性符号と振幅の絶対値の2進数に変換したあとの数値に組替えた後、等位ビット列への変換を行い、更に、伝送記録単位分割部310で伝送記録単位データへの分割を行っている。その例を図15Aに示す。極性符号と絶対値表現された各サンプルは図15A中の左側の振幅ビット列に示すように1フレーム分が時間方向に順次配列されている。1つの振幅ビット列の様子を理解し易いように、太線で囲んだ振幅ビット列DV(n)として示す、nはフレーム内の時刻を表わし、例えばn=1, 2, …, 1024である。この例では各振幅ビット列DV(n)の極性符号を絶対値のMSBと隣接させ、図ではMSBの直上に極性符号を位置させている。
That is, a normal input signal sample represents a positive or negative integer with two's complement, but in this example, the input signal sample is converted into a binary number with a polarity code and an absolute value of the amplitude, and then, etc. Conversion to a unit bit string is performed, and further, the transmission recording
このような1フレーム分のそれぞれのサンプルの振幅ビット列の内で最もMSBに近い桁に"1"があるビット位置を検出、LSBからその桁までの桁数が有効桁数Feとして求まる。この1フレームのディジタル信号中のこの有効桁数以内の範囲361のみと極性符号とをビット列に変換する。つまり有効桁数より上位の桁からMSBまでの範囲362は等位ビット列に変換しない。
このような振幅ビット列データを、図15Aの右側に示すようにこの例ではまず各サンプルの振幅の数値の極性ビット(符号)のみを時間方向に連結して、フレーム内で系列(等位ビット列)を作る。次に有効桁数Fe以内の最も大きな数値に対応する桁のみをフレーム内で連結して系列(等位ビット列)を作り、同様にして、順次、各桁(対応ビット)ごとに時間方向に連結して等位ビット列を作り、最後にLSBのみをフレーム内でつなげたビット列(等位ビット列)を作る。これら等位ビット列の1つの例を図15A中右側のビット配列太枠でDH(i)として示す。iは等位ビット列の作成順を示す。以上の並び替えではフレーム内のデータの中身は全く変らない。
A bit position having “1” in the digit closest to the MSB in the amplitude bit string of each sample for one frame is detected, and the number of digits from the LSB to that digit is obtained as the effective digit number Fe. Only the
In this example, as shown on the right side of FIG. 15A, such amplitude bit string data is first connected in the time direction with only the polarity bit (sign) of the numerical value of the amplitude of each sample, and is a series (coordinate bit string) within the frame. make. Next, a digit (coordinate bit string) is created by concatenating only the digits corresponding to the largest numerical value within the effective number of digits Fe within the frame, and in the same manner, sequentially connected in the time direction for each digit (corresponding bit). Thus, a coordinate bit string is created, and finally, a bit string (equal bit string) in which only LSBs are connected in a frame is created. One example of these coordinate bit strings is shown as DH (i) in the bit arrangement thick frame on the right side in FIG. 15A. i indicates the order in which coordinate bit strings are created. The above sort does not change the content of the data in the frame.
なおディジタル信号が2の補数で正負の整数を表現している場合は例えば図15Bに1フレーム分の振幅ビット列を示すように、絶対値の最大値を表現する桁より、絶対値が大きい部分は、図15B中の範囲363に示すように、振幅ビット列が正の値であれば、全て"0"となり、負の値であれば全て"1"となる。このような部分以外の範囲364の桁数が有効桁数として検出される。この範囲364とこれと隣接したビット(桁)、つまり極性符号についてのみ、図15Bの右側に示すように、等位ビット列への変換を行えばよい。
When the digital signal expresses a positive or negative integer in two's complement, for example, as shown in FIG. 15B, an amplitude bit string for one frame, a portion having an absolute value larger than the digit expressing the maximum absolute value is As shown in a
並び替え部160からの出力は伝送記録単位分割部310で、各等位ビット列DH(i)ごとに又は隣接する複数の等位ビット列DH(i)ごとに伝送記録単位データに分割する。この場合、1フレーム中において、伝送記録単位データとして1つの等位ビット列で構成されるものと複数の等位ビット列で構成されるものとが混在してもよい。
このように分割された各伝送記録単位データはヘッダ付与部320で、例えば図4Cに示したと同様にヘッダ31がその伝送記録単位データ(ペイロード)32に付けられる。
The output from the
Each transmission record unit data divided in this way is attached to the transmission record unit data (payload) 32 by the
この第4実施例では補助情報生成部350はスペクトル包絡算出部351、補助情報符号化部352、有効桁数検出部353、パワー算出部354を有しており、フレーム分割部110からの入力信号サンプル列から有効桁数検出部353で検出した有効桁数Feが補助情報符号化部352で符号化されて送出される。あるいは、各サンプルがmビット構成とすると、有効桁数Feの代りにm-Feを符号化して送ってもよいことは明らかである。この例では更に、フレーム分割部110でフレームごとに分割された入力信号サンプル列はスペクトル包絡算出部351において例えば線形予測分析により線形予測係数LPCがスペクトル包絡を表現するパラメータとして求められ、またパワー算出部354でフレームごとの分割されたサンプル列の平均パワーPaが算出される。あるいはスペクトル包絡算出部351で求めた線形予測係数LPCに基づき構成した逆フィルタ355に入力信号サンプル列を入力してそのスペクトル包絡を平坦化処理し、その平坦化された信号の平均パワーPaがパワー算出部356で求められる。
In the fourth embodiment, the auxiliary
これら線形予測係数LPC及び平均パワーPaも補助情報符号化部340により、例えば30〜50ビット程度の低ビットで符号化されて補助情報とされる。この有効桁数Fe、スペクトル包絡のパラメータLPC、平均パワーPaを符号化した補助情報はヘッダ付加部320へ供給され、各フレームの代表パケット、例えば極性符号を含む伝送記録単位データが格納されたパケット内に付加され、あるいは独立したパケットとして出力される。なお図中に破線で示すように、図6の実施例と同様にスペクトル包絡のパラメータLPC、平均パワーPa等の補助情報をフレーム分割部110'により、フレーム分割部110による分割長より長いフレーム長で分割された入力信号フレームに対して取得することにより、可逆圧縮の効率を高めるようにしてもよい。
The linear prediction coefficient LPC and the average power Pa are also encoded by the auxiliary information encoding unit 340 with, for example, a low bit of about 30 to 50 bits to be auxiliary information. The auxiliary information obtained by encoding the effective digit number Fe, the spectral envelope parameter LPC, and the average power Pa is supplied to the
復号器20においては入力端子200に入力されたパケット30は分離部440において伝送記録単位データと、補助情報とに分離され、伝送記録単位データは可逆復号化部210(図1の復号化部210と同一)へ供給され、補助情報は補助情報復号部450へ供給され、補助情報復号部450は当該フレームの有効桁数Fe、スペクトル包絡を表すパラメータLPC及び平均パワーPaを復号し、有効桁数Feを桁合せ部460へ供給し、スペクトル包絡パラメータLPC及び平均パワーPaを欠落補正部430へ供給する。欠落補正部430、補助情報復号部450、桁合せ部460は情報補正部480を構成している。
In the
伝送記録単位データはそれが可逆圧縮されている場合は可逆復号化部210で可逆復号され、各伝送記録単位データは伝送記録単位統合部410でそのパケット番号に基づき、複数のパケットより1フレーム分を統合し、例えば図15Aの右側の等位ビット配列に示すように統合される。この統合されたデータは並び替え部220で等位ビット列から振幅ビット列、つまり元のサンプル列(波形)に変換される。この際、各サンプルが極性符号と振幅の絶対値で表現されている場合はビット配列逆変換部221で、図15Aで説明した並び替えと逆に等位ビット列を図15Bの右側に示すように振幅ビット列に並び替えた後、2の補数変換部222で、ビット配列逆変換部221からの各振幅ビット列を、2の補数表現に変換し、つまり極性符号が負の振幅ビット列はその"1"と"0"とを入れかえる。
If the transmission record unit data is losslessly compressed, the
なお、伝送記録単位データが、2の補数表現された振幅ビット列から等位ビット列に直接並び替えたものに基づくものである場合は、図14中に破線で示すようにビット配列逆変換部221からの振幅ビット列はそのまま桁合せ部460へ供給される。桁合せ部460では各振幅ビット列に対し、復号有効桁数Feに応じた桁合せをする。つまり本来の振幅ビット列のビット数(桁数)mになるように、その振幅ビット列の上位に、極性符号が正であれば0を、負であれば1を付け加え、つまり例えば図15Bにおける範囲363のビットを付け加える。この桁合せされた振幅ビット列は、復号サンプルとしてフレーム合成部250へ供給される。
If the transmission record unit data is based on the amplitude bit string that is expressed in two's complement form and directly rearranged into the equidistant bit string, the bit array
パケット欠落が生じている場合は、そのパケットのパケット番号が欠落検出部420により検出され、並び替え部220からの振幅ビット列は桁合せ部460へ直接供給されることなく、欠落補正部430へ供給され、欠落情報に対する補正が振幅ビット列(サンプル)に対し行われて、桁合せ部460へ供給される。
欠落補正部430における補正は既知の情報から欠落した情報を推定して行う。欠落補正部430は前述の各実施例と同様に、過去の数フレームの平均的スペクトル、又は後で述べるように補助情報の復号結果として得られたそのフレームにおける確定したスペクトルに、当該フレームの欠落情報以外の情報から得られるスペクトルが近づくように、欠落情報に対する補正を行う。簡単な補正法としては、欠落補正部430でその入力再生サンプル列を低域通過フィルタに通して平滑化して高域の雑音成分を除去すればよい。その低域通過フィルタの遮断特性は、原信号のスペクトル形状(包絡)が予め知られていれば、その特性に応じて高域成分を減衰させるように選定する。あるいは、前述のように平均的なスペクトルを求め、又はフレームごとの確定したスペクトルの形状に合せて遮断特性を適応的に変更してもよい。
When a packet loss occurs, the packet number of the packet is detected by the
The correction in the
このように復号器20でパケット欠落にもとづく情報欠落を補正できることを利用し、情報量削減のため必要に応じてLSB側パケットを意図的に送らず、ビットレートを低くしても、復号器20で可逆復号が可能となる。あるいは聴感上問題にならない再生を行うことができる。
あるいは欠落情報(ビット)のとり得る値の総ての組み合せを、各サンプル値に加算し、補正サンプル列(波形)の候補を作り、これら候補のスペクトル包絡を求め、そのスペクトル包絡が補助情報の復号スペクトル包絡と最も近いものと対応する補正サンプル列(波形)候補を、補正サンプル列として桁合せ部460へ出力する。なお図14において可逆符号化部150、可逆復号化部210を省略してもよい。
補助情報による補正
欠落情報のとり得る値の総ての組み合せを用いて補正サンプル列の候補を生成する場合、欠落情報(ビット)が多くなるにつれて、補正サンプル列(波形)候補が著しく多くなり、処理量が非現実的に増加するおそれがある。このような問題を回避する欠落補正部430の処理、及びその機能構成について以下に説明する。
In this way, by utilizing the fact that the
Alternatively, all combinations of possible values of missing information (bits) are added to each sample value to create correction sample string (waveform) candidates, and the spectral envelopes of these candidates are obtained. A correction sample string (waveform) candidate corresponding to the one closest to the decoded spectrum envelope is output to the
When correction sample sequence candidates are generated using all combinations of possible values of missing information, correction sample sequence (waveform) candidates increase remarkably as missing information (bits) increases. The amount of processing may increase unrealistically. The processing of the
図16にその欠落情報補正処理手順の一例を、図17に欠落補正部430の機能構成の一例をそれぞれ示す。ステップS1〜S6の処理は図7のステップS1〜S4、S6,S7と同様であり、まず暫定波形生成部431に並び替え部220から入力された確定しているビットのみを使ってフレーム内の暫定波形(暫定的なサンプル列)を再生する(S1)。この暫定波形の再生は欠落しているビットは例えば0に固定するか、欠落ビットが取り得る値の中間値とする。例えば下位4ビットが欠落しているとすると、欠落4ビットの値は0〜15の値のうちどれかであるが、仮に8または7に設定する。
FIG. 16 shows an example of the missing information correction processing procedure, and FIG. 17 shows an example of the functional configuration of the
次にこの暫定波形のスペクトル包絡をスペクトル包絡算出部432で計算する(S2)。例えば音声分析で使われている全極型の線形予測分析を暫定波形に対し行えばスペクトル包絡係数を分析できる。一方、誤差計算部433で、受信された補助情報Axが補助情報復号部450で復号されて原音のスペクトル包絡係数が得られ、その原音スペクトル包絡係数を暫定波形のスペクトル包絡係数と比較して誤差が予め決めた値Δdより小であれば暫定波形を補正された出力波形としてフレーム合成部250へ出力する(S3)。
Next, the spectrum envelope of the provisional waveform is calculated by the spectrum envelope calculation unit 432 (S2). For example, spectral envelope coefficients can be analyzed by performing all-pole linear prediction analysis used in speech analysis on provisional waveforms. On the other hand, the
ステップS3において、推定スペクトル包絡係数と復号スペクトル包絡係数の誤差が予め決めた値Δdより小でない場合には、まず推定した暫定波形のスペクトル包絡係数の逆特性を暫定波形に与える(S4)。具体的にはステップS2で求めた暫定波形スペクトル包絡を表すパラメータを例えば全極型(全零型)の線形予測逆フィルタ434に設定し、暫定波形を逆フィルタ434に通過させることで暫定波形のスペクトルを平坦化して平坦化信号とする。この平坦化信号の平均パワーをパワー計算部438で計算し、この平均パワーと、補助情報復号部450からの復号された平均パワー(符号器10の平坦化パワー算出部331の出力)とから補正量を補正量計算部439で計算し、例えば両者の比又は差として計算し、その補正量により、パワー補正部501で逆フィルタ434の出力に対し振幅補正を行う。つまり、逆フィルタ434の出力に対し補正量を乗算又は加算して、暫定波形のパワーを復号パワーに合せる(S5)。
In step S3, if the error between the estimated spectral envelope coefficient and the decoded spectral envelope coefficient is not smaller than the predetermined value Δd, first, the inverse characteristic of the estimated spectral envelope coefficient of the temporary waveform is given to the temporary waveform (S4). Specifically, the parameter representing the provisional waveform spectrum envelope obtained in step S2 is set in, for example, the all-pole type (all zero type) linear prediction
次にこの振幅補正された平坦化信号に対して補助情報のスペクトル包絡の特性を与えてスペクトル包絡を補正する(S6)。すなわち補助情報の復号スペクトル包絡を表わすパラメータLPCを用いた全極型の合成フィルタ435にパワー補正部501の出力を通してスペクトル補正波形を作る。この結果の波形のスペクトル包絡は原音に近いものになる。
ただしこのスペクトル補正波形は振幅ビット列中のすでに確定しているビットと矛盾する場合があるので、前述と同様に正しい値に修正部436で修正する(S7)。
Next, the spectral envelope characteristic of the auxiliary information is given to the flattened signal whose amplitude has been corrected to correct the spectral envelope (S6). That is, a spectrum correction waveform is created through the output of the
However, since this spectrum correction waveform may be inconsistent with the already determined bit in the amplitude bit string, it is corrected by the correcting
この修正波形をステップS1の暫定波形としてステップS2以後の処理を繰り返すことができる。なお復号有効桁数Feがフレーム毎に異なる場合で、スペクトル包絡算出部432の線形予測分析(ステップS2)、逆フィルタ434(ステップS4)、合成フィルタ435(ステップS6)の各処理の対象となるサンプルが現在のフレームと過去のフレームにまたがる場合がある。この場合には処理の対象は現在のフレームであっても、一つ過去のフレームの有効桁数Feを現在のフレームの有効桁数Feと一致させたうえで分析やフィルタ処理を行う必要がある。一つ過去のフレームの有効桁数Feが現在のフレームの有効桁数よりN桁大きい場合には、一つ過去のフレームのサンプルを例えばN桁下位にシフトさせて振幅値を縮小させてその有効桁数を現在のフレームの有効桁数に合わせる。逆に一つ過去のフレームの有効桁数が現在のフレームの有効桁数よりM桁大きい場合には、過去のフレームのサンプルを例えば浮動小数点表示などで一時的にM桁上位にシフトして振幅値を拡大させてその有効桁数を現在のフレームの有効桁数に合わせる。この場合、上位シフトによりレジスタから溢れ出て情報の欠落が大きいときにはその過去のフレームのサンプルの振幅値の精度が落ちているので、過去のフレームのサンプルを使わない、あるいは現在のフレームのサンプルに対する補正処理を省略してもよい。
By using this corrected waveform as a provisional waveform in step S1, the processing after step S2 can be repeated. In addition, when the decoding effective digit number Fe is different for each frame, it is a target of each process of the linear prediction analysis (step S2), the inverse filter 434 (step S4), and the synthesis filter 435 (step S6) of the spectrum
このような有効桁数の補正は図16中に破線で示すように、ステップS2の分析処理に必要な場合は、その前に、前述した有効桁数補正を行い(S2′)、ステップS4の逆フィルタ処理に必要な場合は、その前に有効桁数補正を行い(S4′)、ステップS6の合成フィルタ処理に必要な場合は、その前に有効桁数補正を行う(S6′)。また図17において、スペクトル包絡算出部432、逆フィルタ434、合成フィルタ435中の過去のフレームのサンプルを必要とするものに対しては破線で示すように補助情報復号部450から復号された有効桁数Feも供給され、これらスペクトル包絡算出部432、逆フィルタ434、合成フィルタ435において、過去のフレームのサンプルに対する有効桁数を現在フレームの有効桁数に合せる処理を行った後、その本来の処理を行うようにされる。
As shown by the broken line in FIG. 16, such correction of the effective number of digits is performed before the above-described effective number of digits correction (S2 ') when necessary for the analysis processing in step S2 (step S4'). If necessary for the inverse filter processing, the effective digit number correction is performed before (S4 ′), and if necessary for the synthesis filter processing in step S6, the effective digit number correction is performed before that (S6 ′). In FIG. 17, the significant digits decoded from the auxiliary
図16及び図17中に破線で示すように、ステップS4で暫定波形を平坦化した後、まずこの平坦化された暫定波形(平坦化信号)を合成フィルタ435へ通して、スペクトル包絡補正した再構成サンプル系列(波形)を得(S5′)、そのスペクトル包絡補正された波形に対しパワー補正部501'で振幅補正をして(S6”)ステップS7に移るようにしてもよい。この場合は、合成フィルタ435からのスペクトル包絡補正された波形の平均パワーがパワー計算部438'で計算され、この平均パワーと、補助情報の復号パワー(符号器10中のパワー計算部331の出力)とにより補正量計算部439'で補正量が求められ、その補正量により合成フィルタ435の出力に対してパワー補正部501'で振幅補正が行われる。ステップS5’の合成フィルタ435による処理が1つ前のフレームとまたがって行われる場合は、ステップS5”で示すように予め有効桁数の補正を行う。
As shown by the broken lines in FIGS. 16 and 17, after the provisional waveform is flattened in step S4, the flattened provisional waveform (flattened signal) is first passed through the
補正情報を用いた欠落情報補正処理の更に他の例を図18を参照して説明する。この欠落情報補正処理は、図8における合成スペクトル包絡計算部437と合成フィルタ部435’を使用した補正処理と同様の原理を使用する。
ステップS1〜S3、S6は図16に示した処理中のステップS1〜S3、S7とそれぞれ同一処理である。この例ではステップS3の後、ステップS2において推定したスペクトル包絡の逆フィルタ434と補助情報の復号スペクトル包絡の合成フィルタ435を合わせたひとつの合成フィルタ部435'のフィルタ係数を合成スペクトル包絡計算部437で計算し(S4)、ステップS5でこの合成フィルタ部435'に暫定波形を通してスペクトル包絡を補正した波形を合成し、そのスペクトル包絡が補正された波形に対しパワー補正部501'で振幅補正を行う(S6)。この振幅補正は図17中に破線で示すパワー計算部438'、補正量計算部439'、パワー補正部501'により行う。この合成フィルタ501'のフィルタ係数の計算は例えば図10で説明した計算により実施する。
Still another example of the missing information correction process using the correction information will be described with reference to FIG. This missing information correction process uses the same principle as the correction process using the combined spectrum
Steps S1 to S3 and S6 are the same processes as steps S1 to S3 and S7 in the process shown in FIG. In this example, after step S3, the filter coefficient of one
この図18に示した処理では、合成スペクトル包絡計算部437による合成フィルタ部435’のフィルタ係数の計算が必要であるが、暫定波形に対するフィルタ演算は1回ですむ。図16及び図18に示した補正処理を周波数領域に変換して行ってもよい。
図18中でステップS2のスペクトル包絡算出やステップS5でスペクトル包絡補正で、過去のサンプルを必要とする場合は、破線で示すようにそのステップS2やS5の前に前述した有効桁数補正を行う(S2′又はS5′)。
In the processing shown in FIG. 18, it is necessary to calculate the filter coefficient of the
In FIG. 18, when the spectral envelope calculation in step S2 or the spectral envelope correction in step S5 requires a past sample, the above-described effective digit correction is performed before the step S2 or S5 as indicated by the broken line. (S2 'or S5').
図16に示したフローチャートのループ中でステップS6(又はS5′)、及び図18に示したフローチャートのループ中のS5における補助情報から復号したLPCに基づくスペクトル包絡補正は原音と再生信号のスペクトル歪を小さくするもので、両フローチャート中のステップS7の補正は原音と再生信号の波形ひずみを小さくするものであるので、ループによるこの操作の繰り返しで収束する保障はないが、図7B及び9について説明したと同様に、逆フィルタ434の線形予測係数αk、合成フィルタ435,438の線形予測係数βk, βk'のそれぞれに対し定数γkを乗算することにより発散を防ぐことができる。ただし、γは0<γ<1であり、kはパラメータの次数である。
The spectral envelope correction based on LPC decoded from the auxiliary information in step S6 (or S5 ′) in the loop of the flowchart shown in FIG. 16 and S5 in the loop of the flowchart shown in FIG. Since the correction in step S7 in both flowcharts is to reduce the waveform distortion of the original sound and the reproduced signal, there is no guarantee that the operation will be converged by repeating this operation by the loop, but FIGS. 7B and 9 will be described. Similarly, the divergence can be prevented by multiplying the linear prediction coefficient α k of the
図10の構成を使用する場合には、線形予測ケプストラム係数Ca,Cbのすべてに1未満の定数をかければよい。また図16及び図18において繰り返し処理の場合でも、繰り返しの最初はγを1に近い値に設定し、収束するにつれて、γの値を小さくして推定誤差を小さくすることも可能である。
図16及び図18において、ステップS3を省略し、ステップS1,S2,S4,S5(S5′),S6(S6′),S7を1回だけ、あるいは決められた回数だけ繰り返して、修正波形(サンプル列)を出力してもよい。また図中に示すように、ステップS3において繰り返しが規定回数以上になると、その時最終に得られた修正波形欠落補正部430の出力してもよい。
When the configuration of FIG. 10 is used, it is only necessary to apply constants less than 1 to all of the linear prediction cepstrum coefficients Ca and Cb. Also in the case of iterative processing in FIGS. 16 and 18, it is also possible to set γ to a value close to 1 at the beginning of the iteration, and to reduce the estimation error by decreasing the value of γ as it converges.
16 and 18, step S3 is omitted, and steps S1, S2, S4, S5 (S5 '), S6 (S6'), and S7 are repeated only once or a predetermined number of times, and a corrected waveform ( Sample sequence) may be output. Further, as shown in the figure, when the number of repetitions exceeds the specified number in step S3, the corrected waveform missing
桁合せ部460は図14中に破線で示すように、並び替え部220の直後に挿入してもよい。この場合は、欠落補正部430における前述した有効桁数を合わせる処理は不要となる。また図16及び図18に示した欠落情報の補正処理において、ステップS5,S6′及びS6の振幅補正は省略してもよい。この場合は図17においても対応する部分438',439',501'が省略される。場合によっては復号スペクトル包絡を用いる欠落情報の補正は省略し前述した低域通過フィルタを使用する方法や過去のフレームのスペクトル包絡係数に一致するよう補正する方法などの他の補正を用いてもよい。この場合は、符号器10で、スペクトル包絡又はこれと平均パワーの補助情報の生成は省略され、また復号器20の欠落補正部430は図17に示した構成とは異なるものとなる。
第5実施例
図14で説明した各フレーム中のサンプルの有効桁に対し並び替えを行う符号化方法を図1で説明した圧縮率の高い非可逆符号化と、その再生信号と原信号の誤差信号の可逆圧縮とを組み合せた符号化方法に適用した第5実施例を図19に示す。この実施例の符号器10においては、ビット配列変換部162において、図15Aあるいは図15Bで説明した有効桁に対する並び替えをう。補助情報生成部350は図14の実施例における補助情報生成部350と同様に構成されている。それ以外は図11における符号器10と同様の構成とされている。また、復号器20は図11の実施例における復号器20において、桁合わせ部460を並び替え部220の出力側に設け、欠落補正部430として図14の欠落補正部430、即ち図17の欠落補正部430を使用したものであり、それ以外は図11における復号器20と同様の構成とされている。従って詳細な説明は繰り返さない。
The
Fifth Embodiment The encoding method for rearranging the significant digits of the samples in each frame described in FIG. 14 is the lossy encoding with a high compression ratio described in FIG. 1, and the error between the reproduced signal and the original signal. FIG. 19 shows a fifth embodiment applied to an encoding method combined with lossless compression of a signal. In the
このように非可逆量子化符号と誤差信号を用いる場合は、復号器20において原音合成前の誤差信号に対し、欠落情報補正を行ってもよい。即ち、例えば図20に示すように並び替え部220からのならびかえ出力をパケット欠落の場合は欠落補正部430へ供給して欠落情報を補正して、桁合せ部460へ供給し、欠落情報を含まない場合は並び替え部220の出力を直接桁合せ部460へ供給し、桁合せ部460で桁合せされたサンプル列をフレーム合成部250へ供給する。欠落補正部430での補正は前述した各種の手法を用いることができ、補助情報復号スペクトル包絡又はこれと復号平均パワーを用いる場合は、補助情報復号部450の復号化出力を用い、あるいは逆量子化部230で対応するスペクトル包絡を表わすパラメータLPCが得られる場合はこれを利用してもよい。フレーム合成部250からの再生誤差信号と逆量子化部230からの逆量子化信号とを加算部240で加算する。図20中に破線で示すように、桁合せ部460を並び替え部220の直後に設けてもよい。
When the lossy quantization code and the error signal are used in this way, the
上述において、符号器10でパケット化することなく、少くともフレームごとに有効桁数と伝送記録単位データとを送出し、復号器20でこれらを用いて復号するようにしてもよい。
第6実施例
図21にこの発明による符号器10及び復号器20の各実施例を示す。この実施例では、図6の実施例においてフレーム分割された入力信号サンプル列を等位ビット列に変換して送出する代わりに、入力信号サンプル列の予測誤差を等位ビット列に変換して送出するものである。
In the above description, the number of significant digits and transmission record unit data may be transmitted at least for each frame without being packetized by the
Sixth Embodiment FIG. 21 shows embodiments of the
符号器10は図6における符号器10に対し、サンプルレジスタ371と、線形予測部372と、整数化部373と、差回路374とからなる予測誤差生成部370が追加された構成とされている。また、復号器2は図6における復号器20に対し、サンプルレジスタ471と、線形予測部472と、整数化部473と、加算部474とからなる合成フィルタ470が追加された構成とされている。フレーム分割部110から入力信号サンプル列が各フレームごとに、補助情報生成部350のスペクトル包絡算出部351と予測誤差生成部370の差回路374に与えられる。入力信号サンプル列はフレームごとにスペクトル包絡算出部351で、例えば線形予測分析され、そのスペクトル包絡を表わすパラメータとして線形予測係数LPCが求められる。このスペクトル包絡のパラメータLPCは補助情報符号化部352で符号化される。
The
例えばフレーム分割部110からの直前のフレームの予め決めた数の複数サンプルがレジスタ371から線形予測部372へ供給され、これらサンプル列に対し、スペクトル包絡算出部351からのスペクトル包絡パラメータLPCに基づく線形予測係数が乗算、加算されて、入力サンプル毎に線形予測値が求められる。この線形予測値は整数化部373で整数値とされ、整数の予測値とフレーム分割部110からの現サンプルとの差が差回路374で予測誤差信号サンプルSpeとして求められる。
この入力サンプル毎に得られる予測誤差信号Speは並び替え部160に入力され、並び替え部160において各フレームごとにそれぞれの入力サンプルに対する予測誤差信号サンプルSpe(振幅ビット列)の対応ビット(桁)が図4Aで説明したように時間方向に配列される。並び替え部160からの等位ビット列は伝送記録単位分割部310で伝送単位あるいは記録単位のデータ毎に必要に応じて、可逆符号化部150により可逆圧縮符号化され、ヘッダ付与部320により、復号時に分割された伝送記録単位データを1つのフレームとして再構成可能なようにヘッダが取付けられ、パケットとして出力端子170に出力される。
For example, a predetermined number of a plurality of samples of the immediately preceding frame from the
The prediction error signal Spe obtained for each input sample is input to the
補助情報符号化部350からのスペクトル包絡のパラメータLPCの符号化情報(補助情報)はヘッダ付与部320から1つのパケットとして、又は最も優先度のパケット内に格納されて出力される。
復号器20においては入力端子200からのパケット30は分離部440において、補助情報と、伝送記録単位データ(極性符号列を含む)とに分離され、補助情報は補助情報復号部450へ供給される。伝送記録単位データはそれが可逆圧縮されている場合は可逆復号化部210へ供給され、ここで可逆復号された後、各伝送記録単位データは伝送記録単位統合部410へ供給される。伝送記録単位統合部440ではパケット番号に基づき、複数のパケットより1フレーム分の伝送記録単位データを統合する。この統合されたデータは並び替え部220で等位ビット列を振幅ビット列の1フレーム分、つまり予測誤差波形に変換される。
The encoded information (auxiliary information) of the spectral envelope parameter LPC from the auxiliary
In the
なお、伝送記録単位データが、2の補数表現された振幅ビット列から等位ビット列に直接並び替えたものに基づくものである場合は、図21中に破線で示すようにビット配列逆変換部221からの振幅ビット列はそのまま復号サンプルとして欠落補正部430を迂回して合成フィルタ470へ供給される。パケット欠落が生じていなければ、並び替え部220から、符号器10の並び替え部160に入力された予測誤差信号サンプルSpeと完全に同一の予測誤差信号Speが得られる。合成フィルタ470では、符号器10における予測誤差生成部370の処理と逆の処理が行われる。つまりレジスタ471から予め決められた一定数の直前の復号サンプルが線形予測部472に入力され、線形予測部472に各サンプルに対して、補助情報復号部450で復号された線形予測係数PLCがそれぞれ乗算され、その乗算結果の和が現在の復号サンプルの予測値として求められる。この予測値は整数化部463で整数値とされ、この整数化された予測値と並び替え部220からの現在の予測誤差信号との和が加算部474でとられて、合成フィルタ470のフィルタ出力とされ、フレーム合成部250へ供給されると共にレジスタ471へ供給される。よって、合成フィルタ470でディジタル信号が合成され、これがフレーム合成部250で互いにつなぎ合わされて、符号器10の入力端子100に入力された信号が再生されて出力端子260に出力される。
If the transmission record unit data is based on the amplitude bit string expressed in two's complement form and directly rearranged to the equidistant bit string, the bit array
入力されたパケットのパケット番号からパケット欠落が生じている場合は、欠落検出部420でこれが検出され、並び替え部220からの振幅ビット列は合成フィルタ470へ直接供給されることなく、欠落補正部430へ供給され、欠落情報に対する補正が振幅ビット列(予測誤差信号)に対し行われて、合成フィルタ470へ供給される。
欠落情報補正
欠落補正部430における欠落した情報を補正した予測誤差波形を得る処理手順と構成を図22及び図23を参照して以下に説明する。
When a packet loss has occurred from the packet number of the input packet, this is detected by the
The processing procedure and configuration for obtaining a prediction error waveform obtained by correcting missing information in the missing information correction missing
欠落予測誤差波形(並び替え部220からの1フレーム分のサンプル列出力)が暫定波形生成部431に入力され、まず確定しているビットのみを使ってフレーム内の暫定予測誤差波形を生成する(S1)。この際欠落しているビットは例えば0に固定するか、欠落情報のとり得る範囲の中間値とする。
次にこの暫定予測誤差波形のスペクトル包絡をスペクトル包絡算出部432で計算する(S2)。例えば音声分析で使われている全極型の線形予測分析を暫定予測誤差波形に対して行えばスペクトル包絡を推定できる。符号器10の予測誤差生成部370で生成される予測誤差波形のスペクトル包絡はほぼ平坦となるので、この推定したスペクトル包絡は、暫定予測誤差波形が符号器10の予測誤差生成部370で得られた原予測誤差信号波形と同一であれば平坦であることが、期待される。しかしこの暫定予測誤差波形が原予測誤差信号波形と異なればスペクトル包絡は平坦なものにならない。この平坦度が許容範囲内であるか否かの判定を平坦度判定部433Fで行う(S3)。この平坦度が許容範囲であればその暫定予測誤差波形をそのまま合成フィルタ470へ出力する。
The missing prediction error waveform (sample frame output for one frame from the rearrangement unit 220) is input to the provisional
Next, the spectrum envelope of the provisional prediction error waveform is calculated by the spectrum envelope calculation unit 432 (S2). For example, the spectral envelope can be estimated by performing all-pole linear prediction analysis used in speech analysis on the provisional prediction error waveform. Since the spectrum envelope of the prediction error waveform generated by the prediction
この平坦度の判定は例えば、スペクトル包絡算出部432でスペクトル包絡のパラメータとして求めた線形予測係数c1, c2, …, cM の相加平均を相乗平均で割算した値が0dBであれば、完全な平坦であり、例えば3dB以下であればほぼ平坦な状態であると判定する。あるいは、前記スペクトル包絡のパラメータとしてLPCケプストラム係数を求め、この係数の自乗和が一定値以下であれば、ほぼ平坦な状態と判定する。
スペクトル包絡形状が平坦な状態から大きく異なると判定されると、まず推定したスペクトル包絡の逆特性を暫定予測誤差波形に与える(S4)。具体的には例えば全極型の線形予測の逆フィルタ(全零型)434に暫定予測誤差波形を通過させることで、そのスペクトルを平坦化する。このとき、完全に平坦化するのではなく、スペクトル包絡特性のバンド幅を拡大した、つまりスペクトル包絡をなまらせた予測係数で平坦化してもよい。
Determination of the flatness is, for example, linear prediction coefficients c 1, c 2 were determined as a parameter of the spectral envelope in the
If it is determined that the spectrum envelope shape is significantly different from the flat state, first, the inverse characteristic of the estimated spectrum envelope is given to the provisional prediction error waveform (S4). More specifically, for example, the provisional prediction error waveform is passed through an all-pole linear prediction inverse filter (all zero type) 434 to flatten the spectrum. At this time, instead of completely flattening, the bandwidth of the spectral envelope characteristic may be expanded, that is, flattened by a prediction coefficient with a smoothed spectral envelope.
ただしこの平坦化された補正波形は正常に受信されたパケットから得られた確定している振幅のビットと矛盾する可能性があるので、正しい値に修正部436で修正する(S5)。例えば16ビット精度の振幅の値のうち、下位4ビットが不明である場合、各振幅ビット列(予測誤差信号)のとり得る値には16の範囲の不確定があるが、スペクトル補正波形中にこの範囲と外れた振幅ビット列があれば、最も近い値、つまりこの例で下位4ビットが最大値の15の振幅ビット列に修正する。この修正で振幅値の確定しているビットはすべて一致して同時にスペクトル包絡も原予測誤差信号に近い波形が再生される。必要に応じてこの修正波形を暫定予測誤差波形としてステップS1に戻って補正を繰り返す。
However, since this flattened correction waveform may be inconsistent with a bit having a fixed amplitude obtained from a normally received packet, the
なお補正予測誤差(暫定予測誤差)波形は整数値が前提であるが、フィルタ計算では実数扱いとなり、フィルタの出力値の整数化が必要になる。合成フィルタ470の場合には振幅ビット列ごと(サンプルごと)に整数化するか、フレーム毎にあとで一括して整数化するかで結果は異なるが、どちらも可能である。
前述したように欠落ビットのとり得る値の総ての組み合せを用いて補正サンプル列の候補を作る場合は、欠落ビットが多くなると、補正振幅ビット列(波形)候補が著しく多くなり、処理量が非現実的になるおそれがある。このような問題がないようにする欠落補正部430の処理、及びその機能構成について以下に説明する。
Although the corrected prediction error (provisional prediction error) waveform is premised on an integer value, it is treated as a real number in the filter calculation, and the output value of the filter needs to be converted to an integer. In the case of the synthesis filter 470, the result is different depending on whether it is converted into an integer for each amplitude bit string (for each sample) or is converted into an integer later for each frame, but both are possible.
As described above, when creating correction sample string candidates using all combinations of possible values of missing bits, if the number of missing bits increases, the number of corrected amplitude bit string (waveform) candidates increases significantly, and the processing amount is reduced. May become realistic. The processing of the
図24にその処理手順の一例を、図25に機能構成の一例をそれぞれ示す。まず暫定波形生成部431に並び替え部220から入力された確定しているビットのみを使ってフレーム内の暫定予測誤差波形(暫定的な振幅ビット列)を再生する(S1)。この暫定予測誤差波形の再生は欠落しているビットは例えば0に固定するか、欠落ビットが取り得る値の中間値とする。例えば下位4ビットが欠落しているとすると、0〜15までのレベルのどれかが正しい値であるが、仮に8または7に設定する。
FIG. 24 shows an example of the processing procedure, and FIG. 25 shows an example of the functional configuration. First, the provisional
次に、受信した補助情報から復号したスペクトル包絡の予測係数LPCを合成フィルタ502に設定し、この暫定予測誤差波形を合成フィルタ502に通して符号器10への原入力信号波形を線形予測合成する(S2)。この合成波形のスペクトル包絡をスペクトル包絡算出部432で計算する(S3)。誤差計算部433で、この計算したスペクトル包絡と、補助情報として受信された原音(原入力信号)のスペクトル包絡、つまり補助情報復号部450で復号されたスペクトル包絡とを、比較して誤差が許容範囲内であれば暫定予測誤差波形を補正された予測誤差波形(補正振幅ビット列)として合成フィルタ470へ出力する(S4)。
Next, the prediction coefficient LPC of the spectral envelope decoded from the received auxiliary information is set in the
ステップS4において、暫定予測誤差波形のスペクトル包絡と補助情報から復号したスペクトル包絡形状が大きく異なるとき、つまり暫定予測誤差が不完全な場合はまず計算したスペクトル包絡の逆特性を暫定予測誤差波形に与える(S5)。具体的にはステップS3で求めたスペクトル包絡を表すパラメータを設定した全極型の線形予測の逆フィルタ(全零型)434に暫定予測誤差波形を通過させることでスペクトルを平坦化する。この場合も完全に平坦化するのではなく、スペクトル包絡特性の帯域幅を拡大した、つまりなまらせた予測係数を用いてもよい。 In step S4, when the spectrum envelope shape of the provisional prediction error waveform is greatly different from the spectrum envelope shape decoded from the auxiliary information, that is, when the provisional prediction error is incomplete, first, the inverse characteristic of the calculated spectrum envelope is given to the provisional prediction error waveform. (S5). Specifically, the spectrum is flattened by passing the provisional prediction error waveform through an all-pole linear prediction inverse filter (all zero type) 434 in which parameters representing the spectrum envelope obtained in step S3 are set. In this case as well, the prediction coefficient obtained by expanding the bandwidth of the spectral envelope characteristic, that is, the smoothed coefficient, may be used instead of completely flattening.
次にこの平坦化信号に対して復号スペクトル包絡の特性を与える(S6)。即ち、補助情報から復号したスペクトル包絡を表わすパラメータLPCを設定した全極型の合成フィルタ435に逆フィルタ434の出力を通して暫定予測誤差波形の補正予測誤差波形を作る。この結果の補正予測誤差波形は原予測誤差波形(信号)に近いものになる。
図22に示した場合と同様にこの補正予測誤差波形はすでにわかっている振幅のビットと矛盾する可能性があるので、正しい値に修正部436で修正する(S7)。
Next, a characteristic of a decoded spectrum envelope is given to the flattened signal (S6). That is, a corrected prediction error waveform of the provisional prediction error waveform is created through the output of the
Similar to the case shown in FIG. 22, this corrected prediction error waveform may be inconsistent with the already known amplitude bit, and is corrected to the correct value by the correction unit 436 (S7).
この修正予測誤差波形をステップS1の暫定予測誤差波形としてステップS2以後の処理を繰り返す。図24、図25中に破線で示すように、ステップS4の次に暫定予測誤差波形を復号スペクトル包絡パラメータを用いて波形合成し(合成フィルタ435"を通し)(S5′)、その合成波形に対し、計算したスペクトル包絡の逆特性を与え(逆フィルタ434'を通し)(S6′)てもよい。なおバンド幅を拡大した係数を使わない場合は予測係数を求めるために合成した波形、つまり合成フィルタ502の出力波形を逆フィルタ434に供給してもよい。
The modified prediction error waveform is used as the provisional prediction error waveform in step S1, and the processes in and after step S2 are repeated. As shown by the broken lines in FIGS. 24 and 25, after step S4, the provisional prediction error waveform is synthesized using the decoded spectral envelope parameter (through
次に復号スペクトル包絡を用いた欠落情報補正処理の他の例を図26を参照して説明する。
ステップS1〜S4、S7は図24に示した処理中のステップS1〜S4、S7とそれぞれ同一処理である。この例ではステップS4の後、ステップS3において計算したスペクトル包絡の逆フィルタ434と復号スペクトル包絡の合成フィルタ435とを合わせたひとつの合成フィルタ部435'のフィルタ係数を計算し(S5)、ステップS6でこの合成フィルタ部435'に暫定予測誤差波形を通して補正予測誤差波形を合成する。
Next, another example of missing information correction processing using the decoded spectrum envelope will be described with reference to FIG.
Steps S1 to S4 and S7 are the same processes as steps S1 to S4 and S7 in the process shown in FIG. In this example, after step S4, the filter coefficient of one
図26に示した処理の機能構成は、図25中に破線で示すように、補助情報復号部450からの復号スペクトル包絡パラメータLPCとスペクトル包絡算出部432からの推定スペクトル包絡パラメータαとから、逆フィルタ434と合成フィルタ438を組み合せたひとつの合成フィルタ部435'のフィルタ特性が合成スペクトル包絡計算部437で計算され、そのフィルタ係数が合成フィルタ438に設定され、この合成フィルタ部435'に暫定予測誤差波形が通される。
この合成フィルタ438のフィルタ係数の計算は例えば図10で説明したように、暫定予測誤差波形の線形予測係数を係数変換部437aで線形予測ケプストラム係数Caに変換し、また復号スペクトル包絡の線形予測係数を係数変換部437bで線形予測ケプストラム係数Cbに変換し、これら係数Ca,Cbを減算部437cで減算してCb-Caを求め、このCb-Caを逆変換部437dで線形予測係数に逆変換し、この線形予測係数を合成フィルタ部435'のフィルタ係数に用いればよい。
The functional configuration of the process shown in FIG. 26 is reversed from the decoded spectrum envelope parameter LPC from the auxiliary
For example, as described with reference to FIG. 10, the calculation of the filter coefficient of the
図22に示したフローチャート中の繰り返し処理で予測誤差波形が発散しないようにするため、図22、図24、図26に示した例では逆フィルタ434の線形予測係数αkと図24、図26に示した例では合成フィルタ435,438の線形予測係数βk, βk'ともに1未満の定数γのk乗をかける方法がある(kはパラメータの次数)。図10に示した場合には線形予測ケプストラム係数のすべてに1未満の定数をかければよい。また図22、図24及び図26において繰り返し処理の場合でも、繰り返しの最初はγを1に近い値に設定し、収束するにつれて、γの値を小さくして推定誤差を小さくすることも可能である。
In order to prevent the prediction error waveform from diverging in the iterative processing in the flowchart shown in FIG. 22, in the example shown in FIGS. 22, 24, and 26, the linear prediction coefficient α k of the
図22でステップS3、図24及び図26において、ステップS4を省略し、図22ではステップS1,S2,S4,S5を1回だけ、図24及び図26ではステップS1,S2,S3,S5,S6,S7を1回だけ、あるいは決められた回数だけ繰り返して、修正予測誤差波形(振幅ビット列)を出力してもよい。また図中に示すように、図22のステップS3、図24及び図26のステップS4において繰り返しが規定回数以上になると、その最終に得られた修正予測誤差波形を出力してもよい。図22、図24、図26に示した処理は周波数領域に変換して行ってもよい。この場合は例えば逆フィルタ処理は、正規化処理となる。 In FIG. 22, Step S3 is omitted in Steps S3, 24 and 26, Steps S1, S2, S4 and S5 are performed only once in FIG. 22, and Steps S1, S2, S3, S5 in FIG. S6 and S7 may be repeated only once or a predetermined number of times to output a corrected prediction error waveform (amplitude bit string). Further, as shown in the figure, when the number of repetitions exceeds the specified number of times in step S3 in FIG. 22, step S4 in FIG. 24, the final corrected prediction error waveform may be output. The processing shown in FIGS. 22, 24, and 26 may be performed after conversion to the frequency domain. In this case, for example, the inverse filter process is a normalization process.
予測誤差信号Speは振幅が小さくなっている場合が多い。このため予測誤差信号Speを極性と絶対値の2進数で表現すると、例えば図15A及び図15Bで説明したと同様に、各予測誤差信号Spe(振幅ビット列)の上位の桁はフレームの全体で全て"0"となる場合が多い。従って1フレーム内において絶対値の最大値を表現する桁数を有効桁数として求め、つまり"1"を含む最大の桁数を有効桁数Feを、図21中の符号器10内の有効桁数検出部163で検出し、この有効桁数Feも補助情報符号化部352で符号化してスペクトル包絡のパラメータLPCと共に出力し、並び替え部160で有効桁数Feの範囲41内のビットと極性符号のみを等位ビット列に変換して伝送記録単位分割部310へ出力する。
The prediction error signal Spe often has a small amplitude. For this reason, when the prediction error signal Spe is expressed by a binary number of polarity and absolute value, for example, as described with reference to FIGS. 15A and 15B, the upper digits of each prediction error signal Spe (amplitude bit string) are all in the entire frame. It is often "0". Accordingly, the number of digits representing the maximum absolute value within one frame is obtained as the number of significant digits, that is, the maximum number of digits including “1” is the number of significant digits Fe, and the number of significant digits in the
復号器20においては入力されたパケットより、並び替え部220からの振幅ビット列又は欠落補正部430からの補正(修正)振幅ビット列よりなる再生予測誤差波形に対し、補助情報復号部450で復号した有効桁数Feによる桁合せを桁合せ部460で行う。桁合せ部460に入力される再生予測誤差波形(振幅ビット列)が例えば図15Bの右側における桁数Feの振幅ビット列のようになった場合に、その各振幅ビット列(2の補数表現)に対し、図15Bの左側に示すように極性符号が正("0")のものには、本来の振幅ビット列のビット幅(符号器10の並び替え部160の入力予測誤差サンプルSpeのビット幅)mから有効桁数Feを引いた数だけ、"0"を上位に付け加え、極性符号が負("1")のものには"1"を同じ数m-Feだけ、上位に付け加える。
In the
このように桁合せされた再生予測誤差波形が合成フィルタ470へ供給される。このように有効桁数を補助情報に加えることにより、符号化効率を向上させることができる。なお符号器10の並び替え部160で、予測誤差信号を(振幅ビット列)を極性符号と絶対値の2進数値とに変換することなく2の補数表現の振幅ビット列に対しても、有効桁数Feを補助情報として出力するようにしてもよい。この場合も、図15Bの左側に示したようにフレーム内において何れの振幅ビット列においても同一上位桁数では"0"のみ又は"1"のみとなる範囲より下位桁の数が有効桁数Feであり、その有効桁数Feの最下位ビットを極性符号として用いればよい。
The reproduction prediction error waveform aligned in this way is supplied to the synthesis filter 470. By adding the number of significant digits to the auxiliary information in this way, the encoding efficiency can be improved. It is to be noted that the
有効桁数Feを利用する場合において、復号器20の欠落補正部430(図25)内のスペクトル包絡算出部432、逆フィルタ434、合成フィルタ435、合成フィルタ502、合成フィルタ435'において、その分析処理やフィルタ処理のために一つ前のフレームの再生予測誤差信号を必要とする場合は、一つ前のフレームの有効桁数Feと現在のフレームの有効桁数とを合せて処理する必要がある。例えば現在のフレームの有効桁数が一つ前のフレームの有効桁数よりMビット(桁)大きい時は、例えば一つ前のフレームの振幅ビット列を下位にMビットシフトして過去のフレームの振幅ビット列の振幅値を縮小して、一つ前の過去のフレームの有効桁数を現在のフレームの有効桁数にそろえたうえで補正処理を行う。現在のフレームの有効桁数が一つ前のフレームの有効桁数よりNビット(桁)小さい時は、例えば一つ前のフレームの振幅ビット列を例えば浮動小数点としてNビット上位にシフトして一つ前のフレームの振幅ビット列の振幅値を拡大して、一つ前のフレームの有効桁数と現在の有効桁数をそろえたうえで上記各フィルタによる処理を行う、あるいは一つ前のフレームを無視して処理を行う。
When the effective digit number Fe is used, the spectrum
このような有効桁数をそろえる場合は、図22におけるステップS2,S4の各直前、図24におけるステップS2,S3,S5,S6の各直前、図26におけるステップS2,S3,S6の各直前に破線で示すように、必要とする一つ前のフレームの振幅ビット列に対し、有効桁数をそろえる有効桁数補正を行えばよい。図23及び図25の欠落補正部430において、有効桁数をそろえることが必要な各部において、一つ前のフレームの振幅ビット列に対して有効桁数をそろえる処理を行えばよい。なお図21中の復号器20内に示すように、並び替え部220より振幅ビット列に対し、桁合せ部460により桁合せを行ってもよく、この場合は、前述した有効桁数補正の必要はなくなる。
第7実施例
ところで、従来、音響信号の高圧縮符号化は、圧縮効率を高める点から聴覚特性を考慮し、聴感歪を最小化するようにするのが一般的である。これは聴覚最適化を利用した符号化であって、与えられたビット数のもとに周波数マスキングを用いて、聴覚的な量子化歪を最小化するものである。波形歪最小という規範では、聴覚とは無関係に量子化歪のエネルギーを最小化するために、原音のスペクトルの大きさに無関係に量子化歪を配分するものである。
When aligning the number of significant digits, immediately before steps S2 and S4 in FIG. 22, immediately before steps S2, S3, S5 and S6 in FIG. 24, and immediately before steps S2, S3 and S6 in FIG. As indicated by the broken line, the effective number of digits may be corrected so that the effective number of digits is aligned with respect to the amplitude bit string of the previous frame required. In the
By the way, conventionally, high compression encoding of acoustic signals generally takes into account auditory characteristics from the viewpoint of increasing compression efficiency and minimizes auditory distortion. This is coding using auditory optimization, which minimizes auditory quantization distortion by using frequency masking based on a given number of bits. In the norm of waveform distortion minimization, in order to minimize the energy of quantization distortion regardless of hearing, quantization distortion is allocated regardless of the magnitude of the spectrum of the original sound.
聴覚最適化では、原音の大きなスペクトル成分の周辺の量子化歪は原音の成分にマスクされて聞こえないので、原音のスペクトル成分の大きいところに大きな歪を許容し、反対に原音のスペクトル成分の小さいところには量子化歪を小さくする。
例えば、前述した図11の実施例のように高圧縮率の非可逆符号化と、可逆符号化との組合せにおいて、非可逆符号化に聴覚特性が考慮されていると、その局部復号信号(図11では逆量子化部130の出力)の波形は、特に比較的大きなスペクトル成分の部分で歪みが大きい。このためこの局部復号信号と原音の入力音響信号との誤差信号はその振幅の変動が比較的大きく、そのため、前述した並び替えを行って可逆圧縮符号化を行ってもその符号化効率を十分大きくすることができない。この点を改善した実施例を、図27を参照して以下に説明する。
In auditory optimization, the quantized distortion around the large spectral component of the original sound is masked by the original sound component and cannot be heard. However, the quantization distortion is reduced.
For example, when auditory characteristics are considered in lossy encoding in a combination of lossy encoding with high compression ratio and lossless encoding as in the embodiment of FIG. In 11, the waveform of the output of the
符号化装置10において、入力端子100に入力された音響信号のサンプル系列はフレーム分割部110で例えば1024個のサンプルごとのフレーム単位に分割され、これら各フレーム単位の音響信号は聴覚特性を考慮した非可逆圧縮符号化が、聴感最適化符号化部13で行われる。この聴感最適化符号化は聴感歪が最小化するように圧縮符号化するもので例えばMPEG符号化を利用できる。この聴感最適化符号化部13からは非可逆符号である聴感最適化符号Inaが出力される。
この聴感最適化符号Inaは局部復号部14で局部復号され、局部復号信号が作られる。符号Inaの局部復号信号は聴感最適化符号化部13において分析合成符号化法により生成することができる。この局部復号信号は変形部15において、フレーム分割部110の出力音響信号との誤差が小さくなるように変形される。つまり変形部15で変形された局部復号信号(変形局部信号)とフレーム分割部110の出力である音響信号との誤差が誤差算出部16で算出され、その誤差信号のエネルギーが望ましくは最小になるように、局部復号信号は変形部15で変形される。
In the
This auditory optimizing code Ina is locally decoded by the
この変形は、変形パラメータ生成部17で生成された変形パラメータを局部復号信号に乗算し、または局部復号信号に対する複数サンプルの重み付き加算により行われる。変形パラメータの生成は例えば次のように行われる。
p次の変形パラメータA(1×p)、n個のサンプルから成る入力音響信号X(1×n)、局部復号信号行列Y(p×n)を以下のようにおく。
A=(a0 ,a1 ,…,a(p-1))T
X=(x0 ,x1 ,…,x(n-1))T
誤差信号のエネルギーdは下記となる。
d=(X−YA)T(X−YA) (2)
dを最小とする変形パラメータAは下記となる。
This deformation is performed by multiplying the local decoded signal by the deformation parameter generated by the deformation
A p-order deformation parameter A (1 × p), an input acoustic signal X (1 × n) composed of n samples, and a local decoded signal matrix Y (p × n) are set as follows.
A = (a 0 , a 1 , ..., a (p-1) ) T
X = (x 0 , x 1 ,..., X (n−1) ) T
The energy d of the error signal is as follows.
d = (X−YA) T (X−YA) (2)
The deformation parameter A that minimizes d is as follows.
A=(YTY)-1YTX (3)
(YTY)は自己相関行列、YTXは相互相関ベクトルと近似でき、p=1の時の変形パラメータa0 はXとYの相互相関係数をYのエネルギーで正規化したものとなる。
またU(=X−Y)とYとの相関係数bを求めて、
Z=X−Y−bY (4)
のZを誤差信号としてもよい。つまりZ=X−(1+b)Y≡X−a0Yと置ける。
A = (Y T Y) −1 Y T X (3)
(Y T Y) is the autocorrelation matrix, Y T X can be approximated as the cross-correlation vector, deformation parameters a 0 when the p = 1 is as normalized cross-correlation coefficient between X and Y in the energy of Y Become.
Further, the correlation coefficient b between U (= X−Y) and Y is obtained,
Z = XY-bY (4)
Z may be used as an error signal. That is, Z = X− (1 + b) Y≡X−a 0 Y.
つまり変形パラメータ生成部17では例えば図28Aに示すように、入力音響信号Xと局部復号信号Yの転置行列との相互相関ベクトルが乗算部171で計算され、また乗算部172で自己相関行列YTYが計算され、割算部173で乗算部172の計算結果で乗算部171の計算結果が割算されて変形パラメータAが生成される。あるいは乗算部171でXとYの相互相関係数を計算し、乗算部172でYのエネルギーを計算し、得られた相互相関係数をYのエネルギーで割算することを割算部173で行って変形パラメータa0を求めてもよい。
That is, in the deformation
あるいは図28Bに示すようにX−Y=Uを引算部174で計算し、UとYの相互相関係数bを乗算部175で計算し、加算部176でbに1を加算して変形パラメータa0 としてもよい。
変形パラメータA、a0 又はbは符号化されて変形パラメータ符号Inmとして変形パラメータ生成部17から出力される。このように変形パラメータは音響信号Xと局部復号信号Yとの相互相関成分を含むものであり、変形部15では変形パラメータを局部復号信号Yに対し乗算し又は局部復号信号Yを変形パラメータAで重み付き加算、乃至、畳み込み演算を行う。
Alternatively, as shown in FIG. 28B, X−Y = U is calculated by the subtracting
The deformation parameter A, a 0 or b is encoded and output from the deformation
なお音響信号と局部復号信号との誤差信号のエネルギーが最小化されていれば、誤差信号と音響信号や局部復号信号とは無相関であるが、誤差信号のエネルギーが最小化されていなければ誤差信号と音響信号や局部復号信号と相関が生じる。この相関成分を求めて、その相関成分に応じて式(3)により局部復号信号Yを変形して、誤差信号のエネルギーを最小化するように式(2)変形パラメータAが決められる。
変形パラメータAの生成は、最初は適当な値を与え誤差信号Uの振幅又はエネルギーが小さくなるように、フレームごとに逐次修正するようにしてもよい。この場合は変形パラメータ符号Inmを出力する必要はない。
If the energy of the error signal between the acoustic signal and the local decoded signal is minimized, the error signal is uncorrelated with the acoustic signal or the local decoded signal, but if the energy of the error signal is not minimized, an error occurs. Correlation occurs between the signal and the acoustic signal or the locally decoded signal. The correlation component is obtained, and the local decoded signal Y is transformed by equation (3) according to the correlation component, and equation (2) transformation parameter A is determined so as to minimize the energy of the error signal.
The generation of the deformation parameter A may be sequentially corrected every frame so that an appropriate value is initially given and the amplitude or energy of the error signal U becomes small. In this case, it is not necessary to output the deformation parameter code Inm.
誤差算出部16からの誤差信号は可逆符号化部18で可逆符号化され、可逆符号Pneとして出力される。可逆符号化は例えば図1及び図2で説明した特開2001-44847公報に示されているようにビット並び替えと、ハフマン符号化、算術符号化などのエントロピー符号化との組み合わせで実施できる。
変形部15で局部復号信号が、音響信号との誤差が小さくなるように変形されるため、変形を行なわない局部復号信号と音響信号との誤差信号と比較して、誤差信号中の"0"ビットの数が多く、それだけ高効率的に可逆符号化することができる。
The error signal from the
Since the local decoded signal is deformed by the deforming
聴感最適化符号Ina、可逆符号Ine、必要に応じて変形パラメータ符号Inmが結合部315で結合されて出力される。なお、図28Bに示すように変形部15で局部復号信号Yに変形パラメータbを乗算して変更局部復号信号bYを計算し、その変形局部復号信号bYと、U=X−Yとの誤差U−bYを誤差算出部16で計算して誤差信号を求めこれを可逆符号化してもよい。この誤差信号は誤差信号Δ=X−a0Yと実質的には同一であるから、音響信号と変形局部信号との誤差信号を求めるということは、この両者の手法及びこれと等価な手法を意味する。変形パラメータ符号Inmはbを符号化したものでもよいことは明らかである。
The auditory optimization code Ina, the lossless code Ine, and, if necessary, the deformation parameter code Inm are combined by the combining
復号器20においては、入力端子200に入力されたフレームごとの符号の組は分離部440で聴感最適化符号Inaと可逆符号Ineとに、必要に応じて変形パラメータ符号Inmとに分離される。聴感最適化符号Inaは聴感最適化符号復号部23で非可逆復号化されて復号信号が生成される。この復号化の手法は符号器10中の局部復号部14と同一とする。この復号信号は変形部24で定数倍又は複数サンプルの重み付き加算などにより変形される。この変形も符号器10中の変形部15と同一処理とする。変形パラメータ生成部25は変形パラメータ符号Inmが入力される場合はこの符号Inmを復号して変形パラメータA又はa0 又はbを生成する。変形パラメータ符号Inmが入力されない場合は、復号信号Yと再生音響信号Xとを用いて符号化装置10中の変形パラメータ生成部14と同一手法により変形パラメータAを逐次修正により求める。
In the
可逆符号Ineは可逆復号部21により可逆復号され、誤差信号Δが再生される。この誤差信号Δと変形された復号信号aYとが加算部27で加算されて音響信号が再生される。この再生音響信号が切換部28を通じてフレーム合成部250へ供給され、フレームごとの再生音響信号が順次連結されて出力される。欠落検出部420により補正可能な程度のパケットの欠落が検出された場合、情報補正部480により例えば図23で前述したような補正が行われる。
可逆符号Ineが入力されなかった場合や、一部の欠落によりある程度以上の品質の誤差信号Δを得ることができない場合はこれが欠落検出部420で検出され、この検出出力により切換部28が制御されて、聴感最適化符号復号部23から復号信号が再生音響信号としてフレーム合成部250へ供給される。最終的な可逆符号化のためには量子化誤差エネルギーが小さいほうが圧縮効率が高いが、聴感最適化符号Inaのみの情報しか得られない場合は聴感歪を最小化する量子化結果を用いるほうが1ビットレートの割りに品質が高くなる。可逆復号部26などを備えない復号化装置においても聴感最適化符号Inaを復号して再生ディジタル信号とすることができる。
第8実施例
図29にこの発明の第8実施例を示し、図27と対応する部分に同一参照番号を付けてある。符号器10において図27の実施例と異なる点は変形部15である。即ちこの第2実施例では局部復号部14からの局部復号信号Yと音響信号Xとの誤差信号が誤差算出部15Aで算出され、その誤差信号が誤差最小化符号化部15Bで量子化誤差エネルギーが最小となるように非可逆圧縮符号化し、非可逆符号として誤差最小化符号Inpが出力される。
The lossless code Ine is losslessly decoded by the
When the reversible code Ine is not input or when an error signal Δ having a quality of a certain level or more cannot be obtained due to a part of the loss, this is detected by the
Eighth Embodiment FIG. 29 shows an eighth embodiment of the present invention, in which parts corresponding to those in FIG. 27 are given the same reference numerals. The
この誤差最小化符号Inpは局部復号部15Cで局部復号され、その局部復号信号と局部復号部14からの局部復号信号とが加算部15Dで加算され、この加算局部復号と音響信号との誤差が誤差算出部16で算出され、誤差信号として可逆符号化部18へ供給される。このように聴感最適化符号部13と誤差最小化符号部15Bとの2段階により音響信号が符号化されるため、その局部復号信号、つまり加算部15Dからの加算局部復号信号はそれだけ音響信号に近いものとなり、誤差算出部16からの誤差信号における"0"ビットの数が多くなる。結合部315では聴感最適化符号Inaと誤差最小化符号Inpと可逆符号Ineが結合されて出力される。
This error minimizing code Inp is locally decoded by the
復号器20においては誤差最小化符号Inpが誤差最小化符号復号部24Aで非可逆復号され、その復号信号と、聴感最適化符号復号部23からの復号信号とが加算部24Bで加算され、この加算された復号信号が切換部28を通じて加算部27へ供給され、可逆復号部26からの再生誤差信号と加算される。可逆符号Ineが入力されない場合や誤差信号を再生するための十分な情報が得られない場合は切換部28は加算部24Bからの加算復号信号にかえて、聴感最適化符号Inaの復号信号が再生音響信号としてフレーム合成部250へ供給する。誤差最小化符号復号部45及び加算部24Bは変形部24を構成している。
第9実施例
図30にこの発明の第9実施例を示す。第9実施例は図27の第7実施例とは符号化装置10における変形部15の構成が異なり、また誤差最小化符号化部19を設けた点が異なり、これに伴って復号器20においても変更されている。
In the
Ninth Embodiment FIG. 30 shows a ninth embodiment of the present invention. The ninth embodiment differs from the seventh embodiment of FIG. 27 in that the configuration of the deforming
符号器10においてフレームごとの音響信号は誤差最小化符号化部19により量子化誤差エネルギーを最小化するように非可逆圧縮符号化され、その非可逆符号として誤差最小化符号Inpが出力される。この誤差最小化符号Inpは局部復号部15Eで局部復号され、その局部復号信号と局部復号部14からの局部復号信号とが荷重平均部15Fで前者を重視して荷重平均される。この荷重平均局部復号信号と音響信号との誤差が誤差算出部16で算出され、その誤差信号が可逆符号化部18へ供給される。
In the
荷重平均部15Fでの重みは誤差算出部16からの誤差が小さくなるような統計的に予め求めた固定値であり、例えば誤差最小化符号Inpの局部復号信号に対しては0.8〜0.9程度、聴感最適化符号の局部復号信号に対しては0.1〜0.2程度の値とする。あるいは変形パラメータ生成部17において、両局部復号信号と、音響信号とを入力して、誤差算出部16からの誤差信号が最小になるように連立方程式を解いて両重みを決定してもよい。この場合はその両重みを符号化し重み符号Inwを出力する。局部復号部15E、荷重平均部15Fは変形部15を構成している。
The weight in the weighted average unit 15F is a fixed value that is statistically obtained in advance so that the error from the
結合部315は聴感最適化符号Inaと、誤差最小化符号Inpと可逆符号Ineとを結合して出力し、変形パラメータ生成部17を用いる場合は重み符号Inwも結合する。聴感最適符号化部13と誤差最小化符号化部19とはスペクトル包絡やパワーなどのパラメータを共に用いる場合がある。このような場合は破線で示すように両者に共通のパラメータを符号化する共通符号化部13Aを一方の符号化部、図30では聴感最適化符号化部13内に設けてその共通符号Incとして出力すると共に抽出した共通に用いるパラメータを必要に応じて他方の符号化部、この例では誤差最小化符号化部19へ供給する。更に、聴感最適化符号化部13内の符号化部13Bで入力音響信号の波形情報などを聴覚特性を考慮したベクトル量子化するなどして符号化し、符号Inarを出力し、誤差最小化符号化部19内の符号化部19Aで同様に音響信号の波形情報などを量子化誤差エネルギーを最小化するようにベクトル量子化するなどによって符号化して符号Inprを出力するようにしてもよい。
The combining
復号器20においては分離部440で分離された誤差最小化符号Inpは誤差最小化符号復号部24Aで非可逆復号され、その復号信号は荷重平均部24Cで聴感最適化符号復号部23からの復号信号と、前者に偏った荷重加算が行われ、その荷重加算復号信号が加算部27で可逆復号部21からの再生誤差信号と加算されて切換部28を通してフレーム合成部250へ供給される。荷重平均部24Cにおける荷重は、符号化装置10の荷重平均部15Fにおける荷重と同一とされる。符号化装置10で変形パラメータ生成部17により重み(荷重)が決定される場合は、分離部440で分離されたその重み符号Inwが重み復号部29で復号され、その復号された重みが荷重平均部24Cへ供給される。
In the
聴感最適化符号Inaの復号信号と、誤差最小化符号Inpの復号信号はもう1つの荷重平均部26にも供給され、ここで前者(Ina復号信号)に偏った荷重平均が行われる。この荷重平均における重みは例えば、符号Inaの復号信号に対し0.8〜0.9程度が符号Inpの復号信号に対し0.2〜0.9程度が固定的に与えられる。あるいは重み復号部29で復号された重みを、荷重平均部24Cによる重み付けとは逆の関係で荷重平均部26に対し与えてもよい。
可逆符号Ineが入力されない場合や可逆復号部21で誤差信号を再生するた
めの十分な情報が得られない場合は荷重平均部26からの平均化復号信号が切換部28を通じて再生音響信号としてフレーム合成部250へ供給される。分離部440で共通符号Inwが分離される場合は、共通符号Inwは共通復号部22で復号され、これら共通復号信号は聴感最適化符号復号部23及び誤差最小化符号復号部24Aへ供給される。これら復号部23,24Aにはそれぞれ符号Inar,Inprが供給され、それぞれ所望の復号信号が得られるようにされる。誤差最小化符号復号部24A及び荷重平均部24Cは変形部24を構成している。
第10実施例
図31に第10実施例を図30と対応する部分に同一参照番号を付けて示す。この第10実施例では符号器10において誤差最小化符号Inpの局部復号信号が局部復号部15Eから誤差算出部16へ直接供給される。従って、聴感最適化符号Inaに対しては局部復号は行わず、誤差最小化符号Inpに対する局部復号結果が誤差算出部16での誤差算出に利用される。この第10実施例においても第9実施例と同様に聴感最適化符号化部13と誤差最小化符号化部19とで共通のパラメータを一方で抽出して両者の符号化に利用すると共に共通符号Inwと、それぞれの部分符号Inar,Inprを出力するようにしてもよい。
The decoded signal of the auditory optimizing code Ina and the decoded signal of the error minimizing code Inp are also supplied to another
When the lossless code Ine is not input or when the
Tenth Embodiment FIG. 31 shows the tenth embodiment corresponding to FIG. 30 with the same reference numerals. In the tenth embodiment, the
復号器20においては誤差最小化符号復号部24Aからの復号信号が加算部27へ直接供給されて、可逆復号部21からの再生誤差信号と加算される。切換部28は聴感最適化符号復号部23の復号信号と、加算部27の加算信号とが切換えられて再生音響信号としてフレーム合成部250へ供給される。また共通符号Incが分離部440で分離される場合の動作は図30で説明した場合と同様である。
第11実施例
図32にこの発明の第11実施例を図30と対応する部分に同一参照番号を付けて示す。この第11実施例の符号器10においては図30の第3実施例における聴感最適化符号化部13が誤差算出部16の出力側に接続され、局部復号部15Eからの、誤差最小化符号Inpに対する局部復号信号と音響信号との誤差が誤差算出部16で算出され、その誤差信号が聴感最適化符号化部13で聴感歪を最小化するように非可逆圧縮符号化され、この非可逆符号が聴感最適化符号Inaとして出力される。結合部315では誤差最小化符号Inpと聴感最適化符号Inaと可逆符号Ineが結合されて出力される。
In the
Eleventh Embodiment FIG. 32 shows an eleventh embodiment of the invention corresponding to FIG. 30 with the same reference numerals. In the
復号器20では分離された聴感最適化符号Inaは聴感最適化符号復号部23で非可逆復号化され、その復号信号と、誤差最小化符号復号部24Aによる誤差最小化符号Inpの復号信号とが加算部24Bで加算される。誤差最小化符号Inpの復号信号と可逆符号Ineの可逆復号信号、つまり再生誤差信号とが加算部27で加算されて再生音響信号として切換部28を通じてフレーム合成部250へ供給される。可逆復号部21により誤差信号が再生されない場合は加算部24Bからの加算復号信号が切換部28を通じてフレーム合成部250へ再生音響信号として供給される。
The auditory optimizing code Ina separated by the
この場合も可逆符号化部18による可逆圧縮符号化に量子化誤差エネルギーを最小化する量子化系列を使い、非可逆圧縮符号化のみの情報しか得られない場合には聴感歪を最小化する量子化結果を用いる点は第8〜第10実施例と同様である。しかし、この場合は誤差最小化符号化部19により誤差最小化符号化した後に、その局部復号信号に対し更に聴感最適化符号化部13により聴感歪最小化の量子化を行っており、つまり多段に量子化しているため、全体としての符号化ビット数は多くなるが、それだけ聴感的改善がなされ、歪エネルギーの最適化でも、第1段階の局部復号信号、つまり局部復号部15Eからの誤差最小化符号Inpの局部復号信号よりも効率がよいことがある。つまり歪エネルギーの最適化には効率のよい方を用いるとよい。
Also in this case, a quantization sequence that minimizes quantization error energy is used for lossless compression encoding by the
この場合の手法を、図32中に示す破線の構成により説明する。聴感最適化符号化部13からの符号Inaは局部復号部14で局部復号され、その局部復号信号は加算部31で局部復号部15Eからの符号Inpの局部復号信号と加算され、この加算局部復号信号と音響信号との誤差が誤差算出部32で算出され、この誤差信号と、誤差算出部16からの誤差信号との大小が大小比較部33で比較され、小さい方が選択部34で選択されて可逆符号化部18へ供給される。この際、いずれの誤差信号を選択したかを示す選択符号Insが出力される。
A method in this case will be described with reference to a broken line configuration shown in FIG. The code Ina from the auditory optimizing
復号器20では分離部440で分離された選択符号Insにより選択部41が制御され、符号化装置10で誤差算出部16からの誤差信号が選択された場合は誤差最小化符号復号部24Aからの復号信号が選択されて加算部27へ供給され、符号器10において誤差算出部32からの誤差信号が選択された場合は、加算部24Bからの加算復号信号が選択されて加算部27へ供給される。
図27〜32中の可逆符号化部18の具体例を図33に示す。この構成は図14における並び替え部160、伝送記録単位分割部310、可逆符号化部150、補助情報生成部350による構成とほとんど同じである。誤差信号16からの誤差信号は並び替え部160と補助情報生成部350とに供給される。補助情報生成部350内の有効桁数検出部353でフレームごとに誤差信号の絶対値の最大値を表現する桁数が有効桁数Feとして検出される。また誤差信号はその有効桁数以内の部分のみが図15A,15Bを参照して説明したように並び替え部160により各サンプル(振幅ビット列)における同一ビット位置のビットが、フレームにわたって配列され、等位ビット列とされる。
In the
A specific example of the
並び替え部160からの等位ビット列は伝送記録単位分割部310で伝送単位あるいは記録単位のデータに分割される。これら各分割された伝送記録単位データは必要に応じて、可逆符号化部150により可逆圧縮符号化され、誤差符号Ineとして出力される。
一方、有効桁数検出部353で検出した有効桁数Feが補助情報符号化部352に与えられる。この例では更に、フレームごとに誤差信号サンプル列はスペクトル包絡算出部351で例えば線形予測分析され、スペクトル包絡を表現するパラメータLPCが線形予測係数として求められる。またパワー算出部354でフレームごとの誤差信号の平均パワーが算出される。あるいはスペクトル包絡算出部351で求めた線形予測係数に基づき構成した逆フィルタ355に誤差信号を入力してスペクトル包絡を平坦化処理し、その平坦化された信号の平均パワーがパワー算出部356で求められる。これら有効桁数Fe、線形予測係数LPC及び平均パワーが補助情報符号化部352により、例えば30〜50ビット程度の低ビットで符号化されて補助情報Inxとされる。この有効桁数、スペクトル包絡のパラメータ、平均パワーを符号化した補助情報Inxは結合部315(図27、29〜32)へ供給され、各フレームの代表パケット、例えば極性符号を含む伝送記録単位データが格納されたパケット内に付加され、あるいは独立したパケットとして出力される。
The equidistant bit string from the
On the other hand, the significant digit number Fe detected by the significant digit
図27〜32における復号器20の可逆復号部21の具体例を情報補正部480と共に図34に示す。入力されたパケットPeから分離部440において補助情報Inxと誤差符号Ineが分離され、誤差符号Ineは可逆復号化部210へ供給され、補助情報Inxは補助情報復号部450へ供給される。補助情報復号部450は当該フレームの有効桁数Fe、スペクトル包絡を表すパラメータLPC及び平均パワーを復号し、有効桁数Feを桁合せ部460へ供給し、スペクトル包絡パラメータ及び平均パワーを欠落補正部430へ供給する。これらの各部の動作については図14の実施例で既に詳細に説明したのでここでは説明を省略する。
A specific example of the
図27〜32の各実施例における符号器10の可逆符号化部18は、誤差信号に対し更に予測処理を行うように構成してもよい。その構成例を図35Aに示す。誤差信号はスペクトル包絡算出部351に与えられてそのスペクトル包絡を表す線形予測係数LPCが求められる。一方、誤差信号は予測誤差生成部370に与えられ予測誤差信号Speが生成される。例えば誤差算出部16からの直前の複数の誤差信号サンプルがレジスタ371から線形予測部372へ供給され、これらサンプルに対し、スペクトル包絡算出部371からのスペクトル包絡を表わす線形予測係数LPCが乗算され、それら乗算結果が加算されて線形予測値が求められる。この線形予測値は整数化部373で整数値とされ、整数の予測値と誤差算出部16からの誤差信号の現サンプルとの差が差回路374で求められて、予測誤差信号Speが得られる。この予測誤差信号Speは並び替え部160に入力される。
27 to 32, the
符号器10の可逆符号化部18に図35Aの構成を適用した場合の復号器20における可逆復号部21の構成例を図35Bに示す。この構成は図21における復号器20の並び替え部220、欠落補正部430、補助情報復号部450、合成フィルタ470による構成と同じである。情報補正部480からの再生された予測誤差信号Speは合成フィルタ470で図35Aにおける可逆符号化部18の予測誤差生成部370の処理と逆の処理が行われる。つまりレジスタ471から予め決められた一定数の直前の復号サンプルが線形予測部472に入力され、それらのサンプルに対して、補助情報復号部450で復号された線形予測係数LPCに基づく重みがそれぞれ乗算され、その乗算結果の和が現在の復号サンプルの予測値として求められる。この予測値は整数化部473で整数値とされ、この整数化された予測値と情報補正部480からの現在の予測誤差信号との和が加算部474でとられて、合成フィルタ470のフィルタ出力、つまり再生誤差信号とされる。
第12実施例
ところで上述した各実施例は、1つのチャネルの入力ディジタル信号に対する符号器及び復号器の場合であったが、それらの実施例をマルチチャネル信号に適用した実施例を以下に示す。マルチチャネル信号を対象とした圧縮符号化はAC-3(Dolby社のAudio Coding)やAAC(Dolby社のAdvanced Audio Coding)などいくつか開発されており、聴感的には劣化がわずかとすることができるが、波形は原音とかなり異なってしまう。マルチチャネルの信号をそのままPCM(Pulse Code Modulation)として伝送すると、完全に原音が再現されるが、多くの情報量を必要とする。またその符号化列の一部だけから音を再生することはできないし、このためPCMとした信号をパケット伝送を行った場合はパケット消失は大きな影響を受ける。
FIG. 35B shows a configuration example of the
Twelfth Embodiment Each of the above-described embodiments is a case of an encoder and a decoder for an input digital signal of one channel. Examples of applying these embodiments to a multi-channel signal are shown below. Several compression encodings for multi-channel signals have been developed, such as AC-3 (Dolby's Audio Coding) and AAC (Dolby's Advanced Audio Coding). Yes, but the waveform is quite different from the original sound. When a multi-channel signal is transmitted as it is as PCM (Pulse Code Modulation), the original sound is completely reproduced, but a large amount of information is required. In addition, sound cannot be reproduced from only a part of the encoded sequence, and therefore packet loss is greatly affected when packet transmission is performed on a PCM signal.
マルチチャネル信号を混合してチャネル数が減少して符号化することにより符号化効率を上げることが考えられる。しかしこの場合、原マルチチャネル信号を正しく再生することはできない。
この第12実施例では、複数のディジタル信号を混合して、これより少ない数のディジタル信号として符号化し、符号化効率を向上させ、かつ必要に応じて、原複数のディジタル信号を忠実に再生することも可能とし、広い範囲のビットレートの選択、広い範囲のチャネル数の選択を可能とする多チャネル信号符号化方法、復号化方法、符号化器、復号化器を提供する。
It is conceivable to increase the coding efficiency by mixing multi-channel signals and coding with a reduced number of channels. However, in this case, the original multichannel signal cannot be reproduced correctly.
In the twelfth embodiment, a plurality of digital signals are mixed and encoded as a smaller number of digital signals, the encoding efficiency is improved, and the original digital signals are faithfully reproduced as necessary. It is also possible to provide a multi-channel signal encoding method, decoding method, encoder, and decoder that enable selection of a wide range of bit rates and selection of a wide range of channels.
図36はこの発明による符号器と復号器の第12実施例を示す。符号器10においてはMを2以上の整数とすると、Mチャネルのディジタル信号が端子1001 〜100M よりフレーム分割部110に入力され、それぞれフレーム単位例えば1024サンプルごとに分割される。各分割されたディジタル信号はチャネル混合部30でMより少ないNチャネルのディジタル信号に混合される。Nは1以上の整数であり、N<Mである。この混合されたNチャネルの信号は符号化部120で非可逆又は可逆圧縮符号化され、主符号Imとして出力される。この符号化は高圧縮符号化とすることが望ましい。主符号Imは局部符号化部130で復号され局部復号信号が作られる。この局部復号信号はチャネル拡大部40で元のMチャネルの局部復号信号にチャネル数が増加される。符号Imの局部復号信号は、符号化部120において分析合成符号化法により生成することができる。
FIG. 36 shows a twelfth embodiment of an encoder and a decoder according to the present invention. In the
なおチャネル混合は例えば8チャネルの信号のうち最初の4チャネルの平均を左チャネル信号とし後の4チャネルの平均を右チャネル信号としてもよい。あるいは2チャネルステレオ信号の平均を1チャネルモノラル信号としてもよい。
チャネル拡大は前記チャネル混合と逆に対応する数のチャネル数の信号にする。ここでチャネル数が拡大された局部符号信号は前記チャネル混合によるチャネル数の減少によって入力ディジタル信号に対して情報が失われている。その失われた信号を誤差信号として、フレーム分割部110から分岐したMチャネルディジタル信号とMチャネル局部復号信号とが誤差算出部140に入力されて算出される。この誤差信号は配列変換部50に供給されて、ビット列の並び替えと圧縮符号化がそれぞれ行われ、誤差符号Ineとして補助情報符号Inxと共に出力される。配列変化部50の具体的構成及び処理については後で述べるが、図4A及び図15A,15Bで述べた等位ビット列への変換を行う並び替え部160を少なくとも備えている。配列変換部50よりの誤差符号Ine、補助情報Inx、及び符号化部120からの主符号Imは、結合部315で結合されて出力され、パケットPeで送出する場合は図4Bで説明したヘッダ31をつけて送出される。
The channel mixing may be, for example, the average of the first four channels of the eight channel signals and the average of the subsequent four channels as the right channel signal. Alternatively, the average of two-channel stereo signals may be a one-channel monaural signal.
In the channel expansion, the number of signals corresponding to the number of channels corresponding to the channel mixing is reversed. Here, the local code signal with the expanded number of channels loses information with respect to the input digital signal due to the decrease in the number of channels due to the channel mixing. Using the lost signal as an error signal, the M channel digital signal branched from the
復号器20においては、入力されたパケットPeが分離部440でこの場合主符号Imと、誤差符号Ineと、補助情報Inxとに分離される。主符号Imは復号化部60で、符号器10における符号化部120の符号化手法と対応した復号化手法により復号され、復号信号が作られる。この復号信号はチャネル拡大部80によりNチャネルの復号信号からMチャネルの復号信号にチャネル拡大される。
分離された誤差符号Ineは配列逆変換部70で処理されてMチャネルの誤差信号が再生される。配列逆変換部70の具体的構成及び処理については後で述べるが、少なくとも図4A,15A,15Bで述べた並び替え部220を備え、振幅ビット列よりなる誤差信号を再生する。また、補助情報Inxは情報補正部480で復号され、欠落検出部420によりパケットの欠落が検出された場合に補助情報に基づいて情報補正部480において再生誤差信号が補正される。
In the
The separated error code Ine is processed by the array
再生されたMチャネルの誤差信号とチャネル拡大されたMチャネルの復号信号とが対応するチャネルごとに加算部240で加算されてMチャネルの再生ディジタル信号としてフレーム合成部250へ供給され、これより各チャネルごとにフレーム連結されてディジタル信号がそれぞれ出力される。
この構成によれば復号器20に主符号Im及び誤差符号Ineと補助情報Inxがそれぞれ再生復号信号及び復号誤差信号を得るに十分な程度に少ない欠落で入力されれば、原Mチャネルディジタル信号を忠実に再生することができる。必要に応じてチャネル混合部30における減少するチャネル数の選択により符号化効率を変更することができる。またパケットが入力されなかったり誤差信号を再生するための十分な情報が得られなかったりした場合にチャネル拡大部80よりのMチャネル復号信号を再生ディジタル信号としてフレーム合成部250へ供給することによりかなりの品質を持つ信号を得ることができる。
The reproduced M channel error signal and the channel expanded M channel decoded signal are added by the adding
According to this configuration, if the main code Im, the error code Ine, and the auxiliary information Inx are input to the
図36の実施例において、チャネル混合を複数段階で行って復号化してもよい。その例を図37を参照して説明する。図37において図36と対応する部分に同一参照符号をつけてある。符号器10においてはこの例ではチャネル混合をチャネル混合部30とチャネル混合部41との2段で行う。例えばM=8チャネルステレオの原ディジタル信号をN=2チャネル又はN=4チャネルのステレオディジタル信号にチャネル混合し、更にそのステレオディジタル信号をL=1チャネルのモノラルディジタル信号にチャネル混合する。このチャネル混合部41よりのチャネル混合信号を符号化部120で符号化し、主符号Imを出力する。
In the embodiment of FIG. 36, channel mixing may be performed in multiple stages for decoding. An example will be described with reference to FIG. In FIG. 37, parts corresponding to those in FIG. In this example, the
この主符号Imを局部復号部130で復号し、その局部復号信号をチャネル拡大部42でチャネル拡大してLチャネルからNチャネルにする。このNチャネル局部復号信号とチャネル混合部30よりのNチャネルディジタル信号との誤差信号を誤差算出部43で算出し、この誤差信号を符号化部44で非可逆又は可逆の好ましくは高圧縮符号化して従符号Ieとして出力する。
従符号Ieを局部復号部45で復号してNチャネルの局部復号信号を作り、これとチャネル拡大部42よりのNチャネルの局部復号信号とを加算部46で加算し、この加算したNチャネルの局部復号信号をチャネル拡大部40でチャネル拡大してMチャネルの加算局部復号信号とする。このMチャネル加算局部復号信号とフレーム分割部110よりのMチャネルディジタル信号との誤差信号を誤差算出部140で算出し、この誤差信号を配列変換部50へ供給する。配列変換部50よりの誤差符号Ine、補助情報Inx、主符号Im及び従符号Ieを結合部315で結合し、パケット化して出力する。
This main code Im is decoded by the
The secondary code Ie is decoded by the
復号器20では分離部440で分離された主符号Imと従符号Ieを復号化部60と61でそれぞれ復号し、誤差符号Ineを配列逆変換部70で並び返して誤差信号を再生する。復号化部60よりのLチャネルの復号信号はチャネル拡大部80でNチャネルの復号信号に拡大されこのNチャネルの復号信号と復号部61よりのNチャネルの復号信号とが加算部62で加算される。このNチャネルの加算復号信号はチャネル拡大部63でMチャネルの復号信号にチャネル拡大され、このMチャネルの復号信号と配列逆変換部70のMチャネルの誤差信号とが加算部240で加算されて再生ディジタル信号としてフレーム合成部250へ供給される。
In the
この場合例えばビットレートの範囲を8kbit/sから5Mbit/sまで60倍くらいの範囲が選択できる。
図36及び図37において結合部315でパケットPeを生成する場合は、主符号Imを含むパケットの優先度を最も高いものとするのが好ましい。また従符号Ieを含むパケットは、主符号Imを含むパケットの次に高い優先度とする。
上述した図36、37の各実施例で用いられる配列変換部50の具体例としては、例えば図33で説明した可逆符号化部18の構成をそのまま使用することができる。その場合、図36、37の各実施例の復号器20で用いられる配列逆変換部70の具体例としては、例えば図34で説明した可逆復号部21の構成をそのまま使用することができる。
In this case, for example, a bit rate range of about 60 times from 8 kbit / s to 5 Mbit / s can be selected.
36 and 37, when the combining
As a specific example of the
あるいは、図36、37の各実施例に用いられる配列変換部50の他の具体例として、例えば図35Aで説明した可逆符号化部18の構成をそのまま使用してもよい。その場合、図36、37における配列逆変換部70の具体的構成としては、図35Bの可逆復号部21の構成をそのまま使用することができる。
第13実施例
マルチチャネルの信号をそのままPCMとして伝送すると、完全に原音が再現されるが、多くの情報量を必要とする。またその符号化列の一部だけから音を再生することはできないし、このためPCMとした信号をパケット伝送した場合はパケット消失は大きな影響を受ける。
Alternatively, as another specific example of the
Thirteenth Embodiment When a multichannel signal is transmitted as it is as PCM, the original sound is completely reproduced, but a large amount of information is required. In addition, sound cannot be reproduced from only a part of the encoded sequence, and therefore packet loss is greatly affected when a PCM signal is transmitted in packets.
この第13実施例では、多チャネルディジタル信号を、情報欠落の影響を受け難い、また情報圧縮の程度を比較的広い範囲で選択可能とする符号化方法、復号化方法、符号器、復号器、を提供する。
図38を参照して第13実施例の符号器10と復号器20を説明する。
符号器10において、M個(Mは2以上の整数)のディジタル信号が入力端子1001〜100Mを通じてフレーム分割部110に入力され、例えばそれぞれ1024個のディジタル信号からなるフレーム単位に順次分割される。これら各M個のフレームごとのディジタル信号はチャネル間直交変換部190で、チャネル間直交変換されて直交変換信号が出力される。つまりM個のディジタル信号の同一時刻のサンプルが直交変換される。ここでチャネル間直交変換に整数値を用いる可逆変換を使用すると全体として可逆な符号化を行うことができる。
In the thirteenth embodiment, an encoding method, a decoding method, an encoder, a decoder, a multi-channel digital signal that are not easily affected by information loss and that can select a degree of information compression within a relatively wide range. I will provide a.
The
In the
この直交変換信号は並び替え部160に入力される。並び替え部160において各フレームごとに直交変換信号の各成分(例えばL+RとL−R)ごとに各サンプル(振幅ビット列)における、振幅を表わす同一ビット位置(桁)がフレームにわたって時間軸方向に配列され、等位ビット列とされる。
並び替え部160からの等位ビット列は伝送記録単位分割部310で伝送単位あるいは記録単位のデータに分割される。これら各分割された伝送記録単位データは必要に応じて、可逆符号化部150により可逆符号化され、結合部315により、復号時に分割された伝送記録単位データを1つのフレームとして再構成可能なようにヘッダが取付けられ、パケットPeとして出力端子170に出力される。なお可逆符号化部150の符号化は従来技術の可逆符号化と同様なものである。パケットPeに優先順位をつける場合は、直交変換信号の各成分中のエネルギーの大きなものから順に、例えばL+Rを第1優先とし、その中で極性符号、MSB側に対応伝送記録単位データを含むものに高い優先度を与える。
This orthogonal transform signal is input to the
The equidistant bit string from the
復号化器20においては入力端子200からのパケット37は、後で述べるように、補助情報を含む場合は分離部440で補助情報と、伝送記録単位データ(極性符号列を含む)とに分離される。伝送記録単位データはそれが可逆符号化されている場合は可逆復号化部210へ供給され、ここで可逆復号された後、各伝送記録単位データは伝送記録単位統合部410へ供給される。伝送記録単位統合部410ではパケット番号に基づき、1つ又は複数のパケットより1フレーム分の伝送記録単位データを統合し、直交変換信号の各成分ごとに統合する。この統合されたデータは並び替え部220で等位ビット列を振幅ビット列の1フレーム分、つまり直交変換信号の1成分のサンプル列(波形)に変換される。並び替え部160、220の動作については図4A,15A,15Bを参照して詳しく説明したのでここでは説明しない。パケット欠落が生じていなければ、並び替え部220から、符号器10の並び替え部160に入力された直交変換信号と完全に同一の直交変換信号が得られる。
In the
チャネル間直交逆変換部290では、その入力された再生直交変換信号の各成分を、チャネル間直交変換部190での直交変換と逆の変換を行ってMチャネルディジタル信号を再生する。このようにフレームごとに再生されたMチャネルディジタル信号はフレーム合成部250で各チャネルごとにフレームの順に連結された出力端子2601〜260Mからそれぞれ出力される。
このようにして、Mチャネルディジタル信号をチャネル間直交変換して伝送や記録を行うことができ、その際、伝送記録単位でパケット化することにより、エネルギーの大きいもの程、またそのMSBに近いもの程、優先度を高くすることにより、伝送容量や記録容量が小さい場合に、優先度が高いパケットのみを用いることにより、比較的品質の高い再生信号を得ることができる。また後で述べるように、パケット欠落時に、失なわれた情報を補うことにより、よりよい品質の多チャネルディジタル信号を再生することができる。
In the inter-channel orthogonal
In this way, transmission and recording can be performed by orthogonally transforming M channel digital signals between channels, and at that time, by packetizing in units of transmission recording units, the larger the energy, the closer to the MSB. By increasing the priority, when the transmission capacity or recording capacity is small, a reproduction signal having a relatively high quality can be obtained by using only a packet having a high priority. Further, as will be described later, it is possible to reproduce a multi-channel digital signal of better quality by supplementing lost information when a packet is lost.
上述において、可逆符号化部150、可逆復号化部210を省略してもよい。
第14実施例
チャネル間直交変換にDFTやDCTのような実数の変換を用いると、この直交変換信号をチャネル間直交逆変換しても、再生ディジタル信号は原ディジタル信号と一致しない。また直交変換係数の一部だけ、つまりエネルギーの大きい成分だけ、例えばL+Rのみをパケットとして出力することが要求されることがある。これらに対応した発明の実施例が以下に述べる第14実施例である。
In the above description, the
14th Embodiment When real number transformation such as DFT or DCT is used for inter-channel orthogonal transform, the reproduced digital signal does not coincide with the original digital signal even if the orthogonal transform signal is inversely transformed between channels. Further, it may be required to output only a part of the orthogonal transform coefficient, that is, only the component having high energy, for example, only L + R as a packet. An embodiment of the invention corresponding to these is the fourteenth embodiment described below.
この第14実施例を図39を参照して説明する。
図39において図38と異なる点は、チャネル間直交変換部190からの直交変換信号の全成分或は一部の成分、つまりパワーの大きな成分を符号化部120で可逆符号化し、主符号Imを出力する。符号化部120からの符号を局部復号部130で復号して局部復号信号を作り、その局部復号信号をチャネル間直交逆変換部180でチャネル間直交変換部190の変換と逆変換を行って複数のチャネルのディジタル局部復号信号を生成する。符号Imの局部復号信号は、符号化部120において分析合成符号化法により生成することができる。これら各チャネルの局部復号信号とフレーム分割部110からの各ディジタル信号の対応するチャネル間における誤差信号を誤差算出部140で算出する。この算出した各誤差信号を配列変換部50で図38中の並び替え部160、伝送記録単位分割部310、可逆符号化部150の処理を行う。
The fourteenth embodiment will be described with reference to FIG.
39 differs from FIG. 38 in that all or a part of the orthogonal transform signal from the inter-channel
符号化部120からの主符号Imが伝送記録単位分割部310で伝送記録単位に分割され、これと配列変換部部50からの誤差符号Ineが結合部315で結合され、必要に応じてパケットPeとして出力される。なお配列変換部50は少なくとも図38中の並び替え部160を備えていればよく、図38中の伝送記録単位分割部310及び可逆符号化部150の処理は行わなくてもよい。この場合は主符号Imも伝送記録単位分割部330の処理を行わない。結合部315で主符号Imと誤差符号Ineをパケットとする場合は主符号Imを含むパケットに最も高い優先度を与える。
The main code Im from the
復号器20においては分離部440で主符号Imと誤差符号Ineが分離され、前者は復号化部60で可逆復号化され、その復号信号はチャネル間直交逆変換部290で符号器10のチャネル間直交逆変換部180と同様の処理によりチャネル間直交逆変換される。
一方、誤差符号Ineは配列逆変換部70に入力され、図38中の復号器20の可逆復号化部210、伝送記録単位統合部410、並び替え部220、情報補正部480の処理が行われ、誤差信号サンプル列が再生される。ただし、少なくとも並び替え部220における処理が行われればよく、符号器10側に対応して可逆復号化部210、伝送記録単位統合部410の処理は行わないでもよい。
In the
On the other hand, the error code Ine is input to the array
これら各再生された誤差信号と、チャネル間直交逆変換部30からの逆変換信号と対応するチャネルについて、加算部240でそれぞれ加算され、各チャネルの再生ディジタル信号が得られ、これらがフレーム合成部250へ供給される。
直交変換成分の一部を省略し、符号化ビット数を少くし、効率良い符号化としてもこの第14実施例により原ディジタル信号を再生することができる。また誤差信号成分が送られなかったり、再生に必要とする十分な情報が得られなくてもチャネル間直交逆変換部30からの逆変換処理された各信号をディジタル再生信号として用いることによりある程度の品質の再生信号を得ることができる。符号器10の配列変換部50において、各種の処理を省略できるが、これに応じて配列逆変換部70における処理も省略される。また符号化部120で可逆符号化する場合に限らず、いわゆる非可逆の高圧縮符号化を行ってもよい。その場合はこれに応じて復号化器20の復号部60も非可逆復号化を行う。この高圧縮符号化方法は従来技術の項で述べたものなどを用いることができる。
第15実施例
図40に図39と対応する部分に同一参照符号を付けてこの発明の第15実施例を示す。第2実施例と異なる部分のみを説明する。
Channels corresponding to these reproduced error signals and the inverse transform signal from the inter-channel orthogonal
The original digital signal can be reproduced according to the fourteenth embodiment even if a part of the orthogonal transform component is omitted, the number of encoded bits is reduced, and efficient encoding is performed. Even if error signal components are not sent or sufficient information necessary for reproduction is not obtained, each signal subjected to inverse transformation processing from the interchannel orthogonal
Fifteenth Embodiment FIG. 40 shows a fifteenth embodiment of the present invention, in which the same reference numerals are assigned to the portions corresponding to FIG. Only the differences from the second embodiment will be described.
符号器10においては、チャネル間直交変換部190によりMチャネルディジタル信号がチャネル間直交変換された信号は符号化部120で符号化されて主符号Imとして出力されると共に、その主符号Imは局部復号部130で局部復号されて局部信号とされる。符号Imの局部復号信号は、符号化部120において分析合成符号化法により生成することができる。その局部信号に対し、ここではチャネル間直交逆変換は行わず、チャネル間直交変換部190からのチャネル間直交変換信号との対応する成分の各誤差信号が誤差算出部140で算出される。この誤差信号が配列変換部50に供給される。以下第14実施例の符号器と同様に処理される。
In the
復号化器20においては第14実施例との相異に基づき復号部60で復号された主符号Imの主信号と、配列逆変換部70で再生された誤差信号とが加算部240で各対応する成分について加算され、これら加算された各成分の信号がチャネル間直交逆変換部290で符号器10のチャネル間直交変換部190と対応した逆変換が行われ、各チャネルの再生ディジタル信号としてフレーム合成部250へ供給される。
この場合も誤差信号を正しく再生できれば多チャネルディジタル信号を正しく再現できる。また第14実施例と同様、符号化部120ではチャネル間直交変換信号中のパワーの大きい成分だけを選択するか、予め平均的にパワーが大きい成分を決めておき、この成分だけを符号化して符号化効率を向上させることも可能である。符号化部120は非可逆の高圧縮符号化でも可逆の圧縮符号化でもよい。
In the
Also in this case, if the error signal can be correctly reproduced, the multi-channel digital signal can be correctly reproduced. Similarly to the fourteenth embodiment, the
図39、図40中の配列変換部50の具体的構成例としては、例えば図33に示す可逆符号化部18の構成をそのまま使用することができる。この配列変換部50と対応する配列逆変換部70の具体的構成例としては、図34に示す可逆復号部21の構成をそのまま使用することができる。
あるいは、配列変換部50の具体的構成例として図35Aに示す可逆符号化部18を使用し、それに対応して配列逆変換部70の具体的構成例として図35Bに示す可逆復号部21を使用してもよい。
第16実施例
上述したような、非可逆圧縮符号と、その誤差信号の可逆符号とを用いて、可逆符号化を実現しようとする符号化/復号化方法によっても、非可逆圧縮符号を再生する復号化器や計算機の環境によって、その非可逆圧縮符号の再生信号にはわずかな誤差が含まれることがある。そのような場合、復号化器で、非可逆圧縮符号の復号信号と、可逆符号を復号した誤差信号とを組合わせても、再生ディジタル信号が原ディジタル信号とは完全には一致しない。
As a specific configuration example of the
Alternatively, the
Sixteenth Embodiment Using the lossy compression code and the lossless code of the error signal as described above, the lossy compression code is also reproduced by the encoding / decoding method for realizing lossless encoding. Depending on the environment of the decoder or computer, the reproduced signal of the lossy compression code may contain a slight error. In such a case, even if the decoder combines the decoded signal of the lossy compression code and the error signal obtained by decoding the lossless code, the reproduced digital signal does not completely match the original digital signal.
この第16実施例は、非可逆圧縮符号化とその誤差信号の可逆符号化を用い、復号化器や計算機の環境にかかわらず、理論的には、原ディジタル信号と完全に一致する再生ディジタル信号を得ることを可能とする符号化方法、復号化方法、符号器、復号器を提供するものであり、以下に図41を参照して説明する。
図41において、符号器10においては入力端子100からのディジタル信号はフレーム分割部110でフレーム単位、例えば1024サンプルごとに分割されそのフレームごとにディジタル信号は非可逆符号化部120で符号化され、主符号Imとして出力される。その主符号Imは局部復号部14で復号され局部復号信号が作られ、その局部復号信号は変動最大桁数検出部55及び切捨部56に供給される。符号Imの局部復号信号は、非可逆符号化部120において分析合成符号化法により生成することができる。変動最大桁数検出部55においてはフレーム又はフレーム内の1サブフレーム以上において主符号Imが復号器で復号された際の復号信号の保証される確かな桁数、つまり復号化器の復号精度に基づいて変動し得る桁数の最大を検出する。
This sixteenth embodiment uses lossy compression coding and lossless coding of its error signal, and in theory, a reproduced digital signal that perfectly matches the original digital signal regardless of the decoder or computer environment. An encoding method, a decoding method, an encoder, and a decoder that can obtain the above are provided, which will be described below with reference to FIG.
In FIG. 41, in the
例えばMPEG-4オーディオ準拠の復号化器では環境によらず、その再生信号の各サンプル値は基準再生信号から±1の範囲内に収まることが保証されている。従って局部復号部14を考慮すると種々の復号器の再生信号の振幅には±2の誤差が含まれる可能性がある。局部復号信号の振幅も値によっては上記±1の誤差により上位の桁数まで2進数表現の値が変わる場合がある。
例えば局部復号信号の振幅が、
8192(2進で0010000000000000)
の場合、基準復号値は
8191(2進で0001111111111111)
または
8193(2進で0010000000000001)
であることが考えられる。
For example, a decoder conforming to MPEG-4 audio is guaranteed to be within a range of ± 1 from the reference reproduction signal, regardless of the environment. Therefore, in consideration of the
For example, the amplitude of the locally decoded signal is
8192 (0010000000000000 in binary)
In the case of
8191 (0001111111111111 in binary)
Or
8193 (0010000000000001 in binary)
It is thought that it is.
従って別の復号化器では
8190(2進で0001111111111110)
から
8194(2進で0010000000000010)
までとなることが考えられる。この場合、環境が変わっても復号値が保証されるのは上位2桁のみとなる。
ここでフレーム又は1以上のサブフレーム内で異なる環境の復号化器でも指定された桁数までは再生(復号)波形の振幅の2進表現が一致する桁数を、精度の最小値と定義し、変動し得る桁数の最大値と呼ぶ。上記の数8192が含まれるときの最大の桁数は14となる。前記数値例では精度の最小値は上位2桁である。負の数の場合は絶対値に対して同様の処理を行う。また復号振幅が−2,−1,0,1,2のいずれかの場合は極性が反転しないようにすべて0とするものと決めておく。変動最大桁数検出部55ではフレーム又は1以上のサブフレームごとに各局部復号信号の各サンプルについて保証される精度を計算し、つまり復号保証される振幅値を計算し、そのフレーム又は1以上のサブフレームごとに保証される精度の最小値、つまり変動し得る桁数の最大値を図42に示すように求める。
So with another decoder
8190 (0001111111111110 in binary)
From
8194 (0010000000000010 in binary)
It is thought that it becomes. In this case, even if the environment changes, the decoded value is guaranteed only in the upper two digits.
Here, the number of digits with which the binary representation of the amplitude of the reproduced (decoded) waveform matches up to the number of digits specified by a decoder in a different environment within a frame or one or more subframes is defined as the minimum value of accuracy. This is called the maximum number of digits that can be changed. The maximum number of digits when the above number 8192 is included is 14. In the numerical example, the minimum accuracy value is the upper two digits. In the case of a negative number, the same processing is performed on the absolute value. In addition, when the decoded amplitude is any of -2, -1, 0, 1, and 2, it is determined that all are set to 0 so that the polarity is not inverted. The variation maximum digit
変動最大桁数検出部55では局部復号信号の各サンプルについてこのように環境によって変動し得る桁数を計算し、フレーム又はフレーム内の1サブフレーム以上ごとのその変動し得る桁数の最大値を検出してこれを桁数符号Igとして出力すると共に、切捨部56において局部復号信号を前記変動の桁数の最大値の桁の数値以下を切り捨てて保証局部復号信号を生成する。保証局部復号信号は図42中の斜線の下側の線11となる。
この保証局部復号信号とフレーム分割部110からのディジタル信号との誤差信号を誤差算出部16で算出する。この誤差信号はフレーム分割部110からのディジタル信号中の図53における保証局部復号信号線11以下の部分の信号となる。この誤差信号を可逆符号化部18で可逆符号化して誤差符号Ineとして出力する。主符号Im、誤差符号Ine、桁数符号Igを結合部315で結合して出力端子170から出力する。
The variation maximum digit
An error signal between the guaranteed local decoded signal and the digital signal from the
復号器20では入力端子200からの入力符号は分離部440でフレームごとに主符号Im、桁数符号Ig、誤差符号Ineに分離される。主符号Imは非可逆復号部60で非可逆復号化されて復号信号が作られる。桁数符号Igは桁数復号部81で復号され、変動の最大桁数が得られる。切捨部82において非可逆復号部60からの復号信号の前記変動の最大桁数以下の部分が切捨てられ保証復号信号として出力される。
誤差符号Ineは可逆復号部21で可逆復号され、誤差信号が再生される。この誤差信号と切捨部82からの保証復号信号とが加算部240で加算され再生ディジタル信号としてフレーム合成部250へ供給される。フレーム合成部250はフレームごとの再生信号を順次結合して出力端子260へ出力する。
In the
The error code Ine is losslessly decoded by the
このように符号化器10で作られた保証局部信号は局部復号部14及び復号化器20で発生する誤りの最悪の合計値に影響されないものとされてあり、復号化器20で作成される保証復号信号は復号化器の保証局部復号信号と理論的には完全に一致したものとなり、従ってその誤差信号が正しく再生されれば理想的には完全に原ディジタル信号と一致した再生ディジタル信号を得ることができる。
第16実施例において桁数符号Igは精度の最小値を符号化したものでもよい。
第17実施例
変動最大桁数検出部55で検出される変動の最大桁数は例えば1サンプルを16ビット表現の場合、3又は4ビット程度となることが多いが、前述した数値例のように、復号保証精度が上位2桁しかないサンプルがあれば、精度の最小値、つまり変動の最大桁数が大きなものとなり、誤差信号の振幅が大きくなり、可逆符号化部18より出力される誤差符号Ineのビット数が多くなり、符号化効率が悪くなる。しかし、このようになるのは前記数値例のように、局部復号信号のサンプル値が上位桁において1か所のみ1で他の桁は全て0となる場合であり、このようなことは少ない。つまりそのような例外のサンプルを除くと、例えば図43Aに示すように精度の最小値は12又は13ビット程度となる。
Thus, the guaranteed local signal generated by the
In the sixteenth embodiment, the digit code Ig may be an encoded minimum value of accuracy.
Seventeenth Embodiment The maximum number of digits of fluctuation detected by the fluctuation maximum digit
この第23実施例ではフレーム又は1以上のサブフレームごとに例外のサンプルを除いた精度の最小値、つまり変動し得る最大の桁数と、その例外サンプルの位置(フレーム又はサブフレーム内の)情報と、その復号保証精度、つまり変動の最大桁数をそれぞれ符号化し、図43Aに示す保証局部復号信号を作る。
例えば図44に図41に対応する部分に同一参照番号を付けて示すように、符号器10では、局部復号部14からの局部復号信号は例外検出部57へ供給され、例外的に大きな変動し得る桁数(例外的に小さい保証精度)を検出し、その桁数(又は精度)とサンプル位置情報とを変動最大桁数検出部55と切捨部56へ供給すると共に、その変動し得る桁数(又は精度)とサンプル位置情報を符号化して例外符号Igeとして出力する。
In the twenty-third embodiment, the minimum value of accuracy excluding exceptional samples for each frame or one or more subframes, that is, the maximum number of digits that can be changed, and the information (in the frame or subframe) of the exceptional samples Then, the decoding guarantee accuracy, that is, the maximum number of digits of fluctuation is encoded, respectively, to produce a guaranteed local decoded signal shown in FIG. 43A.
For example, as shown in FIG. 44 with the same reference numerals assigned to the portions corresponding to FIG. 41, in the
変動最大桁数検出部55では局部復号信号中から例外サンプルを除去し、その除去された局部復号信号の変動し得る最大の桁数(又は精度最小値)を検出し、これを切捨部56へ供給すると共に符号化して桁数符号Igとして出力する。切捨部56では局部復号信号から、例外サンプルについてはその変動し得る桁数の数値以下を切捨て、その他の部分は変動し得る最大桁数以下を切捨てて保証局部復号信号とする。この保証局部復号信号を誤差算出部16へ供給する。また結合部315では主符号Im、誤差符号Ine、桁数符号Igの他、例外符号Igeも合成して出力する。その他は図41の実施例と同様である。
The variation maximum digit
例外サンプルとしては、大部分のサンプルに対し予め決めたビット数だけ精度が小さい(変動し得る桁数が大きい)ものの全て、又は予め決めた数までその精度が小さい(変動し得る桁数が大きい)順に選択し、結合部315で、例えば図43Bに示すようにフレーム(又はサブフレーム)ごとに、例外サンプルの数を示す符号、次に例外サンプルの位置情報及びその変動し得る桁数(精度)を表わす例外符号Igeを順次配列し、最後に桁数符号Igを付けた一塊として出力する。
復号化器20では、分離された例外符号Igeは例外復号部83で復号され、サンプル位置情報と変動し得る桁数が得られる。切捨部82においては、非可逆復号部60からの復号信号中の、例外復号部83からのサンプル位置情報が示すサンプルはその変動最大桁数以下が切り捨てられ、その他のサンプルは、桁数復号部81からの変動し得る最大の桁数以下が切捨てられて、保証局部信号が生成される。その他の処理は図41の実施例と同様である。
Exceptional samples are small in accuracy (predictable number of digits is large) for most samples, or small in precision (predetermined number of digits is large). ) Are selected in order, and in the combining
In the
この第17実施例によれば、符号器10における誤差信号の情報量が少なくなり、それだけ可逆符号化部18における符号化効率が向上する。
上述の図41及び44における可逆符号化部18の具体的構成例としては、例えば前述と同様に図33で示した可逆符号化部18の構成をそのまま使用することができる。またその場合の復号器20における可逆復号化部21の構成は図34に示した可逆復号化部21の構成をそのまま使用できる。あるいは、可逆符号化部18の構成として図35Aに示した可逆符号化部18の構成を使用してもよい。その場合の可逆復号化部21の構成としては図35Bに示す構成をそのまま使用できる。、
前述したこの発明による各実施例の符号化方法及び復号化方法は、いずれもコンピュータで実施可能なプログラムとして記憶媒体に記述し、必要に応じてこれを読み出してコンピュータで実行することができる。
According to the seventeenth embodiment, the information amount of the error signal in the
As a specific configuration example of the
The above-described encoding method and decoding method of each embodiment according to the present invention can be described in a storage medium as a computer-executable program, and can be read and executed by a computer as necessary.
以上説明したように、この発明の第1の観点による符号化方法及び復号方法によれば、フレーム毎に一連のサンプルの対応するビットを連結して等位ビット列を生成し、パケットとして出力するので、伝送路でのパケットの欠落が生じても復号されたフレームのサンプル列の対応するビットの欠落はそれ程大きな品質劣化をもたらさない。
この発明の第2の観点による符号化方法及び復号方法によれば、復号器が保証する復号信号の精度に応じて、フレーム又はサブフレーム毎に復号器の精度に基づき変動する最大の桁数を検出し、局部復号信号中の変動の最大桁数以下を切り捨てて保証局部信号とし、これと原ディジタル信号との誤差信号を可逆符号化しているため、復号において非可逆符号の復号信号から復号した変動の最大桁数以下を切り捨てることにより、符号器の保証局部信号と論理的に一致した保証復号信号を得ることができる。
As described above, according to the encoding method and the decoding method according to the first aspect of the present invention, the corresponding bits of a series of samples are generated for each frame to generate a coordinate bit string and output as a packet. Even if a packet loss occurs in the transmission path, the corresponding bit loss in the sample sequence of the decoded frame does not cause much quality degradation.
According to the encoding method and the decoding method according to the second aspect of the present invention, the maximum number of digits that fluctuates based on the accuracy of the decoder for each frame or subframe according to the accuracy of the decoded signal guaranteed by the decoder. Detected and rounded down the maximum number of digits of fluctuation in the local decoded signal to make a guaranteed local signal, and the error signal between this and the original digital signal is losslessly encoded. By truncating below the maximum number of digits of variation, it is possible to obtain a guaranteed decoded signal that logically matches the guaranteed local signal of the encoder.
以上説明したように、この発明による符号化方法、復号化方法、符号器及び復号器は以下の観点のように表すことができる。
符号化方法
第1の観点による方法:複数のサンプルを含む各フレームごとにディジタル信号を符号化する符号化方法は、以下のステップを含む。
(a) フレームごとのディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成し、
(b) 上記データの組を符号で出力する。
As described above, the encoding method, decoding method, encoder, and decoder according to the present invention can be expressed as follows.
Encoding method Method according to the first aspect: An encoding method for encoding a digital signal for each frame including a plurality of samples includes the following steps.
(a) Generate a plurality of pairs of reversible data of bit strings straddling digital signal samples for each frame at each bit position, or reversible data sets of irreversible data and error signals derived from the irreversible data. ,
(b) The above data set is output as a code.
第2の観点の符号化方法:第1の観点記載の符号化方法において、上記ステップ(a) は可逆符号化する前に予め各サンプルの振幅を極性符号と絶対値の2進表現に変換するステップを含むことを特徴とする符号化方法。
第3の観点の符号化方法:第1の観点記載の符号化方法において、上記ステップ(b)は上記可逆符号を格納し、上記ヘッダ情報がつけられたパケットを生成し出力するステップを含む。
第4の観点の符号化方法:第1の観点記載の符号化方法において、上記ステップ(b)は上記ビット列に極性符号および絶対値に降順に高い優先度をつけるステップを含む。
Encoding method according to the second aspect: in the encoding method according to the first aspect, the step (a) converts the amplitude of each sample into a binary representation of a polar code and an absolute value in advance before lossless encoding. An encoding method comprising steps.
Encoding method according to the third aspect: in the encoding method according to the first aspect, the step (b) includes a step of storing the lossless code and generating and outputting a packet with the header information.
Encoding method according to the fourth aspect: In the encoding method according to the first aspect, the step (b) includes a step of assigning a high priority to the bit string in descending order from the polarity code and the absolute value.
第5の観点の符号化方法:第1の観点記載の符号化方法において、上記ステップ(a) は、
(a-1) 原信号を非可逆符号化して非可逆圧縮情報と局部復号信号を生成するステップと、
(a-2)上記局部復号信号と上記原信号との誤差信号を上記ディジタル信号として非可逆符号化するステップ、
とを含み、
上記ステップ(b)は、上記可逆符号と共に上記非可逆圧縮情報を出力する。
Encoding method according to the fifth aspect: In the encoding method according to the first aspect, the step (a) includes:
(a-1) irreversibly encoding the original signal to generate lossy compressed information and a local decoded signal;
(a-2) irreversibly encoding an error signal between the local decoded signal and the original signal as the digital signal;
Including
The step (b) outputs the lossy compression information together with the lossless code.
第6の観点の符号化方法:第1の観点記載の符号化方法において、上記ディジタル信号のスペクトル包絡を表現するパラメータを求め、そのパラメータを符号化して生成した符号を補助情報として上記可逆符号と共に出力するステップを含む。
第7の観点の符号化方法:第1の観点記載の符号化方法において、上記ステップ(a) は、
(a-1) 各フレーム内のディジタル信号の振幅の絶対値の最大値を表現する桁数を有効桁数として決定するステップと、
(a-2) フレームごとにその有効桁数以内の部分についてそれぞれのサンプルの上記対応する少なくとも1桁のビットをそのフレームにわたって時間方向に並んだ少なくともひとつの上記ビット列を上記可逆符号の一部の伝送記録単位データとして生成するステップ、
とを含み、
上記ステップ(b) は、フレームごとに上記有効桁数を上記可逆符号と共に出力するステップを含む。
Encoding method according to sixth aspect: In the encoding method according to the first aspect, a parameter expressing the spectral envelope of the digital signal is obtained, and the code generated by encoding the parameter is used as auxiliary information together with the lossless code. Output step.
Encoding method according to seventh aspect: In the encoding method according to the first aspect, the step (a) includes
(a-1) determining the number of digits representing the maximum absolute value of the amplitude of the digital signal in each frame as the number of significant digits;
(a-2) At least one bit sequence in which at least one corresponding bit of each sample is arranged in the time direction over the frame for a portion within the effective number of digits for each frame is a part of the lossless code. Generating as transmission record unit data;
Including
The step (b) includes a step of outputting the effective number of digits together with the lossless code for each frame.
第8の観点の符号化方法:第7の観点記載の符号化方法において、上記ステップ(b) は、上記有効桁数を補助情報として又はそのフレームの何れかのパケット内に格納して出力するステップを含む。
第9の観点の符号化方法:第6の観点記載の符号化方法において、上記ステップ(a) 、
(a-1)上記パラメータとして線形予測係数と現在の予測値を過去のディジタル信号から求めるステップと、
(a-2) その予測値を現在のサンプルから差し引いて予測誤差を求めるステップ、
とを含み、
上記ステップ(b) は、上記線形予測係数を符号化して補助情報として上記可逆符号と共に出力する。
Encoding method according to the eighth aspect: in the encoding method according to the seventh aspect, the step (b) stores and outputs the number of significant digits as auxiliary information or in any packet of the frame Includes steps.
Encoding method according to ninth aspect: in the encoding method according to the sixth aspect, the step (a),
(a-1) obtaining a linear prediction coefficient and a current prediction value from the past digital signal as the above parameters;
(a-2) subtracting the predicted value from the current sample to obtain a prediction error;
Including
In step (b), the linear prediction coefficient is encoded and output as auxiliary information together with the lossless code.
第10の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) 入力信号をフレーム毎に聴覚特性を考慮した非可逆符号化して非可逆符号を生成し局部復号信号を生成するステップと、
(0-2) その局部復号信号を、上記入力信号との誤差が小さくなるように変形して変形局部復号信号を生成するステップと、
(0-3) 上記入力信号と上記変形局部復号信号との誤差信号を上記ディジタル信号として生成するステップとを含む。
Encoding method according to the tenth aspect: The encoding method according to the first aspect further includes:
(0-1) generating an irreversible code by irreversibly encoding an input signal in consideration of auditory characteristics for each frame, and generating a local decoded signal;
(0-2) transforming the local decoded signal so as to reduce an error from the input signal, and generating a modified local decoded signal;
(0-3) generating an error signal between the input signal and the modified local decoded signal as the digital signal.
第11の観点の符号化方法:第10の観点記載の符号化方法において、
上記ステップ(0-2) は、上記ディジタル信号と上記局部復号信号との相互相関成分を含む変形パラメータを計算し、その変形パラメータ符号を出力するステップと、
上記変形パラメータを上記局部復号信号に対し、乗算又は畳み込み上記変形局部復号信号を作るステップとを含む。
第12の観点の符号化方法:第10の観点記載の符号化方法において、上記ステップ(0-2) は、
(0-2-1) 上記局部復号信号に対し変形パラメータを乗算し、又は複数サンプルを変形パラメータで結合して上記変形局部復号信号を作るステップと、
(0-2-2) その上記誤差信号のエネルギーが小さくなるように、上記変形パラメータをフレームごとに生成するステップとを含む。
Encoding method according to the eleventh aspect: In the encoding method according to the tenth aspect,
The step (0-2) calculates a deformation parameter including a cross-correlation component between the digital signal and the local decoded signal, and outputs the deformation parameter code;
Multiplying or convolving the local decoded signal with the modified parameter to produce the modified local decoded signal.
Encoding method according to the twelfth aspect: in the encoding method according to the tenth aspect, the step (0-2) includes:
(0-2-1) multiplying the local decoded signal by a deformation parameter, or combining a plurality of samples with a deformation parameter to create the modified local decoded signal;
(0-2-2) generating the deformation parameter for each frame so that the energy of the error signal is reduced.
第13の観点の符号化方法:第10の観点記載の符号化方法において、上記ステップ(0-2) は、
(0-2-1) 上記局部復号信号の上記ディジタル信号に対する誤差を算出して誤差信号を求めるステップと、
(0-2-2) その誤差信号を、量子化誤差が最小になるように符号化して誤差最小化符号を生成し、その誤差最小化符号に対する第2局部復号信号を生成するステップと、
(0-2-3) その第2局部復号信号と上記局部復号信号を加算して上記変形局部信号を得るステップとを含む。
Encoding method according to the thirteenth aspect: in the encoding method according to the tenth aspect, the step (0-2) is:
(0-2-1) calculating an error of the locally decoded signal with respect to the digital signal to obtain an error signal;
(0-2-2) encoding the error signal so that the quantization error is minimized to generate an error minimized code, and generating a second local decoded signal for the error minimized code;
(0-2-3) adding the second local decoded signal and the local decoded signal to obtain the modified local signal.
第14の観点の符号化方法:第10の観点記載の符号化方法において、上記ステップ(0-2) は、
(0-2-1) 上記ディジタル信号を、量子化誤差が最小になるように符号化してその誤差最小化符号を生成し、その誤差最小化符号にたいする第2局部信号を生成するステップと、
(0-2-2) その第2局部信号と上記局部信号とを前者を重視した荷重平均をとって、上記変形局部信号を求めるステップとを含む.
第15の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) 入力信号をフレーム毎に、聴覚特性を考慮した非可逆圧縮符号化して第1非可逆符号を出力するステップと、
(0-2) 上記ディジタル信号を非可逆圧縮符号化して第2非可逆符号を生成しその第2非可逆符号に対する局部信号を生成するステップと、
(0-3) その局部信号と上記ディジタル信号との誤差信号を上記ディジタル信号として求めるステップ、
とを含む。
Encoding method according to the fourteenth aspect: in the encoding method according to the tenth aspect, the step (0-2) is:
(0-2-1) encoding the digital signal so that a quantization error is minimized to generate an error minimizing code, and generating a second local signal for the error minimizing code;
(0-2-2) The second local signal and the local signal are subjected to a weighted average with emphasis on the former to obtain the deformed local signal.
Encoding method according to the fifteenth aspect: The encoding method according to the first aspect further includes:
(0-1) a step of irreversibly compressing the input signal for each frame in consideration of auditory characteristics and outputting a first irreversible code;
(0-2) irreversibly compression-encoding the digital signal to generate a second irreversible code and generating a local signal for the second irreversible code;
(0-3) obtaining an error signal between the local signal and the digital signal as the digital signal;
Including.
第16の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) 入力信号をフレーム毎に量子化誤差が最小となるように圧縮符号化して誤差最小化符号を生成し、その誤差最小化符号に対する第1局部信号を生成するステップと、
(0-2) その第1局部信号の上記入力信号に対する誤差信号を上記ディジタル信号として生成するステップと、
(0-3) 上記誤差信号を聴覚特性を考慮した非可逆圧縮符号化して可逆符号を生成するステップとを含む。
Encoding method according to the sixteenth aspect: The encoding method according to the first aspect further comprises:
(0-1) compressing and encoding the input signal for each frame so as to minimize the quantization error to generate an error minimizing code, and generating a first local signal for the error minimizing code;
(0-2) generating an error signal as the digital signal with respect to the input signal of the first local signal;
(0-3) generating a lossless code by irreversibly compressing the error signal in consideration of auditory characteristics.
第17の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) Mチャネルの入力信号をNチャネルの信号に混合するステップと、Mは2以上の整数であり、NはMより小さい1以上の整数であり、その主符号に対するNチャネルの局部復号信号を生成するステップと、
(0-2) このNチャネルの混合信号を符号化して主符号を生成し、
(0-3) このNチャネル局部復号信号をMチャネルの局部復号信号にチャネル拡大するステップと、
(0-4) 各上記Mチャネル局部復号信号とそれに対応する上記Mチャネル入力信号との誤差信号を上記ディジタル信号として求めるステップ、
とを含み、
上記ステップ(b) は、上記主符号を上記可逆符号と共に出力するステップを含む。
Encoding method according to the seventeenth aspect: The encoding method according to the first aspect further comprises:
(0-1) Mixing an M-channel input signal into an N-channel signal, and M is an integer of 2 or more, N is an integer of 1 or more smaller than M, and the N-channel local part for the main code Generating a decoded signal; and
(0-2) The N-channel mixed signal is encoded to generate a main code,
(0-3) expanding the N-channel local decoded signal to an M-channel local decoded signal;
(0-4) obtaining an error signal between each M channel local decoded signal and the corresponding M channel input signal as the digital signal;
Including
The step (b) includes a step of outputting the main code together with the lossless code.
第18の観点の符号化方法:第16の観点記載の符号化方法は更に、
(0-1) 上記Nチャネルの混合信号をNより少ない1以上のLチャネルの混合信号に混合するステップと、
(0-2) そのLチャネルの混合信号を符号化して主符号を生成しその主符号に対するチャネル局部信号を生成するステップと、
(0-3) そのLチャネル局部復号信号をNチャネルの局部復号信号にチャネル拡大するステップと、
(0-4) そのNチャネルの局部復号信号と上記Nチャネルの混合信号との差を第1誤差信号として生成するステップと、
(0-5) 上記第1誤差信号を符号化して、従符号を生成し、その従符号に対するNチャネルの局部誤差信号を生成するステップと、
(0-6) そのNチャネルの局部復号信号と上記Nチャネルの局部復号誤差信号とを加算してNチャネル加算局部信号を生成するステップと、
(0-7) このNチャネル加算局部復号信号をチャネル拡大して、Mチャネルの加算局部信号を生成するステップと、
(0-8) このMチャネル加算局部信号と上記Mチャネルディジタル信号との差を第2誤差信号として生成するステップ、
とを含み、
上記ステップ(b) は、上記主符号と共に、上記従符号を出力する。
Encoding method according to the eighteenth aspect: The encoding method according to the sixteenth aspect further comprises:
(0-1) mixing the N-channel mixed signal into one or more L-channel mixed signals less than N;
(0-2) encoding the mixed signal of the L channel to generate a main code and generating a channel local signal for the main code;
(0-3) expanding the L channel local decoded signal to an N channel local decoded signal;
(0-4) generating a difference between the N-channel local decoded signal and the N-channel mixed signal as a first error signal;
(0-5) encoding the first error signal to generate a slave code, and generating an N-channel local error signal for the slave code;
(0-6) adding the N-channel local decoded signal and the N-channel local decoded error signal to generate an N-channel added local signal;
(0-7) Channel expanding the N channel addition local decoded signal to generate an M channel addition local signal;
(0-8) generating a difference between the M channel addition local signal and the M channel digital signal as a second error signal;
Including
The step (b) outputs the sub code together with the main code.
第19の観点の符号化方法:第1の観点記載の符号化方法は更に、
Mチャネルの入力信号をチャネル間直交変換して直交変換信号を上記ディジタル信号として含み、Mは2以上の整数であり、上記Mチャネルのそれぞれに対して上記ステップ(a)、(b)を実行する。
第20の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) Mチャネルの入力信号をチャネル間直交変換して直交変換信号を生成するステップと、Mは2以上の整数であり、
(0-2) その直交変換信号の少なくとも一部の信号を符号化して、主符号を生成し、その主符号に対する局部復号信号を生成するステップと、
(0-3) その局部復号信号をチャネル間直交逆変換して、Mチャネル局部復号信号を生成するステップと、
(0-4) 各上記Mチャネル局部復号信号とそれに対応する上記Mチャネル入力信号との誤差信号を上記ディジタル信号としてを求めるステップ、
とを含み、
上記ステップ(b) は、上記従符号を上記主符号と共に出力する。
Encoding method according to the nineteenth aspect: The encoding method according to the first aspect further comprises:
An M-channel input signal is orthogonally transformed between channels to include an orthogonally transformed signal as the digital signal, M is an integer of 2 or more, and the above steps (a) and (b) are executed for each of the M channels. To do.
Encoding method according to twentieth aspect: The encoding method according to the first aspect further includes:
(0-1) a step of orthogonally transforming an input signal of M channels to generate an orthogonally transformed signal, and M is an integer of 2 or more,
(0-2) encoding at least a part of the orthogonal transform signal to generate a main code, and generating a local decoded signal for the main code;
(0-3) inter-channel orthogonal inverse transform of the local decoded signal to generate an M channel local decoded signal;
(0-4) obtaining an error signal between each M channel local decoded signal and the corresponding M channel input signal as the digital signal;
Including
The step (b) outputs the sub code together with the main code.
第21の観点の符号化方法:第1の観点記載の符号化方法は更に、
(0-1) Mチャネルの入力信号をチャネル間直交変換して直交変換信号を生成するステップと、Mは2以上の整数であり、
(0-2) その直交変換信号の少なくとも一部の信号を符号化して、主符号を生成し、その主符号に対する局部復号信号を生成するステップと、
(0-3) その各局部復号信号とそれに対応する上記直交変換信号との差を誤差信号として求めるステップ、
とを含み、
上記ステップ(b) は上記主符号を上記可逆符号と共に出力する。
Encoding method according to the twenty-first aspect: The encoding method according to the first aspect further includes:
(0-1) a step of orthogonally transforming an input signal of M channels to generate an orthogonally transformed signal, and M is an integer of 2 or more,
(0-2) encoding at least a part of the orthogonal transform signal to generate a main code, and generating a local decoded signal for the main code;
(0-3) obtaining a difference between each locally decoded signal and the corresponding orthogonal transform signal as an error signal;
Including
The step (b) outputs the main code together with the lossless code.
第22の観点の符号化方法:第1の観点記載の符号化方法において、更に、
(a-1)ディジタル信号を非可逆符号化して、非可逆符号を生成し、その非可逆符号に対する局部復号信号を生成し、
(a-2)フレーム又はフレーム内の1以上のサブフレームごとに上記非可逆符号に対する復号信号が変動し得る最大の桁数を上記復号信号から検出し、その変動の最大桁数を示す桁数符号を出力し、
(a-3)上記局部復号信号をディジタル表現における上記変動の最大桁数以下のアブ文を切り捨てて精度保証局部復号信号を生成し、
(a-4)その精度保証局部復号信号と上記ディジタル信号との誤差信号を作成し、
(a-5)その誤差信号を可逆符号化して可逆符号を出力する。
復号化方法
第23の観点の復号化方法:フレームごとにディジタル信号のサンプルを再生する復号化方法であり、
(a) 入力符号を復号してディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成するステップと、
(b) 上記複数の組のデータに基づいてディジタル信号を再生するステップ、
とを含む。
Encoding method according to the twenty-second aspect: In the encoding method according to the first aspect,
(a-1) lossy encoding of a digital signal, generating an irreversible code, generating a local decoded signal for the irreversible code,
(a-2) The maximum number of digits in which the decoded signal for the lossy code can vary for each frame or one or more subframes in the frame is detected from the decoded signal, and the number of digits indicating the maximum number of variations Output the sign,
(a-3) The above-mentioned local decoded signal is generated by rounding off the ab sentence below the maximum number of digits of the fluctuation in the digital representation,
(a-4) Create an error signal between the accuracy-determined local decoded signal and the digital signal,
(a-5) The error signal is losslessly encoded and a lossless code is output.
A decoding method according to the twenty-third aspect: a decoding method for reproducing a sample of a digital signal for each frame,
(a) Multiple sets of reversible data of bit strings obtained by decoding input codes and straddling digital signal samples at their respective bit positions, or reversible data sets of error signals derived from irreversible data and the irreversible data A step of generating
(b) regenerating a digital signal based on the plurality of sets of data;
Including.
第24の観点の復号化方法:第23の観点記載の復号化方法において、
上記ステップ(b) は、上記サンプル列を、極性符号と絶対値の2進表現から2の補数表現に変換するステップを含む。
第25の観点の復号化方法:第23の観点記載の復号化方法において、
上記ステップ(b) は、上記ディジタル信号を平滑化して上記ディジタル信号するステップを含む。
第26の観点の復号化方法:第23の観点の復号化方法において、上記ステップ(b) は、補助情報を復号してスペクトル包絡を求め、上記ディジタル信号のスペクトル包絡が上記復号スペクトル包絡に近づくように、上記ディジタル信号を補正するステップを含む。
Decoding method of the twenty-fourth aspect: In the decoding method of the twenty-third aspect,
The step (b) includes the step of converting the sample string from a binary representation of a polarity code and an absolute value to a two's complement representation.
A decoding method according to a twenty-fifth aspect: In the decoding method according to the twenty-third aspect,
The step (b) includes a step of smoothing the digital signal and performing the digital signal.
Decoding method of the twenty-sixth aspect: In the decoding method of the twenty-third aspect, in step (b), the auxiliary information is decoded to obtain a spectral envelope, and the spectral envelope of the digital signal approaches the decoded spectral envelope Thus, the step of correcting the digital signal is included.
第27の観点の復号化方法:第26の観点の復号化方法において、上記ステップ(b) は、
(b-1) 上記欠落又は誤りビットに対し暫定サンプルを代入するステップと、
(b-2) 上記暫定サンプルのスペクトル包絡を計算するステップと、
(b-3) 上記計算したスペクトル包絡又はその変形スペクトル包絡の特性により上記暫定的なサンプルのスペクトル包絡を平坦化するステップと、
(b-4) 上記平坦化されたスペクトル包絡に対し、上記復号スペクトル包絡又はその変形スペクトル包絡を使ってサンプルを再構成するステップ、
とを含む。
Decoding method of the twenty-seventh aspect: In the decoding method of the twenty-sixth aspect, the step (b)
(b-1) substituting provisional samples for the missing or error bits;
(b-2) calculating a spectral envelope of the provisional sample;
(b-3) flattening the spectral envelope of the provisional sample according to the characteristics of the calculated spectral envelope or its modified spectral envelope;
(b-4) reconstructing samples using the decoded spectral envelope or a modified spectral envelope thereof with respect to the flattened spectral envelope;
Including.
第28の観点の復号化方法:第26の観点の復号化方法において、上記ステップ(b) は、
(b-1) 上記欠落又は誤りビットに対し暫定的なサンプルを代入するステップと、
(b-2) 上記暫定サンプルのスペクトル包絡を計算するステップと、
(b-3) 上記計算したスペクトル包絡またはその変形スペクトル包絡の逆特性により上記復号スペクトル包絡またはその変形スペクトル包絡を組み合わせたひとつのスペクトル包絡を計算するステップと、
(b-4) 上記ひとつのスペクトル包絡を用いて上記暫定的なサンプル列を再構成するステップと、
(b-5) 上記再構成されたサンプル列中の誤った補正を修正するステップ、
とを含むことを特徴とする復号化方法。
The decoding method according to the twenty-eighth aspect: in the decoding method according to the twenty-sixth aspect, the step (b) comprises:
(b-1) substituting a temporary sample for the missing or erroneous bit;
(b-2) calculating a spectral envelope of the provisional sample;
(b-3) calculating one spectral envelope combining the decoded spectral envelope or the modified spectral envelope according to the calculated spectral envelope or the inverse characteristic of the modified spectral envelope;
(b-4) reconstructing the temporary sample sequence using the one spectral envelope;
(b-5) correcting an erroneous correction in the reconstructed sample sequence;
The decoding method characterized by including these.
第29の観点の復号化方法:第27の観点記載の復号化方法において、上記ステップ(b-3) は、計算したスペクトル包絡を線形予測ケプストラム係数Caに変換し、上記復号スペクトル包絡を線形予測ケプストラム係数Cbに変換し、又は上記補助情報に対する復号スペクトル包絡を使って、これら線形予測ケプストラム係数の差Cb-Caを求めて、上記ひとつのスペクトル包絡を得るステップを含む。
第30の観点の復号化方法: 第27、28又は29の観点記載のいずれかの復号化方法において、更に、
(b-5) 上記暫定的なサンプルのスペクトル包絡と上記復号スペクトル包絡との誤差が所定値以内か否かを調べ、所定値以内であれば、その時の暫定的なサンプルを補正されたサンプルとし、所定値以内でなければ、上記ステップ(b-2)、(b-3)、(b-4) を繰り返す。
The decoding method according to the twenty-ninth aspect: in the decoding method according to the twenty-seventh aspect, the step (b-3) converts the calculated spectral envelope into a linear prediction cepstrum coefficient Ca and linearly predicts the decoded spectral envelope. A step of obtaining the one spectral envelope by obtaining a difference Cb-Ca of these linear prediction cepstrum coefficients by converting into the cepstrum coefficient Cb or using the decoded spectral envelope for the auxiliary information is included.
The decoding method according to the thirtieth aspect: In any one of the decoding methods according to the twenty-seventh, twenty-eighth or twenty-ninth aspect,
(b-5) Check whether the error between the spectrum envelope of the tentative sample and the decoded spectrum envelope is within a predetermined value. If it is within the predetermined value, the tentative sample at that time is regarded as a corrected sample. If not within the predetermined value, the above steps (b-2), (b-3) and (b-4) are repeated.
第31の観点の復号化方法:第23の観点記載の復号化方法において、上記ステップ(a) は、入力された非可逆符号化情報を非可逆復号化し、その非可逆復号化信号に上記ディジタル信号を加算するステップを含む。
第32の観点の復号化方法:第23の観点記載の復号化方法において、上記ステップ(a) は、上記可逆符号の伝送記録単位データを復号し、ヘッダ情報に基づき上記1フレームの少なくとも1つのビット位置の少なくとも1つの復号ビット列を生成するステップを含み、上記ステップ(b) は、上記伝送記録単位データ中の欠落又は誤りビットを検出し、各フレーム毎に上記サンプル列に対し、入力された有効桁数に応じた桁合せを行うステップを含む。
Decoding method according to the thirty-first aspect: in the decoding method according to the twenty-third aspect, the step (a) comprises irreversibly decoding the input irreversible encoded information, Adding the signals.
Decoding method according to the thirty-second aspect: in the decoding method according to the twenty-third aspect, the step (a) includes decoding the transmission record unit data of the lossless code and at least one of the one frame based on header information Generating at least one decoded bit string of bit positions, wherein the step (b) detects missing or error bits in the transmission record unit data, and is input to the sample string for each frame. A step of performing alignment according to the number of significant digits.
第33の観点の復号化方法:第32の観点記載の復号化方法において、上記ステップ(b) は、現在のフレームの復号有効桁数が一つ前のフレームの復号有効桁数より大きければ、一つ前のフレームのサンプルの振幅値を縮小して、一つ前のフレームの有効桁数を現在のフレームの有効桁数にそろえた後、補正処理を行い、
現在のフレームの有効桁数が一つ前のフレームの有効桁数より小さければ、一つ前のフレームのサンプルの振幅値を拡大して、一つ前のフレームの有効桁数を現在のフレームの有効桁数にそろえた後、補正処理を行う。
Decoding method according to the thirty-third aspect: in the decoding method according to the thirty-second aspect, if the step (b) is greater than the number of significant decoding digits of the previous frame, After reducing the amplitude value of the sample of the previous frame and aligning the number of significant digits of the previous frame with the number of significant digits of the current frame, perform correction processing,
If the number of significant digits of the current frame is smaller than the number of significant digits of the previous frame, the amplitude value of the sample of the previous frame is expanded and the number of significant digits of the previous frame is After aligning with the effective number of digits, correction processing is performed.
第34の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルは予測誤差信号のサンプルであり、更に
(c) 欠落又は誤りデータに対し、予測誤差信号のスペクトル包絡に基づき、上記予測誤差信号を補正するステップ、
(d) 入力補助情報を復号して線形予測情報を得るステップと、
(e) 上記線形予測に基づいて再生原信号を上記予測誤差信号信号と上記再生原信号の過去のサンプルとから合成するステップ、
とを含む。
A decoding method according to a thirty-fourth aspect: in the decoding method according to the twenty-third aspect, the sample is a sample of a prediction error signal;
(c) correcting the prediction error signal based on the spectral envelope of the prediction error signal for missing or erroneous data;
(d) decoding input auxiliary information to obtain linear prediction information;
(e) synthesizing a reproduction original signal from the prediction error signal signal and a past sample of the reproduction original signal based on the linear prediction;
Including.
第35の観点の復号化方法:第34の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 上記欠落又は誤りビットに暫定サンプルを代入するステップと、
(c-2) 上記暫定サンプルのスペクトル包絡を形質するステップと、
(c-3) 上記スペクトル包絡の平坦度を求め、その平坦度が所定値以内であれば、上記暫定サンプルを上記補正した予測誤差信号とするステップと、
(c-4) 上記平坦度が所定値以内でなければ、上記暫定サンプルを、上記スペクトル包絡又はその変形スペクトル包絡により規格化して平坦化信号を得るステップと、
(c-5) 上記規格化した信号を上記暫定サンプルとして使用して上記ステップ(c-1) 〜(c-4) を繰り返す。
Decoding method according to the thirty-fifth aspect: in the decoding method according to the thirty-fourth aspect, the step (c) comprises:
(c-1) substituting a provisional sample for the missing or erroneous bit;
(c-2) transcribing the spectral envelope of the provisional sample;
(c-3) determining the flatness of the spectral envelope, and if the flatness is within a predetermined value, the provisional sample as the corrected prediction error signal;
(c-4) If the flatness is not within a predetermined value, the provisional sample is normalized by the spectral envelope or its modified spectral envelope to obtain a flattened signal;
(c-5) The above steps (c-1) to (c-4) are repeated using the normalized signal as the provisional sample.
第36の観点の復号化方法:第34の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 上記欠落又は誤りビットに暫定サンプルを代入するステップと、
(c-2) 上記暫定サンプルに対し、上記復号線形予測係数を用いてフィルタ処理し合成信号を生成するステップと、
(c-3) 上記合成信号のスペクトル包絡を計算するステップと、
(c-4) 上記計算したスペクトル包絡又はその変形スペクトル包絡により上記暫定誤差信号を規格化してスペクトルが平坦化された信号を作るステップと、
(c-5) 上記スペクトルが平坦化された信号に対し、上記復号線形予測係数を用いてフィルタ処理して予測誤差波形を再構成するステップ、
とを含む。
Decoding method according to thirty-sixth aspect: in the decoding method according to the thirty-fourth aspect, the step (c) comprises
(c-1) substituting a provisional sample for the missing or erroneous bit;
(c-2) filtering the temporary sample using the decoded linear prediction coefficient to generate a synthesized signal;
(c-3) calculating a spectral envelope of the composite signal;
(c-4) normalizing the provisional error signal with the calculated spectrum envelope or its modified spectrum envelope to create a flattened spectrum signal;
(c-5) reconfiguring a prediction error waveform by filtering the signal having the flattened spectrum using the decoded linear prediction coefficient;
Including.
第37の観点の復号化方法:第34の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 上記欠落又は誤りビットに暫定サンプルを代入するステップと、
(c-2) 上記暫定サンプルに対し、上記復号線形予測係数を用いてフィルタ処理し合成信号を生成するステップと、
(c-3) 上記合成信号の線形予測係数を計算するステップと、
(c-4) 上記計算した線形予測係数またはその帯域を拡大した線形予測係数の逆特性と、上記復号線形予測係数またはその帯域を拡大した線形予測係数を組み合わせた線形予測係数を計算するステップと、
(c-5) 上記組み合わせた線形予測係数を用いて上記暫定サンプルをフィルタ処理して予測誤差信号を生成するステップ、
とを含む。
A decoding method according to a thirty-seventh aspect: in the decoding method according to the thirty-fourth aspect, the step (c) comprises:
(c-1) substituting a provisional sample for the missing or erroneous bit;
(c-2) filtering the temporary sample using the decoded linear prediction coefficient to generate a synthesized signal;
(c-3) calculating a linear prediction coefficient of the synthesized signal;
(c-4) calculating a linear prediction coefficient that combines the inverse characteristic of the calculated linear prediction coefficient or the linear prediction coefficient whose band is expanded, and the decoded linear prediction coefficient or the linear prediction coefficient whose band is expanded; ,
(c-5) generating a prediction error signal by filtering the provisional sample using the combined linear prediction coefficient;
Including.
第38の観点の復号化方法:第36または37の観点記載の復号化方法において、更に上記計算した線形予測係数と上記復号線形予測係数との誤差が所定値以内か否かを調べ、所定値以内であれば、その時の暫定サンプルを補正された予測誤差波形とし、所定値以内でなければ、上記合成信号を上記暫定サンプルとして使用して上記ステップ(c-1) 〜(c-5) を繰り返す。
第39の観点の復号化方法:第31の観点記載の復号化方法において、更に以下のステップを含む:
(c) 上記局部復号信号と上記ディジタル信号との誤差が小さくなるように上記局部復号信号を変形して変形信号を生成するステップと、
(d) その変形信号と上記誤差信号とを合成して、上記再生信号を更新するステップ、
とを含む
第40の観点の復号化方法:第39の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 変形パラメータ符号を復号して変形パラメータを得るステップと、
(c-2) その復号された変形パラメータを上記復号信号に対し乗算又は畳み込みを行って上記変形復号信号を得るステップ、
とを含む。
The decoding method according to the thirty-eighth aspect: in the decoding method according to the thirty-sixth or thirty-seventh aspect, further checks whether or not an error between the calculated linear prediction coefficient and the decoded linear prediction coefficient is within a predetermined value. If it is within the range, the provisional sample at that time is used as a corrected prediction error waveform, and if it is not within the predetermined value, the synthesized signal is used as the provisional sample and the above steps (c-1) to (c-5) are performed. repeat.
The decoding method according to the thirty-ninth aspect: the decoding method according to the thirty-first aspect, further comprising the following steps:
(c) modifying the local decoded signal so as to reduce an error between the local decoded signal and the digital signal, and generating a modified signal;
(d) synthesizing the deformation signal and the error signal to update the reproduction signal;
A decoding method according to a 40th aspect of the invention, comprising: a decoding method according to the 39th aspect, wherein the step (c) comprises:
(c-1) decoding a deformation parameter code to obtain a deformation parameter;
(c-2) multiplying or decoding the decoded modified parameter with respect to the decoded signal to obtain the modified decoded signal;
Including.
第41の観点の復号化方法:第39の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 上記局部復号信号に対し、少なくとも1つの変形パラメータで乗算又は畳み込み演算して上記変形信号を生成するステップと、
(c-2) その変形信号と上記再生信号との誤差信号のエネルギーが小さくなるように、上記変形パラメータを生成するステップ、
とを含む。
The decoding method according to the forty-first aspect: in the decoding method according to the thirty-ninth aspect, the step (c) comprises:
(c-1) generating the modified signal by multiplying or convolving the local decoded signal with at least one modified parameter;
(c-2) generating the deformation parameter so that the energy of the error signal between the deformation signal and the reproduction signal is reduced;
Including.
第42の観点の復号化方法:第23の観点記載の復号化方法において、更に、
(c) 入力誤差最小化符号を非可逆復号して第1局部復号信号を再生するステップと、
(d) 上記ディジタル信号と上記第1局部復号信号を加算して第1ディジタル信号を再生するステップと、
(e) 聴覚特性が考慮された第2非可逆符号を非可逆復号して第2局部復号信号を再生するステップと、
(f) 上記第1ディジタル信号又は上記第2ディジタルを出力するステップ、
とを含む。
The decoding method according to the forty-second aspect: the decoding method according to the twenty-third aspect, further comprising:
(c) irreversibly decoding the input error minimizing code to reproduce the first local decoded signal;
(d) adding the digital signal and the first local decoded signal to reproduce the first digital signal;
(e) irreversibly decoding a second irreversible code in which auditory characteristics are taken into account to reproduce a second local decoded signal;
(f) outputting the first digital signal or the second digital;
Including.
第43の観点の復号化方法:第39の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 誤差最小化符号を復号して第2局部復号信号を得るステップと、
(c-2)その第2局部復号信号を上記局部復号信号に加算して上記変形信号を生成するステップ、
とを含む。
第44の観点の復号化方法:第39の観点記載の復号化方法において、上記ステップ(c) は、
(c-1) 誤差最小化符号を復号して第2局部復号信号を作るステップと、
(c-2) その第2局部復号信号と上記局部復号信号とを前者に重視して荷重平均を行って上記変形復号信号を作るステップ、
とを含む。
Decoding method according to the 43rd aspect: in the decoding method according to the 39th aspect, the step (c) comprises:
(c-1) decoding the error minimizing code to obtain a second local decoded signal;
(c-2) adding the second local decoded signal to the local decoded signal to generate the modified signal;
Including.
Decoding method of the forty-fourth aspect: in the decoding method according to the thirty-ninth aspect,
(c-1) decoding the error minimizing code to produce a second local decoded signal;
(c-2) A step of weighted averaging the second local decoded signal and the local decoded signal with emphasis on the former to produce the modified decoded signal;
Including.
第45の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルはMチャネルの誤差信号のサンプルであり、Mは2以上の整数であり、上記復号化方法は更に、
(c) 入力主符号を復号してNチャネルの復号信号を求めるステップと、NはMより小さい1以上の整数であり、、
(d) そのNチャネル復号信号をMチャネルの復号信号にチャネル拡大するステップと、
(e) 上記Mチャネル誤差信号と上記Mチャネル復号信号とを加算してMチャネルディジタル信号を再生するステップ、
とを含む。
Decoding method according to the 45th aspect: in the decoding method according to the 23rd aspect, the sample is a sample of an error signal of M channels, M is an integer of 2 or more, and the decoding method further includes:
(c) decoding an input main code to obtain an N-channel decoded signal; N is an integer greater than or equal to 1 less than M;
(d) expanding the N-channel decoded signal to an M-channel decoded signal;
(e) adding the M channel error signal and the M channel decoded signal to reproduce an M channel digital signal;
Including.
第46の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルはMチャネルの誤差信号のサンプルであり、Mは2以上の整数であり、上記復号化方法は更に、
(c) 入力主符号を復号してLチャネルの復号信号を得るステップと、Lは1以上の整数であり、
(d) そのLチャネル復号信号をチャネル拡大してNチャネルの復号主信号を生成するステップと、NはLより大きくMより小さい整数であり、
(e) 従符号を復号してNチャネル復号従信号を得るステップと、
(f) このNチャネル復号主信号と上記Nチャネル復号従信号とを加算してNチャネル加算信号を生成するステップと、
(h) そのNチャネル加算信号をチャネル拡大してMチャネルの加算信号を生成するステップと、
(i) 上記Mチャネルの誤差信号と上記Mチャネル加算信号とを加算してMチャネルの再生ディジタル信号を得るステップ、
とを含む。
A decoding method according to a 46th aspect: in the decoding method according to the 23rd aspect, the sample is a sample of an error signal of M channels, M is an integer of 2 or more, and the decoding method further includes:
(c) decoding an input main code to obtain an L channel decoded signal, and L is an integer of 1 or more,
(d) expanding the L channel decoded signal to generate an N channel decoded main signal; N is an integer greater than L and less than M;
(e) decoding the slave code to obtain an N-channel decoded slave signal;
(f) adding the N-channel decoded main signal and the N-channel decoded slave signal to generate an N-channel added signal;
(h) expanding the N channel addition signal to generate an M channel addition signal;
(i) adding the M channel error signal and the M channel addition signal to obtain an M channel reproduction digital signal;
Including.
第47の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルは複数チャネルのサンプルであり、上記復号化方法は更に
(c) 上記複数チャネルのサンプル列に対しチャネル間直交逆変換を行って複数チャネルのディジタル信号を再生するステップ、
を含む。
第48の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルはMチャネルの誤差信号のサンプルであり、Mは2以上の整数であり、上記復号化方法は更に、
(c) 入力主符号を復号化して局部復号信号を得るステップと、
(d) 上記Mチャネルの局部復号信号にチャネル間直交逆変換を施してMチャネル復号信号を求めるステップと、
(e) このMチャネル復号信号と上記Mチャネル誤差信号とを加算してMチャネルディジタル信号を再生するステップ、
とを含む。
47. Decoding method according to the 47th aspect: the decoding method according to the 23rd aspect, wherein the sample is a sample of a plurality of channels, and the decoding method further comprises:
(c) performing a multi-channel orthogonal inverse transform on the plurality of channel sample sequences to reproduce a plurality of channels of digital signals;
including.
A decoding method according to a forty-eighth aspect: in the decoding method according to the twenty-third aspect, the sample is a sample of an M channel error signal, M is an integer of 2 or more, and the decoding method further includes:
(c) decoding the input main code to obtain a locally decoded signal;
(d) performing an interchannel orthogonal inverse transform on the M channel local decoded signal to obtain an M channel decoded signal;
(e) adding the M channel decoded signal and the M channel error signal to reproduce an M channel digital signal;
Including.
第49の観点の復号化方法:第23の観点記載の復号化方法において、上記サンプルはMチャネルの誤差信号のサンプルであり、Mは2以上の整数であり、上記復号化方法は更に
(c) 入力主符号を復号化してMチャネルの局部復号信号を求めるステップと、
(d) 上記Mチャネルの局部復号信号と上記Mチャネルの誤差信号を加算してMチャネルの加算信号を得るステップと、
(e) 上記Mチャネルの加算信号に対しチャネル間直交逆変換を施してMチャネルディジタル信号を再生するステップ、
とを含む。
The decoding method according to the forty-ninth aspect: in the decoding method according to the twenty-third aspect, the sample is a sample of an error signal of M channels, M is an integer of 2 or more, and the decoding method further includes:
(c) decoding an input main code to obtain an M channel local decoded signal;
(d) adding the M channel local decoded signal and the M channel error signal to obtain an M channel addition signal;
(e) performing an interchannel orthogonal inverse transform on the M channel addition signal to reproduce an M channel digital signal;
Including.
第50の観点の復号化方法:第23の観点記載の復号化方法において、更に以下のステップを含む:
(c) 非可逆符号を非可逆復号して局部復号信号を生成し、
(d) 最大桁数符号を復号して変動の最大桁数を得、
(e) 上記復号信号を、ディジタル表現において上記変動の最大桁数以下を切り捨てて精度保証信号を生成し、
(f) 上記ディジタル信号と上記精度保証信号を加算して再生信号を生成する。、
第51の観点の復号化方法:第50の観点記載の復号化方法において、上記ステップ(d) は、例外符号を復号して、その例外値とサンプル位置情報を得て、上記精度保証信号のサンプル位置に上記例外値を割り当てるステップを含む、
符号器
第52の観点の符号器:複数のサンプルからなる各フレームごとにディジタル信号を符号化する符号化器であり、
フレーム毎に上記ディジタル信号のサンプルを,それらの各ビット位置で跨いだビット列の可逆データの複数の組,又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成する手段と、
上記データの組を符号瀬出力する出力手段、
とを含む。
Decoding method according to the fifty-first aspect: the decoding method according to the twenty-third aspect, further comprising the following steps:
(c) lossy decoding the lossy code to generate a local decoded signal,
(d) Decode the maximum digit code to obtain the maximum number of digits of fluctuation,
(e) The above-mentioned decoded signal is rounded down below the maximum number of digits of the above-mentioned variation in the digital representation to generate an accuracy guarantee signal,
(f) The reproduction signal is generated by adding the digital signal and the accuracy guarantee signal. ,
Decoding method according to the fifty-first aspect: in the decoding method according to the fifty-first aspect, the step (d) comprises decoding the exception code, obtaining the exception value and sample position information, Assigning the above exceptional value to the sample position,
Encoder according to the 52nd aspect of the encoder: an encoder that encodes a digital signal for each frame composed of a plurality of samples,
Means for generating a plurality of sets of reversible data of bit strings straddling the digital signal samples for each frame at each bit position, or a set of reversible data of error signals derived from the irreversible data and the irreversible data for each frame When,
An output means for outputting the code set of the data;
Including.
第53の観点の符号器:第52の観点記載の符号器において、各サンプルの振幅を極性と絶対値の2進表現に変換し、その変換されたサンプルを上記並び替え部へ供給する極性絶対値変換部を含む。
第54の観点の符号器:第53の観点記載の符号器において、上記結合部は上記ビット列に対し、極性、絶対値の大きさ順にパケットの優先順位を付ける。
第55の観点の符号器:第52又は53の観点記載の符号器において、原信号を非可逆符号化して、上記非可逆符号化情報と局部復号信号を出力する非可逆符号器と、上記局部復号信号と上記原信号との誤差信号を上記ディジタル信号として求めて出力する差分器とを含む。
Encoder according to a 53rd aspect: an encoder according to the 52nd aspect, wherein the amplitude of each sample is converted into a binary representation of polarity and absolute value, and the converted sample is supplied to the rearrangement unit Includes a value converter.
Encoder according to a 54th aspect: in the encoder according to the 53rd aspect, the combining unit assigns a packet priority to the bit string in the order of polarity and absolute value.
The encoder according to the 55th aspect: the encoder according to the 52nd or 53rd aspect, wherein the original signal is irreversibly encoded and outputs the irreversible encoded information and the local decoded signal; and the local And a differentiator for obtaining and outputting an error signal between the decoded signal and the original signal as the digital signal.
第56の観点の符号器:第52、53又は54のいずれかの観点記載の符号器において、上記ディジタル信号のスペクトル包絡を表現するパラメータを符号化して補助情報として上記パケットと共に出力する補助情報生成部を有している。
第57の観点の符号器:第52の観点記載の符号器は、更に上記分割されたフレームごとに、そのディジタル信号の絶対値の最大値を表現する桁数を有効桁数として求めて出力する補助情報生成部を有し、上記並び替え部は、上記フレームごとに、上記有効桁数以内のみについて、上記等位ビット列を生成する。
Encoder according to the 56th aspect: auxiliary information generation for encoding the parameter expressing the spectral envelope of the digital signal and outputting it as the auxiliary information together with the packet in the encoder according to any one of the 52nd, 53rd or 54th aspect Has a part.
57th aspect encoder: The encoder according to the 52nd aspect further determines and outputs, as the effective number of digits, the number of digits representing the maximum absolute value of the digital signal for each of the divided frames. An auxiliary information generation unit is included, and the rearrangement unit generates the equivalence bit string for each frame only within the number of significant digits.
第58の観点の符号器:第52の観点記載の符号器は更に、
各フレームごとに入力ディジタル信号のスペクトル包絡を表わす線形予測係数を求めるスペクトル包絡算出部と、
上記線形予測係数を符号化して補助情報とする補助情報生成部と、
フレームごとに過去のディジタル信号と線形予測係数から現在の入力信号の整数化された予測値を求める予測部と、
上記予測値を現在の入力ディジタル信号から差し引いて予測誤差信号を求める予測誤差生成部、
とを含む。
58th aspect encoder: The encoder according to the 52nd aspect further includes:
A spectral envelope calculation unit for obtaining a linear prediction coefficient representing the spectral envelope of the input digital signal for each frame;
An auxiliary information generation unit that encodes the linear prediction coefficient to obtain auxiliary information;
A prediction unit that obtains an integerized prediction value of the current input signal from a past digital signal and a linear prediction coefficient for each frame;
A prediction error generator for subtracting the predicted value from the current input digital signal to obtain a prediction error signal;
Including.
第59の観点の符号器:第58の観点記載の符号器は更に、各フレームごとに上記振幅ビット列の絶対値の最大値を表現する桁数を有効桁数として求める有効桁数検出部と、上記有効桁数を符号化して上記補助情報に加える手段とを有し、上記並び替え部は上記有効桁数の範囲内でのみ上記サンプル列の振幅ビット列を等位ビット列へ並び替えを行う。
第60の観点の符号器:第52の観点記載の符号器は更に、
入力ディジタル信号をフレーム毎に聴覚特性を考慮した非可逆符号化して非可逆符号を生成し局部復号信号を生成する非可逆符号化部と、
上記局部復号信号が入力され、局部復号信号を、上記入力信号との誤差が小さくなるように変形して変形局部復号信号を生成する変形部と、
上記入力信号と上記変形局部信号が入力され、これら間の誤差信号を上記ディジタル信号として生成する誤差算出部、
とを含む。
The encoder according to the 59th aspect: the encoder according to the 58th aspect further includes an effective digit number detection unit that obtains the number of digits representing the maximum value of the absolute value of the amplitude bit string for each frame as the effective number of digits; Means for encoding the number of significant digits and adding it to the auxiliary information, and the rearrangement unit rearranges the amplitude bit string of the sample string into a coordinate bit string only within the range of the number of significant digits.
The encoder according to the 60th aspect: the encoder according to the 52nd aspect further comprises:
An irreversible encoding unit that generates an irreversible code by irreversibly encoding an input digital signal for each frame in consideration of auditory characteristics;
A modified unit that receives the local decoded signal and transforms the local decoded signal so as to reduce an error from the input signal, thereby generating a modified local decoded signal;
An error calculator that receives the input signal and the modified local signal and generates an error signal between them as the digital signal;
Including.
第61の観点の符号器:第52の観点記載の符号器において、上記ディジタル信号はMチャネルのディジタル信号であり、Mは2以上の整数であり、上記符号器は更に、
フレームごとにMチャネルのディジタル信号が入力され、これらMチャネルのディジタル信号を混合してNチャネルの混合信号を出力するチャネル混合部と、Mは2以上の整数であり、NはMより小さい1以上の整数であり、
上記Nチャネルの混合信号が入力され、これらを符号化して主符号とその主符号に対するNチャネル局部信号を生成する符号化部と、
上記Nチャネル局部復号信号が入力され、これらをチャネル拡大してMチャネルの局部復号信号を出力するチャネル拡大部と、
上記Mチャネル局部復号信号と、上記Mチャネルディジタル信号との間の誤差信号を上記ディジタル信号として計算する誤差算出部、
とを含み、上記出力手段は上記主符号を上記可逆符号と共に出力する。
The encoder according to the 61st aspect: the encoder according to the 52nd aspect, wherein the digital signal is an M-channel digital signal, M is an integer of 2 or more, and the encoder further includes:
An M channel digital signal is input for each frame, a channel mixing unit that mixes these M channel digital signals and outputs an N channel mixed signal, M is an integer of 2 or more, and N is smaller than
An encoding unit that receives the N-channel mixed signals and encodes them to generate a main code and an N-channel local signal for the main code;
A channel expansion unit that receives the N-channel local decoded signal, expands these channels, and outputs an M-channel local decoded signal;
An error calculating unit for calculating an error signal between the M channel local decoded signal and the M channel digital signal as the digital signal;
The output means outputs the main code together with the lossless code.
第62の観点の符号器:第52の観点記載の符号器は更に、
Mチャネルの入力信号に対してチャネル間直交変換を行って直交変換信号を出力するチャネル間直交変換部と、Mは2以上の整数であり、
上記直交変換信号の少なくとも一部の信号を符号化して主符号を生成し、その主符号に対する局部復号信号を生成する符号化部と、
上記局部復号信号に対しチャネル間直交逆変換してMチャネル局部復号信号を生成するチャネル間直交逆変換部と、
各上記Mチャネル局部復号信号と、対応する1つの上記Mチャネルディジタル信号との間の誤差信号を上記ディジタル信号として生成する誤差算出部、
とを含み、上記出力手段は上記主符号を上記可逆符号と共に出力する。
The encoder according to the 62nd aspect: the encoder according to the 52nd aspect further comprises:
An inter-channel orthogonal transform unit that performs inter-channel orthogonal transform on an M-channel input signal and outputs an orthogonal transform signal; and M is an integer of 2 or more,
An encoding unit that generates a main code by encoding at least a part of the signal of the orthogonal transform signal, and generates a local decoded signal for the main code;
An inter-channel orthogonal inverse transform unit for generating an M-channel local decoded signal by performing an orthogonal inverse transform between channels on the local decoded signal;
An error calculating unit that generates an error signal as the digital signal between each of the M channel local decoded signals and the corresponding one of the M channel digital signals;
The output means outputs the main code together with the lossless code.
第63の観点の符号器:第52の観点記載の符号器において、Mは2以上の整数であり、上記符号器は更に、
Mチャネルの入力信号に対してチャネル間直交変換を行って直交変換信号を生成するチャネル間直交変換部と、Mは2以上の整数であり、
上記直交変換信号の少なくとも一部を符号化して主符号を生成しその主符号に対する局部復号信号を生成する符号化部と、
各上記局部復号信号と、それに対応する上記直交変換信号との間の誤差信号を上記ディジタル信号として算出する誤差算出部、
とを含み、上記出力手段は上記主符号を上記可逆符号と共に出力する。
The encoder according to the 63rd aspect: the encoder according to the 52nd aspect, wherein M is an integer of 2 or more, and the encoder further comprises:
An inter-channel orthogonal transform unit that performs inter-channel orthogonal transform on an M-channel input signal to generate an orthogonal transform signal; and M is an integer of 2 or more,
An encoding unit that encodes at least a part of the orthogonal transform signal to generate a main code and generates a local decoded signal for the main code;
An error calculator that calculates an error signal between each of the locally decoded signals and the corresponding orthogonal transform signal as the digital signal;
The output means outputs the main code together with the lossless code.
第64の観点の符号器:第52の観点記載の符号器において、更に、
入力信号を非可逆符号化して非可逆符号を出力する非可逆符号化部と、
上記非可逆符号を復号して局部復号信号を出力する局部復号部と、
フレーム又はフレーム内の1以上のサブフレームごとに上記非可逆符号に対する復号信号が環境によって変動し得る最大桁数を上記局部復号信号から検出し、その変動の最大桁数を示す桁数符号を出力する変動最大桁数検出部と、
上記局部復号信号を、上記変動の最大桁数以下の部分を切り捨てて保証局部復号信号を生成する切捨部と、
上記保証局部復号信号と上記ディジタル信号との誤差信号を作成する誤差算出部と、
上記誤差信号を可逆符号化して、可逆符号を出力する可逆符号化部、
とを含む。
復号器
第65の観点の復号器:複数のサンプルから成る各フレーム毎にディジタル信号のサンプルを再生する復号器であり、
入力符号を復号してディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの復数の組、又は非可逆データとその非可逆データに由来する誤差信号の可逆データの組を生成するデータ生成手段と、
上記データの組からディジタル信号を再生する手段、
とを含む。
64th aspect encoder: In the encoder according to the 52nd aspect,
An irreversible encoding unit that irreversibly encodes an input signal and outputs an irreversible code;
A local decoding unit that decodes the lossy code and outputs a local decoded signal;
For each frame or one or more subframes in the frame, the maximum number of digits that the decoded signal for the lossy code can vary depending on the environment is detected from the local decoded signal, and a digit code indicating the maximum number of digits of the variation is output. A variable maximum digit number detection unit,
The local decoded signal, a truncation unit that generates a guaranteed local decoded signal by truncating a portion below the maximum number of digits of the fluctuation,
An error calculation unit for creating an error signal between the guaranteed local decoded signal and the digital signal;
A lossless encoding unit that losslessly encodes the error signal and outputs a lossless code;
Including.
Decoder according to the 65th aspect: a decoder that reproduces a sample of a digital signal for each frame of a plurality of samples;
Decodes the input code and generates a reversible set of reversible data of the bit string straddling digital signal samples at each bit position, or a reversible set of error signals derived from the irreversible data and the irreversible data. Data generation means for
Means for reproducing a digital signal from the data set;
Including.
第66の観点の復号器:第65の観点の復号器において、各上記サンプルを、極性符号と絶対値の2進表現から2の補数表現に変換して上記サンプルとする2の補数変換部を有する。
第67の観点の復号器:第65又は66の観点の復号器において、更に既知の情報から欠落ビット列を推定し、上記サンプル列を修正する欠落補正部を含む。
第68の観点の復号器:第67の観点の復号器において、上記欠落補正部はその入力を平滑化する低域通過フィルタである。
Decoder according to the 66th aspect: a decoder according to the 65th aspect, wherein a two's complement conversion unit converts each of the samples from a binary representation of a polarity code and an absolute value into a two's complement representation to obtain the sample. Have.
67th aspect decoder: The decoder according to the 65th or 66th aspect further includes a missing correction unit that estimates a missing bit string from known information and corrects the sample string.
68th aspect decoder: In the 67th aspect decoder, the missing correction section is a low-pass filter for smoothing the input.
第69の観点の復号器:第67の観点の復号器は更に、
入力された補助情報を復号してスペクトル包絡を求める補助情報復号部を含み、
上記欠落補正部は上記補正されたサンプル列のスペクトル包絡が上記復号されたスペクトル包絡に近づくように、上記サンプル列を補正するものである。
第70の観点の復号器:第69の観点の復号器において、上記欠落補正部は、
上記欠落又は誤りビットをサンプルにまたがって置き換えた暫定的なサンプル列を生成する暫定サンプル生成部と、
上記暫定的なサンプル列のスペクトル包絡を計算するスペクトル包絡算出部と、
上記復号したスペクトル包絡又はその変形スペクトル包絡で上記暫定的なサンプル列のスペクトル包絡を規格化する逆フィルタと、
上記平坦化されたスペクトル包絡に対し、上記復号スペクトル包絡又はその変形スペクトル包絡及び上記平坦化スペクトル包絡を使って補正サンプル列を再構成する合成フィルタ、
とを含む。
The decoder according to the 69th aspect: The decoder according to the 67th aspect further comprises:
An auxiliary information decoding unit that decodes the input auxiliary information to obtain a spectrum envelope;
The missing correction unit corrects the sample sequence so that the spectrum envelope of the corrected sample sequence approaches the decoded spectrum envelope.
70th aspect decoder: In the 69th aspect decoder, the missing correction section comprises:
A provisional sample generation unit that generates a provisional sample string in which the missing or error bits are replaced across samples;
A spectrum envelope calculation unit for calculating a spectrum envelope of the provisional sample sequence;
An inverse filter that normalizes the spectral envelope of the provisional sample sequence with the decoded spectral envelope or a modified spectral envelope thereof;
For the flattened spectral envelope, a synthesis filter that reconstructs a corrected sample sequence using the decoded spectral envelope or a modified spectral envelope thereof and the flattened spectral envelope;
Including.
第71の観点の復号器:第69の観点の復号器において、上記欠落補正部は、
上記欠落又は誤りビットに対し適当な値を代入した暫定的なサンプル列を再生する暫定波形生成部と、
上記暫定的なサンプルのスペクトル包絡を計算するスペクトル包絡算出部と、
上記計算したスペクトル包絡またはその変形スペクトル包絡の逆特性と、上記復号スペクトル包絡またはその変形スペクトル包絡を合成した1つのスペクトル包絡線形予測係数を計算する合成スペクトル包絡計算部と、
上記1つの合成スペクトル包絡を用いて、上記暫定的なサンプル列を再構成する合成フィルタ、
とを含む。
The decoder according to the 71st aspect: In the decoder according to the 69th aspect, the missing correction section comprises:
A provisional waveform generator that reproduces a provisional sample string in which an appropriate value is substituted for the missing or error bit;
A spectrum envelope calculation unit for calculating a spectrum envelope of the provisional sample;
A composite spectral envelope calculation unit that calculates the inverse characteristic of the calculated spectral envelope or its modified spectral envelope and one spectral envelope linear prediction coefficient obtained by synthesizing the decoded spectral envelope or its modified spectral envelope;
A synthesis filter that reconstructs the provisional sample sequence using the one synthesized spectral envelope;
Including.
第72の観点の復号器:第71の観点の復号器において、上記合成スペクトル包絡計算部は、上記計算したスペクトル包絡を線形予測ケプストラム係数Caに変換する第1係数変換部と、上記復号スペクトル包絡を線形予測ケプストラム係数Cbに変換する第2係数変換部と、上記線形予測ケプストラム係数の差Cb-Caを求める減算部と、上記差Cb-Caを線形予測係数に逆変換して、上記合成スペクトル包絡の線形予測係数を得る逆変換部とを含む。
第73の観点の復号器:第70又は71の観点の復号器において、また上記暫定的なサンプル列又は上記修正されたサンプル列のスペクトル包絡と上記復号スペクトル包絡との誤差を求め、その誤差が所定値以内であれば、その時の暫定的な又は修正されたサンプル列を補正されたサンプル列とし、所定値以内でなければ、上記暫定的な又は上記修正されたサンプル列を上記逆フィルタあるいは上記合成フィルタへ供給する誤差計算部を含む。
A decoder according to the 72nd aspect: in the decoder according to the 71st aspect, the combined spectrum envelope calculation unit includes a first coefficient conversion unit that converts the calculated spectrum envelope into a linear prediction cepstrum coefficient Ca, and the decoded spectrum envelope. A second coefficient conversion unit for converting the linear prediction cepstrum coefficient Cb into a linear prediction cepstrum coefficient Cb, a subtraction unit for obtaining the difference Cb-Ca between the linear prediction cepstrum coefficients, and inversely converting the difference Cb-Ca into a linear prediction coefficient, And an inverse transform unit for obtaining an envelope linear prediction coefficient.
Decoder according to the 73rd aspect: In the decoder according to the 70th or 71st aspect, an error between a spectrum envelope of the provisional sample sequence or the modified sample sequence and the decoded spectrum envelope is obtained, and the error is calculated. If it is within the predetermined value, the provisional or modified sample string at that time is regarded as a corrected sample string, and if not within the predetermined value, the provisional or modified sample string is regarded as the inverse filter or the above An error calculation unit for supplying to the synthesis filter is included.
第74の観点の復号器:第73の観点の復号器において、入力された非可逆符号化を非可逆復号化して局部復号信号を生成する非可逆復号部と、上記局部復号信号に上記ディジタル信号を加算し、その加算されたサンプル列を、上記欠落補正部へ供給する加算部とを含む。
第75の観点の復号器:第65の観点の復号器は更に、
入力された補助情報を復号してそのフレームの有効桁数を得る補助情報復号部と、
上記フレームのサンプル又は上記補正されたサンプルに対し、上記復号有効桁数に応じた桁合せを行う桁合せ部、
とを含む。
Decoder according to the 74th aspect: a decoder according to the 73rd aspect, wherein the input lossy encoding is irreversibly decoded to generate a local decoded signal, and the digital signal is included in the local decoded signal And an adding unit that supplies the added sample sequence to the missing correction unit.
The decoder of the 75th aspect: The decoder of the 65th aspect further comprises:
An auxiliary information decoding unit that decodes the input auxiliary information to obtain the number of significant digits of the frame;
A digit alignment unit that performs alignment according to the number of significant decoding digits for the sample of the frame or the corrected sample,
Including.
第76の観点の復号器:第75の観点の復号器において、上記補助情報復号部は平均パワーも復号するものであり、上記欠落補正部は、上記復号平均パワーを用いて上記サンプルの振幅も補正するものである。
第77の観点の復号器:第65の観点の復号器において、上記サンプルの線形予測係数は予測誤差信号の線形予測係数であり、上記復号器は更に、入力された補助情報を復号して線形予測係数を得る補助情報復号部と、
上記線形予測係数を使って上記予測誤差信号と、復号原信号の過去のサンプルとから復号原信号を合成し、予測誤差信号のスペクトル包絡に基づき、予測誤差信号の誤り又は欠落データを補正する欠落補正部、
とを含む。
Decoder according to the 76th aspect: In the decoder according to the 75th aspect, the auxiliary information decoding unit also decodes average power, and the missing correction unit uses the decoded average power to determine the amplitude of the sample. It is to correct.
A decoder according to the 77th aspect: in the decoder according to the 65th aspect, the linear prediction coefficient of the sample is a linear prediction coefficient of a prediction error signal, and the decoder further decodes the input auxiliary information to obtain a linear prediction coefficient. An auxiliary information decoding unit for obtaining a prediction coefficient;
The decoding original signal is synthesized from the prediction error signal and past samples of the decoding original signal using the linear prediction coefficient, and the error or missing data of the prediction error signal is corrected based on the spectral envelope of the prediction error signal. Correction section,
Including.
第78の観点の復号器:第77の観点の復号器において、上記欠落補正部は、
上記欠落または誤りビットと置き換える暫定サンプルを再生する暫定波形生成部と、
上記暫定サンプルのスペクトル包絡を求めるスペクトル包絡算出部と、
上記スペクトル包絡の平坦度を求め、その平坦度が所定値以内か否かを判定し、所定値以内であれば上記暫定サンプルを上記予測誤差信号とする平坦度判定部と、
上記平坦度が所定値以内でなければ、上記暫定サンプルに対し、上記スペクトル包絡又はその変形スペクトル包絡により規格化して規格化信号を得る逆フィルタ、
とを含む。
A decoder according to a 78th aspect: in the decoder according to the 77th aspect, the missing correction unit includes:
A provisional waveform generator that reproduces provisional samples to replace the missing or error bits;
A spectrum envelope calculation unit for obtaining a spectrum envelope of the provisional sample;
Determining the flatness of the spectrum envelope, determining whether or not the flatness is within a predetermined value, and if the flatness is within the predetermined value, a flatness determination unit that uses the provisional sample as the prediction error signal;
If the flatness is not within a predetermined value, the provisional sample is normalized by the spectrum envelope or its modified spectrum envelope to obtain a normalized signal,
Including.
第79の観点の復号器:第77の観点の復号器において、上記欠落補正部は、
上記欠落または誤りビットに暫定サンプルを代入する暫定波形生成部と、
上記復号線形予測係数を用いて上記暫定サンプルをフィルタ処理し、合成信号を生成する第1合成フィルタと、
上記合成信号のスペクトル包絡を計算するスペクトル包絡算出部と、
上記計算した線形予測係数またはその帯域を拡大した線形予測係数の逆特性と、上記復号線形予測係数またはその帯域を拡大した線形予測係数を組み合わせたひとつの線形予測係数を計算する合成スペクトル包絡計算部と、
上記組み合わせた線形予測係数を用いて、上記暫定サンプルをフィルタ処理して予測誤差信号を生成する合成第2フィルタ、
とを含む。
The decoder according to the 79th aspect: in the decoder according to the 77th aspect, the missing correction section comprises:
A provisional waveform generation unit for substituting provisional samples for the missing or error bits;
A first synthesis filter that filters the provisional samples using the decoded linear prediction coefficients to generate a synthesized signal;
A spectrum envelope calculation unit for calculating a spectrum envelope of the synthesized signal;
Synthetic spectral envelope calculation unit that calculates one linear prediction coefficient by combining the inverse characteristic of the calculated linear prediction coefficient or the linear prediction coefficient whose band is expanded and the decoded linear prediction coefficient or the linear prediction coefficient whose band is expanded. When,
A combined second filter that filters the provisional samples to generate a prediction error signal using the combined linear prediction coefficients;
Including.
第80の観点の復号器:第65の観点の復号器において、更に、
上記局部復号信号が入力され、上記局部復号信号と上記ディジタル信号との誤差が小さくなるように、その局部復号信号を変形して変形信号を生成する変形部と、
上記変形信号と上記誤差信号を合成して上記再生信号を更新する加算部、
とを含む。
第81の観点の復号器:第65の観点の復号器において、更に、
主符号を復号してNチャネルの復号信号を出力する復号部と、Mは2以上の整数であり、NはMより小さい1以上の整数であり、
上記Nチャネルの復号信号をMチャネル復号信号にチャネル拡大するチャネル拡大部と、
欠落ビットを検出し、欠落信号を出力する欠落検出部と、上記情報補正部は、上記欠落検出部により検出された欠落ビットに対応する上記誤差信号に欠落情報を付加する欠落情報補正部を有しており、
上記Mチャネル誤差信号又は補正誤差信号と上記Mチャネル復号信号を加算してMチャネルディジタル信号を出力する加算部、
とを含む。
80th aspect decoder: In the 65th aspect decoder,
A deformation unit that receives the local decoded signal and generates a modified signal by modifying the local decoded signal so that an error between the local decoded signal and the digital signal is reduced;
An adder for synthesizing the deformation signal and the error signal to update the reproduction signal;
Including.
A decoder according to the 81st aspect: in the decoder according to the 65th aspect,
A decoding unit that decodes the main code and outputs an N-channel decoded signal; and M is an integer of 2 or more, N is an integer of 1 or more smaller than M,
A channel expansion unit for expanding the N-channel decoded signal to an M-channel decoded signal;
The missing detection unit that detects a missing bit and outputs a missing signal, and the information correction unit includes a missing information correction unit that adds missing information to the error signal corresponding to the missing bit detected by the missing detection unit. And
An adder for adding the M channel error signal or correction error signal and the M channel decoded signal to output an M channel digital signal;
Including.
第82の観点の復号器:第65の観点の復号器において、上記並び替え部はM個設けられ、Mチャネルの誤差信号を出力し、Mは2以上の整数であり、上記復号器は更に、
主符号を復号して局部復号主信号を出力する復号部と、
上記局部復号主信号に対しチャネル間直交逆変換を行ってMチャネル復号信号を生成するチャネル間直交逆変換部と、
上記Mチャネル復号信号と上記Mチャネル誤差信号を加算して再生Mチャネルディジタル信号を出力する加算部、
とを含む。
Decoder according to the 82nd aspect: In the decoder according to the 65th aspect, the M rearrangement units are provided to output an error signal of M channels, M is an integer equal to or greater than 2, and the decoder further includes ,
A decoding unit that decodes the main code and outputs a locally decoded main signal;
An inter-channel orthogonal inverse transform unit that performs an inter-channel orthogonal inverse transform on the local decoded main signal to generate an M-channel decoded signal;
An adder for adding the M channel decoded signal and the M channel error signal to output a reproduced M channel digital signal;
Including.
第83の観点の復号器:第65の観点の復号器において、更に、
入力主信号を復号して復号主信号を出力する復号部と、
上記復号主信号と上記Mチャネル誤差信号を加算してMチャネル加算信号を出力する加算器と、
上記Mチャネル加算信号が入力され、それらのチャネル間直行逆変換を行いMチャネル復号信号を出力するチャネル間直行逆変換部、
とを含む。
The decoder according to the 83rd aspect: in the decoder according to the 65th aspect,
A decoding unit for decoding an input main signal and outputting a decoded main signal;
An adder for adding the decoded main signal and the M channel error signal to output an M channel addition signal;
An interchannel direct inverse transform unit that receives the M channel addition signal, performs an inverse transform between the channels, and outputs an M channel decoded signal;
Including.
第84の観点の復号器:第65の観点の復号器において、更に、
非可逆符号を非可逆復号して局部復号信号を生成する非可逆復号部と、
最大桁数符号を復号して変動の最大桁数を出力する桁数復号部と、
上記局部復号信号の上記変動の最大桁数以下の部分を切り捨てて精度保証信号を出力する切捨て部と、
入力可逆符号を可逆復号して誤差信号を再生する可逆復号部と、
上記ディジタル信号と上記精度保証信号とを加算して再生ディジタル信号を出力する加算部、
とを含む。
The decoder according to the 84th aspect: in the decoder according to the 65th aspect,
An irreversible decoding unit that irreversibly decodes the irreversible code to generate a local decoded signal;
A digit decoding unit that decodes the maximum digit code and outputs the maximum number of fluctuations;
A truncation unit that truncates a portion of the local decoded signal that is less than or equal to the maximum number of digits of the fluctuation and outputs an accuracy guarantee signal;
A lossless decoding unit that reversibly decodes the input lossless code and reproduces an error signal;
An adder for adding the digital signal and the accuracy guarantee signal to output a reproduced digital signal;
Including.
第85の観点の符号化プログラム:第1乃至第22の観点の符号化方法をコンピュータで実行するための符号化プログラム。
第86の観点の復号化プログラム:第23乃至第51の観点の復号化方法をコンピュータで実行するための復号化プログラム。
Encoding program according to the 85th aspect: An encoding program for executing the encoding method according to the first to the twenty-second aspects on a computer.
A decoding program according to the 86th aspect: a decoding program for executing the decoding methods according to the 23rd to 51st aspects on a computer.
Claims (20)
(a)上記ディジタル信号の振幅に関する符号である入力符号を復号して暫定ディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組を生成するステップ、
(b)上記可逆データの複数の組の欠落ビットに任意の値を挿入して暫定ディジタル信号として再生するステップ、
(c)上記ディジタル信号のスペクトル包絡に関する情報である補助情報を復号して復号スペクトル包絡を求めるステップ、
(d)上記暫定ディジタル信号のスペクトル包絡が上記復号スペクトル包絡に近づくように、上記暫定ディジタル信号を補正して復号ディジタル信号を得るステップ、
を有することを特徴とする復号化方法。 A decoding method for reproducing a sample of a digital signal every frame,
(A) decoding an input code which is a code related to the amplitude of the digital signal to generate a plurality of sets of reversible data of bit strings straddling samples of the provisional digital signal at their respective bit positions;
(B) inserting an arbitrary value into a plurality of sets of missing bits of the reversible data and reproducing it as a provisional digital signal;
(C) decoding auxiliary information, which is information relating to the spectral envelope of the digital signal, to obtain a decoded spectral envelope;
(D) correcting the provisional digital signal to obtain a decoded digital signal so that a spectrum envelope of the provisional digital signal approaches the decoded spectrum envelope;
A decoding method characterized by comprising:
上記ステップ(d)は、
(d−1)上記暫定ディジタル信号のスペクトル包絡を求めるステップと、
(d−2)上記暫定ディジタル信号に、上記暫定ディジタル信号のスペクトル包絡の逆特性と上記復号スペクトル包絡の特性とを与えて復号ディジタル信号を得るステップ、
により構成されることを特徴とする復号化方法。 The decoding method according to claim 1, comprising:
Step (d) above is
(D-1) obtaining a spectral envelope of the provisional digital signal;
(D-2) obtaining a decoded digital signal by giving the provisional digital signal the inverse characteristic of the spectrum envelope of the provisional digital signal and the characteristic of the decoded spectrum envelope;
The decoding method characterized by comprising by these.
上記ステップ(d−2)は、
(d−2−1)上記暫定ディジタル信号のスペクトル包絡を線形予測ケプストラム係数Caに変換するステップと、
(d−2−2)上記復号スペクトル包絡を線形予測ケプストラム係数Cbに変換するステップと、
(d−2−3)上記線形予測ケプストラム係数Cbから上記線形予測ケプストラム係数Caを減算したものを線形予測係数に変換するステップと、
(d−2−4)上記暫定ディジタル信号に、上記線形予測係数を用いた線形予測合成をして復号ディジタル信号を得るステップ、
により構成されることを特徴とする復号化方法。 A decoding method according to claim 2, comprising:
The step (d-2)
(D-2-1) converting the spectral envelope of the provisional digital signal into a linear prediction cepstrum coefficient Ca;
(D-2-2) converting the decoded spectral envelope into a linear prediction cepstrum coefficient Cb;
(D-2-3) converting the linear prediction cepstrum coefficient Cb from the linear prediction cepstrum coefficient Cb into a linear prediction coefficient;
(D-2-4) obtaining a decoded digital signal by performing linear prediction synthesis using the linear prediction coefficient on the provisional digital signal;
The decoding method characterized by comprising by these.
上記ステップ(d−2)は、
上記復号スペクトル包絡と上記暫定ディジタル信号のスペクトル包絡との誤差が所定値以内である場合は、上記暫定ディジタル信号を復号ディジタル信号とするステップ、
をさらに含む、
ことを特徴とする復号化方法。 The decoding method according to claim 2 or 3, wherein
The step (d-2)
If the error between the decoded spectral envelope and the spectral envelope of the provisional digital signal is within a predetermined value, the provisional digital signal is a decoded digital signal;
Further including
A decoding method characterized by the above.
上記復号ディジタル信号中のビットが上記複数の組のデータから得られたビットと異なる場合は、上記復号ディジタル信号中のビットを上記複数の組のデータから得られたビットに置き換えるステップ、
をさらに含む、
ことを特徴とする復号化方法。 A decoding method according to any one of claims 1 to 4,
If the bits in the decoded digital signal are different from the bits obtained from the plurality of sets of data, replacing the bits in the decoded digital signal with bits obtained from the plurality of sets of data;
Further including
A decoding method characterized by the above.
(a)上記ディジタル信号の振幅の予測誤差に関する符号である入力符号を復号して暫定予測誤差波形のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組を生成するステップ、
(b)上記可逆データの複数の組の欠落ビットに任意の値を挿入して暫定予測誤差波形として再生するステップ、
(c)上記ディジタル信号のスペクトル包絡に関する情報である補助情報を復号して復号スペクトル包絡を求めるステップ、
(d)復号された復号ディジタル信号のスペクトル包絡が上記復号スペクトル包絡に近づくように、暫定予測誤差波形を補正して予測誤差波形を得るステップ、
(e)上記予測誤差波形に上記復号スペクトル包絡の特性を与えることにより上記復号ディジタル信号を得るステップ、
を有することを特徴とする復号化方法。 A decoding method for reproducing a sample of a digital signal every frame,
(A) decoding an input code which is a code related to a prediction error of the amplitude of the digital signal to generate a plurality of sets of reversible data of bit strings straddling samples of a provisional prediction error waveform at their respective bit positions;
(B) inserting an arbitrary value into a plurality of sets of missing bits of the reversible data to reproduce as a provisional prediction error waveform ;
(C) decoding auxiliary information , which is information relating to the spectral envelope of the digital signal, to obtain a decoded spectral envelope;
(D) as the spectral envelope of the decoded decoded digital signal approaches the decoded spectrum envelope, to obtain a prediction error waveform by correcting the provisional prediction error waveform,
(E) obtaining the decoded digital signal by giving the characteristic of the decoded spectral envelope to the prediction error waveform ;
A decoding method characterized by comprising:
上記ステップ(d)は、
(d−1)上記暫定予測誤差波形に上記復号スペクトル包絡の特性を与えて暫定復号信号を得るステップと、
(d−2)上記暫定復号信号のスペクトル包絡を求めるステップと、
(d−3)上記暫定復号信号に上記暫定復号信号のスペクトル包絡の逆特性を与えて予測誤差波形を得るステップ、
により構成されることを特徴とする復号化方法。 The decoding method according to claim 6, wherein
Step (d) above is
(D-1) obtaining a provisional decoded signal by giving the characteristics of the decoded spectrum envelope to the provisional prediction error waveform ;
(D-2) obtaining a spectrum envelope of the provisional decoded signal;
(D-3) obtaining a prediction error waveform by giving the provisional decoded signal the inverse characteristic of the spectrum envelope of the provisional decoded signal;
The decoding method characterized by comprising by these.
上記ステップ(d)は、
(d−4)上記暫定予測誤差波形のスペクトル包絡を求めるステップと、
(d−5)上記暫定予測誤差波形に上記暫定予測誤差波形のスペクトル包絡の逆特性を与えて予測誤差波形を得るステップ、
により構成されることを特徴とする復号化方法。 The decoding method according to claim 6, wherein
Step (d) above is
(D-4) obtaining a spectrum envelope of the provisional prediction error waveform ;
(D-5) a step of obtaining a prediction error waveform giving an inverse characteristic of a spectral envelope of the provisional prediction error waveform to the provisional prediction error waveform,
The decoding method characterized by comprising by these.
上記ステップ(d−5)は、
上記暫定予測誤差波形の平坦度が所定値以内である場合は、上記暫定予測誤差波形を予測誤差波形とするステップ、
をさらに含む、
ことを特徴とする復号化方法。 The decoding method according to claim 8, comprising:
The step (d-5)
If the flatness of the provisional prediction error waveform is within a predetermined value, the step of setting the provisional prediction error waveform as a prediction error waveform ;
Further including
A decoding method characterized by the above.
(a)上記ディジタル信号の振幅に関する符号である入力符号を復号して暫定ディジタル信号のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組を生成する手段、
(b)上記可逆データの複数の組の欠落ビットに任意の値を挿入して暫定ディジタル信号として再生する手段、
(c)上記ディジタル信号のスペクトル包絡に関する情報である補助情報を復号して復号スペクトル包絡を求める手段、
(d)上記暫定ディジタル信号のスペクトル包絡が上記復号スペクトル包絡に近づくように、上記暫定ディジタル信号を補正して復号ディジタル信号を得る手段、
を備えることを特徴とする復号器。 A decoder for reproducing a sample of a digital signal every frame,
(A) means for decoding the input code, which is a code related to the amplitude of the digital signal, to generate a plurality of sets of reversible data of bit strings straddling samples of the provisional digital signal at their respective bit positions;
(B) means for inserting an arbitrary value into a plurality of sets of missing bits of the reversible data and reproducing it as a provisional digital signal;
(C) means for decoding the auxiliary information, which is information relating to the spectral envelope of the digital signal, to obtain a decoded spectral envelope;
(D) means for correcting the provisional digital signal to obtain a decoded digital signal so that a spectrum envelope of the provisional digital signal approaches the decoded spectrum envelope;
A decoder comprising:
上記手段(d)は、
(d−1)上記暫定ディジタル信号のスペクトル包絡を求める手段と、
(d−2)上記暫定ディジタル信号に、上記暫定ディジタル信号のスペクトル包絡の逆特性と上記復号スペクトル包絡の特性とを与えて復号ディジタル信号を得る手段、
により構成されることを特徴とする復号器。 The decoder according to claim 10, comprising:
Said means (d)
(D-1) means for obtaining a spectral envelope of the provisional digital signal;
(D-2) means for obtaining a decoded digital signal by giving the provisional digital signal the inverse characteristic of the spectrum envelope of the provisional digital signal and the characteristic of the decoded spectrum envelope;
A decoder comprising:
上記手段(d−2)は、
(d−2−1)上記暫定ディジタル信号のスペクトル包絡を線形予測ケプストラム係数Caに変換する手段と、
(d−2−2)上記復号スペクトル包絡を線形予測ケプストラム係数Cbに変換する手段と、
(d−2−3)上記線形予測ケプストラム係数Cbから上記線形予測ケプストラム係数Caを減算したものを線形予測係数に変換する手段と、
(d−2−4)上記暫定ディジタル信号に、上記線形予測係数を用いた線形予測合成をして復号ディジタル信号を得る手段、
により構成されることを特徴とする復号器。 The decoder according to claim 11, comprising:
The means (d-2)
(D-2-1) means for converting the spectral envelope of the provisional digital signal into a linear prediction cepstrum coefficient Ca;
(D-2-2) means for converting the decoded spectral envelope into a linear prediction cepstrum coefficient Cb;
(D-2-3) means for converting a value obtained by subtracting the linear prediction cepstrum coefficient Ca from the linear prediction cepstrum coefficient Cb into a linear prediction coefficient;
(D-2-4) means for obtaining a decoded digital signal by performing linear prediction synthesis using the linear prediction coefficient on the provisional digital signal;
A decoder comprising:
上記手段(d−2)は、
上記復号スペクトル包絡と上記暫定ディジタル信号のスペクトル包絡との誤差が所定値以内である場合は、上記暫定ディジタル信号を復号ディジタル信号とする手段、
をさらに含む、
ことを特徴とする復号器。 The decoder according to claim 11 or 12, comprising:
The means (d-2)
When the error between the decoded spectral envelope and the spectral envelope of the provisional digital signal is within a predetermined value, the provisional digital signal as a decoded digital signal;
Further including
A decoder characterized by that.
上記復号ディジタル信号中のビットが上記複数の組のデータから得られたビットと異なる場合は、上記復号ディジタル信号中のビットを上記複数の組のデータから得られたビットに置き換える手段、
をさらに含む、
ことを特徴とする復号器。 A decoder according to any of claims 10 to 13,
Means for replacing the bits in the decoded digital signal with the bits obtained from the plurality of sets of data if the bits in the decoded digital signal are different from the bits obtained from the plurality of sets of data;
Further including
A decoder characterized by that.
(a)上記ディジタル信号の振幅の予測誤差に関する符号である入力符号を復号して暫定予測誤差波形のサンプルをそれらの各ビット位置で跨いだビット列の可逆データの複数の組を生成する手段、
(b)上記可逆データの複数の組の欠落ビットに任意の値を挿入して暫定予測誤差波形として再生する手段、
(c)上記ディジタル信号のスペクトル包絡に関する情報である補助情報を復号して復号スペクトル包絡を求める手段、
(d)復号された復号ディジタル信号のスペクトル包絡が上記復号スペクトル包絡に近づくように、暫定予測誤差波形を補正して予測誤差波形を得る手段、
(e)上記予測誤差波形に上記復号スペクトル包絡の特性を与えることにより上記復号ディジタル信号を得る手段、
を有することを特徴とする復号器。 A decoder for reproducing a sample of a digital signal every frame,
(A) means for decoding the input code, which is a code related to the prediction error of the amplitude of the digital signal, and generating a plurality of sets of reversible data of bit strings straddling samples of the provisional prediction error waveform at their respective bit positions;
(B) means for inserting an arbitrary value into a plurality of sets of missing bits of the reversible data and reproducing it as a provisional prediction error waveform ;
(C) means for decoding the auxiliary information , which is information relating to the spectral envelope of the digital signal, to obtain a decoded spectral envelope;
(D) as the spectral envelope of the decoded decoded digital signal approaches the decoded spectral envelope, means for obtaining a prediction error waveform by correcting the provisional prediction error waveform,
(E) means for obtaining the decoded digital signal by giving the characteristic of the decoded spectral envelope to the prediction error waveform ;
A decoder comprising:
上記手段(d)は、
(d−1)上記暫定予測誤差波形に上記復号スペクトル包絡の特性を与えて暫定復号信号を得る手段と、
(d−2)上記暫定復号信号のスペクトル包絡を求める手段と、
(d−3)上記暫定復号信号に上記暫定復号信号のスペクトル包絡の逆特性を与えて予測誤差波形を得る手段、
により構成されることを特徴とする復号器。 The decoder according to claim 15, comprising:
Said means (d)
(D-1) means for providing a provisional decoded signal by giving the characteristics of the decoded spectrum envelope to the provisional prediction error waveform ;
(D-2) means for obtaining a spectrum envelope of the provisional decoded signal;
(D-3) means for obtaining a prediction error waveform by giving the provisional decoded signal the inverse characteristic of the spectrum envelope of the provisional decoded signal;
A decoder comprising:
上記手段(d)は、
(d−4)上記暫定予測誤差波形のスペクトル包絡を求める手段と、
(d−5)上記暫定予測誤差波形に上記暫定予測誤差波形のスペクトル包絡の逆特性を与えて予測誤差波形を得る手段、
により構成されることを特徴とする復号器。 The decoder according to claim 15, comprising:
Said means (d)
(D-4) means for obtaining a spectrum envelope of the provisional prediction error waveform ;
(D-5) means for obtaining a prediction error waveform giving an inverse characteristic of a spectral envelope of the provisional prediction error waveform to the provisional prediction error waveform,
A decoder comprising:
上記手段(d−5)は、
上記暫定予測誤差波形の平坦度が所定値以内である場合は、上記暫定予測誤差波形を予測誤差波形とする手段、
をさらに含む、
ことを特徴とする復号器。 The decoder according to claim 17, comprising:
The above means (d-5)
If the flatness of the provisional prediction error waveform is within a predetermined value, the provisional prediction error waveform as a prediction error waveform ,
Further including
A decoder characterized by that.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006106021A JP4351684B2 (en) | 2001-08-23 | 2006-04-07 | Digital signal decoding method, apparatus, program, and recording medium |
Applications Claiming Priority (9)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001252475 | 2001-08-23 | ||
JP2001366806 | 2001-11-30 | ||
JP2001366734 | 2001-11-30 | ||
JP2001368759 | 2001-12-03 | ||
JP2002052905 | 2002-02-28 | ||
JP2002058448 | 2002-03-05 | ||
JP2002058521 | 2002-03-05 | ||
JP2002064037 | 2002-03-08 | ||
JP2006106021A JP4351684B2 (en) | 2001-08-23 | 2006-04-07 | Digital signal decoding method, apparatus, program, and recording medium |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2002244408A Division JP3811110B2 (en) | 2001-08-23 | 2002-08-23 | Digital signal encoding method, decoding method, apparatus, program and recording medium |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006235643A JP2006235643A (en) | 2006-09-07 |
JP4351684B2 true JP4351684B2 (en) | 2009-10-28 |
Family
ID=37043264
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006106021A Expired - Lifetime JP4351684B2 (en) | 2001-08-23 | 2006-04-07 | Digital signal decoding method, apparatus, program, and recording medium |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4351684B2 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009063928A (en) * | 2007-09-07 | 2009-03-26 | Fujitsu Ltd | Interpolation method and information processing apparatus |
US8108361B2 (en) * | 2008-07-31 | 2012-01-31 | Microsoft Corporation | Efficient column based data encoding for large-scale data storage |
US9020029B2 (en) | 2011-01-20 | 2015-04-28 | Alcatel Lucent | Arbitrary precision multiple description coding |
-
2006
- 2006-04-07 JP JP2006106021A patent/JP4351684B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JP2006235643A (en) | 2006-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7337112B2 (en) | Digital signal coding and decoding methods and apparatuses and programs therefor | |
US8311815B2 (en) | Method, apparatus, and program for encoding digital signal, and method, apparatus, and program for decoding digital signal | |
JP5027799B2 (en) | Adaptive grouping of parameters to improve coding efficiency | |
US7617110B2 (en) | Lossless audio decoding/encoding method, medium, and apparatus | |
CA2218893C (en) | Lossless coding method for waveform data | |
US6675148B2 (en) | Lossless audio coder | |
KR100518640B1 (en) | Data Compression / Restoration Using Rice Encoder / Decoder and Method | |
US7848931B2 (en) | Audio encoder | |
EP1764923B1 (en) | Multi-channel signal encoding method, decoding method, device thereof, program, and recording medium thereof | |
EA001087B1 (en) | Multi-channel predictive subband coder using psychoacoustic adaptive bit allocation | |
WO2003038812A1 (en) | Audio encoding and decoding device | |
JP4800379B2 (en) | Lossless coding of information to guarantee maximum bit rate | |
US8050334B2 (en) | Signal encoder, signal decoder, signal encoding method, signal decoding method, program, recording medium and signal codec method | |
JP3960932B2 (en) | Digital signal encoding method, decoding method, encoding device, decoding device, digital signal encoding program, and decoding program | |
JP3811110B2 (en) | Digital signal encoding method, decoding method, apparatus, program and recording medium | |
WO2014096236A2 (en) | Signal adaptive fir/iir predictors for minimizing entropy | |
JP4351684B2 (en) | Digital signal decoding method, apparatus, program, and recording medium | |
US5812982A (en) | Digital data encoding apparatus and method thereof | |
JP3191257B2 (en) | Acoustic signal encoding method, acoustic signal decoding method, acoustic signal encoding device, acoustic signal decoding device | |
JP2853824B2 (en) | Speech parameter information coding method | |
JP3092124B2 (en) | Method and apparatus for adaptive transform coding | |
JP4195598B2 (en) | Encoding method, decoding method, encoding device, decoding device, encoding program, decoding program | |
Dai Yang et al. | A lossless audio compression scheme with random access property | |
JP2008289085A (en) | Decoding method, decoder, decoding apparatus, encoding method, encoder, program and recording medium | |
JPH10228298A (en) | Voice signal coding method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090402 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090507 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090618 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090714 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090724 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120731 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4351684 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130731 Year of fee payment: 4 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
EXPY | Cancellation because of completion of term |