JP2776425B2 - Cell loss compensation image decoding method - Google Patents

Cell loss compensation image decoding method

Info

Publication number
JP2776425B2
JP2776425B2 JP26226089A JP26226089A JP2776425B2 JP 2776425 B2 JP2776425 B2 JP 2776425B2 JP 26226089 A JP26226089 A JP 26226089A JP 26226089 A JP26226089 A JP 26226089A JP 2776425 B2 JP2776425 B2 JP 2776425B2
Authority
JP
Japan
Prior art keywords
coefficient
block
coefficients
difference
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP26226089A
Other languages
Japanese (ja)
Other versions
JPH03124184A (en
Inventor
崇 浜野
潔 酒井
喜一 松田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP26226089A priority Critical patent/JP2776425B2/en
Priority to DE69031106T priority patent/DE69031106D1/en
Priority to CA002027184A priority patent/CA2027184C/en
Priority to US07/594,090 priority patent/US5191446A/en
Priority to EP90119308A priority patent/EP0422575B1/en
Publication of JPH03124184A publication Critical patent/JPH03124184A/en
Application granted granted Critical
Publication of JP2776425B2 publication Critical patent/JP2776425B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】 〔概要〕 入力画像データを直交変換し、直交変換係数領域の係
数を符号化してセル単位で伝送する画像データ伝送シス
テムにおいて、セル廃棄が起こった場合に係数領域の係
数のうちで低周波数成分を表す複数の係数を補償するセ
ル廃棄補償画像復号化方式に関し、 送信側で現フレームと前フレームのブロックの対応す
る低周波係数の大小関係を比較し、差が大きい時には補
償情報を受信側に送信することによって、セル廃棄が起
きた場合に差が大きい係数を補償情報によって補償する
ことを目的とし、 複数の画素をブロックとして入力画像データを直交変
換部によって直交変換し、該直交変換係数領域の係数を
符号化してセル単位で伝送し、受信側に逆直交変換を行
う逆直交変換部を有する画像データ伝送システムにおい
て、前記直交変換係数領域における直流から高周波まで
の周波数成分を表す複数の係数を複数の周波数帯域に対
応する複数のグループにグループ化し、前記画像データ
伝送システムの送信側に、現在送信中のブロック内の前
記複数のグループ中の最低周波数のグループ内の複数の
係数と、該ブロックを含むフレームより時間的に1枚前
のフレーム内で該ブロックに対応するブロック内で該複
数の係数にそれぞれ対応する複数の係数との間で、それ
ぞれ対応する係数の差が大か小かを示す情報と、該差が
大の係数に対する現ブロック内の係数の値とを前期画像
データ伝送システムの受信側に送信する係数大小関係送
信手段と、前期画像データ伝送システムの受信側に、セ
ル廃棄の有無を検出し、セル廃棄があった時には該廃棄
セルに対応するブロックに対して該係数大小関係送信手
段から送信された係数の差の大小関係を示す情報によっ
て、前記最低周波数グループ内の係数のうちで差が小の
係数については該ブロックを含むフレームより1フレー
ム前の該ブロックに対応するブロック内の対応する係数
データを、また差が大の係数については該ブロック内の
対応する係数を前記係数大小関係送信手段から送信され
た係数値に置き替えたデータを逆直交変換部に出力する
廃棄補償手段を備えるように構成する。
DETAILED DESCRIPTION OF THE INVENTION [Summary] In an image data transmission system for orthogonally transforming input image data, encoding coefficients in an orthogonal transform coefficient area and transmitting the cells in units of cells, the coefficient of a coefficient area when a cell is discarded occurs Among the above, regarding the cell discard compensation image decoding method for compensating for a plurality of coefficients representing low frequency components, the transmitting side compares the magnitude relations of the corresponding low frequency coefficients of the blocks of the current frame and the previous frame, and when the difference is large, By transmitting the compensation information to the receiving side, the purpose is to compensate for the coefficient having a large difference when the cell is discarded by the compensation information. , An image data transmission system having an inverse orthogonal transform unit that encodes coefficients in the orthogonal transform coefficient area, transmits the encoded cells in units of cells, and performs inverse orthogonal transform on a receiving side. In, the plurality of coefficients representing frequency components from DC to high frequency in the orthogonal transform coefficient region are grouped into a plurality of groups corresponding to a plurality of frequency bands, and the transmitting side of the image data transmission system, And a plurality of coefficients in a group of the lowest frequency in the plurality of groups corresponding to the plurality of coefficients in a block corresponding to the block in a frame one frame before the frame including the block, respectively. Information indicating whether the difference between the corresponding coefficients is large or small, and the value of the coefficient in the current block with respect to the coefficient having the large difference, to the receiving side of the image data transmission system. The transmitting means of the coefficient to be transmitted and the receiving side of the image data transmission system detect the presence / absence of cell discard, and respond to the discarded cell when the cell is discarded. According to the information indicating the magnitude relation of the coefficient difference transmitted from the coefficient magnitude relation transmitting means for the block, the coefficient having a small difference among the coefficients in the lowest frequency group is one frame more than the frame including the block. Data obtained by replacing the corresponding coefficient data in the block corresponding to the block before the frame and, for a coefficient having a large difference, the corresponding coefficient in the block with the coefficient value transmitted from the coefficient size relation transmitting means. To the inverse orthogonal transform unit.

〔産業上の利用分野〕[Industrial applications]

本発明は画像データ伝送システムに係り、さらに詳し
くは入力画像データを直交変換し、直交変換係数領域の
係数を符号化してセル単位で伝送する画像データ伝送シ
ステムにおいて、セル廃棄が起こった場合に係数領域の
係数のうちで低周波数成分を表す複数の係数を補償する
セル廃棄補償画像復号化方式に関する。
The present invention relates to an image data transmission system, and more particularly, to an image data transmission system that orthogonally transforms input image data, encodes coefficients in an orthogonal transformation coefficient area, and transmits the cells in units of cells. The present invention relates to a cell discard compensation image decoding method for compensating a plurality of coefficients representing low frequency components among coefficients in a region.

〔従来の技術〕[Conventional technology]

最近画像機器のディジタル化、画像ディジタル信号の
伝送方式などが、テレビ電話など多くの応用分野で広く
開発、研究されている。一般に画像データはその情報量
が非常に多い。例えば現在のテレビをそのままディジタ
ル化すると100Mb/sの伝送容量が必要であり、画像デー
タは音声の1500倍の情報量を持っている。テレビでは1
秒間に画面が30回切り替わり、1/30秒でフレームが切り
替えられる。1枚のフレームに対応する1画面上に画素
は一般的に3次元的に配置されており、1画素のレベル
を例えば8ビットで表すとしても、1フレームに対する
画像データは非常にその情報量が多くなる。
Recently, digitization of image equipment and transmission methods of image digital signals have been widely developed and studied in many application fields such as videophones. Generally, image data has a very large amount of information. For example, if a current television is directly digitized, a transmission capacity of 100 Mb / s is required, and the image data has 1500 times the information amount of the audio. 1 on TV
The screen switches 30 times per second, and frames are switched in 1/30 seconds. Pixels are generally three-dimensionally arranged on one screen corresponding to one frame. Even if the level of one pixel is represented by, for example, 8 bits, the image data for one frame has a very large amount of information. More.

しかしながらテレビで1/30秒でフレームが切り替えら
れる場合にも、各フレームの絵の内容はあまり大きく変
化しないことが多い。すなわち画像は空や背景などのよ
うに全体的に止まっている部分が多く、フレーム毎に変
化する部分が少ない。そこで画像データを圧縮して符号
化する1つの方式としてフレーム間符号化方式がある。
However, even when frames are switched in 1/30 second on a television, the picture content of each frame often does not change so much. That is, the image has many parts that are entirely stopped, such as the sky and the background, and few parts that change for each frame. Therefore, one method of compressing and encoding image data is an inter-frame encoding method.

フレーム間符号化方式では時間的に連続する2つのフ
レームの間で例えば対応する画素毎に、レベルデータの
差がとられ、その差が例えばハフマン符号化されて伝送
路上に送出される。大部分の画素に対するレベルが変化
しないとすると、それらの画素に対する差は0となり、
その差は1ビットで表すことができる。レベル差の大き
い画素に対する符号は8ビット以上必要となるが、これ
らの差分だけを符号化することにより、結果として伝送
すべき情報量が大きく圧縮されることになる。これに対
して1フレーム内のデータをそのまま符号化する方式は
フレーム内符号化方式と呼ばれる。
In the inter-frame coding method, a difference in level data is obtained between two temporally consecutive frames, for example, for each corresponding pixel, and the difference is subjected to, for example, Huffman coding and transmitted on a transmission path. Assuming that the level for most pixels does not change, the difference for those pixels is zero,
The difference can be represented by one bit. A code for a pixel having a large level difference requires 8 bits or more. By encoding only these differences, the amount of information to be transmitted is greatly compressed. On the other hand, a method of directly encoding data in one frame is called an intra-frame encoding method.

フレーム間符号化、フレーム内符号化の何れを用いる
としても、画像信号のディジタル表現には標本化および
量子化の2つの操作が基本的に必要になる。画像の標本
化には2つの方法があり、その第1は画像をフレーム内
の画素に対応する離散的な点配列に対するレベル値で表
すことである。第2の方法はフレーム面に対応するXY平
面で定義されたレベル値関数(画像関数)を正規直交展
開し、その展開係数を標本値とすることである。
Regardless of whether inter-frame coding or intra-frame coding is used, digital representation of an image signal basically requires two operations of sampling and quantization. There are two ways to sample an image, the first of which is to represent the image by level values for a discrete array of points corresponding to the pixels in the frame. The second method is to orthonormally expand a level value function (image function) defined on the XY plane corresponding to the frame plane, and use the expansion coefficient as a sample value.

第9図は第2の方式である正規直交変換を用いた画像
伝送システムの全体ブロック図である。第9図において
入力画像は1でブロック化され、2で直交変換された
後、3で量子化され、4で例えばハフマン符号化されて
送り側から伝送路5に送り出される。そして受信側では
伝送路5からの信号を6で復号化し、7で逆直交変換
し、8で逆ブロック化して画像データとして出力する。
ここで1のブロック化は2次元のK×K個の画素(1画
面分)のデータを一まとめにして直交変換するのでな
く、4×4〜16×16個程度の画素を1ブロックとしてブ
ロック単位に変換係数を求めることにより、変換時間を
短縮するために行われる。2の直交変換の種類として
は、例えばアダマール変換、コサイン変換、カルーネン
・レーベ変換などがあるが、近年ではコサイン変換の離
散表現であり、後述するディスクリートコサイン変換
(DCT)がよく用いられている。
FIG. 9 is an overall block diagram of an image transmission system using an orthonormal transform which is the second system. In FIG. 9, the input image is blocked by 1 and orthogonally transformed by 2, then quantized by 3, is subjected to, for example, Huffman coding by 4, and is sent to the transmission line 5 from the sending side. Then, on the receiving side, the signal from the transmission path 5 is decoded by 6, inverse orthogonally transformed by 7, deblocked by 8, and output as image data.
Here, the 1-blocking does not collectively perform two-dimensional data of K × K pixels (corresponding to one screen) and performs orthogonal transformation. Instead, blocks of about 4 × 4 to 16 × 16 pixels are regarded as one block. This is performed to reduce the conversion time by obtaining the conversion coefficient in units. The types of orthogonal transform of 2 include, for example, Hadamard transform, cosine transform, Karhunen-Loeve transform, and the like. In recent years, a discrete representation of cosine transform is used, and discrete cosine transform (DCT) described later is often used.

第9図で用いられている直交変換符号化方式では画面
内の小領域の相関が着目され、小領域の画素を数値列と
して直交変換が行われる。その結果得られる変換係数は
周波数成分に相当し、低周波から高周波までの各成分を
表している。画像信号では一般に低周波成分が電力的に
大きく高周波成分は電力的に小さいため、低周波成分に
は多くのビット数、高周波成分には少ないビット数を割
り当てる量子化を行うことにより、伝送すべき情報量が
削減される。
In the orthogonal transform coding system used in FIG. 9, attention is paid to the correlation of the small area in the screen, and the orthogonal transform is performed using the pixels of the small area as a numerical sequence. The resulting transform coefficients correspond to frequency components and represent each component from low to high frequency. In image signals, low-frequency components are generally large in power and high-frequency components are small in power. Therefore, low-frequency components should be transmitted by performing quantization by assigning a large number of bits to high-frequency components and a small number of bits to high-frequency components. The amount of information is reduced.

第10図は4×4個の画素によって構成される1ブロッ
ク内の画像データに直交変換を施した後の変換係数領域
を示す図である。この変換係数領域において、一般に最
も左上の領域9は信号の直流成分を表し、またその他の
領域の係数は全て交流成分を表している。交流成分はそ
れぞれ低周波から高周波までの各周波数に対応し、右下
方向にいくぼどその周波数は高くなる。
FIG. 10 is a diagram showing a transform coefficient area after performing orthogonal transformation on image data in one block composed of 4 × 4 pixels. In this transform coefficient area, the upper left area 9 generally represents the DC component of the signal, and the coefficients in the other areas all represent the AC component. The AC component corresponds to each frequency from a low frequency to a high frequency, and the frequency increases slightly in the lower right direction.

〔発明が解決しようとする課題〕[Problems to be solved by the invention]

以上のような直交変換を用いた画像データ伝送システ
ムにおいては、フレーム内またはフレーム間のいずれの
符号化方式を用いるかにかかわらず、画像データは伝送
路上では例えばデータの宛先を示すヘッダが付加された
数バイトの固定長のセルによって伝送される。この場合
ヘッダエラーやセルの増えすぎによるネットワークの処
理能力超過などが起こるとセルがネットワーク内で廃棄
され、受信側に届かないことが起こる。
In the image data transmission system using the orthogonal transform as described above, regardless of which encoding method is used within a frame or between frames, image data is provided with, for example, a header indicating a data destination on a transmission path. Is transmitted by a fixed length cell of several bytes. In this case, if a header error or excess processing capacity of the network due to an excessive number of cells occurs, the cells are discarded in the network and may not reach the receiving side.

このような場合、従来においては廃棄されたセルに対
応するブロックを含むフレームより1つ前のフレーム内
の対応するブロックの係数データがそのまま廃棄された
ブロックのデータとされて画像データが出力されてい
た。従ってセル廃棄が起きた場合には受信部において画
像が劣化するという問題点があった。また前フレームの
対応するブロックと現フレームのブロックとの係数のう
ちで低周波係数の差が大きい場合に画質の劣化が特に著
しいという問題点があった。
In such a case, conventionally, the image data is output with the coefficient data of the corresponding block in the frame immediately before the frame including the block corresponding to the discarded cell as the data of the discarded block. Was. Therefore, there is a problem that the image is deteriorated in the receiving unit when the cell is discarded. In addition, when the difference between the low-frequency coefficients among the coefficients of the corresponding block of the previous frame and the blocks of the current frame is large, the deterioration of the image quality is particularly remarkable.

本発明は、送信側で現フレームと前フレームのブロッ
クの対応する低周波係数の大小関係を比較し、差が大き
い時には補償情報を受信側に送信することによって、セ
ル廃棄が起きた場合に差が大きい係数を補償情報によっ
て補償することを目的とする。
According to the present invention, the transmitting side compares the magnitude relationship of the corresponding low frequency coefficients of the blocks of the current frame and the previous frame, and transmits the compensation information to the receiving side when the difference is large. It is intended to compensate for a coefficient having a large value by using compensation information.

〔課題を解決するための手段〕[Means for solving the problem]

第1図は本発明のセル廃棄補償画像復号化方式を用い
る画像データ伝送システムの原理構成ブロック図であ
る。同図において入力画像データは直交変換部14によっ
て、例えばディスクリートコサイン変換され、符号化部
15で符号化されて送信部から伝送路16に出力される。受
信部側では伝送路16から入力されるデータを復号化部17
で復号化し、逆直交変換部12で、例えば逆ディスクリー
トコサイン変換して画像データとして出力する。第1の
発明と第2の発明とでは係数大小関係送信手段11が伝送
路16に出力する内容と、それに伴って例えば復号化部17
内に設けられる廃棄補償手段13の作用とがそれぞれ1部
異なる点を除いては、ブロック図の構成は全く同一であ
る。
FIG. 1 is a block diagram showing the principle configuration of an image data transmission system using the cell discard compensation image decoding system of the present invention. In the figure, input image data is subjected to, for example, discrete cosine transform by an orthogonal transform unit 14, and
The data is encoded at 15 and output from the transmission unit to the transmission path 16. On the receiving side, the data input from the transmission path 16 is decoded by the decoding unit 17.
And the inverse orthogonal transform unit 12 performs, for example, inverse discrete cosine transform and outputs the image data. In the first invention and the second invention, the contents output by the coefficient magnitude relation transmitting means 11 to the transmission line 16 and the content output by the
The construction of the block diagram is completely the same except that the operation of the discard compensation means 13 provided therein is different from that of the first embodiment.

第1図において複数の画素をブロックとして入力画像
データが直交変換され、その直交変換係数領域の係数が
符号化されてセル単位で伝送されるが、この直交変換係
数領域における直流から高周波までの同周数成分を表す
複数の係数が複数の周波数バンドに対応する複数のグル
ープにグループ化される。
In FIG. 1, input image data is orthogonally transformed by using a plurality of pixels as blocks, and coefficients in the orthogonal transform coefficient area are encoded and transmitted in units of cells. A plurality of coefficients representing frequency components are grouped into a plurality of groups corresponding to a plurality of frequency bands.

第1の発明において係数大小関係送信手段11は、画像
データ伝送システムの送信側において現在送信中のブロ
ック内の前述の複数のグループ中で、最低周波数のグル
ープ内の複数の係数とこのブロックを含むフレームより
1枚前のフレーム内で対応するブロック内のそれぞれ対
応する複数の係数との間で、それぞれ対応する係数の差
がそれぞれの係数に対してあらかじめ定められている閾
値より大きいか小さいかを判定し、その結果を示す大小
関係情報と、その差が大きい係数に対する現ブロック内
の係数の値を補償情報として、例えばブロック内の係数
に対してよりも粗い量子化を施した値とを伝送路16を介
してシステムの受信側に送信する。
In the first invention, the coefficient magnitude relation transmitting means 11 includes a plurality of coefficients in a group of the lowest frequency among the plurality of groups in the block currently being transmitted on the transmitting side of the image data transmission system and this block. It is determined whether the difference between the corresponding coefficients in each of the corresponding blocks in the frame one frame before the frame is larger or smaller than a predetermined threshold value for each coefficient. Determine and transmit the magnitude relation information indicating the result and the value of the coefficient in the current block for the coefficient having a large difference as compensation information, for example, a value obtained by performing coarser quantization on the coefficient in the block. It transmits to the receiving side of the system via the path 16.

画像データ伝送システムの受信側で例えば復号化部17
の内部に設けられる廃棄補償手段13は、伝送路16を介し
て伝送されるセルの内容からセル廃棄の有無を検出し、
セル廃棄があった時にはその廃棄セルに対応するブロッ
クに対して、送信側の係数大小関係送信手段11から送信
された係数の差の大小関係を示す情報を用いて、前述の
最低周波数のグループ内の係数のうちで差が小さい係数
についてはそのブロックを含むフレームより1フレーム
前の対応するブロック内の対応する係数を、また差が大
きい係数についてはそのブロック内の対応する係数を係
数大小関係送信手段11から送信された係数値に置き替え
て逆直交変換部12に出力する。
On the receiving side of the image data transmission system, for example, the decoding unit 17
The discard compensating means 13 provided inside detects the presence or absence of cell discard from the contents of the cell transmitted via the transmission path 16,
When a cell is discarded, for the block corresponding to the discarded cell, the information indicating the magnitude relationship of the coefficient difference transmitted from the coefficient magnitude relationship transmitting means 11 on the transmitting side is used to perform the above-described lowest frequency grouping. Of the coefficients having a small difference, the corresponding coefficient in the corresponding block one frame before the frame including the block is transmitted, and for the coefficient having a large difference, the corresponding coefficient in the block is transmitted. The coefficient value is replaced with the coefficient value transmitted from the means 11 and output to the inverse orthogonal transform unit 12.

第2の発明においては、送信側の係数大小関係送信手
段11が、それぞれの係数の差がそれぞれ定められた閾値
より大きいか小さいかを示す情報と、差が大きい係数に
対してはその差の値を受信側に送信する。これに応じて
受信側の廃棄補償手段13は、差が大きい係数については
送信された差と1フレーム前の対応するブロック内の対
応する係数の値とを加算して逆直交変換部12に出力する
点を除いては、第1の発明におけると同様の作用が行わ
れる。
In the second invention, the transmission-side coefficient magnitude relation transmitting means 11 transmits information indicating whether the difference between the respective coefficients is larger or smaller than a predetermined threshold value and, for a coefficient having a large difference, the difference between the coefficients. Send the value to the receiver. In response, the discard compensating means 13 on the receiving side adds the transmitted difference and the value of the corresponding coefficient in the corresponding block one frame before for the coefficient having a large difference, and outputs the result to the inverse orthogonal transform unit 12. Except for this, the same operation as in the first invention is performed.

〔作用〕[Action]

本発明においては、直交変換係数領域の係数が複数の
周波数バンドに対応して複数のグループに分割され、そ
の中で最も低周波のグループに対して本発明のセル廃棄
補償画像復号化方式が適用される。第10図で説明したよ
うに、係数領域の最も左上の係数は直流分を示し、右下
に行くほど交流分の周波数が高くなる。そこで例えば右
上から左下に向かう折線によって係数領域を区分するこ
とにより、複数の周波数バンドに対応する係数のグルー
プ化が行われる。
In the present invention, the coefficients of the orthogonal transform coefficient area are divided into a plurality of groups corresponding to a plurality of frequency bands, and the cell discard compensation image decoding method of the present invention is applied to the lowest frequency group. Is done. As described in FIG. 10, the upper leftmost coefficient in the coefficient area indicates the DC component, and the frequency of the AC component becomes higher toward the lower right. Therefore, for example, the coefficient regions corresponding to a plurality of frequency bands are grouped by dividing the coefficient region by a broken line from the upper right to the lower left.

そしてこれらのグループの中で最も低周波のグループ
内の複数の係数に対して、現フレーム内と1フレーム前
のフレーム内のそれぞれ対応する係数の間で差がとら
れ、その差がそれぞれの係数に対してあらかじめ定めら
れている閾値より大きいか小さいかを示す大小関係情報
と、その差が大きい時には第1の発明では現ブロック内
の係数の値が、また第2の発明では差の値そのものが受
信側に送信され、受信側では送信側から送られた各係数
の大小関数を示す情報と差が大きい場合の現フレームの
係数の値、または差の値を示す情報とを用いて、セル廃
棄が起きた場合に1つ前のフレーム内の係数の値を補償
して出力する。また最低周波数グループ以外のグループ
の係数としては、例えば前のフレーム内で対応する係数
の値がそのまま出力される。
Then, for a plurality of coefficients in the lowest frequency group among these groups, a difference is taken between the corresponding coefficient in the current frame and the corresponding coefficient in the frame immediately before the previous frame, and the difference is calculated for each coefficient. And magnitude relationship information indicating whether the difference is larger or smaller than a predetermined threshold value, and when the difference is large, the value of the coefficient in the current block in the first invention and the value of the difference itself in the second invention Is transmitted to the receiving side, the receiving side uses the information indicating the magnitude function of each coefficient sent from the transmitting side and the value of the coefficient of the current frame when the difference is large, or the information indicating the value of the difference, and When discarding occurs, the coefficient value in the immediately preceding frame is compensated and output. As a coefficient of a group other than the lowest frequency group, for example, the value of the corresponding coefficient in the previous frame is output as it is.

以上のように本発明においては、現フレームのブロッ
クの係数がセル廃棄によって失われた場合にも、それら
の係数のうちで低周波の係数の誤差を少なくして画像デ
ータを出力することができる。
As described above, in the present invention, even when coefficients of the block of the current frame are lost due to cell discarding, it is possible to output image data by reducing errors of low-frequency coefficients among those coefficients. .

〔実施例〕 第2図は本発明における直交変換係数領域の周波数バ
ンドの設定法の実施例である。同図において最も左上の
係数は直流分を示し、他の全ての係数は交流分を示す
が、交流分は図で右下の領域ほどその周波数が高い。そ
こで同図に示すように、係数領域の右上側から左下側に
向かう折線(太線)によって周波数バンドを区切ること
ができる。同図では8×8の画素に対する係数領域を示
しているが、画素数はこれに限定されるものでなく、ま
た太い折線での周波数バンドの区切り方もこれに限定さ
れるものでないことは当然である。
[Embodiment] FIG. 2 shows an embodiment of a method of setting a frequency band in an orthogonal transform coefficient region according to the present invention. In the figure, the upper leftmost coefficient indicates a DC component, and all other coefficients indicate an AC component. The AC component has a higher frequency in the lower right region in the figure. Therefore, as shown in the figure, the frequency band can be divided by a broken line (thick line) from the upper right side to the lower left side of the coefficient area. Although the figure shows a coefficient area for 8 × 8 pixels, the number of pixels is not limited to this, and the way of dividing the frequency band by a thick broken line is not limited to this. It is.

第3図は3つの係数からなる最低周波数のグループの
係数に対する第1の発明の実施例の概念図である。同図
において(a)は現フレームより1枚前のフレーム内の
係数を示し、最低周波数のグループは直流分のL1、交流
分のL2とL3の3つを含んでいる。同図(b)は現在のフ
レーム内の係数を示し、最低周波数のグループは直流分
のl1と交流分のl2およびl3から成っている。なおこれら
のフレーム内の係数のうち最低周波数グループ以外の係
数については、本発明の適用外であるので、それらの値
はすべてHとしてある。
FIG. 3 is a conceptual diagram of an embodiment of the first invention for coefficients of a group of the lowest frequency composed of three coefficients. In the figure, (a) shows coefficients in a frame one frame before the current frame, and the group of the lowest frequency includes three components of DC component L1, AC components L2 and L3. FIG. 6B shows coefficients in the current frame, and the group of the lowest frequency is composed of DC component l1 and AC components l2 and l3. Note that, among the coefficients in these frames, coefficients other than the lowest frequency group are not applied to the present invention, and thus all of the values are set to H.

第3図(a)と(b)との最低周波数グループの係数
を相互に比較して、現フレーム内の係数と前のフレーム
内の係数との差がそれぞれの係数に対してあらかじめ定
められている閾値より大きいか小さいかが判定される。
ここでそれぞれの係数に対する閾値は全て同じでもよい
が、周波数によって全体の画像に与える影響も異なるた
めに異なる値を用いてもよい。そして例えば直流分l1と
L1との差、および交流分のうちでl3とL3との差がそれぞ
れの閾値を越えている場合には、それぞれの係数の大小
関係を示す情報と共に係数l1とl3を、例えば通常の係数
の伝送時の量子化におけるよりも粗い量子化を行った結
果としての(l1)および(l3)として受信側に伝送す
る。
The coefficients of the lowest frequency group in FIGS. 3A and 3B are compared with each other, and the difference between the coefficient in the current frame and the coefficient in the previous frame is predetermined for each coefficient. It is determined whether it is larger or smaller than the threshold value.
Here, the threshold value for each coefficient may be the same, but different values may be used because the influence on the entire image differs depending on the frequency. And for example, DC component l1
If the difference between L1 and the difference between l3 and L3 in the AC component exceeds the respective threshold value, the coefficients l1 and l3 together with information indicating the magnitude relation of the respective coefficients, for example, the normal coefficient The result is transmitted to the receiving side as (l1) and (l3) as a result of performing coarser quantization than in the quantization at the time of transmission.

第3図(c)はセル廃棄が起こらなかった場合の通常
の復号化後に現フレームとして出力される係数を示して
いる。これに対して図(d)はセル廃棄が起こった場合
の復号化後の係数であり、最低周波数領域の係数のうち
で、現フレームと前のフレームとの間で差の小さい係数
については前のフレームの値L2が、また差の大きい係数
については送信側から送られた(l1)および(l3)が出
力される。
FIG. 3 (c) shows the coefficients output as the current frame after normal decoding when no cell discard has occurred. On the other hand, FIG. 4D shows the coefficients after decoding when cell discarding occurs, and among the coefficients in the lowest frequency domain, those having a small difference between the current frame and the previous frame are the previous coefficients. Is output, and (l1) and (l3) sent from the transmitting side are output for coefficients having a large difference.

第4図は本発明における画像データ伝送システムの実
施例の全体構成ブロック図である。同図において送信側
は最低周波数グループ内の各係数について後述する減算
器22の出力によって、現フレームと前のフレームとの係
数の大小関係を示す情報とともに、第1の発明では両係
数の差が大きい現フレーム内係数の値を、また第2の発
明では両係数の差の値を受信側の、後述する廃棄補償部
30に送信する大小関係および補償情報送信部19、入力画
像データを直交変換の一種であるディスクリートコサイ
ン変換(DCT)するDCT部20、DCT部20の出力Sとフレ
ームメモリ21に格納されている1つ前のフレーム内の対
応するブロックデータSとの差をとる減算器22、減算
器22の出力Sを量子化する量子化器23、量子化器23の
出力を再び量子化前の形式Sに戻す逆量子化器24、逆
量子化器24の出力Sとフレームメモリ21の出力である
前のフレーム内のブロックデータSとを加算する加算
器25、加算器25の出力Sにリーク係数αをかけフレー
ムメモリ21に出力するリーク係数乗算器26から成る。
FIG. 4 is an overall configuration block diagram of an embodiment of an image data transmission system according to the present invention. In the figure, the transmitting side uses the output of the subtractor 22 (described later) for each coefficient in the lowest frequency group together with information indicating the magnitude relationship between the coefficient of the current frame and the previous frame and the difference between the two coefficients in the first invention. The large value of the coefficient in the current frame, and in the second invention, the value of the difference between the two coefficients, the discard compensating unit (described later) on the receiving side
A magnitude information and compensation information transmitting section 19 to be transmitted to 30, a DCT section 20 for performing discrete cosine transform (DCT), which is a kind of orthogonal transform, an output S of the DCT section 20 and 1 stored in a frame memory 21. A subtracter 22, which takes the difference from the corresponding block data S in the previous frame, a quantizer 23, which quantizes the output S of the subtracter 22, and an output of the quantizer 23, again into the format S before quantization. An inverse quantizer 24, an adder 25 for adding the output S of the inverse quantizer 24 and the block data S in the previous frame, which is an output of the frame memory 21, and a leak coefficient α to the output S of the adder 25. It comprises a leak coefficient multiplier 26 for outputting to the multiplication frame memory 21.

また受信側は、伝送路を経由して入力される、信号
Sが量子化された入力データを再び元の形式Rに戻す
逆量子化器27、その出力Rとフレームメモリ28に格納
されている前のフレーム内のブロックデータRとの和
をとる加算器29、第1図の廃棄補償手段13に相当する廃
棄補償部30、廃棄補償部30の出力Rに対して逆ディス
クリートコサイン変換を施し画素領域の画像データを出
力する逆DCT部31および廃棄補償部30の出力Rにリー
ク係数αをかけてフレームメモリ28に出力するリーク係
数乗算器32から成る。
On the receiving side, an inverse quantizer 27 for returning the input data obtained by quantizing the signal S, which is input via the transmission line, to the original format R again, and the output R and the frame memory 28 are stored. An adder 29 for taking the sum with the block data R in the previous frame, a discard compensator 30 corresponding to the discard compensator 13 in FIG. 1, and an output R of the discard compensator 30 are subjected to inverse discrete cosine transform to obtain a pixel. An inverse DCT unit 31 that outputs image data of the area and a leak coefficient multiplier 32 that multiplies the output R of the discard compensation unit 30 by the leak coefficient α and outputs the result to the frame memory 28.

第4図はフレーム間符号化方式を用いた本発明の実施
例であり、例えば送信側では現在送信すべきフレーム内
ブロックデータSと前に送信されたフレーム内のブロ
ックデータSとの差、すなわちフレーム間差分がS
とされ、それが量子化されて例えばハフマン符号化さ
れ、伝送路上に出力される。受信側では伝送路から差分
Rを受け取り、前のフレーム内のブロックデータR
との和をとることによって現在のフレーム内のブロック
データRを得ることになる。そして送信側では差分
Sと前のフレーム内のブロックデータSとの和が加算
器25によってとられ、リーク係数αが乗じられた後に、
フレームメモリ21に次のフレームに対するフレーム間差
分を求めるために格納される。受信部においても、同様
に現在のブロックデータRにリーク係数αが乗じられ
た後、フレームメモリ28に格納される。
FIG. 4 shows an embodiment of the present invention using the inter-frame coding method. For example, the transmitting side calculates the difference between the block data S in the frame to be currently transmitted and the block data S in the previously transmitted frame, that is, The difference between frames is S
Is quantized, subjected to, for example, Huffman coding, and output on a transmission path. On the receiving side, the difference R is received from the transmission path, and the block data R in the previous frame is received.
To obtain the block data R in the current frame. Then, on the transmitting side, the sum of the difference S and the block data S in the previous frame is obtained by the adder 25, and after being multiplied by the leak coefficient α,
It is stored in the frame memory 21 in order to calculate an inter-frame difference with respect to the next frame. Similarly, in the receiving unit, the current block data R is multiplied by the leak coefficient α and then stored in the frame memory 28.

リーク係数αはたとえばセル廃棄が起こってもその影
響を短時間のうちに減衰させるためのものである。例え
ば受信側において差分D1が入力し、フレームメモリ28に
格納されているその前のフレームのブロックデータFM0
との和がとられ、その和(D1+FM0)に対してリーク係
数αが乗じられ、次式で表される現在のフレームに対す
るブロックデータがフレームメモリ28の内容FM1になっ
たものとする。
The leak coefficient α is for attenuating the influence of a cell discard in a short time even if it occurs. For example, the difference D 1 is input on the receiving side, and the block data FM 0 of the previous frame stored in the frame memory 28 is input.
And the sum (D 1 + FM 0 ) is multiplied by the leak coefficient α, and the block data for the current frame represented by the following equation becomes the content FM 1 of the frame memory 28. I do.

FM1=(D1+FM0)α=D1α+FM0α 続いて次のフレーム間のブロックデータである差分D2
が伝送路から入力されるとフレームメモリ28の内容は次
式となる。
FM 1 = (D 1 + FM 0) α = D 1 α + FM 0 α Subsequently difference D 2 is a block data between the next frame
Is input from the transmission path, the contents of the frame memory 28 are as follows.

FM2=(D2+FM1)α=D2α+D1α +FM0α さらに次のフレーム間のブロックデータD3が入力され
るとフレームメモリ28の内容は次式で与えられる。
The contents of the FM 2 = (D 2 + FM 1) α = D 2 α + D 1 α + FM 0 α 2 further when the block data D 3 between the following frames are input frame memory 28 is given by the following equation.

FM3=(D3+FM2)α=D3α+D2α+D1α+FM0α このように例えばセル廃棄が起こった場合の予測誤差
D1の画像全体への影響は、nフレームの入力後にはα
に減衰する。そこでαを1より小さくとることにより、
短時間のうちにその影響をほぼ0にすることができる。
FM 3 = (D 3 + FM 2) α = D 3 α + D 2 α 2 + D 1 α 3 + FM 0 α 3 prediction error when Thus, for example cell discard has occurred
Effect on the overall image of the D 1 is after input of the n frames alpha n
Attenuate. Then, by taking α smaller than 1,
The effect can be reduced to almost zero within a short time.

なお第4図におけるディスクリートコサイン変換(DC
T)はコサイン関数から作られた変換行例で画像データ
の直交変換を行うものであり、演算に乗算器が必要で高
速演算に難点があったが、高速な信号処理プロセッサの
開発に伴って静止画伝送やテレビ会議信号などの準動画
伝送に盛んに使われるようになってきた。
The discrete cosine transform (DC in FIG. 4)
T) is an example of a transformation row made from a cosine function, which performs orthogonal transformation of image data. The computation requires a multiplier, and there is a drawback in high-speed computation, but with the development of a high-speed signal processor, It has been increasingly used for transmission of quasi-moving images such as still image transmission and video conference signals.

第5図は第4図の画像データ伝送システムにおける最
低周波数グループの係数データの実施例である。同図は
係数の値の差が大きい時に、送信側から現フレーム内の
係数値そのものを粗い量子化を施して送信する第1の発
明におけるデータの実施例である。同図においては最低
周波数グループ内の係数のみが示され、他の高周波成分
を示す係数は全て省略されている。
FIG. 5 shows an embodiment of coefficient data of the lowest frequency group in the image data transmission system of FIG. FIG. 11 shows an embodiment of data according to the first aspect of the present invention in which when the difference between coefficient values is large, the coefficient value itself in the current frame is coarsely quantized and transmitted from the transmission side. In the figure, only the coefficients in the lowest frequency group are shown, and all coefficients indicating other high frequency components are omitted.

第5図(a)の送信側のデータのうちSは現在のフ
レーム内の連続する6個のブロックに対する最低周波数
グループの係数を示している。Sは1つ前のフレーム
内の最低周波数のグループの係数を示し、SとSと
の差が第4図の減算器22によって、その差すなわちフレ
ーム間信号を示すSを量子化した値が符号化されて、
伝送路上に出力される。
In the data on the transmission side in FIG. 5 (a), S indicates the coefficient of the lowest frequency group for six consecutive blocks in the current frame. S indicates the coefficient of the group of the lowest frequency in the immediately preceding frame, and the difference between S and S is obtained by the subtractor 22 shown in FIG. Being
Output on the transmission path.

ここで現フレームのデータSと前フレーム内のデー
タSとの間で大小判定を同う閾値を各係数について全
て同一の8として、閾値より差が大きい場合にそれを符
号1で、小さい場合に0で表すことにすると、第4図の
大小関係および、補償情報伝送部19から伝送路上に出さ
れる補償情報は次のようになる。
Here, the threshold value for determining the magnitude between the data S of the current frame and the data S in the previous frame is set to 8 which is the same for each coefficient. If the difference is larger than the threshold value, the code is 1; When expressed by 0, the magnitude relationship in FIG. 4 and the compensation information output on the transmission path from the compensation information transmitting unit 19 are as follows.

この補償情報の縦棒は連続する6個のブロック(上段
の左から第1〜3ブロック、下段の左から第4〜6ブロ
ックとする。)の区切りを示し、第1から第3のブロッ
ク、および第5、第6のブロックに対しては対応する係
数の間の差が閾値より小さいことを示す0が全ての係数
について出力される。
The vertical bars of this compensation information indicate the divisions of six consecutive blocks (the first to third blocks from the upper left and the fourth to sixth blocks from the lower left), and the first to third blocks, For the fifth and sixth blocks, 0 indicating that the difference between the corresponding coefficients is smaller than the threshold is output for all the coefficients.

これに対して、第4のブロックに対しては直流分に対
する差22が閾値より大きいことを示す符号1の次に現フ
レーム内のブロックの直流分30の補助情報(例えば32)
がカッコ内に示され、次に直流分の右側の係数間の差が
閾値より小さいことを示す符号0が、またその次に直流
分の下の係数の差−9が閾値より大きいことを示す符号
1に続いて、現フレーム内の直流分の1の補助情報(例
えば0)がカッコ内に示されている。
On the other hand, for the fourth block, next to the code 1 indicating that the difference 22 with respect to the DC component is larger than the threshold, auxiliary information (for example, 32) of the DC component 30 of the block in the current frame.
Is shown in parentheses, the sign 0 indicating that the difference between the coefficients on the right side of the DC component is smaller than the threshold value, and the sign indicating that the difference -9 of the coefficient below the DC component is larger than the threshold value. Subsequent to the code 1, auxiliary information (for example, 0) of one-fourth of the DC in the current frame is shown in parentheses.

第5図(b)は受信側における係数データの実施例で
ある。図において、前のフレームに対する係数Rは送
信側における前のフレームに対するデータS等しい。
そしてRに示すように、伝送路から入力されるセルの
うち第4ブロックと第5ブロックに対するセルが廃棄さ
れたものとすると、前述の大小関係および補償情報送信
部19からの補助情報を用いて、第4図で逆ディスクリー
トコサイン変換部31に出力されるRの内容が作成され
る。
FIG. 5B shows an embodiment of coefficient data on the receiving side. In the figure, the coefficient R for the previous frame is equal to the data S for the previous frame on the transmitting side.
Then, as shown in R, assuming that the cells for the fourth block and the fifth block among the cells input from the transmission path have been discarded, the above-mentioned magnitude relationship and the auxiliary information from the compensation information transmitting unit 19 are used. 4, the contents of R output to the inverse discrete cosine transform unit 31 are created.

すなちRのうち、第5ブロックに対してはRの係
数の値がそのまま全て用いられる。これに対して、第4
のブロックに対しては直流分として送信側から送られた
補助情報の値32が、またその下の係数として同じく送信
側から送られた値0が、直流分の右側の係数に対しては
前のフレーム内のデータRにおける値13が用いられて
現フレームのデータとされる。
That is, for the fifth block of R, all the values of the coefficients of R are used as they are. In contrast, the fourth
The value 32 of the auxiliary information sent from the transmitting side as a DC component for the block of, the value 0 also sent from the transmitting side as the coefficient below it, and the previous coefficient for the coefficient on the right side of the DC component Is used as the data of the current frame by using the value 13 in the data R in the frame.

第6図は第2の発明、すなわち現在のフレームと前の
フレームとの係数の間の差が大きい時に、その差を粗く
量子化して受信側に送る場合の受信側で補償された係数
データの実施例である。同図において送信側大小関係お
よび補助情報送信部19から受信側に送られる補助情報は
次のようなものである。
FIG. 6 shows the second invention, that is, when the difference between the coefficient of the current frame and the previous frame is large, the difference is roughly quantized and transmitted to the receiving side. This is an example. In the figure, the size relationship on the transmitting side and the auxiliary information sent from the auxiliary information transmitting unit 19 to the receiving side are as follows.

すなわち、第4ブロックの直流成分に対する差22の補
助情報として22を量子化した値、例えば24が、また直流
分の下の交流成分に対する差−9の補助情報として、例
えば−8が受信側に送られ、受信側で逆ディスクリート
コサイン変換部31に入力されるRの第4ブロックの直
流成分が32、その右の交流成分は13、直流分の下の交流
分は2となる。受信側のR以外のブロックデータ、
R、Rおよび送信側のブロックデータは全て第5図に
おけると同様である。
That is, a value obtained by quantizing 22 as the auxiliary information of the difference 22 with respect to the DC component of the fourth block, for example, 24, and, as the auxiliary information of the difference -9 with respect to the AC component below the DC component, for example, -8, is provided to the receiving side. The DC component of the fourth block of R that is sent and input to the inverse discrete cosine transform unit 31 on the receiving side is 32, the AC component on the right is 13, and the AC component below the DC component is 2. Block data other than R on the receiving side,
R, R and block data on the transmitting side are all the same as in FIG.

第7図は第1の発明における大小関係および補償情報
送信部19の処理フローチャートの実施例である。同図に
おいて処理がスタートすると、まずステップ33で最低周
波数グループに対する処理が全ての係数について終わっ
たか否かが判定され、終わっていない場合にはステップ
34で現在のフレームの係数値と前のフレームの係数値と
の差Dが計算される。そしてステップ35で差Dが閾値よ
り大きいか否かが判定され、その差が小さい場合にはス
テップ36で差が小さいことが受信側に送信されてステッ
プ33に戻る。
FIG. 7 is an embodiment of a processing flowchart of the magnitude relationship and compensation information transmitting section 19 in the first invention. When the process starts in FIG. 12, it is first determined in step 33 whether or not the process for the lowest frequency group has been completed for all coefficients.
At 34, the difference D between the coefficient value of the current frame and the coefficient value of the previous frame is calculated. Then, in step 35, it is determined whether or not the difference D is larger than the threshold value. If the difference is small, the fact that the difference is small is transmitted to the receiving side in step 36, and the process returns to step 33.

ステップ35で差が閾値より大きい場合には、ステップ
37で差が大きいことが受信側に送信されると同時に、ス
テップ38で現在のフレーム内の係数値が粗く量子化され
て送信されステップ33に戻る。最低周波数グループの全
ての係数についてステップ33からの処理が繰り返され、
全ての係数に対する処理が終わった時点で処理が終了す
る。
If the difference is greater than the threshold in step 35,
At 37, the fact that the difference is large is transmitted to the receiving side, and at the same time, the coefficient value in the current frame is roughly quantized and transmitted at step 38, and the process returns to step 33. The processing from step 33 is repeated for all coefficients of the lowest frequency group,
The processing ends when the processing for all coefficients is completed.

第2の発明においては、ステップ35で差か閾値より大
きい場合にステップ37で差が大きいことが送信されると
同時に、ステップ38では現在のフレームの係数値そのも
のでなく、差が粗く量子化されて送信される点を除いて
は、その処理は全く同様である。
In the second invention, when the difference is larger than the threshold value in Step 35, the fact that the difference is large is transmitted in Step 37, and in Step 38, not the coefficient value itself of the current frame but the difference is coarsely quantized. The processing is exactly the same, except that the information is transmitted.

第8図は廃棄補償部30の処理実施例のフローチャート
である。同図において処理がスタートすると、まずステ
ップ39でセル廃棄の有無が判定される。廃棄がない場合
には廃棄補償部30は何らの処理を施すことなく、加算器
29からの出力をそのまま逆DCT部31に出力する。
FIG. 8 is a flowchart of a processing embodiment of the discard compensation unit 30. When the process is started in the figure, first, at step 39, it is determined whether or not the cell is discarded. If there is no discard, the discard compensation unit 30 does not perform any processing and the adder
The output from 29 is output to inverse DCT section 31 as it is.

セル廃棄があった場合には、現在のフレームと前のフ
レームとの係数の間で差が大きい低周波数について前の
フレーム内の係数の置き替えが行われて処理を終わる。
ここで係数の置き替えは、第1の発明では、受信側から
送られた現在のフレームの係数の値を量子化した値、ま
た第2の発明では係数の差を量子化した値を用いて行わ
れる。
If a cell is discarded, the coefficients in the previous frame are replaced for the low frequency having a large difference between the coefficient of the current frame and the coefficient of the previous frame, and the process ends.
Here, the replacement of the coefficient is performed by using the value obtained by quantizing the coefficient value of the current frame transmitted from the receiving side in the first invention, and using the value obtained by quantizing the difference between the coefficients in the second invention. Done.

以上の説明では差の大きい係数、またはその差の量子
化は第4図の量子化器23による通常の量子化より粗く行
われるものとしたが、これは補助情報がセル廃棄の時に
のみ用いられるためであり、その量子化を量子化器23と
同じレベルで行ってもよいことは当然である。さらにフ
レーム間符号化方式を例として本発明の実施例を説明し
たが、符号化方式はこれにとらわれず、フレーム内符号
化であっても本発明を適用することができる。
In the above description, the coefficient having a large difference or the quantization of the difference is assumed to be performed more coarsely than the normal quantization by the quantizer 23 in FIG. 4, but this is used only when the auxiliary information is discarded. For this reason, it goes without saying that the quantization may be performed at the same level as the quantizer 23. Further, the embodiment of the present invention has been described by taking the inter-frame coding method as an example. However, the coding method is not limited to this, and the present invention can be applied to intra-frame coding.

〔発明の効果〕〔The invention's effect〕

以上詳細に説明したように、本発明によればセル廃棄
が起こっても現在のフレームの低周波係数の誤差を小さ
くすることができ、セル廃棄時の画質への影響を少なく
することができる。
As described above in detail, according to the present invention, even if a cell is discarded, the error of the low-frequency coefficient of the current frame can be reduced, and the effect on the image quality when the cell is discarded can be reduced.

【図面の簡単な説明】[Brief description of the drawings]

第1図は本発明における画像データ伝送システムの原理
構成を示すブロック図、 第2図は係数領域の周波数バンドの設定法の実施例をを
示す図、 第3図は3つの係数から成る最低周波数グループの係数
に対する第1の発明の実施例の概念を示す図、 第4図は画像データ伝送システムの実施例の全体構成を
示すブロック図、 第5図は第1の発明における最低周波数グループの係数
データの実施例を示す図、 第6図は第2の発明における受信側で補償された係数デ
ータの実施例を示す図、 第7図は第1の発明における大小関係および補償情報送
信部の処理実施例のフローチャートを示す図、 第8図は廃棄補償部の処理実施例のフローチャートを示
す図、 第9図は正規直交変換を用いる画像データ伝送システム
の全体構成を示すブロック図、 第10図は画像で直交変換後の変換係数領域を示す図であ
る。 12……逆直交変換部、 14……直交変換部、 15……符号化部、 16……伝送部、 17……復号化部、 19……大小関係および補償情報送信部、 20……ディスクリートコサイン変換(DCT)部、 21,28……フレームメモリ、 30……廃棄補償部、 31……逆DCT部.
FIG. 1 is a block diagram showing a principle configuration of an image data transmission system according to the present invention, FIG. 2 is a diagram showing an embodiment of a method of setting a frequency band in a coefficient region, and FIG. 3 is a lowest frequency comprising three coefficients. FIG. 4 is a diagram showing the concept of the first embodiment of the present invention with respect to group coefficients; FIG. 4 is a block diagram showing the overall configuration of the embodiment of the image data transmission system; FIG. 5 is a coefficient of the lowest frequency group in the first invention; FIG. 6 is a diagram showing an embodiment of data, FIG. 6 is a diagram showing an embodiment of coefficient data compensated on the receiving side in the second invention, and FIG. 7 is a process of a magnitude relation and compensation information transmitting section in the first invention. FIG. 8 is a diagram showing a flowchart of an embodiment, FIG. 8 is a diagram showing a flowchart of a processing embodiment of a discard compensation unit, FIG. 9 is a block diagram showing an overall configuration of an image data transmission system using orthonormal transform, FIG. 10 is a diagram illustrating a transform coefficient domain after orthogonal transformation in the image. 12: inverse orthogonal transform section, 14: orthogonal transform section, 15: encoding section, 16: transmission section, 17: decoding section, 19: magnitude relation and compensation information transmission section, 20: discrete Cosine transform (DCT) section, 21, 28 ... frame memory, 30 ... discard compensation section, 31 ... inverse DCT section.

フロントページの続き (58)調査した分野(Int.Cl.6,DB名) H04N 7/24 - 7/68Continuation of front page (58) Field surveyed (Int.Cl. 6 , DB name) H04N 7/ 24-7/68

Claims (2)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】複数の画素をブロックとして入力画像デー
タを直交変換部(14)によって直交変換し、該直交変換
係数領域の係数を符号化してセル単位で伝送し、受信側
に逆直交変換を行う逆直交変換部(12)を有する画像デ
ータ伝送システムにおいて、 前記直交変換係数領域における直流から高周波までの周
波数成分を表す複数の係数を複数の周波数帯域に対応す
る複数のグループにグループ化し、 前記画像データ伝送システムの送信側に、現在送信中の
ブロック内の前記複数のグループ中の最低周波数のグル
ープ内の複数の係数と、該ブロックを含むフレームより
時間的に1枚前のフレーム内で該ブロックに対応するブ
ロック内で該複数の係数にそれぞれ対応する複数の係数
との間で、それぞれ対応する係数の差が大か小かを示す
情報と、誤差が大の係数に対する現ブロック内の係数の
値とを前記画像データ伝送システムの受信側に送信する
係数大小関係送信手段(11)を有し、 前記画像データ伝送システムの受信側に、セル廃棄の有
無を検出し、セル廃棄があった時には該廃棄セルに対応
するブロックに対して該係数大小関係送信手段(11)か
ら送信された係数の差の大小関係を示す情報によって、
前記最低周波数グループ内の係数のうちで差が小の係数
については該ブロックを含むフレームより1フレーム前
の該ブロックに対応するブロック内の対応する係数デー
タを、また差が大の係数については該ブロック内の対応
する係数を前記係数大小関係送信手段(11)から送信さ
れた係数値に置き替えたデータを逆直交変換部(12)に
出力する廃棄補償手段(13)を備えたことを特徴とする
セル廃棄補償画像復号化方式。
An orthogonal transform unit (14) orthogonally transforms input image data into a plurality of pixels as a block, encodes coefficients in the orthogonal transform coefficient area and transmits them in units of cells, and performs inverse orthogonal transform on a receiving side. In the image data transmission system having an inverse orthogonal transform unit (12), a plurality of coefficients representing frequency components from DC to high frequency in the orthogonal transform coefficient region are grouped into a plurality of groups corresponding to a plurality of frequency bands, The transmitting side of the image data transmission system transmits a plurality of coefficients in the lowest frequency group among the plurality of groups in the block currently being transmitted, and the coefficient in a frame one frame before the frame including the block. In a block corresponding to the block, between a plurality of coefficients respectively corresponding to the plurality of coefficients, information indicating whether the difference between the corresponding coefficient is large or small, A coefficient magnitude relation transmitting means (11) for transmitting a coefficient value in the current block with respect to a coefficient having a large difference to a receiving side of the image data transmission system; Is detected, and when the cell is discarded, the information indicating the magnitude relation of the coefficient difference transmitted from the coefficient magnitude relation transmitting means (11) to the block corresponding to the discarded cell,
Among the coefficients in the lowest frequency group, the coefficient with the small difference is the corresponding coefficient data in the block corresponding to the block one frame before the frame including the block, and the coefficient with the large difference is the A discard compensating means (13) for outputting data obtained by replacing a corresponding coefficient in the block with the coefficient value transmitted from the coefficient magnitude transmitting means (11) to the inverse orthogonal transform unit (12). Cell discard compensation image decoding method.
【請求項2】複数の画素をブロックとして入力画像デー
タを直交変換部(14)によって直交変換し、該直交変換
係数領域の係数を符号化してセル単位で伝送し、受信側
に逆直交変換を行う逆直交変換部(12)を有する画像デ
ータ伝送システムにおいて、 前記直交変換係数領域における直流から高周波までの周
波数成分を表す複数の係数を複数の周波数帯域に対応す
る複数のグループにグループ化し、 前記画像データ伝送システムの送信側に、現在送信中の
ブロック内の前記複数のグループ中の最低周波数のグル
ープ内の複数の係数と、該ブロックを含むフレームより
時間的に1枚前のフレーム内で該ブロックに対応するブ
ロック内で該複数の係数にそれぞれ対応する複数の係数
との間で、それぞれ対応する係数の差が大か小かを示す
情報と、誤差が大の係数に対する該係数の差値とを前記
画像データ伝送システムの受信側に送信する係数大小関
係送信手段(11)を有し、 前記画像データ伝送システムの受信側に、セル廃棄の有
無を検出し、セル廃棄があった時には該廃棄セルに対応
するブロックに対して該係数大小関係送信手段(11)か
ら送信された係数の差の大小関係を示す情報によって、
前記最低周波数グループ内の係数のうちで差が小の係数
については該ブロックを含むフレームより1フレーム前
の該ブロックに対応するブロック内の対応する係数を用
いて、また差が大の係数については前記係数大小関係送
信手段(11)から送信された係数の差の値と該ブロック
を含むフレームより1フレーム前の該ブロックに対応す
るブロック内の対応する係数とを用いて前記最低周波数
グループ内の係数を逆直交変換部(12)に出力する廃棄
補償手段(13)を備えたことを特徴とするセル廃棄補償
画像復号化方式。
2. An orthogonal transform unit (14) orthogonally transforms input image data into a plurality of pixels as a block, encodes coefficients in the orthogonal transform coefficient area, transmits the cells in cell units, and performs inverse orthogonal transform on a receiving side. In the image data transmission system having an inverse orthogonal transform unit (12), a plurality of coefficients representing frequency components from DC to high frequency in the orthogonal transform coefficient region are grouped into a plurality of groups corresponding to a plurality of frequency bands, The transmitting side of the image data transmission system transmits a plurality of coefficients in the lowest frequency group among the plurality of groups in the block currently being transmitted, and the coefficient in a frame one frame before the frame including the block. In a block corresponding to the block, between a plurality of coefficients respectively corresponding to the plurality of coefficients, information indicating whether the difference between the corresponding coefficient is large or small, And a coefficient magnitude relation transmitting means (11) for transmitting a difference value of the coefficient with respect to the coefficient having a large difference to a receiving side of the image data transmission system. Is detected, and when a cell is discarded, information indicating the magnitude relation of the coefficient difference transmitted from the coefficient magnitude relation transmitting means (11) to the block corresponding to the discarded cell,
Among coefficients in the lowest frequency group, a coefficient having a small difference uses a corresponding coefficient in a block corresponding to the block one frame before the frame including the block, and a coefficient having a large difference is used for a coefficient having a large difference. Using the value of the difference between the coefficients transmitted from the coefficient magnitude relation transmitting means (11) and the corresponding coefficient in the block corresponding to the block one frame earlier than the frame including the block, the lowest frequency group within the lowest frequency group is used. A cell discard compensation image decoding method, comprising: a discard compensation means (13) for outputting coefficients to an inverse orthogonal transform unit (12).
JP26226089A 1989-10-09 1989-10-09 Cell loss compensation image decoding method Expired - Fee Related JP2776425B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP26226089A JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method
DE69031106T DE69031106D1 (en) 1989-10-09 1990-10-09 System for transferring image data
CA002027184A CA2027184C (en) 1989-10-09 1990-10-09 Image data transmission system
US07/594,090 US5191446A (en) 1989-10-09 1990-10-09 Image data transmission system
EP90119308A EP0422575B1 (en) 1989-10-09 1990-10-09 Image data transmission system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP26226089A JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method

Publications (2)

Publication Number Publication Date
JPH03124184A JPH03124184A (en) 1991-05-27
JP2776425B2 true JP2776425B2 (en) 1998-07-16

Family

ID=17373310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP26226089A Expired - Fee Related JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method

Country Status (1)

Country Link
JP (1) JP2776425B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3002019B2 (en) * 1991-07-04 2000-01-24 富士通株式会社 Image coding transmission system with cell discard compensation function

Also Published As

Publication number Publication date
JPH03124184A (en) 1991-05-27

Similar Documents

Publication Publication Date Title
JP2675529B2 (en) Video coding method and apparatus thereof
JP3431331B2 (en) Video encoding device, video transmission device, and video conference device
EP0519962B1 (en) Digital image coding using a random scanning of image frames
US6721359B1 (en) Method and apparatus for motion compensated video coding
US5438374A (en) System and method for filtering video signals
US7593464B2 (en) Information processing apparatus and method, and program storage medium
EP0720374A1 (en) Apparatus for parallel decoding of digital video signals
EP0585051B1 (en) Image processing method and apparatus
EP0561593B1 (en) Image compression apparatus
JPH0746594A (en) Encoding method and its device
JPH06189290A (en) Video signal encoding device using 1d/2d dct
US7436889B2 (en) Methods and systems for reducing requantization-originated generational error in predictive video streams using motion compensation
US6040875A (en) Method to compensate for a fade in a digital video input sequence
JP2776425B2 (en) Cell loss compensation image decoding method
EP0720372A1 (en) Apparatus for parallel encoding/decoding of digital video signals
JP3497664B2 (en) Stereoscopic image coding device
JP2776424B2 (en) Cell loss compensation image decoding method
JP4089025B2 (en) Image encoding apparatus, image encoding method, image transmission system, and image transmission method
JPH03283989A (en) Color picture coding system
JP3107676B2 (en) Quantization circuit
JPH0711832B2 (en) High-efficiency image coding device
JPH03124182A (en) Cell abort compensation picture decoding system
JPH07222048A (en) Image pickup device
JP2710135B2 (en) Adaptive coding between frames / intra-frame
JPH05227513A (en) Video signal transmitter

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees