JPH03124184A - Cell abort compensation picture decoding system - Google Patents

Cell abort compensation picture decoding system

Info

Publication number
JPH03124184A
JPH03124184A JP1262260A JP26226089A JPH03124184A JP H03124184 A JPH03124184 A JP H03124184A JP 1262260 A JP1262260 A JP 1262260A JP 26226089 A JP26226089 A JP 26226089A JP H03124184 A JPH03124184 A JP H03124184A
Authority
JP
Japan
Prior art keywords
coefficient
coefficients
block
difference
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP1262260A
Other languages
Japanese (ja)
Other versions
JP2776425B2 (en
Inventor
Takashi Hamano
崇 浜野
Kiyoshi Sakai
潔 酒井
Kiichi Matsuda
松田 喜一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP26226089A priority Critical patent/JP2776425B2/en
Priority to EP90119308A priority patent/EP0422575B1/en
Priority to DE69031106T priority patent/DE69031106D1/en
Priority to US07/594,090 priority patent/US5191446A/en
Priority to CA002027184A priority patent/CA2027184C/en
Publication of JPH03124184A publication Critical patent/JPH03124184A/en
Application granted granted Critical
Publication of JP2776425B2 publication Critical patent/JP2776425B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Transmission Systems Not Characterized By The Medium Used For Transmission (AREA)

Abstract

PURPOSE:To output a picture data with less error in the coefficient of a low frequency by compensating and outputting a coefficient in one preceding frame when cell abort exists when a difference of the information representing the relation of quantity of each coefficient transmitted from a transmission side is large. CONSTITUTION:An abort compensation means 13 provided in the inside of a decoding section 17 uses information representing the relation of quantity of a difference of a coefficient sent from a coefficient quantity relation transmission means 11 at a transmission side as to a block corresponding to an aborted cell when cell abort exists so as to replace a coefficient with a small difference among coefficients in a group of minimum frequency into a coefficient corresponding to in a block of one preceding frame to the frame including the block and so as to replace a coefficient corresponding to the block as to a larger difference into a coefficient transmitted from the coefficient quantity relation transmission means 11 and outputs the result to an inverse orthogonal conversion section 12.

Description

【発明の詳細な説明】 〔概   要〕 入力画像データを直交変換し、直交変換係数領域の係数
を符号化してセル単位で伝送する画像データ伝送システ
ムにおいて、セル廃棄が起こった場合に係数領域の係数
のうちで低周波数成分を表す複数の係数を補償するセル
廃棄補償画像復号化方式に関し、 送信側で現フレームと前フレームのブロックの対応する
低周波係数の大小関係を比較し、差が大きい時には補償
情報を受信側に送信することによって、セル廃棄が起き
た場合に差が大きい係数を補償情報によって補償するこ
とを目的とし、複数の画素をブロックとして入力画像デ
ータを直交変換部によって直交変換し、該直交変換係数
領域の係数を符号化してセル単位で伝送し、受信側に逆
直交変換を行う逆直交変換部を有する画像データ伝送シ
ステムにおいて、前記直交変換係数領域における直流か
ら高周波までの周波数成分を表す複数の係数を複数の周
波数帯域に対応する複数のグループにグループ化し、前
記画像データ伝送システムの送信側に、現在送信中のブ
ロック内の前記複数のグループ中の最低周波数のグルー
プ内の複数の係数と、該ブロックを含むフレームより時
間的に1枚前のフレーム内で該ブロックに対応するブロ
ック内で該複数の係数にそれぞれ対応する複数の係数と
の間で、それぞれ対応する係数の差が大か小かを示す情
報と、該差が大の係数に対する現ブロック内の係数の値
とを前期画像データ伝送システムの受信側に送信する係
数大小関係送信手段と、前期画像データ伝送システムの
受信側に、セル廃棄の有無を検出し、セール廃棄があっ
た時には該廃″棄セルに対応するブロックに・対して該
係数大小関係送信手段から送信された・係数の差の大小
関係を示す情報によって、前記最低周波数グループ内の
係数のうちで差が小の係数については該ブロックを含む
フレームより1フレーム前の該ブロックに対応するブロ
ック内の対応する係数データを、また差が大の係数につ
いては該ブロック内の対応する係数を前記係数大小関係
送信手段から送信された係数値に置き替えたデータを逆
直交変換部に出力する廃棄補償手段を備えるように構成
する。
[Detailed Description of the Invention] [Summary] In an image data transmission system that orthogonally transforms input image data, encodes coefficients in the orthogonal transform coefficient domain, and transmits them in cell units, when a cell is discarded, the coefficient domain Regarding the cell discard compensation image decoding method that compensates for multiple coefficients that represent low frequency components among the coefficients, the transmitting side compares the magnitude relationship of the corresponding low frequency coefficients of the blocks of the current frame and the previous frame, and detects when the difference is large. Sometimes, by sending compensation information to the receiving side, when cell discard occurs, the input image data is orthogonally transformed by an orthogonal transform unit with the aim of compensating for coefficients with a large difference when cell discard occurs. In an image data transmission system having an inverse orthogonal transform unit that encodes and transmits coefficients in the orthogonal transform coefficient domain in cell units and performs inverse orthogonal transform on the receiving side, the coefficients in the orthogonal transform coefficient domain are A plurality of coefficients representing frequency components are grouped into a plurality of groups corresponding to a plurality of frequency bands, and a transmission side of the image data transmission system is provided with a coefficient in the group of the lowest frequency among the plurality of groups in the block currently being transmitted. and a plurality of coefficients corresponding to the plurality of coefficients in a block corresponding to the block in a frame temporally one frame before the frame including the block, respectively. coefficient magnitude relationship transmitting means for transmitting information indicating whether the difference is large or small and the value of the coefficient in the current block for the coefficient with the large difference to the receiving side of the previous image data transmission system; On the receiving side of the system, the presence or absence of cell discard is detected, and when there is sale discard, the coefficient magnitude relationship between the block corresponding to the discarded cell and the coefficient magnitude relationship between the coefficients transmitted from the transmitting means For coefficients in the lowest frequency group that have a small difference, the corresponding coefficient data in the block corresponding to the block that is one frame before the frame containing the block, and also the coefficient data that has a large difference. With respect to the coefficients, the block is configured to include a discard compensation means for outputting data in which the corresponding coefficient in the block is replaced with the coefficient value transmitted from the coefficient magnitude relation transmitting means to the inverse orthogonal transform section.

〔産業上の利用分野〕 本発明は画像データ伝送システムに係り、さらに詳しく
は入力画像データを直交変換し、直交変換係数領域の係
数を符号化してセル単位で伝送する画像データ伝送シス
テムにおいて、セル廃棄が起こった場合に係数領域の係
数のうちで低周波数成分を表す複数の係数を補償するセ
ル廃棄補償画像復号化方式に関する。
[Industrial Application Field] The present invention relates to an image data transmission system, and more specifically, the present invention relates to an image data transmission system in which input image data is orthogonally transformed, coefficients in an orthogonal transform coefficient domain are encoded, and transmitted in units of cells. The present invention relates to a cell discard compensation image decoding method that compensates for a plurality of coefficients representing low frequency components among coefficient domain coefficients when discard occurs.

〔従来の技術〕[Conventional technology]

最近画像機器のディジタル化、画像ディジタル信号の伝
送方式などが、テレビ電話など多くの応用分野で広く開
発、研究されている。一般に画像データはその情報量が
非常に多い。例えば現在のテレビをそのままディジタル
化すると100Mb/Sの伝送容量が必要であり、画像
データは音声の1500倍の情報量を持っている。テレ
ビでは1秒間に画面が30回切り替わり、1/30秒で
フレームが切り替えられる。1枚のフレームに対応する
1画面上に画素は一般的に2次元的に配置されており、
1画素のレベルを例えば8ビツトで表すとしても、1フ
レームに対する画像データは非常にその情報量が多くな
る。
Recently, the digitization of image equipment and the transmission method of image digital signals have been widely developed and researched in many application fields such as videophones. Generally, image data has a very large amount of information. For example, if current televisions were to be digitized as is, a transmission capacity of 100 Mb/s would be required, and image data has 1,500 times more information than audio. On a television, the screen changes 30 times per second, and frames change every 1/30 of a second. Pixels are generally arranged two-dimensionally on one screen corresponding to one frame,
Even if the level of one pixel is represented by 8 bits, for example, the amount of image data for one frame is extremely large.

しかしながらテレビでl/30秒でフレームが切り替え
られる場合にも、各フレームの絵の内容はあまり大きく
変化しないことが多い。すなわち画像は空や背景などの
ように全体的に止まっている部分が多く、フレーム毎に
変化する部分が少ない。そこで画像データを圧縮して符
号化する1つの方式としてフレーム間符号化方式がある
However, even when frames are switched every 1/30 seconds on a television, the content of the pictures in each frame often does not change significantly. In other words, there are many parts of the image that are completely static, such as the sky and background, and there are few parts that change from frame to frame. Therefore, one method for compressing and encoding image data is an interframe encoding method.

フレーム間符号化方式では時間的に連続する2つのフレ
ームの間で例えば対応する画素毎に、レベルデータの差
がとられ、その差が例えばハフマン符号化されて伝送路
上に送出される。大部分の画素に対するレベルが変化し
ないとすると、それらの画素に対する差は0となり、そ
の差は1ビツトで表すことができる。レベル差の大きい
画素に対する符号は8ビツト以上必要となるが、これら
の差分だけを符号化することにより、結果として伝送す
べき情報量が大きく圧縮されることになる。
In the interframe coding method, a difference in level data is determined for each corresponding pixel between two temporally consecutive frames, and the difference is subjected to, for example, Huffman encoding and sent onto a transmission path. If the level for most pixels does not change, the difference for those pixels will be 0, and the difference can be represented by one bit. Pixels with large level differences require codes of 8 bits or more, but by coding only these differences, the amount of information to be transmitted can be greatly compressed.

これに対して1フレーム内のデータをそのまま符号化す
る方式はフレーム内符号化方式と呼ばれる。
On the other hand, a method of encoding data within one frame as is is called an intraframe encoding method.

フレーム間符号化、フレーム内符号化の何れを用いると
しても、画像信号のディジタル表現には標本化および量
子化の2つの操作が基本的に必要になる0画像の標本化
には2つの方法があり、その第1は画像をフレーム内の
画素に対応する離散的な点記列に対するレベル値で表す
ことである。
Regardless of whether interframe coding or intraframe coding is used, two operations, sampling and quantization, are basically required for digital representation of an image signal.There are two methods for sampling zero images. The first is to represent an image by level values for discrete sequences of dots corresponding to pixels within a frame.

第2の方法はフレーム面に対応するXY平面で定義され
たレベル値関数(画像関数)を正規直交展開し、その展
開係数を標本値とすることである。
The second method is to perform orthonormal expansion of a level value function (image function) defined on the XY plane corresponding to the frame surface, and use the expansion coefficients as sample values.

第9図は第2の方式である正規直交変換を用いた画像伝
送システムの全体ブロック図である。第9図において入
力画像は1ブロツク化され、2で直交変換された後、3
で量子化され、4で例えばハフマン符号化されて送り側
から伝送路5に送り出される。そして受信側では伝送路
5からの信号を6で復号化し、7で逆直交変換し、8で
逆ブロック化して画像データとして出力する。ここで1
のブロック化は2次元のKXK個の画素(1画面分)の
データを−まとめにして直交変換するのでなく、4×4
〜16X16個程度の画素を1ブロツクとしてブロック
単位に変換係数を求めることにより、変換時間を短縮す
るために行われる。2の直交変換の種類としては、例え
ばアダマール変換、コサイン変換、カルーネン・レーベ
変換などがあるが、近年ではコサイン変換の離散表現で
あり、後述するディスクリートコサイン変換(DCT)
がよく用いられている。
FIG. 9 is an overall block diagram of an image transmission system using orthonormal transformation, which is the second method. In FIG. 9, the input image is divided into one block, orthogonally transformed in 2, and then 3
The signal is quantized at 4, Huffman coded at 4, and sent out from the sending side to the transmission path 5. Then, on the receiving side, the signal from the transmission path 5 is decoded at 6, subjected to inverse orthogonal transformation at 7, converted into inverse blocks at 8, and output as image data. Here 1
Blocking is not done by orthogonally transforming two-dimensional KXK pixel data (for one screen), but by 4×4
This is done in order to shorten the conversion time by determining the conversion coefficients for each block, with approximately 16×16 pixels as one block. Examples of the types of orthogonal transforms mentioned in 2 include Hadamard transform, cosine transform, and Karhunen-Loeve transform, but in recent years, the discrete cosine transform (DCT), which will be described later, is a discrete representation of cosine transform.
is often used.

第9図で用いられている直交変換符号化方式では画面内
の小領域の相関が着目され、小領域の画素を数値列とし
て直交変換が行われる。その結果得られる変換係数は周
波数成分に相当し、低周波から高周波までの各成分を表
している。画像信号では一般に低周波成分が電力的に大
きく高周波成分は電力的に小さい、ため、低周波成分に
は多くのビット数、高周波成分には少ないビット数を割
り当てる量子化を行うことにより、伝送すべき情報量が
削減される。
The orthogonal transform encoding method used in FIG. 9 focuses on the correlation between small areas within the screen, and orthogonal transform is performed using the pixels of the small area as a numerical string. The resulting conversion coefficients correspond to frequency components and represent each component from low frequency to high frequency. In image signals, low-frequency components are generally large in power and high-frequency components are small in power. Therefore, by performing quantization, which assigns a large number of bits to low-frequency components and a small number of bits to high-frequency components, it is possible to reduce transmission. The amount of information required is reduced.

第10図は4×4個の画素によって構成されるlブロッ
ク内の画像データに直交変換を施した後の変換係数領域
を示す図である。この変換係数領域において、−aに最
も左上の領域9は信号の直流成分を表し、またその他の
領域の係数は全て交流成分を表している。交流成分はそ
れぞれ低周波から高周波までの各周波数に対応し、右下
方向にいくほどその周波数は高くなる。
FIG. 10 is a diagram showing a transform coefficient area after performing orthogonal transform on image data in an l block composed of 4×4 pixels. In this conversion coefficient region, the upper leftmost region 9 at -a represents the DC component of the signal, and the coefficients in the other regions all represent the AC components. The AC components correspond to each frequency from low frequency to high frequency, and the frequency becomes higher toward the lower right.

〔発明が解決しようとする課題〕[Problem to be solved by the invention]

以上のような直交変換を用いた画像データ伝送システム
においては、フレーム内またはフレーム間のいずれの符
号化方式を用いるかにかかわらず、画像データは伝送路
上では例えばデータの宛先を示すヘッダが付加された数
バイトの固定長のセルによって伝送される。この場合へ
ラダエラーやセルの増えすぎによるネットワークの処理
能力超過などが起こるとセルがネットワーク内で廃棄さ
れ、受信側に届かないことが起こる。
In the image data transmission system using orthogonal transformation as described above, regardless of whether intra-frame or inter-frame encoding is used, image data is attached with a header indicating the data destination on the transmission path. It is transmitted in fixed length cells of several bytes. In this case, if a ladder error or the network's processing capacity is exceeded due to too many cells, the cells will be discarded within the network and may not reach the receiving side.

このような場合、従来においては廃棄されたセルに対応
するブロックを含むフレームより1つ前のフレーム内の
対応するブロックの係数データがそのまま廃棄されたブ
ロックのデータとされて画像データが出力されていた。
In such cases, conventionally, image data is output by using the coefficient data of the corresponding block in the frame immediately before the frame containing the block corresponding to the discarded cell as the data of the discarded block. Ta.

従ってセル廃棄が起きた場合には受信部において画像が
劣化するという問題点があった。また前フレームの対応
するブロックと現フレームのブロックとの係数のうちで
低周波係数の差が大きい場合に画質の劣化が特に著しい
という問題点があった。
Therefore, when cells are discarded, there is a problem in that the image deteriorates in the receiving section. Furthermore, there is a problem in that when there is a large difference in low frequency coefficients between the corresponding block in the previous frame and the block in the current frame, the deterioration in image quality is particularly significant.

本発明は、送信側で現フレームと前フレームのブロック
の対応する低周波係数の大小関係を比較し、差が大きい
時には補償情報を受信側に送信することによって、セル
廃棄が起きた場合に差が大きい係数を補償情報によって
補償することを目的とする。
The present invention compares the magnitude relationship between the corresponding low frequency coefficients of blocks in the current frame and the previous frame on the transmitting side, and when the difference is large, transmits compensation information to the receiving side, thereby eliminating the difference when cell discard occurs. The purpose is to compensate for coefficients with large values using compensation information.

〔課題を解決するための手段〕[Means to solve the problem]

第1図は本発明のセル廃棄補償画像復号化方式を用いる
画像データ伝送システムの原理構成ブロック図である。
FIG. 1 is a block diagram of the principle configuration of an image data transmission system using the cell discard compensation image decoding method of the present invention.

同図において入力画像データは直交変換部14によって
、例えばディスクリートコサイン変換され、符号化部1
5で符号化されて送信部から伝送路16に出力される。
In the same figure, input image data is subjected to, for example, discrete cosine transform by an orthogonal transform unit 14, and the input image data is
5 and output from the transmitter to the transmission path 16.

受信部側では伝送路16から入力されるデータを復号化
部17で復号化し、逆直交変換部12で、例えば逆デイ
スクリートコサイン変換して画像データとして出力する
。第1の発明と第2の発明とでは係数大小関係送信手段
1が伝送路16に出力する内容と、それに伴って例えば
復号化部17内に設けられる廃棄補償手段13の作用と
がそれぞれ1部具なる点を除いては、ブロック図の構成
は全く同一である。
On the receiving section side, data input from the transmission path 16 is decoded by a decoding section 17, and subjected to, for example, inverse discrete cosine transformation by an inverse orthogonal transform section 12, and outputted as image data. In the first invention and the second invention, the content that the coefficient magnitude relation transmitting means 1 outputs to the transmission line 16 and the action of the discard compensation means 13 provided in the decoding section 17, for example, are each one part. The configurations of the block diagrams are identical except for the following points.

第1図において複数の画素をブロックとして入力画像デ
ータが直交変換され、その直交変換係数領域の係数が符
号化されてセル単位で伝送されるが、この直交変換係数
領域における直流から高周波までの周波数成分を表す複
数の係数が複数の同波数バンドに対応する複数のグルー
プにグループ化される。
In Figure 1, input image data is orthogonally transformed using a plurality of pixels as a block, and the coefficients in the orthogonal transform coefficient domain are encoded and transmitted in cell units. A plurality of coefficients representing components are grouped into a plurality of groups corresponding to a plurality of same wavenumber bands.

第1の発明において係数大小関係送信手段11は、画像
データ伝送システムの送信側において現在送信中のブロ
ック内の前述の複数のグループ中で、最低周波数のグル
ープ内の複数の係数とこのブロックを含むフレームより
1枚前のフレーム内で対応するブロック内のそれぞれ対
応する複数の係数との間で、それぞれ対応する係数の差
がそれぞれの係数に対してあらかじめ定められている闇
値より大きいか小さいかを判定し、その結果を示す大小
関係情報と、その差が大きい係数に対する現ブロック内
の係数の値を補償情報として、例えばブロック内の係数
に対してよりも粗い量子化を施した値とを伝送路16を
介してシステムの受信側に送信する。
In the first invention, the coefficient magnitude relation transmitting means 11 includes a plurality of coefficients in the group with the lowest frequency among the plurality of groups in the block currently being transmitted on the transmitting side of the image data transmission system and this block. Whether the difference between the corresponding coefficients in the corresponding block in the frame one frame before the frame is larger or smaller than the predetermined darkness value for each coefficient. is determined, and the magnitude relationship information indicating the result and the value of the coefficient in the current block for the coefficient with a large difference are used as compensation information, for example, a value that has been quantized more coarsely than for the coefficient in the block. It is transmitted to the receiving side of the system via the transmission line 16.

画像データ伝送システムの受信側で例えば復号化部17
の内部に設けられる廃棄補償手段13は、伝送路16を
介して伝送されるセルの内容からセル廃棄の有無を検出
し、セル廃棄があった時にはその廃棄セルに対応するブ
ロックに対して、送信側の係数大小関係送信手段11か
ら送信された係数の差の大小関係を示す情報を用いて、
前述の最低周波数のグループ内の係数のうちで差が小さ
い係数についてはそのブロックを含むフレームより1フ
レーム前の対応するブロック内の対応する係数を、また
差が大きい係数についてはそのブロック内の対応する係
数を係数大小関係送信手段11から送信された係数値に
置き替えて逆直交変換部12に出力する。
For example, on the receiving side of the image data transmission system, the decoding unit 17
A discard compensating means 13 provided inside detects the presence or absence of cell discard from the contents of the cell transmitted via the transmission path 16, and when a cell is discarded, transmits to the block corresponding to the discarded cell. Using the information indicating the magnitude relationship of the difference between the coefficients transmitted from the side coefficient magnitude relationship transmitting means 11,
Among the coefficients in the lowest frequency group mentioned above, for coefficients with a small difference, the corresponding coefficients in the corresponding block one frame before the frame containing that block are used, and for coefficients with a large difference, the corresponding coefficients in that block are used. The coefficients are replaced with the coefficient values transmitted from the coefficient magnitude relation transmitting means 11 and output to the inverse orthogonal transform section 12.

第2の発明においては、送信側の係数大小関係送信手段
11が、それぞれの係数の差がそれぞれ定められた闇値
より大きいか小さいかを示す情報と、差が大きい係数に
対してはその差の値を受信側に送信する。これに応じて
受信側の廃棄補償手段13は、差が大きい係数について
は送信された差と1フレーム前の対応するブロック内の
対応する係数の値とを加算して逆直交変換部12に出力
する点を除いては、第1の発明におけると同様の作用が
行われる。
In the second invention, the coefficient magnitude relation transmitting means 11 on the transmitting side transmits information indicating whether the difference between the respective coefficients is larger or smaller than a predetermined darkness value, and, for coefficients with a large difference, the difference between the coefficients. Send the value of to the receiver. In response to this, the discard compensation means 13 on the receiving side adds the transmitted difference and the value of the corresponding coefficient in the corresponding block one frame before for coefficients with a large difference, and outputs the result to the inverse orthogonal transform unit 12. The same operation as in the first invention is performed except that.

〔作  用〕[For production]

本発明においては、直交変換係数領域の係数が複数の周
波数バンドに対応して複数のグループに分割され、その
中で最も低周波のグループに対して本発明のセル廃棄補
償画像復号化方式が適用される。第10図で説明したよ
うに、係数領域の最も左上の係数は直流分を示し、右下
に行くほど交流分の周波数が高くなる。そこで例えば右
上から左下に向かう折線によって係数領域を区分するこ
とにより、複数の周波数バンドに対応する係数のグルー
プ化が行われる。
In the present invention, coefficients in the orthogonal transform coefficient domain are divided into multiple groups corresponding to multiple frequency bands, and the cell discard compensation image decoding method of the present invention is applied to the lowest frequency group among them. be done. As explained in FIG. 10, the coefficient at the top left of the coefficient area indicates the DC component, and the frequency of the AC component increases toward the bottom right. Therefore, for example, by dividing the coefficient region by a broken line extending from the upper right to the lower left, coefficients corresponding to a plurality of frequency bands are grouped.

そしてこれらのグループの中で最も低周波のグループ内
の複数の係数に対して、現フレーム内と1フレーム前の
フレーム内のそれぞれ対応する係数の間で差がとられ、
その差がそれぞれの係数に対してあらかじめ定められて
いる闇値より大きいか小さい、かを示す大小関係情報と
、その差が大きい時には第1の発明では現ブロック内の
係数の値が、また第2の発明では差の値そのものが受信
側に送信され、受信側では送信側から送られた各係数の
大小関係を示す情報と差が大きい場合の現フレームの係
数の値、または差の値を示す情報とを用いて、セル廃棄
が起きた場合に1つ前のフレーム内の係数の値を補償し
て出力する。また最低周波数グループ以外のグループの
係数としては、例えば前のフレーム内で対応する係数の
値がそのまま出力される。
Then, for a plurality of coefficients in the lowest frequency group among these groups, the difference is calculated between the respective corresponding coefficients in the current frame and the frame one frame before,
In the first invention, the magnitude relationship information indicating whether the difference is larger or smaller than the dark value predetermined for each coefficient, and when the difference is large, the value of the coefficient in the current block is also In the second invention, the difference value itself is sent to the receiving side, and the receiving side sends the information indicating the magnitude relationship of each coefficient sent from the sending side and the value of the coefficient of the current frame when the difference is large, or the value of the difference. When cell discard occurs, the value of the coefficient in the previous frame is compensated and output using the information shown in FIG. Further, as the coefficients of groups other than the lowest frequency group, for example, the values of the corresponding coefficients in the previous frame are output as they are.

以上のように本発明においては、現フレームのブロック
の係数がセル廃棄によって失われた場合にも、それらの
係数のうちで低周波の係数の誤差を少なくして画像デー
タを出力することができる。
As described above, in the present invention, even if the coefficients of a block in the current frame are lost due to cell discard, it is possible to output image data by reducing the error in low-frequency coefficients among those coefficients. .

〔実  施  例〕〔Example〕

第2図は本発明における直交変換係数領域の周波数バン
ドの設定法の実施例である。同図において最も左上の係
数は直流分を示し、他の全ての係数は交流分を示すが、
交流分は図で右下の領域はどその周波数が高い。そこで
同図に示すように、係数領域の右上側から左下側に向か
う折線(太線)によって周波数バンドを区切ることがで
きる。同図では8×8の画素に対する係数領域を示して
いるが、画素数はこれに限定されるものでなく、また太
い折線での周波数バンドの区切り方もこれに限定される
ものでないことは当然である。
FIG. 2 is an embodiment of the method for setting frequency bands in the orthogonal transform coefficient domain according to the present invention. In the figure, the upper leftmost coefficient indicates the DC component, and all other coefficients indicate the AC component.
For the AC component, the lower right area in the diagram shows the highest frequency. Therefore, as shown in the figure, the frequency bands can be separated by broken lines (thick lines) extending from the upper right side to the lower left side of the coefficient area. Although the figure shows a coefficient area for 8×8 pixels, the number of pixels is not limited to this, and it goes without saying that the way frequency bands are divided by thick broken lines is not limited to this. It is.

第3図は3つの係数からなる最低周波数のグループの係
数に対する第1の発明の実施例の概念図である。・同図
において(a)は現フレームより1枚前のフレーム内の
係数を示し、最低周波数のグループは直流分のLl、交
流分のL2とL3の3つを含んでいる。同図(ロ)は現
在のフレーム内の係数を示し、最低周波数のグループは
直流分の11と交流分の12および13から成っている
。なおこれらのフレーム内の係数のうち最低周波数グル
ープ以外の係数については、本発明の適用外であるので
、それらの値はすべてHとしである。
FIG. 3 is a conceptual diagram of an embodiment of the first invention for coefficients of the lowest frequency group consisting of three coefficients. - In the same figure, (a) shows the coefficients in the frame one frame before the current frame, and the group with the lowest frequency includes three, Ll for the DC component, and L2 and L3 for the AC component. The figure (b) shows the coefficients in the current frame, and the lowest frequency group consists of 11 for the DC component and 12 and 13 for the AC component. Note that among the coefficients in these frames, the coefficients other than those in the lowest frequency group are not applicable to the present invention, so their values are all set to H.

第3図(a)と(ハ)との最低周波数グループの係数を
相互に比較して、現フレーム内の係数と前のフレーム内
の係数との差がそれぞれの係数に対してあらかじめ定め
られている闇値より大きいか小さいかが判定される。こ
こでそれぞれの係数に対する閾値は全て同じでもよいが
、周波数によって全体の画像に与える影響も異なるため
に異なる値を用いてもよい。そして例えば直流分11と
Llとの差、および交流骨のうちで13とL3との差が
それぞれの闇値を越えている場合には、それぞれの係数
の大小関係を示す情報と共に係数11と13を、例えば
通常の係数の伝送時の量子化におけるよりも粗い量子化
を行った結果としての(11)および(I13)として
受信側に伝送する。
By comparing the coefficients of the lowest frequency groups in FIGS. 3(a) and (c) with each other, the difference between the coefficients in the current frame and the coefficients in the previous frame is predetermined for each coefficient. It is determined whether it is larger or smaller than the darkness value. Here, the threshold values for the respective coefficients may all be the same, but different values may be used because the influence on the overall image differs depending on the frequency. For example, if the difference between the DC component 11 and Ll and the difference between 13 and L3 of the AC bone exceed the respective dark values, the coefficients 11 and 13 together with information indicating the magnitude relationship of the respective coefficients. are transmitted to the receiving side as (11) and (I13), which are results of coarser quantization than in normal coefficient transmission.

第3図(C)はセル廃棄が起こらなかった場合の通常の
復号化後に現フレームとして出力される係数を示してい
る。これに対して図(d)はセル廃棄が起こった場合の
復号化後の係数であり、最低周波数領域の係数のうちで
、現フレームと前のフレームとの間で差の小さい係数に
ついては前のフレームの値L2が、また差の大きい係数
については送信側から送られた(11)および(!3)
が出力される。
FIG. 3C shows the coefficients that are output as the current frame after normal decoding when no cell discard occurs. On the other hand, Figure (d) shows the coefficients after decoding when cell discard occurs, and among the coefficients in the lowest frequency domain, the coefficients with a small difference between the current frame and the previous frame are The value L2 of the frame is (11) and (!3) sent from the transmitter for coefficients with large differences.
is output.

第4図は本発明における画像データ伝送システムの実施
例の全体構成ブロック図である。同図において送信側は
最低周波数グループ内の各係数について後述する減算器
22の出力によって、現フレームと前のフレームとの係
数の大小関係を示す情報とともに、第1の発明では両係
数の差が大きい現フレーム内係数の値を、また第2の発
明では両係数の差の値を受信側の、後述する廃棄補償部
30に送信する大小関係および補償情報送信部19、入
力画像データを直交変換の一種であるディスクリートコ
サイン変換(DCT)するDCT部2OSDCT部20
の出力■とフレームメモリ21に格納されている1つ前
のフレーム内の対応するブロックデータ■Sとの差をと
る減算器22、減算器22の出力■Sを量子化する量子
化器23、量子化器23の出力を再び量子化前の形式■
Sに戻す逆量子化器24、逆量子化器24の出力■Sと
フレームメモリ21の出力である前のフレーム内のブロ
ックデータ■Sとを加算する加算器25、加算器25の
出力■Sにリーク係数αをかけフレームメモリ21に出
力するリーク係数乗算器26から成る。
FIG. 4 is a block diagram of the overall configuration of an embodiment of the image data transmission system according to the present invention. In the same figure, the transmitting side uses the output of the subtracter 22, which will be described later, for each coefficient in the lowest frequency group, as well as information indicating the magnitude relationship of the coefficients between the current frame and the previous frame. A magnitude relation and compensation information transmitter 19 transmits the value of a large current intra-frame coefficient, or in the second invention, the value of the difference between both coefficients to a discard compensator 30, which will be described later, on the receiving side, and orthogonally transforms the input image data. A DCT unit 2OSDCT unit 20 performs discrete cosine transformation (DCT), which is a type of
a subtracter 22 that takes the difference between the output ■ and the corresponding block data ■S in the previous frame stored in the frame memory 21; a quantizer 23 that quantizes the output ■S of the subtractor 22; The output of the quantizer 23 is returned to the form before quantization■
An adder 25 that adds the output of the inverse quantizer 24, S, and block data in the previous frame, which is the output of the frame memory 21, S, and an output of the adder 25, S. It consists of a leak coefficient multiplier 26 which multiplies the leak coefficient α by a leak coefficient α and outputs it to the frame memory 21.

また受信側は、伝送路を経由して入力される、信号■S
が量子化された入力データを再び元の形式■Rに戻す逆
量子化器27、その出力■Rとフレームメモリ28に格
納されている前のフレーム内のブロックデータ■Rとの
和をとる加算器29、第1図の廃棄補償手段13に相当
する廃棄補償部30、廃棄補償部30の出力■Rに対し
て逆デイスクリートコサイン変換を施し画素領域の画像
データを出力する逆DCT部31および廃棄補償部30
の出力■Rにリーク係数αをかけてフレームメモリ28
に出力するリーク係数乗算器32から成る。
Also, on the receiving side, the signal ■S input via the transmission path
An inverse quantizer 27 that returns the quantized input data to its original format ■R, and an addition that takes the sum of its output ■R and the block data ■R in the previous frame stored in the frame memory 28 29, a discard compensator 30 corresponding to the discard compensator 13 in FIG. Disposal compensation department 30
The frame memory 28 multiplies the output ■R by the leakage coefficient α.
It consists of a leak coefficient multiplier 32 that outputs a leak coefficient.

第4図はフレーム間符号化方式を用いた本発明の実施例
であり、例えば送信側では現在送信すべきフレーム内ブ
ロックデータのSと前に送信されたフレーム内のブロッ
クデータ■Sとの差、すなわちフレーム間差分が■Sと
され、それが量子化されて例えばハフマン符号化され、
伝送路上に出力される。受信側では伝送路から差分■R
を受けとり、前のフレーム内のブロックデータ■Rとの
和をとることによって現在のフレーム内のブロックデー
タ■Rを得ることになる。そして送信側では差分■Sと
前のフレーム内のブロックデータ■Sとの和が加算器2
5によってとられ、リーク係数αが乗じられた後に、フ
レームメモリ21に次のフレームに対するフレーム間差
分を求めるために格納される。受信部においても、同様
に現在のブロックデータ■Rにリーク係数αが乗じられ
た後、フレームメモリ28に格納される。
FIG. 4 shows an embodiment of the present invention using the interframe coding method. For example, on the transmitting side, the difference between the block data S in the frame to be currently transmitted and the block data S in the previously transmitted frame. , that is, the inter-frame difference is taken as ■S, which is quantized and, for example, Huffman encoded,
Output on the transmission path. On the receiving side, the difference ■R from the transmission path
By receiving this and adding it to the block data ■R in the previous frame, the block data ■R in the current frame is obtained. Then, on the transmitting side, the sum of the difference ■S and the block data ■S in the previous frame is added to the adder 2.
5, multiplied by the leakage coefficient α, and then stored in the frame memory 21 in order to obtain the inter-frame difference for the next frame. In the receiving section as well, the current block data (1) R is similarly multiplied by the leakage coefficient α and then stored in the frame memory 28.

リーク係数αはたとえばセル廃棄が起こってもその影響
を短時間のうちに減衰させるためのものである0例えば
受信側において差分D1が入力し、フレームメモリ28
に格納されているその前のフレームのブロックデータF
MOとの和がとられ、その和(D++FMo)に対して
リーク係数αが乗じられ、次式で表される現在のフレー
ムに対するブロックデータがフレームメモリ28の内容
FM1になったものとする。
For example, the leak coefficient α is used to attenuate the effect of cell discard in a short time even if cell discard occurs. For example, the difference D1 is input on the receiving side, and the frame memory 28
Block data F of the previous frame stored in
It is assumed that the sum (D++FMo) is multiplied by the leakage coefficient α, and the block data for the current frame expressed by the following equation becomes the content FM1 of the frame memory 28.

FM+ = (D+ +FMo)α= D I α+F
Moα続いて次のフレーム間のブロックデータである差
分D2が伝送路かh入力されるとフレームメモリ28の
内容は次式となる。
FM+ = (D+ +FMo) α= DI α+F
Moα Then, when the difference D2, which is block data between the next frames, is input through the transmission line, the contents of the frame memory 28 become as follows.

F Mz = (Dz + F M+ )α=Dzα+
D+ α+FMo  α2 さらに次のフレーム間のブロックデータD3が入力され
るとフレームメモリ28の内容は次式で与えられる。
F Mz = (Dz + F M+ )α=Dzα+
D+α+FMo α2 Furthermore, when block data D3 between the next frames is input, the contents of the frame memory 28 are given by the following equation.

FM27− (02+FM2 )α= D 3α+D2
α2+D、α”十FM6a3 このように例えばセル廃棄が起った場合の予測誤差DI
の画像全体への影響は、nフレームの入力後にはα7に
減衰する。そこでαを1より小さくとることにより、短
時間のうちにその影響をほぼ0にすることができる。
FM27- (02+FM2)α=D3α+D2
α2+D, α”0FM6a3 For example, the prediction error DI when cell discard occurs
The influence on the entire image attenuates to α7 after inputting n frames. Therefore, by setting α smaller than 1, the influence can be reduced to almost zero in a short time.

なお第4図におけるディスクリートコサイン変換(DC
T)はコサイン関数から作られた変換行列で画像データ
の直交変換を行うものであり、演算に乗算器が必要で高
速演算に難点があったが、高速な信号処理プロセッサの
開発に伴って浮止画伝送やテレビ会議信号などの準動画
伝送に盛んに使われるようになってきた。
Note that the discrete cosine transformation (DC
T) performs orthogonal transformation of image data using a transformation matrix made from a cosine function, and it required a multiplier for calculation, making it difficult to perform high-speed calculations, but with the development of high-speed signal processing processors It has become popular for semi-video transmission such as still image transmission and video conference signals.

第5図は第4図の画像データ伝送システムにおける最低
周波数グループの係数データの実施例である。同図は係
数の値の差が大きい時に、送信側から現フレーム内の係
数値そのものを粗い量子化を施して送信する第1の発明
におけるデータの実施例である。同図においては最低周
波数グループ内の係数のみが示され、他の高周波成分を
示す係数は全て省略されている。
FIG. 5 is an example of coefficient data of the lowest frequency group in the image data transmission system of FIG. 4. This figure shows an example of data in the first invention, in which when the difference between the coefficient values is large, the coefficient values themselves in the current frame are roughly quantized and transmitted from the transmitting side. In the figure, only the coefficients in the lowest frequency group are shown, and all coefficients indicating other high frequency components are omitted.

第5図(a)の送信側のデータのうち■Sは現在のフレ
ーム内の連続する6個のブロックに対する最低周波数グ
ループの係数を示している。■Sは1つ前のフレーム内
の最低周波数のグループの係数を示し、■Sと■Sとの
差が第4図の減算器22によって、その差すなわちフレ
ーム間信号を示す■Sを量子化した値が符号化されて、
伝送路上に出力される。
Among the data on the transmitting side in FIG. 5(a), ■S indicates the coefficients of the lowest frequency group for six consecutive blocks in the current frame. ■S indicates the coefficient of the lowest frequency group in the previous frame, and the difference between ■S and ■S is quantized by the subtracter 22 in FIG. 4, which indicates the interframe signal. The value is encoded and
Output on the transmission path.

ここで現フレームのデータ■Sと前フレーム内のデータ
■Sとの間で大小判定を行う閾値を各係数について全て
同一の 8として、闇値より差が大きい場合にそれを符
号lで、小さい場合に0で表すことにすると、第4図の
大小関係および、補償情報伝送部19から伝送路上に出
される補償情報は次のようになる。
Here, the threshold value for determining the size between the data ■S of the current frame and the data ■S in the previous frame is set to the same 8 for each coefficient, and when the difference is larger than the dark value, it is marked with the symbol l, and it is If the case is represented by 0, the magnitude relationship in FIG. 4 and the compensation information outputted from the compensation information transmitter 19 onto the transmission path are as follows.

ooo  ooo  oo。ooo ooo ooo.

1(30の補償情報)01(1の補償情報)ooo  
oo。
1 (compensation information for 30) 01 (compensation information for 1) ooo
oo.

この補助情報の縦棒は連続する6個のブロック(上段の
左から第1〜3ブロツク、下段の左から第4〜6ブロツ
クとする。)の区切りを示し、第1から第3のブロック
、および第5、第6のブロックに対しては対応する係数
の間の差が闇値より小さいことを示す0が全ての係数に
ついて出力される。
The vertical bars of this auxiliary information indicate the separation of six consecutive blocks (1st to 3rd blocks from the left in the upper row, 4th to 6th blocks from the left in the lower row), and the first to third blocks, For the fifth and sixth blocks, 0 is output for all coefficients, indicating that the difference between the corresponding coefficients is smaller than the dark value.

これに対して、第4のブロックに対しては直流分に対す
る差22が闇値より大きいことを示す符号1の次に現フ
レーム内のブロックの直流分30の補助情報(例えば3
2)がカッコ内に示され、次に直流分の右側の係数間の
差が闇値より小さいことを示す符号0が、またその次に
直流分の下の係数の差−9が闇値より大きいことを示す
符号1に続いて、現フレーム内の直流分lの補助情報(
例えばO)がカッコ内に示されている。
On the other hand, for the fourth block, auxiliary information (for example, 3
2) is shown in parentheses, then the code 0 indicates that the difference between the coefficients on the right side of the DC component is smaller than the dark value, and then the difference between the coefficients on the lower side of the DC component -9 is less than the dark value. Following the code 1 indicating that it is large, auxiliary information (
For example, O) is shown in parentheses.

第5図ら)は受信側における係数データの実施例である
。図において、前のフレームに対する係数■Rは送信側
における前のフレームに対するデータ■S等しい。そし
て■Rに示すように、伝送路から入力されるセルのうち
第4ブロツクと第5ブロツクに対するセルが廃棄された
ものとすると、前述の大小関係および補償情報送信部1
9からの補助情報を用いて、第4図で逆デイスクリート
コサイン変換部31に出力される■Rの内容が作成され
る。
Figures 5 and 5) are examples of coefficient data on the receiving side. In the figure, the coefficient ■R for the previous frame is equal to the data ■S for the previous frame on the transmitting side. Then, as shown in R, if it is assumed that the cells for the fourth and fifth blocks among the cells input from the transmission path are discarded, then the above-mentioned size relationship and the compensation information transmitter 1
Using the auxiliary information from 9, the contents of ■R to be output to the inverse discrete cosine transformer 31 in FIG. 4 are created.

すなわち■Rのうち、第5ブロツクに対しては■Rの係
数の値がそのまま全て用いられる。これに対して、第4
のブロックに対しては直流分として送信側から送られた
補助情報の値32が、またその下の係数として同じく送
信側から送られた値、0が、直流分の右側の係数に対し
ては前のフレーム内のデータ■Rにおける値13が用い
られて現フレームのデータとされる。
That is, for the fifth block of (1)R, all coefficient values of (2)R are used as they are. On the other hand, the fourth
For the block, the value 32 of the auxiliary information sent from the transmitting side as the DC component, and the value 0 also sent from the transmitting side as the coefficient below it, and for the coefficient on the right side of the DC component, The value 13 in the data ■R in the previous frame is used as the data for the current frame.

第6図は第2の発明、すなわち現在のフレームと前のフ
レームとの係数の間の差が大きい時に、その差を粗く量
子化して受信側に送る場合の受信側で補償された係数デ
ータの実施例である。同図において送信側の大小関係お
よび補助情報送信部19から受信側に送られる補助情報
は次のようなものである。
FIG. 6 shows the second invention, that is, when the difference between the coefficients of the current frame and the previous frame is large, the difference is coarsely quantized and sent to the receiving side. This is an example. In the figure, the size relationship on the transmitting side and the auxiliary information sent from the auxiliary information transmitter 19 to the receiving side are as follows.

+00010001000 +1(22の補償情報)01(−9の補償情報)1oo
o  oo。
+00010001000 +1 (22 compensation information) 01 (-9 compensation information) 1oo
ooo.

すなわち、第4ブロツクの直流成分に対する差22の補
助情報として22を量子化した値、例えば24が、また
直流分の下の交流成分に対する差−9の補助情報として
、例えば−8が受信側に送られ、受信側で逆デイスクリ
ートコサイン変換部31に入力される■Rの第4ブロツ
クの直流成分が32、その右の交流成分は13、直流分
の下の交流分は2となる。受信側の■R基以外ブロック
データ、■R1■Rおよび送信側のブロックデータは全
て第5図におけると同様である。
That is, as auxiliary information for the difference 22 to the DC component of the fourth block, a value obtained by quantizing 22, for example 24, is sent to the receiving side, and as auxiliary information for the difference -9 to the AC component below the DC component, for example -8 is sent to the receiving side. The DC component of the fourth block of R that is sent and input to the inverse discrete cosine transformer 31 on the receiving side is 32, the AC component to the right thereof is 13, and the AC component below the DC component is 2. The block data other than the ``R'' group on the receiving side, ``R1'' and the block data on the transmitting side are all the same as in FIG.

第7図は第1の発明における大小関係および補償情報送
信部19の処理フローチャートの実施例である。同図に
おいて処理がスタートすると、まずステップ33で最低
周波数グループに対する処理が全ての係数について終わ
ったか否かが判定され、終わっていない場合にはステッ
プ34で現在のフレームの係数値と前のフレームの係数
値との差りが計算される。そしてステップ35で差りが
闇値より大きいか否かが判定され、その差が小さい場合
にはステップ36で差が小さいことが受信側に送信され
てステップ33に戻る。
FIG. 7 is an embodiment of the magnitude relationship and the processing flowchart of the compensation information transmitter 19 in the first invention. In the figure, when the process starts, it is first determined in step 33 whether or not the processing for the lowest frequency group has been completed for all coefficients. If not, in step 34, the coefficient value of the current frame and the coefficient value of the previous frame are determined. The difference with the coefficient value is calculated. Then, in step 35, it is determined whether the difference is larger than the dark value, and if the difference is small, in step 36, the fact that the difference is small is transmitted to the receiving side, and the process returns to step 33.

ステップ35で差が闇値より大きい場合には、ステップ
37で差が大きいことが受信側に送信されると同時に、
ステップ38で現在のフレーム内の係数値が粗く量子化
されて送信されステップ33に戻る。最低周波数グルー
プの全ての係数についてステップ33からの処理が繰り
返され、全ての係数に対する処理が終わった時点で処理
が終了する。
If the difference is greater than the dark value in step 35, the fact that the difference is greater is transmitted to the receiver in step 37, and at the same time,
In step 38, the coefficient values in the current frame are coarsely quantized and transmitted, and the process returns to step 33. The process from step 33 is repeated for all the coefficients of the lowest frequency group, and the process ends when all the coefficients have been processed.

第2の発明においては、ステップ35で差が闇値より大
きい場合にステップ37で差が大きいことが送信される
と同時に、ステップ38では現在のフレームの係数値そ
のものでなく、差が粗く量子化されて送信される点を除
いては、その処理は全く同様である。
In the second invention, when the difference is larger than the dark value in step 35, the fact that the difference is large is transmitted in step 37, and at the same time, in step 38, the difference is coarsely quantized, rather than the coefficient value itself of the current frame. The process is exactly the same, except that it is sent as

第8図は廃棄補償部30の処理実施例のフローチャート
である。同図において処理がスタートすると、まずステ
ップ39でセル廃棄の有無が判定される。廃棄がない場
合には廃棄補償部30は何らの処理を施すことなく、加
算器29からの出力をそのまま逆DCT部31に出力す
る。
FIG. 8 is a flowchart of a processing example of the discard compensation unit 30. In the figure, when the process starts, first in step 39 it is determined whether or not cells are to be discarded. If there is no discard, the discard compensation section 30 outputs the output from the adder 29 as it is to the inverse DCT section 31 without performing any processing.

セル廃棄があった場合には、現在のフレームと前のフレ
ームとの係数の間で差が大きい低周波数について前のフ
レーム内の係数の置き替えが行われて処理を終わる。こ
こで係数の置き替えは、第1の発明では、受信□側から
送られた現在のフレー□ムの係数の値を量子化した値、
また第2の発明では係数の差を量子化した値を用いて行
われる。
If a cell is discarded, the coefficients in the previous frame are replaced for low frequencies for which there is a large difference between the coefficients of the current frame and the previous frame, and the process ends. Here, in the first invention, the coefficient replacement is a value obtained by quantizing the coefficient value of the current frame □ sent from the receiving □ side,
Further, in the second invention, a value obtained by quantizing the difference between coefficients is used.

以上の説明では差の大きい係数、またはその差の量子化
は第4図の量子化器23による通常の量子化より粗く行
われるものとしたが、これは補助情報がセル廃棄の時に
のみ用いられるためであり、その量子化を量子化器23
と同じレベルで行ってもよいことは当然である。さらに
フレーム間符号化方式を例として本発明の詳細な説明し
たが、符号化方式はこれにとられれず、フレーム内符号
化であっても本発明を適用することができる。
In the above explanation, it is assumed that coefficients with large differences or quantization of the differences are performed more coarsely than normal quantization by the quantizer 23 in FIG. 4, but this is only used when auxiliary information is discarded as a cell. Therefore, the quantization is performed by the quantizer 23
Of course, it is okay to do it at the same level as. Furthermore, although the present invention has been described in detail using an interframe encoding method as an example, the present invention is not limited to this encoding method, and the present invention can be applied even to intraframe encoding.

〔発明の効果〕〔Effect of the invention〕

以上詳細に説明したように、本発明によればセル廃棄が
起こっても現在のフレームの低周波係数の誤差を小さく
することができ、セル廃棄時の画質への影響を少な(す
ることができる。
As described in detail above, according to the present invention, even if cells are discarded, it is possible to reduce the error in the low frequency coefficient of the current frame, and the effect on image quality when cells are discarded can be reduced. .

【図面の簡単な説明】[Brief explanation of drawings]

第1図は本発明における画像データ伝送システムの原理
構成を示すブロック図、 第2図は係数領域の周波数バンドの設定法の実施例をを
示す図、 第3図は3つの係数から成る最低周波数グループの係数
に対する第1の発明の実施例の概念を示す図、 第4図は画像データ伝送システムの実施例の全体構成を
示すブロック図、 第5図は第1の発明における最低周波数グループの係数
データの実施例を示す図、 第6図は第2の発明における受信側で補償された係数デ
ータの実施例を示す図、 第7図は第1の発明における大小関係および補償情報送
信部の処理実施例のフローチャートを示す図、 第8図は廃棄補償部の処理実施例のフローチャートを示
す図、 第9図は正規直交変換を用いる画像データ伝送システム
の全体構成を示すブロック図、第10図は画像で直交変
換後の変換係数領域を示す図である。 12・・・逆直交変換部、 14・・・直交変換部、 15・・・符号化部、 16・・・伝送部、 17・・・復号化部、 19・・・大小関係および補償情報送信部、20・・・
ディスクリートコサイン変換(DCT)部、 21.28・・・フレームメモリ、 30・・・廃棄補償部、 31・・・逆DCT部。
Figure 1 is a block diagram showing the principle configuration of the image data transmission system according to the present invention, Figure 2 is a diagram showing an example of a method for setting frequency bands in the coefficient domain, and Figure 3 is the lowest frequency consisting of three coefficients. Figure 4 is a block diagram showing the overall configuration of the embodiment of the image data transmission system; Figure 5 is the coefficient of the lowest frequency group in the first invention. FIG. 6 is a diagram showing an example of coefficient data compensated on the receiving side in the second invention; FIG. 7 is a diagram showing the magnitude relationship and processing of the compensation information transmitting unit in the first invention FIG. 8 is a diagram showing a flowchart of the processing example of the discard compensation section. FIG. 9 is a block diagram showing the overall configuration of an image data transmission system using orthonormal transformation. FIG. FIG. 3 is a diagram showing a transform coefficient area after orthogonal transform in an image. 12... Inverse orthogonal transformation section, 14... Orthogonal transformation section, 15... Encoding section, 16... Transmission section, 17... Decoding section, 19... Size relationship and compensation information transmission Part, 20...
Discrete cosine transform (DCT) unit, 21.28... Frame memory, 30... Discard compensation unit, 31... Inverse DCT unit.

Claims (1)

【特許請求の範囲】 1)複数の画素をブロックとして入力画像データを直交
変換部(14)によって直交変換し、該直交変換係数領
域の係数を符号化してセル単位で伝送し、受信側に逆直
交変換を行う逆直交変換部(12)を有する画像データ
伝送システムにおいて、 前記直交変換係数領域における直流から高周波までの周
波数成分を表す複数の係数を複数の周波数帯域に対応す
る複数のグループにグループ化し、前記画像データ伝送
システムの送信側に、現在送信中のブロック内の前記複
数のグループ中の最低周波数のグループ内の複数の係数
と、該ブロックを含むフレームより時間的に1枚前のフ
レーム内で該ブロックに対応するブロック内で該複数の
係数にそれぞれ対応する複数の係数との間で、それぞれ
対応する係数の差が大か小かを示す情報と、該差が大の
係数に対する現ブロック内の係数の値とを前期画像デー
タ伝送システムの受信側に送信する係数大小関係送信手
段(11)と、 前期画像データ伝送システムの受信側に、セル廃棄の有
無を検出し、セル廃棄があった時には該廃棄セルに対応
するブロックに対して該係数大小関係送信手段(11)
から送信された係数の差の大小関係を示す情報によって
、前記最低周波数グループ内の係数のうちで差が小の係
数については該ブロックを含むフレームより1フレーム
前の該ブロックに対応するブロック内の対応する係数デ
ータを、また差が大の係数については該ブロック内の対
応する係数を前記係数大小関係送信手段(11)から送
信された係数値に置き替えたデータを逆直交変換部(1
2)に出力する廃棄補償手段(13)を備えたことを特
徴とするセル廃棄補償画像復号化方式。 2)複数の画素をブロックとして入力画像データを直交
変換部(14)によって直交変換し、該直交変換係数領
域の係数を符号化してセル単位で伝送し、受信側に逆直
交変換を行う逆直交変換部(12)を有する画像データ
伝送システムにおいて、 前記直交変換係数領域における直流から高周波までの周
波数成分を表す複数の係数を複数の周波数帯域に対応す
る複数のグループにグループ化し、前記画像データ伝送
システムの送信側に、現在送信中のブロック内の前記複
数のグループ中の最低周波数のグループ内の複数の係数
と、該ブロックを含むフレームより時間的に1枚前のフ
レーム内で該ブロックに対応するブロック内で該複数の
係数にそれぞれ対応する複数の係数との間で、それぞれ
対応する係数の差が大か小かを示す情報と、該差が大の
係数に対する該係数の差値とを前記画像データ伝送シス
テムの受信側に送信する係数大小関係送信手段(11)
と、 前記画像データ伝送システムの受信側に、セル廃棄の有
無を検出し、セル廃棄があった時には該廃棄セルに対応
するブロックに対して該係数大小関係送信手段(11)
から送信された係数の差の大小関係を示す情報によって
、前記最低周波数グループ内の係数のうちで差が小の係
数については該ブロックを含むフレームより1フレーム
前の該ブロックに対応するブロック内の対応する係数を
用いて、また差が大の係数については前記係数大小関係
送信手段(11)から送信された係数の差の値と該ブロ
ックを含むフレームより1フレーム前の該ブロックに対
応するブロック内の対応する係数とを用いて前記最低周
波数グループ内の係数を逆直交変換部(12)に出力す
る廃棄補償手段(13)を備えたことを特徴とするセル
廃棄補償画像復号化方式。
[Claims] 1) An orthogonal transform unit (14) orthogonally transforms the input image data using a plurality of pixels as a block, encodes the coefficients in the orthogonal transform coefficient region, transmits the code in cell units, and inverts the input image data to the receiving side. In an image data transmission system having an inverse orthogonal transform unit (12) that performs orthogonal transform, a plurality of coefficients representing frequency components from direct current to high frequencies in the orthogonal transform coefficient region are grouped into a plurality of groups corresponding to a plurality of frequency bands. and transmits to the transmitting side of the image data transmission system, a plurality of coefficients in the group with the lowest frequency among the plurality of groups in the block currently being transmitted, and a frame temporally one frame before the frame including the block. information indicating whether the difference between each of the coefficients in the block corresponding to the block is large or small, and the current state of the coefficient with the large difference. A coefficient magnitude relation transmitting means (11) for transmitting the value of the coefficient in the block to the receiving side of the first half image data transmission system, and a coefficient size relation transmitting means (11) for detecting the presence or absence of cell discard to the first half image data transmission system receiving side, and detecting whether or not cells are discarded. If there is, the coefficient magnitude relation transmitting means (11) for the block corresponding to the discarded cell.
Based on the information indicating the magnitude relationship of the difference between the coefficients transmitted from The inverse orthogonal transform unit (11) replaces the corresponding coefficient data, or for coefficients with a large difference, the data in which the corresponding coefficient in the block is replaced with the coefficient value transmitted from the coefficient magnitude relationship transmitting means (11).
2) A cell discard compensation image decoding system characterized by comprising a discard compensation means (13) for outputting. 2) Inverse orthogonal processing in which the input image data is orthogonally transformed using a plurality of pixels as a block by the orthogonal transform unit (14), the coefficients in the orthogonal transform coefficient region are encoded and transmitted in units of cells, and the inverse orthogonal transform is performed on the receiving side. In an image data transmission system having a transform unit (12), a plurality of coefficients representing frequency components from direct current to high frequencies in the orthogonal transform coefficient region are grouped into a plurality of groups corresponding to a plurality of frequency bands, and the image data transmission The transmission side of the system is provided with a plurality of coefficients in the group with the lowest frequency among the plurality of groups in the block currently being transmitted, and a plurality of coefficients corresponding to the block in a frame temporally one frame before the frame including the block. information indicating whether the difference between the respective coefficients is large or small between the plurality of coefficients respectively corresponding to the plurality of coefficients in the block, and the difference value of the coefficient with respect to the coefficient with the large difference. Coefficient magnitude relationship transmitting means (11) for transmitting to the receiving side of the image data transmission system
and, on the receiving side of the image data transmission system, detecting the presence or absence of discarded cells, and when there is discarded cell, transmitting means (11) for transmitting the coefficient magnitude relation to the block corresponding to the discarded cell.
Based on the information indicating the magnitude relationship of the difference between the coefficients transmitted from Using the corresponding coefficients, and for coefficients with a large difference, the coefficient difference value transmitted from the coefficient magnitude relationship transmission means (11) and the block corresponding to the block one frame before the frame containing the block. A cell discard compensation image decoding system, comprising a discard compensating means (13) for outputting coefficients in the lowest frequency group to an inverse orthogonal transform unit (12) using corresponding coefficients in the lowest frequency group.
JP26226089A 1989-10-09 1989-10-09 Cell loss compensation image decoding method Expired - Fee Related JP2776425B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP26226089A JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method
EP90119308A EP0422575B1 (en) 1989-10-09 1990-10-09 Image data transmission system
DE69031106T DE69031106D1 (en) 1989-10-09 1990-10-09 System for transferring image data
US07/594,090 US5191446A (en) 1989-10-09 1990-10-09 Image data transmission system
CA002027184A CA2027184C (en) 1989-10-09 1990-10-09 Image data transmission system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP26226089A JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method

Publications (2)

Publication Number Publication Date
JPH03124184A true JPH03124184A (en) 1991-05-27
JP2776425B2 JP2776425B2 (en) 1998-07-16

Family

ID=17373310

Family Applications (1)

Application Number Title Priority Date Filing Date
JP26226089A Expired - Fee Related JP2776425B2 (en) 1989-10-09 1989-10-09 Cell loss compensation image decoding method

Country Status (1)

Country Link
JP (1) JP2776425B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0514392A (en) * 1991-07-04 1993-01-22 Fujitsu Ltd Picture encoding transmission system with cell abandonment compensating function

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0514392A (en) * 1991-07-04 1993-01-22 Fujitsu Ltd Picture encoding transmission system with cell abandonment compensating function

Also Published As

Publication number Publication date
JP2776425B2 (en) 1998-07-16

Similar Documents

Publication Publication Date Title
EP0519962B1 (en) Digital image coding using a random scanning of image frames
US5438374A (en) System and method for filtering video signals
RU2162280C2 (en) Differential pulse-code modulated compressor
EP0585051B1 (en) Image processing method and apparatus
JPH08280032A (en) Digital video signal encoding device using adaptive scanningtechnique
JP2000125297A (en) Method for coding and decoding consecutive image
US6865229B1 (en) Method and apparatus for reducing the “blocky picture” effect in MPEG decoded images
KR19990067723A (en) Dynamically determining group of picture size during encoding of video sequence
JPH0746594A (en) Encoding method and its device
EP0680217B1 (en) Video signal decoding apparatus capable of reducing blocking effects
EP0840516B1 (en) Apparatus and method for predictive coding and decoding
US5432555A (en) Image signal encoding apparatus using adaptive 1D/2D DCT compression technique
JPH06125543A (en) Encoding device
JP3089941B2 (en) Inter prediction coding device
KR100198986B1 (en) Motion compensation apparatus for improving a blocking effect
JPH03124184A (en) Cell abort compensation picture decoding system
JPH03124182A (en) Cell abort compensation picture decoding system
JP2776424B2 (en) Cell loss compensation image decoding method
JPH0984011A (en) Moving image coding system converter
JP2000333180A (en) Skip macro block inhibit control method, skip macro block inhibit controller and medium recording skip macro block inhibit control program
JP2710135B2 (en) Adaptive coding between frames / intra-frame
KR20060034294A (en) Encoding method and device
JPH05227513A (en) Video signal transmitter
KR100207384B1 (en) Apparatus for decoding intra dc coefficient of video signal decoding system
JPH06244736A (en) Encoder

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees