JPH03243067A

JPH03243067A - 画像復号化方法

Info

Publication number: JPH03243067A
Application number: JP2040709A
Authority: JP
Inventors: Hidenori Okuda; 奥田　英範; Shigeki Masaki; 正木　茂樹
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1990-02-20
Filing date: 1990-02-20
Publication date: 1991-10-30

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】〔産業上の利用分野〕本発明は、画像符号化装置によって符号化された画像を
復号化する画像復号化方法に関するものである。

〔従来技術〕

画像のフレーム間差分を取り、該差分データを直交変換
する画像符号化装置が知られている。第１図は、このよ
うな画像符号化装置の一例を示す説明図である。図中、
１０１は差分回路、１０２は直交変換回路、１０３は量
子化回路、１０４は前記量子化回路１０３の逆変換を行
う逆量子化回路、１０５は直交変換回路１０２の逆変換
を行う逆直交変換回路、１０６は加算回路、１０７・１
０８は記憶回路である。また、第２図はブロックを説明
する図である。画像フレーム２０１は第２図のようにい
くつかのブロック２０２に分けられ、第１図の画像符号
化装置ではこのブロック単位で符号化処理が行なわれる
ようになっている。なお、同図においては、前記画像フ
レーム２０１は、水平方向に８個、垂直方向に６個の計
４８個のブロック２０２から構成されたものとなってい
る。

入力画像は、いったん、記憶回路１０８に記憶され、該
回路から水平方向ｎ画素、垂直方向ｍｍ素のブロックを
単位として画像データが取り出される。

差分回路１０１は、記憶回路１０８から取り出したブロ
ック画像と記憶回路１０７から取り出した前フレームの
ブロック画像との差分を計算し、該差分データを出力す
る。すなわち、記憶回路１０８から取り出したブロック
画像をｍ６０列の行列Ｘ、で、また、記憶回路１０７か
ら取り出したブロック画像をｍ６０列の行列ｘ’、１で
表現すれば、差分回路１０１の出力は △ｘ、＝ｘ、−ｘ’、、なるｍ６０列の行列ΔＸ、で表わされる。

前記差分回路１０１で得られた差分データは直交変換回
路１０２に入力され、直交変換係数に変換される。直交
変換回路１０２に対する入力をｍ６０列の行列△Ｘ、で
、直交変換回路１０２からの出力をｍ６０列の行列△Ｙ
４で表わせば、△Ｘ、と△Ｙ、との関係は、 ΔＹｉ＝Ａ、ΔＸＬＡ。

である。ただし、　ＡＩＩはｍ次の直交変換を表わす直
交変換行列であり、Ａ、は６次の直交変換を表わす直交
変換行列である。

直交変換回路１０２から出力された直交変換係数は量子
化回路１０３において量子化され、符号化画像データと
して画像符号化装置から出力される。

符号化画像データは同時に逆量子化回路１０４にも入力
され、逆量子化される。

逆量子化された直交変換係数はブロック毎に逆直交変換
回路１０５に入力され、直交変換回路１０２での直交変
換の逆変換が行われる。すなわち、逆直交変換回路１０
５に対する入力をｍ６０列の行列ΔＹ、′で、逆直交変
換回路１０５からの出力をｍ６０列の行列Δｘｉ′で表
わせばΔＹ１′　とΔｘ、′　との関係は、 ΔＸＬ′＝Ａ、−１ΔＹ、’　Ａｌ１−’で表わされる
。ただし、Ａ、１、Ａｎ−１は、それぞれＡ、、Ａｎ−
１の逆行列である。

加算回路１０６では、ΔＸ、′　と記憶回路１０７に記
憶されている前フレームのブロック画像Ｘ、−１との加
算が行われる。すなわち。

ｘ、’　＝ｘ、、’　＋ΔＸ、′ である。Ｘ、′は新たに記憶回路１０７に記憶され、次
フレーム画像の符号化に用いられる。

第３図は、第１図に示した画像符号化装置によって画像
が符号化されている場合の従来の画像復合化装置を説明
するための図である。図中、３０１は符号化側での量子
化の逆変換を行う逆量子化回路、３０２は、符号化側で
の直交変換の逆変換を行う逆直交変換回路、３０３は加
算回路、３０４は記憶回路である。

入力された符号化画像データは逆量子化回路３０１にお
いて逆量子化される。

逆量子化されたデータはブロック毎に逆直交変換回路３
０２に入力され、直交変換回路１０２での直交変換の逆
変換がおこなわれる。逆直交変換回路３０２に対する入
力をｍ６０列の行列ΔＹＬ′で、逆直交変換回路３０２
からの出力をｍ６０列の行列Δｘ、′で表わせば、ΔＹ
ｉ′　とΔｘ、′　との関係は。

ΔＸｌ’　＝Ａ、”１ΔＹＬ′Ａｎ−１で表わされる。

ただし、　Ａ、−、ＡＩ、−’は、それぞれＡ１、Ａゎ
の逆行列である。

加算回路３０３では、ΔＸＬ′　と記憶回路３０４に記
憶されている前フレームのブロック画像ＸＬ−０との加
算が行われる。すなわち、ｘ、’　＝ｘ、、’　＋ΔＸＬ′ である。そして、ｘＬ′は複合化画像データとして出力
される。同時に、ｘ、′は新たに記憶回路３０４に記憶
され１次フレーム画像の復合化に用いられる。

〔発明が解決しようとする課題〕ところで、画像表示装置への画像表示方法として、画像
の一部を画面に表示しないような画像表示方法がある。

トリミング表示は該表示方法のうちの一つであり、第４
図のように受信した画像のうち一部分だけを表示する方
法である。同図において、４０１は受信画像、４０２は
表示装置、４０３は前記表示装置４０２に表示された表
示画像であり、前記受信画像４０１がトリミングされた
状態で表示されている。また、第５図のように複数の画
像をオーバラップさせてマルチウィンドウ表示する表示
方法においても、他の画像ウィンドウに隠蔽された部分
は表示されない。なお、同図において、４０４は第１の
受信画像、４０５は第２の受信画像を示している。この
ような表示方法を用いた場合に非表示部分に対して表示
部分と同等の復合化処理を行うのは非能率的であり、非
表示部分に対する処理を簡略化することが望ましい。

しかし、このような表示方法においてはこれまで表示さ
れるような場合があり、画像が第１図のような画像符号
化されているときにはそうした場合に備えて非表示部分
に関しても差分データを累積しておく必要がある。前述
した従来の画像複合化装置ではこうした差分データの累
積操作が画素空間において行われるため、非表示部分に
属するか表示部分に属するかにかかわらず、逆量子化後
のすへてのデータを逆直交変換によって直交変換係数空
間から画素空間へ射影し、その上で累積換作を行ってい
た。そのため、非表示部分に対しても表示部分と同じ処
理となり、画像複合化に要する処理が複雑となっていた
。

本発明の目的は、このような問題点を解決するためにな
されたものであり、画像の一部を画面に表示しないよう
な画像表示方法が用いられている場合に、非表示部分に
対する処理を表示部分に比べて簡略化し、画像複合化に
要する処理を軽減できる画像複合化方法を提供すること
にある。

〔課題を解決するための手段〕

前記目的を達成するために、本発明は１画像のフレーム
間差分を取って該差分データをブロック毎に直交変換す
る画像符号化装置によって画像が符号化されている場合
に、前記画像符号化装置から送られた直交変換係数を前
フレームまでの直交変換係数和に加算して現フレームま
での直交変換係数和を求め、画像表示装置の画面表示状
態に関する情報を利用することによって処理中のブロッ
クが前記画像表示装置に表示されるブロックであるか否
かを判別し、前記画像表示装置に表示されるブロックに
ついては前記加算操作によって得られた現フレームまで
の直交変換係数和を逆直交変換してブロック画像を復元
し、前記画像表示装置に表示されないブロックについて
は逆直交変換を行なわないようにしたことを特徴とする
ものである。

〔作用〕

前述の手段によれば、直交変換係数空間において差分デ
ータの累積操作を行ない、表示部分に対応するブロック
に対しては該累積操作後のデータを逆直交変換してブロ
ック画像に変換し、非表示部分に対応するブロックにた
いしては逆直交変換を行なっていないことから、非表示
部分に対応するブロックに対する複合化処理を軽減する
ことができる。

〔発明の実施例〕

以下、本発明の一実施例を図面を用いて具体的に説明す
る。

なお、実施例を説明するための全回において、同一機能
を有するものは同一符号を付け、その繰り返しの説明は
省略する。

第６図は本発明の画像復合化装置の一実施例を説明する
ための図である。同図において、６０１は逆量子化回路
、６０２は加算回路、６０３は逆直交変換制御回路、６
０４は逆直交変換回路、６０５は記憶回路である。

本実施例は符号化画像データがブロック単位で入力され
る場合の例であり、ブロック単位で処理を行うようにな
っている。

前記逆量子化回路６０１は、入力された符号化画像デー
タを逆量子化し、直交変換係数を出力するようになって
いる。

前記加算回路６０２は、前記逆量子化回路６０１から出
力された直交変換係数を前記記憶回路６０５に記憶され
ている前フレームまでの直交変換係数和に対して加算す
るようになっている。即ち、前記逆量子化回路６０１か
ら出力される直交変換係数をｍ行ｎ列の行列ｙＬ’　、
前記記憶回路６０５に記憶されている前フレームまでの
直交変換係数和をｍ行ｎ列の行列Ｙ　Ｌ−Ｌ′で表わせ
ば、前記加算回路６０２の出力は、Ｙ、’＝Ｙ、１’　　＋ΔＹ。

なる行列Ｙ、′で表わされる。

また、前記逆直変換制御回路６０３は５画像表示装置か
らの画面情報を利用することによって処理中のブロック
が表示部分に対応するか、非表示部分に対応するかを識
別し、非表示部分に対応する時には前記逆直交変換回路
６０４の動作を停止させ、表示部分に対応する時には前
記逆直交変換回路６０４を作動させるようになっている
。

さらに、前記逆直交変換回路６０４は、前記逆直交変換
制御回路６０３からの制御信号を受信し、前記加算回路
６０２から出力された直交変換係数が表示部分に対応す
る場合には該直交変換係数の逆直交変換を行ってブロッ
ク画像を復元し、該ブロック画像を出力するようになっ
ている。前記加算回路６０２から出力された直交変換係
数をｍ行ｎ列の行列Ｙ、′で表わせば、前記逆直交変換
回路６０４からの出力は、Ｘ、’　　＝Ａｍ−’Ｙ、’　　Ａ、−１なる演算で求
められるｘ、′で表わされる。ただし、Ａ　＠　−’、
Ａ　ｌｌ−’は、それぞれ符号化側で用いられる直交変
換行列Ａ１−１、Ａ　ｎ−１の逆行列である。

さらに、前記記憶回路６０５は、前記加算回路６０２か
ら出力された直交変換係数和を記憶し、次フレームの複
合化時に前記加算回路６０２に供給するようになってい
る。この記憶回路６０５は１フレ一ム分の直交変換係数
を記憶できる記憶容量を有しており、処理中のブロック
に対応する位置にアクセスし直交変換係数和の読み書き
を行うようになっている。

このように、本実施例によれば、直交変換係数空間にお
いて差分データの累積操作を行ない、表示部分に対応す
るブロックに対しては該累積操作後のデータを逆直交変
換してブロック画像に変換し、非表示部分に対応するブ
ロックに対しては逆直交変換を行なわないことになる。

このため、非表示部分に対応するブロックに対する復合
化処理を軽減することができる。

以上、本発明を実施例に基づき具体的に説明したが、本
発明は、前記実施例に限定されるものではなく、その要
旨を逸脱しない範囲において種種変更可能であることは
いうまでもない６〔発明の効果〕以上説明したように、本発明による画像復合化方法によ
れば、画像の一部が表示されないような画像表示方法が
用いられた場合に、画像表示装置に表示されない部分の
復合化処理を簡略化することができるため、画像の復合
化を従来装置より少ない処理装置で効率的に行うことが
できる。

【図面の簡単な説明】

第１図は、画像符号化装置の一例を示すブロック図。第２図は、ブロックから構成される画像フレームを説明
するための説明図、第３図は、従来における画像復合化装置の一例を示すブ
ロック図、第４図、及び第５図は、それぞれ、従来における問題点
を説明するための説明図、第６図は、本発明による画像複合化装置の一実施例を示
すブロック図である。図中、６０１・・・逆量子化回路、６０２・・・加算回
路、６０３・・・逆直交変換制御回路、６０４・・・逆
直交変換回路、６０５・・・記憶回路。

Claims

【特許請求の範囲】

（１）画像のフレーム間差分を取って該差分データをブ
ロック毎に直交変換する画像符号化装置によって画像が
符号化されている場合に、前記画像符号化装置から送ら
れた直交変換係数を前フレームまでの直交変換係数和に
加算して現フレームまでの直交変換係数和を求め、画像
表示装置の画面表示状態に関する情報を利用することに
よって処理中のブロックが前記画像表示装置に表示され
るブロックであるか否かを判別し、前記画像表示装置に
表示されるブロックについては前記加算操作によって得
られた現フレームまでの直交変換係数和を逆直交変換し
てブロック画像を復元し、前記画像表示装置に表示され
ないブロックについては逆直交変換を行なわないように
したことを特徴とする画像復号化方法。