JPH118852A - 画像圧縮伸張装置 - Google Patents
画像圧縮伸張装置Info
- Publication number
- JPH118852A JPH118852A JP10172869A JP17286998A JPH118852A JP H118852 A JPH118852 A JP H118852A JP 10172869 A JP10172869 A JP 10172869A JP 17286998 A JP17286998 A JP 17286998A JP H118852 A JPH118852 A JP H118852A
- Authority
- JP
- Japan
- Prior art keywords
- data
- output
- unit
- signal
- compression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
Abstract
(57)【要約】
【目的】 圧縮率を上げた場合でも、視覚的な劣化を抑
えた画像を得、また短時間での処理を可能とする。 【構成】 ブロック歪が予測される部分だけ平滑化する
ような適応フィルタリングを施す。複雑な絵柄のぼやけ
を防ぎ、ブロック歪を減らす。復号データに対し適応的
にフィルタリング処理を行ない、近接ブロックのデータ
を重複させてDCT処理を行なう様に処理するデータが
増えることはないことから、短時間での処理が可能とな
る。
えた画像を得、また短時間での処理を可能とする。 【構成】 ブロック歪が予測される部分だけ平滑化する
ような適応フィルタリングを施す。複雑な絵柄のぼやけ
を防ぎ、ブロック歪を減らす。復号データに対し適応的
にフィルタリング処理を行ない、近接ブロックのデータ
を重複させてDCT処理を行なう様に処理するデータが
増えることはないことから、短時間での処理が可能とな
る。
Description
【0001】
【産業上の利用分野】本発明は、映像信号の圧縮、およ
び圧縮されたデータの伸張を行う画像圧縮伸張装置に関
する。
び圧縮されたデータの伸張を行う画像圧縮伸張装置に関
する。
【0002】
{従来のハフマンデコーダの例}一般に、可変長符号
は、符号化されたデータ長が可変長であり、必ずデータ
をシーケンシャルにしか復号できない手法である。つま
り、復号するのに並列処理が困難なため、可変長符号の
デコーダは高速化の実現が大きな問題となっている。可
変長符号の手法で代表的なものとしてハフマン符号が挙
げられる。ハフマン符号はデータの出現頻度に応じて可
変長符号を割り当てるものである。特に画像データに対
して用いられる場合には、同じデータが連続する可能性
が高いため、その連続長(ランレングス)を符号化対象
として、複数のデータを一度に符号化することが多い。
は、符号化されたデータ長が可変長であり、必ずデータ
をシーケンシャルにしか復号できない手法である。つま
り、復号するのに並列処理が困難なため、可変長符号の
デコーダは高速化の実現が大きな問題となっている。可
変長符号の手法で代表的なものとしてハフマン符号が挙
げられる。ハフマン符号はデータの出現頻度に応じて可
変長符号を割り当てるものである。特に画像データに対
して用いられる場合には、同じデータが連続する可能性
が高いため、その連続長(ランレングス)を符号化対象
として、複数のデータを一度に符号化することが多い。
【0003】従来のランレングスを用いた高速化ハフマ
ンデコーダの構成例を図7に示す。図7中の1は可変長
データにおいて次に処理すべきデータを出力する入力デ
ータ制御ブロック、2はハフマン符号を復号するのに必
要なデータが書き込まれている復号データテーブル(ル
ックアップテーブル)、3は復号データテーブル2の内
容に基づいて復号データの量を算出し復号用のタイミン
グ信号を発生する復号データ量算出ブロック、4は同じ
データが連続する際の連続長(ランレングス)を検出す
るランレングスカウンタ、5および6は遅延回路(ディ
レイ)である。
ンデコーダの構成例を図7に示す。図7中の1は可変長
データにおいて次に処理すべきデータを出力する入力デ
ータ制御ブロック、2はハフマン符号を復号するのに必
要なデータが書き込まれている復号データテーブル(ル
ックアップテーブル)、3は復号データテーブル2の内
容に基づいて復号データの量を算出し復号用のタイミン
グ信号を発生する復号データ量算出ブロック、4は同じ
データが連続する際の連続長(ランレングス)を検出す
るランレングスカウンタ、5および6は遅延回路(ディ
レイ)である。
【0004】ここで、復号データテーブル2は、ハフマ
ンデータのデコードを高速化するために、連想メモリを
用いた構成または通常のメモリー構成で次のようなデー
タ構成になっている。すなわち、可変長のデータに冗長
のデータを持たせ、夫々に対応するアドレスには同じデ
ータが書き込んである。例えば、最長8ビットのハフマ
ンコードであれば、2ビットのハフマンコードに対して
残りの6ビットの取り得るアドレス全てに同じ復号デー
タが書き込んである。
ンデータのデコードを高速化するために、連想メモリを
用いた構成または通常のメモリー構成で次のようなデー
タ構成になっている。すなわち、可変長のデータに冗長
のデータを持たせ、夫々に対応するアドレスには同じデ
ータが書き込んである。例えば、最長8ビットのハフマ
ンコードであれば、2ビットのハフマンコードに対して
残りの6ビットの取り得るアドレス全てに同じ復号デー
タが書き込んである。
【0005】これらのテーブル構成により、一度のテー
ブルルックアップで復号を可能にしている。
ブルルックアップで復号を可能にしている。
【0006】{従来のADCTの例}一般に、非可逆符
号は、人間の感覚を利用して効率良くデータを量子化す
ることで、高い圧縮率を得る圧縮手法である。この圧縮
方法で良く使われる手法に直交変換がある。直交変換は
信号の電力が集中するように空間軸を変換するものであ
るが、画像データに対しては、変換効率およびハード量
の面で、空間−周波数空間変換の1手法である、2次元
離散コサイン変換(以下2D−DCT)が用いられるこ
とが多い。
号は、人間の感覚を利用して効率良くデータを量子化す
ることで、高い圧縮率を得る圧縮手法である。この圧縮
方法で良く使われる手法に直交変換がある。直交変換は
信号の電力が集中するように空間軸を変換するものであ
るが、画像データに対しては、変換効率およびハード量
の面で、空間−周波数空間変換の1手法である、2次元
離散コサイン変換(以下2D−DCT)が用いられるこ
とが多い。
【0007】2D−DCTを用いた画像の代表的な圧縮
方法としては適応型離散コサイン変換(ADCT)があ
る。これは、JPEGやMPEGと呼ばれる画像の圧縮
に関する世界標準に採用されている圧縮手法である。し
かしながら、本方式は圧縮率を上げて行くと、直交変換
特有のブロック状の歪み(以下、ブロック歪と称す)が
発生する。このブロック歪みは空や壁等の比較的ゆっく
りとした変化の画像部分に目立ちやすく、視覚的に大き
な画質劣化が感じられるものである。
方法としては適応型離散コサイン変換(ADCT)があ
る。これは、JPEGやMPEGと呼ばれる画像の圧縮
に関する世界標準に採用されている圧縮手法である。し
かしながら、本方式は圧縮率を上げて行くと、直交変換
特有のブロック状の歪み(以下、ブロック歪と称す)が
発生する。このブロック歪みは空や壁等の比較的ゆっく
りとした変化の画像部分に目立ちやすく、視覚的に大き
な画質劣化が感じられるものである。
【0008】図8に従来のブロック歪み対策を施したA
DCTの圧縮伸張フローを示す。図8中の11〜15は
符号化動作における装置を示すもので、11はラスタデ
ータを2D−DCTに入力するための8×8のブロック
データに変換するラスタ/ブロック変換装置、12は空
間−周波数空間変換を行なう2次元離散コサイン変換装
置(2D−DCT装置)、13はDCTの結果を低い周
波数から順番にジクザグ状にスキャンして1次元に並べ
直して出力するジグザグ変換装置、14はスカラー量子
化を行なう量子化装置、15はハフマン符号や算術符号
等のエントロピー符号化装置である。また、図8中の1
6〜21は上記符号化動作に係る各装置に対応して逆変
換を行なうもので、16はエントロピー復号化装置、1
7は逆量子化装置、18は1次元データをジグザグ状に
並べ直して2次元配列するジグザグ逆変換装置、19は
周波数空間−空間変換を行なう2次元離散逆コサイン変
換装置(2D−IDCT装置)、20は8×8のブロッ
クデータをラスタデータに変換するブロック/ラスタ変
換装置、21は復号画像のブロック歪みを軽減するため
に注入された画像ぼかし用の空間フィルタ装置である。
DCTの圧縮伸張フローを示す。図8中の11〜15は
符号化動作における装置を示すもので、11はラスタデ
ータを2D−DCTに入力するための8×8のブロック
データに変換するラスタ/ブロック変換装置、12は空
間−周波数空間変換を行なう2次元離散コサイン変換装
置(2D−DCT装置)、13はDCTの結果を低い周
波数から順番にジクザグ状にスキャンして1次元に並べ
直して出力するジグザグ変換装置、14はスカラー量子
化を行なう量子化装置、15はハフマン符号や算術符号
等のエントロピー符号化装置である。また、図8中の1
6〜21は上記符号化動作に係る各装置に対応して逆変
換を行なうもので、16はエントロピー復号化装置、1
7は逆量子化装置、18は1次元データをジグザグ状に
並べ直して2次元配列するジグザグ逆変換装置、19は
周波数空間−空間変換を行なう2次元離散逆コサイン変
換装置(2D−IDCT装置)、20は8×8のブロッ
クデータをラスタデータに変換するブロック/ラスタ変
換装置、21は復号画像のブロック歪みを軽減するため
に注入された画像ぼかし用の空間フィルタ装置である。
【0009】次に、従来の画像圧縮伸張装置の動作を説
明する。符号化処理においては、まず、画像データはラ
スタ/ブロック変換装置11によりラスタデータから8
×8のブロックデータに変換される。ブロックに変換さ
れたデータは2D−DCT装置12により、空間−周波
数空間に変換される。周波数空間に変換されたデータは
ジグザグ変換装置13により低い周波数順に並べ替えら
れ出力される。量子化装置14は人間の視覚特性を利用
し、低い周波数のデータは小さく量子化し、高い周波数
のデータ程大きく量子化する。この処理により画像品質
の劣化を抑えながらデータの電力集中を増すことがで
き、圧縮率を上げることができる。エントロピー符号化
装置15は、ハフマン符号等のエントロピー符号を用い
てデータを圧縮する。
明する。符号化処理においては、まず、画像データはラ
スタ/ブロック変換装置11によりラスタデータから8
×8のブロックデータに変換される。ブロックに変換さ
れたデータは2D−DCT装置12により、空間−周波
数空間に変換される。周波数空間に変換されたデータは
ジグザグ変換装置13により低い周波数順に並べ替えら
れ出力される。量子化装置14は人間の視覚特性を利用
し、低い周波数のデータは小さく量子化し、高い周波数
のデータ程大きく量子化する。この処理により画像品質
の劣化を抑えながらデータの電力集中を増すことがで
き、圧縮率を上げることができる。エントロピー符号化
装置15は、ハフマン符号等のエントロピー符号を用い
てデータを圧縮する。
【0010】一方、復号化処理は、以上説明した逆の処
理をすることで実現されるが、ブロック歪みを軽減する
ために、ラスタに変換された復号データに対して空間フ
ィルタ装置21を通して出力する。
理をすることで実現されるが、ブロック歪みを軽減する
ために、ラスタに変換された復号データに対して空間フ
ィルタ装置21を通して出力する。
【0011】かかる従来の画像圧縮伸張装置において、
ブロック歪み対策の手法としては、図8中の2D−DC
Tおよび2D−IDCTの処理において連続するブロッ
クのデータを少しづつ重ね合わせて処理することによ
り、重ね合わせ部分において空間フィルタ周波数の非連
続性を軽減する手法があった。
ブロック歪み対策の手法としては、図8中の2D−DC
Tおよび2D−IDCTの処理において連続するブロッ
クのデータを少しづつ重ね合わせて処理することによ
り、重ね合わせ部分において空間フィルタ周波数の非連
続性を軽減する手法があった。
【0012】{従来の圧縮伸張装置およびその周辺装置
の例}一般に、画像を生成するための映像信号は、垂直
同期信号(以下、VSYNCと称す)および水平同期信
号(以下、HSYNCと称す)の2種類の同期信号を基
に構成されており、通常、垂直方向および水平方向のい
ずれにも無効データが存在する。例えば、NTSC信号
には525本のライン数の内、有効なデータは約480
本である。また、水平方向は約80%が有効領域であ
る。画像信号を圧縮する場合、できるだけ処理するデー
タ量を少なくして処理速度を上げるために、この有効デ
ータだけを対象に圧縮処理をすることが一般的である。
従来の圧縮伸張装置における構成例を図9(第1の従来
例)に示す。図9中の31はHSYNCおよびVSYN
Cを基にフレームバッファに有効画像データを入出力す
るタイミング信号を発生させるタイミング発生装置、3
2は有効画像データを一時バッファリングする6メガビ
ット程度のフレームバッファ、33は画像データを圧縮
伸張する圧縮伸張装置、34は圧縮データを保存する圧
縮データ保存装置である。また、図9中の35,36
a,36b,36cは圧縮伸張装置33の内部を構成す
る要素であって、35はパイプライン処理の遅延装置
(ディレイ)、36a,36b,36cは各パイプライ
ンの信号処理装置である。
の例}一般に、画像を生成するための映像信号は、垂直
同期信号(以下、VSYNCと称す)および水平同期信
号(以下、HSYNCと称す)の2種類の同期信号を基
に構成されており、通常、垂直方向および水平方向のい
ずれにも無効データが存在する。例えば、NTSC信号
には525本のライン数の内、有効なデータは約480
本である。また、水平方向は約80%が有効領域であ
る。画像信号を圧縮する場合、できるだけ処理するデー
タ量を少なくして処理速度を上げるために、この有効デ
ータだけを対象に圧縮処理をすることが一般的である。
従来の圧縮伸張装置における構成例を図9(第1の従来
例)に示す。図9中の31はHSYNCおよびVSYN
Cを基にフレームバッファに有効画像データを入出力す
るタイミング信号を発生させるタイミング発生装置、3
2は有効画像データを一時バッファリングする6メガビ
ット程度のフレームバッファ、33は画像データを圧縮
伸張する圧縮伸張装置、34は圧縮データを保存する圧
縮データ保存装置である。また、図9中の35,36
a,36b,36cは圧縮伸張装置33の内部を構成す
る要素であって、35はパイプライン処理の遅延装置
(ディレイ)、36a,36b,36cは各パイプライ
ンの信号処理装置である。
【0013】次に処理手順を説明する。まず、圧縮モー
ド時では、本装置に入力されたデジタル映像信号は、タ
イミング発生装置31およびフレームバッファ32によ
り画像の有効部分のデータだけが取り込まれる。フレー
ムバッファ32に取り込まれたデータのうち有効部分の
データだけを圧縮伸張装置33により逐次圧縮する。圧
縮されたデータは圧縮データ保存装置34により蓄積さ
れる。一方、伸張モード時では、圧縮されたデータは装
置34から圧縮伸張装置33に逐次取り込まれ伸張され
る。伸張されたデータはフレームバッファ32に一時保
持され、HSYNC,VSYNCを基にタイミング発生
装置31で作られた有効データのタイミングに合わせて
出力される。
ド時では、本装置に入力されたデジタル映像信号は、タ
イミング発生装置31およびフレームバッファ32によ
り画像の有効部分のデータだけが取り込まれる。フレー
ムバッファ32に取り込まれたデータのうち有効部分の
データだけを圧縮伸張装置33により逐次圧縮する。圧
縮されたデータは圧縮データ保存装置34により蓄積さ
れる。一方、伸張モード時では、圧縮されたデータは装
置34から圧縮伸張装置33に逐次取り込まれ伸張され
る。伸張されたデータはフレームバッファ32に一時保
持され、HSYNC,VSYNCを基にタイミング発生
装置31で作られた有効データのタイミングに合わせて
出力される。
【0014】図10は別の方式による従来の圧縮伸張装
置の構成例(第2の従来例)を示す。図10中41,4
2は図9に示した圧縮伸張装置33および圧縮データ保
存装置34と夫々同様のものである。43はデータを一
時的にバッファするFIFOメモリ、44はFIFOメ
モリ43からのデータを入出力するタイミングをHSY
NCおよびVSYNCに対応して作成する入出力制御装
置である。45はFIFOメモリ43を制御するFIF
O制御装置である。
置の構成例(第2の従来例)を示す。図10中41,4
2は図9に示した圧縮伸張装置33および圧縮データ保
存装置34と夫々同様のものである。43はデータを一
時的にバッファするFIFOメモリ、44はFIFOメ
モリ43からのデータを入出力するタイミングをHSY
NCおよびVSYNCに対応して作成する入出力制御装
置である。45はFIFOメモリ43を制御するFIF
O制御装置である。
【0015】次に動作を説明する。圧縮時は入出力制御
装置44により発生したタイミング信号に基づき、FI
FOにデータを入力する。FIFO制御装置45はFI
FOメモリ43がFULLまたはNULLにならないよ
うに圧縮伸張装置41のクロックを止める等の制御を行
ないながらデータを圧縮する。伸張時は、まず、FIF
Oメモリ43がある程度一杯になるまでデータを復号
し、圧縮伸張装置41のクロックを止める等の処理によ
り、圧縮伸張装置41の処理を中断させる。入出力制御
装置44からの信号に基づき、FIFOメモリ43から
データを出力させるか、FIFOメモリ43のデータが
ある程度少なくなった時点で、また圧縮伸張装置41を
動作させる。以上のように伸張時もFIFOメモリ43
がFULL,NULLにならないようにFIFO制御装
置45にて制御を行ないながら処理を行なう。
装置44により発生したタイミング信号に基づき、FI
FOにデータを入力する。FIFO制御装置45はFI
FOメモリ43がFULLまたはNULLにならないよ
うに圧縮伸張装置41のクロックを止める等の制御を行
ないながらデータを圧縮する。伸張時は、まず、FIF
Oメモリ43がある程度一杯になるまでデータを復号
し、圧縮伸張装置41のクロックを止める等の処理によ
り、圧縮伸張装置41の処理を中断させる。入出力制御
装置44からの信号に基づき、FIFOメモリ43から
データを出力させるか、FIFOメモリ43のデータが
ある程度少なくなった時点で、また圧縮伸張装置41を
動作させる。以上のように伸張時もFIFOメモリ43
がFULL,NULLにならないようにFIFO制御装
置45にて制御を行ないながら処理を行なう。
【0016】
{従来のハフマンデコーダの課題}通常、図7に示すよ
うな従来の高速のハフマンデコーダの構成では、テーブ
ルとしてROM、RAMまたは連想メモリ等のメモリを
使用している。これはハードウエアデコーダで全てのテ
ーブルを作成すると、ハード量が大きくなり過ぎ、非現
実的なものになるためである。
うな従来の高速のハフマンデコーダの構成では、テーブ
ルとしてROM、RAMまたは連想メモリ等のメモリを
使用している。これはハードウエアデコーダで全てのテ
ーブルを作成すると、ハード量が大きくなり過ぎ、非現
実的なものになるためである。
【0017】従来の構成では、このテーブルに使用して
いるメモリーの読みだし速度が、他のブロックの処理速
度に対して遅いため、復号データテーブル2の読みだし
速度が可変長符号復号装置の処理速度を決める大きな要
因になっている。
いるメモリーの読みだし速度が、他のブロックの処理速
度に対して遅いため、復号データテーブル2の読みだし
速度が可変長符号復号装置の処理速度を決める大きな要
因になっている。
【0018】{従来のADCTの課題}図8に示した従
来のADCTでは、前記した通り、空間フィルタ装置2
1を復号出力に挿入するまたは2D−DCT装置12お
よび2D−IDCT装置19において隣り合うブロック
のデータを少しオーバーラップさせて処理することで、
ブロック歪みを軽減させている。
来のADCTでは、前記した通り、空間フィルタ装置2
1を復号出力に挿入するまたは2D−DCT装置12お
よび2D−IDCT装置19において隣り合うブロック
のデータを少しオーバーラップさせて処理することで、
ブロック歪みを軽減させている。
【0019】しかしながら、空間フィルタ装置21を用
いる方法では、全ての画像に対してフィルタリングを行
なうため、ブロック歪みがあまり目立たない細かい画像
の部分までぼけてしまい、全体的な画像の品質を上げる
ことはできない。そして、データを重ね合わせてDCT
処理を行なう方法では、処理するデータ量が多くなるた
め映像信号を実時間で処理することは非常に困難であ
る。
いる方法では、全ての画像に対してフィルタリングを行
なうため、ブロック歪みがあまり目立たない細かい画像
の部分までぼけてしまい、全体的な画像の品質を上げる
ことはできない。そして、データを重ね合わせてDCT
処理を行なう方法では、処理するデータ量が多くなるた
め映像信号を実時間で処理することは非常に困難であ
る。
【0020】{従来の圧縮伸張装置の課題}従来(第1
の従来例および第2の従来例)の映像信号を扱う圧縮伸
張装置は、映像信号の有効データ期間だけを扱うことが
できるように、図9に示したフレームバッファ32また
は図10に示したFIFOメモリ43の入出力タイミン
グを制御することにより映像信号の入出力タイミングを
緩衝している。
の従来例および第2の従来例)の映像信号を扱う圧縮伸
張装置は、映像信号の有効データ期間だけを扱うことが
できるように、図9に示したフレームバッファ32また
は図10に示したFIFOメモリ43の入出力タイミン
グを制御することにより映像信号の入出力タイミングを
緩衝している。
【0021】しかしながら、図9(第1の従来例)に示
したフレームバッファ32は、メモリとして1枚の画像
を格納しようとすると大容量(6メガビット程度)を必
要とする。また、入力と出力を非同期で実行しなければ
ならないので、通常はデジタル映像信号の入出力をデュ
アルポートで行っている(例えばVRAMを使用)。こ
れらのことから、比較的高価なものとなってしまい、圧
縮伸張装置を構成する上でかなりのコスト比率を占める
ものである。
したフレームバッファ32は、メモリとして1枚の画像
を格納しようとすると大容量(6メガビット程度)を必
要とする。また、入力と出力を非同期で実行しなければ
ならないので、通常はデジタル映像信号の入出力をデュ
アルポートで行っている(例えばVRAMを使用)。こ
れらのことから、比較的高価なものとなってしまい、圧
縮伸張装置を構成する上でかなりのコスト比率を占める
ものである。
【0022】また、図10(第2の従来例)に示したF
IFOメモリ43を制御してデータの入出力タイミング
を緩衝する場合、FIFOメモリ43が一杯(FUL
L)になったか否かを検出し、一杯になったら圧縮伸張
装置41の処理を停止させていた。また、FIFOメモ
リ43が空状態(NULL)になったか否かを検出し、
空状態になったら圧縮伸張装置41の処理を急かしてい
た。このように、FIFOメモリ43がFULLまたは
NULLにならないようにFIFO制御装置45で制御
する必要があり、相当複雑な制御になってしまう。その
上、伸張するデータを途中で切り替えようとした場合、
FIFOメモリ43の状態によって圧縮データ保存装置
34への保存のための切り替えタイミングを、前記した
FIFO制御装置45の制御に対して同期をとらなけれ
ばならないため、圧縮伸張装置41の処理について非常
に細かく複雑な制御が必要になって来る。
IFOメモリ43を制御してデータの入出力タイミング
を緩衝する場合、FIFOメモリ43が一杯(FUL
L)になったか否かを検出し、一杯になったら圧縮伸張
装置41の処理を停止させていた。また、FIFOメモ
リ43が空状態(NULL)になったか否かを検出し、
空状態になったら圧縮伸張装置41の処理を急かしてい
た。このように、FIFOメモリ43がFULLまたは
NULLにならないようにFIFO制御装置45で制御
する必要があり、相当複雑な制御になってしまう。その
上、伸張するデータを途中で切り替えようとした場合、
FIFOメモリ43の状態によって圧縮データ保存装置
34への保存のための切り替えタイミングを、前記した
FIFO制御装置45の制御に対して同期をとらなけれ
ばならないため、圧縮伸張装置41の処理について非常
に細かく複雑な制御が必要になって来る。
【0023】{本発明が解決しようとする課題}本発明
は、上記課題のうち、特に、ADCTにおいて圧縮率を
上げても視覚的に問題にならないレベルに復号画像を改
善でき、かつ短時間で処理可能な復号装置を得ることを
目的とする。
は、上記課題のうち、特に、ADCTにおいて圧縮率を
上げても視覚的に問題にならないレベルに復号画像を改
善でき、かつ短時間で処理可能な復号装置を得ることを
目的とする。
【0024】
【課題を解決するための手段】本発明の請求項1に係る
課題解決手段は、映像信号を直交変換して非可逆に圧縮
する圧縮部と、前記圧縮部で圧縮されたデータの復号伸
張を行って出力する伸張部と、前記伸張部からの出力デ
ータの少なくとも一部について所定の平滑処理を行って
出力するフィルタ部と、前記伸張部からの出力データと
前記フィルタ部からの出力データとを所定のタイミング
信号に基づいて切り替える出力切替部と、前記出力切替
部を切り替え制御する切替制御部とを備える。
課題解決手段は、映像信号を直交変換して非可逆に圧縮
する圧縮部と、前記圧縮部で圧縮されたデータの復号伸
張を行って出力する伸張部と、前記伸張部からの出力デ
ータの少なくとも一部について所定の平滑処理を行って
出力するフィルタ部と、前記伸張部からの出力データと
前記フィルタ部からの出力データとを所定のタイミング
信号に基づいて切り替える出力切替部と、前記出力切替
部を切り替え制御する切替制御部とを備える。
【0025】そして、前記切替制御部は、前記伸張部内
の所定の周波数空間のデータ構成を基に定められたスレ
ッシュホールドにより前記伸張部からの出力データのブ
ロック歪を予測するブロック歪予測手段と、前記ブロッ
ク歪予測手段での予測結果に基づいてブロック歪が予測
されるときにのみ前記出力切替部を前記フィルタ部から
の出力データから前記伸張部からの出力データに切り替
えるための前記所定のタイミング信号を発生するタイミ
ング信号発生手段とを備える。
の所定の周波数空間のデータ構成を基に定められたスレ
ッシュホールドにより前記伸張部からの出力データのブ
ロック歪を予測するブロック歪予測手段と、前記ブロッ
ク歪予測手段での予測結果に基づいてブロック歪が予測
されるときにのみ前記出力切替部を前記フィルタ部から
の出力データから前記伸張部からの出力データに切り替
えるための前記所定のタイミング信号を発生するタイミ
ング信号発生手段とを備える。
【0026】本発明の請求項2に係る課題解決手段は、
前記切替制御部の前記ブロック歪予測手段は、所定の2
次元変換によって周波数空間に変換されたデータのう
ち、所定の低周波数域の成分以外が全て“0”か否かを
判断する判断手段を含む。
前記切替制御部の前記ブロック歪予測手段は、所定の2
次元変換によって周波数空間に変換されたデータのう
ち、所定の低周波数域の成分以外が全て“0”か否かを
判断する判断手段を含む。
【0027】
【作用】本発明請求項1に係る画像圧縮伸張装置では、
細かい画像の部分はフィルタリング処理を行わずにその
ままの画質を保持し、ブロック歪みが出る可能性の高い
画像部分だけに対してフィルタリング処理を行なうの
で、処理速度の大幅な向上を図ることができると同時
に、高い圧縮率の場合でも視覚的に高品質の復号画像を
得ることができる。
細かい画像の部分はフィルタリング処理を行わずにその
ままの画質を保持し、ブロック歪みが出る可能性の高い
画像部分だけに対してフィルタリング処理を行なうの
で、処理速度の大幅な向上を図ることができると同時
に、高い圧縮率の場合でも視覚的に高品質の復号画像を
得ることができる。
【0028】本発明請求項2に係る画像圧縮伸張装置で
は、所定の2次元変換によって周波数空間に変換された
データのうち、所定の低周波数域の成分以外が全て
“0”か否かを判断するだけで、伸張部からの出力デー
タのブロック歪を予測することができる。したがって、
出力切替部の切り替え制御について多大な処理時間を必
要とせず、処理効率を向上できる。
は、所定の2次元変換によって周波数空間に変換された
データのうち、所定の低周波数域の成分以外が全て
“0”か否かを判断するだけで、伸張部からの出力デー
タのブロック歪を予測することができる。したがって、
出力切替部の切り替え制御について多大な処理時間を必
要とせず、処理効率を向上できる。
【0029】
{第1の実施例} <原理>一般に、画像データには同一のデータが連続す
ることが多く、したがって、互いに連続するデータの差
分は“0”になることが多い。特に、離散コサイン変換
(DCT)処理の場合、データが特定の領域(例えば低
周波数領域)に集中することが多いため、前記した差分
が“0”になる割合は極めて高い。例えば、差分が、 “0005” …(1) となる場合、“0”のランレングス(以下、0ランレン
グスと称す)が「3」で、その次に“5”(すなわち
“0”以外のデータ)が来るという具合にして2次元的
にハフマンコードを割り当てることになる。この場合、
0ランレングスである「3」というデータと、その次に
来る“5”というデータを合わせてデコードするため、
前記(1)で示した数列の場合、1回のデコードで4個
のデータを処理できることになる。
ることが多く、したがって、互いに連続するデータの差
分は“0”になることが多い。特に、離散コサイン変換
(DCT)処理の場合、データが特定の領域(例えば低
周波数領域)に集中することが多いため、前記した差分
が“0”になる割合は極めて高い。例えば、差分が、 “0005” …(1) となる場合、“0”のランレングス(以下、0ランレン
グスと称す)が「3」で、その次に“5”(すなわち
“0”以外のデータ)が来るという具合にして2次元的
にハフマンコードを割り当てることになる。この場合、
0ランレングスである「3」というデータと、その次に
来る“5”というデータを合わせてデコードするため、
前記(1)で示した数列の場合、1回のデコードで4個
のデータを処理できることになる。
【0030】“2134” …(2) 一方、前記(2)で示す数列のように、差分データとし
て“0”以外のデータが連続、すなわち0ランレングス
が「0」となる場合、デコードすべきデータは“2”、
“1”、“3”、“4”というように、1回のデコード
について1個ずつのデータしか処理できない。
て“0”以外のデータが連続、すなわち0ランレングス
が「0」となる場合、デコードすべきデータは“2”、
“1”、“3”、“4”というように、1回のデコード
について1個ずつのデータしか処理できない。
【0031】これらのことを考慮すると、0ランレング
スが「0」であるか否かによって処理速度が少なくとも
2倍以上差があることがわかる。すなわち、0ランレン
グスが「1」以上である場合は、2個以上のデータを一
度にデコードするため、メモリールックアップに2サイ
クル懸かっても、最終的なデータ出力のタイミングとし
て1データにつき1回デコードするタイミングに対して
時間的な遜色がないことになる。そして、前記したよう
に、“0”以外のデータが連続するのは例えば低周波数
領域等の特定の領域に限定されるため、0ランレングス
が「0」であるか否かによって処理を偏向することが処
理速度向上のためには望ましいと言える。このことを考
慮して、まず0ランレングスが「0」であるか「1」以
上であるかを検出し、0ランレングスが「0」である特
定の領域のみを高速なハードウェアのデコーダで処理
し、0ランレングスが「1」以上の場合と異なるパスの
処理を行うことで、メモリルックアップの処理速度に依
存していた従来例に比べて、デコーダを高速化すること
による処理速度の向上を実現しようとするものが、本実
施例の画像圧縮伸張装置である。
スが「0」であるか否かによって処理速度が少なくとも
2倍以上差があることがわかる。すなわち、0ランレン
グスが「1」以上である場合は、2個以上のデータを一
度にデコードするため、メモリールックアップに2サイ
クル懸かっても、最終的なデータ出力のタイミングとし
て1データにつき1回デコードするタイミングに対して
時間的な遜色がないことになる。そして、前記したよう
に、“0”以外のデータが連続するのは例えば低周波数
領域等の特定の領域に限定されるため、0ランレングス
が「0」であるか否かによって処理を偏向することが処
理速度向上のためには望ましいと言える。このことを考
慮して、まず0ランレングスが「0」であるか「1」以
上であるかを検出し、0ランレングスが「0」である特
定の領域のみを高速なハードウェアのデコーダで処理
し、0ランレングスが「1」以上の場合と異なるパスの
処理を行うことで、メモリルックアップの処理速度に依
存していた従来例に比べて、デコーダを高速化すること
による処理速度の向上を実現しようとするものが、本実
施例の画像圧縮伸張装置である。
【0032】<構成>図1は本発明の第1の実施例にお
ける0ランレングスデータを用いたハフマン符号の画像
圧縮伸張装置の復号処理部の構成を示したものである。
本実施例の画像圧縮伸張装置は、映像信号を圧縮する圧
縮部と、該圧縮部で圧縮された可変長符号のデータの復
号伸張を行う伸張部とを備える。図1は、前記伸張部を
図示したもので、図1中、51は可変長データにおいて
次に復号するデータを決める入力データ制御ブロック
(入力データ制御手段)である。また、52は0ランレ
ングスデータが“0”に対応するハフマンコードだけを
デコードするための高速処理が可能なハードウェアデコ
ーダ(小規模デコーダ:以下、HWデコーダと称す)で
あり、該HWデコーダ52からの出力信号であるH/U
信号(判定信号)は該HWデコーダ52の内部データに
ヒットしたかあるいはしなかったかを示すための信号で
ある。具体的には、図2中の(B)の如く、内部データ
にヒットしたときはHigh信号を出力し、ヒットしな
かったときはLow信号を出力する。このような処理を
行うため、HWデコーダ52の内部には、リファレンス
としての内部データを格納する内部データ格納手段(メ
モリ)52aと、該内部データ格納手段52aの内部デ
ータと入力データ制御ブロック51からのハフマンデー
タとを照合する照合手段(コンパレータ:判定手段)5
2bとを備えている。
ける0ランレングスデータを用いたハフマン符号の画像
圧縮伸張装置の復号処理部の構成を示したものである。
本実施例の画像圧縮伸張装置は、映像信号を圧縮する圧
縮部と、該圧縮部で圧縮された可変長符号のデータの復
号伸張を行う伸張部とを備える。図1は、前記伸張部を
図示したもので、図1中、51は可変長データにおいて
次に復号するデータを決める入力データ制御ブロック
(入力データ制御手段)である。また、52は0ランレ
ングスデータが“0”に対応するハフマンコードだけを
デコードするための高速処理が可能なハードウェアデコ
ーダ(小規模デコーダ:以下、HWデコーダと称す)で
あり、該HWデコーダ52からの出力信号であるH/U
信号(判定信号)は該HWデコーダ52の内部データに
ヒットしたかあるいはしなかったかを示すための信号で
ある。具体的には、図2中の(B)の如く、内部データ
にヒットしたときはHigh信号を出力し、ヒットしな
かったときはLow信号を出力する。このような処理を
行うため、HWデコーダ52の内部には、リファレンス
としての内部データを格納する内部データ格納手段(メ
モリ)52aと、該内部データ格納手段52aの内部デ
ータと入力データ制御ブロック51からのハフマンデー
タとを照合する照合手段(コンパレータ:判定手段)5
2bとを備えている。
【0033】さらに、53は0ランレングスが1以上に
割り当てられたハフマンコードをデコーダするためのメ
モリー(テーブル:大規模デコーダ)、54はHWデコ
ーダ52からのH/U信号に基づいてHWデコーダ52
からの復号データとメモリー53からの復号データを選
択する第1のマルチプレクサ(第1の切り替え手段:以
下、第1のMUXと称す)、55はメモリー53でデコ
ードされた0ランレングスのデータを基に0ランレング
スの数だけデータの出力タイミングをおくらせるために
0ランレングスをカウントするランレングスカウンタ、
56はデコーダのH/U信号および0ランレングスカウ
ンタの出力より、次のデータの復号処理を行なうか否か
のフラグを生成するデータイネーブル発生回路である。
割り当てられたハフマンコードをデコーダするためのメ
モリー(テーブル:大規模デコーダ)、54はHWデコ
ーダ52からのH/U信号に基づいてHWデコーダ52
からの復号データとメモリー53からの復号データを選
択する第1のマルチプレクサ(第1の切り替え手段:以
下、第1のMUXと称す)、55はメモリー53でデコ
ードされた0ランレングスのデータを基に0ランレング
スの数だけデータの出力タイミングをおくらせるために
0ランレングスをカウントするランレングスカウンタ、
56はデコーダのH/U信号および0ランレングスカウ
ンタの出力より、次のデータの復号処理を行なうか否か
のフラグを生成するデータイネーブル発生回路である。
【0034】さらにまた、57は、入力データ制御ブロ
ック51からのハフマンデータがHWデコーダ52の内
部データにヒットしなかった場合、メモリー53のアク
セススピードが遅いため出力データが不定になるタイミ
ングができる(図2中の(F)参照)ので、これを検出
してデータの出力タイミングをコントロールするための
フラグ(図2中の(E)参照)を発生する不定タイミン
グ検出回路(不定タイミング検出手段)である。
ック51からのハフマンデータがHWデコーダ52の内
部データにヒットしなかった場合、メモリー53のアク
セススピードが遅いため出力データが不定になるタイミ
ングができる(図2中の(F)参照)ので、これを検出
してデータの出力タイミングをコントロールするための
フラグ(図2中の(E)参照)を発生する不定タイミン
グ検出回路(不定タイミング検出手段)である。
【0035】また、58は、第1のMUX54より出力
された復号データから、これまで復号されたデータ量を
計算し、次に復号すべき圧縮データを出力させるための
補助データを作成する復号データ量算出回路、59,6
0,61,62はデータ列をクロック信号CKの1サイ
クル分だけ遅延させる遅延装置(ディレイ)、63は前
記遅延装置60(タイミング信号出力手段)からのタイ
ミング信号に基づいて遅延装置61(遅延手段)からの
出力データから第1のMUX54からの出力データに切
り替える第2のマルチプレクサ(第2の切り替え手段:
以下、第2のMUXと称す)である。
された復号データから、これまで復号されたデータ量を
計算し、次に復号すべき圧縮データを出力させるための
補助データを作成する復号データ量算出回路、59,6
0,61,62はデータ列をクロック信号CKの1サイ
クル分だけ遅延させる遅延装置(ディレイ)、63は前
記遅延装置60(タイミング信号出力手段)からのタイ
ミング信号に基づいて遅延装置61(遅延手段)からの
出力データから第1のMUX54からの出力データに切
り替える第2のマルチプレクサ(第2の切り替え手段:
以下、第2のMUXと称す)である。
【0036】なお、前記不定タイミング検出回路57お
よび前記遅延装置60は、前記第2のMUX63を切り
替えるための所定のタイミング信号を生成するタイミン
グ制御手段を構成する。
よび前記遅延装置60は、前記第2のMUX63を切り
替えるための所定のタイミング信号を生成するタイミン
グ制御手段を構成する。
【0037】<動作>上記構成の画像圧縮伸張装置の処
理手順を説明する。図2は本実施例の画像圧縮伸張装置
の動作を示すタイミングチャートである。図2中の
(A)に示されたデータは入力データ制御ブロック51
からの出力を示すもので、データaの0ランレングスが
「0」、データbの0ランレングスが「1」、データc
の0ランレングスが「0」、データdの0ランレングス
が「2」であるとする。
理手順を説明する。図2は本実施例の画像圧縮伸張装置
の動作を示すタイミングチャートである。図2中の
(A)に示されたデータは入力データ制御ブロック51
からの出力を示すもので、データaの0ランレングスが
「0」、データbの0ランレングスが「1」、データc
の0ランレングスが「0」、データdの0ランレングス
が「2」であるとする。
【0038】まず、図2中の(A)のデータaが入力デ
ータ制御ブロック51から出力されると、図1の如く、
HWデコーダ52とメモリー53に同時に入力される。
ここで、HWデコーダ52内の比較手段(コンパレー
タ)にて、受けたハフマンデータaがデコーダの内部デ
ータにヒットしたか否かを検出する。そして、データa
がHWデコーダ52の内部データにヒットした場合、ヒ
ットした旨を示すフラグとしてH/U信号(図2中の
(B))としてHigh信号を出力するとともに、デコ
ードした復号データ(図2中の(C)のデータA)を出
力する。一方、データaの0ランレングスが「1」以上
の場合は、データaがHWデコーダ52の内部データに
ヒットしないため、H/U信号(図2中の(B))とし
てLow信号を出力する。また、メモリー53は、常に
データaのデコードを実行し復号データを出力する。
ータ制御ブロック51から出力されると、図1の如く、
HWデコーダ52とメモリー53に同時に入力される。
ここで、HWデコーダ52内の比較手段(コンパレー
タ)にて、受けたハフマンデータaがデコーダの内部デ
ータにヒットしたか否かを検出する。そして、データa
がHWデコーダ52の内部データにヒットした場合、ヒ
ットした旨を示すフラグとしてH/U信号(図2中の
(B))としてHigh信号を出力するとともに、デコ
ードした復号データ(図2中の(C)のデータA)を出
力する。一方、データaの0ランレングスが「1」以上
の場合は、データaがHWデコーダ52の内部データに
ヒットしないため、H/U信号(図2中の(B))とし
てLow信号を出力する。また、メモリー53は、常に
データaのデコードを実行し復号データを出力する。
【0039】第1のMUX54は、HWデコーダ52に
ヒットした旨を伝達された場合、H/U信号としてHi
gh信号が入力され、これにしたがってHWデコーダ5
2からの復号データを選択する。一方、ヒットしなかっ
た場合は、H/U信号としてLow信号が入力され、こ
れにしたがってメモリー53からの復号データを選択す
る。また、メモリー53から出力された0ランレングス
データは、0ランレングスカウンタ55に入力され、デ
ータイネーブル発生回路56を通して次のデータをデコ
ードするタイミングを0ランレングスの数だけ待たせる
処理を行なう。
ヒットした旨を伝達された場合、H/U信号としてHi
gh信号が入力され、これにしたがってHWデコーダ5
2からの復号データを選択する。一方、ヒットしなかっ
た場合は、H/U信号としてLow信号が入力され、こ
れにしたがってメモリー53からの復号データを選択す
る。また、メモリー53から出力された0ランレングス
データは、0ランレングスカウンタ55に入力され、デ
ータイネーブル発生回路56を通して次のデータをデコ
ードするタイミングを0ランレングスの数だけ待たせる
処理を行なう。
【0040】一方、復号データ量算出回路58は、第1
のMUX54より出力された復号データから、これまで
復号されたデータ量を計算し、次に復号すべき圧縮デー
タを出力させるための補助データを作成する。第2のM
UX63は、不定タイミング検出回路57で検出された
タイミング(図2中の(E)のHigh信号)にしたが
って正しいデータを埋め込み、最終的な復号データを作
成する(図2中の(H)のデータA)。
のMUX54より出力された復号データから、これまで
復号されたデータ量を計算し、次に復号すべき圧縮デー
タを出力させるための補助データを作成する。第2のM
UX63は、不定タイミング検出回路57で検出された
タイミング(図2中の(E)のHigh信号)にしたが
って正しいデータを埋め込み、最終的な復号データを作
成する(図2中の(H)のデータA)。
【0041】以上が図2中の(A)のデータaについて
処理であるが、メモリー53のルックアップが2サイク
ル懸かるため、該データaが出力されて、これに続くサ
イクルは、図2中の(B)においてデータAとデータB
の間に示すように不定となる。すなわち、(A)のデー
タbがデコード(図2中の(B)のデータB)されるタ
イミングは、データAの後2サイクル目になってしま
う。つまり、0ランレングスが「1」以上の場合、不定
の期間が1サイクル発生することになる。
処理であるが、メモリー53のルックアップが2サイク
ル懸かるため、該データaが出力されて、これに続くサ
イクルは、図2中の(B)においてデータAとデータB
の間に示すように不定となる。すなわち、(A)のデー
タbがデコード(図2中の(B)のデータB)されるタ
イミングは、データAの後2サイクル目になってしま
う。つまり、0ランレングスが「1」以上の場合、不定
の期間が1サイクル発生することになる。
【0042】そこで、データ列の全体を遅延装置(ディ
レイ)61で1サイクル分だけ遅延させ、遅延処理され
た前記不定の期間の部分(遅延装置61からの出力:図
2中の(F))に遅延処理をかけないタイミングで前記
データB(第1のMUX54からの出力:図2中の
(C))を埋め込めば、データBに係るデータ列をHW
デコーダ52のサイクルと同速度で出力できることにな
る。
レイ)61で1サイクル分だけ遅延させ、遅延処理され
た前記不定の期間の部分(遅延装置61からの出力:図
2中の(F))に遅延処理をかけないタイミングで前記
データB(第1のMUX54からの出力:図2中の
(C))を埋め込めば、データBに係るデータ列をHW
デコーダ52のサイクルと同速度で出力できることにな
る。
【0043】また、図2中の(A)のデータdのように
0ランレングスが「2」以上の場合、図2中の(E)で
不定タイミング検出回路57が、不定の期間(HWデコ
ーダ52でヒットしなかったとき)を検出した後の1サ
イクル後のデータは、図2中の(F)のように、遅延装
置61からの出力は不定となる。また、図2中の(F)
の不定のデータに続くデータは、データD,データDと
続く。そこで、不定のデータの部分に、データBのとき
と同様の処理を行ってデータDを埋め込めば、データD
に係るデータ列をHWデコーダ52のサイクルと同速度
で出力できることになる。
0ランレングスが「2」以上の場合、図2中の(E)で
不定タイミング検出回路57が、不定の期間(HWデコ
ーダ52でヒットしなかったとき)を検出した後の1サ
イクル後のデータは、図2中の(F)のように、遅延装
置61からの出力は不定となる。また、図2中の(F)
の不定のデータに続くデータは、データD,データDと
続く。そこで、不定のデータの部分に、データBのとき
と同様の処理を行ってデータDを埋め込めば、データD
に係るデータ列をHWデコーダ52のサイクルと同速度
で出力できることになる。
【0044】このように、本実施例の画像圧縮伸張装置
では、0ランレングスが「0」の場合のコードを復号す
るHWデコーダ52は1クロック以内に復号データを出
力しなくてはならないが、0ランレングスが1以上を復
号するメモリー53は2クロック以内にデータを出力す
れば良い。ここで用いているHWデコーダ52は0ラン
レングスが「0」の場合だけのハフマンコードに対応す
る高速処理用のため、回路規模は小さくて済み、かつ処
理を非常に高速化することができる。
では、0ランレングスが「0」の場合のコードを復号す
るHWデコーダ52は1クロック以内に復号データを出
力しなくてはならないが、0ランレングスが1以上を復
号するメモリー53は2クロック以内にデータを出力す
れば良い。ここで用いているHWデコーダ52は0ラン
レングスが「0」の場合だけのハフマンコードに対応す
る高速処理用のため、回路規模は小さくて済み、かつ処
理を非常に高速化することができる。
【0045】{第2の実施例} <構成>図3は本発明の第2の実施例の画像圧縮伸張装
置を示す機能ブロック図である。図3中の71〜75は
圧縮部の構成要素、76〜84は伸張部の構成要素を夫
々示している。71はラスタデータを2D−DCTに入
力するための8×8のブロックデータに変換するラスタ
/ブロック変換装置、72は空間−周波数空間変換を行
なう2次元離散コサイン変換装置(2D−DCT装
置)、73はDCTの結果を低い周波数から順番にジク
ザグ状にスキャンして1次元に並べ直して出力するジグ
ザグ変換装置、74はスカラー量子化を行なう量子化装
置、75はハフマン符号や算術符号等のエントロピー符
号化装置、76はエントロピー復号化装置、77は逆量
子化装置、78は1次元データをジグザグ状に並べ直し
て2次元配列するジグザグ逆変換装置、79は周波数空
間−空間変換を行なう2次元離散逆コサイン変換装置
(2D−IDCT装置)、80は8×8のブロックデー
タをラスタデータに変換するブロック/ラスタ変換装置
であり、これらは従来方式の各装置と同じ機能を有す
る。
置を示す機能ブロック図である。図3中の71〜75は
圧縮部の構成要素、76〜84は伸張部の構成要素を夫
々示している。71はラスタデータを2D−DCTに入
力するための8×8のブロックデータに変換するラスタ
/ブロック変換装置、72は空間−周波数空間変換を行
なう2次元離散コサイン変換装置(2D−DCT装
置)、73はDCTの結果を低い周波数から順番にジク
ザグ状にスキャンして1次元に並べ直して出力するジグ
ザグ変換装置、74はスカラー量子化を行なう量子化装
置、75はハフマン符号や算術符号等のエントロピー符
号化装置、76はエントロピー復号化装置、77は逆量
子化装置、78は1次元データをジグザグ状に並べ直し
て2次元配列するジグザグ逆変換装置、79は周波数空
間−空間変換を行なう2次元離散逆コサイン変換装置
(2D−IDCT装置)、80は8×8のブロックデー
タをラスタデータに変換するブロック/ラスタ変換装置
であり、これらは従来方式の各装置と同じ機能を有す
る。
【0046】また、81は逆量子化された周波数空間の
データ構成よりブロック歪の出る可能性が高い部分を検
出するブロック歪予測装置(ブロック歪予測手段)であ
って、逆量子化装置77からのデータのうち4番目以降
のデータが全て“0”か否かを判断するもの(判断手
段)である。ここで、図5はブロック歪予測装置81の
内部構成を示す図である。図5中のTS3は逆量子化装
置77の1番目から64番目までの出力データのタイミ
ング中最初から3番目までだけHighになりその後は
Lowになる第1のタイミング信号、TS1は逆量子化
装置77の1番目から64番目までの出力データのタイ
ミング中最初の1番目だけHighになりその後はLo
wになる第2のタイミング信号、CKはクロック信号で
ある。図5の如く、ブロック歪予測装置81は、逆量子
化装置77からの11ビットの出力信号の論理和(反
転)をとる第1のNOR回路91と、前記第1のNOR
回路91からの出力と前記第1のタイミング信号TS3
との論理和(反転)をとる第2のNOR回路92と、入
力がJ端子とK端子に2分割され該J端子およびK端子
の入力の組み合わせにて出力が決定されるJ−K−フリ
ップフロップ93と、前記第2のタイミング信号TS1
をセット入力信号(CS)とし、前記J−K−フリップ
フロップ93からの出力信号を入力信号(D)とするD
−フリップフロップ94とを備える。
データ構成よりブロック歪の出る可能性が高い部分を検
出するブロック歪予測装置(ブロック歪予測手段)であ
って、逆量子化装置77からのデータのうち4番目以降
のデータが全て“0”か否かを判断するもの(判断手
段)である。ここで、図5はブロック歪予測装置81の
内部構成を示す図である。図5中のTS3は逆量子化装
置77の1番目から64番目までの出力データのタイミ
ング中最初から3番目までだけHighになりその後は
Lowになる第1のタイミング信号、TS1は逆量子化
装置77の1番目から64番目までの出力データのタイ
ミング中最初の1番目だけHighになりその後はLo
wになる第2のタイミング信号、CKはクロック信号で
ある。図5の如く、ブロック歪予測装置81は、逆量子
化装置77からの11ビットの出力信号の論理和(反
転)をとる第1のNOR回路91と、前記第1のNOR
回路91からの出力と前記第1のタイミング信号TS3
との論理和(反転)をとる第2のNOR回路92と、入
力がJ端子とK端子に2分割され該J端子およびK端子
の入力の組み合わせにて出力が決定されるJ−K−フリ
ップフロップ93と、前記第2のタイミング信号TS1
をセット入力信号(CS)とし、前記J−K−フリップ
フロップ93からの出力信号を入力信号(D)とするD
−フリップフロップ94とを備える。
【0047】82はブロック歪予測装置81から出力さ
れたフラグとブロック/ラスタ変換装置80からの最終
のラスタ出力とのタイミングを合わせるタイミング調整
装置(タイミング信号発生手段)、83はラスタデータ
になって出力される画像データに対して平滑フィルタを
かける5×5の空間フィルタ装置(フィルタ部)、84
はブロック歪の予測フラグに基づいてブロック/ラスタ
変換装置80からの出力と空間フィルタ装置83からの
出力とを選択する出力切替装置(マルチプレクサ:出力
切替部)である。
れたフラグとブロック/ラスタ変換装置80からの最終
のラスタ出力とのタイミングを合わせるタイミング調整
装置(タイミング信号発生手段)、83はラスタデータ
になって出力される画像データに対して平滑フィルタを
かける5×5の空間フィルタ装置(フィルタ部)、84
はブロック歪の予測フラグに基づいてブロック/ラスタ
変換装置80からの出力と空間フィルタ装置83からの
出力とを選択する出力切替装置(マルチプレクサ:出力
切替部)である。
【0048】なお、前記ブロック歪予測装置81および
前記タイミング調整装置82は前記出力切替装置84を
切り替え制御する切替制御部を構成する。
前記タイミング調整装置82は前記出力切替装置84を
切り替え制御する切替制御部を構成する。
【0049】<動作>上記構成の画像圧縮伸張装置にお
いて、データ圧縮処理時には、まず、画像データはラス
タ/ブロック変換装置71によりラスタデータから8×
8のブロックデータに変換される。ブロックに変換され
たデータは2D−DCT装置72により、空間−周波数
空間に変換される。周波数空間に変換されたデータはジ
グザグ変換装置73により低い周波数順に並べ替えられ
出力される。量子化装置74は人間の視覚特性を利用し
低い周波数のデータは小さく量子化し高い周波数のデー
タ程大きく量子化する。この処理により画像品質の劣化
を抑えながらデータの電力集中を増すことができ、圧縮
率を上げることができる。エントロピー符号化装置75
は、ハフマン符号等のエントロピー符号を用いてデータ
を圧縮する。
いて、データ圧縮処理時には、まず、画像データはラス
タ/ブロック変換装置71によりラスタデータから8×
8のブロックデータに変換される。ブロックに変換され
たデータは2D−DCT装置72により、空間−周波数
空間に変換される。周波数空間に変換されたデータはジ
グザグ変換装置73により低い周波数順に並べ替えられ
出力される。量子化装置74は人間の視覚特性を利用し
低い周波数のデータは小さく量子化し高い周波数のデー
タ程大きく量子化する。この処理により画像品質の劣化
を抑えながらデータの電力集中を増すことができ、圧縮
率を上げることができる。エントロピー符号化装置75
は、ハフマン符号等のエントロピー符号を用いてデータ
を圧縮する。
【0050】一方、復号化処理は、エントロピー復号化
装置76にて圧縮データをハフマン符号等のエントロピ
ー符号を用いて復号し、逆量子化装置77にて逆量子化
した後、該逆量子化装置77から出力された信号は空間
周波数の低い成分より順に出力されてくる。
装置76にて圧縮データをハフマン符号等のエントロピ
ー符号を用いて復号し、逆量子化装置77にて逆量子化
した後、該逆量子化装置77から出力された信号は空間
周波数の低い成分より順に出力されてくる。
【0051】ここで、64個の周波数成分に分解された
ブロック内の成分に関して、図4の如く、低い周波数よ
り例えば4番目以降の周波数成分が全て“0”の場合は
フラグを立て、一つでも“0”以外のデータがある場合
はフラグを立てないようにする。ブロック歪が視覚的に
目立つ可能性が高い画像は、空や壁など、単純な絵柄の
部分である。これは、空間周波数に分解すると、低減だ
けにデータがあり、高域にはほとんどデータは存在しな
いものになる。つまり、前記したように4番目以降のデ
ータが全て“0”か“0”で無いかを判断することによ
り、ブロック歪が出る可能性が高い画像ブロックを判定
することができる。この場合、図5の如く、第1のタイ
ミング信号TS3に基づいて第2のNOR回路92から
の4番目以降のデータが全て“0”か否かを判断する。
ブロック内の成分に関して、図4の如く、低い周波数よ
り例えば4番目以降の周波数成分が全て“0”の場合は
フラグを立て、一つでも“0”以外のデータがある場合
はフラグを立てないようにする。ブロック歪が視覚的に
目立つ可能性が高い画像は、空や壁など、単純な絵柄の
部分である。これは、空間周波数に分解すると、低減だ
けにデータがあり、高域にはほとんどデータは存在しな
いものになる。つまり、前記したように4番目以降のデ
ータが全て“0”か“0”で無いかを判断することによ
り、ブロック歪が出る可能性が高い画像ブロックを判定
することができる。この場合、図5の如く、第1のタイ
ミング信号TS3に基づいて第2のNOR回路92から
の4番目以降のデータが全て“0”か否かを判断する。
【0052】次に、ブロック歪予測装置81からのフラ
グをもとに、空間フィルタ装置83からの出力信号とブ
ロック/ラスタ変換装置80からのそのままの信号を出
力切替装置84にて切り替え出力する。切り替えのタイ
ミングは、ブロック歪予測装置81からの復号データが
出力されるタイミングにあわせて切り替えを行なう。以
上の処理により、ブロック歪が出る可能性がある部分だ
け、平滑フィルタリングを行い、その他の部分について
はフィルタリングをかけないデータを出力することがで
きる。このため、複雑な絵柄の画像ぼけを防止でき、ブ
ロック歪を軽減することができる。
グをもとに、空間フィルタ装置83からの出力信号とブ
ロック/ラスタ変換装置80からのそのままの信号を出
力切替装置84にて切り替え出力する。切り替えのタイ
ミングは、ブロック歪予測装置81からの復号データが
出力されるタイミングにあわせて切り替えを行なう。以
上の処理により、ブロック歪が出る可能性がある部分だ
け、平滑フィルタリングを行い、その他の部分について
はフィルタリングをかけないデータを出力することがで
きる。このため、複雑な絵柄の画像ぼけを防止でき、ブ
ロック歪を軽減することができる。
【0053】{第3の実施例} <構成>図6は本発明の第3の実施例の画像圧縮伸張装
置およびその周辺装置を示す図である。図6中の101
は圧縮部および伸張部を備える画像圧縮伸張装置、10
2は圧縮されたデータを保存するデータ保存装置であ
る。また、103−1,103−2,103−3は画像
圧縮伸張装置101の内部の各種信号処理装置、104
は前段の前記信号処理装置103−1,103−2,1
03−3で信号処理したデータを後続する各パイプライ
ンの出力に反映させるかどうかを、データイネーブル発
生回路106からのデータイネーブル信号に基づいて判
定する画像圧縮伸張装置101の内部判定装置(処理制
御手段)、105aは内部判定装置104からの内部信
号を1クロック分遅延させる画像圧縮伸張装置101の
内部遅延装置(レジスタ)、105bはデータイネーブ
ル発生回路106からのデータイネーブル信号をパイプ
ラインの各段の信号処理装置103−1,103−2,
103−3の段数分に対応して1クロックずつ遅延させ
る画像圧縮伸張装置101の内部遅延装置(イネーブル
信号遅延手段:レジスタ)、106は外部からのHSY
NC信号およびVSYNC信号を基に有効データの期間
だけイネーブルとするためにデータイネーブル信号を発
生するデータイネーブル発生回路(イネーブル手段)で
ある。ここで、前記内部判定装置104は、前記データ
イネーブル発生回路106からの前記データイネーブル
信号を受けたときのみ前記パイプライン内の信号処理を
許可し、前記データイネーブル信号を受けないときに前
記パイプライン内の信号処理を停止させるもので、一般
的なマルチプレクサが用いられ、一対の入力端子のう
ち、一方は前段の前記信号処理装置103−1,103
−2,103−3の出力端子が接続され、他方は後続す
る内部遅延装置105aの出力端子に帰還接続される。
置およびその周辺装置を示す図である。図6中の101
は圧縮部および伸張部を備える画像圧縮伸張装置、10
2は圧縮されたデータを保存するデータ保存装置であ
る。また、103−1,103−2,103−3は画像
圧縮伸張装置101の内部の各種信号処理装置、104
は前段の前記信号処理装置103−1,103−2,1
03−3で信号処理したデータを後続する各パイプライ
ンの出力に反映させるかどうかを、データイネーブル発
生回路106からのデータイネーブル信号に基づいて判
定する画像圧縮伸張装置101の内部判定装置(処理制
御手段)、105aは内部判定装置104からの内部信
号を1クロック分遅延させる画像圧縮伸張装置101の
内部遅延装置(レジスタ)、105bはデータイネーブ
ル発生回路106からのデータイネーブル信号をパイプ
ラインの各段の信号処理装置103−1,103−2,
103−3の段数分に対応して1クロックずつ遅延させ
る画像圧縮伸張装置101の内部遅延装置(イネーブル
信号遅延手段:レジスタ)、106は外部からのHSY
NC信号およびVSYNC信号を基に有効データの期間
だけイネーブルとするためにデータイネーブル信号を発
生するデータイネーブル発生回路(イネーブル手段)で
ある。ここで、前記内部判定装置104は、前記データ
イネーブル発生回路106からの前記データイネーブル
信号を受けたときのみ前記パイプライン内の信号処理を
許可し、前記データイネーブル信号を受けないときに前
記パイプライン内の信号処理を停止させるもので、一般
的なマルチプレクサが用いられ、一対の入力端子のう
ち、一方は前段の前記信号処理装置103−1,103
−2,103−3の出力端子が接続され、他方は後続す
る内部遅延装置105aの出力端子に帰還接続される。
【0054】<動作>上記構成の画像圧縮伸張装置の処
理方法を説明する。まず、圧縮時においてデータイネー
ブル発生回路106はHSYNC信号およびVSYNC
信号に基づいて入力映像信号が有効な期間だけデータイ
ネーブル信号を発生する。圧縮装置内の各信号処理装置
103−1,103−2,103−3は入力された画像
データをパイプライン処理により逐次処理するが、各段
の内部判定装置104によって、次段に出力されるかあ
るいは前のデータを保持するかが決められる。つまり、
各段のデータがバリッドの時だけデータは処理され、そ
うでない時は、各段の内部遅延装置105aは、次にバ
リッド信号がくるまでデータを保持していることとな
る。このような処理を行なうことで、有効な入力映像信
号だけを圧縮することができる。次に伸張時の処理につ
いてのべる。
理方法を説明する。まず、圧縮時においてデータイネー
ブル発生回路106はHSYNC信号およびVSYNC
信号に基づいて入力映像信号が有効な期間だけデータイ
ネーブル信号を発生する。圧縮装置内の各信号処理装置
103−1,103−2,103−3は入力された画像
データをパイプライン処理により逐次処理するが、各段
の内部判定装置104によって、次段に出力されるかあ
るいは前のデータを保持するかが決められる。つまり、
各段のデータがバリッドの時だけデータは処理され、そ
うでない時は、各段の内部遅延装置105aは、次にバ
リッド信号がくるまでデータを保持していることとな
る。このような処理を行なうことで、有効な入力映像信
号だけを圧縮することができる。次に伸張時の処理につ
いてのべる。
【0055】一方、伸張処理時においては、伸張処理を
開始してからパイプラインの段数分だけ映像信号が出力
されるタイミングが遅れる事になる。つまりHSYNC
信号およびVSYNC信号に合わせて伸張データを出力
しようとすると、データイネーブル発生回路106は有
効データを出すタイミングよりパイプラインの段数分だ
け先に処理を始めるようにデータイネーブル信号を出力
すれば良い。通常、映像信号はかなりの無効データを含
んでいるため、少々のパイプラインの段数があっても、
このような処理は問題なく可能である。
開始してからパイプラインの段数分だけ映像信号が出力
されるタイミングが遅れる事になる。つまりHSYNC
信号およびVSYNC信号に合わせて伸張データを出力
しようとすると、データイネーブル発生回路106は有
効データを出すタイミングよりパイプラインの段数分だ
け先に処理を始めるようにデータイネーブル信号を出力
すれば良い。通常、映像信号はかなりの無効データを含
んでいるため、少々のパイプラインの段数があっても、
このような処理は問題なく可能である。
【0056】{変形例}第1の実施例では、ランレング
スが“0”の場合と“1”以上の場合で、デコーダとメ
モリに分解したが、スピードと回路規模との兼合で、そ
れ以外の分割方法を適用できることは言うまでも無い。
スが“0”の場合と“1”以上の場合で、デコーダとメ
モリに分解したが、スピードと回路規模との兼合で、そ
れ以外の分割方法を適用できることは言うまでも無い。
【0057】
【発明の効果】本発明請求項1によると、ブロック歪が
予測される部分だけ平滑化するような適応フィルタリン
グを施しているため、複雑な絵柄のぼやけを防止でき、
かつブロック歪を軽減させることができる。したがっ
て、圧縮率を上げた場合でも、視覚的な劣化を抑えた画
像を得ることが可能となる。また、復号データに対し適
応的にフィルタリング処理を行なうだけであり、近接ブ
ロックのデータを重複させてDCT処理を行なう様に処
理するデータが増えることはないため、従来に比べて短
時間での処理が可能となるという効果がある。
予測される部分だけ平滑化するような適応フィルタリン
グを施しているため、複雑な絵柄のぼやけを防止でき、
かつブロック歪を軽減させることができる。したがっ
て、圧縮率を上げた場合でも、視覚的な劣化を抑えた画
像を得ることが可能となる。また、復号データに対し適
応的にフィルタリング処理を行なうだけであり、近接ブ
ロックのデータを重複させてDCT処理を行なう様に処
理するデータが増えることはないため、従来に比べて短
時間での処理が可能となるという効果がある。
【0058】本発明請求項2によると、所定の2次元変
換によって周波数空間に変換されたデータのうち、所定
の低周波数域の成分以外が全て“0”か否かを判断する
だけで、伸張部からの出力データのブロック歪を予測す
ることができる。したがって、出力切替部の切り替え制
御について多大な処理時間を必要とせず、処理効率を向
上できるという効果がある。
換によって周波数空間に変換されたデータのうち、所定
の低周波数域の成分以外が全て“0”か否かを判断する
だけで、伸張部からの出力データのブロック歪を予測す
ることができる。したがって、出力切替部の切り替え制
御について多大な処理時間を必要とせず、処理効率を向
上できるという効果がある。
【図1】本発明の第1の実施例の画像圧縮伸張装置にお
けるハフマンデコーダの構成を示す図である。
けるハフマンデコーダの構成を示す図である。
【図2】本発明の第1の実施例の画像圧縮伸張装置の動
作を示すタイミングチャートである。
作を示すタイミングチャートである。
【図3】本発明の第2の実施例のADCT方式の画像圧
縮伸張装置における圧縮伸張フローを示す図である。
縮伸張装置における圧縮伸張フローを示す図である。
【図4】本発明の第2の実施例の画像圧縮伸張装置にお
けるブロック歪出現判定のデータ構成を示す図である。
けるブロック歪出現判定のデータ構成を示す図である。
【図5】本発明の第2の実施例におけるブロック歪出現
判定回路の画像圧縮伸張装置を示す図である。
判定回路の画像圧縮伸張装置を示す図である。
【図6】本発明の第3の実施例における画像圧縮伸張装
置を示す図である。
置を示す図である。
【図7】従来の高速ハフマンデコーダの回路構成例を示
す図である。
す図である。
【図8】従来のADCT方式の画像圧縮伸張装置におけ
る圧縮伸張フローを示す図である。
る圧縮伸張フローを示す図である。
【図9】第1の従来例の画像圧縮伸張装置を示す図であ
る。
る。
【図10】第2の従来例の画像圧縮伸張装置を示す図で
ある。
ある。
51 入力データ制御ブロック 52 HWデコーダ 52a 内部データ格納手段 52b 照合手段 53 メモリー 54 第1のマルチプレクサ 55 ランレングスカウンタ 56 データイネーブル発生回路 57 不定タイミング検出回路 58 復号データ量算出回路 59,60,61,62 遅延装置 63 第2のマルチプレクサ 71 ラスタ/ブロック変換装置 72 2D−DCT装置 73 ジグザグ変換装置 74 量子化装置 75 エントロピー符号化装置 76 エントロピー復号化装置 77 逆量子化装置 78 ジグザグ逆変換装置 79 2D−IDCT装置 80 ブロック/ラスタ変換装置 81 ブロック歪予測装置 91 第1のNOR回路 92 第2のNOR回路 93 J−K−フリップフロップ 94 D−フリップフロップ 82 タイミング調整装置 83 空間フィルタ装置 84 出力切替装置 101 画像圧縮伸張装置 103−1,103−2,103−3 信号処理装置 104 内部判定装置 105a,105b 内部遅延装置 106 データイネーブル発生回路
Claims (2)
- 【請求項1】 映像信号を直交変換して非可逆に圧縮す
る圧縮部と、 前記圧縮部で圧縮されたデータの復号伸張を行って出力
する伸張部と、 前記伸張部からの出力データの少なくとも一部について
所定の平滑処理を行って出力するフィルタ部と、 前記伸張部からの出力データと前記フィルタ部からの出
力データとを所定のタイミング信号に基づいて切り替え
る出力切替部と、 前記出力切替部を切り替え制御する切替制御部とを備
え、 前記切替制御部は、 前記伸張部内の所定の周波数空間のデータ構成を基に定
められたスレッシュホールドにより前記伸張部からの出
力データのブロック歪を予測するブロック歪予測手段
と、 前記ブロック歪予測手段での予測結果に基づいてブロッ
ク歪が予測されるときにのみ前記出力切替部を前記フィ
ルタ部からの出力データから前記伸張部からの出力デー
タに切り替えるための前記所定のタイミング信号を発生
するタイミング信号発生手段とを備える画像圧縮伸張装
置。 - 【請求項2】 前記切替制御部の前記ブロック歪予測手
段は、所定の2次元変換によって周波数空間に変換され
たデータのうち、所定の低周波数域の成分以外が全て
“0”か否かを判断する判断手段を含む、請求項1記載
の画像圧縮伸張装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10172869A JPH118852A (ja) | 1998-06-19 | 1998-06-19 | 画像圧縮伸張装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP10172869A JPH118852A (ja) | 1998-06-19 | 1998-06-19 | 画像圧縮伸張装置 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP23309494A Division JP2829246B2 (ja) | 1994-09-28 | 1994-09-28 | 画像伸張装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JPH118852A true JPH118852A (ja) | 1999-01-12 |
Family
ID=15949816
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP10172869A Pending JPH118852A (ja) | 1998-06-19 | 1998-06-19 | 画像圧縮伸張装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPH118852A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6650061B1 (en) | 1999-07-29 | 2003-11-18 | Sharp Kabushiki Kaisha | Electron-source array and manufacturing method thereof as well as driving method for electron-source array |
JP2006148237A (ja) * | 2004-11-16 | 2006-06-08 | Canon Inc | 復号化装置およびその方法 |
-
1998
- 1998-06-19 JP JP10172869A patent/JPH118852A/ja active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6650061B1 (en) | 1999-07-29 | 2003-11-18 | Sharp Kabushiki Kaisha | Electron-source array and manufacturing method thereof as well as driving method for electron-source array |
JP2006148237A (ja) * | 2004-11-16 | 2006-06-08 | Canon Inc | 復号化装置およびその方法 |
JP4502383B2 (ja) * | 2004-11-16 | 2010-07-14 | キヤノン株式会社 | 復号化装置およびその方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100552576B1 (ko) | Mpeg 호환 가능한 디지털 신호 처리 시스템 및 mpeg 코딩된 이미지를 나타내는 데이터의 데이터스트림을 처리하기 위한 방법 | |
EP0673171B1 (en) | Video decoder | |
JPH104550A (ja) | Mpeg−2復号方法及びmpeg−2ビデオ復号器 | |
JPH099261A (ja) | 信号圧縮装置 | |
JPH0686262A (ja) | 画像符号化装置 | |
EP0925555B1 (en) | Dual-speed variable length decoder and decoding architecture for mpeg-2 video data | |
JPH07222164A (ja) | ディジタルビデオ・ビットストリームコーダ | |
JP2829246B2 (ja) | 画像伸張装置 | |
JP2000050272A (ja) | 復号化装置及び方法 | |
JPH118852A (ja) | 画像圧縮伸張装置 | |
JPH118853A (ja) | 画像圧縮伸張装置 | |
JPH05316359A (ja) | 画像データ符号化装置 | |
KR0181055B1 (ko) | 영상 부호화 장치 | |
JP2004179752A (ja) | ハフマンデコーダ | |
JPH08205143A (ja) | 並列復号化装置 | |
JPH05168000A (ja) | 動画像データの符号化方式および復号方式 |