JPH07123405A - 画像符号化方法及び画像符号化装置 - Google Patents

画像符号化方法及び画像符号化装置

Info

Publication number
JPH07123405A
JPH07123405A JP27320593A JP27320593A JPH07123405A JP H07123405 A JPH07123405 A JP H07123405A JP 27320593 A JP27320593 A JP 27320593A JP 27320593 A JP27320593 A JP 27320593A JP H07123405 A JPH07123405 A JP H07123405A
Authority
JP
Japan
Prior art keywords
data
block
layer
value
hierarchical
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP27320593A
Other languages
English (en)
Other versions
JP3356338B2 (ja
Inventor
Tetsujiro Kondo
哲二郎 近藤
Yasuhiro Fujimori
泰弘 藤森
Kunio Kawaguchi
邦雄 川口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP27320593A priority Critical patent/JP3356338B2/ja
Priority to US08/428,067 priority patent/US5930394A/en
Priority to EP94925022A priority patent/EP0671852B1/en
Priority to CN94190793A priority patent/CN1075321C/zh
Priority to PCT/JP1994/001425 priority patent/WO1995007004A1/ja
Priority to DE69428979T priority patent/DE69428979T2/de
Publication of JPH07123405A publication Critical patent/JPH07123405A/ja
Priority to US09/313,141 priority patent/US6108451A/en
Priority to US09/313,392 priority patent/US6195464B1/en
Priority to US09/315,100 priority patent/US6219456B1/en
Priority to US09/316,621 priority patent/US6408097B1/en
Priority to US09/324,448 priority patent/US6324304B1/en
Priority to US09/710,542 priority patent/US6539119B1/en
Application granted granted Critical
Publication of JP3356338B2 publication Critical patent/JP3356338B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

(57)【要約】 【目的】本発明は、画像符号化方法において、画像デー
タを階層符号化する際における圧縮効率を向上するもの
である。 【構成】画像データを順次再帰的に異なる複数の解像度
でなる複数の階層データに分割して符号化する際に、解
像度の最も低い最上位階層データを除く階層データの所
定のブロツクについてブロツクアクテイビテイを判定す
る。次に下位下層データに対する分割処理の判定基準で
あるしきい値をブロツクアクテイビテイに対応するブロ
ツク度数の分布状況から設定し、伝送量を増減すること
により圧縮効率が低下しないようにする。

Description

【発明の詳細な説明】
【0001】
【目次】以下の順序で本発明を説明する。 産業上の利用分野 従来の技術(図14及び図15) 発明が解決しようとする課題 課題を解決するための手段(図6〜図9) 作用(図1〜図3) 実施例(図1〜図10) (1)階層符号化の原理(図1〜図3) (2)全体構成(図4) (3)階層符号化エンコーダ部40A(図5及び図6) (3−1)ブロツク構成(図5及び図6) (3−2)処理 (4)発生情報量制御部40B(図7〜図9) (4−1)ブロツク構成(図7) (4−2)度数分布表(図8) (4−3)処理(図9) (5)他の実施例(図10〜図13) 発明の効果
【0002】
【産業上の利用分野】本発明は画像符号化装置に関し、
例えば所定の画像データを異なる解像度でなる複数の画
像データに分割符号化する画像符号化装置に適用して好
適なものである。
【0003】
【従来の技術】従来、この種の画像符号化装置として、
入力画像データをピラミツド符号化等の階層符号化の手
法を用いて階層的に符号化するものがある(特願平5-14
2836号公報)。この階層符号化装置においては、高解像
度の入力画像データを第1の階層データとして、この第
1の階層データよりも解像度が低い第2の解像データ、
さらに第2の解像データよりも解像度が低い第3の階層
データ、……を順次再帰的に形成し、これら複数の階層
データを1つの通信路や記録再生経路でなる伝送路で伝
送する。
【0004】またこのとき複数の階層データを復号化す
る画像復号化装置では、複数の階層データについて全て
復号化することに加えて、それぞれに対応するテレビジ
ヨンモニタの解像度等により、何れかの階層データのう
ち所望の1つを選択して復号化し得る。このように階層
化された複数の階層データから所望の階層データのみに
ついて復号化することにより必要最小限の伝送データ量
により所望の画像データを得ることができる。
【0005】ここで図11に示すように、この階層符号
化として例えば4階層の符号化を実現する画像符号化装
置1では、それぞれ3段分の間引きフイルタ2、3、4
と補間フイルタ5、6、7とを有し、入力画像データD
1について各段の間引きフイルタ2、3、4によつて順
次解像度の低い縮小画像データD2、D3、D4を形成
すると共に補間フイルタ5、6、7により縮小画像デー
タD2、D3、D4を縮小前の解像度に戻す。
【0006】各間引きフイルタ2〜4の出力D2〜D4
及び各補間フイルタ5〜7の出力D5〜D7はそれぞれ
差分回路8、9、10に入力され、これにより差分デー
タD8、D9、D10が生成される。この結果、画像符
号化装置1においては、階層データのデータ量を低減す
ると共に信号電力を低減する。ここでこの差分データD
8〜D10及び縮小画像データD4は、入力画像データ
D1に対して、それぞれ面積が1、1/4 、1/16、1/64の
サイズとなつている。
【0007】それぞれの差分回路8〜10より得られる
差分データD8〜D10及び間引きフイルタ4より得ら
れる縮小画像データD4は各符号器11、12、13、
14によつて圧縮処理され、この結果、各符号器11、
12、13、14から解像度の異なる第1、第2、第3
及び第4の階層データD11、D12、D13及びD1
4が所定の順序で伝送路に送出される。
【0008】このようにして伝送される第1〜第4の階
層データD11〜D14は、図12に示す画像復号化装
置によつて復号される。すなわち第1〜第4の階層デー
タD11〜D14は、それぞれ復号器21、22、2
3、24によつて復号され、この結果、まず復号器24
からは第4の階層データD24が出力される。
【0009】また復号器23の出力は加算回路29にお
いて補間フイルタ26より得られる第4の階層データD
24の補間データと加算され、これにより第3の階層デ
ータD23が復元される。同様にして復号器22の出力
は加算回路30において補間フイルタ27より得られる
第3の階層データD23の補間データと加算され、これ
により第2の階層データD22が復元される。さらに復
号器21の出力は加算回路31において補間フイルタ2
8より得られる第2の階層データD22の補間データと
加算され、これにより第1の階層データD21が復元さ
れる。
【0010】
【発明が解決しようとする課題】ところがかかる階層符
号化方法を実現する画像符号化装置においては、入力画
像データを複数の階層データに分割して符号化するた
め、必然的に階層成分だけデータ量が増加し、その分階
層符号化を用いない高能率符号化方法に比較して圧縮率
が低下するという問題がある。また圧縮効率を向上しよ
うとした場合、各階層データ間に適用される量子化器に
よつて画質劣化が発生する問題がある。
【0011】本発明は以上の点を考慮してなされたもの
で、画像データを階層符号化する際に圧縮効率を向上し
得ると共に画質劣化を低減し得る画像符号化方法及び画
像符号化装置を提案しようとするものである。
【0012】
【課題を解決するための手段】かかる課題を解決するた
め本発明においては、画像データD31を順次再帰的に
異なる複数の解像度でなる複数の階層データD31〜D
35に分割して符号化する画像符号化方法において、複
数の階層データD31〜D35のうち解像度が最も低い
最上位階層データD35を除く階層データD31〜D3
4それぞれについて、上位の階層データと空間的に対応
するブロツクごとにブロツクアクテイビテイPを判定
し、各階層ごと独立に判定されたブロツクアクテイビテ
イPに基づいて、各階層ごとに各ブロツクアクテイビテ
イPに対応するブロツク度数の分布を求め、当該ブロツ
ク度数の分布を基に各階層それぞれについて、ブロツク
アクテイビテイPの判定基準である閾値THの値を設定
し、ブロツクアクテイビテイPが閾値TH以下のとき、
隣接下位階層データのうち当該ブロツクに対応する複数
の下位ブロツクの判定フラグとして分割中止フラグを設
定し、複数の下位ブロツクについてブロツクアクテイビ
テイの判定及び複数の下位ブロツクの伝送を中止し、ブ
ロツク毎の判定フラグを符号化コードと共に伝送するよ
うにする。
【0013】また本発明においては、画像データD31
を順次再帰的に異なる複数の解像度でなる複数の階層デ
ータD31〜D35に分割して符号化する画像符号化装
置において、複数の階層データD31〜D35のうち解
像度が最も低い最上位階層データD35を除く階層デー
タD31〜D34それぞれについて、上位の階層データ
と空間的に対応するブロツクごとにブロツクアクテイビ
テイPを判定し、各階層ごと独立に判定されたブロツク
アクテイビテイPに基づいて、各階層ごとに各ブロツク
アクテイビテイPに対応するブロツク度数の分布を求
め、当該ブロツク度数の分布を基に各階層それぞれにつ
いて、ブロツクアクテイビテイPの判定基準である閾値
THの値を設定する発生情報量制御部40Bと、ブロツ
クアクテイビテイPが閾値TH以下のとき、隣接下位階
層データのうち当該ブロツクに対応する複数の下位ブロ
ツクの判定フラグとして分割中止フラグを設定し、複数
の下位ブロツクについてのブロツクアクテイビテイPの
判定及び複数の下位ブロツクの伝送を中止し、ブロツク
毎の判定フラグを符号化コードと共に伝送する符号化手
段40Aとを設ける。
【0014】また本発明においては、画像符号化方法
は、各階層ごとに各ブロツクアクテイビテイに対応する
ブロツク度数の分布を求める際、ブロツクアクテイビテ
イ値が所定の最大制限値LMTを越えるブロツクアクテ
イビテイを有するブロツクを所定の座標LMTに登録す
るようにする。
【0015】また本発明においては、最大制限値LMT
は、各階層ごとに異なる値に設定されるようにする。
【0016】また本発明においては、最大制限値LMT
は、各階層ごとに等しい値に設定されるようにする。
【0017】
【作用】画像データD31を順次再帰的に異なる複数の
解像度でなる複数の階層データD31〜D35に分割し
て符号化する際に、解像度の最も低い最上位階層データ
を除く階層データの所定のブロツクについてブロツクア
クテイビテイPを判定することとし、下位下層データに
対する分割処理の判定基準である閾値THをブロツクア
クテイビテイPに対応するブロツク度数の分布に基づい
て設定することにより、圧縮効率の低下しない画像デー
タの階層符号化を実現することができる。
【0018】
【実施例】以下図面について、本発明の一実施例を詳述
する。
【0019】(1)階層符号化の原理 図1は全体として本発明による階層符号化の原理とし
て、例えば高品位テレビジヨン信号等の静止画像を階層
符号化して圧縮する場合を示す。この階層符号化では下
位階層データの単純な算術平均で上位階層データを作る
ことで、情報量の増加を伴わない階層構造を実現する。
また上位階層から下位階層の復号についてはブロツク毎
のアクテイビテイに基づいて適応的に分割を制御するこ
とで平坦部分の情報量を削減する。さらに下位階層のた
めに行う差分信号の符号化では、その量子化特性を上位
階層のアクテイビテイに基づいて、付加コードなしにブ
ロツク毎に切り替えることで高能率化を実現する。
【0020】すなわちこの階層符号化の階層構造では、
まず入力される高品│テレビジヨン信号を下位階層と
し、この下位階層の2ライン×2画素の小ブロ│ク中の
4画素X1 〜X4 について、次式
【数1】 で表される算術平均を取り、その値mを上位階層の値と
する。この下位階層では、次式
【数2】 で示すように、上位階層との差分値を3画素分だけ用意
することで、元々の4画素データと同じ情報量で階層構
造を構成する。
【0021】一方下位階層の復号に際しては3画素X1
〜X3 は、次式
【数3】 で表すように上位階層の平均値mにそれぞれの差分値Δ
Xi を加えて復号値E〔Xi 〕を求め、残つた1画素
は、次式
【数4】 で表すように上位階層の平均値mから下位階層の3個の
復号値を引く事で復号値E〔X4 〕を決定する。ここ
で、E〔 〕は復号値を意味する。
【0022】ここでこの階層符号化においては、上位階
層から下位階層へは解像度が階層毎に4倍になるが、平
坦部ではこの分割を禁止する事で冗長度を削減してい
る。なおこの分割の有無を指示するためのフラグが1ビ
ツト、ブロツク単位で用意される。下位階層での分割の
必要性の判断は局所的なアクテイビテイとして、例えば
差分データの最大値で判断する。
【0023】ここで階層符号化の例としてITEのHD
標準画像(Y信号)を用い、5階層符号化した場合の適
応分割結果を図2に示す。最大差分データに対する閾値
を変化させた時の各階層の画素数を本来の画素数に対す
る割合を示すが、空間相関に基づく冗長度削減のようす
が分かる。削減効率は画像によつて変わるが最大差分デ
ータに対する閾値を1〜6と変化させると、平均的な削
減率は28〜69〔%〕になる。
【0024】実際上、上位階層の解像度を4倍にして下
位階層を作り、そのとき下位階層では上位階層データか
らの差分データを符号化することで、信号レベル幅を有
効に削減できる。図2について上述した階層符号化によ
る5階層の場合を、図3に示すが、ここでは階層を下位
から数えて第1〜5階層と名付けた。
【0025】原画像の8ビツトPCMデータに比べて、
信号レベル幅の削減が見られる。特に画素数の多い第1
〜4階層は差分信号なので、大幅な削減が達成でき、以
降の量子化で効率が向上する。図3の表から分かるよう
に削減効率の絵柄への依存性は少なく、全ての絵に対し
て有効である。
【0026】また下位階層の平均値で上位階層を作るこ
とで、エラー伝播をブロツク内にとめながら、下位階層
を上位階層の平均値からの差分に変換することで、効率
の良さも合わせ持つことができる。実際上階層符号化で
は同一空間的位置での階層間のアクテイビテイには相関
があり、上位階層の量子化結果から下位階層の量子化特
性を決定することで、付加コードを必要としない適応量
子化器を実現できる。
【0027】実際上、上述した5段階の階層構造に基づ
いて画像を階層符号化してマルチ解像度で表現し、階層
構造を利用した適応分割及び適応量子化を行うことで、
各種HD標準画像(8ビツトのY/PB /PR )を約1
/8に圧縮することができる。また適応分割のために用
意されるブロツク毎の付加コードは、圧縮効率の向上の
ために各階層でランレングス符号化が行われる。このよ
うにして、各階層で充分な画質の画像が得られ、最終的
な最下位階層も視覚的劣化のない良好な画像を得ること
ができる。
【0028】(2)全体構成 図4において、40は本発明による画像符号化装置を示
し、入力画像データD1を階層符号化して出力する階層
符号化エンコーダ部40Aと階層符号化エンコーダ部4
0Aにおける発生情報量が目標値を達成するように制御
する発生情報量制御部40Bとによつて構成されてい
る。階層符号化エンコーダ部40Aはデータ遅延用のメ
モリ(図示せず)とエンコーダとによつて構成されてい
る。このうちメモリは発生情報量制御部40Bにおいて
最適制御値が決定されるまでの間、エンコード処理が実
行されないようにデータを遅延できるよう入力段に設け
られている。
【0029】一方、発生情報量制御部40Bは入力画像
データを入力して処理対象データに適合した閾値THを
決定するようになされており、階層符号化エンコーダ部
40Aにおいて入力画像データが効率良く符号化される
ように決定された最適制御値をエンコーダに伝送するよ
うになされている。いわゆるフイードフオワード型のバ
ツフアリングの構成である。この構成により正確な発生
情報量制御とフイードフオワード型バツフアリングによ
つて発生する時間遅れを排除することができるようにな
されている。
【0030】(3)階層符号化エンコーダ部40A (3−1)ブロツク構成 階層符号化エンコーダ部40Aは図5に示す構成でな
り、この例の場合、5階層に分けて処理する。まず入力
画像データD31が第1の差分回路41及び第1の平均
化回路42に入力される。第1の平均化回路42は、入
力画像データD31(すなわち第1階層データ(最下位
階層データ))の4画素平均により第2階層データD3
2を生成する。この実施例の場合、第1の平均化回路4
2は、図6(D)及び(E)に示すように、入力画像デ
ータD31の4画素X1(1)〜X4(1)から第2階層データ
D2の画素X1(2)を生成する。
【0031】また第2階層データD32の画素X1(2)に
隣接する画素X2(2)〜X4(2)も同様に第1階層データD
31の4画素平均を求めることにより生成される。第2
階層データD32は第2の差分回路43及び第2の平均
化回路44に入力され、第2の平均化回路44は、第2
階層データD32の4画素平均により第3階層データD
33を生成する。例えば、図6(C)及び(D)に示す
第2階層データD32の画素X1(2)〜X4(2)から第3階
層データD33の画素X1(3)が生成されると共に、画素
X1(3)に隣接する画素X2(3)〜X4(3)も同様に第2階層
データD32の4画素平均により生成される。
【0032】第3階層データD33は第3の差分回路4
5及び第3の平均化回路46に入力され、第3の平均化
回路46は上述の場合と同様に第3階層データD33の
4画素平均により図6(B)及び(C)に示すように、
画素X1(4)〜X4(4)でなる第4階層データD34を生成
する。第4階層データD44は第4の差分回路47及び
第4の平均化回路48に入力され、第4の平均化回路4
8は、第4階層データD34の4画素平均により最上位
階層となる第5階層データD35を生成する。すなわち
図6(A)及び(B)に示すように、第4階層データD
34の4画素X1(4)〜X4(4)を平均化することにより第
5階層データD35の画素X1(5)が生成される。
【0033】ここで第1〜第5階層データD31〜D3
5のブロツクサイズは、最下位階層である第1階層デー
タD31のブロツクサイズを1ライン×1画素とする
と、第2階層データD32は1/2ライン×1/2画
素、第3階層データD33は1/2ライン×1/4画
素、第4階層データD34は1/8ライン×1/8画
素、最上位階層データである第5階層データD35は1
/16ライン×1/16画素となる。
【0034】階層符号化エンコーダ部40Aは、これら
第1〜第5の階層データD31〜D35のうち最上位の
階層データ(すなわち第5の階層データD35)から順
に再帰的処理を繰り返して隣接する2つの階層データ間
の差分を差分回路41、43、45、47において求
め、差分データのみを符号器51〜55によつて圧縮符
号化する。これにより階層符号化エンコーダ部40Aは
伝送路に伝送される情報量を圧縮するようになされてい
る。
【0035】このような圧縮条件を最適に保つため階層
符号化エンコーダ部41は、各階層ごとに得られた伝送
データD51〜D55を復号器56〜59によつて復号
する。このうち最上位の階層に対応する復号器59は符
号器55において圧縮符号化された第5の階層データD
35に対応する復号データD48を伝送データD55か
ら復号し、これを第4階層の差分回路47に与える。
【0036】これに対して他の復号器51〜54は、そ
れぞれ分割/非分割処理の有無を示すフラグに基づいて
復号動作を切換える。すなわち分割処理がなされている
場合には、伝送データD52〜D54として伝送される
差分データから復号処理によつて上位の階層データ(す
なわち第4、第3、第2の階層データ)を復号して第3
階層の差分回路45、第2階層の差分回路43、第1の
階層データ41にそれぞれ与えるようになされている。
これにより各差分回路41、43、45、47からは隣
接する階層間についての差分データD41、D42、D
43、D44が得られることになる。
【0037】また各階層に対応する符号器51〜55は
これら差分回路41、43、45、47や平均化回路4
8によつて得られた差分データD41、D42、D4
3、D44又は第5の階層データD35を入力し、各ブ
ロツクについて得られるアクテイビテイに対するしきい
値の判定と分割選択処理を実行する。このとき符号器5
1〜55は、処理対象が分割ブロツクの場合、階層間で
得られた差分データをそのまま圧縮符号化し、同時に各
ブロツクについての分割判定フラグをつけて伝送する。
【0038】これに対して符号器51〜55は、処理対
象が非分割ブロツクの場合、このブロツクは受信側にお
いて上位階層データから複合されるものとして符号対象
から除外する。因にこの場合にも各ブロツクについての
分割判定フラグは付けて伝送される。これら5組の符号
器51〜55から出力される第1〜第5の階層圧縮符号
化データが所定の伝送路に送出される。
【0039】(3−2)処理 次に階層符号化エンコーダ部40Aによる具体的な信号
処理を説明する。まず階層間差分値に基づくブロツクア
クテイビテイにより、階層間差分値に対する処理を選択
する場合を考える。また各ブロツクは2ライン×2画素
より構成されるものとする。
【0040】ここでは各画素のデータ値をXとし、デー
タ値Xの階層をサフイツクスで表す。すなわち上位の階
層データをXi+1(0)とするとき、隣接する下位階層デー
タはXi(j)(j=0〜3)である。また階層間の差分符
号値はΔXi(j)(j=0〜3)であり、階層符号化エン
コーダ部40Aはこの差分符号値を圧縮符号化するので
ある。
【0041】各階層における符号器51〜55による圧
縮符号化処理は各ブロツクについて得られたブロツクア
クテイビテイPと閾値データD57とを比較し、比較結
果によつて処理を選択する。すなわちブロツクアクテイ
ビテイPが閾値TH以上の場合には下位階層について順
次分割処理するのに対し、ブロツクアクテイビテイPが
しきい値TH未満の場合には下位階層についての分割処
理を中止する。
【0042】これによりブロツクアクテイビテイPが低
い領域については上位の階層データしか送らずに済み、
伝送情報量を削減できるのである。また伝送路を挟んで
これらのデータを受信する画像データ復号装置は、順に
送られてくる伝送データのうち上位階層データを用いて
ブロツクアクテイビテイの低い領域では下位階層データ
を上位階層データで復元する。一方、ブロツクアクテイ
ビテイが高い領域では階層間差分復号値と上位階層デー
タを加算することでデータを復元する。
【0043】この分割又は非分割の判定結果に対しては
1ビツトの判定フラグが導入されている。このフラグに
よつて各ブロツクについての判定結果を指示することが
可能となる。この判定フラグは各階層のブロツク毎に1
ビツトづつ必要となるが、画質を考慮した場合、有効で
ある。因にこの実施例における階層符号化方式では、こ
の判定フラグをそれ以降の下位階層での判定には反映さ
せないものとする。
【0044】(4)発生情報量制御部40B (4−1)ブロツク構成 一方、発生情報量制御部40Bは、図7に示すように構
成されている。この発生情報量制御部40Bは、階層符
号化エンコーダ部40Aが画質を劣化させることなく効
率的に画像データを符号化処理できるようにするため、
分割/非分割の選択基準となる各階層についてのしきい
値TH1〜TH4の組み合わせを設定し、これを階層符
号化エンコーダ部40Aにしきい値データD57として
出力するものである。
【0045】発生情報量制御部40Bは、入力画像デー
タD31を平均値回路42、44、46、48を順次介
しての解像度の異なる5階層の画像データを生成する。
続いて差分データとして伝送される画像データの各階層
毎の発生情報量を求めるため、1階層上の階層画像デー
タD32、D33、D34及びD35と各階層の画像デ
ータD31、D32、D33及びD34との差を各差分
回路61、62、63及び64において求める。
【0046】これら各差分回路61、62、63及び6
4から出力される差分データは階層符号化エンコーダ部
40Aにおける階層処理によつて得られる各階層の差分
データとみなすことができる。アクテイビテイ検出回路
65、66、67及び68は第1階層〜第4階層の画像
データにそれぞれ対応し、各階層の各ブロツクについて
アクテイビテイを求めてこれを対応する度数分布表69
〜72に登録するようになされている。
【0047】また第5階層の画像データについては最上
位の階層データであり、差分データとしてではなく直接
伝送されるため各ブロツクについてのダイナミツクレン
ジがそのまま度数分布表73に登録される。制御部74
はこれら5組の度数分布表69〜73と双方向の信号路
で接続されており、下位階層を分割/非分割をするか否
かの判断基準となるブロツクアクテイビテイのしきい値
TH1〜TH5の組み合わせをROMに格納している。
【0048】制御部74はこれらの組を度数分布表69
〜73に与えて、当該しきい値に対して生じるであろう
発生情報量を各階層ごとに読み出し、これら全ての発生
情報量を基に全体としての総発生情報量を求める。そし
て総発生情報量が目標値を達成するまで最適なしきい値
を求め、得られたしきい値を制御データとして階層符号
化エンコーダ部40Aに与えるようになされている。
【0049】(4−2)度数分布表 ここでは情報量制御用の度数分布表69〜73について
説明する。図8(A)〜(E)はそれぞれ最上位の階層
データ(第5の階層データ)〜最下位の階層データ(第
1の階層データ)について得られたブロツクアクテイビ
テイの度数分布表を示している。ここで図8(A)に示
す第5の階層についての度数分布表に関しては、対象デ
ータが差分データではないためダイナミツクレンジによ
る度数分布表が生成される。例えばPCM符号化を適用
する場合には符号化されたブロツクについてのダイナミ
ツクレンジが登録されることになる。
【0050】一方、他の度数分布表69〜72は対象デ
ータが差分データであり、各度数分布表について与えら
れているしきい値TH1、TH2、TH3、TH4以上
のブロツクアクテイビテイを有するブロツクが分割対象
ブロツクとなる。従つて各階層においてしきい値以上の
ブロツクアクテイビテイを有するブロツクの数を算出す
れば発生情報量を算出することができる。
【0051】次に発生情報量の算出例を説明する。ここ
で第1階層におけるブロツク数をN1 、またブロツクア
クテイビテイがしきい値TH1より大きい分割対象ブロ
ツク数をN1'とし、その際における量子化ビツト数をQ
1とすると、第1階層における発生情報量I1は、次式
【数5】 によつて与えることができる。
【0052】この(5)式における第1項において各ビ
ツト数が4倍されているのは、この例の場合、各ブロツ
クが2ライン×2画素に分割されているからである。ま
た第1項において3/4倍しているのは上位階層値が下
位階層値の平均値より生成されるという構造において、
上位階層値と伝送される下位階層値3画素を用いて算術
式により下位階層の4番目の非伝送画素値が復元できる
という性質を反映しているからである。因に第2項にお
いて、第1階層におけるブロツク数をN1 が加算されて
いるのは分割判定フラグとして各ブロツクごとに1ビツ
ト付加して伝送することを示している。
【0053】同様に、第2、第3、第4の階層について
も、各階層におけるブロツク数をN2 、N3 、N4 と
し、またブロツクアクテイビテイがしきい値TH2、T
H3、TH4より大きい分割対象ブロツク数をN2'、N
3'、N4'として、その際における量子化ビツト数をQ
2、Q3、Q4とすると、各階層における発生情報量I
k(k=2、3、4)は、次式
【数6】 によつて与えることができる。
【0054】これら第1〜第4階層についての発生情報
量I1〜I4及び第5階層についての発生情報量I5を
用いると、階層符号化エンコーダ部40Aの符号化処理
によつて生じる総発生情報量Iは、次式
【数7】 のように各階層ごとの発生情報量の和として求めること
ができる。
【0055】(4−3)処理 発生情報量制御部40Bは、階層符号化エンコーダ部4
0Aと同様、入力画像データD31を入力し、これを平
均化回路42によつて2ライン×2画素ごとに平均値が
求められ、画素数を1/4に減少させて解像度を落と
す。続いてこの階層データD32についても同様に平均
化回路43、46、48を順に介することにより、それ
ぞれ画素数を1/4に減少させて解像度を落とす。
【0056】発生情報量制御部40Bは、このように複
数の解像度の画像データのうち最上位(すなわち解像度
が最も低い)の階層データD35を度数分布表73に与
え、第5の階層データD35における各ブロツクのブロ
ツクアクテイビテイPの度数を登録する。これは前述の
階層符号化エンコーダ部40Aで実行される圧縮処理に
対応するデータの度数の計測である。例えば第5階層デ
ータD35に対し、PCM符号化による圧縮処理がなさ
れる場合、各ブロツクについて与えられるダイナミツク
レンジがデータとして登録される。
【0057】次に第4の階層データD34と第5の階層
データD35との差分から差分データD64が得られ
る。アクテイビテイ検出回路68はこの差分データD6
4についてアクテイビテイを検出し、アクテイビテイデ
ータD68として度数分布表72に登録する。同様に下
位の階層データD33、D32、D31のそれぞれにつ
いて求められた各ブロツクのブロツクアクテイビテイP
をアクテイビテイデータD67、D66、D65として
度数分布表71、70、69に順に登録する。
【0058】制御部74は図9に示すROMテーブルか
ら各階層について設定されている分割/非分割設定用の
しきい値TH1、TH2……TH5についての組み合わ
せを番号の若い組(QNO1 )から順に読み出す。続いて
各しきい値TH1、TH2……TH5に対して大きな値
のブロツクアクテイビテイPを有するブロツク度数を各
階層について度数分布表69〜73から読み出し、各階
層について各しきい値に対する発生情報量を検出する。
【0059】制御部74は各階層の度数分布表69〜7
3について求められた発生情報量を統合し、階層符号化
エンコーダ40Aにおける符号化の結果生じるであろう
総発生情報量を算出する。制御部74はこの発生情報量
と目標値とを比較し、目標値との差が大きい場合には目
標値を満たすしきい値の組み合わせを求めるため次の番
号(QNO2 )のしきい値TH1、TH2……TH5の組
に移る。以後、総発生情報量が目標値に達成するまで上
述の処理を繰り返し、目標値に最も近い総発生量が得ら
れるしきい値TH1、TH2……TH5の組を得、これ
をしきい値データD57として階層符号化エンコーダ4
0Aに出力する。
【0060】以上の構成によれば、複数の解像度を有す
る階層符号化を容易に実現することができる。また階層
符号化エンコーダ40Aから符号化されて出力される伝
送画像データの総発生情報量はほぼ目標値に一致させる
ことができ、圧縮効率の低下しない符号化を実現するこ
とができる。さらに画質劣化の少ない階層符号化を実現
することができる。さらに階層符号化の際における発生
情報量の管理を従来に比して一段と容易にすることがで
きる。
【0061】(5)他の実施例 なお上述の実施例においては、ブロツクアクテイビテイ
Pを各ブロツクについて上位の階層データについて得ら
れた復号データと下位の階層データとの差分値の最大値
で判断する場合について述べたが、本発明はこれに限ら
ず、ブロツク内における平均誤差や絶対値和、また標準
偏差やn乗和、さらにはしきい値以上のデータ度数によ
つて判断しても良い。
【0062】また上述の実施例においては、各階層毎に
得られた度数分布表をそのまま利用する場合について述
べたが、本発明はこれに限らず、度数分布表から積算型
の度数分布表を作成してこれを発生情報量の計算に用い
ても良い。
【0063】すなわちブロツクアクテイビテイを登録を
登録した結果、図10に示すような度数分布表が得られ
たとすると、ブロツクアクテイビテイの最大値に対応す
る度数より下位の値へ積算演算を行い、それぞれの結果
を図11に示すような積算型度数分布表に登録する。
【0064】この処理を数式で表現すると、kをブロツ
クアクテイビテイ値(k=0〜最大値)、N(・)を各
ブロツクアクテイビテイ値でのブロツク度数とすると、
次式、
【数8】 となる。
【0065】この式は、ブロツクアクテイビテイ値アド
レスのブロツク度数を読み出し、上位ブロツクアクテイ
ビテイ値までの積算値に加算した結果を、そのブロツク
アクテイビテイ値アドレスに書き込むことを意味してい
る。
【0066】この結果により得られる積算型度数分布表
(図11)においては、図10の斜線部のブロツク度数
和がしきい値TH座標データIに対応する。この積算型
度数分布表により、しきい値THを偏向するたびに、毎
回斜線部(図10)のブロツク度数和を計算する必要が
なくなる。
【0067】すなわち各階層ごとに度数分布表を生成し
た後、ブロツクアクテイビテイの上位の値から各ブロツ
クアクテイビテイの値までのブロツク度数について累積
加算値を求め、各累積加算値を各ブロツクアクテイビテ
イの値に対応するアドレスに書き込んで積算型の度数分
布を作成することにより、各ブロツクアクテイビテイに
対応する度数はそのブロツクアクテイビテイ以上の値を
もつブロツク度数の積算値となる。
【0068】このように予め積算型度数分布表を生成す
れば、各しきい値に対応するブロツク度数積算値を算出
することは不要となり、単なるメモリのしきい値アドレ
スの読み出しによつてブロツク度数積算値の算出を可能
とすることができ、算出に要する時間を大幅に削減する
ことができる。
【0069】ここで実際のしきい値処理においては、画
質が劣化することを回避するために大きな判定しきい値
を使用することが困難である。従つてブロツクアクテイ
ビテイ値をクリツプした度数分布表を作成するようにし
ても良い。
【0070】すなわち図12に示すようにブロツクアク
テイビテイ値をLMTでクリツプすると、当該LMT以
上のブロツク度数は度数分布表においては全てLMTに
登録される。この結果、図12のようにLMTでのブロ
ツク度数が大きくなる。ここで算出すべきブロツク度数
和は斜線部である。
【0071】この度数分布表に対する積算型度数分布表
を図13に示す。この場合、上述の(8)式の積算演算
はブロツクアクテイビテイ値の最大値ではなく、ブロツ
クアクテイビテイ値LMTより0までの区間で行われ
る。算出すべきブロツク度数和は、しきい値THの座標
の積算ブロツク度数Iである。このように図11に示し
た場合と同様の結果が得られる。かくして積算型度数分
布表作成時間の短縮化を実現し得ると共に度数分布表メ
モリを一段と小型化することができる。
【0072】因に、クリツプ値LMTを設定する場合、
第1の方法として各階層ごとにクリツプ値LMTを変え
る方法及び、第2の方法として各階層全てにおいてクリ
ツクプ値LMTを固定値にする方法が考えられ、第1の
方法は各階層の階層間差分値分布に明らかな違いがある
場合に用いられ、第2の方法は各階層の階層間差分分布
が大差無い場合に用いられる。
【0073】さらに上述の実施例においては、符号器に
おいて画像データをPCM符号化する場合について述べ
たが、本発明はこれに限らず、他の符号化方式、例えば
直交符号化方式を適用しても良い。
【0074】さらに上述の実施例においては、各階層に
ついて得られた度数分布表のしきい値について複数の組
み合わせをROMに格納しておき、発生情報量が最も目
標値に近くなるしきい値の組み合わせを求める場合につ
いて述べたが、本発明はこれに限らず、各階層毎独立に
設定できるようにしても良い。
【0075】さらに上述の実施例においては、最下位の
階層データを2ライン×2画素づつ平均値を求めて上位
の階層の画像データを求める場合について述べたが、本
発明はこれに限らず、他の組み合わせによつて平均値を
求めるようにしても良い。
【0076】
【発明の効果】上述のように本発明によれば、画像デー
タを順次再帰的に異なる複数の解像度でなる複数の階層
データに分割して符号化する際に、解像度の最も低い最
上位階層データを除く階層データの所定のブロツクにつ
いてブロツクアクテイビテイを判定し、下位階層データ
に対する分割処理の判定基準であるしきい値をブロツク
アクテイビテイに対応するブロツクの度数分布から設定
することにより、圧縮効率の低下しない画像データの階
層符号化方法を容易に実現することができる。
【図面の簡単な説明】
【図1】本発明による画像符号化方法の原理の説明に供
する略線図である。
【図2】本発明における画像符号化方法によつて適応分
割された撮像画像の処理結果を示す表である。
【図3】本発明における画像符号化方法によつて得られ
る各階層ごとの信号レベルを示す表である。
【図4】本発明による画像符号化装置の一実施例を示す
ブロツク図である。
【図5】階層符号化エンコーダ部を示すブロツク図であ
る。
【図6】階層構造の説明に供する略線図である。
【図7】発生情報量制御部を示すブロツク図である。
【図8】各階層の度数分布表を示す特性曲線図である。
【図9】各階層について得られるしきい値の組み合わせ
を示す表である。
【図10】積算型度数分布表を示す特性曲線図である。
【図11】積算型度数分布表を示す特性曲線図である。
【図12】度数分布表を示す特性曲線図である。
【図13】積算型度数分布表を示す特性曲線図である。
【図14】従来における階層符号化装置を示すブロツク
図である。
【図15】従来における階層復号化装置を示すブロツク
図である。
【符号の説明】
40……階層符号化装置、40A……階層符号化エンコ
ーダ部、40B……発生情報量制御部、41、43、4
5、47、61、62、63、64……差分回路、4
2、44、46、46……平均化回路、51、52、5
3、54、55……符号器、56、57、58、59…
…復号器、65、66、67、68……アクテイビテイ
検出回路、69、70、71、72、73……度数分布
表、74……制御部。
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成6年11月24日
【手続補正1】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正内容】
【書類名】 明細書
【発明の名称】 画像符号化方法及び画像符号化装置
【特許請求の範囲】
【発明の詳細な説明】
【0001】
【目次】以下の順序で本発明を説明する。 産業上の利用分野 従来の技術(図16及び図17) 発明が解決しようとする課題 課題を解決するための手段(図6〜図11) 作用(図1〜図3) 実施例(図1〜図12) (1)階層符号化の原理(図1〜図3) (2)全体構成(図4) (3)階層符号化エンコーダ部40A(図5〜図8) (3−1)ブロツク構成(図5〜図8) (3−2)処理 (4)発生情報量制御部40B(図9〜図11) (4−1)ブロツク構成(図9) (4−2)度数分布表(図10) (4−3)処理(図11) (5)他の実施例(図12〜図15) 発明の効果
【0002】
【産業上の利用分野】本発明は画像符号化装置に関し、
例えば所定の画像データを異なる解像度でなる複数の画
像データに分割符号化する画像符号化装置に適用して好
適なものである。
【0003】
【従来の技術】従来、この種の画像符号化装置として、
入力画像データをピラミツド符号化等の階層符号化の手
法を用いて階層的に符号化するものがある(特願平5−
142836号公報)。この階層符号化装置において
は、高解像度の入力画像データを第1の階層データとし
て、この第1の階層データよりも解像度が低い第2の解
像データ、さらに第2の解像データよりも解像度が低い
第3の階層データ、……を順次再帰的に形成し、これら
複数の階層データを通信路や記録再生経路でなる伝送路
で伝送する。
【0004】またこのとき複数の階層データを復号化す
る画像復号化装置では、複数の階層データについて全て
復号化しても良く、またそれぞれに対応するテレビジヨ
ンモニタの解像度等により、何れかの階層データのうち
所望の1つを選択して復号化しても良い。このように階
層化された複数の階層データから所望の階層データのみ
について復号化することにより必要最小限の伝送データ
量により所望の画像データを得ることができる。
【0005】ここで図16に示すように、この階層符号
化として例えば4階層の符号化を実現する画像符号化装
置1では、それぞれ3段分の間引きフイルタ2、3、4
と補間フイルタ5、6、7とを有し、入力画像データD
1について各段の間引きフイルタ2、3、4によつて順
次解像度の低い縮小画像データD2、D3、D4を形成
すると共に補間フイルタ5、6、7により縮小画像デー
タD2、D3、D4を縮小前の解像度に戻す。
【0006】各間引きフイルタ2〜4の出力D2〜D4
及び各補間フイルタ5〜7の出力D5〜D7はそれぞれ
差分回路8、9、10に入力され、これにより差分デー
タD8、D9、D10が生成される。この結果、画像符
号化装置1においては、階層データのデータ量を低減す
ると共に信号電力を低減する。ここでこの差分データD
8〜D10及び縮小画像データD4は、入力画像データ
D1に対して、それぞれ面積が1、1/4、1/16、
1/64のサイズとなつている。
【0007】それぞれの差分回路8〜10より得られる
差分データD8〜D10及び間引きフイルタ4より得ら
れる縮小画像データD4は各符号器11、12、13、
14によつて圧縮処理され、この結果、各符号器11、
12、13、14から解像度の異なる第1、第2、第3
及び第4の階層データD11、D12、D13及びD1
4が所定の順序で伝送路に送出される。
【0008】このようにして伝送される第1〜第4の階
層データD11〜D14は、図17に示す画像復号化装
置によつて復号される。すなわち第1〜第4の階層デー
タD11〜D14は、それぞれ復号器21、22、2
3、24によつて復号され、この結果、まず復号器24
からは第4の階層データD24が出力される。
【0009】また復号器23の出力は加算回路29にお
いて補間フイルタ26より得られる第4の階層データD
24の補間データと加算され、これにより第3の階層デ
ータD23が復元される。同様にして復号器22の出力
は加算回路30において補間フイルタ27より得られる
第3の階層データD23の補間データと加算され、これ
により第2の階層データD22が復元される。さらに復
号器21の出力は加算回路31において補間フイルタ2
8より得られる第2の階層データD22の補間データと
加算され、これにより第1の階層データD21が復元さ
れる。
【0010】
【発明が解決しようとする課題】ところがかかる階層符
号化方法を実現する画像符号化装置においては、入力画
像データを複数の階層データに分割して符号化するた
め、必然的に階層成分だけデータ量が増加し、その分階
層符号化を用いない高能率符号化方法に比較して圧縮率
が低下するという問題がある。また圧縮効率を向上しよ
うとした場合、各階層データ間に適用される量子化器に
よつて画質劣化が発生する問題がある。
【0011】本発明は以上の点を考慮してなされたもの
で、画像データを階層符号化する際に圧縮効率を向上し
得ると共に画質劣化を低減し得る画像符号化方法及び画
像符号化装置を提案しようとするものである。
【0012】
【課題を解決するための手段】かかる課題を解決するた
め本発明においては、画像データD31を順次再帰的に
異なる複数の解像度でなる複数の階層データD31〜D
35に分割して符号化する画像符号化方法において、複
数の階層データD31〜D35のうち解像度が最も低い
最上位階層データD35を除く階層データD31〜D3
4それぞれについて、上位の階層データと空間的に対応
するブロツクごとにブロツクアクテイビテイPを判定
し、各階層ごと独立に判定されたブロツクアクテイビテ
イPに基づいて、各階層ごとに各ブロツクアクテイビテ
イPに対応するブロツク度数の分布を求め、当該ブロツ
ク度数の分布を基に各階層それぞれについて、ブロツク
アクテイビテイPの判定基準である閾値THの値を設定
し、ブロツクアクテイビテイPが閾値TH以下のとき、
隣接下位階層データのうち当該ブロツクに対応する複数
の下位ブロツクの判定フラグとして分割中止フラグを設
定し、複数の下位ブロツクについてブロツクアクテイビ
テイの判定及び複数の下位ブロツクの伝送を中止し、ブ
ロツク毎の判定フラグを符号化コードと共に伝送するよ
うにする。
【0013】また本発明においては、画像データD31
を順次再帰的に異なる複数の解像度でなる複数の階層デ
ータD31〜D35に分割して符号化する画像符号化装
置において、複数の階層データD31〜D35のうち解
像度が最も低い最上位階層データD35を除く階層デー
タD31〜D34それぞれについて、上位の階層データ
と空間的に対応するブロツクごとにブロツクアクテイビ
テイPを判定し、各階層ごと独立に判定されたブロツク
アクテイビテイPに基づいて、各階層ごとに各ブロツク
アクテイビテイPに対応するブロツク度数の分布を求
め、当該ブロツク度数の分布を基に各階層それぞれにつ
いて、ブロツクアクテイビテイPの判定基準である閾値
THの値を設定する発生情報量制御部40Bと、ブロツ
クアクテイビテイPが閾値TH以下のとき、隣接下位階
層データのうち当該ブロツクに対応する複数の下位ブロ
ツクの判定フラグとして分割中止フラグを設定し、複数
の下位ブロツクについてのブロツクアクテイビテイPの
判定及び複数の下位ブロツクの伝送を中止し、ブロツク
毎の判定フラグを符号化コードと共に伝送する符号化手
段40Aとを設ける。
【0014】また本発明においては、画像符号化方法
は、各階層ごとに各ブロツクアクテイビテイに対応する
ブロツク度数の分布を求める際、ブロツクアクテイビテ
イ値が所定の最大制限値LMTを越えるブロツクアクテ
イビテイを有するブロツクを所定の座標LMTに登録す
るようにする。
【0015】また本発明においては、最大制限値LMT
は、各階層ごとに異なる値に設定されるようにする。
【0016】また本発明においては、最大制限値LMT
は、各階層ごとに等しい値に設定されるようにする。
【0017】
【作用】画像データD31を順次再帰的に異なる複数の
解像度でなる複数の階層データD31〜D35に分割し
て符号化する際に、解像度の最も低い最上位階層データ
を除く階層データの所定のブロツクについてブロツクア
クテイビテイPを判定することとし、下位下層データに
対する分割処理の判定基準である閾値THをブロツクア
クテイビテイPに対応するブロツク度数の分布に基づい
て設定することにより、圧縮効率の低下しない画像デー
タの階層符号化を実現することができる。
【0018】
【実施例】以下図面について、本発明の一実施例を詳述
する。
【0019】(1)階層符号化の原理 図1は全体として本発明による階層符号化の原理とし
て、例えば高品位テレビジヨン信号等の静止画像を階層
符号化して圧縮する場合を示す。この階層符号化では下
位階層データの単純な算術平均で上位階層データを作
り、伝送すべき下位階層データを減少させて、情報量の
増加を伴わない階層構造を実現する。また上位階層から
下位階層の復号についてはブロツク毎のアクテイビテイ
に基づいて適応的に分割を制御することで平坦部分の情
報量を削減する。さらに下位階層のために行う差分信号
の符号化では、その量子化特性を上位階層のアクテイビ
テイに基づいて、付加コードなしにブロツク毎に切り替
えることで高能率化を実現する。
【0020】すなわちこの階層符号化の階層構造では、
まず入力される高品 テレビジョン信号を下位階層と
し、この下位階層の2ライン×2画素の小ブロ ク中の
4画素X1〜X4について、次式
【数1】 で表される算術平均を取り、その値mを上位階層の値と
する。この下位階層では、次式
【数2】 で示すように、上位階層との差分値を3画素分だけ用意
することで、元々の4画素データと同じ情報量で階層構
造を構成する。
【0021】一方下位階層の復号に際しては3画素X1
〜X3は、次式
【数3】 で表すように上位階層の平均値mにそれぞれの差分値Δ
Xiを加えて復号値E〔Xi〕を求め、残つた1画素
は、次式
【数4】 で表すように上位階層の平均値mから下位階層の3個の
復号値を引く事で復号値E〔X4〕を決定する。ここ
で、E〔 〕は復号値を意味する。
【0022】ここでこの階層符号化においては、上位階
層から下位階層へは解像度が階層毎に4倍になるが、平
坦部ではこの分割を禁止する事で冗長度を削減してい
る。なおこの分割の有無を指示するためのフラグが1ビ
ツト、ブロツク単位で用意される。下位階層での分割の
必要性の判断は局所的なアクテイビテイとして、例えば
差分データの最大値で判断する。
【0023】ここで階層符号化の例としてITEのHD
標準画像(Y信号)を用い、5階層符号化した場合の適
応分割結果を図2に示す。最大差分データに対する閾値
を変化させた時の各階層の画素数を本来の画素数に対す
る割合を示すが、空間相関に基づく冗長度削減のようす
が分かる。削減効率は画像によつて変わるが最大差分デ
ータに対する閾値を1〜6と変化させると、平均的な削
減率は28〜69〔%〕になる。
【0024】実際上、上位階層の解像度を4倍にして下
位階層を作り、そのとき下位階層では上位階層データか
らの差分データを符号化することで、信号レベル幅を有
効に削減できる。図2について上述した階層符号化によ
る5階層の場合を、図3に示すが、ここでは階層を下位
から数えて第1〜5階層と名付けた。
【0025】原画像の8ビツトPCMデータに比べて、
信号レベル幅の削減が見られる。特に画素数の多い第1
〜4階層は差分信号なので、大幅な削減が達成でき、以
降の量子化で効率が向上する。図3の表から分かるよう
に削減効率の絵柄への依存性は少なく、全ての絵に対し
て有効である。
【0026】また下位階層の平均値で上位階層を作るこ
とで、エラー伝播をブロツク内にとめながら、下位階層
を上位階層の平均値からの差分に変換することで、効率
の良さも合わせ持つことができる。実際上階層符号化で
は同一空間的位置での階層間のアクテイビテイには相関
があり、上位階層の量子化結果から下位階層の量子化特
性を決定することで、受信側に逆量子化のための量子化
情報を伝送する必要のない(但し、初期値を除く)適応
量子化器を実現できる。
【0027】実際上、上述した5段階の階層構造に基づ
いて画像を階層符号化してマルチ解像度で表現し、階層
構造を利用した適応分割及び適応量子化を行うことで、
各種HD標準画像(8ビツトのY/PB/PR)を約1
/8に圧縮することができる。また適応分割のために用
意されるブロツク毎の付加コードは、圧縮効率の向上の
ために各階層でランレングス符号化が行われる。このよ
うにして、各階層で充分な画質の画像が得られ、最終的
な最下位階層も視覚的劣化のない良好な画像を得ること
ができる。
【0028】(2)全体構成 図4において、40は本発明による画像符号化装置を示
し、入力画像データD1を階層符号化して出力する階層
符号化エンコーダ部40Aと階層符号化エンコーダ部4
0Aにおける発生情報量が目標値を達成するように制御
する発生情報量制御部40Bとによつて構成されてい
る。階層符号化エンコーダ部40Aはデータ遅延用のメ
モリ(図示せず)とエンコーダとによつて構成されてい
る。このうちメモリは発生情報量制御部40Bにおいて
最適制御値が決定されるまでの間、エンコード処理が実
行されないようにデータを遅延できるよう入力段に設け
られている。
【0029】一方、発生情報量制御部40Bは入力画像
データを入力して処理対象データに適合した閾値THを
決定するようになされており、階層符号化エンコーダ部
40Aにおいて入力画像データが効率良く符号化される
ように決定された最適制御値をエンコーダに伝送するよ
うになされている。いわゆるフイードフオワード型のバ
ツフアリングの構成である。この構成により正確な発生
情報量制御とフイードフオワード型バツフアリングによ
つて発生する時間遅れを排除することができるようにな
されている。
【0030】(3)階層符号化エンコーダ部40A (3−1)ブロツク構成 階層符号化エンコーダ部40Aは図5に示す構成でな
り、この例の場合、5階層に分けて処理する。まず入力
画像データD31が第1の差分回路41及び第1の平均
化回路42に入力される。第1の平均化回路42は、入
力画像データD31(すなわち第1階層データ(最下位
階層データ))の4画素平均により第2階層データD3
2を生成する。この実施例の場合、第1の平均化回路4
2は、図6(D)及び(E)に示すように、入力画像デ
ータD31の4画素X1(1)〜X4(1)から第2階
層データD2の画素X1(2)を生成する。
【0031】また第2階層データD32の画素X1
(2)に隣接する画素X2(2)〜X4(2)も同様に
第1階層データD31の4画素平均を求めることにより
生成される。第2階層データD32は第2の差分回路4
3及び第2の平均化回路44に入力され、第2の平均化
回路44は、第2階層データD32の4画素平均により
第3階層データD33を生成する。例えば、図6(C)
及び(D)に示す第2階層データD32の画素X1
(2)〜X4(2)から第3階層データD33の画素X
1(3)が生成されると共に、画素X1(3)に隣接す
る画素X2(3)〜X4(3)も同様に第2階層データ
D32の4画素平均により生成される。
【0032】第3階層データD33は第3の差分回路4
5及び第3の平均化回路46に入力され、第3の平均化
回路46は上述の場合と同様に第3階層データD33の
4画素平均により図6(B)及び(C)に示すように、
画素X1(4)〜X4(4)でなる第4階層データD3
4を生成する。第4階層データD44は第4の差分回路
47及び第4の平均化回路48に入力され、第4の平均
化回路48は、第4階層データD34の4画素平均によ
り最上位階層となる第5階層データD35を生成する。
すなわち図6(A)及び(B)に示すように、第4階層
データD34の4画素X1(4)〜X4(4)を平均化
することにより第5階層データD35の画素X1(5)
が生成される。
【0033】ここで第1〜第5階層データD31〜D3
5のブロツクサイズは、最下位階層である第1階層デー
タD31のブロツクサイズを1ライン×1画素とする
と、第2階層データD32は1/2ライン×1/2画
素、第3階層データD33は1/2ライン×1/4画
素、第4階層データD34は1/8ライン×1/8画
素、最上位階層データである第5階層データD35は1
/16ライン×1/16画素となる。
【0034】階層符号化エンコーダ部40Aは、これら
第1〜第5の階層データD31〜D35のうち最上位の
階層データ(すなわち第5の階層データD35)から順
に再帰的処理を繰り返して隣接する2つの階層データ間
の差分を差分回路41、43、45、47において求
め、差分データのみを符号器51〜55によつて圧縮符
号化する。これにより階層符号化エンコーダ部40Aは
伝送路に伝送される情報量を圧縮するようになされてい
る。また階層符号化エンコーダ部40Aは、(2)式に
ついて上述したように、符号器51〜54により、上位
階層1画素に対応する下位階層4画素のうち1画素を減
らすことにより、伝送データ量を低減する。
【0035】このような圧縮条件を最適に保つため階層
符号化エンコーダ部41は、各階層ごとに得られた伝送
データD51〜D55を復号器56〜59によつて復号
する。このうち最上位の階層に対応する復号器59は符
号器55において圧縮符号化された第5の階層データD
35に対応する復号データD48を伝送データD55か
ら復号し、これを第4階層の差分回路47に与える。
【0036】これに対して他の復号器51〜54は、そ
れぞれ分割/非分割処理の有無を示すフラグに基づいて
復号動作を切換える。すなわち分割処理がなされている
場合には、伝送データD52〜D54として伝送される
差分データから復号処理によつて上位の階層データ(す
なわち第4、第3、第2の階層データ)を復号して第3
階層の差分回路45、第2階層の差分回路43、第1の
階層データ41にそれぞれ与えるようになされている。
これにより各差分回路41、43、45、47からは隣
接する階層間についての差分データD41、D42、D
43、D44が得られることになる。
【0037】実際上、復号器58、57、56は、図7
に示すように構成されている。ここでは簡単化のため復
号器58について説明する。復号器58は復号化回路5
8Aに第4階層圧縮符号化データD54を受けてこれを
復号する。この結果復号化回路58Aからは、例えば図
6に示すX1(4)−X1(5)、X2(4)−X1
(5)、X3(4)−X1(5)の出力値が得られる。
この出力値は続く加算回路58Bにおいて復元データD
48と加算されることによりX1(4)、X2(4)、
X3(4)の出力値が得られる。差分値生成回路58C
はX1(4)、X2(4)、X3(4)及びX1(5)
を用いて、(4)式に基づく演算を施すことにより非伝
送画素X4(4)を生成する。従つて続く合成回路58
Dからは、差分前の第4階層データX1(4)、X2
(4)、X3(4)、X4(4)が生成され、これが差
分回路45に与えられる。
【0038】また各階層に対応する符号器51〜55は
これら差分回路41、43、45、47や平均化回路4
8によつて得られた差分データD41、D42、D4
3、D44又は第5の階層データD35を入力し、各ブ
ロツクについて得られるアクテイビテイに対するしきい
値の判定と分割選択処理を実行する。このとき符号器5
1〜55は、処理対象が分割ブロツクの場合、階層間で
得られた差分データをそのまま圧縮符号化し、同時に各
ブロツクについての分割判定フラグをつけて伝送する。
【0039】これに対して符号器51〜55は、処理対
象が非分割ブロツクの場合、このブロツクは受信側にお
いて上位階層データから複合されるものとして符号対象
から除外する。因にこの場合にも各ブロツクについての
分割判定フラグは付けて伝送される。これら5組の符号
器51〜55から出力される第1〜第5の階層圧縮符号
化データが所定の伝送路に送出される。
【0040】ここで符号器51、52、53及び54は
図8に示すように構成されている。図8では簡単化する
ため符号器52及び53の構成について示す。すなわち
差分データD42、D43はそれぞれ符号器52、53
の符号化回路52A、53Aに入力される。また差分デ
ータD42、D43はそれぞれ、分割制御部52B、5
3Bのアクテイビテイ検出回路52C、53Cに入力さ
れる。アクテイビテイ検出回路52C、53Cは差分デ
ータD42、D43の所定ブロツク毎のアクテイビテイ
を検出し、これにより得た検出結果を続くしきい値判定
回路52D、53Dに与える。しきい値判定回路52
D、53Dは各ブロツク毎のアクテイビテイ検出結果を
発生情報量制御部40Bからのしきい値データD57と
比較し、これにより得た判定結果を符号化回路52A、
53Aに送出する。符号化回路52A、53Aはしきい
値判定結果に基づき、アクテイビテイの高いブロツクに
ついては圧縮符号化して伝送し、これに対してアクテイ
ビテイの低いブロツクについては伝送しない。
【0041】(3−2)処理 次に階層符号化エンコーダ部40Aによる具体的な信号
処理を説明する。まず階層間差分値に基づくブロツクア
クテイビテイにより、階層間差分値に対する処理を選択
する場合を考える。また各ブロツクは2ライン×2画素
より構成されるものとする。
【0042】ここでは各画素のデータ値をXとし、デー
タ値Xの階層をサフイツクスで表す。すなわち上位の階
層データをXi+1(0)とするとき、隣接する下位階
層データはXi(j)(j=0〜3)である。また階層
間の差分符号値はΔXi(j)(j=0〜3)であり、
階層符号化エンコーダ部40Aはこの差分符号値を圧縮
符号化するのである。
【0043】各階層における符号器51〜55による圧
縮符号化処理は各ブロツクについて得られたブロツクア
クテイビテイPと閾値データD57とを比較し、比較結
果によつて処理を選択する。すなわちブロツクアクテイ
ビテイPが閾値TH以上の場合には下位階層について順
次分割処理するのに対し、ブロツクアクテイビテイPが
しきい値TH未満の場合には下位階層についての分割処
理を中止する。
【0044】これによりブロツクアクテイビテイPが低
い領域については上位の階層データしか送らずに済み、
伝送情報量を削減できるのである。また伝送路を挟んで
これらのデータを受信する画像データ復号装置は、順に
送られてくる伝送データのうち上位階層データを用いて
ブロツクアクテイビテイの低い領域では下位階層データ
を上位階層データで復元する。一方、ブロツクアクテイ
ビテイが高い領域では階層間差分復号値と上位階層デー
タを加算することでデータを復元する。
【0045】この分割又は非分割の判定結果に対しては
1ビツトの判定フラグが導入されている。このフラグに
よつて各ブロツクについての判定結果を指示することが
可能となる。この判定フラグは各階層のブロツク毎に1
ビツトづつ必要となるが、画質を考慮した場合、有効で
ある。因にこの実施例における階層符号化方式では、こ
の判定フラグをそれ以降の下位階層での判定には反映さ
せないものとする。
【0046】(4)発生情報量制御部40B (4−1)ブロツク構成 一方、発生情報量制御部40Bは、図9に示すように構
成されている。この発生情報量制御部40Bは、階層符
号化エンコーダ部40Aが画質を劣化させることなく効
率的に画像データを符号化処理できるようにするため、
分割/非分割の選択基準となる各階層についてのしきい
値TH1〜TH4の組み合わせを設定し、これを階層符
号化エンコーダ部40Aにしきい値データD57として
出力するものである。
【0047】発生情報量制御部40Bは、入力画像デー
タD31を平均値回路42、44、46、48を順次介
して1/4平均化することにより解像度の異なる5階層
の画像データを生成する。続いて差分データとして伝送
される画像データの各階層毎の発生情報量を求めるた
め、1階層上の階層画像データD32、D33、D34
及びD35と各階層の画像データD31、D32、D3
3及びD34との差を各差分回路61、62、63及び
64において求める。
【0048】これら各差分回路61、62、63及び6
4から出力される差分データは階層符号化エンコーダ部
40Aにおける階層処理によつて得られる各階層の差分
データとみなすことができる。アクテイビテイ検出回路
65、66、67及び68は第1階層〜第4階層の画像
データにそれぞれ対応し、各階層の各ブロツクについて
アクテイビテイを求めてこれを対応する度数分布表69
〜72に登録するようになされている。
【0049】ここで度数分布表の生成過程では、エンコ
ーダ部の伝送データ量を正確に把握するために、上位階
層1画素に対応する下位階層4画素のうち実際にエンコ
ーダによる伝送対象である3画素を用いるようになされ
ている。
【0050】また第5階層の画像データについては最上
位の階層データであり、差分データとしてではなく直接
伝送されるため各ブロツクについてのダイナミツクレン
ジがそのまま度数分布表73に登録される。制御部74
はこれら5組の度数分布表69〜73と双方向の信号路
で接続されており、下位階層を分割/非分割をするか否
かの判断基準となるブロツクアクテイビテイのしきい値
TH1〜TH4の組み合わせをROMに格納している。
【0051】制御部74はこれらの組を度数分布表69
〜73に与えて、当該しきい値に対して生じるであろう
発生情報量を各階層ごとに読み出し、これら全ての発生
情報量を基に全体としての総発生情報量を求める。そし
て総発生情報量が目標値を達成するまで最適なしきい値
を求め、得られたしきい値を制御データとして階層符号
化エンコーダ部40Aに与えるようになされている。
【0052】また制御部74は階層毎に画像信号データ
の性質や入間の視覚特性を考慮して階層符号化エンコー
ダ部40Aに与える制御データを調整し、最適なしきい
値を与えることができるようになされている。これによ
り受信側において再生された画質について主観的な画質
の向上がみこまれる。
【0053】(4−2)度数分布表 ここでは情報量制御用の度数分布表69〜73について
説明する。図10(A)〜(E)はそれぞれ最上位の階
層データ(第5の階層データ)〜最下位の階層データ
(第1の階層データ)について得られたブロツクアクテ
イビテイの度数分布表を示している。ここで図10
(A)に示す第5の階層についての度数分布表に関して
は、対象データが差分データではないためダイナミツク
レンジによる度数分布表が生成される。例えば第5階層
データD35に対し、PCM符号化による圧縮処理がな
される場合、各ブロツクについて与えられるダイナミツ
クレンジがデータとして登録され、圧縮処理方法として
ADRC(適応ダイナミツクレンジ符号化(USP−4
703352))を適用する場合にはADRCブロツク
のDRが登録される。
【0054】一方、他の度数分布表69〜72は対象デ
ータが差分データであり、各度数分布表について与えら
れているしきい値TH1、TH2、TH3、TH4以上
のブロツクアクテイビテイを有するブロツクが分割対象
ブロツクとなる。従つて各階層においてしきい値以上の
ブロツクアクテイビテイを有するブロツクの数を算出す
れば発生情報量を算出することができる。
【0055】次に発生情報量の算出例を説明する。ここ
で第1階層におけるブロツク数をN1、またブロツクア
クテイビテイがしきい値TH1より大きい分割対象ブロ
ツク数をN1’とし、その際における量子化ビツト数を
Q1とすると、第1階層における発生情報量I1は、次
【数5】 によつて与えることができる。
【0056】この(5)式における第1項において各ビ
ツト数が4倍されているのは、この例の場合、各ブロツ
クが2ライン×2画素に分割されているからである。ま
た第1項において3/4倍しているのは上位階層値が下
位階層値の平均値より生成されるという構造において、
上位階層値と伝送される下位階層値3画素を用いて算術
式により下位階層の4番目の非伝送画素値が復元できる
という性質を反映しているからである。因に第2項にお
いて、第1階層におけるブロツク数をN1が加算されて
いるのは分割判定フラグとして各ブロツクごとに1ビツ
ト付加して伝送することを示している。
【0057】同様に、第2、第3、第4の階層について
も、各階層におけるブロツク数をN2、N3、N4と
し、またブロツクアクテイビテイがしきい値TH2、T
H3、TH4より大きい分割対象ブロツク数をN2’、
N3’、N4’として、その際における量子化ビツト数
をQ2、Q3、Q4とすると、各階層における発生情報
量Ik(k=2、3、4)は、次式
【数6】 によつて与えることができる。
【0058】これら第1〜第4階層についての発生情報
量I1〜I4及び第5階層についての発生情報量I5を
用いると、階層符号化エンコーダ部40Aの符号化処理
によつて生じる総発生情報量Iは、次式
【数7】 のように各階層ごとの発生情報量の和として求めること
ができる。
【0059】(4−3)処理 発生情報量制御部40Bは、階層符号化エンコーダ部4
0Aと同様、入力画像データD31を入力し、これを平
均化回路42によつて2ライン×2画素ごとに平均値が
求められ、画素数を1/4に減少させて解像度を落と
す。続いてこの階層データD32についても同様に平均
化回路43、46、48を順に介することにより、それ
ぞれ画素数を1/4に減少させて解像度を落とす。
【0060】発生情報量制御部40Bは、このように複
数の解像度の画像データのうち最上位(すなわち解像度
が最も低い)の階層データD35を度数分布表73に与
え、第5の階層データD35における各ブロツクのブロ
ツクアクテイビテイPの度数を登録する。これは前述の
階層符号化エンコーダ部40Aで実行される圧縮処理に
対応するデータの度数の計測である。例えば第5階層デ
ータD35に対し、PCM符号化による圧縮処理がなさ
れる場合、各ブロツクについて与えられるダイナミツク
レンジがデータとして登録される。
【0061】次に第4の階層データD34と第5の階層
データD35との差分から差分データD64が得られ
る。アクテイビテイ検出回路68はこの差分データD6
4についてアクテイビテイを検出し、アクテイビテイデ
ータD68として度数分布表72に登録する。同様に下
位の階層データD33、D32、D31のそれぞれにつ
いて求められた各ブロツクのブロツクアクテイビテイP
をアクテイビテイデータD67、D66、D65として
度数分布表71、70、69に順に登録する。
【0062】制御部74は図11に示すROMテーブル
から各階層について設定されている分割/非分割設定用
のしきい値TH1、TH2……TH4についての組み合
わせを番号の若い組(QNO1)から順に読み出す。続
いて各しきい値TH1、TH2……TH4に対して大き
な値のブロツクアクテイビテイPを有するブロツク度数
を各階層について度数分布表69〜73から読み出し、
各階層について各しきい値に対する発生情報量を検出す
る。
【0063】制御部74は各階層の度数分布表69〜7
3について求められた発生情報量を統合し、階層符号化
エンコーダ40Aにおける符号化の結果生じるであろう
総発生情報量を算出する。制御部74はこの発生情報量
と目標値とを比較し、目標値との差が大きい場合には目
標値を満たすしきい値の組み合わせを求めるため次の番
号(QNO2)のしきい値TH1、TH2……TH4の
組に移る。以後、総発生情報量が目標値に達成するまで
上述の処理を繰り返し、目標値に最も近い総発生量が得
られるしきい値TH1、TH2……TH4の組を得、こ
れをしきい値データD57として階層符号化エンコーダ
40Aに出力する。
【0064】以上の構成によれば、複数の解像度を有す
る階層符号化を容易に実現することができる。また階層
符号化エンコーダ40Aから符号化されて出力される伝
送画像データの総発生情報量はほぼ目標値に一致させる
ことができ、圧縮効率の低下しない符号化を実現するこ
とができる。さらに画質劣化の少ない階層符号化を実現
することができる。さらに階層符号化の際における発生
情報量の管理を従来に比して一段と容易にすることがで
きる。
【0065】(5)他の実施例 なお上述の実施例においては、ブロツクアクテイビテイ
Pを各ブロツクについて上位の階層データについて得ら
れた復号データと下位の階層データとの差分値の最大値
で判断する場合について述べたが、本発明はこれに限ら
ず、ブロツク内における平均誤差や絶対値和、また標準
偏差やn乗和、さらにはしきい値以上のデータ度数によ
つて判断しても良い。
【0066】また上述の実施例においては、各階層毎に
得られた度数分布表をそのまま利用する場合について述
べたが、本発明はこれに限らず、度数分布表から積算型
の度数分布表を作成してこれを発生情報量の計算に用い
ても良い。
【0067】すなわちブロツクアクテイビテイを登録し
た結果、図12に示すような度数分布表が得られたとす
ると、ブロツクアクテイビテイの最大値に対応する度数
より下位の値へ積算演算を行い、それぞれの結果を図1
3に示すような積算型度数分布表に登録する。
【0068】この処理を数式で表現すると、kをブロツ
クアクテイビテイ値(k=0〜最大値)、N(・)を各
ブロツクアクテイビテイ値でのブロツク度数とすると、
次式、
【数8】 となる。
【0069】この式は、ブロツクアクテイビテイ値アド
レスのブロツク度数を読み出し、上位ブロツクアクテイ
ビテイ値までの積算値に加算した結果を、そのブロツク
アクテイビテイ値アドレスに書き込むことを意味してい
る。
【0070】この結果により得られる積算型度数分布表
(図13)においては、図12の斜線部のブロツク度数
和がしきい値TH座標データIに対応する。この積算型
度数分布表により、しきい値THを偏向するたびに、毎
回斜線部(図12)のブロツク度数和を計算する必要が
なくなる。
【0071】すなわち各階層ごとに度数分布表を生成し
た後、ブロツクアクテイビテイの上位の値から各ブロツ
クアクテイビテイの値までのブロツク度数について累積
加算値を求め、各累積加算値を各ブロツクアクテイビテ
イの値に対応するアドレスに書き込んで積算型の度数分
布を作成することにより、各ブロツクアクテイビテイに
対応する度数はそのブロツクアクテイビテイ以上の値を
もつブロツク度数の積算値となる。
【0072】このように予め積算型度数分布表を生成す
れば、各しきい値に対応するブロツク度数積算値を算出
することは不要となり、単なるメモリのしきい値アドレ
スの読み出しによつてブロツク度数積算値の算出を可能
とすることができ、算出に要する時間を大幅に削減する
ことができる。
【0073】ここで実際のしきい値処理においては、画
質が劣化することを回避するために大きな判定しきい値
を使用することが困難である。従つてブロツクアクテイ
ビテイ値をクリツプした度数分布表を作成するようにし
ても良い。
【0074】すなわち図14に示すようにブロツクアク
テイビテイ値をLMTでクリツプすると、当該LMT以
上のブロツク度数は度数分布表においては全てLMTに
登録される。この結果、図14のようにLMTでのブロ
ツク度数が大きくなる。ここで算出すべきブロツク度数
和は斜線部である。
【0075】この度数分布表に対する積算型度数分布表
を図15に示す。この場合、上述の(8)式の積算演算
はブロツクアクテイビテイ値の最大値ではなく、ブロツ
クアクテイビテイ値LMTより0までの区間で行われ
る。算出すべきブロツク度数和は、しきい値THの座標
の積算ブロツク度数Iである。このように図13に示し
た場合と同様の結果が得られる。かくして積算型度数分
布表作成時間の短縮化を実現し得ると共に度数分布表メ
モリを一段と小型化することができる。
【0076】因に、クリツプ値LMTを設定する場合、
第1の方法として各階層ごとにクリツプ値LMTを変え
る方法及び、第2の方法として各階層全てにおいてクリ
ツクプ値LMTを固定値にする方法が考えられ、第1の
方法は各階層の階層間差分値分布に明らかな違いがある
場合に用いられ、第2の方法は各階層の階層間差分分布
が大差無い場合に用いられる。
【0077】さらに上述の実施例においては、符号器に
おいて画像データをPCM符号化する場合について述べ
たが、本発明はこれに限らず、他の符号化方式、例えば
直交符号化方式を適用しても良い。
【0078】さらに上述の実施例においては、各階層に
ついて得られた度数分布表のしきい値について複数の組
み合わせをROMに格納しておき、発生情報量が最も目
標値に近くなるしきい値の組み合わせを求める場合につ
いて述べたが、本発明はこれに限らず、各階層毎独立に
設定できるようにしても良い。
【0079】さらに上述の実施例においては、最下位の
階層データを2ライン×2画素づつ平均値を求めて上位
の階層の画像データを求める場合について述べたが、本
発明はこれに限らず、他の組み合わせによつて平均値を
求めるようにしても良い。
【0080】
【発明の効果】上述のように本発明によれば、画像デー
タを順次再帰的に異なる複数の解像度でなる複数の階層
データに分割して符号化する際に、解像度の最も低い最
上位階層データを除く階層データの所定のブロツクにつ
いてブロツクアクテイビテイを判定し、下位階層データ
に対する分割処理の判定基準であるしきい値をブロツク
アクテイビテイに対応するブロツクの度数分布から設定
することにより、圧縮効率の低下しない画像データの階
層符号化方法を容易に実現することができる。
【図面の簡単な説明】
【図1】本発明による画像符号化方法の原理の説明に供
する略線図である。
【図2】本発明における画像符号化方法によつて適応分
割された撮像画像の処理結果を示す図表である。
【図3】本発明における画像符号化方法によつて得られ
る各階層ごとの信号レベルを示す図表である。
【図4】本発明による画像符号化装置の一実施例を示す
ブロツク図である。
【図5】階層符号化エンコーダ部を示すブロツク図であ
る。
【図6】階層構造の説明に供する略線図である。
【図7】復号器の構成を示すブロツク図である。
【図8】符号器の構成を示すブロツク図である。
【図9】発生情報量制御部を示すブロツク図である。
【図10】各階層の度数分布表を示す特性曲線図であ
る。
【図11】各階層について得られるしきい値の組み合わ
せを示す図表である。
【図12】積算型度数分布表を示す特性曲線図である。
【図13】積算型度数分布表を示す特性曲線図である。
【図14】度数分布表を示す特性曲線図である。
【図15】積算型度数分布表を示す特性曲線図である。
【図16】従来における階層符号化装置を示すブロツク
図である。
【図17】従来における階層復号化装置を示すブロツク
図である。
【符号の説明】 40……階層符号化装置、40A……階層符号化エンコ
ーダ部、40B……発生情報量制御部、41、43、4
5、47、61、62、63、64……差分回路、4
2、44、46、46……平均化回路、51、52、5
3、54、55……符号器、56、57、58、59…
…復号器、65、66、67、68……アクテイビテイ
検出回路、69、70、71、72、73……度数分布
表、74……制御部。
【手続補正2】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正内容】
【図1】
【図4】
【図12】
【図2】
【図3】
【図5】
【図6】
【図8】
【図7】
【図10】
【図11】
【図14】
【図9】
【図13】
【図15】
【図16】
【図17】

Claims (9)

    【特許請求の範囲】
  1. 【請求項1】画像データを順次再帰的に異なる複数の解
    像度でなる複数の階層データに分割して符号化する画像
    符号化方法において、 上記複数の階層データのうち解像度が最も低い最上位階
    層データを除く階層データそれぞれについて、上位の階
    層データと空間的に対応するブロツクごとにブロツクア
    クテイビテイを判定し、 各階層ごと独立に判定された上記ブロツクアクテイビテ
    イに基づいて、上記各階層ごとに各ブロツクアクテイビ
    テイに対応するブロツク度数の分布を求め、 当該ブロツク度数の分布を基に各階層それぞれについ
    て、上記ブロツクアクテイビテイの判定基準である閾値
    の値を設定し、 上記ブロツクアクテイビテイが上記閾値以下のとき、隣
    接下位階層データのうち当該ブロツクに対応する複数の
    下位ブロツクの判定フラグとして分割中止フラグを設定
    し、上記複数の下位ブロツクについて上記ブロツクアク
    テイビテイの判定及び上記複数の下位ブロツクの伝送を
    中止し、 上記ブロツク毎の判定フラグを符号化コードと共に伝送
    することを特徴とする画像符号化方法。
  2. 【請求項2】上記閾値の値が決定されるまでの間、複数
    の階層データに対する符号化処理を待機させることを特
    徴とする請求項1に記載の画像符号化方法。
  3. 【請求項3】上記ブロツクアクテイビテイについて得ら
    れた度数の分布に関するデータの登録後、上位のブロツ
    クアクテイビテイの値から各ブロツクアクテイビテイの
    値にそれぞれ対応するブロツク度数の累積加算値を求
    め、 当該累積加算値をそれぞれ各ブロツクアクテイビテイに
    対応するアドレスに登録して積算型度数を求め、 当該積算型度数分布に基づいて上記閾値の値を設定する
    ことを特徴とする請求項1又は請求項2に記載の画像符
    号化方法。
  4. 【請求項4】上記各階層ごとに得られたブロツクアクテ
    イビテイの度数の分布の閾値の設定に基づいて符号化に
    よる発生情報量を求める場合には、各階層毎、独立に上
    記閾値の値を設定することを特徴とする請求項1、請求
    項2又は請求項3に記載の画像符号化方法。
  5. 【請求項5】上記各階層について設定されている閾値の
    組み合わせから1つの組み合わせを選択し、当該閾値の
    組み合わせの選択に応じて発生情報量を制御することを
    特徴とする請求項4に記載の画像符号化方法。
  6. 【請求項6】画像データを順次再帰的に異なる複数の解
    像度でなる複数の階層データに分割して符号化する画像
    符号化装置において、 上記複数の階層データのうち解像度が最も低い最上位階
    層データを除く階層データそれぞれについて、上位の階
    層データと空間的に対応するブロツクごとにブロツクア
    クテイビテイを判定し、各階層ごと独立に判定された上
    記ブロツクアクテイビテイに基づいて、上記各階層ごと
    に各ブロツクアクテイビテイに対応するブロツク度数の
    分布を求め、当該ブロツク度数の分布を基に各階層それ
    ぞれについて、上記ブロツクアクテイビテイの判定基準
    であるしきい値の値を設定する発生情報量制御部と、 上記ブロツクアクテイビテイが上記閾値以下のとき、隣
    接下位階層データのうち当該ブロツクに対応する複数の
    下位ブロツクの判定フラグとして分割中止フラグを設定
    し、上記複数の下位ブロツクについて上記ブロツクアク
    テイビテイの判定及び上記複数の下位ブロツクの伝送を
    中止し、上記ブロツク毎の判定フラグを符号化コードと
    共に伝送する符号化手段とを具えることを特徴とする画
    像符号化装置。
  7. 【請求項7】上記画像符号化方法は、 上記各階層ごとに各ブロツクアクテイビテイに対応する
    ブロツク度数の分布を求める際、上記ブロツクアクテイ
    ビテイ値が所定の最大制限値を越えるブロツクアクテイ
    ビテイを有するブロツクを所定の座標に登録するように
    したことを特徴とする請求項1に記載の画像符号化方
    法。
  8. 【請求項8】上記最大制限値は、 上記各階層ごとに異なる値に設定されるようにしたこと
    を特徴とする請求項1に記載の画像符号化方法。
  9. 【請求項9】上記最大制限値は、 上記各階層ごとに等しい値に設定されるようにしたこと
    を特徴とする請求項1に記載の画像符号化方法。
JP27320593A 1993-08-30 1993-10-04 画像処理装置及び画像処理方法 Expired - Lifetime JP3356338B2 (ja)

Priority Applications (12)

Application Number Priority Date Filing Date Title
JP27320593A JP3356338B2 (ja) 1993-08-30 1993-10-04 画像処理装置及び画像処理方法
US08/428,067 US5930394A (en) 1993-08-30 1994-08-30 Picture coding apparatus and method thereof
EP94925022A EP0671852B1 (en) 1993-08-30 1994-08-30 Device and method for encoding image data
CN94190793A CN1075321C (zh) 1993-08-30 1994-08-30 图像编码装置及方法
PCT/JP1994/001425 WO1995007004A1 (en) 1993-08-30 1994-08-30 Device and method for encoding image data
DE69428979T DE69428979T2 (de) 1993-08-30 1994-08-30 Einrichtung und verfahren zur kodierung von bilddaten
US09/313,141 US6108451A (en) 1993-08-30 1999-05-17 Picture coding apparatus and method thereof
US09/313,392 US6195464B1 (en) 1993-08-30 1999-05-18 Picture coding apparatus and method thereof
US09/315,100 US6219456B1 (en) 1993-08-30 1999-05-19 Picture coding apparatus and method thereof
US09/316,621 US6408097B1 (en) 1993-08-30 1999-05-21 Picture coding apparatus and method thereof
US09/324,448 US6324304B1 (en) 1993-08-30 1999-06-02 Picture coding apparatus and method thereof
US09/710,542 US6539119B1 (en) 1993-08-30 2000-11-09 Picture coding apparatus and method thereof

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP5-238823 1993-08-30
JP23882393 1993-08-30
JP27320593A JP3356338B2 (ja) 1993-08-30 1993-10-04 画像処理装置及び画像処理方法

Publications (2)

Publication Number Publication Date
JPH07123405A true JPH07123405A (ja) 1995-05-12
JP3356338B2 JP3356338B2 (ja) 2002-12-16

Family

ID=26533915

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27320593A Expired - Lifetime JP3356338B2 (ja) 1993-08-30 1993-10-04 画像処理装置及び画像処理方法

Country Status (1)

Country Link
JP (1) JP3356338B2 (ja)

Also Published As

Publication number Publication date
JP3356338B2 (ja) 2002-12-16

Similar Documents

Publication Publication Date Title
JP3269960B2 (ja) ブロック化現象除去のための後処理装置及びその方法
EP0671852B1 (en) Device and method for encoding image data
JPH09271026A (ja) 画像符号化装置
KR100311295B1 (ko) 화상처리장치및방법
JP5157796B2 (ja) 画像データの可逆圧縮符号化装置および復号化装置
JP4806172B2 (ja) ディジタルのソース画像を圧縮する装置および方法
JP3337160B2 (ja) 画像処理方法及び画像処理装置
JP2901656B2 (ja) 画像符号化装置
JPH07123405A (ja) 画像符号化方法及び画像符号化装置
JP3934687B2 (ja) 画像データ復号方法及びその装置
JPH07107471A (ja) 画像符号化装置及びデータ伝送方法
JP3585047B2 (ja) 復号装置及び復号方法
JP3337167B2 (ja) 画像処理装置及び画像処理方法
JPH0795570A (ja) 画像符号化装置
JP3478411B2 (ja) 画像処理装置及び画像処理方法
JP3381007B2 (ja) 画像処理装置及び画像処理方法
JPH07107475A (ja) 画像符号化方法
JP3337158B2 (ja) 画像処理方法及び画像処理装置
JP3429047B2 (ja) 復号装置及び復号方法
JP3560946B2 (ja) 動画像情報の圧縮方法およびそのシステム
JP3337159B2 (ja) 画像処理方法及び画像処理装置
JP3337163B2 (ja) 画像処理装置及び画像処理方法
JP3337166B2 (ja) 画像処理装置及び画像処理方法
JP3337699B2 (ja) 画像処理装置およびその方法
JPH0795574A (ja) 画像符号化装置

Legal Events

Date Code Title Description
FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091004

Year of fee payment: 7

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091004

Year of fee payment: 7

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101004

Year of fee payment: 8

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111004

Year of fee payment: 9

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121004

Year of fee payment: 10

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131004

Year of fee payment: 11

EXPY Cancellation because of completion of term