JPH042291A - 画像データの符号化装置および符号化方法 - Google Patents

画像データの符号化装置および符号化方法

Info

Publication number
JPH042291A
JPH042291A JP2101595A JP10159590A JPH042291A JP H042291 A JPH042291 A JP H042291A JP 2101595 A JP2101595 A JP 2101595A JP 10159590 A JP10159590 A JP 10159590A JP H042291 A JPH042291 A JP H042291A
Authority
JP
Japan
Prior art keywords
code amount
quantization width
quantization
encoding
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2101595A
Other languages
English (en)
Other versions
JP2952000B2 (ja
Inventor
Chihiro Nakagawa
千尋 中川
Hidetoshi Yamada
秀俊 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Optical Co Ltd filed Critical Olympus Optical Co Ltd
Priority to JP10159590A priority Critical patent/JP2952000B2/ja
Priority to US07/771,791 priority patent/US5291282A/en
Publication of JPH042291A publication Critical patent/JPH042291A/ja
Application granted granted Critical
Publication of JP2952000B2 publication Critical patent/JP2952000B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は画像データを高圧縮符号化するための符号化装
置および符号化方法に関する。
〔従来の技術〕
CCDに代表される固体撮像装置等により撮像された画
像信号をメモリカード、磁気ディスク、あるいは磁気テ
ープ等の記憶装置にディジタルデータとして記録する場
合、そのデータ量は膨大なものとなるため、多くのフレ
ーム画像を限られた記録容量の範囲で記録しようとする
には、得られた画像信号のデータに対し、何らかの圧縮
を行うことが必要となる。例えば、ディジタル電子スチ
ルカメラなどにおいては、撮影した画像を銀塩フィルム
の代わりに、メモリカードや磁気ディスク等のデータ記
憶媒体にディジタルデータとして保存するので、1枚の
メモリカードあるいは磁気ディスク装置に記録できる画
像の枚数は、保証されなければならない。
同様に、ディジタルVTR(ビデオテープレコーダ)等
の場合もフレーム画たりの画像のデータ量に影響される
ことなく、所定量のフレームを記録できなければならな
い。すなわち、スチル像であっても、動画像であっても
、必要なコマ数分を確実に記録できる必要がある。
このような条件に対処するための画像データの圧縮方法
として、直交変換符号化とエントロピー符号化を組み合
わせた符号化方法が広く知られている。
その代表的なものとして、静止画符号化国際標準化にお
いて検討されている方式について次に概略を説明する。
この方式はまず、画像データを所定の大きさのブロック
に分割し、分割されたブロック毎に直交変換として2次
元のDCT (離散コサイン変換)を行う。次に各周波
数成分に応じた線形量子化を行い、この量子化された値
に対しエントロピー(単位通報当りの情報量)符号化と
してハフマン符号化を行う。この時、直流成分に関して
は近傍ブロックの直流成分との差分値をハフマン符号化
する。交流成分はジグザグスキャンと呼ばれる低い周波
数成分から高い周波数成分へのスキャンを行い、無効(
値が0)の成分の連続する個数とそれに続く有効な成分
の値とから2次元のハフマン符号化を行う。以上がこの
方式の基本部分である。
この基本部分だけでは、エントロピー符号化であるハフ
マン符号化を用いているために符号量が画像毎に一定で
はなくなってしまう。
そこで、符号量の制御の方法として次の方式が提案され
ている。まず、前記基本部分の処理を行うと同時に全画
面の発生した総符号量を求める。
この総符号量と目的とする符号量とからDCT係数に対
する目的とする符号量に近づけるのに最適な量子化幅を
予測する。次にこの量子化幅を用いて前記基本部分の量
子化以降の処理を繰り返す。
そして、今回発生した総符号量と、前回発生した総符号
量と、目的とする符号量とから再び目的の符号量に近づ
けるのに最適な量子化幅を予測する。
そして、この予測した量子化幅と前回の量子化幅が一致
し、かつ目的の符号量よりも今回発生した総符号量の方
が少ない場合には処理を終了し、符号を出力する。そう
でない場合には新しい量子化幅を用いて処理を繰り返す
以上の動作を第6図を参照して具体的に説明すると、ま
ず、(a)に示すように、1フレームの画像データ(国
際標準代案で提示されている1フレームの画像は720
 X576画素)を所定の大きさのブロック(例えば、
8×8の画素よりなるブロックA、B、C・・・)に分
割し、(b)に示すように、この分割されたブロック毎
に直交変換として2次元のDCT (離散コサイン変換
)を行い、8X8のマトリックス上に順次格納する。画
像データは二次元平面で眺めてみると、濃淡情報の分布
に基づく周波数情報である空間周波数を有している。
従って上記DCTを行うことにより、画像データは直流
成分DCと交流成分ACに変換され、8×8のマトリッ
クス上には原点位置(0,0位置)に直流成分DCの値
を示すデータが、そして、0,7位置には横軸方向の交
流成分ACの最大周波数値を示すデータが、そして、7
.0位置には縦軸方向の最大交流成分ACの周波数値を
示すデーータが、さらに7.7位置には斜め方向の交流
成分ACの最大周波数値を示すデータが、それぞれ格納
され、中間位置ではそれぞれの座標位置により関係付け
られる方向における周波数データが、原点側より順次高
い周波数のものが出現する形で格納されることになる。
次にこのマトリックスにおける各座標位置の格納データ
を、定められた量子化マトリックスと量子化幅係数aを
掛は合わせて得られる各周波数成分毎の量子化幅により
割ることにより、各周波数成分に応じた線形量子化を行
い(C)、この量子化された値に対しエントロピー符号
化としてハフマン符号化を行う。この時、直流成分DC
に関しては近隣ブロックの直流成分との差分値をグルー
プ番号(付加ビット数)と付加ビットで表現し、そのグ
ループ番号をハフマン符号化し、得られた符号語と付加
ビットを合わせて符号化データとする(dl 、 d2
. el、 e2)。
交流成分ACに関しても有効である(値が“0”でない
)係数は、グループ番号と付加ビットで表現する。
そのため、交流成分ACはジグザグスキャンと呼ばれる
低い周波数成分から高い周波数成分へのスキャンを行い
、無効(値が“O”)の成分の連続する個数(零のラン
数)と、それに続く有効な成分の値のグループ番号とが
ら2次元のハフマン符号化を行い、得られた符号語と付
加ビットを合わせて符号化データとする。
ハフマン符号化はフレーム画像あたりの上記直流成分D
Cおよび交流成分ACの各々のデータ分布における発生
頻度のピークのものを中心として、この中心のものほど
、データビットを少なくし、周辺になるほどビット数を
多くするようにしてビット割り当てをした形でデータを
符号化して符号語を得ることで行う。
以上がこの方式の基本部分である。
この基本部分だけでは、エントロピー符号化であるハフ
マン符号化を用いているために符号量が画像毎に一定で
はなくなってしまうから、符号量の制御の方法として例
えば、次のように処理する。
まず、暫定的な量子化幅係数aを用いて前記基本部分の
処理を行うと同時に、全画面の発生した総符号量(総ビ
ット数)を求める(g)。この総符号量ど、目的とする
符号量と、用いた暫定的な量子化幅係数αの3者とから
DCT係数に対する目的とする符号量に近づけるのに最
適な量子化幅係数αをニュートンーラプソンーイタレー
ション(Newton Raphson Iterat
ion)により予測する(h)  。
次にこの量子化幅係数αを用い(j)、前述の基本部分
の量子化以降の処理を繰り返す。そして、今回発生した
総符号量と、前回発生した総符号量と、目的とする符号
量と、今回用いた量子化幅係数αと、前回用いた量子化
幅係数αとから、再び目的の符号量に近づけるのに最適
な量子化幅係数αを予測する。そして、この予測した量
子化幅係数αと前回の量子化幅係数αが一致し、かつ目
的の符号量よりも今回発注した総符号量の方が少ない場
合には処理を終了し、今回発生した符号化データを出力
してメモリカードに記憶する(f)。そうでない場合に
は量子化幅係数αを変更し、この新しい量子化幅αを用
いて処理を繰り返す。
〔発明が解決しようとする課題〕
上述したように、例えば、ディジタル電子スチルカメラ
などにおいては、1枚のメモリカードあるいは磁気ディ
スク装置あるいは1本の磁気テープに記録できる画像の
枚数が保証されていなければならず、そのため、画像デ
ータを圧縮して記録するが、操作性の」二からその処理
時間はできるだけ短く、且つ、一定である必要がある。
また、高能率で画像データの圧縮が行える事か望まれる
これらはディジタル電子スチルカメラに限らず、他のア
プリケーションにおいても少なからず要求される項目で
ある。
そして、このような要求を満たす圧縮方法として、上述
の国際標準室方式があり、これは画像データをブロック
化して離散コサイン変換に代表されるような直交変換を
行う符号化または、予測符号化(DPCM)等の画像情
報圧縮により前処理の圧縮を行い、その結果を得て量子
化した後、その量子化出力をハフマン符号化に代表され
る可変長符号化によって符号化する方法である。
ところが、これら可変長符号化を組合わせた画像データ
圧縮方式は高能率であるものの、可変長符号化を用いて
いるが故に、実際に符号化を終了するまで、その符号量
がわからず、符号量を制御することが難しいと云う問題
があった。
この問題を解決する手法として本発明者らは次のような
方式を提案した。
その1つはDPCMと可変長符号化を組合わせた圧縮方
式において、発生符号量の制御を行うために、まず、画
像信号を標本化し、この標本化した信号を画像メモリに
記憶し、この標本化信号を既に符号化済みの参照画素信
号をもとに予測した予測値との差分をとることにより、
差分信号化し、これを暫定的な量子化幅で量子化し、こ
こで発生した符号量を積算してゆくことにより、1画像
分の画像の総発生符号量を求める。次に前記暫定的な量
子化幅、前記総発生符号量、及び目的とする総符号量と
から、新しい量子化幅を予測する。
そして、この予測した新しい量子化幅を用いてDPCM
、量子化、可変長符号化を行い、総符号量を求める。こ
れを繰り返し行うことで、全体の符号量を目的の符号量
に近付けることにより、符号量の制御を行おうと云うも
のである。
もう1つの方式は、直交変換と可変長符号化を組合わせ
た圧縮方式において、発生符号量の制御を行うために、
画像メモリに記憶した標本化した画像信号を、ブロック
に分割し、この分割されたブロック毎に直交変換を行っ
てから、この変換出力を暫定的な量子化幅で量子化した
後、この量子化出力を可変長符号化すると共に、各ブロ
ック毎の発生符号量と画像全体の総発生符号量を算出し
、次に前記暫定的な量子化幅、前記総発生符号量及び、
目的とする総符号量とから、新しい量子化幅を予測する
。また、前記各ブロック毎の発生符号量と、前記総発生
符号量と、目的とする総符号量とから、各ブロック毎の
割り当て符号量を計算する。そして、新しい量子化幅を
用いて再び画像メモリの画像信号をブロック分割、直交
変換、量子化、可変長符号化を行うと共に、各プロ・ン
クの発生符号量が各ブロックの割り当て符号量を越える
場合には、途中で可変長符号化を中止して、次のブロッ
クの処理に移る。これにより、画像全体の総発生符号量
が目的の総符号量を越えないように符号量の制御を行お
うと云うものである。
ところがこのように、画像データをブロック化し、離散
コサイン変換(DCT)に代表されるような直交変換を
行う符号化または予測符号化(DPCH)等の画像情報
圧縮方法により、前処理の圧縮を行って、その結果を量
子化した後、その量子化出力をハフマン符号化に代表さ
れる可変長符号化によって符号化する方式では、符号化
が終了するまで、総符号量がわからず、符号量を短時間
に最適値に圧縮制御することは難しかった。つまり、最
適となる前記量子化の量子化幅係数αが決定されるまで
に、何度も試行錯誤を繰り返すかたちとなり、早く最適
量子化幅係数αを決定することができなかった。
特に1つの符号化装置で低画質モード、高画質モード等
、画質モードが種々選択できるようにすることを考える
と、選択された画質モードに合わせてそれぞれ最適圧縮
率を得ることができるようにする必要があり、このよう
なものを想定した場合、すなわち、複数の目的符号量に
対応させることができるような符号化装置にするには、
複数の量子化幅係数αを決定できるようにしなくてはな
らない。このように、目的符号量可変とするケースでは
、上記方式ではいつでも短時間に最適量子化幅係数αが
決定できると云う命題を達成出来ない。
近年では、画像の質を重視するケースや、画像のきめの
細かさを多少犠牲にしても、多数の画像を記録したいと
云った様々なユーザのニーズがあり、これに応えるため
には、高画質モードと低画質モードを選択指定できるよ
うにしたいところである。そして、このモードの違いに
より、当然、画像当り(コマ当り)の目的符号量も変り
、これに合わせて圧縮符号化する必要が生じるが、画像
はその内容により、空間周波数の分布状態かまちまちで
あり、目的符号量に収まる最適量子化幅係数αの値を短
時間で探して、符号化を行うと云う制約がある以上、や
みくもに試行錯誤を繰り返す従来方式では無理がある。
そこで、本発明の目的とするところは、目的符号量を変
化させても、それに適応して符号量が目的の符号量にな
るよう短時間で最適量子化幅係数αを求めることができ
、早く目的符号量に圧縮できると共に、それぞれの目的
符号量の範囲内で最良な画質が得られるようにした画像
データの符号化装置および符号化方式を提供することに
ある。
〔課題を解決するための手段〕
上記目的を達成するため、本発明は次のように構成する
すなわち、第1には直交変換もしくは予測符号化等を行
う画像情報圧縮手段により画像データを前処理した後、
量子化手段により量子化し、この量子化出力を可変長符
号化手段により可変長符号化する符号化装置において、
収めるべき総符号量の情報を与える手段と、この情報に
基づき、該収めるべき総符号量の枠に対応した量子化幅
の予測を行って該予測した量子化幅の情報を前記量子化
手段に与える量子化幅予測手段とを設けると共に、前記
量子化手段は量子化幅の情報を受けてその量子化幅で前
記前処理済み画像データを量子化する構成とする。
また、第2には可変長符号化手段の出力を受け、画面単
位の総符号量を求めてこれを算出符号量情報として出力
する符号量算出手段と、収めるべき総符号量の情報を与
えると共に初めに統計処理指令を発令し、統計処理が終
わると符号化処理指令を発令する制御手段と、前記統計
処理指令による実行開始時には前記制御手段からの総符
号量の情報に基づき、該総符号量の枠に対応した量子化
幅の予測を行って該予測した量子化幅の情報を前記量子
化手段に与え、符号化処理指令による実行開始時には入
力される前記算出符号量情報に基づき前回予測した量子
化幅の情報に対して前記総符号量の枠に収まるよう補正
した量子化幅の情報を得て、この補正した量子化幅の情
報を前記量子化手段に与える量子化幅予測手段とを設け
ると共に、前記量子化手段は量子化幅の情報を受けてそ
の量子化幅で前記前処理済み画像データを量子化する構
成とすることを特徴とする。
更に、第3には可変長符号化手段の出力を受け、画面単
位の総符号量を求めてこれを算出符号量情報として出力
する符号量算出手段と、収めるべき総符号量の情報を与
えると共に初めに最適化調査処理指令を発令し、算出符
号量情報を受けてこれより最適化調査処理の再実施の要
不要を判定し、最適化調査処理が終わると符号化処理指
令を発令する制御手段と、前記最適化調査処理指令によ
る実行開始時には初めに前記制御手段からの総符号量の
情報に基づき、該総符号量の枠に対応した量子化幅の予
測を行って該予測した量子化幅の情報を前記量子化手段
に与え、既に予測した量子化幅の情報があるときは入力
される前記算出符号量情報に基づき、前回予測した量子
化幅の情報に対して前記総符号量の枠に収まるよう補正
した量子化幅の情報を得て、この補正した量子化幅の情
報を前記量子化手段に与え、符号化処理指令による実行
開始時には前記最適化調査処理により予測された最終の
量子化幅の情報を前記量子化手段に与える量子化幅予測
手段とを設けると共に、前記量子化手段は量子化幅の情
報を受けてその量子化幅で前記前処理済み画像データを
量子化する構成とし、前記符号化処理指令時に得られる
可変長符号化手段の出力を画像データの最終符号化出力
とすることを特徴とする。
また、第4には画像データをブロックに分割し、この分
割されたブロック毎に直交変換等を行って前処理した後
、量子化手段により量子化し、この量子化出力を可変長
符号化手段により可変長符号化する符号化装置において
、可変長符号化手段の出力を受け、画面単位の総符号量
を求めてこれを算出符号量情報として出力する符号量算
出手段と、収めるべき総符号量の情報を与えると共に初
めに統計処理指令を発令し、統計処理が終わると符号化
処理指令を発令する制御手段と、前記統計処理指令によ
る実行開始時には前記制御手段がらの総符号量の情報に
基づき、該総符号量の枠に対応した量子化幅の予測を行
って該予測した量子化幅の情報を前記量子化手段に与え
、符号化処理指令による実行開始時には入力される前記
算出符号量情報に基づき前回予測した量子化幅の情報に
対して前記総符号量の枠に収まるよう補正した量子化幅
の情報を得て、この補正した量子化幅の情報を前記量子
化手段に与える量子化幅予測手段と、前記統計処理指令
による実行時に前記算出符号量情報と前記収めるべき総
符号量の情報とに基づき、前記各ブロックの割当て符号
量を求める符号量割当手段と、前記符号化処理指令によ
る実行時、前記各ブロック毎の前記算出符号量情報がそ
のブロックでの前記割当て符号量に達すると前記可変長
段は量子化幅の情報を受けてその量子化幅で前記前処理
済み画像データを量子化する構成とし、前記可変長符号
化手段は前記打切り指令を受ける毎に現在処理中のブロ
ックに対する符号化を打切る構成とする。
〔作 用〕
本発明は画像データを前処理(例えば、ブロック化して
DCT等の直交変換を行う、またはDPCMを行う等)
し、この出力を量子化手段に与えて量子化し、この量子
化出力を可変長符号化するものにおいて、第1の構成の
場合、収めるべき総符号量の情報を与えると、この情報
に基づき、該収めるべき総符号量の枠に対応した量子化
幅の予測を行って該予測した量子化幅の情報を前記量子
化手段に与え、この量子化幅で量子化させるものである
。従って、得たい目的符号量を変化させても、その目的
符号量に近い符号量が短時間で得られるようになる。こ
のケースは、−回のみのパスで符号化するものであるが
、量子化幅を目的符号量に基づいて設定するようにした
ことにより、最適な量子化幅に近くなり、得られる符号
量をおおよそ目的符号量と一致させることができる。そ
して、この場合、処理は一回で終わるので、極めて高速
で符号化を行えるようになる。
第2のケースでは、符号量算出手段は可変長符号化出力
を受けて画面単位の総符号量を求め。
これを算出符号量情報として出力する。一方、制御手段
は収めるべき総符号量の情報を与えると共に、初めに統
計処理指令を発令し、統計処理が終わると符号化処理指
令を発令し、量子化幅予測手段は前記統計処理指令によ
る実行開始時には前記制御手段からの総符号量の情報に
基づき、該総符号量の枠に対応した量子化幅の予測を行
って該予測した量子化幅の情報を前記量子化手段に与え
、符号化処理指令による実行開始時には入力される前記
算出符号量情報に基づき前回予測した量子化幅の情報に
対して前記総符号量の枠に収まるよう補正した量子化幅
の情報を得て、この補正した量子化幅の情報を前記量子
化手段に与え、該量子化手段にこの量子化幅の情報に基
づいた量子化幅で前記前処理済み画像データを量子化さ
せる。
更に第3のケースでは、符号量算出手段は可変長符号化
手段の出力を受け、画面単位の総符号量を求めてこれを
算出符号量情報として出力する。
また、制御手段は収めるべき総符号量の情報を与えると
共に初めに最適化調査処理指令を発令し、算出符号量情
報を受けてこれより最適化調査処理の再実施の要不要を
判定し、最適化調査処理が終わると符号化処理指令を発
令する。一方、量子化幅予測手段は前記最適化調査処理
指令による実行開始時には初めに前記制御手段からの総
符号量の情報に基づき、該総符号量の枠に対応した量子
化幅の予測を行って該予測した量子化幅の情報を前記量
子化手段に与え、既に予測した量子化幅の情報があると
きは入力される前記算出符号量情報に基づき、前回予測
した量子化幅の情報に対して前記総符号量の枠に収まる
よう補正した量子化幅の情報を得て、この補正した量子
化幅の情報を前記量子化手段に与え、符号化処理指令に
よる実行開始時には前記最適化調査処理により予測され
た最終の量子化幅の情報を前記量子化手段に与える。
そして、前記量子化手段は量子化幅の情報を受けてその
量子化幅で前記前処理済み画像データを量子化し、また
、可変長符号化手段の出力のうち、前記符号化処理指令
時に得られる可変長符号化手段の出力を画像データの最
終符号化出力とするものである。
要約すると、第2および第3のケースは、目的とする符
号量を変えることができるようにした場合に、その時の
指定される目的符号量以内になるまで、調査のために符
号化処理と最適な量子化幅の予測を繰り返し、最適な量
子化幅が見つかった段階で最終的な符号化を行うnパス
方式であり、この方式では調査のための符号化処理にお
いて、符号量を目標値に収めるに最適な量子化幅を見付
けるまでの(量子化幅が最適値に収束するまでの)繰り
返し回数が少なくなり、符号化に要する処理時間が短く
なる。
また、第4のケースは、画像データをブロックに分割し
、この分割されたブロック毎に直交変換もしくは予測符
号化等を行って前処理した後、量子化手段により量子化
し、この量子化出力を可変長符号化手段により可変長符
号化する場合に、符号量算出手段は可変長符号化手段の
出力を受け、画面単位の総符号量を求めてこれを算出符
号量情報として出力し、制御手段は収めるべき総符号量
の情報を与えると共に初めに統計処理指令を発令し、統
計処理が終わると符号化処理指令を発令する。量子化幅
予測手段は統計処理指令による実行開始時には前記制御
手段からの総符号量の情報に基づき、該総符号量の枠に
対応した量子化幅の予測を行って該予測した量子化幅の
情報を前記量子化手段に与え、符号化処理指令による実
行開始時には入力される前記算出符号量情報に基づき前
回予測した量子化幅の情報に対して前記総符号量の枠に
収まるよう補正した量子化幅の情報を得て、この補正し
た量子化幅の情報を前記量子化手段に与える。符号化打
切手段は統計処理指令による実行時に前記算出符号量情
報と前記数めるべき総符号量の情報とに基づき、前記各
ブロックの割当て符号量を求める符号量割当手段の求め
た各ブロック別割当て量を参照し、前記符号化処理指令
による実行時、前記各ブロック毎の前記算出符号量情報
がそのブロックでの前記割当て符号量に達すると前記可
変長符号化手段の当該ブロックに対する符号化を打切る
べく制御する。量子化手段は量子化幅の情報を受けてそ
の量子化幅で前記前処理済み画像データを量子化し、可
変長符号化手段は前記打切り指令を受ける毎に現在処理
中のブロックに対する符号化を打切る。
要するに、第4のケースの場合は、2回のパスで処理を
終了する2パス方式であり、目的符号量に近い符号量が
得られる量子化幅を与えることができる係数αを用いて
統計処理すると、早く、しかも、より精度良く、最適量
子化幅係数αを見付けることができることを利用して、
暫定的な量子化幅係数として、目的符号量に基づいて設
定した最適な量子化幅に近い量子化幅係数を用いて第1
パスの量子化を行い、これにより得た総符号量から目的
符号量に収めることができる量子化幅係数を知って、こ
れを第2バス目で使用して最終的な符号化を行うもので
ある。そして、これにより、画像データを短い時間で、
精度良く目的符号量の枠一杯に符号化し、これによって
、許される符号量に目一杯近付けることができることで
、失うデータを最小限にとどめ、画質も維持できるよう
にすることができるものである。
本発明は、画像データを前処理し、この出力を量子化し
、この量子化出力を可変長符号化する符号化装置におい
て、前記量子化の量子化幅を目的の符号量に応じて最適
値に可変設定することを特徴としている。
これにより画像データを目的の符号量に収まるように最
適量子化幅で量子化して、可変長符号化することかでき
るものであるが、画像データを前処理し、この出力を量
子化し、これを可変長符号化する場合、量子化にあたっ
ての量子化幅を変化させることにより、発生する符号量
が変化することは周知の事実である。これは、ハフマン
符号化に代表される可変長符号化は、符号化するデータ
の発生確率の偏りを利用してそのデータを表現するのに
必要な符号量を減少させることから、前記「量子化幅を
変化させる」と云うことは、量子化値の発生確率を変化
させると云うことでもあるから、量子化幅を変化させる
ことにより当然、発生符号量も変化する。また、同じ量
子化幅で同一の符号化を行っても、そのときの画像デー
タによって発生符号量は異なる。しかし、1つの画像デ
ータに対して量子化幅を変化させて同一の符号化を行っ
た場合は量子化幅と、発生符号量との間には一定の関係
が得られる。また、多くの画像データで量子化幅と発生
符号量の関係を求めると、最も発生頻度の高い関係が統
計的に得られることが明らかになり、多くの場合、次の
関係が得られる。
つまり、ある量子化幅に対する相対的な比をSFとし、
発生符号量1画素あたりのビット数(ビットレート)で
表わし、BRとすると、 IogBR−aXlog S
F+b  なる関係になる。aは同一の符号化であれば
、画像によらず略一定であり、bは画像に依存する。こ
のbの値は画像により、一定の分布量との関係を利用し
て目的の符号量に応じた量子化幅を設定すると云うとこ
ろにある。
従って、本発明によれば、目的符号量を変化させても、
それに適応して符号量が目的の符号量になるような量子
化幅を与えることができる最適量子化幅係数αを短時間
で求めることができ、早く目的符号量に圧縮できると共
に、それぞれの目的符号量の範囲内で最良な画質が得ら
れるようにした画像データの符号化装置および符号化方
式を提供することができる。
〔実施例〕
以下、本発明の実施例を図面に基づいて説明する。
初めに本発明を分かり易くするために、本発明の基本的
な考え方を説明しておく。
すなわち、本発明は最初に1バス目の処理として統計処
理を行い、最適な量子化幅係数を予測すると共に、ブロ
ック毎の割り当て符号量を決定する。そして、2バス目
の処理として最終的な符号化処理を実施する。2バス目
は各ブロック毎に前記予測量子化幅係数により量子化す
ると共に、これを符号化し、この符号化により得られる
符号量がブロック毎の割り当て符号量に収まるように、
そのブロックについて符号量を監視しながら、符号化を
進め、EOB符号を含め、符号量が割当符号量に達する
とそのブロックの符号化は終了させて次のブロックの符
号化に移って行く。また、目的符号量に近い値に早く収
束させるために、低画質モード、高画質モードと云った
撮影モードにより変わる目的の符号量に応じ、その符号
量に近い符号量が得られる標準の量子化幅係数αを上記
第1バス目に与える機能を前記統計処理の系統に予め持
たせると云うものである。
統計処理は最適な量子化幅を予測すると共に、ブロック
毎の割当符号量を決定するものであり、最適符号量の予
測は符号化を行った時の符号量を粗<(シかし、かなり
の精度で)近付けるための処理である。この最適化され
た量子幅を符号化処理で使用することで、はぼ目的の符
号量に近付けることができるようになる。そして、この
時点で符号量が目的の符号量内に収まれば、この処理だ
けで十分であるが、1画像のデータ量の上限が規定され
ている場合、1バイトはおろか、1ビツトでも目的の符
号量をオーバーすることはできない。
そこで、オーバーしたときの処理法が必要になる。
それがブロック毎の割当符号量の決定である。
これは符号化を行ったときの符号量が目的の符号量をオ
ーバーした時の微調整に使用するデータを決定するため
のものである。実際に符号化処理を統計処理において予
測した最適な量子化幅で実行した結果を見て、オーバー
しなかったときは終了、オーバーしたときは後処理と云
うようにしても良いが、その場合、統計処理、符号化処
理、後処理の3ステツプとなり、時間がかかるばかりで
なく、符号化処理と後処理の間で、長さの異なる符号を
繋ぎ合わせることなく区別がつくように、保存する必要
が生じ、問題であるから、符号化処理の最中に微調整を
行うことが望まれる。しかし、無闇にデータを落とすこ
とは画質の劣化に繋がるので、避けねばならない。
そこで、本発明では各ブロックの高い周波数成分から省
略して行くことにより視覚的な影響を最小にする。とこ
ろが、符号量がオーバーするか否かは符号化を終了して
みないと分からないので、本発明ではそれを各ブロック
毎に判定させるようにする。
これは最適な量子化幅あるいは統計処理により予測され
た量子化幅を用いて符号化を行ったときに発生する各ブ
ロックの符号量において、各ブロックの発生符号量の相
対的な比率があまり変化しないことが実験により確認さ
れているので、これを利用する。すなわち、統計処理で
暫定的な量子化幅(これは目的の符号量によって、ごく
粗く予測することが可能)を用いて、符号化を行うとき
に、各ブロックにおいて発生した符号量を目的とする符
号量にする際、各ブロック毎に「これを越えない限り画
像全体の符号量が目的の符号量を越えない」と云うガイ
ドラインを設定し、このガイドラインを各ブロック毎の
割当符号量として監視の基準にする。
このようにして量子化幅と各ブロック毎の割当符号量が
決まったならば、これに基づき符号化処理を実施し、最
終的な符号化を行う。
本発明においては、符号化処理では各ブロックにおいて
、そのブロックの割当符号量を越えないように各ブロッ
クにおいて符号化を打ち切る。
各ブロックの符号化において、低い周波数成分から高い
周波数成分に順次、符号化しながら、ガイドライン(割
当符号量)を越えないようにチエツクする。オーバーし
なかったブロックは問題なく符号化を終了、つまり、E
OBを出力する。途中でオーバーしてしまったブロック
はそれ以上の高周波成分は符号化せず、符号化を打ち切
り、そのブロックの符号化を終了、つまり、EOBを出
力する。このとき、EOBもハフマン符号の一つである
から、EOBも含めて割当符号量内に収まるようにする
必要がある。
このようにして、例えば、半数のブロックは打ち切る必
要無く符号化を終了し、残りの半数はごく高い周波数の
一部が省略されて、符号化を終了したとすれば、欠落す
る情報は極めてわずかであり、しかも、欠落するのは視
覚的に影響の少ない高い周波数成分の情報にとどめるこ
とができる。
そして、この方式により統計処理、符号化処理の2ステ
ツプで必ず符号化を終了することができ、従来のように
何度も最適化を繰り返すことなく総符号量を規定値内に
収めることができるようになり、しかも、画質の劣化も
抑制できる。
以上の原理を用いた装置の実施例を説明する。
第1図に本発明による画像データの符号化装置をディジ
タル電子カメラに適用した一実施例をブロック図で示す
。なお、本発明とは直接関係のないディジタル電子カメ
ラの機構は図示および説明を省略する。
第1図において、2は撮影レンズやCOD等の撮像デバ
イスよりなる撮像系であり、前記撮影レンズにより撮像
デバイス上に結像された光学像を画像信号に変換するも
のである。撮像系2にはプロセス回路も含まれ、このプ
ロセス回路により前記撮像デバイスにより得られた画像
信号をカラー信号のY、 R−Y  (以下、このR−
YをCr(り07レツド)と略称する) 、B−Y  
(以下、二〇B−Yをcb(クロマブルー)と略称する
)の各色成分に分離させると共にガンマ補正やホワイト
バランス処理等を行うようにしである。
更にまた撮像系2にはディジタル変換を行うA/D変換
回路があり、輝度信号系である Y成分とクロマ(C;
色差信号)系であるCr、 Cb酸成分信号のディジタ
ル変換を行う。撮像系2においては図示しない画像デー
タバッファメモリに1フレ一ム分の画像データを格納し
てあり、例えば最初に輝度系の信号について統計処理を
行うべく、画像データバッファメモリのデータを読出し
、プロセス回路によりプロセス処理した画像信号のY成
分データを、A/D変換して画像データバッファメモリ
に出力して記憶させ、Y成分データについての処理が終
ったならば、次にクロマ系Cr5Cb成分のデータにつ
いてプロセス処理した後、A/D変換して画像データバ
ッファメモリに出力し、記憶させる。
画像データバッファメモリはそれぞれY成分用およびC
r、 Cb成分用に分けられた画像メモリであり、少く
とも1フレームの画像を記憶する容量を有している。
撮像系2には更にブロック化回路があり、画像データバ
ッファメモリより読み出されたY成分用およびCr、 
Cb成分用の画像データ(1フレ一ム分、若しくは1フ
イ一ルド分)を、所定の大きさのブロックに分割するブ
ロック化処理を行うものである。ここでは例としてブロ
ックサイズは8×8とするが、このブロックサイズは8
×8に限るものではなく、またYとC(クロマ系)でプ
ロ・ンクサイズが異なっても良い。本実施例では、輝度
系Yのデータを読出してブロック化し、後段の処理系に
与えて、このY成分データについての統計処理を行わせ
、該統計処理が終了したならば、次にクロマ系Cr、C
b酸成分データについての統計処理に入るべく該クロマ
系Or、 Cb酸成分データの読出しとブロック化に入
る。クロマ系のブロック化は、最初にCr成分の画像デ
ータについてすべてのブロック化を行い、その後に、C
b酸成分画像データをブロック化して行くものとする。
4は直交変換回路であり、ブロック化されて入力された
各画像データを受けて、この画像データに対し、各ブロ
ック毎に2次元の直交変換を行うものである。直交変換
としてはコサイン変換、サイン変換、フーリエ変換、ア
ダマール変換などが使用できる。直交変換を行うことに
より、変換係数としての画像データが得られる。
6は量子化回路であり、前記直交変換回路4の出力する
画像データ(変換係数)を受けると、第1回目の量子化
では予め設定された各周波数成分毎の量子化幅に、撮影
モードに応じて予め設定された量子化幅係数αを掛けて
補正した量子化幅で、変換係数の量子化を行い、第2回
目では前回の処理により決定された最適量子化幅係数α
を用いて量子化を行う構成としである。
8はエントロピー符号化回路であり、エントロピー符号
化回路8は量子化回路6の出力する前記量子化出力をエ
ントロピー符号化(可変長符号化)するものである。エ
ントロピー符号化としてはハフマン符号化、算術符号化
などを利用する。
エントロピー符号化は可変長符号化であるために、ブロ
ック毎の符号量画像全体の符号量などが画像毎に変化す
る。どのようなエントロピー符号化を用いるかは本発明
とは直接関係が無いが、ここではハフマン符号化を使用
した一例を示すこととする。
エントロピー符号化回路8では、入力した量子化された
変換係数を第5図に示す順序でスキャンするジグザグ・
スキャンと呼ばれる手、法により、低い周波数成分から
高い周波数成分への走査を行う。第5図の走査順序の 
1番目の直流成分[DC]のデータは、直前にエントロ
ピー符号化を行ったブロックの直流成分との差分値をハ
フマン符号化して出力する。交流成分[ACIについて
は第5図の走査順序の2番目から64番目まで順番に変
換係数を見て行き、変換係数が0でない(すなわち、有
効な)係数が出て来たらその直前に存在した連続した0
(無効)の係数の数(ゼロラン)とその有効係数の値と
で2次元のハフマン符号化して出力すると云った動作を
する。また、ある係数以降64番目の係数まで連続して
無効係数が続く場合はブロックの終りを示すEOB  
(エンド・オプ・ブロック)の符号を出力する。また、
打ち切り信号が入力されると符号化を終了し、EOBを
付加して出力する。そして、そのブロックについて発生
した符号量を符号量算出回路14に出力する。
符号量算出回路14は入力されたY% Cr、Cb各成
分の各ブロック毎の符号量とその符号量の積算を行い、
Ys Cr、Cb各成分の各ブロック毎の符号量データ
の収集と画像全体の符号量を計算し、この画像全体の符
号量のデータについて量子化幅予測回路12に出力する
と共に、各ブロック毎の符号量と画像全体の符号量のデ
ータについては符号量割当て回路20に出力する構成と
しである。
量子化幅予測回路12は第1バス目の開始にあたり制御
回路18から目的とする符号量の情報を受け、この符号
量情報から後述する式(1)の関係を用いて量子化幅係
数αの初期値を設定し、量子化回路6に出力し、第2パ
ス目の開始に先駆けて、符号量算出回路14から入力さ
れた画像全体の符号量と、1画像当りの許容される最大
のデータ量である目標符号量とから、例えば、ニュート
ンーラブラン法(Newton−Raphson 1t
eration)を用いて1目標符号量に近づけるのに
最適な量子化幅係数αを、今回実際に使用した量子化幅
係数を勘案して予測するものである。
また、符号量割当回路20は符号量算出回路14から入
力された各ブロック毎の画像データの符号量、画像全体
の符号量と、目標符号量とから各ブロックの割当符号量
を算出して符号化打切回路16にaカするものである。
ここでの算出の方法は、例えば、各ブロック毎の符号量
の比で、目標符号量を比例配分する。
例えば、あるブロックの符号量と目標符号量との乗算を
行い、それを画像全体の符号量で割ることにより、その
ブロックの割当符号量を決定する。
符号量割当回路20は符号量情報テーブルとブロック割
当符号量データテーブルとを持ち、符号量情報テーブル
における該当ブロック位置の符号量情報を符号量算出回
路14から入力された符号量情報に書き替える一方、符
号量算出回路14から入力された各ブロック毎の符号量
および画像全体の符号量と、目標符号量とから各ブロッ
クの割当符号量を算出し、この算出した各ブロックの割
当符号量のデータをブロック割当符号量データテーブル
に格納する。
このブロック割当符号量データテーブルの各ブロック別
割当符号量は、該当のブロックがエントロピー符号化処
理される際に符号化打切回路16に与えられる。
符号化打切回路16は、符号量割当回路20からの各ブ
ロックの符号量を割当符号量から減算し、割当符号量の
残りが送出すべき符号量とEOBの符号との合計符号量
より小さくなった場合には打切り信号を出力してエント
ロピー符号化回路8に与え、そのブロックの符号化を終
了させると云った機能を有する。
従って、符号化打切回路16ではこの割当符号量を参照
し、入力された送出すべき符号量およびEOBの符号を
送出しても割当符号量を越えない場合は、打切りは行わ
れず、そのブロックの符号化を終了し、該ブロックの割
当符号量から送出すべき符号量を減すると云った動作を
行う。
10は符号出力回路であり、この符号出力回路10はエ
ントロピー符号化回路8より入力される可変長の符号を
つなぎ合わせるもので、この繋ぎ合わせた符号をメモリ
カード等の記録媒体にて構成される記録系22に書き込
むように機能する。
本システムでは撮影モードに応じて定めた初期時用標準
の量子化幅係数αを使用して最初に統計処理を行い(第
1バス)、最適化するに必要なブロック毎の情報量や画
像全体の情報量等を調べ、次にこの統計処理により得た
情報をもとに最適化された符号化を行うための処理に入
る(第2パス)。
そのため、最初に画像のブロック化、このブロック化さ
れた画像の要素に対する標準の量子化幅係数αを使用し
ての量子化、量子化により得られた変換係数のエントロ
ピー符号化、そして、このエントロピー符号化により得
られる各ブロックの各要素の符号量情報と画像全体の符
号量情報より最適な符号量にするに必要な符号化部係数
aの予測、各ブロックの各要素における割当符号量の決
定、これらに基づく処理対象画像への最適符号化の処理
モードへの移行、この処理モードの実施における画像の
ブロック化処理、このブロック化された画像の要素に対
する前記予測量子化幅αを使用しての量子化処理、この
量子化により得られた変換係数のエントロピー符号化、
処理対象画像の全符号の保存のための出力処理と云った
手順を実施させるが、その全体の制御管理は図における
制御回路I8により行うように1−であるものとする。
尚、制御回路18のこのような機能はマイクロプロセッ
サ(CPU)を使用することで容易に実現できる。
次に上記構成の本装置の作用を動作遷移図である第4図
を参照して説明する。
撮影を行うと、撮影レンズの後方におがれた撮像デバイ
ス上に被写体像が光学像として結像される。そして、こ
の撮像デバイスはこの結像された光学像を画像信号に変
換し7て出力する。撮像デバイスにより得られた画像信
号はプロセス回路に送られ、ここでY成分、C「成分(
1?−Y成分)、Cb酸成分 B−Y成分)の各色成分
の信号に分離されると共にガンマ補正やホワイトバラン
ス処理等が行われる。
プロセス回路より出力された各色成分の画像信号のうち
、Y成分はA/D変換後に画像データバッファメモリの
Y成分領域に記憶され、また、Cr。
cb酸成分A/D変換に後に画像データバッファメモで
はまず初めに画像データバッファメモリのY成分データ
を読出し、ブロック化回路により、1フレ一ム分(若し
くは1フイ一ルド分)の画像データを、所定の大きさの
ブロックに分割する。すなわちブロック化を行う。ここ
では例としてブロックサイズは8×8とする。本実施例
では、撮像系2はY成分(輝度成分)について読出しを
行い、これについての後段での処理(統計処理)が済ん
だ後に、次にCr成分の画像データについて総てのブロ
ック化を行い、これについて後段での統計処理を行い、
その後に、Cb酸成分画像をブロック化し、これについ
て後段での統計処理を行ってゆくと云った処理を行う。
像 撮r系2のブロック化回路によりブロック化された各ブ
ロックの画像データは、直交変換回路4に与えられる。
すると、直交変換回路4はブロック化された入力画像デ
ータ(以下、ブロック画像データと呼ぶ)に対し、各ブ
ロック毎に例えば、離散コサイン変換(DCT)による
2次元の直交変換を行う。このDCTによる直交変換と
云うのは、ある波形を周波数成分に分割し、これを入力
サンプル数と同じ数だけのコサイン波で表現すると云っ
た処理である。
そして、直交変換されたブロック画像データ(変換係数
)は8×8のマトリックスの対応する周波数成分位置に
格納され(マトリックスの原点位置が直流成分、それ以
外は交流成分で原点位置より離れるに従い周波数が高く
なるような関係を持たせたマトリックスに格納する)、
これが量子化回路6に入力される。
すると量子化回路6はこのプロ・ツク画像データ(変換
係数)に対して1パス目(第1回目)の量子化を行う。
この第1回目の量子化では、予め設定された各周波数成
分毎(周波数成分はプロ・ツクの各マトリックス位置に
対応して決まる)の量子化マトリックスに、制御回路1
8より与えられる標準(暫定)の量子化幅係数αを掛け
た量子化幅で、変換係数の量子化を行う(第4図(hl
 、 i))。
この時の量子化マトリックスは輝度系とクロマ系とでそ
れぞれで同じであっても良いが、それぞれに適した量子
化マトリックスを設定する方が良い結果が得られる。
量子化されたブロック画像データ(変換係数)はエント
ロピー符号化回路8に入力され、ここで、エントロピー
符号化される。エントロピー符号化回路8では量子化さ
れて入力された変換係数を第5図に示す順序でジグザグ
スキャンし、低い周波数成分から高い周波数成分への走
査を行う。すなわち、変換係数は8×8のマトリックス
に周波数成分に対応して格納されており、原点に近いほ
ど、周波数が低いので、ジグザグスキャンすることで低
い周波数成分から高い周波数成分へと走査できる。
第5図の走査順序の1番目のデータは直流成分DCであ
るから、この直流成分DCのデータは直前にエントロピ
ー符号化を行ったブロック(一つ前のブロック)の直流
成分DCとの差分値diff’−DCをハフマン符号化
する(第4図(di)、 (el))。交流成分ACに
ついては第5図の走査順序の2番目から64番目まで順
番に変換係数を見て行き、変換係数が0でない(すなわ
ち、有効な)係数が出て来たらその直前に存在した連続
した0(無効)の係数の数(ゼロラン)とその有効係数
の値とで2次元のハフマン符号化を行う((d2)、 
(e2))。
また、エントロピー符号化回路8は、ある係数以降64
番目の係数まで連続して無効係数が続く場合はブロック
の終りを示すEOB  (エンド・オブ・ブロック)の
符号を与える。
そして、そのブロックについて発生した符号量を符号量
算出回路14に出力する(gl)。そして、1画像分の
全ブロックについてこのような処理を実行して行く。
一方、符号量算出回路14は入力されたYSCrscb
各成分の1画像全体の符号量の計算をすべく、Y、 C
r5Cb各成分の各ブロック毎の符号量の算出とその符
号量の積算を行う(g2)と共に、各ブロック毎の符号
量のデータは符号量割当回路20に出力する。符号量割
当回路20はこの各ブロック毎の符号量のデータを符号
量情報テーブルにおける該当ブロック位置の符号量情報
として書き込む。
そして、1画像分の全ブロックについてハフマン符号化
の処理を終了した段階で、制御回路18の制御により符
号量算出回路14は、この画像全体の符号量のデータを
量子化幅予測回路12に出力すると共に、画像全体の符
号量のデータを、符号量割当回路20に出力する。
量子化幅予測回路12はこの入力された画像全体の符号
量データと目標符号量データとから、例えばSNewt
on−Raphson Iteration法を用いて
、目標符号量の値に近づけるのに最適な量子化幅係数α
を、実際に使用した量子化幅係数に基づいて予測する(
第4図(h2))。
また、符号量割当回路20は入力された各ブロック毎の
符号量および画像全体の符号量と、目標符号量とから各
ブロックの割当符号量を、例えば各ブロック毎の符号量
の比で、目標符号量を比例配分する等して算出する(第
4図(ha))。具体的には、あるブロックの割当符号
量を決定するには、当該ブロックの符号量と目標符号量
とを乗算し、それを画像全体の符号量で割ることで得た
結果を以て割当符号量とする。そして、この算出した各
ブロックの割当符号量のデータをブロック割当符号量デ
ータテーブルに格納する。このブロック割当符号量デー
タテーブルの各ブロック別割当符号量のデータは、該当
のブロックがエントロピー符号化処理される際に符号仕
打切回路16に与えられることになる。
以上で1パス目、すなわち、各ブロックの割当符号量の
決定及び量子化幅の最適化のための第1の符号化(統計
処理)を終了する。
次に2バス目の処理に入る。この2ノずス目の処理は、
第2の符号化(符号化処理)であり、目標符号量に収ま
るように最適化した最終の符号化出力を得る処理である
この処理はまず、Y成分について行い、Y成分が終了し
た後にCr、 Cb酸成分ついて行うようにする。すな
わち、初めに撮像系2における画像データバッファメモ
リに記憶されているY成分(輝度系)の画像データを読
出してブロック化回路に入力し、再びブロック化を行う
(a)。ブロック化された画像データは直交変換回路4
に入力され、再び直交変換が行われる(b)。この直交
変換により得られた変換係数は量子化回路6に入力され
、再び量子化が行われる(C)。ただし、このとき使用
する量子化幅係数αは前回のパスにおいて量子化幅予測
回路12が算出した予測の最適量子化幅係数αである。
次に、量子化したブロック画像データの変換係数は、エ
ントロピー符号化回路8に入力される。エントロピー符
号化は統計処理の時と同様、このブロック画像データの
変換計数のうち、まず直流成分DCの差分値diff−
DCをハフマン符号化しく (di)、  (el))
 、次に交流成分ACをジグザグスキャンで順次データ
抽出して2次元のハフマン符号化を行う((d2)、 
 (e2))。
但し、一つの要素(マトリックス内の一つの位置)に対
するハフマン符号が発生する度に符号量割当回路20か
ら、そのブロック割当符号量データテーブルに格納され
ている当該要素位置における送出すべき割当符号量を符
号化打切回路16に出力し、一方、符号化打切回路16
ではこの各ブロックの割当符号量をもとに、送出すべき
符号量およびEOBの符号を送出しても割当符号量を越
えない場合は、打切り信号を発生せず、該ブロックの割
当符号量から送出すべき符号量を減する処理を行う。そ
して、送出すべき該ブロックの符号量とEOBの符号と
の合計の符号量が割当符号量の残りの符号量を上まわっ
たときに、符号化打切回路16はエントロピー符号化回
路8に打切り信号を出力し、そのブロックのハフマン符
号化を終了させる。
そして、エントロピー符号化回路8は量子化回路6より
得られる次のブロックのハフマン符号化に移る。
従って、エントロピー符号化回路8は符号化打切回路1
6から打切り信号が入力されるまで、変換されたハフマ
ン符号を、符号出力回路10に出力し、打切り信号発生
前にマトリックスのすべての要素に対するハフマン符号
化が終わった場合には、エントロピー符号化回路8はE
OBの符号を符号出力回路10に出力する。また、エン
トロピー符号化回路8はマトリックスのすべての要素に
対する!Xフマン符号化が終わらない前に打切り信号が
入力された場合には、その符号のかわりにEOBの符号
を符号出力回路10に出力することになる。符号出力回
路lOではこの符号化されたデータを一時記憶する。
そして、エントロピー符号化回路8は量子化回路6より
得られる次のブロックのl\フマン符号化に移る。
このような動作を繰り返し、1画面の画像の全ブロック
の処理が終わることにより、全ての符号化処理を終了す
る。Y成分に対するこのような処理が終ると、次に同様
の手法でクロマ系成分(Cr、 Cb)の処理に入る。
クロマ系成分の処理でも量子化回路6は前回のバスにお
いて量子化幅予測回路12が算出した予測の最適量子化
幅係数αを使用する。
クロマ系成分について、1画面分の画像の全ブロックの
上記2バス目の処理が終わることにより、全ての符号化
処理を終了する。
この終了にあたり、符号出力回路10では最適化された
1画像分のハフマン符号化データを記録系22に出力し
、記録系22におけるメモリカードと云った記憶媒体に
書き込む(f’)。これは、符号出力回路lOの出力に
より行われるが、符号出力回路10はエントロピー符号
化回路8からの可変長のハフマン符号をつなぎ合わせ、
記憶媒体に与えることで書き込む。この符号出力回路1
0の出力による記憶媒体への書き込みは、第2パスが終
わった段階でまとめて行うようにしても良いが、第1バ
スが終って第2パス実行に入った段階で可変長のハフマ
ン符号をつなぎ合わせた結果が、1バイト若しくは数バ
イト単位、まとまり次第、順次、記憶媒体へ書き込むよ
うにしても良い。
尚、これに先立ち、符号出力回路10では符号化に使用
した最適量子化幅係数αを当該符号化した画像の記憶デ
ータにおけるヘッダ部分に書き込み、再生時の手掛かり
として残す。
以上、本装置においては、暫定的な量子化幅を用いて統
計処理を行い、そのデータをもとに最適な量子幅を予測
することにより、符号化処理における符号量を目標の符
号量に近づけると共に、更に各ブロックの割当符号量を
決定することにより符号化処理における符号量が目的の
符号量を越えないようにしたものであり、この点が本発
明の重要なポイントとなっている。よって、本実施例で
使用したブロックサイズ、直交変換の種類、エントロピ
ー符号化の種類などに限定されるものではない。また画
像データバッファメモリは直交変換回路4と量子化回路
6との間にあっても良く、むしろこのようにすると符号
化処理におけるブロック化と直交変換のプロセスを省略
できる。しかし、精度を保つためには、この場合、画像
メモリのサイズか大きくなる。また、プロセス処理も、
A/D変換の前に行うようにし、その後にディジタル化
するようにしても構わない。また、本装置においては、
ブロック毎のエントロピー符号化を低周波成分側より行
い、画質への影響の比較的小さい高周波成分は割り当て
符号量に余裕のある範囲で符号化して利用するようにし
ているので、画質の劣化を最小限に抑えて、しかも、高
圧縮で符号化できるようになる。
以上、詳述した第1図の構成の本発明は、要するに、第
1パスの暫定的な量子化幅として目的符号量から設定し
た最適な量子化幅に近い量子化幅を用いて第1バスの量
子化を行い、その結果、得られた符号量データを用いて
さらに最適な量子化幅を予測し、これを最終処理である
第2バスにおける符号化に使用すると云うものである。
これは、目的符号量に近い符号量が得られる量子化幅係
数αを用いて統計処理すると、早く、しかも、より精度
良く、最適量子化幅係数αを見付けることができること
を利用したものであり、暫定的な量子化幅係数として、
目的符号量に基づいて設定した最適な量子化幅に近い量
子化幅係数を用いて第1パスの量子化を行い、これによ
り得た総符号量から目的符号量に収めることができる量
子化幅係数を知って、これを第2バス目で使用して最終
的な符号化を行うようにしたものである。
そして、これにより、画像データを短い時間で、精度良
く目的符号量の枠一杯に符号化し、これによって、許さ
れる符号量に目一杯近付けることができることで、失う
データを最小限にとどめ、画質も維持できるようにする
と云うものであり、予測精度が高く、符号化による画質
劣化の少ない、すなわち、高画質の量子化を行うことが
できる。
ここで、暫定的な量子化幅係数を如何にして最適な値に
するかが、重要な課題となるので、この点について少し
説明する。
画像データを前処理し、この出力を量子化し、この量子
化出力を可変長符号化する場合、この量子化の量子化幅
を変化させることにより、発生する符号量が変化するこ
とは周知の事実である。これは、ハフマン符号化に代表
される可変長符号化は、符号化するデータの発生確率の
偏りを利用してそのデータを表現するのに必要な符号量
を減少させるものであり、前記[量子化幅を変化させる
」と云うことは、量子化値の発生確率を変化させること
でもあるから、量子化幅を変化させることにより発生符
号量も変化することがわかる。
ところで、同じ量子化幅で同一の符号化を行っても、そ
のときの画像データによって発生符号量は異なる。しか
し、1つの画像データに対して量子化幅を変化させて同
一の符号化を行った場合は量子化幅と、発生符号量との
間には一定の関係が得られる。また、多くの画像データ
で量子化幅と発生符号量の関係を求めると、最も発生頻
度の高い関係が統計的に得られることが明らかになった
具体的には多くの場合、次の関係が得られた。
すなわち、ある量子化幅に対する相対的な比をSFとし
、発生符号量1画素あたりのビット数(ビ・ソトレート
)で表わしてこれをBRとすると、log  BR−a
  X  log  SF+b         −(
1)なる関係になる。aは同一の符号化であれば、画像
によらず略一定であり、bは画像に依存する。
このbの値は画像により、一定の分布を持ち、この発生
頻度分布から代表的なりが得られる。
以上、−例をあげて説明をしたが、いずれに蛋 せよ、本発明の特ダは量子化幅と符号量との関係を利用
して目的の符号量に応じて量子化幅を設定すると云うと
ころにある。
上述した第1図の構成では、圧縮符号化において、一連
の処理を第1バスおよび第2バスの二回で完成させるも
ので、第1バスにより最適αを見付けるようにするもの
である。第1図においては、第1バスでの信号の流れを
点線の矢印■で、また、第2バスでの信号の流れを実線
の矢印■でそれぞれ図示しである。この信号の流れに沿
ってざっと動作を追ってみると次のようになる。
画像データの符号化が行われるに当り、目的とする符号
量が制御回路18内に設定される。撮像系2内の撮像素
子から出力された画像データはディジタル信号に変換さ
れ、8×8画素のブロック化等の処理が行われた後、直
交変換回路4に入力され、ブロック毎に直交変換(本例
ではDCT ;予測符号化(DPCM)でも良い)が行
われる。直交変換回路4で得られたDCT変換変換係数
は量子化回路6に入力され、一方、制御回路18から目
的とする符号量が量子化幅予測回路12に出力され、量
子化幅予測回路12では目的の符号量から式(1)の関
係を用いて量子化幅係数αの初期値を設定し、量子化回
路6に出力する。量子化回路6では、人力された量子化
幅係数αを用いて、変換係数を線形量子化する。量子化
された変換係数はエントロピー符号化回路8に入力され
、可変長符号化(本例ではハフマン符号化)が行われる
ここで入力された量子化係数は、ジグザグスキャンと呼
ばれる低周波数成分から高周波数成分への走査が行われ
、一番目の直流成分のデータは直前に可変長符号化を行
ったブロックの直流成分との差分値がハフマン符号化さ
れて出力される。
交流成分については走査順序の2番目から64番目まで
順番に変換係数を見てゆき、変換係数が0てない(すな
わち、有効な)係数か出てきたら、その直前に存在した
連続した0(零;無効)の係数の数(ゼロラン)とその
有効係数との値で、2次元のハフマン符号化が行われる
。また、ある係数以降、64番目の係数まで、連続して
無効出力か続く場合には、ブロックの終りを示すEOF
  (エンド・オブ・ファイル)の符号を出力する。可
変長符号化回路8は、以上のような符号化か各プロ・ツ
クで終了する毎に、そのブロックで発生した符号量を符
号量算出回路14に出力する。−画像について、符号化
が終了すると、符号量算出回路14は入力されたブロッ
ク毎の符号量を累積して画像全体の符号量を総符号量値
として算出する。この総符号量値は量子化幅予測回路1
2に出力され、また、各ブロック毎の符号量及び画像全
体の符号量割当回路20に出力される。
以上の第1バスの符号化処理が終了すると、続いて同じ
画像データに対して第2パスの符号化処理が行われる。
第2パスでは撮像系2内のメモリから読み出された画像
データはディジタル信号に変換され、8×8画素のブロ
ック化等の処理が行われた後、直交変換回路4に入力さ
れ、ブロック毎に直交変換され、これにより、直交変換
回路4で得られたDCT変換変換係数は量子化回路6に
入力される。
一方、量子化幅予測回路12では第1バスの符号化によ
り求められた画像符号量と、制御回路18から与えられ
た目的符号量とから、より適した量子化幅係数αを予測
]7、量子化回路6に出力する。
撮像系2内のバッファメモリから画像データが再び直交
変換回路4に入力され、ブロック毎にDCTが行われる
。得られた変換係数は量子化回路6において、予測され
た量子化幅を用いて線形量子化される。量子化された係
数は可変長符号化回路8に入力され、第1バスの符号化
時と同様の方式でハフマン符号化される。ここで符号化
時に発生した符号量は第1パスの符号化時に求められ、
符号量割当回路20に記憶されている各ブロックの割当
符号量との比較が行われ、これを越えた場合には符号打
切回路16の働きにより、そのブロック内でそれ以降の
符号化が打ち切られる。以上の方法により目的符号量に
制御された符号化データは順次、符号出力回路10を経
由して記録系22に出力される。
本実施例では、第1パスの暫定的な量子化幅係数αとし
て、目的符号量から設定した最適な量子化幅に近い量子
化幅係数を用いて第1パスの量子化を行うので、その結
果、得られた符号量データを用いてさらに最適な量子化
幅係数を予測することができる。このため、画質を多少
犠牲にしても、できるだけたくさんの画像を得たい場合
の低画質撮影モードや撮影枚数がたくさんとれなくとも
、画質を重視したい場合の高画質撮影モード等、目的に
応じて撮影モードを選択できるようにした撮影システム
において、それぞれのモードに応じた目的符号量内に内
輪で目一杯になるような、画像の符号量を得ることので
きる、すなわち、このような結果の得られる量子化幅係
数αを予測することができ、従って、符号化による画質
劣化の少ない、高画質の量子化の可能なシステムを提供
できる。
以上の2パス方式の実施例においては、撮影モードが低
画質、高画質等、いくつかの一定の段階的レベルのうち
の一つを選択すると共に短時間で、できるだけ最適な画
質を得るような符号化ケースには適しているが、無段階
等、任意に画質を選択できて、しかも、その範囲で最良
の画質を得られるようにするには、必ずしも十分である
とはいえない。このような要求に対してはねバス方式と
すると良い。
このnバス方式の本発明の実施例を第2の実施例として
次に説明する。
本例は第1パスの符号化を符号化により得られた符号量
が目的符号量に一致するまで、繰り返し行い、符号量を
制御するものである。
第2図にnバス方式の構成を示す。本例では前処理符号
化として予測符号化(DCPM)を行うDCPM回路2
4を使用する例を示しであるが、直交変換方式でも構わ
ない。
本例は撮像系により得られた画像信号を、DCPMと可
変長符号化を組合わせた圧縮方式によって符号化し、記
録する装置に適用したものである。
基本的には第1図の構成を踏襲するので、第1図と同一
機能を得る構成要素は同一符号を付しておく。
第2図に示すように、本装置はDCPM回路24、量子
化回路6、エントロピー符号化回路8、量子化幅予測回
路12、符号出力回路IO1符号量算出回路14、制御
回路11iaとよりなる。各バス毎に出力される撮像系
2からのブロック化された画像データ出力は、予測符号
化を行うDCPM回路24に入力され、ここで予測符号
化されて量子化回路6に入力される。
DCPM回路24は、ブロック化されて入力された各画
像データを受けて、この画像データに対し、各ブロック
毎に予測符号化を行うものである。
量子化回路6では、前記DCPM回路24の出力する画
像データ(予測符号化データ)を受けると、量子化幅予
測回路12から与えられる量子化幅係数αを掛けて補正
した量子化幅で変換係数の量子化を行う構成としである
エントロピー符号化回路8は、量子化回路6の出力する
前記量子化出力を、エントロピー符号化するものである
。エントロピー符号化は可変長符号化であるために、ブ
ロック毎の符号量画像全体の符号量などが画像毎に変化
する。どのようなエントロピー符号化を用いるかは本発
明とは直接関係が無いが、ここではハフマン符号化を使
用した一例を示しである。
エントロピー符号化回路8では、入力された量子化デー
タをジグザグ・スキャンにより、低い周波数成分から高
い周波数成分への走査を行う。
そして、第5図の走査順序の1番目の直流成分[DCI
のデータは、直前にエントロピー符号化を行ったブロッ
クの直流成分との差分値をハフマン符号化して出力する
。交流成分[AC3については第5図の走査順序の2番
目から64番目まで順番に変換係数を見て行き、変換係
数がOでない(すなわち、有効な)係数が出て来たらそ
の直前に存在した連続した0(無効)の係数の数(ゼロ
ラン)とその有効係数の値とて2次元のノ\フマン符号
化して出力すると云った動作をする。また、ある係数以
降64番目の係数まで連続して無効係数が続く場合はブ
ロックの終りを示すEOBの符号を出力する。そして、
そのブロックについて発生した符号量を符号量算出回路
14に出力する。
符号量算出回路14は入力されたY−Crs Cb各成
分の各ブロック毎の符号量とその符号量の積算を行い、
YSCr、cb各成分の各プロ・ツク毎の符号量データ
の収集と画像全体の符号量を計算し、この画像全体の符
号量のデータについて量子化幅予測回路12に出力する
構成としである。
量子化幅予測回路12は第1バス目(調査処理)の開始
にあたり制御回路18aから目的とする符号量の情報を
受け、この符号量情報から後述する式(1)の関係を用
いて量子化幅係数αの初期値を設定し、量子化回路6に
出力し、次のバスの開始に先駆けて、符号量算出回路1
4から入力された画像全体の符号量と、1画像当りの許
容される最大のデータ量である目標符号量とから、ニュ
ートンラブラン法等を用いて、目標符号量に近づけるの
に最適な量子化幅係数αを、今回実際に使用した量子化
幅係数を勘案して予測するものである。
符号出力回路lOはエントロピー符号化回路8より入力
される可変長の符号をつなぎ合わせるもので、この繋ぎ
合わせた符号をメモリカード等の記録媒体にて構成され
る記録系22に書き込むように機能する。
制御回路18aは画質設定値(1画像あたりの収めるべ
き目標の符号量データの符号量)を設定されると、最初
のパス実行開始に先駆けて、該目的の符号量を量子化幅
予測回路12に入力し、以後は一画像についての第1バ
ス(調査処理)実行が終了する毎に符号量算出回路14
が算出した総符号量を受け、これと目的符号量とを比較
すると共に、両者が一致しない時には再度量子化幅係数
αの予測を行うべく、量子化幅予測回路12に指令し、
再び、調査処理(第1バス)を行うようにシステムを制
御し、また、総符号量が目的符号量に十分近付き、且つ
、目的符号量以内になった時はこのときの量子化幅係数
αの予測値を使用して、第2バスの符号化(符号化処理
)を実施するよう、システムを制御すると云った機能を
有する。
本システムでは任意の画質設定値を制御回路18aに与
えると、これに応じて定まる初期時用標準の量子化幅係
数αを使用して第1回目の調査処理を行い(第1バス)
、この結果、得られた総符号量が、目的符号量に対し、
内輪で略目−杯に近い値に達しているか否かを調べ、達
していなければ、そのときに使用していた量子化幅係数
αを酌量して新たな最適化するに必要な量子化幅係数α
を求めて、第2回目の調査処理を行い(第1バス)この
結果、得られた総符号量が、目的符号量に対し、内輪で
略目−杯に近い値に達しているか否かを調べ、達してい
なければ、そのときに使用していた量子化幅係数αを酌
量して新たな最適化するに必要な量子化幅係数αを求め
て、第3回目の調査処理を行い(第1バス)、・・・ 
と云った制御を繰り返し、総符号量が目的符号量に対し
、内輪で略目−杯に近い値に達したならば、そのときの
量子化幅係数αを使用して最終的な符号化処理(第2バ
ス)を実行させるべく制御する。
総符号量が、目的符号量に対し、内輪で略目−杯に近い
値に達しているか否かの判断の基準は、目的符号量に対
する割合を90%とか95%とかと云った具合に定め、
その容量内に収まったか否かで決定する。この割合を1
00%に近付ける程、画質はその目的符号量下で得られ
る最良のものとなるが、最適値に収束するまでの繰り返
し回数が多くなり、遠ざけると画質は低下するが、早く
収束することになる。
次に上記構成の本装置の作用を具体的に説明する。Y成
分、Cr、 Cb酸成分画像データはY成分の符号化処
理が終了した後、Cr、 Cb酸成分符号化処理を行っ
て最終的に1画像分の圧縮符号化データを得、記憶媒体
に記憶する。このような処理にあたり、画像データは第
1図の場合と全く同様にしてブロック化され、DPCM
回路24でDPCMの前処理が成された後、この前処理
された画像データは量子化回路6に入力される。
最初の段階では制御回路18aは、この処理開始前に設
定された条件に基づく目的符号量のデータを、量子化幅
予測回路12に与え、システムに対し、処理を開始させ
るので、量子化幅予測回路12はこの目的符号量のデー
タに合せ、前記式(1)に基づく標準的な量子化幅予測
係数αを求めて量子化回路6に与える。従って、量子化
回路6はこの与えられた標準的な量子化幅予測係数αを
使用して、前処理されて入力された各ブロック化データ
に対し、量子化を行う。この量子化されたデータはエン
トロピー符号化回路8により、エントロピー符号化され
、符号量算出回路14に送られる。符号量算出回路14
はこの送られてきたエントロピー符号化データの符号量
を積算し、1画面分が終了した段階でこの積算値(総符
号量)を量子化幅予測回路12と制御回路18aに与え
る。制御回路18aは、得た総符号量を目的符号量と比
較し、両者が許容範囲内で一致しない時には再度量子化
幅係数αの予測を行わせるべく、量子化幅予測回路12
に指令し、且つ、システムに対しては再度の調査処理を
行うべく指令する。指令を受けた量子化幅予測回路12
では符号量算出回路14から得た総符号量をもとに目的
符号量に近付けるに必要な量子化幅係数αの予測を行い
、得られた新たな量子化幅係数αの予測値を量子化回路
6に与える。
撮像系では再び画像データをブロック化して順に送り出
してくるので、これをDPCM回路24でDPCMの前
処理し、この前処理された画像データは量子化回路6に
与えられてここで新たな量子化幅係数αによる量子化が
行われる。この量子化されたデータはエントロピー符号
化回路8により、エントロピー符号化され、符号量算出
回路■4に送られる。符号量算出回路14はこの送られ
てきたエントロピー符号化データの符号量を積算し、1
画面分が終了した段階でこの積算値(総符号量)を量子
化幅予測回路12と制御回路18aに与える。制御回路
18aは、得た総符号量を目的符号量と比較し、両者が
許容範囲内においても一致しない時には、再度量子化幅
係数αの予測を行わせるべく、量子化幅予測回路12に
指令し、且つ、システムに対しては再度の調査処理を行
うべく指令する。そして、上述のような動作を繰り返す
得た総符号量と目的符号量との比較の結果、両者が許容
範囲内で一致したときは、調査処理を終了させ、制御回
路18aはそのときの量子化幅係数αを使用して最終的
な符号化処理(第2パス)を実行させるべく制御する。
これにより、撮像系では再び画像データをブロック化し
て順に送り出してくるので、これをDPCM回路24で
DPCMの前処理し、この前処理された画像データは量
子化回路6に与えられ、ここで先の最終調査処理で使用
した量子化幅係数αを用いての最適な量子化幅で線形量
子化が行われる。この量子化されたデータはエントロピ
ー符号化回路8により、エントロピー符号化(可変長符
号化;圧縮符号化)され、符号出力回路10に送られる
二のような処理をCr、 Cb酸成分ついても実施した
後、1画像分全ての符号化データが符号出力回路10に
揃った段階で符号出力回路1oはこの符号化データを記
録系に出力し、記録媒体に書き込む。
このように量子化回路6では、前記DCPC同月24の
出力する画像データ(予測符号化データ)を受けると、
第1回目の量子化では予め設定された各周波数成分毎の
量子化幅に、目的符号量に応じて上記式(1)により定
まる条件下で決定される量子化幅係数αを掛けた値で変
換係数の量子化を行い、第2回目以降では前回の処理に
より決定された最適量子化幅係数αを用いて量子化を行
い目的符号量内に収まる最適量子化幅係数αを探す調査
処理を繰り返す構成としてあり、この調査処理で目的符
号量に十分近付けた段階で、最終的な符号化処理を行い
、圧縮符号化するので、目的符号量が任意の値であって
も、その符号量において最良の画質を維持できる圧縮符
号化が可能になり、また、初期の量子化幅係数αとして
目的符号量に合せた標準的な最良の量子化幅係数αを求
めて符号化を開始するので、内輪で目的符号量に近い符
号量を得ることのできる量子化幅係数αを早く見付ける
ことができ、短い時間で最良の画質が確保できる圧縮符
号化が可能になる。特に最初の暫定的な量子化幅を与え
る量子化幅係数として目的符号量から設定した最適な量
子化幅に近い量子化幅を与えることができる量子化幅係
数を用いたことにより、最適量子化幅を得ることのでき
る量子化幅係数が最適値に速やかに収束することになり
、このため、符号化に要する処理時間を少なくすること
ができて、しかも、目的の符号量の範囲内で最良の画質
が確保できる圧縮符号化が可能になる。
要するに、上述の第2の実施例は、第1バスの符号化を
符号化により得られた符号量が目的符号量に一致するま
で、繰り返し行い、符号量を制御するものであり、本例
では符号化された画像データは第1の実施例と同様の動
作により、第1バスの符号化を行い、−画像についての
処理が終了する毎に、総符号量が制御回路18aにも出
力して、ここで目的符号量と比較し、両者が一致しない
時には再度量子化幅係数αの予測を量子化幅手IT!1
回路12で行い、再度第1バスの符号化(統計処理)を
行い、総符号量が目的符号量に十分近付き、月つ、目的
符号量以内になった時は制御回路18aは、第2バスの
符号化(符号化処理)に切り替えて、DPCM回路24
でDPCMの前処理が成された画像データを量子化回路
6にて前記目的符号量以内になった時の最適な量子化幅
で線形量子化し、可変長符号化して最終出力とすると云
うものである。
以上の例において、最初の暫定的な量子化幅を与える量
子化幅係数として目的符号量から設定した最適な量子化
幅に近い量子化幅を与えることができる量子化幅係数を
見付けて用いることにより、量子化幅が最適値に速やか
に収束する。このため、符号化に要する処理時間を少な
くすることができる。
尚、第2バスの符号化処理は、第1バスの最終回の処理
で得られる可変長符号化データを流用するようにしても
良い。
以上2つの実施例を示したが、本発明は目的符号量が与
えられると、その符号量を得るに必要な量子化幅係数α
を目的符号量から算出して、符号化に使用する点にあり
、これによって最初から目的符号量に近い符号量が得ら
れることに着目して、1回のバスで略最適値にする例を
第3の実施例として示す。
本例は第1バスの符号化1回のみ行うもので第1バスの
みで最適値にするものである。第3図に構成を示す。本
例では前述の実施例と同一の構成要素については、同一
符号で示し、説明は省略する。
本システムでは任意の画質設定値を制御回路]、8aに
与えると、これに応じて定まる標準の量子化幅係数αを
使用して符号化を行うもので、画像データは直交変換(
DCPMでも可)による前処理がなされ、一方、制御回
路18aから与えられる目的符号量から量子化幅予測回
路工2は標準の量子化幅係数αを算出してこれを量子化
回路6に与え、量子化回路6はこの設定された量子化幅
係数αで補正した量子化幅で線形量子化を行う。この量
子化された変換係数はエントロピ符号化回路8てエント
ロピ符号化され、符号出力回路10に出力される。
そして、この符号化された出力は符号出力回路1゜より
記録系に送られて記録媒体に記録される。
上記の例のように、−回のみのバスで符号化する場合で
も、量子化幅を目的符号量に基づいて設定するようにし
たことにより、最適な量子化幅に近くなり、得られる符
号量をおおよそ目的符号量と一致させることができる。
そして、この場合、処理は一回で終わるので、極めて高
速で符号化を行えるようになる。
以上の各実施例では目的符号量から量子化幅を設定して
いたが、複数の目的符号量をモードで切換えて使用する
ようなアプリケーションにおいては、それぞれのモード
に対応する量子化幅を予め用意しておき、これをモード
で切り換えて使用するようにしても勿論差支えない。
本発明によれば、目的の符号量を変化させても、発生符
号量を目的の符号量に近付けるのに最適な量子化幅が得
られる。この量子化幅を用いて量子化することにより、
1回の符号化処理のみで符号化を終了する場合(1バス
方式)でも、得られる符号量を目的の符号量に近付ける
ことができ、2回の符号化処理で符号量を制御する2バ
ス方式では、第一回目の符号化処理(統計処理)におけ
る暫定的な量子化幅を用いて得た符号量に基づいて量子
化幅を補正するので、最適量子化幅の予測精度を向上さ
せる効果があり、高画質の符号化が行えるとともに、総
符号量が十分目標値に近付き、また、目的の符号量以内
になるまで、符号化処理と最適な量子化幅の予測を繰り
返すnパス方式では第1バスでの符号化処理(統計処理
)において、符号量を目標値に収めるに最適な量子化幅
を見付けるまでの(量子化幅が最適値に収束するまでの
)繰り返し回数が少なくなり、符号化に要する処理時間
が短くなると云う効果が得られる。
尚、本発明は上記し、且つ、図面に示す実施例に限定す
ることなくその要旨を変更しない範囲内で適宜変形して
実施し得るものであり、本発明はスチル画像に限らず動
画像等、種々の画像に対しての圧縮符号化に適用できる
ものである。
〔発明の効果〕
以上詳述したように、本発明によれば、目的符号量を変
えても、それに対応して符号量が目的符号量に近くなる
と共に、その目的符号量の範囲で最良の画質を得ること
ができる画像データの符号化装置および符号化方法を提
供できる。
【図面の簡単な説明】
第1図は本発明の第1の実施例を示すブロック図、第2
図は本発明の第2の実施例を示すブロック図、第3図は
本発明の第3の実施例を示すブロック図、第4図は本発
明の原理的な作用を説明するための動作遷移図、第5図
は8×8画素に分けられたブロックのジグザグ・スキャ
ンを説明するための図、第6図は従来技術を説明するた
めの動作遷移図である。 6・・・量子化回路、8・・・エントロピー符号化回路
、lO・・・符号出力回路、12・・・量子化幅予測回
路、14・・・符号量算出回路、16・・・符号打切回
路、18.18a・・・制御回路、20・・・符号量割
当回路、24・・・DCPM回路。 第 図 第 図 第 図

Claims (6)

    【特許請求の範囲】
  1. (1)直交変換もしくは予測符号化等を行う画像情報圧
    縮手段により画像データを前処理した後、量子化手段に
    より量子化し、この量子化出力を可変長符号化手段によ
    り可変長符号化する符号化装置において、 収めるべき総符号量の情報を与える手段と、この情報に
    基づき、該収めるべき総符号量の枠に対応した量子化幅
    の予測を行って該予測した量子化幅の情報を前記量子化
    手段に与える量子化幅予測手段とを設けると共に、 前記量子化手段は量子化幅の情報を受けてその量子化幅
    で前記前処理済み画像データを量子化する構成とするこ
    とを特徴とする画像データの符号化装置。
  2. (2)直交変換もしくは予測符号化等を行う画像情報圧
    縮手段により画像データを前処理した後、量子化手段に
    より量子化し、この量子化出力を可変長符号化手段によ
    り可変長符号化する符号化装置において、 可変長符号化手段の出力を受け、画面単位の総符号量を
    求めてこれを算出符号量情報として出力する符号量算出
    手段と、 収めるべき総符号量の情報を与えると共に初めに統計処
    理指令を発令し、統計処理が終わると符号化処理指令を
    発令する制御手段と、 前記統計処理指令による実行開始時には前記制御手段か
    らの総符号量の情報に基づき、該総符号量の枠に対応し
    た量子化幅の予測を行って該予測した量子化幅の情報を
    前記量子化手段に与え、符号化処理指令による実行開始
    時には入力される前記算出符号量情報に基づき前回予測
    した量子化幅の情報に対して前記総符号量の枠に収まる
    よう補正した量子化幅の情報を得て、この補正した量子
    化幅の情報を前記量子化手段に与える量子化幅予測手段
    とを設けると共に、 前記量子化手段は量子化幅の情報を受けてその量子化幅
    で前記前処理済み画像データを量子化する構成とするこ
    とを特徴とする画像データの符号化装置。
  3. (3)画像データをブロックに分割し、この分割された
    ブロック毎に直交変換等を行って前処理した後、量子化
    手段により量子化し、この量子化出力を可変長符号化手
    段により可変長符号化する符号化装置において、 可変長符号化手段の出力を受け、画面単位の総符号量を
    求めてこれを算出符号量情報として出力する符号量算出
    手段と、 収めるべき総符号量の情報を与えると共に初めに統計処
    理指令を発令し、統計処理が終わると符号化処理指令を
    発令する制御手段と、 前記統計処理指令による実行開始時には前記制御手段か
    らの総符号量の情報に基づき、該総符号量の枠に対応し
    た量子化幅の予測を行って該予測した量子化幅の情報を
    前記量子化手段に与え、符号化処理指令による実行開始
    時には入力される前記算出符号量情報に基づき前回予測
    した量子化幅の情報に対して前記総符号量の枠に収まる
    よう補正した量子化幅の情報を得て、この補正した量子
    化幅の情報を前記量子化手段に与える量子化幅予測手段
    と、 前記統計処理指令による実行時に前記算出符号量情報と
    前記収めるべき総符号量の情報とに基づき、前記各ブロ
    ックの割当て符号量を求める符号量割当手段と、 前記符号化処理指令による実行時、前記各ブロック毎の
    前記算出符号量情報がそのブロックでの前記割当て符号
    量に達すると前記可変長符号化手段の当該ブロックに対
    する符号化を打切るべく制御する符号化打切手段とを設
    けると共に、 前記量子化手段は量子化幅の情報を受けてその量子化幅
    で前記前処理済み画像データを量子化する構成とし、前
    記可変長符号化手段は前記打切り指令を受ける毎に現在
    処理中のブロックに対する符号化を打切る構成とするこ
    とを特徴とする画像データの符号化装置。
  4. (4)直交変換もしくは予測符号化等を行う画像情報圧
    縮手段により画像データを前処理した後、量子化手段に
    より量子化し、この量子化出力を可変長符号化手段によ
    り可変長符号化する符号化装置において、 可変長符号化手段の出力を受け、画面単位の総符号量を
    求めてこれを算出符号量情報として出力する符号量算出
    手段と、 収めるべき総符号量の情報を与えると共に初めに最適化
    調査処理指令を発令し、算出符号量情報を受けてこれよ
    り最適化調査処理の再実施の要不要を判定し、最適化調
    査処理が終わると符号化処理指令を発令する制御手段と
    、 前記最適化調査処理指令による実行開始時には初めに前
    記制御手段からの総符号量の情報に基づき、該総符号量
    の枠に対応した量子化幅の予測を行って該予測した量子
    化幅の情報を前記量子化手段に与え、既に予測した量子
    化幅の情報があるときは入力される前記算出符号量情報
    に基づき、前回予測した量子化幅の情報に対して前記総
    符号量の枠に収まるよう補正した量子化幅の情報を得て
    、この補正した量子化幅の情報を前記量子化手段に与え
    、符号化処理指令による実行開始時には前記最適化調査
    処理により予測された最終の量子化幅の情報を前記量子
    化手段に与える量子化幅予測手段とを設けると共に、 前記量子化手段は量子化幅の情報を受けてその量子化幅
    で前記前処理済み画像データを量子化する構成とし、前
    記符号化処理指令時に得られる可変長符号化手段の出力
    を画像データの最終符号化出力とすることを特徴とする
    画像データの符号化装置。
  5. (5)画像データをブロックに分割し、この分割された
    ブロック毎に画像情報圧縮による前処理を施した後、こ
    の処理済みデータを量子化し、その後、可変長符号化す
    る符号化方式において、画像データに対する目標符号量
    に応じて、前記量子化の量子化幅を設定する第1のステ
    ップと、前記可変長符号化された各ブロック毎のデータ
    をもとに前記各ブロック毎の符号量を算出すると共に、
    画面全体の符号量を算出する第2のステップと、 この第2のステップで得た各ブロック毎の情報量の割り
    当てと最適化に必要な量子化幅の予測を行う第3のステ
    ップと、 この予測量子化幅を用いて前記各ブロック毎の量子化を
    行う第4のステップと、 この第4のステップにおける各ブロック毎の割り当て情
    報量に収まる範囲でそのブロックの可変長符号化を実施
    する第5のステップと よりなることを特徴とする符号化方法。
  6. (6)画像データを画像情報圧縮による前処理して後、
    この処理済みデータを設定量子化幅で量子化し、その後
    、可変長符号化する符号化方式において、 画像データに対する目標符号量に応じて、定まる標準の
    最適量子化幅を得て、これを初期用の前記設定量子化幅
    として設定する第1のステップと、前記可変長符号化さ
    れたデータをもとに画面全体の符号量を算出する第2の
    ステップと、 前記目標符号量を基準に前記第2のステップで得た前記
    符号量を比較し、その結果、前記第2のステップで得た
    前記符号量が前記基準に対して内輪で所定の許容範囲を
    外れるときは再最適化処理として第4のステップの実行
    に移り、外れないときは最終処理として第5のステップ
    の実行に移る第3のステップと、 前記第2のステップで得た前記符号量をもとに前記目標
    符号量に収束させる最適量子化幅の予測を行い、これを
    新たな前記設定量子化幅として更新設定する第4のステ
    ップと、 この更新された予測量子化幅を用いて前記前処理済み画
    像データの量子化を行い、次に前記第2のステップの実
    行に移る第5のステップと、この第5のステップにおけ
    る量子化が前記最終処理時の場合には前記第2のステッ
    プにおいて得られる可変長符号化データを、目的の最終
    データとして得る第6のステップと、 よりなることを特徴とする符号化方法。
JP10159590A 1990-04-19 1990-04-19 画像データの符号化装置および符号化方法 Expired - Lifetime JP2952000B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP10159590A JP2952000B2 (ja) 1990-04-19 1990-04-19 画像データの符号化装置および符号化方法
US07/771,791 US5291282A (en) 1990-04-19 1991-10-04 Image data coding apparatus and method capable of controlling amount of codes

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10159590A JP2952000B2 (ja) 1990-04-19 1990-04-19 画像データの符号化装置および符号化方法

Publications (2)

Publication Number Publication Date
JPH042291A true JPH042291A (ja) 1992-01-07
JP2952000B2 JP2952000B2 (ja) 1999-09-20

Family

ID=14304737

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10159590A Expired - Lifetime JP2952000B2 (ja) 1990-04-19 1990-04-19 画像データの符号化装置および符号化方法

Country Status (1)

Country Link
JP (1) JP2952000B2 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06284401A (ja) * 1993-03-25 1994-10-07 Kodo Eizo Gijutsu Kenkyusho:Kk 画像符号化装置
WO1997015143A1 (en) * 1995-10-17 1997-04-24 Sony Corporation Device for compressing audio and video data and method therefor
US5822463A (en) * 1994-09-30 1998-10-13 Fuji Xerox Co., Ltd. Image coding apparatus utilizing a plurality of different quantization-width estimation methods
WO1998054904A1 (en) * 1997-05-28 1998-12-03 Sony Corporation Coding method and coding equipment using the same
US6404933B1 (en) 1997-06-02 2002-06-11 Nec Corporation Image encoding method and apparatus thereof
JP2008535322A (ja) * 2005-03-22 2008-08-28 クゥアルコム・インコーポレイテッド 動的にスケーリングされるファイル符号化
JP2010529748A (ja) * 2007-05-31 2010-08-26 クゥアルコム・インコーポレイテッド イメージトランスコードのためのビットレート縮小技術

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06284401A (ja) * 1993-03-25 1994-10-07 Kodo Eizo Gijutsu Kenkyusho:Kk 画像符号化装置
US5822463A (en) * 1994-09-30 1998-10-13 Fuji Xerox Co., Ltd. Image coding apparatus utilizing a plurality of different quantization-width estimation methods
WO1997015143A1 (en) * 1995-10-17 1997-04-24 Sony Corporation Device for compressing audio and video data and method therefor
US6389224B2 (en) 1995-10-17 2002-05-14 Sony Corporation Wireless communication device having a reconfigurable matching circuit
WO1998054904A1 (en) * 1997-05-28 1998-12-03 Sony Corporation Coding method and coding equipment using the same
US6023297A (en) * 1997-05-28 2000-02-08 Sony Corporation Encoding method and encoder using it
US6404933B1 (en) 1997-06-02 2002-06-11 Nec Corporation Image encoding method and apparatus thereof
JP2008535322A (ja) * 2005-03-22 2008-08-28 クゥアルコム・インコーポレイテッド 動的にスケーリングされるファイル符号化
JP2011239425A (ja) * 2005-03-22 2011-11-24 Qualcomm Incorporated 動的にスケーリングされるファイル符号化
JP2010529748A (ja) * 2007-05-31 2010-08-26 クゥアルコム・インコーポレイテッド イメージトランスコードのためのビットレート縮小技術
US8213498B2 (en) 2007-05-31 2012-07-03 Qualcomm Incorporated Bitrate reduction techniques for image transcoding

Also Published As

Publication number Publication date
JP2952000B2 (ja) 1999-09-20

Similar Documents

Publication Publication Date Title
US5291282A (en) Image data coding apparatus and method capable of controlling amount of codes
JP3085465B2 (ja) 画像データの符号化装置および符号化方法
US5732156A (en) Picture data compression coding device and method thereof
JP3012698B2 (ja) 画像データの符号化装置および符号化方法
US5384644A (en) Image processing method and apparatus for encoding variable-length data
US10638162B2 (en) Coding method and decoding processing method
US5416604A (en) Image compression method for bit-fixation and the apparatus therefor
US20100092097A1 (en) Information processing device and method
JPH09191448A (ja) 映像信号符号化装置及び方法
JPH0832037B2 (ja) 画像データ圧縮装置
EP1377071A1 (en) Image processing device, image processing method, image processing program, and recording medium
JPH042291A (ja) 画像データの符号化装置および符号化方法
JPH09247675A (ja) 画像圧縮方法および画像圧縮システム
JP6946671B2 (ja) 画像処理装置及び画像処理方法
JP2959831B2 (ja) 画像データの符号化装置
JP3037961B2 (ja) 電子カメラ装置および画像データの符号化装置
US6222943B1 (en) Image reading, processing and recording with quick data compression
JP3038022B2 (ja) 電子カメラ装置
JP3192133B2 (ja) 電子カメラ装置
JP3076081B2 (ja) 画像信号処理装置
JPH02104180A (ja) 画像データ圧縮処理方法および装置
JP3055954B2 (ja) 電子スチルカメラ
JPH04220875A (ja) 画像デ−タの符号化装置
JP2020141376A (ja) 画像符号化装置及びその制御方法及びプログラム
JPH0654295A (ja) 撮像方法及び画像記録方法

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080709

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090709

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100709

Year of fee payment: 11

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100709

Year of fee payment: 11