JP2001359117A - 画像処理装置及び該装置における画像処理方法 - Google Patents

Abstract

(57)【要約】 【課題】 動画像における色信号を削減して画像の符号
化を行なう、また或は画像の所定領域だけを高画質にな
るように符号化することにより、画像の劣化を少なくし
て高速に画像処理を行う。 【解決手段】 画像入力部から色信号と輝度信号を含む
画像信号を入力し、その画像信号が動画である場合、そ
の画像信号の色差信号の情報量を減縮して輝度信号とと
もに圧縮する。また、その画像中の指定された領域をシ
フトアップして符号化することにより高画質の画像を再
生することができる。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像信号を入力し
て圧縮する画像処理装置及び該装置における画像処理方
法に関するものである。

【０００２】

【従来の技術】従来のデジタルビデオカメラ等の画像処
理装置では、動画／静止画撮像モードで撮像した画像信
号を一旦バッファメモリに格納し、そのメモリから読み
出された画像信号を符号化する際、例えば各々８×８画
素から成るブロックに分割し、輝度信号(Y)は４個、色
差信号(R-Y, B-Y)は各１個からなる合計６個のＤＣＴブ
ロックから１つのマクロブロックを構成し、これを量子
化、ハフマン符号化するなどにより、元の画像信号のデ
ータ量を約５分の１程度にまで圧縮している。

【０００３】

【発明が解決しようとする課題】このように従来のビデ
オカメラでは、動きのある画像では、輝度に比べて色情
報が認識しづらいという人間の視覚特性を利用し、色情
報を輝度情報の約４分の１にまで削減して圧縮処理を行
なっていた。しかしながら、このような圧縮処理は、動
きのない静止画についても同様に適用されており、画像
に応じた圧縮処理が十分に行なわれていなかった。

【０００４】本発明は上記従来例に鑑みてなされたもの
で、複数の撮像モードを備える場合に、各撮像モードで
入力する画像信号の性質に適した圧縮処理を行う画像処
理装置及び該装置における画像処理方法を提供すること
を目的とする。

【０００５】また本発明の目的は、動画中の指定された
領域を高画質に符号化して再生できる画像処理装置及び
該装置における画像処理方法を提供することにある。

【０００６】

【課題を解決するための手段】上記目的を達成するため
に本発明のは画像処理装置以下のような構成を備える。
即ち、動画入力モード或は静止画入力モードにて、複数
の色成分信号で構成される画像信号を入力する入力手段
と、前記動画入力モードの際は、前記画像信号から輝度
信号と色差信号とを生成し、該色差信号の情報量を減縮
して前記輝度信号と共に圧縮し、前記静止画入力モード
の時は前記複数の色成分信号を圧縮する圧縮手段と、を
有することを特徴とする。

【０００７】上記目的を達成するために本発明のは画像
処理装置以下のような構成を備える。即ち、動画入力モ
ード或は静止画入力モードにて、輝度信号と色差信号と
を含む画像信号を入力する入力手段と、前記輝度及び色
差信号のそれぞれをウェーブレット変換し、量子化し、
得られた量子化インデックスを上位ビットから順にビッ
トプレーン符号化する圧縮手段とを有し、前記圧縮手段
は、前記動画入力モードの時には前記静止画入力モード
の時よりも前記色差信号をビットプレーン符号化するプ
レーン数を少なくすることを特徴とする。

【０００８】上記目的を達成するために本発明のは画像
処理装置以下のような構成を備える。即ち、動画入力モ
ード或は静止画入力モードにて、輝度信号と色差信号と
を含む画像信号を入力する入力手段と、前記輝度及び色
差信号のそれぞれをウェーブレット変換し、量子化し、
得られた量子化インデックスを上位ビットから順にビッ
トプレーン符号化する圧縮手段と、前記圧縮手段により
得られた圧縮データを上位ビットから順に復号化する復
号化手段とを有し、前記圧縮手段は、前記動画入力モー
ドで入力された画像信号の圧縮データを復号する時に
は、前記静止画入力モードの時よりも前記色差信号をビ
ットプレーン復号化するプレーン数を少なくするように
制御することを特徴とする。

【０００９】上記目的を達成するために本発明のは画像
処理装置以下のような構成を備える。即ち、動画入力モ
ード或は静止画入力モードにて画像信号を入力する入力
手段と、前記動画入力モードの時は、前記画像信号が示
す画像の所定領域と他領域とで種類の異なる、前記画像
信号に基づく第１画像信号を発生し、各々圧縮し、前記
静止画入力モードのときは前記画像信号が示す画像の所
定領域と他領域とで同種類の前記画像信号に基づく画像
信号を発生し、それぞれを圧縮する圧縮手段と、を有す
ることを特徴とする。

【００１０】上記目的を達成するために本発明のは画像
処理方法以下のような工程を備える。即ち、動画入力モ
ード或は静止画入力モードにて、複数の色成分信号で構
成される画像信号を入力する入力工程と、前記動画入力
モードの際は、前記画像信号から輝度信号と色差信号と
を生成し、該色差信号の情報量を減縮して前記輝度信号
と共に圧縮し、前記静止画入力モードの時は前記複数の
色成分信号を圧縮する圧縮工程と、を有することを特徴
とする。

【００１１】上記目的を達成するために本発明のは画像
処理方法以下のような工程を備える。即ち、動画入力モ
ード或は静止画入力モードにて、輝度信号と色差信号と
を含む画像信号を入力する入力工程と、前記輝度及び色
差信号のそれぞれをウェーブレット変換し、量子化し、
得られた量子化インデックスを上位ビットから順にビッ
トプレーン符号化する圧縮工程とを有し、前記圧縮工程
では、前記動画入力モードの時には前記静止画入力モー
ドの時よりも前記色差信号をビットプレーン符号化する
プレーン数を少なくすることを特徴とする。

【００１２】上記目的を達成するために本発明のは画像
処理方法以下のような工程を備える。即ち、動画入力モ
ード或は静止画入力モードにて、輝度信号と色差信号と
を含む画像信号を入力する入力工程と、前記輝度及び色
差信号のそれぞれをウェーブレット変換し、量子化し、
得られた量子化インデックスを上位ビットから順にビッ
トプレーン符号化する圧縮工程と、前記圧縮工程で得ら
れた圧縮データを上位ビットから順に復号化する復号化
工程とを有し、前記圧縮工程では、前記動画入力モード
で入力された画像信号の圧縮データを復号する時には、
前記静止画入力モードの時よりも前記色差信号をビット
プレーン復号化するプレーン数を少なくするように制御
することを特徴とする。

【００１３】上記目的を達成するために本発明のは画像
処理方法以下のような工程を備える。即ち、動画入力モ
ード或は静止画入力モードにて画像信号を入力する入力
工程と、前記動画入力モードの時は、前記画像信号が示
す画像の所定領域と他領域とで種類の異なる、前記画像
信号に基づく第１画像信号を発生し、各々圧縮し、前記
静止画入力モードのときは前記画像信号が示す画像の所
定領域と他領域とで同種類の前記画像信号に基づく画像
信号を発生し、それぞれを圧縮する圧縮工程と、を有す
ることを特徴とする。

【００１４】また本発明は、上記発明において、動画入
力モードをインターレースモードに、静止画入力モード
をノンインターレースモードとした場合にも適用可能で
ある。

【００１５】

【発明の実施の形態】以下、添付図面を参照して本発明
の好適な実施の形態を詳細に説明する。

【００１６】初めに、本発明の実施の形態に係る撮像装
置の高能率符号化処理について説明する。

【００１７】図１は、本実施の形態に係るビデオカメラ
の画像処理回路（符号化回路）の構成を示すブロック図
である。

【００１８】図１において、１は画像入力部で、画像デ
ータを入力する。この画像入力部１としては、例えば画
像データを生成して入力する画像入力部、スキャナやカ
メラなどの撮像手段、画像データを記憶した記憶媒体か
ら画像データを読み出して入力する装置、更には通信回
線等から画像データを受信して入力するインターフェー
ス回路等も含まれる。２は離散ウェーブレット変換部
で、画像入力部１から入力された画像データに対して離
散ウェーブレット変換処理を実行する。３は量子化部
で、離散ウェーブレット変換された変換係数を量子化す
る。４はエントロピ符号化部で、その量子化された係数
を符号化する。５は符号出力部で、エントロピー符号化
された符号を出力する。６は領域指定部で、画像入力部
１から入力された画像データ内の注目画像領域を指定す
る。

【００１９】まず、画像入力部１から符号化対象となる
画像を構成する画素信号がラスタスキャン順に入力さ
れ、その出力が離散ウェーブレット変換部２に入力され
る。以降の説明では、この入力される画像信号がモノク
ロの多値画像の場合で説明するが、本発明はこれに限定
されるものではない。

【００２０】離散ウェーブレット変換部２は、画像入力
部１から入力した画像信号に対して２次元の離散ウェー
ブレット変換処理を行い、その変換係数を出力する。

【００２１】図２は、この離散ウェーブレット変換部２
の基本構成を示すブロック図である。

【００２２】入力された画像信号Ｘは、処理用バッファ
メモリ２０１に記憶される。この記憶された画像信号
は、処理部２０２により順次読み出されて変換処理が実
行され、再びメモリ２０１に書込まれる。次に、この処
理部２０２における処理について説明する。処理部２０
２内のシーケンス制御回路２０３からの読み込み指示が
あると、バッファメモリ２０１に記憶された画像信号Ｘ
は処理部２０２に読み込まれ、遅延素子２０５およびダ
ウンサンプラ２０６の組み合わせにより、偶数アドレス
および奇数アドレスの信号に分離され、フィルタｐ及び
ｕによりフィルタ処理が施される。同図において、ｓお
よびｄは、各々１次元の画像信号に対して１レベルの分
解を行った際のローパス係数およびハイパス係数を表し
ており、これらは次式により計算されるものとする。

【００２３】 d(n) ＝ x(2*n + 1) − floor((x((2*n) ＋ x(2*n + 2))/2 …（式１） s(n) ＝ x(2*n) ＋ floor((d(n-1) ＋ d(n))/4 …（式２） ただし、ここでｘ(ｎ)は変換対象となる画像信号を示
し、floor(X)は、Xを越えない最大の整数値を表わす。

【００２４】シーケンス制御回路２０３によって書き込
み指示が出力されると、１レベルの分解を行なったロー
パス係数ｓとハイパス係数ｄは再びメモリ２０１に記憶
される。

【００２５】以上の処理により、画像信号に対する１次
元の離散ウェーブレット変換処理が行われる。

【００２６】図３は、本実施の形態の離散ウェーブレッ
ト変換を説明する図である。

【００２７】図３（ａ）は２次元の離散ウェーブレット
変換の構成を示した図である。

【００２８】図において、２次元の離散ウェーブレット
変換は、１次元の変換を画像の水平及び垂直方向に対し
て順次行うものであり、入力画像信号に対して水平方向
にウェーブレット変換処理を施し、ローパス係数とハイ
パス係数とに分解する。その後、ダウンサイジング（下
向き矢印）によりデータを半分に間引く。この出力され
たデータに対して水平及び垂直にローパスフィルタを施
し、このような処理を繰り返す。この結果、水平および
垂直方向の周波数分割が行われ、低周波数領域にデータ
量を低減させた係数データが蓄積されていくことにな
る。

【００２９】図３（ｂ）は、画像データに対する２次元
の変換処理により得られる２レベルの変換係数群の構成
例を示す図であり、１回目の分割による水平方向高域か
つ垂直方向低域をＨＬ１、水平方向低域かつ垂直方向高
域をＬＨ１、水平方向高域かつ垂直方向高域をＨＨ１と
している。また水平方向低域かつ垂直方向低域に対して
２回目も前述と同様に分割してＨＬ２、ＬＨ２、ＨＨ２
を得、水平方向低域かつ垂直方向低域をＬＬとしてい
る。そして画像信号は、異なる周波数帯域の係数列ＨＨ
１、ＨＬ１、ＬＨ１、ＨＨ２、ＨＬ２、ＬＨ２、ＬＬに
分解される。なお、以降の説明ではこれらの係数列をサ
ブバンドと呼ぶ。各サブバンドは後続の量子化部３に出
力される。

【００３０】領域指定部６は、符号化対象となる画像内
で、周囲部分と比較して高画質で復号化されるべき領域
（ＲＯＩ：Region Of Interesting）を決定し、対象画
像を離散ウェーブレット変換した際にどの係数が指定領
域に属しているかを示すマスク情報を生成する。

【００３１】図４（ａ）はマスク情報を生成する際の一
例を示したものである。同図左側に示すように、所定の
指示入力により画像内に星型の領域が指定された場合
に、領域指定部６は、この指定領域を含む画像を離散ウ
ェーブレット変換した際、この指定領域が各サブバンド
に占める部分を計算する。また、このマスク情報の示す
領域は、指定領域境界上の画像信号を復元する際に必要
な、周囲の変換係数を含む範囲となっている。

【００３２】このように計算されたマスク情報の例を図
４（ａ）の右側に示す。この例においては、同図左側の
画像に対し２レベルの離散ウェーブレット変換を施した
際のマスク情報が図のように計算される。

【００３３】図において、星型の部分が指定領域であ
り、この領域内のマスク情報のビットは“１”、それ以
外のマスク情報のビットは“０”となっている。これら
マスク情報全体は２次元離散ウェーブレット変換による
変換係数の構成と同じであるため、マスク情報内のビッ
トを検査することにより、対応する位置の係数が指定領
域内に属しているかどうかを識別することができる。こ
のようにして生成されたマスク情報は量子化部３に出力
される。

【００３４】さらに、領域指定部６は、その指定領域に
対する画質を指定するパラメータを不図示の入力系から
入力する。このパラメータは、指定領域に割り当てる圧
縮率を表現する数値、或は画質を表す数値でもよい。領
域指定部６はこのパラメータから、指定領域における係
数に対するビットシフト量Ｂを計算し、マスクと共に量
子化部３に出力する。

【００３５】量子化部３は、離散ウェーブレット変換部
２から入力した係数を所定の量子化ステップΔにより量
子化し、その量子化値に対するインデックスを出力す
る。ここで、量子化は次式により行われる。

【００３６】 ｑ＝sign(c) floor (abs(c)/／Δ) …（式３） sign(c)＝1 ；ｃ≧０ …（式４） sign(c)＝-1 ；ｃ＜０ …（式５） ここで、ｃは量子化対象となる係数である。また、本実
施の形態においては、量子化ステップΔの値として
“１”を含むものとする。この場合、実際に量子化は行
われない。

【００３７】次に、量子化部３は、領域指定部６から入
力したマスクおよびシフト量Ｂに基づき、次式により量
子化インデックスを変更する。

【００３８】 ｑ*＝ｑ＊２^B ；ｍ＝１ …（式６） ｑ*＝ｑ ；ｍ＝０ …（式７） ここで、ｍは当該量子化インデックスの位置におけるマ
スクの値である。以上の処理により、領域指定部６にお
いて指定された空間領域に属する量子化インデックスの
みがＢビットだけ上方にシフトアップされる。

【００３９】図４（ｂ）及び図４（ｃ）は、このシフト
アップによる量子化インデックスの変化を示した図であ
る。（ｂ）は、あるサブバンドの量子化インデックス群
であり、網掛けされた量子化インデックスにおけるマス
クの値が“１”で、シフト数Ｂが“２”の場合、シフト
後の量子化インデックスは、図４（ｃ）に示すようにな
る。尚、このビットシフトにより生じる各空欄には図の
ようにビット“０”が補完される。

【００４０】このように変更された後の量子化インデッ
クス群は、後続のエントロピ符号化部４に出力される。

【００４１】尚、本実施の形態におけるマスクは、上記
シフトアップ処理だけでなく、エントロピ符号化部４で
の符号化後に得られたデータから原画像を正確に復元す
るために用いられるべき役割を担うが、本発明はこれに
限らない。例えば、シフトアップの数Ｂをビットシフト
処理の対象となる各量子化インデックスのビット数と同
数（図４で４ビット）にすることを前提とすれば、マス
クの情報は復号化側に送出せずともＲＯＩと、それ以外
を復号化側は容易に判断でき、正確な原画像の復元は可
能である。

【００４２】図５は、このエントロピ符号化部４の動作
を説明する図である。

【００４３】この例においては、４×４の大きさを持つ
サブバンド内の領域において、非０の量子化インデック
スが３個存在しており、それぞれ＋１３、−６、＋３の
値を持っている。エントロピ符号化部４はこの領域を走
査して最大値Ｍを求め、次式により最大の量子化インデ
ックスを表現するために必要なビット数Ｓを計算する。

【００４４】 S＝ceil(log2(abs(M)) …（式８） ここでｃｅｉｌ(ｘ)は、ｘ以上の整数の中で最も小さい
整数値を表す。

【００４５】図５において、最大の係数値は“１３”で
あるので、Ｓの値は“４”であり、シーケンス中の１６
個の量子化インデックスは同図右側に示すように、４つ
のビットプレーンを単位として処理が行われる。最初に
エントロピ符号化部４は、最上位ビットプレーン（同図
ＭＳＢで表す）の各ビットを２値算術符号化し、ビット
ストリームとして出力する。次にビットプレーンを１レ
ベル下げ、以下同様に対象ビットプレーンが最下位ビッ
トプレーン（同図ＬＳＢで表す）に至るまで、ビットプ
レーン内の各ビットを符号化して符号出力部５に出力す
る。この時、各量子化インデックスの符号は、ビットプ
レーン走査において最初の非０ビットが検出されると、
そのすぐ後に当該量子化インデックスの符号がエントロ
ピ符号化される。

【００４６】以上の説明は、簡単のためモノクロ画像の
場合で説明したが、Ｒ，Ｇ，Ｂ信号を用いたカラー画像
の場合は、各信号をモノクロ画像信号として独立して符
号化すれば良い。

【００４７】図６（ａ），（ｂ），（ｃ）は、Ｒ，Ｇ，
Ｂのコンポーネント信号を処理した際の各色成分信号の
サブバンド係数を示す図である。

【００４８】また図７（ａ），（ｂ），（ｃ）は、輝度
（Ｙ）と２つの色差信号（Ｒ−Ｙ）（Ｂ−Ｙ）のコンポ
ーネント信号を処理した際における、各信号のサブバン
ド係数を示す図である。なお、画像信号が動画の場合
は、人間の視覚特性が色情報に比べて輝度に敏感なこと
を利用し、輝度と各色差の情報量を「４：１：１」の割
合にしている。このことにより、動画の場合は色情報に
ついては輝度情報より１次元少ない処理を行うことがで
きる。

【００４９】図８（ａ），（ｂ），（ｃ）は、輝度と各
色差の割合が「４：１：１」である信号を扱った際のサ
ブバンド係数を示す図である。

【００５０】図９（ａ）〜（ｅ）は、この様に符号化さ
れたビットストリームを解像度の小さいサブバンドから
順次解像度が高くなる順番に配置（空間スケーラブル）
し、これらを階層的に分けて出力する符号列の構成で表
した概略図である。

【００５１】同図（ａ）は、符号列の全体の構成を示し
たもので、ＭＨはメインヘッダ、ＴＨi(i=0〜n-1)はタ
イルヘッダ、ＢＳi(i=0〜n-1)はビットストリームであ
る。

【００５２】メインヘッダＭＨは同図（ｂ）に示すよう
に、符号化対象となる画像のサイズ（水平及び垂直方向
の画素数）、画像を複数の矩形領域であるタイルに分割
した際のタイルサイズ、各色成分数を表すコンポーネン
ト数、各成分の大きさ、ビット精度を表すコンポーネン
ト情報から構成されている。なお、本実施の形態では、
画像はタイルに分割されていないので、タイルサイズと
画像サイズは同じ値を取り、対象画像がモノクロの多値
画像の場合は、コンポーネント数は“１”で、Ｒ，Ｇ，
Ｂ或は輝度(Y)と２つの色差信号(R-Y,B-Y)からなるカラ
ー多値画像の場合は“３”である。

【００５３】次にタイルヘッダＴＨの構成を図９（ｃ）
に示す。

【００５４】このタイルヘッダＴＨには、当該タイルの
ビットストリーム長とヘッダ長を含めたタイル長、およ
び当該タイルに対する符号化パラメータ、および指定領
域(ROI)を示すマスク情報と、その指定領域に属する係
数に対するビットシフト数から構成される。尚、この符
号化パラメータには、離散ウェーブレット変換のレベ
ル、フィルタの種別等が含まれている。

【００５５】本実施の形態におけるビットストリームの
構成を同図（ｄ）に示す。

【００５６】同図において、ビットストリームは各サブ
バンド毎にまとめられ、解像度の小さいサブバンドを先
頭として順次解像度が高くなる順番に配置されている。
さらに、各サブバンド内は上位ビットプレーンから下位
ビットプレーンに向かい、ビットプレーンを単位として
符号が配列されている。

【００５７】同図（ｅ）は、輝度ＹとＢ−Ｙ，Ｒ−Ｙの
色差信号からなるカラー画像信号の場合のビットストリ
ームの構成を示したものである。ここでは輝度信号の
内、解像度の小さいサブバンドを先頭に、各成分毎に順
次解像度が高くなる順番に配置されている。

【００５８】図１０は、上位ビットプレーンから下位ビ
ットプレーンに向かう形（ＳＮＲスケーラブル）で配置
した符号列の構成を表した概略図である。

【００５９】同図（ａ）は符号列の全体の構成を示した
もので、ＭＨはメインヘッダ、ＴＨi(i=0〜n-1)はタイ
ルヘッダ、ＢＳi(i=0〜n-1)はビットストリームであ
る。メインヘッダＭＨは、同図（ｂ）に示すように、符
号化対象となる画像のサイズ（水平及び垂直方向の画素
数）、画像を複数の矩形領域であるタイルに分割した際
のタイルサイズ、各色成分数を表すコンポーネント数、
各成分の大きさ、ビット精度を表すコンポーネント情報
から構成されている。なお、本実施の形態では、画像は
タイルに分割されていないので、タイルサイズと画像サ
イズは同じ値を取り、対象画像がモノクロの多値画像の
場合のコンポーネント数は“１”で、Ｒ，Ｇ，Ｂや輝度
(Y)と２つの色差信号(R-Y,B-Y)からなるカラー多値画像
の場合は“３”である。

【００６０】次にタイルヘッダＴＨの構成を図１０
（ｃ）に示す。このタイルヘッダＴＨには、当該タイル
のビットストリーム長とヘッダ長を含めたタイル長、当
該タイルに対する符号化パラメータ、および指定領域を
示すマスク情報と、当該領域に属する係数に対するビッ
トシフト敷から構成される。なお、この符号化パラメー
タには、離散ウェーブレット変換のレベル、フィルタの
種別等が含まれている。

【００６１】本実施の形態におけるビットストリームの
構成を同図（ｄ）に示す。

【００６２】同図において、ビットストリームはビット
プレーンを単位としてまとめられ、上位ビットプレーン
から下位ビットプレーンに向かう形で配置されている。
各ビットプレーンには、各サブバンドにおける量子化イ
ンデックスのビットプレーンを符号化した結果が、順次
サブバンド単位で配置されている。同図において、Ｓは
最大の量子化インデックスを表現するために必要なビッ
ト数である。

【００６３】同図（ｅ）は、カラー画像のビットストリ
ームの構成を示したものである。輝度の上位ビットプレ
ーンから下位ビットプレーンに向かう形で配置され、Ｒ
−Ｙ，Ｂ−Ｙの色差信号も同様に構成されている。この
ようにして生成された符号列は、符号出力部５に出力さ
れる。

【００６４】上述した実施の形態において、符号化対象
となる画像全体の圧縮率は、量子化ステップΔを変更す
ることにより制御することが可能である。

【００６５】そして本実施の形態では、エントロピ符号
化部４において符号化するビットプレーンの下位ビット
を必要な圧縮率に応じて制限（廃棄）することにより、
全てのビットプレーンが符号化されず、上位ビットプレ
ーンから所望の圧縮率に応じた数のビットプレーンまで
が符号化されることになる。

【００６６】このような下位ビットプレーンを制限する
機能を利用すると、図４に示した指定領域に相当するビ
ットのみが多く符号列に含まれることになる、即ち、指
定領域のみが低圧縮率で符号化されるため、その指定領
域を高画質な画像として圧縮することが可能となる。

【００６７】次に、以上述べた画像符号化装置によるビ
ットストリームを復号化する方法について説明する。

【００６８】図１１は、本実施の形態に係るビデオカメ
ラにおける画像処理回路（復号化回路）の構成を表すブ
ロック図である。図において、７は符号入力部、８はエ
ントロピ復号化部、９は逆量子化部、１０は逆離散ウェ
ーブレット変換部、１１は画像出力部である。

【００６９】符号入力部７は、例えば図１に示すような
画像処理装置で符号化された符号列を入力し、それに含
まれるヘッダを解析して後続の処理に必要なパラメータ
を抽出し、必要な場合は処理の流れを制御し、或は後続
の処理ユニットに対して該当するパラメータを送出す
る。この入力した符号列に含まれるビットストリーム
は、エントロピ復号化部８に出力される。

【００７０】エントロピ復号化部８は、このビットスト
リームをビットプレーン単位で復号して出力する。この
時の復号化手順を図１２に示す。

【００７１】図１２は、復号対象となるサブバンドの一
領域をビットプレーン単位で順次復号化し、最終的に量
子化インデックスを復元する流れを示した図であり、同
図の縦方向で示す矢印の順にビットプレーンが復号化さ
れる。こうして復元された量子化インデックスは逆量子
化器９に出力される。

【００７２】逆量子化器９は、その入力した量子化イン
デックスから、次式に基づいて離散ウェーブレット変換
係数を復元する。

【００７３】 ｃ*＝Δ × ｑ／２^U ；ｑ≠０ …（式８） ｃ*＝０ ；ｑ＝０ （式９） Ｕ＝Ｂ；ｍ＝１ （式１０） Ｕ＝０；ｍ＝０ （式１１） ここで、ｑは量子化インデックス、Δは量子化ステップ
であり、このΔの値は符号化時に用いられたものと同じ
値である。また、Ｂはタイルヘッダから読み出されたビ
ットシフト数、ｍは当該量子化インデックスの位置にお
けるマスクの値である。またｃ*は、復元された変換係
数であり、符号化時ではｓ又はｄで表される係数を復元
したものである。この変換係数ｃ*は、後続の逆離散ウ
ェーブレット変換部１０に出力される。

【００７４】図１３は、逆離散ウェーブレット変換部１
０の構成及び処理を説明するブロック図である。

【００７５】同図において、入力された変換係数は処理
用バッファメモリ１３００に記憶される。処理部１３０
１は、１次元の逆離散ウェーブレット変換を行い、メモ
リ１３００から順次変換係数を読み出して処理を行うこ
とにより、２次元の逆離散ウェーブレット変換を実行す
る。この２次元の逆離散ウェーブレット変換は、順方向
の離散ウェーブレット変換と逆の手順により実行される
が、その詳細は公知であるので説明を省略する。また処
理部１３０１において、入力された変換係数には、ｕ及
びｐの２つのフィルタ処理が施され、アップサンプリン
グされた後に重ね合わされて画像信号Ｘ*が出力され
る。これらの処理は次式に基づいて行われる。

【００７６】 X*(2*n)＝s*(n) − floor((d*(n-1) ＋ d*(n)）/4 …（式１２） X*(2*n+1)＝d*(n) ＋ floor((X*(2*n) ＋ X*(2*n+2))/2） …（式１３） ここで、（式１），（式２）及び（式１２），（式１
３）による順方向および逆方向の離散ウェーブレット変
換は完全再構成条件を満たしているため、本実施の形態
において、量子化ステップΔが“１”であり、ビットプ
レーン復号化において全てのビットプレーンが復号され
ていれば、復元された画像信号Ｘ*は原画像の信号ｘと
一致する。

【００７７】以上述べた手順により、ビットストリーム
を解像度の小さいサブバンドから順次解像度が高くなる
順番に配置（空間スケーラブル）し、階層的に分けて出
力される符号列を基に画像を復元・表示した際の画像の
表示形態について図１４を用いて説明する。

【００７８】同図（ａ）は、符号列の例を示したもの
で、その基本的な構成は図９に基づいているが、画像全
体がタイルと設定されているため、符号列中には唯１つ
のタイルヘッダＴＨ0およびビットストリームＢＳ0が含
まれている。このビットストリームＢＳ0には図に示す
ように、最も低い解像度に対応するサブバンドであるＬ
Ｌから、順次解像度が高くなる順に符号が配置されてお
り、更に、各サブバンド内では上位ビットプレーンから
下位ビットプレーンに向かって符号が配置されている。

【００７９】本実施の形態に係る復号化装置は、このビ
ットストリームを順次読みこみ、各ビットプレーンに対
応する符号を復号した時点で画像を表示する。

【００８０】同図（ｂ）は、各サブバンドと、表示され
る画像の大きさとが対応付けられ、サブバンド内の符号
列を復号するのに伴う画像の変化を示したものである。
同図において、ＬＬに相当する符号列が順次読み出さ
れ、各ビットプレーンの復号処理が進むに従って、再生
される画質が徐々に改善されている。この時、符号化時
に指定領域となった星型の部分は、その他の部分よりも
より高画質に復元される。

【００８１】これは、前述したように符号化時に、量子
化部において、指定領域に属する量子化インデックスを
シフトアップしており、そのためビットプレーン復号化
の際に当該量子化インデックスが、その他の部分と比べ
て、より早い時点で復号化されるためである。このよう
に指定領域部分が高画質に復号されるのは、その他の解
像度においても同様である。

【００８２】更に、全てのビットプレーンを復号化した
時点では、指定領域とその他の部分は画質的に同一であ
るが、途中段階で復号化を打ち切った場合は、その指定
領域部分がその他の領域よりもより高画質に復元され、
これら画質の異なる画像が混在した画像が得られる。

【００８３】次に、上位ビットプレーンから下位ビット
プレーンに向かう形（ＳＮＲスケーラブル）で配置した
符号列の構成の画像信号を復元表示した際の画像の表示
形態を図１５を用いて説明する。

【００８４】同図（ａ）は符号列の一例を示した図であ
り、その基本的な構成は図１０に基づいているが、ここ
では画像全体が１つのタイルに設定されている。従っ
て、符号列中には唯１つのタイルヘッダＴＨ0およびビ
ットストリームＢＳ0が含まれている。このビットスト
リームＢＳ0には図に示すように、最も上位のビットプ
レーンから、下位のビットプレーンに向かって符号が配
置されている。

【００８５】本実施の形態に係る復号化装置は、このビ
ットストリームを順次読みこみ、各ビットプレーンの符
号を復号した時点で画像を表示する。同図において、各
ビットプレーンの復号処理が進むに従って画質が徐々に
改善されているが、符号化時に指定領域となった星型の
部分は、その他の部分よりも、より高画質に復元され
る。これは、上述のように符号化時に、量子化部で、指
定領域に属する量子化インデックスをシフトアップして
おり、そのためビットプレーン復号化の際に当該量子化
インデックスがその他の部分に対し、より早い時点で復
号されるためである。

【００８６】更に、全てのビットプレーンを復号化した
時点では、その指定領域とその他の部分とは画質的に同
一であるが、途中段階で復号化を打ち切った場合は、そ
の指定領域部分がその他の領域よりもより高画質に復元
され、これら画質の異なる画像が混在した画像が得られ
る。

【００８７】上述した実施の形態において、エントロピ
復号化部７において復号する下位ビットプレーンを制限
（無視）することにより、受信或いは処理する符号化デ
ータ量を減少させ、結果的に圧縮率を制御することが可
能である。このようにすることにより、必要なデータ量
の符号化データのみから所望の画質の復号画像を得るこ
とが可能である。また、符号化時の量子化ステップΔが
“１”であり、復号時に全てのビットプレーンが復号さ
れた場合は、その復元された画像が原画像と一致する可
逆符号化・復号化を実現することもできる。

【００８８】以上の処理により、符号化された画像が復
元されて画像出力部１１に出力される。この画像出力部
１１はモニタ等の画像表示装置であってもよく、或は磁
気ディスク等の記憶装置であってもよい。

【００８９】次に、上記符号化処理を用いたビデオカメ
ラについて図１６を参照して説明する。

【００９０】図１６（ａ）は、本実施の形態に係るビデ
オカメラの外観斜視図、１６００は領域指定レバー３６
の詳細図、図１６（ｂ）は領域指定レバー３６による操
作を検出する検出回路の詳細図である。

【００９１】図１６（ａ）において、４０は液晶等の表
示用モニタで、撮像中の映像、或はビデオ再生で再生さ
れた映像等が表示される。１２４は撮像用のレンズ、１
２５はズームレバーで、ズームレンズによるズームを指
示するのに使用される。３４は、動画（ＭＯＶＩＥ）／
静止画（ＳＴＩＬＬ）／再生（ＶＩＤＥＯ）／電源ＯＦ
Ｆ（ＯＦＦ）の各動作モードを選択するモード選択ダイ
ヤルである。３６は領域指定レバーで、撮像する映像の
中の任意の領域を指定するのに使用される。

【００９２】１６００において、３６ａはカーソル（領
域を指定するためにモニタ４０に表示される）を上方向
に移動させる指示を与える上方指定レバー、３６ｂはカ
ーソルを右方向に移動させる指示を与える右方指定レバ
ー、３６ｃはカーソルを下方向に移動させる指示を与え
る下方指定レバー、３６ｄはカーソルを左方向に移動さ
せる指示を与える左方指定レバー、そして３６ｅはカー
ソル位置を確定させる指示を出す確定ボタンである。

【００９３】図１６（ｂ）において、Ｙ＋(up)は、上方
指定レバー３６ａの指示を受けるとシステムコントロー
ラ３３に上方向にカーソル移動の指示を送る上方検出ス
イッチ信号、同様にＸ＋(Right)は、右方指示レバー３
６ｂの指示を受けるとシステムコントローラ３３に右方
向にカーソル移動の指示を送る右方検出スイッチ信号、
Ｙ−(down)は、下方指示レバー３６ｃの指示を受けると
システムコントローラ３３に下方向にカーソル移動の指
示を送る下方検出スイッチ信号、Ｘ−(Left)は左方指定
レバー３６ｄの指示を受けるとシステムコントローラ３
３に左方向にカーソル移動の指示を送る左方検出スイッ
チ信号である。Ｃenterは、確定ボタン３６ｅの指示を
受けるとシステムコントローラ３３にカーソル確定の指
示を送る選択スイッチ信号であり、この領域指定レバー
３６のボタン３６ａ、３６ｂ、３６ｃ、３６ｄの各レバ
ーと確定ボタン３６ｅとを操作することにより、撮像さ
れる映像の中の所望の領域を指定することができる。

【００９４】図１７は、本発明の実施の形態に係るビデ
オカメラの構成を示すブロック図である。なお、このビ
デオカメラは、動画像及び静止画像を撮像できるもので
ある。

【００９５】図１７において、１２はズームレンズで、
撮像する画像の拡大／縮小を行う。１３はフォーカスレ
ンズで、画像を合焦させる。１４は入射光量を調整する
アイリスである。１５はＣＣＤで、これらレンズ系を通
過した画像を光電変換して画像信号を生成する。１６は
ＣＤＳ／ＡＧＣ回路で、ＣＣＤ１５の出力をサンプリン
グして所定の値に利得を調整する。１７はＡ／Ｄ変換器
で、アナログ画像信号をデジタル画像データに変換して
いる。１８はカメラ信号処理回路で、撮像した画像に対
応するデジタル画像データを信号処理する。１９はデジ
タル画像データを一時的に記憶するバッファメモリであ
る。２５はアイリス１４の開口量を調整するアイリスモ
ータ、２６はアイリスモータ２５を駆動制御するアイリ
スモータドライバである。また２３は、アイリス１４の
開口量を検出するアイリスエンコーダである。２７はフ
ォーカスレンズ１３を移動させるフォーカスモータ、２
８はフォーカスモータ２７を駆動制御するフォーカスモ
ータドライバである。２９はズームレンズ１２を移動さ
せるズームモータ、３０はズームモータ２９を駆動制御
するズームモータドライバである。３１はズームレンズ
１２の位置を検出するズームエンコーダ、４１はズーム
値に応じた合焦曲線を得るためのカムテーブルである。
３３は各回路を制御するシステムコントローラである。

【００９６】２１は画像信号を圧縮する圧縮回路、２２
は、圧縮回路２１で圧縮された画像信号を磁気テープや
半導体メモリなどに記録する記録部である。３８はシス
テムコントローラ３３の制御の下に、バッファメモリ１
９から選択回路２０、切替え回路４３を介して供給され
た画像データを基に表示を行うように制御する表示制御
部、３９はデジタル信号をアナログ信号に変換するＤ／
Ａ変換器、４０は撮像した画像を表示するモニタであ
る。また、３５は記録部２２の記録開始・停止を指示す
るトリガーボタン、３４は静止画と動画の撮像モードお
よび再生、電源ＯＦＦを選択するモード選択ダイヤルで
ある。

【００９７】またズームレバー１２５によりズーム指示
が与えられると、テレ（Ｔ），ワイド（Ｗ）方向に変倍
動作を行うため、ズームレバー１２５の押圧状態が検出
され、その検出結果に応じてシステムコントローラ３３
からズームモータドライバ３０へ信号を送り、ズームモ
ータ２９を介してズームレンズ１２を移動させる。そし
てこれと同時に、システムコントローラ３３はカムテー
ブル４１より合焦情報を得、その得られた情報に基づい
てフォーカスモータドライバ２８に信号を送りフォーカ
スモータ２７を介してフォーカスレンズ１３を動かすこ
とで合焦状態を維持しながら変倍動作を行なう。

【００９８】またここで、モード選択ダイヤル３４が動
画モード(MOVIE)を選択している場合は、トリガーボタ
ン３５で操作された範囲の画像が動画として記録部２２
に記録される。一方、モード選択ダイヤル３４を静止画
に選択すると、トリガーボタン３５が押された時の画像
が記録媒体に記録される。

【００９９】また、３７は領域指定レバー３６の押圧状
態を検出する領域指定レバー検出回路である。３２は領
域検出器で、領域指定レバー３６により指定された画像
領域を領域情報として生成する。２０は選択回路で、バ
ッファメモリ１９に記憶された３板ＣＣＤからの画像信
号の中からＲ，Ｇ，Ｂ信号と、輝度及び色差信号を選択
する。表示制御回路３８は、領域情報に基づいて指定領
域を示す画像の画像データを生成し、撮像用データと多
重した表示用信号を生成する。圧縮回路２１は、領域情
報に基づいて指定領域と非指定領域を各々符号化する。
伸長回路４２は、圧縮回路２１により符号化されて圧縮
された画像信号を復号して伸長する。

【０１００】被写体からの光は、ズームレンズ１２によ
り変倍され、その変倍された光はフォーカスレンズ１３
により合焦される。この合焦された光はアイリス１４に
よって光量が調整されて露出が補正され、ＣＣＤ１５に
よって光電変換される。こうして電気信号に変換された
画像信号は、ＣＤＳ／ＡＧＣ回路１６においてサンプリ
ングされて所定の利得に調整され、Ａ／Ｄ変換回路１７
でデジタル信号に変換される。こうしてデジタル信号に
変換された画像データは、カメラ信号処理回路１８に送
られる。

【０１０１】次に、カメラ信号処理回路１８における処
理について更に詳しく説明する。

【０１０２】図１８（ａ）は、ＲＧＢ三色のカラーフィ
ルタを用いた３板のＣＣＤ１５を用いた場合のカメラ信
号処理回路１８の詳細図である。

【０１０３】図において、４４は色相を調整するホワイ
トバランス回路(AWB)、４５は撮像した画像信号をモニ
タ４０の特性に補正するためのγ補正回路、４６は各色
信号から輝度信号を生成する輝度マトリックス回路(Y-M
TX)、４７は撮像した画像が一定の光量になるように露
出を制御するＡＥ回路(AE)、４８は撮像した画像のフォ
ーカスを制御するＡＦ回路(AF)、２４はカメラ信号処理
をコントロールするカメラマイコンである。

【０１０４】図１８（ａ）において、撮像されデジタル
信号に変換された画像データはホワイトバランス回路４
４と輝度マトリックス回路４６にそれぞれ供給される。
そしてホワイトバランス回路４４において、Ｒ，Ｇ，Ｂ
の各色信号に色相調整が施され、ガンマ補正回路４４に
よりモニタ４０の特性に合うように補正される。

【０１０５】一方、輝度マトリックス回路４６により生
成された輝度信号は補正用データとして用いられるべく
カメラマイコン２４からＡＥ回路４７に送られる。この
ＡＥ回路４７は、適切な光量になるようにアイリスドラ
イバ２５を制御してアイリス１４の開口を調整して露出
を補正する。これと共にＡＦ回路４８に補正用データが
送られ、その撮像した画像を合焦させるため、輝度の高
域成分から合焦位置を演算して、フォーカスモータドラ
イバ２８を制御し、フォーカスモータ２７を介しフォー
カスレンズ１３を駆動させて合焦させる。

【０１０６】次に、単板ＣＣＤ１５を用いた場合のカメ
ラ信号処理回路１８について説明する。

【０１０７】図１８（ｂ）は、単板ＣＣＤ１５を用いた
場合のカメラ信号処理回路１８の詳細図である。

【０１０８】図１８（ｂ）において、色分離マトリック
ス４９において、ＲＧＢ混在のフィルタを有するＣＣＤ
１５の出力からＲ，Ｇ，Ｂの各色成分を抽出し、Ｒ，
Ｇ，Ｂの３色の色信号を生成する。この場合も前述の３
板ＣＣＤの場合と同様に、色信号は色相調整、ガンマ補
正が施される。こうして補正されたＲ，Ｇ，Ｂの各信号
は、色差マトリックス回路５０において、Ｒ−ＹとＢ−
Ｙの各色差信号と輝度信号Ｙとに変換される。このとき
輝度信号と各色差信号は、「４：２：２」の割合で生成
される。一方、色分離マトリックス回路４９からの出力
は輝度マトリックス回路４６に供給されて輝度信号が生
成され、この輝度信号がカメラマイコン２４を介してＡ
Ｅ回路４７に供給される。ＡＥ回路４７は、適切な光量
になるようにアイリスモータドライバ２６を制御してア
イリス１４の開口を調整し、その露出を補正する。また
これと共に、撮像した画像を合焦させるためＡＦ回路４
８において輝度の高域成分から合焦位置を演算し、この
演算結果を基にフォーカスモータドライバ２８を制御
し、フォーカスモータ２７を介してフォーカスレンズ１
３を駆動させて合焦させる。

【０１０９】こうしてバッファメモリ１９に記憶された
画像データは、表示制御回路３８に送られて表示用信号
が生成された後、Ｄ／Ａ変換器３９によりアナログ信号
に変換されモニタ４０に表示される。

【０１１０】一方、トリガーボタン３５が押されて記録
の指示が入力されると、バッファメモリ１９に記憶され
た画像データは圧縮回路２１に送られ、Ｒ，Ｇ，Ｂの各
色信号、或いは輝度信号と色差信号のそれぞれが符号化
処理されて圧縮される。こうして圧縮された画像信号
は、磁気テープ、光ディスクや半導体メモリなどを用い
た記録部２２に記録される。

【０１１１】ここで、モニタ４０に表示された画像の一
部を高画質にしたい場合は、モニタ４０に表示された画
像の中の高画質にしたい領域を、領域指定レバー３６を
使用して指定する。こうして指定された領域に対応し
て、領域検出器３２で領域情報が生成され、バッファメ
モリ１９に記憶される。こうしてバッファメモリ１９に
記憶された画像信号と領域情報は、共に表示制御回路３
８に送られ、指定領域を示す粋が多重された表示用信号
が生成される。この指定領域が多重された表示用信号
は、Ｄ／Ａ変換回路３９においてアナログ信号に変換さ
れてモニタ４０に表示される。

【０１１２】図２０（ｃ）は、モニタ４０に表示された
画像の一例を示す図で、ここでは領域指定レバー３６に
より、高画質領域が指定された後の表示画像の一例を示
しており、指定領域と非指定領域が識別可能に表示され
ている。

【０１１３】この場合に、トリガーボタン３５が押され
て記録の指示が入力されると、バッファメモリ１９に記
憶された画像データと領域情報は、選択回路２０を介し
て圧縮回路２１に送られ、領域情報に基づいて高画質に
圧縮する部分と、通常に圧縮する部分と分けて、符号化
処理が施されて圧縮される。こうして圧縮された画像信
号は記憶部２２に送られて記録媒体に記録される。な
お、圧縮回路２１で圧縮された画像信号は、伸長回路４
２により復号化処理が施されて伸長され、表示切換回路
４３で表示信号を切換えることにより、圧縮後の画像を
モニタ４０に表示することもできる。

【０１１４】次に、この圧縮回路２１の具体的な動作を
図１９を参照して説明する。

【０１１５】図１９において、５１はウェーブレット変
換器で、入力した画像信号をサブバンドに分解する。５
２は占有率算出回路で、サブバンドに分解された各サブ
バンドのどの係数が、その指定領域に属しているかを示
すマスク情報を生成し、更にそのマスク情報の占める割
合を算出する。５３はビットシフト量計算回路で、マス
ク情報内の画像信号のビットシフト量を計算する。５４
は量子化を行なう量子化処理回路、５９は圧縮のパラメ
ータや量子化の係数を設定する係数設定回路である。５
５はインデックス変更回路で、ビットシフト量に応じて
量子化インデックスを変更する。５６はビットプレーン
分解回路で、インデックスをビットプレーンに分解す
る。５７は符号化するビットプレーンを制限するための
符号化制限回路、５８は２値算術符号化回路である。

【０１１６】バッファメモリ１９に格納されたＲ，Ｇ，
Ｂの各色信号或いは輝度及び色差からなる画像信号は、
ウェーブレット変換回路５１によって、その画像信号の
各成分がサブバンドに分割される。こうして分割された
サブバンドデータに基づいて、占有率算出回路５２によ
りマスク情報が生成され、更に、各サブバンドにおける
マスク情報の占有率が計算される。ビットシフト量計算
回路５３は、指定領域に対する画質を指定するパラメー
タを、係数設定回路５９から取得する。このパラメータ
は、指定領域に割り当てる圧縮率を表現する数値、或は
画質を表す数値でもよい。このパラメータから、指定領
域における係数に対するビットシフト量を計算し、マス
ク情報と共に量子化処理回路５４に出力する。

【０１１７】量子化処理回路５４は、係数設定回路５９
で生成された適当な数値により除算して量子化し、その
量子化値に対するインデックスを出力する。インデック
ス変更回路５５は、指定された空間領域に属する量子化
インデックスのみ上方にシフトアップする。このように
変更された量子化インデックスは、後続のビットプレー
ン分解回路５６に出力される。ビットプレーン分解回路
５６は、入力した量子化インデックスをビットプレーン
に分解する。符号化制御回路５７は、圧縮後のフレーム
全体のデータサイズを決定するためのビットプレーンを
計算し、符号化するビットプレーンを制限する。最後に
２値算出符号化回路５８は、最上位ビットプレーンから
順に２値算術符号化し、その結果をビットストリームと
して出力する。そして、制限されたビットプレーンまで
出力する。

【０１１８】次に、撮像された映像の中の高画質領域を
指定する方法について図１６及び図２０を参照して説明
する。図２０（ａ）〜（ｃ）は、モニタ４０の表示画像
の一例を示す図である。

【０１１９】領域指定レバー３６の中央の選択スイッチ
３６ｅが押されると、領域を指定するカーソルＰ０がモ
ニタ４０の中心に多重表示される（図２０（ａ））。こ
のモニタ４０に表示されたカーソルＰ０を見ながら、カ
ーソルＰ０を移動させたい方向（図２０（ａ）では上及
び左方向）に領域指定レバー３６を操作する。このとき
システムコントローラ２２は、この領域指定レバー３６
の押圧状態を検出し、その検出結果に基づいてカーソル
Ｐ０の移動量を算出し、その算出した移動量に応じてカ
ーソルＰ０を移動させる。そして、領域指定レバー３６
の選択ボタン３６ｅが押されると、高画質領域を指定す
るための枠の１つのポイント（図２０（ａ）ではＰ1）
が確定される。これと同様の操作を行って、次のポイン
ト（Ｐ2）を決めるため、領域指定レバー３６を操作し
てカーソルＰ０を移動させ、この作業を繰り返すことに
よって、例えば図２０（ｂ）に示すように４点（Ｐ1，
Ｐ2，Ｐ3，Ｐ4）を指示する。この状態で再度選択スイ
ッチ３６ｅが押下されると、これら指示ポイントＰ1，
Ｐ2，Ｐ3，Ｐ4同士を結ぶ矩形領域２０００が決定さ
れ、これが高画質領域として指定される（図２０
（ｃ））。

【０１２０】なお、このようにして指定された画像領域
は、その領域内の画像の色や輝度を他の領域と変えるこ
とにより、他の領域と一目で識別できることになる。

【０１２１】ここでは、高画質領域を矩形領域とし、４
点を指示することによって指定したが、例えば矩形の対
角線上の２点を指定しても良く、或は丸や多角形など任
意の形状の領域を指定できるようにしても良い。

【０１２２】更に、画像処理、画像認識手段により、エ
ッジ成分や色成分を用いて特定の物や人を指定すること
も可能である。

【０１２３】図２１は、画像認識手段を用いて、モニタ
４０に表示された画像中の特定の物体（ここでは自動
車）を指定領域として指定する例を説明する図である。

【０１２４】図２１（ａ）は、モニタ４０に表示された
画像の一例を示す図である。ここでは、例えば図２１
（ａ）の、自動車の部分を高画質にしたい場合は、領域
指定レバー３６を操作してカーソルＰ０を自動車の位置
に合わせ、選択スイッチ３６ｅを押す。これにより領域
検出回路３２が、周知の技術より色成分とその輪郭成分
を抽出し、その対称となる自動車のオブジェクト画像を
抽出する。

【０１２５】図２１（ｂ）は、こうして抽出された自動
車のオブジェクト画像を示す。この他にも、動き情報を
用いて、所望の領域を指定することも可能である。ま
た、より詳細な高画質領域を指定する方法としてタッチ
パネルを用いてもよい。

【０１２６】図２２及び図２３は、本実施の形態に係る
撮像装置の機能構成、特に図１７のバッファメモリ１９
以降の機能構成を中心に示すブロック図で、図２２は３
板ＣＣＤ１５を用いた場合の構成を、そして図２３は、
単板ＣＣＤ１５を用いた場合で示している。

【０１２７】以下その特徴部分について簡単に説明す
る。

【０１２８】図２２では、選択回路２０は、バッファメ
モリ１９に格納されたＲ，Ｇ，Ｂの各画像データを色差
マトリックス回路５０に送り、この色差マトリックス回
路５０において、輝度信号(Y)と色差信号(R-Y, B-Y)を
生成する。この生成された色差信号は、ＬＰＦ６１によ
って水平及び垂直方向の帯域がそれぞれ２分の１になる
ように圧縮される。この圧縮された色差信号は、間引き
回路６２により、その情報量が４分の１にまで削減され
る。選択回路２０は、ＲＧＢ信号、或は輝度信号と削減
された色差信号を選択して圧縮回路２１に送る。ここで
圧縮回路２１は、ＲＧＢ信号、及び輝度信号と色差信号
をそれぞれ符号化する。この符号化に際しては、領域検
出器３２で検出された領域に応じて、その符号化処理が
変更される。こうして符号化された符号は、記録部２２
に送られて記録される。また伸長回路４２に送られ、伸
長されて表示制御回路３８に送られ、Ｄ／Ａ変換器３９
を介してモニタ４０に表示される。また３５は記録モー
ド検出器で、モード選択ダイヤル３４により選択された
撮影モードを検出して、その検出信号をシステムコント
ローラ３３に供給している。

【０１２９】一方、図２３の場合には、単板ＣＣＤ１５
が使用されているので、ラインバッファ１９に記憶され
た画像データは、輝度信号と色差信号とで構成されてい
る。従って、図２２に示すような、ＲＧＢ信号から輝度
信号と色差信号を生成する回路は設けられていない。そ
の他の構成は、図２２の構成と基本的に同じであるの
で、その説明を省略する。

【０１３０】次に本発明の実施の形態１に係る撮像装置
における処理について、図１８（ａ），図１９及び図２
２のブロック図と、図２４のフロチャートを用いて説明
する。ここでは３板ＣＣＤ１５を用いた撮像装置の場合
で説明する。

【０１３１】システムコントローラ３３は、まずステッ
プＳ１０１で、モード選択ダイヤル３４で設定されてい
る撮影モードを、記録モード検出器３５からの検出信号
に基づいて検出する。ＭＯＶＩＥ（動画）が設定されて
いる場合は、動画処理に適した処理を行なうためステッ
プＳ１０２に進み、静止画モードが設定されている場合
は、静止画に適した処理を行なうためステップＳ１０４
に進む。

【０１３２】ステップＳ１０２では、モード選択ダイヤ
ル３４によりＭＯＶＩＥ（動画）が設定されているの
で、システムコントローラ３３は、各回路に動画処理を
行なうように指示を送る。これにより選択回路２０は、
この動画処理の指示を受けると、バッファメモリ１９に
格納されたＲ，Ｇ，Ｂの各画像信号を色差マトリックス
回路５０（図２２）に送り、この色差マトリックス回路
５０において輝度信号(Y)と色差信号(R-Y,B-Y)を生成す
る。こうして生成された色差信号は、ＬＰＦ６１によっ
て水平及び垂直方向の帯域がそれぞれ２分の１に圧縮さ
れ、その圧縮された色差信号は、更に間引き回路６２に
おいて、その情報量が４分の１にまで削減される（ステ
ップＳ１０３）。

【０１３３】次にステップＳ１０４に進み、生成された
輝度信号と、削減された色差信号はともに圧縮回路２１
に送られて符号化される。ここで圧縮回路２１は、輝度
信号と色差信号をそれぞれウェーブレット変換回路５１
（図１９）においてサブバンドに分割し、その分割され
た各サブバンドを量子化処理回路５４において量子化す
る。こうして量子化された結果は、ビットプレーン分解
回路５６においてビットプレーンに分解され、更に、２
値算術符号化回路５８において上位ビットから符号化さ
れる。この時、符号化制御回路５７において下位ビット
を制御することにより、圧縮率が制御される。

【０１３４】尚、符号化処理を行なう場合は、各信号と
も図７に示すように、同じ次元のサブバンドを用いても
良いが、ここでは色差信号は輝度信号に比べて、そのデ
ータ量が４分の１に削減されているため、図８に示すよ
うに、色差信号は輝度信号より１次元少ない処理を行な
っても良い。

【０１３５】次にステップＳ１０５に進み、こうして圧
縮された画像信号を伸長回路４２に送り、各サブバンド
の上位ビットプレーンから復号化処理を行ない、逆ウェ
ーブレット変換する。ここでは、圧縮回路２１によって
下位ビットプレーンを制限しているが、圧縮回路２１に
おいて制限せずに、伸長回路４２の復号化処理の際に下
位ビットプレーンを制限することにより、同様の効果が
得られる。

【０１３６】次にステップＳ１０６に進み、こうして復
号化された画像信号を表示制御回路３８に送って表示用
信号に変換し、ステップＳ１０７では、その変換された
表示用画像信号に基づいて、モニタ４０への画像表示が
実行される。

【０１３７】一方、ステップＳ１０１で、モード選択ダ
イヤル３４がＳＴＩＬＬ（静止画）を選択している場合
はステップＳ１０４に進み、各回路に静止画処理を行な
う指示を送る。そして選択回路２０は、静止画処理の指
示を受けると、バッファメモリ１９に格納されたＲ，
Ｇ，Ｂの各画像信号を、色信号の削減処理を行うことな
く圧縮回路２１に送って符号化する。この際、圧縮回路
２１は、Ｒ，Ｇ，Ｂの各色信号をそれぞれウェーブレッ
ト変換し、図６に示す様なサブバンドに分割する。こう
して分割されたサブバンドは、更にビットプレーンに分
解されて符号化処理が施される。これ以下の処理は、前
述の動画処理の場合と同様であるので、それらの説明を
省略する。

【０１３８】尚、本実施の形態によれば、動画と静止画
の２つの撮影モードを持つ撮像装置について説明した
が、この他にも、飛び越し走査によって得られた撮像デ
ータを処理するインターレースモードと、順次走査によ
って処理するノンインターレースモードの２つの処理が
可能なＣＣＤを持つ撮像装置にも適応でき、インターレ
ースモードの場合は動きによる影響が大きいため、本実
施の形態の動画モードと同様に色信号を減縮し、ノンイ
ンターレースの場合は動きによる影響がないため、静止
画モードと同様に色信号を減縮せずに処理を施すように
すればよい。こうすることにより、ノンインターレース
はインターレースより高画質な処理が可能となる。

【０１３９】更には、上記２つの撮像処理が可能なＣＣ
Ｄと本実施の形態の撮像モードとを組み合わせれば、動
画インターレース、静止画インターレース、静止画ノン
インターレースの最大４つのモードが設定可能となり、
この場合、少なくとも最も高画質な画像が得られるノン
インターレースのみ色信号を減縮せずに処理するか、或
は少なくとも最も画質が悪くなる動画インターレースの
み色信号を減縮することにより、撮像モードに適した信
号処理が可能になる。

【０１４０】以上説明したように本実施の形態１によれ
ば、動画の場合には、人間の視覚特性が輝度に比べて色
の認識の方が鈍感なことを利用して、動画モードにおい
ては色情報の情報量を削減する処理を選択する。一方、
静止画の場合には、画像の動きがないため、原画像信号
をなるべく劣化させないような処理を施している。

【０１４１】なお、トリガーボタン３５が押されて記録
開始の指示が入力されると、記録部２２に圧縮処理後の
画像データを記録するが、この場合も表示処理と同様
に、伸長処理後の画像データを記録するようにしてもよ
い。

【０１４２】［実施の形態２］次に、本発明の実施の形
態２に係る撮像装置における動作について図１９及び図
２３のブロック図、及び図２５のフロチャートを参照し
て説明する。

【０１４３】前述の実施の形態１では、Ｒ，Ｇ，Ｂのコ
ンポーネント信号を入力画像信号としていたが、単板Ｃ
ＣＤ１５を用いた場合は、色分離マトリックス回路４７
で輝度と色差信号を生成した時点で、色差信号が輝度信
号に比べ半分の情報しか持たなくなる。そこで、本実施
の形態２では、動画／静止画モードの選択に応じて、圧
縮処理或いは伸長処理を変更することにより、前述の実
施の形態１と同様の効果を得ることができる。これにつ
いて説明する。

【０１４４】図２５は、本実施の形態２に係る圧縮回路
２１における処理を説明するフローチャートである。

【０１４５】バッファメモリ１９に格納された輝度、色
差の各画像信号が圧縮回路２１に入力されると、ステッ
プＳ２０１で、圧縮回路２１のウェーブレット変換回路
５１は、輝度信号と色差信号をそれぞれウェーブレット
変換してサブバンドに分割する。次にステップＳ２０２
に進み、こうして分割された各サブバンドは、量子化処
理回路５４で量子化され、ビットプレーン分解回路５６
でビットプレーンに分解される。次にステップＳ２０３
に進み、モード選択ダイヤル３４で設定されている撮影
モードを検出する。ここでＭＯＶＩＥ（動画）が設定さ
れている場合は動画処理に適した処理を行なうためステ
ップＳ２０４に進み、静止画モードが設定されている場
合は、静止画に適した処理を行なうためステップＳ２０
５に進む。

【０１４６】ステップＳ２０４では、ＭＯＶＩＥ（動
画）が設定されており、動画の場合は輝度に比べ色情報
が少なくても影響が少ないため、符号化制御回路５７
は、色差信号のみ下位ビットを破棄する。そしてステッ
プＳ２０５に進み、下位ビットを破棄した画像データ
を、２値算術符号化回路５８により符号化する。

【０１４７】次にステップＳ２０６に進み、この符号化
処理により圧縮された画像信号を、伸長回路４２によ
り、各サブバンドの上位ビットプレーンから復号化処理
を行なって逆ウェーブレット変換する。次にステップＳ
２０６’では、圧縮回路２１の符号化制御回路５７によ
って下位ビットを制限しているが、この圧縮回路２１に
おいて制限せずに、伸長回路４２における復号化処理の
際に下位ビットプレーンを制限することにより、同様の
効果が得られる。

【０１４８】次にステップＳ２０７に進み、こうして復
号化された画像信号は表示制御回路３８に送られて表示
用の画像信号に変換される。そしてステップＳ２０８で
は、その変換された表示用画像信号がモニタ４０に送ら
れて、対応する画像が表示される。

【０１４９】一方、ステップＳ２０３において、モード
選択ダイヤル３４がＳＴＩＬＬ（静止画）を設定してい
る場合はステップＳ２０５に進み、符号化制御回路５７
は、色差信号の下位ビットの破棄をせずに２値算術符号
化する。そしてそれ以下の処理では、上述の動画の場合
と同様にして、符号化された画像信号を復号して伸長
し、表示用の画像信号に変換してモニタ４０に表示す
る。

【０１５０】以上説明したように本実施の形態２によれ
ば、動画モードでは、分離された色差信号のビットプレ
ーンの下位ビットを破棄することにより、その画像デー
タの情報量を削減する。一方、静止画の場合には、画像
の動きがないため輝度と色差信号とを同じビットプレー
ンまで符号化（復号化）する。これにより、原画像信号
からの劣化を少なくするような処理を施している。

【０１５１】なお、本実施の形態２においては、符号化
或は復号化に際して、下位ビットを破棄することにより
情報量の制限を行っていたが、本発明はこれに限定され
ず、量子化の際に色差情報の重みを少なくしても同様の
効果が得られる。

【０１５２】また、トリガーボタン３５が押されて記録
開始が指示された場合には、記録部２２に圧縮処理後の
データを記録していたが、表示処理の場合と同様に、そ
の伸長処理後の画像データを記録してもよい。

【０１５３】［実施の形態３］次に本発明の実施の形態
３に係る撮像装置について、図１９及び図２３のブロッ
ク図、及び図２６のフロチャートを参照して説明する。

【０１５４】前述の実施の形態１，２においては、撮像
した画像信号全体に均一の処理を施した場合について説
明したが、本実施の形態３では、特定領域のみ高画質に
する処理について説明する。

【０１５５】まずステップＳ３０１で、領域検出回路３
２が、現在設定されている高画質領域を検出して、その
領域データを生成する。次にステップＳ２０２に進み、
モード選択ダイヤル３４で設定されている撮影モードを
検出する。ここでＭＯＶＩＥ（動画）が設定されている
場合はステップＳ３０３に進み、動画処理に適した処理
を行なうが、静止画モードが設定されている場合は静止
画に適した処理を行なうためステップＳ３０５に進む。

【０１５６】ステップＳ３０３では、モード選択ダイヤ
ル３４がＭＯＶＩＥ（動画）を設定しているので、各回
路に動画処理を行なうに指示を出力する。これにより選
択回路２０は、動画処理の指示を受けると、バッファメ
モリ１９に格納されたＲ，Ｇ，Ｂの各画像信号を色差マ
トリックス回路５０に送る。この色差マトリックス回路
５０は、このＲＧＢ信号から輝度信号と色差信号を生成
する。

【０１５７】こうして生成された色差信号を、ＬＰＦ６
１によって水平及び垂直方向の帯域をそれぞれ２分の１
に圧縮し、こうして圧縮した色差信号を間引き回路６２
により、その情報量を４分の１に削減する（ステップＳ
３０４）。

【０１５８】次にステップＳ３０５に進み、Ｒ，Ｇ，Ｂ
の各画像信号と、輝度信号と削減された色差信号及び領
域データを圧縮回路２１に送る。ここで圧縮回路２１
は、その領域データで指示された領域内の画像信号に対
しては、Ｒ，Ｇ，Ｂの画像信号のままウェーブレット変
換回路５１においてサブバンドに分割し、その分割した
各サブバンドを量子化処理回路５４において量子化す
る。更に、ビットプレーン分解回路５６によりビットプ
レーンに分解し、２値算術符号化回路５８により上位ビ
ットから符号化する。また、この領域データで規定され
た領域外の画像信号に対しては、輝度信号と色差信号と
をそれぞれウェーブレット係数に分解し、２値算術符号
化回路５８において上位ビットから符号化して圧縮処理
を行なう（ステップＳ３０５）。

【０１５９】次にステップＳ３０６に進み、伸長回路４
２により、この圧縮された画像信号を各サブバンドの上
位ビットプレーンから復号して逆ウェーブレット変換す
る。そしてステップＳ３０７に進み、その復号化された
画像信号を表示制御回路３８に送って表示用の画像信号
に変換する。こうしてステップＳ３０８では、その変換
された表示用画像信号を基に、モニタ４０に画像を表示
する。

【０１６０】一方ステップＳ３０２で、モード選択ダイ
ヤル３４がＳＴＩＬＬ（静止画）を設定している場合は
ステップＳ３０５に進み、各回路に静止画処理を行なう
指示を送る。これにより選択回路２０は、静止画処理の
指示を受けると、バッファメモリ１９に格納されたＲ，
Ｇ，Ｂの各画像信号に対して色信号の削減処理を行うこ
となく圧縮回路２１に送る。圧縮回路２１は、Ｒ，Ｇ，
Ｂの各色信号をそれぞれウェーブレット変換してサブバ
ンドに分割し、その分割したサブバンドをビットプレー
ンに分解して符号化する。これ以下の動作は、前述の動
画処理の場合と同様にして、画像信号を伸長し、その伸
長した表示用画像信号に基づいてモニタ４０に画像を表
示する。

【０１６１】以上説明したように本実施の形態３によれ
ば、動画では、人間の視覚特性が輝度の認識に比べて色
の認識の方が鈍感なことを利用して色情報を削減し、特
に指定領域以外の情報量を削減する処理を選択する。一
方、静止画の場合には、画像の動きがないため原画像信
号からの劣化を抑える処理を施している。

【０１６２】なお、トリガーボタン３５が押されて記録
開始の指示が入力されると、記録部２２に圧縮処理後の
画像データを記録するが、この場合も表示処理と同様
に、伸長処理後の画像データを記録するようにしてもよ
い。

【０１６３】［実施の形態４］次の本発明の実施の形態
４に係る撮像装置について図１９及び図２２のブロック
図、及び図２７のフロチャートを参照して説明する。

【０１６４】前述の実施の形態２では、撮像した画像信
号全体を均一の処理を施した場合について説明したが、
この実施の形態４では、画像データの特定領域のみを高
画質にする場合で説明する。

【０１６５】まずステップＳ４０１で、領域検出回路３
２により、現在設定されている高画質領域を検出し、そ
れに対応する領域データを生成する。次にステップＳ４
０２に進み、バッファメモリ１９に格納された輝度、色
差の各画像信号と、領域検出回路３２で生成された領域
データを圧縮回路２１に送る。圧縮回路２１は、ウェー
ブレット変換回路５１により輝度信号と色差信号をそれ
ぞれウェーブレット変換し、サブバンドに分割する。次
にステップＳ４０３に進み、占有率算出回路５２によ
り、領域データを基に、分割された各サブバンドにおけ
る高画質領域の設定及び占有率を算出する。そして係数
設定回路５９で設定された係数を用いて、ビットシフト
量計算回路５３は、高画質領域のビットシフト量を算出
する。そしてステップＳ４０４に進み、量子化処理回路
５４により量子化を実行し、インデックス変更回路５５
は、設定されている領域のみをシフトアップするように
インデックスを変更し、ビットプレーン分解回路５６に
よりビットプレーンに分解する。

【０１６６】次にステップＳ４０５に進み、モード選択
ダイヤル３４で設定されている撮影モードを検出する。
ここでＭＯＶＩＥ（動画）が設定されている場合はステ
ップＳ４０６に進み、動画処理に適した処理を行なう。
一方、静止画モードが設定されている場合はステップＳ
４０７に進み、静止画に適した処理を行なう。

【０１６７】ステップＳ４０６では、動画の場合には輝
度に比べて色情報が少なくても影響が少ないため、符号
化制御回路５７は、輝度信号よりも、色差信号の下位ビ
ットをより多く破棄する。こうして下位ビットが破棄さ
れた画像データは、ステップＳ４０７で、２値算術符号
化回路５８により符号化される。

【０１６８】次にステップＳ４０８に進み、こうして符
号化されて圧縮された画像信号は、伸長回路４２によ
り、各サブバンドの上位ビットプレーンから復号され、
逆ウェーブレット変換される。次にステップＳ４０８’
に進み、圧縮回路２１では、符号化制御回路５７によっ
て下位ビットを制御しているが、圧縮回路２１が制御せ
ずに、伸長回路４２の復号化処理の際に下位ビットプレ
ーンを制限することにより、出力データとしては同様の
制御ができる。

【０１６９】こうして復号化された画像信号は表示制御
回路３８に送られ、表示用の画像信号に変換される（ス
テップＳ４０９）。そして、この変換された表示用の画
像信号は、モニタ４０に出力されて表示される（ステッ
プＳ４１０）。

【０１７０】一方ステップＳ４０５で、モード選択ダイ
ヤル３４がＳＴＩＬＬ（静止画）を設定している場合は
ステップＳ４０７に進み、符号化制御回路５７は、色差
信号の下位ビットを破棄することなく２値算術符号化す
る。そして、以下の処理では、前述の動画の場合と同様
にして、符号化された画像信号を復号して伸長し、表示
用の画像信号に変換してモニタ４０に表示する。

【０１７１】以上説明したように本実施の形態４によれ
ば、動画モードでは、指定された高画質領域内の色差信
号を輝度信号より多く下位ビットを破棄することによ
り、情報量を削減する。一方、静止画では、画像の動き
がないため輝度と色差信号を同じビットプレーンまで符
号化（復号化）することにより、指定された画像領域で
は原画像信号からできるだけ劣化させない処理を施して
いる。

【０１７２】なお、本実施の形態４においては、画像デ
ータの下位ビットを破棄することにより制限していた
が、ビットシフトする際に輝度信号を色差信号のシフト
量より大きくすることによっても、同様の効果が得られ
る。更に、量子化の際に色差情報の重みだけを少なくし
ても同様の効果が得られる。

【０１７３】なお、トリガーボタン３５が押されて記録
開始の指示が入力されると、記録部２２に圧縮処理後の
画像データを記録するが、この場合も表示処理と同様
に、伸長処理後の画像データを記録するようにしてもよ
い。

【０１７４】なお本発明は、複数の機器（例えばホスト
コンピュータ、インターフェース機器、リーダ、プリン
タなど）から構成されるシステムに適用しても、一つの
機器からなる装置（例えば、複写機、ファクシミリ装置
など）に適用してもよい。

【０１７５】また本発明の目的は、前述した実施の形態
の機能を実現するソフトウェアのプログラムコードを記
録した記憶媒体（または記録媒体）を、システムあるい
は装置に供給し、そのシステムあるいは装置のコンピュ
ータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納された
プログラムコードを読み出し実行することによっても達
成される。この場合、記憶媒体から読み出されたプログ
ラムコード自体が前述した実施の形態の機能を実現する
ことになり、そのプログラムコードを記憶した記憶媒体
は本発明を構成することになる。また、コンピュータが
読み出したプログラムコードを実行することにより、前
述した実施の形態の機能が実現されるだけでなく、その
プログラムコードの指示に基づき、コンピュータ上で稼
働しているオペレーティングシステム（ＯＳ）などが実
際の処理の一部または全部を行い、その処理によって前
述した実施の形態の機能が実現される場合も含まれる。

【０１７６】さらに、記憶媒体から読み出されたプログ
ラムコードが、コンピュータに挿入された機能拡張カー
ドやコンピュータに接続された機能拡張ユニットに備わ
るメモリに書込まれた後、そのプログラムコードの指示
に基づき、その機能拡張カードや機能拡張ユニットに備
わるＣＰＵなどが実際の処理の一部または全部を行い、
その処理によって前述した実施の形態の機能が実現され
る場合も含まれる。

【０１７７】以上説明したように本実施の形態によれ
ば、動画像処理においては所定のレートで所定時間内の
処理が求められるため、色信号を削減して画像処理およ
び符号化、復号化処理を行なう。これにより、処理速度
及びデータサイズを優先した処理を行なうことが可能と
なる。

【０１７８】また、静止画像処理においては、処理時間
より再生される画質がより求められるため、入力信号か
らの情報の削減を出来る限り減らして画像処理および符
号化、復号化処理を行なう。これにより、画質を優先し
た処理を行なうことが可能となる。そして、この処理を
動画と静止画を選択して処理するモードダイヤルの選択
に連動させることにより、自動的に動画像及び静止画像
のそれぞれに適した処理を自動的に行なうことが可能と
した。

【０１７９】また本実施の形態によれば、動画像と静止
画像の双方を記録再生可能な撮像装置において、煩わし
い操作をすること無く動画／静止画のモード選択に応じ
て、各画像に適した画像処理及び符号化処理を自動的に
選択可能にする。特に動画像処理においては、人間の視
覚特性を利用した処理を施すことで色信号の情報量を削
減し、静止画においてはより精細な画像が求められるた
め、動画像で行なう色信号の削減処理を行なわず劣化の
少ない処理を自動的に選択することを可能とした。

【０１８０】更に、本実施の形態によれば、動画像と静
止画像の双方を記録再生可能な撮像装置において、特定
の領域を高画質に処理することができ、更に動画／静止
画のモード選択に応じてそれぞれに適した画像処理及び
符号化処理を自動的に選択可能にすることにより、動画
像処理においては、領域以外の情報量を削減した処理を
実行し、静止画においては、動画像で行なう色信号の削
減処理を行なわず、劣化の少ない画像再生処理を自動的
に選択できるようにした。

【０１８１】さらにまた本実施の形態によれば、Ｒ，
Ｇ，Ｂの３板等からなる複数の光学フィルタを有し動画
像と静止画像の双方を記録再生可能な撮像装置におい
て、動画／静止画のモード選択に応じて、それぞれに適
した画像処理及び符号化処理を自動的に選択可能とし、
動画像処理においては、輝度信号と色信号に分離した後
に色信号のみ削減することにより速度優先の処理を行
い、静止画においてはより精細な画像が求められるた
め、原画像信号を崩さない画質優先の処理を行なう。

【０１８２】尚、上記各実施の形態においては、第１の
実施の形態と同様に、動画モードをインターレースモー
ド、静止画モードをノンインターレースモードに置き換
えて各実施の形態を実行しても良く、このような２モー
ドに対する動作制御も本発明の範疇に含まれる。

【０１８３】

【発明の効果】以上説明したように本発明によれば、、
複数の撮像モードを備える場合に、各撮像モードで入力
する画像信号の性質に適した圧縮処理を行うことができ
る。

【図面の簡単な説明】

【図１】本発明の実施の形態に係るビデオカメラにおけ
る画像処理回路（圧縮回路）の構成を示すブロック図で
ある。

【図２】離散ウェーブレット変換部の構成を示すブロッ
ク図である。

【図３】２次元離散ウェーブレット変換部の係数群の構
成図（ａ）と、２次元の離散ウェーブレットのサブバン
ドの構成図（ｂ）である。

【図４】本実施の形態に係るマスク情報、及び量子化イ
ンデックスの変化の様子を説明する図である。

【図５】本実施の形態におけるエントロピ符号化部の動
作を説明する図である。

【図６】カラー画像における２次元の離散ウェーブレッ
トのサブバンドの構成を説明する図である。

【図７】カラー画像における２次元の離散ウェーブレッ
トのサブバンドの構成を説明する図である。

【図８】カラー画像における２次元の離散ウェーブレッ
トのサブバンドの構成を説明する図である。

【図９】空間スケーラブルの符号列の構成を表す概略図
である。

【図１０】ＳＮＲスケーラブルの符号列の構成を表す概
略図である。

【図１１】本発明の実施の形態に係るビデオカメラにお
ける画像処理回路（復号回路）の構成を示すブロック図
である。

【図１２】エントロピ復号化部の動作を説明する図であ
る。

【図１３】逆離散ウェーブレット変換部の構成を示すブ
ロック図である。

【図１４】符号列の構成（ａ）、及びその符号列を復元
した際の画像の形態（ｂ）を説明する図である。

【図１５】符号列の構成（ａ）、及びその符号列を復元
した際の画像の形態（ｂ）を説明する図である。

【図１６】本発明の実施の形態に係るビデオカメラの外
観図（ａ）、及び領域指定レバーを説明する図（ｂ）で
ある。

【図１７】本実施の形態に係るビデオカメラの構成を示
すブロック図である。

【図１８】本実施の形態に係るビデオカメラのカメラ信
号処理回路の詳細図で、（ａ）は３板ＣＣＤを用いた場
合の構成を示し、（ｂ）は単板ＣＣＤを用いた場合を示
している。

【図１９】本実施の形態に係るビデオカメラにおける圧
縮回路の構成を示すブロック図である。

【図２０】本実施の形態に係るビデオカメラにおいて、
領域指定操作に伴うモニタ表示の変化を示す図である。

【図２１】本実施の形態に係るビデオカメラのモニタへ
の表示例を示す図である。

【図２２】本発明の実施の形態１，３に係るビデオカメ
ラにおける信号処理部の構成をより詳細に示すブロック
図である。

【図２３】本発明の実施の形態２，４に係るビデオカメ
ラにおける信号処理部の構成をより詳細に示すブロック
図である。

【図２４】本発明の実施の形態１に係るビデオカメラに
おける撮像モードに応じた動作を示すフロチャートであ
る。

【図２５】本発明の実施の形態２に係るビデオカメラに
おける撮像モードに応じた動作を示すフロチャートであ
る。

【図２６】本発明の実施の形態３に係るビデオカメラに
おける撮像モードに応じた動作を示すフロチャートであ
る。

【図２７】本発明の実施の形態４に係るビデオカメラに
おける撮像モードに応じた動作を示すフロチャートであ
る。

フロントページの続き Ｆターム(参考） 5C057 AA01 BA01 BA14 BB02 BB03 DA03 EH10 EM07 EM13 EM16 GC01 GF01 GF02 GF03 GG01 GM01 5C059 LA07 MA24 MA35 ME01 PP01 PP04 PP14 PP26 PP28 SS14 SS20 TA33 TA80 TC24 TC43 UA02 UA05 UA39 5C078 AA09 BA57 BA58 DB19

Claims (32)

【特許請求の範囲】
1. 【請求項１】 動画入力モード或は静止画入力モードに
   て、複数の色成分信号で構成される画像信号を入力する
   入力手段と、 前記動画入力モードの際は、前記画像信号から輝度信号
   と色差信号とを生成し、該色差信号の情報量を減縮して
   前記輝度信号と共に圧縮し、前記静止画入力モードの時
   は前記複数の色成分信号を圧縮する圧縮手段と、を有す
   ることを特徴とする画像処理装置。
2. 【請求項２】 前記圧縮手段による圧縮は、ウェーブレ
   ット変換及び量子化処理及びビットプレーン符号化を含
   むことを特徴とする請求項１に記載の画像処理装置。
3. 【請求項３】 動画入力モード或は静止画入力モードに
   て、複数の色成分信号で構成される画像信号を入力する
   入力工程と、 前記動画入力モードの際は、前記画像信号から輝度信号
   と色差信号とを生成し、該色差信号の情報量を減縮して
   前記輝度信号と共に圧縮し、前記静止画入力モードの時
   は前記複数の色成分信号を圧縮する圧縮工程と、を有す
   ることを特徴とする画像処理方法。
4. 【請求項４】 コンピュータにより読み取り可能な記憶
   媒体であって、 動画入力モード或は静止画入力モードにて、複数の色成
   分信号で構成される画像信号を入力する入力工程モジュ
   ールと、 前記動画入力モードの際は、前記画像信号から輝度信号
   と色差信号とを生成し、該色差信号の情報量を減縮して
   前記輝度信号と共に圧縮し、前記静止画入力モードの時
   は前記複数の色成分信号を圧縮する圧縮工程モジュール
   と、を有することを特徴とする記憶媒体。
5. 【請求項５】 動画入力モード或は静止画入力モードに
   て、輝度信号と色差信号とを含む画像信号を入力する入
   力手段と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
   し、量子化し、得られた量子化インデックスを上位ビッ
   トから順にビットプレーン符号化する圧縮手段とを有
   し、 前記圧縮手段は、前記動画入力モードの時には前記静止
   画入力モードの時よりも前記色差信号をビットプレーン
   符号化するプレーン数を少なくすることを特徴とする画
   像処理装置。
6. 【請求項６】 動画入力モード或は静止画入力モードに
   て、輝度信号と色差信号とを含む画像信号を入力する入
   力工程と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
   し、量子化し、得られた量子化インデックスを上位ビッ
   トから順にビットプレーン符号化する圧縮工程とを有
   し、 前記圧縮工程では、前記動画入力モードの時には前記静
   止画入力モードの時よりも前記色差信号をビットプレー
   ン符号化するプレーン数を少なくすることを特徴とする
   画像処理方法。
7. 【請求項７】 コンピュータにより読み取り可能な記憶
   媒体であって、 動画入力モード或は静止画入力モードにて、輝度信号と
   色差信号とを含む画像信号を入力する入力工程モジュー
   ルと、 前記輝度及び色差信号のそれぞれをウェーブレット変換
   し、量子化し、得られた量子化インデックスを上位ビッ
   トから順にビットプレーン符号化する圧縮工程モジュー
   ルとを有し、 前記圧縮工程モジュールでは、前記動画入力モードの時
   には前記静止画入力モードの時よりも前記色差信号をビ
   ットプレーン符号化するプレーン数を少なくすることを
   特徴とする記憶媒体。
8. 【請求項８】 動画入力モード或は静止画入力モードに
   て、輝度信号と色差信号とを含む画像信号を入力する入
   力手段と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
   し、量子化し、得られた量子化インデックスを上位ビッ
   トから順にビットプレーン符号化する圧縮手段と、 前記圧縮手段により得られた圧縮データを上位ビットか
   ら順に復号化する復号化手段とを有し、 前記圧縮手段は、前記動画入力モードで入力された画像
   信号の圧縮データを復号する時には、前記静止画入力モ
   ードの時よりも前記色差信号をビットプレーン復号化す
   るプレーン数を少なくするように制御することを特徴と
   する画像処理装置。
9. 【請求項９】 動画入力モード或は静止画入力モードに
   て、輝度信号と色差信号とを含む画像信号を入力する入
   力工程と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
   し、量子化し、得られた量子化インデックスを上位ビッ
   トから順にビットプレーン符号化する圧縮工程と、 前記圧縮工程で得られた圧縮データを上位ビットから順
   に復号化する復号化工程とを有し、 前記圧縮工程では、前記動画入力モードで入力された画
   像信号の圧縮データを復号する時には、前記静止画入力
   モードの時よりも前記色差信号をビットプレーン復号化
   するプレーン数を少なくするように制御することを特徴
   とする画像処理方法。
10. 【請求項１０】 コンピュータにより読み取り可能な記
    憶媒体であって、 動画入力モード或は静止画入力モードにて、輝度信号と
    色差信号とを含む画像信号を入力する入力工程モジュー
    ルと、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮工程モジュー
    ルと、 前記圧縮工程モジュールで得られた圧縮データを上位ビ
    ットから順に復号化する復号化工程モジュールとを有
    し、 前記圧縮工程モジュールでは、前記動画入力モードで入
    力された画像信号の圧縮データを復号する時には、前記
    静止画入力モードの時よりも前記色差信号をビットプレ
    ーン復号化するプレーン数を少なくするように制御する
    ことを特徴とする記憶媒体。
11. 【請求項１１】 動画入力モード或は静止画入力モード
    にて画像信号を入力する入力手段と、 前記動画入力モードの時は、前記画像信号が示す画像の
    所定領域と他領域とで種類の異なる、前記画像信号に基
    づく第１画像信号を発生し、各々圧縮し、 前記静止画入力モードのときは前記画像信号が示す画像
    の所定領域と他領域とで同種類の前記画像信号に基づく
    画像信号を発生し、それぞれを圧縮する圧縮手段と、を
    有することを特徴とする画像処理装置。
12. 【請求項１２】 前記動画入力モードの時は、前記画像
    信号が示す画像の所定領域ではＲＧＢ信号を発生し、他
    の領域では輝度、色差信号を発生し、それぞれ圧縮する
    ことを特徴とする請求項１１に記載の画像処理装置。
13. 【請求項１３】 前記静止画入力モードの時は、前記画
    像信号が示す画像の所定領域と他の領域ではＲＧＢ信号
    を発生し、それぞれ圧縮することを特徴とする請求項１
    ２に記載の画像処理装置。
14. 【請求項１４】 前記圧縮手段による圧縮はウェーブレ
    ット変換及び量子化処理及びビットプレーン符号化を含
    むことを特徴とする請求項１１に記載の画像処理装置。
15. 【請求項１５】 動画入力モード或は静止画入力モード
    にて画像信号を入力する入力工程と、 前記動画入力モードの時は、前記画像信号が示す画像の
    所定領域と他領域とで種類の異なる、前記画像信号に基
    づく第１画像信号を発生し、各々圧縮し、 前記静止画入力モードのときは前記画像信号が示す画像
    の所定領域と他領域とで同種類の前記画像信号に基づく
    画像信号を発生し、それぞれを圧縮する圧縮工程と、を
    有することを特徴とする画像処理方法。
16. 【請求項１６】 コンピュータにより読み取り可能な記
    憶媒体であって、 動画入力モード或は静止画入力モードにて画像信号を入
    力する入力工程モジュールと、 前記動画入力モードの時は、前記画像信号が示す画像の
    所定領域と他領域とで種類の異なる、前記画像信号に基
    づく第１画像信号を発生し、各々圧縮し、 前記静止画入力モードのときは前記画像信号が示す画像
    の所定領域と他領域とで同種類の前記画像信号に基づく
    画像信号を発生し、それぞれを圧縮する圧縮工程モジュ
    ールと、を有することを特徴とする記憶媒体。
17. 【請求項１７】 インターレースモード或はノンインタ
    ーレースモードにて、複数の色成分信号で構成される画
    像信号を入力する入力手段と、 前記インターレースモードの際は、前記画像信号から輝
    度信号と色差信号とを生成し、該色差信号の情報量を減
    縮して前記輝度信号と共に圧縮し、前記ノンインターレ
    ースモードの時は前記複数の色成分信号を圧縮する圧縮
    手段と、を有することを特徴とする画像処理装置。
18. 【請求項１８】 前記圧縮手段による圧縮は、ウェーブ
    レット変換及び量子化処理及びビットプレーン符号化を
    含むことを特徴とする請求項１７に記載の画像処理装
    置。
19. 【請求項１９】 インターレースモード或はノンインタ
    ーレースモードにて、複数の色成分信号で構成される画
    像信号を入力する入力工程と、 前記インターレースモードの際は、前記画像信号から輝
    度信号と色差信号とを生成し、該色差信号の情報量を減
    縮して前記輝度信号と共に圧縮し、前記ノンインターレ
    ースモードの時は前記複数の色成分信号を圧縮する圧縮
    工程と、を有することを特徴とする画像処理方法。
20. 【請求項２０】 コンピュータにより読み取り可能な記
    憶媒体であって、 インターレースモード或はノンインターレースモードに
    て、複数の色成分信号で構成される画像信号を入力する
    入力工程モジュールと、 前記インターレースモードの際は、前記画像信号から輝
    度信号と色差信号とを生成し、該色差信号の情報量を減
    縮して前記輝度信号と共に圧縮し、前記ノンインターレ
    ースモードの時は前記複数の色成分信号を圧縮する圧縮
    工程モジュールと、を有することを特徴とする記憶媒
    体。
21. 【請求項２１】 インターレースモード或はノンインタ
    ーレースモードにて、輝度信号と色差信号とを含む画像
    信号を入力する入力手段と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮手段とを有
    し、 前記圧縮手段は、前記インターレースモードの時には前
    記ノンインターレースモードの時よりも前記色差信号を
    ビットプレーン符号化するプレーン数を少なくすること
    を特徴とする画像処理装置。
22. 【請求項２２】 インターレースモード或はノンインタ
    ーレースモードにて、輝度信号と色差信号とを含む画像
    信号を入力する入力工程と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮工程とを有
    し、 前記圧縮工程では、前記インターレースモードの時には
    前記ノンインターレースモードの時よりも前記色差信号
    をビットプレーン符号化するプレーン数を少なくするこ
    とを特徴とする画像処理方法。
23. 【請求項２３】 コンピュータにより読み取り可能な記
    憶媒体であって、 インターレースモード或はノンインターレースモードに
    て、輝度信号と色差信号とを含む画像信号を入力する入
    力工程モジュールと、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮工程モジュー
    ルとを有し、 前記圧縮工程モジュールでは、前記インターレースモー
    ドの時には前記ノンインターレースモードの時よりも前
    記色差信号をビットプレーン符号化するプレーン数を少
    なくすることを特徴とする記憶媒体。
24. 【請求項２４】 インターレースモード或はノンインタ
    ーレースモードにて、輝度信号と色差信号とを含む画像
    信号を入力する入力手段と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮手段と、 前記圧縮手段により得られた圧縮データを上位ビットか
    ら順に復号化する復号化手段とを有し、 前記圧縮手段は、前記インターレースモードで入力され
    た画像信号の圧縮データを復号する時には、前記ノンイ
    ンターレースモードの時よりも前記色差信号をビットプ
    レーン復号化するプレーン数を少なくするように制御す
    ることを特徴とする画像処理装置。
25. 【請求項２５】 インターレースモード或はノンインタ
    ーレースモードにて、輝度信号と色差信号とを含む画像
    信号を入力する入力工程と、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮工程と、 前記圧縮工程で得られた圧縮データを上位ビットから順
    に復号化する復号化工程とを有し、 前記圧縮工程では、前記インターレースモードで入力さ
    れた画像信号の圧縮データを復号する時には、前記ノン
    インターレースモードの時よりも前記色差信号をビット
    プレーン復号化するプレーン数を少なくするように制御
    することを特徴とする画像処理方法。
26. 【請求項２６】 コンピュータにより読み取り可能な記
    憶媒体であって、 インターレースモード或はノンインターレースモードに
    て、輝度信号と色差信号とを含む画像信号を入力する入
    力工程モジュールと、 前記輝度及び色差信号のそれぞれをウェーブレット変換
    し、量子化し、得られた量子化インデックスを上位ビッ
    トから順にビットプレーン符号化する圧縮工程モジュー
    ルと、 前記圧縮工程モジュールで得られた圧縮データを上位ビ
    ットから順に復号化する復号化工程モジュールとを有
    し、 前記圧縮工程モジュールでは、前記インターレースモー
    ドで入力された画像信号の圧縮データを復号する時に
    は、前記ノンインターレースモードの時よりも前記色差
    信号をビットプレーン復号化するプレーン数を少なくす
    るように制御することを特徴とする記憶媒体。
27. 【請求項２７】 インターレースモード或はノンインタ
    ーレースモードにて画像信号を入力する入力手段と、 前記インターレースモードの時は、前記画像信号が示す
    画像の所定領域と他領域とで種類の異なる、前記画像信
    号に基づく第１画像信号を発生し、各々圧縮し、 前記ノンインターレースモードのときは前記画像信号が
    示す画像の所定領域と他領域とで同種類の前記画像信号
    に基づく画像信号を発生し、それぞれを圧縮する圧縮手
    段と、を有することを特徴とする画像処理装置。
28. 【請求項２８】 前記インターレースモードの時は、前
    記画像信号が示す画像の所定領域ではＲＧＢ信号を発生
    し、他の領域では輝度、色差信号を発生し、それぞれ圧
    縮することを特徴とする請求項２７に記載の画像処理装
    置。
29. 【請求項２９】 前記ノンインターレースモードの時
    は、前記画像信号が示す画像の所定領域と他の領域では
    ＲＧＢ信号を発生し、それぞれ圧縮することを特徴とす
    る請求項２７に記載の画像処理装置。
30. 【請求項３０】 前記圧縮手段による圧縮はウェーブレ
    ット変換及び量子化処理及びビットプレーン符号化を含
    むことを特徴とする請求項２７に記載の画像処理装置。
31. 【請求項３１】 インターレースモード或はノンインタ
    ーレースモードにて画像信号を入力する入力工程と、 前記インターレースモードの時は、前記画像信号が示す
    画像の所定領域と他領域とで種類の異なる、前記画像信
    号に基づく第１画像信号を発生し、各々圧縮し、 前記ノンインターレースモードのときは前記画像信号が
    示す画像の所定領域と他領域とで同種類の前記画像信号
    に基づく画像信号を発生し、それぞれを圧縮する圧縮工
    程と、を有することを特徴とする画像処理方法。
32. 【請求項３２】 コンピュータにより読み取り可能な記
    憶媒体であって、 インターレースモード或はノンインターレースモードに
    て画像信号を入力する入力工程モジュールと、 前記インターレースモードの時は、前記画像信号が示す
    画像の所定領域と他領域とで種類の異なる、前記画像信
    号に基づく第１画像信号を発生し、各々圧縮し、 前記ノンインターレースモードのときは前記画像信号が
    示す画像の所定領域と他領域とで同種類の前記画像信号
    に基づく画像信号を発生し、それぞれを圧縮する圧縮工
    程モジュールと、を有することを特徴とする記憶媒体。