JP2000013806A - 画像処理装置及び画像処理方法 - Google Patents

画像処理装置及び画像処理方法

Info

Publication number
JP2000013806A
JP2000013806A JP17641898A JP17641898A JP2000013806A JP 2000013806 A JP2000013806 A JP 2000013806A JP 17641898 A JP17641898 A JP 17641898A JP 17641898 A JP17641898 A JP 17641898A JP 2000013806 A JP2000013806 A JP 2000013806A
Authority
JP
Japan
Prior art keywords
image
fixed
length
level
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP17641898A
Other languages
English (en)
Inventor
Narihiro Matoba
成浩 的場
Kazuto Terada
和人 寺田
Masaji Tamura
正司 田村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP17641898A priority Critical patent/JP2000013806A/ja
Priority to US09/337,494 priority patent/US6906753B1/en
Publication of JP2000013806A publication Critical patent/JP2000013806A/ja
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

(57)【要約】 【課題】 画像データの符号化のための制御が複雑で回
路規模も大きいという課題があった。 【解決手段】 画像を撮像して電気信号に変換する撮像
装置から出力される所定の画素数の画像信号をＡ／Ｄコ
ンバータでＡ／Ｄ変換して画像データとして出力し、固
定長符号化手段で、該画像データを小領域の単位ブロッ
クに細分し、該単位ブロック内の前記画像データの平均
値レベルを求めて固定長符号化し、露出制御手段で、前
記平均値レベルに基づいて前記単位ブロック内の前記画
像データ全体の輝度レベルを算出し、該画像データが所
定の輝度レベルとなるように前記撮像装置の露出量を制
御する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】この発明は、撮像装置から出
力される画像信号を符号化した符号化データを用いて、
露出制御、ゲイン制御、ホワイトバランス制御を行うデ
ジタルスチルビデオカメラ等の画像処理装置及び画像処
理方法に関するものである。
【０００２】
【従来の技術】ＣＣＤ等の撮像素子で撮像された画像信
号を直交変換して符号化する機能を備えたデジタルスチ
ルビデオカメラにおいて、直交変換によって得られる直
流成分データを露出制御に利用する技術が、特開平４−
２９８１７０号公報に開示されている。
【０００３】図１６は、この特開平４−２９８１７０号
公報に開示されたデジタルスチルビデオカメラを示す構
成図であり、図において、１０１は入射光量を空間的に
制限する絞り、１０２は入射光量を時間的に制限するシ
ャッタ、１０３は受光した入射光を電気信号に変換する
ＣＣＤ、１０４はＣＣＤ１０３から出力される画像信号
の輝度成分とカラー成分を分離して出力するＹ／Ｃ分離
回路、１０５はＣＣＤ１０３を駆動する駆動信号をＣＣ
Ｄ１０３に供給するＣＣＤドライバ、１０６はＹ／Ｃ分
離回路１０４から出力されるアナログ信号形態の輝度信
号とカラー信号をデジタル信号形態の画像データに変換
するＡ／Ｄ変換器、１０７はＡ／Ｄ変換器１０６から出
力される画像データを一時的に格納する高速バッファメ
モリ、１０８は高速バッファメモリ１０７から画像デー
タを読み出し、１画面分の画像データを複数のブロック
に分割し、各ブロック毎に直交変換して得られた各周波
数情報を量子化して符号化することによりデータ圧縮を
行い、またその逆変換を行うことによってデータ伸長を
行うデータ圧縮・伸長回路、１０９はデータ圧縮・伸長
回路１０８でデータ圧縮された画像データを記録する記
録メモリ、１１０は高速バッファメモリ１０７から読み
出した画像データをアナログ信号に変換するＤ／Ａ変換
器、１１１は上記各構成要素の動作を制御するタイミン
グ信号を上記各構成要素に送信するとともに、データ圧
縮・伸長回路１０８のデータ圧縮過程における直行変換
後の各ブロックの直流成分データを測光データとして読
み込んで、絞り１０１及びシャッタ１０２の動作を制御
する制御信号を出力するシステムコントローラである。
【０００４】次に動作について説明する。この従来のデ
ジタルスチルビデオカメラは、システムコントローラ１
１１が、データ圧縮・伸長回路１０８のデータ圧縮過程
における直交変換後の各ブロックの直流成分データをブ
ロック毎に読み込んで測光データとして使用し、絞り１
０１及びシャッタ１０２の駆動を制御して、撮像する被
写体に対して適正な露出となるよう露出制御を行う。
【０００５】
【発明が解決しようとする課題】従来の画像処理装置は
以上のように構成されているので、符号化方式に直交変
換方式を用いており、リアルタイムに測光データを算出
してかつ符号化するためには、一連の符号化シーケンス
をリアルタイムに処理する必要があるが、直交変換符号
化は可変長符号化方式であるため制御が複雑となり、回
路規模も大きくなるという課題があった。
【０００６】また、撮像画像のデジタルデータに対して
ゲイン補正を施すために測光データを用いる場合、符号
化データとは別に直流成分を保存するか、再度直流成分
を復号によって生成し直す必要があり、処理手順が増え
るという課題があった。
【０００７】さらに、符号化された撮像画像のデジタル
データに対してゲイン補正を施すための処理を、符号化
データに対して直接施すことができず、一旦復号化処理
を施した後にシーケンシャルに処理する必要があるた
め、高速化が図れないという課題があった。
【０００８】さらに、直交変換符号化は可変長符号化方
式であるため、復号化時も符号化データの読み出しのた
めのアドレス計算等の制御が複雑となり、処理速度が低
下したり、回路規模が大きくなってしまうという課題が
あった。
【０００９】さらに、複数のカラーフィルタで構成され
ている撮像素子からの出力画像を単一のカラー信号成分
として符号化すると、カラー変調成分が解像度成分とし
て処理され、符号化による量子化誤差が大きくなり、測
光データの精度が低下するという課題があった。
【００１０】さらに、複数のカラーフィルタで構成され
ている撮像素子からの出力画像のカラー別の感度誤差を
補正するホワイトバランス処理を施すためには、カラー
成分数分の符号化手段が必要となり、回路規模が増大す
るという課題があった。
【００１１】また、所望の条件で測光データに用いるブ
ロックを選択する場合、条件判定のための処理は符号化
データ自身を用いることができず、符号化の途中のデー
タを別途使用する必要があり、処理手順が増えるという
課題があった。
【００１２】さらに、所望の条件で測光データに用いる
ブロックを選択する場合、符号化された撮像画像のデジ
タルデータに対してゲイン補正を施すための処理が、可
変長符号化方式であるため、簡易な処理で測光データに
用いるブロックを選択できず、処理が複雑になるという
課題があった。
【００１３】この発明は上記のような課題を解決するた
めになされたもので、簡易な制御と小回路規模で、一連
の符号化シーケンスをリアルタイムに処理できる画像処
理装置を提供することを目的とする。
【００１４】また、この発明は、撮像画像のデジタルデ
ータに対してゲイン補正を施すための測光データを符号
化データのみを用いることにより、符号化データとは別
に測光データを保存したり、再度復号処理を施すことな
く簡易な処理で符号化データを用いたゲイン補正処理が
実現できる画像処理装置を提供することを目的とする。
【００１５】さらに、この発明は、符号化された撮像画
像のデジタルデータに対してゲイン補正を施すための処
理を、符号化データに対して直接施すことで、高速に符
号化データを用いたゲイン補正処理が実現できる画像処
理装置を提供することを目的とする。
【００１６】さらに、この発明は、復号化時にも符号化
データの読み出しのためのアドレス計算等の制御が簡易
となる画像処理装置を提供することを目的とする。
【００１７】さらに、この発明は、複数のカラーフィル
タで構成されている撮像素子からの出力画像に対し、カ
ラー変調成分が解像度成分として処理され、符号化によ
る量子化誤差を抑えて、測光データの精度を向上させた
画像処理装置を提供することを目的とする。
【００１８】さらに、この発明は、複数のカラーフィル
タで構成されている撮像素子からの出力画像のカラー別
の感度誤差を補正するホワイトバランス処理を施すため
に、カラー成分数分の符号化手段を必要とせず、小回路
規模で実現できる画像処理装置を提供することを目的と
する。
【００１９】さらに、この発明は、所望の条件で測光デ
ータに用いるブロックを選択する場合、条件判定のため
の処理は符号化データ自身を用いることで処理手順の少
ない画像処理装置を提供することを目的とする。
【００２０】さらに、この発明は、所望の条件で測光デ
ータに用いるブロックを選択する場合、符号化された撮
像画像のデジタルデータに対してゲイン補正を施すため
の処理を簡易な処理で測光データに用いるブロックを選
択できる画像処理装置を提供することを目的とする。
【００２１】
【課題を解決するための手段】この発明に係る画像処理
装置は、固定長符号化手段により、画像データを小領域
の単位ブロックに細分し、該単位ブロック内の前記画像
データの平均値レベルを求めて固定長符号化し、露出制
御手段により、前記平均値レベルに基づいて前記単位ブ
ロック内の前記画像データ全体の輝度レベルを算出し、
該画像データが所定の輝度レベルとなるように撮像装置
の露出量を制御するものである。
【００２２】この発明に係る画像処理装置は、露出制御
手段が、符号化メモリに格納された平均値レベルを読み
出して、この読み出した平均値レベルに基づいて単位ブ
ロック内の画像データ全体の輝度レベルを算出し、該画
像データが所定の輝度レベルとなるように撮像装置の露
出量を制御するものである。
【００２３】この発明に係る画像処理装置は、固定長復
号化手段が、符号化メモリに格納された固定長符号化デ
ータを読み出し、平均値レベルに基づいてゲイン補正を
行いながら固定長復号化を行うものである。
【００２４】この発明に係る画像処理装置は、信号処理
手段が、固定長復号化手段により復号された画像データ
に対して平均値レベルに基づいてゲイン補正を行うもの
である。
【００２５】この発明に係る画像処理装置は、画素並べ
替え手段が、撮像装置から出力される画像信号が複数の
カラー成分を含むものである場合にＡ／Ｄコンバータに
よりデジタル変換された画像データの各カラー成分を並
べ替えてカラー成分毎に符号化の単位ブロックとして纏
めて固定長符号化手段に出力するものである。
【００２６】この発明に係る画像処理装置は、信号レベ
ル補正手段が、平均値レベルに基づいて単位ブロック内
のカラー成分毎の画像データの輝度レベルを算出し、該
輝度レベルが各カラー成分で同一となるように信号レベ
ルを補正するものである。
【００２７】この発明に係る画像処理装置は、信号レベ
ル補正手段が符号化メモリに格納された平均値レベルを
読み出して、この読み出した平均値レベルに基づいて単
位ブロック内のカラー成分毎の画像データの輝度レベル
を算出し、該輝度レベルが各カラー成分で同一となるよ
うに信号レベルを補正するものである。
【００２８】この発明に係る画像処理装置は、固定長復
号化手段が、符号化メモリに格納された固定長符号化デ
ータを読み出し、平均値レベルに基づいて単位ブロック
内のカラー成分毎の画像データの輝度レベルを算出し、
該輝度レベルが各カラー成分で同一となるように信号レ
ベルを補正しながら固定長復号化を行うものである。
【００２９】この発明に係る画像処理装置は、信号処理
手段が、固定長復号化手段により復号された画像データ
に対して平均値レベルに基づいて単位ブロック内のカラ
ー成分毎の画像データの輝度レベルを算出し、該輝度レ
ベルが各カラー成分で同一となるように信号レベルを補
正するものである。
【００３０】この発明に係る画像処理装置は、選択手段
が、固定長符号化データの平均値レベルを用いる小領域
のブロック数を選択するものである。
【００３１】この発明に係る画像処理装置は、選択手段
が、固定長符号化データの平均値レベルを用いる小領域
のブロック位置を選択するものである。
【００３２】この発明に係る画像処理装置は、選択手段
が、固定長符号化データの平均値レベルを用いる小領域
のブロックを、前記平均値レベルの値で選択するもので
ある。
【００３３】この発明に係る画像処理方法は、画像デー
タを小領域の単位ブロックに細分し、該単位ブロック内
の前記画像データの平均値レベルを求めて固定長符号化
し、前記平均値レベルに基づいて前記単位ブロック内の
前記画像データ全体の輝度レベルを算出し、該画像デー
タが所定の輝度レベルとなるように前記撮像装置の露出
量を制御するものである。
【００３４】
【発明の実施の形態】以下、この発明の実施の一形態を
説明する。 実施の形態１．図１は、この発明の実施の形態１による
画像処理装置を示す構成図であり、図において、１は複
数色のカラーフィルタを備え画素信号が点順次で出力さ
れるＣＣＤ等の単板式撮像素子を有する撮像装置、２は
露出制御のために撮像装置１から出力されたアナログ画
像信号のレベルを増幅する増幅回路やフィルタリング処
理回路等を含むアナログ信号処理回路、３はアナログ信
号処理回路２から出力されるアナログ信号をデジタル信
号に変換するＡ／Ｄコンバータ、５はＡ／Ｄコンバータ
３から出力されるカラー信号ブロック毎のデジタル画像
データにＦＢＴＣ（Ｆｉｘｅｄ Ｂｌｏｃｋ Ｔｒｕｎ
ｃａｔｉｏｎ Ｃｏｄｉｎｇ）方式の固定長符号化を行
う固定長符号化回路（固定長符号化手段）、６は固定長
符号化回路５から出力される符号化されたデータを保存
する符号化メモリ、１７は露出制御のために撮像装置１
の撮像素子の露光時間を制御する駆動回路（露出制御手
段）、１８は固定長符号化回路５から出力される符号化
されたデータを元にアナログ信号処理回路２と駆動回路
１７を制御するシステムコントローラ（露出制御手段）
である。
【００３５】また、７は符号化メモリ６から符号化され
たデータを読み出して固定長復号化する固定長復号化回
路（固定長復号化手段）、９は固定長復号化回路７によ
り復号化された画像データに画素補間、階調補正、γ−
補正等の補正を施す信号処理回路、１０は信号処理回路
９により補正された信号を保存するフレームメモリ、１
１はフレームメモリ１０に記憶されたデータを読み出し
て２次記憶のためにＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏ
ｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式等
の可変長符号化方式により符号化する可変長符号化回
路、１２はフレームメモリ１０から読み出したデータを
画像として表示するＣＲＴ等の表示装置、１３はフロッ
ピーディスク、ハードディスク、フラッシュメモリ等の
２次記憶装置である。
【００３６】次に動作について説明する。撮像装置１内
の撮像素子の露光量を制御する一般的なＡＥ（Ａｕｔｏ
Ｅｘｐｏｓｕｒｅ）の基本処理は、撮像された画像の
輝度レベルが所定のレベルとなるように撮像条件を設定
することにより行われる。画像の輝度レベルは画像信号
を積分して得られるが、この積分処理をデジタル的に行
うためにはＡ／Ｄ変換された画像データを所定の画素数
分逐次積算処理する必要がある。
【００３７】この実施の形態１においては、撮像装置１
は、内部に設けられた撮像素子で被写体の画像を撮像
し、図２に示すカラーフィルタでフィルタリングされた
入射光に対応する画像信号を画素毎に走査線方向に点順
次に出力する。このカラー画像信号はアナログ信号処理
回路２で増幅され、また雑音成分を除去するためにフィ
ルタリングされる。次に、Ａ／Ｄコンバータ３でデジタ
ル信号に変換され、デジタル画像データとされた画像信
号は、固定長符号化回路５により、図２に示した縦横４
画素、都合１６画素からなる単位ブロック毎に固定長符
号化される。単位ブロック内はＲＧＢの３カラー成分が
混在した状態となっており、この状態で固定長符号化が
行われる。
【００３８】図３は固定長符号化回路５により各画素の
画像信号の強度を階層化（量子化）する量子化レベルを
表す。図３において、Ｌｍｉｎは図２に示した１６画素
の画像信号強度中の最小値、Ｌｍａｘは同じ１６画素の
画像信号強度中の最大値、Ｐ１は最大値Ｌｍａｘと最小
値Ｌｍｉｎとの間を８等分した下から８分の１の値、Ｐ
２は上から８分の１の値、Ｑ１はＬｍｉｎ以上Ｐ１以下
の信号強度の画素の平均値、Ｑ８はＬｍａｘ以下Ｐ２よ
り大きい信号強度の画素の平均値である。
【００３９】また、ＬＤは単位ブロック内の階調幅指標
で、Ｑ８−Ｑ１に等しい。Ｌ１〜Ｌ７は階調幅指標ＬＤ
を８等分した値を小さい方から並べたものである。ＬＡ
は単位ブロック内の画像データ平均値レベルで（Ｑ１＋
Ｑ８）／２に等しい。φｉｊｋは画素毎の量子化レベル
を表す。
【００４０】図４、図５はこの実施の形態１による符号
化手順を示すフローチャートである。以下、このフロー
チャートを参照しながら符号化手順を説明する。まず、
固定長符号化回路５はＡ／Ｄコンバータ３でデジタル変
換された単位ブロック内の画像データを読み込む（ステ
ップＳＴ１）。次に、読み込んだ４×４画素分の画像デ
ータの信号強度を演算し、以下の各式に従って順次Ｐ
１，Ｐ２，Ｑ１，Ｑ８，ＬＡ，ＬＤ，Ｌ１〜Ｌ３，Ｌ５
〜Ｌ７の値を求める（ステップＳＴ２〜ステップＳＴ１
３）。 Ｐ１＝（Ｌｍａｘ＋７Ｌｍｉｎ）／８ Ｐ２＝（７Ｌｍａｘ＋Ｌｍｉｎ）／８ Ｑ１＝Ａｖｅ（Ｘｍｎ≦Ｐ１） Ｑ８＝Ａｖｅ（Ｘｍｎ＞Ｐ２） ＬＡ＝（Ｑ１＋Ｑ８）／２ ＬＤ＝Ｑ８−Ｑ１ Ｌ１＝ＬＡ−３ＬＤ／８ Ｌ２＝ＬＡ−ＬＤ／４ Ｌ３＝ＬＡ−ＬＤ／８ Ｌ５＝ＬＡ＋ＬＤ／８ Ｌ６＝ＬＡ＋ＬＤ／４ Ｌ７＝ＬＡ＋３ＬＤ／８ なお、Ｑ１の式はＬｍｉｎ以上Ｐ１以下の信号強度の画
素の平均値を求めることを意味し、Ｑ８の式はＬｍａｘ
以下Ｐ２より大きい信号強度の画素の平均値を求めるこ
とを意味する。
【００４１】このようにして順次Ｐ１，Ｐ２，Ｑ１，Ｑ
８，ＬＡ，ＬＤ，Ｌ１〜Ｌ３，Ｌ５〜Ｌ７の値を求めた
後、固定長符号化回路５は、ｎ＝１，ｍ＝１とおいて
（ステップＳＴ１４，ＳＴ１５）、このときのアドレス
（ｍ，ｎ）の画素の信号強度（以後、画素値と称する）
Ｘｍｎ（すなわち画素値Ｘ１１）がＬ１以下であるか否
かを判別する（ステップＳＴ１６）。
【００４２】画素値Ｘ１１がＬ１以下である場合には、
この画素の量子化レベルφｉｊｋを２進数の０００と設
定する（ステップＳＴ１７）。次に、ｍを１だけインク
リメントし（ステップＳＴ３１）、ｍが４以下であるか
否かを判別する（ステップＳＴ３２）。ｍが４以下であ
る場合は、その画素の画素値を再びＬ１と比較する（ス
テップＳＴ１６）。
【００４３】ｍが４より大きい場合には、ｎを１だけイ
ンクリメントし（ステップＳＴ３３）、インクリメント
したｎが４以下であるか否かを判別する（ステップＳＴ
３４）。ｎが４以下である場合は、その画素の画素値を
再びＬ１と比較する（ステップＳＴ１６）。
【００４４】画素値ＸｍｎがＬ１より大きい場合には、
Ｌ２以下であるか否かを判別し（ステップＳＴ１８）、
画素値ＸｍｎがＬ２以下である場合には、この画素の量
子化レベルφｉｊｋを２進数の００１と設定する（ステ
ップＳＴ１９）。次に、ｍを１だけインクリメントし
（ステップＳＴ３１）、ｍが４以下であるか否かを判別
する（ステップＳＴ３２）。ｍが４以下である場合は、
その画素の画素値を再びＬ１と比較する（ステップＳＴ
１６）。ｍが４より大きい場合には、ｎを１だけインク
リメントし（ステップＳＴ３３）、インクリメントした
ｎが４以下であるか否かを判別する（ステップＳＴ３
４）。ｎが４以下である場合は、その画素の画素値を再
びＬ１と比較する（ステップＳＴ１６）。
【００４５】以下、同様に、画素値がＬ１〜Ｌ２間、Ｌ
２〜Ｌ３間、Ｌ３〜ＬＡ間、ＬＡ〜Ｌ５間、Ｌ５〜Ｌ６
間、Ｌ６〜Ｌ７間のいずれの値を有するかを判別し（ス
テップＳＴ１６，ＳＴ１８，ＳＴ２０，ＳＴ２２，ＳＴ
２４，ＳＴ２６，ＳＴ２８）、その値に応じてそれぞれ
量子化レベルφｉｊｋ＝０００，００１，０１０，０１
１，１００，１０１，１１０，１１１を当該画素に割り
振る（ステップＳＴ１７，ＳＴ１９，ＳＴ２１，ＳＴ２
３，ＳＴ２５，ＳＴ２７，ＳＴ２９）。
【００４６】このようにして、同一単位ブロック内の全
画素に量子化レベルを割り振って符号化を終了する。単
位ブロックの符号化データはＬＡ，ＬＤ，各画素毎のφ
ｉｊｋである。これらの処理は、画面全体に対して単位
ブロック数分繰り返す。
【００４７】固定長符号化回路５が固定長符号化におい
て求める単位ブロック毎の固定長符号化データ中の平均
値レベルＬＡを積分することにより、少ない演算量で画
像全体の輝度レベルを得ることができる。つまり、平均
値レベルＬＡは単位ブロック内の１６画素の画像信号強
度に平均処理を施した情報量に相当するため、１６画素
分の積算処理が予め完了していることになり、積算処理
を１／１６に削減することが可能となる。システムコン
トローラ１８は、この平均値レベルＬＡを積算すること
で画像の輝度レベルを算出して、所定の輝度レベルとな
るように駆動回路１７とアナログ信号処理回路２の制御
を行う。
【００４８】固定長符号化回路５は固定長符号化した固
定長符号化データを符号化メモリ６に格納する。画像を
再生する際には、符号化メモリ６から格納されている固
定長符号化データを読み出し、固定長復号化回路７で固
定長復号化し、信号処理回路９で画素補間、階調補正、
γ−補正等の補正を施してフレームメモリ１０に格納す
る。画像を表示するには、フレームメモリ１０から画像
信号を読み出し、表示装置１２上に表示する。また、２
次記憶装置１３に記憶するには、可変長符号化回路１１
で可変長符号化した後、２次記憶装置１３に記憶させ
る。
【００４９】以上のように、この実施の形態１によれ
ば、少ない演算量で画像全体の輝度レベルを得ることが
可能となり、容易にリアルタイムの露光制御を行うこと
ができる効果が得られる。
【００５０】実施の形態２．図６は、この発明の実施の
形態２による画像処理装置を示す構成図である。図６に
おいて、図１に示した実施の形態１の構成要素と同一の
構成要素には同一符号を付けて、その説明を省略する。
【００５１】次に動作について説明する。この実施の形
態２においては、固定長符号化回路５から出力される固
定長符号化された固定長符号化データは一旦符号化メモ
リ６に格納される。システムコントローラ１８は符号化
メモリ６から平均値レベルＬＡを読み出し、読み出した
平均値レベルＬＡに基づいて露出制御を行う。システム
コントローラ１８の露出制御の方法は実施の形態１と同
様である。
【００５２】以上のように、この実施の形態２によれ
ば、全画面分の符号化データが符号化メモリ６上に格納
されているため、例えばソフトウエア等で柔軟な積算条
件を設定した露出制御が可能となる効果が得られる。
【００５３】実施の形態３．図７は、この発明の実施の
形態３による画像処理装置を示す構成図である。図７に
おいて、図１に示した実施の形態１の構成要素と同一の
構成要素には同一符号を付けて、その説明を省略する。
図７において、７ａはゲイン補正をしながら復号化動作
を行うことのできる固定長復号化回路（固定長復号化手
段）である。
【００５４】蛍光燈下での撮影や動きのある被写体の撮
影においては、測光時と撮像時の撮像条件が異なる場合
がある。このような場合、撮像後の画像の輝度レベルを
算出し、所定のレベルとなるように画像データに対しゲ
イン補正処理を施す必要がある。この実施の形態３の画
像処理装置はこのようなゲイン補正を行うものである。
なお、この実施の形態３は、画像データの輝度レベルの
算出も、実施の形態１、実施の形態２と同様に固定長符
号化データの平均値レベルＬＡにより行う。
【００５５】次に動作について説明する。この実施の形
態３においても、固定長符号化回路５で固定長符号化さ
れた固定長符号化データは一旦符号化メモリ６に格納さ
れる。
【００５６】ここで、所定の輝度レベルをＳ、撮像され
た画像データの輝度レベルをＣとすると、ゲイン補正係
数Ｋは、Ｋ＝Ｓ／Ｃの式で算出できる。したがって、撮
像装置１で撮像されたすべての画像データに対しゲイン
補正係数Ｋを乗じることにより、再生する画像の輝度レ
ベルを所定の輝度レベルに合わせることが可能となる。
また、ゲイン補正の演算を復号化時に行うことで演算量
を削減することが可能となる。
【００５７】図８及び図９は、復号化時にゲイン補正の
演算を行う手順を示したフローチャートである。以下こ
の図８及び図９のフローチャートを参照しながら、固定
長復号化回路７ａの復号化手順を説明する。
【００５８】まず、システムコントローラ１８は符号化
メモリ６から平均値レベルＬＡ及び階調幅指標ＬＤを読
み出し、ゲイン補正係数Ｋとともに、固定長復号化回路
７ａに出力する。ここで、階調幅指標ＬＤとは、単位ブ
ロック内の階調幅指標で、Ｑ８−Ｑ１に等しい。
【００５９】固定長復号化回路７ａは、システムコント
ローラ１８から入力された平均値レベルＬＡ、階調幅指
標ＬＤ及びゲイン補正係数Ｋに基づいて、予めゲイン補
正係数Ｋを乗じた復号レベルＬＥＶＥＬ０〜ＬＥＶＥＬ
７を求めておく（ステップＳＴ８１〜ステップＳＴ８
８）。
【００６０】次に、固定長復号化回路７ａは、縦方向座
標値ｎを１に設定し（ステップＳＴ８９）、続いて横方
向座標値ｍを１に設定する（ステップＳＴ９０）。すな
わち、ステップＳＴ８９及びステップＳＴ９０の動作に
よってある単位ブロック中の座標値（１，１）のアドレ
スが指定される。
【００６１】次に、固定長復号化回路７ａは、指定した
アドレスの量子化レベルφｉｊｋがいくつであるかを判
定し（ステップＳＴ９１，ＳＴ９３，ＳＴ９５，ＳＴ９
７，ＳＴ９９，ＳＴ１０１，ＳＴ１０３）、判定した各
量子化レベルφｉｊｋに応じてその画素の信号強度Ｙｍ
ｎ（座標値（１，１）の画素であるならばＹ１１）とし
て、先にゲイン補正を行った復号レベルＬＥＶＥＬ０〜
ＬＥＶＥＬ７の一つを割り当てる（ステップＳＴ９２，
ＳＴ９４，ＳＴ９６，ＳＴ９８，ＳＴ１００，ＳＴ１０
２，ＳＴ１０４，ＳＴ１０５）。
【００６２】画素（１，１）の信号強度を求めたら、次
に横方向に画素を１つ移動し（ステップＳＴ１０６）、
同一の手順で画素（２，１）の信号強度を復号化する
（ステップＳＴ９１〜ＳＴ１０５）。
【００６３】このようにして単位ブロック内の最上段の
画素について信号強度を復号化した後（ステップＳＴ１
０７）、縦方向の座標値を１だけインクリメントし（ス
テップＳＴ１０８）、次の段の画素について同様にして
信号強度を復号化する（ステップＳＴ９０〜ＳＴ１０
７）。
【００６４】このようにして単位ブロック内の全画素に
ついて信号強度を復号化して（ステップＳＴ９０〜ＳＴ
１０９）復号化動作を終了する。
【００６５】以上のように、この実施の形態３によれ
ば、例えば、１６画素の各信号強度が８つの復号レベル
ＬＥＶＥＬ０〜ＬＥＶＥＬ７のすべてに分布していた場
合でも、この１６画素分の演算を８回に半減することが
可能となり、露出制御の演算量を大幅に削減できる効果
が得られる。
【００６６】実施の形態４．図１０はこの発明の実施の
形態４による画像処理装置を示す構成図である。図１０
において、図１に示す実施の形態１の構成要素と同一の
構成要素には同一符号を付け、その説明を省略する。図
１０において、９ａはゲイン補正機能を有する信号処理
回路（信号処理手段）である。
【００６７】次に動作について説明する。固定長復号化
回路７は、符号化メモリ６に格納された固定長符号化デ
ータを読み出し、通常の固定長復号を行い、復号された
画像データを信号処理回路９ａに出力する。一方、シス
テムコントローラ１８は、符号化メモリ６から平均値レ
ベルＬＡを読み出し、読み出した平均値レベルＬＡを信
号処理回路９ａに入力する。信号処理回路９ａは、各種
信号処理と同時に、平均値レベルＬＡに基づいてゲイン
補正の演算を行う。
【００６８】以上のように、この実施の形態４によれ
ば、上記実施の形態３の効果の他に、信号処理回路９ａ
から出力される信号処理後のデータを参照してゲイン補
正の係数を制御することができるという効果が得られ
る。
【００６９】実施の形態５．図１１は、この発明の実施
の形態５による画像処理装置を示す構成図である。図１
１において、図１に示した実施の形態１の構成要素と同
一の構成要素には同一符号を付けて、その説明を省略す
る。図１１において、４はＡ／Ｄコンバータ３から出力
されるＲ，Ｇ，Ｂの各カラー成分を有する画素の出力信
号を並べ替えてカラー成分毎に符号化の単位ブロックと
して纏めて出力する画素並べ替え回路（画素並べ替え手
段）、８は固定長復号化回路７により復号化されたデー
タに、画素並べ替え回路４で並べ替えたデータと逆の並
べ替え処理を施して画素信号を走査線方向に読み出した
ときと同一の順序に並べ替える画素逆並べ替え回路、１
８ａは固定長符号化されたＡ／Ｄ変換後の画像信号を元
にカラー信号別のレベル補正制御を行うシステムコント
ローラ（信号レベル補正手段）である。
【００７０】次に動作について説明する。撮像装置１
は、被写体の画像を撮像し、図２に示すカラーフィルタ
でフィルタリングされた入射光に対応する画像信号を画
素毎に走査線方向に点順次に出力する。このカラー画像
信号はアナログ信号処理回路２で増幅され、また雑音成
分を除去するためにフィルタリングされる。次に、Ａ／
Ｄコンバータ３でデジタル信号に変換され、画素並べ替
え回路４に入力される。
【００７１】画素並べ替え回路４においては、図示しな
い２個のラインバッファの一方で１走査線分の画像デー
タを走査線方向に順次書き込み転送する間に、他方のラ
インバッファから読み出しアドレスを変えながら画像デ
ータを読み出して画素並べ替えを行う。画素並べ替え回
路４で各カラー成分毎に一纏まりとなるように並べ替え
られた画像データは、固定長符号化回路５により固定長
符号化され、固定長符号化データとなる。固定長符号化
データは符号化メモリ６に格納される。
【００７２】ところで、複数の異なるカラーフィルタを
配した撮像素子から出力される画像信号は、各カラーフ
ィルタの分光感度特性差等により、各カラー信号の出力
レベルが異なる特性を示す。例えば、カラーフィルタの
カラー構成がＲ，Ｇ，Ｂの３色である撮像素子を用いて
無彩色の被写体を撮像した場合、カラー信号別の出力レ
ベルは、本来同じとなるはずであるが、実際はカラーフ
ィルタの分光感度特性差等により、例えば、図１２の
（１）に示すように異なる。そこで図１２の（２）に示
すように、各カラー信号別の出力レベルを揃えるために
カラー信号別にレベル補正を施すホワイトバランス処理
をシステムコントローラ１８ａにより行う。システムコ
ントローラ１８ａの行う処理においては、撮像した画像
データ自身を用いる。これは、一般的な被写体の分光分
布特性がある広い範囲をとれば無彩色になるという原理
に基づいてカラー信号別のレベルを補正するものであ
る。すなわち、カラー信号別にある範囲の画像信号を取
り込んだ場合、カラーフィルタの感度差がなければ、本
来それぞれのカラー信号レベルは同じになるはずであ
り、同じレベルにならない分が感度差として補正処理さ
れる。したがって、ホワイトバランス処理もＡＥ処理と
同様に撮像素子の出力信号の積算値を用いて処理する。
【００７３】この実施の形態５においては、画素並べ替
え回路４によって単位ブロック内のカラー信号成分が同
一カラーの信号となるように画素並べ替えを行った後に
固定長符号化回路５で固定長符号化を施すことにより、
カラー信号別に固定長符号化を施すことができ、その結
果カラー信号別に平均値レベルＬＡを抽出することが可
能となる。例えば、Ｒ信号の平均値レベルＬＡの積算値
をＳＲ、Ｇ信号の平均値レベルＬＡの積算値をＳＧ、Ｂ
信号の平均値レベルＬＡの積算値をＳＢとし、Ｇ信号が
３カラー成分の中で最も感度が良いとすれば、システム
コントローラ１８ａにより、Ｒ信号に対するレベル補正
係数Ｋｒを、Ｋｒ＝ＳＧ／ＳＲ、Ｂ信号に対するレベル
補正係数Ｋｂを、Ｋｂ＝ＳＧ／ＳＢで算出する。そし
て、撮像された画像信号の中のＲ信号に対してＫｒを、
Ｂ信号に対してＫｂを乗じることにより、Ｒ，Ｇ，Ｂそ
れぞれの信号レベルを揃えることができる。この実施の
形態５では、単位ブロック内のカラー成分が同じとなる
ように画素の並び替えを行う際に、この補正処理を施す
ことでリアルタイムなホワイトバランス処理を実現す
る。なお、レベル補正係数Ｋｒ，Ｋｂを算出する際に
は、既に補正された信号に対して時定数を設けて再帰的
に補正処理を行ってもよいし、ホワイトバランス処理を
短時間で完了させるために、無補正の画像信号に対して
レベル補正係数Ｋｒ，Ｋｂを算出して、一度で補正を完
了させてもよい。さらに、Ｒ信号、Ｇ信号、Ｂ信号の信
号レベルは必ずしも同一に揃える必要はなく、例えば、
光源の色温度を補正する場合等必要に応じて、レベル差
を設けてもよい。
【００７４】画像信号の再生は上述の実施の形態１から
実施の形態３と基本的には同一であるが、この実施の形
態５においては、画素並べ替えを行った後固定長符号化
を行っているので、画素逆並べ替え回路８において、固
定長復号化回路７により復号化されたデータに、画素並
べ替え回路４で並べ替えたデータと逆の並べ替え処理を
施して画素信号を走査線方向に読み出したときと同一の
順序に並べ替える処理を行う。以後の動作は、実施の形
態１から実施の形態３と同一である。
【００７５】以上のように、この実施の形態５において
は、カラー信号別に平均値レベルＬＡを抽出して、カラ
ー信号別のレベル補正係数の演算量を削減できる効果が
得られる。
【００７６】実施の形態６．図１３は、この発明の実施
の形態６による画像処理装置を示す構成図である。図１
３において、図１１に示した実施の形態５の構成要素と
同一の構成要素には同一符号を付けて、その説明を省略
する。この実施の形態６においては、システムコントロ
ーラ１８ａは符号化メモリ６に格納された固定長符号化
データを読み出して、色信号別のレベル補正を行う。
【００７７】次に動作について説明する。この実施の形
態６においては、画素並べ替え回路４で画素並べ替えを
行い、固定長符号化回路５で固定長符号化を行った固定
長符号化データは、一旦符号化メモリ６に格納される。
システムコントローラ１８ａは、符号化メモリ６に格納
された各カラー信号別の平均値レベルＬＡを読み出して
ホワイトバランス処理を行う。ホワイトバランスの処理
方法は実施の形態５と同様である。
【００７８】以上のように、この実施の形態６によれ
ば、全画面分の符号化データが符号化メモリ６上に格納
されているため、例えばソフトウエア等で柔軟な積算条
件を設定した処理が可能となる効果が得られる。
【００７９】実施の形態７．図１４は、この発明の実施
の形態７による画像処理装置を示す構成図である。図１
４において、図１３に示した実施の形態６の構成要素と
同一の構成要素には同一符号を付けて、その説明を省略
する。図１４において、７ｂは各カラー信号別にレベル
補正を行いながら復号化動作を行うことのできる固定長
復号化回路（固定長復号化手段）である。
【００８０】次に動作について説明する。この実施の形
態７においても、画素並べ替え回路４で画素並べ替えを
行い、固定長符号化回路５で固定長符号化された固定長
符号化データは一旦符号化メモリ６に格納される。シス
テムコントローラ１８ａは、符号化メモリ６から平均値
レベルＬＡを読み出し、レベル補正係数Ｋｒ，Ｋｂとと
もに、固定長復号化回路７ｂに出力する。固定長復号化
回路７ｂは、平均値レベルＬＡ、レベル補正係数Ｋｒ，
Ｋｂに基づき、カラー信号別にレベル補正を行い、その
後通常の固定長復号化処理を行う。
【００８１】以上のように、この実施の形態７によれ
ば、レベル補正の演算量を削減できる効果が得られる。
【００８２】実施の形態８．図１５は、この発明の実施
の形態８による画像処理装置を示す構成図である。図１
５において、図１３に示した実施の形態６の構成要素と
同一の構成要素には同一符号を付けて、その説明を省略
する。図１５において、９ｂは通常の信号処理を行った
後に、各カラー信号別のレベル補正を行う信号処理回路
（信号処理手段）である。
【００８３】次に動作について説明する。この実施の形
態８においては、固定長復号化回路７が符号化メモリ６
から固定長符号化データを読み出して固定長復号し、画
素逆並べ替え回路８が固定長復号された画像データを走
査線方向に読み出したときと同一の順序に並べ替える。
次に、信号処理回路９ｂでは、入力された画像データに
対して、画素補間、階調補正、γ−補正等の通常の信号
処理を行った後、カラー信号レベルのレベル補正を行っ
て、フレームメモリ１０に出力する。以後の動作は上述
した各実施の形態の動作と同一である。
【００８４】以上のように、この実施の形態８によれ
ば、信号処理後のデータを参照してレベル補正係数を制
御できる効果が得られる。
【００８５】なお、対象とする単位ブロックの数を任意
に変更できる機能を持たせ、演算量の制限あるいは演算
処理時間の制限を行えるようにしてもよい。
【００８６】また、レンズの特性などで光量の不足する
画面の周辺等を除外するために、対象とする単位ブロッ
クの位置を任意に設定できる機能を持たせてもよい。
【００８７】さらに、ノイズの影響が大きい低輝度レベ
ルの信号や飽和特性が異なる高輝度レベルの信号を使用
しないように、ある範囲の輝度レベルの信号だけを対象
とできるように、対象とする単位ブロックのレベル範囲
を任意に設定できる機能を持たせてもよい。
【００８８】
【発明の効果】以上のように、この発明によれば、固定
長符号化手段により、画像データを小領域の単位ブロッ
クに細分し、該単位ブロック内の前記画像データの平均
値レベルを求めて固定長符号化し、露出制御手段によ
り、前記平均値レベルに基づいて前記単位ブロック内の
前記画像データ全体の輝度レベルを算出し、該画像デー
タが所定の輝度レベルとなるように撮像装置の露出量を
制御するように構成したので、少ない演算量で画像全体
の輝度レベルを得ることが可能となり、所定の輝度レベ
ルとなるように露出制御を行うことが可能となる効果が
ある。
【００８９】この発明によれば、露出制御手段が、符号
化メモリに格納された平均値レベルを読み出して、この
読み出した平均値レベルに基づいて単位ブロック内の画
像データ全体の輝度レベルを算出し、該画像データが所
定の輝度レベルとなるように撮像装置の露出量を制御す
るように構成したので、全画面分の符号化データがメモ
リ上に格納されており、例えばソフトウエア等で柔軟な
積算条件を設定した露出制御が可能となる効果がある。
【００９０】この発明によれば、固定長復号化手段が、
符号化メモリに格納された固定長符号化データを読み出
し、平均値レベルに基づいてゲイン補正を行いながら固
定長復号化を行うように構成したので、露出制御の演算
量を削減することが可能となる効果がある。
【００９１】この発明によれば、信号処理手段が、固定
長復号化手段により復号された画像データに対して平均
値レベルに基づいてゲイン補正を行うように構成したの
で、信号処理後のデータと参照して露出制御の影響を比
較できる効果がある。
【００９２】この発明によれば、画素並べ替え手段が、
撮像装置から出力される画像信号が複数のカラー成分を
含むものである場合にＡ／Ｄコンバータによりデジタル
変換された画像データの各カラー成分を並べ替えてカラ
ー成分毎に符号化の単位ブロックとして纏めて固定長符
号化手段に出力するように構成したので、カラー変調成
分が解像度情報として認識されることによる量子化誤差
の発生を抑えた状態で固定長符号化が行え、精度の高い
輝度信号レベルを算出して露出制御が可能となるととも
に、少ない演算量でゲイン補正を行うことができる効果
がある。
【００９３】この発明によれば、信号レベル補正手段
が、平均値レベルに基づいて単位ブロック内のカラー成
分毎の画像データの輝度レベルを算出し、該輝度レベル
が各カラー成分で同一となるように信号レベルを補正す
るように構成したので、カラー信号別に平均値レベルＬ
Ａを抽出して、カラー信号別のレベル補正係数の演算量
を削減できる効果がある。
【００９４】この発明によれば、信号レベル補正手段が
符号化メモリに格納された平均値レベルを読み出して、
この読み出した平均値レベルに基づいて単位ブロック内
のカラー成分毎の画像データの輝度レベルを算出し、該
輝度レベルが各カラー成分で同一となるように信号レベ
ルを補正するように構成したので、全画面分の符号化デ
ータがメモリ上に格納されており、例えばソフトウエア
等で柔軟な積算条件を設定したレベル補正が可能となる
効果がある。
【００９５】この発明によれば、固定長復号化手段が、
符号化メモリに格納された固定長符号化データを読み出
し、平均値レベルに基づいて単位ブロック内のカラー成
分毎の画像データの輝度レベルを算出し、該輝度レベル
が各カラー成分で同一となるように信号レベルを補正し
ながら固定長復号化を行うように構成したので、レベル
補正の演算量を削減することが可能となる効果がある。
【００９６】この発明によれば、信号処理手段が、固定
長復号化手段により復号された画像データに対して平均
値レベルに基づいて単位ブロック内のカラー成分毎の画
像データの輝度レベルを算出し、該輝度レベルが各カラ
ー成分で同一となるように信号レベルを補正するように
構成したので、信号処理後のデータと参照してレベル補
正の影響を比較できる効果がある。
【００９７】この発明によれば、選択手段が、固定長符
号化データの平均値レベルを用いる小領域のブロック数
を選択するように構成したので、演算量の制限あるいは
演算処理時間の制限ができる効果がある。
【００９８】この発明によれば、選択手段が、固定長符
号化データの平均値レベルを用いる小領域のブロック位
置を選択するように構成したので、レンズの特性などで
光量の不足する画面の周辺等を除外したり、測光対象と
する単位ブロックの位置を任意に設定できる効果があ
る。
【００９９】この発明によれば、選択手段が、固定長符
号化データの平均値レベルを用いる小領域のブロック
を、前記平均値レベルの値で選択するように構成したの
で、ノイズの影響が大きい低輝度レベルの信号や飽和特
性が異なる高輝度レベルの信号を使用しないように、あ
る範囲の輝度レベルの信号だけを対象とするように、対
象とする単位ブロックのレベル範囲を任意に設定できる
効果がある。
【０１００】この発明によれば、画像データを小領域の
単位ブロックに細分し、該単位ブロック内の前記画像デ
ータの平均値レベルを求めて固定長符号化し、前記平均
値レベルに基づいて前記単位ブロック内の前記画像デー
タ全体の輝度レベルを算出し、該画像データが所定の輝
度レベルとなるように前記撮像装置の露出量を制御する
ように構成したので、少ない演算量で画像全体の輝度レ
ベルを得ることが可能となり、所定の輝度レベルとなる
ように露出制御を行うことが可能となる効果がある。
【図面の簡単な説明】
【図１】 この発明の実施の形態１による画像処理装置
を示す構成図である。
【図２】 実施の形態１の撮像装置に用いられるカラー
フィルタを示す図である。
【図３】 実施の形態１の固定長符号化回路により各画
素の画像信号の強度を階層化する量子化レベルを表す図
である。
【図４】 実施の形態１の符号化手順を示すフローチャ
ートである。
【図５】 実施の形態１の符号化手順を示すフローチャ
ートである。
【図６】 この発明の実施の形態２による画像処理装置
を示す構成図である。
【図７】 この発明の実施の形態３による画像処理装置
を示す構成図である。
【図８】 実施の形態３の画像処理装置の復号化時にゲ
イン補正の演算を行う手順を示したフローチャートの一
部である。
【図９】 実施の形態３の画像処理装置の復号化時にゲ
イン補正の演算を行う手順を示したフローチャートの残
部である。
【図１０】 この発明の実施の形態４による画像処理装
置を示す構成図である。
【図１１】 この発明の実施の形態５による画像処理装
置を示す構成図である。
【図１２】 カラー信号別にレベル補正を施すホワイト
バランス処理の原理的説明図である。
【図１３】 この発明の実施の形態６による画像処理装
置を示す構成図である。
【図１４】 この発明の実施の形態７による画像処理装
置を示す構成図である。
【図１５】 この発明の実施の形態８による画像処理装
置を示す構成図である。
【図１６】 特開平４−２９８１７０号公報に開示され
たデジタルスチルビデオカメラを示す構成図である。
【符号の説明】
１ 撮像装置、３ Ａ／Ｄコンバータ、４ 画素並べ替
え回路（画素並べ替え手段）、５ 固定長符号化回路
（固定長符号化手段）、６ 符号化メモリ、７，７ａ，
７ｂ 固定長復号化回路（固定長復号化手段）、９ａ，
９ｂ 信号処理回路（信号処理手段）、１７ 駆動回路
（露出制御手段）、１８ システムコントローラ（露出
制御手段）、１８ａ システムコントローラ（信号レベ
ル補正手段）。
───────────────────────────────────────────────────── フロントページの続き (72)発明者 田村 正司 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 5C022 AB04 AB20 AC42 5C053 FA08 GA11 GB21 HA18 KA01 KA16 KA25 LA02 5C065 AA03 BB02 BB08 BB48 CC01 CC02 DD02 GG15 GG17 GG18 GG26 GG30 GG50

Claims (13)

    【特許請求の範囲】
  1. 【請求項１】 画像を撮像して電気信号に変換する撮像
    装置から出力される所定の画素数の画像信号をＡ／Ｄ変
    換して画像データとして出力するＡ／Ｄコンバータと、 該画像データを小領域の単位ブロックに細分し、該単位
    ブロック内の前記画像データの平均値レベルを求めて固
    定長符号化する固定長符号化手段と、 前記平均値レベルに基づいて前記単位ブロック内の前記
    画像データ全体の輝度レベルを算出し、該画像データが
    所定の輝度レベルとなるように前記撮像装置の露出量を
    制御する露出制御手段を備えた画像処理装置。
  2. 【請求項２】 固定長符号化手段で固定長符号化された
    固定長符号化データを格納する符号化メモリを更に備
    え、 露出制御手段が前記符号化メモリに格納された平均値レ
    ベルを読み出して、この読み出した平均値レベルに基づ
    いて単位ブロック内の画像データ全体の輝度レベルを算
    出し、該画像データが所定の輝度レベルとなるように前
    記撮像装置の露出量を制御することを特徴とする請求項
    １記載の画像処理装置。
  3. 【請求項３】 画像を撮像して電気信号に変換する撮像
    装置から出力される所定の画素数の画像信号をＡ／Ｄ変
    換して画像データとして出力するＡ／Ｄコンバータと、 該画像データを小領域の単位ブロックに細分し、該単位
    ブロック内の前記画像データの平均値レベルを求めて固
    定長符号化する固定長符号化手段と、 該固定長符号化手段で固定長符号化された固定長符号化
    データを格納する符号化メモリと、 該符号化メモリに格納された前記固定長符号化データを
    読み出し、前記平均値レベルに基づいてゲイン補正を行
    いながら固定長復号化を行う固定長復号化手段とを備え
    た画像処理装置。
  4. 【請求項４】 画像を撮像して電気信号に変換する撮像
    装置から出力される所定の画素数の画像信号をＡ／Ｄ変
    換して画像データとして出力するＡ／Ｄコンバータと、 該画像データを小領域の単位ブロックに細分し、該単位
    ブロック内の前記画像データの平均値レベルを求めて固
    定長符号化する固定長符号化手段と、 該固定長符号化手段で固定長符号化された固定長符号化
    データを格納する符号化メモリと、 該符号化メモリに格納された前記固定長符号化データを
    読み出し、固定長復号化を行う固定長復号化手段と、 該固定長復号化手段により復号された画像データに対し
    て前記平均値レベルに基づいてゲイン補正を行う信号処
    理手段を備えた画像処理装置。
  5. 【請求項５】 撮像装置から出力される画像信号が複数
    のカラー成分を含むものである場合にＡ／Ｄコンバータ
    によりデジタル変換された画像データの各カラー成分を
    並べ替えてカラー成分毎に符号化の単位ブロックとして
    纏めて固定長符号化手段に出力する画素並べ替え手段を
    更に備えたことを特徴とする請求項１から請求項４のう
    ちのいずれか１項記載の画像処理装置。
  6. 【請求項６】 画像を撮像して電気信号に変換する撮像
    装置から出力される複数のカラー成分を含む所定の画素
    数の画像信号をＡ／Ｄ変換して画像データとして出力す
    るＡ／Ｄコンバータと、 該Ａ／Ｄコンバータから出力される画像データの各カラ
    ー成分を並べ替えてカラー成分毎に符号化の単位ブロッ
    クとして纏めて出力する画素並べ替え手段と、 該画素並べ替え手段により並べ替えられた画像データを
    前記単位ブロック毎に該単位ブロック内の前記画像デー
    タの平均値レベルを求めて固定長符号化する固定長符号
    化手段と、 前記平均値レベルに基づいて前記単位ブロック内の前記
    カラー成分毎に信号レベルを補正する信号レベル補正手
    段を備えた画像処理装置。
  7. 【請求項７】 固定長符号化手段で固定長符号化された
    固定長符号化データを格納する符号化メモリを更に備
    え、 信号レベル補正手段が前記符号化メモリに格納された平
    均値レベルを読み出して、この読み出した平均値レベル
    に基づいて単位ブロック内のカラー成分毎の画像データ
    の輝度レベルを算出し、該輝度レベルが各カラー成分で
    同一となるように信号レベルを補正することを特徴とす
    る請求項６記載の画像処理装置。
  8. 【請求項８】 画像を撮像して電気信号に変換する撮像
    装置から出力される複数のカラー成分を含む所定の画素
    数の画像信号をＡ／Ｄ変換して画像データとして出力す
    るＡ／Ｄコンバータと、 該Ａ／Ｄコンバータから出力される画像データの各カラ
    ー成分を並べ替えてカラー成分毎に符号化の単位ブロッ
    クとして纏めて出力する画素並べ替え手段と、 該画素並べ替え手段により並べ替えられた画像データを
    前記単位ブロック毎に該単位ブロック内の前記画像デー
    タの平均値レベルを求めて固定長符号化する固定長符号
    化手段と、 該固定長符号化手段で固定長符号化された固定長符号化
    データを格納する符号化メモリと、 該符号化メモリに格納された前記固定長符号化データを
    読み出し、前記平均値レベルに基づいて前記単位ブロッ
    ク内の前記カラー成分毎に信号レベルを補正しながら固
    定長復号化を行う固定長復号化手段とを備えた画像処理
    装置。
  9. 【請求項９】 画像を撮像して電気信号に変換する撮像
    装置から出力される複数のカラー成分を含む所定の画素
    数の画像信号をＡ／Ｄ変換して画像データとして出力す
    るＡ／Ｄコンバータと、 該Ａ／Ｄコンバータから出力される画像データの各カラ
    ー成分を並べ替えてカラー成分毎に符号化の単位ブロッ
    クとして纏めて出力する画素並べ替え手段と、 該画素並べ替え手段により並べ替えられた画像データを
    前記単位ブロック毎に該単位ブロック内の前記画像デー
    タの平均値レベルを求めて固定長符号化する固定長符号
    化手段と、 該固定長符号化手段で固定長符号化された固定長符号化
    データを格納する符号化メモリと、 該符号化メモリに格納された前記固定長符号化データを
    読み出し、固定長復号化を行う固定長復号化手段と、 該固定長復号化手段により復号された画像データに対し
    て前記平均値レベルに基づいて前記単位ブロック内の前
    記カラー成分毎に信号レベルを補正する信号処理手段を
    備えた画像処理装置。
  10. 【請求項１０】 固定長符号化データの平均値レベルを
    用いる小領域のブロック数を選択する選択手段を備えた
    請求項１から請求項９のうちのいずれか１項記載の画像
    処理装置。
  11. 【請求項１１】 固定長符号化データの平均値レベルを
    用いる小領域のブロック位置を選択する選択手段を備え
    た請求項１から請求項１０のうちのいずれか１項記載の
    画像処理装置。
  12. 【請求項１２】 固定長符号化データの平均値レベルを
    用いる小領域のブロックを、前記平均値レべルの値で選
    択する選択手段を備えた請求項１から請求項１０のうち
    のいずれか１項記載の画像処理装置。
  13. 【請求項１３】 画像を撮像して静止画像として再生す
    る画像処理方法において、 撮像装置から出力される所定の画素数の画像信号をＡ／
    Ｄ変換して画像データとするステップと、 該画像データを小領域の単位ブロックに細分し、該単位
    ブロック内の前記画像データの平均値レベルを求めて固
    定長符号化するステップと、 前記平均値レベルに基づいて前記単位ブロック内の前記
    画像データ全体の輝度レベルを算出し、該画像データが
    所定の輝度レベルとなるように前記撮像装置の露出量を
    制御するステップとを備えた画像処理方法。
JP17641898A 1998-06-23 1998-06-23 画像処理装置及び画像処理方法 Pending JP2000013806A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP17641898A JP2000013806A (ja) 1998-06-23 1998-06-23 画像処理装置及び画像処理方法
US09/337,494 US6906753B1 (en) 1998-06-23 1999-06-22 Image processing unit and image processing method with simplified exposure, gain and white balance control

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP17641898A JP2000013806A (ja) 1998-06-23 1998-06-23 画像処理装置及び画像処理方法

Publications (1)

Publication Number Publication Date
JP2000013806A true JP2000013806A (ja) 2000-01-14

Family

ID=16013357

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17641898A Pending JP2000013806A (ja) 1998-06-23 1998-06-23 画像処理装置及び画像処理方法

Country Status (2)

Country Link
US (1) US6906753B1 (ja)
JP (1) JP2000013806A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102884781A (zh) * 2010-05-18 2013-01-16 夏普株式会社 图像处理系统及显示装置
US8823832B2 (en) 2010-05-28 2014-09-02 Panasonic Corporation Imaging apparatus

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6734913B1 (en) * 1999-10-28 2004-05-11 Hewlett-Packard Development Company, L.P. Method of automatically adjusting exposure in a shutterless digital camera
US7379104B2 (en) * 2003-05-02 2008-05-27 Canon Kabushiki Kaisha Correction apparatus
JP4610930B2 (ja) * 2003-06-05 2011-01-12 オリンパス株式会社 画像処理装置、画像処理プログラム
JP2007053536A (ja) * 2005-08-17 2007-03-01 Winbond Electron Corp 画像信号の符号化処理装置におけるラスタ／ブロック変換用のバッファメモリシステム
TWI427508B (zh) * 2010-12-01 2014-02-21 Pixart Imaging Inc 調整光學感應模組的曝光條件的方法與其光學感應模組
US8531588B2 (en) * 2009-06-25 2013-09-10 Pixart Imaging Inc. Method for adjusting exposure condition of optical sensor module and optical sensor module thereof
WO2016056974A1 (en) * 2014-10-06 2016-04-14 Telefonaktiebolaget L M Ericsson (Publ) Evaluation measure for hdr video frames

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5032927A (en) * 1988-03-01 1991-07-16 Fuji Photo Film Co., Ltd. Image signal recording apparatus capable of recording compressed image data together with audio data
JP2959773B2 (ja) * 1989-04-20 1999-10-06 オリンパス光学工業株式会社 電子スチルカメラ
DE69133412T2 (de) * 1990-09-04 2005-09-22 Canon K.K. Verfahren und Vorrichtung zur Bildverarbeitung
JP2876258B2 (ja) * 1991-01-23 1999-03-31 株式会社リコー デジタル電子スチルカメラ
DE69231428T2 (de) * 1991-02-13 2001-01-18 Nikon Corp Belichtungsrechner
JPH04298170A (ja) 1991-03-27 1992-10-21 Konica Corp ディジタルスチルビデオカメラ
US6512791B1 (en) * 1991-05-15 2003-01-28 Canon Kabushiki Kaisha Image processing apparatus having means for controlling exposure using an orthogonal transformation coefficient
US6553143B2 (en) * 1992-06-30 2003-04-22 Canon Kabushiki Kaisha Image encoding method and apparatus
US6549666B1 (en) * 1994-09-21 2003-04-15 Ricoh Company, Ltd Reversible embedded wavelet system implementation
US6101282A (en) * 1995-06-22 2000-08-08 Canon Kabushiki Kaisha Apparatus and method for image data encoding
US6459816B2 (en) * 1997-05-08 2002-10-01 Ricoh Company, Ltd. Image processing system for compressing image data including binary image data and continuous tone image data by a sub-band transform method with a high-compression rate

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102884781A (zh) * 2010-05-18 2013-01-16 夏普株式会社 图像处理系统及显示装置
US8823832B2 (en) 2010-05-28 2014-09-02 Panasonic Corporation Imaging apparatus

Also Published As

Publication number Publication date
US6906753B1 (en) 2005-06-14

Similar Documents

Publication Publication Date Title
US6240217B1 (en) Digital image processing
US8538174B2 (en) Image processing device
JP4955235B2 (ja) デジタルカメラおよびゲイン算出方法
KR100347508B1 (ko) 촬상 장치
US6075562A (en) Image inputting apparatus
US8040401B2 (en) Replay apparatus for noise reduction signal processing
US7057653B1 (en) Apparatus capable of image capturing
US20020036697A1 (en) Imaging apparatus
JPH04284087A (ja) 電子スチルカメラ
US7382402B2 (en) Imaging system
US20060114527A1 (en) Image pickup apparatus
JP2000013806A (ja) 画像処理装置及び画像処理方法
US20020196483A1 (en) Digital camera
US7327876B2 (en) Image processing device
JPH11113018A (ja) 撮像装置
US6798917B2 (en) Image input apparatus, image processing apparatus, image input method, image processing method and image input system
JP4028395B2 (ja) デジタルカメラ
JP4887680B2 (ja) ホワイトバランス調整装置、及びホワイトバランス調整方法
JP4028396B2 (ja) 画像合成方法及びデジタルカメラ
JPH0837603A (ja) 画像処理装置及び方法
US7170554B2 (en) Method for processing signals representing color pictures
JPH099154A (ja) 画像入力装置
JP3428841B2 (ja) デジタルスチルカメラ
JP3855256B2 (ja) 圧縮画像データ生成装置、圧縮画像データ生成方法および圧縮画像データ生成処理プログラムを記録した媒体
AU2004233551B2 (en) Digital image processing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050518

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070626

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070731

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070918

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20071003

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20071003

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20071003

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080507