JP2002094999A

JP2002094999A - 撮像装置

Info

Publication number: JP2002094999A
Application number: JP2000282434A
Authority: JP
Inventors: Masaji Tamura; 正司田村; Narihiro Matoba; 成浩的場
Original assignee: Mitsubishi Electric Corp
Current assignee: Mitsubishi Electric Corp
Priority date: 2000-09-18
Filing date: 2000-09-18
Publication date: 2002-03-29
Anticipated expiration: 2020-09-18
Also published as: JP4531231B2

Abstract

(57)【要約】【課題】光路を二次元的に変更するために透明平板部
材１０３を２つのモータにより機械的に駆動制御する必
要がある。そのため精度の高い画素ずらし量を実現する
ことが困難である課題があった。【解決手段】変位前後の撮像素子の撮像画像を構成す
る撮像色信号のうち、参照色である撮像色信号が形成す
る三角形と補間色である非撮像色信号が形成する三角形
の相似比を考慮して色補間を実施し、変位前後の撮像素
子の撮像画像を合成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、解像度の高い画
像を実現することができる撮像装置に関するものであ
る。

【０００２】

【従来の技術】ＣＣＤ等の二次元撮像素子を用いた撮像
装置においては、画像と撮像素子との相対位置を微小に
変化させ、変化前後の画像を入力して各画像を合成し、
見かけ上の画素数を増加させて解像度を上昇させるもの
が知られている。このような方法による解像度の向上に
当たっては、特開平７−２３６０８６号公報に記載され
ているように、撮影光学系と二次元撮像素子との間に透
明平板部材を平行に配置し、その透明平板部材上に配置
される直線上にない３点の傾斜手段の１点を支持部と
し、他の２点を透明平板部材を作動させる作動部として
用い、撮影光学系からの入射光を変位させることで撮像
素子上の画像を微小変位させるものである。

【０００３】図４４は例えば特開平７−２３６０８６号
公報に示された従来の撮像装置を示すブロック図であ
り、図４５は撮像装置の機構を示す斜視図である。図４
４及び図４５において、１は画像を結像させる撮像レン
ズ、２は画像を光電変換するため二次元に配列されたＣ
ＣＤ等の撮像素子、１０３は撮像レンズ１と撮像素子２
の間にほぼ平行に配置され、撮像レンズ１から撮像素子
２への入射光の入射角度に微小変位をもたらす透明平板
部材、１０４は撮像レンズ１及び透明平板部材１０３を
支持するベースユニットである。

【０００４】１０５ａ，１０５ｂ，１０５ｃは透明平板
部材１０３をベースユニット１０４に固定すると共に、
２点を選択的に作動させて透明平板部材１０３を傾斜さ
せる圧縮ばね、１０６ａ，１０６ｂ，１０６ｃは対応す
る圧縮ばね１０５ａ，１０５ｂ，１０５ｃを各々押さえ
るばね押さえ板、１０７ａは透明平板部材１０３と圧縮
ばね１０５ａを貫通するねじと共に設けられ、駆動によ
り透明平板部材１０３の近傍部位を光軸方向に変位させ
て透明平板部材１０３に傾斜をもたらすモータである。
なお、図４５には明示されていないが、モータ１０７ａ
と同様のモータが透明平板部材１０３と圧縮ばね１０５
ｂを貫通するねじと共に設けられている。

【０００５】１０８は変位装置、１０８ａは透明平板部
材１０３、圧縮ばね１０５ａ及びばね押さえ板１０６ａ
を含む作動部、１０８ｂは透明平板部材１０３、圧縮ば
ね１０５ｂ及びばね押さえ板１０６ｂを含む作動部、１
０９は透明平板部材１０３、圧縮ばね１０５ｃ及びばね
押さえ板１０６ｃを含む支持部であり、支持部１０９は
作動部１０８ａ，１０８ｂの作動時に透明平板部材１０
３を支持する。これらは図示しない匡体に一体的に固定
されると共に、図４４に示すように後段には光電変換さ
れた画像信号を処理するための所定の画像処理回路，画
像合成メモリ１１０及び画像メモリ７等が接続されてい
る。

【０００６】次に動作について説明する。まず、２つの
作動部１０８ａ，１０８ｂのいずれも作動させない状態
で撮像を行い、後段の画像メモリ７に画像を記憶する。
次に、２つの作動部１０８ａ，１０８ｂのうち、ひとつ
の作動部１０８ａを作動させることにより、他の作動部
１０８ｂと支持部１０９を結ぶ線を回転軸として透明平
板部材１０３を回転させる。これにより、透明平板部材
１０３を透過した画像は、透明平板部材１０３の傾斜に
よって移動されて撮像素子２上に結像され、画像メモリ
７にわずかにずれた画像を記憶する。

【０００７】更に、ひとつの作動部１０８ａを作動させ
れば同一方向に順次画像が移動し、順次画像が撮像素子
２に結像され記憶される。また、作動部１０８ｂを駆動
させると、作動部１０８ａと支持部１０９を結ぶ線を回
転軸として透明平板部材１０３が傾斜し、前述とは異な
る方向に画像の移動が行われる。これら２方向の移動を
適宜組み合わせることにより、任意の位置への２次元の
画素ずらしを実施する。その後、画像メモリ7に蓄積さ
れた複数の撮影画像を画素ずらしの実施方向を考慮して
各対応画素毎に内挿することで、光学的に画素数を増加
させた画像が画像合成メモリ１１０に得られる。

【０００８】次に、従来の画素ずらしによって得られた
画像から高精細画像を生成するための信号処理方式につ
いて説明する。図２に示す信号配列は単板撮像装置にお
いて最もよく使われているＢａｙｅｒ型配列をした撮像
素子であり、図中のＲ信号，Ｇ信号またはＢ信号は撮像
素子の配置上その画素位置にてサンプリングされる色信
号である。図１２は図２に示す撮像素子を斜め１／２画
素右下にずらして撮像した画像の色信号と先の色信号と
を重ねて表示した説明図である。図において、Ｒ１，Ｇ
１，Ｂ１が１枚目の撮影画像の色信号であり、Ｒ２，Ｇ
２，Ｂ３は画素ずらしを行なわれた２枚目の撮影画像か
ら得られた色信号である。

【０００９】図１２に示した画像を高解像度画像として
生成する場合、図２と比較して水平垂直とも２倍になっ
ているため４倍の画素数のフルカラー信号を生成する必
要があり、図中撮像画素における非撮影色信号を周辺画
素信号から生成するとともに、空白画素の全色信号を同
様に内挿する必要がある。

【００１０】例えば、Ｇ信号だけ着目すると、図４６に
示す位置にだけ撮像によって得られたＧ信号（Ｇ１，Ｇ
２）が存在する。従来の技術では、前後左右の信号の平
均値からＧ１’，Ｇ２’を補間し、次に図４７に示すよ
うに補間して得られたＧ信号から更に内挿することによ
り、全画素分のＧ信号を得ることができる。

【００１１】また、Ｂ信号に着目すると、図４８に示す
ように左右のＢ１信号からＢ１’信号を内挿し、さらに
補間したＢ１’信号からＢ１”信号を内挿する。Ｂ２信
号についても同様である。次に図４９に示すように補間
したＢ１’，Ｂ１”，Ｂ２’，Ｂ２”から残りの画素の
内挿を行う。Ｒ信号においてもＢ信号と同様の方法にて
全画素分の信号を補間することができる。上記の方法に
よって全画素における画素分だけのＲ，Ｇ，Ｂ信号を得
ることができる。

【００１２】

【発明が解決しようとする課題】従来の撮像装置は以上
のように構成されているので、光路を二次元的に変更す
るために透明平板部材１０３を２つのモータにより機械
的に駆動制御する必要がある。そのため精度の高い画素
ずらし量を実現することが困難である課題があった。特
に、近年の固体撮像素子の画素ピッチは、数ミクロンも
のが主流となっており、機械的にその数分の一の精度を
得る為には、複雑な制御系が必要となる。また、機械的
な振動を用いて制御するため、振動や繰り返し寿命など
を十分に考慮した設計を必要とした。

【００１３】さらに、上記方法により撮像した画像から
高解像度画像を生成する従来の信号処理では、単なる線
形補間であるため、画素ずらしを行うことによって得ら
れる画素数分だけの解像度を得ることができない。これ
はまず、単板撮像素子における図２における画像が各画
素上に１色の色フィルタを配置しているため画素数分だ
けのＲ，Ｇ，Ｂ信号が得られず、画素数分だけの解像度
が得られていないことが第１の原因であり、次に２枚の
画像から高解像度画像を得る際に線形補間法では解像度
の向上が見込めないという点に問題があった。

【００１４】この発明は上記のような課題を解決するた
めになされたもので、撮像光学系を機械的に振動させる
ことなく微小画素ずらしを実施して、解像度の高い画像
を実現することができる撮像装置を得ることを目的とす
る。

【００１５】

【課題を解決するための手段】この発明に係る撮像装置
は、画像記憶手段に記憶されている変位前後の撮像素子
の撮像画像を構成する撮像色信号のうち、参照色である
撮像色信号が形成する三角形と補間色である非撮像色信
号が形成する三角形の相似比を考慮して色補間を実施
し、変位前後の撮像素子の撮像画像を合成するようにし
たものである。

【００１６】この発明に係る撮像装置は、撮像画素が存
在しない位置の空白画素を色補間する場合、画像中のエ
ッジにあたる部分が空白画素を通過するか否かを判定
し、その空白画素を通過するときはエッジ線分の稜線方
向に当該空白画素を色補間するようにしたものである。

【００１７】この発明に係る撮像装置は、撮像素子の撮
像画像を圧縮して、その圧縮画像を圧縮画像メモリに格
納し、その圧縮画像を伸長して画像記憶手段に出力する
圧縮・伸長手段を設けたものである。

【００１８】この発明に係る撮像装置は、画像記憶手段
に記憶されている変位前後の撮像素子の撮像画像を構成
する撮像色信号の信号レベルを補正する信号レベル補正
手段を設けたものである。

【００１９】この発明に係る撮像装置は、変位前後の撮
像素子の撮像画像における所定領域の撮像色信号の平均
信号レベルを計算し、双方の平均信号レベルが一致する
ように撮像色信号の信号レベルを補正するようにしたも
のである。

【００２０】この発明に係る撮像装置は、入射光を撮像
素子に導く光路に配置された磁気光学素子に与える磁界
の強度を制御して、その撮像素子に対する入射光の位置
を変位させるようにしたものである。

【００２１】この発明に係る撮像装置は、撮像光学系と
撮像素子の間に画素ずらし手段を配置するようにしたも
のである。

【００２２】この発明に係る撮像装置は、撮像光学系の
前段に画素ずらし手段を配置するようにしたものであ
る。

【００２３】この発明に係る撮像装置は、入射光を撮像
素子に導く光路に配置された電気光学素子に与える電界
の強度を制御して、その撮像素子に対する入射光の位置
を変位させるようにしたものである。

【００２４】この発明に係る撮像装置は、入射光を撮像
素子に導く光路に配置された液晶板に与える電圧の強度
を制御して、その撮像素子に対する入射光の位置を変位
させるようにしたものである。

【００２５】

【発明の実施の形態】以下、この発明の実施の一形態を
説明する。実施の形態１．図１はこの発明の実施の形態１による撮
像装置を示す構成図であり、図において、６１は撮像レ
ンズ１（図３を参照）に入射する被写体像の光路を変調
する画素ずらし光学系（画素ずらし手段）、２はＲＧＢ
の原色フィルタがＢａｙｅｒ型配列（図２を参照）を為
して表面上に配置された正方形の電荷結合素子（以下、
ＣＣＤと称す）を面状に備え光学像を光電変換する撮像
素子、３は撮像素子２から出力されるアナログ信号をデ
ジタル変換するＡ／Ｄ変換回路、４は画素ずらし光学系
６１及び撮像素子２を制御する撮像部制御回路、５は画
素ずらし光学系６１、撮像素子２、Ａ／Ｄ変換回路３及
び撮像部制御回路４から構成された撮像部である。

【００２６】６は撮像部制御回路４と通信しながら撮像
装置全体の制御を行うＣＰＵなどのカメラ制御部、７は
デジタル画像信号を受信して一時記憶する画像メモリ
（画像記憶手段）、８はＡ／Ｄ変換回路３からのデジタ
ル画像信号を画像メモリ７に書き込むダイレクトメモリ
アクセスコントローラ（以下、ＤＭＡコントローラと称
す）等のメモリ制御手段、９は画像メモリ７に蓄積され
た撮像データに対してデジタル画像処理を施すソフトウ
ェアあるいは電子回路により構成される画像処理部であ
る。

【００２７】１０は画像信号に対して白バランス補正や
黒レベル補正あるいはガンマ補正等を施す信号レベル補
正処理部（信号レベル補正手段）、１１は撮影画像をデ
ジタル画像処理で高解像度に補間・合成する画素補間・
合成処理部（補間・合成手段）、１２は画素補間・合成
処理部１１で得られる１枚の高解像度化された画像に対
して、光学系あるいは回路系で発生するノイズ除去を行
うノイズ除去フィルタ等を含む画像補正処理部、１３は
最終的に得られるフルカラー画像を国際標準化方式であ
るＪＰＥＧ（ＪｏｉｎｔＰｈｏｔｏｇｒａｐｈｉｃ
ＥｘｐｅｒｔｓＧｒｏｕｐ）方式等の画像圧縮方式で符
号化する画像圧縮処理部、１４は撮像部５及び画像処理
部９を経て最終的に得られる画像を液晶画面表示あるい
はフラッシュメモリ等の２次記憶手段に蓄積あるいはシ
リアルインタフェースや赤外線通信等の伝送路とのデー
タインタフェースあるいはシャッタスイッチ等のマンマ
シンインタフェースを行うインタフェース部である。

【００２８】図３は画素ずらし光学系６１の内部構成を
示す構成図であり、図において、１は撮像レンズ（撮像
光学系）、１５は磁界発生回路、１６は磁界発生回路１
５により印加される電圧に応じて内部に磁界を発生させ
るコイル、１７はコイル１６内に発生した磁場により磁
気光学効果を生じるファラデー素子、１８は偏光板、１
９は複屈折板である。なお、図３の例では撮像レンズ１
を偏向板１８の前段に配置しているが、これに限るもの
ではなく、例えば、複屈折板１９と撮像素子２の間に撮
像レンズ１を配置してもよい。

【００２９】次に動作について説明する。ここでは、静
止画像を撮影可能なディジタルスチルカメラとして実現
した場合について説明する。始めに撮像装置全体の概略
動作を説明し、各部の詳細な動作を後述する。ここで
は、画素ずらし光学系６１を用いて４５度方向に半画素
ずらした画像を２枚撮影し、ＣＣＤの実際の画素数に対
して２×２倍の画素密度を有する高精細画像を得る手順
について説明する。

【００３０】高精細モードでの撮影がインタフェース部
１４より撮影者によって設定され、図示しないレリーズ
スイッチの押し下げがインタフェース部１４からカメラ
制御部６に伝達されると、撮像部５では磁界発生回路１
５における第一の磁界印加条件（例えば、印加磁界な
し）での撮像動作を行う。これにより撮影された画像は
デジタル化され、撮像部５からメモリ制御手段８へ伝送
される。

【００３１】メモリ制御手段８では、入力画像信号を画
像メモリ７に後述する規則に従って記憶させる。次に、
撮像部制御回路４における第二の印加磁界条件により、
１枚目の撮影画像に比べて−４５度方向に１／２画素ず
らして撮影された画像は、伝送路を経て撮像部５から画
像処理部９へ伝送され、同様に画像メモリ７に記憶され
る。次に、画像処理部９では、第二の撮影画像の入力終
了に伴い、画像メモリ７上に記憶されている第一及び第
二の撮影画像の読出しを行い、信号レベル補正処理部１
０にて両画像のＲＧＢ各色の信号レベル値に強度補正係
数を乗じて、白バランス補正処理を実施する。

【００３２】次に、画素補間・合成処理部１１では、第
一及び第二の撮影画像に対して、後述する高解像度化処
理を施し、２枚の撮影画像を１枚の高解像度画像に合成
する。さらに、後段の画像補正処理部１２及び画像圧縮
処理部１３を経て図示しない液晶ディスプレイへの表
示、あるいは、コンパクトフラッシュ（登録商標）メモ
リカード等の二次記憶媒体への記憶を行うためにインタ
フェース部１４へ転送される。

【００３３】以下に、撮像部５における画素ずらし光学
系６１、メモリ制御手段８による画像メモリ７への画像
記憶方法、及び画素補間・合成処理部１１の詳細な説明
を行う。まず、図３及び図４を参照して、画素ずらし光
学系６１の動作を説明する。なお、図４は図３の動作原
理図であり、図５は図４のＡ−Ａ線から見た説明図、図
６は図４のＢ−Ｂ線から見た説明図、図７は図４のＣ−
Ｃ線から見た説明図である。

【００３４】画像を結像させるための撮像レンズ１から
の光が偏光板１８に入射すると、図５に示す振幅方向Ｗ
ａの直線偏光が得られる。図４に示すＨａはファラデー
素子１７に印加されている磁界の方向である。図５に示
されている振動方向Ｗａの直線偏光が、例えば鉛ガラス
のようなファラデー素子１７に入射すると、上記磁界の
方向Ｈａの印加磁界により、上記直線偏光の偏光面が回
転する。なお、磁界の方向Ｈａに進む直線偏光をファラ
デー素子１７に入射させると、その透過光の偏光面が回
転するが、その回転角θは次式により得られる。 θ＝Ｒ×ｌ×Ｈ（１）ここで、lはファラデー素子１７の厚さ、Ｈは磁界の強
さ、Ｒはベルデ（Ｖｅｒｄｅｔ）定数である。なお、上
記の式（１）に関しては、例えば、株式会社朝倉書店発
行の「光学的測定ハンドブック」等に記載されている。

【００３５】図４において、回転角θが０度となる磁界
の強さをＨθ_０とすると、Ｈ＝Ｈθのときには振動方向
Ｗａの直線偏光が得られ、Ｈ＝Ｈθ_０のときには、図６
に示す振動方向Ｗθ_０の直線偏光が得られる。図７に示
すＱは複屈折板１９の光学軸である。振動方向Ｗａの直
線偏光が複屈折板１９に入射すると、図７に示す常光線
Ｌ_ｏが得られる。また、振動方向Ｗθ _０の直線偏光が複
屈折板１９に入射すると、図７に示す異常光線Ｌ_Ｅが得
られる。常光線Ｌ_ｏと異常光線Ｌ_Ｅの距離をＰとし、図
４に示す複屈折板１９における上記Ｐを、Ｐ＝ＰＨ／２
（ＰＨは撮像素子２の水平画素ピッチ）に選ぶ。

【００３６】ファラデー素子１７に印加される磁界の強
さＨの変化の位相は、図８（１）に示すフィールドシフ
トパルスに一致させる。上述した動作により、この発明
による撮像装置では、Ａ、Ｂフィールドでの信号電荷蓄
積を入射画像と撮像素子２の画素との相対的な位置に関
して、ＰＨ／２だけ離れた位置で行うことができる。即
ち、ファラデー素子１７に印加される磁界の強さＨを時
間的に変化させ、入射光学像と撮像素子２との相対的な
位置関係を時間的に変化させることにより、空間サンプ
リング領域を増加できる。これに対応して図８（３）に
示す信号読み出しパルスのタイミングも、上記ＰＨ／２
に相当する時間Ｔだけずらしてある。その結果、図８
（５）に示すように、この発明による撮像装置は、Ａ、
Ｂフィールドを１フレームとした１周期で高画素密度化
画像を得ることが可能になる。

【００３７】この実施の形態１では、説明の簡易化のた
め画素ずらし方向として水平方向、即ち、一次元空間に
対する座標について説明したが、同様な原理で画素ずら
し位置を二次元的に行える。その際には、偏光板１８、
磁気光学効果を有する第一の光学素子、複屈折板１９か
らなるｎ組の光学素子群を撮像系に配置し、それぞれの
光学素子群の間に、例えば、直線偏光を円偏光に変換す
る１／４波長板をｎ−１個挿入すればよい。上記ｎ組の
光学素子群におけるｎ個の磁気光学効果を有する光学素
子に印加する２値的な電圧をそれぞれ設定することによ
り、２のｎ乗枚の画素ずらし画像を得ることができる。

【００３８】上記撮像原理により図２のＢａｙｅｒ型単
板カラー撮像素子を用いて図９に示す●印で表される第
一の印加磁界条件による重心を持つ画素位置に対し、−
４５度方向に１／２画素ずらした○印で表される第二の
印加磁界条件による画素ずらし画像を撮影することがで
きる。この場合の画像メモリ７への記憶方法及び画素補
間・合成処理部１１における高解像度化処理について、
図を用いて詳細に説明する。

【００３９】図１０は図９の２枚の撮像画素に対して網
掛けした点（以下、空白画素と称す）を補間すること
で、撮像素子２に対して主走査方向及び副走査方向に各
々２倍の都合４倍の画素数を持つ画像を生成することを
示す模式図である。各撮影画像はメモリ制御手段８によ
り、画像メモリ７において２×２画素からなるマトリク
スの対応する位置、例えば１枚目の撮影画像の各画素は
各マトリクスの左上の画素位置に、２枚目の撮影画像の
各画素は各マトリクスの右下の画素位置（１枚目の対応
する画素に比べて−４５度方向にずらした位置）に一時
記憶される。

【００４０】実際には、メモリ制御手段８として構成さ
れるＤＭＡコントローラは、メモリの連続領域に対して
高速にデータ転送を行うことが可能であるため、実際の
メモリの物理アドレスとして図１０のように配列するこ
とが必ずしも得策ではない。この場合、各撮影画像を画
像メモリ７の連続する領域に各々格納しておき、以下の
画素補間・合成処理部１１において図９の相対位置関係
を保持するようにアドレッシングすることで同等の意味
を持たせて処理を行うことができる。

【００４１】画像メモリ７に記憶された各画像は、信号
レベル補正処理部１０によって補正処理が施される。補
正処理は、例えば、撮像素子２におけるＲＧＢ各色に対
応した色フィルタの感度特性を補正し、白色を正しい信
号レベルに補正する白バランス補正処理や、低感度域あ
るいは高感度域の信号のダイナミックレンジを補正する
ガンマ補正処理等が必要に応じて選択される。

【００４２】図１１は画素補間・合成処理部１１の処理
手順を示すフローチャートである。画素補間・合成処理
部１１では、撮影画素における非撮像色の生成と空白画
素における全色成分の生成を行うことで色補間と高解像
度化を実現する。始めに撮影画素が図２におけるＲ色フ
ィルタあるいはＢ色フィルタを透過したＲ成分またはＢ
成分である画素（以下、Ｒ／Ｂ画素位置と称す）におけ
るＧ成分生成処理を行い（ステップＳＴ１０１）、次に
図１０における空白画素位置におけるＧ成分生成処理を
行うことにより（ステップＳＴ１０２）、図１０の全画
素におけるＧ成分を生成する。

【００４３】次に、Ｒ／Ｂ画素位置におけるＢ成分また
はＲ成分の生成処理を行い（ステップＳＴ１０３）、Ｇ
画素位置におけるＲ色成分及びＢ色成分の生成処理を行
い（ステップＳＴ１０４）、次に図１０における空白画
素位置におけるＲ色成分及びＢ色成分の生成処理を行う
ことにより（ステップＳＴ１０５）、図１０の全画素に
おけるＲ成分及びＢ成分を生成する。各処理は、色成分
生成を行う対象画素（以下、注目画素と称す）を画像メ
モリ７に蓄積される画素位置に対して順次ｘ方向（主走
査）にラスタスキャンを行い、１ラインの処理が終了し
た場合、ｙ方向に１画素進んだラスタスキャンを繰り返
し行う。

【００４４】次に、各ステップにおける具体的な動作に
ついて説明する。図１２には、図１０で重心の位置関係
を示した、画素補間・合成処理部１１の実行前の既存画
像信号成分とその位置関係について示している。図中、
１の添え字がついた色信号は１枚目の撮影画像から得ら
れ、２の添え字がついた色信号は２枚目の撮影画像から
得られる。画素補間・合成処理部１１では１枚目及び２
枚目の撮影色信号を用いて他の色信号を生成する。

【００４５】始めに、Ｒ／Ｂ画素位置におけるＧ成分生
成処理（ステップＳＴ１０１）では、画素ずらし光学系
６１における画素ずらし方向と垂直方向に存在するＧ成
分及びＲ成分（またはＢ成分）を用いることで、相似的
に注目画素におけるＧ成分を算出する。例えば、撮像色
信号がＲ色である画素の位置（以下、Ｒ画素位置と称
す）の非撮像色信号のうちＧ色信号を補間生成する場
合、図１３に示すＲ画素位置を中心とした画素ウィンド
ウに存在する画素のうち、注目するＲ色信号の他に画素
ずらし方向と垂直方向に存在する２つのＲ色信号（Ｒ
１、Ｒ２）及び２つのＧ色信号（Ｇ２、Ｇ３）の座標に
位置する４つの撮像色信号レベル値を用いる。図１６に
は各色信号毎の参照方向及び信号レベル値の軸を加えた
２次元空間上で、これらの点が形成する三角形の形状を
破線で示している。

【００４６】この実施の形態１では、参照色である撮像
色信号Ｒが形成する三角形と補間色である非撮像色信号
Ｇが形成する三角形を、相似図形にした場合の相似比か
らＧ色信号の補間信号ｇＲを算出する。

【００４７】ここで、三角形（Ｒ・Ｒ１・Ｒ２）と、Ｒ
１、Ｒ２を平均値Ｒ_ＡＶＥで置き換えた点Ｒ１Ｈ、Ｒ２
Ｈ及びＲで形成される三角形（Ｒ・Ｒ１Ｈ・Ｒ２Ｈ）
は、幾何学的に同一の面積を持つことが明らかである。
画像信号では、信号分布から求まる積分値（幾何学図形
の面積）が画像エネルギーに相当し、同一面積の積分値
が同じであれば、その領域における平均輝度が保存され
視覚的に問題がないため、図１６の破線による三角形は
実線による二等辺三角形（Ｒ・Ｒ１Ｈ・Ｒ２Ｈ）で置き
換えることが可能である。

【００４８】同様にして補間色であるＧ色信号が形成す
る三角形（ｇＲ・Ｇ２・Ｇ３）を二等辺三角形（ｇＲ・
Ｇ２Ｈ・Ｇ３Ｈ）で置き換え、二等辺三角形（Ｒ・Ｒ１
Ｈ・Ｒ２Ｈ）と二等辺三角形（ｇＲ・Ｇ２Ｈ・Ｇ３Ｈ）
が相似図形になるように補間信号値ｇＲを決定すること
により、微小領域における画像エネルギーの比に応じた
色補間が可能である。

【００４９】従来の線形補間法による色補間を行った場
合、再現されるｇＲは（Ｇ２＋Ｇ３）／２の点となり、
Ｒ色成分が凸形状であるにも拘わらず、Ｇ色成分は平坦
な推移を示すため、Ｇ色成分の解像度が十分でなくＲ色
信号の突出による偽色が発生する。これに対して、本手
法を用いた場合、Ｇ色信号の推移が良好に再現されるた
め、高解像度かつ偽色の少ない色補間が実現できる。ま
た、この場合の演算は式（２）を用いることで行う。ｇＲ（ｍ，ｎ）＝Ｇ_ＡＶＥ（ｍ，ｎ）＋（Ｒ（ｍ，ｎ）−Ｒ_ＡＶＥ（ｍ，ｎ））／４（２）ただし、式（２）において、補間しようとするＲ画素位
置の（ｘ、ｙ）座標を（ｍ、ｎ）とし、Ｇ_ＡＶＥ（ｍ、
ｎ）はＧ２とＧ３の平均値を、Ｒ_ＡＶＥ（ｍ、ｎ）はＲ
１とＲ２の平均値を示し、２つの二等辺三角形の線分相
似比として１／４を乗じている。

【００５０】上記例では、Ｒ画素位置においてＧ色信号
成分を補間する例を示したが、ＲをＢに置き換えること
で、Ｂ画素位置におけるＧ色信号成分の補間を行うこと
が同様に可能である。

【００５１】また、上記例は、Ｒ画素位置のＧ成分を色
補間する場合を示したが、任意のＪ画素位置におけるＫ
色の色補間に同様の考え方を当てはめることが可能であ
る。図１４及び図１５は、他の画素位置における他の色
成分補間を行う際の参照色の参照画素位置と補間色の参
照画素位置の関係を示したものである。図１４は、Ｒ画
素位置におけるＢ成分補間の場合であり、各色成分につ
いて、図１７に示す三角形について上記モデルを適用す
る。即ち、これらの３点は三角形を形成するため注目画
素以外の２点を、それらの平均値で置きかえることによ
り二等辺三角形を作成し、これと補間色が相似二等辺三
角形を構成するように線分相似比である１／２を乗ず
る。さらに、ＲとＢの関係を入れ換えることによって、
Ｂ画素位置におけるＲ成分補間を行うことが同様に可能
である。

【００５２】また、Ｇ画素位置におけるＲ成分補間時の
参照画素位置の様子を図１５に示している。この場合
は、注目画素となるＧ画素位置から見た参照方向のＲ画
素位置までの距離がＧ画素位置を中心とした対象を為し
ていないが、図１８に示すこれまでのステップで生成済
みのＢ画素位置におけるＲ成分を補間色用三角形を形成
する点として用い、Ｒ及びＢ画素位置におけるＧ成分を
参照色用三角形を形成する点として用い、各二等辺三角
形の線分相似比を１／１とすることで、これまでの例と
同様の扱いをすることができる。

【００５３】以上の説明を元に、式（２）を一般化する
と式（３）のように記述することができる。Ｋ（ｍ，ｎ）＝Ｋ_ＡＶＥ（ｍ，ｎ）＋（Ｊ（ｍ，ｎ）−Ｊ_ＡＶＥ（ｍ，ｎ））×Ｃｄ（３）ただし、式（３）におけるＫ（ｍ，ｎ）は座標（ｍ，
ｎ）における補間すべき非撮像色信号、Ｊは座標（ｍ，
ｎ）における参照色としての撮像色信号を示し、Ｃｄは
Ｊ色がなす二等辺三角形に対するＫ色がなす二等辺三角
形の線分相似比を示している。

【００５４】このようにして、色補間対象の画素位置を
水平及び垂直方向に順次走査しながら各画素における全
色成分補間を繰返し行うことにより、１画面分の撮影画
素における色補間処理を実行することができる。

【００５５】次に、空白画素位置におけるＧ成分生成
（ステップＳＴ１０２）について詳細に説明する。図１
９の網掛け部分は、この段階で画像中に存在するＧ成分
の位置関係を示したものである。空白画素位置のＧ成分
を補間する場合、周辺画素を参照して画像中のエッジに
あたる部分が注目画素を通過するか否かを判定し、その
場合はエッジ線分の稜線方向に画素補間を実行すること
でシャープなエッジ再現が可能である。図１９における
矢印の示す方向は注目画素を中心とする７×７画素から
なる参照画素ウィンドウを元に検出可能な線分方向を示
している。

【００５６】線分角度検出は以下の手順に従って実行す
る。注目画素及び８近傍画素に存在するＧ成分に対して
信号レベル平均値Ｄａｖを算出する。次に、算出した信
号レベル平均値Ｄａｖをしきい値として７×７画素ウィ
ンドウ内の各Ｇ画素の信号値を１または０に２値化す
る。２値化されたウィンドウ内のＧ画素は予め定められ
ている複数のパターンと比較され、パターンの一致によ
り中心画素を通る線分角度及び線分のどちら側に明ある
いは暗があるかという線分角度情報が認識される。これ
らの線分角度情報に基づいて、線分の稜線方向に存在す
る複数の画素値を線形補間して注目画素のＧ成分が算出
される。

【００５７】例えば、７×７画素ウィンドウ内の画素が
図２０の斜線部（０）及びたす部（１）に２値化された
場合、パターンマッチングにより図の矢印方向に画像の
エッジが通っていることが検出され、図の太枠で示され
る４つの画素値を単純平均あるいは、注目画素からの距
離に対する重み付け平均等により注目画素のＧ成分を補
間する。

【００５８】線分の角度を検出し稜線方向に補間するこ
とで、一般的な８近傍画素の単純平均値により成分補間
する場合と比べ、エッジをシャープかつ線分を滑らかに
補間することが可能となる。これにより、画像の観察者
に対して高い解像感を与えることが可能となる。以上の
方法で、全画素のＧ成分が高い解像度で生成され、この
結果を参照することでＲ／Ｂ成分に関しても高解像度に
補間生成することができる。

【００５９】空白画素位置におけるＲ／Ｂ成分補間（ス
テップＳＴ１０５）に関しては、前記空白画素位置にお
けるＧ成分補間と同様のパターンマッチングを用いた線
分に対する稜線ベクトル検出により補間を行う。この
時、Ｒ／Ｇ／Ｂ成分のパターンマッチング結果の相違か
ら生じる誤補間を防止するために、Ｇ成分補間時に検出
した線分角度結果に基づきＲ／Ｂ成分補間を行うように
構成してもよい。

【００６０】以上のように、撮像素子２の２×２倍の画
素数を持つ４画素分の高解像度画像が画素補間・合成処
理部１１により生成され、生成されたフルカラー画像は
画像補正処理部１２において、光学系及び撮像系の画像
歪を補正するノイズ除去フィルタ等の処理が施され、画
像圧縮処理部１３によりＪＰＥＧ方式の画像符号化の
後、インタフェース部１４に送られる。このようにし
て、２枚の画素ずらし画像から撮像素子２のナイキスト
周波数を超える高解像度の画像が形成される。

【００６１】この実施の形態１では、画素ずらし光学系
６１を用いて−４５度方向に１／２画素ずらして撮影し
た２枚の画像を用いて高解像度化処理する例を示した
が、この限りではない。即ち、撮像素子２の各受光素子
は有限数が面状に配置されており、受光素子面における
入射光を積分値として信号出力するため、これにより撮
影画像の空間周波数は制約（ナイキスト周波数）を受け
ていることが標本化定理より説明できる。これに対し、
「２台のカメラを用いる超高精細画像取得法」（小松、
相澤、斎藤：テレビジョン学会誌Ｖｏｌ．４５，Ｎｏ
１０，ｐｐ．１２５６〜１２６２）によると、開口率１
００％の撮像素子を用いて画素ずらし画像を統合した場
合、２倍以内の解像度まで改善可能であることが明示さ
れている。本方式を用いて実際の撮像素子の開口率や受
光素子の形状等を考慮してずらし方向、ずらし量及び撮
影枚数を最適化することで合成画像における解像度を最
適化することができる。

【００６２】また、この実施の形態１では、パターンマ
ッチングの際、７×７画素からなるウィンドウを用いて
８方向の線分検出を行っているが、この限りではなく、
実行するソフトウェアの高速化あるいは回路規模の低減
を図る場合は、ウィンドウサイズを小型化し、４５度刻
みの４方向あるいは水平及び垂直のみの２方向の画素間
のエッジ線分の相関を用いるように構成してもよい。

【００６３】また、この実施の形態１では、画素ずらし
光学系６１の撮像条件を変化させた２枚の画像を撮影
し、画像メモリ７に記憶し終えた後に、後段の画像処理
部９における処理を開始する構成としたがこの限りでは
ない。即ち、画像処理部９における信号レベル補正処理
部１０は２枚の撮影画像に対して同じ白補正係数あるい
はガンマ補正テーブルを用いて一括して実施することも
可能であるが、各画像に対して個別に実行してもよく、
この場合、２枚目の撮影動作を行っている間に１枚目の
信号レベル補正処理を行うように構成することで全工程
の高速化に繋がる。

【００６４】また、この実施の形態１では、１枚目の撮
影画像に対して２枚目の撮影画像を−４５度方向に画素
ずらしする例を示したが、この限りではなく、４５度方
向、１３５度方向あるいは−１３５度方向にずらしても
同一の処理が適用可能であることは言うまでもない。

【００６５】実施の形態２．図２１はこの発明の実施の
形態２による撮像装置を示す構成図であり、図におい
て、図１と同一符号は同一または相当部分を示すので説
明を省略する。２０は撮影した各画像データを固定長圧
縮方式にて符号化する固定長圧縮回路、２１は撮像部５
から出力される撮像デジタル信号のうち、固定長圧縮回
路２０での圧縮時に使用するライン数分を遅延蓄積する
ラインバッファ、２２は固定長圧縮回路２０で圧縮され
た画像データを蓄積する圧縮画像メモリ、２３は圧縮画
像メモリ２２に蓄積された画像データを伸長する固定長
伸長処理部である。なお、固定長圧縮回路２０，ライン
バッファ２１，圧縮画像メモリ２２及び固定長伸長処理
部２３から圧縮・伸長手段が構成されている。

【００６６】次に動作について説明する。画素ずらし機
構を含む撮像部５の動作については上記実施の形態１と
同様である。画素ずらし光学系６１を用いて撮像部５か
ら入力された撮影画像は固定長圧縮回路２０で画像圧縮
するためにラインバッファ２１に一時記憶される。以下
に、固定長圧縮回路２０における圧縮動作について詳細
に説明する。

【００６７】固定長圧縮回路２０における固定長符号化
アルゴリズムとしては例えば４×４画素を１単位とする
ブロック毎に隣接画素情報の冗長性を排除する符号化法
を行うものを用いる。この場合、図２の画素配列では、
隣接する画素位置には同じ色の画素が存在しないため、
固定長圧縮回路２０内において同色画素をブロック化す
る。

【００６８】図２２は固定長圧縮回路２０により、図２
の画素配列が並べ換えられる様子を示した説明図であ
る。撮影画像データは撮像部５から順次ラインバッファ
２１に蓄積され、未処理のデータが８ライン分揃った段
階で画素配列の並べ換えを始めて、固定長圧縮回路２０
における符号化が実施される。画素並べ換えは８×８画
素単位に行い、各色４×４画素を単位ブロックとしてブ
ロック化する。並べ換え後の画像信号は、ブロックの左
上方向のアドレスと右下方向のアドレスにＧ成分が集め
られて配列され、左下方向のアドレスにＢ成分、右上方
向のアドレスにＲ成分が集められて配列される。

【００６９】固定長圧縮回路２０における画像符号化方
法について説明する。図２３は前記並べ換えられた単位
ブロック内のカラー画像信号を固定長圧縮回路２０で符
号化する場合のアドレスを示す説明図である。即ち、図
２３は縦横４画素分ずつの同一カラーの画像信号の塊で
ある単位ブロックのうち、縦方向ｍ行横方向ｎ列（ｍ、
ｎは０＜ｍ、ｎ≦４の自然数）のアドレスの画像信号に
後述する量子化レベルを付すことを表している。

【００７０】図２４は各画素の画像信号の強度を階層化
（量子化）する量子化レベルを表している。図におい
て、Ｌｍｉｎは図２３に示した１６画素の画像信号強度
中の最小値、Ｌｍａｘは同じ１６画素の画像信号強度中
の最大値、Ｐ１は最大値Ｌｍａｘと最小値Ｌｍｉｎとの
間を８等分した下から８分の１の値、Ｐ２は上から８分
の１の値、Ｑ１はＬｍｉｎ以上Ｐ１以下の信号強度を有
する画素の平均値、Ｑ８はＬｍａｘ以下Ｐ２より大きい
信号強度の画素の平均値である。

【００７１】また、ＬＤは単位ブロック内の階調幅指標
で、Ｑ８−Ｑ１に等しい。Ｌ１〜Ｌ７は階調幅指標ＬＤ
を８等分した値を小さい方から並べたものである。ＬＡ
は単位ブロック内の画像データ平均値レベルで（Ｑ１＋
Ｑ８）／２に等しい。φｉｊｋは画素毎の量子化レベル
を表している。

【００７２】図２５及び図２６はこの実施の形態２によ
る符号化手順を示すフローチャートである。以下、この
フローチャートを参照しながら符号化手順を説明する。
まず、固定長圧縮回路２０は図２２（２）のように並べ
換えられた単位ブロック内の画像データを読み込む（ス
テップＳＴ１）。次に、読み込んだ４×４画素分の画像
データの信号強度を演算し、以下の各式に従って順次Ｐ
１、Ｐ２、Ｑ１、Ｑ２、ＬＡ、ＬＤ、Ｌ１〜Ｌ７の値を
求める（ステップＳＴ２〜ステップＳＴ１３）。

【００７３】Ｐ１＝（Ｌｍａｘ＋７Ｌｍｉｎ）／８Ｐ２＝（７Ｌｍａｘ＋Ｌｍｉｎ）／８Ｑ１＝Ａｖｅ（Ｘｍｎ≦Ｐ１）Ｑ２＝Ａｖｅ（Ｘｍｎ＞Ｐ２）ＬＡ＝（Ｑ１＋Ｑ８）／２ＬＤ＝Ｑ８−Ｑ１Ｌ１＝ＬＡ−３ＬＤ／８Ｌ２＝ＬＡ−ＬＤ／４Ｌ３＝ＬＡ−ＬＤ／８Ｌ５＝ＬＡ＋ＬＤ／８Ｌ６＝ＬＡ＋ＬＤ／４Ｌ７＝ＬＡ＋３ＬＤ／８

【００７４】なお、Ｑ１の式はＬｍｉｎ以上Ｐ１以下の
信号強度を持つ画素の平均値を求めることを意味し、Ｑ
２の式はＬｍａｘ以下Ｐ２より大きい信号強度を持つ画
素の平均値を求めることを意味する。

【００７５】このようにして、順次Ｐ１、Ｐ２、Ｑ１、
Ｑ２、ＬＡ、ＬＤ、Ｌ１〜Ｌ７の値を求めた後、固定長
圧縮回路２０はｎ＝１、ｍ＝１とおいて（ステップＳＴ
１４、ＳＴ１５）、この時のアドレス（ｍ，ｎ）の画素
の信号強度Ｘｍｎである画素値（すなわち画素値Ｘ１
１）がＬ１以下であるか否かを判断する（ステップＳＴ
１６）。

【００７６】画素値Ｘ１１がＬ１以下である場合には、
この画素値の量子化レベルφｉｊｋを２進数の０００と
設定する（ステップＳＴ１７）。次に、ｍを１だけイン
クリメントし（ステップＳＴ３１）、ｍが４以下である
か否かを判別する（ステップＳＴ３２）。ｍが４以下で
ある場合は、その画素の画素値を再びＬ１と比較する
（ステップＳＴ１６）。

【００７７】ｍが４より大きい場合には、ｎを１だけイ
ンクリメントし（ステップＳＴ３３）、インクリメント
したｎが４以下であるか否かを判別する（ステップＳＴ
３４）。ｎが４以下である場合は、その画素の画素値を
再びＬ１と比較する（ステップＳＴ１６）。

【００７８】画素値ＸｍｎがＬ１より大きい場合には、
Ｌ２以下であるか否かを判別し（ステップＳＴ１８）、
ＸｍｎがＬ２以下である場合は、この画素の量子化レベ
ルφｉｊｋを２進数の００１と設定する（ステップＳＴ
１９）。次に、ｍを１だけインクリメントし（ステップ
ＳＴ３１）、ｍが４以下であるか否かを判別する（ステ
ップＳＴ３２）。ｍが４以下である場合は、その画素の
画素値を再びＬ１と比較する（ステップＳＴ１６）。ｍ
が４より大きい場合には、ｎを１だけインクリメントし
（ステップＳＴ３３）、インクリメントしたｎが４以下
であるか否かを判別する（ステップＳＴ３４）。ｎが４
以下である場合には、その画素の画素値を再びＬ１と比
較する（ステップＳＴ１６）。

【００７９】以下、同様に、画素値がＬ１〜Ｌ２間、Ｌ
２〜Ｌ３間、Ｌ３〜ＬＡ間、ＬＡ〜Ｌ５間、Ｌ５〜Ｌ６
間、Ｌ６〜Ｌ７間のいずれの値を有するかを判別し（ス
テップＳＴ１６、ＳＴ１８、ＳＴ２０、ＳＴ２２、ＳＴ
２４、ＳＴ２６、ＳＴ２８）、その値に応じてそれぞれ
量子化レベルφｉｊｋ＝０００、００１、０１０、０１
１、１００、１０１、１１０、１１１を当該画素に割り
振る（ステップＳＴ１７、ＳＴ１９、ＳＴ２１、ＳＴ２
３、ＳＴ２５、ＳＴ２７、ＳＴ２９、ＳＴ３０）。

【００８０】このようにして、同一単位ブロック内の全
画素に量子化レベルを割り振って符号化を終了する。単
位ブロックの符号化データはＬＡ、ＬＤ、各画素毎のφ
ｉｊｋである。

【００８１】これらの処理は、画面全体に対して単位ブ
ロック数分繰り返す。Ａ／Ｄ変換回路３からのデジタル
信号が１画素あたり１０ビットである場合（ビット詰め
しない場合、２バイト相当）、固定長符号化による画像
圧縮率は１０／３２である。このように各撮影画像デー
タは、逐次同色画素の画素のみで構成されたブロック毎
に固定長圧縮回路２０において固定長符号化が行われ、
画像データ量の低減が施された上でメモリ制御手段８を
介して圧縮画像メモリ２２に蓄積される。

【００８２】こうして２枚の撮影画像データが圧縮画像
メモリ２２に蓄積された後に、画像処理部９における画
像処理が施される。始めに、固定長圧縮回路２０におい
て符号化されている画像データの復号化処理を行う。固
定長伸長処理部２３における画像復号化方法について図
について説明する。図２７は固定長伸長処理部２３の動
作を示すフローチャートである。以下、このフローチャ
ートを参照しながら固定長伸長処理部２３の固定長復号
化動作を説明する。

【００８３】固定長復号化動作が開始されると、まず、
縦方向座標値ｎを１に設定し（ステップＳＴ４０）、横
方向座標値ｍを１に設定する（ステップＳＴ４１）。即
ち、ステップＳＴ４０及びステップＳＴ４１の動作によ
って、ある単位ブロック中の座標値（１，１）のアドレ
スが指定される。

【００８４】次に、指定したアドレスの量子化レベルΦ
ｉｊｋがいくつであるか判定し（ステップＳＴ４２、Ｓ
Ｔ４４、ＳＴ４６、ＳＴ４８、ＳＴ５０、ＳＴ５２、Ｓ
Ｔ５４）、判定した各量子化レベルΦｉｊｋに応じて平
均値レベルＬＡと階調幅指標ＬＤとに基づいて、その画
素の信号強度Ｙｍｎ（座標値（１，１）の画素であるな
らばＹ１１）を求める（ステップＳＴ４３、ＳＴ４５、
ＳＴ４７、ＳＴ４９、ＳＴ５１、ＳＴ５３、ＳＴ５５、
ＳＴ５６）。

【００８５】各ステップにおいて、平均値レベルＬＡと
階調幅指標値ＬＤとから信号強度Ｙｍｎを求めるには、
それぞれ次の演算式に従う。Ｙｍｎ＝ＬＡ−ＬＤ／２（ステップＳＴ４３）Ｙｍｎ＝ＬＡ−５ＬＤ／１４（ステップＳＴ４５）Ｙｍｎ＝ＬＡ−３ＬＤ／１４（ステップＳＴ４７）Ｙｍｎ＝ＬＡ−ＬＤ／１４（ステップＳＴ４９）Ｙｍｎ＝ＬＡ＋ＬＤ／１４（ステップＳＴ５１）Ｙｍｎ＝ＬＡ＋３ＬＤ／１４（ステップＳＴ５３）Ｙｍｎ＝ＬＡ＋５ＬＤ／１４（ステップＳＴ５５）Ｙｍｎ＝ＬＡ＋ＬＤ／２（ステップＳＴ５６）画素（１，１）の信号強度を求めたら、次に横方向に画
素を1つ移動し（ステップＳＴ５７、ＳＴ５８）、同一
の手順で画素（２，１）の信号強度を復号化する（ステ
ップＳＴ４２〜ＳＴ５６）。

【００８６】このようにして単位ブロック内の最上段の
画素について信号強度を復号化した後（ステップＳＴ５
８）、縦方向の座標値を1だけインクリメントし（ステ
ップＳＴ５９）、次の段の画素について同様にして信号
強度を復号化する（ステップＳＴ４２〜ＳＴ５８）。こ
のようにして単位ブロック内の全画素について信号強度
を復号化して（ステップＳＴ４１〜ＳＴ６０）、復号化
動作を終了する。

【００８７】次に、復号化されたデータに、図２８に示
すように固定長圧縮回路２０で並べ換えたデータの逆の
並べ換え処理を施して、画素信号を走査線方向に読み出
したときと同一の順序で並べ換え、画像メモリ７に記憶
される。

【００８８】以上のように画像メモリ７上には固定長圧
縮前の画像データと等価な画像データが蓄積されている
ことになり、上記実施の形態１と同様の画像処理が画像
処理部９の他のブロックにおいて施され、インタフェー
ス部１４に出力される。

【００８９】以上のように、複数枚の画像を撮影する際
に、各々の画像データを固定長圧縮回路２０を用いてデ
ータ圧縮することにより、撮像部５のＡ／Ｄ変換回路３
から出力される画像信号を画像メモリ７に蓄積する際、
より少ないデータ量をデータバスに供給して記憶手段に
蓄積することが可能となり、連写間隔を短縮するための
高速なメモリ制御回路あるいは最低２フレーム分の高速
書込みが可能な半導体メモリを使用する必要がなくな
り、装置を低価格に構成することが可能となる。

【００９０】これは言い換えれば、少量の高速な圧縮画
像メモリ２２を使用することで記憶手段への撮影したデ
ータ蓄積速度を見かけ上高速化することが可能であり、
１枚目の撮影シーケンスが短時間に終了することで２枚
目の撮影動作を短時間の間合いで開始することができる
ことになる。そのために、２枚の撮影画像間に生じる被
写体の時間的な変化あるいは撮影者の手ぶれ等を最小限
に抑えることが可能となり、同一被写体を高精度に１／
２画素ずらした撮影が実現できるという効果がある。

【００９１】この実施の形態２では、画像メモリ７と圧
縮画像メモリ２２は別個に設ける構成としたが、この限
りではなく、同一の記憶領域を有する半導体メモリ上に
併設する構成としてもよい。また、この実施の形態２で
は固定長圧縮回路２０とラインバッファ２１と圧縮画像
メモリ２２を別個に設ける構成としたが、この限りでは
なく、これらの構成要素の２つ以上をＬＳＩ等の集積回
路１石に包含する構成としてもよい。

【００９２】実施の形態３．以下、実施の形態３を図に
ついて説明する。画素ずらし光学系６１を含む撮像部５
の構成や動作に関しては上記実施の形態１，２と同様で
ある。この実施の形態３で特徴的である画像処理部９の
信号レベル補正処理部１０の動作について詳細な説明を
行う。

【００９３】撮像部５で撮影された２枚の画像信号は、
Ａ／Ｄ変換回路３を経て画像処理部９の画像メモリ７に
蓄積される。蓄積された画像データは、各々信号レベル
補正処理部１０で白バランス補正処理やガンマ補正処理
等の個別に適用可能な信号補正処理を施される。この
時、１枚目の画像と２枚目の画像は時系列的に撮影され
ているため、例えば５０〜６０ＭＨｚの比較的低周波で
発光を繰り返す蛍光灯を光源として撮影した場合、光源
の発光タイミングとシャッタ時間の関係で２枚の画像の
入射光量に差異が生じる場合がある。即ち、撮影した２
枚の画像の平均明度に差が生じ、後段の画素補間・合成
処理部１１で画像合成を行う際に画質劣化の原因と為り
得る。

【００９４】図２９（ａ）は１枚目の撮像条件に比して
２枚目の撮像条件における照明光量が３０％程度低下し
た場合の同一被写体を撮影した際の明度特性を示してい
る。定照明下で撮影した際の各信号レベルは、照明条件
が変化した場合に平均明度の低下とダイナミックレンジ
の縮小が発生する。図中、Ｍａｘ及びＭｉｎ値は各画像
における最大信号レベル及び最小信号レベルである。こ
の実施の形態３における信号レベル補正処理部１０で
は、各画像内の信号レベル補正処理の他、２枚の画像の
信号レベル補正処理を行う。

【００９５】即ち、各画像における最大信号レベル値及
び最小信号レベル値を検出し、いずれか一方の信号レベ
ル特性に他方を合せ込む処理を行う。通常は、１枚目の
画像撮影時に自動露出補正あるいはシャッタ速度補正を
行い最適条件下で撮影を行うため、２枚目の画像を１枚
目の明度分布特性に合わせるようにする。補正前後の２
枚目の画像における各信号レベルをそれぞれＤ（ｊ）
（ｊは定照明下での各明度レベル値）及びＤ’（ｊ）と
すると、始めに式（４）に従って補正を行う（図２９
（ｂ）を参照）。Ｄ’（ｊ）＝Ｄ（ｊ）＋（Ｍｉｎ１−Ｍｉｎ２）（４）

【００９６】続いて、式（５）に従って１枚目の画像及
び式（４）にて補正した２枚目の画像のダイナミックレ
ンジを補正し、最終的な２枚目の補正信号レベルＤ”
（ｊ）を算出する（図２９（ｃ）を参照）。Ｄ”（ｊ）＝Ｄ’（ｊ）（Ｍａｘ１−Ｍｉｎ１）／（Ｍａｘ２’−Ｍｉｎ２’）（５）

【００９７】以上の手順で信号レベル補正処理部１０を
構成することにより、撮影した２枚の画像の照明条件が
異なる場合においても明度特性を良好に一致させること
が可能であり、高精度の画素補間・合成処理が実現可能
である。また、撮像装置を図２１（実施の形態２）に示
す構成にし、撮影画像を固定長圧縮回路２０を用いて符
号化する場合、各符号におけるＬＡは１６画素からなる
ブロック内の平均信号レベルを代表する値であることか
ら、上記手順を全てＬＡを対象に実施しても等価的に同
等の効果を実現可能であることは容易に説明できる。こ
のように構成した場合、上記全画素を対象に行っていた
最大・最小信号レベル検出及び信号レベル補正に関する
演算規模を１／１６に抑制することが可能であり、処理
の高速化を実現できるという格別の効果がある。

【００９８】この実施の形態３では、２枚目の撮影画像
に対して式（４）及び式（５）を順次適用するように構
成したが、この限りではなく、これらを１回の画像デー
タ走査で行えることは言うまでもない。

【００９９】実施の形態４．以下、実施の形態４を図に
ついて説明する。実施の形態４における全体構成は実施
の形態１における図１あるいは実施の形態２における図
２１と同様である。この実施の形態４では、画素ずらし
光学系６１として電界の強さに応じて透過光の屈折現象
が変化する電気光学素子を用いる点が上記実施の形態
１，２と異なる。図３０はこの実施の形態４における画
素ずらし光学系６１を示す構成図である。図において、
３０は電圧印加により電界を発生する電界発生回路、３
１は電気光学素子である。

【０１００】次に動作について説明する。図３０の動作
原理図である図３１中の電気光学素子３１及び偏光板１
８をＡ−Ａ、Ｂ−Ｂ、Ｃ−Ｃの方向から見たものをそれ
ぞれ図３２、図３３、図３４に示す。図３１において、
画像を結像するための撮像レンズ１から電気光学素子３
１に入射する自然光は図３２に示すように互いに直交す
る２つの偏光成分Ｌ_Ｘ，Ｌ _Ｙで表すことができる。

【０１０１】電気光学素子３１に電界が印加されていな
い場合は、図３３のＬ_Ｘ０，Ｌ_Ｙ０に示す偏光成分がＬ
_Ｘ，Ｌ_Ｙが直進した位置に観測される。電気光学素子３
１に所定の電界Ｅ１が印加されると電気光学素子３１は
複屈折現象を呈し、図３３のＬ_Ｘ１，Ｌ_Ｙ１に示す偏光
成分が観測される。ここで、Ｌ_Ｘ１は複屈折現象におけ
る常光線としてＬ_Ｘが直進した位置に観測され、Ｌ_Ｙ１
は複屈折現象の異常光線としてＬ_Ｙが距離Ｐだけずれた
位置に観測される。ただし、この場合、図３４に示すよ
うなＰ＝ＰＨ／２（ＰＨは撮像素子２の水平画素ピッ
チ）となるような電界Ｅ１を電界発生回路３０が電気光
学素子３１に印加する。

【０１０２】図８は上記撮像装置における動作タイミン
グ図である。図８（１）はフィールドシフトパルス、図
８（２）は電気光学素子３１に印加される電界Ｅの強
さ、図８（３）は信号読み出しパルス、図８（４）は撮
像素子２の出力信号、図８（５）はＡ、Ｂフィールドを
１フレームとして見た場合の図である。電界Ｅの強さの
変化の位相を図８（１）のフィールドシフトパルスに一
致させる。

【０１０３】上述の動作により、この実施の形態４の撮
像装置は、Ａ、Ｂフィールドでの信号電荷蓄積を入射画
像と撮像素子２の画素との相対的な位置に関してＰＨ／
２だけ離れた位置で行うことができる。これに対応して
図８（３）に示す信号読み出しパルスのタイミングもＰ
Ｈ／２に相当する時間Ｔだけずらしてある。その結果、
図８（５）に示すように、この撮像装置はＡ、Ｂフィー
ルドを１フレームとした１周期で高画素密度化した画像
を得ることができる。

【０１０４】この実施の形態４における画像処理部９の
構成及び動作は、これまでの実施の形態で説明したいず
れを用いても構成できる。

【０１０５】実施の形態５．以下、実施の形態５を図に
ついて説明する。実施の形態５における全体構成は実施
の形態１における図１あるいは実施の形態２における図
２１と同様である。この実施の形態５では、画素ずらし
光学系６１として直線偏光を作る偏光板及び入射光の方
位角を変更する液晶板を用いた場合を例にとって説明す
る。図３５はこの実施の形態５における画素ずらし光学
系６１を示す構成図であり、図において、９１は液晶板
９２への印加電圧を制御する駆動電圧発生回路、９２は
偏光板１８で生成された直線偏光を電圧の印加条件で方
位角を変更可能な液晶板である。

【０１０６】次に動作について説明する。図３６は図３
５の動作原理図である。図３６において、Ａ−Ａは偏光
板１８の入射側、Ｂ−Ｂは偏光板１８の出射側、Ｃ−Ｃ
は液晶板９２の出射側、Ｄ−Ｄは複屈折板１９の出射側
の垂直方向の位置を示している。図３７〜図４０には図
３６に示したＡ−ＡからＤ−Ｄまでの各位置における光
の偏光方向を示す。

【０１０７】被写体を撮像する場合、光学系に入射され
る光は無偏光であるため、図３７のように垂直方向の偏
光成分と水平方向の偏光成分とで示すことができる。偏
光板１８は入射された光から直線偏光した光を出射す
る。また、その方位角は図３８に示すように、撮像素子
２の水平方向の画素配列を基準角とすると、基準角に対
して４５°の角度となるように、偏光板１８の偏光方向
の偏光軸を傾けて配置する。

【０１０８】液晶板９２は内部に液晶層を有し、２枚の
電極基板で液晶を挟んだ板であり、外部から電圧（電
界）が加わることにより、内部の液晶の分子配列変化に
伴う電気光学効果を引き起こす。この実施の形態５にて
用いる液晶板９２は入射される直線偏光の光の偏光方向
を、液晶板９２に電圧を加える、または加えている電圧
を切ることにより、その偏光方向を変化させるものであ
る。液晶板９２を実現させるための一例として電気光学
効果の内、代表的な電界効果型である、ねじれネマチッ
ク（ＴＮ）型液晶による旋光効果などが挙げられる。そ
の動作を図４１および図４２に示す。

【０１０９】ＴＮモードを示すネマチック液晶は正の誘
電異方性をもち、素子の分子配列を図４１，図４２に示
す。図４１，図４２中、９３は液晶分子である。基板に
電圧が印加されたときは図４１に示すように分子長軸方
向が両基板面で直行しているように配列するため、偏光
板１８を介して入射された直線偏光はそのまま出射され
る。電圧が無印加の時は素子内の液晶分子の配列は連続
的に９０°ねじれており、光学的には９０°旋光効果を
起こすため、偏光板１８から入射された直線偏光は９０
°ねじれて、出射光は入射光に対して９０°偏光方向が
異なるようになる。

【０１１０】液晶板９２から出射された光の偏光を図３
９に示す。図３９において、ｃ１は液晶板９２において
電圧が印加された状態であり、電圧無印加時にはｃ２の
ように基準角度に対して１３５°の方位角を有した直線
偏光となる。今、ｃ１の直線偏光を第１の偏位方向、ｃ
２の直線偏光を第２の偏位方向とする。液晶板９２から
出射された光は次に複屈折板１９に入射される。

【０１１１】複屈折板１９は屈折率が偏光方向によって
均一でない、いわゆる複屈折を有する材質であり、撮像
装置では被写体の空間周波数が撮像素子２の画素ピッチ
から求められるサンプリング周波数を超えている場合、
追い返しノイズ（エイリアジングノイズ）として画像に
現れるため、光学的ローパスフィルタとして水晶板など
が良く用いられている。水晶板すなわち複屈折板１９は
入射する光を常光線と異常光線とに分離し、その分離の
距離間は複屈折板１９の厚みによって調整することが可
能である。

【０１１２】第１の偏位方向の入射光を常光線、第２の
偏位方向の入射光を異常光線とするように複屈折板を設
けると、異常光線は点線で示されるように（図４０を参
照）、その光軸は常光線と異とし、それぞれの偏位方向
を有する入射光は、図４０においてｄ１，ｄ２に示すよ
うに撮像素子２上の異なった位置に結像する。また、複
屈折板１９の厚みを図４０に示すように水平方向の撮像
素子の画素ピッチｗｘの半分であるｗｘ／２、垂直方向
の撮像素子の画素ピッチｗｙの半分であるｗｙ／２だけ
異常光線が常光線に対して異なるように設ける。

【０１１３】よって、前記第１の偏位方向の時に撮像素
子２上に結像した像を撮像した第１の画像と、第２の偏
位方向の時に撮像した第２の画像の２枚の画像は互いに
水平垂直とも１／２画素分、相対的にずれている。

【０１１４】以上のことから、撮像装置は撮像部制御回
路４からの制御により撮像素子２を駆動させる際に駆動
電圧発生回路９１から液晶板９２へ駆動電圧を出力す
る。液晶板９２は電圧が加わることにより、図４３に示
す液晶分子配列となり、第１の偏位方向の入射光は撮像
素子２上に結像される。撮像素子２は撮像部制御回路４
の制御により駆動電圧発生回路９１からの駆動信号によ
り撮像を行い第１の画像を得る。

【０１１５】次に、第１の画像を撮像した後、駆動電圧
発生回路９１は液晶板９２への印加電圧を０とする。液
晶板９２の液晶分子配列は図４２に示したようになり、
第２の偏位方向の入射光は撮像素子２上に結像される。
撮像素子２は駆動電圧発生回路９１からの駆動信号によ
り撮像を行い第２の画像を得る。

【０１１６】液晶板９２への印加電圧パルスを図４３に
示す。撮像部制御回路４は図４３における状態１の間に
第１の画像の撮像を終了させ、同図状態２の間に第２の
画像の撮像を終了させる。上記のように動作させること
により、水平垂直とも１／２画素ずれた第１の画像およ
び第２の画像を得ることができる。

【０１１７】以上のように得られた１枚目の撮影画像と
１／２画素ずらして撮影された２枚目の画像は逐次Ａ／
Ｄ変換回路３においてデジタル信号に変換された後、画
像処理部９に送信される。

【０１１８】この実施の形態５では、１枚目の画像に
対して２枚目の撮影画像を１／２画素ずらす方向として
４５度方向にずらすものを例に説明したが、この限りで
はなく、液晶板９２及び複屈折板１８の配置あるいは液
晶板９２への印加電圧を適宜組み合わせることにより、
１３５度方向、−４５度方向、−１３５度方向など実現
可能である。

【０１１９】また、この実施の形態５では、入射する直
線偏光の偏光方向を変化させる液晶板９２として、ＴＮ
型液晶を一例として挙げたが、光電効果により旋光効果
を有する液晶板９２であれば、同様の効果を有すること
ができる。また、この実施の形態５では、図３５に示し
た画素ずらし光学系６１では撮像レンズ１を液晶板９２
と複屈折板１８との間に配置しているが、撮像レンズ１
は画素ずらし光学系６１内のいずれの位置に配置しても
よい。

【０１２０】また、以上の全ての実施の形態において
は、静止画像を連続的に取り込み可能なディジタルスチ
ルカメラでの構成例を示したが、動画像を取り込み可能
なディジタルカムコーダにおける高精細静止画撮影モー
ドとして構成可能であることは言うまでもない。

【０１２１】また、以上の全ての実施の形態において
は、撮像装置の内部で画素補間・合成処理を実行可能な
構成例を示したが、この限りではなく、パーソナルコン
ピュータやカラープリンタ等、撮像装置に直接あるいは
記憶媒体を間接的に経由して接続可能な機器上で構成し
てもよい。

【０１２２】

【発明の効果】以上のように、この発明によれば、画像
記憶手段に記憶されている変位前後の撮像素子の撮像画
像を構成する撮像色信号のうち、参照色である撮像色信
号が形成する三角形と補間色である非撮像色信号が形成
する三角形の相似比を考慮して色補間を実施し、変位前
後の撮像素子の撮像画像を合成するように構成したの
で、解像度の高い画像を実現することができる効果があ
る。

【０１２３】この発明によれば、撮像画素が存在しない
位置の空白画素を色補間する場合、画像中のエッジにあ
たる部分が空白画素を通過するか否かを判定し、その空
白画素を通過するときはエッジ線分の稜線方向に当該空
白画素を色補間するように構成したので、画像の解像度
を高めることができる効果がある。

【０１２４】この発明によれば、撮像素子の撮像画像を
圧縮して、その圧縮画像を圧縮画像メモリに格納し、そ
の圧縮画像を伸長して画像記憶手段に出力する圧縮・伸
長手段を設けるように構成したので、連写間隔を短縮す
ることができる効果がある。

【０１２５】この発明によれば、画像記憶手段に記憶さ
れている変位前後の撮像素子の撮像画像を構成する撮像
色信号の信号レベルを補正する信号レベル補正手段を設
けるように構成したので、画像の解像度を高めることが
できる効果がある。

【０１２６】この発明によれば、変位前後の撮像素子の
撮像画像における所定領域の撮像色信号の平均信号レベ
ルを計算し、双方の平均信号レベルが一致するように撮
像色信号の信号レベルを補正するように構成したので、
精度よく信号レベルを補正することができる効果があ
る。

【０１２７】この発明によれば、入射光を撮像素子に導
く光路に配置された磁気光学素子に与える磁界の強度を
制御して、その撮像素子に対する入射光の位置を変位さ
せるように構成したので、撮像光学系を機械的に振動さ
せることなく微小画素ずらしを実施することができる効
果がある。

【０１２８】この発明によれば、撮像光学系と撮像素子
の間に画素ずらし手段を配置するように構成したので、
撮像素子に対する入射光の位置を変位させることができ
る効果がある。

【０１２９】この発明によれば、撮像光学系の前段に画
素ずらし手段を配置するように構成したので、画素ずら
し手段を外付けにすることができる効果がある。

【０１３０】この発明によれば、入射光を撮像素子に導
く光路に配置された電気光学素子に与える電界の強度を
制御して、その撮像素子に対する入射光の位置を変位さ
せるように構成したので、撮像光学系を機械的に振動さ
せることなく微小画素ずらしを実施することができる効
果がある。

【０１３１】この発明によれば、入射光を撮像素子に導
く光路に配置された液晶板に与える電圧の強度を制御し
て、その撮像素子に対する入射光の位置を変位させるよ
うに構成したので、撮像光学系を機械的に振動させるこ
となく微小画素ずらしを実施することができる効果があ
る。

【図面の簡単な説明】

【図１】この発明の実施の形態１による撮像装置を示
す構成図である。

【図２】Ｂａｙｅｒ型配列をした撮像素子を示す説明
図である。

【図３】画素ずらし光学系６１の内部構成を示す構成
図である。

【図４】図３の動作原理図である。

【図５】図４のＡ−Ａ線から見た説明図である。

【図６】図４のＢ−Ｂ線から見た説明図である。

【図７】図４のＣ−Ｃ線から見た説明図である。

【図８】各種信号のタイミングを示す説明図である。

【図９】撮像画素の画素位置を示す説明図である。

【図１０】画像の生成を説明する模式図である。

【図１１】画素補間・合成処理部１１の処理手順を示
すフローチャートである。

【図１２】図２に示す撮像素子を斜め１／２画素右下
にずらして撮像した画像の色信号と先の色信号とを重ね
て表示した説明図である。

【図１３】色信号の補間生成を示す説明図である。

【図１４】色信号の補間生成を示す説明図である。

【図１５】参照色の参照画素位置と補間色の参照画素
位置の関係を示す説明図である。

【図１６】参照方向と信号レベルの関係を示す説明図
である。

【図１７】参照方向と信号レベルの関係を示す説明図
である。

【図１８】参照方向と信号レベルの関係を示す説明図
である。

【図１９】画像中に存在するＧ成分の位置関係を示す
説明図である。

【図２０】稜線ベクトル検出による補間を示す説明図
である。

【図２１】この発明の実施の形態２による撮像装置を
示す構成図である。

【図２２】画素配列が並べ換えられる様子を示した説
明図である。

【図２３】単位ブロック内のカラー画像信号を固定長
圧縮回路２０で符号化する場合のアドレスを示す説明図
である。

【図２４】各画素の画像信号の強度を階層化（量子
化）する量子化レベルを表す説明図である。

【図２５】この実施の形態２による符号化手順を示す
フローチャートである。

【図２６】この実施の形態２による符号化手順を示す
フローチャートである。

【図２７】固定長伸長処理部２３の動作を示すフロー
チャートである。

【図２８】固定長圧縮回路２０で並べ換えたデータの
逆の並べ換え処理を示す説明図である。

【図２９】被写体を撮影した際の明度特性を示す説明
図である。

【図３０】この実施の形態４における画素ずらし光学
系６１を示す構成図である。

【図３１】図３０の動作原理図である。

【図３２】図３１のＡ−Ａ線から見た説明図である。

【図３３】図３１のＢ−Ｂ線から見た説明図である。

【図３４】図３１のＣ−Ｃ線から見た説明図である。

【図３５】この実施の形態５における画素ずらし光学
系６１を示す構成図である。

【図３６】図３５の動作原理図である。

【図３７】図３６のＡ−Ａの位置における光の偏光方
向を示す説明図である。

【図３８】図３６のＢ−Ｂの位置における光の偏光方
向を示す説明図である。

【図３９】図３６のＣ−Ｃの位置における光の偏光方
向を示す説明図である。

【図４０】図３６のＤ−Ｄの位置における光の偏光方
向を示す説明図である。

【図４１】素子の分子配列を示す斜視図である。

【図４２】素子の分子配列を示す斜視図である。

【図４３】液晶分子配列を示す説明図である。

【図４４】従来の撮像装置を示すブロック図である。

【図４５】撮像装置の機構を示す斜視図である。

【図４６】撮像によって得られたＧ信号（Ｇ１，Ｇ
２）を示す説明図である。

【図４７】Ｇ信号の補間を示す説明図である。

【図４８】左右のＢ１信号からＢ１’信号の内挿を示
す説明図である。

【図４９】Ｂ１’，Ｂ１”，Ｂ２’，Ｂ２”から残り
の画素の内挿を示す説明図である。

【符号の説明】

１撮像レンズ（撮像光学系）、２撮像素子、３Ａ
／Ｄ変換回路、４撮像部制御回路、５撮像部、６
カメラ制御部、７画像メモリ（画像記憶手段）、８
メモリ制御手段、９画像処理部、１０信号レベル補
正処理部（信号レベル補正手段）、１１画素補間・合
成処理部（補間・合成手段）、１２画像補正処理部、
１３画像圧縮処理部、１４インタフェース部、１５
磁界発生回路、１６コイル、１７ファラデー素
子、１８偏光板、１９複屈折板、２０固定長圧縮
回路（圧縮・伸長手段）、２１ラインバッファ（圧縮
・伸長手段）、２２圧縮画像メモリ（圧縮・伸長手
段）、２３固定長伸長処理部（圧縮・伸長手段）、３
０電界発生回路、３１電気光学素子、６１画素ず
らし光学系（画素ずらし手段）、９１駆動電圧発生回
路、９２液晶板、９３液晶分子。

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 9/64 Ｈ０４Ｎ 9/64 ＲＦターム(参考） 2H088 EA47 JA05 MA20 2K002 AA07 AB04 BA06 DA01 HA02 5C065 AA03 CC07 DD20 GG13 GG30 5C066 AA01 BA13 BA17 CA06 CA17 GA01 KM02 KP05

Claims

【特許請求の範囲】

【請求項１】撮像素子に対する入射光の位置を半画素
分だけ光学的に変位させる画素ずらし手段と、上記画素
ずらし手段による変位前後の撮像素子の撮像画像を記憶
する画像記憶手段と、上記画像記憶手段に記憶されてい
る変位前後の撮像素子の撮像画像を構成する撮像色信号
のうち、参照色である撮像色信号が形成する三角形と補
間色である非撮像色信号が形成する三角形の相似比を考
慮して色補間を実施し、変位前後の撮像素子の撮像画像
を合成する補間・合成手段とを備えた撮像装置。
【請求項２】補間・合成手段は、撮像画素が存在しな
い位置の空白画素を色補間する場合、画像中のエッジに
あたる部分が空白画素を通過するか否かを判定し、その
空白画素を通過するときはエッジ線分の稜線方向に当該
空白画素を色補間することを特徴とする請求項１記載の
撮像装置。
【請求項３】撮像素子の撮像画像を圧縮して、その圧
縮画像を圧縮画像メモリに格納し、その圧縮画像を伸長
して画像記憶手段に出力する圧縮・伸長手段を設けたこ
とを特徴とする請求項１または請求項２記載の撮像装
置。
【請求項４】画像記憶手段に記憶されている変位前後
の撮像素子の撮像画像を構成する撮像色信号の信号レベ
ルを補正する信号レベル補正手段を設けたことを特徴と
する請求項１から請求項３のうちのいずれか１項記載の
撮像装置。
【請求項５】信号レベル補正手段は、変位前後の撮像
素子の撮像画像における所定領域の撮像色信号の平均信
号レベルを計算し、双方の平均信号レベルが一致するよ
うに撮像色信号の信号レベルを補正することを特徴とす
る請求項４記載の撮像装置。
【請求項６】画素ずらし手段は、入射光を撮像素子に
導く光路に配置された磁気光学素子に与える磁界の強度
を制御して、その撮像素子に対する入射光の位置を変位
させることを特徴とする請求項１から請求項５のうちの
いずれか１項記載の撮像装置。
【請求項７】撮像光学系と撮像素子の間に画素ずらし
手段を配置することを特徴とする請求項６記載の撮像装
置。
【請求項８】撮像光学系の前段に画素ずらし手段を配
置することを特徴とする請求項６記載の撮像装置。
【請求項９】画素ずらし手段は、入射光を撮像素子に
導く光路に配置された電気光学素子に与える電界の強度
を制御して、その撮像素子に対する入射光の位置を変位
させることを特徴とする請求項１から請求項５のうちの
いずれか１項記載の撮像装置。
【請求項１０】画素ずらし手段は、入射光を撮像素子
に導く光路に配置された液晶板に与える電圧の強度を制
御して、その撮像素子に対する入射光の位置を変位させ
ることを特徴とする請求項１から請求項５のうちのいず
れか１項記載の撮像装置。