JPH10126797A - 撮像装置 - Google Patents

撮像装置

Info

Publication number
JPH10126797A
JPH10126797A JP8271169A JP27116996A JPH10126797A JP H10126797 A JPH10126797 A JP H10126797A JP 8271169 A JP8271169 A JP 8271169A JP 27116996 A JP27116996 A JP 27116996A JP H10126797 A JPH10126797 A JP H10126797A
Authority
JP
Japan
Prior art keywords
light
image
transmitting
color
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8271169A
Other languages
English (en)
Other versions
JP3617887B2 (ja
Inventor
Eiji Yamada
栄二 山田
Toshiaki Harada
利明 原田
Tetsuo Iwaki
哲男 岩木
Toru Okuda
徹 奥田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP27116996A priority Critical patent/JP3617887B2/ja
Priority to US08/950,361 priority patent/US6577341B1/en
Priority to EP97117746A priority patent/EP0836330A3/en
Publication of JPH10126797A publication Critical patent/JPH10126797A/ja
Application granted granted Critical
Publication of JP3617887B2 publication Critical patent/JP3617887B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/665—Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H04N25/136—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements using complementary colours
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/48—Increasing resolution by shifting the sensor relative to the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00—Details of colour television systems
    • H04N2209/04—Picture signal generators
    • H04N2209/041—Picture signal generators using solid-state devices
    • H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
    • H04N2209/046—Colour interpolation to calculate the missing colour values

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

(57)【要約】 【課題】 手ぶれおよび被写体移動の高解像度画像への
影響を小さくする。 【解決手段】 被写体からの画像光は、光学系３３を通
過し、撮像素子３４の光入射側に備えられる色フィルタ
の透光領域Ｌを通過する。この透光領域Ｌは、画像光の
うち予め定める或る色彩光だけを通過させ、撮像素子３
４の対応する受光領域ＰＤに入射させる。撮像素子３４
は２画素混合読出し型の素子であり、２つの色彩光の受
光量に対応する混合データからなる原画像信号を出力す
る。通常モードでは、信号処理回路７４は単一の原画像
信号から単一の出力画像を生成する。高解像度モードで
は、画像光の結像位置を２カ所に平行移動させ、各結像
位置に画像光を結像させて、画像光を撮像する。回路７
４は、異なる結像位置で撮像された２つの原画像信号を
合成して、単一の出力画像信号を生成する。これによっ
て、単一の出力画像の等価撮像時間を短縮することがで
きる。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、単一の撮像素子を
用いて、カラー画像を得ることができる撮像装置に関す
る。
【０００２】
【従来の技術】従来から、単一の撮像素子を用いてカラ
ー画像を撮像する単板式の撮像装置が、動画像および静
止画像の撮像に用いられる。この撮像装置では、撮像素
子の受光領域の数と等しい画素数の画像を撮像すること
ができるが、撮像素子の受光領域の数が少ないと、画像
の解像度が低下する。画像の解像度を向上させるための
撮像装置に関する第１および第２の従来技術を以下に示
す。
【０００３】第１の従来技術の撮像装置は、特開平７−
９９６６４号公開公報に開示される。この撮像装置で
は、撮像素子の受光領域の光入射側に、予め定める３色
の色彩光だけを通過させる色フィルタを設置する。この
色フィルタでは、３色のうちのいずれか１つの色彩光を
通過させる透光領域だけが市松状に配列される。
【０００４】この撮像装置で出力画像を得るとき、撮像
装置は、まず撮像素子の空間サンプリング位置を、４フ
ィールドで元の位置に戻るように、画素のピッチの半分
の長さだけ水平および垂直方向Ｈ，Ｖに順次的に変位さ
せる。撮像素子は、空間サンプリング位置が移動される
度に画像光を撮像する。次いでこれらの４回分の撮像で
得られた画像を合成して、撮像素子の受光領域の数より
も多い画素から成る出力画像を生成する。
【０００５】また、第２の従来技術の電子スチルカメラ
は、特開平６−２２５３１７号公開公報に開示される。
図６８は、上述の電子スチルカメラ１の電気的構成を示
すブロック図である。電子スチルカメラ１は高画質画像
を撮像するための高精細モードを有する。高精細モード
では、４つの原画像信号から単一の出力画像信号を生成
して、撮像素子４の受光領域の数よりも多い画素から成
る出力画像を得る。
【０００６】高精細モード切換え時には、被写体からの
画像光は、光学系３で所望の状態に集光された後、後述
する色フィルタを通過して、撮像素子４の結像面に結像
される。結像面は二次元平面であり、複数の受光領域が
行列状に配列される。色フィルタは、この結像面の光入
射側に設置され、予め定める４色の色彩光だけを通過さ
せる。結像面における画像光の結像位置は、いわゆるイ
メージシフト動作によって、異なる第１〜第４結像位置
に順次的に移動される。
【０００７】図６９は、撮像素子４の色フィルタ１６の
透光領域１７の配列を示す図である。色フィルタは、撮
像素子４の受光領域と同数の透光領域１７を有する。透
光領域１７の配列は受光領域の配列と等価であり、水平
および垂直方向Ｈ，Ｖに沿って、それぞれ周期ＰＨ，Ｐ
Ｖで、行列状に配列される。
【０００８】各透光領域１７は４種類に区分され、黄
色、シアン、マゼンタ、緑の各色彩光のうちのいずれか
１つだけを通過させる。図６９において、実線で囲まれ
た矩形領域が各透光領域１７を示す。また矩形領域内に
描かれる記号「Ｙｅ」，「Ｃｙ」，「Ｍｇ」，「Ｇ」
は、その透光領域１７を通過可能な色彩光の色が、黄、
シアン、マゼンタ、および緑であることをそれぞれ示
す。各色彩光の透光領域１７の色配列は、２点鎖線２１
で囲む４行２列の８つの透光領域１７の配列を基本配列
パターンとする周期的な配列である。
【０００９】図７０は、上述の第１〜第４結像位置Ｑａ
〜Ｑｄの位置関係を示す図である。第１位置Ｑａを基準
とすると、第２位置Ｑｂは第１位置Ｑａから水平方向Ｈ
にシフト長さＰＨだけ移動した位置である。第３および
第４位置Ｑｃ，Ｑｄは、第１位置Ｑａから垂直方向Ｖの
同じ向きに、シフト長さＰＶ／２だけ、かつ水平方向Ｈ
で相反する向きにそれぞれシフト長さＰＨ／２だけ移動
した位置である。
【００１０】再び図６８を参照する。撮像素子４は、画
像光の結像位置が上述した４つの移動位置にそれぞれ移
動される度に、予め定める露光時間だけ、結像された画
像光を各受光領域で受光して画像光を撮像し、４つの原
画像信号を前処理回路５に出力する。この原画像信号
は、各受光領域において受光された光の受光量に対応す
る受光データから成る。前処理回路５では、撮像素子４
から与えられた原画像信号を増幅し、かつ所望の信号処
理を施す。処理が施された信号は、アナログ／デジタル
変換回路（図面では「Ａ／Ｄ変換回路」と略称する）６
においてデジタル信号に変換された後、画像メモリ７に
ストアされる。
【００１１】信号処理回路８は、まず得られた原画像信
号が表す原画像を、図７０に示す各結像位置Ｑａ〜Ｑｄ
のシフト方向とは逆向きに、同じシフト長さだけずらし
て重ね合わせて、合成する。次いで、この合成画像の受
光データに基づいて、単一の出力画像の輝度信号および
色差信号を生成する。生成された輝度信号および色差信
号は、記録媒体９に記録される。
【００１２】図７１は、上述の合成画像のうち、各原画
像の前述した基本配列パターンに対応する部分から成る
部分の画素配列を示す図である。この図において、実線
の矩形領域は、出力画像の輝度信号および色差信号の画
素単位の成分が直接得られる実画素を示す。破線の矩形
領域は、実画素の輝度信号および色差信号から輝度信号
および色差信号を補間して得る仮想画素を示す。また、
記号「Ｆａ」が記された実画素は、黄色およびシアンの
透光領域１７を通過した光を受光する受光領域からの受
光データだけが直接該当する。記号「Ｆｂ」が記された
実画素は、緑およびマゼンタの透光領域を通過した光を
受光する受光領域からの受光データだけが直接該当す
る。
【００１３】この合成画像では、黄色およびシアンの受
光データが該当する実画素と、緑およびマゼンタの受光
データが該当する実画素とが、２行おきに交互に配列さ
れる。実画素と仮想画素とは水平および垂直方向Ｈ，Ｖ
に隣接し、各画素がそれぞれ市松状に配列される。出力
画像の画素配列は、合成画像と等しく、水平および垂直
方向Ｈ，Ｖの画素の配列数がそれぞれ２倍に増加し、か
つ画素の配列周期が半分になる。
【００１４】また、図７２は、高解像度モードにおける
第１〜第４結像位置Ｑａ〜Ｑｄの位置関係の別の例を示
す図である。図７０と図７２とを比較すると、第１位置
Ｑａと第２位置Ｑｂとの位置関係は等しい。第３および
第４位置Ｑｃ，Ｑｄは、第１位置Ｑａから垂直方向Ｖの
同じ向きにシフト長さＰＶだけ、かつ水平方向Ｈの相反
する向きにシフト長さＰＨ／２だけずれる。
【００１５】図７３は、図７２の移動位置で撮像された
４つの原画像信号から生成される高高解像度モードの合
成画像の画素配列を示す図である。図面の各記号の意味
は、図７１と等しい。この合成画像では、黄色およびシ
アンの受光データが該当する実画素と、緑およびマゼン
タの受光データが該当する実画素とが、水平および垂直
方向Ｈ，Ｖに沿って交互に配列される。また、実画素だ
けで構成される行と、仮想画素だけで構成される行と
が、交互に配列される。この合成画像から得られる出力
画像の画素の数は、水平方向Ｈに関して通常モードの出
力画像の画素の数の２倍となり、画素１つ当たりの面積
が半分となる。
【００１６】
【発明が解決しようとする課題】上述した２種類の従来
技術の撮像装置および電子スチルカメラでは、画素配列
が２次元であって、色フィルタの透光領域を通過可能な
色彩光が３種類以上であることから、結像位置の異なる
４つの原画像信号に基づいて単一の出力画像信号を生成
する。これは、上述したように原画像信号を合成する
と、出力画像の各画素ごとに、４種類の透光領域を通過
した色彩光を受光する受光領域からの出力が対応するの
で、各画素ごとに輝度信号および色差信号を個別に生成
することができるようにするためである。
【００１７】このような条件を満たす４種類の原画像信
号を得るとき、イメージシフト動作は異なる２方向への
移動を含むので、結像位置の移動機構が複雑になる。複
雑な移動機構を有する装置は、部品点数が多いので製造
コストが増大する。さらに、１枚の出力画像のために４
枚分の原画像信号が必要なので、通常モードでの撮像だ
けを行う装置と比較すると、４倍の容量のメモリを必要
とし、製造コストをさらに増大させる。
【００１８】また、これらの装置の高解像度モードの画
像光の撮像は、４枚の原画像信号を得る間に、被写体が
静止し、かつ被写体と撮像装置との位置関係が移動しな
いことを前提条件としている。この前提条件が満たされ
るときは、原画像内の被写体の像に対して、４枚の原画
像のイメージシフト動作に基づくずれを相殺することに
よって、各原画像の該像を一致させて重ね合わせて該被
写体の像に対する画素数を増加させる。このとき、単一
の出力画像を得るための等価撮像時間は、４回分の画像
光の露光時間と、結像位置の移動のための３回分の遷移
時間との和の時間である。この等価撮像時間は、銀塩フ
ィルムのスチルカメラのいわゆるシャッタ速度と同じ意
味を持つ。
【００１９】この等価撮像時間内に被写体が動くまたは
該位置関係がずれると、４枚の原画像間で、被写体の像
がイメージシフト動作のシフトずれ量以上にずれる。こ
のとき、上述した合成処理だけでは被写体の像のずれを
相殺することができない。この結果、合成画像内の被写
体の像にぶれが生じて、合成画像の画質が劣化する。特
に、上述した２種類の撮像装置の高解像度モードでは、
その等価撮像時間が露光時間の４倍以上の極めて長い時
間となる。したがって手ぶれおよび被写体の動きの影響
を受け易くなり、出力画像の画質が劣化しやすい。
【００２０】上述した撮像装置でこの前提条件を満たす
撮像状態は、たとえば被写体を静物とし、撮像装置を三
脚に固定して使用する状態である。したがって、銀塩フ
ィルムのスチルカメラと比較して、使用条件が極めて限
定されてしまい、実際の撮像時に高解像度モードを使用
することが困難となっていた。
【００２１】本発明の目的は、単板式の撮像装置におい
て、被写体の動きおよび手ぶれなどに影響されることな
く、高解像度の出力画像を得ることができる撮像装置を
提供することである。
【００２２】
【課題を解決するための手段】本発明は、複数の色彩光
にそれぞれ対応し、入射される被写体からの画像光のう
ちの対応する色彩光だけを個別的に通過させる複数の透
光領域を有し、該透光領域が２次元平面上に予め定める
配列で配列される色分離フィルタと、画像光を撮像して
画像信号を出力する撮像素子であって、色分離フィルタ
の透光領域に個別的に対応した受光領域が、透光領域の
予め定める配列と同等の配列で２次元平面上に配列さ
れ、各受光領域では対応した透光領域を通過した色彩光
だけを受光し、各受光領域の受光量を示す画素データか
ら構成される画像信号を出力する撮像素子と、撮像素子
に入射される画像光の結像位置を、予め定める第１およ
び第２移動位置に相対的に移動させる移動手段と、移動
手段における結像位置の移動が行われるたびに、予め定
める露光時間だけ撮像素子における画像光の受光を許容
する露光許容手段と、撮像素子の出力に応答し、出力さ
れた２つの画像信号を撮像時の結像位置の離反量だけ位
置の移動方向とは逆方向にずらして重ね合わせて、合成
画像信号を生成する画像生成手段と、画像光の撮像が開
始されると、移動手段によって画像光の結像位置を第１
および第２移動位置のいずれか一方位置に移動させ、該
移動位置において露光許容手段に許容される間だけ撮像
素子に画像光を撮像させて画像信号を画像生成手段に与
え、次いで移動手段によって結像位置をいずれか他方位
置に移動させ、該移動位置において露光許容手段に許容
される間だけ撮像素子に画像光を撮像させて画像信号を
画像生成手段に与える制御手段とを含むことを特徴とす
る撮像装置である。
【００２３】本発明に従えば、撮像装置は、単一の撮像
素子でカラー画像を撮像する単板式の撮像装置である。
この撮像装置に入射された被写体からの画像光は、上述
の色分離フィルタ手段を通過した後に、撮像手段に入射
される。この色分離フィルタ手段を通過することによっ
て、画像光は複数の色彩光に色分離される。各色彩光の
スペクトルは、予め定める周波数帯域内に存在し、予め
定める１または複数の周波数を中心とした山形の波形を
示す。色分離フィルタ手段が分離する複数の色彩光の組
合わせは、たとえば、全ての色彩光を混合すると白色光
となるように選ばれる。このような色彩光の組合わせ
は、たとえば原色系の赤、青および緑、または補色系の
緑、黄、シアンおよびマゼンタである。この色分離フィ
ルタ手段を通過した画像光は、撮像素子の結像面に結像
される。上述した画像光は、透光領域の配列方向である
一方および他方方向に平行な空間軸上で連続的に輝度変
化する。撮像素子は、空間軸に平行に配列される複数の
受光領域でこの画像光の各色彩光成分を受光する。ゆえ
に、原画像は、連続的な画像光を受光領域単位で平滑化
した画像となる。これは、輝度が連続して変化する画像
光を受光領域単位でサンプリングしたことと等価であ
る。前述の色分離フィルタ手段と撮像素子とは、一体的
に形成されることが好ましい。撮像素子に関連して、露
光許容手段が備えられる。露光許容手段は、単一回の画
像光の撮像動作中に、予め定める露光時間だけ、撮像素
子の各受光領域に画像光を受光させる。上述の原画像信
号の画素データは、露光時間に各受光素子が受光した色
彩光の受光量を表す。撮像素子は、露光時間経過後に、
各受光領域からこの画素データを或る手法で出力させ
る。これによって、画像光が撮像される。原画像は、原
画像信号を仮想的に目視表示した画像である。移動手段
は、たとえば撮像素子の結像面の光入射側に設けられ
る。上述したように、入射された画像光の結像面での受
光位置を予め定める２カ所の移動位置に移動させる動作
を、２ポジションイメージシフト動作と称する。撮像素
子は、移動手段によって結像位置が移動される度に、上
述した手順で画像光を撮像して原画像信号を出力する。
これによって、撮像素子は、結像位置の異なる２つの原
画像信号を出力する。画像生成手段は、これら２つの原
画像信号から、上述の手法で合成画像を表す合成画像信
号を生成する。さらに画像生成手段は、合成画像の各画
素に対して、画素データから輝度信号および２種類の色
差信号を生成して、これら信号から成る出力画像信号を
生成する。さらにまた、この合成画像に基づいて、出力
画像信号の補間処理を行うこともある。
【００２４】上述したように、本発明の撮像装置は、２
ポジションイメージシフト動作を行って得た２つの原画
像信号から、単一の合成画像信号を生成する。このイメ
ージシフト動作を行う撮像装置の撮像動作時において、
手ぶれおよび被写体移動が合成画像の画質に与える影響
の度合の目安として、等価撮像時間が考えられる。等価
撮像時間は、単一の出力画像信号を得るための画像光の
撮像動作の動作時間であり、銀塩フィルムのスチルカメ
ラのいわゆるシャッタ速度と同じ意味を持つ。この等価
撮像時間が大きくなるほど、合成画像およびそれに基づ
く出力画像は、撮像動作時の手ぶれおよび被写体移動の
影響を受け易くなる。したがって、たとえば等価撮像時
間の増加にほぼ比例して、手ぶれおよび被写体移動に起
因する画像のぶれが大きくなる。本発明の撮像装置の等
価撮像時間は、２回分の露光時間と１回分の結像位置の
遷移時間との和の時間である。前述したように、従来技
術の撮像装置の等価撮像時間は、４回分の露光時間と３
回分の遷移時間との和の時間である。露光時間および遷
移時間が従来技術と本発明とで等しいとき、本発明の撮
像装置の等価撮像時間は、従来技術の撮像装置の等価撮
像時間と比較して、２回分の露光時間および遷移時間だ
け短い。一般的に、遷移時間は露光時間より長いので、
本発明の等価撮像時間は従来技術の等価撮像時間の半分
以下になる。したがって、従来技術の撮像装置と比較し
て、本発明の撮像装置は、手ぶれおよび被写体移動の影
響を受けにくく、合成画像の画質劣化が小さい。また、
従来技術の４ポジションイメージ動作では、基準の移動
位置から各移動位置への移動方向が２方向以上あったの
で、結像位置の移動手段は、結像位置の変位軸を２本以
上有する構造を有していた。一般的に、移動手段の構造
は、変位軸が増加するほど複雑になる。本発明の撮像装
置は２ポジションイメージシフト動作を行うので、結像
位置は、第１移動位置から第２移動位置への１方向だ
け、もしくはその逆の１方向へだけ移動する。これによ
って、移動手段は単一本の変位軸だけを備えれば良いの
で、移動手段の構造が簡略化される。これによって、移
動手段の制御が簡略化され、また移動手段の製造コスト
が低減する。さらに、イメージシフト手段を用いる撮像
装置は、撮像素子を時分割で使用して、複数の原画像信
号を得る。撮像素子自体は、複数の原画像信号をストア
する構成を持たないことが多いので、画像合成手段は、
初回の画像光撮像時から最終回の撮像時までの間、撮像
素子がストアできない分の原画像信号をストアするため
のメモリを有する。従来技術の４ポジションイメージシ
フト動作の撮像装置では、このメモリは、最低でも、最
終回の撮像時にその前の３つ原画像信号をストアしなけ
ればならない。本件の撮像装置は２ポジションイメージ
シフト動作を行うので、最終回の撮像時には、単一の原
画像信号だけをストアすればよい。したがって、備える
べきメモリの容量が減少される。これによって、メモリ
に関する製造コストが低減する。
【００２５】また本発明は、前記合成画像信号は、複数
の画素データから構成され、合成画像信号が表す合成画
像を目視表示する目視表示領域を有する表示手段であっ
て、目視表示領域は、合成画像信号の各画素データを目
視表示する複数の表示画素が、２次元平面上に、相互に
直交する予め定める主走査方向および副走査方向にそれ
ぞれ平行に、行列状に配列されて形成され、主走査方向
に沿う表示画素の配列数が、副走査方向に沿う表示画素
の配列数よりも多くなる表示手段をさらに有し、前記第
１および第２移動位置は、合成画像の主走査方向の空間
周波数のモアレを消すことができる方向に離反している
ことを特徴とする。
【００２６】本発明に従えば、撮像装置は上述の表示手
段を備える。この表示手段は、たとえば陰極線管で実現
される。たとえばＮＴＳＣ方式のテレビジョンの映像信
号を目視表示させる陰極線管は、蛍光面をアナログ信号
の電子線で主走査および副走査方向に沿って点順次走査
する。この陰極線管では、主走査方向の画素数はほぼ無
限大である。また、副走査方向の画素数は、いわゆる走
査線の本数と等価であるので有限であり、ＮＴＳＣ方式
であれば５１２個である。上述の撮像装置で合成画像の
解像度を向上させたいとき、合成画像を構成する画素数
を増加させる。このとき、合成画像信号を目視表示させ
る表示手段が、増加した画素を個別的に表示できる構造
でなければ、信号段階で解像度を向上させてもそれを表
示することができない。一般的な撮像素子は、主走査お
よび副走査方向にそれぞれ平行に有限個の受光領域が配
列されるが、副走査方向の画素数は、既に表示手段の該
方向の走査線数と一致していることが多い。したがっ
て、この撮像素子を用いた撮像装置で、２ポジションイ
メージシフト動作を行い画像の解像度を向上させると
き、少なくとも表示手段の目視表示領域において、表示
画素が増加可能な主走査方向の解像度を向上させること
が好ましい。主走査方向の画像の解像度を向上させる手
法としては、たとえば、画像信号の空間周波数平面上の
信号の基底帯域内に現れるモアレのうち、主走査方向に
平行な空間軸と対応した空間周波数軸上のモアレを消滅
させる手法が上げられる。この手法で解像度が向上する
理由を以下に示す。ある空間軸に平行な方向の画像の解
像度は、その空間軸と対応した空間周波数軸上の画像信
号の基底帯域の幅と比例して向上する。この画像信号に
色モアレが生じるとき、その色モアレを除去するため
に、たとえば撮像装置の光学系に光学的ローパスフィル
タを挿入して、画像光から色モアレの原因となる空間周
波数成分を減衰させる。この処理を行うと、画像から色
モアレ縞は除去されるが、基底帯域の幅が色モアレが発
生した空間周波数未満に制限される。この結果、画像信
号の実質の基底帯域の幅が狭くなり、画像の解像度が減
少する。主走査方向の空間周波数軸上のモアレを消滅さ
せると、そのモアレのために画像信号の基底帯域の幅を
制限する必要がなくなるので、元々の基底帯域の幅を保
つことができる。したがって、基底帯域の幅を広げたこ
とと同様の効果を得ることができ、画像の解像度を向上
させることができる。前述した第１および第２移動位置
は、合成画像信号生成時に上述したようなモアレの消滅
効果を得られるような位置関係を有するように選ばれ
る。
【００２７】主走査方向の空間周波数軸上の色モアレ
は、画像上では副走査方向に平行な縞模様に対する色モ
アレ縞として現れる。この色モアレは、該空間周波数軸
上で、その画像信号の輝度信号と色差信号とのサンプリ
ング周波数に差異があるために、輝度信号の所望信号成
分と色差信号の折返し成分とが干渉して生じる。輝度信
号のサンプリング周波数は、その画像信号が表す画像を
構成する全画素の配列周期に対応する。また色差信号の
サンプリング周波数は、該画像の全画素のうち、或る単
一の色彩光を受光する受光領域に対応する画素だけから
なる配列の配列周期に対応する。これら２つのサンプリ
ング周波数が一致するようにすると、色モアレは消滅す
る。単板方式の撮像装置で得られる原画像信号におい
て、色差信号対応の配列は、色分離フィルタ手段におけ
る或る色彩光対応の透光領域だけの配列と等価である。
また、該装置の合成画像信号では、色差信号対応の配列
は、仮想色分離フィルタ手段における或る色彩光対応の
透光領域だけの配列と等価である。この仮想色分離フィ
ルタは、第１および第２移動位置の離反方向および離反
量だけずらして、撮像装置の色分離フィルタを２つ重ね
合わせたフィルタとして仮想される。したがって、この
仮想色分離フィルタ手段における該配列が、仮想色分離
フィルタ手段の全透光領域の配列に近くなるほど、輝度
信号と色差信号のサンプリング周波数が類似して、色モ
アレが生じにくくなる。したがって、第１および第２移
動位置は、合成画像撮像時にこのような仮想色分離フィ
ルタ手段を仮想することができるように設定されること
が好ましい。
【００２８】また本発明は、前記色分離フィルタの透光
領域は、第１〜第４色彩光をそれぞれ通過させる第１〜
第４透光領域を含み、該透光領域の前記予め定める配列
は、相互に直交する一方および他方方向にそれぞれ平行
に、一方方向に予め定める第１周期でかつ他方方向に予
め定める第２周期で配列される行列状の配列であって、
第１および第４透光領域が一方方向に沿って隣接して交
互に直線状に配列される第１群と、第２および第３透光
領域が一方方向に沿って隣接して交互に直線状に配列さ
れる第２群とが、他方方向に沿って交互に隣接し、第２
透光領域には、他方方向に沿って両側に第１透光領域と
第４透光領域とがそれぞれ隣接し、第４透光領域には、
他方方向に沿って両側に第２透光領域が隣接しており、
前記撮像素子は、前記各受光領域からの画素データを、
他方方向に沿って隣接する２つの各受光領域毎に混合し
て、一括して出力し、前記第１移動位置は予め定める基
準位置であり、前記第２移動位置は第１移動位置から一
方方向に第１の周期の長さだけ相互にずれた位置である
ことを特徴とする。本発明に従えば、たとえば補色系の
４種類の色彩光を通過させる上述の色分離フィルタ手段
を有し、いわゆる２画素混合読出し型の撮像素子を用い
る撮像装置では、一方方向に平行な平行２ポジションイ
メージシフト動作を行って、合成画像信号を得ることが
好ましい。この合成画像信号は、原画像信号と比較し
て、基底帯域の形状は変化しないが、上述した色彩光対
応の画素配列の一方方向の配列周期が半分になる。これ
によって、原画像信号で一方方向に対応する空間周波数
軸上に表れるモアレが、合成画像信号ではすべて消滅す
る。したがって、光学的ローパスフィルタで画像光の一
方方向の空間周波数成分を制限する必要がなくなる。し
たがって、一方方向に関して画像信号の基底帯域の実質
の幅が拡大される。この一方方向を上述した表示手段の
主走査方向とすれば、表示手段に表示される合成画像の
モアレが減少して、画質が向上する。これによって、２
ポジションイメージシフト動作によって手ぶれおよび被
写体移動に起因する画質劣化を防止するだけでなく、モ
アレに起因する解像度の低下を解消して、さらに画質を
向上させることができる。
【００２９】また本発明は、前記色分離フィルタの複数
の透光領域は、第１〜第４色彩光をそれぞれ通過させる
第１〜第４透光領域に区分され、該透光領域の前記予め
定める配列は、相互に直交する予め定める一方方向およ
び他方方向にそれぞれ平行に、一方方向に予め定める第
１周期でかつ他方方向に予め定める第２周期で配列され
る行列状の配列であって、第１透光領域には、一方方向
に沿って両側に第４透光領域が隣接し、かつ他方方向に
沿った第１の向き側に第２透光領域が隣接し、さらに他
方方向に沿って第１の向きと反対の第２の向き側に第３
透光領域が隣接し、第４透光領域には、他方方向に沿っ
た第２の向き側に第２透光領域が隣接しており、前記撮
像素子は、前記各受光領域からの画素データを個別的に
出力し、前記第１移動位置は予め定める基準位置であ
り、前記第２移動位置は第１移動位置から一方方向に第
１の周期の長さだけ相互にずれた位置であることを特徴
とする。本発明に従えば、たとえば補色系の４種類の色
彩光を通過させる上述の色分離フィルタ手段を有し、い
わゆる全画素読出し型の撮像装置を用いる撮像装置で
は、一方方向に平行な平行２ポジションイメージシフト
動作を行って、合成画像信号を得ることが好ましい。こ
の合成画像信号は、原画像信号と比較して、基底帯域の
形状は変化しないが、上述した色彩光対応の画素配列の
一方方向の配列周期が半分になる。これによって、原画
像信号で一方方向に対応する空間周波数軸上に表れるモ
アレが、合成画像信号ではすべて消滅する。したがっ
て、光学的ローパスフィルタで画像光の周波数成分を制
限する必要がなく、基底帯域の実質の幅が拡大する。こ
の合成画像信号は、他方方向の空間周波数軸と基底帯域
の境界との交点にだけ、モアレの原因となる色差信号の
折返し成分の折返し周波数が残る。画像の表示に必要な
輝度および色差信号の所望信号成分は、空間周波数軸の
原点を中心として山形の振幅変化を示すので、基底帯域
境界近傍の振幅は小さい。この境界近傍の信号振幅が減
少しても、所望信号成分への影響は少ない。また、この
モアレを除去するように光学的ローパスフィルタを光学
系に挿入して基底帯域の幅を制限したとき、制限前の幅
と制限後の幅とはほとんど変わらない。したがって、他
方方向に関するモアレの影響が小さい。この一方および
他方方向のいずれか一方を上述した表示手段の主走査方
向とすれば、表示手段に表示される合成画像のモアレが
減少して、画質が向上する。これによって、２ポジショ
ンイメージシフト動作によって手ぶれおよび被写体移動
に起因する画質劣化を防止するだけでなく、モアレに起
因する解像度の低下を解消して、さらに画質を向上させ
ることができる。
【００３０】また本発明は、前記色分離フィルタの透光
領域は、第１〜第３色彩光をそれぞれ通過させる第１〜
第３透光領域に区分され、該透光領域の予め定める配列
は、相互に直交する予め定める一方方向および他方方向
にそれぞれ平行に、一方方向に予め定める第１周期でか
つ他方方向に予め定める第２周期で配列される行列状の
配列であって、第１透光領域には、一方方向に沿った第
１の向き側に第２透光領域が隣接し、かつ一方方向に沿
って第１の向きと反対側の第２の向き側に第３透光領域
が隣接し、さらに他方方向に沿って両側に第１透光領域
が隣接し、第２透光領域には、一方方向に沿った第１の
向き側に第３透光領域が隣接し、他方方向に沿って両側
に第２透光領域が隣接し、第３透光領域には、他方方向
に沿って両側に第３透光領域が隣接しており、前記撮像
素子は、前記各受光領域からの画素データを、他方方向
に沿って隣接する２つの各受光領域毎に混合して、一括
して出力し、前記第１移動位置は予め定める基準位置で
あり、前記第２移動位置は第１移動位置から一方方向に
第１の周期の長さの２分の３倍の長さだけ、かつ他方方
向に第２の周期の長さの半分の長さだけ相互にずれた位
置であることを特徴とする。本発明に従えば、たとえば
原色系の３種類の色彩光を通過させる上述の色分離フィ
ルタ手段を有し、いわゆる２画素混合読出し型の撮像装
置を用いる撮像装置では、上述した位置関係の第１およ
び第２移動位置への斜め２ポジションイメージシフト動
作を行って、合成画像信号を得ることが好ましい。この
合成画像信号は、原画像信号と比較して、一方および他
方方向の空間周波数軸上の基底帯域の幅が２倍に拡大さ
れる。また、一方方向に関して色差信号対応の画素配列
の配列周期が２倍となるので、原画像信号で一方方向の
空間周波数軸上に表れるモアレの原点からの距離が２倍
になる。これによって、光学的ローパスフィルタ挿入後
の合成画像信号の基底帯域の実質の幅は、原画像信号の
実質の幅と比較して、一方および他方方向の両方に関し
て２倍に拡大される。この一方方向を上述した表示手段
の主走査方向とすれば、モアレ除去後も解像度が２倍に
向上して、合成画像の画質が向上する。これによって、
２ポジションイメージシフト動作によって手ぶれおよび
被写体移動に起因する画質劣化を防止するだけでなく、
モアレに起因する解像度の低下を解消して、さらに画質
を向上させることができる。
【００３１】また本発明は、前記色分離フィルタの透光
領域は、第１〜第３色彩光をそれぞれ通過させる第１〜
第３透光領域に区分され、該透光領域の予め定める配列
は、相互に直交する予め定める一方方向および他方方向
にそれぞれ平行に、一方方向に予め定める第１周期でか
つ他方方向に予め定める第２周期で配列される行列状の
配列であって、第１透光領域には、一方方向に沿った第
１の向き側に第２透光領域が隣接し、かつ一方方向に沿
って第１の向きと反対側の第２の向き側に第３透光領域
が隣接し、さらに他方方向に沿って両側に第１透光領域
が隣接し、第２透光領域には、一方方向に沿った第１の
向き側に第３透光領域が隣接し、他方方向に沿って両側
に第２透光領域が隣接し、第３透光領域には、他方方向
に沿って両側に第３透光領域が隣接しており、前記画像
信号は、前記各受光領域からの画素データを個別的に出
力し、前記第１移動位置は予め定める基準位置であり、
前記第２移動位置は第１移動位置から一方方向に第１の
周期長さの２分の３倍の長さだけ、かつ他方方向に第２
周期の長さの半分の長さだけ相互にずれた位置であるこ
とを特徴とする。本発明に従えば、たとえば原色系の３
種類の色彩光を通過させる上述の色分離フィルタ手段を
有し、いわゆる全画素読出し型の撮像素子を用いる撮像
装置では、上述した位置関係の第１および第２移動位置
への斜め２ポジションイメージシフト動作を行って、合
成画像信号を得ることが好ましい。この合成画像信号
は、原画像信号と比較して、一方および他方方向の空間
周波数軸上の基底帯域の幅が２倍に拡大される。また、
一方方向に関して色差信号対応の画素配列の配列周期が
２倍となるので、原画像信号で一方方向の空間周波数軸
上に表れるモアレの位置が原点から２倍に遠ざかる。こ
れによって、光学的ローパスフィルタ挿入後の合成画像
信号の実質的な基底帯域の幅は、原画像信号の実質的な
幅と比較して、一方および他方方向の両方に関して２倍
に拡大される。さらに、全画素読出し型の撮像素子を用
いているので、２画素混合読出し型の撮像素子を用いた
ときに生じる第２周期の長さの半分の長さの逆数の空間
周波数の空間周波数成分の減衰が生じない。したがっ
て、一方および他方方向のいずれか一方向を上述した表
示手段の主走査方向とすれば、モアレ除去後も解像度が
２倍に向上して、合成画像の画質が向上する。これによ
って、２ポジションイメージシフト動作によって手ぶれ
および被写体移動に起因する画質劣化を防止するだけで
なく、モアレに起因する解像度の低下を解消して、さら
に画質を向上させることができる。
【００３２】また本発明は、前記色分離フィルタの複数
の透光領域は、第１〜第３色彩光をそれぞれ通過させる
第１〜第３透光領域に区分され、該透光領域の前記予め
定める配列は、予め定める一方方向に平行に第１周期で
直線状に配列された群が、一方方向と直交する他方方向
に沿って第２周期で配列され、かつ他方方向に隣接する
２つの群の各透光領域が一方方向に第１周期の半分の長
さだけずれる配列であって、第１透光領域には、一方方
向に沿った第１の向き側に第２透光領域が隣接し、かつ
一方方向に沿って第１の向きと反対側の第２の向き側に
第３透光領域が隣接し、第２透光領域には、一方方向に
沿った第１の向き側に第３透光領域が隣接し、さらに一
方方向に第１周期の半分だけかつ他方方向に第２周期の
長さだけずれた第３の向き側に、第１透光領域が隣接し
ており、前記撮像素子は、前記各受光領域からの画素デ
ータを個別的に出力し、前記第１移動位置は予め定める
基準位置であり、前記第２移動位置は第１移動位置から
他方方向に第２の周期の長さだけ相互にずれた位置であ
ることを特徴とする。本発明に従えば、たとえば原色系
の３種類の色彩光を通過させる上述の色分離フィルタ手
段を有し、いわゆる全画素読出し型の撮像素子を用いる
撮像装置では、一方方向に垂直な垂直２ポジションイメ
ージシフト動作を行って、合成画像信号を得ることが好
ましい。この合成画像信号は、原画像信号と比較して、
斜め方向の空間周波数軸上の基底帯域の幅が２倍に拡大
される。この斜め方向は、空間周波数軸の原点から、一
方方向に平行で第１周期の長さだけ、かつ他方方向に平
行で第２周期の半分の長さだけずれた点に至るベクトル
で定義される。これによって、光学的ローパスフィルタ
挿入後の合成画像信号の基底帯域の実質の幅が斜め方向
に関して拡大される。したがって、一方および他方方向
のいずれか一方向を上述した表示手段の主走査方向とす
れば、モアレ除去後も解像度が向上して、合成画像の画
質が向上する。これによって、２ポジションイメージシ
フト動作によって手ぶれおよび被写体移動に起因する画
質劣化を防止するだけでなく、モアレに起因する解像度
の低下を解消して、さらに画質を向上させることができ
る。
【００３３】また本発明は、前記色分離フィルタの複数
の透光領域は、第１〜第３色彩光にそれぞれ対応する第
１〜第３透光領域に区分され、該透光領域の予め定める
配列は相互に直交する予め定める一方方向および他方方
向にそれぞれ平行に、一方方向に予め定める第１周期で
かつ他方方向に予め定める第２周期で配列される行列状
の配列であって、第１および第２透光領域が一方方向に
沿って交互に配列される直線状の第１群と、第１および
第３透光領域が一方方向に沿って交互に配列される直線
状の第２群とが、他方方向に沿って交互に隣接し、かつ
第１群の第１透光領域には、第３透光領域が他方方向の
両側に隣接しており、前記撮像素子は、前記各受光領域
からの画素データを個別的に出力し、前記第１移動位置
は予め定める基準位置であり、前記第２移動位置は第１
移動位置から一方方向に第１の周期の長さだけ相互にず
れた位置であることを特徴とする。本発明に従えば、た
とえば原色系の３種類の色彩光を通過させる上述の色分
離フィルタ手段を有し、いわゆる全画素読出し型の撮像
装置を用いる撮像装置では、一方方向に平行な２ポジシ
ョンイメージシフト動作を行って、合成画像信号を得る
ことが好ましい。この合成画像信号は、原画像信号と比
較して、基底帯域の形状は変化しないが、上述した色彩
光対応の画素配列の一方方向の配列周期が半分になる。
これによって、原画像信号で一方方向に対応する空間周
波数軸上に表れるモアレが、合成画像信号ではすべて消
滅する。したがって、光学的ローパスフィルタで画像光
の周波数成分を制限する必要がなく、基底帯域の実質の
幅が拡大する。さらに、この合成画像信号は、他方方向
の空間周波数軸と基底帯域の境界との交点にだけ、モア
レの原因となる色差信号の折返し成分の折返し周波数が
残る。このモアレを除去するように基底帯域の幅を制限
したとき、制限前の幅と制限後の幅とはほとんど変わら
ないので、他方方向に関するモアレの影響が小さいとみ
なせる。この一方および他方方向のいずれか一方を上述
した表示手段の主走査方向とすれば、表示手段に表示さ
れる合成画像のモアレが減少して、画質が向上する。こ
れによって、２ポジションイメージシフト動作によって
手ぶれおよび被写体移動に起因する画質劣化を防止する
だけでなく、モアレに起因する解像度の低下を解消し
て、さらに画質を向上させることができる。
【００３４】また本発明は、前記色分離フィルタの複数
の透光領域は、第１〜第３色彩光にそれぞれ対応する第
１〜第３透光領域に区分され、該透光領域の予め定める
配列は、第１および第２透光領域が予め定める一方方向
に沿って予め定める第１周期で直線状に配列された第１
群と、第１および第３透光領域が一方方向に沿って第１
周期で直線状に配列された第２群とが、一方方向と直交
する他方方向に沿って予め定める第２周期で交互に配列
され、かつ第１群の第１透光領域には、一方方向に第１
周期の長さの半分の長さだけかつ他方方向に第２周期の
長さだけずれた向き側に、第３透光領域が隣接する配列
であって、前記撮像素子は、前記各受光領域からの画素
データを個別的に出力し、前記第１移動位置は予め定め
る基準位置であり、前記第２移動位置は第１移動位置か
ら一方方向に第１の周期の長さだけ相互にずれた位置で
あることを特徴とする。本発明に従えば、たとえば原色
系の３種類の色彩光を通過させる上述の色分離フィルタ
手段を有し、いわゆる全画素読出し型の撮像装置を用い
る撮像装置では、一方方向に平行な平行２ポジションイ
メージシフト動作を行って、合成画像信号を得ることが
好ましい。この合成画像信号は、原画像信号と比較し
て、基底帯域の形状は変化しないが、上述した色彩光対
応の画素配列の一方方向の配列周期が半分になる。これ
によって、原画像信号で一方方向に対応する空間周波数
軸上に表れるモアレの位置の原点からの距離が２倍に拡
大され、モアレの位置が基底帯域の境界と該空間周波数
軸との交点上に移動する。したがって、光学的ローパス
フィルタ挿入後の基底帯域の実質の幅が拡大する。さら
に、この合成画像信号は、他方方向の空間周波数軸と基
底帯域の境界との交点にだけ、モアレの原因となる色差
信号の折返し成分の折返し周波数が残る。このモアレを
除去するように基底帯域の幅を制限したとき、制限前の
幅と制限後の幅とはほとんど変わらないので、他方方向
に関するモアレの影響が小さいとみなせる。この一方お
よび他方方向のいずれか一方を上述した表示手段の主走
査方向とすれば、表示手段に表示される合成画像のモア
レが減少して、画質が向上する。これによって、２ポジ
ションイメージシフト動作によって手ぶれおよび被写体
移動に起因する画質劣化を防止するだけでなく、モアレ
に起因する解像度の低下を解消して、さらに画質を向上
させることができる。
【００３５】また本発明は、前記露光許容手段は、前記
撮像素子の受光領域における電荷の蓄積を許容または禁
止する第１許容手段と、撮像素子に入射する画像光を通
過または遮断する第２許容手段とを含み、前記制御手段
は、前記第１および第２移動位置の前記いずれか一方位
置における画像光の撮像時には、第２許容手段によって
画像光を通過させ、かつ前記露光時間の間だけ第１許容
手段によって電荷の蓄積を許容させ、前記いずれか他方
位置における撮像時には、第１許容手段によって受光領
域に電荷の蓄積を許容し、かつ露光時間の間だけ第２許
容手段によって画像光を通過させることを特徴とする。
本発明に従えば、前述した撮像素子は、いわゆる２次元
ＣＣＤイメージセンサで実現される。このセンサでは、
予め素子に設定された光電変換時間内に色彩光が受光領
域に入射すると、その色彩光を光電変換し、得られた電
荷を蓄積する。光電変換時間内に蓄積された電荷は、該
時間経過後に、画素データとして転送用電荷結合素子
（ＣＣＤ）を介して素子外部に出力される。光電変換時
間終了時から、全ての受光領域からの画素データが外部
に出力されるまでの時間を転送時間と称する。この転送
時間は、一般的に、前述した露光時間と遷移時間との和
の時間よりも長い。このような撮像素子には、露光制御
手段の第１許容手段として、オーバフロードレインを利
用した電子シャッタが含まれる。この電子シャッタは、
オーバフロードレインを開放して受光素子の電荷保持を
禁止させることによって成立する。このような第１許容
手段を前記いずれか一方位置での１回目の画像光の撮像
時に用いると、１回目の撮像時の露光時間を、撮像素子
本来の光電変換時間よりも短縮させることができる。こ
の電子シャッタは、転送用電荷結合素子に他の画素デー
タの電荷が含まれるときには使用できない。ゆえに、電
子シャッタだけで露光時間を制御させるとき、１回目の
露光終了時から２回目の露光開始までの時間は、転送時
間に律速する。したがって、このとき、等価撮像時間は
２回分の露光時間と転送時間の和となる。撮像装置は、
撮像素子の光入射側に、露光制御手段の第２許容手段と
して、たとえば機械的なシャッタ手段を有する。前記い
ずれか他方位置での２回目の画像光の撮像時には、電子
シャッタの代わりにこの第２許容手段で撮像素子に入射
する画像光自体を直接通過または遮断し、露光時間を制
御する。このように露光時間を制御させると、転送用電
荷結合素子が１回目の原画像信号を転送している間で
も、並行して受光領域で２回目の露光を行わせることが
できる。このときの等価撮像時間は、２回分の露光時間
と遷移時間の和の時間となるので、電子シャッタだけで
露光時間を制御させるときよりも、等価撮像時間を短縮
することができる。したがって、手ぶれおよび被写体移
動に起因する合成画像の画質劣化をさらに防止すること
ができる。
【００３６】また本発明は、前記画像光を集光して、撮
像素子の各受光領域上に結像させる光学系をさらに含
み、前記移動手段は、透光性を有する平板状の屈折板
と、屈折板の両側方に、その表面が屈折板の表面にほぼ
平行になるように配設される一対のバイモルフ型圧電素
子であって、該素子の長手方向の一方の自由端が屈折板
の一端に接合され、屈折板の他端が該素子の他方の固定
端に向かって延びるように屈折板を支持し、屈折板内を
通る仮想回転中心を中心として該屈折板を傾斜させる１
対のバイモルフ型圧電素子と、光学系の光軸線と屈折板
の法線との成す傾斜角度を検出する検出手段と、検出手
段の出力と予め定める目標値とを比較し、その誤差量を
出力する比較手段と、比較手段の出力に応答し、屈折板
の傾斜角度が予め定める目標値となるように、一対のバ
イモルフ型圧電素子を駆動する駆動手段とを備えること
を特徴とする。本発明に従えば、前記移動手段は、上述
した構造を有する。この移動手段は、構成要素が少な
く、さらに傾斜板を含む各構成部材の小型化が容易であ
る。したがって、移動手段全体の構造を簡略化しかつ小
型化することができる。また、この移動手段は、いわゆ
るフィードバック制御手法によって制御されるので、光
軸を所望量だけ平行移動させて、確実に結像位置を変位
させることができる。
【００３７】また本発明は、前記画像光を集光して、撮
像素子の各受光領域上に結像させる光学系をさらに含
み、前記移動手段は、透光性を有し、相互に直交する仮
想回転中心を有する平板状の１対の透明平板と、各仮想
回転中心を中心として、該透明平板を傾斜させる傾斜手
段と、透明平板間に介在され、変形可能であって空気の
屈折率よりも大きい屈折率を有する屈折物質層と、光学
系の光軸線と各透明平板の法線との成す傾斜角度をそれ
ぞれ検出する検出手段と、検出手段の出力と予め定める
目標角度とを比較し、その誤差量を出力する比較手段
と、比較手段の出力に応答し、傾斜角度が予め定める目
標角度となるように、一傾斜手段を駆動する駆動手段と
を備えることを特徴とする。本発明に従えば、前記移動
手段は、いわゆる可変頂角プリズムで実現される。この
可変頂角度プリズムは、ビデオカメラの光学式手ぶれ補
正装置に用いられるので、イメージシフトの移動手段と
該装置のプリズムとを兼用させることができる。したが
って、手ぶれ補正装置をこの撮像装置に組込むとき、装
置の部品点数を減少させることができる。
【００３８】また本発明は、移動手段における結像位置
の移動を許容または禁止する移動判定手段と、撮像素子
に入射される画像光の空間周波数成分を減衰させる可変
空間フィルタであって、結像位置の移動が禁止されると
きには空間周波数成分を第１の減衰量だけ減衰させ、許
容されるときには第２の減衰量だけ減衰させる可変空間
フィルタとをさらに含むことを特徴とする。本発明に従
えば、撮像装置は、２つのモードを有し、２種類の解像
度の画像信号を出力する。一方のモードでは原画像信号
をそのまま出力し、他方のモードでは原画像信号から合
成画像信号を生成して出力する。この２つの画像信号
は、上述したように、モアレの数および位置が異なる。
したがって、光学系に介在される光学的ローパスフィル
タの減衰量を原画像信号に合わせると、解像度を向上さ
せた筈の合成画像信号の基底帯域が過剰に制限されて、
制限後の合成画像の解像度は制限前の合成画像の解像度
よりも劣化する。逆に、減衰量を合成画像信号に合わせ
ると、原画像信号の基底帯域の制限が不十分となって、
原画像にモアレが表れる。この撮像装置において、上述
したように、結像位置の移動を許容または禁止して２つ
のモードを切換えると共に、光学的ローパスフィルタで
ある空間フィルタの減衰量を変化させると、原画像およ
び合成画像の両方の画質を充分に保つことができる。
【００３９】
【発明の実施の形態】図１は、本発明の第１実施形態で
ある撮像装置３１の構成を示すブロック図である。この
撮像装置３１は、いわゆる単板式のカラー撮像装置であ
る。
【００４０】撮像装置３１は、通常モードと高解像度モ
ードとの２つの撮像モードを有する。通常モードでは、
後述する撮像素子３４の受光領域ＰＤの数と同数の画素
Ｄから成る第１出力画像を得る。高解像度モードでは、
いわゆるイメージシフト動作を行い、撮像素子３４の受
光領域ＰＤの数以上の数の画素Ｄから成る第２出力画像
を得る。第２出力画像を表す第２出力画像信号は、撮像
素子３４で撮像される２つの原画像信号を合成して得ら
れる。
【００４１】被写体からの画像光は、光学系３３の集光
レンズで集光された後、後述する色フィルタを通過し
て、撮像素子３４の結像面上に結像される。撮像素子３
４の結像面には、複数の受光領域ＰＤが後述する予め定
める配列で並べられる。
【００４２】光学系３３には、画像光を集光する集光レ
ンズの他に、イメージシフト機構、および可変空間フィ
ルタが含まれる。イメージシフト機構は、高解像度モー
ド選択時に、予め定める時間毎に、結像面上の画像光の
結像位置を第１および第２結像位置にそれぞれシフト移
動させる。この動作をイメージシフト動作と称する。可
変空間フィルタはいわゆる光学的ローパスフィルタであ
り、各モードに応じた減衰量で、画像光の空間周波数成
分を制限する。イメージシフト機構および可変空間フィ
ルタの詳細な説明は後述する。
【００４３】色フィルタは、各受光領域ＰＤに個別的に
対応して予め定める色彩光だけを通過させる透光領域Ｌ
を、受光領域ＰＤと同数だけ有する。この透光領域Ｌ
は、受光領域ＰＤの配列と等しい配列で、２次元平面上
に並べられる。色フィルタは、撮像素子３４の光入射側
に設置され、各受光領域ＰＤに入射するべき画像光のう
ち、予め定める色彩光だけを通過させる。予め定める色
彩光は単一の色フィルタで複数準備され、各透光領域Ｌ
はそれぞれ異なる色彩光に対応する。各透光領域Ｌは、
個別的に画像光を色分解して、その透光領域Ｌに対応し
た色彩光だけを通過させる。各透光領域Ｌを通過した各
色彩光は、各透光領域Ｌと対応する受光領域ＰＤにそれ
ぞれ受光される。この色フィルタは、たとえば撮像素子
３４と一体的に形成される。
【００４４】撮像素子３４は、予め定める露光時間だ
け、各受光領域ＰＤに画像光の色彩光を受光させること
によって、画像光を撮像する。露光時間が経過すると、
撮像素子３４は、予め定める時間毎に、各受光領域ＰＤ
からの受光データを第１または第２原画像信号として、
前処理回路３５に導出する。第１および第２原画像信号
は、それぞれ画像光が第１および第２結像位置に結像さ
れたときに、画像光を撮像して得られる画像信号であ
る。各原画像信号は、各受光領域ＰＤでの色彩光の受光
量に対応する受光データからそれぞれ構成される。素子
３４から出力された段階では、各受光データは受光量に
対応するレベルのアナログ電気信号である。
【００４５】前処理回路３５では、撮像素子３４から出
力された各原画像信号を増幅した後、該信号に予め定め
る処理を施す。予め定める処理は、たとえばホワイトバ
ランス補正およびγ補正である。陰極線管（ブラウン
管）の電気−光変換特性は、非直線性を持っている。こ
のため、撮像装置の受光量と陰極線管の発光強度とが比
例するように、受光量に対応する受光データを補正す
る。この補正をγ補正と称する。前処理回路３５におい
て処理された原画像信号は、アナログ／デジタル変換回
路（以後、図面では「Ａ／Ｄ変換回路」と略称する）３
６でデジタル信号に変換された後、画像メモリ３７にス
トアされる。
【００４６】前述した通常モードおよび高解像度モード
は、たとえば撮像装置３１に備えられる操作ボタンを撮
像装置３１の使用者が操作することによって、選択され
る。モード切換え回路３９は、使用者の選択に応じて、
選択されたモードに対応する出力を、同期信号発生回路
４０に与える。
【００４７】同期信号発生回路４０は、通常モードが選
択されるとき、単一の原画像信号の撮像動作に対応する
同期信号を発生させる。発生された同期信号は、駆動回
路４１およびメモリ制御回路４２に与えられる。駆動回
路４１は、まず、光学系３３のイメージシフト機構を予
め定める第１状態に固定することによって、画像光の結
像位置を予め定める第１結像位置に固定する。次いで、
同期信号に応答し、予め定める時間毎に、撮像素子３４
の各受光領域ＰＤから受光データを前処理回路３５に出
力させる。同時に、メモリ制御回路４２は、同期信号に
応答し、与えられる受光データを単一の原画像信号毎に
関連させて、画像メモリ３７にストアさせる。
【００４８】また、高解像度モードが選択されるとき、
同期信号発生回路４０は、２つの原画像信号の撮像動作
に対応する同期信号を発生させ、駆動回路４１およびメ
モリ制御回路４２に与える。駆動回路４１は、光学系３
３内のイメージシフト機構を用いて、後述するイメージ
シフト動作を行う。これによって、素子３４では、各受
光領域ＰＤが受光する色彩光が、被写体の像の中で移動
前の色彩光とずれる。メモリ制御回路７２は、受光デー
タを結像位置の異なる２つの原画像信号ごとに関連させ
て、画像メモリ３７にストアさせる。
【００４９】画像メモリ３７にストアされた原画像信号
は、該原画像信号の画像光の撮像時のモードに応じて、
信号処理回路４４に与えられる。信号処理回路４４は、
撮像時に選択されたモードに基づいて、単一または２つ
の原画像信号から出力画像信号の輝度信号および色差信
号を演算し、さらに補間する。演算および補間された輝
度信号および色差信号は、出力画像の出力画像信号とし
て記録媒体４５にストアされる。
【００５０】図２は、撮像素子３４の結像面の具体的な
構成を示す平面図である。撮像素子３４は、いわゆる２
画素混合読出し型の撮像素子である。撮像素子３４の結
像面には、Ｎ×Ｍ個の受光領域ＰＤが、水平および垂直
方向Ｈ，Ｖに沿って、配列周期ＰＨ，ＰＶで行列状に配
列される。水平および垂直方向Ｈ，Ｖは、相互に直交す
る。
【００５１】この撮像素子３４において、画像光に対す
る水平および垂直方向Ｈ，Ｖのサンプリング周波数ｆ
Ｈ，ｆＶは、水平および垂直方向Ｈ，Ｖの配列周期の逆
数であり、以下の式で示される。
【００５２】 ｆＨ ＝ １／ＰＨ …（１） ｆＶ ＝ １／ＰＶ …（２） また、この結像面上に斜め方向Ｕｘ，Ｕｙを考える。斜
め方向Ｕｘ，Ｕｙは、水平および垂直方向Ｈ，Ｖにそれ
ぞれ平行で、大きさがそれぞれ配列周期ＰＨ，ＰＶであ
る２つの基本ベクトルで規定される空間軸である。
【００５３】斜め方向Ｕｘ，Ｕｙの配列周期ＰＵｘ，Ｐ
Ｕｙは、以下の式で示される。
【００５４】 ＰＵｘ ＝ ＰＵｙ ＝ √（ＰＨ2 ＋ＰＶ2 ）／２ …（３） 斜め方向Ｕｘ，Ｕｙの画像光のサンプリング周波数ｆｕ
ｘ，ｆｕｙは、それぞれ上式の配列周期ＰＵｘ，ＰＵｙ
の逆数である。
【００５５】 ｆｕｘ ＝ ｆｕｙ ＝ ２／｛√（ＰＨ2 ＋ＰＶ2 ）｝ …（４） 以後、斜め方向Ｕｘ，Ｕｙ、その配列周期ＰＵｘ，ＰＵ
ｙおよびそのサンプリング周波数をｆｕｘ，ｆｕｙを、
それぞれ「斜め方向Ｕ」、「配列周期ＰＵ」および「周
波数ｆｕ」と総称する。
【００５６】さらに、以後、水平方向Ｈに沿って直線状
に並べられる１群の構成要素を「行」と称する。同様に
垂直方向Ｖに沿って直線状に並べられた１群の構成要素
を「列」と称する。行列状に配列された１群の構成要素
において、紙面上側から下側に向かって、各行を第１
行，第２行，…，第Ｎ行とする。また紙面左側から右側
に向かって各列を第１列，第２列，…，第Ｍ列とする。
これら構成要素のうち、第ｎ行第ｍ列に属する単一の構
成要素を表すとき、その構成要素を総称して示す参照符
号と共に、さらに符号（ｎ，ｍ）を付して示す。ｎ，ｍ
は１以上Ｎ，Ｍ以下の任意の整数である。
【００５７】また、配列周期ＰＨ，ＰＶ，ＰＵの１周期
分の長さを基準として、そのｎ倍およびｎ分の１の長さ
を単位とする要素には、各配列周期の符号の前後に、さ
らに符号「ｎ」，「／ｎ」を付して示す。また、後述す
るサンプリング周波数ｆＨ，ｆＶ、ｆＵを基準として、
そのｎ倍およびｎ分の１の空間周波数にも、同様に、各
空間周波数の符号の前後に、符号「ｎ」，「／ｎ」を付
して示す。
【００５８】図２では、受光領域ＰＤの配列パターンを
８行４列の３２個の受光領域ＰＤ（１，１）〜ＰＤ
（８，４）で代表させて表す。実際の撮像素子３４の結
像面では、図２に示す構造が、水平および垂直方向Ｈ，
Ｖに周期的に繰返される。
【００５９】各受光領域ＰＤは、予め定める露光時間内
に色彩光を受光すると、その色彩光を光電変換して電荷
を得て、その電荷を蓄積する。露光時間経過後に、その
蓄積された電荷を受光データとして、前処理回路３５に
出力する。このとき撮像素子３４は２画素混合読出し型
の撮像素子であるので、垂直方向Ｖに隣接する２つの受
光領域ＰＤからの受光データを混合して混合データを作
成し、その混合データを出力する。
【００６０】受光領域ＰＤの各列の間に、垂直転送ＣＣ
Ｄ(Charge Coupled Device；電荷結合素子）群５１ａ〜
５１ｄが介在される。垂直転送ＣＣＤ群５１ａ〜５１ｄ
は、受光領域ＰＤの第１列〜第４列にそれぞれ隣接して
配列され、隣接する列の受光領域ＰＤの数の半分の数の
電荷結合素子Ｃａ〜Ｃｄを含む。たとえば垂直転送ＣＣ
Ｄ群５１ａには、電荷結像素子Ｃａ（１）〜Ｃａ（４）
が含まれる。これら電荷結像素子Ｃａ〜Ｃｄは、垂直方
向Ｖに直線状に配列され、各群５１ａ〜５１ｄ毎に、順
次的に電気的に接続される。実際の撮像素子では、この
垂直転送ＣＣＤ群５１は、受光領域ＰＤの列の数と等し
い数だけ存在する。
【００６１】受光領域ＰＤの各列の一方端部側には、水
平転送ＣＣＤ群５２が設けられる。水平転送ＣＣＤ群５
２は、受光領域ＰＤの列の数と等しい数の電荷結合素子
Ｃｅ（１）〜Ｃｅ（４）と、出力部５３とを含んで構成
される。これら電荷結像素子Ｃｅ（１）〜Ｃｅ（４）
は、水平方向Ｈに直線状に配列され、かつ順次的に電気
的に接続される。各電荷結像素子Ｃｅ（１）〜Ｃｅ
（４）は、各垂直転送ＣＣＤ群５１ａ〜５１ｄの一方端
部の電荷結合素子Ｃａ（１），Ｃｂ（１），Ｃｃ
（１），Ｃｄ（１）とそれぞれ電気的に接続される。出
力部５３は、水平方向Ｈに平行な他方向きＨｂ側の端部
の素子Ｃｅ（１）と電気的に接続される。これら水平お
よび垂直ＣＣＤ群５１ａ〜５１ｄ，５２は、各受光領域
ＰＤからの受光データを撮像素子３４外部に転送するた
めに用いられる。
【００６２】撮像素子３４は２画素混合読出し型の素子
であるので、単一回の画像光の撮像において、各受光領
域ＰＤの画像光の露光動作を２回行い、各受光動作終了
後に、各受光領域ＰＤから受光データを隣接する電荷結
合素子Ｃａ〜Ｃｄに転送させるための走査動作をそれぞ
れ行う。この撮像時の原画像信号は、２回の走査結果を
合わせて生成される。以後、単一回の画像光の撮像時の
１回目ならびに２回目の撮像動作を、それぞれ奇数およ
び偶数フィールドの撮像動作と称する。
【００６３】各フィールドの撮像動作を以下に説明す
る。
【００６４】各フィールドの撮像動作では、撮像素子３
４は、まず予め定める露光時間だけ、各受光領域ＰＤに
光電変換で得られる電荷の蓄積を許容する。この電荷蓄
積の許容および禁止は、オーバフロードレインの閉鎖お
よび開放によって切換えられる。撮像素子３４は、この
オーバフロードレインを用いたいわゆる電子シャッタに
よって、露光時間だけ、各受光領域ＰＤに画像光の露光
動作を行わせる。
【００６５】前述した撮像素子３４の受光領域ＰＤは、
たとえばシリコン基板上に形成されるフォトダイオード
で実現される。オーバフロードレインは、この受光領域
ＰＤとシリコン基板の間に設けられる。オーバフロード
レインが開放されるとき、受光領域ＰＤの電荷は全てシ
リコン基板に掃捨てられる。これによって、受光領域Ｐ
Ｄの電荷蓄積が禁止される。これは、受光領域ＰＤへの
色彩光を遮断したことと等価であり、このとき電子シャ
ッタは閉鎖されたと見なされる。オーバフロードレイン
が閉鎖されるとき、受光領域ＰＤの電荷がシリコン基板
に掃き捨てられなくなるので、光電変換の電荷が受光領
域ＰＤに蓄積される。これは、受光領域ＰＤへ色彩光が
入射することと等価であり、このとき電子シャッタは開
放されたとみなされる。
【００６６】露光時間が経過すると、素子３４は電子シ
ャッタを閉鎖して、光電変換を停止させる。各受光領域
ＰＤは、次の露光動作が終了するまでに、この露光時間
内に蓄積された電荷を、該露光時間内の受光量を表す受
光データとして、電荷結合素子Ｃａ〜Ｃｅを介して撮像
素子３４外部に転送する。受光データを各受光領域ＰＤ
から撮像素子３４外部に転送するための転送時間は、垂
直帰線期間と水平帰線期間とに分けられる。
【００６７】垂直帰線期間には、各受光領域ＰＤは、受
光データを隣接する垂直転送ＣＣＤ群５１ａ〜５１ｄの
各電荷結合素子Ｃａ〜Ｃｄのいずれか１つに転送する。
撮像素子３４の受光領域ＰＤは、たとえばラスタ順で走
査される。ラスタ順とは、たとえば垂直方向Ｖを主走査
方向とし、水平方向Ｈを副走査方向として、受光領域Ｐ
Ｄをひとつずつ順次的に点走査する順である。たとえば
撮像素子３４で各受光領域ＰＤをラスタ順に走査すると
き、まず第１行の受光領域ＰＤ（１，１）〜ＰＤ（１，
４）が水平方向Ｈの一方向きＨａに沿って順次的に走査
された後、第２行の各受光領域ＰＤが一方向きＨａに沿
って走査される。このように、ラスタ順の走査では、ま
ず行単位で各受光領域ＰＤを走査し、行単位の走査を垂
直方向Ｖの一方向きＶａに沿って移動させる。
【００６８】このとき、各ＣＣＤ群５１ａ〜５１ｄの電
荷結合素子Ｃａ〜Ｃｄの数は、隣接する列の受光領域Ｐ
Ｄの数の半分であるので、単一の各電荷結合素子Ｃａ〜
Ｃｄには、隣接する２つの受光領域ＰＤからの受光デー
タがそれぞれ与えられる。この受光データは、垂直帰線
期間中に各電荷結合素子Ｃａ〜Ｃｄで混合されて、２つ
の受光データを表す電荷量の和である混合データとな
る。２画素混合読出し型の撮像素子３４では、各受光デ
ータから混合データを生成し、この混合データを出力す
る。
【００６９】水平帰線期間には、各電荷結合素子Ｃａ〜
Ｃｄは、この混合データを、垂直方向Ｖに平行な他方向
きＶｂに向かって、同一群で隣接する別の電荷結合素子
Ｃａ〜Ｃｄに転送する。一方端部の電荷結合素子Ｃａ
（１），Ｃｂ（１），Ｃｃ（１），Ｃｄ（１）は、該素
子に転送された混合データを、さらに該素子と接続され
た水平転送ＣＣＤ群の各電荷結合素子Ｃｅに転送する。
【００７０】水平帰線期間と垂直帰線期間とを除いた水
平走査期間中には、水平転送ＣＣＤ群５２は、水平方向
Ｈに平行な他方向きＨｂに向かって、各電荷結像素子Ｃ
ｅ（４）〜Ｃｅ（１）に転送された混合データを順次的
に転送する。素子Ｃｅ（１）に転送された混合データ
は、出力部５３から撮像素子３４の外部の前処理回路３
５に出力される。他方向きＨｂ，Ｖｂは、水平および垂
直方向Ｈ，Ｖにそれぞれ平行で、かつ一方向きＨａ，Ｖ
ａと相反する向きである。
【００７１】奇数および偶数フィールドでは、上述した
各動作は等しいが、同一の電荷結合素子Ｃａ〜Ｃｄへ受
光データを与える受光領域ＰＤの組合わせだけが異な
る。或る受光領域ＰＤからの受光データは、奇数および
偶数フィールドでは、垂直方向Ｖの一方および他方向き
Ｖａ，Ｖｂに隣接する別の受光領域ＰＤからの受光デー
タと混合される。
【００７２】たとえば奇数フィールドでは、受光領域Ｐ
Ｄ（８，１），ＰＤ（７，１）からの受光データが垂直
転送ＣＣＤ群５１ａの電荷結像素子Ｃａ（４）に転送さ
れ、混合データが生成される。同様に各電荷結合素子Ｃ
ａ（３）〜Ｃａ（１）において、受光領域ＰＤ（５，
１），ＰＤ（６，１）；ＰＤ（３，１），ＰＤ（４，
１）；ＰＤ（１，１），ＰＤ（２，１）からの各受光デ
ータが、それぞれ垂直転送ＣＣＤ群５１ａの電荷結合素
子Ｃａ（３），Ｃａ（２），Ｃａ（１）に転送されて混
合される。また、偶数フィールドでは、受光領域ＰＤ
（６，１），ＰＤ（７，１）からの受光データが、電荷
結合素子Ｃａ（４）に転送されて、混合データが生成さ
れる。同様に、受光領域ＰＤ（４，１），ＰＤ（５，
１）；ＰＤ（２，１），ＰＤ（３，１）からの受光デー
タがそれぞれ垂直転送ＣＣＤ群５１のＣａ（３），Ｃａ
（２）に転送されて混合される。
【００７３】このような撮像素子３４で単一回のフィー
ルドの撮像に必要な等価撮像時間は、１回の露光時間に
等しい。また単一回のフレームの撮像に必要な等価撮像
時間は、奇数フィールドの露光時間、奇数フィールドの
転送時間、偶数フィールドの露光時間の和、つまり２回
の露光時間と１回の転送時間の和となる。
【００７４】色フィルタについて、以下に説明する。
【００７５】色フィルタを通過可能な複数の色彩光の組
合せは、全色彩光を混合すると白色光となるように選ば
れる。本実施形態の色フィルタでは、これら色彩光は、
補色系の黄、マゼンタ、シアン、緑である。以後、黄、
マゼンタ、シアンおよび緑の各色彩光に個別的に対応
し、各色彩光だけを通過させる透光領域Ｌを、それぞれ
黄、マゼンタ、シアン、緑の透光領域Ｌと称する。これ
ら各色彩光の透光領域Ｌは、予め定める周期的な色彩光
の色配列に沿うように配列され、かつ全ての透光領域Ｌ
の配列が撮像素子３４の受光領域ＰＤの配列と等価とな
るように配列される。
【００７６】図３は、上述した各色彩光の色配列の基本
配列パターン５６を示す図である。基本配列パターン５
６は、透光領域Ｌを水平方向Ｈに２つ垂直方向Ｖに４つ
並べた４行２列の配列であって、各色彩光の透光領域Ｌ
を２つずつ含む。色フィルタの各色彩光の色配列は、こ
の基本配列パターン５６が垂直方向Ｖおよび水平方向Ｈ
に周期的に繰返されて形成される。
【００７７】以後、透光領域Ｌの色配列の基本配列パタ
ーンを示す図では、実線の矩形領域で透光領域Ｌの配列
位置を示し、その領域内に付す符号で該透光領域Ｌに対
応して通過可能な色彩光を示す。黄、マゼンタ、緑、シ
アンの各色彩光は、それぞれ「Ｙｅ」，「Ｍｇ」，
「Ｇ」，「Ｃｙ」で表される。
【００７８】基本配列パターン５６では、透光領域Ｌ
（１，１），Ｌ（３，１）は、黄の透光領域である。透
光領域Ｌ（２，１），Ｌ（４，２）は、マゼンタの透光
領域である。透光領域Ｌ（４，１），Ｌ（２，２）は、
緑の透光領域である。透光領域Ｌ（１，２），Ｌ（３，
２）は、シアンの透光領域である。
【００７９】上述の色フィルタを有する撮像素子３４で
得られる原画像信号について、以下に説明する。
【００８０】撮像装置３１では、上述した色フィルタを
撮像素子３４の結像面の光入射側に設置して、画像光を
撮像する。撮像素子３４は、２画素混合読出し型の撮像
素子であるので、原画像信号は、奇数および偶数フィー
ルドの走査結果に基づき、以下に示す原画像が得られる
ように、２つの走査結果の各混合データを予め定める配
列に沿って並換えて合成される。この原画像信号の混合
データの並換えは、たとえば画像メモリ３７に各混合デ
ータをストアするときに、そのアドレスを以下の配列に
合わせることで行われる。
【００８１】上述した基本配列パターン５６からなる色
フィルタでは、垂直方向Ｖに隣接する２つの透光領域Ｌ
には、異なる色彩光が対応する。各混合データは、これ
らの透光領域Ｌを通過した色彩光を受光する受光領域Ｐ
Ｄからの受光データを混合して得られるので、２種類の
色彩光の受光量の和となる。以後、或る色彩光αの透光
領域Ｌを通過した色彩光を受光領域ＰＤで受光して得ら
れる受光データを、「αの受光データ」と称する。ま
た、２種類の色彩光α，βの受光データを混合した混合
データを「αおよびβの混合データ」と称する。
【００８２】図４は、原画像の等価的な画素Ｄの配列の
基本配列パターン５７を示す図である。原画像は、原画
像信号を仮想的に目視表示した画像である。原画像の画
素Ｄの配列は、撮像素子３４の受光領域ＰＤの配列と相
似であり、その配列周期は受光領域ＰＤの配列周期の予
め定める定数倍である。以後、本明細書では、説明を簡
便にするために、原画像の画素Ｄの配列周期と撮像素子
３４の受光領域ＰＤの配列周期が一致していると仮定す
る。
【００８３】本実施形態の撮像装置３１では、原画像の
画素Ｄは、水平、垂直および斜め方向Ｈ，Ｖ，Ｕにそれ
ぞれ配列周期ＰＨ，ＰＶ，ＰＵで周期的に配列される。
原画像の画素Ｄの基本配列パターン５７は、透光領域Ｌ
の色配列の基本配列パターンと同様に、４行２列の８つ
の画素Ｄから構成される。またこの原画像の各画素Ｄに
関して、受光領域ＰＤの配列および透光領域Ｌの色配列
に応じて、１種類の混合データが得られる。
【００８４】基本配列パターン５７では、画素Ｄ（１，
１），Ｄ（２，１）には、黄およびマゼンタの混合デー
タが対応する。画素Ｄ（３，１），Ｄ（４，１）には、
黄および緑の混合データが対応する。画素Ｄ（１，
２），Ｄ（２，２）には、シアンおよび緑の混合データ
が対応する。画素Ｄ（３，２），Ｄ（４，２）には、シ
アンおよびマゼンタの混合データが対応する。この４行
２列の画素Ｄのうち、第１行および第３行の画素Ｄの混
合データは、奇数フィールドでの撮像動作で得られる。
第２行および第４行の画素Ｄの混合データは、偶数フィ
ールドでの撮像動作で得られる。
【００８５】以後、画素Ｄに関して、受光領域ＰＤから
の混合データが直接得られる画素Ｄを、「対応画素」と
称する。また、画素Ｄの基本配列パターンを示す図面で
は、実線の矩形領域で、対応画素の配列位置を表す。さ
らに、矩形領域内の符号で、その画素Ｄに対応する受光
データまたは混合データを示す。「Ｙｅ」，「Ｍｇ」，
「Ｇ」，「Ｃｙ」は、それぞれ黄、マゼンタ、緑、シア
ンの受光データを示す。「α＋β」はαおよびβの混合
データを示し、α，βには「Ｙｅ」，「Ｍｇ」，
「Ｇ」，「Ｃｙ」とのいずれかが対応する。
【００８６】光学系３３について、以下に詳細に説明す
る。
【００８７】図５は、集光レンズ６１、イメージシフト
機構６２の屈折板７１、および撮像素子３４の結像面の
位置関係を示す図である。
【００８８】集光レンズ６１は、光学系３３を通過して
撮像素子３４に入射される画像光が、その結像面におい
て結像するように、画像光を集光する。イメージシフト
機構６２は屈折板７１を有し、この屈折板７１は、集光
レンズ６１と撮像素子３４との間に介在される。集光レ
ンズ６１通過後の画像光の光軸６４は、屈折板７１を通
り、色フィルタを通過して、撮像素子３４の結像面に至
る。この画像光の光軸６４と平行な方向を、光軸方向Ｚ
と称する。可変空間フィルタ９０は、これらのの構成要
素６１，６２の前後の任意の位置に設置される。
【００８９】図６は、イメージシフト機構６２の具体的
構成を示す斜視図である。
【００９０】屈折板７１は、透光性を有する矩形の板状
部材であり、たとえば透光性を有するガラス素材で形成
される。屈折板７１は、イナーシャを小さくするため
に、できるだけ軽量とすることが望ましい。
【００９１】屈折板７１の水平方向Ｈの両側方には、一
対の圧電素子７３，７４が配設される。これら圧電素子
７３，７４は、いわゆるバイモルフ型の圧電素子であ
り、短冊状の３枚の電極の間に圧電セラミックが介在さ
れる構造を有する。この圧電素子７３，７４の長手方向
は、イメージシフト動作のシフト方向と平行な水平方向
Ｈに平行である。各圧電素子７３，７４は片持梁構造で
あり、長手方向の両端部のうち、図面を記す紙面で手前
側の一方端を固定端、奥側の他方端を自由端とする。圧
電素子７３，７４の各電極からは、圧電素子７３，７４
の固定端側から、導線８０，８１がそれぞれ引出され
る。この導線８０，８１は、駆動回路４１に接続され
る。
【００９２】圧電素子７３，７４の自由端側の部分は、
上保持板７６および下保持板７７に挟持される。上保持
板７６および下保持板７７は、たとえば合成樹脂である
軽量な材料によって形成される。上および下保持板７
６，７７は、概略的に短冊状の部材であって、長手方向
の両端に肉厚部分が形成され、水平方向Ｈから見て概略
的に「コ」の字状の形状を有する。
【００９３】上および下保持板７６，７７は、その長手
方向が垂直方向Ｖと平行となるように設置され、かつそ
の肉厚部同士を対向させて一対の圧電素子７３，７４を
挟持し、同時にその中間部で屈折板７１を挟持して、サ
ンドイッチ接合構造を形成する。各構成要素間の接合に
は、エポキシ系樹脂のフィルム状接着剤などが用いられ
る。これによって、屈折板７１は、圧電素子７３，７４
の自由端側の部分に、上および下保持板７６，７７を介
して固定される。屈折板７１、圧電素子７３，７４およ
び上および下保持板７６，７７は、屈折板７１の中心を
含む仮想的なＨＶ平面を対象面とする上下対称の構造を
有する。圧電素子７３，７４が片持梁として動作すると
き、その自由端側部分は、他の構成部材に動きを拘束さ
れることなく自由に変位することができる。
【００９４】また、各圧電素子７３，７４の固定端側の
部分は、ステージ７８に接合されて固定される。ステー
ジ７８は、図示しない撮像装置の筺体の所定位置に固定
される。この筺体内部には、被写体からの画像光の全光
束が屈折板７１を通過するように、前述の光学系３３が
配設される。さらにこの筺体内部には、圧電素子７３，
７４の光軸方向の位置を検出するための位置センサ８
３，８４が配設される。この圧電素子７３，７４の固定
手法は、これに限らず、たとえば固定端側の部分をステ
ージ７８およびステージ７８とほぼ同形状の別部材によ
って挟持し、これら部材をビスで固定することで固定し
てもよい。
【００９５】位置センサ８３，８４は、たとえば反射型
のフォトインタラプタで実現される。位置センサ８３，
８４は、鏡面加工が施された下保持板７７からの反射光
を受光して下保持板の変位を検出し、その変位量から圧
電素子７３，７４の変位を推測する。位置センサ８３，
８４の検出結果は、駆動回路４１に与えられる。
【００９６】このような構造を有するイメージシフト機
構６２は、屈折板７１の中心を通り、垂直方向Ｖに平行
に伸びる仮想基準軸線を備える構造の機構と同等に動
く。このイメージシフト機構６２は、従来のイメージシ
フト機構と比較して、装置全体の大きさが小さい。
【００９７】このイメージシフト機構６２でイメージシ
フト動作を行うとき、該機構６２は、画像光を結像させ
るべき結像位置に応じて仮想基準軸線を中心として屈折
板７１を角変位させることによって、屈折板７１と光入
射側の画像光の光軸６４ａとの成す角度を変化させる。
第１および第２結像位置を画像光を結像させるときのイ
メージシフト機構６２が取るべき状態を、それぞれ第１
および第２状態とする。第１および第２状態は、駆動回
路４１からの信号の有無によって切換られる。
【００９８】第１状態では、駆動回路４１は、圧電素子
７３，７４に信号を与えない。このとき圧電素子７３，
７４はＨＶ平面に対して水平な状態を保つので、屈折板
７１の入射面と光入射側の光軸６４ａとが直交する。第
１結像位置は、この状態の屈折板７１を通過した後の画
像光の光軸６４ｂと、撮像素子３４の結像面との交点で
ある。
【００９９】第２状態では、駆動回路４１は、導線８
０，８１を介して、圧電素子７３，７４の圧電セラミッ
クを挟持する各電極に、予め定める信号を与える。これ
によって、２対の電極間に予め定める電圧が印加される
ので、固定端の部分を支点として、支点から自由端まで
が連続的に歪み、自由端の端部を光軸方向Ｚに変位させ
る。屈折板７１は、この自由端の変位に応じて、仮想基
準軸線を回転中心として角変位する。これによって、屈
折板７１の入射面は、光入射側の光軸６４ａに対して予
め定める傾斜角度だけ傾く。
【０１００】このとき、位置センサ８３，８４は下保持
板の変位から圧電素子７３，７４の変位を推測検出し
て、駆動回路４１に与える。駆動回路４１は、位置セン
サ８３，８４の検出結果と予め定める目標値とを比較し
て、その誤差量を検出する。駆動回路４１は、この誤差
量が０となるように、圧電素子７３，７４の電極に与え
る信号の電圧を徴調整して、屈折板７１の傾斜角度を徴
調整する。
【０１０１】屈折板７１通過後の画像光の光軸は、光入
射側の光軸６４ａの延長線から、屈折板７１の傾斜角度
に対応したシフト長さだけ、仮想基準軸線にと直交する
方向に平行移動する。これによって、イメージシフト機
構６２が第２状態にあるとき、屈折板７１通過後の画像
光の光軸は、水平方向Ｈに沿って予め定めるシフト長さ
だけ平行移動する。第２結像位置は、この平行移動後の
光軸と撮像素子３４の結像面の交点である。したがっ
て、第２結像位置は、第１結像位置からみて、光軸のシ
フト方向と同じ方向に同じシフト長さだけずれる。この
ような動作によって、画像光の結像位置がシフト移動す
る。
【０１０２】可変空間フィルタについて、図７〜図１１
を用いて、以下に説明する。該フィルタ９０は、撮像装
置３１の通常および高解像度モードに応じて、第１およ
び第２状態に切換えられ、各モードに応じた減衰量で、
画像光の空間周波数成分の振幅を減衰させる。
【０１０３】図７は、可変空間フィルタ９０の具体的構
成を示す斜視図である。フィルタ９０は、３枚の複屈折
板９１〜９３が、画像光の光軸６４上に、光入射側から
この順で配列されて形成される。複屈折板９１〜９３
は、光入射側の画像光の光軸６４と直交する入射面およ
び射出面をそれぞれ有する。また、屈折板９３は、光軸
６４と一致した仮想回転中心軸線を中心として回転可能
であり、第１および第２状態が切換えられると同時に９
０度だけ角変位するように回転駆動される。
【０１０４】以後、水平、垂直、および光軸方向Ｈ，
Ｖ，Ｚの各単位ベクトルを、ベクトルｉ，ｊ，ｋと表
す。また、ベクトルｉ，ｊに平行でかつベクトルｋと直
交する仮想平面を、ＨＶ平面とする。このＨＶ平面は、
各複屈折板９１〜９３の入射および射出面と平行であ
る。
【０１０５】複屈折板９１〜９３は、たとえば水晶板で
実現される。図８（ａ）〜図８（ｃ）は、フィルタ９０
が第１状態にあるときの各複屈折板９１〜９３の分離ベ
クトルＢ１〜Ｂ３をＨＶ平面に投影した状態を示す図で
ある。この分離ベクトルＢ１〜Ｂ３の向きは、各複屈折
板９１〜９３の射出面の外方で、複屈折板９１〜９３の
光入射側の画像光の光軸の延長線から、各複屈折板９１
〜９３から射出した画像光の光軸に向かう向きを表す。
すなわち、複屈折板によって光軸が移動される向きを表
す。また各複屈折板９１〜９３の分離ベクトルの大き
さ、すなわち分離長さは、各複屈折板９１〜９３の光軸
方向Ｚの厚さに比例して定められる。ゆえに、各複屈折
板９１〜９２の厚さは、それぞれ後述する分離長さが生
じるように設定される。この分離ベクトルは、前述した
単位ベクトルｉ，ｊ，ｋによって、以下の式で規定され
る。
【０１０６】
【数１】
【０１０７】上式から、複屈折板９１〜９３の分離ベク
トルＢ１〜Ｂ３の向きは、それぞれ、反時計まわりに見
て、水平方向Ｈと９０度，４５度，１３５度を成す向き
であることが分かる。また、複屈折板９１〜９３の分離
長さは以下のとおりである。
【０１０８】
【数２】
【０１０９】このような複屈折板９１〜９３に対して、
分離ベクトルＢ１〜Ｂ３と交差する方向に偏光する画像
光が入射すると、画像光は常光と異常光とに分離され
る。常光は、複屈折板９１〜９３内を、入射側の光軸の
延長線と平行に進行して、そのまま射出する。このと
き、常光の射出側の光軸は、入射側の光軸の延長線と一
致する。異常光は、複屈折板９１〜９３内で常光から分
離された後に射出される。この異常光の射出側の光軸
は、入射側の光軸の延長線から、ＨＶ平面上で予め定め
る分離ベクトルＢ１〜Ｂ３と同じ向きに同じ長さだけ平
行移動される。
【０１１０】上述した可変空間フィルタ９０が第１状態
にあるとき、複屈折板９３は、分離ベクトルが図８
（ｃ）に示す状態に保たれる。このとき、フィルタ９０
を通過する画像光の挙動を、図９を用いて、以下に説明
する。
【０１１１】図９（ａ）〜図９（ｃ）は、第１状態の可
変空間フィルタ９０において、画像光の常光および異常
光が複屈折板９１〜９３を通過した位置をそれぞれ示す
仮想結像面を示す図である。これら仮想結像面は、ＨＶ
平面と平行であり、その各仮想結像面上に描かれる格子
の空間位置は、全て一致する。この格子の軸線は、水平
および垂直方向Ｈ，Ｖに、それぞれ間隔ＰＨ／２，ＰＶ
／２で配列される。この格子の交点の座標を、欄外に振
られた水平および垂直方向Ｈ，Ｖの各軸線の番号α、β
を用いて、「座標（α，β）」と表す。以後、この座標
は、常光および異常光の光軸と、その仮想結像面との交
点を表すために用いる。
【０１１２】第１状態の可変空間フィルタ９０におい
て、フィルタ入射前の画像光の光軸と仮想結像面との交
点を座標（４，３）とする。この画像光は、複屈折板９
１に入射して、複屈折板９１に対する常光と異常光とに
分離される。該常光の射出側の光軸と仮想結像面との交
点は、座標（４，３）である。また、異常光の射出側の
光軸は、入射側の光軸の延長線からみて、分離ベクトル
Ｂ１と同じ向きに同じ長さだけ光軸が移動しており、そ
の光軸の交点は座標（２，３）である。
【０１１３】この１対の常光および異常光は、それぞれ
座標（４，３），（２，３）から複屈折板９２に入射
し、それぞれ該複屈折板９２に対する常光および異常光
に分離される。複屈折板９１の常光のうちの複屈折板９
２に対する常光は、そのまま複屈折板９１を通過するの
で、その光軸の交点は座標（４，３）である。同様に、
複屈折板９１の異常光のうち、複屈折板９２に対する常
光の光軸の交点は、座標（２，３）である。また、複屈
折板９１の常光および異常光の複屈折板９２に対する異
常光の光軸は、それぞれ座標（４，３），（２，３）の
光軸の延長線からみて、分離ベクトルＢ２と同じ向きに
同じ長さだけ移動される。このとき、座標（４，３）の
光軸は、格子の軸線と４５度の角度を成す向きに移動さ
れるので、射出側の光軸と仮想結像面との交点の位置は
垂直方向Ｖについて格子の交点からずれる。このずれの
大きさは、長さＰＨ／ＰＶであり、図９では長さＰＨ／
２と等しい。またずれの向きは、座標（４，４）から座
標（３，４）に向かう方向である。このような交点を
（４−ＰＨ／ＰＶ，４）と表す。以後、格子の交点から
ずれた座標は、近接の格子の交点からのずれの大きさ
と、ずれの向きとを付加して表す。「−」は、光軸の交
点が図９上で軸線の番号が若くなる方向に向かってずれ
ていることを表す。座標（４，３）の射出側の光軸と同
様に、座標（２，３）の射出側の光軸と仮想結像面との
交点も格子の交点からずれる。その交点は、前述の手法
で求められ、座標（２−ＰＨ／ＰＶ，２）と表す。
【０１１４】この２対の常光および異常光は、同一の座
標から複屈折板９３に入射する。複屈折板９２，９３の
分離ベクトルＢ２，Ｂ３は相互に直交するので、複屈折
板９２の常光および異常光は、それぞれ複屈折板９３に
対する異常光および常光になる。したがって、座標
（４，３），（２，３）の複屈折板９２の常光は、複屈
折板９３の異常光となる。これによって、該複屈折板９
３の異常光の光軸は、座標（４，３），（２，３）か
ら、分離ベクトルＢ３と同じ向きに同じ長さだけ移動し
ており、その該交点はそれぞれ座標（４−ＰＨ／ＰＶ，
２），（２−ＰＨ／ＰＶ，２）である。また同様に、座
標（４−ＰＨ／ＰＶ，４），（２−ＰＨ／ＰＶ，４）の
複屈折板９２の異常光は、複屈折板９３の常光となるの
で、そのまま複屈折板９３を通過する。ゆえに、これら
複屈折板９３の常光の光軸はの交点はそれぞれ座標（４
−ＰＨ／ＰＶ，４），（２−ＰＨ／ＰＶ，４）である。
【０１１５】このように、複屈折板９１〜９３を順次的
に通過した画像光は、２対の常光および異常光に分離さ
れる。これら常光および異常光の光軸と仮想結像面との
交点は、水平および垂直方向Ｈ，Ｖにそれぞれ平行に、
間隔ＰＨ，ＰＶずつ離れる。このように分離された画像
光について、第１減衰量を表す伝達関数を求めると、画
像光の空間周波数成分のうち、空間周波数±ｆＨ／２，
±ｆＶ／２の成分のレスポンスがなくなるように、該空
間周波数の成分の振幅が減衰されることがわかる。任意
の空間周波数ｆにおけるレスポンスは、その空間周波数
ｆでのコントラストと基準の空間周波数０でのコントラ
ストとの比で定義される。
【０１１６】また、上述した可変空間フィルタ９０が第
２状態にあるとき、複屈折板９３は、第１状態から９０
度角変位され、分離ベクトルＢａ３が図１０に示す状態
に保たれる。この分離ベクトルＢ３ａは、前述した単位
ベクトルｉ，ｊを用いて、以下のように表される。
【０１１７】
【数３】
【０１１８】分離ベクトルＢ３ａの向きは、反時計まわ
りに水平方向Ｈと−１３５度を成す向きであり、第１状
態での分離ベクトルＢ３と直交する。
【０１１９】このとき、フィルタ９０を通過する画像光
の挙動を、図９（ａ），（ｂ）および図１１の仮想結像
面を用いて、以下に説明する。図１１の仮想結像面の各
要素は、図９の仮想結像面と同様の趣旨である。
【０１２０】第２状態の可変空間フィルタ９０におい
て、フィルタ入射前の画像光の光軸と仮想結像面との交
点を座標（４，３）とする。この画像光が、複屈折板９
１，９２を通過するときの挙動は、第１状態のときと等
しいので、説明は省略する。
【０１２１】複屈折板９３には、複屈折板９２に対する
座標（４，３），（２，３）の常光、および座標（４−
ＰＨ／ＰＶ，４），（２−ＰＨ／ＰＶ，４）の異常光
が、この同一の座標から入射する。複屈折板９２，９３
の分離ベクトルＢ２，Ｂ３は相互に平行であり、分離ベ
クトルの向きだけが相反する。したがって、複屈折板９
２の常光および異常光は、そのまま複屈折板９３に対す
る常光および異常光になる。したがって、座標（４，
３），（２，３）の複屈折板９２の常光は、複屈折板９
３の常光となるので、そのまま複屈折板９３を通過す
る。ゆえに、これら複屈折板の常光の光軸の交点は、座
標（４，３），（２，３）である。また、座標（４−Ｐ
Ｈ／ＰＶ，４），（２−ＰＨ／ＰＶ，４）の複屈折板９
２の異常光は、複屈折板９３の異常光となる。これによ
って、該複屈折板９３の異常光の光軸は、座標（４−Ｐ
Ｈ／ＰＶ，４），（２−ＰＨ／ＰＶ，４）の光軸の延長
線からみて、光学ベクトルＢ３ａと同じ向きに同じ長さ
だけ移動しており、その交点はそれぞれ座標（４，
３），（２，３）である。
【０１２２】このように、複屈折板９２，９３の分離ベ
クトルＢ２，Ｂ３ａが平行で向きが相反するとき、複屈
折板９２に対する常光および異常光の光軸の交点が、複
屈折板９３通過後に一致する。これによって、複屈折板
９２，９３での光の分離効果が打消される。したがっ
て、複屈折板９３通過後の画像光の分離状態は、複屈折
板９１通過直後の状態に戻る。
【０１２３】このように複屈折板９１〜９３を順次的に
通過した画像光は、１対の常光および異常光に分離され
る。この常光および異常光の光軸と仮想結像面との交点
は、垂直方向Ｖに平行に、間隔ＰＶだけ離れる。このよ
うに分離された画像光に関して、第２減衰量を表す伝達
関数を求めると、画像光の空間周波数成分のうち、空間
周波数±ｆＶ／２の成分のレスポンスだけがなくなるよ
うに、該空間周波数成分の振幅が減衰されることが分か
る。この第２減衰量と通常モードの第１減衰量とを比較
すると、水平方向Ｈに関する空間周波数成分の減衰量が
０になり、垂直方向Ｖに関する減衰量が変わらないこと
が分かる。
【０１２４】上述の撮像装置３１の通常モードの画像光
の撮像動作について、以下に詳細に説明する。
【０１２５】通常モードでは、イメージシフト機構６２
は第１状態に固定され、画像光は撮像素子３４の結像面
の第１結像位置に結像する。また、可変空間フィルタ９
０は第１状態に切換えられ、画像光の水平および垂直方
向Ｈ，Ｖの空間周波数成分をそれぞれ空間周波数±ｆＨ
／２，±ｆＶ／２未満に制限する。撮像素子３４は、こ
の状態で入射される画像光を撮像して、第１原画像信号
を出力する。このときの結像位置は、第２結像位置でも
よい。
【０１２６】信号処理回路４４は、上述の第１原画像信
号だけに基づいて、単一の第１出力画像信号の輝度信号
Ｙおよび２種類の色差信号（Ｂ−Ｙ），（Ｒ−Ｙ）を生
成する。
【０１２７】これら３種類の信号は、各画素Ｄ単位で求
められる複数の要素からなるデジタル信号である。輝度
信号および色差信号の各画素Ｄ単位の要素を輝度データ
および色差データと称する。各画素Ｄの輝度データは、
該画素Ｄで受光されるべき全ての色彩光の受光データの
和である。また２種類の色差データは、該全ての色彩光
の受光データの差である。したがって、各画素Ｄの輝度
データおよび色差データを得るには、各画素Ｄ毎に、全
ての色彩光の受光データを必要とする。
【０１２８】上述の原画像では、各画素Ｄには、２種類
の受光データを混合した混合データが１種類だけ対応す
る。各画素Ｄの輝度データは、欠けている受光データを
隣接する他の画素Ｄの混合データで補間して求められ
る。たとえば６行２列に属する画素Ｄ（６，２）の輝度
データＹ（６，２）は、以下の式に基づいて求められ
る。
【０１２９】 Ｙ(6,2) ＝（Ｃｙ＋Ｇ）(6,2)＋（Ｙｅ＋Ｍｇ）(6,3) …（９） 「（α＋β）（ｎ，ｍ）」，は、第ｎ行第ｍ列の画素Ｄ
に対応するαおよびβの混合データを示す。αおよびβ
は、緑、黄、シアン、マゼンタのいずれか１つであり、
「Ｇ」，「Ｙｅ」，「Ｃｙ」，「Ｍｇ」と表される。
【０１３０】色差データもまた、輝度データと同様に、
欠けている受光データを隣接する他の画素Ｄの混合デー
タで補間して求められる。このとき、原画像では、同一
種類の混合データが対応する対応画素が垂直方向Ｖに２
画素連続して配列されるので、各画素Ｄに対応する色差
データは、画素Ｄの混合データに応じたいずれか一種類
だけを直接求めることができる。たとえば画素Ｄ（６，
２）の色差データ（Ｒ−Ｙ）（６，２）は、以下の式に
基づいて求められる。
【０１３１】
【数４】
【０１３２】また、画素Ｄの混合データから直接得られ
ない他方の色差データ（Ｂ−Ｙ）（６，２）は、その画
素Ｄ（６，２）の周囲の他の画素Ｄで直接求められる同
種の色差データ（Ｂ−Ｙ）を用い、以下の式に基づいて
補間する。
【０１３３】
【数５】
【０１３４】以後、出力画像において、受光データから
輝度データおよび色差データの少なくとも１つが直接求
められる画素Ｄを、そのデータの「実画素」と称する。
また、補間処理によって輝度データおよび色差データが
求められる画素Ｄをそのデータの「仮想画素」と称す
る。
【０１３５】この輝度信号および色差信号のサンプリン
グ周波数は、第１出力画像信号の算出の基礎となる原画
像信号の各色彩光の対応画素の配列周期から簡易的に求
められる。或る空間軸方向の任意の色彩光の対応画素の
配列周期の１周期分の長さは、原画像上に該空間軸に直
交するように仮想され、相互に平行な２本の仮想直線で
あって、その色彩光の受光データまたは混合データの対
応する２つ以上の対応画素の中心をそれぞれ通って隣接
する仮想直線の間隔と等しい。
【０１３６】輝度信号のサンプリング周波数は、全ての
色彩光の混合データの対応画素の配列周期から求められ
る。この配列周期は、図４から、水平、垂直および斜め
方向Ｈ，Ｖ，Ｕにそれぞれ配列周期ＰＨ，ＰＶ，ＰＵで
あると分かるので、サンプリング周波数は、それぞれ空
間周波数ｆＨ，ｆＶ，ｆｕである。また、色差信号のサ
ンプリング周波数は、同一種類の混合データの対応画素
だけの配列周期から求められる。この配列周期は、図４
から、少なくとも水平および垂直方向Ｈ，Ｖにそれぞれ
配列周期２ＰＨ，４ＰＶであると分かるので、サンプリ
ング周波数は、それぞれ空間周波数ｆＨ／２，ｆＶ／４
である。
【０１３７】出力画像信号が表す出力画像の解像度の評
価手法として、空間周波数平面図を用いる。空間周波数
平面図は、輝度の基底帯域および色差信号のモアレのキ
ャリア周波数を示し、いわゆるＣＺＰ(Circular Zone P
late）チャートに対応する。ＣＺＰチャート上に現れる
モアレは、空間周波数平面に示すモアレのキャリア周波
数を中心周波数とする折返し成分によって現れるモアレ
と同一位置に生じる。ＣＺＰチャートに関しては、「電
子情報通信学会 技術研究報告 ＩＥ８０−９６「固体
撮像装置の画像とモアレ」」に開示される。
【０１３８】本明細書において、輝度の基底帯域の各空
間周波数軸上の範囲は、簡略化手法で求めた。以下に、
上述した第１出力画像信号の輝度の基底帯域を例とし
て、簡略化手法を以下に説明する。
【０１３９】図１２は、空間周波数平面図の第１象限に
関し、水平方向Ｈの空間周波数軸に対する輝度信号およ
び色差信号のスペクトルを示すグラフである。前述した
ように、輝度信号の水平方向のサンプリング周波数は空
間周波数ｆＨである。
【０１４０】第１出力画像信号を目視表示するとき必要
な輝度信号の所望信号成分のスペクトルは、空間周波数
０を中心とした山形の波形１０１を示す。また、輝度信
号は、前述したようにデジタル信号であるので、折返し
成分が存在する。この折返し成分のスペクトルは、サン
プリング周波数ｆＨの０以外の整数倍の空間周波数を中
心とした山形の波形１０２を示す。サンプリング周波数
の０以外の整数倍の空間周波数を、キャリア周波数と称
する。
【０１４１】水平方向の空間周波数軸上における輝度の
基底帯域の該空間周波数軸上の範囲は、空間周波数０を
中心として、その幅が輝度信号のサンプリング周波数ｆ
Ｈの半分となる範囲Ｗ１であると規定される。輝度信号
の所望信号成分のスペクトルは、この基底帯域内に含ま
れる。この輝度の基底帯域は、水平、垂直および斜め方
向Ｈ，Ｖ，Ｕの空間周波数軸を含む空間周波数平面の第
１〜第４象限内で、２次元的に求められる。この空間周
波数平面は、図１２のグラフでは、横軸を含み紙面と直
交する仮想平面である。
【０１４２】色差信号の所望信号成分のスペクトルは、
空間周波数０を中心として山形の波形を示す。また、色
差信号もデジタルデータであるので、折返し成分が存在
し、その折返し成分のスペクトルは、色差信号のサンプ
リング周波数ｆＨ／２の０以外の整数倍のキャリア周波
数を中心とした山形の波形１０３を示す。
【０１４３】この色差信号のサンプリング周波数は、出
力画像の各色差データの実画素の配列によって定められ
るが、前述したように、色フィルタの色配列によって
は、輝度データが全ての画素Ｄで求められても、色差デ
ータが全ての画素Ｄで求められないことがある。このと
き、輝度信号と色差信号とのサンプリング周波数が異な
る。この輝度信号のサンプリング周波数よりも色差信号
のサンプリング周波数が小さいと、輝度の基底帯域内に
色差信号のキャリア周波数が存在する。このキャリア周
波数を中心とする折返し成分は、輝度信号の所望信号成
分と重なり合い、干渉する。この干渉が生じると、輝度
信号の所望信号成分の波形に歪みが生じ、色モアレが発
生する。このように、輝度信号の所望信号成分の波形と
重なり、色モアレの原因となる色差信号の折返し成分の
キャリア周波数を、以後「モアレのキャリア周波数」と
称する。
【０１４４】色モアレの生じた画像は画質が劣化するの
で、撮像装置３１では、画質劣化を防止するために、光
学系３３の可変空間フィルタ９０で、色モアレのキャリ
ア周波数近傍の画像光の空間周波数成分を除去する。挿
入される可変空間フィルタ９０の濾波帯域を、２点鎖線
１０４で示す。このようなフィルタが挿入されると、色
差信号の折返し成分１０３のスペクトルは破線１０５で
示すレベルまで減衰される。このとき、同時に輝度信号
の所望信号成分１０１のスペクトルも同じ減衰量だけ減
衰されて、波形が歪む。
【０１４５】これによって、輝度信号の所望信号成分
は、色モアレのキャリア周波数未満の範囲に制限される
ので、輝度の基底帯域が縮小される。或る方向の空間周
波数軸上の輝度の基底帯域の幅は、その方向の空間軸上
の画像の解像度に対応し、幅が広いほど解像度が大き
い。したがって、出力画像の画質を向上させるには、輝
度の基底帯域内に含まれるモアレの数を減少させる必要
がある。
【０１４６】また、これらキャリア周波数が輝度信号の
所望信号成分の中心周波数から離れていれば、輝度信号
の所望信号成分と色差信号の折返し成分との波形の重な
りが小さく、さらに重なり合う位置での信号強度が小さ
くなる。これによって、フィルタを挿入したとき輝度信
号の所望信号成分の波形の歪みが小さくなる。したがっ
て、モアレのキャリア周波数が除去できずに残るとき、
そのキャリア周波数は輝度の基底帯域の周辺部分にある
ことが好ましい。
【０１４７】空間周波数平面図に現れる空間周波数成分
のうち、任意の空間周波数（ｆｈ，ｆｖ）と空間周波数
（−ｆｈ，−ｆｖ）との成分は、共役関係にある。
【０１４８】 Ｆ（ｆｈ，ｆｖ）＝ Ｆ（−ｆｈ，−ｆｖ）＊ …（12） 上式で、「Ｆ（ｆｈ，ｆｖ）」は、空間周波数（ｆｈ，
ｆｖ）の空間周波数成分を表す。また、「Ｆ（）＊」
は、該空間周波数成分の共役を示す。
【０１４９】このことから、第３象限および第４象限に
現れる輝度の基底帯域の図形およびモアレのキャリア周
波数の位置は、該平面図の空間周波数軸の原点に対し
て、第１および第２象限の該図形および位置と点対称と
なる図形および位置であることがわかる。本明細書で
は、空間周波数平面図は、垂直方向Ｖの空間周波数ｆｖ
が０以上となる範囲を現す第１および第２象限だけを示
す。
【０１５０】図１３は、第１出力画像信号の輝度の基底
帯域および色差信号のモアレのキャリア周波数を示す空
間周波数平面図である。上述したサンプリング周波数に
基づいて決定される輝度の基底帯域１１１を、図１３で
は斜線を付して示す。水平、垂直および斜め方向Ｈ，
Ｖ，Ｕの空間周波数軸における輝度の基底帯域１１１の
範囲は、以下の式で表される。
【０１５１】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１１
１は、以下の４点を頂点とする矩形領域である。
【０１５２】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） 上述の基底帯域１１１内において、モアレのキャリア周
波数の存在する位置は以下の８箇所である。図１３で
は、これら位置を白丸で表す。
【０１５３】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／４） （ ｆＨ／２，ｆＶ／４） （−ｆＨ／２，ｆＶ／２） （ ０，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） （ ０，ｆＶ／４） 上述した第１状態の可変空間フィルタ９０の第１減衰量
は、基底帯域１１１の境界線近傍の空間周波数成分を減
衰させるように定められる。上述の８箇所のモアレのキ
ャリア周波数のうち、先の７箇所は基底帯域１１１の周
辺部に位置するので、このフィルタ９０の空間周波数制
限効果で除去される。これと同時に、基底帯域１１１の
境界線近傍の輝度信号の所望信号成分もフィルタ９０に
よって減衰されるので、第１出力画像信号の基底帯域１
１１の水平および垂直方向Ｈ，Ｖの空間周波数軸上の範
囲は、空間周波数±ｆＨ／２，±ｆＶ／２未満の範囲と
見なされる。これによって、基底帯域１１１の水平およ
び垂直方向Ｈ，Ｖの空間周波数軸上の実質の幅が縮小さ
れるので、第１出力画像の実質の解像度は、その分だけ
基底帯域１１１から推測される理想の解像度よりも低下
する。
【０１５４】上述の撮像装置３１の高解像度モードの画
像光の撮像動作について、以下に詳細に説明する。
【０１５５】このとき、高解像度モードでは、可変空間
フィルタ９０は第２状態に切換えられ、画像光の垂直方
向Ｖの空間周波数成分だけを空間周波数±ｆＶ／２未満
に制限する。イメージシフト機構６２は、同期信号発生
回路４０からの同期信号に基づいて、予め定める撮像タ
イミング毎に第１および第２状態に順次的に切換えられ
る。
【０１５６】図１４は、画像光の第１および第２結像位
置の位置関係を示す図である。第１および第２結像位置
Ｑａ１，Ｑｂ１は、前述したように、第１および第２状
態のイメージシフト機構６２の屈折板７１通過後の画像
光の光軸と、撮像素子３４の結像面との交点を示す。第
１結像位置Ｑａ１を基準とすると、第２結像位置Ｑｂ１
は、第１結像位置Ｑａ１から、受光領域ＰＤの水平方向
Ｈの配列周期ＰＨの１周期分の長さＰＨだけ、水平方向
Ｈに移動した位置である。前述のイメージシフト機構６
２の屈折板７１の仮想基準軸線の設置状態、および第２
状態の屈折板７１と光入射前の画像光の光軸６４ａとの
なす傾斜角度は、第１および第２結像位置が上述の位置
関係となるように、定められる。
【０１５７】撮像素子３４は、この第１および第２結像
位置Ｑａ１，Ｑｂ１に画像光が結像されたときに、該画
像光を撮像して、第１および第２原画像信号を得る。信
号処理回路４４は、第１および第２原画像信号から、第
２出力画像信号を生成する。
【０１５８】第２出力画像信号の生成手法を以下に説明
する。回路４４は、まず第１および第２原画像信号を、
空間的な撮像位置が一致するように重合わせて、合成画
像信号を生成する。この合成画像信号を仮想的に目視表
示した合成画像は、たとえば２枚の原画像を、その画像
の基準の点を結像位置のシフト方向とは逆向きに同じシ
フト長さだけずらして重ね合わせた画像として仮想され
る。このとき、第１および第２原画像内で各結像位置Ｑ
ａ１，Ｑｂ１に対応する点は、合成画像では一致する。
【０１５９】本実施形態では、合成画像は、第１および
第２原画像を水平方向Ｈに長さＰＨだけずらして重ね合
わせた画像として仮想される。この合成画像全体の画素
配列は原画像の画素配列と等しく、Ｎ×Ｍ個の画素が、
水平および垂直方向Ｈ，Ｖにそれぞれ配列周期ＰＨ，Ｐ
Ｖで行列状に配列される。
【０１６０】図１５は、合成画像の等価的な画素Ｄの配
列の基本配列パターン１１３を示す図である。合成画像
では、水平および垂直方向Ｈ，Ｖにこの基本配列パター
ン１１３が周期的に繰返される。この合成画像の基本配
列パターン１１３は、４行２列の８つの画素Ｄから構成
され、各画素Ｄに２種類の混合データが対応する。
【０１６１】この基本配列パターン１１３において、画
素Ｄ（１，１），Ｄ（１，２），Ｄ（２，１），Ｄ
（２，２）には、黄およびマゼンタの混合データ、なら
びにシアンおよび緑の混合データが対応する。画素Ｄ
（３，１），Ｄ（３，２），Ｄ（４，１），Ｄ（４，
２）には、黄および緑の混合データ、ならびにシアンお
よびマゼンタの混合データが対応する。この画素Ｄの基
本配列パターン１１３の色配列は、この合成画像を直接
１回の画像光の撮像で得るときに、撮像素子の結像面の
光入射側に設置されるべき仮想的な色フィルタの色配列
と等価である。
【０１６２】次いで、回路４４は、この合成画像の各画
素Ｄに対応する混合データから、第２出力画像信号の輝
度信号および色差信号の各データを算出する。さらに、
所望とする出力画像の画素配列と合成画像の画素配列と
を比較し、輝度データおよび色差データが生成されない
仮想画素に、実画素の輝度データおよび色差データに基
づいて、各信号を補間する。
【０１６３】合成画像では、各画素Ｄには２種類の受光
データを混合した混合データが２種類ずつ対応する。こ
のような各画素Ｄに関して、輝度データは、各画素毎
に、これら混合データから直接得られる。たとえば、た
とえば６行２列に属する画素Ｄ（６，２）の輝度データ
Ｙ（６，２）は、以下の式に基づいて求められる。
【０１６４】 Ｙ(6,2) ＝（Ｃｙ＋Ｇ）(6,2) ＋（Ｙｅ＋Ｍｇ）(6,2) …（16） また、合成画像では、同一種類の混合データが対応する
対応画素だけから構成される行が、垂直方向Ｖに２行連
続して配列される。この合成画像では、各画素Ｄに関し
て、画素Ｄの混合データの組合わせに応じて、２種類の
色差データのうちの１種類だけが、画素Ｄの混合データ
から直接得られる。したがって、垂直方向Ｖに連続した
２行の画素Ｄでは、同一種類の色差データだけが直接得
られる。たとえば画素Ｄ（６，２）の色差データ（Ｒ−
Ｙ）（６，２）は、以下の式に基づいて求められる。
【０１６５】 （Ｒ−Ｙ）（6,2) ＝（Ｃｙ＋Ｇ）(6,2) −（Ｙｅ＋Ｍｇ）(6,2) …（17） 上述した画素Ｄ（６，２）に関して、２種類の色差デー
タのうち、画素Ｄの混合データから直接得られない１種
類の色差データ（Ｂ−Ｙ）（６，２）は、画素Ｄ（６，
２）の周囲の他の画素Ｄで得られる同種の色差データ
（Ｂ−Ｙ）を用い、以下の式に基づいて補間される。
【０１６６】
【数６】
【０１６７】第２出力画像信号の輝度信号および色差信
号のサンプリング周波数は、該信号の算出の基礎となる
合成画像の各色彩光の対応画素の配列周期から簡易的に
求められる。この配列周期の算出手法は、第１出力画像
信号の該配列周期の算出手法と類似であり、該手法で原
画像信号を合成画像信号に置換えた点だけが異なる。
【０１６８】全ての色彩光の対応画素の配列について、
原画像と合成画像とを比較すると、両者の該配列が等し
いことがわかる。したがって、合成画像の水平、垂直、
および斜め方向Ｈ，Ｖ，Ｕの配列周期は、それぞれ原画
像の配列周期と等しく、それぞれ周期ＰＨ，ＰＶ，ＰＵ
と見なされる。したがって、第２出力画像信号の輝度信
号のサンプリング周波数は、水平、垂直および斜め方向
Ｈ，Ｖ，Ｕにそれぞれ空間周波数ｆＨ，ｆＶ，ｆｕであ
る。
【０１６９】また、同一種類の混合データの対応画素だ
けの配列について、原画像と合成画像とを比較すると、
水平方向Ｈに関し、原画像では１列おきに配列されてい
た該対応画素が合成画像では全列に配列されるので、水
平方向Ｈの対応画素が増加していることがわかる。この
ことから、合成画像の水平および垂直方向Ｈ，Ｖの配列
周期は、それぞれ周期ＰＨ，４ＰＶとみなされる。した
がって、第２出力画像信号の色差信号のサンプリング周
波数は、それぞれ空間周波数ｆＨ，ｆＶ／４である。
【０１７０】図１６は、上述した第２出力画像信号の輝
度の基底帯域１１５、および色差信号のモアレのキャリ
ア周波数を示す空間周波数平面図である。第２出力画像
信号の輝度の基底帯域１１５を、図１６では斜線を付し
て示す。
【０１７１】水平、垂直および斜め方向Ｈ，Ｖ，Ｕの空
間周波数軸における輝度の基底帯域１１５の範囲は第１
出力画像信号の範囲と等しく、以下の式で表される。
【０１７２】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１１
５は、以下の４点を頂点とする矩形領域である。
【０１７３】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） この輝度の基底帯域１１５内で、モアレの原因となる色
差信号のキャリア周波数の存在する位置は以下の２箇所
である。
【０１７４】（ ０，ｆＶ／４） （ ０，ｆＶ／２） 上述の光学系３３の可変空間フィルタ９０の第２減衰量
は、これらキャリア周波数を中心とする色差信号の折返
し成分を減衰させることができるように定められる。
【０１７５】図１３および図１６の第１および第２出力
画像信号の輝度の基底帯域１１１，１１５を比較する
と、その大きさおよび形状は変化していないが、基底帯
域１１１に現れる水平方向Ｈの空間周波数軸上のモアレ
のキャリア周波数が、基底帯域１１５では全て消滅して
いる。したがって、可変空間フィルタ９０で、水平方向
Ｈの空間周波数成分を制限する必要がなくなる。これに
よって、フィルタ制限後の基底帯域１１５の水平方向Ｈ
の空間周波数軸上の実質の幅は、周波数±ｆＨ／２以下
の基底帯域１１１の範囲全域まで拡大される。
【０１７６】したがって、第２出力画像信号の制限後の
基底帯域は、第１出力画像信号の制限後の基底帯域と比
較して、水平方向Ｈの空間周波数軸に沿って拡大する。
これによって、第２出力画像の水平解像度は、第１出力
画像の水平解像度よりも向上する。
【０１７７】第１および第２出力画像信号は、たとえば
陰極線管で実現される表示装置に目視表示される。この
ような表示装置では、偏平な蛍光面に、水平方向Ｈに伸
びるいわゆる走査線が複数本垂直方向Ｖに並べられて、
目視表示領域が形成される。表示装置は、この目視表示
領域の該走査線上の蛍光塗料をアナログ信号で連続的に
変化する電子線で発光させることによって、画像の各画
素Ｄを表示する。このような構造の目視表示領域を有す
る表示装置では、画像の垂直方向Ｖの画素Ｄの数は、走
査線の数で規定されるが、水平方向Ｈは連続輝度変化が
可能なので、画素Ｄの数が無限大と見なされる。
【０１７８】画像の解像度を向上させるとき、画像信号
の段階で基底帯域の幅を拡大しても、その信号の空間周
波数成分を表示することができる表示装置がないと、向
上させた解像度の画像を表示することができない。或る
空間周波数の信号成分を表示するには、その空間周波数
の逆数の半分の配列周期で配列される画素Ｄが必要であ
るので、基底帯域の幅を拡大して解像度を向上させるほ
ど、配列周期が小さい画素配列が必要になる。上述した
表示装置では、垂直方向Ｖの画素Ｄの数は有限であるが
水平方向Ｈは無限であるとみなされるので、水平方向Ｈ
には、画素Ｄの配列周期を短縮させやすいと考えらえ
る。したがって、この表示装置に表示する画像に関して
解像度を向上させるとき、水平方向Ｈの解像度を向上さ
せた方が好ましい。
【０１７９】本発明の第２実施形態である撮像装置を以
下に説明する。本実施形態の撮像装置の光学系、色フィ
ルタ、および撮像素子以外の構成要素は第１実施形態の
撮像装置３１の構成要素と等しく、同一の構成要素には
同一の符号を付し、説明は省略する。本実施形態の撮像
装置では、２画素混合読出し型の撮像素子３４の代わり
に、撮像素子１３１が用いられる。この撮像装置は、通
常モードと高解像度モードとを有し、解像度の異なる第
１および第２出力画像信号を得る。
【０１８０】図１７は、撮像素子１３１の結像面の具体
的な構成を示す平面図である。この撮像素子１３１は、
いわゆる全画素読出し型の撮像素子である。撮像素子１
３１は撮像素子３４と類似の構造を有し、同一の構成要
素には同一の符号を付し、詳細な説明は省略する。
【０１８１】撮像素子１３１の結像面には、撮像素子３
４と同様に、Ｎ×Ｍ個の受光領域ＰＤが水平および垂直
方向Ｈ，Ｖにそれぞれ平行に行列状に配列される。図１
７では、受光領域ＰＤの配列を８行４列の３２個の受光
領域ＰＤ（１，１）〜ＰＤ（４，８）で代表させて表
す。
【０１８２】撮像素子１３１の結像面の光入射側には、
後述する色フィルタが設置される。この色フィルタのＮ
×Ｍ個の透光領域Ｌの配列は、受光領域ＰＤの配列と等
しい。色フィルタの色配列は後述する。各受光領域ＰＤ
は、予め定める露光時間の間に、対応する透光領域Ｌを
通過した色彩光を受光して、その受光量に対応する受光
データを生成する。
【０１８３】受光領域ＰＤの各列に隣接して、垂直転送
ＣＣＤ群１３８ａ〜１３８ｄ（総称するときは「１３
８」とする）が配列される。各垂直転送ＣＣＤ群１３８
には、隣接する受光領域ＰＤの列の受光領域ＰＤの数と
同数の電荷結像素子Ｃがそれぞれ含まれる。各群１３８
の各電荷結像素子Ｃは、垂直方向Ｖに直線状に配列さ
れ、相互に電気的に接続される。この垂直転送ＣＣＤ群
１３８は、受光領域ＰＤの列の数と同数だけ存在する。
各列の受光領域ＰＤの数と各群１３８の電荷結合素子Ｃ
の数が等しいので、各受光領域ＰＤと垂直転送ＣＣＤ群
１３８の電荷結像素子Ｃとは、１対１で対応する。
【０１８４】結像面の受光領域ＰＤの列の一方端部側に
は、各垂直転送ＣＣＤ群１３８の一方端部の電荷結合素
子Ｃａ（１），Ｃｂ（１），Ｃｃ（１），Ｃｄ（１）と
電気的に接続された水平転送ＣＣＤ群５２が設けられ
る。水平転送ＣＣＤ群５２の一方端部には、出力部５３
が取付けられる。
【０１８５】各受光領域ＰＤの受光データは、垂直帰線
期間中に、該受光領域ＰＤに隣接して個別的に対応する
垂直転送ＣＣＤ群１３８の電荷結像素子Ｃに転送され
る。該電荷結合素子Ｃに転送された受光データは、他の
受光データと混合されることなく、水平帰線期間内に、
垂直転送ＣＣＤ群１３８の各電荷結像素子Ｃを、垂直方
向Ｖの他方向きＶｂに向かって順次的に転送される。受
光データが該群１３８ａ〜１３８ｄの一方端部の電荷結
合素子Ｃａ（１）〜Ｃｄ（１）に転送されると、次い
で、受光データはその電荷結合素子Ｃａ（１）〜Ｃｄ
（１）に接続された水平転送ＣＣＤ群５２の電荷結合素
子Ｃｅ（１）〜Ｃｅ（４）に転送される。水平転送ＣＣ
Ｄ群５２は、水平帰線期間と垂直帰線期間を除いた水平
走査期間中に、受光データを水平方向Ｈの他方向きＨｂ
に向かって順次的に転送し、出力部５３から前処理回路
３５に出力する。
【０１８６】このような動作によって、撮像素子１３１
からは、受光データが個別的に導出される。単一回の撮
像において出力される原画像信号は、Ｎ×Ｍ個の受光デ
ータから構成される。
【０１８７】撮像素子１３１の受光領域ＰＤおよび各Ｃ
ＣＤ群１３８，５２は、たとえばシリコン基板上に一体
的に形成される。この受光領域ＰＤとシリコン基板との
間には、オーバフロードレインが設けられる。撮像素子
１３１は、オーバフロードレインを用いた電子シャッタ
によって露光時間の制御を行うことができる。
【０１８８】本実施形態の撮像装置では、画像光の撮像
時の露光時間を、撮像素子１３１の電子シャッタと、機
械的なシャッタ機構１４１とを併用して制御する。
【０１８９】撮像装置の光学系３３ａには、集光レンズ
６１，イメージシフト機構６２、および可変空間フィル
タ９０の他に、さらにシャッタ機構１４１が備えられ
る。シャッタ機構１４１は、上述の構成要素６１，６
２，９０および撮像素子１３１のうちの、間隔をあけて
隣接するいずれか２つの構成要素の間に介在される。シ
ャッタ機構１４１は、いわゆるレンズシャッタであり、
画像光の遮断および通過の切換えと、光学系３３ａの絞
りとを単一の機構で兼用する。
【０１９０】図１８（ａ）は、シャッタ機構１４１の機
械的構成を示す斜視図である。図１８（ｂ）は、シャッ
タ機構１４１のシャッタ板１４３を光軸方向Ｚから見た
図である。２つの図を併せて説明する。
【０１９１】円板状のシャッタ板１４３は、画像光の光
軸６４上に、その中心軸線が光軸６４と一致するように
垂直に介在される。シャッタ板１４３の中央部には、画
像光を通過させる円形の開口部１４５が設けられる。シ
ャッタ板１４３は、複数のシャッタ羽根１４４、駆動ピ
ン１４６、検出板１５４を含む。
【０１９２】シャッタ羽根１４４は、シャッタ板１４３
の開口部１４５の内径を変化させて、シャッタ機構１４
１の開口量を調整するために設けられる。シャッタ機構
１４１の開口量は、シャッタ板１４３のうちシャッタ羽
根１４４で塞がれていない開口部１４５の面積に対応す
る。シャッタ羽根１４４は、駆動ピン１４６の変位に応
じて、開口部１４５の内径を縮小する。
【０１９３】シャッタ機構１４１では、このシャッタ羽
根１４４を駆動して、開口部１４５を完全に塞ぐことに
よって、シャッタを閉塞し、画像光を遮断する。また、
シャッタ羽根１４４を閉塞時とは逆向きに駆動し、開口
部１４５の内径が予め定める長さとなったところで停止
させることによって、予め定める絞り量でシャッタ機構
１４１を開放する。また、この閉塞および開放動作を微
少量ずつ行うことで、シャッタ機構１４１の開放時の絞
り量を調整する。
【０１９４】駆動ピン１４６には、シャッタ機構１４１
の閉塞動作の動力源となるバネ１４９の一方端が接続さ
れる。このバネ１４６の他方端は、撮像装置のいずれか
の固定部材に固定される。また、駆動ピン１４６には、
光軸方向Ｚに貫通する溝１５０が設けられる。この溝１
５０には、後述する駆動装置の動力源１５１によって駆
動される駆動軸１５２が挿通される。動力源１４７は、
たとえばモータで実現され、シャッタ羽根１４４の開閉
動作の速度制御に用いられる。
【０１９５】シャッタ羽根１４４は、駆動ピン１４６が
矢符１４７が示すシャッタ板１４３の円周方向に沿って
変位すると、開口部分１４５の面積を縮小または拡大す
るように変位する。バネ１４９は、駆動ピン１４６に対
し、シャッタ羽根１４４が開口部１４５を塞ぎ、シャッ
タ機構１４１が閉塞される向きに、常にバネ力を及ぼ
す。シャッタ機構１４１の開放および閉塞は、動力源１
５１の駆動軸１５２の変位によって行われる。開放動作
時には、駆動軸１５２を駆動ピン１４６にバネ力が及ぼ
される向きと逆向きに駆動させることによって、バネ力
に逆らってシャッタ羽根１４４を開放する。閉塞動作時
には、バネ力が及ぼされる向きと同じ向きに駆動軸１５
２を駆動させることによって、動力源１５１からの力と
バネ力との合力によってシャッタ羽根１４４を閉塞させ
る。この開放および閉塞動作は、後述する駆動装置によ
って制御される。
【０１９６】検出板１５４は、シャッタ機構１４１の開
口量を検出する為に用いられる。検出板１５４は、長手
方向が円弧状に弯曲した細長い板状部材であり、その一
方端部がシャッタ羽根１４４の駆動ピン１４６に連結さ
れ、シャッタ羽根１４４が変位駆動される時に連動して
動く。検出板１５４には、その長手方向に沿って形成さ
れ、光軸方向Ｚに貫通し、かつ一方端部から反対側の他
方端部に至るほど幅が狭くなる溝１５５が形成される。
【０１９７】この検出板１５４の溝１５５を挟んで、光
源１５７と受光センサ１５８とが、互いに対向して設置
される。光源１５７は常に予め定める光量の光を出力す
る。受光センサ１５８は、光源１５７からの光を、検出
板１５４の溝１５５を介して受光し、その受光量に応じ
てレベル変化する出力を導出する。受光センサ１５８が
受光する光の光量は、光源１５７と受光センサ１５８と
を結ぶ仮想線上の溝１５５の幅に比例して減少する。検
出板１５４は、駆動ピン１４６に連動して変位するの
で、その変位量はシャッタ機構１４１の開口量の変化に
対応する。シャッタ羽根１４４が絞られ開口量が減少す
るほど、仮想線上の溝１５５の幅が狭まり、光源１５７
からの光が検出板１５４に遮られるので、受光センサ１
５８に入射する光の光量が減少する。
【０１９８】このシャッタ機構１４１は、通常モードで
は常に開放状態を保つ。このとき画像光の露光時間は、
電子シャッタの開放および閉塞動作だけで制御される。
【０１９９】高解像度モードでは、１回目の画像光の撮
像時の露光時間は電子シャッタによって規定される。２
回目の画像光の撮像時の露光時間は、シャッタ機構１４
１によって規定される。この高解像度モードでは、１回
目の画像光の撮像時には、画像光は第１結像位置に結像
され、２回目の画像光の撮像時には、画像光は第２結像
位置に結像されるものとする。
【０２００】図１９は、高解像度モードの撮像装置にお
いて、画像光の撮像時の撮像装置の各構成要素の動作タ
イミングを示すタイミングチャートである。図１９
（ａ）は、シャッタ機構１４１の開口量を示し、開口量
が最大レベルｍａｘであるときシャッタ機構１４１は開
放され、最小レベルｍｉｎであるとき閉塞されることを
表す。図１９（ｂ）は、オーバフロードレインの開放お
よび閉塞状態の切換えタイミングを示し、ハイレベルで
あるとき該ドレインが閉塞され、ローレベルであるとき
開放されることを表す。オーバフロードレインの開放お
よび閉塞は、電子シャッタの閉塞および開放に対応す
る。図１９（ｃ）は、電荷読出しパルスの印加タイミン
グを示す。図１９（ｄ）は、撮像素子１３１の露光動作
の動作タイミングを示し、ハイレベルである時だけ、画
像光の露光が行われる。図１９（ｅ）は、イメージシフ
ト機構６２の切換えタイミングを示し、ローレベルのと
き該機構６２が第１状態を保ち、ハイレベルのとき第２
状態を保つことを表す。図１９（ｆ）は、撮像素子１３
１の各ＣＣＤ群の転送タイミングを示す。このタイミン
グチャートを用いて、本実施形態の高解像度モードの撮
像装置における画像光の撮像動作を以下に説明する。
【０２０１】画像光の撮像が行われていないとき、シャ
ッタ機構１４１は開放され、画像光が撮像素子１３１に
入射している。同時に、オーバフロードレインが開放さ
れて、電子シャッタが閉塞される。これによって、撮像
素子の受光領域ＰＤでの電荷の蓄積が禁止される。
【０２０２】時刻ｔａから、１回目の画像光の撮像動作
が開始される。まず、シャッタ機構１４１が開放された
まま、時刻ｔａからオーバフロードレインが閉塞され
る。これによって、各受光領域ＰＤで電荷の蓄積が許容
され、１回目の露光動作が開始される。
【０２０３】時刻ｔａから、１回目の露光動作の露光時
間ＷＴ１が経過すると、時刻ｔｂで撮像素子の各受光領
域ＰＤに対して、電荷読出しパルスが印加される。該パ
ルスが印加されると、受光領域ＰＤに蓄積された電荷
が、受光データとして、個別対応する垂直転送ＣＣＤ群
１３８の電荷結合素子Ｃに転送される。この第１の転送
動作に要する時間はナノ秒（ｎｓ）のオーダである。該
パルス印加の直径に、オーバフロードレインが開放され
て電子シャッタが閉塞される。これによって１回目の露
光動作が終了する。以後、画像光は結像面に入射する
が、受光領域ＰＤの電荷の蓄積が禁止される。
【０２０４】また、時刻ｔｂから、イメージシフト機構
６２のイメージシフト動作が開始される。時刻ｔｂから
遷移時間ＷＴ２が経過すると、画像光の結像位置が第２
結像位置に移動する。この遷移時間ＷＴ２はミリ秒のオ
ーダであり、前述した第１の転送動作の時間と比較し
て、極めて長い。遷移時間ＷＴ２が経過すると、時刻ｔ
ｃから２回目の画像光の撮像動作が開始される。
【０２０５】さらに、時刻ｔｂでの受光データの転送が
終了すると、各ＣＣＤ群１３８，５２は、受光データを
外部の回路３５に出力するための第２の転送動作を開始
する。この第２の転送動作のための転送時間ＷＴ３は遷
移時間ＷＴ２よりも長いので、第２の転送動作は、２回
目の画像光の撮像動作と並行して実施される。
【０２０６】２回目の撮像動作が開始されると、まず時
刻ｔｃでオーバフロードレインが閉塞される。これによ
って、各受光領域ＰＤで電荷の蓄積が許容され、２回目
の露光動作が開始される。ドレイン閉塞の後に、シャッ
タ機構１４１の閉塞動作が開始される。２回目の撮像動
作時の露光時間ＷＴ４は、第１および第２撮像動作時に
同一光量の画像光が撮像装置に入射されると仮定したと
き、露光時間ＷＴ４の全露光量が、１回目の撮像動作時
の露光時間ＷＴ１の全露光量と同量になるように設定さ
れる。このシャッタ機構１４１の詳細な閉塞動作は後述
する。
【０２０７】シャッタ機構１４１は、時刻ｔｃから露光
時間ＷＴ４が経過した時刻ｔｄで完全に閉塞され、結像
面に入射すべき画像光を遮断する。これによって、２回
目の露光動作が終了する。このときオーバフロードレイ
ンが閉塞されているので、露光時間内に蓄積した電荷
は、そのまま受光領域ＰＤ内に保持される。この終了時
刻ｔｄには、まだ１回目の画像光撮像時の第２の転送動
作が終了していないので、各ＣＣＤ群１３８，５２は、
そのまま１回目の第２の転送動作を続ける。
【０２０８】１回目の第２の転送動作が終了すると、次
いで、２回目の画像光の撮像動作での受光データを、外
部の前処理回路３５に導出する。具体的には、時刻ｔｅ
で１回目の第２の転送動作が終了すると、まず各受光領
域ＰＤに対して電荷読出しパルスが印加されて２回目の
第１の転送動作が行われ、続いて２回目の第２の転送動
作が行われる。第１の転送動作終了後であれば、任意の
時点でシャッタ機構１４１を開放することができる。２
回目の第２の転送動作でも、転送時間ＷＴ３内に全ての
受光データが外部に出力されるので、時刻ｔｅから転送
時間ＷＴ３経過後の時刻ｔｆで、画像光の撮像動作を終
了する。
【０２０９】上述したシャッタ機構１４１の閉塞動作を
以下に詳細に説明する。
【０２１０】図２０は、シャッタ機構１４１の駆動装置
の電気的構成を示すブロック図である。シャッタ機構１
４１の駆動装置は、前述した動力源１５１，受光センサ
１５８の他に、目標値設定回路１７１、比較回路１７
２、増幅回路１７３を含んで構成される。
【０２１１】シャッタ機構１４１の閉塞動作での開口量
の経時変化は、前述した１回目および２回目の撮像動作
での露光時間内の露光量が等しくなるように予め設定さ
れる。目標値設定回路１７１は、この開口量の経時変化
に対応してシャッタ羽根１４１を動作させるための基本
駆動パターン信号を生成して、比較回路１７２に与え
る。比較回路１７２には、さらに前述した受光センサ１
５８からの出力信号が与えられる。比較回路１７２は、
基本駆動パターン信号と受光センサ１５８の出力信号と
の差分を演算して、増幅回路１７３に与える。増幅回路
１７３は、該差分を表す比較回路１７２の出力信号を、
予め定める増幅率で増幅して、動力源１５１の駆動信号
を生成する。動力源１５１は、この駆動信号に応答して
動作し、シャッタ機構１４１のシャッタ羽根１４４を駆
動する。このような手法によって、シャッタ機構１４１
は画像光を通過または遮断する。
【０２１２】上述の撮像装置の高解像度モードの撮像動
作の等価撮像時間について、以下に説明する。
【０２１３】第１実施形態で説明したように、等価撮像
時間は、単一の出力画像信号生成のための画像光の撮像
動作のうち、最初の画像光の撮像動作の露光開始から、
最後の画像光の撮像動作の露光終了までの時間である。
この時間が長いほど、出力画像の画質が被写体の動きお
よび装置の手ぶれの影響を受けやすくなり、画質が劣化
する。
【０２１４】図２１は、従来技術の４ポジションイメー
ジシフトを行う画像撮像装置における高解像度モードの
等価撮像時間を説明するためのタイミングチャートであ
る。この撮像装置は、図１７に示す全画素読出し型の撮
像素子１３１を有し、電子シャッタによって露光時間を
制御するものとする。この撮像装置の高解像度モードで
は、４つの原画像信号から、単一の出力画像信号を生成
するので、４回露光動作を行う。各露光動作が終了する
と、受光データの転送動作が行われる。２回目以後の露
光動作は、その終了タイミングが前回の撮像動作の第２
の転送動作の終了タイミング以後になるように行われ
る。これは、以下の理由からである。
【０２１５】電子シャッタの閉塞動作は、具体的には受
光素子ＰＤから電荷結合素子Ｃへの電荷を転送し、その
直径にオーバフロードレインを閉塞する動作で実現され
る。ゆえに、２回目以後の撮像動作で電子シャッタを閉
塞するとき、その前の撮像動作時の受光データと新たな
受光データとが混合されないように、撮像素子１３１の
各ＣＣＤ群１３８は、受光データの第２の転送動作を終
了して各電荷結合素子Ｃが新たな受光データを受けるこ
とができる状態にしておく。したがって、露光動作の終
了タイミングを、第２の転送動作の終了タイミング以後
に設定する。
【０２１６】このようなことから、従来技術の撮像装置
の等価撮像時間Ｔｅｓ０は、１回目の露光時間Ｔｓと１
〜３回目の転送時間Ｔｔとの和である。
【０２１７】 Ｔｅｓ０ ＝ Ｔｓ＋３・Ｔｔ …（19） 図２２は、本実施形態の撮像装置において、電子シャッ
タだけの露光制御を行うときの、高解像度モードの等価
撮像時間を示すタイミングチャートである。１回目およ
び２回目の露光動作の終了タイミングを、電子シャッタ
だけで制御するとき、上述の従来技術の撮像装置と同様
の理由から、２回目の露光動作の終了タイミングを、１
回目の第２の転送動作終了後に設定する。したがって、
このときの等価撮像時間Ｔｅｓ１は、１回目の露光時間
Ｔｓと１回目の転送時間Ｔｔとの和である。
【０２１８】 Ｔｅｓ１ ＝ Ｔｓ＋Ｔｔ …（20） 図２３は、本実施形態の撮像装置において、電子シャッ
タとシャッタ機構１４１とを併用して露光制御を行うと
きの、高解像度モードの等価撮像時間を示すタイミング
チャートである。シャッタ機構１４１は撮像素子１３１
の第２の転送動作とは無関係に画像光を遮断するので、
このときには、上述の例と異なり、２回目の露光動作の
動作タイミングと１回目の第２の転送動作の動作タイミ
ングとが無関係になる。ゆえに、２回目の露光動作は、
イメージシフト機構６２の遷移動作終了後であればいつ
でも実施できる。したがって、このときの等価撮像時間
Ｔｅｓ２は、１回目および２回目の露光時間が等しいと
仮定すると、１回目および２回目の露光時間Ｔｓと遷移
時間Ｔｄとの和である。
【０２１９】 Ｔｅｓ２ ＝ ２・Ｔｓ＋Ｔｄ …（21） 表１は、転送時間Ｔｔが（１／３０）秒、露光時間Ｔｓ
が（１／２４０）秒、および遷移時間Ｔｄが（１／２４
０）秒または（１／４８０）秒であるときの、高解像度
モードの等価露光時間Ｔｅｓ０，Ｔｅｓ１，Ｔｅｓ２を
示す。
【０２２０】
【表１】
【０２２１】上述の表から、遷移時間Ｔｄが（１／２４
０）秒のとき、本実施形態の撮像装置の電子シャッタだ
けの等価撮像時間Ｔｅｓ１は、従来技術の等価撮像時間
Ｔｅｓ０の約１／３に短縮される。またシャッタ併用の
等価撮像時間Ｔｅｓ２は、等価撮像時間Ｔｅｓ０の約１
／８に短縮される。さらに遷移時間Ｔｄが（１／４８
０）秒に短縮されると、シャッタ併用の等価撮像時間Ｔ
ｅｓ２はさらに短縮されて、等価撮像時間Ｔｅｓ０の約
１／１２になる。これによって、本実施形態の撮像装置
でシャッタを併用するとき、従来技術の撮像装置と比較
して、高解像度モードの等価撮像時間が大きく短縮され
ることがわかる。したがって、本実施形態の撮像装置を
用いると、被写体の移動および手ぶれの影響が少ない第
２出力画像を得ることができる。
【０２２２】また、上述の第１実施形態の撮像装置３１
の高解像度モードの等価撮像時間Ｔｅｓ３は、図２４か
ら、１回目の第１フィールドの露光時間Ｔｓと１回目の
第２フィールドならびに２回目の第１および第２フィー
ルドの転送時間Ｔｔ＊との和であることがわかる。
【０２２３】 Ｔｅｓ３ ＝ Ｔｓ＋３・Ｔｔ＊ …（22） この撮像装置３１にシャッタ機構１４１をさらに備えさ
せ、電子シャッタと併用させたとき、その高解像度モー
ドの等価撮像時間Ｔｅｓ４は、図２５から、１回目の第
１フィールドおよび２回目の第２フィールドの露光時間
Ｔｓと、１回目の第１フィールドおよび１回目の第２フ
ィールドの転送時間Ｔｔ＊と、２回目の遷移時間Ｔｄと
の和である。この等価撮像時間Ｔｅｓ４は、第１実施形
態の等価撮像時間Ｔｅｓ３よりも短縮されていることが
わかる。
【０２２４】 Ｔｅｓ４ ＝ ２・Ｔｓ＋２・Ｔｔ＊＋Ｔｄ …（23） なお、フィールドの転送時間Ｔｔ＊は、上述のフレーム
の転送時間Ｔｔの半分である。
【０２２５】色フィルタは、前述の撮像素子１３１の光
入射側に取付けられる。該色フィルタは、撮像素子１３
１の受光領域ＰＤと同数の透光領域Ｌを有し、該透光領
域Ｌを２次元平面上に受光領域ＰＤと等価な配列で並べ
て形成される。ゆえに、透光領域Ｌの数はＭ×Ｎ個であ
ってＭ行Ｎ列の行列状に配列され、透光領域Ｌの水平お
よび垂直方向Ｈ，Ｖの配列周期は、それぞれ周期ＰＨ，
ＰＶである。各透光領域Ｌは、それぞれ画像光を色分解
して、予め定める第１〜第４色彩光のいずれか１つだけ
を通過させる。第１〜第４色彩光は、補色系の黄、マゼ
ンタ、緑、シアンの４色である。
【０２２６】図２６は、上述の色フィルタの透光領域Ｌ
の色配列の基本配列パターン１８１を示す図である。こ
の基本配列パターン１８１は、４行２列に配列される８
つの透光領域Ｌからなり、同種の透光領域Ｌを２つずつ
含む。この基本配列パターン１８１において、透光領域
Ｌ（１，１），Ｌ（３，２）は、黄の色彩光を通過させ
る黄の透光領域Ｌである。透光領域Ｌ（２，１），Ｌ
（４，２）は、マゼンタの透光領域Ｌである。透光領域
Ｌ（３，１），Ｌ（１，２）は、シアンの透光領域Ｌで
ある。透光領域Ｌ（４，１），Ｌ（２，２）は、緑の透
光領域Ｌである。
【０２２７】上述の撮像装置の通常モードの画像光の撮
像動作を以下に説明する。このときの撮像装置の各構成
要素の挙動は、第１実施形態の撮像装置３１の通常モー
ドでの挙動と類似し、同一の動作に関する詳細な説明は
省略する。
【０２２８】通常モードで画像光を撮像するとき、光学
系３３ａのイメージシフト機構６２および可変空間フィ
ルタ９０は、予め定める第１状態に固定される。また、
シャッタ機構１４１は開放される。画像光は、この光学
系３３ａを介して入射され、第１結像位置に結像され
る。撮像素子１３１は、画像光を撮像して、原画像信号
を出力する。原画像信号は、前処理回路３５で処理され
た後にデジタル信号に変換されて、画像メモリ３７に個
別的にストアされる。
【０２２９】この原画像信号の画素Ｄの配列および各画
素Ｄと受光データとの対応関係は、色フィルタの透光領
域Ｌの画素配列および色配列と等価である。すなわち、
原画像の画素Ｄの基本配列パターンは、図２６の透光領
域Ｌの色配列の基本配列パターン１８１と等しく、４行
２列に配列された８個の画素Ｄから成り、各画素Ｄはパ
ターン１８１内で対応する透光領域Ｌを通過する色彩光
の受光データだけを有する。
【０２３０】信号処理回路４４は、単一の原画像信号か
ら、第１出力画像信号の輝度信号および２種類の色差信
号を求める。たとえば第６行第２列の画素Ｄ（６，２）
の輝度データＹ（６，２）、色差データ（Ｒ−Ｙ）
（６，２），（Ｂ−Ｙ）（６，２）は、以下の式で示さ
れる。画素Ｄ（６，２）は、緑の受光データだけの対応
画素である。
【０２３１】
【数７】
【０２３２】これら各信号のデータＹ、（Ｒ−Ｙ），
（Ｂ−Ｙ）は、各画素Ｄ毎に個別的に直接求めることが
できる。ゆえに、原画像の対応画素は、全て輝度データ
および２種類の色差データの実画素となるので、第１出
力画像の実画素の数および配列は、原画像の対応画素の
数および配列と等しい。
【０２３３】原画像の全ての対応画素の配列は、透光領
域Ｌの配列と等価であるので、該配列の水平、垂直、お
よび斜め方向Ｈ，Ｖ，Ｕの配列周期は、図２６からそれ
ぞれ周期ＰＨ，ＰＶ，ＰＵとわかる。このことから、こ
の第１出力画像信号の輝度信号の水平、垂直、および斜
め方向Ｈ，Ｖ，Ｕのサンプリング周波数は、それぞれ空
間周波数ｆＨ，ｆＶ，ｆｕとみなされる。また、同一種
類の対応画素だけの配列は、透光領域Ｌの色配列と等価
であるので、該配列の水平および垂直方向Ｈ，Ｖの配列
周期は、図２６から、それぞれ周期ＰＨ，２ＰＶとわか
る。このことから、色差信号の水平および垂直方向Ｈ，
Ｖのサンプリング周波数は、それぞれ空間周波数ｆＨ，
ｆＶ／２とみなされる。
【０２３４】図２７は、上述した第１出力画像信号の輝
度の基底帯域１８２、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域１８２の水平、垂直および斜め方向Ｈ，Ｖ，Ｕ
の空間周波数軸上の範囲は、第１実施形態の撮像装置３
１の第１出力画像信号の輝度の基底帯域１１１の各範囲
と等しい。
【０２３５】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１８
２は、以下の４箇所を頂点とする矩形領域である。
【０２３６】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） この基底帯域１８２内に現れる色差信号のモアレのキャ
リア周波数は、以下の３箇所に存在する。
【０２３７】（−ｆＨ／２，ｆＶ／４） （ ０，ｆＶ／２） （ ｆＨ／２，ｆＶ／４） この３箇所のキャリア周波数は、全て黄、シアン、マゼ
ンタおよび緑の受光データの対応画素の配列周期から得
られる。
【０２３８】全画素読出し型の撮像素子１３１を用いる
本実施形態の撮像装置の第１出力画像信号と、２画素混
合読出し型の撮像素子３４を用いる第１実施形態の撮像
装置３１の第１出力画像信号とを、この空間周波数平面
図を用いて比較する。本実施形態の第１出力画像信号
は、第１実施形態の該信号と比較して、基底帯域１８２
の大きさおよび形状は等しいが、水平方向Ｈの空間周波
数軸上にモアレのキャリア周波数が存在しない。したが
って、水平方向Ｈの空間周波数成分を減衰させることな
く、空間周波数±ｆＨ／２まで保つことができるので、
第１実施形態の第１出力画像と比較して水平方向Ｈの解
像度を向上させることができる。
【０２３９】また、第１実施形態の第１出力画像信号に
現れるモアレのキャリア周波数のうち、（０，ｆＶ／
４），（ｆＨ／２，０），（−ｆＨ／２，０），（ｆＨ
／２，ｆＶ／２），（−ｆＨ／２，ｆＶ／２）が消えて
いるので、これらを中心周波数とする折返し成分に起因
する色モアレが消滅する。したがって、色モアレが少な
くなり、画像の画質が向上する。
【０２４０】上述の撮像装置の高解像度モードの画像光
の撮像動作を以下に説明する。このときの撮像装置の各
構成要素の挙動は、第１実施形態の撮像装置６１の高解
像度モードでの挙動と類似し、同一の動作に関する詳細
な説明は省略する。
【０２４１】画像光を撮像するとき、可変空間フィルタ
９０は、予め定める第２状態に固定される。イメージシ
フト機構６２は、画像光の結像位置を、水平方向に長さ
ＰＨだけ離れた前述の第１および第２結像位置Ｑａ１，
Ｑｂ１に移動させる。撮像素子１３１は、この光学系３
３ａを介して入射した画像光を、図１９に示す手順で撮
像して、第１および第２原画像信号を出力する。各原画
像信号は、前処理回路３５で処理された後にデジタル信
号に変換されて、画像メモリ３７に関連してストアされ
る。
【０２４２】信号処理回路４４は、まず第１および第２
原画像信号を撮像時の結像位置の移動方向とは逆向きに
同じシフト長さだけずらして重ね合わせて、合成画像信
号を生成する。この合成手法は第１実施形態と等しい。
この合成画像の各対応画素には、２種類の色彩光の受光
データが対応する。合成画像の対応画素数および配列
は、原画像の対応画素数および配列と等しく、その水平
および垂直方向Ｈ，Ｖの配列周期は、それぞれ周期Ｐ
Ｈ，ＰＶである。
【０２４３】図２８は、上述した合成画像の等価的な画
素Ｄの配列基本配列パターン１８３を示す図である。こ
の基本配列パターン１８３は、８行２列に配列される８
個の画素Ｄからなる。画素Ｄ（１，１），Ｄ（１，
２），Ｄ（３，１），Ｄ（３，２）には黄およびシアン
の受光データがそれぞれ対応する。画素Ｄ（２，１），
Ｄ（２，２），Ｄ（４，１），Ｄ（４，２）には、緑お
よびマゼンタの受光データがそれぞれ対応する。
【０２４４】次いで、信号処理回路４４は、この基本配
列パターン１８３の合成画像信号から、第２出力画像信
号の輝度信号および２種類の色差信号を求める。たとえ
ば第６行第２列の画素Ｄ（６，２）の輝度データＹ
（６，２）、色差データ（Ｒ−Ｙ）（６，２），（Ｂ−
Ｙ）（６，２）は、以下の式で示される。画素Ｄ（６，
２）は、緑およびマゼンタの受光データの対応画素であ
る。
【０２４５】
【数８】
【０２４６】これら各信号のデータＹ、（Ｒ−Ｙ），
（Ｂ−Ｙ）は、各画素Ｄ毎に個別的に直接求めることが
できる。ゆえに、原画像の対応画素は、全て輝度データ
の実画素となるので、第２出力画像の輝度データの実画
素の数および配列は、原画像の対応画素の数および配列
と等しい。
【０２４７】図２９は、上述した第２出力画像信号の輝
度の基底帯域１８４、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域１８４の水平、垂直および斜め方向Ｈ，Ｖ，Ｕ
の空間周波数軸上の範囲は、上述した第１出力画像信号
の輝度の基底帯域１８２の各範囲と等しい。
【０２４８】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１８
４は、以下の４箇所を頂点とする矩形領域である。
【０２４９】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） この基底帯域１８４内に現れる色差信号のモアレのキャ
リア周波数は、以下の１箇所だけに存在する。
【０２５０】（ ０，ｆＶ／２） 図２７および図２９の第１および第２出力画像信号の輝
度の基底帯域１８２，１８４を比較すると、その大きさ
および形状は変化していないが、基底帯域１８４では垂
直方向Ｖの空間周波数軸上の（０，ｆＶ／２）以外のモ
アレのキャリア周波数が全て消滅している。これによっ
て、フィルタ制限後の基底帯域１８４の水平方向Ｈの空
間周波数軸上の実質の幅は、空間周波数±ｆＨ／２以下
の基底帯域１８４の範囲全域まで拡大される。また、垂
直方向Ｖの実質の幅が、空間周波数±ｆＶ／２近傍まで
拡大される。これによって、第１出力画像と比較して、
第２出力画像の水平および垂直解像度が向上する。
【０２５１】本発明の第３実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の光学系および色フィ
ルタ以外の構成要素は、第２実施形態の撮像装置と等し
く、同一の構成要素には、同一の符号を付し、説明は省
略する。本実施形態の撮像装置は、全画素読出し型の撮
像素子１３１を用い、通常モードおよび高解像度モード
で画像光を撮像し、異なる解像度の第１および第２出力
画像信号を得る。
【０２５２】撮像装置の光学系のうち、イメージシフト
機構６２および可変空間フィルタ９０の内部構造は等し
いが、その設置状態が異なる。機構６２については後述
する。フィルタ９０は、複屈折板９１の分離ベクトルＢ
１が、水平方向Ｈと平行になるように設置される。これ
によって、第２状態のフィルタ９０は、水平方向Ｈの空
間周波数成分のうち、空間周波数±ｆＨ／２の成分の振
幅を減衰させる。
【０２５３】色フィルタは、その設置場所、通過可能な
色彩光の組合せ、ならびに透光領域Ｌの数および配列が
第２実施形態の色フィルタと等しく、色配列だけが異な
る。ゆえに、第１〜第４色彩光は、補色系の黄、マゼン
タ、緑、シアンの４色である。透光領域Ｌの水平および
垂直方向Ｈ，Ｖの配列周期は、それぞれ周期ＰＨ，ＰＶ
である。
【０２５４】図３０は、上述の色フィルタの透光領域Ｌ
の色配列の基本配列パターン１８６を示す図である。こ
の基本配列パターン１８６は、２行４列に配列される８
つの透光領域Ｌからなり、同種の透光領域Ｌを２つずつ
含む。この基本配列パターン１８６において、透光領域
Ｌ（１，１），Ｌ（２，３）は、黄の色彩光を通過させ
る黄の透光領域Ｌである。透光領域Ｌ（１，２），Ｌ
（２，４）は、マゼンタの透光領域Ｌである。透光領域
Ｌ（１，３），Ｌ（２，１）は、シアンの透光領域Ｌで
ある。透光領域Ｌ（１，４），Ｌ（２，２）は、緑の透
光領域Ｌである。この基本配列パターン１８６は、水平
および垂直方向Ｈ，Ｖの配列周期を保ったまま、第２実
施形態の撮像装置の色フィルタの基本配列パターン１８
１の透光領域Ｌの色配列だけを水平および垂直方向Ｈ，
Ｖに対して入換えた配列である。
【０２５５】撮像素子１３１は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素の配列および各画素と受光データ
との対応関係は、この色フィルタの透光領域Ｌの配列お
よび色配列と等価であり、各対応画素は単一の色彩光の
受光データだけを有する。
【０２５６】通常モードの画像光の撮像動作は、第２実
施形態の通常モードの画像光の撮像動作と類似し、光学
系、撮像素子３４、回路３５，３６、および画像メモリ
３７の挙動は、第２実施形態と等しい。信号処理回路４
４は、単一の原画像信号から、第１出力画像信号の輝度
信号および２種類の色差信号を求める。このときの算出
式は、上述の式（２４）〜式（２６）と類似であり、各
受光データの属する画素の行列番号を行および列に関し
て入換えた点だけが異なる。
【０２５７】このようにして得られた第１出力画像信号
の輝度の基底帯域は、図２７の基底帯域１８２を第１斜
め方向Ｕｘの空間周波数軸を基準軸とする線対称な図形
である。この基底帯域内に現れる色差信号のモアレのキ
ャリア周波数もまた、第１斜め方向Ｕｘの空間周波数軸
を基準軸として、図２７のモアレのキャリア周波数の位
置と線対称の位置に現れる。したがって、これら基底帯
域およびモアレのキャリア周波数を表す空間周波数平面
図は、図２７の空間周波数平面図の水平および垂直方向
Ｈ，Ｖの空間周波数だけを入換えた図と等しい。この理
由を以下に説明する。
【０２５８】前述したように、空間周波数平面図に現さ
れる空間周波数成分のうち、任意の空間周波数（ｆｈ，
ｆｖ）と空間周波数（−ｆｈ，−ｆｖ）との成分は、共
役関係にある。
【０２５９】 Ｆ（ｆｈ，ｆｖ）＝Ｆ（−ｆｈ，−ｆｖ）＊ …（12） 上式に基づいて、空間周波数ｆｖの範囲が０以上である
第１およ第２象限に関して、空間周波数ｆｈ，ｆｖを入
換えた場合を考えると、入換え後の空間周波数成分Ｆａ
（ｆｈ，ｆｖ）には、以下の関係がある。
【０２６０】 Ｆａ（ｆｈ，ｆｖ）＝Ｆａ（−ｆｈ，−ｆｖ）＊ ＝Ｆ（ｆｖ，ｆｈ） ＝Ｆ（−ｆｖ，−ｆｈ）＊ …（30） この関係から、該実施形態の空間周波数平面図は、図２
７の空間周波数軸を入れ換えた図と等しくなる。
【０２６１】この図から、水平方向Ｈの空間周波数軸上
の基底帯域の境界線上に、モアレのキャリア周波数があ
ることがわかる。したがって、第１出力画像信号の水平
方向Ｈの空間周波数成分は、空間周波数±ｆＨ／２未満
に制限される。また、垂直方向Ｖの空間周波数軸上の基
底帯域の内部（±ｆＨ／４，ｆＶ／２）にモアレのキャ
リア周波数があり、これを中心周波数とする色モアレ縞
が現れる。
【０２６２】高解像度モードの画像光の撮像動作は、第
２実施形態の高解像度モードの画像光の撮像動作と類似
し、光学系、撮像素子３４、回路３５，３６、および画
像メモリ３７の挙動は、第２実施形態と等しい。このと
き、第１および第２結像位置は、垂直方向Ｖに沿って、
受光領域ＰＤの配列周期の長さＰＶだけ離れる位置関係
を保つ。イメージシフト機構６２の屈折板７１の仮想基
準軸線、および第２状態の屈折板７１の傾斜角度は、こ
の位置関係に応じて画像光の光軸を平行移動させること
ができるように、第２実施形態の設置状態と比較して、
各部材の水平および垂直方向Ｈ，Ｖを入換えて設置され
る。信号処理回路４４は、２つの原画像信号から、第２
出力画像信号の輝度信号および２種類の色差信号を求め
る。このとき、合成画像の生成手法は第２実施形態の手
法と等しい。また、算出式は、上述の式（２７）〜式
（２９）と類似であり、各受光データの属する画素Ｄの
行列番号を行および列に関して入換えた点だけが異な
る。
【０２６３】この第２出力画像信号の輝度の基底帯域
は、第１斜め方向Ｕｘの空間周波数軸に対して、図２９
の基底帯域１８４の線対称の図形である。この基底帯域
内に現れる色差信号のモアレのキャリア周波数もまた、
該空間周波数軸に対して、図２９のモアレのキャリア周
波数の位置と線対称の位置に現れる。したがって、これ
ら基底帯域およびモアレのキャリア周波数を表す空間周
波数平面図は、図２９の空間周波数平面図の水平および
垂直方向Ｈ，Ｖの空間周波数軸だけを入換えた図と等し
い。
【０２６４】この図から、第１および第２出力画像信号
の輝度の基底帯域は等しいことが分かる。また、垂直方
向Ｖの空間周波数軸上の色差信号のモアレのキャリア周
波数が消えるので、これを中心周波数とする色モアレが
消滅する。これによって、第２出力画像信号は、第１出
力画像信号よりも垂直方向Ｖの解像度が向上し、また画
像の画質が向上する。
【０２６５】本発明の第４実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の光学系および色フィ
ルタ以外の構成要素は、第１実施形態の撮像装置と等し
く、同一の構成要素には、同一の符号を付し、説明は省
略する。本実施形態の撮像装置は、２画素混合読出し型
の撮像素子３４を用い、通常モードおよび高解像度モー
ドで画像光を撮像して、異なる解像度の第１および第２
出力画像信号を得る。
【０２６６】光学系は、第１実施形態の光学系３３と類
似の構成を有し、以下の点だけが異なる。まず、イメー
ジシフト機構６２の設置状態は、後述する第１および第
２結像位置に合わせて変更される。また、可変空間フィ
ルタ９０に代わって、後述する可変空間フィルタ２０１
が設置される。該フィルタ２０１の詳細は後述する。
【０２６７】色フィルタは、設置場所、透光領域Ｌの数
および配列が、第１実施形態の色フィルタと等しく、色
彩光の組合せおよび色配列が異なる。この色フィルタ
は、各透光領域Ｌ毎に、通過可能な第１〜第３色彩光の
いずれか１つを通過させる。第１〜第３色彩光は、原色
系の赤、青、および緑の３色である。透光領域Ｌの水平
および垂直方向Ｈ，Ｖの配列周期は、それぞれ周期Ｐ
Ｈ，ＰＶである。
【０２６８】図３１は、上述した色フィルタの透光領域
Ｌの色配列の基本配列パターン１９１を示す図である。
この基本配列パターン１９１は、２行３列に配列される
６つの透光領域Ｌからなり、同種の透光領域Ｌを２つず
つ含む。この基本配列パターン１８６において、透光領
域Ｌ（１，１），Ｌ（２，１）は、赤の色彩光を通過さ
せる赤の透光領域Ｌである。透光領域Ｌ（１，２），Ｌ
（２，２）は、緑の透光領域Ｌである。透光領域Ｌ
（１，３），Ｌ（２，３）は、青の透光領域Ｌである。
この色フィルタは、同種の色彩光の透光領域Ｌが垂直方
向Ｖに沿って並ぶので、各列の透光領域Ｌは、同種の色
彩光だけを通過させる。
【０２６９】撮像素子３４は、この色フィルタを介して
結像される画像光を撮像して、原画像信号を出力する。
原画像信号の画素の配列は、この色フィルタの透光領域
Ｌの配列と等価である。また、前述した色フィルタの色
配列から、各列を構成する受光領域ＰＤが同種類の色彩
光を受光することが分かる。このことから、垂直転送Ｃ
ＣＤ群５１の各電荷結合素子Ｃでは、同種の色彩光の受
光データが２つ混合されて、混合データが生成される。
したがって、この混合データは単一の色彩光の受光量を
表す。これらのことから、原画像信号の画素と混合デー
タとの対応関係は、図３１の色フィルタの色配列と等価
であることがわかる。
【０２７０】可変空間フィルタ２００について、以下に
説明する。可変空間フィルタ２００は、光学系内の任意
の位置に設置される。該フィルタ２００は、本実施形態
の撮像装置の通常および高解像度モードに応じて、第１
および第２状態に切換えられ、各モードに応じた減衰量
で、画像光の空間周波数成分の振幅を減衰させる。可変
空間フィルタ２００は、第１実施形態の可変空間フィル
タ９０と類似の構造を有する。
【０２７１】図３２は、可変空間フィルタ２００の具体
的な構成を示す斜視図である。該フィルタ２００は、３
枚の複屈折板２０１〜２０３が、画像光の光軸６４上
に、光入射側からこの順で配列されて形成される。複屈
折板２０１〜２０３はたとえば水晶板で実現され、光入
射側の画像光の光軸６４とそれぞれ直交する入射面およ
び射出面を有する。また、屈折板２０３は、光軸６４と
一致した仮想回転中心軸線を中心として回転可能であ
り、第１および第２状態が切換えられると同時に９０度
だけ角変位するように回転駆動される。
【０２７２】図３３は、フィルタ２００が第１状態にあ
るときの各複屈折板２０１〜２０３の分離ベクトルＢ４
〜Ｂ６を示す図である。この分離ベクトルＢ４〜Ｂ６
は、前述した単位ベクトルｉ，ｊ，ｋによって、以下の
式で規定される。
【０２７３】
【数９】
【０２７４】上式から、複屈折板２０１〜２０３の分離
ベクトルＢ４〜Ｂ６の向きは、それぞれ、反時計まわり
に水平方向Ｈと０度，−４５度，−１３５度を成す向き
であることが分かる。また、これら複屈折板２０１〜２
０３の異常光の分離長さは、それぞれ以下のとおりであ
る。
【０２７５】
【数１０】
【０２７６】この複屈折板２０１〜２０３内の常光およ
び異常光の挙動は、分離ベクトルの向きおよび異常光の
分離長さを除いて可変空間フィルタ９０の複屈折板９１
〜９３での挙動と等しい。
【０２７７】上述した可変空間フィルタ２００が第１状
態にあるとき、複屈折板２０３は、分離ベクトルが図３
３（ｃ）に示す状態に保たれる。このとき、フィルタ２
００を通過する画像光の挙動を、図３４を用いて、以下
に説明する。
【０２７８】図３４（ａ）〜図３４（ｃ）は、第１状態
の可変空間フィルタ２００において、画像光の常光およ
び異常光が複屈折板２０１〜２０３を通過した位置をそ
れぞれ示す仮想結像面を示す図である。この仮想結像面
の設定は格子の軸線の間隔を除いて図９の仮想結像面と
等しく、これと同等に取扱う。また、各仮想結像面上に
描かれる格子の軸線は、水平および垂直方向Ｈ，Ｖに、
それぞれ間隔３ＰＨ／４、３ＰＨ／４で配列される。
【０２７９】第１状態の可変空間フィルタ２００におい
て、フィルタ入射前の画像光と仮想結像面との光軸の交
点を座標（３，２）とする。この画像光は、複屈折板２
０１に入射して、複屈折板２０１に対する常光と異常光
とに分離される。該常光の射出側の光軸の交点は、座標
（３，２）である。また、異常光の射出側の光軸は、入
射側の光軸の延長線からみて、分離ベクトルＢ４と同じ
向きに同じ長さだけ移動しており、その光軸の交点は座
標（３，３）である。
【０２８０】この１対の常光および異常光は、それぞれ
同一の座標から複屈折板２０２に入射し、それぞれ該複
屈折板２０２に対する常光および異常光に分離される。
複屈折板２０１の常光および異常光のうち、複屈折板２
０２に対する常光は、そのまま複屈折板２０１を通過す
るので、その光軸の交点は座標（３，２），（３，３）
である。また、複屈折板２０１の常光および異常光の複
屈折板２０２に対する異常光の光軸は、それぞれ座標
（３，２），（３，３）の光軸の延長線からみて、分離
ベクトルＢ５と同じ向きに同じ長さだけ移動しており、
その光軸の交点は、それぞれ座標（４，３），（４，
４）である。
【０２８１】この２対の常光および異常光は、同一の座
標から複屈折板２０３に入射する。複屈折板２０２，２
０３の分離ベクトルＢ５，Ｂ６は相互に直交するので、
複屈折板２０２の常光および異常光は、それぞれ複屈折
板２０３に対する異常光および常光になる。したがっ
て、座標（３，２），（３，３）の複屈折板２０２の常
光は、複屈折板２０３の異常光となる。これによって、
該複屈折板２０３の異常光の光軸は、座標（３，２），
（３，３）の光軸の延長線からみて、分離ベクトルＢ６
と同じ向きに同じ長さだけ移動しており、その交点はそ
れぞれ座標（４，１），（４，２）である。また同様
に、座標（４，３），（４，４）の複屈折板２０２の異
常光は、複屈折板２０３の常光となるので、そのまま複
屈折板２０３を通過する。ゆえに、これら複屈折板２０
３の常光の光軸の交点はそれぞれ座標（４，３），
（４，４）である。
【０２８２】このように、複屈折板２０１〜２０３を順
次的に通過した画像光は２対の常光および異常光に分離
される。これら常光および異常光の各対の光軸と仮想結
像面との交点、すなわち、白丸と黒丸との記号で表され
る対、および白四角と黒四角との記号で表される対の交
点は、水平方向Ｈに平行に、間隔３ＰＨ／２だけそれぞ
れ離れる。また、白丸と白四角との記号で表される常光
の交点の対、および黒丸と黒四角との記号で表される異
常光の交点の対は、水平方向Ｈに平行に、間隔３ＰＨ／
４だけそれぞれ離れる。このように分離された画像光に
ついて、第１減衰量を表す伝達関数を求めると、画像光
の空間周波数成分のうち、水平方向Ｈに関して、空間周
波数±ｆＨ／３，±２ｆＨ／３の成分のレスポンスがな
くなるように、該空間周波数の成分の振幅が減衰される
ことがわかる。
【０２８３】また、上述した可変空間フィルタ２００が
第２状態にあるとき、複屈折板２０３は、第１状態から
９０度角変位され、分離ベクトルＢ６ａが図３５に示す
状態に保たれる。この分離ベクトルＢ６ａは、前述した
単位ベクトルｉ，ｊを用いて、以下のように表される。
【０２８４】
【数１１】
【０２８５】分離ベクトルＢ６ａの向きは、水平方向Ｈ
と反時計まわりで１３５度を成す向きである。
【０２８６】このとき、フィルタ２００を通過する画像
光の挙動を、図３４（ａ），（ｂ）および図３６の仮想
結像面を用いて、以下に説明する。図３６の仮想結像面
は、画像光の光軸の交点の位置を除いて、図３４（ｃ）
の仮想結像面と等しく、同様に取扱う。
【０２８７】第２状態の可変空間フィルタ２００におい
て、フィルタ入射前の画像光の光軸と仮想結像面との交
点を座標（３，２）とする。この画像光が、複屈折板２
０１，２０２を通過するときの挙動は、第１状態のとき
と等しいので、説明は省略する。
【０２８８】複屈折板２０３には、複屈折板２０２に対
する座標（３，２），（３，３）の常光、および座標
（４，３），（４，４）の異常光が、この同一の座標か
ら入射する。
【０２８９】複屈折板２０２，２０３の分離ベクトルＢ
５，Ｂ６ａは相互に平行であり、向きだけが相反する。
したがって、複屈折板２０２の常光および異常光は、そ
のまま複屈折板２０３に対する常光および異常光にな
る。したがって、座標（３，２），（３，３）の複屈折
板２０２の常光は、複屈折板２０３の常光となるので、
そのまま複屈折板２０３を通過する。ゆえに、これら複
屈折板の常光の光軸の交点は、座標（３，２），（３，
３）である。また、座標（４，３），（４，４）の複屈
折板２０２の異常光は、複屈折板２０３の異常光とな
る。これによって、該複屈折板２０３の異常光の光軸
は、座標（４，３），（４，４）の光軸の延長線からみ
て、分離ベクトルＢ６ａと同じ向きに同じ長さだけ移動
しており、その交点はそれぞれ座標（３，２），（３，
３）である。
【０２９０】このように、複屈折板２０２，２０３の分
離ベクトルＢ５，Ｂ６ａが平行で向きが相反するとき、
複屈折板２０２に対する常光および異常光の光軸の交点
が、複屈折板２０３通過後に一致する。これによって、
複屈折板２０２，２０３での光の分離効果が打消され
る。したがって、複屈折板２０３通過後の画像光の分離
状態は、複屈折板２０１通過直後の状態に戻る。
【０２９１】このように複屈折板２０１〜２０３を順次
的に通過した画像光は、１対の常光および異常光に分離
される。この常光および異常光の光軸と仮想結像面との
交点は、水平方向Ｈに平行に、間隔３ＰＨ／４だけ離れ
る。このように分離された画像光に関して、第２減衰量
を表す伝達関数を求めると、画像光の空間周波数成分の
うち、空間周波数±２ｆＨ／３の成分のレスポンスだけ
がなくなるように、該空間周波数成分の振幅が減衰され
ることが分かる。この第２減衰量と通常モードの第１減
衰量とを比較すると、水平方向Ｈに関する空間周波数成
分のレスポンスがなくなる空間周波数軸上の位置と軸の
原点との距離が２倍になることが分かる。
【０２９２】このような構造の撮像装置の通常モードお
よび高解像度モードの撮像動作を以下に説明する。
【０２９３】通常モードの画像光の撮像動作は、第１実
施形態の通常モードの画像光の撮像動作と類似し、光学
系、撮像素子３４、回路３５，３６、および画像メモリ
３７の挙動は、第１実施形態と等しい。信号処理回路４
４は、単一の原画像信号から、第１出力画像信号の輝度
信号および２種類の色差信号を求める。たとえば第１行
第５列の画素Ｄ（１，５）の輝度データＹ（１，５）、
色差データ（Ｒ−Ｙ）（１，５），（Ｂ−Ｙ）（１，
５）は、以下の式で示される。画素Ｄ（１，５）は、緑
の混合データだけの対応画素である。
【０２９４】
【数１２】
【０２９５】これの輝度データＹは、各画素Ｄ毎に個別
的に直接求めることができる。ゆえに、原画像の対応画
素は、全て輝度データの実画素となるので、第１出力画
像信号の輝度信号の実画素の数および配列は、原画像の
対応画素の数および配列と等しい。
【０２９６】原画像の全ての対応画素の配列の水平、垂
直、および斜め方向Ｈ，Ｖ，Ｕの配列周期は、図３１か
らそれぞれ周期ＰＨ，ＰＶ，ＰＵとわかる。このことか
ら、この第１出力画像信号の輝度信号の水平、垂直、お
よび斜め方向Ｈ，Ｖ，Ｕのサンプリング周波数は、それ
ぞれ空間周波数ｆＨ，ｆＶ，ｆｕとみなされる。また、
同一種類の対応画素だけの配列の水平および垂直方向
Ｈ，Ｖの配列周期は、図３１から、それぞれ周期３Ｐ
Ｈ，ＰＶとわかる。このことから、色差信号の水平およ
び垂直方向Ｈ，Ｖのサンプリング周波数は、それぞれ空
間周波数ｆＨ／３，ｆＶとみなされる。
【０２９７】図３７は、上述した第１出力画像信号の輝
度の基底帯域１９２、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域１９２の水平、垂直および斜め方向Ｈ，Ｖ，Ｕ
の空間周波数軸上の範囲は、第１実施形態の撮像装置３
１の第１出力画像信号の輝度の基底帯域１１１の各範囲
と等しい。
【０２９８】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１９
２は、以下の４箇所を頂点とする矩形領域である。
【０２９９】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） この基底帯域１９２内に現れる色差信号のモアレのキャ
リア周波数は、以下の２箇所に存在する。
【０３００】（−ｆＨ／３，０） （ ｆＨ／３，０） 上述した第１状態の可変空間フィルタ２００の第１減衰
量は、基底帯域１９２のうち、空間周波数±ｆＨ／３近
傍の空間周波数成分を減衰させるように定められる。こ
れによって、基底帯域１９２の水平方向Ｈの所望信号成
分の振幅が、水平方向Ｈの空間周波数±ｆＨ／３の部分
で０になるように制限される。このため、基底帯域１９
２の水平方向Ｈの空間周波数軸上の実質の幅が空間周波
数±ｆＨ／３未満に縮小されるので、第１出力画像の水
平方向Ｈの実質の解像度は、その分だけ基底帯域１９２
から推測される理想の解像度よりも低下する。
【０３０１】高解像度モードの画像光の撮像動作は、第
１実施形態の高解像度モードの画像光の撮像動作と類似
し、光学系、撮像素子３４、回路３５，３６、および画
像メモリ３７の挙動は、第１実施形態と等しい。このと
き、イメージシフト機構６２は、画像光の結像位置を、
以下の２箇所に移動させる。
【０３０２】図３８は、上述した高解像度モードの画像
光の撮像動作における第１および第２結像位置の位置関
係を示す図である。第１結像位置Ｑａ４を基準とする
と、第２結像位置Ｑｂ４は、水平方向Ｈに受光領域ＰＤ
の配列周期の長さ３ＰＨ／２だけ、かつ垂直方向Ｖに該
配列周期の長さＰＶ／２だけ離れる。イメージシフト機
構６２の仮想基準軸線の設置状態、および第２状態の屈
折板７１の傾斜角度は、これら結像位置がこの位置関係
をなすように定められる。
【０３０３】信号合成回路４４は、まず、第１実施形態
と同じ手法で第１および第２原画像信号から合成画像信
号を生成する。この合成画像は、２Ｍ行２Ｎ列に配列さ
れる２Ｍ×２Ｎ個の画素Ｄからなり、これら画素Ｄのう
ち、半数の画素が対応画素であり、残余の画素が混合デ
ータが対応しない仮想画素である。合成画像の水平およ
び垂直方向Ｈ，Ｖの画素の配列周期は、それぞれ周期Ｐ
Ｈ／２，ＰＶ／２である。
【０３０４】図３９は、上述の合成画像信号が表す合成
画像の等価的な画素Ｄの配列の基本配列パターン１９３
を示す図である。以後、画素の基本配列パターンを表す
図では、仮想画素を破線の矩形領域で表す。この基本配
列パターン１９３は、２行６列に配列される１２個の画
素からなる。画素Ｄ（１，１），Ｄ（２，４）は、赤の
混合データの対応画素である。画素Ｄ（１，３），Ｄ
（２，６）は、緑の混合データの対応画素である。画素
Ｄ（１，５），Ｄ（２，２）は、青の混合データの対応
画素である。上述以外の残余の画素Ｄは、全て仮想画素
である。このことから、合成画像では、実画素が市松状
に配列されることがわかる。
【０３０５】信号処理回路４４は、この合成画像信号か
ら、第２出力画像信号の輝度信号および２種類の色差信
号を求める。たとえば第２行第６列の画素Ｄ（２，６）
の輝度データＹ（２，６）、色差データ（Ｒ−Ｙ）
（２，６），（Ｂ−Ｙ）（２，６）は、以下の式で示さ
れる。画素Ｄ（２，６）は、緑の混合データだけの対応
画素である。
【０３０６】
【数１３】
【０３０７】これの輝度データＹは、合成画像の各対応
画素だけ個別的に直接求めることができる。仮想画素の
輝度データは、周囲の対応画素の算出結果から補間す
る。ゆえに、合成画像の対応画素は、全て輝度データの
実画素となるので、第１出力画像の輝度信号の実画素の
数および配列は、合成画像の対応画素の数および配列と
等しく市松状に配列される。
【０３０８】合成画像の全ての対応画素の配列の水平、
垂直、および斜め方向Ｈ，Ｖ，Ｕの配列周期は、図３９
からそれぞれ周期ＰＨ／２，ＰＶ／２，ＰＵとわかる。
このことから、この第２出力画像信号の輝度信号の水
平、垂直、および斜め方向Ｈ，Ｖ，Ｕのサンプリング周
波数は、それぞれ空間周波数２ｆＨ，２ｆＶ，ｆｕとみ
なされる。また、同一種類の対応画素だけの配列の水平
および垂直方向Ｈ，Ｖの配列周期は、図３９から、それ
ぞれ周期３ＰＨ／２，ＰＶ／２とわかる。このことか
ら、色差信号の水平および垂直方向Ｈ，Ｖのサンプリン
グ周波数は、それぞれ空間周波数２ｆＨ／３，２ｆＶと
みなされる。
【０３０９】図４０は、上述の第２出力画像信号の輝度
の基底帯域１９４、および色差信号のモアレのキャリア
周波数の位置を示す空間周波数平面図である。輝度の基
底帯域１９４の水平および垂直方向Ｈ，Ｖの空間周波数
軸上の範囲は、第１出力画像信号の輝度の基底帯域１９
２の各範囲の２倍に拡大される。また斜め方向Ｕの空間
周波数軸上の範囲は、第１出力画像信号の範囲と等し
い。これら基底帯域１９４の各範囲は、以下の式で表さ
れる。
【０３１０】 −ｆＨ≦ｆ≦ｆＨ …（41） −ｆＶ≦ｆ≦ｆＶ …（42） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域１９
４は、以下の３箇所を頂点とする三角形領域である。
【０３１１】（−ｆＨ， ０） （ ｆＨ， ０） （ ０，ｆＶ） この基底帯域１９４内に現れる色差信号のモアレのキャ
リア周波数は、以下の２箇所に存在する。
【０３１２】（−２ｆＨ／３，０） （ ２ｆＨ／３，０） さらに、基底帯域１９４近傍の以下の２箇所にも、色差
信号のモアレのキャリア周波数がある。
【０３１３】（−ｆＨ／３，ｆＶ） （ ｆＨ／３，ｆＶ） 前述の光学系は、上述の構造の撮像装置に併せて各構成
要素を設計すると、空間周波数±ｆＨ、±ｆＶ付近では
画像光の空間周波数成分が減衰しているような空間周波
数特性（ＭＴＦ；Modulation Transfer Function）を有
する。したがって、基底帯域１９４近傍の上述のキャリ
ア周波数を中心周波数とする色差信号の折返し成分は、
光学系の空間周波数特性、および撮像素子３４のアパー
チャ効果によって、充分に減衰されるので、第２出力画
像信号の輝度信号の所望信号成分にはほとんど影響を与
えない。
【０３１４】上述した第１状態の可変空間フィルタ２０
０の第２減衰量は、基底帯域１９４のうち、空間周波数
±２ｆＨ／３近傍の空間周波数成分を減衰させるように
定められる。これによって、基底帯域１９４内の所望信
号成分の振幅が、水平方向Ｈの空間周波数±２ｆＨ／３
の部分で０になるように制限される。これによって、基
底帯域１９４の水平方向Ｈの空間周波数軸上の実質の幅
が空間周波数±２ｆＨ／３未満に縮小されるが、制限後
の実質の幅は、第１出力画像信号の実質の幅の約２倍に
拡大される。
【０３１５】また、２画素混合読出し型の撮像素子３４
では、出力される原画像信号のうち、垂直方向Ｖの空間
周波数成分に関し、空間周波数±ｆＶ／２近傍の成分の
振幅が減衰される。これによって、図４０の基底帯域１
９４内の破線で表す空間周波数±ｆＶ／２近傍の部分で
は、輝度信号および色差信号の信号振幅が減衰されるフ
ィルタ効果が生じる。このフィルタ効果は、２画素混合
読出し型の撮像素子３４に特有の現象である。このフィ
ルタ効果によって、基底帯域１９４の垂直方向Ｖの実質
の幅が、空間周波数±ｆＶ／２未満に制限される。これ
によって、第２出力画像の制限後の垂直方向Ｖの実質の
幅は、基底帯域１９４から推測される理想の幅の半分に
縮小されるが、理想の幅が予め拡大されているので、第
１出力画像と比較して、実質の幅が変化しない。
【０３１６】これらのことから、第２出力画像の水平方
向Ｈの解像度は、第１出力画像の２倍に向上する。ま
た、斜め方向Ｕの解像度は変化しないが、視覚の空間周
波数特性の空間異方特性から、該解像度の変化は視覚的
に気にならない。
【０３１７】空間異方性特性について、以下に説明す
る。人が画像を認識するときの視覚特性を表す指標とし
て、前述の空間周波数特性（ＭＴＦ；Modulation Trans
ferFunction）が挙げられる。この空間周波数特性は、
二次元平面の画面上において一方方向にだけ濃淡が変化
する正弦波パターンを表示した場合であって、視者に明
暗の差が感じられなくなるとき、その画面に表示される
パターンの画像とその空間周波数との関係を示す。
【０３１８】この正弦波パターンの一方方向を、たとえ
ば水平方向Ｈを基準として、水平方向Ｈと予め定める角
度を持つように傾けて表示する。この条件において、パ
ターンの一方方向と水平方向Ｈとが±４５度をなすと
き、空間周波数の高周波成分の人の目に対する感度は最
も低下する。このように、視覚の空間周波数特性が画像
変化の空間的な方向によって変わることを、視覚の空間
異方特性と称する。このことから、斜め方向Ｕの空間周
波数成分は、水平および垂直方向Ｈ，Ｖの周波数成分と
比較して人の目に感じられにくいことが、一般に知られ
ている。この空間異方性特性から、画像上の斜め方向Ｕ
の高周波成分を除去しても、画像の視覚的な劣化が少な
いことが分かる。したがって、水平および垂直方向Ｈ，
Ｖの解像度の変化があるときに斜め方向Ｕの解像度が変
化していなくても、視覚的に気にならない。
【０３１９】本発明の第５実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の撮像素子以外の構成
要素の構造は第４実施形態の撮像装置と等しく、同一の
構成要素には、同一の符号を付し、説明は省略する。ま
た、該撮像装置は、２画素混合読出し型の撮像素子３４
に代わって、全画素読出し型の撮像素子１３１を用い
る。この撮像素子１３１の光入射側には、図３１の基本
配列パターン１９１の色フィルタが設置される。可変空
間フィルタ２００は、第４実施形態と同じ第１および第
２減衰量で画像光の空間周波数成分を制限する。本実施
形態の撮像装置は、全画素読出し型の撮像素子１３１を
用い、通常モードおよび高解像度モードで画像光を撮像
し、異なる解像度の第１および第２出力画像信号を得
る。
【０３２０】撮像素子１３１は、上述の色フィルタを介
して結像される画像光を撮像して、原画像信号を出力す
る。撮像素子１３１および画像メモリ３７の単一回の画
像光の詳細な撮像動作は、第２実施形態の単一回の撮像
動作と等しい。原画像信号の画素Ｄの配列および各画素
と受光データとの対応関係は、この色フィルタの透光領
域Ｌの配列および色配列と等価であり、各対応画素は単
一の色彩光の受光データだけを有する。この原画像信号
と第４実施形態の原画像信号とを比較すると、各色彩光
の対応画素の配列は等しく、第４実施形態では混合デー
タに対応していた各対応画素が、本実施例では同一種類
の色彩光の受光データに対応していることがわかる。し
たがって、第４および第５実施形態の原画像信号の信号
構成は、等価であると見なすことができる。
【０３２１】上述の撮像装置の通常モードの画像光の撮
像動作は、画像光の撮像動作を除いて、第４実施形態の
通常モードの画像光の撮像動作と等しい。信号処理回路
４４で原画像信号から輝度データおよび色差データを算
出するときの算出式は、上述の式（３５）〜式（３７）
と類似であり、各混合データに代わって、同一対応画素
の受光データを代入する点だけが異なる。したがって、
第１出力画像信号の輝度信号および色差信号のサンプリ
ング周波数は、第４実施形態の該信号のサンプリング周
波数と等しい。このようにして得られた第１出力画像信
号の輝度の基底帯域および色差信号のモアレのキャリア
周波数の位置を表す空間周波数平面図は、図３７と等し
い。したがって、通常モードの第１出力画像信号の基底
帯域の実質の幅、および第１出力画像の解像度もまた、
第４実施形態と等しいことがわかる。
【０３２２】上述の撮像装置の高解像度モードの画像光
の撮像動作は、画像光の撮像動作を除いて、第４実施形
態の高解像度モードの画像光の撮像動作と等しい。この
ときの第１および第２結像位置Ｑａ４，Ｑｂ４の位置関
係は、図３８と等しい。信号処理回路４４で合成される
合成画像信号の合成手法は第４実施形態と等しく、その
等価的な画素配列の基本配列パターンは、図３９の基本
配列パターン１９３と等しい。また、該回路４４で合成
画像信号から輝度データおよび色差データを算出すると
きの算出式は、上述の式（３８）〜式（４０）と類似で
あり、各混合データに代わって、同一対応画素の受光デ
ータを代入する点だけが異なる。したがって、第２出力
画像信号の輝度信号および色差信号のサンプリング周波
数は、第４実施形態の該信号のサンプリング周波数と等
しい。
【０３２３】図４１は、上述の第２出力画像信号の輝度
の基底帯域１９６、および色差信号のモアレのキャリア
周波数の位置を示す空間周波数平面図である。輝度の基
底帯域１９６は、図４０の輝度の基底帯域１９４と等し
く、水平、垂直、および斜め方向Ｈ，Ｖ，Ｕの各範囲
は、以下の式で表される。
【０３２４】 −ｆＨ≦ｆ≦ｆＨ …（41） −ｆＶ≦ｆ≦ｆＶ …（42） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（14） したがって、第１および第２象限の輝度の基底帯域１９
６は、以下の３箇所を頂点とする三角形領域である。
【０３２５】（−ｆＨ， ０） （ ｆＨ， ０） （ ０，ｆＶ） この基底帯域１９６内に現れる色差信号のモアレのキャ
リア周波数は、以下の２箇所に存在する。
【０３２６】（−２ｆＨ／３，０） （ ２ｆＨ／３，０） さらに、基底帯域１９６近傍の以下の２箇所にも、色差
信号のモアレのキャリア周波数がある。
【０３２７】（−ｆＨ／３，ｆＶ） （ ｆＨ／３，ｆＶ） これら基底帯域１９６近傍の上述のキャリア周波数を中
心周波数とする色差信号の折返し成分は、光学系の空間
周波数特性（ＭＴＦ）、および撮像素子１３１のアパー
チャ効果によって、充分に減衰されるので、第２出力画
像信号の輝度信号の所望信号成分にはほとんど影響を与
えない。
【０３２８】本実施形態の撮像装置では、第４実施形態
の撮像装置と同様に、高解像度モードで撮像される画像
光の空間周波数成分は、第２状態の可変空間フィルタ２
００によって、所望信号成分の振幅が、水平方向Ｈの空
間周波数±２ｆＨ／３の部分で０になるように制限され
る。これによって、基底帯域１９６の水平方向Ｈの空間
周波数軸上の実質の幅が空間周波数±２ｆＨ／３未満に
縮小されるが、制限後の実質の幅は、第１出力画像信号
の実質の幅の約２倍に拡大される。
【０３２９】また本実施形態の撮像装置では、第４実施
形態の撮像装置と異なり、２画素混合読出し型の撮像素
子特有のフィルタ効果が生じないので、基底帯域１９６
の垂直方向Ｖの空間周波数軸上の実質の幅が、基底帯域
１９６の垂直方向Ｖの範囲全域まで拡大される。したが
って、垂直方向Ｖの空間周波数軸の制限後の実質の幅
が、第１出力画像信号の実質の幅の２倍に拡大される。
【０３３０】これらのことから、第２出力画像の水平お
よび垂直方向Ｈ，Ｖの解像度は、第１出力画像の２倍に
それぞれ向上する。また、斜め方向Ｕの解像度は変化し
ないが、これは視覚の空間周波数特性の空間異方特性に
よって、視覚的に気にならない。したがって、本実施形
態の撮像装置の第２出力画像の解像度は、第４実施形態
の第２出力画像と比較して、垂直方向Ｖに関して２倍に
向上される。
【０３３１】本発明の第６実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の光学系および色フィ
ルタ以外の構成要素の構造は、第５実施形態の撮像装置
と等しく、同一の構成要素には、同一の符号を付し、説
明は省略する。本実施形態の撮像装置は、全画素読出し
型の撮像素子１３１を用い、通常モードおよび高解像度
モードで画像光を撮像し、異なる解像度の第１および第
２出力画像信号を得る。
【０３３２】光学系のうち、イメージシフト機構６２お
よび可変空間フィルタ２００の内部構造は等しいが、そ
の設置状態が異なる。機構６２については後述する。フ
ィルタ２００は、複屈折板２０１の分離ベクトルＢ４
が、垂直方向Ｖと平行になるように設置される。これに
よって、第１および第２状態のフィルタ２００は、垂直
方向Ｖの空間周波数成分のうち、空間周波数±ｆＶ／
３、±２ｆＶ／３の成分の振幅をそれぞれ減衰させる。
【０３３３】色フィルタは、その設置場所、通過可能な
色彩光の組合せ、ならびに透光領域Ｌの数および配列
が、第５実施形態の色フィルタと等しく、色配列だけが
異なる。ゆえに、第１〜第３色彩光は、原色系の赤、青
および緑の３色である。透光領域Ｌの水平および垂直方
向Ｈ，Ｖの配列周期は、それぞれ周期ＰＨ，ＰＶであ
る。
【０３３４】図４２は、上述の色フィルタの透光領域Ｌ
の色配列の基本配列パターン１９８を示す図である。こ
の基本配列パターン１８６は、３行２列に配列される６
つの透光領域Ｌからなり、同種の透光領域を２つずつ含
む。この基本配列パターン１９８において、透光領域Ｌ
（１，１），Ｌ（１，２）は、赤の色彩光を通過させる
赤の透光領域である。透光領域Ｌ（２，１），Ｌ（２，
２）は、緑の透光領域である。透光領域Ｌ（３，１），
Ｌ（３，２）は、青の透光領域である。この基本配列パ
ターン１９８は、水平および垂直方向Ｈ，Ｖの配列周期
を保ったまま、第４および第５実施形態の撮像装置の色
フィルタの基本配列パターンの透光領域Ｌの色配列だけ
を水平および垂直方向Ｈ，Ｖに対して入換えた配列であ
る。この色フィルタは、同種の色彩光の透光領域が水平
方向Ｈに沿って並ぶので、各行の透光領域Ｌは、同種の
色彩光だけを通過させる。
【０３３５】撮像素子１３１は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素の配列および各画素と受光データ
との対応関係は、この色フィルタの画素配列および色配
列と等価であり、各対応画素は単一の色彩光の受光デー
タだけを有する。
【０３３６】上述の撮像装置の通常モードの画像光の撮
像動作は、第５実施形態の通常モードの画像光の撮像動
作と類似し、光学系、撮像素子１３１、回路３５，３
６、および画像メモリ３７の挙動は、第５実施形態と等
しい。信号処理回路４４は、単一の原画像信号から、第
１出力画像信号の輝度信号および２種類の色差信号を求
める。このときの算出式は、上述の式（３５）〜式（３
７）と類似であり、各対応画素の行列番号を行および列
に関して入換え、かつ各混合データに代わって、同一対
応画素の受光データを代入する点が異なる。このように
して得られた第１出力画像信号の輝度の基底帯域および
モアレのキャリア周波数を表す空間周波数平面図は、第
１斜め方向Ｕｘの空間周波数軸に対して、図３７と線対
称な図面となる。すなわち、図３７の空間周波数平面図
の水平および垂直方向Ｈ，Ｖの空間周波数軸だけを入換
えた図と等しい。
【０３３７】この図から、水平方向Ｈの空間周波数軸上
には、モアレのキャリア周波数が存在しないことがわか
る。したがって、水平方向Ｈの基底帯域の実質の幅は、
基底帯域の水平方向Ｈの範囲と等価な理想の幅と等し
く、空間周波数±ｆＨ／２まで拡大される。また、垂直
方向Ｖの空間周波数軸上の空間周波数±ｆＶ／３に、モ
アレのキャリア周波数があることがわかる。したがっ
て、第１出力画像信号の垂直方向Ｖの基底帯域の実質の
幅は、空間周波数±ｆＶ／３未満に制限される。したが
って、本実施形態の通常モードの第１出力画像は、第５
実施形態の第１出力画像と比較して、水平方向Ｈの解像
度が向上する。
【０３３８】上述の撮像装置の高解像度モードの画像光
の撮像動作は、第５実施形態の高解像度モードの画像光
の撮像動作と類似し、光学系、撮像素子１３１、回路３
５，３６、および画像メモリ３７の挙動は、第５実施形
態と等しい。このとき、イメージシフト機構６２は、画
像光の結像位置を以下の２箇所に移動する。
【０３３９】図４３は、上述した第１および第２結像位
置Ｑａ６，Ｑｂ６の相対的な位置関係を示す図である。
第１結像位置Ｑａ６を基準とすると、第２結像位置Ｑｂ
６は、第１結像位置Ｑａ６から水平方向Ｈに長さＰＨ／
２だけ、かつ垂直方向Ｖに長さ３ＰＶ／２だけずれた位
置である。これら第１および第２結像位置Ｑａ６、Ｑｂ
６の位置関係は、図３８に表す第１および第２結像位置
Ｑａ４，Ｑｂ４の位置関係と、第１斜め方向Ｕｘに対し
て線対称となる位置関係である。イメージシフト機構６
２の屈折板７１の仮想基準軸線、および第２状態の屈折
板７１の傾斜角度は、この位置関係に応じて画像光の光
軸を平行移動させることができるように、第４、第５実
施形態の設置状態と比較して、各部材の水平および垂直
方向Ｈ，Ｖを入換えて設置される信号処理回路４４で生
成される合成画像信号の等価的な画素Ｄの配列の基本配
列パターンは、図３９の基本配列パターン１９３と類似
であり、対応画素および仮想画素の画素配列および全画
素の配列周期が等しく、その対応画素の色配列の水平お
よび垂直方向Ｈ，Ｖを入換えた点だけが異なる。該回路
４４は、この合成画像信号から、第２出力画像信号の輝
度信号および２種類の色差信号を求める。このときの算
出式は、上述の式（３８）〜式（４０）と類似であり、
各対応画素の行列番号を行および列に関して入換え、か
つ混合データに代わって該対応画素の受光データを代入
する点が異なる。この第２出力画像信号の輝度の基底帯
域およびモアレのキャリア周波数を表す空間周波数平面
図は、第１斜め方向Ｕｘの空間周波数軸に対して、図４
１と線対称な図面となる。すなわち、図４１の空間周波
数平面図の水平および垂直方向Ｈ，Ｖの空間周波数軸だ
けを入換えた図と等しい。
【０３４０】この図から、第２出力画像信号の輝度の基
底帯域は、第１出力画像信号の輝度の基底帯域と比較し
て、水平および垂直方向Ｈ，Ｖに２倍に拡大され、斜め
方向Ｕに関して変化しないことがわかる。また、垂直方
向Ｖの空間周波数軸上のモアレのキャリア周波数は、空
間周波数±２ｆＶ／３に現れるので、画像光の空間周波
数成分制限後の基底帯域の垂直方向Ｖの実質の幅が空間
周波数±２ｆＶ／３未満に縮小されるが、制限後の実質
の幅は第１出力画像信号の実質の幅の約２倍に拡大され
ている。
【０３４１】これらのことから、第２出力画像の水平お
よび垂直方向Ｈ，Ｖの解像度は、第１出力画像の２倍に
それぞれ向上する。また、斜め方向Ｕの解像度は変化し
ないが、これは視覚の空間周波数特性の空間異方特性に
よって、視覚的に気にならない。したがって、本実施形
態の撮像装置の第２出力画像の解像度は、第５実施形態
の第２出力画像と比較して、水平方向Ｈに関して向上さ
れる。
【０３４２】本発明の第７実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の光学系、色フィル
タ、および撮像素子以外の構成要素の構造は、第２実施
形態の撮像装置と等しく、同一の構成要素には同一の符
号を付して説明は省略する。本実施形態の撮像装置は、
全画素読出し型の撮像素子を用い、通常モードおよび高
解像度モードで画像光を撮像して、異なる解像度の第１
および第２出力画像信号を得る。
【０３４３】光学系のうち、イメージシフト機構６２
は、その内部構造は等しいが、その設置状態が後述する
ように異なる。また、光学系内の任意の位置には、可変
空間フィルタ９０に代わって、後述する可変空間フィル
タ２２０が設置される。該フィルタ２２０は、本実施形
態の撮像装置の通常および高解像度モードに応じて、第
１および第２状態に切換えられ、各モードに応じた減衰
量で、画像光の空間周波数の振幅を成分を減衰させる。
【０３４４】撮像素子は、Ｍ×Ｎ個の受光領域ＰＤを有
する全画素読出し型の撮像素子である。この受光領域Ｐ
Ｄは、結像面上に、周期ＰＨで並べられるＭ個の受光領
域からなる行が、垂直方向Ｖに沿って配列周期ＰＶでＮ
本並べられるように配列される。かつ、隣接する２本の
行は、その各受光領域ＰＤの中心が水平方向Ｈに長さＰ
Ｈ／２だけ相互にずれるように配列される。この受光領
域ＰＤの配列は、Ｍ行２Ｎ列の仮想配列に対し、各受光
領域ＰＤが、水平および垂直方向Ｈ，Ｖに対してそれぞ
れ仮想の受光領域を１つずつ介在して並べられた配列と
等価であり、結像面全体としては、受光領域ＰＤが市松
状に配列される。この受光領域ＰＤの配列周期は、水平
および垂直方向Ｈ，Ｖにそれぞれ周期ＰＨ／２，ＰＶで
ある。
【０３４５】この撮像素子の垂直転送ＣＣＤ群は、たと
えば２列の受光領域ＰＤに対して１つずつ準備され、２
列分の実在の受光領域ＰＤの数と同数の電荷結像素子Ｃ
を有する。該ＣＣＤ群の電荷結像素子Ｃは、該２列分の
実在の各受光領域ＰＤと隣接するように折線状に配列さ
れる。したがって、垂直転送ＣＣＤ群は、水平方向Ｈに
Ｍ列並べられており、各々の垂直転送ＣＣＤは、垂直方
向Ｖに折線状に並んだＮ個の電荷結合素子Ｃから構成さ
れる。各受光領域ＰＤは、その隣接する電荷結像素子Ｃ
に受光データをそれぞれ転送する。データ転送後の垂直
転送ＣＣＤ群の挙動は、図１７に示す撮像素子１３１の
垂直転送ＣＣＤ群１３８の挙動と等しい。すなわち、本
実施形態の撮像素子の垂直転送ＣＣＤ群は、２行分の実
在の受光領域ＰＤを撮像素子１３１の１行分の受光領域
ＰＤと等価に扱い、各受光領域ＰＤの受光データを個別
的に転送する。
【０３４６】この撮像素子の結像面の光入射側には、透
光領域Ｌの数および配列が実在の受光領域ＰＤと等し
く、以下に示す基本配列パターンの色配列をなす色フィ
ルタが取付けられる。この色フィルタは、各透光領域Ｌ
毎に、第１〜第３色彩光のいずれか１つを通過させる。
第１〜第３色彩光は、原色系の赤、青、および緑の３色
である。また、透光領域Ｌの水平および垂直方向Ｈ，Ｖ
の配列周期は、それぞれ周期ＰＨ／２，ＰＶである。
【０３４７】図４４は、上述した色フィルタの透光領域
Ｌの色配列の基本配列パターン２１１を示す図である。
この基本配列パターン２１１は、６つの透光領域Ｌから
成り、同種の透光領域を２つずつ含む。これら透光領域
は、２行６列の仮想配列に市松状に並べられた配列と等
しく、各行の透光領域Ｌの間には、図示しない仮想の透
光領域があると見なすことができる。この基本配列パタ
ーン２１１において、透光領域Ｌ（１，１），Ｌ（２，
４）は、赤の色彩光を通過させる赤の透光領域である。
透光領域Ｌ（１，３），Ｌ（２，６）は、緑の透光領域
である。透光領域Ｌ（１，５），Ｌ（２，２）は、青の
透光領域である。この基本配列パターン２１１から成る
色配列の色フィルタは、実在の透光領域Ｌが少なくとも
１つの実在の受光領域ＰＤの光入射側に配列されるよう
に設置される。
【０３４８】上述の撮像素子は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素Ｄの配列、および該画素Ｄと受光
データとの対応関係は、図４４の色フィルタの透光領域
Ｌの配列および色配列と等価であり、各対応画素は、単
一の色彩光の受光データを有する。
【０３４９】可変空間フィルタ２２０を、図４５〜図５
０を用いて以下に説明する。
【０３５０】図４５は、可変空間フィルタ２２０の詳細
な構造を示す斜視図である。可変空間フィルタ２２０
は、５枚の複屈折板２２１〜２２５、および旋光板２２
６を含んで構成される。複屈折板２２１〜２２５は、光
入射側の画像光の光軸６４上に、光入射側からこの順で
配列される。旋光板２２６は、複屈折板２２３，２２４
の間に介在される。複屈折板２２１〜２２５は、たとえ
ば水晶板で実現される。複屈折板２２１〜２２５および
旋光板２２６の各入射面および射出面は、光入射側の画
像光の光軸６４と直交する。また、屈折板２２３，２２
５は、光軸６４と一致した仮想回転中心軸線を中心とし
て回転可能であり、第１および第２状態が切換えられる
と同時に１８０度だけ角変位するように回転駆動され
る。
【０３５１】図４６（ａ）〜（ｅ）は、フィルタ２２０
が第１状態にあるときの各複屈折板２２１〜２２５の分
離ベクトルＢ１１〜Ｂ１５を示す図である。このうち、
分離ベクトルＢ１１〜Ｂ１３は、前述した単位ベクトル
ｉ，ｊ，ｋによって、以下の式で規定される。
【０３５２】
【数１４】
【０３５３】上式から、複屈折板２２１の分離ベクトル
Ｂ１１は水平方向Ｈと平行であり、複屈折板２２２，２
２３の分離ベクトルＢ１２，Ｂ１３は、垂直方向Ｖと平
行であることが分かる。
【０３５４】また、複屈折板２２４，２２５の分離ベク
トルＢ１４，Ｂ１５を図４７を用いて説明する。図４７
は、図４６（ｄ），（ｅ）と同じＨＶ平面を表す。基準
軸線Ｌ１は、複屈折板２１１の分離ベクトルＢ１１の延
長線であり、水平方向Ｈと平行である。分離ベクトルＢ
１４，Ｂ１５の延長線Ｌ２と基準軸線Ｌ１との成す角度
θ１は、以下の式で表される。
【０３５５】
【数１５】
【０３５６】角度θ１は、撮像素子が正方格子型であっ
て、受光領域ＰＤの配列周期ＰＨ，ＰＶの値が等しいと
き、３３．７度になる。このような配列周期の撮像素子
は、たとえば６４０行４８０列の受光領域ＰＤの配列を
有し、ＮＴＳＣ方式に対応した撮像素子である。
【０３５７】さらに、これらの複屈折板２２１〜２２５
の分離長さは、それぞれ３ＰＨ／４，ＰＶ／４，ＰＶ／
４，√｛（３ＰＨ／８）2＋（ＰＶ／４）2｝，√｛（３
ＰＨ／８）2＋（ＰＶ／４）2｝である。これら複屈折板
２２１〜２２５内の常光および異常光の挙動は、分離ベ
クトルの向きおよび分離長さを除いて、可変空間フィル
タ９０の複屈折板９１〜９３での挙動と等しい。
【０３５８】また、旋光板２２６は、入射した光の偏光
方向を表す偏波面を、図４７の矢符２２８で示す方向
に、角度θ２だけ回転変位させる。角度θ２は、以下の
式で表される。
【０３５９】 θ２＝４５度−θ１ …（46） この角度θ２は、基準軸線Ｌ１と４５度の角度を成して
交わる基準軸線Ｌ３と、前述の分離ベクトルＢ１４，Ｂ
１５の延長線Ｌ２との成す角度である。
【０３６０】上述した可変空間フィルタ２２０が第１状
態にあるとき、複屈折板２２３，２２５は、分離ベクト
ルが図４６（ｃ），（ｅ）に示す状態に保たれる。この
とき、フィルタ２２０を通過する画像光の挙動を、図４
８を用いて、以下に説明する。
【０３６１】図４８（ａ）〜図４８（ｅ）は、第１状態
の可変空間フィルタ２２０において、画像光の常光およ
び異常光が複屈折板２２１〜２２５を通過した位置をそ
れぞれ示す仮想結像面を示す図である。この仮想結像面
の設定は格子の軸線の間隔を除いて図９の仮想結像面と
等しく、これと同等に取扱う。各仮想結像面上に描かれ
る格子の軸線は、水平および垂直方向Ｈ，Ｖに、それぞ
れ間隔３ＰＨ／８、ＰＶ／４で配列される。
【０３６２】第１状態の可変空間フィルタ２２０におい
て、フィルタ入射前の画像光の光軸と仮想結像面との交
点を座標（３，３）とする。この画像光は、複屈折板２
２１に入射して、複屈折板２２１に対する常光と異常光
とに分離される。該常光の射出側の光軸の交点は、座標
（３，３）である。また、異常光の射出側の光軸は、入
射側の光軸の延長線からみて、水平方向Ｈの分離ベクト
ルＢ１１と同じ向きに同じ長さだけ移動しており、その
光軸の交点は座標（３，５）である。
【０３６３】この１対の常光および異常光は、それぞれ
同一の座標から複屈折板２２２に入射する。複屈折板２
２１，２２２の分離ベクトルＢ１１，Ｂ１２は相互に直
交するので、複屈折板２２１の常光および異常光は、そ
れぞれ複屈折板２２２に対する異常光および常光にな
る。したがって、座標（３，３）の複屈折板２２１の常
光は、複屈折板２２２の異常光となり、その光軸は、座
標（３，３）の光軸の延長線からみて、分離ベクトルＢ
１２と同じ向きに同じ長さだけ移動される。ゆえに、複
屈折板２２２の常光の光軸の交点は座標（４，３）であ
る。また同様に、座標（３，５）の複屈折板２２１の異
常光は、複屈折板２２２の常光となるので、そのまま複
屈折板２２２を通過する。ゆえに、複屈折板２２２の常
光の光軸の交点は座標（３，５）である。
【０３６４】この１対の常光および異常光は、それぞれ
同一の座標から複屈折板２２３に入射する。複屈折板２
２２，２２３の分離ベクトルＢ１２，Ｂ１３は平行なの
で、複屈折板２２２の常光および異常光は、そのまま複
屈折板２２３に対する常光および異常光になる。ゆえ
に、座標（３，５）の複屈折板２２２の常光は、複屈折
板２２２の常光となるので、そのまま複屈折板２２３を
通過する。ゆえに、複屈折板２２３の常光の光軸の交点
は座標（３，５）である。また、座標（４，３）の複屈
折板２２２の異常光は、複屈折板２２３の異常光とな
り、その光軸は、座標（４，３）の光軸の延長線からみ
て、分離ベクトルＢ１３と同じ向きに同じ長さだけ移動
される。ゆえに、複屈折板２２３の異常光の光軸の交点
は座標（５，３）である。
【０３６５】この１対の常光および異常光は、それぞれ
同一の座標から施光板２２６に入射する。施光板２２６
は、上述の常光および異常光の偏波面を、それぞれ角度
θ２だけ、元の偏波面から回転変位させて射出させる。
このとき常光および異常光の光軸の平行移動はないの
で、それぞれの光軸の交点は施光板２２６への入射前の
位置を保つ。
【０３６６】この１対の常光および異常光は、それぞれ
座標（３，５），（５，３）から複屈折板２２４に入射
する。施光板２２６で偏波面が回転変位されたことによ
って、上述の常光および異常光の各偏波面と、複屈折板
２２４の分離ベクトルＢ１４の延長線Ｌ３との成す角度
は、それぞれ４５度となる。これによって、上述の常光
および異常光は、それぞれ同じ強度で、該複屈折板２２
４に対する常光および異常光に分離される。
【０３６７】複屈折板２２３の常光および異常光のう
ち、複屈折板２２４に対する常光は、そのまま複屈折板
２２４を通過するので、その光軸の交点は座標（３，
５），（５，３）である。また、複屈折板２２３の常光
および異常光の複屈折板２２４に対する異常光の光軸
は、それぞれ座標（３，５），（５，３）の光軸の延長
線からみて、水平方向Ｈに長さ３ＰＨ／８でかつ垂直方
向Ｖに長さＰＶ／４の分離長さだけ、つまり分離ベクト
ルＢ１４と同じ向きに同じ長さだけ移動しており、その
光軸の交点は、それぞれ座標（２，４），（４，２）で
ある。
【０３６８】この２対の常光および異常光は、上述の座
標から複屈折板２２５に入射する。複屈折板２２４，２
２５の分離ベクトルＢ１４，Ｂ１５は等しいので、複屈
折板２２４の常光および異常光は、そのまま複屈折板２
２５に対する常光および異常光になる。ゆえに、座標
（３，５），（５，３）の複屈折板２２４の常光は、複
屈折板２２５の常光となるので、そのまま複屈折板２２
５を通過する。ゆえに、複屈折板２２５の常光の光軸の
交点は座標（３，５），（５，３）である。また、座標
（２，４），（４，２）の複屈折板２２４の異常光は、
複屈折板２２５の異常光となり、その光軸は、入射前の
光軸の延長線からみて、水平方向Ｈに長さ３ＰＨ／８で
かつ垂直方向Ｖに長さＰＶ／４の分離長さだけ、つまり
分離ベクトルＢ１５と同じ向きに同じ長さだけ移動され
る。ゆえに、複屈折板２２５の異常光の光軸の交点は座
標（３，１），（１，３）である。
【０３６９】このように、複屈折板２２１〜２２５を順
次的に通過した画像光は、２対の常光および異常光に分
離される。これら常光および異常光の光軸と仮想結像面
との交点は、白丸と黒丸との記号で表される対、および
白四角と黒四角との記号で表される対毎に水平方向Ｈに
間隔３ＰＨ／４だけ、かつ垂直方向Ｖに間隔ＰＶ／２だ
けそれぞれ離れる。このように分離される画像光につい
て、第１減衰量を表す空間周波数（ｆｈ，ｆｖ）の伝達
関数Ｈ１（ｆｈ，ｆｖ）は、以下の式で表される。
【０３７０】
【数１６】
【０３７１】上式で、「ｈ」は水平方向Ｈの空間座標、
「ｖ」は、垂直方向の空間座標、「δ（ｈ，ｖ）」は、
空間座標（ｈ，ｖ）の２次元のデルタ関数、「Ｆ」はフ
ーリエ変換をそれぞれ表す。この式から、第１状態の可
変空間フィルタ２２０は、画像光の空間周波数（ｆｈ，
ｆｖ）の成分のうち、以下の式を満たす成分のレスポン
スがなくなるように、該空間周波数成分の振幅を減衰す
ることがわかる。
【０３７２】
【数１７】
【０３７３】上式の第１項と第３項の符号は、記載順と
関係なく組合わされ、組合わせ数は４通りである。
【０３７４】特に、空間周波数軸上を考えれば、水平方
向の空間周波数軸上の空間周波数±２ｆＨ／３の成分の
レスポンスがなくなり、かつ垂直方向の空間周波数軸上
の空間周波数±ｆＶの成分のレスポンスがなくなってい
る。また、空間周波数平面の第１および第２象限内で、
（±２ｆＨ／３，０）と（０，±ｆＶ）とを結ぶ仮想線
上に該当する成分のレスポンスがなくなる。
【０３７５】また、上述した可変空間フィルタ２２０が
第２状態にあるとき、複屈折板２２３，２２５は、第１
状態から１８０度角変位され、分離ベクトルＢ１３ａ，
Ｂ１５ａが図４９（ａ），（ｂ）に示す状態に保たれ
る。これら分離ベクトルＢ１３ａ，Ｂ１５ａは、ＨＶ平
面上で、第１状態での分離ベクトルＢ１３，Ｂ１５と平
行でかつ逆向きである。
【０３７６】このとき、フィルタ２２０を通過する画像
光の挙動を、図４８（ａ），（ｂ）および図５０
（ａ），（ｂ），（ｃ）の仮想結像面を用いて、以下に
説明する。図５０の仮想結像面は、画像光の光軸の交点
の位置を除いて、図４８（ｃ）〜図４８（ｅ）の各仮想
結像面と等しく、同様に取扱う。
【０３７７】第２状態の可変空間フィルタ２２０におい
て、フィルタ入射前の画像光の光軸と仮想結像面との交
点を座標（３，３）とする。この画像光が、複屈折板２
２１，２２２を通過するときの挙動は、第１状態のとき
と等しいので、説明は省略する。
【０３７８】複屈折板２２３には、複屈折板２２２に対
する座標（３，５）の常光、および座標（４，３）の異
常光が、この同一の座標から入射する。複屈折板２２
２，２２３の分離ベクトルＢ１２，Ｂ１３ａは相互に平
行であり、向きだけが相反する。したがって、複屈折板
２２２の常光および異常光は、そのまま複屈折板２２３
に対する常光および異常光になる。
【０３７９】したがって、座標（３，５）の複屈折板２
２２の常光は、複屈折板２２３の常光となって射出し、
その光軸の交点は、座標（３，５）である。また、座標
（４，３）の複屈折板２２２の異常光は、複屈折板２２
３の異常光となり、その光軸は、座標（４，３）の光軸
の延長線からみて、分離長さＰＶ／４だけ、垂直方向Ｖ
に沿った分離ベクトルＢ１３ａの向きに移動される。こ
の異常光の光軸の交点は座標（３，３）である。これら
常光および異常光は、施光板２２６でその偏波面が角度
θ２だけ回転変位された後、光軸の交点の位置を保った
まま、複屈折板２２４に入射する。
【０３８０】この１対の常光および異常光は、第１状態
と同様に、それぞれ同じ強度で、該複屈折板２２４に対
する常光および異常光に分離されて射出する。複屈折板
２２３の常光および異常光の、複屈折板２２４に対する
常光の射出後の光軸の交点は座標（３，５），（３，
３）である。また、複屈折板２２３の常光および異常光
の複屈折板２２４に対する異常光の光軸は、それぞれ座
標（３，５），（３，３）の光軸の延長線からみて、上
述の分離長さだけ、分離ベクトルＢ１４の向きに移動し
ており、その光軸の交点は、それぞれ座標（２，４），
（２，２）である。
【０３８１】この２対の常光および異常光は、上述の座
標から複屈折板２２５に入射する。複屈折板２２４，２
２５の分離ベクトルＢ１４，Ｂ１５ａは相互に平行であ
って長さが等しく、向きだけが相反する。したがって、
複屈折板２２４の常光および異常光は、そのまま複屈折
板２２５に対する常光および異常光になる。
【０３８２】したがって、座標（３，５），（３，３）
の複屈折板２２４の常光は、複屈折板２２５の常光とな
って射出し、その光軸の交点は、座標（３，５），
（３，３）である。また、座標（２，４），（２，２）
の複屈折板２２４の異常光は、複屈折板２２５の異常光
となり、その光軸は、入射前の光軸の延長線からみて、
前述の分離長さだけ、分離ベクトルＢ１５ａの向きに移
動される。この異常光の光軸の交点は座標（３，５），
（３，３）である。
【０３８３】このように、複屈折板２２２，２２３の分
離ベクトルＢ１２，Ｂ１３ａ、および複屈折板２２４，
２２５の分離ベクトルＢ１４，Ｂ１５ａが、それぞれ平
行で大きさが等しく、かつ向きが相反するとき、複屈折
板２２２，２２４に対する常光および異常光の光軸の交
点が、複屈折板２２３，２２５通過後に一致する。これ
によって、複屈折板２２２，２２３；２２４，２２５で
の光の分離効果が打消される。したがって、複屈折板２
２５通過後の画像光の分離状態は、複屈折板２２１通過
直後の状態に戻る。
【０３８４】このように複屈折板２２１〜２２５を順次
的に通過した画像光は、１対の常光および異常光に分離
される。この常光および異常光の光軸と仮想結像面との
交点は、水平方向Ｈに平行に、間隔３ＰＨ／４だけ離れ
る。このように分離された画像光に関して、第２減衰量
を表す空間周波数（ｆｈ，ｆｖ）の伝達関数Ｈ２（ｆ
ｈ，ｆｖ）は、以下の式で表される。
【０３８５】
【数１８】
【０３８６】この結果から、画像光の空間周波数成分の
うち、空間周波数±２ｆＨ／３の成分のレスポンスだけ
がなくなるように、該空間周波数成分の振幅が減衰され
ることが分かる。
【０３８７】このような構造の撮像装置の通常モードお
よび高解像度モードの撮像動作を以下に説明する。
【０３８８】通常モードの画像光の撮像動作は、第１実
施形態の通常モードの画像光の撮像動作と類似し、光学
系、回路３５，３６、および画像メモリ３７の挙動は、
第２実施形態と等しい。上述の撮像素子の挙動は、図１
７の撮像素子１３１とほぼ等しい。信号処理回路４４
は、単一の原画像信号から、第１出力画像信号の輝度信
号および２種類の色差信号を求める。たとえば、図４４
中の透光領域Ｌ（２，４）に対応する第２行第４列の画
素Ｄ（２，４）の輝度データＹ（２，４）、色差データ
（Ｒ−Ｙ）（２，４），（Ｂ−Ｙ）（２，４）は、以下
の式で示される。画素Ｄ（２，４）は、赤の受光データ
だけの対応画素である。
【０３８９】
【数１９】
【０３９０】この輝度データＹは、各画素Ｄ毎に個別的
に直接求めることができる。ゆえに、原画像の対応画素
は、全て輝度データの実画素となるので、第１出力画像
信号の輝度信号の実画素の数および配列は、原画像の対
応画素の数および配列と等しい。
【０３９１】原画像の全ての対応画素の配列の水平およ
び垂直方向Ｈ，Ｖの配列周期は、図４４からそれぞれ周
期ＰＨ／２，ＰＶとわかる。このことから、この第１出
力画像信号の輝度信号の水平および垂直方向Ｈ，Ｖのサ
ンプリング周波数は、それぞれ空間周波数２ｆＨ，ｆＶ
とみなされる。また、同一種類の対応画素だけの配列の
水平および垂直方向Ｈ，Ｖの配列周期は、図４４から、
それぞれ周期３ＰＨ／２，ＰＶとわかる。このことか
ら、色差信号の水平および垂直方向Ｈ，Ｖのサンプリン
グ周波数は、それぞれ空間周波数２ｆＨ／３，ｆＶとみ
なされる。さらに、各色彩光の対応画素は、水平方向Ｈ
に長さ３ＰＨ／２でかつ垂直方向Ｖに長さＰＶ／２だけ
離れて、周期的に配列される。この配列による斜め方向
のサンプリング周波数のうちで、最も低周波数のもの
は、空間周波数ｆＨ，ｆＶを用いて、（±ｆＨ／３，±
ｆＶ／２）と表される。またこのサンプリング周波数に
関する空間軸に平行な方向を第２斜め方向Ｕαとする。
【０３９２】図５１は、上述した第１出力画像信号の輝
度の基底帯域２１２、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域２１２の水平および垂直方向Ｈの空間周波数軸
上の範囲は、以下の式で表される。
【０３９３】 −ｆＨ≦ｆ≦ｆＨ …（53） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（54） したがって、第１および第２象限の輝度の基底帯域２１
２は、以下の３箇所を頂点とする三角形領域である。
【０３９４】（−ｆＨ，０） （ ｆＨ，０） （ ０，ｆＶ／２） この基底帯域２１２内に現れる色差信号のモアレのキャ
リア周波数は、以下の２箇所に存在する。
【０３９５】（−２ｆＨ／３，０） （ ２ｆＨ／３，０） さらに、基底帯域２１４近傍の以下の２箇所にも、上述
の斜め方向Ｕαのサンプリング周波数（ｆＨ／３，ｆＶ
／２）によって現れる色差信号のモアレのキャリア周波
数がある。
【０３９６】（−ｆＨ／３，ｆＶ／２） （ ｆＨ／３，ｆＶ／２） 上述した第１状態の可変空間フィルタ２２０の第１減衰
量は、基底帯域２１２のうち、空間周波数（±２ｆＨ／
３，０），（±ｆＨ／３，±ｆＶ／２），（０，±ｆ
Ｖ）近傍の空間周波数成分を減衰させるように定められ
る。これによって、基底帯域２１２の水平方向Ｈの所望
信号成分の振幅が、水平方向Ｈの空間周波数±ｆＨ／３
の部分で０になるように制限される。このため、基底帯
域２１２の水平方向Ｈの空間周波数軸上の実質の幅が空
間周波数±ｆＨ／３未満に縮小される。また、基底帯域
２１２の垂直方向Ｖの実質の幅も、空間周波数±ｆＶ／
２未満に縮小される。これによって、第１出力画像の水
平および垂直方向Ｈ，Ｖの実質の解像度は、その分だけ
基底帯域２１２から推測される理想の解像度よりも低下
する。
【０３９７】高解像度モードの画像光の撮像動作は、第
１実施形態の高解像度モードの画像光の撮像動作と類似
し、光学系、回路３５，３６、および画像メモリ３７の
挙動は、第２実施形態と等しい。上述の撮像素子の挙動
は、撮像素子１３１とほぼ等しい。このとき、イメージ
シフト機構６２は、画像光の結像位置を、以下の２箇所
に移動させる。
【０３９８】図５２は、上述した高解像度モードの画像
光の撮像動作における第１および第２結像位置の位置関
係を示す図である。第１結像位置Ｑａ７を基準とする
と、第２結像位置Ｑｂ７は、垂直方向Ｖに受光領域ＰＤ
の配列周期の長さＰＶだけ離れる。イメージシフト機構
６２の仮想基準軸線の設置状態、および第２状態の屈折
板７１の傾斜角度は、これら結像位置がこの位置関係を
なすように定められる。
【０３９９】信号合成回路４４は、まず、第２実施形態
と同じ手法で第１および第２原画像信号から合成画像信
号を生成する。この合成画像は、Ｍ行２Ｎ列に配列され
るＭ×２Ｎ個の対応画素からなる。合成画像の水平およ
び垂直方向Ｈ，Ｖの画素の配列周期は、それぞれ周期Ｐ
Ｈ／２，ＰＶである。
【０４００】図５３は、上述の合成画像信号が表す合成
画像の等価的な画素Ｄの配列の基本配列パターン２１３
を示す図である。この基本配列パターン２１３は、２行
６列に配列される１２個の画素からなる。画素Ｄ（１，
１），Ｄ（１，４），Ｄ（２，１），Ｄ（２，４）は、
赤の受光データの対応画素である。画素Ｄ（１，３），
Ｄ（１，６），Ｄ（２，３），Ｄ（２，６）は、緑の受
光データの対応画素である。画素Ｄ（１，２），Ｄ
（１，５），Ｄ（２，２），Ｄ（２，５）は、青の受光
データの対応画素である。このことから、合成画像は、
画素配列が原画像の基本の画素配列と等しく、原画像で
仮想画素だった画素が全て対応画素になっていることが
わかる。
【０４０１】次いで、信号処理回路４４は、この合成画
像信号から、第２出力画像の輝度信号および２種類の色
差信号を求める。たとえば第２行第４列の画素Ｄ（２，
４）の輝度データＹ（２，４）、色差データ（Ｒ−Ｙ）
（２，４），（Ｂ−Ｙ）（２，４）は、以下の式で示さ
れる。画素Ｄ（２，４）は、赤の受光データだけの対応
画素である。
【０４０２】
【数２０】
【０４０３】これの輝度データＹは、合成画像の各画素
Ｄごとに個別的に直接求めることができる。ゆえに、合
成画像の画素Ｄは、全て輝度データの実画素となるの
で、第２出力画像信号の輝度信号の実画素の数および配
列は、合成画像の画素Ｄの数および配列と等しい。
【０４０４】合成画像の全ての対応画素の配列の水平お
よび垂直方向Ｈ，Ｖの配列周期は、図５３からそれぞれ
周期ＰＨ／２，ＰＶとわかる。このことから、この第２
出力画像信号の輝度信号の水平および垂直方向Ｈ，Ｖの
サンプリング周波数は、それぞれ空間周波数２ｆＨ，ｆ
Ｖとみなされる。また、同一種類の対応画素だけの配列
の水平および垂直方向Ｈ，Ｖの配列周期は、図５３か
ら、それぞれ周期３ＰＨ／２，ＰＶとわかる。このこと
から、色差信号の水平および垂直方向Ｈ，Ｖのサンプリ
ング周波数は、それぞれ空間周波数２ｆＨ／３，ｆＶと
みなされる。さらに、図５３から、前述の第２斜め方向
Ｕαに関する配列周期が半分となったことがわかる。
【０４０５】図５４は、上述の第２出力画像信号の輝度
の基底帯域２１４、および色差信号のモアレのキャリア
周波数の位置を示す空間周波数平面図である。輝度の基
底帯域２１４の水平および垂直方向Ｈ，Ｖの空間周波数
軸上の範囲は、第１出力画像信号の輝度の基底帯域２１
１の各範囲と等しく、以下の式で表される。
【０４０６】 −ｆＨ≦ｆ≦ｆＨ …（53） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（54） また、第３の斜め方向Ｗｘ，Ｗｙを考える。斜め方向Ｗ
ｘ，Ｗｙは、水平方向および垂直方向Ｈ，Ｖにそれぞれ
平行で大きさがそれぞれ配列周期ＰＨ、配列周期ＰＶの
半分である２つの基本ベクトルの合成で規定される方向
である。斜め方向Ｗｘ，Ｗｙの配列周期ＰＷｘ，ＰＷｙ
は、以下の式で表される。
【０４０７】
【数２１】
【０４０８】斜め方向Ｗｘ，Ｗｙの画像光のサンプリン
グ周波数ｆｗｘ，ｆｗｙは、それぞれ上式の配列周期Ｐ
Ｗｘ，ＰＷｙの逆数である。
【０４０９】
【数２２】
【０４１０】高解像度モードでは、この第３斜め方向Ｗ
ｘ，Ｗｙに関して、その方向の空間周波数軸上の範囲が
２倍に拡大される。したがって、第１および第２象限の
輝度の基底帯域２１４は、以下の４箇所を頂点とする矩
形領域である。
【０４１１】（−ｆＨ， ０） （ ｆＨ， ０） （−ｆＨ，ｆＶ／２） （ ｆＨ，ｆＶ／２） この基底帯域２１４内に現れる色差信号のモアレのキャ
リア周波数は、以下の２箇所に存在する。
【０４１２】（−２ｆＨ／３，０） （ ２ｆＨ／３，０） 上述した第１状態の可変空間フィルタ２２０の第２減衰
量は、基底帯域２１４のうち、空間周波数±２ｆＨ／３
近傍の空間周波数成分を減衰させるように定められる。
これによって、基底帯域２１４の水平方向Ｈの所望信号
成分の振幅が、水平方向Ｈの空間周波数±２ｆＨ／３の
部分で０になるように制限される。これによって、基底
帯域２１４の水平方向Ｈの空間周波数軸上の実質的な幅
が±２ｆＨ／３未満に縮小される。
【０４１３】この第２出力画像信号では、（±ｆＨ／
３，ｆＶ／２）に現れるモアレのキャリア周波数が消え
ているので、このキャリア周波数を中心周波数とするモ
アレが消滅する。これによって、垂直方向Ｖの空間周波
数成分を制限する必要がなくなるので、基底帯域２１４
の実質の幅が基底帯域の範囲全域まで拡大される。この
ことから、第２出力画像の垂直方向Ｖの解像度は、第１
出力画像よりも向上する。
【０４１４】本発明の第８実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の光学系および色フィ
ルタ以外の構成要素の構造は、第７実施形態の撮像装置
と等しく、同一の構成要素には同一の符号を付して説明
は省略する。本実施形態の撮像装置は、全画素読出し型
の撮像素子を用い、通常モードおよび高解像度モードで
画像光を撮像し、異なる解像度の第１および第２出力画
像信号を得る。
【０４１５】光学系のうち、イメージシフト機構６２お
よび可変空間フィルタ２２０の内部構造は等しいが、そ
の設置状態が異なる。機構６２については後述する。フ
ィルタ２２０は、複屈折板２２１の分離ベクトルＢ１１
が、垂直方向Ｖと平行になるように設置される。これに
よって、第１状態のフィルタ２２０は、画像光の空間周
波数（ｆｈ，ｆｖ）の成分のうち、以下の式を満たす成
分のレスポンスがなくなるように、該空間周波数成分の
振幅を減衰することがわかる。
【０４１６】
【数２３】
【０４１７】上式の第１項と第３項の符号は、記載順と
関係なく組合わされ、組合わせ数は４通りである。
【０４１８】特に、空間周波数軸上を考えれば、水平方
向の空間周波数軸上の空間周波数±ｆＨの成分のレスポ
ンスがなくなり、かつ垂直方向の空間周波数軸上の空間
周波数±２ｆＶ／３の成分のレスポンスがなくなってい
る。また、第２状態のフィルタ２２０は、垂直方向Ｖの
空間周波数成分のうち、空間周波数±２ｆＶ／３の成分
のレスポンスをなくならせる。
【０４１９】色フィルタは、その設置場所、通過可能な
色彩光の組合せ、ならびに透光領域Ｌの数が、第７実施
形態の色フィルタと等しく、透光領域Ｌの配列および色
配列だけが異なる。ゆえに第１〜第３色彩光は、原色系
の赤、青および緑の３色である。また、透光領域Ｌの水
平および垂直方向Ｈ，Ｖの配列周期は、それぞれ周期Ｐ
Ｈ，ＰＶ／２である。
【０４２０】図５５は、上述の色フィルタの透光領域Ｌ
の色配列の基本配列パターン２１６を示す図である。こ
の基本配列パターン２１６は、６つの透光領域Ｌからな
り、同種の透光領域を２つずつ含む。これら透光領域Ｌ
は、隣接する２つの列の各透光領域Ｌが、長さＰＶ／２
だけ相互にずれて配列され、６行２列の基本の配列に市
松状に並べられた配列と等価である。
【０４２１】この基本配列パターン２１６において、透
光領域Ｌ（１，１），Ｌ（４，２）は、赤の色彩光を通
過させる赤の透光領域である。透光領域Ｌ（３，１），
Ｌ（６，２）は、緑の透光領域である。透光領域Ｌ
（５，１），Ｌ（２，２）は、青の透光領域である。こ
の基本配列パターン２１６は、水平および垂直方向Ｈ，
Ｖの配列周期を保ったまま、第７実施形態の撮像装置の
色フィルタの基本配列パターン２１１の透光領域Ｌの行
と列の配列関係および色配列だけを水平および垂直方向
Ｈ，Ｖに対して入換えた配列である。
【０４２２】また、本実施形態の撮像素子の受光領域Ｐ
Ｄは、この色フィルタの実在の透光領域Ｌの配列と等価
な配列で、結像面上に配列される。これは、水平および
垂直方向Ｈ，Ｖの配列周期を保ったまま、第７実施形態
の撮像素子の受光領域ＰＤの配列の行と列の配列関係だ
けを、水平および垂直方向Ｈ，Ｖに対して入換えた配列
である。
【０４２３】上述の撮像素子は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素の配列および各画素と受光データ
との対応関係は、この色フィルタの透光領域Ｌの配列お
よび色配列と等価であり、各対応画素は単一の色彩光の
受光データだけを有する。
【０４２４】上述の撮像装置の通常モードの画像光の撮
像動作は、第７実施形態の通常モードの画像光の撮像動
作と類似し、光学系、撮像素子、回路３５，３６、およ
び画像メモリ３７の挙動は、第７実施形態と等しい。信
号処理回路４４は、単一の原画像信号から、第１出力画
像の輝度信号および２種類の色差信号を求める。このと
きの算出式は、上述の式（５０）〜式（５２）と類似で
あり、各対応画素の行列番号を行および列に関して入換
えた点だけが異なる。このようにして得られた第１出力
画像信号の輝度の基底帯域およびモアレのキャリア周波
数を表す空間周波数平面図は、第１斜め方向Ｕｘの空間
周波数軸に対して図５１と線対称な図面である。すなわ
ち、図５１の空間周波数平面図の水平および垂直方向
Ｈ，Ｖの空間周波数軸だけを入換えた図と等しい。
【０４２５】この図から、水平方向Ｈの空間周波数軸上
には、モアレのキャリア周波数が存在しないが、その近
傍の空間周波数（±ｆＨ／２，ｆＶ／３）にモアレのキ
ャリア周波数があることが分かる。したがって、水平方
向Ｈの基底帯域の実質の幅は、基底帯域の水平方向Ｈの
範囲の空間周波数±ｆＨ／２未満に縮小される。また、
垂直方向Ｖの空間周波数軸上の空間周波数±２ｆＶ／３
に、モアレのキャリア周波数があることがわかる。した
がって、第１出力画像信号の垂直方向Ｖの基底帯域の実
質の幅は、空間周波数±２ｆＶ／３未満に制限される。
したがって、本実施形態の通常モードの第１出力画像
は、第７実施形態の第１出力画像と比較して、垂直方向
Ｖの解像度が向上する。
【０４２６】上述の撮像装置の高解像度モードの画像光
の撮像動作は、第７実施形態の高解像度モードの画像光
の撮像動作と類似し、光学系、撮像素子、回路３５，３
６、および画像メモリ３７の挙動は、第７実施形態と等
しい。このとき、画像光の第１および第２結像位置は、
水平方向Ｈに長さＰＨだけ相互に離れる位置関係を保
つ。イメージシフト機構６２の屈折板７１の仮想基準軸
線、および第２状態の屈折板７１の傾斜角度は、この位
置関係に応じて画像光の光軸を平行移動させることがで
きるように、第７実施形態の設置状態と比較して、各部
材の水平および垂直方向Ｈ，Ｖを入換えて設置される。
【０４２７】信号処理回路４４で生成される合成画像信
号の等価的な画素の基本配列パターンは、図５３の基本
配列パターン２１３と類似であり、その対応画素の水平
および垂直方向の配列周期を保ったまま、行と列の配列
関係ならびに色配列の水平および垂直方向Ｈ，Ｖを入換
えた点が異なる。該回路４４は、この合成画像信号か
ら、第２出力画像信号の輝度信号および２種類の色差信
号を求める。このときの算出式は、上述の式（５５）〜
式（５７）と類似であり、各対応画素の行列番号を行お
よび列に関して入換えた点だけが異なる。この第２出力
画像信号の輝度の基底帯域およびモアレのキャリア周波
数を表す空間周波数平面図は、第１斜め方向Ｕｘの空間
周波数軸に対して、図５４と線対称な図面である。すな
わち、図５４の空間周波数平面図の水平および垂直方向
の周波数だけを入換えた図と等しい。
【０４２８】この図から、第２出力画像信号の輝度の基
底帯域は、第１出力画像信号の輝度の基底帯域と比較し
て、水平および垂直方向Ｈ，Ｖが等しく、原点から空間
周波数（ｆＨ／２，±ｆＶ）に向かう方向の範囲が２倍
に拡大されることがわかる。また、第１出力画像信号で
水平方向Ｈの空間周波数軸近傍に現れていたモアレのキ
ャリア周波数が消えるので、空間周波数±ｆＨ／２近傍
の空間周波数成分を制限する必要がなくなる。したがっ
て、画像光の空間周波数成分制限後の基底帯域の水平方
向Ｈの実質の幅が、基底帯域の範囲全域まで拡大され
る。これらのことから、第２出力画像の水平方向Ｈの解
像度は、第１出力画像よりも向上する。
【０４２９】以上の結果から、本実施形態の撮像装置の
第１および第２出力画像は、第７実施形態の第１および
第２出力画像と比較して、垂直方向Ｖの解像度が向上さ
れる。
【０４３０】本発明の第９実施形態の撮像装置を以下に
説明する。本実施形態の撮像装置の色フィルタ以外の構
成要素の構造は、第２実施形態の撮像装置と等しく、同
一の構成要素には同一の符号を付して説明は省略する。
本撮像装置は全画素読出し型の撮像素子１３１を用い、
通常モードおよび高解像度モードで画像光を撮像して、
異なる解像度の第１および第２出力画像信号を得る。
【０４３１】色フィルタは、第２実施形態の色フィルタ
と、設置場所ならびに透光領域Ｌの数および配列が等し
く、通過可能な色彩光の組合わせおよび色配列が異な
る。ゆえに、透光領域Ｌの水平および垂直方向Ｈ，Ｖの
配列周期は、それぞれ周期ＰＨ，ＰＶである。また、通
過可能な第１〜第３色彩光は、原色系の赤、青および緑
の３色である。
【０４３２】さらに該色フィルタでは、緑の透光領域Ｌ
が、赤および青の透光領域Ｌの数の２倍の数だけ準備さ
れる。緑の色彩光は、人の視覚において感度が高く、輝
度信号に対して赤および青の色彩光よりも寄与が大きい
ことが知られている。また、人の視覚に感じられる空間
周波数帯域は、色度よりも輝度のほうが広い。したがっ
て、緑の透光領域Ｌを増加させて緑の色彩光を受光する
受光領域ＰＤの数を増やすことによって、輝度の空間周
波数帯域を拡大させることができる。
【０４３３】図５６は、上述した色フィルタの透光領域
Ｌの色配列の基本配列パターン２３１を示す図である。
この基本配列パターン２３１は、２行２列に配列される
４つの透光領域Ｌから成る。このパターン２３１は、緑
の透光領域Ｌだけを２つ含み、赤および青の透光領域を
１つずつ含む。この基本配列パターン２３１において、
透光領域Ｌ（１，１），Ｌ（２，２）は、緑の透光領域
Ｌである。透光領域Ｌ（１，２）は、赤の透光領域Ｌで
ある。透光領域Ｌ（２，１）は、青の透光領域Ｌであ
る。
【０４３４】撮像素子１３１は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素Ｄの配列、および該画素Ｄと受光
データとの対応関係は、図５６の色フィルタの透光領域
Ｌの配列および色配列と等価であり、各対応画素は、単
一の色彩光の受光データを有する。
【０４３５】上述の撮像装置の通常モードの画像光の撮
像動作は、第２実施形態の通常モードの画像光の撮像動
作と類似し、光学系、撮像素子１３１、回路３５，３
６、および画像メモリ３７の挙動は、第２実施形態と等
しい。信号処理回路４４は、単一の原画像信号から、第
１出力画像信号の輝度信号および２種類の色差信号を求
める。たとえば図５６の透光領域Ｌ（２，２）に対応す
る第２行第２列の画素Ｄ（２，２）の輝度データＹ
（２，２）、色差データ（Ｒ−Ｙ）（２，２），（Ｂ−
Ｙ）（２，２）は、以下の式で示される。画素Ｄ（２，
２）は、緑の受光データだけの対応画素である。
【０４３６】
【数２４】
【０４３７】この輝度データＹは、各画素Ｄ毎に個別的
に直接求めることができる。ゆえに、原画像の対応画素
は、全て輝度データの実画素となるので、第１出力画像
信号の輝度信号の実画素の数および配列は、原画像の対
応画素の数および配列と等しい。
【０４３８】原画像の全ての対応画素の配列の水平およ
び垂直方向Ｈ，Ｖの配列周期は、図５６からそれぞれ周
期ＰＨ，ＰＶとわかる。このことから、この第１出力画
像信号の輝度信号の水平および垂直方向Ｈ，Ｖのサンプ
リング周波数は、それぞれ空間周波数ｆＨ，ｆＶとみな
される。また、同一種類の対応画素だけの配列のうち、
緑の色彩光の対応画素だけの配列の水平，垂直および斜
め方向Ｈ，Ｖ，Ｕの配列周期は、図５６から、それぞれ
周期ＰＨ，ＰＶ，２ＰＵとわかる。また、赤および青の
色彩光の対応画素だけの各配列の水平、垂直および斜め
方向Ｈ，Ｖ，Ｕの配列周期は、図５６から、それぞれ周
期２ＰＨ，２ＰＶ，２ＰＵとわかる。このことから、色
差信号の水平、垂直、および斜め方向Ｈ，Ｖ，Ｕのサン
プリング周波数は、緑に関して空間周波数ｆＨ，ｆＶ，
ｆＵ／２、赤および青に関して空間周波数ｆＨ／２，ｆ
Ｖ／２，ｆＵ／２とみなされる。
【０４３９】図５７は、上述した第１出力画像信号の輝
度の基底帯域２３２、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域２３２の水平および垂直方向Ｈの空間周波数軸
上の範囲は、第１実施形態の基底帯域１１１と等しく、
以下の式で表される。
【０４４０】 （−ｆＨ／２）≦ｆ≦（ｆＨ／２） …（13） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（14） （−ｆｕ／２）≦ｆ≦（ｆｕ／２） …（15） したがって、第１および第２象限の輝度の基底帯域２３
２は、以下の４箇所を頂点とする矩形領域である。
【０４４１】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） この基底帯域２３２内に現れる色差信号のモアレのキャ
リア周波数は、以下の５箇所に存在する。
【０４４２】（−ｆＨ／２，０） （ ｆＨ／２，０） （−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） （ ０，ｆＶ／２） 前述した第１状態の可変空間フィルタ９０の第１減衰量
は、基底帯域２３２のうち、空間周波数±ｆＨ／２，±
ｆＶ／２近傍の空間周波数成分を減衰させるように定め
られる。これによって、基底帯域２３２の水平および垂
直方向Ｈ，Ｖの空間周波数軸上の実質の幅は、基底帯域
２３２の各範囲全域よりも縮小される。これによって、
第１出力画像の水平および垂直方向Ｈ，Ｖの実質の解像
度は、その分だけ基底帯域２３２から推測される理想の
解像度よりも低下する。
【０４４３】上述の撮像装置の高解像度モードの画像光
の撮像動作は、第２実施形態の高解像度モードの画像光
の撮像動作と類似し、光学系、撮像素子１３１、回路３
５，３６、および画像メモリ３７の挙動は、第２実施形
態と等しい。このとき、イメージシフト機構６２は、画
像光の結像位置を、図１４に表すように、水平方向Ｈに
間隔ＰＨだけ離れた第１および第２結像位置Ｑａ１，Ｑ
ｂ１に移動させる。信号処理回路４４は、まず、第２実
施形態と同じ手法で第１および第２原画像信号から合成
画像信号を生成する。この合成画像は、Ｍ行Ｎ列に配列
されるＭ×Ｎ個の対応画素からなる。合成画像の水平お
よび垂直方向Ｈ，Ｖの画素の配列周期は、それぞれ周期
ＰＨ，ＰＶである。各対応画素は、それぞれ異なる２種
類の色彩光の受光データを有する。
【０４４４】図５８は、上述の合成画像信号が表す合成
画像の等価的な画素Ｄの配列の基本配列パターン２３３
を示す図である。この基本配列パターン２３３は、２行
２列に配列される４つの画素からなる。画素Ｄ（１，
１），Ｄ（１，２）は、緑と赤との対応画素である。画
素Ｄ（２，１），Ｄ（２，２）は、緑と青の対応画素で
ある。図５８では、緑と赤との対応画素には符号「Ｆ
ａ」を記し、緑と青との対応画素には、符号「Ｆｂ」を
記す。このことから、合成画像では、画素配列が原画像
の画素配列と等しく、また全画素が緑の対応画素である
ことが分かる。
【０４４５】信号処理回路４４は、この合成画像信号か
ら、第２出力画像信号の輝度信号および２種類の色差信
号を求める。たとえば第２行第２列の画素Ｄ（２，２）
の輝度データＹ（２，２）、色差データ（Ｒ−Ｙ）
（２，２），（Ｂ−Ｙ）（２，２）は、以下の式で示さ
れる。画素Ｄ（２，２）は、緑と青との受光データだけ
の対応画素である。
【０４４６】
【数２５】
【０４４７】この輝度データＹは、合成画像の各対応画
素毎に個別的に直接求めることができる。ゆえに、合成
画像の対応画素は、全て輝度データの実画素となるの
で、第２出力画像信号の輝度信号の実画素の数および配
列は、合成画像の対応画素の数および配列と等しい。
【０４４８】合成画像の全ての対応画素の水平、垂直斜
め方向Ｈ，Ｖ，Ｕの配列周期、および緑の対応画素だけ
の該方向Ｈ，Ｖ，Ｕの配列周期は、図５８からそれぞれ
周期ＰＨ，ＰＶ，ＰＵとわかる。このことから、この第
２出力画像信号の輝度信号の水平、垂直斜め方向Ｈ，
Ｖ，Ｕのサンプリング周波数は、それぞれ空間周波数ｆ
Ｈ，ｆＶ，ｆｕとみなされる。また、赤および青の色彩
光の対応画素だけの各配列の水平および垂直方向Ｈ，Ｖ
の配列周期は、図５８から、それぞれ周期ＰＨ，２ＰＶ
とわかる。このことから、色差信号の水平、垂直、およ
び斜め方向Ｈ，Ｖ，Ｕのサンプリング周波数は、緑に関
して空間周波数ｆＨ，ｆＶ，ｆＵ、赤および青に関して
空間周波数ｆＨ，ｆＶ／２，とみなされる。
【０４４９】このような第２出力画像信号の輝度の基底
帯域、および色差信号のモアレのキャリア周波数は、図
２９に示す第２実施形態の撮像装置の第２出力画像信号
の輝度の基底帯域１８４、およびモアレのキャリア周波
数と等しい。すなわち、基底帯域が第１出力画像信号の
基底帯域２３２と等しく、モアレのキャリア周波数が
（０，ｆＶ／２）の位置だけに現れる。ゆえに、第２出
力画像は、第１出力画像と比較して、水平方向Ｈの解像
度を向上させることができる。
【０４５０】本発明の第１０実施形態の撮像装置を以下
に説明する。本実施形態の撮像装置の色フィルタおよび
撮像素子以外の構成要素の構造は、第２実施形態の撮像
装置と等しく、同一の構成要素には同一の符号を付して
説明は省略する。該撮像装置は、全画素読出し型の撮像
素子１３１に代わって、第７実施形態の撮像装置の撮像
素子を用い、通常モードおよび高解像度モードで画像光
を撮像して、異なる解像度の第１および第２出力画像信
号を得る。
【０４５１】色フィルタは、第７実施形態の色フィルタ
と設置場所、通過可能な色彩光の組合わせ、ならびに透
光領域Ｌの数および配列が等しく、色配列だけが異な
る。ゆえに、第１〜第３色彩光は、原色系の赤、青、お
よび緑の３色である。また、透光領域Ｌの水平および垂
直方向Ｈ，Ｖの配列周期は、受光領域ＰＤの配列と等し
く、それぞれ周期ＰＨ／２，ＰＶである。さらに、この
色フィルタは、第９実施形態の色フィルタと同じ理由か
ら、緑の透光領域が赤および青の透光領域の数の２倍の
数だけ準備される。
【０４５２】図５９は、上述した色フィルタの透光領域
Ｌの色配列の基本配列パターン２４１を示す図である。
この基本配列パターン２４１は、４つの透光領域Ｌから
成る。この透光領域Ｌのうち、緑の透光領域Ｌだけが２
つあり、赤および青の透光領域Ｌは１つずつある。これ
ら透光領域Ｌは、２行４列の仮想配列に市松状に並べら
れた配列と等しく、各行の透光領域Ｌの間には、図示し
ない仮想の透光領域Ｌがあると見なすことができる。
【０４５３】この基本配列パターン２４１において、透
光領域Ｌ（１，１），Ｌ（２，４）は、緑の透光領域で
ある。透光領域Ｌ（１，３）は赤の透光領域である。透
光領域Ｌ（２，２）は、青の透光領域である。この基本
配列パターン２４１から成る色配列の色フィルタは、実
在の透光領域Ｌが少なくとも１つの実在の受光領域ＰＤ
の光入射側に配列されるように設置される。
【０４５４】上述の撮像素子は、この色フィルタを介し
て結像される画像光を撮像して、原画像信号を出力す
る。原画像信号の画素の配列、および該画素と受光デー
タとの対応関係は、図５９の色フィルタの配列および色
配列と等価であり、各対応画素は、単一の色彩光の受光
データを有する。
【０４５５】上述の撮像装置の通常モードの画像光の撮
像動作は、第７実施形態の通常モードの画像光の撮像動
作と類似し、光学系、回路３５，３６、および画像メモ
リ３７の挙動は、第２実施形態と等しい。上述の撮像素
子の挙動は、図１７の撮像素子１３１とほぼ等しい。信
号処理回路４４は、単一の原画像信号から、第１出力画
像信号の輝度信号および２種類の色差信号を求める。た
とえば第２行第４列の画素Ｄ（２，４）の輝度データＹ
（２，４）、色差データ（Ｒ−Ｙ）（２，４），（Ｂ−
Ｙ）（２，４）は、以下の式で示される。画素Ｄ（２，
４）は、緑の受光データだけの対応画素である。
【０４５６】
【数２６】
【０４５７】この輝度データＹは、各画素Ｄ毎に個別的
に直接求めることができる。ゆえに、原画像の対応画素
は、全て輝度データの実画素となるので、第１出力画像
信号の輝度信号の実画素の数および配列は、原画像の対
応画素の数および配列と等しい。
【０４５８】原画像の全ての対応画素の配列の水平およ
び垂直方向Ｈ，Ｖの配列周期は、図５９からそれぞれ周
期ＰＨ／２，ＰＶとわかる。このことから、この第１出
力画像信号の輝度信号の水平および垂直方向Ｈ，Ｖのサ
ンプリング周波数は、それぞれ空間周波数２ｆＨ，ｆＶ
とみなされる。また、赤および青の色彩光の対応画素だ
けの各配列の水平および垂直方向Ｈ，Ｖの配列周期は、
図５９から、周期２ＰＨ，２ＰＶとわかる。このことか
ら、色差信号の水平および垂直方向Ｈ，Ｖのサンプリン
グ周波数は、空間周波数ｆＨ／２，ｆＶ／２とみなされ
る。
【０４５９】図６０は、上述した第１出力画像信号の輝
度の基底帯域２４２、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域２４２の水平および垂直方向Ｈの空間周波数軸
上の範囲は、以下の式で表される。
【０４６０】 −ｆＨ≦ｆ≦ｆＨ …（53） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（54） さらに基底帯域２４２の第３斜め方向Ｗｘ，Ｗｙの空間
周波数軸上の範囲は、上述のサンプリング周波数ｆｗ
ｘ，ｆｗｙの半分となる。したがって、第１および第２
象限の輝度の基底帯域２４２は、以下の３箇所を頂点と
する三角形領域である。
【０４６１】（−ｆＨ，０） （ ｆＨ，０） （ ０，ｆＶ／２） この基底帯域２４２内に現れる色差信号のモアレのキャ
リア周波数は、以下の５箇所に存在する。
【０４６２】（−ｆＨ ，０） （ ｆＨ ，０） （−ｆＨ／２，０） （ ｆＨ／２，０） （ ０，ｆＶ／２） さらに、基底帯域２４２近傍の以下の２箇所にも、色差
信号のモアレのキャリア周波数がある。
【０４６３】（−ｆＨ／２，ｆＶ／２） （ ｆＨ／２，ｆＶ／２） 前述した第１状態の可変空間フィルタ９０の第１減衰量
は、基底帯域２４２のうち、空間周波数±ｆＨ／２上の
成分および空間周波数±ｆＶ／２上の成分を減衰させる
ように定められる。これによって、基底帯域２４２の垂
直方向Ｖの空間周波数軸上の実質の幅は、基底帯域２４
２の各範囲全域よりも縮小される。また、水平方向Ｈの
空間周波数軸上の実質の幅は、基底帯域２４２の範囲の
半分に縮小される。これによって、第１出力画像の水平
および垂直方向Ｈ，Ｖの実質の解像度は、その分だけ基
底帯域２３２から推測される理想の解像度よりも低下す
る。
【０４６４】上述の撮像装置の高解像度モードの画像光
の撮像動作は、第７実施形態の高解像度モードの画像光
の撮像動作と類似し、光学系、回路３５，３６、および
画像メモリ３７の挙動は、第２実施形態と等しい。撮像
素子の挙動は、撮像素子１３１とほぼ等しい。このと
き、イメージシフト機構６２は、画像光の結像位置を、
図１４の第１および第２結像位置Ｑａ１，Ｑｂ１に移動
させる。
【０４６５】信号合成回路４４は、まず、第２実施形態
と同じ手法で第１および第２原画像信号から合成画像信
号を生成する。この合成画像は、Ｍ×Ｎ個の対応画素お
よび同数の仮想画素がＭ行２Ｎ列に配列されてなる。各
対応画素は、２種類の受光データを有する。合成画像の
水平および垂直方向Ｈ，Ｖの画素の配列周期は、それぞ
れ周期ＰＨ／２，ＰＶである。
【０４６６】図６１は、上述の合成画像信号が表す合成
画像の等価的な画素Ｄの配列の基本配列パターン２４３
を示す図である。この基本配列パターン２４３は、２行
４列に配列される８個の画素からなる。画素Ｄ（１，
１），Ｄ（１，３）は、緑と赤との対応画素である。Ｄ
（２，２），Ｄ（２，４）は、緑と青との対応画素であ
る。残余の画素は、全て仮想画素である。このことか
ら、合成画像の対応画素の配列は原画像の対応画素の配
列と等しく市松状であることがわかる。
【０４６７】次いで信号処理回路４４は、この合成画像
信号から、第２出力画像の輝度信号および２種類の色差
信号を求める。たとえば第２行第２列の画素Ｄ（２，
２）の輝度データＹ（２，２）、色差データ（Ｒ−Ｙ）
（２，２），（Ｂ−Ｙ）（２，２）は、以下の式で示さ
れる。画素Ｄ（２，２）は、緑および青の受光データの
対応画素である。
【０４６８】
【数２７】
【０４６９】この輝度データＹは、合成画像の各対応画
素だけ個別的に直接求めることができる。仮想画素の輝
度データは、周囲の対応画素の算出結果から補間する。
ゆえに、合成画像の対応画素は、全て輝度データの実画
素となるので、第２出力画像信号の輝度信号の実画素の
数および配列は、合成画像の対応画素の数および配列と
等しく市松状である。
【０４７０】合成画像の全ての対応画素の水平および垂
直方向Ｈ，Ｖの配列周期、および緑の対応画素だけの該
方向Ｈ，Ｖの配列周期は、図６１からそれぞれ周期ＰＨ
／２，ＰＶとわかる。このことから、この第２出力画像
信号の輝度信号の水平および垂直方向Ｈ，Ｖのサンプリ
ング周波数は、それぞれ空間周波数２ｆＨ，ｆＶとみな
される。また、赤および青の色彩光の対応画素だけの各
配列の水平および垂直方向Ｈ，Ｖの配列周期は、図６１
から、それぞれ周期ＰＨ，２ＰＶとわかる。このことか
ら、色差信号の水平、および垂直方向Ｈ，Ｖのサンプリ
ング周波数は、緑に関して空間周波数２ｆＨ，ｆＶ、赤
および青に関して空間周波数ｆＨ，ｆＶ／２，とみなさ
れる。さらに、図６１から、前述の第２斜め方向Ｕαの
配列周期が２倍となったことがわかる。
【０４７１】図６２は、上述した第２出力画像信号の輝
度の基底帯域２４４、および色差信号のモアレのキャリ
ア周波数の位置を示す空間周波数平面図である。輝度の
基底帯域２４４は、第１出力画像信号の基底帯域２４２
と等しく、その水平および垂直方向Ｈの空間周波数軸上
の範囲は、以下の式で表される。
【０４７２】 −ｆＨ≦ｆ≦ｆＨ …（53） （−ｆＶ／２）≦ｆ≦（ｆＶ／２） …（54） この第１および第２象限の輝度の基底帯域２４４は、以
下の３箇所を頂点とする三角形領域である。
【０４７３】（−ｆＨ，０） （ ｆＨ，０） （ ０，ｆＶ／２） この基底帯域２４４内に現れる色差信号のモアレのキャ
リア周波数は、以下の３箇所に存在する。
【０４７４】（−ｆＨ ，０） （ ｆＨ ，０） （ ０，ｆＶ／２） 前述した第２状態の可変空間フィルタ９０は画像光の空
間周波数成分のうち、空間周波数±ｆＶ／２の空間周波
数成分を減衰させる。これによって、基底帯域２４４の
垂直方向Ｖの空間周波数軸上の実質の幅は、基底帯域２
４４の垂直方向Ｖの範囲全域よりも縮小される。また、
第２状態のフィルタ９０は、水平方向Ｈの空間周波数成
分を減衰させないが、光学系のＭＴＦおよび撮像素子の
アパーチャ効果によって、水平方向Ｈの空間周波数±ｆ
Ｈ近傍の成分が減衰される。これによって、基底帯域２
４４の水平方向Ｈの空間周波数軸上の実質の幅は、基底
帯域２４２の範囲未満に縮小されるが、第１出力画像信
号の実質の幅よりも拡大する。これによって、第２出力
画像の水平方向Ｈの実質の解像度が、第１出力画像の水
平方向Ｈの実質の解像度よりも向上される。
【０４７５】本発明の第１１実施形態の撮像装置を以下
に説明する。本実施形態の撮像装置の光学系、色フィル
タおよび撮像素子以外の構成要素の構造は、第１０実施
形態の撮像装置と等しく、同一の構成要素には同一の符
号を付して説明は省略する。本実施形態の撮像装置は、
第８実施形態に示す全画素読出し型の撮像素子を用い、
通常モードおよび高解像度モードで画像光を撮像し、異
なる解像度の第１および第２出力画像信号を得る。
【０４７６】光学系のうち、イメージシフト機構６２お
よび可変空間フィルタ９０の内部構造は等しいが、その
設置状態が異なる。機構６２については後述する。フィ
ルタ９０は、複屈折板９１の分離ベクトルＢ１が、水平
方向Ｈと平行になるように設置される。これによって、
第１状態のフィルタ９０は、水平および垂直方向Ｈ，Ｖ
の空間周波数成分のうち、空間周波数±ｆＨ／２の成分
を減衰させ、また空間周波数±ｆＶ／２の成分の振幅を
減衰させる。また、第２状態のフィルタ９０は、水平方
向Ｈの空間周波数成分のうち、空間周波数±ｆＨ／２の
成分の振幅を減衰させる。
【０４７７】色フィルタは、その設置場所、通過可能な
色彩光の組合わせ、ならびに透光領域の数が第１０実施
形態の色フィルタと等しく、色配列だけが異なる。ゆえ
に、第１〜第３色彩光は、原色系の赤、青および緑の３
色である。透光領域Ｌの水平および垂直方向Ｈ，Ｖの配
列周期は、それぞれ周期ＰＨ，ＰＶ／２であり、第８実
施形態の色フィルタと等しい。また、該色フィルタは、
第９実施形態の色フィルタと同じ理由で、緑の透光領域
が赤および青の各透光領域の数の２倍の数だけ準備され
る。
【０４７８】図６３は、上述の色フィルタの透光領域Ｌ
の色配列の基本配列パターン２４６を示す図である。こ
の基本配列パターン２４６は、４つの透光領域Ｌからな
り、第１〜第３色彩光を通過させる。これら透光領域Ｌ
は、隣接する２つの列の各透光領域Ｌが、長さＰＶ／２
だけ相互にずれて配列され、４行２列の基本の配列に市
松状に並べられた配列と等価である。
【０４７９】この基本配列パターン２４６において、透
光領域Ｌ（１，１），Ｌ（４，２）は、緑の透光領域で
ある。透光領域Ｌ（３，１）は、赤の透光領域である。
透光領域Ｌ（２，２）は、青の透光領域である。この基
本配列パターン２４６は、第１０実施形態の撮像装置の
色フィルタの基本配列パターンの透光領域Ｌの行と列と
の配列関係および色配列を水平および垂直方向Ｈ，Ｖに
対して入換えた配列である。
【０４８０】撮像素子は、この色フィルタを介して結像
される画像光を撮像して、原画像信号を出力する。原画
像信号の画素の配列および各画素と受光データとの対応
関係は、この色フィルタの画素配列および色配列と等価
であり、各対応画素は単一の色彩光の受光データだけを
有する。
【０４８１】上述の撮像装置の通常モードの画像光の撮
像動作は、第１０実施形態の通常モードの画像光の撮像
動作と類似し、光学系、撮像素子、回路３５，３６、お
よび画像メモリ３７の挙動は、第１０実施形態と等し
い。信号処理回路４４は、単一の原画像信号から、第１
出力画像の輝度信号および２種類の色差信号を求める。
このときの算出式は、上述の式（６７）〜式（６９）と
類似であり、各基底帯域２４４の対応画素の行列番号を
行および列に関して入換えた点だけが異なる。
【０４８２】このようにして得られた第１出力画像信号
の基底帯域およびモアレのキャリア周波数を表す空間周
波数平面図は、第１斜め方向Ｕｘの空間周波数軸に対し
て、図６０と線対称な図形である。すなわち、図６０の
空間周波数平面図の水平および垂直方向Ｈ，Ｖの空間周
波数軸だけを入換えた図と等しい。
【０４８３】この図から、水平および垂直方向Ｈ，Ｖの
空間周波数軸上の空間周波数±ｆＨ／２，±ｆＶ／２
に、それぞれモアレのキャリア周波数があることがわか
る。したがって、第１出力画像信号の輝度の基底帯域の
水平および垂直方向Ｈ，Ｖの実質の幅は、空間周波数±
ｆＨ／２，±ｆＶ／２未満にそれぞれ制限される。した
がって、本実施形態の通常モードの第１出力画像の解像
度は、第１０実施形態の第１出力画像信号とほぼ等し
い。
【０４８４】上述の撮像装置の高解像度モードの画像光
の撮像動作は、第１０実施形態の高解像度モードの画像
光の撮像動作と類似し、光学系、撮像素子、回路３５，
３６、および画像メモリ３７の挙動は、第１０実施形態
と等しい。このとき、画像光の第１および第２結像位置
の位置関係は、垂直方向Ｖに長さＰＶだけ相互に離れる
ように定められる。イメージシフト機構６２の仮想基準
軸線の設置状態および第２状態の屈折板７１の傾斜角度
は、画像光の光軸を上述の第１および第２結像位置に平
行移動させられるように、第１０実施形態と比較して、
各部材の設置状態の水平および垂直方向Ｈ，Ｖを入換え
るように定められる。
【０４８５】信号処理回路４４で生成される合成画像信
号の等価的な画素の基本配列パターンは、図６１の基本
配列パターン２４３と類似であり、その配列周期が等し
く、その対応画素の色配列の水平および垂直方向Ｈ，Ｖ
だけを入換えた配列である。該回路４４は、この合成画
像信号から、第２出力画像信号の輝度信号および２種類
の色差信号を求める。このときの算出式は、上述の式
（７０）〜式（７２）と類似であり、各対応画素の行列
番号を行および列に関して入換えた点だけが異なる。
【０４８６】この第２出力画像信号の輝度の基底帯域お
よびモアレのキャリア周波数を表す空間周波数平面図
は、第１斜め方向Ｕｘの空間周波数軸に対して、図６２
と線対称の図形である。すなわち、図６２の空間周波数
平面図の水平および垂直方向Ｈ，Ｖの空間周波数軸だけ
を入換えた図と等しい。
【０４８７】この図から、第２出力画像信号の輝度の基
底帯域は、第１出力画像信号の輝度の基底帯域と等しい
ことがわかる。また、第１出力画像信号で垂直方向Ｈの
空間周波数±ｆＶ／２に現れるモアレのキャリア周波数
が消える。これによって、該基底帯域の垂直方向Ｖの空
間周波数軸上の実質の幅は、基底帯域の範囲未満に縮小
されるが、第１出力画像信号の実質の幅よりも拡大す
る。これによって、第２出力画像信号の垂直方向Ｖの実
質の解像度が、第１出力画像信号の実質の解像度よりも
向上される。以上の結果から、本実施形態の撮像装置の
第２出力画像の解像度は、第１０実施形態の第２出力画
像と比較して、垂直方向Ｖに関して向上される。
【０４８８】上述の第１〜第１１実施形態の撮像装置で
は、イメージシフト機構６２に代わって、以下に説明す
る可変頂角プリズム２５１を用いても良い。
【０４８９】可変頂角プリズム２５１を、図６４〜図６
７を用いて以下に詳細に説明する。この可変頂角プリズ
ムは、たとえば「ITEJ Technical Report Vol.17，No.
5,pp.15〜20,CE'93-3(Jan,1993)」に開示されている。
【０４９０】図６４は、可変頂角プリズム２５１の具体
的な構成を説明するための斜視図である。図６５は、可
変頂角プリズム２５１のＡ−Ａ断面図である。図６４と
図６５とを併せて説明する。
【０４９１】可変頂角プリズム２５１は、透明円板２５
３，２５４、蛇腹部材２５５、および液体層２５６を含
んで構成される。蛇腹部材２５５は略円筒状のフィルム
部材によって形成され、その中心軸線に沿って中空部分
が形成される。透明円板２５３，２５４はたとえばガラ
ス板で実現され、蛇腹部材２５５の中空部分の開口部を
ふさぐように設置される。液体層２５６は、透明円板２
５３，２５４で蛇腹部材２５５の内部の中空部分を密閉
する前に、その中空部分に、屈折率が１以上の高屈折率
の液体を充填して形成される。蛇腹部分２５５の中心軸
線と画像光の光軸方向Ｚとは平行であり、画像光の光軸
６４は、透明円板２５３、液体層２５６および透明円板
２５４をこの順で通過する。
【０４９２】また、透明円板２５３，２５４には、相互
に直交する方向に回転軸２５８，２５９が設置される。
これによって、たとえば各透明円板２５３，２５４は、
矢符２６０，２６１に示す相互に直交する２方向に角変
位する。この２本の回転軸の２５８，２５９のうち、一
方の回転軸２５８は、前述したイメージシフト機構６２
の仮想基準軸線と同じ方向に平行となるように設置され
る。また、他方の回転軸２５９が機構６２の仮想基準軸
線と同じ方向に平行となるように設置されても良い。
【０４９３】これら回転軸２５８，２５９には、駆動手
段として、図示しない駆動用コイル、制動用コイルおよ
び回転角検出センサが取付けられる。駆動用コイルおよ
び制動用コイルが透明円板２５３を角変位させるとき、
回転角検出センサは、その角変位量を常に検出する。該
コイルは、この検出結果に基づいて、透明円板２５３の
光軸６４に対する傾斜角度を徴調整する。たとえば、セ
ンサの検出結果と予め定める目標値とを比較してその誤
差量を求め、該誤差量が０となるように、透明円板２５
３の角変位量を決定して、各コイルを駆動する。この制
御手法は、いわゆるフィードバック制御である。
【０４９４】可変頂角プリズム２５１は、透明円板２５
３，２５４のなす角度に応じて、第１および第２状態を
取る。プリズム２５１が第１および第２状態を保持する
とき、画像光の結像位置は、第１および第２結像位置に
それぞれ保持される。可変頂角プリズムの２５１の作動
原理について、以下に説明する。
【０４９５】図６６は、第１状態の可変頂角プリズム２
５１を示す断面図である。第１状態では、透明円板２５
３，２５４は相互に平行に設置され、かつ各透明円板２
５３，２５４が、入射前の画像光の光軸６４ａと直交す
る。このとき、プリズム２５１に入射した光線は、液晶
層２５６内を直進する。ゆえに、プリズム２５１射出後
の画像光の光軸６４ｂは、入射前の光軸６４ａの延長線
と一致する。
【０４９６】図６７は、第２状態の可変頂角プリズム２
５１を示す断面図である。第２状態では、透明円板２５
３の入射面の法線と入射前の画像光の光軸６４ａとのな
す角度が角度θ１１となるように、透明円板２５３が傾
斜される。また、透明円板２５４は、光軸６４ａと直交
する。
【０４９７】このとき、透明円板２５３を通過して、液
体層２５６に入射した画像光の光軸２６５は、透明平板
２５３の法線２６４と、角度θ１２をなして交差する。
この角度θ１２と角度θ１１との間には、以下の関係が
成立つ。
【０４９８】 sin（θ１１）＝ ｎ・ sin（θ１２） …（73） 上式で、「ｎ」は、液体層２５６の充填液体の屈折率を
表す。
【０４９９】この画像光は、液体層２５６内を直進し、
透明円板２５４を通過して、プリズム２５１から射出す
る。このとき、この画像光の透明円板２５４への入射角
は、角度θ１１と角度θ１２との差分である角度θ１１
−θ１２である。また、プリズム２５１射出後の光軸６
４ｂと、透明平板２５４の入射面の法線２６６とのなす
角度は、角度θ１３である。これら角度θ１１−θ１
２，θ１３の間には、以下の関係が成立つ。
【０５００】 ｎ・ sin（θ１１−θ１２）＝ sin（θ１３） …（74） ここで角度θ１１，θ１２，θ１３をそれぞれ微少角度
δθ１１，δθ１２，δθ１３とすると、次の近似式が
成立つ。
【０５０１】 δθ１１＝ｎ・δθ１２ …（75） ｎ・δ（θ１１−θ１２）＝δθ１３ …（76） 上式から、微小角δθ１１，δθ１３の間に以下の関係
が成立つ。
【０５０２】 δθ１３／δθ１１ ＝ ｎ−１ …（77） 上式から、たとえば屈折率ｎの値が１．５程度の液体で
液体層２５６を形成すると、透明円板２５３の傾斜角度
の約半分の角度で、射出後の画像光の光軸を傾斜させる
ことができる。
【０５０３】以上のような動作に基づいて、画像光の光
軸を移動させることができる。この可変頂角プリズム２
５１の状態を第１および第２結像位置のそれぞれ切換え
ることによって、上述のイメージシフト動作を行うこと
が可能になる。
【０５０４】さらにまた、上述の第１〜第１１実施形態
の撮像装置は、イメージシフト機構６２に代わって、光
学系内のいずれか１つまたは複数のレンズを、移動量を
検出しながら圧電素子などの構成部材を用いて変位させ
る構成を有し、レンズの移動によって、イメージシフト
動作を行ってよい。また、イメージシフト機構６２に代
わって、撮像素子または撮像素子と光学系とを含むブロ
ックを、移動量を検出しながら圧電素子などの構成部材
を用いて変位させる構成を有し、画像光の光軸を固定し
た状態での撮像素子の移動によって、イメージシフト動
作を行ってよい。このようにイメージシフト動作のため
の機構は、上述の第１および第２結像位置に結像位置を
移動できるものであれば、上述の機構に限らずどのよう
な構造の機構を用いても良い。
【０５０５】さらに、上述のイメージシフト機構６２の
屈折板７１は、無色透明のガラス板に代わって、赤外線
除去用に着色された有色透明平板で実現されてもよい。
このとき、撮像装置の光学系には、必ず赤外線除外用の
透明平板を挿入する必要があるので、屈折板７１とこの
透明平板とを併用させることによって、撮像装置の部品
点数を減少させることができる。
【０５０６】また、可変空間フィルタは、上述の第１お
よび第２減衰量で画像光の空間周波数成分を減衰させる
ことができるものがあれば、上述の機構に限らずどのよ
うな構造の装置を用いても良い。
【０５０７】
【発明の効果】以上のように本発明によれば、本発明の
撮像装置は、２ポジションイメージシフト動作を行って
得た２つの原画像信号から、単一の合成画像信号を生成
する。これによって、本発明の撮像装置の等価撮像時間
が、従来技術の撮像装置の等価撮像時間の半分以下にな
るので、手ぶれおよび被写体移動に起因する画質劣化が
生じにくい。したがって、イメージシフトの画像合成処
理によって解像度を向上させることができる撮像条件が
緩和される。
【０５０８】また、２ポジションイメージシフト動作
は、結像位置の移動方向が１方向だけなので、結像位置
の移動手段の構造が従来の装置よりも簡略化される。さ
らに、該シフト動作では、合成処理前に原画像信号をス
トアするためのメモリの容量がを従来の装置よりも減少
する。これによって、移動手段およびメモリに関する製
造コストを低減させることができる。
【０５０９】また本発明によれば、撮像装置は、表示手
段の主走査方向の空間周波数軸に関し、原画像信号に生
じたモアレを合成処理で除去することができるように、
イメージシフト動作を行う。さらにまた本発明によれ
ば、イメージシフト動作の第１および第２結像位置は、
上述したようにモアレの除去効果が生じ、同時に基底帯
域が水平方向に拡大されるように、色分離フィルタ手段
の各透光領域の色配列、撮像素子の種類を加味して決定
される。これによって、少なくとも水平方向の空間周波
数軸に関して、本来の合成画像信号の空間周波数平面上
の基底帯域の幅を制限する必要がなくなる。したがっ
て、基底帯域の幅を広げたことと同様の効果を得ること
ができ、画像の解像度を向上させることができる。
【０５１０】また本発明によれば、撮像装置では、２次
元ＣＣＤイメージセンサの電子シャッタと、機械的なシ
ャッタ手段とを併用して、画像光撮像時の露光時間を制
御する。これによって、イメージセンサの転送用電荷結
像素子の動作状態に拘わらず、２回目の画像光の撮像を
行うことができるので、等価撮像時間をさらに短縮する
ことができる。したがって、合成画像に画質に対する手
ぶれおよび被写体移動の影響をさらに軽減することがで
きる。
【０５１１】さらにまた本発明によれば、前記移動手段
は、屈折板を圧電素子で駆動する構成を有する。この移
動手段は、構成要素が少なく、さらに傾斜板を含む各構
成部材の小型化が容易であるので、携帯用の撮像装置に
も適用することができる。
【０５１２】また本発明によれば、前記移動手段は、光
学的手ぶれ補正装置にも用いられる可変頂角プリズムで
ある。これによって、光学的手ぶれ補正装置をこの撮像
装置に組み込むとき、装置の部品点数を減少させること
ができる。
【０５１３】また本発明によれば、撮像装置は、原画像
信号と合成画像信号とをそれぞれ出力する２つのモード
を有し、各モードごとに可変空間フィルタにおける空間
周波数成分の減衰量を変更する。これによって、原画像
および合成画像の両方の画質を充分に保つことができ
る。
【図面の簡単な説明】
【図１】本発明の第１実施形態である撮像装置３１の構
成を示すブロック図である。
【図２】撮像素子３４の結像面の具体的な構成を示す平
面図である。
【図３】色フィルタの透光領域Ｌの色配列の基本配列パ
ターン５６を示す図である。
【図４】原画像の画素Ｄの等価的な配列の基本配列パタ
ーン５７を示す図である。
【図５】光学系３３の集光レンズ６１，およびイメージ
シフト機構６２の屈折板７１、ならびに撮像素子６４の
位置関係を示す図である。
【図６】イメージシフト機構６２の具体的な構成を示す
斜視図である。
【図７】可変空間フィルタ９０の具体的な構成を示す斜
視図である。
【図８】第１状態の可変空間フィルタ９０の複屈折板９
１〜９３の分離ベクトルＢ１〜Ｂ３を示す図である。
【図９】第１状態の可変空間フィルタ９０の複屈折板９
１〜９３を通過した画像光の結像位置を表す仮想結像面
を示す図である。
【図１０】第２状態の可変空間フィルタ９０の複屈折板
９３の分離ベクトルＢ３ａを示す図である。
【図１１】第２状態の可変空間フィルタ９０の複屈折板
９３を通過した画像光の結像位置を表す仮想結像面を示
す図である。
【図１２】水平方向Ｈの空間周波数軸に対する輝度信号
および色差信号のスペクトルを示すグラフである。
【図１３】第１出力画像信号の輝度の基底帯域１１１お
よび色差信号のモアレのキャリア周波数を示す空間周波
数平面図である。
【図１４】高解像度モードでの撮像素子３４の結像面に
おける画像光の第１および第２結像位置Ｑａ１，Ｑｂ１
の位置関係を示す図である。
【図１５】合成画像の画素Ｄの等価的な配列の基本配列
パターン１１３を示す図である。
【図１６】第２出力画像信号の輝度の基底帯域１１５お
よび色差信号のモアレのキャリア周波数を示す空間周波
数平面図である。
【図１７】本発明の第２実施形態である撮像装置の撮像
素子１３１の結像面の具体的な構成を示す平面図であ
る。
【図１８】第２実施形態の撮像装置に備えられるシャッ
タ機構１４１の具体的な構成を示す斜視図、およびシャ
ッタ板１４３の正面図である。
【図１９】第２実施形態の撮像装置の高解像度モードに
おいて、シャッタの開閉動作、オーバフロードレインの
開閉動作、電荷読出し動作、露光動作、光軸の変位動
作、およびデータ転送動作の動作タイミングを示すタイ
ミングチャートである。
【図２０】第２実施形態のシャッタ機構１４１の電気的
構成を示すブロック図である。
【図２１】従来技術の撮像装置における高解像度モード
の等価撮像時間Ｔｅｓ０を説明するためのタイミングチ
ャートである。
【図２２】電子シャッタだけを用いた２ポジションイメ
ージシフトの全画素読出し型撮像装置における等価撮像
時間Ｔｅｓ１を説明するためのタイミングチャートであ
る。
【図２３】第２実施形態の撮像装置の高解像度モードに
おける等価撮像時間Ｔｅｓ２を説明するためのタイミン
グチャートである。
【図２４】第１実施形態の撮像装置３１の高解像度モー
ドにおける等価撮像時間Ｔｅｓ３を説明するためのタイ
ミングチャートである。
【図２５】電子シャッタおよびシャッタ機構を併用した
２ポジションイメージシフトの２画素混合読出し型撮像
装置における等価撮像時間Ｔｅｓ４を説明するためのタ
イミングチャートである。
【図２６】第２実施形態の撮像装置の色フィルタの透光
領域Ｌの色配列の基本配列パターン１８１を示す図であ
る。
【図２７】第２実施形態の撮像装置の第１出力画像信号
の輝度の基底帯域１８２、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図２８】第２実施形態の撮像装置の高解像度モードの
合成画像の画素Ｄの等価的な配列の基本配列パターン１
８３を示す図である。
【図２９】第２実施形態の撮像装置の第２出力画像信号
の輝度の基底帯域１８４、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図３０】本発明の第３実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン１８６
を示す図である。
【図３１】本発明の第４実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン１９１
を示す図である。
【図３２】第４実施形態の撮像装置に備えられる可変空
間フィルタ２００の具体的な構成を示す斜視図である。
【図３３】第１状態の可変空間フィルタ２００の複屈折
板２０１〜２０３の分離ベクトルＢ４〜Ｂ６を示す図で
ある。
【図３４】第１状態の可変空間フィルタ２００の複屈折
板２０１〜２０３を通過した画像光の結像位置を表す仮
想結像面を示す図である。
【図３５】第２状態の可変空間フィルタ２００の複屈折
板２０３の分離ベクトルＢ６ａを示す図である。
【図３６】第２状態の可変空間フィルタ２００の複屈折
板２０３を通過した画像光の結像位置を表す仮想結像面
を示す図である。
【図３７】第４実施形態の撮像装置の第１出力画像信号
の輝度の基底帯域１９２、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図３８】第４実施形態の撮像装置の高解像度モードで
の撮像素子の結像面における画像光の第１および第２結
像位置Ｑａ４，Ｑｂ４の位置関係を示す図である。
【図３９】第４実施形態の撮像装置の高解像度モードの
合成画像の画素Ｄの等価的な配列の基本配列パターン１
９３を示す図である。
【図４０】第４実施形態の撮像装置の第２出力画像信号
の輝度の基底帯域１９４、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図４１】本発明の第５実施形態である撮像装置の第２
出力画像信号の輝度の基底帯域１９６、および色差信号
のモアレのキャリア周波数を示す空間周波数平面図であ
る。
【図４２】本発明の第６実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン１９８
を示す図である。
【図４３】第６実施形態の撮像装置の高解像度モードで
の固体撮像素子の結像面における画像光の第１および第
２結像位置Ｑａ６，Ｑｂ６の位置関係を示す図である。
【図４４】本発明の第７実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン２１１
を示す図である。
【図４５】第７実施形態の撮像装置に備えられる可変空
間フィルタ２２０の具体的構造を示す斜視図である。
【図４６】第１状態の可変空間フィルタ２２０の複屈折
板２２１〜２２５の分離ベクトルＢ１１〜Ｂ１５を示す
図である。
【図４７】複屈折板２２１，２２４，２２５の分離ベク
トルＢ１１，Ｂ１４，Ｂ１５の関係を示す図である。
【図４８】第１状態の可変空間フィルタ２００の複屈折
板２２１〜２２５を通過した画像光の結像位置を表す仮
想結像面を示す図である。
【図４９】第２状態の可変空間フィルタ２００の複屈折
板２２３，２２５の分離ベクトルＢ１３ａ，Ｂ１５ａを
示す図である。
【図５０】第２状態の可変空間フィルタ２００の複屈折
板２２３〜２２５を通過した画像光の結像位置を表す仮
想結像面を示す図である。
【図５１】第７実施形態の撮像装置の第１出力画像信号
の輝度の基底帯域２１２、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図５２】第７実施形態の撮像装置の高解像度モードで
の撮像素子の結像面における画像光の第１および第２結
像位置Ｑａ７，Ｑｂ７の位置関係を示す図である。
【図５３】第７実施形態の撮像装置の高解像度モードの
合成画像の画素Ｄの等価的な配列の基本配列パターン２
１３を示す図である。
【図５４】第７実施形態の撮像装置の第２出力画像信号
の輝度の基底帯域２１４、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図５５】本発明の第８実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン２１６
を示す図である。
【図５６】本発明の第９実施形態である撮像装置の色フ
ィルタの透光領域Ｌの色配列の基本配列パターン２３１
を示す図である。
【図５７】第９実施形態の撮像装置の第１出力画像信号
の輝度の基底帯域２３２、および色差信号のモアレのキ
ャリア周波数を示す空間周波数平面図である。
【図５８】第９実施形態の撮像装置の高解像度モードの
合成画像の画素Ｄの等価的な配列の基本配列パターン２
３３を示す図である。
【図５９】本発明の第１０実施形態である撮像装置の色
フィルタの透光領域Ｌの色配列の基本配列パターン２４
１を示す図である。
【図６０】第１０実施形態の撮像装置の第１出力画像信
号の輝度の基底帯域２４２、および色差信号のモアレの
キャリア周波数を示す空間周波数平面図である。
【図６１】第１０実施形態の撮像装置の高解像度モード
の合成画像の画素の等価的な配列の基本配列パターン２
４３を示す図である。
【図６２】第１０実施形態の撮像装置の第２出力画像信
号の輝度の基底帯域２４４、および色差信号のモアレの
キャリア周波数を示す空間周波数平面図である。
【図６３】本発明の第１１実施形態である撮像装置の色
フィルタの透光領域Ｌの色配列の基本配列パターン２４
６を示す図である。
【図６４】本発明の第１〜第１１実施形態の撮像装置の
イメージシフト機構の別の例である可変頂角プリズム２
５１を示す斜視図である。
【図６５】図６３の可変頂角プリズム２５１のＡ−Ａ断
面図である。
【図６６】第１状態の図６３の可変頂角プリズム２５１
のＡ−Ａ断面図である。
【図６７】第２状態の図６３の可変頂角プリズム２５１
のＡ−Ａ断面図である。
【図６８】第２の従来技術である電子スチルカメラ１の
構成を示すブロック図である。
【図６９】電子スチルカメラ１の撮像素子４の光入射側
に備えられる色フィルタ１６の透光領域１７の配列状態
を示す図である。
【図７０】電子スチルカメラ１の高解像度モードの第１
の例において、撮像素子の結像面における画像光の結像
位置の移動位置の位置関係を示す図である。
【図７１】電子スチルカメラ１の高解像度モードの第１
の例において生成される出力画像のうち、基本配列パタ
ーン２１に対応する部分の出力画像の画素配列を示す図
である。
【図７２】電子スチルカメラ１の高解像度モードの第２
の例において、固体撮像素子の結像面における画像光の
結像位置の移動位置の位置関係を示す図である。
【図７３】電子スチルカメラ１の高解像度モードの第２
の例において生成される出力画像のうち、基本配列パタ
ーン２１に対応する部分の出力画像の画素配列を示す図
である。
【符号の説明】
３１ 撮像装置 ３３ 光学系 ３４，１３１ 撮像素子 ３７ 画像メモリ ４４ 信号処理回路 ４５ 記録媒体 ６２ イメージシフト機構 ７１ 屈折板 ２５１ 可変頂角プリズム
───────────────────────────────────────────────────── フロントページの続き (72)発明者 奥田 徹 大阪府大阪市阿倍野区長池町22番22号 シ ャープ株式会社内

Claims (13)

    【特許請求の範囲】
  1. 【請求項１】 複数の色彩光にそれぞれ対応し、入射さ
    れる被写体からの画像光のうちの対応する色彩光だけを
    個別的に通過させる複数の透光領域を有し、該透光領域
    が２次元平面上に予め定める配列で配列される色分離フ
    ィルタと、 画像光を撮像して画像信号を出力する撮像素子であっ
    て、 色分離フィルタの透光領域に個別的に対応した受光領域
    が、透光領域の予め定める配列と同等の配列で２次元平
    面上に配列され、 各受光領域では対応した透光領域を通過した色彩光だけ
    を受光し、 各受光領域の受光量を示す画素データから構成される画
    像信号を出力する撮像素子と、 撮像素子に入射される画像光の結像位置を、予め定める
    第１および第２移動位置に相対的に移動させる移動手段
    と、 移動手段における結像位置の移動が行われるたびに、予
    め定める露光時間だけ撮像素子における画像光の受光を
    許容する露光許容手段と、 撮像素子の出力に応答し、出力された２つの画像信号を
    撮像時の結像位置の離反量だけ位置の移動方向とは逆方
    向にずらして重ね合わせて、合成画像信号を生成する画
    像生成手段と、 画像光の撮像が開始されると、移動手段によって画像光
    の結像位置を第１および第２移動位置のいずれか一方位
    置に移動させ、該移動位置において露光許容手段に許容
    される間だけ撮像素子に画像光を撮像させて画像信号を
    画像生成手段に与え、次いで移動手段によって結像位置
    をいずれか他方位置に移動させ、該移動位置において露
    光許容手段に許容される間だけ撮像素子に画像光を撮像
    させて画像信号を画像生成手段に与える制御手段とを含
    むことを特徴とする撮像装置。
  2. 【請求項２】 前記合成画像信号は、複数の画素データ
    から構成され、 合成画像信号が表す合成画像を目視表示する目視表示領
    域を有する表示手段であって、 目視表示領域は、合成画像信号の各画素データを目視表
    示する複数の表示画素が、２次元平面上に、相互に直交
    する予め定める主走査方向および副走査方向にそれぞれ
    平行に、行列状に配列されて形成され、 主走査方向に沿う表示画素の配列数が、副走査方向に沿
    う表示画素の配列数よりも多くなる表示手段をさらに有
    し、 前記第１および第２移動位置は、合成画像の主走査方向
    の空間周波数のモアレを消すことができる方向に離反し
    ていることを特徴とする請求項１記載の撮像装置。
  3. 【請求項３】 前記色分離フィルタの透光領域は、第１
    〜第４色彩光をそれぞれ通過させる第１〜第４透光領域
    を含み、 該透光領域の前記予め定める配列は、 相互に直交する一方および他方方向にそれぞれ平行に、
    一方方向に予め定める第１周期でかつ他方方向に予め定
    める第２周期で配列される行列状の配列であって、 第１および第４透光領域が一方方向に沿って隣接して交
    互に直線状に配列される第１群と、第２および第３透光
    領域が一方方向に沿って隣接して交互に直線状に配列さ
    れる第２群とが、他方方向に沿って交互に隣接し、 第２透光領域には、他方方向に沿って両側に第１透光領
    域と第４透光領域とがそれぞれ隣接し、 第４透光領域には、他方方向に沿って両側に第２透光領
    域が隣接しており、前記撮像素子は、前記各受光領域か
    らの画素データを、他方方向に沿って隣接する２つの各
    受光領域毎に混合して、一括して出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期の長さだけ相互にずれた位置であることを特徴とす
    る請求項１記載の撮像装置。
  4. 【請求項４】 前記色分離フィルタの複数の透光領域
    は、第１〜第４色彩光をそれぞれ通過させる第１〜第４
    透光領域に区分され、 該透光領域の前記予め定める配列は、 相互に直交する予め定める一方方向および他方方向にそ
    れぞれ平行に、一方方向に予め定める第１周期でかつ他
    方方向に予め定める第２周期で配列される行列状の配列
    であって、 第１透光領域には、一方方向に沿って両側に第４透光領
    域が隣接し、かつ他方方向に沿った第１の向き側に第２
    透光領域が隣接し、さらに他方方向に沿って第１の向き
    と反対の第２の向き側に第３透光領域が隣接し、 第４透光領域には、他方方向に沿った第２の向き側に第
    ２透光領域が隣接し ており、 前記撮像素子は、前記各受光領域からの画素データを個
    別的に出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期の長さだけ相互にずれた位置であることを特徴とす
    る請求項１記載の撮像装置。
  5. 【請求項５】 前記色分離フィルタの透光領域は、第１
    〜第３色彩光をそれぞれ通過させる第１〜第３透光領域
    に区分され、 該透光領域の予め定める配列は、 相互に直交する予め定める一方方向および他方方向にそ
    れぞれ平行に、一方方向に予め定める第１周期でかつ他
    方方向に予め定める第２周期で配列される行列状の配列
    であって、 第１透光領域には、一方方向に沿った第１の向き側に第
    ２透光領域が隣接し、かつ一方方向に沿って第１の向き
    と反対側の第２の向き側に第３透光領域が隣接し、さら
    に他方方向に沿って両側に第１透光領域が隣接し、 第２透光領域には、一方方向に沿った第１の向き側に第
    ３透光領域が隣接し、他方方向に沿って両側に第２透光
    領域が隣接し、 第３透光領域には、他方方向に沿って両側に第３透光領
    域が隣接しており、前記撮像素子は、前記各受光領域か
    らの画素データを、他方方向に沿って隣接する２つの各
    受光領域毎に混合して、一括して出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期の長さの２分の３倍の長さだけ、かつ他方方向に第
    ２の周期の長さの半分の長さだけ相互にずれた位置であ
    ることを特徴とする請求項１記載の撮像装置。
  6. 【請求項６】 前記色分離フィルタの透光領域は、第１
    〜第３色彩光をそれぞれ通過させる第１〜第３透光領域
    に区分され、 該透光領域の予め定める配列は、 相互に直交する予め定める一方方向および他方方向にそ
    れぞれ平行に、一方方向に予め定める第１周期でかつ他
    方方向に予め定める第２周期で配列される行列状の配列
    であって、 第１透光領域には、一方方向に沿った第１の向き側に第
    ２透光領域が隣接し、かつ一方方向に沿って第１の向き
    と反対側の第２の向き側に第３透光領域が隣接し、さら
    に他方方向に沿って両側に第１透光領域が隣接し、 第２透光領域には、一方方向に沿った第１の向き側に第
    ３透光領域が隣接し、他方方向に沿って両側に第２透光
    領域が隣接し、 第３透光領域には、他方方向に沿って両側に第３透光領
    域が隣接しており、前記画像信号は、前記各受光領域か
    らの画素データを個別的に出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期長さの２分の３倍の長さだけ、かつ他方方向に第２
    周期の長さの半分の長さだけ相互にずれた位置であるこ
    とを特徴とする請求項１記載の撮像装置。
  7. 【請求項７】 前記色分離フィルタの複数の透光領域
    は、第１〜第３色彩光をそれぞれ通過させる第１〜第３
    透光領域に区分され、 該透光領域の前記予め定める配列は、 予め定める一方方向に平行に第１周期で直線状に配列さ
    れた群が、一方方向と直交する他方方向に沿って第２周
    期で配列され、かつ他方方向に隣接する２つの群の各透
    光領域が一方方向に第１周期の半分の長さだけずれる配
    列であって、第１透光領域には、一方方向に沿った第１
    の向き側に第２透光領域が隣接し、かつ一方方向に沿っ
    て第１の向きと反対側の第２の向き側に第３透光領域が
    隣接し、 第２透光領域には、一方方向に沿った第１の向き側に第
    ３透光領域が隣接し、 さらに一方方向に第１周期の半分だけかつ他方方向に第
    ２周期の長さだけずれた第３の向き側に、第１透光領域
    が隣接しており、 前記撮像素子は、前記各受光領域からの画素データを個
    別的に出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から他方方向に第２の
    周期の長さだけ相互にずれた位置であることを特徴とす
    る請求項１記載の撮像装置。
  8. 【請求項８】 前記色分離フィルタの複数の透光領域
    は、第１〜第３色彩光にそれぞれ対応する第１〜第３透
    光領域に区分され、 該透光領域の予め定める配列は 相互に直交する予め定める一方方向および他方方向にそ
    れぞれ平行に、一方方向に予め定める第１周期でかつ他
    方方向に予め定める第２周期で配列される行列状の配列
    であって、 第１および第２透光領域が一方方向に沿って交互に配列
    される直線状の第１群と、第１および第３透光領域が一
    方方向に沿って交互に配列される直線状の第２群とが、
    他方方向に沿って交互に隣接し、 かつ第１群の第１透光領域には、第３透光領域が他方方
    向の両側に隣接しており、 前記撮像素子は、前記各受光領域からの画素データを個
    別的に出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期の長さだけ相互にずれた位置であることを特徴とす
    る請求項１記載の撮像装置。
  9. 【請求項９】 前記色分離フィルタの複数の透光領域
    は、第１〜第３色彩光にそれぞれ対応する第１〜第３透
    光領域に区分され、 該透光領域の予め定める配列は、 第１および第２透光領域が予め定める一方方向に沿って
    予め定める第１周期で直線状に配列された第１群と、第
    １および第３透光領域が一方方向に沿って第１周期で直
    線状に配列された第２群とが、一方方向と直交する他方
    方向に沿って予め定める第２周期で交互に配列され、 かつ第１群の第１透光領域には、一方方向に第１周期の
    長さの半分の長さだけかつ他方方向に第２周期の長さだ
    けずれた向き側に、第３透光領域が隣接する配列であっ
    て、 前記撮像素子は、前記各受光領域からの画素データを個
    別的に出力し、 前記第１移動位置は予め定める基準位置であり、 前記第２移動位置は第１移動位置から一方方向に第１の
    周期の長さだけ相互にずれた位置であることを特徴とす
    る請求項１記載の撮像装置。
  10. 【請求項１０】 前記露光許容手段は、 前記撮像素子の受光領域における電荷の蓄積を許容また
    は禁止する第１許容手段と、 撮像素子に入射する画像光を通過または遮断する第２許
    容手段とを含み、 前記制御手段は、 前記第１および第２移動位置の前記いずれか一方位置に
    おける画像光の撮像時には、第２許容手段によって画像
    光を通過させ、かつ前記露光時間の間だけ第１許容手段
    によって電荷の蓄積を許容させ、 前記いずれか他方位置における撮像時には、第１許容手
    段によって受光領域に電荷の蓄積を許容し、かつ露光時
    間の間だけ第２許容手段によって画像光を通過させるこ
    とを特徴とする請求項１記載の撮像装置。
  11. 【請求項１１】 前記画像光を集光して、撮像素子の各
    受光領域上に結像させる光学系をさらに含み、 前記移動手段は、 透光性を有する平板状の屈折板と、 屈折板の両側方に、その表面が屈折板の表面にほぼ平行
    になるように配設される一対のバイモルフ型圧電素子で
    あって、該素子の長手方向の一方の自由端が屈折板の一
    端に接合され、屈折板の他端が該素子の他方の固定端に
    向かって延びるように屈折板を支持し、屈折板内を通る
    仮想回転中心を中心として該屈折板を傾斜させる１対の
    バイモルフ型圧電素子と、 光学系の光軸線と屈折板の法線との成す傾斜角度を検出
    する検出手段と、 検出手段の出力と予め定める目標値とを比較し、その誤
    差量を出力する比較手段と、 比較手段の出力に応答し、屈折板の傾斜角度が予め定め
    る目標値となるように、一対のバイモルフ型圧電素子を
    駆動する駆動手段とを備えることを特徴とする請求項１
    記載の撮像装置。
  12. 【請求項１２】 前記画像光を集光して、撮像素子の各
    受光領域上に結像させる光学系をさらに含み、 前記移動手段は、 透光性を有し、相互に直交する仮想回転中心を有する平
    板状の１対の透明平板と、 各仮想回転中心を中心として、該透明平板を傾斜させる
    傾斜手段と、 透明平板間に介在され、変形可能であって空気の屈折率
    よりも大きい屈折率を有する屈折物質層と、 光学系の光軸線と各透明平板の法線との成す傾斜角度を
    それぞれ検出する検出手段と、 検出手段の出力と予め定める目標角度とを比較し、その
    誤差量を出力する比較手段と、 比較手段の出力に応答し、傾斜角度が予め定める目標角
    度となるように、一傾斜手段を駆動する駆動手段とを備
    えることを特徴とする請求項１記載の撮像装置。
  13. 【請求項１３】 移動手段における結像位置の移動を許
    容または禁止する移動判定手段と、 撮像素子に入射される画像光の空間周波数成分を減衰さ
    せる可変空間フィルタであって、結像位置の移動が禁止
    されるときには空間周波数成分を第１の減衰量だけ減衰
    させ、許容されるときには第２の減衰量だけ減衰させる
    可変空間フィルタとをさらに含むことを特徴とする請求
    項１記載の撮像装置。
JP27116996A 1996-10-14 1996-10-14 撮像装置 Expired - Fee Related JP3617887B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP27116996A JP3617887B2 (ja) 1996-10-14 1996-10-14 撮像装置
US08/950,361 US6577341B1 (en) 1996-10-14 1997-10-14 Imaging apparatus
EP97117746A EP0836330A3 (en) 1996-10-14 1997-10-14 Colour imaging apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP27116996A JP3617887B2 (ja) 1996-10-14 1996-10-14 撮像装置

Publications (2)

Publication Number Publication Date
JPH10126797A true JPH10126797A (ja) 1998-05-15
JP3617887B2 JP3617887B2 (ja) 2005-02-09

Family

ID=17496309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27116996A Expired - Fee Related JP3617887B2 (ja) 1996-10-14 1996-10-14 撮像装置

Country Status (3)

Country Link
US (1) US6577341B1 (ja)
EP (1) EP0836330A3 (ja)
JP (1) JP3617887B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009505170A (ja) * 2005-07-01 2009-02-05 マイクロソフト コーポレーション 対話式メディア環境での複数アプリケーションのレンダリングおよび合成
JP2010010958A (ja) * 2008-06-25 2010-01-14 Olympus Corp マルチバンド画像撮像方法および装置
JP2016533695A (ja) * 2013-10-04 2016-10-27 アイシークラリティー，インク． センサの全解像度における複数のタイプのデータを測定するためにアレイセンサを使用する方法

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7123299B1 (en) * 1999-04-15 2006-10-17 Olympus Optical Co., Ltd. Color image pickup device and color image pickup apparatus including a randomized color coding array
US7088391B2 (en) * 1999-09-01 2006-08-08 Florida Atlantic University Color video camera for film origination with color sensor and luminance sensor
JP2001094883A (ja) * 1999-09-17 2001-04-06 Victor Co Of Japan Ltd 固体撮像装置
US7230646B2 (en) * 1999-12-22 2007-06-12 Florida Atlantic University Single sensor electronic video camera technique with diagonally coupled pixels
JP2001188202A (ja) * 1999-12-28 2001-07-10 Victor Co Of Japan Ltd 撮像装置
US6967677B1 (en) * 2000-09-15 2005-11-22 Sinar Ag Microscan guidance
JP2002176588A (ja) * 2000-12-06 2002-06-21 Canon Inc 撮像方法及び撮像装置並びに記憶媒体
US7408584B2 (en) 2001-08-22 2008-08-05 Florida Atlantic University Producing video signals using sensor and lenticular lens pattern
US7834927B2 (en) 2001-08-22 2010-11-16 Florida Atlantic University Apparatus and method for producing video signals
US20030063185A1 (en) * 2001-09-28 2003-04-03 Bell Cynthia S. Three-dimensional imaging with complementary color filter arrays
KR100485059B1 (ko) * 2001-10-19 2005-04-22 후지쓰 텐 가부시키가이샤 화상표시장치
JP4097966B2 (ja) * 2002-03-22 2008-06-11 オリンパス株式会社 画像取得装置
JP4426946B2 (ja) * 2004-10-27 2010-03-03 オリンパス株式会社 デジタルカメラシステム
WO2006133133A2 (en) 2005-06-03 2006-12-14 Mediapod Llc Multi-dimensional imaging system and method
US8799757B2 (en) * 2005-07-01 2014-08-05 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US8020084B2 (en) 2005-07-01 2011-09-13 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US7721308B2 (en) 2005-07-01 2010-05-18 Microsoft Corproation Synchronization aspects of interactive multimedia presentation management
US8108787B2 (en) * 2005-07-01 2012-01-31 Microsoft Corporation Distributing input events to multiple applications in an interactive media environment
US7941522B2 (en) * 2005-07-01 2011-05-10 Microsoft Corporation Application security in an interactive media environment
US20070006062A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
US20070006065A1 (en) * 2005-07-01 2007-01-04 Microsoft Corporation Conditional event timing for interactive multimedia presentations
US8656268B2 (en) 2005-07-01 2014-02-18 Microsoft Corporation Queueing events in an interactive media environment
US8072502B2 (en) * 2005-12-12 2011-12-06 Sony Ericsson Mobile Communications Ab Multi-mega pixel resolution with small sensor
DE502006006893D1 (de) * 2006-05-24 2010-06-17 Stueckler Gerd Verfahren zur Raumfilterung und Bildaufnahmegerät
US8761504B2 (en) * 2006-11-29 2014-06-24 President And Fellows Of Harvard College Spatio-spectral sampling paradigm for imaging and a novel color filter array design
JP5569084B2 (ja) * 2010-03-25 2014-08-13 セイコーエプソン株式会社 画像表示装置および画像表示方法
JP6222935B2 (ja) * 2013-02-14 2017-11-01 キヤノン株式会社 画像形成装置
CN111008963B (zh) * 2019-11-27 2023-12-22 京东方科技集团股份有限公司 摩尔纹量化评价方法及装置、电子设备、存储介质

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58169966A (ja) * 1982-03-31 1983-10-06 Toshiba Corp 固体撮像装置の駆動方式
JPS59174085A (ja) * 1983-03-23 1984-10-02 Toshiba Corp カラ−固体撮像装置
JPS6077733A (ja) 1983-10-03 1985-05-02 オリンパス光学工業株式会社 撮像用自動調光装置
JPS62115985A (ja) 1985-11-14 1987-05-27 Toshiba Corp 固体カラ−撮像装置
JPS62226789A (ja) 1986-03-27 1987-10-05 Toshiba Corp 固体カラ−撮像装置
US4827348A (en) 1988-05-02 1989-05-02 Polaroid Corporation Exposure control system for dual mode electronic imaging camera
JPH02137590A (ja) * 1988-11-18 1990-05-25 Brother Ind Ltd 画像入力装置
JPH03226078A (ja) * 1990-01-30 1991-10-07 Minolta Camera Co Ltd ビデオカメラ
JP2722753B2 (ja) 1990-02-27 1998-03-09 富士写真フイルム株式会社 光学フィルタ
JP3109084B2 (ja) 1990-07-11 2000-11-13 ミノルタ株式会社 ディジタルスチルカメラ
JP2840401B2 (ja) 1990-07-17 1998-12-24 キヤノン株式会社 ビデオカメラ装置
JP2845604B2 (ja) 1990-10-17 1999-01-13 アイワ株式会社 カラー固体撮像装置
JP3018101B2 (ja) 1990-11-06 2000-03-13 キヤノン株式会社 カラー撮像装置
JPH05347766A (ja) 1991-03-29 1993-12-27 Toshiba Corp 画像入力装置
JP3248695B2 (ja) 1991-08-31 2002-01-21 マツダ株式会社 ワークの加工方法及び加工装置
JPH05344432A (ja) 1992-06-09 1993-12-24 Sony Corp 固体撮像装置
JP3380913B2 (ja) * 1992-06-11 2003-02-24 ソニー株式会社 固体撮像装置
JP2635917B2 (ja) 1992-09-11 1997-07-30 株式会社東芝 電子スチルカメラ
US5402171A (en) * 1992-09-11 1995-03-28 Kabushiki Kaisha Toshiba Electronic still camera with improved picture resolution by image shifting in a parallelogram arrangement
JPH0715732A (ja) 1993-06-23 1995-01-17 Sony Corp カラー撮像装置
JPH0799664A (ja) 1993-09-28 1995-04-11 Sanyo Electric Co Ltd 高精細撮像装置
JPH07123421A (ja) 1993-10-27 1995-05-12 Canon Inc 撮像装置
US5889553A (en) * 1993-11-17 1999-03-30 Canon Kabushiki Kaisha Image pickup apparatus capable of high resolution imaging
JPH07240932A (ja) 1994-02-28 1995-09-12 Canon Inc 撮像装置
JPH07322121A (ja) * 1994-05-20 1995-12-08 Canon Inc 高画質画像入力装置
JPH07322152A (ja) 1994-05-20 1995-12-08 Canon Inc 撮像方法及び撮像装置
JP3038134B2 (ja) 1994-06-20 2000-05-08 シャープ株式会社 撮像装置
JP3382359B2 (ja) 1994-07-22 2003-03-04 キヤノン株式会社 撮像装置
JP3190220B2 (ja) 1994-12-20 2001-07-23 シャープ株式会社 撮像装置
JPH08250692A (ja) * 1995-03-10 1996-09-27 Sharp Corp 光学装置
JPH08275184A (ja) 1995-03-30 1996-10-18 Sony Corp 撮像装置
JP3471156B2 (ja) * 1995-05-30 2003-11-25 シャープ株式会社 イメージシフト機構および撮像装置
JPH0974524A (ja) * 1995-07-05 1997-03-18 Sharp Corp 画像入力装置
JP3432051B2 (ja) * 1995-08-02 2003-07-28 キヤノン株式会社 光電変換装置
US5834761A (en) 1996-03-22 1998-11-10 Sharp Kabushiki Kaisah Image input apparatus having a spatial filter controller
JP3229195B2 (ja) * 1996-03-22 2001-11-12 シャープ株式会社 画像入力装置
JP3495842B2 (ja) 1996-03-25 2004-02-09 シャープ株式会社 撮像装置
JP3223103B2 (ja) 1996-03-25 2001-10-29 シャープ株式会社 撮像装置
US5805217A (en) * 1996-06-14 1998-09-08 Iterated Systems, Inc. Method and system for interpolating missing picture elements in a single color component array obtained from a single color sensor

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009505170A (ja) * 2005-07-01 2009-02-05 マイクロソフト コーポレーション 対話式メディア環境での複数アプリケーションのレンダリングおよび合成
JP2010010958A (ja) * 2008-06-25 2010-01-14 Olympus Corp マルチバンド画像撮像方法および装置
JP2016533695A (ja) * 2013-10-04 2016-10-27 アイシークラリティー，インク． センサの全解像度における複数のタイプのデータを測定するためにアレイセンサを使用する方法

Also Published As

Publication number Publication date
EP0836330A3 (en) 1999-12-01
JP3617887B2 (ja) 2005-02-09
US6577341B1 (en) 2003-06-10
EP0836330A2 (en) 1998-04-15

Similar Documents

Publication Publication Date Title
JP3617887B2 (ja) 撮像装置
US8120690B2 (en) Imaging device
JP3704238B2 (ja) 撮像装置
US7834927B2 (en) Apparatus and method for producing video signals
JPH0147073B2 (ja)
KR100841895B1 (ko) 이미지 센서 및 컬러 카메라
JP2009005390A (ja) 固体撮像装置
WO2012169301A1 (ja) 立体動画像及び平面動画像を撮像する撮像素子及びこの撮像素子を搭載する撮像装置
JP4603455B2 (ja) 固体撮像装置
EP2680590B1 (en) Color image pick-up element
JP2003116144A (ja) 固体撮像装置
JP3223103B2 (ja) 撮像装置
US7236196B1 (en) Solid-state image pickup apparatus for reading out image signals with pixels reduced in a horizontal direction and a signal reading method for the same
JP2892177B2 (ja) カラー固体撮像装置
JPH11168744A (ja) データ補間処理方法及びそれを用いたカラー撮像装置
JPS6149564A (ja) 固体撮像装置
JP4356311B2 (ja) 固体撮像装置
JP4078093B2 (ja) 撮像装置
JPS6362492A (ja) カラ−画像用固体撮像素子
JPS60263592A (ja) 固体撮像装置
JP3515585B2 (ja) ２板式撮像装置
JP3406674B2 (ja) ２板式撮像装置
JPH08275184A (ja) 撮像装置
JP2001078209A (ja) 固体撮像装置および信号読出し方法
JPH0488780A (ja) カラー撮像素子

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041102

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041105

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081119

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091119

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091119

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101119

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111119

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees