JP5655589B2 - 撮像装置 - Google Patents

Description

本発明は、カラー画像を撮像する撮像装置に関する。

一般的な撮像装置では、被写体光をＲＧＢの３つの色成分に分解してカラー画像を撮像する。撮像素子の種類は、１つの撮像素子にＲＧＢの各色成分に対応する画素を有する単板式と、３つの撮像素子でＲＧＢの各色成分毎に撮像する多板式とがある。特に、処理速度が十分ではない多板式の撮像装置で動画撮影を行う場合、撮像素子から読み出す時間が短くなるように間引き処理が行われていた（例えば特許文献１参照）。

一方、ズームアップ時に高解像度の画像を撮影するために、撮影範囲を複数の領域に分けて領域毎に光学系と撮像素子とを配置して撮影する技術が検討されていた（例えば特許文献２参照）。

特開２００８−０４２９３７号公報 特開２００１−１８６４０４号公報

一般に、動画撮影の場合は、光学ズームや電子ズームなどのズーム機能が多用される。ところが、多板式の撮像装置では、撮像素子から読み出す時間が短くなるように間引き処理が行われているので、特に電子ズームを用いる場合は、画質が劣化するという問題がある。例えば撮影者が動画撮影中に画面に表示されている電子ズームで拡大された被写体を見てもフォーカス状態を確認できない、という問題が生じる。

本発明の目的は、多板式の撮像装置で間引き処理を用いて動画撮影を行う場合でも電子ズームで拡大された被写体の画質劣化を防止できる撮像装置を提供することである。

本発明に係る撮像装置は、複数の色成分に分解された被写体光を各色成分毎に同じ画素配置の画像を撮像する複数の撮像部と、前記複数の撮像部が撮像した前記各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を読み出して予め設定された色配列の画像を生成する間引き補間部と、前記複数の撮像部が撮像した前記各色成分に対応する複数の画像の指定領域から前記各色成分毎に全画素読み出しを行う全画素読み出し部と、前記複数の撮像部で撮影される画像のズーム倍率を可変するズーム部と、前記ズーム部のズーム倍率が予め設定された閾値以下の場合に、前記間引き補間部が生成した前記色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成し、前記ズーム部のズーム倍率が予め設定された閾値より大きい場合に、前記全画素読み出し部が全画素読み出しした前記各色成分毎の画像からカラー画像を生成する画像処理部と、前記画像処理部が生成した画像を表示媒体に表示する表示制御部とを有することを特徴とする。

本発明に係る撮像装置は、多板式の撮像装置で間引き処理を用いて動画撮影を行う場合でも電子ズームで拡大された被写体の画質劣化を防止できる。

実施形態に係る電子カメラ１０１の構成例を示す図である。 全画素読み出しの例を示す図である。 間引き読み出しの例を示す図である。 ベイヤー配列と色補間処理の例を示す図である。 ズーム範囲と読み出し方式の切り換え例を示す図である。 間引き読み出し時の拡大処理例を示す図である。 全画素読み出し時の拡大処理例を示す図である。 領域別に読み出し方式を切り換える例を示す図である。 実施形態に係る電子カメラ１０１の撮影時の処理を示すフローチャートである。 窓枠表示と窓枠内の拡大表示の例を示す図である。 間引き読み出し時と全画素読み出し時の画像イメージを示す図である。 空間周波数特性の例を示す図である。

以下、本発明に係る撮像装置の実施形態について図面を用いて詳しく説明する。ここでは、本発明に係る撮像装置を電子カメラ１０１に適用する例について説明するが、カメラ付携帯電話，ビデオカメラおよびカメラ付ゲーム機などの撮像機能を有する装置であれば同様に適用可能である。

［電子カメラ１０１の一例］
図１は、電子カメラ１０１の一例を示すブロック図である。図１において、電子カメラ１０１は、レンズ１０２と、メカニカルシャッタ１０３と、分光部１０４と、撮像素子１０５と、ＴＧ（タイミングジェネレータ）１０６と、バッファ１０７と、信号処理部１０８と、制御部１０９と、表示部１１０と、メモリカード１１１ａを装着するためのメモリカードＩＦ１１１と、操作部１１２とで構成される。

レンズ１０２は、入射する被写体光をメカニカルシャッタ１０３および分光部１０４を介して撮像素子１０５の受光面に結像する。

メカニカルシャッタ１０３は、制御部１０９の指令に応じたシャッタ速度で開閉される。

分光部１０４は、例えばダイクロイックミラーやダイクロイックプリズムなどの分光部材が用いられる。そして、レンズ１０２およびメカニカルシャッタ１０３を介して入射する被写体光は、分光部１０４でＲ（赤色）、Ｇ（緑色）およびＢ（青色）の３つの色成分に分光され、Ｒ成分の光はＲ用撮像素子１０５ａに、Ｇ成分の光はＧ用撮像素子１０５ｂに、Ｂ成分の光はＢ用撮像素子１０５ｃにそれぞれ入射される。

撮像素子１０５は、ＲＧＢの３色に対応するＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子を有する。これらの固体撮像素子の受光面には、複数の画素が行列状に配置され、各画素で光電変換された信号がＴＧ１０６のタイミングに応じてバッファ１０７に読み出される。尚、本実施形態では、これらの固体撮像素子として、指定した画素位置から信号を読み出すことが可能なＣＭＯＳセンサを用いる。また、図１に示した撮像素子１０５は、各画素から読み出された画像信号をデジタルの画像データにＡ／Ｄ変換して出力し、バッファ１０７に直接記憶するようになっている。これに対して、撮像素子１０５がアナログの画像信号を出力する場合は、撮像素子１０５とバッファ１０７との間にＡ／Ｄ変換やゲイン調整を行うＡＦＥ（アナログフロントエンド）回路を設ければよい。

ＴＧ１０６は、制御部１０９の指令に応じて撮像素子１０５に各画素から画像信号を読み出すためのタイミング信号を出力する。ここで、ＴＧ１０６は、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子間で異なる位置の画素から信号を読み出すためのタイミング信号を出力する機能を有している。例えばＴＧ１０６は、制御部１０９の指令に応じて、奇数行や偶数行の指定、さらに１行置きや１列置きなど間引き行数や間引き列数の指定を行うためのタイミング信号を出力する。

バッファ１０７は、例えば揮発性の高速メモリが用いられ、撮像素子１０５から読み出される画像データが一時的に記憶される。ここで、バッファ１０７は、説明が理解し易いように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子に対応するＲバッファ１０７ａ，Ｒバッファ１０７ｂおよびＲバッファ１０７ｃの３つの記憶領域を有するものとしたが、撮像素子１０５から間引いて読み出されたＲ画像データ、Ｇ画像データおよびＢ画像データを組み合わせて１画面分の画像データを作成しながら記憶するようにしてもよい。尚、バッファ１０７は信号処理部１０８が画像処理を行うための処理用バッファや表示部１１０に表示する画像を一時的に保持するための表示用バッファとしても用いられる。

信号処理部１０８は、バッファ１０７に取り込まれた画像データに対して制御部１０９から指示された所定の画像処理を行う。ここで、所定の画像処理とは、例えばホワイトバランス処理やガンマ補正処理あるいは画像圧縮処理などである。また、画像圧縮処理は、静止画撮影の場合は例えばＪＰＥＧ規格などによる画像圧縮を行い、動画撮影の場合は例えばＭｏｔｉｏｎ−ＪＰＥＧ規格やＭＰＥＧ規格などによる画像圧縮を行う。

制御部１０９は、例えば内部に予め記憶されているプログラムコードに従って動作するＣＰＵを有し、操作部１１２に設けられた各種の操作ボタンの操作に応じて電子カメラ１０１全体の動作を制御する。例えば制御部１０９は、メカニカルシャッタ１０３の開閉制御、ＴＧ１０６に対する撮像素子１０５の読み出し画素の指定、信号処理部１０８への画像処理内容の指示、バッファ１０７への画像データの読み書き、表示部１１０への画像やメニュー画面の表示、メモリカードＩＦ１１１に装着されているメモリカード１１１ａへの画像データの読み書き、操作部１１２の各操作ボタンの操作内容の入力などの処理を行う。特に、本実施形態に係る電子カメラ１０１では、制御部１０９は、間引き読み出し部１５１と、全画素読み出し部１５２と、ズーム処理部１５３と、レンズ情報取得部１５４と、表示処理部１５５とを有する。

ここで、間引き読み出し部１５１は、撮像素子１０５の予め決められた間引き画素を除く画素から信号を読み出す処理を行う。全画素読み出し部１５２は、撮像素子１０５から画素を間引かずに全画素から信号を読み出す処理を行う。ズーム処理部１５３は、操作部１１２のズームボタン１１２ｅの操作に応じてレンズ部１０２のズームレンズの焦点距離を調節する処理を行う。レンズ情報取得部１５４は、レンズ部１０２のズームレンズの焦点距離情報を取得する。表示処理部１５５は、撮影された画像やメニュー画面を表示部１１０に表示したり、表示される画面の一部または全画面の拡大縮小処理を行って表示したり、窓枠の描画などを行う。

表示部１１０は、例えば液晶モニタが用いられ、制御部１０９が出力するメニュー画面や撮影画像を表示する。

メモリカードＩＦ１１１は、電子カメラ１０１に脱着可能なメモリカード１１１ａに撮影された画像データを記録するためのインターフェースである。例えば制御部１０９は、撮影した静止画や動画をメモリカードＩＦ１１１を介してメモリカード１１１ａに保存する。

操作部１１２は、電源ボタン１１２ａ、レリーズボタン１１２ｂ、動画ボタン１１２ｃ、静止画ボタン１１２ｄ、ズームボタン１１２ｅ、モード選択ダイヤル１１２ｆおよび窓枠表示ボタン１１２ｇなどの操作ボタンを有する。撮影者は、これらの操作ボタンを用いて電子カメラ１０１を操作し、これらの操作ボタンのオンオフなどの操作情報は制御部１０９に出力される。そして、制御部１０９は、操作部１１２から入力する操作情報に応じて、電子カメラ１０１全体の動作を制御する。例えば、動画ボタン１１２ｃが押下された場合は動画撮影モードが選択され、静止画ボタン１１２ｄが押下された場合は静止画撮影モードが選択される。続いて、レリーズボタン１１２ｂが押下されると、動画撮影モードの場合は所定のフレームレート（例えば３０フレーム／秒）で動画撮影を開始し、静止画撮影モードの場合は所定のシャッタ速度でメカニカルシャッタ１０３を開閉して静止画撮影を行う。尚、動画撮影の場合は、動画撮影中に再びレリーズボタン１１２ｂが押下されると、動画撮影を終了する。

尚、本実施形態に係る電子カメラ１０１は、静止画撮影モードが選択されている場合は撮像素子１０５から全画素の画像データを読み出し、動画撮影モードが選択されている場合は撮像素子１０５から予め設定された一部の画素の画像データを間引いて読み出す機能を有する。

［間引き読み出し方式と全画素読み出し方式］
先ず、本実施形態に係る電子カメラ１０１の基本となる間引き読み出しの技術について説明する。尚、先に説明したように、間引き読み出しは、制御部１０９の間引き読み出し部１５１が行う。

一般に動画撮影の場合は、被写体の動きが滑らかになるように、ある程度以上のフレームレート（例えば３０フレーム／秒以上）が必要である。ところが、本実施形態に係る電子カメラ１０１のように、ＲＧＢ３色に対応する３板式の撮像素子１０５を有する場合は、全画素読み出しに時間が掛かる（撮像素子が３つあるので単純計算で３倍の時間が掛かる）ことや、読み出しが可能であっても情報量が３倍に増えて読み出し後の画像処理に時間が掛かるため、動画撮影に使用するためには高価で高性能な処理装置が必要になる。プロ用のカメラの場合は高性能が要求されるので高価でも受け入れられるが、普及型のカメラでは難しい。このため、普及型のカメラでは、動画撮影時に画素間引きを行うことによって処理負荷を軽減する方法が考えられているが、輝度モアレやジャギーおよび解像感などの点で問題があった。

そこで、本実施形態に係る電子カメラ１０１は、ＲＧＢ３色に対応する３板式の撮像素子１０５から画像データを読み出す時に、各色成分に対応するＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の互いに重複しない位置の画素から画像データを読み出して予め設定された色配列の画像を生成する。この画像は、本実施形態ではベイヤー配列の画像である。特に、生成された画像には１画面の全画素位置にＲＧＢのいずれかの画像データが撮像素子１０５から読み出されているので、色成分は異なるが全画素位置に対応する画像情報の欠落を防ぐことができる。これに対して、従来技術のように、同じ画素位置の画像データを間引いて読み出した場合は、共に間引かれた画素位置の画像情報が欠落してしまうという問題がある。このため、本実施形態に係る電子カメラ１０１のように全画素位置の画像情報が保持される場合に比べて補間処理を行った時の輝度モアレが生じ易くなる。また、間引かれた画素位置の画像情報が欠落するため、ジャギーや解像感も劣化する。

さらに、本実施形態に係る電子カメラ１０１は、ベイヤー配列になるようにＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の互いに重複しない画素位置からそれぞれの画像データを読み出すので、単板式のカメラで確立されたベイヤー配列専用の色補間処理などの優れた画像処理技術を適用でき、この点においてもジャギーの軽減や解像感の向上を図ることができる。

図２は、静止画撮影モードにおいて撮像素子１０５から全画素読み出しされる画素位置の一例を示す図である。尚、全画素読み出しは、先に説明したように、制御部１０９の全画素読み出し部１５２が行う。ここで、本実施形態に係る電子カメラ１０１の静止画撮影モードでは、動画撮影モードとの違いが理解し易いように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の全画素から画像データを読み出すものとしたが、これに限定されない。例えば高画質モード、標準モード、エコノミーモードなど予め設定された解像度に従って一部の画像データを読み出すようにしてもよい。

また、図２（ａ）から図２（ｃ）において、ｘ方向に４画素、ｙ方向に４画素の１画面が１６画素の例を示しているが、実際のカメラに搭載される撮像素子１０５は例えば１０００画素×１０００画素など百万画素程度の画素数を有する。

図２（ａ）において、Ｐｒ（ｘ，ｙ）はＲ用撮像素子１０５ａの１画面の画素座標を示し、Ｐｒ（１，１）からＰｒ（４，４）までの１６画素を有する。同様に、図２（ｂ）において、Ｐｇ（ｘ，ｙ）はＧ用撮像素子１０５ｂの１画面の画素座標を示し、Ｐｇ（１，１）からＰｇ（４，４）までの１６画素を有する。また、図２（ｃ）において、Ｐｂ（ｘ，ｙ）はＢ用撮像素子１０５ｃの１画面の画素座標を示し、Ｐｂ（１，１）からＰｂ（４，４）までの１６画素を有する。そして、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の全画素から読み出された画像データは、それぞれＲバッファ１０７ａ、Ｇバッファ１０７ｂおよびＢバッファ１０７ｃに取り込まれる。

図３は、動画撮影モードにおいて撮像素子１０５から間引き読み出しされる画素位置の一例を示す図である。ここで、動画撮影モードにおいて、制御部１０９の間引き読み出し部１５１は、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の全画素から所定の画素位置の画像データを間引いて読み出すようにＴＧ１０６に指令する。尚、図２と同様に、図３の各図において、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子は、ｘ方向に４画素、ｙ方向に４画素の１画面が１６画素を有する。図３（ａ）はＲ用撮像素子１０５ａから間引き読み出しされてＲバッファ１０７ａに取り込まれる画素Ｐｒ（ｘ，ｙ）の一例を示している。尚、図３の各図において、×印の画素位置の画像データは読み出されないことを示す。

図３（ａ）において、Ｒ用撮像素子１０５ａから読み出される画素は奇数行且つ奇数列の画素で、画素Ｐｒ（１，１）、画素Ｐｒ（１，３）、画素Ｐｒ（３，１）、画素Ｐｒ（３，３）の４つの画素である。同様に、図３（ｂ）において、Ｇ用撮像素子１０５ｂから読み出される画素は奇数行且つ偶数列および偶数行且つ奇数列の千鳥状の画素で、画素Ｐｇ（１，２）、画素Ｐｇ（１，４）、画素Ｐｇ（２，１）、画素Ｐｇ（２，３）、画素Ｐｇ（３，２）、画素Ｐｇ（３，４）、画素Ｐｇ（４，１）、画素Ｐｇ（４，３）の８つの画素である。また、図３（ｃ）において、Ｂ用撮像素子１０５ｃから読み出される画素は偶数行且つ偶数列の画素で、画素Ｐｂ（２，２）、画素Ｐｂ（２，４）、画素Ｐｂ（４，２）、画素Ｐｂ（４，４）の４つの画素である。

そして、図３（ａ）のＲ画素、図３（ｂ）のＧ画素および図３（ｃ）のＢ画素を組み合わせると、図４（ａ）に示すようなベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）が得られる。図４（ａ）の例では、１画面がＰｂａｙｅｒ（１，１）からＰｂａｙｅｒ（４，４）の１６画素のベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）である。ここで、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）はバッファ１０７に作成される。

そして、信号処理部１０８は、バッファ１０７に作成されたベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対して、単板式の固体撮像素子で用いられるベイヤー配列用の色補間処理を適用して各画素にＲＧＢ３色の色成分を有する画像データＰｒｇｂ（ｘ，ｙ）を作成する。ここで、ベイヤー配列用の色補間処理は単板式の電子カメラで広く用いられ、高画質化のための様々な技術が用いられた高精度の補間技術が使われている。特に本実施形態では、独自の色配列による間引き処理を行わずに、ベイヤー配列のような既存の色配列になるように間引き処理を行うので、広く利用されている高精度な補間技術を適用できるという利点がある。

このようにして、動画１フレーム分の画像データＰｒｇｂ（ｘ，ｙ）が得られる。尚、動画撮影モードでは、上述のような処理を所定のフレームレート（例えば３０フレーム／秒）で繰り返し行う。また、動画圧縮処理を行う場合、信号処理部１０８は、例えばフレーム間で動きベクトルを求めるなどの圧縮処理を行って圧縮後の動画データを制御部１０９に出力する。そして、制御部１０９は信号処理部１０８から入力する動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。

尚、静止画撮影モードの場合は、図２に示したように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子から読み出された全画素の画像データを有するので、ベイヤー配列のように色補間処理を行う必要がなく、図４（ｂ）に示すような各画素にＲＧＢ３色の色成分を有する高品質の画像データＰｒｇｂ（ｘ，ｙ）が得られる。

また、動画撮影時やスルー画像表示時において、ズームボタン１１２ｅにより予め設定されたズーム倍率より大きくズームアップされた場合、或いは電子ズームを行う場合やフォーカス状態を確認する場合など、予め設定された所定の条件に合致する場合にも、図４（ｂ）のように、撮像素子１０５から全画素読み出しを行う。

このように、本実施形態に係る電子カメラ１０１は、通常の動画撮影は間引き読み出し方式で行うが、撮影中にズームアップなど撮影画像を拡大する場合に、撮影画像の一部の領域または全領域を全画素読み出し方式に切り換えて、画質の劣化を防止できる機能を有している。

尚、全領域を全画素読み出しする場合は、多大な情報を高速に処理する必要があり、処理遅延が生じる場合があるが、スルー画像表示中にピント合わせのためにズームアップして被写体を表示部１１０に拡大表示した際、撮影者は拡大した部分を見続ける。これは、撮影者にピントをあわせたいという心理が働くためで、この時は被写体があまり動かないことが前提となり、全画素読み出しによる表示の遅れはあまり目立たないので、全画素読み出しでの表示でも対応可能である。また、中央部分など一部の領域を全画素読み出しする場合は、読み出す情報量が少なくなるので、領域の大きさにも依存するが処理遅延の影響は生じにくい。

以下、間引き読み出し方式から全画素読み出し方式に切り換える場合のいくつかの例を挙げて説明する。
（応用例１）
応用例１として、ズーム倍率（または焦点距離）に応じて間引き読み出し方式から全画素読み出し方式に切り換える例について説明する。

一般に用いられている光学ズームはズーム倍率がそれほど高くないので、高倍率の撮影では撮影画像を電気的に拡大する電子ズームが用いられている。ところが、動画の撮影では、間引き読み出しで画像を撮影しているので、拡大表示された小さな被写体は、ジャギーや解像感などの点で問題があり、撮影者がフォーカス状態を確認するのは難しい。ここで、一般的な撮影者の心理として、オートフォーカスを用いて撮影している場合でも、目的の被写体にフォーカスが合っているか否かの確認を表示部１１０に表示されている画像を見て確認したくなる傾向が強い。このような場合でも、本実施形態に係る電子カメラ１０１は、表示部１１０に表示されている画像でフォーカス状態を確認可能な高品質の画像を得ることができる。

応用例１の電子カメラ１０１において、制御部１０９は、レンズ部１０２から取得した焦点距離情報に基づいて、撮像素子１０５の読み出し方法を切り換える。尚、レンズ情報は、制御部１０９のレンズ情報取得部１５４によってレンズ部１０２から取得される。

図５は、横軸にレンズ部１０２の焦点距離を示している。レンズ部１０２の光学ズームの範囲は、焦点距離が２８ｍｍから１００ｍｍである。また、制御部１０９のズーム処理部１５３によって処理される電子ズームの範囲は、１００ｍｍから３００ｍｍである。尚、操作部１１２のズームボタン１１２ｅによるズーム操作は、光学ズーム範囲から電子ズーム範囲まで連続して行うことができ、ズーム処理部１５３は、表示部１１０の画面に表示される被写体画像もズーム操作に連動して拡大表示または縮小表示を行う。尚、本実施形態では、基準倍率に対する相対的なパラメータであるズーム倍率ではなく、レンズ部１０２から取得する焦点距離情報を用いる。例えば図５の場合、レンズ部１０２から取得した焦点距離情報が予め設定した焦点距離１００ｍｍ以下の場合は、間引き処理により撮影を行う。或いは、レンズ部１０２から取得した焦点距離情報が予め設定した焦点距離１００ｍｍより大きい場合は、ズームアップした領域（例えば表示部１１０に表示されている領域）を撮像素子１０５から全画素読み出しする。

例えば図６（ａ）に示すように、撮像素子１０５が横３０００画素、縦２０００画素の解像度を有する場合、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの解像度はそれぞれ３０００×２０００画素である。そして、図６（ｂ）に示すように、間引き読み出し後に生成されるベイヤー配列の画像の解像度も３０００×２０００画素である。さらに、図６（ｃ）に示すように、ベイヤー補間処理を行った後の画像データＰｍ（ｘ，ｙ）の解像度も３０００×２０００画素となり、この解像度で画像が撮影され、メモリカード１１１ａに記録される。尚、本実施形態ではわかり易いように、表示部１１０の解像度は、撮像素子１０５から間引き読み出しされるベイヤー配列の解像度以上の解像度を有するものとする。

ここで、光学ズーム範囲内であれば、ズームボタン１１２ｅによるズーム操作が行われても、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの各受光面に結像される画像の解像度は、図６（ａ）に示した３０００×２０００画素で、光学ズームの焦点距離に依らず、図６（ｃ）の解像度で動画撮影を行うことができる。ところが、光学ズーム範囲より大きいズーム操作が行われた場合、光学ズームの最大焦点距離で撮影される画像よりも大きくできないので、図６（ｄ）に示すように、図６（ｃ）の画像の一部を画像処理によって拡大して３０００×２０００画素の解像度の画像を作成する電子ズームを用いる。この拡大処理は、例えば中央の１５００×１０００画素の領域を縦２倍、横２倍に拡大するので、例えば１画素を４画素に置き換える処理を行うので画質が劣化し、ジャギーが目立ち、解像感も悪くなる。但し、実際には、画像が粗くならないように、周辺の画素の情報から数学的な演算処理を行って補間する処理が行われるが、図６（ｂ）の画像を作成する際に間引き処理を行っているので、情報の欠落による画質の劣化は避けられない。

そこで、本実施形態に係る電子カメラ１０１は、図７に示すように、電子ズームによって拡大処理を行う領域は、撮像素子１０５から全画素読み出し方式によって画像を読み出す。例えば図７（ａ）に示すように、Ｒ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの各受光面の３０００×２０００画素のうち電子ズームによって拡大する中央部分の１５００×１０００画素の領域だけ全画素読み出しする。そして、この画像データＰａ（ｘ，ｙ）を縦２倍、横２倍に拡大する。尚、拡大処理によって画質の劣化はあるが、図７（ｂ）の拡大前の画像データＰａ（ｘ，ｙ）は、図６（ｃ）の場合の拡大前の画像データＰｍ（ｘ，ｙ）のように間引かれた画素情報の欠落がないので、細かい部分の再現性も良く、品質の高い拡大処理を行うことができる。

このように、ズーム倍率（または焦点距離）に応じて間引き読み出し方式から全画素読み出し方式に切り換えるので、ズームアップした領域の画像のジャギーを少なくし、解像感のある動画像を撮影することができる。また、スルー画像の撮影時にも同様の処理を行うことにより、撮影者は表示部１１０に表示されるスルー画像を見て、ズームアップした被写体にフォーカスが合っているか否かの確認を容易に行うことができる。一般に、撮影者の心理として、オートフォーカスを用いて撮影している場合でも、目的の被写体にフォーカスが合っているか否かを表示部１１０の画面上で確認したくなる。このような場合でも、本実施形態に係る電子カメラ１０１は、フォーカス状態を確認可能な高品質の画像を撮影することができる。

尚、上記の説明では、図５において、焦点距離が１００ｍｍより大きい電子ズームの範囲で全画素読み出しを行うようにしてもよいし、画質劣化が比較的少ない電子ズームの範囲で処理負荷の大きい全画素読み出しを行わないようにしてもよい。例えば図５の括弧内に示したように、１００ｍｍから２１０ｍｍの電子ズーム範囲では間引き読み出し方式を用い、２１０ｍｍから３００ｍｍの電子ズーム範囲で全画素読み出し方式を用いるようにしてもよい。

或いは、光学ズーム範囲であっても中央部分など予め設定された領域を全画素読み出しするようにしてもよい。この場合も光学ズームの焦点距離が予め設定された範囲で中央部分を全画素読み出しするようにしてもよい。例えば、焦点距離が２８ｍｍなどの広角側にある場合のみ中央部分を全画素読み出しするようにしてもよい。これにより、画面中央に撮影される目標被写体を高画質で撮影することができる。この場合は、図８に示すように、撮影される画像１６１は、全画素読み出しされた中央部分１６２と、間引き読み出しされた周辺部分１６３とが組み合わされた画像が信号処理部１０８または制御部１０９によって生成され、メモリカード１１１ａに記憶される。

［撮影時の処理例］
次に、応用例１における撮影時の処理の流れについて図９のフローチャートを用いて説明する。図９のフローチャートは、制御部１０９の内部に予め記憶されたプログラムに従って実行される処理の流れを示している。

（ステップＳ１０１）撮影者が操作部１１２の電源ボタン１１２ａを押下すると、制御部１０９は電子カメラ１０１を使用可能な状態にする。

（ステップＳ１０２）撮影者が操作部１１２の動画ボタン１１２ｃまたは静止画ボタン１１２ｄのいずれかを押下して撮影モードを選択すると、制御部１０９は選択された撮影モードを内部レジスタなど一時的な記憶領域に保持しておく。

（ステップＳ１０３）制御部１０９は、構図確認用のスルー画像を表示部１１０に表示する処理を開始する。ここで、スルー画像を撮影するために、例えば制御部１０９は、メカニカルシャッタ１０３を開放状態にし、予め設定された所定の解像度（例えば３２０×２４０画素）且つ所定のフレームレート（例えば１５フレーム／秒）をＴＧ１０６に指令して、撮像素子１０５からバッファ１０７に読み出される画像データをスルー画像として表示部１１０に表示する。

（ステップＳ１０４）制御部１０９は、操作部１１２のレリーズボタン１１２ｂが押下されたか否かを判別する。そして、制御部１０９は、レリーズボタン１１２ｂが押下された場合はステップＳ１０５に進み、押下されていない場合はレリーズボタン１１２ｂが押下されるまでステップＳ１０４で待機する。尚、この状態でもスルー画像は表示部１１０に表示されている。

（ステップＳ１０５）ステップＳ１０４でレリーズボタン１１２ｂが押下されたことを検出した制御部１０９は、ステップＳ１０２で内部の一時的な記憶領域に保持された撮影モードに対応する処理を行う。例えば撮影モードが静止画撮影モードである場合はステップＳ１１１に進み、動画撮影モードである場合はステップＳ１０６に進む。

（ステップＳ１０６）制御部１０９は、レンズ部１０２のズームレンズの焦点距離が予め設定された閾値（例えば１００ｍｍ）より大きいか否かを判別する。そして、閾値より大きい場合はステップＳ１０７に進み、閾値以下の場合はステップＳ１０８に進む。

ここで、レンズ部１０２のズームレンズは、操作部１１２のズームボタン１１２ｅにより常時操作可能で、ズームレンズの焦点距離が変わる毎に、レンズ部１０２から制御部１０９に焦点距離情報が出力される。さらに、レンズ部１０２の光学ズームの範囲（例えば、焦点距離が１００ｍｍ）を超えてズームボタン１１２ｅが操作された場合、制御部１０９は、電子ズームに切り替えて、ズームボタン１１２ｅの操作量に応じた焦点距離（例えば２００ｍｍ）を検出し、その焦点距離に対応する画像サイズになるように拡大して表示部１１０に撮影画像を表示する
（ステップＳ１０７）制御部１０９は、表示部１１０に拡大表示されている画像サイズに対応する撮像素子１０５の領域から全画素読み出しして動画撮影を行う。具体的には、制御部１０９は全画素読み出しする画素位置（例えば図７参照）且つ所定のフレームレート（例えば３０フレーム／秒）をＴＧ１０６に指令する。尚、この時、信号処理部１０８または制御部１０９は、図７で説明したように、全画素読み出しされた画像データＰａ（ｘ，ｙ）を拡大処理した画像データＰｚ（ｘ，ｙ）を作成する。そして、作成された画像データＰｚ（ｘ，ｙ）はバッファ１０７に一時的に記憶される。

（ステップＳ１０８）制御部１０９は、間引き読み出しにより動画撮影処理を行う。具体的には、制御部１０９は予め設定された間引き画素位置（例えば図３参照）且つ所定のフレームレート（例えば３０フレーム／秒）をＴＧ１０６に指令する。そして、撮像素子１０５から間引き読み出しされる１フレーム分の画像データをバッファ１０７に一時的に記憶する。この時点で、バッファ１０７には図４（ａ）に示すようなベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）が記憶されている。

（ステップＳ１０９）制御部１０９は、バッファ１０７に取り込まれたベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対して、ベイヤー配列用の色補間処理を行うように信号処理部１０８に指令する。制御部１０９から指令を受けた信号処理部１０８は、ベイヤー配列の画像データＰｂａｙｅｒ（ｘ，ｙ）に対してベイヤー配列用の色補間処理を施して各画素にＲＧＢ３色の色成分を有する画像データＰｒｇｂ（ｘ，ｙ）を作成する。信号処理部１０８が作成した画像データＰｒｇｂ（ｘ，ｙ）は、バッファ１０７に一時的に記憶される。

（ステップＳ１１０）制御部１０９は、バッファ１０７に作成された画像データＰｒｇｂ（ｘ，ｙ）に対して、所定の画像処理を行うよう指令する。例えば、信号処理部１０８は、画像データＰｒｇｂ（ｘ，ｙ）に対して、ホワイトバランス処理やガンマ補正処理を行う。さらに、信号処理部１０８は、例えばＭｏｔｉｏｎ−ＪＰＥＧ規格やＭＰＥＧ規格などによる動画用の画像圧縮処理を行う。

（ステップＳ１１１）制御部１０９は、動画用の画像圧縮処理が行われた動画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。ここで、ステップＳ１０６からステップＳ１０９までの処理は、ステップＳ１１０でレリーズボタン１１２ｂの再押下を検出するまで、１フレーム毎に繰り返し行われるが、メモリカード１１１ａに記録される動画データは、１フレーム毎に記録されるとは限らない。例えば、使用する動画用の画像圧縮処理がＭｏｔｉｏｎ−ＪＰＥＧ規格である場合は１フレーム毎に圧縮処理が完結するので１フレーム毎に動画データの記録が可能であるが、ＭＰＥＧ規格などフレーム間の動き検出を行う圧縮処理の場合は複数のフレーム単位で画像圧縮された動画データが記録される。

（ステップＳ１１２）制御部１０９は、操作部１１２のレリーズボタン１１２ｂが押下されたか否かを判別する。そして、制御部１０９は、レリーズボタン１１２ｂが押下された場合はステップＳ１１６に進み、押下されていない場合はステップＳ１０６に戻って動画撮影を継続する。

（ステップＳ１１３）制御部１０９は静止画撮影処理を行う。静止画撮影処理では、例えば図２で説明したように、制御部１０９は撮像素子１０５の全画素から画像データを読み出すようにＴＧ１０６に指令する。そして、撮像素子１０５から読み出される１画面分の画像データをバッファ１０７に一時的に記憶する。この時点で、図４（ｂ）に示すように各画素にはＲＧＢ３色の色成分を有する画像データＰｒｇｂ（ｘ，ｙ）がバッファ１０７に記憶されている。

（ステップＳ１１４）制御部１０９は、バッファ１０７に取り込まれた画像データＰｒｇｂ（ｘ，ｙ）に対して、所定の画像処理を行うよう指令する。そして、信号処理部１０８は、画像データＰｒｇｂ（ｘ，ｙ）に対して、例えばホワイトバランス処理やガンマ補正処理を行う。さらに、信号処理部１０８は、ＪＰＥＧ規格などによる静止画用の画像圧縮処理を行う。尚、制御部１０９は、先に表示部１１０に表示していたスルー画像に続いて、画像データＰｒｇｂ（ｘ，ｙ）を撮影中の動画像として表示部１１０に表示する。

（ステップＳ１１５）制御部１０９は、静止画用の画像圧縮処理が行われた静止画データをメモリカードＩＦ１１１を介してメモリカード１１１ａに記録する。

（ステップＳ１１６）制御部１０９は、一連の動画撮影処理または静止画撮影処理を終了する。この時点で、メモリカード１１１ａには、動画撮影の場合は動画データのファイル（例えばａｂｃ．ｍｐｇ）が作成され、静止画撮影の場合は静止画データのファイル（例えばａｂｃ．ｊｐｇ）が作成される。

以上説明したように、本実施形態に係る電子カメラ１０１は、ズーム倍率（または焦点距離）に応じて間引き読み出し方式から全画素読み出し方式に切り換えるので、ズームアップした領域の画像のジャギーを少なくし、解像感のある動画像を撮影することができる。特に、本実施形態に係る電子カメラ１０１は、通常の動画撮影において、各色成分に対応するＲ用撮像素子１０５ａ、Ｇ用撮像素子１０５ｂおよびＢ用撮像素子１０５ｃの３つの固体撮像素子の互いに重複しない画素位置の画像データを読み出すので輝度モアレを防止やジャギーの軽減および解像感の向上を図ることができる。さらに、単板式の撮影画像に用いられる実績のある優れた画像処理技術を適用できるので、この点においてもジャギーの軽減や解像感の向上を図ることができる。

尚、上記の実施形態では、動画撮影時にズーム操作を行う場合の処理について説明したが、スルー画像を撮影する場合にも動画撮影の場合と同様に、図９のステップＳ１０６からＳ１１０までの処理を行うようにすればよい。
（応用例２）
次に、応用例２として、フォーカス機能と連動して間引き読み出し方式から全画素読み出し方式に切り換える例について説明する。

光学ズームの場合でも、光学ズームの最大倍率でも画面上に小さくしか捉えられない被写体は、撮影者が表示部１１０に表示される画像を見てピントが合っているか否かの判断が難しい。そこで、電子的に画像全体或いはフォーカス対象の小さな被写体部分のみを拡大して表示部１１０に表示する機能が考えられる。ところが、動画やスルー画像は間引き読み出し方式による撮影を行っているので、電子ズームの場合と同様に、表示部１１０の画面上に拡大表示された小さな被写体は、ジャギーや解像感などの点で問題があり、撮影者がフォーカス状態を確認するのは難しい。

そこで、本実施形態に係る電子カメラ１０１の制御部１０９は、撮影者が操作部１１２の窓枠ボタン１１２ｇで部分的な拡大表示を選択した場合に、窓枠ボタン１１２ｇで選択された表示部１１０の画面領域を撮像素子１０５から全画素読み出しする。尚、窓枠ボタン１１２ｇは、例えば電子カメラ１０１がオートフォーカス機能を有する場合に、フォーカスエリアとして予め設定されている領域（例えば中央部分）に窓枠を表示するための操作ボタンである。一例として、フォーカスエリアが画面中央部分に設定されている場合の様子を図１０（ａ）に示す。図１０（ａ）において、窓枠２０１が画面２００の中央部分に表示されている。尚、窓枠２０１の表示は、制御部１０９の表示処理部１５５が行う。

そして、本実施形態に係る電子カメラ１０１では、表示部１１０に窓枠２０１が表示された状態でズームボタン１１２ｅのボタンＴを操作すると、図１０（ｂ）に示すように、窓枠２０１内の被写体画像が拡大表示される。或いは、予め設定した固定倍率（２倍など）で窓枠２０１内に被写体画像を拡大表示する。また、図１０（ｂ）では、窓枠２０１の大きさを固定にしたが、拡大表示に合わせて窓枠自体も拡大するようにしてもよい。尚、窓枠２０１を中央部分に表示する例について説明したが、拡大表示するためのもう一つの窓枠を画面２００の別の部分（角部分など）に表示するようにしてもよい。

ここで、動画撮影時は間引き読み出しにより画像を撮影しているので、窓枠２０１内に拡大表示された被写体画像は、図１１（ａ）に示すように、ジャギーが目立ち解像感が無い画像になるのでフォーカス状態を確認するのは難しい。そこで、本実施形態に係る電子カメラ１０１の制御部１０９は、表示部１１０に窓枠２０１が表示された状態でズームボタン１１２ｅのボタンＴを操作された場合に、窓枠ボタン１１２ｇで選択された表示部１１０の窓枠２０２の領域を撮像素子１０５から全画素読み出しする。これにより、図１１（ｂ）に示すように、ジャギーが少なく解像感が有る画像を表示部１１０の窓枠２０２に表示することができ、容易にフォーカス状態を確認することができる。

また、上記の説明では、表示部１１０の画面にフォーカスエリアを示す窓枠２０１を表示してズームボタン１１２ｅのＴボタンが操作されると、図１０（ｂ）に示すように窓枠２０１内を拡大表示するようにしたが、レリーズボタン１１２ｂの操作に連動させてもよい。ここで、レリーズボタン１１２ｂは、「半押し」状態を検出する第１スイッチと、「全押し」状態を検出する第２スイッチとを有し、制御部１０９は「半押し」を検知するとオートフォーカス処理を行い、「全押し」を検知すると撮影を行うものとする。そして、レリーズボタン１１２ｂが半押しされるまでは図１０（ａ）の状態にしておき、レリーズボタン１１２ｂが半押しされると、制御部１０９は窓枠２０２の領域を撮像素子１０５から全画素読み出しし、さらに窓枠２０１内の拡大処理を行った後、図１０（ｂ）のように拡大した画像を表示部１１０に表示する。

このようにして、拡大された画像は、図１１（ａ）に示すようなジャギーや解像感の無い画像ではなく、図１１（ｂ）に示すような高品質の画像なので、撮影者は目標被写体のフォーカス状態を容易に確認することができる。
（応用例３）
次に、応用例３として、撮像素子１０５で撮影された画像の空間周波数に応じて読み出し方式を切り換える場合について説明する。この場合、制御部１０９は撮像素子１０５で撮影された画像の空間周波数を計算し、例えば図１２に示すような周波数特性を求める。そして、制御部１０９は、空間周波数が予め設定した閾値ｆｓ（所定周波数）よりも高い場合に、予め設定した画像の一部（または全画面）を全画素読み出しする。これにより、空間周波数が高い部分（画像の細かい部分）を高品質な画像で明瞭に撮影することができる。尚、空間周波数を計算する時は、オートフォーカスなどでフォーカスが合った状態にあるものとする。

さらに、撮影画面を複数の領域に分割して、各領域で空間周波数を計算し、空間周波数が閾値ｆｓよりも高い領域のみを全画素読み出しするようにしてもよい。これにより、信号処理部１０８や制御部１０９の処理負荷を低減できる。
（その他の応用例）
次に、その他の応用例について説明する。ここでは、高画質が求められる被写体を撮影する場合に、画面の一部または全領域を全画素読み出しする。

例えば、操作部１１２のモード選択ダイヤル１１２ｆでマクロモードが選択された場合に、画面の一部または全画面を全画素読み出しする。これは、花や昆虫などをマクロ撮影する時は高画質で撮影したいからである。しかも、マクロ撮影の場合は、被写体の動きが少なく、全画素読み出しによる処理遅延はあまり目立たないので、全画面の全画素読み出しも可能である。

或いは、操作部１１２のモード選択ダイヤル１１２ｆで風景撮影モードが選択された場合に、画面の一部または全画面を全画素読み出しする。一般に樹木や建造物などの被写体は、図１２で説明したように、空間周波数が高い場合が多いので間引き読み出しよりも全画素読み出して撮影した方が高品質な画像が得られる。しかも、マクロ撮影と同様に、被写体の動きが少ないシーンが多いと考えられるので、多少の処理遅延は許容でき、全画面の全画素読み出しも可能である。

尚、マクロモードや風景モードなどの撮影モード以外でも画面の一部または全画面に高画質が求められる撮影を行う場合は、同様に間引き読み出しから全画素読み出しに切り換えることによって、画質を向上させることができる。この場合でも、通常の動画撮影やスルー画像表示においては、間引き読み出しによる撮影を行うので、処理遅延などの問題は生じない。且つ、ＲＧＢ３色の撮像素子１０５から各色成分毎にベイヤー配列に適した間引き読み出しを行い、既存の優れたベイヤー補間処理を適用できるので、高品質な画像を得ることができる。

このようにして、本実施形態に係る電子カメラ１０１は、多板式の撮像装置で間引き処理を用いて動画撮影を行う場合でも拡大された被写体の画質劣化を防止できる。

特に、ズーム倍率（または焦点距離）に応じて間引き読み出し方式から全画素読み出し方式に切り換えるので、ズームアップした画像のジャギーを少なくし、解像感のある動画像やスルー画像を撮影することができる。

また、スルー画像の撮影時に、撮影者は表示部１１０に表示されるスルー画像を見て、ズームアップした被写体にフォーカスが合っているか否かの確認を容易に行うことができる。

以上、本発明に係る撮像装置について、各実施形態で例を挙げて説明してきたが、その精神またはその主要な特徴から逸脱することなく他の多様な形で実施することができる。そのため、上述した実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。

１０１・・・電子カメラ
１０２・・・レンズ
１０３・・・メカニカルシャッタ
１０４・・・分光部
１０５・・・撮像素子
１０５ａ、１１５ａ・・・Ｒ用撮像素子
１０５ｂ、１１５ｂ・・・Ｇ用撮像素子
１０５ｃ、１１５ｃ・・・Ｂ用撮像素子
１０６・・・ＴＧ
１０７、１１７，２１７・・・バッファ
１０７ａ、１１７ａ・・・Ｒバッファ
１０７ｂ、１１７ｂ・・・Ｇバッファ
１０７ｃ、１１７ｃ・・・Ｂバッファ
１０８・・・信号処理部
１０９・・・制御部
１１０・・・表示部
１１１・・・メモリカードＩＦ
１１１ａ・・・メモリカード
１１２・・・操作部
１５１・・・間引き読み出し部
１５２・・・全画素読み出し部
１５３・・・ズーム処理部
１５４・・・レンズ情報取得部
１５５・・・表示処理部

Claims (8)

1. 複数の色成分に分解された被写体光を各色成分毎に同じ画素配置の画像を撮像する複数の撮像部と、
   前記複数の撮像部が撮像した前記各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を読み出して予め設定された色配列の画像を生成する間引き補間部と、
   前記複数の撮像部が撮像した前記各色成分に対応する複数の画像の指定領域から前記各色成分毎に全画素読み出しを行う全画素読み出し部と、
   前記複数の撮像部で撮影される画像のズーム倍率を可変するズーム部と、
   前記ズーム部のズーム倍率が予め設定された閾値以下の場合に、前記間引き補間部が生成した前記色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成し、前記ズーム部のズーム倍率が予め設定された閾値より大きい場合に、前記全画素読み出し部が全画素読み出しした前記各色成分毎の画像からカラー画像を生成する画像処理部と、
   前記画像処理部が生成した画像を表示媒体に表示する表示制御部と
   を有することを特徴とする撮像装置。
2. 請求項１に記載の撮像装置において、
   前記画像処理部は、前記ズーム部のズーム倍率の代わりに前記撮像部に備えられたズームレンズの焦点距離を参照し、前記焦点距離が予め設定された閾値以下の場合に、前記間引き補間部が生成した前記色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成し、前記焦点距離が予め設定された閾値より大きい場合に、前記全画素読み出し部が全画素読み出しした前記各色成分毎の画像からカラー画像を生成する
   ことを特徴とする撮像装置。
3. 請求項１に記載の撮像装置において、
   前記撮像部で撮影される画像を表示する表示部と、
   前記表示部にフォーカス領域を示す窓枠を表示する窓枠表示指示部と
   を更に設け、
   前記画像処理部は、前記窓枠表示指示部により前記表示部に窓枠の表示を指示された場合に、前記窓枠内を前記全画素読み出し部が全画素読み出しした前記各色成分毎の画像からカラー画像を生成し、前記窓枠外を前記間引き補間部が生成した前記色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成する
   ことを特徴とする撮像装置。
4. 請求項３に記載の撮像装置において、
   前記撮像部にフォーカス動作を指示する第１スイッチと、前記撮像部に撮影を指示する第２スイッチとで構成される撮影指示ボタンを更に設け、
   前記画像処理部は、前記撮影指示ボタンの第１スイッチが押下された場合に、前記窓枠内を全画素読み出ししたカラー画像を拡大して表示する
   ことを特徴とする撮像装置。
5. 請求項１から４のいずれか一項に記載の撮像装置において、
   動画撮影と静止画撮影とを選択する操作部と、
   前記撮像装置が撮影した画像を記憶媒体に保存する記録部とを更に設け、
   前記画像処理部は、前記操作部で動画撮影が選択されている場合は前記間引き補間部が生成した色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成し、前記操作部で静止画撮影が選択されている場合は前記複数の撮像部が撮像した前記各色成分に対応する前記複数の画像からカラー画像を生成する
   ことを特徴とする撮像装置。
6. 請求項１から５のいずれか一項に記載の撮像装置において、
   前記撮像部が撮影する画像をスルー画表示する表示部を更に設け、
   前記画像処理部は、前記表示部にスルー画を表示する場合は前記間引き補間部が生成した色配列の画像に前記色配列特有の画像処理を施してカラー画像を生成する
   ことを特徴とする撮像装置。
7. 請求項１から６のいずれか一項に記載の撮像装置において、
   前記撮像部は、被写体光をＲＧＢ３色の色成分に分解して前記色成分毎にｎ行ｍ列の画素からなる画像を撮像するＧ成分用撮像部，Ｒ成分用撮像部およびＢ成分用撮像部の３つの撮像部を有し、
   前記間引き補間部は、前記Ｇ成分用撮像部が撮像したｎ行ｍ列のＧ成分の画素からなるＧ成分の画像から行列方向にそれぞれ１画素置きに千鳥状にＧ成分の画素を読み出し、前記Ｒ成分用撮像部が撮像したｎ行ｍ列のＲ成分の画素からなるＲ成分の画像から前記Ｇ成分の画素位置と重複しないように１行置き且つ１列置きにＲ成分の画素を読み出し、前記Ｂ成分用撮像部が撮像したｎ行ｍ列のＢ成分の画素からなるＢ成分の画像から前記Ｇ成分の画素位置および前記Ｒ成分の画素位置と重複しないように１行置き且つ１列置きにＢ成分の画素を読み出し、読み出されたＧ成分の画素，Ｒ成分の画素およびＢ成分の画素を組み合わせてｎ行ｍ列のベイヤー配列の画像を生成し、
   前記画像処理部は、前記間引き補間部が生成したベイヤー配列の画像に前記ベイヤー配列特有の画像処理を施してカラー画像を生成する
   ことを特徴とする撮像装置。
8. 被写体光を複数の色成分に分光する分光部と、
   前記分光部によって分光された色成分毎に設けられた複数の撮像素子と、
   前記複数の撮像素子が撮像した各色成分に対応する複数の画像間で互いに重複しない画素位置から信号を間引き読み出しする間引き読み出し部と、
   前記複数の撮像素子が撮像した前記各色成分に対応する複数の画像から前記色成分毎に全画素読み出しを行う全画素読み出し部と、
   前記複数の撮像素子で撮影される画像のズーム倍率を設定するズーム部と、
   前記ズーム倍率が、予め設定された閾値以下の場合に前記間引き読み出し部により読み出しを行い読み出した画像に画像処理を施してカラー画像を生成し、予め設定された閾値より大きい場合に前記全画素読み出し部により読み出しを行い読み出した前記色成分毎の画像からカラー画像を生成する画像処理部と、
   前記画像処理部が生成した画像を表示媒体に表示する表示制御部と
   を有することを特徴とする撮像装置。

Images