JP2009225197A - 撮像装置、および信号処理方法、並びにコンピュータ・プログラム - Google Patents

Abstract

【課題】単一の信号入力部を有する汎用的な信号処理チップを利用して複数のセンサ出力を処理可能な構成を実現する。
【解決手段】記録用画像を取得するメインイメージセンサと、ライブビュー画像を取得するサブイメージセンサを含む複数のセンサ出力を時分割で切り替えて信号処理部に出力する入力切り替え部を設定した。本構成により単一の信号入力部を有する汎用的な信号処理部を利用して複数のセンサ出力の処理が可能となる。また、入力切り替え部において、メインイメージセンサ出力をメモリに記憶して、メモリから読み出して信号処理部に出力する構成とし、出力タイミングをミラーの動作に起因するサブイメージセンサの非露光期間のデータ出力期間に重なる設定とした。本構成により露光されたライブビュー画像の消失を低減できる。
【選択図】図１１

Description

本発明は、撮像装置、および信号処理方法、並びにコンピュータ・プログラムに関する。さらに詳細には、一眼レフカメラにおいて、ＬＣＤなどのモニタに画像を表示するライブビュー機能を持つ撮像装置、および信号処理方法、並びにコンピュータ・プログラムに関する。

従来、カメラで被写体を観察する場合、光学式ビューファインダ（ＯＶＦ：Ｏｐｔｉｃａｌ Ｖｉｅｗ Ｆｉｎｄｅｒ）を介して観察する構成が主流であったが、昨今、イメージセンサ（撮像素子）の出力をカメラ背面などに設けたＬＣＤなどのディスプレイに表示するライブビュー表示機能を有するカメラが増加している。光学式ビューファインダ（ＯＶＦ）に対して、ＬＣＤなどのディスプレイをファインダとして利用する構成は電子式ビューファィンダ（ＥＶＦ：Ｅｌｅｃｔｅｉｃ Ｖｉｅｗ Ｆｉｎｄｅｒ）と呼ばれる。なお光学式ビューファインダ（ＯＶＦ）と電子式ビューファィンダ（ＥＶＦ）とを備えたカメラについては例えば特許文献１に記載されている。

ディスプレイをファインダとするライブビュー表示機能を有するカメラでは、ライブビュー表示のためにイメージセンサ（撮像素子）の出力信号処理が必要となる。また、撮影記録処理においてもイメージセンサ（撮像素子）の出力信号処理が必要となる。例えばイメージセンサの出力に対するホワイトバランス調整、ゲイン制御、γ補正、色補正などの様々な信号処理がＩＣチップなどによって構成される画像信号処理回路において実行される。

表示処理を行わず、撮像素子の出力を記録処理にのみ利用する場合には、図１に示すように、イメージセンサ１の出力を１つの信号処理チップ２に出力し、信号処理チップ２の出力を記録すればよく、信号処理チップ２は記録処理に際してのみ利用されることになる。なお、イメージセンサ１と信号処理チップ２間のデータ転送には、例えば高速データ転送を実現するｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式が利用される。

一方、ライブビュー表示機能を有するカメラの場合、記録処理用のデータを出力するイメージセンサの他に、ライブビュー表示用のデータを出力するサブイメージセンサを設けて、それぞれのイメージセンサの出力を信号処理することが必要となる。例えば２以上の複数個（Ｎ個）のイメージセンサを有する設定とした場合、図２に示すようにイメージセンサ３−１、３−２、…、３−Ｎと信号処理チップ４−１、４−２、…、４−Ｎの１対１接続構成を複数系統（Ｎ系統）用いる設定が考えられる。しかし信号処理チップは比較的高価であり、このような構成とすることはコストアップを招く要因となる。

高価な信号処理チップの使用数を削減するための構成としては図３のような構成が考えられる。図３のように１つの信号処理チップ６に、複数のイメージセンサ５−１、５−２、…、５−Ｎからの入力部としてのインターフェースを設ける構成である。それぞれのイメージセンサ５−１、５−２、…、５−Ｎからの信号を信号処理チップ６内で切り替えて処理を実行する。しかしこのような構成とするためには、信号処理チップ６に複数の入力を実現するためのインターフェース機能や処理信号を切り替える切り替え機能を付加することが必要となり、既存のチップを利用することは出来なくなり、新たなチップの開発が必要となるという問題がある。
特開２００６−２６７３８１号公報

本発明は、１つの入力信号用インターフェースを備えた既存の信号処理チップに何ら変更を加えることなく、複数のイメージセンサの出力を単独の信号処理チップで処理することを可能とした撮像装置、および信号処理方法、並びにコンピュータ・プログラムを提供することを目的とする。

本発明の第１の側面は、
記録用画像を取得するメインイメージセンサと、
ライブビュー画像を取得するサブイメージセンサと、
前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力し、入力した複数センサ出力を時分割で切り替えて信号処理部に出力する入力切り替え部と、
前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力し、入力信号に対する信号処理を実行する信号処理部を有することを特徴とする撮像装置にある。

さらに、本発明の撮像装置の一実施態様において、前記入力切り替え部は、前記メインイメージセンサの出力を前記サブイメージセンサの出力に優先して前記信号処理部に対して入力し、前記メインイメージセンサの出力の前記信号処理部への入力期間は、前記サブイメージセンサ出力の前記信号処理部への入力を停止する構成であることを特徴とする。

さらに、本発明の撮像装置の一実施態様において、前記入力切り替え部は、前記メインイメージセンサ出力をメモリに一時的に記憶し、前記メモリからメインイメージセンサ出力を読み出して前記信号処理部に対して出力する処理を実行する構成であることを特徴とする。

さらに、本発明の撮像装置の一実施態様において、前記撮像装置は、被写体像の光路をメインイメージセンサとサブイメージセンサに切り替えるミラーを有し、前記入力切り替え部は、前記メインイメージセンサ出力の前記信号処理部に出力するタイミングを、前記ミラーの動作に起因して発生する前記サブイメージセンサの非露光期間のサブイメージセンサ出力を前記信号処理部へ出力する期間に重複するように設定することを特徴とする。

さらに、本発明の撮像装置の一実施態様において、前記メモリは高速読み出し可能なメモリであることを特徴とする。

さらに、本発明の撮像装置の一実施態様において、前記入力切り替え部は、前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、多チャンネルの伝送路を用いて前記信号処理部に出力する構成であり、前記サブイメージセンサの出力を、前記メインイメージセンサの出力チャネル数以下のチャネル数で実行することを特徴とする。

さらに、本発明の撮像装置の一実施態様において、前記入力切り替え部は、前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、ｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式を利用して実行する構成であることを特徴とする。

さらに、本発明の第２の側面は、
撮像装置において信号処理を実行させる信号処理方法であり、
メインイメージセンサが、記録用画像を取得するメインイメージ取得ステップと、
サブイメージセンサが、ライブビュー画像を取得するサブイメージ取得ステップと、
入力切り替え部が、前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力し、入力した複数センサ出力を時分割で切り替えて信号処理部に出力する入力切り替えステップと、
信号処理部が、前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力し、入力信号に対する信号処理を実行する信号処理ステップと、
を有することを特徴とする信号処理方法にある。

さらに、本発明の信号処理方法の一実施態様において、前記入力切り替えステップは、前記メインイメージセンサの出力を前記サブイメージセンサの出力に優先して前記信号処理部に対して入力し、前記メインイメージセンサの出力の前記信号処理部への入力期間は、前記サブイメージセンサ出力の前記信号処理部への入力を停止するステップであることを特徴とする。

さらに、本発明の信号処理方法の一実施態様において、前記入力切り替えステップは、前記メインイメージセンサ出力をメモリに一時的に記憶し、前記メモリからメインイメージセンサ出力を読み出して前記信号処理部に対して出力する処理を実行するステップであることを特徴とする。

さらに、本発明の信号処理方法の一実施態様において、前記撮像装置は、被写体像の光路をメインイメージセンサとサブイメージセンサに切り替えるミラーを有し、前記入力切り替えステップは、前記メインイメージセンサ出力の前記信号処理部に出力するタイミングを、前記ミラーの動作に起因して発生する前記サブイメージセンサの非露光期間のサブイメージセンサ出力を前記信号処理部へ出力する期間に重複するように設定することを特徴とする。

さらに、本発明の信号処理方法の一実施態様において、前記メモリは高速読み出し可能なメモリであることを特徴とする。

さらに、本発明の信号処理方法の一実施態様において、前記入力切り替えステップは、前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、多チャンネルの伝送路を用いて前記信号処理部に出力するステップであり、前記サブイメージセンサの出力を、前記メインイメージセンサの出力チャネル数以下のチャネル数で実行することを特徴とする。

さらに、本発明の信号処理方法の一実施態様において、前記入力切り替えステップは、前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、ｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式を利用して実行するステップであることを特徴とする。

さらに、本発明の第３の側面は、
撮像装置において信号処理を実行させるコンピュータ・プログラムであり、
メインイメージセンサに、記録用画像を取得させるメインイメージ取得ステップと、
サブイメージセンサに、ライブビュー画像を取得させるサブイメージ取得ステップと、
入力切り替え部に、前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力させ、入力した複数センサ出力を時分割で切り替えて信号処理部に出力させる入力切り替えステップと、
信号処理部に、前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力させ、入力信号に対する信号処理を実行させる信号処理ステップと、
を有することを特徴とするコンピュータ・プログラムにある。

なお、本発明のプログラムは、例えば、様々なプログラム・コードを実行可能な汎用システムに対して、コンピュータ可読な形式で提供する記憶媒体、通信媒体によって提供可能なプログラムである。このようなプログラムをコンピュータ可読な形式で提供することにより、コンピュータ・システム上でプログラムに応じた処理が実現される。

本発明のさらに他の目的、特徴や利点は、後述する本発明の実施例や添付する図面に基づくより詳細な説明によって明らかになるであろう。なお、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

本発明の一実施例の構成によれば、記録用画像を取得するメインイメージセンサと、ライブビュー画像を取得するサブイメージセンサを含む複数のセンサ出力を時分割で切り替えて信号処理部に出力する入力切り替え部を設定した。本構成により単一の信号入力部を有する汎用的な信号処理部を利用して複数のセンサ出力の処理が可能となる。また、入力切り替え部において、メインイメージセンサ出力をメモリに記憶して、メモリから読み出して信号処理部に出力する構成とし、その出力タイミングを、ミラーの動作に起因して発生するサブイメージセンサの非露光期間のデータ出力期間に重なるように設定した。本構成により露光されたライブビュー画像の消失を低減することが可能となる。

以下、図面を参照しながら本発明の実施形態に係る撮像装置、および信号処理方法、並びにコンピュータ・プログラムの詳細について説明する。

まず、本発明の適用可能なカメラの一構成例について、図４、図５を参照して説明する。図４は、本発明の適用可能なカメラの一構成例である一眼レフカメラの内部構成を示す図であり、図５は、そのハードウェア構成を示す図である。

なお、図４、図５に示すメインイメージセンサ３５が、記録用の画像信号を出力するイメージセンサであり、サブイメージセンサ２３が、モニタ４０に対するライブビュー表示用の画像信号を出力するイメージセンサである。これらは例えばＣＭＯＳ、ＣＣＤなどによって構成され、これら２つのセンサからの出力は、単一の信号処理チップ、すなわち、図５に示す信号処理部（ＩＣチップ）７７に入力されて信号処理が実行される。なおセンサと信号処理部間のデータ転送および信号処理構成については後段で詳細に説明する。

図４に示すデジタル一眼レフカメラ（以下、カメラと略記する）は、図示されない交換レンズと、カメラ本体部としてのカメラボディ１０から主に構成されており、カメラボディ１０の前面部に設けられたボディマウント４５に、所望の交換レンズが着脱自在に装着される。

図示されない交換レンズより入射された被写体光束は、その一部がハーフミラーで構成されたメインミラー１１の表面で反射され、さらにスクリーン１２を介してプリズム１３に入射する。プリズム１３に入射された被写体光束は、プリズム１３内の反射面とミラーＡ（以下、ミラー（Ａ）と記す）１５で反射され、複数のレンズで構成されるリレー系レンズ１６を介して、更にミラーＢ（以下、ミラー（Ｂ）と記す）１７及びミラーＣ（以下、ミラー（Ｃ）と記す）１８で反射され、複数のレンズで構成された接眼系レンズ（ルーペ光学系）２０を通って、図示されない撮影者の眼により観察される。なお、上記プリズム１３、ミラー（Ａ）１５、リレー系レンズ１６、ミラー（Ｂ）１７及びミラー（Ｃ）１８は、リレー光学系を構成している。これらリレー光学系は、スクリーン１２上に結像された被写体像を、ミラー（Ｃ）１８と接眼系レンズ２０の間に再結像させるためのものである。

上記ミラー（Ｂ）１７はハーフミラーで構成されているもので、その入射光の一部はミラー（Ｂ）１７を透過し、該ミラー（Ｂ）１７の後方に配置された再結合光学系の再結像系レンズ２２を介してサブイメージセンサ２３に導かれる。このサブイメージセンサ２３は、後述する第１の撮像素子であるメインイメージセンサ３５に対して第２の撮像素子を構成しているもので、スルー画としてほぼリアルタイムの動画像をモニタ４０に表示するための画像信号を生成するイメージセンサである。すなわちライブビュー画像（ＬＶ画像）を生成するためのイメージセンサである。

メインミラー１１を透過した被写体光束は、メインミラー１１の裏面側に取り付けられたサブミラー３０によって反射されて自動測距を行うためのＡＦユニット３１に導かれる。また、上記メインミラー１１は、軸１１ａを中心に回動可能に設けられている。被写体観察時は図示される実線位置に配置され、前述したライブビュー画像（ＬＶ画像）を生成するためのイメージセンサであるサブイメージセンサ２３側に光路が設定される。

撮影の開始時は、軸１１ａを回動中心に上方に移動して、図示される点線位置（退避位置）に移動（ＵＰ）し、撮影が終了すると、軸１１ａを回動中心に下方に移動して、図示される実線位置に移動（ＤＯＷＮ）する。すなわち、このＵＰ〜ＤＯＷＮ期間は、ライブビュー画像（ＬＶ画像）を生成するためのイメージセンサであるサブイメージセンサ２３側に対する光路が遮断される。なお、サブミラー３０は、メインミラー１１が退避位置に移動される際に折りたたまれて、メインミラー１１と共に退避位置に移動される。

撮影光軸上でメインミラー１１の後方には、フォーカルプレーンシャッタ３３、ローパスフィルタ３４、及びイメージャプレート３６に装着された第１の撮像素子としてのメインイメージセンサ３５が配設されている。また、イメージャプレート３６の後方には、種々の電気部品が装填された基板３８が配置されている。更に、この基板３８の後方には、液晶ディスプレイ等で構成された表示手段としてのモニタ４０が配置されている。撮影者は、カメラボディ１０の背面側に設けられたモニタ窓４１を通して、モニタ４０の画面に表示された画像を視認することができる。

このモニタ４０には、前述したように、ライブビュー画像（ＬＶ画像）を生成するためのイメージセンサであるサブイメージセンサ２３によって取得されるイメージが表示される。

図５は、本実施形態に於けるデジタル一眼レフカメラの電気系の構成を示すブロック図である。なお、このカメラのブロック図は、図４参照して説明したボディマウント４５に交換レンズ８０が装着された状態を示している。

図５において、制御部５０は、このカメラ全体の制御を司ると共に演算を行うための制御手段であり、例えばＣＰＵ等により構成される。この制御部５０には、モータ駆動回路５１を介してシャッタミラー駆動モータ５２が接続されると共に、シャッタ制御回路５３を介してフォーカルプレーンシャッタ３３が接続されている。また、上記制御部５０には、ＡＦユニット３１内に設けられた測距センサ５５と、被写体の明るさを測定する測光センサ５６と、シャッタチャージが行われたときに切り替わるチャージカムスイッチ（ＳＷ）５７と、フォーカルプレーンシャッタ３３の先幕（図示せず）に取り付けられシャッタの開口部の全開状態を検出するための先幕スイッチ（ＳＷ）５８と、メインイメージセンサ３５を駆動するためのメインイメージセンサ駆動回路６０と、サブイメージセンサ２３を駆動するためのサブイメージセンサ駆動回路６１と、モニタ４０を駆動するためのモニタ駆動回路６２と、ファインダ内表示用ＬＣＤ２６を駆動するためのＬＣＤ駆動回路６３とが接続されている。

さらに、制御部５０には、メインイメージセンサ３５とサブイメージセンサ２３の出力信号の処理を実行する信号処理部（ＩＣチップ）７７、信号処理部７７に対してメインイメージセンサ３５とサブイメージセンサ２３の出力信号の入力を切り替える入力切り替え部７５が接続されている。

さらに、制御部５０には、操作釦６５と、操作ダイヤル６６と、レリーズスイッチ（ＳＷ）６７と、記録メディア６９と、メモリ７０と、画像データメモリ７１とが接続されている。操作釦６５は、図示されないがメニュー釦、十字キー、ＯＫ釦等から成るもので、このカメラに種々の操作を行わせるためのものである。操作ダイヤル６６は、撮影時の撮影モードを設定するための操作部材である。

レリーズスイッチ６７は、撮影準備動作及び露光動作を実行させるための釦である。このレリーズスイッチ６７は、第１レリーズスイッチと第２レリーズスイッチの２段式のスイッチで構成されており、図示されないレリーズ釦が半押し操作されることによって、第１レリーズスイッチがオンされて測光処理や測距処理などの撮影準備動作が実行される。また、上記レリーズ釦が全押し操作されることによって、第２レリーズスイッチがオンされて露光動作が実行される。

記録メディア６９は、図示されないカメラのインターフェースを介してカメラボディ１０に対し脱着可能な各種のメモリカードや外付けのハードディスクドライブ（ＨＤＤ）等の記録媒体である。メモリ７０は、デジタルカメラ全体の制御を行うための制御プログラムが予め記憶されているものである。また、画像データメモリ７１は、画像データを一時的に保管するためのメモリである。

一方、交換レンズ８０には、交換レンズ８０内の各部を駆動制御するＣＰＵ等で構成された制御部８１を有している。この制御部８１には、モータ駆動回路８２を介してフォーカスモータ８３と、絞り駆動回路８４を介して絞りモータ８５と、フォーカスパルスカウンタ８７と、ズームエンコーダ８８と、メモリ９０とが接続されている。

上記フォーカスモータ８３は、上記カメラボディ１０内の測距センサ５５の測距結果に基づいて、この交換レンズ８０内の図示されないフォーカスレンズを駆動するためのモータである。同様に、絞りモータ８５は、上記カメラボディ１０内の測光センサ５６の測光結果に基づいて、この交換レンズ８０内の図示されない絞りを駆動するためのモータである。フォーカスパルスカウンタ８７は、上記フォーカスレンズを駆動させるにあたり、該フォーカスレンズの移動を検出して位置制御を行うためのものである。また、ズームエンコーダ８８は、図示されない撮影レンズの焦点距離に応じた移動信号を検出して制御部８１に出力する。更に、メモリ９０は、この交換レンズ８０内のレンズ情報が記憶されている。

なお、制御部８１は、図示されない通信コネクタ等を介して、カメラボディ１０内の制御部５０と電気的に接続がなされる。そして、制御部８１は、カメラボディ１０の制御部５０の指令に従って制御される。

図４、図５に示すメインイメージセンサ３５が、記録用の画像信号を出力するイメージセンサであり、サブイメージセンサ２３が、モニタ４０に対するライブビュー表示用の画像信号を出力するイメージセンサである。

メインイメージセンサ３５と、サブイメージセンサ２３の出力は、図５に示すように入力切り替え部７５に入力された後、信号処理部（ＩＣチップ）７７に入力される構成となっている。信号処理部７７は、各センサの出力を入力して各種の信号処理、例えばホワイトバランス調整、ゲイン制御、γ補正、色補正などの様々な信号処理を実行する。この信号処理部７７には、例えばｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式に基づく信号が入力される。

信号処理部（ＩＣチップ）７７は、信号の入力部を１つ備えた汎用的な信号処理用ＩＣチップである。以下、メインイメージセンサ３５、サブイメージセンサ２３各センサと入力切り替え部７５、信号処理部７７の接続構成とデータ転送、信号処理構成について、本発明に従った実施例を説明する。

まず、基本実施例の構成について、図６を参照して説明する。図６には複数のイメージセンサ１０１−１〜Ｎと、入力切り替え部１０２と、信号処理部（ＩＣチップ）１０３を示している。複数のイメージセンサ１０１−１〜Ｎの少なくとも１つが、撮影画像の記録処理に適用するイメージを取得するセンサであり、図４，図５に示すメインイメージセンサ３５に対応する。また、少なくとも１つがモニタに対してライブビューイメージを表示するためのイメージを取得するセンサであり、図４，図５に示すサブイメージセンサ２３に対応する。図６では一般化して示すためにＮ（Ｎ≧２）として示してある。

本構成において、信号処理部（ＩＣチップ）１０３は、信号の入力部を１つ備えた汎用的な信号処理用ＩＣチップであり、入力する信号に対して、様々な信号処理、例えばホワイトバランス調整、ゲイン制御、γ補正、色補正などの様々な信号処理を実行する。入力切り替え部１０２と、信号処理部（ＩＣチップ）１０３との間の信号伝送は、例えば高速データ転送を実現するｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式に従って実行される。例えばチャネル数を８とする。

入力切り替え部１０２は例えばＩＣチップによって構成され、複数のイメージセンサ１０１−１〜Ｎからの信号を入力する複数の入力部と、信号処理部（ＩＣチップ）１０３に対して選択信号を出力する１つの出力部を備えている。なお、複数のイメージセンサ１０１−１〜Ｎと、入力切り替え部１０２間の信号伝送は、上述の入力切り替え部１０２と、信号処理部（ＩＣチップ）１０３との間の信号伝送と同様、高速データ転送を実現するｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式に従って実行される。なお、ｓｕｂＬＶＤＳは伝送方式の一例であり、この他の信号伝送方式を利用する構成としてもよい。

本実施例において、信号処理部（ＩＣチップ）１０３は、例えば入力切り替え部１０２から８ｃｈのｓｕｂＬＶＤＳ方式に従ったデータ入力を受けることになり、汎用的なＩＣチップをそのまま利用することができる。

本実施例では、複数（Ｎ）入力−１出力の入力切り替え部１０２を、複数のイメージセンサ１０１−１〜Ｎと、信号処理部（ＩＣチップ）１０３との間に設定するという簡易な構成で汎用的な信号処理部（ＩＣチップ）１０３を利用可能となる。入力切り替え部１０２は信号処理部１０３のように複雑な処理を実行する必要がない回路によって構成され、比較的安価なチップとして製造可能であり、全体コストを増加させることなく、複数のイメージセンサの出力を単一の信号処理部（ＩＣチップ）１０３によって処理する構成が実現される。なお、入力切り替え部１０２は、単純な入出力切り替え機能だけでなく、各イメージセンサ出力に対する信号処理等の回路を実装する構成としてもよい。

次に、上述の基本実施例を具体化した以下の２つの実施例における動作例を図７〜図１１を参照して説明する。
（１）入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えていない構成例。
（２）入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えている構成例。

（１）入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えていない構成例。
まず、入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えていない構成における動作例について図７〜図９を参照して説明する。なお、メモリを備えていても使用しない場合には同様の処理が行われる。図７に示すように、メインイメージセンサ２１１、サブイメージセンサ２１２が入力切り替え部２１５に対して、それぞれ取得データを出力する。入力切り替え部２１５の出力信号制御部２１６は、これら２つのセンサ入力の一方を選択して信号処理部２２１に出力する。

図７に示すメインイメージセンサ２１１は、記録画像用のイメージ出力を行うセンサであり、図４、図５において説明したメインイメージセンサ３５に対応するセンサである。サブイメージセンサ２１２は、モニタに表示するライブビュー画像用のイメージ出力を行うセンサであり、図４、図５において説明したサブイメージセンサ２３に対応するセンサである。

図７に示す構成例では、入力切り替え部２１５がイメージセンサ出力を一時的にバッファリングするメモリを備えていないので、入力切り替え部２１５の出力信号制御部２１６は、サブイメージセンサ２１２から入力するライブビュー画像と、メインイメージセンサ２１１から入力する記録用画像ともに入力されたデータをフレーム毎に切り替えて信号処理部２２１に出力する。なお、メモリを備えていても使用しない場合には同様の処理が行われる。メインイメージセンサ２１１からの入力がない場合は、サブイメージセンサ２１２から入力するライブビュー画像を信号処理部２２１に出力し、メインイメージセンサ２１１からの入力が発生した場合は、サブイメージセンサ２１２から入力するライブビュー画像の出力を停止して、記録用信号であるメインイメージセンサ２１１からの入力を信号処理部２２１に優先的に出力する。

前述のように入力切り替え部２１５から信号処理部（ＩＣチップ）２２１への信号伝送は、例えば高速データ転送を実現するｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式に従って実行され、この伝送路は、８ｃｈの伝送ラインを利用して行われるが、画像サイズは、メイン画像≧ライブビュー画像である。

本発明の一実施例に従った伝送処理においては、図８に示すように、メイン画像の伝送に使用するｓｕｂＬＶＤＳのチャネル数は８チャネル、ライブビュー画像の伝送に使用するｓｕｂＬＶＤＳのチャネル数は１チャネルとする。このようにライブビュー画像の伝送に使用するチャネル数を制御することで消費電力を低減することができる。なお、１チャネルと８チャネルの組み合わせ以外のチャネル数の組み合わせとしてもよい。例えばサブイメージセンサの出力は、メインイメージセンサの出力チャネル数以下のチャネル数で実行する。

図９に信号の入出力タイミングを説明するタイミングチャートを示す。図９には、以下の各信号の入出力および動作タイミングを左から右に時系列で示している。
（ａ）サブイメージセンサ出力（ライブビュー画像）
（ｂ）メインミラーの動作（図４のメインミラー１１）
（ｃ）メインイメージセンサ出力（記録画像）
（ｄ）入力切り替え部出力
（ｅ）モニタ出力（ライブビュー表示）

（ａ）サブイメージセンサ出力（ライブビュー画像）は撮影処理に応じて変更される。例えば連写を行う場合、２００ｍｓ間隔、すなわち５フレーム／秒でフレーム画像を入力切り替え部に出力する。図９に示す例は、６０フレーム／秒で、サブイメージセンサの出力（ライブビュー画像）が入力切り替え部に入力される場合の処理例を示している。例えばサブイメージセンサの出力フレーム３０１ａは、入力切り替え部に入力され、（ｄ）入力切り替え部の出力３０１ｂとして信号処理部に入力され、所定の信号処理が実行された後、（ｅ）モニタに示す出力フレーム３０１ｃとしてライブビュー表示が行われる。

しかし、撮影処理が実行されると、（ｂ）メインミラーは、撮影タイミングの開始時点にアップ（ｕｐ）動作を開始し、図４に示すメインミラー１１の点線位置に移動を開始する。これにより図４に示すようにサブイメージセンサ２３に対する光路が絶たれることになり、撮影が終了してミラーが復帰（ｄｏｗｎ）するまで、サブイメージセンサは露光されないことになる。すなわち、図９に示すタイミングチャートの［ｔ１］〜［ｔ５］の期間は露光できない。

メインミラーが完全にＵＰした後、時間［ｔ２］において、メインイメージセンサ（図４の例ではメインイメージセンサ３５）の露光が実行される。その後、時間［ｔ３］において、メインイメージセンサからのデータ出力が開始し、入力切り替え部に対して記録用のメイン画像が転送される。

入力切り替え部はメモリを持たないので、入力切り替え部は入力データを即座に信号処理部に出力する。図９に示す時間［ｔ４］に出力を開始する。その後、時間［ｔ６］までの間、入力切り替え部から信号処理部に対して、記録用画像であるメインイメージセンサの取得したイメージデータが出力される。

この期間［ｔ４］〜［ｔ６］は、入力切り替え部から信号処理部に対するデータ転送路は記録用画像であるメイン画像によって占有されることになる。従って、この期間中のサブイメージセンサから入力切り替え部に対する入力は、信号処理部に出力されず、この期間の画像についてのライブビュー表示は途絶えることになる。

結果として、（ｂ）メインミラーのアップ（ＵＰ）開始時点［ｔ１］から、入力切り替え部から信号処理部に対するメイン画像の出力が終了する時点［ｔ６］までのライブビュー画像は、モニタに表示されないことになる。この期間は図９（ｅ）モニタに示すライブビュー画像消失期間である。

このライブビュー画像消失期間の前半は、ミラーの動作によってサブイメージセンサの露光が行われていない部分であるが、後半部分は、サブイメージセンサの露光が行われているにもかかわらず、入力切り替え部から信号処理部に対する出力がメイン画像によって占有されていることに起因する画像消失部分となる。すなわち図９（ａ）に示すデータ部３０２ａ、（ｅ）に示す３０２ｃである。

このように、入力切り替え部がイメージセンサからの出力を一時的に記憶するメモリを持たない場合にはライブビュー画像の消失期間が長くなるという問題がある。すなわちサブイメージセンサの露光が行われているにもかかわらず、入力切り替え部から信号処理部に対する出力がメイン画像によって占有されているためにサブイメージセンサの取得画像が表示できなくなるという問題がある。

次に、この問題を解決するため、入力切り替え部にイメージセンサからの出力を一時的に記憶するメモリを設定した構成および動作例について、図１０〜図１１を参照して説明する。

（２）入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えている構成例。
図１０の構成は、入力切り替え部２１５がイメージセンサ出力を一時的にバッファリングするメモリ２２２を備えている構成を示している。図１０において、メインイメージセンサ２１１、サブイメージセンサ２１２が入力切り替え部２１５に対して、それぞれ取得データを出力する。入力切り替え部２１５の出力信号制御部２１６は、これら２つのセンサ入力の一方を選択して信号処理部２２１に出力する。

図１０に示すメインイメージセンサ２１１は、記録画像用のイメージ出力を行うセンサであり、図４、図５において説明したメインイメージセンサ３５に対応するセンサである。サブイメージセンサ２１２は、モニタに表示するライブビュー画像用のイメージ出力を行うセンサであり、図４、図５において説明したサブイメージセンサ２３に対応するセンサである。

図１０の構成において、メインイメージセンサ２１１から入力切り替え部２１５に対する入力は、一旦メモリ２２２に格納される。メモリ２２２は高速記録読み出し可能な例えばＤＤＲメモリである。入力切り替え部２１５は、メモリ２２２に記録された記録用のメイン画像信号を予め設定したタイミングで信号処理部に出力する。具体的には有効な露光されているライブビュー画像のモニタ表示を可能な限り阻害しないタイミングで出力する。

図１１に、本実施例の信号の入出力タイミングを説明するタイミングチャートを示す。図１１には、先に説明した図９と同様、以下の各信号の入出力および動作タイミングを左から右に時系列で示している。
（ａ）サブイメージセンサ出力（ライブビュー画像）
（ｂ）メインミラーの動作（図４のメインミラー１１）
（ｃ）メインイメージセンサ出力（記録画像）
（ｄ）入力切り替え部出力
（ｅ）モニタ出力（ライブビュー表示）

本実施例においても、（ａ）サブイメージセンサ出力（ライブビュー画像）は撮影処理に応じて変更される。例えば連写を行う場合、２００ｍｓ間隔、すなわち５フレーム／秒でフレーム画像を入力切り替え部に出力する。図１１に示す例は、図９と同様、６０フレーム／秒で、サブイメージセンサの出力（ライブビュー画像）が入力切り替え部に入力される場合の処理例を示している。例えばサブイメージセンサの出力フレーム３０１ａは、入力切り替え部に入力され、（ｄ）入力切り替え部の出力３０１ｂとして信号処理部に入力され、所定の信号処理が実行された後、（ｅ）モニタに示す出力フレーム３０１ｃとしてライブビュー表示が行われる。

撮影処理が実行されると、（ｂ）メインミラーは、撮影タイミングの開始時点にアップ（ｕｐ）動作を開始し、撮影が終了してミラーが復帰（ｄｏｗｎ）するまで、サブイメージセンサは露光されないことになる。すなわち、図１１に示すタイミングチャートの［ｔ１］〜［ｔ４］の期間は露光できない。

メインミラーが完全にＵＰした後、時間［ｔ２］において、メインイメージセンサ（図４の例ではメインイメージセンサ３５）の露光が実行される。その後、時間［ｔ３］において、メインイメージセンサからのデータ出力が開始され、入力切り替え部に対して記録用のメイン画像が転送される。

本実施例では、図１０を参照して説明したように入力切り替え部２１５はメモリ２２２を有しており、メインイメージセンサ２１１からのデータは、入力切り替え部２１５のメモリ２２２に格納される。すなわち、図９に示す例と異なり、入力切り替え部２１５は入力データを即座に信号処理部２２１に出力しない。

図９に示す例では、メインイメージセンサから入力切り替え部に対する記録用メイン画像のデータ入力と、入力切り替え部から信号処理部へのデータ出力はほぼ同一タイミングで実行され、この入力切り替え部から信号処理部へのデータ出力期間が、露光済みのサブイメージセンサの出力を信号処理部に出力できないという問題を発生させていた。

本処理例では、例えば、図１１に示すように、次の撮影タイミングにおけるミラーの動作期間（ｕｐ〜ｄｏｗｎ）内に発生するサブイメージセンサの非露光期間３８１のデータが入力切り替え部から信号処理部に出力されるタイミング、すなわち図１１に示す［ｔ５］〜［ｔ８］の期間内に、メモリに格納したメイン画像の信号処理部に対する出力を実行する設定としている。図１１に示す［ｔ６］〜［ｔ７］である。なお、図１１に示す時間［ｔ６］〜［ｔ７］は、図９に示す入力切り替え部から信号処理部に出力されるメイン画像の出力時間より短い設定である。これは、高速読み出し可能なメモリであるＤＤＲメモリを利用したことによるものであり、図１１に示す例では、図９に示す例と異なり、記録用画像信号のデータ転送を高速に実行しているためである。

この処理により、メモリに格納したメイン画像の信号処理部に対する出力によって、阻害されるサブイメージセンサの出力は、サブイメージセンサの非露光期間内のデータのみとなり、サブイメージセンサの非露光期間以外の露光期間のデータは確実にモニタにおいて出力することが可能となる。

先に図９を参照して説明したサブイメージセンサが露光されているにも関わらずモニタ表示がされないデータ区間は、図１１におけるデータ３５１ａ〜３５１ｃである。このデータ３５１は、図９の例では、入力切り替え部から信号処理部に出力されるメイン画像の出力タイミングに重なってしまい、モニタ出力が出来なかったが、本例では、このサブイメージセンサの出力が入力切り替え部から信号処理部に出力されてモニタ表示が実行される。

この図１１に示すように、次の撮影処理が実行され、ミラーの稼動期間が発生した場合には、サブイメージセンサの非露光期間が発生するので、この期間にメイン画像をメモリから読み出して信号処理部に出力することで、露光されたサブイメージセンサの出力は全てライブビュー画像として表示することが可能となる。

なお、図１１に示す例は、次の撮影処理が実行されて、ミラーの稼動期間が発生した場合の例であり、この場合、サブイメージセンサの非露光期間が発生してこの期間にデータを転送することで、露光されたサブイメージセンサの出力は全てライブビュー画像として表示することが可能となる例であるが、例えば、次の撮影処理が実行されずミラーの稼動期間が発生しない場合であっても、ＤＤＲメモリのように高速読み出し可能なメモリを利用してメイン画像を一時的に記憶して出力する構成とすることで、入力切り替え部から信号処理部に対するメイン画像の出力期間が削減され、ライブビュー画像の消失期間の削減が実現される。

以上、特定の実施例を参照しながら、本発明について詳解してきた。しかしながら、本発明の要旨を逸脱しない範囲で当業者が実施例の修正や代用を成し得ることは自明である。すなわち、例示という形態で本発明を開示してきたのであり、限定的に解釈されるべきではない。本発明の要旨を判断するためには、特許請求の範囲の欄を参酌すべきである。

また、明細書中において説明した一連の処理はハードウェア、またはソフトウェア、あるいは両者の複合構成によって実行することが可能である。ソフトウェアによる処理を実行する場合は、処理シーケンスを記録したプログラムを、専用のハードウェアに組み込まれたコンピュータ内のメモリにインストールして実行させるか、あるいは、各種処理が実行可能な汎用コンピュータにプログラムをインストールして実行させることが可能である。例えば、プログラムは記録媒体に予め記録しておくことができる。記録媒体からコンピュータにインストールする他、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、インターネットといったネットワークを介してプログラムを受信し、内蔵するハードディスク等の記録媒体にインストールすることができる。

なお、明細書に記載された各種の処理は、記載に従って時系列に実行されるのみならず、処理を実行する装置の処理能力あるいは必要に応じて並列的にあるいは個別に実行されてもよい。また、本明細書においてシステムとは、複数の装置の論理的集合構成であり、各構成の装置が同一筐体内にあるものには限らない。

以上、説明したように、本発明の一実施例構成によれば、記録用画像を取得するメインイメージセンサと、ライブビュー画像を取得するサブイメージセンサを含む複数のセンサ出力を時分割で切り替えて信号処理部に出力する入力切り替え部を設定した。本構成により単一の信号入力部を有する汎用的な信号処理部を利用して複数のセンサ出力の処理が可能となる。また、入力切り替え部において、メインイメージセンサ出力をメモリに記憶して、メモリから読み出して信号処理部に出力する構成とし、その出力タイミングを、ミラーの動作に起因して発生するサブイメージセンサの非露光期間のデータ出力期間に重なるように設定した。本構成により露光されたライブビュー画像の消失を低減することが可能となる。

ライブビュー表示機能を有さないカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 ライブビュー表示機能を有するカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 ライブビュー表示機能を有するカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 本発明の適用可能なカメラの一構成例である一眼レフカメラの内部構成の一例について説明する図である。 本発明の適用可能なカメラの一構成例である一眼レフカメラのハードウェア構成の一例について説明する図である。 本発明の一実施例に係るライブビュー表示機能を有するカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 本発明の一実施例に係るライブビュー表示機能を有するカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 記録用画像であるメイン画像とライブビュー画像についての信号処理部に対するデータ転送処理例について説明する図である。 図７に示す入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えていない構成における動作例について説明する図である。 本発明の一実施例に係るライブビュー表示機能を有するカメラにおけるセンサと信号処理部間のデータ転送構成例について説明する図である。 図１０に示す入力切り替え部がイメージセンサ出力を一時的にバッファリングするメモリを備えている構成における動作例について説明する図である。

符号の説明

１ イメージセンサ
２ 信号処理チップ
３ イメージセンサ
４ 信号処理チップ
５ イメージセンサ
６ 信号処理チップ
１０ カメラボディ
１１ メインミラー
１２ スクリーン
１３ プリズム
１５ ミラーＡ
１６ リレー系レンズ
１７ ミラーＢ
１８ ミラーＣ
２０ 接眼系レンズ
２２ 再結像系レンズ
２３ サブイメージセンサ
２８ ファインダ
３０ サブミラー
３１ ＡＦユニット
３３ フォーカルプレーンシャッタ
３４ ローパスフィルタ
３５ メインイメージセンサ
３６ イメージャプレート
３８ 基板
４０ モニタ
４１ モニタ窓
４５ ボディマウント
５０ 制御部
５１ モータ駆動回路
５２ シャッタミラー駆動モータ
５３ シャッタ制御回路
５５ 測距センサ
５６ 測光センサ
５７ チャージカムスイッチ（ＳＷ）
５８ 先幕スイッチ（ＳＷ）
６０ イメージャ駆動回路
６１ サブイメージャ駆動回路
６２ モニタ駆動回路
６３ ＬＣＤ駆動回路
６５ 操作釦
６６ 操作ダイヤル
６７ レリーズスイッチ（ＳＷ）
６９ 記録メディア
７０ メモリ
７１ 画像データメモリ
７３ 調光ミラー駆動回路
７５ 入力切り替え部
７７ 信号処理部（ＩＣチップ）
８０ 交換レンズ
８１ 制御部
８２ モータ駆動回路
８３ フォーカスモータ
８４ 絞り駆動回路
８５ 絞りモータ
８７ フォーカスパルスカウンタ
８８ ズームエンコーダ
９０ メモリ
１０１ イメージセンサ
１０２ 入力切り替え部
１０３ 信号処理部
２１１，２１２ イメージセンサ
２１５ 入力切り替え部
２１６ 出力信号制御部
２２１ 信号処理部
２２２ メモリ

Claims (15)

1. 記録用画像を取得するメインイメージセンサと、
   ライブビュー画像を取得するサブイメージセンサと、
   前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力し、入力した複数センサ出力を時分割で切り替えて信号処理部に出力する入力切り替え部と、
   前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力し、入力信号に対する信号処理を実行する信号処理部を有することを特徴とする撮像装置。
2. 前記入力切り替え部は、前記メインイメージセンサの出力を前記サブイメージセンサの出力に優先して前記信号処理部に対して入力し、前記メインイメージセンサの出力の前記信号処理部への入力期間は、前記サブイメージセンサ出力の前記信号処理部への入力を停止する構成であることを特徴とする請求項１に記載の撮像装置。
3. 前記入力切り替え部は、
   前記メインイメージセンサ出力をメモリに一時的に記憶し、前記メモリからメインイメージセンサ出力を読み出して前記信号処理部に対して出力する処理を実行する構成であることを特徴とする請求項１に記載の撮像装置。
4. 前記撮像装置は、
   被写体像の光路をメインイメージセンサとサブイメージセンサに切り替えるミラーを有し、
   前記入力切り替え部は、
   前記メインイメージセンサ出力の前記信号処理部に出力するタイミングを、前記ミラーの動作に起因して発生する前記サブイメージセンサの非露光期間のサブイメージセンサ出力を前記信号処理部へ出力する期間に重複するように設定することを特徴とする請求項３に記載の撮像装置。
5. 前記メモリは高速読み出し可能なメモリであることを特徴とする請求項３または４に記載の撮像装置。
6. 前記入力切り替え部は、
   前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、多チャンネルの伝送路を用いて前記信号処理部に出力する構成であり、
   前記サブイメージセンサの出力を、前記メインイメージセンサの出力チャネル数以下のチャネル数で実行することを特徴とする請求項１に記載の撮像装置。
7. 前記入力切り替え部は、
   前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、ｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式を利用して実行する構成であることを特徴とする請求項６に記載の撮像装置。
8. 撮像装置において信号処理を実行させる信号処理方法であり、
   メインイメージセンサが、記録用画像を取得するメインイメージ取得ステップと、
   サブイメージセンサが、ライブビュー画像を取得するサブイメージ取得ステップと、
   入力切り替え部が、前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力し、入力した複数センサ出力を時分割で切り替えて信号処理部に出力する入力切り替えステップと、
   信号処理部が、前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力し、入力信号に対する信号処理を実行する信号処理ステップと、
   を有することを特徴とする信号処理方法。
9. 前記入力切り替えステップは、前記メインイメージセンサの出力を前記サブイメージセンサの出力に優先して前記信号処理部に対して入力し、前記メインイメージセンサの出力の前記信号処理部への入力期間は、前記サブイメージセンサ出力の前記信号処理部への入力を停止するステップであることを特徴とする請求項８に記載の信号処理方法。
10. 前記入力切り替えステップは、
    前記メインイメージセンサ出力をメモリに一時的に記憶し、前記メモリからメインイメージセンサ出力を読み出して前記信号処理部に対して出力する処理を実行するステップであることを特徴とする請求項８に記載の信号処理方法。
11. 前記撮像装置は、
    被写体像の光路をメインイメージセンサとサブイメージセンサに切り替えるミラーを有し、
    前記入力切り替えステップは、
    前記メインイメージセンサ出力の前記信号処理部に出力するタイミングを、前記ミラーの動作に起因して発生する前記サブイメージセンサの非露光期間のサブイメージセンサ出力を前記信号処理部へ出力する期間に重複するように設定することを特徴とする請求項１０に記載の信号処理方法。
12. 前記メモリは高速読み出し可能なメモリであることを特徴とする請求項１０または１１に記載の撮像装置。
13. 前記入力切り替えステップは、
    前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、多チャンネルの伝送路を用いて前記信号処理部に出力するステップであり、
    前記サブイメージセンサの出力を、前記メインイメージセンサの出力チャネル数以下のチャネル数で実行することを特徴とする請求項８に記載の信号処理方法。
14. 前記入力切り替えステップは、
    前記メインイメージセンサの出力およびサブイメージセンサを含む複数のセンサ出力を、ｓｕｂＬＶＤＳ（Ｓｕｂ−Ｌｏｗ Ｖｏｌｔａｇｅ Ｄｉｆｆｅｒｅｎｔｉａｌ Ｓｉｇｎａｌ）伝送方式を利用して実行するステップであることを特徴とする請求項１３に記載の信号処理方法。
15. 撮像装置において信号処理を実行させるコンピュータ・プログラムであり、
    メインイメージセンサに、記録用画像を取得させるメインイメージ取得ステップと、
    サブイメージセンサに、ライブビュー画像を取得させるサブイメージ取得ステップと、
    入力切り替え部に、前記メインイメージセンサおよびサブイメージセンサを含む複数のセンサ出力を入力させ、入力した複数センサ出力を時分割で切り替えて信号処理部に出力させる入力切り替えステップと、
    信号処理部に、前記メインイメージセンサと前記サブイメージセンサを含む複数のセンサ出力の時分割切り替え信号を前記入力切り替え部から入力させ、入力信号に対する信号処理を実行させる信号処理ステップと、
    を有することを特徴とするコンピュータ・プログラム。

Images