JP5231771B2 - 立体画像撮影装置 - Google Patents

Description

本発明は立体画像撮影装置に係り、特に利き目を考慮した表示等が可能な立体画像撮影装置に関する。

複眼カメラで撮影した複数枚（例えば２枚）の平面画像で構成される立体画像を、通常の液晶ディスプレイやＴＶ画面の構図や被写体の表情を確認する方法として、（１）２枚の画像を並べて表示する方法や（２）２枚の平面画像のうち１枚を選択して表示する方法が考えられる。

しかしながら、（１）の方法で表示を行う場合には、表示領域が２倍となるため煩雑となる。また、（２）の方法で表示を行う場合には、表情や構図を簡便に確認することができるが、２枚の平面画像のうちどちらを表示すべきであるか、という課題があった。

複数枚の画像から所望の画像を選択する技術として、特許文献１には、画像の評価値に基づいて複数枚の画像から所望の１枚の画像を代表画像として選出する技術が開示されている。

人間が立体を知覚する場合には利き目で目標物を視認し、それ以外の目で立体用の付加情報を得ている。立体視を行う場合に利き目の情報を使用するものとして、以下の技術が開示されている。

特許文献２には、頭部に装着して立体画像を鑑賞する表示装置において、電源電圧が基準値以下の場合には、利き目設定手段により設定された利き目の情報に基づいて、利き目用の表示部のみを駆動する技術が開示されている。

特許文献３には、立体画像表示装置とカーソルとを用いて画像の操作を行う場合において、取得した利き目の情報に応じたカーソル等の表示を行う技術が開示されている。

特許文献４には、頭部に装着して立体画像を鑑賞する表示装置において、自動的に利き目を判定し、利き目の画像を外部モニタ等へ出力させる技術が開示されている。
特開２００７―２５８７６号公報 特開平８―１７９２７５号公報 特開２００４―３６２２１８号公報 特開２００７―３４６２８号公報

しかしながら、特許文献１に記載の技術においては、撮影された画像の評価値（画像の画質、撮影条件など）に基づいて代表画像を選定するものであり、利き目等の撮影者の特性が反映された代表画像を選定することができない。

また、特許文献２〜４に記載の技術は、利き目の情報を用いて立体画像を表示させる技術であり、利き目の情報を撮影時に用いるものではない。

本発明はこのような事情に鑑みてなされたもので、撮影者の利き目に対応する撮像手段で撮影された画像を代表画像とすることで、撮影者の意図を反映した構図や表情で立体画像を撮影可能な立体画像撮影装置を提供することを目的とする。

上記目的を達成するため、本発明の一の態様に係る発明は、複数の視点から見た被写体像を立体画像として撮影する複数の撮像手段を備えた立体画像撮影装置において、装置本体の背面に左右方向に離間して配設された２つ以上の物体検出センサであって、ファインダを覗いた撮影者の顔を検出物体として検出する物体検出センサと、前記２つ以上の物体検出センサのそれぞれの検出出力に基づいてファインダを覗いた撮影者の利き目を判断する利き目判断手段と、被写体像を表示する表示手段と、前記複数の撮像手段により撮影された立体画像と、前記利き目判断手段によって判断された利き目の情報とを関連付けて記録媒体に記録する記録手段と、前記立体画像と関連付けて記録媒体に記録された利き目の情報に基づいて、前記記録された立体画像を構成する複数の被写体像の中から所望の１枚の被写体像を代表画像として選択する代表画像選択手段と、前記代表画像選択手段により選択された代表画像を前記表示手段に表示させる表示制御手段と、を備えたことを特徴とする。

本発明の一の態様に係る発明によれば、装置本体の背面に左右方向に離間して配設された２つ以上の物体検出センサによって、ファインダを覗いた撮影者の顔を検出物体として検出し、２つ以上の物体検出センサのそれぞれの検出出力に基づいてファインダを覗いた撮影者の利き目を判断する。これにより、撮影者の手を煩わすことなく、撮影者の利き目を自動的に判断することができる。また、利き目の情報に基づいて立体画像から所望の１枚の被写体像を代表画像として選択し、選択された代表画像を表示手段に表示させる。これにより、撮影者が意図した立体画像に最も近い平面画像を閲覧することができる。また、撮影時に、撮影者が意図した立体画像に最も近い平面画像を動画として、又はライブビュー画像（スルー画）として表示させることができる。また、撮影された立体画像と、撮影者の利き目の情報とが関連付けて記録媒体に記録される。これにより、撮影された立体画像の視聴時に、撮影者の利き目の情報を用いることができる。また、立体画像と関連付けて記録媒体に記録された利き目の情報に基づいて、記録された立体画像を構成する複数の被写体像の中から所望の１枚の被写体像、すなわち利き目を用いて撮影された画像が代表画像として選択される。これにより、記録された画像を視聴する場合においても、利き目を考慮して画像の再生を行うことができる。この場合には、利き目の情報が記録された立体画像を取り込んで画像を再生するプログラムとして実施することもできる。

本発明の他の態様に係る発明は、前記物体検出センサは、指向性の高い光を出射し、検出物体によって反射する光の有無、又は反射する光の光量に対応する信号を出力する光電センサであることを特徴とする。

本発明の他の態様に係る発明は、前記物体検出センサは、装置本体の背面の略中央に設けられたファインダの近傍に設けられた第１のセンサと、前記装置本体の背面の端部に設けられた第２のセンサと、で構成されたことを特徴とする。

本発明の他の態様に係る発明によれば、装置本体の背面の略中央に設けられたファインダの近傍に設けられた第１のセンサ、及び装置本体の背面の端部に設けられた第２のセンサのそれぞれの検出出力に基づいてファインダを覗いた撮影者の利き目を判断する。これにより、ファインダを覗いた撮影者を確実に検出することができる。

本発明の他の態様に係る発明は、前記第２のセンサは、前記装置本体の背面の左端に設けられた左側センサと、前記装置本体の背面の右端に設けられた右側センサとで構成され、前記利き目判定手段は、前記第１のセンサ及び前記左側センサで撮影者が検出された場合には、撮影者の利き目は右目であると判断し、前記第１のセンサ及び前記右側センサで撮影者が検出された場合には、撮影者の利き目は左目であると判断することを特徴とする。

本発明の他の態様に係る発明によれば、センサは、略中央部の光学ファインダの近傍に設けられた第１のセンサと、左端に設けられた左側センサと、右端に設けられた右側センサとで構成される。第１のセンサ及び左側センサで撮影者が検出された場合には、操作者の利き目は右目であると判断し、第１のセンサ及び右側センサで撮影者が検出された場合には、操作者の利き目は左目であると判断する。これにより、撮影者の手を煩わすことなく、撮影者の利き目を自動的に判断することができる。

本発明の他の態様に係る発明は、撮影者の利き目を設定する利き目設定手段を備え、前記利き目判断手段は、前記第１のセンサで撮影者が検出されていない場合には、前記利き目設定手段により設定された利き目を利き目と判断することを特徴とする。

本発明の他の態様に係る発明によれば、第１のセンサで撮影者が検出されていない場合には、撮影者の利き目を設定する利き目設定手段により設定された利き目が撮影者の利き目と判断される。これにより、利き目が自動的に判別できなかった場合においても、利き目を考慮することができる。

本発明の他の態様に係る発明は、前記ファインダは、装置本体の前面に設けられた右目用の右側対物レンズと、装置本体の前面に設けられた左目用の左側対物レンズと、前記右側対物レンズ及び前記左側対物レンズのいずれかを介した被写体像を見るための１つの接眼部と、前記利き目判断手段における利き目の判断結果に基づいて、前記右側対物レンズから入射する光を前記接眼部へ導くか、前記左側対物レンズから入射する光を前記接眼部へ導くかの切り替えを行う切り替え手段と、を備えたことを特徴とする。

本発明の他の態様に係る発明によれば、装置本体の前面に設けられた右目用の右側対物レンズから装置本体の背面に設けられた接眼部への光路と、装置本体の前面に設けられた左目用の左側対物レンズから接眼部への光路の２つの光路がある。撮影者の利き目の判断結果に基づいて、これらの光路が切り替えられる。これにより、利き目を考慮して撮影動作を行うことができるため、撮影者が意図した通りの立体画像が撮影できる。

本発明によれば、撮影者の利き目に対応する撮像手段で撮影された画像を代表画像とすることで、撮影者の意図を反映した構図や表情で立体画像を撮影することができる。

以下、添付図面に従って本発明に係る立体画像撮影装置を実施するための最良の形態について詳細に説明する。

＜第１の実施の形態＞
図１は、撮影者の利き目を自動的に判断する立体画像撮影装置の第１の実施の形態に係る複眼デジタルカメラ１の正面斜視図であり、図２は複眼デジタルカメラ１の背面斜視図である。

複眼デジタルカメラ１は、複数（図１では二つを例示）の撮像系を備えた複眼デジタルカメラ１であって、同一被写体を複数視点（図１では左右二つの視点を例示）からみた立体画像を撮影可能である。

複眼デジタルカメラ１のカメラボディ１２は、略直方体の箱状に形成されており、その正面には、図１に示すように、主として、右側カメラ１０ａ、左側カメラ１０ｂ、右側対物レンズ６１ａ、左側対物レンズ６１ｂ等が設けられている。

カメラボディ１２の側面には、図示しないバッテリーカバーが設けられている。バッテリーカバーの内側には、バッテリーを収納するためのバッテリー収納室、記録メディア１４４を装着するためのメモリカードスロット等が設けられている。

カメラボディ１２の上面には、図２に示すように、モードダイヤル２４、レリーズスイッチ２６、電源ボタン２８等が設けられている。

カメラボディ１２の背面には、図２に示すように、モニタ３０、ズームボタン３８、マクロボタン４０、ＢＡＣＫボタン４２、ＭＥＮＵ／ＯＫボタン４４、ＤＩＳＰボタン４６、十字ボタン４８、スライドスイッチ５０、左側センサ５１、右側センサ５２、ファインダセンサ５３、接眼レンズ６４等が設けられている。

カメラボディ１２の底面には、図示しない三脚ネジ穴などが設けられている。

右目用の画像を撮影する右側カメラ１０ａおよび左目用の画像を撮影する左側カメラ１０ｂは、そのレンズ光軸が平行となるように、あるいは所定角度をなすように並設されている。複眼デジタルカメラ１の電源をＯＮすると、右側カメラ１０ａおよび左側カメラ１０ｂの前面に各々配設されたカバー（図示せず）が開くことにより右側カメラ１０ａおよび左側カメラ１０ｂに被写体光が入射される。

モニタ３０は、４：３の一般的なアスペクト比を有し、カラー表示が可能な液晶ディスプレイで構成されている。このモニタ３０は、再生モード時に撮影済み画像を表示するための画像表示パネルとして利用されるとともに、各種設定操作を行なう際の撮影者インターフェース表示パネルとして利用される。また、撮影モード時には、必要に応じてスルー画像が表示されて、画角確認用の電子ファインダとして利用される。

モードダイヤル２４は、複眼デジタルカメラ１の再生モードと撮影モードとを切り替える切り替え手段として機能し、「再生位置」と「撮影位置」の間を回転自在に設けられている。複眼デジタルカメラ１は、このモードダイヤル２４を「再生位置」に位置させると、再生モードに設定され、「撮影位置」に位置させると、撮影モードに設定される。また、モードダイヤル２４は、各種モード（撮影モード、再生モード、消去モード、編集モード等）の切り替え、オート撮影やマニュアル撮影等の撮影モードの設定に用いられる。このモードダイヤル２４は、カメラボディ１２の上面のレリーズスイッチ２６の下に回転自在に設けられており、図示しないクリック機構によって、「２Ｄ静止画位置」、「２Ｄ動画位置」、「３Ｄ静止画位置」、「３Ｄ動画位置」にセット可能に設けられている。

レリーズスイッチ２６は、いわゆる「半押し」と「全押し」とからなる二段ストローク式のスイッチで構成されている。複眼デジタルカメラ１は、静止画撮影時（例えば、モードダイヤル２４で静止画撮影モード選択時、又はメニューから静止画撮影モード選択時）、このレリーズスイッチ２６を半押しすると撮影準備処理、すなわち、ＡＥ（Automatic Exposure：自動露出）、ＡＦ（Auto Focus：自動焦点合わせ）、ＡＷＢ（Automatic White Balance：自動ホワイトバランス）の各処理を行い、全押しすると、画像の撮影・記録処理を行う。また、動画撮影時（例えば、モードダイヤル２４で動画撮影モード選択時、又はメニューから動画撮影モード選択時）、このレリーズスイッチ２６を全押しすると、動画の撮影を開始し、再度全押しすると、撮影を終了する。なお、設定により、レリーズスイッチ２６を全押している間、動画の撮影を行い、全押しを解除すると、撮影を終了するようにすることもできる。なお、静止画撮影専用のシャッタボタン及び動画撮影専用のシャッタボタンを設けるようにしてもよい。

電源ボタン２８は、複眼デジタルカメラ１の電源スイッチとして機能し、電源ボタン２８を押下することにより、電源がＯＮ／ＯＦＦされる。

ズームボタン３８は、右側カメラ１０ａ及び左側カメラ１０ｂのズーム操作に用いられ、望遠側へのズームを指示するズームテレボタン３４と、広角側へのズームを指示するズームワイドボタン３６とで構成されている。

ＭＥＮＵ／ＯＫボタン４４は、メニュー画面の呼び出し（ＭＥＮＵ機能）に用いられるとともに、選択内容の確定、処理の実行指示等（ＯＫ機能）に用いられ、複眼デジタルカメラ１の設定状態に応じて割り当てられる機能が切り替えられる。メニュー画面では、たとえば露出値、色合い、ＩＳＯ感度、記録画素数などの画質調整やセルフタイマの設定、測光方式の切り替え、デジタルズームを使用するか否かなど、複眼デジタルカメラ１が持つ全ての調整項目の設定が行われる。複眼デジタルカメラ１は、このメニュー画面で設定された条件に応じて動作する。

ＤＩＳＰボタン４６は、モニタ３０の表示内容の切り替え指示等の入力に用いられ、ＢＡＣＫボタン７７は入力操作のキャンセル等の指示の入力に用いられる。

十字ボタン４８は、各種のメニューの設定や選択あるいはズームを行うためのボタンであり、上下左右４方向に押圧操作可能に設けられており、各方向のボタンには、カメラの設定状態に応じた機能が割り当てられる。たとえば、撮影時には、左ボタンにマクロ機能のＯＮ／ＯＦＦを切り替える機能が割り当てられ、右ボタンにストロボモードを切り替える機能が割り当てられる。また、上ボタンにモニタ３０の明るさを替える機能が割り当てられ、下ボタンにセルフタイマのＯＮ／ＯＦＦを切り替える機能が割り当てられる。また、再生時には、右ボタンにコマ送りの機能が割り当てられ、左ボタンにコマ戻しの機能が割り当てられる。また、上ボタンにモニタ３０の明るさを替える機能が割り当てられ、下ボタンに再生中の画像を削除する機能が割り当てられる。また、各種設定時には、モニタ３０に表示されたカーソルを各ボタンの方向に移動させる機能が割り当てられる。

スライドスイッチ５０は、操作者の利き目の情報を入力するためのスイッチである。スライドスイッチ５０を右に移動させた場合には利き目は右目に設定され、スライドスイッチ５０を左に移動させた場合には利き目は左目に設定される。

左側センサ５１、右側センサ５２及びファインダセンサ５３は、指向性の高い光を発光素子から出射し、その光が検出物体で反射され、反射された光の有無や反射された光の光量を受光素子で受光して、光の有無や光の光量に対応する信号を出力することにより、検出物体を検出する反射型の光電センサである。左側センサ５１及び右側センサ５２はカメラボディ１２の両端に設けられており、左側センサ５１は、左側センサ５１の前に撮影者の顔があることを検出し、右側センサ５２は、右側センサ５２の前に撮影者の顔があることを検出する。また、ファインダセンサ５３は、後述する接眼レンズ６４の近傍に設けられており、ファインダセンサ５３の前に撮影者の顔があること、すなわち撮影者が接眼レンズ６４を覗いていることを検出する。すなわち、左側センサ５１及びファインダセンサ５３で撮影者の顔があることが検出された場合には、撮影者が接眼レンズ６４を右目で覗いていることを示し、右側センサ５２及びファインダセンサ５３で撮影者の顔があることが検出された場合には、撮影者が接眼レンズ６４を右目で覗いていることを示す。なお、左側センサ５１、右側センサ５２及びファインダセンサ５３として、反射型の光電センサに限らず、物体により光量の変化を検出することが可能であれば様々な種類の光電センサを用いることもできる。また、光電センサに限らず、超音波を用いるセンサなど様々な種類の近接センサを用いることができる。

次に、複眼デジタルカメラ１の光学ファインダについて説明する。光学ファインダは、図３に示すように、右側対物レンズ６１ａ、右側プリズム６２ａ、左側対物レンズ６１ｂ、左側プリズム６２ｂ、中央プリズム６３、接眼レンズ６４とで構成される。左側対物レンズ６１ｂ及び左側プリズム６２ｂは、右側対物レンズ６１ａ及び右側プリズム６２ａに対して、接眼レンズ６４の光軸Ａを中心に線対称に設けられている。左側対物レンズ６１ｂ及び左側プリズム６２ｂは、右側対物レンズ６１ａ及び右側プリズム６２ａと同じ構成であるため、説明を省略する。

右側プリズム６２ａは、略三角柱形状の光学素子であり、右側対物レンズ６１ａの背面に設けられている。右側プリズム６２ａは、右側対物レンズ６１ａの光軸Ｌａを略直角に屈折させて、接眼レンズ６４の光軸Ｌへ導く。

接眼レンズ６４は、カメラボディ１２の略中央に設けられており、接眼レンズ６４の前面には、中央プリズム６３が設けられている。

中央プリズム６３は、図４に示すように、略三角柱形状の光学素子であり、光軸Ｌを中心に時計回り及び反時計回りに回転自在に設けられている。中央プリズム６３が回転することにより、右側対物レンズ６１ａによって導かれた光を接眼レンズ６４に導くか、左側対物レンズ６１ｂによって導かれた光を接眼レンズ６４に導くかの切り替えが可能となっている。

図４は、中央プリズム６３を左から見た場合に左上方に斜辺となる場合を図示している。中央プリズム６３を図４に示す状態から反時計回りに９０°回転させると、図３に示す状態となる。これは、右側対物レンズ６１ａが選択された状態であり、中央プリズム６３は、右側プリズム６２ａによって屈折された右側対物レンズ６１ａの光軸Ｌａを光軸Ｌへと屈折させる。これにより、撮影者が接眼レンズ６４を覗くことで、右側対物レンズ６１ａによって導かれた光を見ることができる。

また、中央プリズム６３を図３の状態から１８０°回転させることにより、右側対物レンズ６１ａから左側対物レンズ６１ｂへ切り替えられる。左側対物レンズ６１ｂが選択された状態では、中央プリズム６３は、左側プリズム６２ｂによって屈折された左側対物レンズ６１ｂの光軸Ｌｂを光軸Ｌへと屈折させる。これにより、撮影者が接眼レンズ６４を覗くことで、左側対物レンズ６１ｂによって導かれた光を見ることができる。

図５は、複眼デジタルカメラ１の電気的構成を示すブロック図である。複眼デジタルカメラ１は、単視点画像（２次元画像）と、多視点画像（３次元画像、立体画像）とが撮影可能であり、また、動画、静止画、音声の記録再生が可能である。また、動画、静止画どちらにおいても、単視点画像のみでなく、多視点画像の撮影も可能である。

右側カメラ１０ａと左側カメラ１０ｂの動作はＣＰＵ１１０によって制御される。右側カメラ１０ａと左側カメラ１０ｂとは、基本的に連動して動作を行うが、各々個別に動作させることも可能となっている。

右側カメラ１０ａは、主として、第１絞り１２ａ、第１フォーカスレンズ群１３ａ及び第１イメージセンサ１４ａで構成される。左側カメラ１０ｂは、右側カメラ１０ａと同様の構成であり、主として、第２絞り１２ｂ、第２フォーカスレンズ群１３ｂ及び第２イメージセンサ１４ｂで構成される。

第１絞り１２ａ及び第２絞り１２ｂは、モータドライバ１２２に接続されている。モータドライバ１２２は、ＣＰＵ１１０からの指令に応じて第１絞り１２ａ及び第２絞り１２ｂの動作をそれぞれ制御する。

第１フォーカスレンズ群１３ａ及び第２フォーカスレンズ群１３ｂは、モータドライバ１２４に接続されている。モータドライバ１２４は、ＣＰＵ１１０からの指令に応じて第１フォーカスレンズ群１３ａ及び第２フォーカスレンズ群１３ｂの動作をそれぞれ制御する。

第１イメージセンサ１４ａ及び第２イメージセンサ１４ｂは、ＣＣＤ型やＣＭＯＳ型のイメージセンサであり、第１絞り１２ａ、第１フォーカスレンズ群１３ａ等、第２絞り１２ｂ、第２フォーカスレンズ群１３ｂによって結像された被写体光を受光し、受光素子に受光量に応じた光電荷を蓄積する。第１イメージセンサ１４ａ及び第２イメージセンサ１４ｂにはタイミングジェネレータ（ＴＧ）１３０が接続されている。ＴＧ１３０の動作はＣＰＵ１１０によって制御される。右側カメラ１０ａと左側カメラ１０ｂの第１イメージセンサ１４ａおよび第２イメージセンサ１４ｂから出力された撮像信号は、それぞれＡ／Ｄ変換器１３４ａ、１３４ｂに入力される。第１イメージセンサ１４ａの光電荷蓄積・転送動作は、ＴＧ１３０によって制御され、ＴＧ１３０から入力されるタイミング信号（クロックパルス）により、電子シャッター速度（光電荷蓄積時間）が決定される。第１イメージセンサ１４ａは、撮影モード時には、１画面分の画像信号を所定周期ごとに取得する。レリーズスイッチ２６の半押し状態が検出されたとき、ＣＰＵ１１０は第１イメージセンサ１４ａから測距データを得る。ＣＰＵ１１０は得られた測距データに基づいて、ピント、絞りなどの調整を行う。また、ＣＰＵ１１０は得られた測距データに基づいて、図示しない駆動手段を介して右側カメラ１０ａ及び左側カメラ１０ｂの輻輳角の調整を行う。

システムバスには、ＣＰＵ１１０、ＳＤＲＡＭ１１４、ＶＲＡＭ１１６、画像入力コントローラ１３６、画像信号処理回路１３８、圧縮伸張処理回路１４０、画像ファイル生成部１４２、メディアコントローラ１４６、ビデオエンコーダ１４８、ＡＥ／ＡＷＢ検出回路１５２、ＡＦ検出回路１５４などが接続される。

ＣＰＵ１１０は、複眼デジタルカメラ１の全体の動作を統括制御する制御手段として機能するとともに、各種の演算処理を行う演算手段として機能し、操作部（モードダイヤル２４、レリーズスイッチ２６、電源ボタン２８、ズームボタン３８、マクロボタン４０、ＢＡＣＫボタン４２、ＭＥＮＵ／ＯＫボタン４４、ＤＩＳＰボタン４６、十字ボタン４８、スライドスイッチ５０など）からの入力に基づき所定の制御プログラムに従って複眼デジタルカメラ１の各部を制御する。

ＳＤＲＡＭ１１４には、このＣＰＵ１１０が実行する制御プログラムであるファームウェア、制御に必要な各種データ、カメラ設定値、撮影された画像データ等が記録されている。なお、後述するように、撮影された画像データは、通常メモリカードに記録されるが、撮影者が選択した場合、メモリカードが装填されていない場合、メモリカードの容量が不足した場合等にはＳＤＲＡＭ１１４に記録される。

ＶＲＡＭ１１６は、ＣＰＵ１１０の作業用領域として利用されるとともに、画像データの一時記憶領域として利用される。

アナログ信号処理部１３２ａ、１３２ｂは、第１イメージセンサ１４ａ及び第２イメージセンサ１４ｂから出力された画像信号に対してそれぞれ相関二重サンプリング処理（撮像素子の出力信号に含まれるノイズ（特に熱雑音）等を軽減することを目的として、撮像素子の１画素毎の出力信号に含まれるフィードスルー成分レベルと画素信号成分レベルとの差をとることにより正確な画素データを得る処理）を行い、増幅して出力する。

Ａ／Ｄ変換器１３４ａ、１３４ｂは、入力された画像データをアナログからデジタルに変換する。Ａ／Ｄ変換器１３４ａ、１３４ｂを通して、第１イメージセンサ１４ａの撮像信号は右眼用画像データとして、第２イメージセンサ１４ｂの撮像信号は左眼用画像データとして出力される。

画像入力コントローラ１３６は、所定容量のラインバッファを内蔵しており、ＣＰＵ１１０からの指令に従い、Ａ／Ｄコンバータ１３４から出力された１画像分の画像信号を蓄積して、ＶＲＡＭ１１６に記録する。

画像信号処理回路１３８は、同時化回路（単板ＣＣＤのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含み、ＣＰＵ１１０からの指令に従い、Ａ／Ｄ変換器１３４ａ、１３４ｂから入力された右眼用画像データおよび左眼用画像データに所要の信号処理を施して、輝度データ（Ｙデータ）と色差データ（Ｃｒ，Ｃｂデータ）とからなる画像データ（ＹＵＶデータ）を生成し、表示用のビデオエンコーダ１４８に出力する。撮影モード時に電子ビューファインダとして使用される際には、生成された画像データが、ビデオエンコーダ１４８を介してモニタ３０にライブビュー画像として表示される。また、画像信号処理回路１３８は、右側カメラ１０ａにより撮影された右眼用画像データ及び左側カメラ１０ｂにより撮影された左眼用画像データのＹＣ信号を、所定方式の映像信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換した上で、外部の立体画像表示装置等において立体表示を行うための立体画像データに合成する。

圧縮伸張処理回路１４０は、ＣＰＵ１１０からの指令に従い、入力された画像データに所定形式の圧縮処理を施し、圧縮画像データを生成する。また、圧縮伸張処理回路１４０は、ＶＲＡＭ１１６に記憶された右眼用画像データおよび左眼用画像データに対して、静止画ではＪＰＥＧ、動画ではＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４方式等の所定の圧縮形式に従って圧縮処理を施す。圧縮伸張処理回路１４０は、静止画の２次元画像のデータをＥｘｉｆファイル等の所定のフォーマットの画像ファイル（画像ファイルについては後に詳述する）として記録メディア１４４に格納する。Ｅｘｉｆファイルは、主画像のデータを格納する領域と、縮小画像（サムネイル画像）のデータを格納する領域とを有している。撮影によって取得された主画像のデータから画素の間引き処理その他の必要なデータ処理を経て、規定サイズ（例えば、１６０×１２０又は８０×６０ピクセルなど）のサムネイル画像が生成される。こうして生成されたサムネイル画像は、主画像とともにＥｘｉｆファイル内に書き込まれる。また、Ｅｘｉｆファイルには、撮影日時、撮影条件、顔検出情報等のタグ情報が付属されている。

画像ファイル生成部１４２は、圧縮伸張処理回路１４０により生成されたＪＰＥＧ形式の画像データの画像ファイルを生成するものである。なお、画像ファイルの詳細については、後に詳述する。

記録メディア１４４は、複眼デジタルカメラ１に着脱自在なｘＤピクチャカード（登録商標）、スマートメディア（登録商標）に代表される半導体メモリカード、可搬型小型ハードディスク、磁気ディスク、光ディスク、光磁気ディスク等、種々の記録媒体である。

メディアコントローラ１４６は、圧縮伸張処理回路１４０によって圧縮処理された各画像データを、メディアコントローラ１４６経由で接続された記録メディア１４４やその他の記録メディアに記録させる。

ビデオエンコーダ１４８は、画像信号処理回路１３８から出力されたＲＧＢ信号をモニタ３０に出力する。

ＡＥ／ＡＷＢ検出回路１５２は、撮影スタンバイ状態時にレリーズスイッチ２６が半押しされると、ＣＰＵ１１０からの指令に従い、入力された画像信号からＡＥ制御及びＡＷＢ制御に必要な物理量を算出する。たとえば、ＡＥ制御に必要な物理量として、１画面を複数のエリア（たとえば１６×１６）に分割し、分割したエリアごとにＲ、Ｇ、Ｂの画像信号の積算値を算出する。ＣＰＵ１１０は、このＡＥ／ＡＷＢ検出回路１５２から得た積算値に基づいて被写体の明るさ（被写体輝度）を検出し、撮影に適した露出値（撮影ＥＶ値）を算出する。そして、算出した撮影ＥＶ値と所定のプログラム線図から絞り値とシャッター速度を決定する。また、ＡＷＢ制御に必要な物理量として、１画面を複数のエリア（例えば、１６×１６）に分割し、分割したエリアごとにＲ、Ｇ、Ｂの画像信号の色別の平均積算値を算出する。ＣＰＵ１１０は、得られたＲの積算値、Ｂの積算値、Ｇの積算値から分割エリアごとにＲ／Ｇ及びＢ／Ｇの比を求め、求めたＲ／Ｇ、Ｂ／Ｇの値のＲ／Ｇ、Ｂ／Ｇの色空間における分布等に基づいて光源種判別を行う。そして、判別された光源種に適したホワイトバランス調整値に従って、たとえば各比の値がおよそ１（つまり、１画面においてＲＧＢの積算比率がＲ：Ｇ：Ｂ≒１：１：１）になるように、ホワイトバランス調整回路のＲ、Ｇ、Ｂ信号に対するゲイン値（ホワイトバランス補正値）を決定する。

ＡＦ検出回路１５４は、撮影スタンバイ状態時にレリーズスイッチ２６が半押しされると、ＣＰＵ１１０からの指令に従い、入力された画像信号からＡＦ制御に必要な物理量を算出する。本実施の形態の複眼デジタルカメラ１では、撮像素子１２８から得られる画像のコントラストによりＡＦ制御が行われ（いわゆるコントラストＡＦ）、ＡＦ検出回路１５４は、入力された画像信号から画像の鮮鋭度を示す焦点評価値を算出する。ＣＰＵ１１０は、このＡＦ検出回路１５４で算出される焦点評価値が極大となる位置を検出し、その位置にフォーカスレンズ群を移動させる。すなわち、フォーカスレンズ群を至近から無限遠まで所定のステップで移動させ、各位置で焦点評価値を取得し、得られた焦点評価値が最大の位置を合焦位置として、その位置にフォーカスレンズ群を移動させる。

また、複眼デジタルカメラ１には、電源電池が着脱可能に設けられている。電源電池は、充電可能な二次電池、例えばニカド電池、ニッケル水素電池、リチウムイオン電池で構成される。電源電池は使い切り型の一次電池、例えばリチウム電池、アルカリ電池で構成してもよい。電源電池は、図示しない電池収納室に装填することにより、複眼デジタルカメラ１の各手段と電気的に接続される。

なお、図１の複眼デジタルカメラ１においては、２系統の撮像系（右側カメラ１０ａおよび左側カメラ１０ｂ）を有する例を示すが、撮像系が３個以上あってもよい。また、撮像系の配置は、横一列でなくても二次元で配置されていてもよい。また、図１の複眼デジタルカメラ１は、立体撮影のみでなく、マルチ視点や全方向の撮影も可能である。

上記のように構成された複眼デジタルカメラ１の撮影、記録、再生及び編集の各動作について説明する。以下の処理は、主としてＣＰＵ１１０で行われる。

［撮影、記録動作］
図６は、２枚の被写体像を立体画像として撮影する撮影処理の一連の処理の流れを示すフローチャートである。複眼デジタルカメラ１の電源ボタン２８がＯＮ操作されたことが検出されると、カメラ内電源がＯＮされ、利き目情報を初期値である右目として、撮影モードで撮影スタンバイ状態にされる（ステップＳ１０）。利き目情報の初期値を右目とするのは、右目が利き目である撮影者が多い（７割程度）という統計的情報に基づいている。モニタ３０には、右側カメラ１０ａで撮影されたライブビュー画像が表示される。

レリーズスイッチ２６が半押しされたかどうかが判断される（ステップＳ１２）。レリーズスイッチが半押しされていない場合（ステップＳ１２でＮＯ）には、複眼デジタルカメラ１の動作モードとして撮影モード以外の動作モードに選択されたどうかが判断される（ステップＳ１４）。複眼デジタルカメラ１の動作モードとして撮影モード以外の動作モードが選択された場合（ステップＳ１４でＹＥＳ）には、処理が終了され、複眼デジタルカメラ１の動作モードとして撮影モード以外の動作モードが選択されなかった場合（ステップＳ１４でＮＯ）には、複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作されたかどうかが判断される（ステップＳ１６）。複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作された場合（ステップＳ１６でＹＥＳ）には、処理が終了され、複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作されなかった場合（ステップＳ１６でＮＯ）には、再度レリーズスイッチ２６が半押しされたかどうかを判断するステップ（ステップＳ１２）が行われる。

レリーズスイッチ２６が半押しされた場合（ステップＳ１２でＹＥＳ）には、ファインダセンサ５３で撮影者の顔があることが検出されたかどうかが判断される（ステップＳ１８）。ファインダセンサ５３で撮影者の顔があることが検出された場合（ステップＳ１８でＹＥＳ）には、撮影者がファインダを用いて撮影を行っているということであるため、モニタ３０の電源を切り非表示とする。これにより、複眼デジタルカメラ１の消費電力を減らすことができる。その後、利き目を判定するステップ（ステップＳ２２〜Ｓ３２）へ進む。一般的には、カメラのファインダ、単眼の望遠鏡や顕微鏡、銃の照準、板塀の節穴等をのぞくとき使う方が利き目である。すなわち、撮影者が光学ファインダを覗き込むときには利き目で覗くという特性がある。したがって、利き目を判定するステップ（ステップＳ２２〜Ｓ３２）では、左側センサ５１、右側センサ５２及びファインダセンサ５３を用いてどちらの目で光学ファインダを覗いているか判定して、利き目の判定を行う。

まず、右側センサ５２及びファインダセンサ５３で撮影者の顔があることが検出されたかどうかが判断される（ステップＳ２２）。右側センサ５２及びファインダセンサ５３で撮影者の顔があることが検出された場合（ステップＳ２２でＹＥＳ）には、図７に示すように、撮影者が左目で接眼レンズ６４を覗いている場合であるため、左目が利き目であると判定され（ステップＳ２４）、左側対物レンズ６１ｂによって導かれた光が接眼レンズ６４に導かれるように中央プリズム６３を回転させることで、光学ファインダの光路が左側に切り替えられる（ステップＳ２６）。

右側センサ５２及びファインダセンサ５３で撮影者の顔があることが検出されていない場合（ステップＳ２２でＮＯ）には、左側センサ５１及びファインダセンサ５３で撮影者の顔があることが検出されたかどうかが判断される（ステップＳ２８）。左側センサ５１及びファインダセンサ５３で撮影者の顔があることが検出された場合（ステップＳ２８でＹＥＳ）には、図８に示すように、撮影者が右目で接眼レンズ６４を覗いている場合であるため、右目が利き目であると判定され（ステップＳ３０）、右側対物レンズ６１ａによって導かれた光が接眼レンズ６４に導かれるように中央プリズム６３を回転させることで、光学ファインダの光路が右側に切り替えられる（ステップＳ３２）。これにより、利き目の情報の入力を意識する必要なく、接眼レンズ６４を覗くだけで利き目の情報を取得することが可能であり、なおかつ接眼レンズ６４を介して利き目に対応した被写体光を見ることができる。

ファインダセンサ５３で撮影者の顔があることが検出されたかどうかを判断するステップ（ステップＳ１８）において、ファインダセンサ５３で撮影者の顔があることが検出されていない場合（ステップＳ１８でＮＯ）には、スライドスイッチ５０によって入力された操作者の利き目の情報が右目であるかどうかが判断される（ステップＳ３４）。入力された利き目の情報が右目である場合（ステップＳ３４でＹＥＳ）には、右目用の撮像系である右側カメラ１０ａを介して撮影されるライブビュー画像をモニタ３０に表示させる（ステップＳ３６）。入力された利き目の情報が左目である場合（ステップＳ３４でＮＯ）には、左目用の撮像系である左側カメラ１０ｂを介して撮影されるライブビュー画像をモニタ３０に表示させる（ステップＳ３８）。

レリーズスイッチ２６が全押しされたかどうかが判断される（ステップＳ４０）。レリーズスイッチ２６が全押しされなかった場合（ステップＳ４０でＮＯ）には、再度レリーズスイッチ２６が半押しされたかどうかを判断するステップ（ステップＳ１２）が行われる。レリーズスイッチ２６が全押しされた場合（ステップＳ４０でＹＥＳ）には、ＣＰＵ１１０にＳ２ＯＮ信号が入力される。このＳ２ＯＮ信号に応動して、以下のようにして立体画像の撮影（ステップＳ４２）、撮影された立体画像の記録処理が行われる（ステップＳ４４）。

まず、ＣＰＵ１１０は、レリーズスイッチ２６半押し時の測光値に基づいて決定した絞り値に基づいてモータドライバ１２２を介して第１絞り１２ａ、第２絞り１２ｂを駆動するとともに、前記測光値に基づいて決定したシャッター速度になるように第１イメージセンサ１４ａ、第２イメージセンサ１４ｂでの電荷蓄積時間（いわゆる電子シャッター）を制御する。

また、ＣＰＵ１１０は、ＶＲＡＭ１１６に格納される右眼用画像データおよび左眼用画像データの各々からＡＦ評価値およびＡＥ評価値を算出する。ＡＦ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値の高周波成分を積算することにより算出され、画像の鮮鋭度を表す。輝度値の高周波成分とは、隣接する画素間の輝度差（コントラスト）を所定領域内について足し合わせたものである。ＡＥ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値を積算することにより算出され、画像の明るさを表す。ＡＦ評価値およびＡＥ評価値は、後述する撮影準備処理時に実行されるＡＦ動作およびＡＥ動作においてそれぞれ使用される。

ＣＰＵ１１０は、ＣＰＵ１１０が第１フォーカスレンズ１３ａおよび第２フォーカスレンズ１３ｂを制御してそれぞれ所定方向に移動させながら、順次に得られる右眼用画像データおよび左眼用画像データの各々から算出されたＡＦ評価値の最大値を求めることにより、ＡＦ動作（コントラストＡＦ）を行う。

被写体光は、第１ズームレンズ１１ａ、第１絞り１２ａ、および第１フォーカスレンズ１３ａを介して第１イメージセンサ１４ａの受光面に入射する。また、第２ズームレンズ１１ｂ、第２絞り１２ｂ、および第２フォーカスレンズ１３ｂを介して第２イメージセンサ１４ｂの受光面に入射する。

第１イメージセンサ１４ａ、第２イメージセンサ１４ｂの受光面に入射した光は、その受光面に配列された各フォトダイオードによって入射光量に応じた量の信号電荷に変換される。各フォトダイオードに蓄積された信号電荷は、ＴＧ１３０から加えられるタイミング信号に従って読み出され、電圧信号（画像信号）として第１イメージセンサ１４ａ、第２イメージセンサ１４ｂから順次出力され、アナログ信号処理部１３２ａ、１３２ｂに入力される。

アナログ信号処理部１３２ａ、１３２ｂは、ＣＤＳ回路及びアナログアンプを含み、ＣＤＳ回路は、ＣＤＳパルスに基づいてＣＣＤ出力信号を相関二重サンプリング処理し、アナログアンプは、ＣＰＵ１１０から加えられる撮影感度設定用ゲインによってＣＤＳ回路から出力される画像信号を増幅する。Ａ／Ｄ変換器１３４ａ、１３４ｂにおいて、それぞれアナログの画像信号からデジタルの画像信号に変換される。

Ａ／Ｄ変換器１３４ａ、１３４ｂから出力された右眼用画像データおよび左眼用画像データは、それぞれ画像信号処理回路１３８で階調変換、ホワイトバランス調整、γ調整処理などの各種画像処理を施され、画像入力コントローラ１３６に内蔵のバッファメモリ３にそれぞれ一旦蓄えられる。

バッファメモリから読み出されたＲ、Ｇ、Ｂの画像信号は、画像信号処理回路１３８により輝度信号Ｙと色差信号Ｃｒ、Ｃｂ（ＹＣ信号）に変換され、Ｙ信号は、輪郭調整手段により輪郭強調処理される。画像信号処理回路１３８で処理されたＹＣ信号は、それぞれバッファメモリに蓄えられる。これにより、右側カメラ１０ａ及び左側カメラ１０ｂの２つの撮像系で同時に撮影が行われ、２枚の被写体像、すなわち立体画像が撮影される。

バッファメモリに蓄えられたＹＣ信号は、圧縮伸張処理回路１４０によって圧縮され、所定のフォーマットの画像ファイルとして、メディアコントローラ１４６を介して記録メディア１４４に記録される。

次に、画像ファイルについて説明する。図９は、同一画像ファイルに２枚の画像が連結された画像ファイルのデータ構造を模式的に示す図である。図９に示すように、画像ファイルは、右側カメラ１０ａで撮影された右目用の画像のデータの先頭を示すマーカＳＯＩ（Start of Image）の格納領域、右目用のタグ情報格納領域ＡＰＰ１、右目用の画像データ（ＪＰＥＧデータ）の格納領域、右目用の画像のデータの終了を示すマーカＥＯＩ（End of Image）の格納領域、左側カメラ１０ｂで撮影された左目用の画像のデータの先頭を示すマーカＳＯＩ（Start of Image）の格納領域、左目用のタグ情報格納領域ＡＰＰ１、左目用の画像データ（ＪＰＥＧデータ）の格納領域、左目用の画像のデータの終了を示すマーカＥＯＩ（End of Image）の格納領域を含んでいる。

右目用及び左目用のタグ情報格納領域ＡＰＰ１は、ＡＰＰ１マーカ領域と、長さ情報領域と、Ｅｘｉｆ識別情報領域と、Ｔｉｆｆヘッダ領域と、ＩＦＤ０領域と、Ｅｘｉｆ ＩＦＤ領域と、ＤＰＳ ＩＦＤ領域と、互換ＩＦＤ領域と、ＩＦＤ１領域（サムネイルＩＦＤ領域）と、サムネイル画像データ領域とを含んでいる。撮影者の利き目の情報は、右目用のＥｘｉｆ ＩＦＤ領域、右目用の互換ＩＦＤ領域、左目用のＥｘｉｆ ＩＦＤ領域、左目用の互換ＩＦＤ領域の少なくとも１箇所に記録される。

また、図１０に示すように、２枚の画像を別の画像ファイルに記録することもできる。右側カメラ１０ａで撮影された右目用の画像ファイルにはＤＳＣＦ０００１．ＪＰＧのような奇数番号をつけ、また左側カメラ１０ｂで撮影された左目用の画像の画像ファイルにはＤＳＣＦ０００２．ＪＰＧのような偶数番号をつけて、記録メディア１４４内の同一のファイルに記録する。この場合には、撮影者の利き目の情報は、右目用の画像ファイル及び左目用の画像ファイルのそれぞれに記録する必要がある。
［再生動作］
複眼デジタルカメラ１のモードとして再生モードが選択されると、記録メディア１４４に記録されている最終コマの画像が選択され、画像ファイルがメディアコントローラ１４６を介して読み出される（ステップＳ５０）。読み出された画像ファイルのタグ情報格納領域ＡＰＰ１に記録されている撮影者の利き目の情報に基づいて、利き目に相当する撮像系で撮影され記録された画像（利き目側の画像）の圧縮データは、圧縮伸張処理回路１４０を介して非圧縮のＹＣ信号に伸長され、バッファメモリ等に保持され、ビデオエンコーダ１４８を介して、図１２（ａ）に示すような被写体像がモニタ３０に表示される（ステップＳ５２）。

逆コマ送りスイッチ（十字キーの左キー）が押されたかどうかが判断される（ステップＳ５４）。十字キーの左キーが押されたと判断された場合（ステップＳ５４でＹＥＳ）には、逆方向にコマ送りされ、現在選択中のコマ番号の次に小さいコマ番号の画像ファイルが記録メディア１４４から読み出され、上記と同様にして利き目側の画像がモニタ３０に再生される（ステップＳ５６）。十字キーの左キーが押されていないと判断された場合（ステップＳ５４でＮＯ）には、順コマ送りスイッチ（十字キーの右キー）が押されたかどうかが判断される（ステップＳ５８）。十字キーの右キーが押されたと判断された場合（ステップＳ５８でＹＥＳ）には、順方向にコマ送りされ、現在選択中のコマ番号の次に大きいコマ番号の画像ファイルが記録メディア１４４から読み出され、上記と同様にして利き目側の画像がモニタ３０に再生される。

複眼デジタルカメラ１の動作モードとして再生モード以外の動作モードが選択されたかどうかが判断される（ステップＳ６２）。再生モード以外のモードが選択された場合（ステップＳ６２でＹＥＳ）には、再生モードが終了される。再生モード以外のモードとしては、消去モードや編集モードなどがあげられる。画像がモニタ３０に再生表示された状態で消去モードが選択されると、モニタ３０に再生表示された画像の画像ファイルが記録メディア１４４から消去される。また、画像がモニタ３０に再生表示された状態で、編集モードが選択されと、モニタ３０に表示された画像を編集することができる。

再生モード以外の動作モードが選択されなかった場合（ステップＳ６２でＮＯ）には、複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作されたかどうかが判断される（ステップＳ６４）。複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作された場合（ステップＳ６４でＹＥＳ）には、処理が終了され、複眼デジタルカメラ１の電源ボタン２６がＯＦＦ操作されなかった場合（ステップＳ６４でＮＯ）には、再度記録メディア１４４に記録されている最終コマの画像を選択するステップ（ステップＳ５０）が行われる。

このように、モニタ３０が２次元画像しか表示できない場合であっても、利き目の情報に基づいて利き目側の画像を再生することにより、撮影者が認識している立体画像にもっとも近い「撮影者の利き目側の平面画像」をモニタ３０に再生することができる。

なお、図１２（ａ）に示した再生方法（１枚画像の再生）以外に、図１２（ｂ）に示すような再生方法（インデックス表示）により、利き目側の被写体像を表示させることもできる。図１２（ｂ）は４枚の画像のインデックス表示の例であり、現在選択中のコマ番号の利き目側の画像が左上に表示され、次に小さいコマ番号の利き目側の画像が右上に表示され、３番目に小さいコマ番号の利き目側の画像が左下に表示され、４番目に小さいコマ番号の利き目側の画像が右下に表示される。

［選択された画像ファイルの表示動作］
記録メディア１４４に記録された所望の画像が選択され、選択された画像の画像ファイルが記録メディア１４４から読み出される（ステップＳ７０）。画像の選択は、画像ファイルが記録されているフォルダを開いて選択してもよいし、インデックス表示を見ながら選択してもよい。読み出された画像ファイルのタグ情報格納領域ＡＰＰ１に記録されている撮影者の利き目の情報が参照され（ステップＳ７２）、撮影者の利き目の情報が右目であるかどうかが判断される（ステップＳ７４）。

撮影者の利き目の情報が右目である場合（ステップＳ７４でＹＥＳ）には、右側カメラ１０ａで撮影された右目用の画像がビデオエンコーダ１４８を介してモニタ３０に表示され（ステップＳ７６）、撮影者の利き目の情報が右目でない場合（ステップＳ７４でＮＯ）には、左側カメラ１０ｂで撮影された左目用の画像がビデオエンコーダ１４８を介してモニタ３０に表示される（ステップＳ７８）。

このように、利き目の情報に基づいて利き目側の画像を表示することにより、撮影者が認識している立体画像にもっとも近い「撮影者の利き目側の平面画像」をモニタ３０に表示することができる。

なお、本実施の形態では光学ファインダを用いて利き目の情報の取得、撮影動作を行ったが、光学ファインダに限らず、電子ビューファインダにも適用可能である。

＜第２の実施の形態＞
撮影者の利き目を自動的に判断する立体画像撮影装置の第１の実施の形態は、カメラボディ１２の背面に設けられた左側センサ５１、右側センサ５２及びファインダセンサ５３を用いて、接眼レンズ６４を左目で覗いているか右目で覗いているかを検出することにより利き目を判断したが、利き目を判断する方法はこれに限らない。

撮影者の利き目を自動的に判断する立体画像撮影装置の第２の実施の形態は、カメラボディ１２の背面に設けられたカメラを用いて撮影者の利き目を判断するものである。なお、第１の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。

図１４は、撮影者の利き目を自動的に判断する立体画像撮影装置の第２の実施の形態に係る複眼デジタルカメラ１００の正面斜視図であり、図１５は複眼デジタルカメラ１００の背面斜視図である。図１６は、複眼デジタルカメラ１００の電気的構成を示すブロック図である。複眼デジタルカメラ１００は、複数（図１４では二つを例示）の撮像系を備えた複眼デジタルカメラ１００であって、同一被写体を複数視点（図１４では左右二つの視点を例示）からみた立体画像を撮影可能である。

複眼デジタルカメラ１００のカメラボディ１１２は、略直方体の箱状に形成されており、その正面には、図１４に示すように、主として、右側カメラ１０ａズ、左側カメラ１０ｂが設けられている。

カメラボディ１１２の背面には、図１５に示すように、主として背面カメラ１０ｃ、モニタ３０、ズームボタン３８、マクロボタン４０、ＢＡＣＫボタン４２、ＭＥＮＵ／ＯＫボタン４４、ＤＩＳＰボタン４６、十字ボタン４８が設けられている。

背面カメラ１０ｃは、モニタ３０の略中央軸線Ｍ上に設けられており、主として、第３絞り１２ｃ、第３フォーカスレンズ群１３ｃ及び第３イメージセンサ１４ｃで構成される。第３絞り１２ｃはモータドライバ１２２に接続され、第３フォーカスレンズ１３ｃは、モータドライバ１２４に接続されている。被写体光は、第３ズームレンズ１１ｃ、第３絞り１２ｃ、および第３フォーカスレンズ１３ｃを介して第３イメージセンサ１４ｃの受光面に入射する。第３イメージセンサ１４ｃは、所定のカラーフィルタ配列（例えば、ハニカム配列、ベイヤ配列）のＲ、Ｇ、Ｂのカラーフィルタが設けられたカラーＣＣＤで構成されており、第３イメージセンサ１４ｃの受光面に入射した光は、その受光面に配列された各フォトダイオードによって入射光量に応じた量の信号電荷に変換される。各フォトダイオードに蓄積された信号電荷は、ＴＧ１３０から加えられるタイミング信号に従って読み出され、電圧信号（画像信号）として第３イメージセンサ１４ｃから順次出力され、アナログ信号処理部１３２ｃに入力される。

アナログ信号処理部１３２ｃは、第３イメージセンサ１４ｃから出力された画像信号に対してそれぞれ相関二重サンプリング処理（撮像素子の出力信号に含まれるノイズ（特に熱雑音）等を軽減することを目的として、撮像素子の１画素毎の出力信号に含まれるフィードスルー成分レベルと画素信号成分レベルとの差をとることにより正確な画素データを得る処理）を行い、増幅して出力する。

Ａ／Ｄ変換器１３４ｃは、入力された画像データをアナログからデジタルに変換する。Ａ／Ｄ変換器１３４ｃを通して、第３イメージセンサ１４ｃの撮像信号は背面画像データとして出力される。

システムバスには、ＣＰＵ１１０、ＳＤＲＡＭ１１４、ＶＲＡＭ１１６、画像入力コントローラ１３６、画像信号処理回路１３８、圧縮伸張処理回路１４０、画像ファイル生成部１４２、メディアコントローラ１４６、ビデオエンコーダ１４８、ＡＥ／ＡＷＢ検出回路１５２、ＡＦ検出回路１５４、顔検出部１６０、顔位置検出部１６２などが接続される。

顔検出部１６０は、ＣＰＵ１１０からの指令に従い、画像データから画像内の顔領域を抽出し、その位置（たとえば、顔領域の重心）を検出する。この顔領域の抽出は、たとえば、原画像から肌色データを抽出し、肌色範囲と判断された測光点のクラスタを顔として抽出する。この他、画像から顔領域を抽出する方法としては、測光データを色相と彩度に変換し、変換した色相・彩度の二次元ヒストグラムを作成し、解析することで、顔領域を判断する方法や、人の顔の形状に相当する顔候補領域を抽出し、その領域内の特徴量から顔領域を決定する方法、画像から人の顔の輪郭を抽出し、顔領域を決定する方法、複数の顔の形状をしたテンプレートを用意し、そのテンプレートと画像との相関を計算し、この相関値により顔候補領域とすることで人の顔を抽出する方法等が知られており、これらの方法を用いて抽出することができる。

顔位置検出部１６２は、撮影者の顔の中心（たとえば、顔領域の重心）が背面カメラ１０ｃで撮影された画像のどの位置にあるかを検出する。例えば、顔検出部１６０で検出された顔領域の重心位置を顔の中心とし、顔の中心が画像の中心に比べて右にあるか、左にあるかを検出する。また、顔検出部１６０で検出された顔領域の重心位置を用いる代わりに、顔検出部１６０で検出された顔領域に基づいて顔位置検出部１６２において顔の中心を算出してもよい。これにより、顔の中心と背面カメラ１０ｃとの位置関係が検出され、この検出結果に基づいて利き目情報が取得される。

［撮影、記録動作］
図１７は、２枚の被写体像を立体画像として撮影する撮影処理の一連の処理の流れを示すフローチャートである。複眼デジタルカメラ１００の電源ボタン２６がＯＮ操作されると、ＣＰＵ１１０はこれを検出し、カメラ内電源をＯＮにし、利き目情報を初期値である右目として、撮影モードで撮影スタンバイ状態にする（ステップＳ１０）。モニタ３０には、右側カメラ１０ａで撮影された被写体光がライブビュー画像として表示される。

レリーズスイッチ２６が半押しされたかどうかが判断される（ステップＳ１２）。レリーズスイッチが半押しされていない場合（ステップＳ１２でＮＯ）には、複眼デジタルカメラ１００の動作モードとして撮影モード以外の動作モードに選択されたどうかが判断される（ステップＳ１４）。複眼デジタルカメラ１００の動作モードとして撮影モード以外の動作モードが選択された場合（ステップＳ１４でＹＥＳ）には、処理が終了され、複眼デジタルカメラ１００の動作モードとして撮影モード以外の動作モードが選択されなかった場合（ステップＳ１４でＮＯ）には、複眼デジタルカメラ１００の電源ボタン２６がＯＦＦ操作されたかどうかが判断される（ステップＳ１６）。複眼デジタルカメラ１００の電源ボタン２６がＯＦＦ操作された場合（ステップＳ１６でＹＥＳ）には、処理が終了され、複眼デジタルカメラ１００の電源ボタン２６がＯＦＦ操作されなかった場合（ステップＳ１６でＮＯ）には、再度レリーズスイッチ２６が半押しされたかどうかを判断するステップ（ステップＳ１２）が行われる。

レリーズスイッチ２６が半押しされた場合（ステップＳ１２でＹＥＳ）には、利き目を判定するステップ（ステップＳ８０〜Ｓ９０）へ進む。一般的には、表示画面、単眼の望遠鏡や顕微鏡、銃の照準、板塀の節穴等をのぞくとき使う目が利き目である。すなわち、撮影者が液晶モニタを見るときには、主として利き目で見るという特性がある。したがって、利き目を判定するステップ（ステップＳ８０〜Ｓ９０）では、背面カメラ１０ｃで撮影された画像を用いてどちらの目を主としてモニタ３０を見ていているかを判定して、利き目の判定を行う。

背面カメラ１０ｃがＯＮされ、撮影が行われる（ステップＳ８０）。顔検出部１６０において、背面カメラ１０ｃで撮影された画像データから顔検出が行われ（ステップＳ８２）、画像データに顔が含まれるかどうかが判断される（ステップＳ８４）。画像データに顔が含まれない場合（ステップＳ８４でＮＯ）は、利き目を判定するステップ（ステップＳ８０〜Ｓ９０）が行われず、ステップ１０で設定された利き目の情報のままでステップＳ９２へ進む。画像データに顔が含まれる場合（ステップＳ８４でＹＥＳ）は、顔位置検出部１６２において、顔の中心が撮影された画像の右側にあるかどうかが判断される（ステップＳ８６）。

顔位置が撮影された画像の右側にある場合（ステップＳ８６でＹＥＳ）は、図１８に示すように、顔の中心が画像の中心より右にある場合である。背面カメラ１０ｃは、モニタ３０の略中央軸線Ｍ上にあるため、画像の中心はモニタ３０の略中央軸線Ｍを示す。したがって、顔位置が撮影された画像の右側にある場合は、図１９に示すように、操作者の顔位置が略中央軸線Ｍ、すなわちモニタ３０の左にある場合である。したがって、操作者は右目でモニタ３０を見ているため、操作者の利き目は右目と判定される（ステップＳ８８）。

顔位置が撮影された画像の左側にある場合（ステップＳ８６でＮＯ）は、図２０に示すように、顔の中心が画像の中心より左にある場合である。したがって、顔位置が撮影された画像の左側にある場合は、図２１に示すように、操作者の顔位置が略中央軸線Ｍ、すなわちモニタ３０の右にある場合である。したがって、操作者は左目でモニタ３０を見ているため、操作者の利き目は左目と判定される（ステップＳ９０）。

これにより、利き目の情報の入力を意識する必要なく、撮影時に撮影者がモニタ３０を見るだけで利き目の情報を取得することが可能であり、なおかつモニタ３０を介して利き目に対応した被写体光を見ることができる。

利き目を判定するステップ（ステップＳ８０〜Ｓ９０）が終了したら、操作者の利き目の情報が右目であるかどうかが判断される（ステップＳ９２）。入力された利き目の情報が右目である場合（ステップＳ９２でＹＥＳ）の場合には、右目用の撮像系である右側カメラ１０ａを介して撮影されるライブビュー画像をモニタ３０に表示させる（ステップＳ９４）。入力された利き目の情報が左目である場合（ステップＳ９２でＮＯ）の場合には、左目用の撮像系である左側カメラ１０ｂを介して撮影されるライブビュー画像をモニタ３０に表示させる（ステップＳ９６）。

レリーズスイッチ２６が全押しされたかどうかが判断される（ステップＳ４０）。レリーズスイッチ２６が全押しされなかった場合（ステップＳ４０でＮＯ）には、再度レリーズスイッチ２６が半押しされたかどうかを判断するステップ（ステップＳ１２）が行われる。レリーズスイッチ２６が全押しされた場合（ステップＳ４０でＹＥＳ）には、立体画像の撮影が行われ（ステップＳ４２）、撮影された立体画像の記録処理が行われる（ステップＳ４４）。

これにより、利き目の情報の入力を意識する必要なく、撮影時にモニタ３０を見るという通常の撮影動作を行うだけで利き目の情報を入力可能であり、なおかつ撮影者が認識している立体画像にもっとも近い「撮影者の利き目側の平面画像」を撮影時のライブビュー画像や再生画像としてモニタ３０に表示することができる。なお、立体画像の撮影方法、画像ファイルの記録形態、再生動作、選択された画像ファイルの表示動作については、第１の実施の形態と同じであるため、説明を省略する。

なお、本実施の形態では、背面カメラ１０ｃと、右側カメラ１０ａ及び左側カメラ１０ｂとが同様の構成の場合を例に説明したが、背面カメラ１０ｃとしてパンフォーカスのカメラを用いてもよい。

また、第１の実施の形態及び第２の実施の形態では、画像ファイル生成部１４２において画像ファイルの作成を行い、ＣＰＵ１１０において画像ファイルの復元処理や関連画像情報修復処理などを行う複眼デジタルカメラ１及び複眼デジタルカメラ１００という装置について説明したが、複眼デジタルカメラに限らずＰＣなどの装置として提供してもよいし、装置に限らず、例えば、撮像装置、ＰＣ、携帯情報端末のような装置に適用するプログラムとして提供してもよい。

本発明が適用された複眼デジタルカメラ１の正面図である。 複眼デジタルカメラ１の背面斜視図である。 複眼デジタルカメラ１の要部透視図及び背面図である。 プリズムの概観斜視図である。 複眼デジタルカメラ１のブロック図である。 複眼デジタルカメラ１の撮影、記録動作の処理の流れを示すフローチャートである。 撮影者の目の位置と接眼レンズ６４の位置とを説明するための図である。 撮影者の目の位置と接眼レンズの６４の位置とを説明するための図である。 画像ファイルのデータ構成を模式的に示す図である。 画像ファイルのデータ構成の別の例を模式的に示す図である。 複眼デジタルカメラ１の再生動作の処理の流れを示すフローチャートである。 複眼デジタルカメラ１の再生動作の表示画面の例である 複眼デジタルカメラ１の選択ファイルの表示動作の処理の流れを示すフローチャートである。 本発明が適用された複眼デジタルカメラ１０の正面図である。 複眼デジタルカメラ１００の背面斜視図である。 複眼デジタルカメラ１００のブロック図である。 複眼デジタルカメラ１の撮影、記録動作の処理の流れを示すフローチャートである。 背面カメラ１０ｃで撮影された画像と撮影された顔位置との関係を説明するための図である 撮影者の目の位置とモニタ３０の位置との関係を説明するための図である 背面カメラ１０ｃで撮影された画像と撮影された顔位置との関係を説明するための図である 撮影者の目の位置とモニタ３０の位置との関係を説明するための図である

符号の説明

１、１００：複眼デジタルカメラ、１０ａ：右側カメラ、１０ｂ：左側カメラ、１０ｃ：背面カメラ、３０：モニタ、５１：左側センサ、５２：右側センサ、５３：ファインダセンサ、６１ａ：右側対物レンズ、６１ｂ：左側対物レンズ、６２ａ、６２ｂ、６３：プリズム、６４：接眼レンズ、１１０：ＣＰＵ

Claims (6)

1. 複数の視点から見た被写体像を立体画像として撮影する複数の撮像手段を備えた立体画像撮影装置において、
   装置本体の背面に左右方向に離間して配設された２つ以上の物体検出センサであって、ファインダを覗いた撮影者の顔を検出物体として検出する物体検出センサと、
   前記２つ以上の物体検出センサのそれぞれの検出出力に基づいてファインダを覗いた撮影者の利き目を判断する利き目判断手段と、
   被写体像を表示する表示手段と、
   前記複数の撮像手段により撮影された立体画像と、前記利き目判断手段によって判断された利き目の情報とを関連付けて記録媒体に記録する記録手段と、
   前記立体画像と関連付けて記録媒体に記録された利き目の情報に基づいて、前記記録された立体画像を構成する複数の被写体像の中から所望の１枚の被写体像を代表画像として選択する代表画像選択手段と、
   前記代表画像選択手段により選択された代表画像を前記表示手段に表示させる表示制御手段と、
   を備えたことを特徴とする立体画像撮影装置。
2. 前記物体検出センサは、指向性の高い光を出射し、検出物体によって反射する光の有無、又は反射する光の光量に対応する信号を出力する光電センサであることを特徴とする請求項１に記載の立体画像撮影装置。
3. 前記物体検出センサは、
   装置本体の背面の略中央に設けられたファインダの近傍に設けられた第１のセンサと、
   前記装置本体の背面の端部に設けられた第２のセンサと、
   で構成されたことを特徴とする請求項１又は２に記載の立体画像撮影装置。
4. 前記第２のセンサは、前記装置本体の背面の左端に設けられた左側センサと、前記装置本体の背面の右端に設けられた右側センサとで構成され、
   前記利き目判定手段は、前記第１のセンサ及び前記左側センサで撮影者が検出された場合には、撮影者の利き目は右目であると判断し、前記第１のセンサ及び前記右側センサで撮影者が検出された場合には、撮影者の利き目は左目であると判断することを特徴とする請求項３に記載の立体画像撮影装置。
5. 撮影者の利き目を設定する利き目設定手段を備え、
   前記利き目判断手段は、前記第１のセンサで撮影者が検出されていない場合には、前記利き目設定手段により設定された利き目を利き目と判断することを特徴とする請求項３又は４に記載の立体画像撮影装置。
6. 前記ファインダは、
   装置本体の前面に設けられた右目用の右側対物レンズと、
   装置本体の前面に設けられた左目用の左側対物レンズと、
   前記右側対物レンズ及び前記左側対物レンズのいずれかを介した被写体像を見るための１つの接眼部と、
   前記利き目判断手段における利き目の判断結果に基づいて、前記右側対物レンズから入射する光を前記接眼部へ導くか、前記左側対物レンズから入射する光を前記接眼部へ導くかの切り替えを行う切り替え手段と、
   を備えたことを特徴とする請求項１から５のいずれかに記載の立体画像撮影装置。

Images