JP2014066904A - 撮像装置、画像処理装置、画像処理サーバおよび表示装置 - Google Patents

Abstract

【課題】撮影画像を撮影環境ごとに好適に鑑賞することが可能な撮像装置、画像処理装置、画像処理サーバおよび表示装置を提供する。
【解決手段】所定の撮影パラメータに基づいて被写体像を撮影し、撮影画像データを作成する撮影手段と、撮影パラメータに基づいて、撮影手段が撮影により作成する撮影画像データが、被写体像の立体鑑賞に適した状態であるか否かを判定する判定手段と、を備える撮像装置。
【選択図】図１

Description

本発明は、撮像装置、画像処理装置、画像処理サーバおよび表示装置に関する。

従来、被写体の三次元画像を生成する撮像装置が知られている。このような撮像装置を実現する方式として、光学系を２つ設け、各光学系により結像された視差のある２つの被写体像から三次元画像を生成する方式や、異なる位置から被写体を２回撮像し、それにより得られた視差のある２つの被写体像から三次元画像を生成する方式が存在する。例えば特許文献１には、２つの光学系を用いた前者の方式で三次元画像を生成する際、２つの光学系の合焦位置や露出レベルなどのズレを防止することにより、良質な三次元画像を生成する撮像装置が記載されている。

特開２０１１−３９４８６号公報

従来の撮像装置には、三次元画像の生成に適さない撮影環境下であったとしても、立体鑑賞のための三次元画像を生成するため、鑑賞しづらい画像が生成されてしまうという問題があった。

請求項１に記載の撮像装置は、所定の撮影パラメータに基づいて被写体像を撮影し、撮影画像データを作成する撮影手段と、前記撮影パラメータに基づいて、前記撮影手段が前記撮影により作成する前記撮影画像データが、前記被写体像の立体鑑賞に適した状態であるか否かを判定する判定手段と、を備えることを特徴とする。
請求項８に記載の画像処理装置は、所定の撮影パラメータに基づいて撮影された被写体像の画像データが入力される入力手段と、前記入力手段に入力された前記画像データが前記被写体像の立体鑑賞に適した状態か否かを判定する判定手段と、を備えることを特徴とする。
請求項１１に記載の画像処理サーバは、請求項８〜１０のいずれか一項に記載の画像処理装置を備え、前記入力手段は、所定の電気通信回線を介して前記画像データを取得することを特徴とする。
請求項１２に記載の表示装置は、請求項８〜１０のいずれか一項に記載の画像処理装置と、前記判定手段による前記判定の結果に応じて前記被写体像の立体表示と二次元表示とを切り替える表示手段と、を備えることを特徴とする。

本発明によれば、撮影画像を撮影環境ごとに好適に鑑賞することができる。

本発明の第１の実施の形態に係るデジタルカメラの外観を示す斜視図である。 本発明の第１の実施の形態に係るデジタルカメラの構成を示すブロック図である。 制御部１１０が実行する撮影処理のフローチャートである。 ３Ｄシンボルを表示中のデジタルカメラ１００を示す模式図である。 視差を得るための撮影位置の一例を示す図である。 本発明の第２の実施の形態に係るデジタルカメラの外観を示す斜視図である。 本発明の第２の実施の形態に係るデジタルカメラの構成を示すブロック図である。 第２の実施の形態において制御部１１０が実行する撮影処理のフローチャートである。 本発明の第３の実施の形態に係る表示装置の構成を示すブロック図である。

（第１の実施の形態）
図１は、本発明の第１の実施の形態に係るデジタルカメラの外観を示す斜視図である。デジタルカメラ１００はレンズ一体型のデジタルカメラであり、結像光学系１２０により結像された被写体像を撮像する機能を有する。筐体の背面には、液晶パネル等により構成された表示装置である液晶モニタ１６１が設置されている。液晶モニタ１６１の表示画面には、例えば撮影画像やスルー画、設定メニュー画面等が表示される。デジタルカメラ１００の筐体各部には、筐体上部に設けられたシャッターボタン１８１など、ユーザによる操作が為される種々の操作部材１８０が設けられている。

図２は、本発明の第１の実施の形態に係るデジタルカメラの構成を示すブロック図である。結像光学系１２０は、焦点状態を調節するフォーカシングレンズ（不図示）を含む、複数のレンズにより構成された光学系である。結像光学系１２０は、被写体像を撮像素子１３０の撮像面に結像させる。フォーカシングレンズは、結像光学系１２０の光軸方向に移動可能に構成されている。

撮像素子１３０は、画素に対応する複数の光電変換素子を備えたＣＣＤやＣＭＯＳ等のイメージセンサである。撮像素子１３０は、撮像面上に結像されている被写体像を撮像し、被写体像の明るさに応じた光電変換信号（撮像信号）を出力する。撮像素子１３０の撮像面には、それぞれＲ（赤）、Ｇ（緑）およびＢ（青）のカラーフィルタが画素位置に対応するように設けられているので、撮像素子１３０から出力される撮像信号は、ＲＧＢ表色系で規定される色情報を有している。

撮像素子１３０から出力された撮像信号は、不図示のＡ／Ｄ変換器によりデジタルデータ（画像データ）に変換された後、不図示の画像処理回路に入力され、輪郭補償やガンマ補正などの種々の画像処理が施される。これらの画像処理が施された画像データは制御部１１０に入力される。

制御部１１０は、マイクロプロセッサおよびその周辺回路等により構成される。制御部１１０にはＤＲＡＭ１４０およびフラッシュメモリ１５０が接続されている。制御部１１０は、不揮発性の記憶媒体であるフラッシュメモリ１５０に格納されている所定の制御プログラムを実行することにより、デジタルカメラ１００の各部を制御する。主記憶装置であるＤＲＡＭ１４０は、この制御プログラムが一時的な記憶領域として利用する。

図１に示したシャッターボタン１８１などの操作部材１８０は、制御部１１０に接続されている。撮影者が操作部材１８０等を操作すると、操作部材１８０等から制御部１１０に当該操作に応じた操作信号が入力される。制御部１１０は、この操作信号に応じて種々の動作を実行する。なお、シャッターボタン１８１は半分程度押し込む半押し操作と最後まで押し込む全押し操作とを区別可能に構成されており、制御部１１０には半押し操作が為された場合と全押し操作が為された場合とでそれぞれ異なる操作信号が入力される。

制御部１１０には更に、ＬＣＤ駆動回路１６０およびメモリカードインタフェース（Ｉ／Ｆ）１７０が接続されている。ＬＣＤ駆動回路１６０は表示装置である液晶モニタ１６１を駆動し、制御部１１０の指示に従って液晶モニタ１６１の表示画面に画像等を表示させる。メモリカードＩ／Ｆ１７０は、可搬性の記憶媒体であるメモリカード１７１に対しデータの読み書きを行うためのインタフェースである。制御部１１０は、画像処理回路（不図示）から出力された画像データをメモリカード１７１に記憶したり、液晶モニタ１６１の表示画面に表示させたりする。

（三次元画像データの作成処理の説明）
次に、デジタルカメラ１００を用いた三次元画像データの作成処理（撮影処理）について説明する。デジタルカメラ１００は、被写体像の二次元画像データを撮影する機能と被写体像の三次元画像データを撮影する機能とを有している。これら２つの機能はシームレスに結合されており、撮影者による明示的なモード切替等の操作（例えば、二次元画像データを撮影する際には二次元画像モードに設定し、三次元画像データを撮影する際には三次元画像モードに設定する等の操作）を要しない。

制御部１１０は、撮影の際、現在の撮影環境（例えばデジタルカメラ１００に設定されている撮影パラメータ等）において作成することになる三次元画像データが、立体鑑賞に適したデータとなるか否かを判定し、その判定結果に基づいて二次元画像データを作成するか三次元画像データを作成するかを自動的に決定する。つまり、仮に現在の撮影環境下において三次元画像データを作成したとしても、その三次元画像データが鑑賞時にあまり立体効果を得られないようなデータになってしまうと考えられる場合には、三次元画像データを作成せずに二次元画像データを作成してメモリカード１７１に記録する。

図３は、制御部１１０が実行する撮影処理のフローチャートである。二次元画像データや三次元画像データを撮影する際、撮影者はデジタルカメラ１００の動作モードを撮影モードに設定する。制御部１１０は、撮影モードが設定されると、図３に示す処理の実行を開始すると共に、液晶モニタ１６１にいわゆるスルー画を表示する。すなわち、所定間隔（例えば６０分の１秒）ごとに繰り返し被写体像の撮像と撮像結果の液晶モニタ１６１への表示とを行う。

制御部１１０はまずステップＳ１００において、シャッターボタン１８１の半押し操作が為されたか否かを判定する。制御部１１０は、シャッターボタン１８１の半押し操作が為されるまで繰り返しステップＳ１００の処理を実行する。シャッターボタン１８１の半押し操作が為されると、処理はステップＳ１１０に進む。

制御部１１０はシャッターボタン１８１が半押しされたことに応じて、ステップＳ１１０において周知の自動露出（ＡＥ）制御およびＡＦ（自動焦点調節）制御を実行する。そして、ステップＳ１２０で、後述する３Ｄ適否判定処理を実行する。３Ｄ適否判定処理では、現在の撮影環境（すなわち現在設定されている撮影パラメータ）が、被写体像の三次元画像データの作成に適した状態か否かが判定される。

三次元画像データの作成に適した状態ではないと判定された場合には、続くステップＳ１３０において否定判定がなされ、処理はステップＳ２４０に進む。ステップＳ２４０において、制御部１１０は、シャッターボタン１８１の全押し操作が為されたか否かを判定する。全押しされていない場合はステップＳ１３０に戻り、全押しされると処理はステップＳ２５０に進む。そして、ステップＳ２５０において撮像素子１３０による被写体像の撮像を行い、ステップＳ２６０において被写体の二次元画像データを作成してメモリカード１７１に記録する。

他方、ステップＳ１２０で呼び出された３Ｄ適否判定処理において、三次元画像データの作成に適した状態であると判定された場合には、続くステップＳ１３０において肯定判定がなされ、処理はステップＳ１４０に進む。そしてステップＳ１４０で、制御部１１０は「三次元画像データの作成に適した状態である」ということを表すシンボル（以下、３Ｄシンボルと呼ぶ）をスルー画に重畳して液晶モニタ１６１に点滅表示し、当該状態であることを撮影者に報知する。

図４は、３Ｄシンボルを表示中のデジタルカメラ１００を示す模式図である。撮影者がシャッターボタン１８１を半押しして被写体にピントを合わせたとき、三次元画像データの作成に適さない状態であって二次元画像データが作成される場合には、スルー画に重畳した３Ｄシンボル１０の表示が行われない。他方、三次元画像データの作成に適した状態であって三次元画像データが作成される場合には、３Ｄシンボル１０の点滅表示が行われる。撮影者は液晶モニタ１６１に点滅表示された３Ｄシンボル１０を視認することにより、これから三次元画像データが作成されるのか二次元画像データが作成されるのかを認識することができる。

ステップＳ１５０において、制御部１１０は、シャッターボタン１８１の全押し操作が為されたか否かを判定する。全押しされていない場合にはステップＳ１３０に戻り、全押しされると処理はステップＳ１６０に進む。そして、ステップＳ１６０において撮像素子１３０による被写体像の撮像を行い、ステップＳ１７０において撮影結果をＤＲＡＭ１４０に一時記憶する。

その後、ステップＳ１８０において制御部１１０は、撮影者がシャッターボタン１８１を全押し状態から半押し状態にする（シャッターボタン１８１から指を完全に離さず、シャッターボタン１８１を半押し状態に留める）のを待ち、ステップＳ１９０に進む。ステップＳ１９０で制御部１１０は、図４と同様の３Ｄシンボル１０をスルー画に重畳して表示（点滅ではなく常時表示）すると共に、撮影者に対する指示（例えば矢印など）を表示し、所定の視差が得られる位置まで移動するよう撮影者を促す。

図５は、視差を得るための撮影位置の一例を示す図である。例えばステップＳ１６０における被写体２０の撮像が位置Ａで行われた場合、制御部１１０は、デジタルカメラ１００から被写体２０までの距離Ｄ等から所定の視差が得られる基線長Ｌを決定し、その基線長Ｌだけ離れた位置Ｂまで撮影者を誘導する。誘導の方法としては、例えば液晶モニタ１６１に矢印を表示したり、位置Ｂでデジタルカメラ１００を構えたときの撮影画面における被写体２０の位置に枠線を表示してその枠線に被写体２０が収まるように移動するよう指示したりする。

次のステップＳ２００〜ステップＳ２１０において、制御部１１０は撮影者がシャッターボタン１８１を半押し状態から解放状態（押されていない状態）にするか、あるいは全押し状態にするのを待つ。解放状態にされた場合、すなわち撮影者がシャッターボタン１８１から指を離した場合にはステップＳ２００において肯定判定がなされ、処理はステップＳ２６０に進む。この場合、制御部１１０はステップＳ２６０において、ステップＳ１７０でＤＲＡＭ１４０に一時記憶しておいた撮像結果に基づき被写体の二次元画像データを作成してメモリカード１７１に記録する。

他方、撮影者がシャッターボタン１８１を全押しした場合にはステップＳ２１０で肯定判定がなされ、処理はステップＳ２２０に進む。この場合、制御部１１０はステップＳ２２０において、再度撮像素子１３０による被写体像の撮像を行う。そして、ステップＳ２３０において、その撮像結果およびステップＳ１７０でＤＲＡＭ１４０に一時記憶しておいた撮像結果（すなわち同一被写体を撮像した視差のある一対の画像）から周知の方法により三次元画像データを作成し、メモリカード１７１に記録する。

なお、三次元画像データを作成するための１回目の撮像（ステップＳ１６０）の際、ステップＳ１７０において、撮像結果をＤＲＡＭ１４０に一時記憶するのみならず、ステップＳ２６０のように二次元画像データを作成してメモリカード１７１に記録してもよい。この場合、三次元画像データの作成が完了したとき、メモリカード１７１には被写体の二次元画像データと三次元画像データが共に記録されていることになる。

（３Ｄ適否判定処理の説明）
次に、図３のステップＳ１２０で呼び出される３Ｄ適否判定処理について説明する。制御部１１０は、（１）露出、（２）ＩＳＯ感度、（３）絞り値、（４）シャッタースピード、（５）焦点距離、（６）被写体距離、および（７）動き検知結果等の撮影パラメータに基づいて、三次元画像データの作成に適した状態か否かを判定する。また、暗所での撮影のために被写体に向けて補助光を照射する発光装置（いわゆるエレクトロニックフラッシュ）を利用する場合には、（８）発光装置の発光量も利用する。

３Ｄ適否判定処理は、制御部１１０が、上述した各撮影パラメータを所定のしきい値と比較することにより行われる。より具体的には、各撮影パラメータから、被写体像の細部の情報が損なわれる撮影環境、被写体の周辺情報が欠落する撮影環境、被写体の厚みが感じられなくなるいわゆる「書き割り現象」が発生する撮影環境などを検出し、そのような撮影環境下であった場合には三次元画像データの作成に適していないと判定する。以下、各撮影パラメータをどのように比較するかについて詳述する。

（１）露出
非常に明るい環境や暗い環境では、被写体像の細部が潰れてしまう。つまり、被写体像の細部の情報が得られない。そこで制御部１１０は、ＡＥ制御において得られた露出が所定範囲を外れていた場合、すなわち光量が一定量を超えていた場合および光量が一定量未満であった場合に、三次元画像データの作成に適していないと判定する。

（２）ＩＳＯ感度
ＩＳＯ感度を高くすると、撮像素子１３０の出力にはノイズの影響がより大きく現れるようになる。そこで、不図示の画像処理回路は、ＩＳＯ感度の高さに応じて、周知のノイズ除去処理を実行する。つまり、ＩＳＯ感度が高いほどより強力なノイズ除去を適用する。従って、ＩＳＯ感度が高いほど被写体像の細部の情報が欠落してしまう。そこで制御部１１０は、ＩＳＯ感度が所定のしきい値を超えていた場合に、三次元画像データの作成に適していないと判定する。

（３）絞り値
絞りを絞るほど被写界深度が深くなり、ピントを合わせた主要被写体とその前後の被写体がよりはっきりと写る。逆に絞りを開くと被写界深度が浅くなり、合焦位置以外の場所がぼやけて写る。つまり、絞り値が小さい（絞りの開口径が大きい）ほど主要被写体以外の細部の情報が得られなくなる。そこで制御部１１０は、絞り値が所定のしきい値未満であった場合に、三次元画像データの作成に適していないと判定する。

（４）シャッタースピード
手持ち撮影を行っている場合、シャッタースピードが長いほど被写体像の像振れが発生しやすくなる。また、手持ち撮影でない場合であっても、シャッタースピードが長い場合には、撮像素子１３０の出力にノイズが乗りやすくなる。シャッタースピードが短い場合に比べて強力なノイズ除去が必要になり、ノイズ除去の影響で被写体像の細部の情報が欠落してしまう。以上のように、シャッタースピードが長い場合には被写体像の細部の情報が得られなくなる。そこで制御部１１０は、シャッタースピードが所定のしきい値を超える場合に、三次元画像データの作成に適していないと判定する。

（５）焦点距離
焦点距離が長い場合、いわゆる圧縮効果によって、焦点距離が短い場合に比べて被写体間の奥行きが短く写る。つまり、焦点距離が長いと奥行き方向の立体感に乏しい三次元画像データが作成されてしまう。そこで制御部１１０は、焦点距離が所定のしきい値を超える場合に、三次元画像データの作成に適していないと判定する。

（６）被写体距離
被写体がデジタルカメラ１００に極めて近い場合、視差が著しく大きくなり、三次元画像として認識することが困難になったり、三次元画像を鑑賞する際の生体負担が増加したりしてしまう。また、逆にデジタルカメラ１００から極めて遠い場合、視差がほとんど得られないため、立体効果に乏しくなってしまう。そこで制御部１１０は、被写体距離が所定範囲（例えば３０センチメートル〜５メートル）を外れていた場合に、三次元画像データの作成に適していないと判定する。

（７）動き検知結果
制御部１１０は周知の動き検知処理を実行することで、主要被写体の動き（移動）を検知し、主要被写体の動きに追随してフォーカシングレンズを駆動させて合焦状態を維持することができる。他方、主要被写体が激しく移動している場合には、１回目の撮像と２回目の撮像における主要被写体の位置ズレが大きくなってしまい、三次元画像データを作成することが困難になる。そこで制御部１１０は、主要被写体の動き量が所定のしきい値を超える場合に、三次元画像データの作成に適していないと判定する。

（８）発光装置の発光量
発光装置の発光量が大きい場合、主要被写体に照射される光量が多くなり、主要被写体の細部の情報が失われてしまう。また、発光装置からの光が届かない被写体は黒く潰れ、同様に細部の情報が失われてしまう。そこで制御部１１０は、発光装置の発光量が所定のしきい値を超える場合に、三次元画像データの作成に適していないと判定する。

なお、制御部１１０が、上述した（１）〜（８）の８つの撮影パラメータのうち一部だけを利用するようにしてもよい。また、制御部１１０が利用する撮影パラメータを撮影者が任意に選択できるようにしてもよいし、各撮影パラメータのしきい値を撮影者が任意に指定できるようにしてもよい。例えば、撮影環境が三次元画像データを作成に適しているか否かを、上述した（１）〜（８）を用いて自動で判断するオートモードと、撮影者が撮影パラメータを任意に選択できるマニュアルモードとを設ける。オートモードの場合、撮影環境が三次元画像データに適しているか否かを、制御部１１０が全ての撮影パラメータに基づいて判断する。マニュアルモードの場合、撮影環境が三次元画像データに適しているか否かを、制御部１１０が撮影者の選択した撮影パラメータに基づいて判断する。このように、複数の撮影パラメータから制御部１１０が３Ｄ適否判定に利用する撮影パラメータを選択可能にすることで、三次元画像の鑑賞において撮影者が重要でないと考える撮影パラメータを除外することができ、より適切な３Ｄ適否判定を行うことが可能となる。

上述した第１の実施の形態によるデジタルカメラによれば、次の作用効果が得られる。
（１）制御部１１０は、撮影パラメータに基づいて、撮影により作成される撮影画像データが、被写体像の立体鑑賞に適した状態であるか否かを判定する。このようにしたので、撮影画像を撮影環境ごとに好適に鑑賞することができる。

（２）制御部１１０は、液晶モニタ１６１に３Ｄシンボル１０を表示することにより、３Ｄ適否判定処理の結果をデジタルカメラ１００の使用者（撮影者）に報知する。このようにしたので、現在の撮影環境を撮影者が的確に把握することができる。

（３）制御部１１０が３Ｄ適否判定処理に利用する撮影パラメータには、露出、ＩＳＯ感度、絞り値、シャッタースピード、焦点距離、被写体距離、動き検知結果、および発光装置の発光量が含まれる。これらの撮影パラメータはいずれも通常の撮影処理に際し利用されるものなので、３Ｄ適否判定処理のために、撮影環境を調べるための特別なセンサ等を導入する必要がない。

（４）制御部１１０は、同一の被写体２０をそれぞれ異なる方向から２回撮影した結果に基づいて、当該被写体の立体像である三次元画像データを作成する。このようにしたので、複数の結像光学系を設けるためのスペースや費用が不要となる。

（５）制御部１１０は、三次元画像データを作成するための複数の撮影のうち１回目の撮影が行われたことに応じて３Ｄ適否判定を行い、被写体像の立体鑑賞に適した状態であると判定した場合には２回目の撮影を行って三次元画像データを作成する。また、被写体像の立体鑑賞に適した状態ではないと判定した場合には１回目の撮影のみから二次元画像データを作成する。このようにしたので、必要がない場合には２回目の撮影が省略され、簡易な操作体系を実現することができる。

（第２の実施の形態）
図６は、本発明の第２の実施の形態に係るデジタルカメラの外観を示す斜視図である。デジタルカメラ２００は、第１の実施の形態のデジタルカメラ１００とは異なり、基線長Ｌだけ離れた２つの結像光学系１２０ａ、１２０ｂを有している。デジタルカメラ２００は、これら２つの結像光学系１２０ａ、１２０ｂを用いて、１回の撮影操作で被写体の三次元画像データを作成することが可能である。なお、以下の説明において、第１の実施の形態と同様の各部については、第１の実施の形態と同一の符号を付し説明を省略する。

図７は、本発明の第２の実施の形態に係るデジタルカメラの構成を示すブロック図である。デジタルカメラ２００は２つの結像光学系１２０ａ、１２０ｂを備えると共に、２つの結像光学系１２０ａ、１２０ｂに対応する２つの撮像素子１３０ａ、１３０ｂを備えている。制御部１１０は、単一の撮像素子からの出力を２回得るのではなく、２つの撮像素子１３０ａ、１３０ｂからの２つの出力に基づいて、被写体像の三次元画像データを作成する。

図８は、第２の実施の形態において制御部１１０が実行する撮影処理のフローチャートである。なお、３Ｄ適否判定を行う（ステップＳ１２０）までの処理は図３に示した第１の実施の形態に係る処理と同一であるので、説明を省略する。

ステップＳ１２０において三次元画像データの作成に適した状態ではないと判定された場合には、続くステップＳ１３０において否定判定がなされ、処理はステップＳ２４０に進む。ステップＳ２４０において、制御部１１０は、シャッターボタン１８１の全押し操作が為されたか否かを判定する。全押しされていない場合はステップＳ１３０に戻り、全押しされると処理はステップＳ３２０に進む。そして、ステップＳ３２０において、一方の撮像素子（例えば撮像素子１３０ａ）による被写体像の撮像を行い、ステップＳ３３０において当該撮像素子の出力に基づき被写体の二次元画像データを作成してメモリカード１７１に記録する。

他方、ステップＳ１２０で呼び出された３Ｄ適否判定処理において、三次元画像データの作成に適した状態であると判定された場合には、続くステップＳ１３０において肯定判定がなされ、処理はステップＳ１４０に進む。そしてステップＳ１４０で、制御部１１０は３Ｄシンボル１０をスルー画に重畳して液晶モニタ１６１に点滅表示し、当該状態であることを撮影者に報知する。

ステップＳ１５０において、制御部１１０は、シャッターボタン１８１の全押し操作が為されたか否かを判定する。全押しされていない場合はステップＳ１３０に戻り、全押しされると処理はステップＳ３００に進む。そして、ステップＳ３００において撮像素子１３０ａ、１３０ｂによる被写体像の撮像を行い、ステップＳ３１０において、撮像素子１３０ａ、１３０ｂからの視差のある一対の出力に基づき、図４のステップＳ２３０と同様に三次元画像データを作成し、メモリカード１７１に記録する。

上述した第２の実施の形態によるデジタルカメラによれば、次の作用効果が得られる。
（１）制御部１１０は、同一の被写体２０の被写体像を２つの撮像素子１３０ａ、１３０ｂで同時に撮影することにより、視差のある一対の画像データを取得し、一対の画像データに基づいて、当該被写体の立体像である三次元画像データを作成する。このようにしたので、複数回の撮影を必要とせずに三次元画像データを作成することができる。また、動きのある被写体にも対応することができる。

（第３の実施の形態）
上述した各実施の形態では、本発明を適用した撮像装置であるデジタルカメラについて説明した。本実施形態では、三次元画像データの立体表示が可能な表示装置に本発明を適用した例について説明する。

図９は、本発明の第３の実施の形態に係る表示装置の構成を示すブロック図である。表示装置３００は、例えば視差バリア方式やレンチキュラー方式などの周知の方法により、鑑賞者が立体視可能な形で三次元画像データを再生（表示）する液晶モニタ３６１を備えている。ＬＣＤ駆動回路３６０は液晶モニタ３６１を駆動し、制御部３１０の指示に従って液晶モニタ３６１の表示画面に三次元画像や二次元画像を表示させる。

メモリカードＩ／Ｆ３７０は、可搬性の記憶媒体であるメモリカード３７１に対しデータの読み書きを行うためのインタフェースである。メモリカードＩ／Ｆ３７０に装着されたメモリカード３７１には、図示しないデジタルカメラにより、三次元画像データや二次元画像データが格納されている。

制御部３１０は、マイクロプロセッサおよびその周辺回路等により構成される。制御部３１０にはＤＲＡＭ３４０およびフラッシュメモリ３５０が接続されている。制御部３１０は、不揮発性の記憶媒体であるフラッシュメモリ３５０に格納されている所定の制御プログラムを実行することにより、表示装置３００の各部を制御する。主記憶装置であるＤＲＡＭ３４０は、この制御プログラムが一時的な記憶領域として利用する。

表示装置３００は、例えばキーボードやマウス等の入力装置３８０を備えている。表示装置３００の利用者は、この入力装置３８０を操作することにより、表示する画像の選択等を行う。

次に、制御部３１０による３Ｄ適否判定処理について説明する。不図示のデジタルカメラにおいて、二次元画像データや三次元画像データと共に、当該画像データの撮影時の撮影パラメータがメモリカード３７１に書き込まれる。例えば、二次元画像データを含むＥｘｉｆ形式の画像ファイルや、三次元画像データを含むＥｘｉｆ形式の画像ファイルがメモリカード３７１に書き込まれ、当該画像ファイルのヘッダ情報には撮影パラメータが含まれている。

制御部３１０は、入力装置３８０から三次元画像データを含む画像ファイルの再生指示が入力されると、当該画像ファイルから撮影パラメータを読み出し、第１の実施の形態に係る制御部１１０と同様の３Ｄ適否判定処理を実行する。そして、当該画像ファイルに含まれる三次元画像データが、立体鑑賞に適さないデータができるような撮影環境下において撮影（作成）された画像データであった場合には、当該三次元画像データを二次元画像データとして液晶モニタ１６１に表示する。

つまり、第１の実施の形態では撮影時に行っていた３Ｄ適否判定処理を、再生時に行うことで、撮影画像を撮影環境ごとに好適に鑑賞することができるという第１の実施の形態と同様の作用効果を得ることができる。なお、３Ｄ適否判定処理の内容については第１の実施の形態と同様であるので説明を省略する。

上述した第３の実施の形態による表示装置によれば、次の作用効果が得られる。
（１）表示装置３００は、所定の撮影パラメータに基づいて撮影された被写体像の画像データが入力されるメモリカードＩ／Ｆ３７０を備え、制御部３１０はメモリカードＩ／Ｆ３７０から入力された画像データが被写体像の立体鑑賞に適した状態か否かを判定する。このようにしたので、撮影画像を撮影環境ごとに好適に鑑賞することができる。

（２）制御部３１０は、メモリカードＩ／Ｆ３７０から入力された画像データの撮影パラメータを取得し、取得した撮影パラメータに基づいて３Ｄ適否判定を行う。このようにしたので、撮影環境を考慮した適切な３Ｄ適否判定を行うことができる。

（３）制御部３１０は、３Ｄ適否判定の結果に応じて、液晶モニタ３６１における被写体像の立体表示と二次元表示とを切り替える。このようにしたので、立体効果に乏しい画像が無理に立体画像として表示されることがなく、鑑賞者の負担を軽減することができる。

次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。

（変形例１）
第１の実施の形態において、撮影者に３Ｄ適否判定の結果を報知する方法は、液晶モニタ１６１への３Ｄシンボル１０の表示以外の方法であってもよい。例えば、スピーカから所定の効果音を鳴らしてもよいし、ＬＥＤ等により構成される所定のインジケータを点灯させてもよい。

（変形例２）
上述した各実施形態において説明した、３Ｄ適否判定に用いる撮影パラメータは一例であり、上述したものとは異なる撮影パラメータを３Ｄ適否判定に利用してもよい。例えば、モノクロフィルタを利用したモノクロ撮影を行っている場合には、立体鑑賞に適した撮影環境でないと判定するようにしてもよい。これは、立体効果を得る際には被写体の色情報も重要な要素となるためであり、モノクロ画像ではカラー画像に比べて立体感が乏しくなるためである。

また、３Ｄ適否判定の具体的な内容は上述した各実施形態と異なっていてよい。例えば、撮影パラメータごとに予め定めた所定の数式により当該撮影パラメータの３Ｄ適否を表すスコア（スコアが高いほど立体鑑賞に適していることを意味する）を算出し、それら複数のスコアを合算した結果が所定のしきい値より高い場合に、立体鑑賞に適した撮影環境であると判定するようにしてもよい。更に、撮影パラメータごとに重み付けを行ったり、優先順位を設けたりし、撮影パラメータの立体鑑賞の適否への影響の大きさを考慮するようにしてもよい。このようにすることで、より精緻な３Ｄ適合判定を行うことが可能になる。

上述した各実施形態では、３Ｄ適否判定の結果は「立体鑑賞に適した撮影環境である」と「立体鑑賞に適した撮影環境でない」の２つであったが、より細分化した判定を行うようにしてもよい。例えば「最も立体鑑賞に適した撮影環境である」という判定結果から「最も立体鑑賞に適さない撮影環境である」という判定結果まで、５段階の判定結果を設け、その判定結果が撮影者に報知されるようにしてもよい。このようにすることで、現在の撮影環境と立体鑑賞への適否との関係が、撮影者にとってより把握しやすくなる。

（変形例３）
第１の実施の形態に係るデジタルカメラ１００において、３Ｄ適否判定結果を画像データに関連づけてメモリカード１７１等の記憶媒体に記憶するようにしてもよい。

また、第３の実施形態において、画像データに関連づけられて記憶された撮影パラメータから３Ｄ適否判定を行うのではなく、不図示のデジタルカメラにより既に行われた３Ｄ適否判定結果をメモリカード３７１から読み出すようにしてもよい。つまり、不図示のデジタルカメラが撮影パラメータに基づく３Ｄ適否判定処理を行うと共に判定結果を画像データに関連づけて記憶し、表示装置３００が画像データの再生時に記憶されているその判定結果に基づいて液晶モニタ１６１の表示を切り替えるようにしてもよい。

（変形例４）
第１の実施の形態において、撮影回数は２回より多くてもよい。つまり、より多数のアングルから撮影した画像データに基づいて三次元画像データを作成するようにしてもよい。

（変形例５）
第３の実施の形態において、３Ｄ適否判定に用いる撮影パラメータを画像ファイル以外の場所から取得してもよい。例えばメモリカード３７１内に別のファイルとして撮影パラメータのみが格納されているデータファイルが存在し、そのデータファイルと画像ファイルとが何らかの形で関連づけられていてもよい。また、メモリカード３７１以外の記憶媒体や、表示装置３００の外部に設けられた機器（例えば表示装置３００に接続されたデジタルカメラ等）から撮影パラメータを取得するようにしてもよい。あるいは、所定の電気通信回線を介して前記画像データや撮影パラメータを取得する画像処理サーバとして表示装置３００を構成してもよい。

（変形例６）
第３の実施の形態において、３Ｄ適否判定の結果に応じて当該三次元画像データを二次元画像データとして液晶モニタ１６１に表示する代わりに、その画像データが立体鑑賞に適した撮影環境でないことを示す表示を行うようにしてもよい。つまり、三次元画像の撮影に適さない環境下で撮影（作成）された三次元画像データであっても立体表示を行うが、当該データがそのような環境下で撮影されたものであることをアイコンやメッセージ等で当該データに重畳して表示する。

（変形例７）
第１の実施の形態では１つの結像光学系１２０および１つの撮像素子１３０により被写体像を２回撮像することにより三次元画像データを生成するデジタルカメラ１００について説明した。また、第２の実施の形態では２つの結像光学系１２０ａ、１２０ｂおよび２つの撮像素子１３０ａ、１３０ｂにより被写体像を１回撮像することにより三次元画像データを生成するデジタルカメラ２００について説明した。本発明はこのような実施形態に限定されず、これら以外の方法により三次元画像データを生成する撮像装置に適用することが可能である。例えば、１つの結像光学系および撮像素子により被写体像を１回撮像し、これにより得られた１つの画像データから個々の被写体を特定し、それらの被写体に奥行きを付加した擬似的な三次元画像データを生成する撮像装置についても、本発明を適用することができる。

（変形例８）
第１の実施の形態において、二次元画像データを撮影する機能と三次元画像データを撮影する機能とを明示的に切り替え可能に構成してもよい。例えば、二次元撮影モードと三次元撮影モードとを設け、コマンドダイヤル等を操作することによって二次元撮影モードと三次元撮影モードとを切り替えるようにしてもよい。この場合、図３のフローチャートにおいて、三次元撮影モードが設定されていれば、ステップＳ１７０からステップＳ２２０を省略し、ステップＳ１６０の次にステップＳ２３０の処理を行う。つまり、撮影環境が三次元画像データの作成に適した状態であれば、ユーザの判断によらず三次元画像データを作成する。

本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。

１００、２００…デジタルカメラ、１１０、３１０…制御部、１２０、１２０ａ、１２０ｂ…結像光学系、１３０、１３０ａ、１３０ｂ…撮像素子、３００…表示装置

Claims (12)

1. 所定の撮影パラメータに基づいて被写体像を撮影し、撮影画像データを作成する撮影手段と、
   前記撮影パラメータに基づいて、前記撮影手段が前記撮影により作成する前記撮影画像データが、前記被写体像の立体鑑賞に適した状態であるか否かを判定する判定手段と、
   を備えることを特徴とする撮像装置。
2. 請求項１に記載の撮像装置において、
   前記判定手段による前記判定の結果を前記撮像装置の使用者に報知する報知手段を備えることを特徴とする撮像装置。
3. 請求項１または２に記載の撮像装置において、
   前記撮影パラメータは、露出、ＩＳＯ感度、絞り値、シャッタースピード、焦点距離、被写体距離、動き検知結果、および発光装置の発光量のいずれか少なくとも１つを含み、
   前記判定手段は、前記撮影パラメータを所定のしきい値と比較することにより、前記撮影手段が前記撮影により作成する前記撮影画像データが、前記被写体像の立体鑑賞に適した状態であるか否かを判定することを特徴とする撮像装置。
4. 請求項１〜３のいずれか一項に記載の撮像装置において、
   複数の前記撮影パラメータから、前記判定手段が前記判定に利用する前記撮影パラメータを選択する選択手段を備えることを特徴とする撮像装置。
5. 請求項１〜４のいずれか一項に記載の撮像装置において、
   前記撮影手段により作成された前記撮影画像データを記憶する画像記憶手段と、
   前記判定手段による前記判定の結果を前記画像記憶手段により記憶された前記撮影画像データに関連付けて記憶する判定結果記憶手段と、
   を備えることを特徴とする撮像装置。
6. 請求項１〜５のいずれか一項に記載の撮像装置において、
   前記被写体像を結像させる結像光学系を備え、
   前記撮影手段は、同一の被写体をそれぞれ異なる方向から複数回撮影し、前記複数の撮影の結果に基づいて前記被写体の立体像である前記撮影画像データを作成することを特徴とする撮像装置。
7. 請求項６に記載の撮像装置において、
   前記判定手段は、前記撮影手段により前記複数の撮影のうち１回目の撮影が行われたことに応じて前記判定を行い、
   前記撮影手段は、前記判定手段により前記被写体像の立体鑑賞に適した状態であると判定された場合には前記複数の撮影のうち２回目以降の撮影を行って前記撮影画像データを作成し、前記被写体像の立体鑑賞に適した状態ではないと判定された場合には前記１回目の撮影のみから前記撮影画像データを作成することを特徴とする撮像装置。
8. 所定の撮影パラメータに基づいて撮影された被写体像の画像データが入力される入力手段と、
   前記入力手段に入力された前記画像データが前記被写体像の立体鑑賞に適した状態か否かを判定する判定手段と、
   を備えることを特徴とする画像処理装置。
9. 請求項８に記載の画像処理装置において、
   前記入力手段に入力された前記画像データの撮影パラメータを取得するパラメータ取得手段を備え、
   前記判定手段は、前記パラメータ取得手段により取得された前記撮影パラメータに基づいて前記判定を行うことを特徴とする画像処理装置。
10. 請求項８に記載の画像処理装置において、
    前記入力手段には、前記画像データと共に、前記画像データが前記被写体像の立体鑑賞に適した状態か否かを表す情報が入力され、
    前記判定手段は、前記情報に基づいて前記判定を行うことを特徴とする画像処理装置。
11. 請求項８〜１０のいずれか一項に記載の画像処理装置を備え、
    前記入力手段は、所定の電気通信回線を介して前記画像データを取得することを特徴とする画像処理サーバ。
12. 請求項８〜１０のいずれか一項に記載の画像処理装置と、
    前記判定手段による前記判定の結果に応じて前記被写体像の立体表示と二次元表示とを切り替える表示手段と、
    を備えることを特徴とする表示装置。
    

Images