JP2012027794A - 表示装置 - Google Patents

Abstract

【課題】３Ｄ画像に対して画面上での操作時に、ユーザが違和感を感じることなく操作することができる表示装置を提供する。
【解決手段】互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを組み合わせて生成された３次元画像を表示する表示部６と、表示部６の表示画面上に設けられ、外部からの物体の接触位置または表面付近の物体の存在位置を検出するとともに、該検出結果に応じた信号の入力を受け付けるタッチパネル７と、３次元画像が表示部６の表示画面と直交する垂直な方向へ仮想的に飛び出した距離に基づいて、タッチパネル７の検出感度を設定する感度設定部９３と、を備える。
【選択図】図１

Description

本発明は、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを用いて３次元画像を表示する表示装置に関する。

近年、同一の被写体に対して異なる位置から複数のデジタルカメラを用いて撮影することによって複数の画像データを取得し、この取得した複数の画像データに含まれる被写体の視差を利用することにより、ユーザが立体的に見ることができる３次元画像（以下、「３Ｄ画像」という）を表示する表示装置が知られている。

このような表示装置において、ユーザが表示モニタの画面上に設けられたタッチパネルを操作することにより、表示モニタが表示する画像を３次画像と２次元画像（以下「２Ｄ画像」という）とに切換えることができる技術が知られている（特許文献１参照）。この技術では、ユーザによってタッチパネルがタッチされた位置に対応する領域の画像を２Ｄ画像または３Ｄ画像に切換えて表示モニタに表示する。

特開２０１０−１０８２０３号公報

ところで、従来の表示装置が備えるタッチパネルは、表示モニタが３Ｄ画像を表示しているにも関わらず、ユーザによってタッチされた位置を平面的（平面座標）に検出するものである。このため、タッチパネルをタッチする位置と表示モニタの画面上から仮想的に飛び出した３Ｄ画像に触れる位置との間にずれが生じてしまい、ユーザは所望の操作ができずに違和感を感じると場合があった。

本発明は、上記に鑑みてなされたものであって、３Ｄ画像に対して画面上での操作時に、ユーザが違和感を感じることなく操作することができる表示装置を提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係る表示装置は、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを組み合わせて生成された３次元画像を表示する表示部と、前記表示部の表示画面上に設けられ、外部からの物体の接触位置または表面付近の物体の存在位置を検出するとともに、該検出結果に応じた信号の入力を受け付けるタッチパネルと、前記３次元画像が前記表示画面と直交する垂直な方向へ仮想的に飛び出した距離に基づいて、前記タッチパネルの検出感度を設定する感度設定部と、を備えたことを特徴とする。

また、本発明に係る表示装置は、上記発明において、前記感度設定部は、前記３次元画像に含まれる被写体の領域毎に前記タッチパネルの検出感度を設定することを特徴とする。

また、本発明に係る表示装置は、上記発明において、異なる位置から撮影し、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する撮像部と、前記撮像部が生成した前記２つの画像データを、前記表示画面における水平方向の１画素毎に交互に並べて前記表示部に出力する制御を行うことによって、前記３次元画像を前記表示部に表示させる表示制御部と、をさらに備えたことを特徴とする。

また、本発明に係る表示装置は、上記発明において、前記表示制御部は、前記表示部が表示する前記３次元画像に含まれ、前記タッチパネルが受け付けた信号によって指定された被写体の３次元的な表示態様を変更することを特徴とする。

また、本発明に係る表示装置は、上記発明において、前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体に対し、前記撮像部のピントを合わせるピント設定部をさらに備え、前記表示制御部は、前記ピント設定部が被写体にピントを合わせた前記２つの画像データを用いた３次元画像を前記表示部に表示させる制御を行うことを特徴とする。

また、本発明に係る表示装置は、上記発明において、前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体の一部を拡大する電子ズーム部をさらに備え、前記表示制御部は、前記電子ズーム部によって拡大された前記２つの画像データを用いた３次元画像を前記表示部に表示させる制御を行うことを特徴とする。

また、本発明に係る表示装置は、上記発明において、前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体に対し、前記２つの画像データにおける視差を調整することによって前記表示画面上から前記表示画面と直交する垂直な方向へ仮想的に飛び出す距離を設定する飛び出し設定部をさらに備え、前記表示制御部は、前記被写体が前記飛び出し設定部で設定された飛び出す分だけ仮想的に３次元画像を前記表示部に表示させる制御を行うことを特徴とする。

本発明に係る表示装置によれば、感度設定部が、３Ｄ画像が表示部の表示画面と直交する垂直な方向に仮想的に飛び出した距離に基づいて、タッチパネルの検出感度を設定するので、表示部が表示する３Ｄ画像の飛び出した位置とタッチパネルの操作位置との感覚を一致させることができる。これにより、ユーザは、３Ｄ画像に対して画面上での操作時に違和感なく操作することができる効果を奏する。

図１は、本発明の一実施の形態に係る表示装置の構成を示すブロック図である。 図２は、本発明の一実施の形態に係る表示装置が備える表示部の概略構成を示す模式図である。 図３は、本発明の一実施の形態に係る表示装置が備えるタッチパネルの概略構成を示す模式図である。 図４は、本発明の一実施の形態に係る表示装置が備える撮像部が被写体に対して互いの視野の一部が重なりを有する２つの画像データを生成する際の状況を示す模式図である。 図５は、図４に示す状況下で撮像部が被写体に対して互いの視野の左右方向の一端部同士が重なりを有する２つの画像データに対応する画像の一例を示す図である。 図６は、図４に示す状況下で撮像部が生成した右目画像と左目画像とを仮想的に重ねた画像の一例を示す図である。 図７は、図４に示す状況下で撮像部と被写体との撮影距離の関係を示す図である。 図８は、本発明の一実施の形態に係る表示装置が行う処理の概要を示すフローチャートである。 図９は、本発明の一実施の形態に係る表示装置が備える感度設定部が設定するタッチパネルにおける検出感度の感度分布の一例を示す図である。 図１０は、本発明の一実施の形態に係る表示装置の撮像部が生成する画像の一例を示す図である。 図１１は、図９に示す再生表示処理の概要を示すフローチャートである。 図１２は、本発明の一実施の形態に係る表示装置が備える電子ズーム部が生成する拡大３次元画像の生成方法を説明する図である。 図１３は、本発明の一実施の形態に係る変形例において表示装置の飛び出し設定部が表示部によって表示される３次元画像に含まれる被写体の奥行を設定する設定方法を説明する図である。

以下に、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。

図１は、本発明の一実施の形態に係る表示装置の構成を示すブロック図である。本実施の形態では、表示装置を搭載したデジタルステレオカメラを例に挙げて説明する。図１に示すように、表示装置１は、異なる位置から撮影し、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する撮像部２と、表示装置１の姿勢を検出する姿勢検出部３と、表示装置１の各種情報の入力を受け付ける操作入力部４と、撮影日時の判定機能やタイマー機能を有する時計５と、３Ｄ画像または２Ｄ画像を表示する表示部６と、外部からの接触位置に応じた信号の入力を受け付けるタッチパネル７と、撮像部２によって生成された画像データを含む各種情報を記憶する記憶部８と、表示装置１の動作を制御する制御部９と、を備える。

撮像部２は、第１撮像部２１と第２撮像部２２とを有する。第１撮像部２１および第２撮像部２２は、互いの光軸Ｌ１，Ｌ２が平行または所定の角度をなすように並設される。

第１撮像部２１は、レンズ部２１ａと、レンズ駆動部２１ｂと、絞り２１ｃと、絞り駆動部２１ｄと、シャッタ２１ｅと、シャッタ駆動部２１ｆと、撮像素子２１ｇと、信号処理部２１ｈとを有する。レンズ部２１ａは、フォーカスレンズやズームレンズ等によって構成され、所定の視野領域からの光を集光する。レンズ駆動部２１ｂは、ＤＣモータ等によって構成され、レンズ部２１ａのフォーカスレンズやズームレンズ等を光軸Ｌ１上で移動させることにより、レンズ部２１ａのピント位置や焦点距離の変更を行う。絞り２１ｃは、レンズ部２１ａが集光した光の入射量を制限することにより露出の調整を行う。絞り駆動部２１ｄは、ステッピングモータ等によって構成され、絞り２１ｃを駆動する。シャッタ２１ｅは、撮像素子２１ｇの状態を露光状態または遮光状態に設定する。シャッタ駆動部２１ｆは、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２１ｅを駆動する。撮像素子２１ｇは、レンズ部２１ａが集光した光を受光して電気信号（アナログ信号）に変換するＣＣＤ（Charge Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によって実現され、変換した電気信号を信号処理部２１ｈに出力する。信号処理部２１ｈは、撮像素子２１ｇから出力される電気信号に増幅等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの画像データに変換して制御部９に出力する。

第２撮像部２２は、第１撮像部２１と同一の構成によって実現され、レンズ部２２ａと、レンズ駆動部２２ｂと、絞り２２ｃと、絞り駆動部２２ｄと、シャッタ２２ｅと、シャッタ駆動部２２ｆと、撮像素子２２ｇと、信号処理部２２ｈとを有する。

姿勢検出部３は、加速度センサによって構成され、表示装置１の加速度を検出することにより、表示装置１の姿勢状態を検出する。具体的には、姿勢検出部３は、水平面を基準としたときの表示装置１の姿勢を検出する。

操作入力部４は、表示装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ４１と、静止画撮影の指示を与えるレリーズ信号を入力するレリーズスイッチ４２と、表示装置１の各種撮影モードや各種設定を切換える切換スイッチ４３と、撮像部２のズーム操作を行うズームスイッチ４４とを有する。

時計５は、表示装置１の動作の基準となる時間信号を生成する。これにより、制御部９は、画像データの取得時間や撮像素子２１ｇ，２２ｇの露光時間等を設定することができる。

図２は、表示部６の概略構成を示す模式図である。図２に示すように、表示部６は、バックライト６１と、表示パネル６２と、視差バリア６３とを有する。バックライト６１は、ＬＥＤ（Light Emitting diode）等によって構成され、画像を表示するための光を背面から照射する。表示パネル６２は、液晶または有機ＥＬ（Electro Luminescence）等の表示パネルによって構成される。視差バリア６３は、液晶等によって構成され、表示部パネル６２の上面に積層される。視差バリア６３は、表示パネル６２の各画素の間隔よりも狭い間隔でスリットが設けられ、ユーザの右目Ｏ１と左目Ｏ２とにそれぞれ対応した画像を分離する。また、本実施の形態では、視差バリア６３は、パララックバリア方式が適用される。

以上の構成を有する表示部６は、制御部９から３Ｄ画像データが入力された場合、制御部９の制御のもと表示パネル６２が左端の画素から水平方向に右目画像と左目画像との順で交互に表示し、視差バリア６３が表示パネル６２の各画素から出た光を分離する。このため、右目画像が右目Ｏ１のみ、左目画像が左目Ｏ２のみにそれぞれ届く。これにより、ユーザは、表示部６が表示する３Ｄ画像を立体視することができる。また、表示部６は、表示態様を３Ｄ画像から２Ｄ画像に切換える場合、視差バリア６３に印加される電圧がオン状態からオフ状態にされることで、視差バリア６３のスリットが遮光状態から透過状態になるため、２Ｄ画像を表示することができる。

図３は、タッチパネル７の概略構成を示す模式図である。図３に示すように、タッチパネル７は、フロントパネル７１と、駆動部７２と、駆動電極７３と、受信電極７４と、検出部７５とを有する。フロントパネル７１は、所定の厚みを有し、平面的に見て矩形状に形成されたガラスまたはＰＥＴ（Polyethylene Terephthalate）で構成される。駆動部７２は、駆動電極７３に駆動パルス（たとえば印加電圧５Ｖ）を出力し、駆動電極７３と受信電極７４との間で静電容量を形成させる。駆動電極７３および受信電極７４は、ＩＴＯ（Indium Tin Oxide）電極によって構成され、フロントパネル７１の下面に対して５ｍｍピッチで交互に設けられる。検出部７５は、静電容量センサによって構成され、ユーザの手Ｏ３が電界Ｅ１に接近することにより、駆動電極７３と受信電極７４との間で形成された静電容量の微細な変化量、たとえばユーザの手Ｏ３がフロントパネル７１に接触（タッチ）したときの変化量として１ｐＦ程度の値を検出する。この検出部７５は、たとえば米国特許７１４８７０４号明細書に開示されている。この技術を用いることにより、検出部７５は、ユーザの手Ｏ３がフロントパネル７１に触れる前から駆動電極７３と受信電極７４との間で形成された静電容量の微細な変化を検出することができる。具体的には、検出部７５は、図３に示すように、距離ｈ１（たとえば１ｃｍ）の位置と距離ｈ２（たとえば０．５ｃｍ）の位置とに指Ｏ３があるときのように、微小な距離しか離れていない２箇所を移動する場合の駆動電極７３と受信電極７４との間で形成された静電容量の変化を検出することができる。

以上の構成を有するタッチパネル７は、表示部６の表示画面上に設けられ、外部からの物体の接触位置または表面付近の物体の存在位置を検出するとともに、この検出結果に応じた信号の入力を受け付ける。具体的には、タッチパネル７は、表示部６で表示される情報に基づいて、ユーザがタッチパネル７の画面に触れる前から表示画面の周辺に形成された電界が変化することで生じる静電容量の変化を検出し、この変化した位置に応じた操作信号の入力を受け付ける。また、本実施の形態では、タッチパネル７は、静電容量方式のタッチパネルである。

記憶部８は、撮像部２が撮影した画像データを記憶する画像データ記憶部８１と、表示装置１が実行する各種プログラムを記憶するプログラム記憶部８２とを有する。記憶部８は、表示装置１の内部に固定的に設けられるフラッシュメモリやＲＡＭ（Random Access Memory）等の半導体メモリを用いて実現される。なお、記憶部８に対し、外部から装着されるメモリカード等の記憶媒体に対して情報を記憶する一方、記憶媒体が記憶する情報を読み出す記録媒体インターフェースとしての機能を具備させてもよい。

制御部９は、ＣＰＵ（Central Processing Unit）等によって実現される。制御部９は、操作入力部４からの操作信号等に応じて記憶部８のプログラム記憶部８２からプログラムを読み出して実行し、表示装置１を構成する各部に対する指示やデータの転送等を行って表示装置１の動作を統括的に制御する。制御部９は、画像処理部９１と、立体画像生成部９２と、感度設定部９３と、ピント設定部９４と、絞り設定部９５と、電子ズーム部９６と、飛び出し設定部９７と、表示制御部９８とを有する。

画像処理部９１は、信号処理部２１ｈ，２２ｈからそれぞれ出力された左目画像データおよび右目画像データに対して各種の画像処理を施して記憶部８の画像データ記憶部８１に出力する。具体的には、画像処理部９１は、信号処理部２１ｈ，２２ｈからそれぞれ出力された左目画像データおよび右目画像データに対してエッジ強調、色補正およびγ補正等の処理を施す。

立体画像生成部９２は、画像処理部９１によって画像処理され左目画像データに対応する左目画像および右目画像データに対応する右目画像それぞれに対し、３次元表示時の縦横比率（たとえばアスペクト比３：４に対応）で切出すことによって３Ｄ画像を生成する。

感度設定部９３は、表示部６によって表示される３Ｄ画像が表示部６の表示画面と直行する垂直な方向へ仮想的に飛び出した距離に基づいて、タッチパネル７の検出感度を設定する。さらに、感度設定部９３は、３Ｄ画像に含まれる表示画面上から表示画面と垂直な方向へ仮想的に飛び出した被写体の領域毎に、タッチパネル７の検出感度を設定する。

ピント設定部９４は、撮像部２によって生成される２つの画像データに含まれ、タッチパネル７が受け付けた信号によって指定された被写体に対し、撮像部２のピントを合わせる設定を行う。具体的には、ピント設定部９４は、レンズ駆動部２１ｂ，２２ｂを駆動し、タッチパネル７が検出する静電容量の変化領域に対応する２つの画像データの領域を、鮮鋭度が最大となるようにレンズ部２１ａ，２２ａを光軸Ｌ１，Ｌ２上で同期させながら移動させる。

絞り設定部９５は、信号処理部２１ｈ，２２ｈから出力される画像データに基づいて、撮影を行う際の条件、たとえば絞り２１ｃ，２２ｃの設定値、シャッタ速度等を設定することにより露出調整を行う。

電子ズーム部９６は、撮像部２によって生成される２つの画像データに含まれ、タッチパネル７が受け付けた信号によって指定された被写体の一部を拡大する。具体的には、電子ズーム部９６はタッチパネル７が検出する静電容量の変化領域に対応する２つの画像データの領域を所定の倍率、たとえば２倍に拡大する。

飛び出し設定部９７は、撮像部２によって生成される２つの画像データに含まれ、タッチパネル７が受け付けた信号によって指定された被写体に対し、２つの画像データにおける視差を調整することによって表示部６の表示画面から表示画面と直交する垂直な方向へ仮想的に飛び出す距離を設定する。具体的には、飛び出し設定部９７は、タッチパネル７が検出した静電容量の変化領域に対応する左目画像の領域および右目画像の領域に対して視差を大きくすることで、３Ｄ画像に含まれる被写体が表示部６の表示画面と垂直な方向へ仮想的に飛び出す距離を設定する。

表示制御部９８は、立体画像生成部９２によって生成された３Ｄ画像または２Ｄ画像を表示部６に表示させる制御を行う。具体的には、表示制御部９８は、表示部６に３Ｄ画像を表示させる場合、立体画像生成部９２によって生成された３Ｄ画像の左目画像と右目画像とをそれぞれ短冊状に分割し、この分割した画像を表示部６の表示画面における水平方向の１画素毎に交互に並べて３Ｄ画像を表示部６に表示させる制御を行う。これに対して、表示制御部９８は、表示部６に２Ｄ画像を表示させる場合、表示部６の視差バリア６３のスリットを遮光状態から透過状態にするため、視差バリア６３に印加する電源をオン状態からオフ状態にするとともに、左目画像または右目画像どちらか一方のみを表示パネル６２に表示させる制御を行う。さらに、表示制御部９８は、表示部６が表示する３Ｄ画像に含まれ、タッチパネル７が受け付けた信号によって指定された被写体の３次元的な表示態様を変更する。具体的には、表示制御部９８は、ピント設定部９４が被写体にピントを合わせた２つの画像データを用いた３Ｄ画像または電子ズーム部９６が拡大した２つの画像データを用いて拡大３Ｄ画像を表示部６に表示させる制御を行う。

以上の構成を有する表示装置１において、撮像部２が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況について説明する。図４は、撮像部２が互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する際の状況を示す模式図である。図５は、図４に示す状況下で撮像部２が生成する互いの視野の左右方向の一端部同士が重なりを有する２つの画像データそれぞれに対応する画像の一例を示す図である。図５において、図５の画像ＷＲ１が、第１撮像部２１によって生成された画像データに対応する右目画像であり、図５の画像ＷＬ１が、第２撮像部２２によって生成された画像データに対応する左目画像である。図６は、図４に示す状況下で撮像部２が生成した右目画像と左目画像とを仮想的に重ねた画像の一例を示す図である。図７は、図４に示す状況下で撮像部２と被写体との撮影距離の関係を示す図である。図７では、横軸が左端を原点としたときの画像Ｗ２内の被写体位置であり、縦軸が撮像部２と被写体との距離である。

図４に示すように、撮像部２は、撮像部２からの距離が異なる被写体Ａ１（距離ｄ１）および被写体Ａ２（距離ｄ２）に対して、距離Ｂ１で並設された第１撮像部２１および第２撮像部２２で撮影することにより、右目画像データと左目画像データとを生成する。具体的には、第１撮像部２１と第２撮像部２２とがそれぞれ右目画像ＷＲ１と左目画像ＷＬ１とを生成する（図５を参照）。図４および図５に示すように、被写体Ａ２の領域は、撮像部２からの距離が被写体Ａ１の領域よりも大きいため、被写体Ａ２の領域がほぼ重なる。具体的には、図６に示すように、画像Ｗ２内では、被写体Ａ２の領域がほぼ重なる。これに対して、被写体Ａ１の領域は、撮像部２からの距離が被写体Ａ２の領域よりも小さいため、被写体Ａ１の領域が重ならない。具体的には、図６に示すように、画像Ｗ２内では、被写体Ａ１の領域が重ならず、被写体Ａ１に対して視差ａ１を有する。すなわち、図４および図７に示すように、撮像部２からの距離が近い被写体（被写体Ａ１）ほど視差が大きく、撮像部２からの距離が遠い被写体（被写体Ａ２）ほど視差が小さい。このように、立体画像生成部９２が被写体に対して視差を持った右目画像および左目画像を、左目画像データおよび右目画像データからそれぞれ切出して３Ｄ画像を生成し、表示制御部９８が３Ｄ画像を表示部６に表示させる制御を行う。これにより、ユーザは、臨場感ある３Ｄ画像を見ることができる。

つぎに、本実施の形態に係る表示装置１が行う処理について説明する。図８は、表示装置１が行う処理の概要を示すフローチャートである。

図８において、まず、制御部９は、表示装置１の電源がオンになっているか否かを判断する（ステップＳ１０１）。表示装置１の電源がオンになっている場合（ステップＳ１０１：Ｙｅｓ）、表示装置１はステップＳ１０２に移行する。一方、表示装置１の電源がオンになっていない場合（ステップＳ１０１：Ｎｏ）、表示装置１は本処理を終了する。

続いて、制御部９は、表示装置１が撮影モードに設定されているか否かを判断する（ステップＳ１０２）。表示装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）、表示装置１は後述するステップＳ１０３に移行する。一方、表示装置１が撮影モードに設定されていない場合（ステップＳ１０２：Ｎｏ）、表示装置１は後述するステップＳ１１７に移行する。

まず、表示装置１が撮影モードに設定されている場合（ステップＳ１０２：Ｙｅｓ）について説明する。この場合、表示部６は、撮像部２が一定の微小な時間間隔で連続的に生成する画像データに対応する３Ｄ画像のスルー画像を表示する（ステップＳ１０３）。

続いて、感度設定部９３は、表示部６によって表示される３Ｄ画像が表示部６の表示画面上と直交する垂直な方向へ仮想的に飛び出した距離（以下、「飛び出し距離」という）に基づいて、タッチパネル７が検出する表示部６の表示画面上から表示画面と垂直な方向に形成された静電容量に応じた検出感度を設定する（ステップＳ１０４）。図４に示すように、感度設定部９３は、３Ｄ画像に含まれる被写体の領域毎にそれぞれタッチパネル７の検出感度を設定する。

図９は、感度設定部９３が設定するタッチパネル７における検出感度の感度分布の一例を示す図である。図９に示すように、感度設定部９３は、表示部６が表示する３Ｄ画像Ｗ１に含まれる被写体Ａ１の領域の検出感度を、背景の領域の検出感度の接触時における静電容量の変化を１ｐＦとしたときの５倍に設定する。具体的には、感度設定部９３は、検出部７５が被写体Ａ１の領域で０．２ｐＦ（第１の閾値）の静電容量の変化を検出したときに、この位置に応じた信号の入力を受け付けるようにタッチパネル７の検出感度を設定する。さらに、感度設定部９３は、３Ｄ画像Ｗ１に含まれる被写体Ａ２の領域の検出感度を、背景の領域の検出感度に比べて２倍に設定する。具体的には、感度設定部９３は、検出部７５が被写体Ａ２の領域で０．５ｐＦ（第２の閾値）の静電容量の変化を検出したときに、この位置に応じた信号の入力を受け付けるようにタッチパネル７の検出感度を設定する。これにより、表示装置１は、表示部６が表示する３Ｄ画像が仮想的に飛び出した位置とタッチパネル７の操作位置との感覚を一致させることができる。なお、感度設定部９３による検出感度の倍率はあくまでも例示であり、タッチパネル７や検出部７５の性能に応じて適宜設定変更を行うことができる。

ステップＳ１０５において、制御部９は、ユーザによってレリーズスイッチ４２が操作されて撮影を指示するレリーズ信号が入力されたか否かを判断する。撮影を指示するレリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）、表示装置１は後述するステップＳ１１４に移行する。一方、撮影を指示するレリーズ信号が入力されていない場合（ステップＳ１０５：Ｎｏ）、表示装置１は後述するステップＳ１０６に移行する。

まず、撮影を指示するレリーズ信号が入力されていない場合（ステップＳ１０５：Ｎｏ）について説明する。この場合、制御部９は、タッチパネル７が静電容量の変化を検出したか否かを判断する（ステップＳ１０６）。具体的には、制御部９は、タッチパネル７の検出部７５が駆動電極７３と受信電極７４との間に形成されて静電容量の変化を検出することによって、静電容量が変化した位置に応じた信号が入力されたか否かを判断する。タッチパネル７が静電容量の変化を検出していない場合（ステップＳ１０６：Ｎｏ）、表示装置１はステップＳ１０１に戻る。一方、タッチパネル７が静電容量の変化を検出した場合（ステップＳ１０６：Ｙｅｓ）、表示装置１はステップＳ１０７に移行する。

続いて、制御部９は、タッチパネル７が検出した静電容量の変化量が第１の閾値以下であるか否かを判断する（ステップＳ１０７）。具体的には、制御部９は、タッチパネル７が検出した静電容量の変化量が０．２ｐＦ以下であるか否かを判断する。タッチパネル７が検出した静電容量の変化量が第１の閾値以下である場合（ステップＳ１０７：Ｙｅｓ）、表示装置１は後述するステップＳ１０８に移行する。一方、タッチパネル７が検出した静電容量の変化量が第１の閾値以下でない場合（ステップＳ１０７：Ｎｏ）、表示装置１は後述するステップＳ１１１に移行する。

ステップＳ１０８において、制御部９は、タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を含む領域の画像であるか否かを判断する。具体的には、図４に示すように、制御部９は、タッチパネル７が検出した静電容量の変化領域に対応する画像が被写体Ａ１の領域に対応する画像であるか否かを判断する。タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を含む領域の画像でない場合（ステップＳ１０８：Ｎｏ）、表示装置１はステップＳ１０１に戻る。一方、タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を含む領域の画像である場合（ステップＳ１０８：Ｙｅｓ）、表示装置１はステップＳ１０９に移行する。

ステップＳ１０９において、ピント設定部９４は、被写体Ａ１にピントを合わせる設定を行う（ステップＳ１０９）。具体的には、ピント設定部９４は、レンズ駆動部２１ｂ，２２ｂを駆動し、被写体Ａ１の鮮鋭度が最大となるようにレンズ部２１ａ，２２ａを光軸Ｌ１，Ｌ２上で同期させながら移動させる。

その後、絞り設定部９５は、撮像部２の絞り値を調整し（ステップＳ１１０）、表示装置１はステップＳ１０１に戻る。具体的には、絞り設定部９５は、絞り駆動部２１ｄ，２２ｄを駆動し、絞り２１ｃ，２２ｃを同期させながら所定の絞り値になるように開く。

図１０は、撮像部２が生成する画像の一例を示す図である。図１０において、画像ＷＬ２が第１撮像部２１によって生成された画像データに対応する画像であり、画像ＷＲ２が第２撮像部２２によって生成された画像データに対応する画像である。図１０に示すように、ピント設定部９４が被写体Ａ１にピントを合わせ、絞り設定部９５が絞り２１ｃ，２２ｃの絞り値を調整することで、タッチパネル７が検出した静電容量の変化領域を含む画像以外、たとえば背景や撮像部２からの距離が遠い被写体をぼかすことができる。なお、図１０では、ぼけた画像を破線で示している。これにより、表示装置１は、表示部６が撮像部２によって撮影された画像データを表示する際に、ユーザが所望の被写体をより鮮明な状態で表示部６の表示画面上から表示画面と垂直な方向に飛び出させて表示することができる。

つぎに、ステップＳ１０７において、タッチパネル７が検出した静電容量の変化量が第１の閾値より大きい場合（ステップＳ１０７：Ｎｏ）について説明する。この場合、制御部９は、タッチパネル７が検出した静電容量の変化量が第２の閾値以下であるか否かを判断する（ステップＳ１１１）。具体的には、制御部９は、タッチパネル７が検出した静電容量の変化量が０．５ｐＦ以下であるか否かを判断する。タッチパネル７が検出した静電容量の変化量が第２の閾値より大きい場合（ステップＳ１１１：Ｎｏ）、表示装置１はステップＳ１０１に戻る。一方、タッチパネルが検出した静電容量の変化量が第２の閾値以下である場合（ステップＳ１１１：Ｙｅｓ）、表示装置１はステップＳ１１２に移行する。

ステップＳ１１２において、制御部９は、タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を含む領域の画像であるか否かを判断する（ステップＳ１１２）。具体的には、図４に示すように、制御部９は、タッチパネル７が検出した静電容量の変化領域に対応する画像が被写体Ａ２の領域に対応する画像であるか否かを判断する。タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を一部に含む領域の画像でない場合（ステップＳ１１２：Ｎｏ）、表示装置１はステップＳ１０１に戻る。一方、タッチパネル７が検出した静電容量の変化領域に対応する画像が飛び出し被写体を一部に含む領域の画像である場合（ステップＳ１１２：Ｙｅｓ）、表示装置１はステップＳ１１３に移行する。

ステップＳ１１３において、ピント設定部９４は、被写体Ａ２に撮像部２のピントを合わせる設定を行い（ステップＳ１１３）、表示装置１はステップＳ１１０に移行する。具体的には、ピント設定部９４は、撮像部２からの距離が遠くの被写体Ａ２に撮像部２のピントを合わせる。これにより、表示装置１は、絞り２１ｃ，２２ｃを開くことで、近くをぼかした画像データを得ることができ、被写体Ａ２に対して奥行き感を強調した画像になる。

つぎに、ステップＳ１０５において、ユーザによってレリーズスイッチ４２が操作されて撮影を指示するレリーズ信号が入力された場合（ステップＳ１０５：Ｙｅｓ）について説明する。この場合、撮像部２は、表示部６が現在表示している画像に対して撮影を行い、撮影した画像データを記憶部８の画像データ記憶部８１に記憶する（ステップＳ１１４）。

続いて、表示制御部９８は、撮像部２が撮影した画像データに対応する３Ｄ画像を表示部６にレックビュー表示させる（ステップＳ１１５）。

その後、制御部９は、表示部６が３Ｄ画像をレックビュー表示してから所定時間、たとえば３０秒経過したか否かを判断する（ステップＳ１１６）。表示部６が３Ｄ画像をレックビュー表示してから所定時間経過していない場合（ステップＳ１１６：Ｎｏ）、表示装置１はステップＳ１１５に戻る。一方、表示部６が３Ｄ画像をレックビュー表示してから所定時間経過した場合（ステップＳ１１６：Ｙｅｓ）、表示装置１はステップＳ１０１に戻る。

ここで、表示装置１が撮影モードに設定されていない場合（ステップＳ１０２：Ｎｏ）について説明する。この場合、制御部９は撮影した画像データを表示部６で表示する再生表示処理を実行し（ステップＳ１１７）、表示装置１はステップＳ１０１に戻る。

つぎに、ステップＳ１１７の再生表示処理について説明する。図１１は、再生表示処理の概要を示すフローチャートである。図１１において、まず、表示制御部９８は、画像データ記憶部８１に記憶された複数の画像をまとめて表示した画像選択画面を表示部６に表示させる（ステップＳ２０１）。

続いて、制御部９は、ユーザがタッチパネル７を操作することによって表示部６が表示する画像選択画面の中から画像が選択されたか否かを判断する（ステップＳ２０２）。ユーザによって画像選択画面の中から画像が選択された場合（ステップＳ２０２：Ｙｅｓ）、表示装置１は後述するステップＳ２０３に移行する。一方、ユーザによって画像選択画面の中から画像が選択されない場合（ステップＳ２０２：Ｎｏ）、表示装置１は後述するステップＳ２０９に移行する。

まず、ユーザによって画像選択画面の中から画像が選択された場合（ステップＳ２０２：Ｙｅｓ）について説明する。この場合、表示制御部９８は、ユーザによって選択された画像を表示部６に全画面表示させ（ステップＳ２０３）、表示装置１はステップＳ２０４に移行する。

続いて、制御部９は、表示部６によって表示されている画像が３Ｄ画像であるか否かを判断する（ステップＳ２０４）。具体的には、制御部９は、現在表示している画像の画像ファイルに含まれるヘッダ情報に３Ｄ画像である旨を示す３Ｄ画像情報が記載されているか否かを判断する。表示部６によって表示されている画像が３Ｄ画像である場合（ステップＳ２０４：Ｙｅｓ）、感度設定部９３は、表示部６によって表示される３Ｄ画像の飛び出し距離に基づいて、タッチパネル７が検出する表示部６の表示画面上から表示画面と垂直な方向に形成された静電容量に応じた検出感度を設定する（ステップＳ２０５）。

その後、制御部９は、タッチパネル７が静電容量の変化を検出したか否かを判断する（ステップＳ２０６）。タッチパネル７が静電容量の変化を検出していない場合（ステップＳ２０６：Ｎｏ）、表示装置１は後述するステップＳ２０９に移行する。一方、タッチパネル７が静電容量の変化を検出した場合（ステップＳ２０６：Ｙｅｓ）、表示装置１はステップＳ２０７に移行する。

ステップＳ２０７において、制御部９は、タッチパネル７が検出した静電容量の変化量が第１の閾値以下であるか否かを判断する。タッチパネル７が検出した静電容量の変化量が第１の閾値以下である場合（ステップＳ２０７：Ｙｅｓ）、表示制御部９８は、表示部６によって表示される３Ｄ画像に含まれる飛び出し被写体を一部に含む領域を拡大して拡大３Ｄ画像を電子ズーム部９６に生成させ、この拡大３Ｄ画像を表示部６に表示させる（ステップＳ２０８）。

図１２は、電子ズーム部９６が生成する拡大３Ｄ画像の生成方法を説明する図である。図１２に示すように、電子ズーム部９６は、第１撮像部２１および第２撮像部２２がそれぞれ生成した画像ＷＬ１，ＷＲ１に対して、タッチパネル７が検出した静電容量の変化領域に対応する被写体Ａ１の領域を一部に含む領域Ｌ１，Ｒ１をそれぞれ抽出して拡大画像ＷＬ４，ＷＲ４を生成する。これにより、表示制御部９８は、電子ズーム部９６が画像ＷＬ１，ＷＲ１から生成した拡大画像ＷＬ４，ＷＲ４を用いて表示部６に表示させることで、ユーザに対して拡大３Ｄ画像を表示することができる。

ここで、図１１に戻り、ステップＳ２０８に続くステップＳ２０９の処理について説明する。ステップＳ２０９において、制御部９は、ユーザによって切換スイッチ４３が操作され、画像再生を終了する終了指示信号が入力されたか否かを判断する。画像再生を終了する終了指示信号が入力されてない場合（ステップＳ２０９：Ｎｏ）、表示装置１はステップＳ２０１に戻る。一方、画像再生を終了する終了指示信号が入力された場合（ステップＳ２０９：Ｙｅｓ）、表示装置１は図９のメインルーチンに戻る。

つぎに、タッチパネル７が検出した静電容量の変化量が第１の閾値より大きい場合（ステップＳ２０７：Ｎｏ）について説明する。この場合、制御部９は、タッチパネル７が検出した静電容量の変化量が第２の閾値以下であるか否かを判断する（ステップＳ２１０）。タッチパネル７が検出した静電容量の変化量が第２の閾値以下である場合（ステップＳ２１０：Ｙｅｓ）、表示制御部９８は、表示部６によって表示される３Ｄ画像に含まれる被写体を含む領域を拡大した拡大画像を電子ズーム部９６に生成させ、この拡大３Ｄ画像を表示部６に表示させる（ステップＳ２１１）。具体的には、電子ズーム部９６は、第１撮像部２１および第２撮像部２２がそれぞれ生成する画像に含まれる視差が小さい被写体の領域を拡大して拡大３Ｄ画像を生成する。

ステップＳ２１２において、タッチパネル７が検出した静電容量の変化量が第２の閾値より大きい場合（ステップＳ２１０：Ｎｏ）について説明する。この場合、表示制御部９８は、表示部６によって表示される３Ｄ画像に含まれる引っ込み被写体を一部に含む領域を拡大した拡大３Ｄ画像を電子ズーム部９６に生成させ、この拡大３Ｄ画像を表示部６に表示させる（ステップＳ２１２）。

以上説明した本実施の形態では、感度設定部９３が、表示部６によって表示される３Ｄ画像の飛び出した距離に基づいて、タッチパネル７の検出感度を設定するので、表示部６が表示する３Ｄ画像が飛び出した位置とタッチパネル７の操作位置とを一致させることができる。この結果、ユーザは、３Ｄ画像に対して画面上での操作時に、ユーザが違和感を感じることなく操作することができる。さらに、感度設定部９３は、３Ｄ画像に含まれる被写体の領域毎にタッチパネル７の検出感度を設定する。これにより、ユーザは、表示部６によって表示される３Ｄ画像内に複数の被写体が含み、各被写体の飛び出し距離がそれぞれ異なっていても、違和感なく直感的な操作を行うことができる。

なお、本実施の形態では、再生表示処理でタッチパネル７の静電容量に変化があった位置に応じて３Ｄ画像に含まれる被写体を拡大して拡大３Ｄ画像を電子ズーム部９６に生成させていたが、タッチパネル７の静電容量に変化があった位置に応じて３Ｄ画像に含まれる被写体の奥行を設定するようにしてもよい。図１３は、飛び出し設定部９７が表示部６によって表示される３Ｄ画像に含まれる被写体の奥行を設定する設定方法を説明する図である。図１３に示すように、飛び出し設定部９７は、画像Ｗ３上から垂直方向に飛び出した被写体Ａ１（図１３（ａ））を、画像Ｗ３側に向けて所定の距離だけ垂直方向（奥行）に引き込ませることにより（図１３（ｂ））、表示部６が表示する３Ｄ画像に含まれる被写体の飛び出し加減を設定する。具体的には、飛び出し設定部９７は、第１撮像部２１および第２撮像部２２がそれぞれ生成する画像に含まれる被写体Ａ１の視差を小さくする調整を行うことにより、被写体Ａ１が画像Ｗ３から垂直方向に飛び出す距離を設定する。これにより、ユーザは、表示部６によって表示される３Ｄ画像に含まれる被写体の飛び出し距離を所望の位置に設定することができる。

また、上述した本実施の形態では、撮像部２が互いの視野の左右方向が重なりを有する２つの画像データを生成していたが、たとえば、一つの撮像部で連続的に撮影することにより、互いの視野の左右方向が重なりを有する２つの画像データを生成してもよい。

また、上述した本実施の形態では、タッチパネル７の検出部７５が静電容量の変化を検出していたが、たとえばバックライト６１による照射光の表示部６の外部からの反射光を検出する光センサを設け、この光センサが検出する反射光の検出感度を設定するようにしてもよい。

また、上述した本実施の形態では、電子ズーム部９６および飛び出し設定部９７は、画像データ記憶部８１に記憶された画像データに対して本処理を行っていたが、たとえば撮影直後に表示部６がレックビュー表示する画像に対して本処理を行ってもよい。

また、上述した本実施の形態では、表示部６は、パララックバリア方式であったが、ユーザが３Ｄ画像を立体視することができればよく、たとえばレンティキュラ方式であってもよい。

また、上述した本実施の形態では、表示装置１をデジタルステレオカメラとして説明していたが、たとえばデジタルビデオカメラ、カメラ付き携帯電話等の撮影機能および表示機能を備えた各種電子機器に適用することができる。

１ 表示装置
２ 撮像部
３ 姿勢検出部
４ 操作入力部
５ 時計
６ 表示部
７ タッチパネル
８ 記憶部
９ 制御部
２１ 第１撮像部
２１ａ，２２ａ レンズ部
２１ｂ，２２ｂ レンズ駆動部
２１ｃ，２２ｃ 絞り
２１ｄ，２２ｄ 絞り駆動部
２１ｅ，２２ｅ シャッタ
２１ｆ，２２ｆ シャッタ駆動部
２１ｇ，２２ｇ 撮像素子
２１ｈ，２２ｈ 信号処理部
２２ 第２撮像部
４１ 電源スイッチ
４２ レリーズスイッチ
４３ 切換スイッチ
４４ ズームスイッチ
６１ バックライト
６２ 表示パネル
６３ 視差バリア
７１ フロントパネル
７２ 駆動部
７３ 駆動電極
７４ 受信電極
７５ 検出部
８１ 画像データ記憶部
８２ プログラム記憶部
９１ 画像処理部
９２ 立体画像生成部
９３ 感度設定部
９４ ピント設定部
９５ 絞り設定部
９６ 電子ズーム部
９７ 飛び出し設定部
９８ 表示制御部
Ｌ１，Ｌ２ 光軸
Ｏ１ 右目
Ｏ２ 左目
Ｏ３ 手

Claims (7)

1. 互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを組み合わせて生成された３次元画像を表示する表示部と、
   前記表示部の表示画面上に設けられ、外部からの物体の接触位置または表面付近の物体の存在位置を検出するとともに、該検出結果に応じた信号の入力を受け付けるタッチパネルと、
   前記３次元画像が前記表示画面と直交する垂直な方向へ仮想的に飛び出した距離に基づいて、前記タッチパネルの検出感度を設定する感度設定部と、
   を備えたことを特徴とする表示装置。
2. 前記感度設定部は、前記３次元画像に含まれる被写体の領域毎に前記タッチパネルの検出感度を設定することを特徴とする請求項１に記載の表示装置。
3. 異なる位置から撮影し、互いの視野の左右方向の一端部同士が重なりを有する２つの画像データを生成する撮像部と、
   前記撮像部が生成した前記２つの画像データを、前記表示画面における水平方向の１画素毎に交互に並べて前記表示部に出力する制御を行うことによって、前記３次元画像を前記表示部に表示させる表示制御部と、
   をさらに備えたことを特徴とする請求項１または２に記載の表示装置。
4. 前記表示制御部は、前記表示部が表示する前記３次元画像に含まれ、前記タッチパネルが受け付けた信号によって指定された被写体の３次元的な表示態様を変更することを特徴とする請求項３に記載の表示装置。
5. 前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体に対し、前記撮像部のピントを合わせるピント設定部をさらに備え、
   前記表示制御部は、前記ピント設定部が被写体にピントを合わせた前記２つの画像データを用いた３次元画像を前記表示部に表示させる制御を行うことを特徴とする請求項３または４に記載の表示装置。
6. 前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体の一部を拡大する電子ズーム部をさらに備え、
   前記表示制御部は、前記電子ズーム部によって拡大された前記２つの画像データを用いた３次元画像を前記表示部に表示させる制御を行うことを特徴とする請求項３〜５のいずれか一つに記載の表示装置。
7. 前記２つの画像データに含まれ、前記タッチパネルが受け付けた信号によって指定された被写体に対し、前記２つの画像データにおける視差を調整することによって前記表示画面上から前記表示画面と直交する垂直な方向へ仮想的に飛び出す距離を設定する飛び出し設定部をさらに備え、
   前記表示制御部は、前記被写体が前記飛び出し設定部で設定された飛び出す分だけ仮想的に３次元画像を前記表示部に表示させる制御を行うことを特徴とする請求項３〜６のいずれか一つに記載の表示装置。

Images