JP2012088688A - Image display device - Google Patents

Image display device Download PDF

Info

Publication number
JP2012088688A
JP2012088688A JP2011187402A JP2011187402A JP2012088688A JP 2012088688 A JP2012088688 A JP 2012088688A JP 2011187402 A JP2011187402 A JP 2011187402A JP 2011187402 A JP2011187402 A JP 2011187402A JP 2012088688 A JP2012088688 A JP 2012088688A
Authority
JP
Japan
Prior art keywords
image
hand
user
target object
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2011187402A
Other languages
Japanese (ja)
Other versions
JP5360166B2 (en
Inventor
Hidenori Kuribayashi
英範 栗林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2011187402A priority Critical patent/JP5360166B2/en
Priority to US13/238,395 priority patent/US20120069055A1/en
Priority to CN2011102910629A priority patent/CN102413346A/en
Publication of JP2012088688A publication Critical patent/JP2012088688A/en
Application granted granted Critical
Publication of JP5360166B2 publication Critical patent/JP5360166B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an image display device which enables image operation according to movement of a user's hand without impairing visibility of an image.SOLUTION: A digital photo frame 100 is provided with a three-dimensional position detecting camera 102 as detection means for detecting the movement of the user's hand. A controller 104 detects a three-dimensional position of the user's hand and a change in the three-dimensional position thereof between frames based on images shot by the three-dimensional position detecting camera 102 to change a playback state of the image on a 3D monitor 106 according to the detection results. For example, when the user's hand is not shown in the image input from the three-dimensional position detecting camera 102, the image is two-dimensionally displayed on the monitor 106, and when detecting that the hand is shown, the two-dimensional display is changed to three-dimensional display.

Description

本発明は、画像表示装置に関する。   The present invention relates to an image display device.

次のような操作制御装置が知られている。この操作制御装置は、ユーザーの手の動きに応じた画像を操作することができる(例えば、特許文献1)。   The following operation control devices are known. This operation control device can operate an image according to the movement of the user's hand (for example, Patent Document 1).

特開2010−81466号公報JP 2010-81466 A

しかしながら、従来の操作制御装置では、手をイメージ化した図形を画像上に表示することでユーザーに手を検出したことを報知するため、画像が見難くなるという問題があった。   However, the conventional operation control device has a problem that it is difficult to see the image because the user is notified that the hand has been detected by displaying a graphic image of the hand on the image.

本発明による画像表示装置は、対象物体を検出する検出手段と、検出手段によって対象物体が検出されたときに、画像を3次元表示する表示制御手段とを備えることを特徴とする。   An image display apparatus according to the present invention includes a detection unit that detects a target object, and a display control unit that displays a three-dimensional image when the target object is detected by the detection unit.

本発明によれば、画像を3次元表示することで、ユーザーに対象物体を検出したことを報知するので、画像が見難くならない。   According to the present invention, since the user is notified that the target object has been detected by displaying the image in three dimensions, the image is not difficult to see.

画像表示装置の一実施の形態の構成を示すブロック図である。It is a block diagram which shows the structure of one Embodiment of an image display apparatus. デジタルフォトフレームの外観例を模式的に示した図である。It is the figure which showed typically the example of the external appearance of the digital photo frame. 画像の再生状態の変更処理の流れを示すフローチャート図である。It is a flowchart figure which shows the flow of a change process of the reproduction state of an image. 再生中の画像を3D表示した場合の具体例を示す第1の図である。It is a 1st figure which shows the specific example at the time of carrying out 3D display of the image in reproduction | regeneration. 再生中の画像を3D表示した場合の具体例を示す第2の図である。It is a 2nd figure which shows the specific example at the time of carrying out 3D display of the image in reproduction | regeneration. 第2の実施の形態において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of carrying out 3D display of the image in 2nd Embodiment. 第3の実施の形態において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of carrying out 3D display of the image in 3rd Embodiment. 第3の実施の形態において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of carrying out 3D display of the image in 3rd Embodiment. 第4の実施の形態において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of carrying out 3D display of the image in 4th Embodiment. 第5の実施の形態において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of carrying out 3D display of the image in 5th Embodiment. 変形例(12)において画像を3D表示した場合の具体例を示す図である。It is a figure which shows the specific example at the time of displaying an image in 3D in a modification (12).

(第1の実施の形態)
図1は、第1の実施の形態における画像表示装置の構成を示すブロック図である。画像表示装置としては、例えば、図2に示すようなデジタルフォトフレーム100が用いられ、このデジタルフォトフレーム100は、操作部材101と、3次元位置検出カメラ102と、接続IF(インターフェース)103と、制御装置104と、記憶媒体105と、3Dモニタ106とを備えている。
(First embodiment)
FIG. 1 is a block diagram showing the configuration of the image display apparatus according to the first embodiment. As the image display device, for example, a digital photo frame 100 as shown in FIG. 2 is used. The digital photo frame 100 includes an operation member 101, a three-dimensional position detection camera 102, a connection IF (interface) 103, A control device 104, a storage medium 105, and a 3D monitor 106 are provided.

操作部材101は、デジタルフォトフレーム100のユーザーによって操作される種々の装置、例えば操作ボタン等を含む。あるいは、3Dモニタ106にタッチパネルを搭載し、ユーザーは、タッチパネルを用いてデジタルフォトフレームを操作するようにしてもよい。   The operation member 101 includes various devices operated by the user of the digital photo frame 100, such as operation buttons. Alternatively, a touch panel may be mounted on the 3D monitor 106, and the user may operate the digital photo frame using the touch panel.

3次元位置検出カメラ102は、被写体の3次元位置を検出することができるカメラである。なお、3次元位置検出カメラ102としては、例えば単眼式3Dカメラ、2眼式3Dカメラ、または距離画像センサ等が用いられる。この3次元位置検出カメラ102は、図2に示すように、デジタルフォトフレーム100の前面に配置され、デジタルフォトフレーム100に対面するユーザーを撮影することができる。3次元位置検出カメラ102が備えるイメージセンサから出力される画像信号は制御装置104へ出力され、制御装置104は、画像信号に基づいて画像データを生成する。   The three-dimensional position detection camera 102 is a camera that can detect the three-dimensional position of a subject. As the three-dimensional position detection camera 102, for example, a monocular 3D camera, a two-lens 3D camera, a distance image sensor, or the like is used. As shown in FIG. 2, the three-dimensional position detection camera 102 is arranged in front of the digital photo frame 100 and can photograph a user facing the digital photo frame 100. An image signal output from an image sensor included in the three-dimensional position detection camera 102 is output to the control device 104, and the control device 104 generates image data based on the image signal.

接続IF103は、デジタルフォトフレーム100と外部機器とを接続するためのインターフェースである。本実施の形態では、デジタルフォトフレーム100は、この接続IF103を介して画像データが記録されている外部機器、例えばデジタルカメラ等と接続される。そして、制御装置104は、接続IF103を介して外部機器から画像データを取り込んで、記憶媒体105に記録する。なお、接続IF103としては、外部機器とデジタルフォトフレーム100とを有線接続するためのUSBインターフェースや、無線接続するための無線LANモジュールなどが用いられる。あるいは、接続IF103の代わりにメモリカードスロットを設け、該メモリカードスロットに画像データが記録されたメモリカードを挿入することにより、画像データを取り込むようにしてもよい。   The connection IF 103 is an interface for connecting the digital photo frame 100 and an external device. In the present embodiment, the digital photo frame 100 is connected via the connection IF 103 to an external device in which image data is recorded, such as a digital camera. Then, the control device 104 takes in the image data from the external device via the connection IF 103 and records it in the storage medium 105. As the connection IF 103, a USB interface for connecting an external device and the digital photo frame 100 by wire, a wireless LAN module for wireless connection, or the like is used. Alternatively, a memory card slot may be provided instead of the connection IF 103, and the image data may be captured by inserting a memory card in which image data is recorded in the memory card slot.

制御装置104は、CPU、メモリ、およびその他の周辺回路によって構成され、デジタルフォトフレーム100の全体を制御する。なお、制御装置104を構成するメモリは、例えばSDRAM等の揮発性のメモリである。このメモリは、CPUがプログラム実行時にプログラムを展開するためのワークメモリや、データを一時的に記録するためのバッファメモリを含む。   The control device 104 includes a CPU, a memory, and other peripheral circuits, and controls the entire digital photo frame 100. In addition, the memory which comprises the control apparatus 104 is volatile memories, such as SDRAM, for example. This memory includes a work memory for the CPU to expand the program when the program is executed, and a buffer memory for temporarily recording data.

記憶媒体105は、フラッシュメモリ等の不揮発性のメモリであって、制御装置104によって実行されるプログラムや、接続IF103を介して取り込まれた画像データ等が記録される。3Dモニタ106は、3次元表示が可能なモニタであって、図2に示すように、再生対象の画像2bを3D表示することが可能である。なお、3Dモニタ106は、画像2bを3次元表示だけでなく2次元表示することもできる。また、3次元表示が可能なモニタとしては、例えば裸眼式や眼鏡式等の公知の方式で3D表示を行う3Dモニタが用いられる。   The storage medium 105 is a non-volatile memory such as a flash memory, and stores a program executed by the control device 104, image data captured via the connection IF 103, and the like. The 3D monitor 106 is a monitor capable of three-dimensional display, and can display the image 2b to be reproduced in 3D as shown in FIG. Note that the 3D monitor 106 can display not only the three-dimensional image 2b but also two-dimensionally. As a monitor capable of three-dimensional display, for example, a 3D monitor that performs 3D display by a known method such as a naked eye type or a glasses type is used.

本実施の形態におけるデジタルフォトフレーム100は、制御装置104は、3次元位置検出カメラ102によって撮影された画像に基づいてユーザーの手2aの3次元位置、およびフレーム間での3次元位置の変化を検出し、その検出結果に応じて画像2bの再生状態を変更する。以下、制御装置104による、ユーザーの手2aの3次元位置、およびフレーム間での3次元位置の変化に応じた画像2bの再生状態の変更処理について説明する。なお、以下の説明では、制御装置104は、3次元位置検出カメラ102から入力される画像内にユーザーの手2aが写っていない場合には、画像2bを3Dモニタ106に2次元表示させ、手2aが写っていることを検出したときに3次元表示に変化させる例について説明する。   In the digital photo frame 100 according to the present embodiment, the control device 104 changes the three-dimensional position of the user's hand 2a based on the image taken by the three-dimensional position detection camera 102 and the change in the three-dimensional position between frames. Then, the reproduction state of the image 2b is changed according to the detection result. Hereinafter, processing for changing the reproduction state of the image 2b according to the change in the three-dimensional position of the user's hand 2a and the three-dimensional position between frames by the control device 104 will be described. In the following description, when the user's hand 2a is not shown in the image input from the three-dimensional position detection camera 102, the control device 104 displays the image 2b on the 3D monitor 106 in two dimensions. An example of changing to a three-dimensional display when it is detected that 2a is captured will be described.

図3は、ユーザーの手2aの3次元位置、およびフレーム間での3次元位置の変化に応じた画像の再生状態の変更処理の流れを示すフローチャートである。図3に示す処理は、3Dモニタ106への画像2bの再生が開始されると起動するプログラムとして、制御装置104によって実行される。なお、プログラムの実行開始時点では、まだユーザーの手2aの3次元位置は検出されていないので、上述したように画像2bは3Dモニタ106に2次元表示される。   FIG. 3 is a flowchart showing the flow of processing for changing the reproduction state of an image in accordance with the change in the three-dimensional position of the user's hand 2a and the three-dimensional position between frames. The processing shown in FIG. 3 is executed by the control device 104 as a program that is activated when the reproduction of the image 2b on the 3D monitor 106 is started. Note that since the three-dimensional position of the user's hand 2a has not yet been detected at the start of program execution, the image 2b is two-dimensionally displayed on the 3D monitor 106 as described above.

ステップS10において、制御装置104は、3次元位置検出カメラ102による画像の撮影を開始する。本実施の形態では、例えば、3次元位置検出カメラ102は、所定のフレームレートで撮影を行うこととし、制御装置104には、3次元位置検出カメラ102から該フレームレートに応じた所定の時間間隔で連続して画像データが入力される。その後、ステップS20へ進む。   In step S <b> 10, the control device 104 starts capturing an image with the three-dimensional position detection camera 102. In the present embodiment, for example, the three-dimensional position detection camera 102 performs shooting at a predetermined frame rate, and the control device 104 transmits a predetermined time interval corresponding to the frame rate from the three-dimensional position detection camera 102. The image data is input continuously. Then, it progresses to step S20.

ステップS20では、制御装置104は、3次元位置検出カメラ102から入力される画像データに基づいて、入力画像内におけるユーザーの手2aの3次元位置を検出したか否かを判断する。例えば、あらかじめユーザーの手2aの画像をテンプレート画像として記録しておき、制御装置104は、入力画像とテンプレート画像とをマッチングすることにより、入力画像内にユーザーの手2aが写っているか否かを判定し、写っていた場合には、その手2aの3次元位置を検出する。ステップS20で否定判断した場合には、後述するステップS60へ進む。これに対して、ステップS20で肯定判断した場合には、ステップS30へ進む。   In step S20, the control device 104 determines whether or not the three-dimensional position of the user's hand 2a in the input image has been detected based on the image data input from the three-dimensional position detection camera 102. For example, an image of the user's hand 2a is recorded in advance as a template image, and the control device 104 matches the input image with the template image to determine whether or not the user's hand 2a is reflected in the input image. If it is determined and the image is captured, the three-dimensional position of the hand 2a is detected. If a negative determination is made in step S20, the process proceeds to step S60 described later. On the other hand, if a positive determination is made in step S20, the process proceeds to step S30.

ステップS30では、制御装置104は、ユーザーと再生中の画像2bとの間の奥行き方向(前後方向)の距離を視覚的に変化させることにより、3Dモニタ106に再生中の画像2bを2次元表示から3次元表示へ切り替える。例えば、制御装置104は、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に短くすることにより、図4(b)に示すように、画像2bが手前に飛び出すように3次元表示する。これにより、ユーザーに、3Dモニタ106に手をかざすと画像2bが手に吸い寄せられるような感覚を与えることができる。なお、制御装置104は、画像2bを視覚的にユーザーの手2aに近い位置まで飛び出させることにより、ユーザーに、視覚的に画像2bに触れたような感覚を与えることができる。   In step S30, the control device 104 two-dimensionally displays the image 2b being reproduced on the 3D monitor 106 by visually changing the distance in the depth direction (front-rear direction) between the user and the image 2b being reproduced. To 3D display. For example, the control device 104 visually shortens the distance in the depth direction between the user and the image 2b being reproduced from the two-dimensional display state, as shown in FIG. Is displayed three-dimensionally so that it pops out. Accordingly, it is possible to give the user a feeling that the image 2b is sucked into the hand when the user holds the hand over the 3D monitor 106. Note that the control device 104 can visually give the user a feeling of touching the image 2b by projecting the image 2b to a position close to the user's hand 2a.

あるいは、制御装置104は、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に長くすることにより、図5(b)に示すように、画像2bが奥に沈み込むように3次元表示する。これにより、ユーザーに、3Dモニタ106に手をかざすと、その手によって画像2bが奥に押し込まれたような感覚を与えることができる。なお、ステップS30において、制御装置104が図4(b)に示すように3次元表示に切り替えるか、図5(b)に示すように3次元表示に切り替えるかは、ユーザーによってあらかじめ選択され、設定されているものとする。   Alternatively, the control device 104 visually increases the distance in the depth direction between the user and the image 2b being reproduced from the two-dimensional display state, as shown in FIG. Is displayed three-dimensionally so that is sinking in the back. As a result, when the user holds his / her hand over the 3D monitor 106, the user can feel as if the image 2b has been pushed inward by the hand. In step S30, whether the control device 104 switches to the three-dimensional display as shown in FIG. 4B or the three-dimensional display as shown in FIG. It is assumed that

その後、ステップS40へ進み、制御装置104は、3次元位置検出カメラ102から時系列で入力される画像データ間での画像内における手2aの3次元位置の変化を監視することにより、ユーザーの手2aの動きを検出する。ステップS40でユーザーの手2aの動きを検出しない場合には、後述するステップS60へ進む。これに対して、ステップS40でユーザーの手2aの動きを検出した場合には、ステップS50へ進む。   Thereafter, the process proceeds to step S40, and the control device 104 monitors the change in the three-dimensional position of the hand 2a in the image between the image data input in time series from the three-dimensional position detection camera 102, thereby allowing the user's hand. 2a motion is detected. If the movement of the user's hand 2a is not detected in step S40, the process proceeds to step S60 described later. On the other hand, when the movement of the user's hand 2a is detected in step S40, the process proceeds to step S50.

ステップS50では、制御装置104は、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的にさらに変化させる。まず、図4(b)に示したように、画像2bを手前に浮かび上がらせることによって3次元表示した場合について説明する。この場合には、制御装置104は、例えば、ユーザーの手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、図4(c)に示すように、図4(b)に示した状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を短くして、画像2bの飛び出し量を大きくする。これによって、ユーザーには、手を3Dモニタ106に近づけたことにより、さらに画像2bが手に吸い寄せられてくるような感覚を与えることができる。   In step S50, the control device 104 visually further changes the distance in the depth direction between the user and the image 2b being reproduced. First, as shown in FIG. 4B, a case will be described in which the image 2b is displayed in a three-dimensional manner by floating upward. In this case, for example, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved in a direction approaching the 3D monitor 106, as shown in FIG. From the state shown in (b), the distance in the depth direction between the user and the image 2b being reproduced is shortened to increase the pop-out amount of the image 2b. Accordingly, it is possible to give the user a feeling that the image 2b is further sucked by the hand by bringing the hand close to the 3D monitor 106.

また、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106から遠ざかる方向に移動したことを検出した場合には、図4(b)に示した状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を長くして、画像2bの飛び出し量を小さくする。これによって、ユーザーには、手を3Dモニタ106から遠ざけたことにより、画像2bが手から遠ざかったような感覚を与えることができる。なお、この場合の画像の飛出し量は、ユーザーにとって手2aと画像2bとの距離が視覚的に常に一定になるように変化させるようにするとともに、画像の飛出し量の最大量を両眼視差量で1度程度として、画像2bの自然な立体感を損なわないようにする。   In addition, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved away from the 3D monitor 106, the control device 104, from the state shown in FIG. The distance in the depth direction from 2b is increased to reduce the pop-out amount of the image 2b. Thus, the user can be given a feeling that the image 2b has moved away from the hand by moving the hand away from the 3D monitor 106. In this case, the image projection amount is changed so that the distance between the hand 2a and the image 2b is visually constant for the user, and the maximum amount of the image projection is set for both eyes. The parallax amount is set to about 1 degree so as not to impair the natural stereoscopic effect of the image 2b.

次に、図5(b)に示したように、画像2bを奥に沈み込むように変化させることによって3次元表示した場合について説明する。この場合には、制御装置104は、例えば、ユーザーの手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、図5(c)に示すように、図5(b)に示した状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を長くして、画像2bの沈み込み量を大きくする。これによって、ユーザーには、手を3Dモニタ106に近づけたことにより、さらに画像が押し込まれたような感覚を与えることができる。   Next, as shown in FIG. 5B, a case will be described in which the image 2b is displayed in a three-dimensional manner by being changed so as to sink into the back. In this case, for example, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved in a direction approaching the 3D monitor 106, as shown in FIG. From the state shown in (b), the distance in the depth direction between the user and the image 2b being reproduced is increased to increase the sinking amount of the image 2b. Accordingly, it is possible to give the user a sense that the image is further pushed in by bringing the hand close to the 3D monitor 106.

また、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106から遠ざかる方向に移動したことを検出した場合には、図4(b)に示した状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を短くして、画像2bの沈み込み量を小さくする。これによって、ユーザーには、手を3Dモニタ106から遠ざけたことにより、画像2bの沈み込みが小さくなったような感覚を与えることができる。なお、この場合の画像の沈み込み量は、ユーザーにとって手2aと画像2bとの距離が視覚的に一定になるように変化させるようにするとともに、画像の沈み込み量の最大量を両眼視差量で1度程度として、画像2bの自然な立体感を損なわないようにする。   In addition, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved away from the 3D monitor 106, the control device 104, from the state shown in FIG. The distance in the depth direction from 2b is shortened to reduce the sinking amount of the image 2b. Accordingly, it is possible to give the user a feeling that the sinking of the image 2b is reduced by moving the hand away from the 3D monitor 106. In this case, the amount of image sinking is changed so that the distance between the hand 2a and the image 2b is visually constant for the user, and the maximum amount of image sinking is set to binocular parallax. The amount is set to about 1 degree so as not to impair the natural stereoscopic effect of the image 2b.

その後、ステップS60へ進み、制御装置104は、ユーザーによって、画像の再生を終了するように指示されたか否かを判断する。ステップS60で否定判断した場合には、ステップS20へ戻る。これに対して、ステップS60で肯定判断した場合には、処理を終了する。   Thereafter, the process proceeds to step S60, and the control device 104 determines whether or not the user has instructed to end the reproduction of the image. If a negative determination is made in step S60, the process returns to step S20. On the other hand, when an affirmative determination is made in step S60, the process ends.

以上説明した第1の実施の形態によれば、以下のような作用効果を得ることができる。
(1)制御装置104は、3次元位置検出カメラ102からの入力画像に基づいてユーザーの手2aの3次元位置を検出したときに、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に変化させることにより、3Dモニタ106に再生中の画像2bを2次元表示から3次元表示へ切り替えるようにした。これによって、ユーザーは、3Dモニタ106に手をかざしたときに、画像2bがユーザーの手に吸い寄せられるような感覚や、画像を奥に押し込む感覚を受けることができる。
According to the first embodiment described above, the following operational effects can be obtained.
(1) When the control device 104 detects the three-dimensional position of the user's hand 2a based on the input image from the three-dimensional position detection camera 102, the distance in the depth direction between the user and the image 2b being reproduced Is visually changed to switch the image 2b being reproduced on the 3D monitor 106 from the two-dimensional display to the three-dimensional display. Thus, when the user holds his / her hand over the 3D monitor 106, the user can receive a feeling that the image 2b is sucked into the user's hand or a feeling that the image is pushed inward.

(2)制御装置104は、ユーザーの手2aの動きを検出し、手2aの動きに応じて、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的にさらに変化させるようにした。これによって、ユーザーは、手を動かすことによって直感的に画像2bの飛出し量や沈み込み量を変化させることができる。 (2) The control device 104 detects the movement of the user's hand 2a and visually changes the distance in the depth direction between the user and the image 2b being reproduced according to the movement of the hand 2a. did. Thus, the user can intuitively change the amount of projection and the amount of sinking of the image 2b by moving his / her hand.

(3)制御装置104は、ユーザーにとって手2aと画像2bとの距離が視覚的に常に一定になるように、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に変化させるようにした。これによって、ユーザーは、手の動きに追従して画像の飛出し量や沈み込み量が変化しているように感じることができる。 (3) The control device 104 visually changes the distance in the depth direction between the user and the image 2b being reproduced so that the distance between the hand 2a and the image 2b is always constant for the user. I did it. As a result, the user can feel as if the amount of projecting or sinking of the image changes following the movement of the hand.

(4)制御装置104は、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に短くすることにより、画像2bが手前に飛び出すように3次元表示するようにした。これにより、ユーザーに、3Dモニタ106に手をかざすと画像2bが手に吸い寄せられるような感覚を与えることができる。 (4) From the state of the two-dimensional display, the control device 104 visually reduces the distance in the depth direction between the user and the image 2b being reproduced so that the image 2b jumps out to the front. I tried to do it. Accordingly, it is possible to give the user a feeling that the image 2b is sucked into the hand when the user holds the hand over the 3D monitor 106.

(5)制御装置104は、画像2bを視覚的にユーザーの手2aに近い位置まで飛び出させるようにした。これによって、ユーザーに、視覚的に画像2bに触れたような感覚を与えることができる。 (5) The control device 104 makes the image 2b pop out visually to a position close to the user's hand 2a. As a result, it is possible to give the user a sense of touching the image 2b visually.

(6)制御装置104は、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に長くすることにより、画像2bが奥に沈み込むように3次元表示するようにした。これにより、ユーザーに、3Dモニタ106に手をかざすと、その手によって画像2bが奥に押し込まれたような感覚を与えることができる。 (6) From the state of the two-dimensional display, the control device 104 increases the distance in the depth direction between the user and the image 2b being reproduced visually so that the image 2b sinks into the back. Displayed. As a result, when the user holds his / her hand over the 3D monitor 106, the user can feel as if the image 2b has been pushed inward by the hand.

(第2の実施の形態)
図面を参照して、本発明による第2の実施の形態について説明する。第2の実施の形態では、第1の実施の形態と画像2bの再生状態の変更処理が異なっているため、相違点を中心に詳しく説明する。なお、画像2bの再生状態の変更処理以外については、第1の実施の形態と同様のため、説明を省略する。
(Second Embodiment)
A second embodiment according to the present invention will be described with reference to the drawings. In the second embodiment, since the process for changing the reproduction state of the image 2b is different from that in the first embodiment, the difference will be described in detail. Since the processing other than the processing for changing the reproduction state of the image 2b is the same as that of the first embodiment, the description thereof is omitted.

第2の実施の形態の制御装置104は、ユーザーの手2aの3次元位置を検出した場合には、3Dモニタ106に再生中の画像2bの形状を球状に変化させると共にその球状に応じた奥行きを視覚的に与えるように3次元表示させる。   When the control device 104 according to the second embodiment detects the three-dimensional position of the user's hand 2a, the control device 104 changes the shape of the image 2b being reproduced on the 3D monitor 106 to a spherical shape and the depth corresponding to the spherical shape. Is displayed in a three-dimensional manner.

たとえば、制御装置104は、図6(a)に示す2次元表示の状態から、図6(b)に示すように画像2bの形状を画面から手前に飛び出すような球状に3次元表示させる。これにより、ユーザーに、3Dモニタ106に手2aをかざすと画像2bが手2aに吸い寄せられるような感覚を与えることができる。   For example, from the two-dimensional display state shown in FIG. 6A, the control device 104 causes the shape of the image 2b to be displayed in a three-dimensional shape in a spherical shape so as to jump out from the screen as shown in FIG. 6B. Accordingly, it is possible to give the user a feeling that the image 2b is attracted to the hand 2a when the hand 2a is held over the 3D monitor 106.

また、制御装置104は、2次元表示の状態から、画像2bの形状を画面の奥に沈み込むような球状に3次元表示させるようにしてもよい。これにより、ユーザーに、3Dモニタ106に手2aをかざすと、その手2aによって画像2bが奥に押し込まれたような感覚を与えることができる。   Further, the control device 104 may display the shape of the image 2b in a spherical shape that sinks into the back of the screen from the two-dimensional display state. As a result, when the user holds the hand 2a over the 3D monitor 106, the user can feel as if the image 2b has been pushed inward by the hand 2a.

なお、制御装置104が手前に飛び出すような3次元表示に切り替えるか、奥に沈み込むような3次元表示に切り替えるかは、ユーザーによってあらかじめ選択され、設定されているものとする。   Note that it is assumed that the user has previously selected and set whether to switch to the three-dimensional display in which the control device 104 jumps out to the front or the three-dimensional display to sink in the back.

その後、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、画像2bの飛び出し量または沈み込み量を大きくする。これにより、手2aを3Dモニタ106に近づけたことで画像2bがさらに吸い寄せられた感覚、または、押し込まれた感覚をユーザーに与えることができる。   Thereafter, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved in a direction approaching the 3D monitor 106, the control device 104 increases the amount of protrusion or sinking of the image 2b. Accordingly, it is possible to give the user a feeling that the image 2b is further sucked or pushed in by bringing the hand 2a closer to the 3D monitor 106.

一方、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106から遠ざかる方向に移動したことを検出した場合には、画像2bの飛び出し量または沈み込み量を小さくする。これにより、手2aを3Dモニタ106から遠ざけたことで画像2bの吸い寄せ量、または、押し込み量が小さくなった感覚をユーザーに与えることができる。   On the other hand, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved away from the 3D monitor 106, the control device 104 reduces the amount of projection or sinking of the image 2b. Accordingly, it is possible to give the user a feeling that the amount of suction or push-in of the image 2b is reduced by moving the hand 2a away from the 3D monitor 106.

以上説明した第2の実施の形態によれば、以下のような作用効果を得ることができる。
(1)デジタルフォトフレーム100は、ユーザーの手2aを検出する制御装置104と、制御装置104によってユーザーの手2aが検出されたときに、画像2bを3次元表示する制御装置104とを備えるので、画像2bを3次元表示することでユーザーに手2aを検出したことを報知でき、画像2bが見難くならない。
According to the second embodiment described above, the following operational effects can be obtained.
(1) Since the digital photo frame 100 includes the control device 104 that detects the user's hand 2a, and the control device 104 that displays the image 2b three-dimensionally when the user's hand 2a is detected by the control device 104. By displaying the image 2b three-dimensionally, the user can be notified that the hand 2a has been detected, and the image 2b does not become difficult to see.

(2)上記(1)のデジタルフォトフレーム100において、制御装置104は、ユーザーの手2aが検出されたときに、画像2bの形状を変化させると共に該形状に応じた奥行きを視覚的に与えるように3次元表示するように構成したので、ユーザーに手2aを検出したことを一段とわかりやすく報知できる。 (2) In the digital photo frame 100 of (1), when the user's hand 2a is detected, the control device 104 changes the shape of the image 2b and visually gives a depth corresponding to the shape. Since it is configured to display three-dimensionally, it can be notified to the user that the hand 2a has been detected more clearly.

(第3の実施の形態)
図面を参照して、本発明による第3の実施の形態について説明する。第3の実施の形態では、第1の実施の形態と画像2bの再生状態の変更処理が異なっているため、相違点を中心に詳しく説明する。なお、画像2bの再生状態の変更処理以外については、第1の実施の形態と同様のため、説明を省略する。
(Third embodiment)
With reference to the drawings, a third embodiment of the present invention will be described. In the third embodiment, since the process for changing the reproduction state of the image 2b is different from that in the first embodiment, the differences will be mainly described. Since the processing other than the processing for changing the reproduction state of the image 2b is the same as that of the first embodiment, the description thereof is omitted.

図7(a)に示すように、ユーザーが手2aを横に移動するときには、手2aが3Dモニタ106の奥行き方向に対して、たとえば肩などを支点として円弧状に移動する。そこで、第3の実施の形態では、手2aの横方向の移動に応じて、画像2bが奥行き方向に対して円弧状に移動するように表示する。   As shown in FIG. 7A, when the user moves the hand 2 a sideways, the hand 2 a moves in an arc shape with respect to the depth direction of the 3D monitor 106, for example, using a shoulder as a fulcrum. Therefore, in the third embodiment, the image 2b is displayed so as to move in an arc shape with respect to the depth direction in accordance with the lateral movement of the hand 2a.

たとえば、制御装置104は、ユーザーの手2aの3次元位置を検出した場合には、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向(前後方向)の距離を視覚的に変化させることにより、画像2bが画面から手前に飛び出すように3次元表示する。   For example, when the control device 104 detects the three-dimensional position of the user's hand 2a, the control device 104 visually determines the distance in the depth direction (front-rear direction) between the user and the image 2b being reproduced from the two-dimensional display state. 3D display is performed so that the image 2b jumps out from the screen.

その後、手2aの3次元位置が横方向に移動したことを検出した場合には、図7(b)および図8に示すように、制御装置104は、手2aの移動方向に画像2bを移動させると共に、画像2bが画面の左端または右端に近づくほど画像2bの飛び出し量を小さくし、画像2bが画面の中央に近づくほど画像2bの飛びだし量を大きくする。すなわち、手2aが3Dモニタ106に近づくほど画像2bが手2aに近づき、手2aが3Dモニタ106から離れるほど画像2bが手2aから遠ざかるように表示する。これにより、手2aの動きに連動して画像2bが移動しながら手前に吸い寄せられる感覚をユーザーに与えることができる。   Thereafter, when it is detected that the three-dimensional position of the hand 2a has moved in the horizontal direction, the control device 104 moves the image 2b in the moving direction of the hand 2a, as shown in FIG. 7B and FIG. In addition, as the image 2b approaches the left or right end of the screen, the pop-out amount of the image 2b decreases, and as the image 2b approaches the center of the screen, the pop-out amount of the image 2b increases. That is, the image 2b approaches the hand 2a as the hand 2a approaches the 3D monitor 106, and the image 2b moves away from the hand 2a as the hand 2a moves away from the 3D monitor 106. Thereby, it is possible to give the user a feeling that the image 2b is sucked forward while moving in conjunction with the movement of the hand 2a.

また、制御装置104は、ユーザーの手2aの3次元位置を検出した場合には、2次元表示の状態から、ユーザーと再生中の画像2bとの間の奥行き方向(前後方向)の距離を視覚的に変化させることにより、画像2bが画面の奥に沈み込むように3次元表示してもよい。   Further, when detecting the three-dimensional position of the user's hand 2a, the control device 104 visually determines the distance in the depth direction (front-rear direction) between the user and the image 2b being reproduced from the two-dimensional display state. The image 2b may be displayed three-dimensionally so that the image 2b sinks into the back of the screen.

この場合、手2aの3次元位置が横方向に移動したことを検出した場合には、図7(c)に示すように、制御装置104は、手2aの移動方向に画像2bを移動させると共に、画像2bが画面の左端または右端に近づくほど画像2bの沈み込み量を小さくし、画像2bが画面の中央に近づくほど画像2bの沈み込み量を大きくする。すなわち、手2aが3Dモニタ106に近づくほど画像2bが手2aから遠ざかり、手2aが3Dモニタ106から離れるほど画像2bが手2aへ近づくように画像2bを表示する。これにより、手2aの動きに連動して画像2bが移動しながら画面の奥に押し込まれる感覚をユーザーに与えることができる。   In this case, when it is detected that the three-dimensional position of the hand 2a has moved in the horizontal direction, as shown in FIG. 7C, the control device 104 moves the image 2b in the moving direction of the hand 2a. As the image 2b approaches the left end or the right end of the screen, the sinking amount of the image 2b is reduced, and as the image 2b approaches the center of the screen, the sinking amount of the image 2b is increased. That is, the image 2b is displayed so that the image 2b moves away from the hand 2a as the hand 2a approaches the 3D monitor 106, and the image 2b approaches the hand 2a as the hand 2a moves away from the 3D monitor 106. Thereby, it is possible to give the user a feeling that the image 2b is pushed into the back of the screen while moving in conjunction with the movement of the hand 2a.

以上説明した第3の実施の形態によれば、以下のような作用効果を得ることができる。
(1)デジタルフォトフレーム100は、ユーザーの手2aを検出する制御装置104と、制御装置104によってユーザーの手2aが検出されたときに、画像2bを3次元表示する制御装置104とを備えるので、画像2bを3次元表示することでユーザーに手2aを検出したことを報知でき、画像2bが見難くならない。
According to the third embodiment described above, the following operational effects can be obtained.
(1) Since the digital photo frame 100 includes the control device 104 that detects the user's hand 2a, and the control device 104 that displays the image 2b three-dimensionally when the user's hand 2a is detected by the control device 104. By displaying the image 2b three-dimensionally, the user can be notified that the hand 2a has been detected, and the image 2b does not become difficult to see.

(2)上記(1)のデジタルフォトフレーム100において、ユーザーの手2aの動きを検出する制御装置104をさらに備え、制御装置104は、ユーザーの手2aの動きが検出された場合には、ユーザーの手2aの動きに応じて、ユーザーの手2aと画像2bとの間の前後方向の距離を変化させるように構成したので、ユーザーは手2aを動かすことによって、直感的に画像2bの操作を指示することができる。 (2) The digital photo frame 100 of (1) further includes a control device 104 that detects the movement of the user's hand 2a. The control device 104 detects the movement of the user's hand 2a when the movement of the user's hand 2a is detected. Since the distance in the front-rear direction between the user's hand 2a and the image 2b is changed according to the movement of the user's hand 2a, the user intuitively operates the image 2b by moving the hand 2a. Can be directed.

(3)上記(2)のデジタルフォトフレーム100において、制御装置104は、ユーザーの手2aの動きに応じて、ユーザーの手2aと画像2bとの間の前後方向の距離を変化させながら画像2bを移動させるように構成したので、手2aの動きに連動して画像2bの操作を行い得ることをユーザーにわかりやすく報知することができる。 (3) In the digital photo frame 100 of (2) above, the control device 104 changes the image 2b while changing the distance in the front-rear direction between the user's hand 2a and the image 2b according to the movement of the user's hand 2a. Therefore, the user can be notified in an easy-to-understand manner that the operation of the image 2b can be performed in conjunction with the movement of the hand 2a.

(第4の実施の形態)
図面を参照して、本発明による第4の実施の形態について説明する。第4の実施の形態は、動画像を2次元表示させ、動画像を操作するための操作アイコンを3次元表示させるように構成される。なお、第1の実施の形態と画像表示装置の構成(図1)は同様であるため、説明を省略する。
(Fourth embodiment)
A fourth embodiment according to the present invention will be described with reference to the drawings. The fourth embodiment is configured to display a moving image two-dimensionally and to display an operation icon for operating the moving image three-dimensionally. Since the configuration of the first embodiment and the image display apparatus (FIG. 1) are the same, the description thereof is omitted.

第4の実施の形態の制御装置104は、図9(a)に示すように、3Dモニタ106に動画像3を2次元表示させるとともに、3次元位置カメラ102による画像の撮影を行う。   As shown in FIG. 9A, the control device 104 according to the fourth embodiment displays the moving image 3 on the 3D monitor 106 in a two-dimensional manner and captures an image with the three-dimensional position camera 102.

そして、制御装置104は、3次元位置検出カメラ102から入力された画像データに基づいて、ユーザーの手2aの3次元位置を検出した場合には、図9(b)に示すように、3Dモニタ106に操作アイコン4a〜4cを画面から手前に飛び出すように3次元表示させる。たとえば、操作アイコン4aは動画像の巻き戻しに対応するアイコンであり、操作アイコン4bは動画像の停止に対応するアイコンであり、操作アイコン4cは動画像の早送りに対応するアイコンである。これにより、ユーザーには、3Dモニタ106に手2aをかざすと、操作アイコン4a〜4cが手2aに吸い寄せられるような感覚を与えることができる。   When the control device 104 detects the three-dimensional position of the user's hand 2a based on the image data input from the three-dimensional position detection camera 102, as shown in FIG. The operation icons 4a to 4c are displayed on a three-dimensional display 106 so as to jump out from the screen. For example, the operation icon 4a is an icon corresponding to the rewinding of the moving image, the operation icon 4b is an icon corresponding to the stop of the moving image, and the operation icon 4c is an icon corresponding to the fast-forwarding of the moving image. Accordingly, when the user holds the hand 2a over the 3D monitor 106, the user can feel that the operation icons 4a to 4c are attracted to the hand 2a.

その後、制御装置104は、手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、図9(c)に示すように、図9(b)に示した状態から、手2aと操作アイコン4a〜4cとの間の奥行き方向の距離を短くして、操作アイコン4a〜4cの飛び出し量を大きくする。これによって、ユーザーには、手2aを3Dモニタ106に近づけたことにより、さらに操作アイコン4a〜4cが手2aに吸い寄せられてくるような感覚を与えることができる。   Thereafter, when the control device 104 detects that the three-dimensional position of the hand 2a has moved in a direction approaching the 3D monitor 106, as shown in FIG. 9C, the state shown in FIG. Therefore, the distance in the depth direction between the hand 2a and the operation icons 4a to 4c is shortened, and the pop-out amount of the operation icons 4a to 4c is increased. As a result, the user can be given a feeling that the operation icons 4a to 4c are attracted to the hand 2a by bringing the hand 2a closer to the 3D monitor 106.

またこのとき制御装置104は、手2aの3次元位置に対応する操作アイコン(すなわち手2aの3次元位置と表示位置が最も近い操作アイコン)4aの色を、他の操作アイコン4b、4cと異なる色で表示させることにより、操作アイコン4aを強調表示する。これによって、ユーザーに、操作アイコン4aが操作候補であることを報知することができる。   Further, at this time, the control device 104 differs in color of the operation icon 4a corresponding to the three-dimensional position of the hand 2a (that is, the operation icon whose display position is closest to the three-dimensional position of the hand 2a) from the other operation icons 4b and 4c. By displaying in color, the operation icon 4a is highlighted. Thereby, it is possible to notify the user that the operation icon 4a is an operation candidate.

さらに制御装置104は、図9(d)に示すように、手2aの3次元位置が3Dモニタ106にさらに近づく方向に移動し、手2aと3Dモニタ106との距離が所定値(たとえば5cm)以内になったことを検出した場合には、強調表示していた操作アイコン4aに対応する処理(ここでは動画像3の巻き戻し)を実行する。これにより、ユーザーには、手2aが操作アイコン4aにタッチして操作アイコン4aに対応する処理が実行されたような感覚を与えることができる。   Further, as shown in FIG. 9D, the control device 104 moves in such a direction that the three-dimensional position of the hand 2a further approaches the 3D monitor 106, and the distance between the hand 2a and the 3D monitor 106 is a predetermined value (for example, 5 cm). When it is detected that the number is within, processing corresponding to the highlighted operation icon 4a (here, rewinding the moving image 3) is executed. Thereby, it is possible to give the user a feeling that the hand 2a touches the operation icon 4a and the process corresponding to the operation icon 4a is executed.

一方、制御装置104は、手2aの3次元位置が3Dモニタ106に遠ざかる方向に移動したことを検出した場合には、手2aと操作アイコン4a〜4cとの間の奥行き方向の距離を長くして、操作アイコン4a〜4cの飛び出し量を小さくする。これによって、ユーザーには、手2aを3Dモニタ106から遠ざけたことにより、操作アイコン4a〜4cが手2aから遠ざかったような感覚を与えることができる。   On the other hand, when the control device 104 detects that the three-dimensional position of the hand 2a is moved away from the 3D monitor 106, the control device 104 increases the distance in the depth direction between the hand 2a and the operation icons 4a to 4c. Thus, the pop-out amount of the operation icons 4a to 4c is reduced. As a result, the user can feel that the operation icons 4a to 4c have moved away from the hand 2a by moving the hand 2a away from the 3D monitor 106.

以上説明した第4の実施の形態によれば、以下のような作用効果を得ることができる。
(1)デジタルフォトフレーム100は、ユーザーの手2aを検出する制御装置104と、制御装置104によってユーザーの手2aが検出されたときに、操作アイコン4a〜4cを3次元表示する制御装置104とを備えるので、操作アイコン4a〜4cを3次元表示することでユーザーに手2aを検出したことを報知でき、操作アイコン4a〜4cが見難くならない。
According to the fourth embodiment described above, the following operational effects can be obtained.
(1) The digital photo frame 100 includes a control device 104 that detects the user's hand 2a, and a control device 104 that three-dimensionally displays the operation icons 4a to 4c when the user's hand 2a is detected by the control device 104. Since the operation icons 4a to 4c are three-dimensionally displayed, the user can be notified that the hand 2a has been detected, and the operation icons 4a to 4c are not difficult to see.

(2)上記(1)のデジタルフォトフレーム100において、ユーザーの手2aの動きを検出する制御装置104をさらに備え、制御装置104は、ユーザーの手2aの動きが検出された場合には、ユーザーの手2aの動きに応じて、ユーザーの手2aと操作アイコン4a〜4cとの間の前後方向の距離を変化させるように構成したので、ユーザーは手2aを動かすことによって、直感的に操作アイコン4a〜4cの操作を指示することができる。 (2) The digital photo frame 100 of (1) further includes a control device 104 that detects the movement of the user's hand 2a. The control device 104 detects the movement of the user's hand 2a when the movement of the user's hand 2a is detected. Since the distance in the front-rear direction between the user's hand 2a and the operation icons 4a to 4c is changed according to the movement of the user's hand 2a, the user intuitively operates the operation icon by moving the hand 2a. The operations 4a to 4c can be instructed.

(3)上記(2)のデジタルフォトフレーム100において、制御装置104は、ユーザーの手2aが3Dモニタ106に近づく方向へ動き、ユーザーの手2aと3Dモニタ106との距離が所定値以下になったことを検出した場合には、操作アイコン4aに対応付けられた処理を実行するように構成したので、ユーザーは手2aを動かすことによって、直感的に操作アイコン4aに対応付けられた処理の実行を指示することができる。 (3) In the digital photo frame 100 of (2) above, the control device 104 moves in a direction in which the user's hand 2a approaches the 3D monitor 106, and the distance between the user's hand 2a and the 3D monitor 106 becomes a predetermined value or less. If it is detected, the process associated with the operation icon 4a is executed. Therefore, the user intuitively executes the process associated with the operation icon 4a by moving the hand 2a. Can be instructed.

(第5の実施の形態)
図面を参照して、本発明による第5の実施の形態について説明する。第5の実施の形態では、第1の実施の形態と、画像2bの再生状態の変更処理が異なっているため、相違点を中心に詳しく説明する。なお、画像2bの再生状態の変更処理以外については、第1の実施の形態と同様のため、説明を省略する。
(Fifth embodiment)
A fifth embodiment according to the present invention will be described with reference to the drawings. The fifth embodiment is different from the first embodiment in the process of changing the reproduction state of the image 2b, and therefore will be described in detail focusing on the differences. Since the processing other than the processing for changing the reproduction state of the image 2b is the same as that of the first embodiment, the description thereof is omitted.

第5の実施の形態の制御装置104は、ユーザーの手2aの3次元位置を検出した場合には、ユーザーと再生中の画像2bとの間の奥行き方向の距離を視覚的に長くすることにより、図10(a)に示すように、画像2bが奥に沈み込むように3次元表示する。   When detecting the three-dimensional position of the user's hand 2a, the control device 104 according to the fifth embodiment visually lengthens the distance in the depth direction between the user and the image 2b being reproduced. As shown in FIG. 10A, three-dimensional display is performed so that the image 2b sinks deeply.

その後、制御装置104は、手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、図10(b)に示すように、画像2bを徐々に縮小させて表示すると共に、画像2bの周囲に画像2bの前後複数枚の画像(2c〜2j)を縮小して表示する。すなわち、3Dモニタ106には、これらの画像2b〜2jが格子状(たとえば3×3)に並んでサムネイル表示される。なお、サムネイル表示とは、サムネイルと呼ばれる縮小画像を並べて表示することである。また制御装置104は、これらのサムネイル画像2b〜2jを、図10(a)に示した状態から、沈み込み量が大きくなるように3次元表示する。   Thereafter, when the control device 104 detects that the three-dimensional position of the hand 2a has moved in a direction approaching the 3D monitor 106, the control device 104 gradually reduces and displays the image 2b as shown in FIG. In addition, a plurality of images (2c to 2j) before and after the image 2b are reduced and displayed around the image 2b. That is, on the 3D monitor 106, these images 2b to 2j are displayed as thumbnails in a grid pattern (for example, 3 × 3). Note that the thumbnail display is to display reduced images called thumbnails side by side. Further, the control device 104 displays these thumbnail images 2b to 2j three-dimensionally from the state shown in FIG.

さらにこのとき制御装置104は、矩形枠であるカーソルCsを、画像2bを囲む位置に表示させる。このカーソルCsは、サムネイル画像を選択するために用いられる。   Further, at this time, the control device 104 displays the cursor Cs, which is a rectangular frame, at a position surrounding the image 2b. This cursor Cs is used to select a thumbnail image.

その後、手2aが上下左右に移動したことを検出した場合には、制御装置104は、手の2aの移動方向に応じてカーソルCsを移動させる。たとえば、図10(b)の状態で手2aが左に移動した場合には、図10(c)に示すように、カーソルCsは画像2bの左隣の画像2iに移動される。   Thereafter, when it is detected that the hand 2a has moved up, down, left and right, the control device 104 moves the cursor Cs in accordance with the moving direction of the hand 2a. For example, when the hand 2a moves to the left in the state of FIG. 10B, the cursor Cs is moved to the image 2i adjacent to the left of the image 2b as shown in FIG. 10C.

この状態で、手2aが3Dモニタ106から遠ざかる方向に移動したことを検出した場合には、制御装置104は、図10(d)に示すように、検出した時点でカーソルCsが位置していた画像2iのみを拡大して表示する。このとき、制御装置104は、拡大した画像2iを、図10(c)に示した状態から、沈み込み量が小さくなるように3次元表示する。   In this state, when it is detected that the hand 2a has moved in the direction away from the 3D monitor 106, the control device 104 has positioned the cursor Cs at the time of detection as shown in FIG. Only the image 2i is enlarged and displayed. At this time, the control device 104 displays the enlarged image 2i three-dimensionally from the state shown in FIG.

その後、手2aが再び3Dモニタ106に近づく方向に移動したことを検出した場合には、制御装置104は、図10(e)に示すように、再生していた画像2iを徐々に縮小して表示すると共に、画像2iの周囲に画像2iの前後複数枚の画像(2b、2f〜2h、2j〜2m)を縮小表示する。また制御装置104は、これらのサムネイル画像(2b、2f〜2m)を、図10(d)に示した状態から、沈み込み量を大きくするように3次元表示する。   Thereafter, when it is detected that the hand 2a has moved again in the direction approaching the 3D monitor 106, the control device 104 gradually reduces the reproduced image 2i as shown in FIG. In addition to the display, a plurality of images (2b, 2f to 2h, 2j to 2m) before and after the image 2i are reduced and displayed around the image 2i. Further, the control device 104 displays these thumbnail images (2b, 2f to 2m) in a three-dimensional manner so as to increase the sinking amount from the state shown in FIG.

さらにこの状態で、手2aの横方向の移動量が所定閾値以上であることにより、手2aが横に大きく移動したことを検出した場合には、制御装置104は、サムネイル表示している9枚の画像(2b、2f〜2m)を、手2aの移動方向にまとめてスライドさせると共に、さらに前または後ろの9枚の画像もスライドさせて表示する。制御装置104は、このとき新たに表示する画像も奥に沈み込むように3次元表示する。なお、制御装置104は、手2aの横方向の移動量が所定閾値未満である場合には、上述したように、手2aの移動に応じてカーソルCsを移動させる。   Further, in this state, when the movement amount of the hand 2a in the horizontal direction is equal to or greater than a predetermined threshold value, and it is detected that the hand 2a has moved greatly in the horizontal direction, the control device 104 displays the nine thumbnails displayed. The images (2b, 2f to 2m) are slid together in the moving direction of the hand 2a, and the front or back nine images are also slid and displayed. At this time, the control device 104 performs a three-dimensional display so that the image to be newly displayed is also submerged. Note that, when the lateral movement amount of the hand 2a is less than the predetermined threshold, the control device 104 moves the cursor Cs according to the movement of the hand 2a as described above.

また、図10(d)に示した状態で、手2aが3Dモニタ106からさらに遠ざかる方向に移動したことを検出した場合には、制御装置104は、画像2iを2次元表示に戻す。   In the state shown in FIG. 10D, when it is detected that the hand 2a has moved further away from the 3D monitor 106, the control device 104 returns the image 2i to the two-dimensional display.

このように制御装置104は、手2aが3Dモニタ106に近づくと、サムネイル表示に切り替える。これにより、ユーザーは、画像を奥に押し込むような手2aの動きによって、サムネイル表示を直感的に指示することができる。   As described above, when the hand 2a approaches the 3D monitor 106, the control device 104 switches to the thumbnail display. As a result, the user can intuitively instruct thumbnail display by the movement of the hand 2a that pushes the image into the back.

そして、制御装置104は、サムネイル表示の状態において、手2aが上下左右に移動されるとカーソルCsを移動させ、手2aが横に大きく移動されるとサムネイル画像をスライドして切り替える。これにより、ユーザーは、手2aの振りによって、カーソルCsの移動やサムネイル画像の切替えを直感的に指示することができる。   Then, in the thumbnail display state, the control device 104 moves the cursor Cs when the hand 2a is moved up, down, left, and right, and slides and switches the thumbnail image when the hand 2a is largely moved horizontally. As a result, the user can intuitively instruct the movement of the cursor Cs and the switching of thumbnail images by the swing of the hand 2a.

また、制御装置104は、サムネイル表示の状態において、手2aが3Dモニタ106から遠ざかると、カーソルCsによって選択された画像を拡大表示する。これにより、ユーザーは、画像を手前に吸い寄せるような手2aの動きによって、画像の拡大を直感的に指示することができる。   The control device 104 enlarges and displays the image selected by the cursor Cs when the hand 2a moves away from the 3D monitor 106 in the thumbnail display state. As a result, the user can intuitively instruct the enlargement of the image by the movement of the hand 2a that sucks the image forward.

以上説明した第5の実施の形態によれば、以下のような作用効果を得ることができる。
(1)デジタルフォトフレーム100は、ユーザーの手2aを検出する制御装置104と、制御装置104によってユーザーの手2aが検出されたときに、画像2bを3次元表示する制御装置104とを備えるので、画像2bを3次元表示することでユーザーに手2aを検出したことを報知でき、画像2bが見難くならない。
According to the fifth embodiment described above, the following operational effects can be obtained.
(1) Since the digital photo frame 100 includes the control device 104 that detects the user's hand 2a, and the control device 104 that displays the image 2b three-dimensionally when the user's hand 2a is detected by the control device 104. By displaying the image 2b three-dimensionally, the user can be notified that the hand 2a has been detected, and the image 2b does not become difficult to see.

(2)上記(1)のデジタルフォトフレーム100において、ユーザーの手2aの動きを検出する制御装置104をさらに備え、制御装置104は、ユーザーの手2aの動きが検出された場合には、ユーザーの手2aの動きに応じて、ユーザーの手2aと画像2bとの間の前後方向の距離を変化させるように構成したので、ユーザーは手2aを動かすことによって、直感的に画像2bの操作を指示することができる。 (2) The digital photo frame 100 of (1) further includes a control device 104 that detects the movement of the user's hand 2a. The control device 104 detects the movement of the user's hand 2a when the movement of the user's hand 2a is detected. Since the distance in the front-rear direction between the user's hand 2a and the image 2b is changed according to the movement of the user's hand 2a, the user intuitively operates the image 2b by moving the hand 2a. Can be directed.

(3)上記(2)のデジタルフォトフレーム100において、制御装置104は、3Dモニタ106に近づく方向へのユーザーの手2aの動きが検出された場合には、画像2bを含む複数枚の画像2b〜2jを縮小して3次元表示するように構成したので、ユーザーは手2aを動かすことによって、直感的に画像2bの縮小表示を指示することができる。 (3) In the digital photo frame 100 of the above (2), when the movement of the user's hand 2a in the direction approaching the 3D monitor 106 is detected, the control device 104 includes a plurality of images 2b including the image 2b. Since 2j are reduced and displayed three-dimensionally, the user can intuitively instruct reduction display of the image 2b by moving the hand 2a.

―変形例―
なお、上述した実施の形態のカメラは、以下のように変形することもできる。
(1)上述した実施の形態では、デジタルフォトフレーム100は、フラッシュメモリ等の不揮発性のメモリで構成される記憶媒体105を備え、該記憶媒体105に再生対象の画像データを記録する例について説明した。しかしながら、記憶媒体105の代わりにメモリカードスロットを設け、該メモリカードスロットに記録されている画像データを再生対象とするようにしてもよい。
-Modification-
The camera according to the above-described embodiment can be modified as follows.
(1) In the embodiment described above, an example in which the digital photo frame 100 includes the storage medium 105 configured by a non-volatile memory such as a flash memory and the image data to be reproduced is recorded on the storage medium 105 will be described. did. However, a memory card slot may be provided in place of the storage medium 105, and image data recorded in the memory card slot may be set as a reproduction target.

(2)上述した実施の形態では、図4や図5に示したように、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106に近づいたか遠ざかったかによって画像2bの飛出し量や沈み込み量を変化させる例について説明した。しかしながら、制御装置104は、ユーザーが手2aをかざしている時間の長さに応じて、画像2bの飛出し量や沈み込み量を変化させるようにしてもよい。例えば、図4に示す例では、制御装置104は、ユーザーの手2aの検出を開始してからの経過時間が長くなるほど、徐々に再生中の画像2bの飛出し量を大きくするようにしてもよい。これによって、ユーザーには、手を3Dモニタ106に長くかざすほど、画像が手に吸い寄せられてくるような感覚を与えることができる。あるいは、図5に示す例では、制御装置104は、ユーザーの手2aの検出を開始してからの経過時間が長くなるほど、徐々に再生中の画像2bの沈み込み量を大きくするようにしてもよい。これによって、ユーザーには、手を3Dモニタ106に長くかざすほど、画像が奥に押し込まれていくような感覚を与えることができる。 (2) In the above-described embodiment, as shown in FIGS. 4 and 5, the control device 104 determines the amount of projection of the image 2 b depending on whether the three-dimensional position of the user's hand 2 a approaches or moves away from the 3D monitor 106. An example in which the amount of subsidence is changed has been described. However, the control device 104 may change the jumping amount or sinking amount of the image 2b according to the length of time that the user holds the hand 2a. For example, in the example illustrated in FIG. 4, the control device 104 may gradually increase the pop-out amount of the image 2b being reproduced as the elapsed time from the start of detection of the user's hand 2a increases. Good. Accordingly, it is possible to give the user a feeling that the image is sucked into the hand as the hand is held over the 3D monitor 106 for a long time. Alternatively, in the example illustrated in FIG. 5, the control device 104 may gradually increase the sinking amount of the image 2b being reproduced as the elapsed time from the start of detection of the user's hand 2a becomes longer. Good. As a result, the user can be given a feeling that the image is pushed deeper as the hand is held over the 3D monitor 106 longer.

(3)上述した実施の形態では、ステップS30において、制御装置104が図4(b)に示すように3次元表示に切り替えるか、図5(b)に示すように3次元表示に切り替えるかは、ユーザーによってあらかじめ選択され、設定されている例について説明した。しかしながら、制御装置104は、ユーザーの手2aの3次元位置を検出した段階では、画像2bを2次元表示したままとし、その後、ユーザーの手2aが3Dモニタ106から遠ざかったことを検出した場合には、図4(b)に示したように画像2bが飛び出すように3次元表示させ、ユーザーの手2aが3Dモニタ106に近づいたことを検出した場合には、図5(b)に示したように画像2bが沈み込むように3次元表示させるようにしてもよい。これにより、ユーザーには、3Dモニタ106から手を遠ざけると、それにともなって画像2bが手に吸い寄せられるような感覚を与えることができる。また、その一方で、3Dモニタ106に手を近づけると、それにともなって画像2bが奥に押し込まれるような感覚を与えることができる。 (3) In the above-described embodiment, whether the control device 104 switches to the three-dimensional display as shown in FIG. 4B or the three-dimensional display as shown in FIG. An example in which the user has selected and set in advance has been described. However, when the control device 104 detects the three-dimensional position of the user's hand 2a, the control device 104 keeps the image 2b displayed in two dimensions, and then detects that the user's hand 2a has moved away from the 3D monitor 106. Is displayed three-dimensionally so that the image 2b pops out as shown in FIG. 4 (b), and when it is detected that the user's hand 2a is close to the 3D monitor 106, it is shown in FIG. 5 (b). In this way, the image 2b may be displayed three-dimensionally so that it sinks. Thus, when the user moves his hand away from the 3D monitor 106, the user can be given a feeling that the image 2b is sucked into the hand. On the other hand, when the hand is brought close to the 3D monitor 106, it is possible to give a feeling that the image 2b is pushed into the back accordingly.

あるいは、制御装置104は、再生中の画像2bに応じて図4(b)に示す3次元表示方法と図5(b)に示す3次元表示方法とを切り替えるようにしてもよい。例えば、再生中の画像2bが風景画である場合には、ユーザーの手2aの3次元位置を検出したときに図5(b)に示す3次元表示に切り替え、再生中の画像2bが風景画以外の場合には、ユーザーの手2aの3次元位置を検出したときに図4(b)に示す3次元表示に切り替えるようにしてもよい。これによって、風景画のように、ユーザー2aから遠くにある景色を再生する場合には、ユーザーに画像2bが奥に沈み込んで遠くに表示されているような感覚を与えることができる。   Alternatively, the control device 104 may switch between the three-dimensional display method shown in FIG. 4B and the three-dimensional display method shown in FIG. 5B in accordance with the image 2b being reproduced. For example, when the image 2b being reproduced is a landscape image, when the three-dimensional position of the user's hand 2a is detected, the display is switched to the three-dimensional display shown in FIG. 5B, and the image 2b being reproduced is a landscape image. In other cases, it may be switched to the three-dimensional display shown in FIG. 4B when the three-dimensional position of the user's hand 2a is detected. As a result, when a landscape that is far from the user 2a is reproduced, such as a landscape image, it is possible to give the user a feeling that the image 2b is sinking in the back and displayed far away.

(4)上述した実施の形態では、3次元位置検出カメラ102によって取得された画像内からユーザーの手2aの3次元位置が1つだけ検出される例について説明した。しかしながら、手が複数ある場合には、複数の手の3次元位置が検出されることも考えられる。その場合には、制御装置104は、選択した1つの手に注目して上記処理を行えばよい。例えば、制御装置104は、画像の中心に最も近い位置に存在する手に注目してもよいし、画像内で一番大きく写っている手に注目するようにしてもよい。あるいは、制御装置104は、時間的に最も早く検出した手に注目するようにしてもよい。 (4) In the above-described embodiment, the example in which only one three-dimensional position of the user's hand 2a is detected from the image acquired by the three-dimensional position detection camera 102 has been described. However, when there are a plurality of hands, a three-dimensional position of the plurality of hands may be detected. In that case, the control device 104 may perform the above processing while paying attention to the selected one hand. For example, the control device 104 may focus on the hand that is closest to the center of the image, or may focus on the hand that is the largest in the image. Or you may make it the control apparatus 104 pay attention to the hand detected earliest in time.

(5)上述した実施の形態では、3次元位置検出カメラ102は、図2に示すように、デジタルフォトフレーム100の前面に配置され、デジタルフォトフレーム100に対面するユーザーを撮影する例について説明した。この場合、3次元位置検出カメラ102に対してユーザーがどの位置に立つかは不明であるため、ユーザーの立つ位置によっては、ユーザーの手2aが3次元位置検出カメラ102の画角内に収まらない可能性がある。よって、これを避けるために、3次元位置検出カメラ102を首振り可能な構成として、3次元位置検出カメラ102は、撮影範囲を変更しながらユーザーの手2aが検出できるカメラの向きを探すようにしてもよい。あるいは、ユーザーの手2aが3次元位置検出カメラ102の画角内に収まっていないことをユーザーに報知して、ユーザーに移動を促すようにしてもよい。ユーザーへの報知は、例えば不図示のスピーカーから音を出力して行ってもよいし、3Dモニタ106上にメッセージを表示するようにしてもよい。この場合、ユーザーの手2aの3次元位置が検出可能になった時点で、再度音やメッセージを出力したり、画像2bに枠を付けて強調表示したりして、ユーザーに手2aの3次元位置が検出可能になったことを報知してもよい。 (5) In the above-described embodiment, the three-dimensional position detection camera 102 is disposed on the front surface of the digital photo frame 100 as shown in FIG. . In this case, since the position where the user stands with respect to the three-dimensional position detection camera 102 is unknown, the user's hand 2a does not fit within the angle of view of the three-dimensional position detection camera 102 depending on the position where the user stands. there is a possibility. Therefore, in order to avoid this, the three-dimensional position detection camera 102 is configured to be able to swing, and the three-dimensional position detection camera 102 searches the direction of the camera that can be detected by the user's hand 2a while changing the shooting range. May be. Alternatively, the user may be notified that the user's hand 2a is not within the angle of view of the three-dimensional position detection camera 102, and the user may be prompted to move. The notification to the user may be performed by outputting sound from a speaker (not shown), for example, or a message may be displayed on the 3D monitor 106. In this case, when the 3D position of the user's hand 2a can be detected, a sound or a message is output again, or the image 2b is highlighted with a frame, and the 3D of the hand 2a is displayed to the user. You may alert | report that the position became detectable.

(6)上述した実施の形態では、制御装置104は、ユーザーの手2aの3次元位置を検出したときに、画像2bを3次元表示する例について説明した。しかしながら、制御装置104は、ユーザーの手2a以外の対象物の3次元位置を検出したときに、画像2bを3次元表示するようにしてもよい。例えば、ユーザーが指示棒を3Dモニタ106にかざす場合には、制御装置104は、指示棒を対象物として検出したときに、画像2bを3次元表示するようにしてもよい。 (6) In the above-described embodiment, the example in which the control device 104 three-dimensionally displays the image 2b when detecting the three-dimensional position of the user's hand 2a has been described. However, the control device 104 may display the image 2b three-dimensionally when detecting a three-dimensional position of an object other than the user's hand 2a. For example, when the user holds the pointing stick over the 3D monitor 106, the control device 104 may display the image 2b three-dimensionally when detecting the pointing stick as an object.

(7)上述した実施の形態では、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106に対して垂直方向に移動したことを検出したとき、すなわち手2aの3次元位置が3Dモニタ106に近づいたか遠ざかったことを検出したときに、画像2bの飛出し量または沈み込み量を変化させる例について説明した。しかしながら、制御装置104は、ユーザーの手2aの3次元位置が3Dモニタ106に対して水平方向、すなわち横方向に移動したことを検出した場合に、ユーザーの手2aの動きに従って再生中の画像2bを左右に動かすようにしてもよい。これによって、ユーザーは、手の振りによって直感的に画像2bを動かすように指示することができる。あるいは、制御装置104は、ユーザーの手2aの横方向の移動に伴って、再生中の画像2bを拡大、縮小したり、再生中の画像を切り替えたりするようにしてもよい。 (7) In the embodiment described above, the control device 104 detects that the three-dimensional position of the user's hand 2a has moved in the vertical direction with respect to the 3D monitor 106, that is, the three-dimensional position of the hand 2a is 3D. An example has been described in which the amount of projection or sinking of the image 2b is changed when it is detected that the monitor 106 is approaching or moving away. However, when the control device 104 detects that the three-dimensional position of the user's hand 2a has moved in the horizontal direction, that is, in the horizontal direction with respect to the 3D monitor 106, the image 2b being reproduced according to the movement of the user's hand 2a. May be moved left and right. Thus, the user can instruct to move the image 2b intuitively by shaking his hand. Alternatively, the control device 104 may enlarge or reduce the image 2b being reproduced or switch the image being reproduced as the user's hand 2a moves in the horizontal direction.

(8)上述した実施の形態では、制御装置104は、画像2bの再生開始時は2次元表示することとし、ユーザーの手2aを検出したタイミングで3次元表示に切り替える例にすいて説明した。しかしながら、制御装置104は、再生対象の画像2bが3次元画像である場合には、再生開始時から3次元表示するようにしてもよい。また、制御装置104は、再生対象の画像2bが2次元画像であっても再生開始時から3次元表示するようにしてもよい。 (8) In the above-described embodiment, the description has been given of the example in which the control device 104 performs the two-dimensional display at the start of the reproduction of the image 2b and switches to the three-dimensional display at the timing when the user's hand 2a is detected. However, when the image 2b to be reproduced is a three-dimensional image, the control device 104 may perform three-dimensional display from the start of reproduction. In addition, the control device 104 may display a three-dimensional image from the start of reproduction even if the image 2b to be reproduced is a two-dimensional image.

(9)上述した実施の形態では、カメラとして3次元位置検出カメラ102を用いる例について説明した。しかしながら、被写体の3次元位置を検出することができない通常のカメラを用いてもよい。この場合、図3のステップS20では、制御装置104は、カメラで撮影した画像内からユーザーの手2aを検出した場合に肯定判断すればよい。また、ステップS40では、制御装置104は、カメラから時系列で入力される画像データ間での画像内における手2aの位置や大きさの変化を監視することにより、ユーザーの手2aの動きを検出するようにすればよい。 (9) In the above-described embodiment, the example in which the three-dimensional position detection camera 102 is used as the camera has been described. However, a normal camera that cannot detect the three-dimensional position of the subject may be used. In this case, in step S20 of FIG. 3, the control device 104 may make an affirmative determination when the user's hand 2a is detected from the image captured by the camera. In step S40, the control device 104 detects the movement of the user's hand 2a by monitoring changes in the position and size of the hand 2a in the image between the image data input in time series from the camera. You just have to do it.

(10)上述した実施の形態では、画像表示装置としてデジタルフォトフレームを用いる例について説明した。しかしながら、3次元位置検出カメラと3Dモニタとを備え、画像再生機能を有する他の機器、例えばデジタルカメラや携帯電話にも本発明は適用可能である。また、テレビや画像を投影するプロジェクタ装置にも本発明は適用可能である。 (10) In the above-described embodiment, the example in which the digital photo frame is used as the image display device has been described. However, the present invention can also be applied to other devices including a three-dimensional position detection camera and a 3D monitor and having an image reproduction function, such as a digital camera and a mobile phone. The present invention can also be applied to a television or a projector device that projects an image.

(11)上述した第2の実施の形態では、画像2bを徐々に球状に変化させる例について説明した。しかしながら、上述した球状に限ることはなく、画像2bを凸面または凹面の奥行き感を表現できる形状に変化させればよい。たとえば、多角形や円筒状などに変化させるようにしてもよい。 (11) In the above-described second embodiment, the example in which the image 2b is gradually changed to a spherical shape has been described. However, the shape is not limited to the spherical shape described above, and the image 2b may be changed to a shape that can express a sense of depth of a convex surface or a concave surface. For example, it may be changed to a polygonal shape or a cylindrical shape.

(12)上述した第4の実施の形態では、動画像を操作するための操作アイコン4a〜4cを3次元表示させる例について説明した。しかしながら、以下に述べるような画像を3次元表示させてもよい。 (12) In the above-described fourth embodiment, the example in which the operation icons 4a to 4c for operating the moving image are displayed three-dimensionally has been described. However, an image as described below may be displayed three-dimensionally.

たとえば、変形例12の制御装置104は、電源がオンされると、図11(a)に示すように、3Dモニタ106に、アプリケーションプログラム(以下、アプリと呼ぶ)の起動を指示するためのアイコン(以下、アプリアイコンと呼ぶ)a1〜a9を格子状に並べて2次元表示させる。たとえば、アプリアイコンa7は静止画像を再生するアプリに対応し、アプリアイコンa8は動画像を再生するアプリに対応する。   For example, when the power is turned on, the control device 104 of the modification 12 is an icon for instructing the 3D monitor 106 to start an application program (hereinafter referred to as an application) as shown in FIG. A1 to a9 (hereinafter referred to as application icons) are arranged in a grid and displayed two-dimensionally. For example, the application icon a7 corresponds to an application that reproduces a still image, and the application icon a8 corresponds to an application that reproduces a moving image.

そして、制御装置104は、ユーザーの手2aの3次元位置を検出した場合には、図11(b)に示すように、3Dモニタ106に、アプリアイコンa1〜a9を飛び出すように3次元表示させる。   Then, when detecting the three-dimensional position of the user's hand 2a, the control device 104 causes the 3D monitor 106 to three-dimensionally display the application icons a1 to a9 as shown in FIG. 11B. .

その後、制御装置104は、手2aの3次元位置が3Dモニタ106に近づく方向に移動したことを検出した場合には、図11(c)に示すように、図11(b)に示した状態から、手2aとアプリアイコンa1〜a9との間の奥行き方向の距離を短くして、アプリアイコンa1〜a9の飛び出し量を大きくする。   Thereafter, when the control device 104 detects that the three-dimensional position of the hand 2a has moved in a direction approaching the 3D monitor 106, as shown in FIG. 11C, the state shown in FIG. Therefore, the distance in the depth direction between the hand 2a and the application icons a1 to a9 is shortened, and the pop-out amount of the application icons a1 to a9 is increased.

またこのとき制御装置104は、手2aの3次元位置に対応するアプリアイコンa7の色を、他のアプリアイコンa1〜a6、a8、a9と異なる色で表示させることにより、アプリアイコンa7を強調表示する。これによって、ユーザーに、アプリアイコンa7が操作候補であることを報知することができる。   At this time, the control device 104 highlights the application icon a7 by displaying the color of the application icon a7 corresponding to the three-dimensional position of the hand 2a in a different color from the other application icons a1 to a6, a8, and a9. To do. Thereby, it is possible to notify the user that the application icon a7 is an operation candidate.

さらに制御装置104は、図11(d)に示すように、手2aの3次元位置が3Dモニタ106にさらに近づく方向に移動し、手2aと3Dモニタ106との距離が所定値(たとえば5cm)以内になったことを検出した場合には、強調表示していたアプリアイコンa7に対応するアプリ(ここでは、静止画像の再生アプリ)を起動する。   Further, as shown in FIG. 11D, the control device 104 moves in such a direction that the three-dimensional position of the hand 2a further approaches the 3D monitor 106, and the distance between the hand 2a and the 3D monitor 106 is a predetermined value (for example, 5 cm). When it is detected that the application icon is within, the application corresponding to the highlighted application icon a7 (here, a still image reproduction application) is activated.

(13)上述した第4の実施の形態では、手2aの3次元位置に対応する操作アイコン4aの色を異なる色で表示させることで強調表示する例について説明した。しかしながら、強調表示の方法はこれに限らなくてもよく、たとえば、操作アイコン4aを枠で囲んだり、他の操作アイコンよりも大きくしたり、輝度を高めたり、飛び出し量を大きくしたりすることによって強調表示するようにしてもよい。 (13) In the above-described fourth embodiment, the example in which the operation icon 4a corresponding to the three-dimensional position of the hand 2a is highlighted by displaying it in a different color has been described. However, the highlighting method is not limited to this. For example, by enclosing the operation icon 4a with a frame, making it larger than other operation icons, increasing the brightness, or increasing the pop-out amount. You may make it highlight.

(14)なお、上記の各実施の形態では、手の動きにより操作を行ったが、手の動きに加えて、指の動きにより操作を行うようにしてもよい。例えば、指を握った状態から指を広げた状態への変化を検出した場合は、表示している画像を拡大し、逆に、指を広げた状態から指を握った状態への変化を検出した場合は、表示している画像を縮小させる。また、指を立てる本数により、操作を行う例として、指を1本立てたら、動画を通常の速度で再生し、指を2本立てたら、動画を2倍の速度で再生し、指を3本立てたら、動画を4倍の速度で再生するようにする。これにより、操作のバリエーションを増やすことができる。 (14) In each of the above embodiments, the operation is performed by the movement of the hand. However, the operation may be performed by the movement of the finger in addition to the movement of the hand. For example, when a change from a finger grip state to a finger spread state is detected, the displayed image is enlarged, and conversely, a change from a finger spread state to a finger grip state is detected. If so, the displayed image is reduced. In addition, as an example of performing an operation depending on the number of fingers that are raised, if one finger is raised, a movie is played at a normal speed, if two fingers are raised, a movie is played at a double speed, and three fingers are raised. , Play video at 4x speed. Thereby, the variation of operation can be increased.

また、上記の各実施の形態では、手の動きにより操作を行ったが、手の代わりに、頭の動きにより、手の動きと同様の操作を行っても良い。これにより、パソコンを操作する際に、キーボードや、マウスを操作するために、手の動きによる操作ができない場合でも、頭の動きにより操作を行うことができる。   Further, in each of the embodiments described above, the operation is performed by the movement of the hand, but the same operation as the movement of the hand may be performed by the movement of the head instead of the hand. As a result, when operating the personal computer, the keyboard and mouse can be operated, so that the operation can be performed by the movement of the head even when the operation cannot be performed by the movement of the hand.

なお、上記の各実施の形態では、手の動きにより操作を行ったが、手に持っている物体(ペン等)の動きにより操作を行うようにしてもよい。   In each of the above embodiments, the operation is performed by the movement of the hand, but the operation may be performed by the movement of an object (such as a pen) held in the hand.

なお、本発明の特徴的な機能を損なわない限り、本発明は、上述した実施の形態における構成に何ら限定されない。また、上述の実施の形態どうしを組み合わせてもよいし、上述の実施の形態と複数の変形例を組み合わせた構成としてもよい。   Note that the present invention is not limited to the configurations in the above-described embodiments as long as the characteristic functions of the present invention are not impaired. Further, the above-described embodiments may be combined, or the above-described embodiment and a plurality of modifications may be combined.

100 デジタルフォトフレーム、101 操作部材、102 3次元位置検出カメラ、103 接続IF、104 制御装置、105 記憶媒体、106 3Dモニタ DESCRIPTION OF SYMBOLS 100 Digital photo frame, 101 Operation member, 102 Three-dimensional position detection camera, 103 Connection IF, 104 Control apparatus, 105 Storage medium, 106 3D monitor

Claims (14)

対象物体を検出する検出手段と、
前記検出手段によって前記対象物体が検出されたときに、画像を3次元表示する表示制御手段とを備えることを特徴とする画像表示装置。
Detection means for detecting a target object;
An image display apparatus comprising: a display control unit that three-dimensionally displays an image when the target object is detected by the detection unit.
請求項1に記載の画像表示装置において、
前記検出手段は、前記対象物体の位置を検出することを特徴とする画像表示装置。
The image display device according to claim 1,
The image display apparatus characterized in that the detection means detects the position of the target object.
請求項2に記載の画像表示装置において、
前記対象物体の動きを検出する動き検出手段をさらに備え、
前記表示制御手段は、前記動き検出手段によって前記対象物体の動きが検出された場合には、前記対象物体の動きに応じて、前記対象物体と前記画像との間の前後方向の距離を変化させることを特徴とする画像表示装置。
The image display device according to claim 2,
Further comprising motion detection means for detecting the motion of the target object,
When the movement of the target object is detected by the movement detection unit, the display control unit changes a distance in the front-rear direction between the target object and the image according to the movement of the target object. An image display device characterized by that.
請求項3に記載の画像表示装置において、
前記表示制御手段は、前記対象物体と前記画像との間の前後方向の距離が視覚的に常に一定になるように変化させることを特徴とする画像表示装置。
The image display device according to claim 3,
The image display apparatus according to claim 1, wherein the display control unit changes the distance in the front-rear direction between the target object and the image so that the distance is visually constant.
請求項2〜4のいずれか一項に記載の画像表示装置において、
前記表示制御手段は、前記対象物体と前記画像との間の前後方向の距離を視覚的に短くすることにより、前記画像が手前に飛び出すように3次元表示することを特徴とする画像表示装置。
In the image display device according to any one of claims 2 to 4,
The display control means displays the image in a three-dimensional manner so that the image jumps forward by visually shortening a distance in the front-rear direction between the target object and the image.
請求項5に記載の画像表示装置において、
前記表示制御手段は、前記画像を視覚的に前記対象物体に近い位置まで飛び出させることを特徴とする画像表示装置。
The image display device according to claim 5,
The image display apparatus, wherein the display control means causes the image to jump out visually to a position close to the target object.
請求項2〜4のいずれか一項に記載の画像表示装置において、
前記表示制御手段は、前記対象物体と前記画像との間の前後方向の距離を視覚的に長くすることにより、前記画像が奥に沈み込むように3次元表示することを特徴とする画像表示装置。
In the image display device according to any one of claims 2 to 4,
The display control means performs three-dimensional display so that the image sinks deeply by visually increasing the distance in the front-rear direction between the target object and the image. .
請求項2〜4のいずれか一項に記載の画像表示装置において、
前記表示制御手段は、前記対象物体と前記画像との間の前後方向の距離を視覚的に短くすることにより、前記画像が手前に飛び出すように3次元表示する第1の方法と、前記対象物体と前記画像との間の前後方向の距離を視覚的に長くすることにより、前記画像が奥に沈み込むように3次元表示する第2の方法とを切り替えることを特徴とする画像表示装置。
In the image display device according to any one of claims 2 to 4,
The display control means includes a first method for performing a three-dimensional display so that the image jumps forward by visually shortening a distance in the front-rear direction between the target object and the image; and the target object An image display device characterized by switching a second method for three-dimensional display so that the image sinks deeply by visually increasing a distance in the front-rear direction between the image and the image.
請求項8に記載の画像表示装置において、
前記表示制御手段は、前記画像に応じて、または前記対象物体の移動方向に応じて、前記第1の方法と前記第2の方法とを切り替えることを特徴とする画像表示装置。
The image display device according to claim 8,
The image display apparatus, wherein the display control unit switches between the first method and the second method according to the image or according to a moving direction of the target object.
請求項1〜7のいずれか一項に記載の画像表示装置において、
前記対象物体は、人物の手であることを特徴とする画像表示装置。
In the image display device according to any one of claims 1 to 7,
The image display device, wherein the target object is a human hand.
請求項1〜4のいずれか一項に記載の画像表示装置において、
前記表示制御手段は、前記検出手段によって前記対象物体が検出されたときに、前記画像の形状を変化させると共に前記形状に応じた奥行きを視覚的に与えるように3次元表示することを特徴とする画像表示装置。
In the image display device according to any one of claims 1 to 4,
The display control means performs three-dimensional display so as to change the shape of the image and visually give a depth corresponding to the shape when the target object is detected by the detection means. Image display device.
請求項3に記載の画像表示装置において、
前記表示制御手段は、前記対象物体の動きに応じて、前記対象物体と前記画像との間の前後方向の距離を変化させながら前記画像を移動させることを特徴とする画像表示装置。
The image display device according to claim 3,
The image display apparatus according to claim 1, wherein the display control unit moves the image while changing a distance in the front-rear direction between the target object and the image according to the movement of the target object.
請求項3に記載の画像表示装置において、
前記対象物体が表示部に近づく方向へ動き、前記対象物体と表示部との距離が所定値以下になったことが前記動き検出手段によって検出された場合には、前記画像に対応付けられた処理を実行する処理実行部をさらに備えることを特徴とする画像表示装置。
The image display device according to claim 3,
When the movement detection unit detects that the target object moves in a direction approaching the display unit and the distance between the target object and the display unit is a predetermined value or less, a process associated with the image An image display device further comprising a processing execution unit for executing the above.
請求項3に記載の画像表示装置において、
前記表示制御手段は、前記動き検出手段によって表示部に近づく方向への前記対象物体の動きが検出された場合には、前記画像を含む複数枚の画像を縮小して3次元表示することを特徴とする画像表示装置。
The image display device according to claim 3,
The display control unit reduces and displays a plurality of images including the image in a three-dimensional manner when the movement of the target object in the direction approaching the display unit is detected by the movement detection unit. An image display device.
JP2011187402A 2010-09-22 2011-08-30 Image display device Active JP5360166B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2011187402A JP5360166B2 (en) 2010-09-22 2011-08-30 Image display device
US13/238,395 US20120069055A1 (en) 2010-09-22 2011-09-21 Image display apparatus
CN2011102910629A CN102413346A (en) 2010-09-22 2011-09-22 Image display apparatus

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010212002 2010-09-22
JP2010212002 2010-09-22
JP2011187402A JP5360166B2 (en) 2010-09-22 2011-08-30 Image display device

Publications (2)

Publication Number Publication Date
JP2012088688A true JP2012088688A (en) 2012-05-10
JP5360166B2 JP5360166B2 (en) 2013-12-04

Family

ID=46260327

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011187402A Active JP5360166B2 (en) 2010-09-22 2011-08-30 Image display device

Country Status (1)

Country Link
JP (1) JP5360166B2 (en)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014022490A1 (en) * 2012-07-31 2014-02-06 Intel Corporation Context-driven adjustment of camera parameters
JP2014179099A (en) * 2013-03-14 2014-09-25 Samsung Electronics Co Ltd Object operation method and apparatus of user apparatus
WO2014162757A1 (en) * 2013-04-04 2014-10-09 ソニー株式会社 Information processing apparatus, tagging method and program
US9330470B2 (en) 2010-06-16 2016-05-03 Intel Corporation Method and system for modeling subjects from a depth map
US9477303B2 (en) 2012-04-09 2016-10-25 Intel Corporation System and method for combining three-dimensional tracking with a three-dimensional display for a user interface
US9910498B2 (en) 2011-06-23 2018-03-06 Intel Corporation System and method for close-range movement tracking
US10136226B2 (en) 2012-12-18 2018-11-20 Tdk Corporation Top-port MEMS microphone and method of manufacturing the same
JP2019527435A (en) * 2016-10-24 2019-09-26 中国移動通信有限公司研究院China Mobile Communication Co., Ltd Research Institute Operation method and apparatus applicable to space system, and storage medium
US11048333B2 (en) 2011-06-23 2021-06-29 Intel Corporation System and method for close-range movement tracking

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08167048A (en) * 1994-12-13 1996-06-25 Yokogawa Electric Corp Three-dimensional image display device
JP2002049004A (en) * 2000-07-31 2002-02-15 Mixed Reality Systems Laboratory Inc Display controller and method
JP2004328566A (en) * 2003-04-28 2004-11-18 Sharp Corp Content display device and content display program
JP2005141102A (en) * 2003-11-07 2005-06-02 Pioneer Electronic Corp Stereoscopic two-dimensional image display device and its method
JP2007101804A (en) * 2005-10-03 2007-04-19 Pioneer Electronic Corp Image display device and program
JP2009042314A (en) * 2007-08-06 2009-02-26 Sharp Corp Visual distance control type display device
JP2010081466A (en) * 2008-09-29 2010-04-08 Hitachi Ltd Operation control device and operation display method

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08167048A (en) * 1994-12-13 1996-06-25 Yokogawa Electric Corp Three-dimensional image display device
JP2002049004A (en) * 2000-07-31 2002-02-15 Mixed Reality Systems Laboratory Inc Display controller and method
JP2004328566A (en) * 2003-04-28 2004-11-18 Sharp Corp Content display device and content display program
JP2005141102A (en) * 2003-11-07 2005-06-02 Pioneer Electronic Corp Stereoscopic two-dimensional image display device and its method
JP2007101804A (en) * 2005-10-03 2007-04-19 Pioneer Electronic Corp Image display device and program
JP2009042314A (en) * 2007-08-06 2009-02-26 Sharp Corp Visual distance control type display device
JP2010081466A (en) * 2008-09-29 2010-04-08 Hitachi Ltd Operation control device and operation display method

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9330470B2 (en) 2010-06-16 2016-05-03 Intel Corporation Method and system for modeling subjects from a depth map
US9910498B2 (en) 2011-06-23 2018-03-06 Intel Corporation System and method for close-range movement tracking
US11048333B2 (en) 2011-06-23 2021-06-29 Intel Corporation System and method for close-range movement tracking
US9477303B2 (en) 2012-04-09 2016-10-25 Intel Corporation System and method for combining three-dimensional tracking with a three-dimensional display for a user interface
WO2014022490A1 (en) * 2012-07-31 2014-02-06 Intel Corporation Context-driven adjustment of camera parameters
US10136226B2 (en) 2012-12-18 2018-11-20 Tdk Corporation Top-port MEMS microphone and method of manufacturing the same
JP2014179099A (en) * 2013-03-14 2014-09-25 Samsung Electronics Co Ltd Object operation method and apparatus of user apparatus
WO2014162757A1 (en) * 2013-04-04 2014-10-09 ソニー株式会社 Information processing apparatus, tagging method and program
JP2019527435A (en) * 2016-10-24 2019-09-26 中国移動通信有限公司研究院China Mobile Communication Co., Ltd Research Institute Operation method and apparatus applicable to space system, and storage medium

Also Published As

Publication number Publication date
JP5360166B2 (en) 2013-12-04

Similar Documents

Publication Publication Date Title
JP5360166B2 (en) Image display device
JP5087532B2 (en) Terminal device, display control method, and display control program
EP3226537B1 (en) Mobile terminal and method for controlling the same
JP6012384B2 (en) Video playback device, display control method, program, and storage medium
JP5487679B2 (en) Information processing apparatus, information processing method, and information processing program
KR101889855B1 (en) Electronic apparatus and control method of the same
US20120069055A1 (en) Image display apparatus
US20140184867A1 (en) Electronic apparatus and a method for controlling the same
JP5769277B2 (en) Input device, input method, and program
JP2013232200A (en) Image display device
US10222950B2 (en) Image processing apparatus and method
KR20150139159A (en) Photographing apparatus and method for making a video
US20150084893A1 (en) Display device, method for controlling display, and recording medium
JP6699589B2 (en) Display device and display method
TW201301131A (en) Image processing apparatus and method, and program
JP5220157B2 (en) Information processing apparatus, control method therefor, program, and storage medium
US10527911B2 (en) Electronic apparatus configured to select positions on a display unit by touch operation and control method thereof
CN114071011B (en) Display control apparatus, control method for controlling the same, and recording medium
JP2009164757A (en) Image display apparatus and imaging apparatus
US11048400B2 (en) Electronic apparatus, control method of electronic apparatus, and non-transitory computer readable medium
JP5335474B2 (en) Image processing apparatus and image processing method
CA2935233A1 (en) Universal capture
JP6120541B2 (en) Display control apparatus and control method thereof
JP6362110B2 (en) Display control device, control method therefor, program, and recording medium
US20230254555A1 (en) Electronic apparatus, control method therefor, and computer-readable storage medium storing program

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121002

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130326

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130520

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130806

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130819

R150 Certificate of patent or registration of utility model

Ref document number: 5360166

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250