JP2013037215A - Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image - Google Patents

Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image Download PDF

Info

Publication number
JP2013037215A
JP2013037215A JP2011173717A JP2011173717A JP2013037215A JP 2013037215 A JP2013037215 A JP 2013037215A JP 2011173717 A JP2011173717 A JP 2011173717A JP 2011173717 A JP2011173717 A JP 2011173717A JP 2013037215 A JP2013037215 A JP 2013037215A
Authority
JP
Japan
Prior art keywords
slit
display
stereoscopic image
display device
image display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011173717A
Other languages
Japanese (ja)
Inventor
Naoki Ishihara
直樹 石原
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2011173717A priority Critical patent/JP2013037215A/en
Publication of JP2013037215A publication Critical patent/JP2013037215A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Stereoscopic And Panoramic Photography (AREA)
  • Processing Or Creating Images (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a stereoscopic image display device on which a favorable stereoscopic image is displayed according to an attitude.SOLUTION: A process which a stereoscopic image display device 10 executes includes: a step (S1210) for causing a slit display determination part 105 to detect a slit display determination area 1001 linked with a slit 1000 and an observer reference line 1201 of an observer 1200; a step (S1220) for superimposing the slit display determination area 1001 on the observer reference line 1201; a step for checking whether the observer reference line 1302 intersects with a specific range including a side of a rectangle comprising the slit display determination area 1301; and a step (S1230) for displaying the slit 1000 on a display part according to the check result.

Description

本発明は、画像の表示制御に関し、より特定的には、複数の視点に対応した複数の画像を、立体表示する技術に関する。   The present invention relates to image display control, and more specifically to a technique for stereoscopically displaying a plurality of images corresponding to a plurality of viewpoints.

従来、観察者が視差を有する一組の画像を立体視することにより、立体感のある画像を見ることができる立体画像表示方法が知られている。   2. Description of the Related Art Conventionally, there is known a stereoscopic image display method in which an observer can view a stereoscopic image by stereoscopically viewing a set of images having parallax.

たとえば、特開平7−92936号公報(特許文献1)は、観察者がより良い立体画像を観察できるようにするために、表示画面のスリットを柔軟に制御する技術を開示している。特開平7−92936号公報に開示された技術によると、スリット位置が横移動されるので、観察者がより良い立体画像を観察できる。   For example, Japanese Patent Application Laid-Open No. 7-92936 (Patent Document 1) discloses a technique for flexibly controlling a slit of a display screen so that an observer can observe a better stereoscopic image. According to the technique disclosed in Japanese Patent Application Laid-Open No. 7-92936, the slit position is moved laterally, so that the observer can observe a better stereoscopic image.

特開平7−92936号公報JP-A-7-92936

立体画像を表示するための装置として、たとえば、据置型のテレビ、携帯電話機、スマートフォン、タブレット型コンピュータ等が挙げられる。このうち、携帯電話機、スマートフォン、タブレット型コンピュータのような携帯可能な端末は、その姿勢によっては、3次元の画像として表示される立体画像が、その観察者である端末のユーザに良好に視認できない場合がある。   Examples of the device for displaying a stereoscopic image include a stationary television, a mobile phone, a smartphone, and a tablet computer. Among these, a portable terminal such as a mobile phone, a smartphone, or a tablet computer, depending on the posture, a stereoscopic image displayed as a three-dimensional image cannot be seen well by the user of the terminal who is the observer. There is a case.

本発明は、上述のような問題点を解決するためになされたものであって、その目的は、より良い立体画像が観察できるように立体画像を表示可能な立体画像表示装置を提供することである。   The present invention has been made to solve the above-described problems, and an object of the present invention is to provide a stereoscopic image display device capable of displaying a stereoscopic image so that a better stereoscopic image can be observed. is there.

他の目的は、表示装置がよりよい立体画像を表示するための立体画像表示方法を提供することである。   Another object is to provide a stereoscopic image display method for a display device to display a better stereoscopic image.

さらに他の目的は、より良い立体画像が表示されるように立体画像表示装置を制御するためのプログラムを提供することである。   Still another object is to provide a program for controlling a stereoscopic image display apparatus so that a better stereoscopic image is displayed.

一実施の形態にしたがうと、複数の画像から構成される立体画像を表示するための立体画像表示装置が提供される。この立体画像表示装置は、画像の表示を行うための画像表示部と、画像表示部を観察している観察者の顔位置を検出するための顔位置検出部と、画像表示部の表示領域の前面において視差バリアを形成するための形成手段と、立体画像表示装置の動作を制御するための制御手段とを備える。制御手段は、形成手段によって形成される視差バリアの方向と、顔位置検出部によって検出される顔位置とに基づいて、形成手段による視差バリアの形成を制御する。   According to one embodiment, a stereoscopic image display device for displaying a stereoscopic image composed of a plurality of images is provided. The stereoscopic image display device includes an image display unit for displaying an image, a face position detection unit for detecting the face position of an observer observing the image display unit, and a display area of the image display unit. A forming unit for forming a parallax barrier on the front surface and a control unit for controlling the operation of the stereoscopic image display device are provided. The control unit controls the formation of the parallax barrier by the forming unit based on the direction of the parallax barrier formed by the forming unit and the face position detected by the face position detection unit.

好ましくは、形成手段は、画像表示部の表示領域の前面においてスリットを表示するためのスリット表示部を含む。   Preferably, the forming unit includes a slit display unit for displaying the slit in front of the display area of the image display unit.

好ましくは、スリット表示部は、表示領域の長手方向に平行な方向と、長手方向に垂直な方向との間で、スリットの表示方向を切り替える。   Preferably, the slit display unit switches the display direction of the slit between a direction parallel to the longitudinal direction of the display area and a direction perpendicular to the longitudinal direction.

好ましくは、スリット表示部は、スリットの表示と非表示とを切り替えるように構成されている。   Preferably, the slit display unit is configured to switch between display and non-display of the slit.

好ましくは、画像表示部は、形成手段における視差バリアの状態と同期して、画像表示部に表示する画像を変えるように構成されている。   Preferably, the image display unit is configured to change an image displayed on the image display unit in synchronization with the state of the parallax barrier in the forming unit.

好ましくは、立体画像表示装置は、当該立体画像表示装置の慣性情報を検出するための慣性情報検出部をさらに備える。制御手段は、慣性情報に基づいて、形成手段による視差バリアの形成を制御する。   Preferably, the stereoscopic image display device further includes an inertia information detection unit for detecting inertia information of the stereoscopic image display device. The control unit controls the formation of the parallax barrier by the forming unit based on the inertia information.

他の実施の形態にしたがうと、表示装置が立体画像を表示するための方法が提供される。この方法は、表示装置のモニタを観察している観察者の顔位置を検出するステップと、検出された顔位置と、モニタにおいて形成可能な視差バリアの方向とに基づいて、視差バリアを形成するか否かを判断するステップと、判断するステップにおける判断の結果に応じて、モニタに視差バリアを形成するステップと、画像を表示するステップとを含む。   According to another embodiment, a method for a display device to display a stereoscopic image is provided. In this method, a parallax barrier is formed based on a step of detecting a face position of an observer observing a monitor of a display device, a detected face position, and a direction of a parallax barrier that can be formed on the monitor. A step of determining whether or not, a step of forming a parallax barrier on the monitor according to a result of the determination in the step of determining, and a step of displaying an image.

さらに他の実施の形態にしたがうと、表示装置に立体画像を表示させるためのプログラムが提供される。プログラムは、表示装置に、表示装置のモニタを観察している観察者の顔位置を検出するステップと、検出された顔位置と、モニタにおいて形成可能な視差バリアの方向とに基づいて、視差バリアを形成するか否かを判断するステップと、判断するステップにおける判断の結果に応じて、モニタに視差バリアを形成するステップと、画像を表示するステップとを実行させる。   According to yet another embodiment, a program for displaying a stereoscopic image on a display device is provided. The program detects on the display device the position of the face of the observer who is observing the monitor of the display device, based on the detected face position and the direction of the parallax barrier that can be formed on the monitor. The step of determining whether or not to form the image, the step of forming the parallax barrier on the monitor, and the step of displaying the image are executed according to the result of the determination in the determining step.

ある局面によると、より良い立体画像が観察可能となる。
この発明の上記および他の目的、特徴、局面および利点は、添付の図面と関連して理解されるこの発明に関する次の詳細な説明から明らかとなるであろう。
According to a certain situation, a better stereoscopic image can be observed.
The above and other objects, features, aspects and advantages of the present invention will become apparent from the following detailed description of the present invention taken in conjunction with the accompanying drawings.

立体画像表示装置10の構成の一例を示すブロック図である。3 is a block diagram illustrating an example of a configuration of a stereoscopic image display device 10. FIG. 左目用画像と右目用画像とに対する画像処理を説明するための図である。It is a figure for demonstrating the image process with respect to the image for left eyes, and the image for right eyes. 観察者が立体画像を観察している様子を説明するための図である。It is a figure for demonstrating a mode that the observer is observing a stereo image. スリット300の表示例を表わす図である。FIG. 6 is a diagram illustrating a display example of a slit 300. 左目用画像と右目用画像に対する画像処理を示す説明図である。It is explanatory drawing which shows the image process with respect to the image for left eyes, and the image for right eyes. 観察者が立体画像表示装置10を観察している様子を示す説明図である。FIG. 6 is an explanatory diagram showing a state in which an observer is observing a stereoscopic image display device 10. カメラの撮影画像を示す説明図である。It is explanatory drawing which shows the picked-up image of a camera. 立体画像表示装置10の画像表示部102の表示面がXY平面上に存在している状態を表わす図である。It is a figure showing the state where the display surface of the image display part 102 of the three-dimensional image display apparatus 10 exists on XY plane. 当該XY平面を用いて観察者基準線の導出の具体例を表わす図である。It is a figure showing the specific example of derivation | leading-out of an observer reference line using the said XY plane. 立体画像表示装置10の表示領域に形成されるスリットを明示的に表わした図(その1)である。FIG. 3 is a first diagram explicitly showing slits formed in a display area of the stereoscopic image display device 10; 立体画像表示装置10の表示領域に形成されるスリットを明示的に表わした図(その2)である。FIG. 3 is a second diagram explicitly showing slits formed in the display area of the stereoscopic image display device 10. 画像表示部102の短辺方向と平行であるスリット1000を表示するかどうかを判定する処理の流れを表わす図である。It is a figure showing the flow of the process which determines whether the slit 1000 parallel to the short side direction of the image display part 102 is displayed. 観察者基準線とスリット表示判定領域との位置関係を表わす図である。It is a figure showing the positional relationship of an observer reference line and a slit display determination area. 当該処理の流れを表わす図である。It is a figure showing the flow of the said process. 立体画像表示装置10を45°ずつ回転させた状態の推移を表わす図である。It is a figure showing transition of the state which rotated stereoscopic image display device 10 every 45 degrees. 立体画像表示装置10が実行する処理の一部を表わすフローチャートである。4 is a flowchart illustrating a part of processing executed by the stereoscopic image display apparatus 10. 本変形例に係る立体画像表示装置1700の構成の概略を表わすブロック図である。FIG. 21 is a block diagram illustrating an outline of a configuration of a stereoscopic image display apparatus 1700 according to the present modification. 立体画像表示装置1700が実行する処理の一部を表わすフローチャートである。10 is a flowchart showing a part of processing executed by stereoscopic image display apparatus 1700.

以下、図面を参照しつつ、本発明の実施の形態について説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the following description, the same parts are denoted by the same reference numerals. Their names and functions are also the same. Therefore, detailed description thereof will not be repeated.

図1を参照して、本発明の実施の形態に係る立体画像表示装置10の構成について説明する。図1は、立体画像表示装置10の構成の一例を示すブロック図である。立体画像表示装置10は、一例として、携帯電話機、スマートフォン、タブレット型コンピュータ、PDA(Personal Digital Assistant)、テレビジョン受信装置、その他の情報処理端末として実現されるが、これらに限られない。立体画像表示装置10は、2次元画像を表示可能であり、かつ、視差バリアを形成することにより3次元画像を表示可能な情報処理端末として実現される。   With reference to FIG. 1, the structure of the three-dimensional image display apparatus 10 which concerns on embodiment of this invention is demonstrated. FIG. 1 is a block diagram illustrating an example of the configuration of the stereoscopic image display apparatus 10. As an example, the stereoscopic image display device 10 is realized as a mobile phone, a smartphone, a tablet computer, a PDA (Personal Digital Assistant), a television receiver, or other information processing terminal, but is not limited thereto. The stereoscopic image display device 10 is realized as an information processing terminal capable of displaying a two-dimensional image and displaying a three-dimensional image by forming a parallax barrier.

図1に示されるように、立体画像表示装置10は、中央演算処理部100と、画像データ記憶部101と、画像表示部102と、スリット表示部103と、顔位置検出部104と、スリット表示判定部105と、プログラム記憶部106とを備える。   As shown in FIG. 1, the stereoscopic image display apparatus 10 includes a central processing unit 100, an image data storage unit 101, an image display unit 102, a slit display unit 103, a face position detection unit 104, and a slit display. The determination unit 105 and the program storage unit 106 are provided.

中央演算処理部100は、立体画像表示装置10に格納されているプログラムを実行することにより、立体画像表示装置10の各部の動作を制御する。ある局面において、中央演算処理部100は、CPU(Central Processing Unit)、DSP(Digital Signal Processor)その他の演算処理装置等に相当し、立体画像表示装置10を構成する各部を制御し、または、データを加工し、もしくは演算する。   The central processing unit 100 controls the operation of each unit of the stereoscopic image display device 10 by executing a program stored in the stereoscopic image display device 10. In one aspect, the central processing unit 100 corresponds to a CPU (Central Processing Unit), a DSP (Digital Signal Processor), and other arithmetic processing devices, and controls each part of the stereoscopic image display device 10 or data Is processed or calculated.

画像データ記憶部101は、画像データを保持する。画像データ記憶部101は、立体画像を表示するために加工をする前の画像データ(たとえば、図2に示される左目用画像200、右目用画像201)を格納し、また、立体画像を表示するために加工した後の画像データ(たとえば、図2の画像202)などを格納する。ある局面において、画像データ記憶部101は、作業用メモリ領域を提供するための揮発性メモリや、データを永続的に保持するための不揮発性メモリとして実現される。   The image data storage unit 101 holds image data. The image data storage unit 101 stores image data before processing to display a stereoscopic image (for example, the left-eye image 200 and the right-eye image 201 shown in FIG. 2), and displays the stereoscopic image. For this purpose, image data after processing (for example, image 202 in FIG. 2) and the like are stored. In one aspect, the image data storage unit 101 is realized as a volatile memory for providing a working memory area or a non-volatile memory for permanently storing data.

画像表示部102は、画像データ記憶部101に保存されているデータに基づいて画像を表示する。画像表示部102は、ある局面において、液晶表示装置、有機EL(Electro Luminescence)パネル装置等として実現される。   The image display unit 102 displays an image based on data stored in the image data storage unit 101. In a certain aspect, the image display unit 102 is realized as a liquid crystal display device, an organic EL (Electro Luminescence) panel device, or the like.

スリット表示部103は、画像表示部102の表示領域に、視差バリアとしてスリットを形成する。たとえば、スリット表示部103は、中央演算処理部100やスリット表示判定部105などからの要求により、スリットの形成(すなわち表示)と非形成(すなわち非表示)とを切り替える。たとえば、図4に示されるように、スリット表示部103は、スリットを表示していない表示画面400と、画面の短辺方向と平行にスリットを表示している表示画面401と、画面の長辺方向と平行にスリットを表示している表示画面402との間で、スリット表示と非表示とを切り替える。なお、スリットの表示とは、スリットが形成されるものの、立体画像表示装置10の使用者のような通常の人間には視認できない状態である。   The slit display unit 103 forms a slit as a parallax barrier in the display area of the image display unit 102. For example, the slit display unit 103 switches between the formation (that is, display) and non-formation (that is, non-display) of the slit according to a request from the central processing unit 100, the slit display determination unit 105, and the like. For example, as shown in FIG. 4, the slit display unit 103 includes a display screen 400 that does not display a slit, a display screen 401 that displays a slit parallel to the short side direction of the screen, and a long side of the screen. Switching between slit display and non-display is performed between the display screen 402 displaying slits in parallel with the direction. In addition, although the slit is formed, the display of the slit is a state that cannot be visually recognized by a normal person such as a user of the stereoscopic image display device 10.

顔位置検出部104は、画像表示部102を見ている観察者の顔の位置を検出する。ある局面において、顔位置検出部104は、カメラを含む。カメラは、CCD(Charge Coupled Device)カメラ、CMOS(Complementary Metal-Oxide Semiconductor)カメラ等によって実現される。顔位置検出部104は、たとえば、観察者の顔を撮影できるカメラを用いて、顔の位置を検出する。顔の位置の検出処理は後述する。顔位置検出部104で検出された情報は、スリット表示判定部105の処理に使用される。   The face position detection unit 104 detects the position of the face of the observer who is looking at the image display unit 102. In one aspect, face position detection unit 104 includes a camera. The camera is realized by a CCD (Charge Coupled Device) camera, a CMOS (Complementary Metal-Oxide Semiconductor) camera, or the like. The face position detection unit 104 detects the position of the face using, for example, a camera that can photograph the face of the observer. The face position detection process will be described later. Information detected by the face position detection unit 104 is used for processing by the slit display determination unit 105.

スリット表示判定部105は、顔位置検出部104からの情報に基づいて、スリット表示部103にスリットを表示するか否かを判断する。   The slit display determination unit 105 determines whether to display a slit on the slit display unit 103 based on information from the face position detection unit 104.

プログラム記憶部106は、中央演算処理部100によって実行されるプログラムを格納している。ある局面において、プログラム記憶部106は、RAM(Random Access Memory)その他の揮発性メモリ、若しくは、ROM(Read Only Memory)またはフラッシュメモリその他の不揮発性メモリとして実現される。プログラム記憶部106は、立体画像表示装置10に組み込まれていても良く、あるいは、立体画像表示装置10から着脱可能であってもよい。   The program storage unit 106 stores a program executed by the central processing unit 100. In one aspect, the program storage unit 106 is realized as a RAM (Random Access Memory) or other volatile memory, or a ROM (Read Only Memory) or a flash memory or other nonvolatile memory. The program storage unit 106 may be incorporated in the stereoscopic image display device 10 or may be detachable from the stereoscopic image display device 10.

なお、中央演算部100と、顔位置検出部104と、スリット表示判定部105とは、ある局面において一つのプロセッサとして構成されてもよく、他の局面において、各処理を実行する回路として構成されてもよい。   The central processing unit 100, the face position detection unit 104, and the slit display determination unit 105 may be configured as one processor in one aspect, and are configured as a circuit that executes each process in another aspect. May be.

[パララックスバリア方式について]
ここで、図2〜図5を参照して、パララックスバリア方式について説明する。図2は、左目用画像と右目用画像とに対する画像処理を説明するための図である。図2に示されるように、左目用画像200と右目用画像201は、画像の短辺方向に短冊状に分解される。一例として、ある局面に従う立体画像表示装置10において、立体画像表示装置10の中央演算処理部100その他のプロセッサは、左目用画像200と右目用画像201とを、それぞれ交互に並べることにより、一枚の画像202を、当該表示装置が有するディスプレイ装置に表示する。画像202を表示する立体画像表示装置10には、画像を分解した方向と同方向の短冊状のスリットがある。たとえば、ある局面において、立体画像表示装置10は、スリット表示部103を用いて短冊状のスリットを形成することができる。
[Parallax barrier method]
Here, the parallax barrier method will be described with reference to FIGS. FIG. 2 is a diagram for explaining image processing for the left-eye image and the right-eye image. As shown in FIG. 2, the left-eye image 200 and the right-eye image 201 are decomposed into strips in the short side direction of the image. As an example, in the stereoscopic image display device 10 according to a certain aspect, the central processing unit 100 and other processors of the stereoscopic image display device 10 arrange the left-eye image 200 and the right-eye image 201 alternately, The image 202 is displayed on a display device included in the display device. The stereoscopic image display device 10 that displays the image 202 has a strip-shaped slit in the same direction as the direction in which the image is decomposed. For example, in a certain aspect, the stereoscopic image display apparatus 10 can form a strip-shaped slit using the slit display unit 103.

図3は、観察者が立体画像を観察している様子を説明するための図である。図3に示されるように、立体画像表示装置10の画像表示部102に表示される画像202は、スリット300を通して観察者に視認される。観察者は、スリット300を介して、短冊状に配置された左目用画像を観察者の左目301で視認し、右目用画像を右目302で視認するので、立体画像を観察することができる。   FIG. 3 is a diagram for explaining how an observer observes a stereoscopic image. As shown in FIG. 3, the image 202 displayed on the image display unit 102 of the stereoscopic image display device 10 is visually recognized by the observer through the slit 300. The observer visually recognizes the image for the left eye arranged in a strip shape with the left eye 301 of the observer and the image for the right eye with the right eye 302 through the slit 300, so that a stereoscopic image can be observed.

また、スリット300は、電気的に制御することができる。たとえば、プロセッサが駆動信号を切り替えることにより、スリット300の表示と非表示とを切り替えることができ、また、スリット300を表示する方向を切り替えることができる。   Further, the slit 300 can be electrically controlled. For example, when the processor switches the drive signal, the display and non-display of the slit 300 can be switched, and the direction in which the slit 300 is displayed can be switched.

[画像処理]
図4および図5を参照して、スリット300の表示と非表示との切り替え、および、スリット300の表示方向について説明する。図4は、スリット300の表示例を表わす図である。図5は、左目用画像と右目用画像に対する画像処理を示す説明図である。ディスプレイ装置の表示領域が矩形である場合、電気的に制御可能なスリット300は、その表示方向として、当該表示領域の短辺方向に対して平行にまたは垂直に、表示することができる。
[Image processing]
Switching between display and non-display of the slit 300 and the display direction of the slit 300 will be described with reference to FIGS. FIG. 4 is a diagram illustrating a display example of the slit 300. FIG. 5 is an explanatory diagram showing image processing for the left-eye image and the right-eye image. When the display area of the display device is rectangular, the electrically controllable slit 300 can be displayed in parallel or perpendicular to the short side direction of the display area.

表示画面400は、スリット300を表示していない状態の表示領域における画面である。立体画像表示装置10は、電気的な制御により、表示画面401または402を形成することができる。表示画面401は、スリット300の方向が表示画面400の短辺方向に対して平行になるようにスリット300を表示している。表示画面402は、スリット300の方向が表示画面400の短辺方向に対して垂直になるようにスリット300を表示している。また、他の局面において、立体画像表示装置10は、スリット300を表示している状態で、表示画面401から表示画面402へ、もしくはその逆への切り替えも可能である。   The display screen 400 is a screen in a display area where the slit 300 is not displayed. The stereoscopic image display apparatus 10 can form the display screen 401 or 402 by electrical control. The display screen 401 displays the slit 300 so that the direction of the slit 300 is parallel to the short side direction of the display screen 400. The display screen 402 displays the slit 300 so that the direction of the slit 300 is perpendicular to the short side direction of the display screen 400. In another aspect, the stereoscopic image display device 10 can switch from the display screen 401 to the display screen 402 or vice versa while the slit 300 is displayed.

立体画像表示装置10がスリット300を形成している場合、立体画像表示装置10は、スリット300の方向と同じ方向に短冊状に分解された左目用画像および右目用画像を表示する必要がある。このとき、表示画面401のように、スリット300が表示画面の短辺方向に対して平行になるよう表示されている場合には、立体画像表示装置10は、図2における画像202のような短冊状に分解した左目用画像200と右目用画像201とがスリット300の方向と同じ方向に並べられた画像を表示する。また、スリット300が表示画面の短辺方向に対して垂直になるように表示されている場合には、立体画像表示装置10は、図5の画像500のような短冊状に分解された左目用画像200と右目用画像201をスリット方向と同じ方向に並べられた画像を表示する。   When the stereoscopic image display device 10 forms the slit 300, the stereoscopic image display device 10 needs to display a left-eye image and a right-eye image that are separated into strips in the same direction as the slit 300. At this time, when the slit 300 is displayed so as to be parallel to the short side direction of the display screen as in the display screen 401, the stereoscopic image display device 10 is a strip like the image 202 in FIG. 2. An image in which the left-eye image 200 and the right-eye image 201 separated in a shape are arranged in the same direction as the direction of the slit 300 is displayed. In addition, when the slit 300 is displayed so as to be perpendicular to the short side direction of the display screen, the stereoscopic image display device 10 is used for the left eye that is decomposed into a strip shape like the image 500 of FIG. An image in which the image 200 and the right eye image 201 are arranged in the same direction as the slit direction is displayed.

[顔位置検出]
図6および図7を参照して、顔位置検出部104の動作について説明する。本実施の形態では、顔位置検出部104が検出する情報として、観察者の左目と右目を結ぶ直線を検出する例を説明する。図6は、観察者が立体画像表示装置10を観察している様子を示す説明図である。図7は、カメラの撮影画像を示す説明図である。
[Face position detection]
The operation of the face position detection unit 104 will be described with reference to FIGS. In the present embodiment, an example will be described in which a straight line connecting the left eye and the right eye of an observer is detected as information detected by the face position detection unit 104. FIG. 6 is an explanatory diagram showing a state in which the observer observes the stereoscopic image display device 10. FIG. 7 is an explanatory diagram showing a captured image of the camera.

図6に示されるように、観察者600は、立体画像表示装置10の画像表示部102を観察している。詳しくは、観察者600は、画像表示部102と正面から対峙する形で画像表示部102を観察している。立体画像表示装置10は、画像表示部102と同じ面にカメラ603を備えている。カメラ603は、両目を含む観察者の顔を撮影することができる。   As shown in FIG. 6, the observer 600 observes the image display unit 102 of the stereoscopic image display device 10. Specifically, the observer 600 observes the image display unit 102 in a form facing the image display unit 102 from the front. The stereoscopic image display device 10 includes a camera 603 on the same surface as the image display unit 102. The camera 603 can photograph the face of the observer including both eyes.

図7を参照して、画像700は、カメラ603が観察者600を連続的に撮影しているうちの1フレーム分の画像に相当する。観察者600は、画像表示部102と正面から対峙する形で観察しているため、同様に、カメラ603とも正面から対峙している状態となる。そのため、観察者600の右目604は、画像700の右目部分701に相当し、左目605は画像700の左目部分702に相当する。なお、画像700は、観察者600に表示される必要はなく、立体画像表示装置10が有する画像データ記憶部101に記憶されるだけでもよい。   Referring to FIG. 7, an image 700 corresponds to an image for one frame while the camera 603 continuously photographs the observer 600. Since the observer 600 is observing the image display unit 102 from the front, similarly, the observer 600 is also facing the camera 603 from the front. Therefore, the right eye 604 of the observer 600 corresponds to the right eye portion 701 of the image 700, and the left eye 605 corresponds to the left eye portion 702 of the image 700. Note that the image 700 does not need to be displayed to the observer 600 and may be stored only in the image data storage unit 101 included in the stereoscopic image display device 10.

次に、顔位置検出部104は、画像700から、右目部分701と左目部分702を結ぶ直線703を検出する。顔位置検出部104は、カメラ603の出力から得られるYUVデータやRGBデータなどの非圧縮の画像データに対して検出処理を実行する。   Next, the face position detection unit 104 detects a straight line 703 connecting the right eye part 701 and the left eye part 702 from the image 700. The face position detection unit 104 performs detection processing on uncompressed image data such as YUV data and RGB data obtained from the output of the camera 603.

他の局面において、顔位置検出部104は、検出精度を高めるために画像データを加工してから検出処理を行ってもよい。また、顔位置検出部104は、ある局面において、カメラ603から出力される全てのフレームを検出処理に用いてもよく、他の局面において、たとえば、10フレーム毎に実施するというように、特定数のフレーム毎に行ってもよい。また、検出処理の計算は、顔位置検出部104だけが検出処理に必要な計算を実行する態様に限られず、中央演算処理部100が当該計算を行なってもよい。   In another aspect, the face position detection unit 104 may perform detection processing after processing image data in order to increase detection accuracy. In addition, the face position detection unit 104 may use all frames output from the camera 603 in a certain aspect for detection processing, and in another aspect, for example, a specific number such as being performed every 10 frames. It may be performed every frame. The calculation of the detection process is not limited to a mode in which only the face position detection unit 104 executes the calculation necessary for the detection process, and the central processing unit 100 may perform the calculation.

また、顔位置検出部104によって検出される情報は、両目を結ぶ線だけに限られず、顔の輪郭、鼻の位置、口の位置、耳の位置など、顔の位置が特定できる情報であれば何でもよい。また、顔位置検出部104は、これら情報を複数使用して顔位置を検出してもよい。また、本実施の形態において一例として顔位置を検出する手段としてカメラを使った例が示されているが、顔位置を検出することができれば他のセンサなどを使用してもよい。   Also, the information detected by the face position detection unit 104 is not limited to the line connecting both eyes, but may be information that can specify the face position, such as the face outline, nose position, mouth position, ear position, etc. Anything Further, the face position detection unit 104 may detect the face position by using a plurality of these pieces of information. Further, although an example using a camera as a means for detecting a face position is shown as an example in the present embodiment, other sensors may be used as long as the face position can be detected.

次に、図8および図9を参照して、立体画像表示装置10による観察者基準線の導出について説明する。図8は、立体画像表示装置10の画像表示部102の表示面がXY平面上に存在している状態を表わす図である。図9は、当該XY平面を用いて観察者基準線の導出の具体例を表わす図である。ここでは、顔位置検出部104で検出された情報が観察者の右目と左目を結ぶ直線であった場合に観察者基準線を算出する方法の一例を説明する。   Next, the derivation of the observer reference line by the stereoscopic image display device 10 will be described with reference to FIGS. FIG. 8 is a diagram illustrating a state in which the display surface of the image display unit 102 of the stereoscopic image display apparatus 10 exists on the XY plane. FIG. 9 is a diagram illustrating a specific example of the derivation of the observer reference line using the XY plane. Here, an example of a method for calculating the observer reference line when the information detected by the face position detection unit 104 is a straight line connecting the right eye and the left eye of the observer will be described.

顔位置検出部104は、観察者基準線を以下のようにして導出する。なお、観察者の右目と左目を結ぶ直線801は、XY平面とは交わらない位置に存在している。   The face position detection unit 104 derives the observer reference line as follows. A straight line 801 that connects the right eye and the left eye of the observer exists at a position that does not intersect the XY plane.

図9に示されるように、スリット表示判定部105は、観察者の右目と左目を結ぶ直線801をXY平面に投影した投影線900を算出する。たとえば、スリット表示判定部105は、観察者の右目と左目とを結ぶ直線801を作る2点の座標をそれぞれb1(Xb1,Yb1,Zb1)、b2(Xb2,Yb2,Zb2)とすると、XY平面に投影した投影線900を作る2点の座標はそれぞれc1(Xb1,Yb1,0)、c2(Xb2,Yb2,0)となる。顔位置検出部104は、この投影線900を観察者基準線とする。観察者基準線を求める処理が行なわれるタイミングは、たとえば、立体画像表示装置10の電源がONになったとき、画像を表示するアプリケーションが起動されたとき、立体画像表示装置10に対して3次元の画像を表示するべき旨の命令が与えられた時、立体表示用の画像データが不揮発メモリ領域からワーク領域に読み出されたデータに基づいて表示が行なわれる直前等であるが、これらのタイミングに限られない。   As shown in FIG. 9, the slit display determination unit 105 calculates a projection line 900 obtained by projecting a straight line 801 connecting the right eye and the left eye of the observer onto the XY plane. For example, if the coordinates of two points that form a straight line 801 connecting the observer's right eye and left eye are b1 (Xb1, Yb1, Zb1) and b2 (Xb2, Yb2, Zb2), respectively, the slit display determination unit 105 is an XY plane. The coordinates of the two points that form the projection line 900 projected onto are c1 (Xb1, Yb1,0) and c2 (Xb2, Yb2, 0), respectively. The face position detection unit 104 uses the projection line 900 as an observer reference line. The timing at which the process for obtaining the observer reference line is performed is, for example, three-dimensional with respect to the stereoscopic image display device 10 when the stereoscopic image display device 10 is turned on or when an application for displaying an image is started. When the instruction to display the image is given, immediately before the image data for stereoscopic display is displayed based on the data read from the non-volatile memory area to the work area, etc. Not limited to.

[スリット表示判定領域]
次に、図10および図11を用いて、スリット表示判定領域について説明する。図10および図11は、立体画像表示装置10の表示領域に形成されるスリットを明示的に表わした図である。
[Slit display judgment area]
Next, the slit display determination area will be described with reference to FIGS. 10 and 11. 10 and 11 are views explicitly showing slits formed in the display area of the stereoscopic image display device 10.

まず、スリット表示判定領域は、スリット表示部103で表示可能なスリットの方向ごとに決めておく。スリット表示領域は、スリット表示部103で表示可能なスリットの方向ごとに用意(規定)され、スリット方向とスリット表示判定領域とが関連付けられる。   First, the slit display determination area is determined for each slit direction that can be displayed by the slit display unit 103. The slit display area is prepared (defined) for each slit direction that can be displayed by the slit display unit 103, and the slit direction and the slit display determination area are associated with each other.

たとえば、状態(A)に示されるように、スリット1000が画像表示部102の短辺方向と平行に表示される場合、状態(B)に示されるように、画像表示部102と同じ平面上に、スリット1000の方向と直交する辺が長辺となるように長方形のスリット表示判定領域1001が予め規定される。このスリット表示判定領域1001を表わすデータは、たとえば、中央演算処理部100、画像データ記憶部101、またはプログラム記憶部106のデータ記憶領域に保存される。   For example, when the slit 1000 is displayed in parallel with the short side direction of the image display unit 102 as shown in the state (A), on the same plane as the image display unit 102 as shown in the state (B). The rectangular slit display determination area 1001 is defined in advance so that the side perpendicular to the direction of the slit 1000 is a long side. Data representing the slit display determination area 1001 is stored in, for example, the data storage area of the central processing unit 100, the image data storage unit 101, or the program storage unit 106.

また、図11に示されるように、スリット1100が画像表示部102の長辺方向と平行に表示される場合、図10の場合と同様に、画像表示部102と同じ平面上に、スリット1100の方向と直交する辺が長辺となるように、長方形のスリット表示判定領域1101が予め規定される。このスリット表示判定領域1101を表わすデータも、たとえば、中央演算処理部100、画像データ記憶部101、またはプログラム記憶部106のデータ記憶領域に保存される。   Further, as shown in FIG. 11, when the slit 1100 is displayed in parallel with the long side direction of the image display unit 102, the slit 1100 is formed on the same plane as the image display unit 102 as in FIG. A rectangular slit display determination area 1101 is defined in advance so that the side orthogonal to the direction becomes the long side. Data representing the slit display determination area 1101 is also stored in the data storage area of the central processing unit 100, the image data storage unit 101, or the program storage unit 106, for example.

スリット表示判定部105は、観察者基準線とスリット表示判定領域1001またはスリット表示判定領域1101とを重ね合わせた時に、観察者基準線が当該スリット表示判定領域の特定の辺と交わっているかどうかを検出することにより、当該スリット表示判定領域に紐づけられているスリットを表示するか否かを判定する。   The slit display determination unit 105 determines whether or not the observer reference line intersects a specific side of the slit display determination area when the observer reference line and the slit display determination area 1001 or the slit display determination area 1101 are overlapped. By detecting, it is determined whether or not to display a slit associated with the slit display determination area.

そこで、図12および図13を参照して、スリット1000を表示するかどうかの判定について説明する。図12は、画像表示部102の短辺方向と平行であるスリット1000を表示するかどうかを判定する処理の流れを表わす図である。図13は、観察者基準線とスリット表示判定領域との位置関係を表わす図である。   Therefore, with reference to FIG. 12 and FIG. 13, the determination of whether to display the slit 1000 will be described. FIG. 12 is a diagram illustrating a flow of processing for determining whether to display the slit 1000 that is parallel to the short side direction of the image display unit 102. FIG. 13 is a diagram illustrating the positional relationship between the observer reference line and the slit display determination area.

まず、ステップS1210において、スリット表示判定部105は、スリット1000に紐づけられているスリット表示判定領域1001と、観察者1200についての観察者基準線1201を検出する。   First, in step S <b> 1210, the slit display determination unit 105 detects a slit display determination region 1001 associated with the slit 1000 and an observer reference line 1201 for the observer 1200.

ステップS1220において、スリット表示判定部105は、スリット表示判定領域1001と、観察者基準線1201とを重ね合わせる。この時、図13に示されるように、観察者基準線1302が、スリット表示判定領域1301を構成する長方形の対角線が交わる点1300を通るように位置が規定される。スリット表示判定部105は、この状態で、観察者基準線1302がスリット表示判定領域1301を構成する長方形の辺のある特定範囲と交わっているか否かを確認する。観察者基準線1302と当該特定範囲とが交わっていれば、スリット表示判定部105は、スリット表示判定領域1301に関連付けられているスリットを表示すると判定し、交わっていなければ、スリット表示判定部105は、当該スリットを表示しないと判定する。   In step S1220, the slit display determination unit 105 superimposes the slit display determination region 1001 and the observer reference line 1201. At this time, as shown in FIG. 13, the position is defined so that the observer reference line 1302 passes through a point 1300 where the rectangular diagonal lines constituting the slit display determination region 1301 intersect. In this state, the slit display determination unit 105 checks whether or not the observer reference line 1302 intersects a specific range having a rectangular side that forms the slit display determination region 1301. If the observer reference line 1302 and the specific range intersect, the slit display determination unit 105 determines to display a slit associated with the slit display determination region 1301, and if not, the slit display determination unit 105 Determines not to display the slit.

ステップS1230において、たとえば、図12の場合には、“長方形の辺のある特定範囲”をスリット表示判定領域1001を構成する長方形の4辺のうちの2つの短辺とすると、スリット表示判定部105は、ステップ1220において示される状態1202からスリットを表示すると判定し、スリット1000を表示部に表示させる。   In step S1230, for example, in the case of FIG. 12, assuming that “a specific range having a rectangular side” is two short sides of the four sides of the rectangle constituting the slit display determination region 1001, the slit display determination unit 105 Determines that the slit is to be displayed from the state 1202 shown in step 1220, and displays the slit 1000 on the display unit.

次に、図14を参照して、スリット表示判定部105が、画像表示部102の長辺方向と平行であるスリット1100を表示するかどうかを判定する処理について説明する。図14は、当該処理の流れを表わす図である。   Next, with reference to FIG. 14, a process in which the slit display determination unit 105 determines whether to display the slit 1100 that is parallel to the long side direction of the image display unit 102 will be described. FIG. 14 is a diagram showing the flow of the processing.

まず、ステップS1410にて、スリット表示判定部105は、スリット1100に紐づけられているスリット表示判定領域1101と、観察者1200の観察者基準線1201とを検出する。   First, in step S <b> 1410, the slit display determination unit 105 detects a slit display determination region 1101 associated with the slit 1100 and an observer reference line 1201 of the observer 1200.

ステップS1420にて、スリット表示判定部105は、スリット表示判定領域1101と、観察者基準線1201とを重ね合わせる。ここでは、観察者基準線1201と、スリット表示判定領域1101を構成する長方形の2つの短辺とが交わっていないため、スリット表示判定部105は、スリット1100を表示しないと判断する。本実施の形態において、スリット表示判定領域1101が長方形である例が示されたが、スリット表示判定領域1101の形状は、長方形以外の形でもよい。   In step S1420, slit display determination unit 105 superimposes slit display determination region 1101 and observer reference line 1201. Here, since the observer reference line 1201 and the two short sides of the rectangle constituting the slit display determination area 1101 do not intersect, the slit display determination unit 105 determines that the slit 1100 is not displayed. In the present embodiment, an example in which the slit display determination area 1101 is a rectangle is shown, but the shape of the slit display determination area 1101 may be other than a rectangle.

ステップS1430にて、立体画像表示装置10は、スリットを表示することなく画像を表示する。したがって、この場合は、立体画像表示装置10は、2次元画像を表示するためのデータを用いて画像を表示する。   In step S1430, stereoscopic image display apparatus 10 displays an image without displaying a slit. Therefore, in this case, the stereoscopic image display apparatus 10 displays an image using data for displaying a two-dimensional image.

図15を参照して、観察者が画像表示部102を観察している状態で、立体画像表示装置10を左回り方向(反時計回り)に回転させた時の処理の例を説明する。図15は、立体画像表示装置10を45°ずつ回転させた状態の推移を表わす図である。   With reference to FIG. 15, an example of processing when the stereoscopic image display apparatus 10 is rotated counterclockwise (counterclockwise) while the observer is observing the image display unit 102 will be described. FIG. 15 is a diagram illustrating the transition of the state in which the stereoscopic image display apparatus 10 is rotated by 45 °.

状態1500において、観察者1200は、画像表示部102を観察している。スリット表示判定部105は、顔位置検出部104で検出されるデータから求められる観察者基準線1201と、スリット1000に紐づけられているスリット表示判定領域1001とを重ね合わせ、また、観察者基準線1201と、スリット1100に紐づけられているスリット表示判定領域1101とを重ね合わせる。スリット表示判定部105は、重ね合わせの結果から、スリット1000を表示し、かつ、スリット1100を表示しないと判定する。スリット表示部103は、その判定の結果に基づき、スリット1000のみを表示する。この際、画像表示部102に表示される画像は、観察者がスリット1000を通して画像の立体視が可能になる画像である。たとえば、本実施の形態においては、図2に示される画像202のように、画像表示部102は、スリット1000と同じ方向に並べられた画像として、短冊状に分割された左目用画像200と右目用画像201とを表示する。   In the state 1500, the observer 1200 is observing the image display unit 102. The slit display determination unit 105 superimposes the observer reference line 1201 obtained from the data detected by the face position detection unit 104 and the slit display determination region 1001 associated with the slit 1000, and also provides an observer reference. The line 1201 and the slit display determination area 1101 associated with the slit 1100 are overlapped. The slit display determination unit 105 determines that the slit 1000 is displayed and the slit 1100 is not displayed based on the overlap result. The slit display unit 103 displays only the slit 1000 based on the determination result. At this time, the image displayed on the image display unit 102 is an image that enables the observer to view the image stereoscopically through the slit 1000. For example, in the present embodiment, like the image 202 shown in FIG. 2, the image display unit 102 has an image 200 for the left eye and a right eye divided into strips as images arranged in the same direction as the slit 1000. A work image 201 is displayed.

立体画像表示装置10が45°回転すると、回転後の状態は、状態1501で示される。スリット表示判定部105は、観察者基準線1201とスリット表示判定領域1001,1101との各重ね合わせの結果から、スリット1000およびスリット1100を表示しないと判定する。スリット表示部103は、その判定の結果に基づき、スリットを表示しない。この場合、観察者は、画像表示部102に表示される画像を立体画像として認識できないため、画像表示部102は、たとえば、二次元の画像として、図2の左目用画像200や右目用画像201のどちらか一方の画像を表示する。   When the stereoscopic image display device 10 is rotated by 45 °, the state after the rotation is indicated by a state 1501. The slit display determination unit 105 determines that the slit 1000 and the slit 1100 are not displayed based on the result of the overlap between the observer reference line 1201 and the slit display determination areas 1001 and 1101. The slit display unit 103 does not display a slit based on the determination result. In this case, since the observer cannot recognize the image displayed on the image display unit 102 as a three-dimensional image, the image display unit 102, for example, as a two-dimensional image, the left-eye image 200 or the right-eye image 201 in FIG. Either one of the images is displayed.

立体画像表示装置10がさらに45°回転すると、回転後の状態は、状態1502で示される。スリット表示判定部105は、観察者基準線1201とスリット表示判定領域1001および1101との各重ね合わせの結果から、スリット1000を表示せず、スリット1100を表示すると判定する。スリット表示部103は、その判定結果に基づき、スリット1100のみを表示する。この際、画像表示部102に表示される画像は、状態1500の場合と同様に、観察者がスリット1100を通して画像を立体画像として認識できる画像を表示する。   When the stereoscopic image display device 10 is further rotated by 45 °, the state after the rotation is indicated by a state 1502. The slit display determination unit 105 determines that the slit 1100 is displayed without displaying the slit 1000 based on the result of superimposing the observer reference line 1201 and the slit display determination regions 1001 and 1101. The slit display unit 103 displays only the slit 1100 based on the determination result. At this time, the image displayed on the image display unit 102 displays an image that allows the observer to recognize the image as a stereoscopic image through the slit 1100 as in the case of the state 1500.

図16を参照して、本実施の形態に係る立体画像表示装置10の制御構造について説明する。図16は、立体画像表示装置10が実行する処理の一部を表わすフローチャートである。当該処理は、たとえば、観察者が立体画像表示装置10を操作して、3次元画像を表示するべき旨の指示を立体画像表示装置10に与えた場合に開始する。   With reference to FIG. 16, a control structure of stereoscopic image display apparatus 10 according to the present embodiment will be described. FIG. 16 is a flowchart showing a part of the process executed by the stereoscopic image display apparatus 10. The processing starts when, for example, the observer operates the stereoscopic image display device 10 and gives an instruction to the stereoscopic image display device 10 to display a three-dimensional image.

ステップS1610にて、中央演算処理部100は、表示の対象として指定されたデータの属性に基づいて、画像表示部102が立体画像を表示可能か否かを判定する。立体画像とは、観察者に3次元の画像として認識させるために使用される画像である。一例としては、前述のとおり、図2の画像202や図5の画像500のようにスリットを通して観察される画像、図2の左目用画像200や右目用画像201のようにスリットを通さないで観察される画像を示す。中央演算処理部100は、画像表示部102が立体画像を表示可能であると判断すると(ステップS1620にてYES)、制御をステップS1620に切り換える。そうでない場合には(ステップS1620にてNO)、中央演算処理部100は、制御を終了する。   In step S1610, central processing unit 100 determines whether or not image display unit 102 can display a stereoscopic image based on the attribute of data designated as a display target. A three-dimensional image is an image used for making an observer recognize as a three-dimensional image. As an example, as described above, an image observed through a slit such as the image 202 in FIG. 2 or the image 500 in FIG. 5 and an observation without passing through the slit as in the image 200 for the left eye or the image 201 for the right eye in FIG. The image to be displayed is shown. When central processing unit 100 determines that image display unit 102 can display a stereoscopic image (YES in step S1620), control is switched to step S1620. If not (NO in step S1620), central processing unit 100 ends the control.

ステップS1620にて、顔位置検出部104は、観察者の顔位置を検出する。
ステップS1630にて、スリット表示判定部105は、スリットに紐づけられたスリット表示判定領域を検出する。
In step S1620, face position detection unit 104 detects the face position of the observer.
In step S1630, slit display determination unit 105 detects a slit display determination area associated with the slit.

ステップS1640にて、スリット表示判定部105は、ステップS1620およびステップS1630において得られたデータに基づいて、画像表示部102の短辺方向に平行なスリット(以下、「垂直スリット」という。)を表示可能か否かを判定する。スリット表示判定部105は、当該スリットを表示すると判定すると(ステップS1640にてYES)、制御をステップS1650に切り換える。そうでない場合(ステップS1640にてNO)、スリット表示判定部105は、制御をステップS1660に切り換える。   In step S1640, slit display determination unit 105 displays a slit (hereinafter referred to as “vertical slit”) parallel to the short side direction of image display unit 102 based on the data obtained in steps S1620 and S1630. Determine whether it is possible. When slit display determination unit 105 determines to display the slit (YES in step S1640), control is switched to step S1650. Otherwise (NO in step S1640), slit display determination unit 105 switches control to step S1660.

ステップS1650にて、スリット表示部103は、垂直スリットを表示する。
ステップS1660にて、スリット表示判定部105は、画像表示部102の長辺方向に平行なスリット(以下、「水平スリット」という。)を表示可能か否かを判定する。スリット表示判定部105は、当該スリットを表示可能と判定すると(ステップS1660にてYES)、制御をステップS1670に切り換える。そうでない場合には(ステップS1660にてNO)、スリット表示判定部105は、制御をステップS1680に切り換える。
In step S1650, slit display unit 103 displays a vertical slit.
In step S1660, slit display determination unit 105 determines whether it is possible to display a slit parallel to the long side direction of image display unit 102 (hereinafter referred to as “horizontal slit”). When slit display determination unit 105 determines that the slit can be displayed (YES in step S1660), control is switched to step S1670. If not (NO in step S1660), slit display determination unit 105 switches control to step S1680.

ステップS1670にて、スリット表示部103は、水平スリットを表示する。
ステップS1680にて、スリット表示部103は、垂直スリットおよび水平スリットのいずれも表示しない。
In step S1670, slit display unit 103 displays a horizontal slit.
In step S1680, slit display unit 103 displays neither a vertical slit nor a horizontal slit.

ステップS1690にて、画像表示部102は、スリットの表示状態に応じた画像を表示する。仮に、スリットが表示されていない場合には、画像表示部102は、予め規定された規則にしたがって特定される二次元用の画像を表示する。   In step S1690, image display unit 102 displays an image corresponding to the display state of the slit. If no slit is displayed, the image display unit 102 displays a two-dimensional image specified in accordance with a predetermined rule.

[実施例の効果]
以上のようにして、本発明の実施の形態に係る立体画像表示装置10によると、観察者の両目と立体画像表示装置10との位置関係を検出し、当該位置関係に応じて、視差バリアとしてのスリットの表示/非表示(形成/非形成)を制御する。このようにすると、立体画像表示装置10の姿勢に応じて3次元の画像が表示され、または、2次元の画像が表示される。そのため、立体画像表示装置10の画像表示モードが3次元に設定されている場合であっても、観察者が視認しやすい画像が表示される。
[Effect of Example]
As described above, according to the stereoscopic image display device 10 according to the embodiment of the present invention, the positional relationship between the observer's eyes and the stereoscopic image display device 10 is detected, and as a parallax barrier according to the positional relationship. The display / non-display (formation / non-formation) of the slits is controlled. In this way, a three-dimensional image is displayed according to the attitude of the stereoscopic image display device 10, or a two-dimensional image is displayed. Therefore, even if the image display mode of the stereoscopic image display device 10 is set to three-dimensional, an image that is easy for the observer to visually recognize is displayed.

<<変形例>>
図17を参照して、本実施の形態の変形例について説明する。図17は、本変形例に係る立体画像表示装置1700の構成の概略を表わすブロック図である。立体画像表示装置1700は、慣性情報を検出する機能をさらに備える点で、前述の立体画像表示装置10と異なる。
<< Modification >>
A modification of the present embodiment will be described with reference to FIG. FIG. 17 is a block diagram showing an outline of the configuration of a stereoscopic image display apparatus 1700 according to this modification. The stereoscopic image display apparatus 1700 is different from the above-described stereoscopic image display apparatus 10 in that it further includes a function of detecting inertia information.

すなわち、立体画像表示装置1700は、図1に示される構成に加えて、慣性情報検出部1710をさらに備える。慣性情報検出部1710は、観察者が立体画像表示装置1700を傾けたり、回転させたり、移動させたりした際に、立体画像表示装置1700の動き情報を検知する。例えば、立体画像表示装置1700は、加速度センサ、角速度センサ、傾きセンサなどとして実現される。   That is, the stereoscopic image display device 1700 further includes an inertial information detection unit 1710 in addition to the configuration shown in FIG. The inertia information detection unit 1710 detects movement information of the stereoscopic image display device 1700 when the observer tilts, rotates, or moves the stereoscopic image display device 1700. For example, the stereoscopic image display device 1700 is realized as an acceleration sensor, an angular velocity sensor, an inclination sensor, or the like.

慣性情報検出部1710からの動き情報の使用例について説明する。先に述べたように、スリット表示判定部105は、スリットの表示および非表示を制御する。スリット表示判定部105は、この制御に伴う処理を、常時行う必要はない。たとえば、観察者や立体画像表示装置10に動きがあり、観察者と立体画像表示装置1700の位置関係が変化する場合にのみ行えばよい。   A usage example of motion information from the inertia information detection unit 1710 will be described. As described above, the slit display determination unit 105 controls the display and non-display of the slit. The slit display determination unit 105 does not always need to perform the process associated with this control. For example, it may be performed only when the observer or the stereoscopic image display apparatus 10 moves and the positional relationship between the observer and the stereoscopic image display apparatus 1700 changes.

たとえば、顔位置検出部104は、カメラなどを使って観察者の顔の位置情報を検出する。カメラを常時撮影状態にしておくと消費電流が多くなるため、立体画像表示装置10の電池残量の減りが早くなる。そこで、本変形例に係る立体画像表示装置1700は、慣性情報検出部1710からの動き情報に基づいて、立体画像表示装置1700に動きがあったどうかを検知し、動きがあった場合のみ、立体画像表示装置1700の各部は動作を行うようにすればよい。動きがあったかどうかの判断として、たとえば、中央演算処理部100は、慣性情報検出部1710からの動き情報を数値化し、この数値がある閾値を超えた時に、立体画像表示装置1700に動きがあったと判断する。立体画像表示装置に動きがあった場合は、中央演算処理部100は、顔位置検出部104またはスリット表示判定部105を動作させて、スリット表示制御を実行する。一方、立体画像表示装置1700の動きがなかった場合は、中央演算処理部100は、顔位置検出部104またはスリット表示判定部105などを動作させず、スリット表示制御のための処理を実行しない。慣性情報検出部1710からの動き情報の検出処理は、たとえば100ミリ秒毎に1回行うというように、ある特定の時間毎に行ってもよい。   For example, the face position detection unit 104 detects position information of the observer's face using a camera or the like. If the camera is always in a shooting state, the current consumption increases, and therefore the remaining battery level of the stereoscopic image display device 10 is quickly reduced. Therefore, the stereoscopic image display apparatus 1700 according to the present modification detects whether or not the stereoscopic image display apparatus 1700 has moved based on the motion information from the inertia information detection unit 1710, and only when there is a movement, Each unit of the image display device 1700 may be operated. For example, the central processing unit 100 quantifies the motion information from the inertial information detection unit 1710 and determines that the stereoscopic image display device 1700 has moved when this value exceeds a certain threshold. to decide. When there is a movement in the stereoscopic image display device, the central processing unit 100 operates the face position detection unit 104 or the slit display determination unit 105 to execute slit display control. On the other hand, when there is no movement of the stereoscopic image display device 1700, the central processing unit 100 does not operate the face position detection unit 104 or the slit display determination unit 105, and does not execute processing for slit display control. The motion information detection process from the inertial information detection unit 1710 may be performed every certain time, for example, once every 100 milliseconds.

[制御構造]
次に、図18を参照して、本変形例に係る立体画像表示装置1700の制御構造について説明する。図18は、立体画像表示装置1700が実行する処理の一部を表わすフローチャートである。なお、前述の処理と同一の処理には同一のステップ番号を付してある。したがって、同一の処理の説明は繰り返さない。
[Control structure]
Next, a control structure of the stereoscopic image display apparatus 1700 according to this modification will be described with reference to FIG. FIG. 18 is a flowchart showing a part of the process executed by stereoscopic image display apparatus 1700. The same steps as those described above are denoted by the same step numbers. Therefore, the description of the same process will not be repeated.

ステップS1610にて、中央演算処理部100は、表示の対象として指定されたデータの属性に基づいて、画像表示部102が立体画像を表示可能か否かを判定する。中央演算処理部100は、画像表示部102が立体画像を表示可能であると判断すると(ステップS1620にてYES)、制御をステップS1810に切り換える。そうでない場合には(ステップS1620にてNO)、中央演算処理部100は、制御を終了する。   In step S1610, central processing unit 100 determines whether or not image display unit 102 can display a stereoscopic image based on the attribute of data designated as a display target. When central processing unit 100 determines that image display unit 102 can display a stereoscopic image (YES in step S1620), control is switched to step S1810. If not (NO in step S1620), central processing unit 100 ends the control.

ステップS1810にて、慣性情報検出部1710は、立体画像表示装置1700の動き情報を検出する。動き情報は、中央演算処理部100に送られる。   In step S1810, inertia information detection unit 1710 detects motion information of stereoscopic image display device 1700. The motion information is sent to the central processing unit 100.

ステップS1820にて、中央演算処理部100は、動き情報に基づいて、立体画像表示装置1700に動きがあったか否かを判断する。中央演算処理部100は、動きがあったと判断すると(ステップS1820にてYES)、制御をステップS1620に切り換える。そうでない場合には(ステップS1820にてNO)、中央演算処理部100は、制御をステップS1810に戻す。   In step S1820, central processing unit 100 determines whether or not stereoscopic image display apparatus 1700 has moved based on the movement information. When central processing unit 100 determines that there is a movement (YES in step S1820), control is switched to step S1620. If not (NO in step S1820), central processing unit 100 returns control to step S1810.

[変形例の効果]
以上のようにして、本変形例に係る立体画像表示装置1700は、その動きが検出された場合に、ステップS1620以降の処理を実行する。したがって、たとえば、観察者の顔検出のためにカメラを常時待機させる必要がなくなるため、立体画像表示装置1700の電池の消費が抑制される。
[Effect of modification]
As described above, the stereoscopic image display apparatus 1700 according to the present modification executes the processes after step S1620 when the movement is detected. Therefore, for example, it is not necessary to always keep the camera on standby for detecting the face of the observer, so that the battery consumption of the stereoscopic image display device 1700 is suppressed.

本発明の実施の形態に係る立体画像表示装置10,1700に係る技術思想は、各処理ステップによって実現される。したがって、当該技術思想は、各処理ステップを実行するプログラムをプロセッサに実行させることによっても実現されるので、プログラムを格納するメモリと当該プログラムを実行するプロセッサとによって実現され得る。   The technical idea of the stereoscopic image display devices 10 and 1700 according to the embodiment of the present invention is realized by each processing step. Therefore, the technical idea can also be realized by causing a processor to execute a program that executes each processing step, and thus can be realized by a memory that stores a program and a processor that executes the program.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the description above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

本発明は、携帯電話機、スマートフォン、電子書籍リーダ、タブレット型コンピュータ、PDA、携帯型テレビジョン受信装置そのたの携帯可能な情報処理端末であって、視差バリアを形成することにより二次元の画像または三次元の画像を表示可能な情報処理端末に適用可能である。   The present invention relates to a portable information processing terminal such as a mobile phone, a smart phone, an electronic book reader, a tablet computer, a PDA, a portable television receiver, and a two-dimensional image or image by forming a parallax barrier. The present invention can be applied to an information processing terminal that can display a three-dimensional image.

10,1700 立体画像表示装置、100 中央演算処理部、101 画像データ記憶部、102 画像表示部、103 スリット表示部、104 顔位置検出部、105 スリット表示判定部、106 プログラム記憶部、200 左目用画像、201 右目用画像、202,500,700 画像、300,1000,1100 スリット、301,605 左目、302,604 右目、400,401,402 表示画面、600,1200 観察者、603 カメラ、701 右目部分、702 左目部分、703,801 直線、900 投影線、1001,1101,1301 スリット表示判定領域、1201,1302 観察者基準線、1710 慣性情報検出部。   10, 1700 stereoscopic image display device, 100 central processing unit, 101 image data storage unit, 102 image display unit, 103 slit display unit, 104 face position detection unit, 105 slit display determination unit, 106 program storage unit, 200 for left eye Image, 201 Right eye image, 202, 500, 700 image, 300, 1000, 1100 Slit, 301, 605 Left eye, 302, 604 Right eye, 400, 401, 402 Display screen, 600, 1200 Observer, 603 Camera, 701 Right eye Part, 702 left eye part, 703, 801 straight line, 900 projection line, 1001, 1101, 1301 slit display determination area, 1201, 1302 observer reference line, 1710 inertia information detection unit.

Claims (8)

複数の画像から構成される立体画像を表示するための立体画像表示装置であって、
画像の表示を行うための画像表示部と、
前記画像表示部を観察している観察者の顔位置を検出するための顔位置検出部と、
前記画像表示部の表示領域の前面において視差バリアを形成するための形成手段と、
前記立体画像表示装置の動作を制御するための制御手段とを備え、
前記制御手段は、前記形成手段によって形成される視差バリアの方向と、前記顔位置検出部によって検出される顔位置とに基づいて、前記形成手段による視差バリアの形成を制御する、立体画像表示装置。
A stereoscopic image display device for displaying a stereoscopic image composed of a plurality of images,
An image display unit for displaying an image;
A face position detection unit for detecting the face position of an observer observing the image display unit;
Forming means for forming a parallax barrier in front of the display area of the image display unit;
Control means for controlling the operation of the stereoscopic image display device,
The control means controls the formation of the parallax barrier by the forming means based on the direction of the parallax barrier formed by the forming means and the face position detected by the face position detecting unit. .
前記形成手段は、前記画像表示部の表示領域の前面においてスリットを表示するためのスリット表示部を含む、請求項1に記載の立体画像表示装置。   The stereoscopic image display apparatus according to claim 1, wherein the forming unit includes a slit display unit for displaying a slit in front of a display area of the image display unit. 前記スリット表示部は、前記表示領域の長手方向に平行な方向と、前記長手方向に垂直な方向との間で、スリットの表示方向を切り替える、請求項2に記載の立体画像表示装置。   The stereoscopic image display device according to claim 2, wherein the slit display unit switches a display direction of the slits between a direction parallel to the longitudinal direction of the display area and a direction perpendicular to the longitudinal direction. 前記スリット表示部は、スリットの表示と非表示とを切り替えるように構成されている、請求項1または請求項2に記載の立体画像表示装置。   The stereoscopic image display device according to claim 1, wherein the slit display unit is configured to switch between display and non-display of a slit. 前記画像表示部は、前記形成手段における視差バリアの状態と同期して、前記画像表示部に表示する画像を変えるように構成されている、請求項1から請求項4のいずれか1項に記載の立体画像表示装置。   5. The image display unit according to claim 1, wherein the image display unit is configured to change an image to be displayed on the image display unit in synchronization with a state of a parallax barrier in the forming unit. 3D image display device. 立体画像表示装置の慣性情報を検出するための慣性情報検出部をさらに備え、
前記制御手段は、前記慣性情報に基づいて、前記形成手段による視差バリアの形成を制御する、請求項1から5のいずれか1項に記載の立体画像表示装置。
An inertial information detector for detecting inertial information of the stereoscopic image display device;
The stereoscopic image display device according to claim 1, wherein the control unit controls the formation of a parallax barrier by the forming unit based on the inertia information.
表示装置が立体画像を表示するための方法であって、
前記表示装置のモニタを観察している観察者の顔位置を検出するステップと、
検出された前記顔位置と、前記モニタにおいて形成可能な視差バリアの方向とに基づいて、視差バリアを形成するか否かを判断するステップと、
前記判断するステップにおける判断の結果に応じて、前記モニタに視差バリアを形成するステップと、
画像を表示するステップとを含む、方法。
A method for a display device to display a stereoscopic image,
Detecting the face position of an observer observing the monitor of the display device;
Determining whether to form a parallax barrier based on the detected face position and the direction of the parallax barrier that can be formed on the monitor;
Forming a parallax barrier on the monitor according to a result of the determination in the determining step;
Displaying the image.
表示装置に立体画像を表示させるためのプログラムであって、前記プログラムは、前記表示装置に、
前記表示装置のモニタを観察している観察者の顔位置を検出するステップと、
検出された前記顔位置と、前記モニタにおいて形成可能な視差バリアの方向とに基づいて、視差バリアを形成するか否かを判断するステップと、
前記判断するステップにおける判断の結果に応じて、前記モニタに視差バリアを形成するステップと、
画像を表示するステップとを実行させる、プログラム。
A program for displaying a stereoscopic image on a display device, the program being displayed on the display device,
Detecting the face position of an observer observing the monitor of the display device;
Determining whether to form a parallax barrier based on the detected face position and the direction of the parallax barrier that can be formed on the monitor;
Forming a parallax barrier on the monitor according to a result of the determination in the determining step;
A program for executing an image display step.
JP2011173717A 2011-08-09 2011-08-09 Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image Withdrawn JP2013037215A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011173717A JP2013037215A (en) 2011-08-09 2011-08-09 Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011173717A JP2013037215A (en) 2011-08-09 2011-08-09 Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image

Publications (1)

Publication Number Publication Date
JP2013037215A true JP2013037215A (en) 2013-02-21

Family

ID=47886865

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011173717A Withdrawn JP2013037215A (en) 2011-08-09 2011-08-09 Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image

Country Status (1)

Country Link
JP (1) JP2013037215A (en)

Similar Documents

Publication Publication Date Title
US10074346B2 (en) Display control apparatus and method to control a transparent display
US20190313076A1 (en) Information processing apparatus, stereoscopic display method, and program
EP2475178B1 (en) Information processing program, information processing method and information processing apparatus
EP2605521B1 (en) Image display apparatus, image display method, and image correction method
US9348612B2 (en) Storage medium having stored therein information processing program, information processing apparatus, information processing system, and information processing method
CN104040457A (en) Mobile display device
US20160292922A1 (en) Display control device, display control method, and recording medium
JP6508280B2 (en) Control device, detection device, display system, electronic device, and program
US20160291687A1 (en) Display control device, display control method, and recording medium
EP3629133A1 (en) Interface interaction apparatus and method
US8854358B2 (en) Computer-readable storage medium having image processing program stored therein, image processing apparatus, image processing method, and image processing system
US20120293549A1 (en) Computer-readable storage medium having information processing program stored therein, information processing apparatus, information processing system, and information processing method
TWI831951B (en) Maintenance support system, maintenance support method, program, method of generating processed image, and processed image
US8988500B2 (en) Information processing apparatus, stereoscopic display method, and program
US20140293024A1 (en) Foldable display and method and apparatus for controlling the same
US20120306868A1 (en) Storage medium having stored therein an image generation program, image generation method, image generation apparatus and image generation system
US9176624B2 (en) Information processing apparatus, stereoscopic display method, and program
US20130106843A1 (en) Information processing apparatus, display control method, and program
JP5950701B2 (en) Image display system, puzzle game system, image display method, puzzle game method, image display device, puzzle game device, image display program, and puzzle game program
CN105867597B (en) 3D interaction method and 3D display equipment
US9740292B2 (en) Computer-readable storage medium having stored therein display control program, display control system, display control apparatus, and display control method
JP2013037215A (en) Stereoscopic image display device, method for causing display device to display stereoscopic image, and program for causing display device to display stereoscopic image
CN114979614A (en) Display mode determining method and display mode determining device
TW201439664A (en) Controlling method and electronic apparatus
JP6192454B2 (en) Display system

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20141104