JP2012222549A - Video display apparatus and video display method - Google Patents

Video display apparatus and video display method Download PDF

Info

Publication number
JP2012222549A
JP2012222549A JP2011085337A JP2011085337A JP2012222549A JP 2012222549 A JP2012222549 A JP 2012222549A JP 2011085337 A JP2011085337 A JP 2011085337A JP 2011085337 A JP2011085337 A JP 2011085337A JP 2012222549 A JP2012222549 A JP 2012222549A
Authority
JP
Japan
Prior art keywords
video
parallax
viewer
unit
video display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2011085337A
Other languages
Japanese (ja)
Inventor
Akira Yokoyama
亮 横山
Toshio Oka
敏夫 岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2011085337A priority Critical patent/JP2012222549A/en
Publication of JP2012222549A publication Critical patent/JP2012222549A/en
Withdrawn legal-status Critical Current

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide a video display apparatus and a video display method that are capable of displaying a stereoscopic video with low power while providing the stereoscopic video in high definition even when a large number of parallax images is generated.SOLUTION: A position information acquiring unit 101 acquires position information representing the position of a viewer. A vision range information acquiring unit 102 acquires vision range information representing vision ranges corresponding to plural parallax images constituting a video for stereoscopic view. A specifying unit 103 specifies parallax images including a parallax image that is seen by the viewer, using the position information and the vision range information. An instructing unit 104 instructs a generating unit 105 to generate a parallax video on the basis of information on the parallax images specified by the specifying unit 103. The generating unit 105 generates a video for stereoscopic view on the basis of the parallax video instructed by the instructing unit 104. A display unit 106 displays a stereoscopic video by using the video for stereoscopic view.

Description

本発明は、裸眼で立体視可能な立体映像を表示する映像表示装置および映像表示方法に関する。   The present invention relates to a video display device and a video display method for displaying a stereoscopic video that can be stereoscopically viewed with the naked eye.

近年、立体(3 dimension:3D)映像技術が注目を集めている。人間が肉眼で立体物を見る際、左目に映る像と右目に映る像とは、左右の眼球の位置の違いにより、微妙な差異(視差)を有する。すなわち、人間は、左右の目で微妙に異なる像(物体形状)を見ている。人間には、これと同じような異なる形状の像を左右の目で見た際に、実際には立体物ではない対象であっても、あたかも立体物を見ているように感じる性質がある。   In recent years, 3D (3D) video technology has attracted attention. When a human sees a three-dimensional object with the naked eye, there is a subtle difference (parallax) between the image seen on the left eye and the image seen on the right eye due to the difference in the positions of the left and right eyeballs. That is, humans see slightly different images (object shapes) between the left and right eyes. When humans see images of different shapes similar to this with their left and right eyes, humans have the property that they feel as if they are seeing a three-dimensional object, even if the object is not actually a three-dimensional object.

立体的な動画表示の可能な映像表示装置(以下、「3次元ディスプレイ」という)には、様々な方式が提案されている。特に、3次元ディスプレイでは、フラットパネルタイプで、かつ、眼鏡型の補助光学機器(以下、単に「立体視眼鏡」という)を必要としない方式に対する要望が高くなっている。   Various methods have been proposed for video display devices capable of displaying a three-dimensional moving image (hereinafter referred to as “three-dimensional display”). In particular, in a three-dimensional display, there is a growing demand for a flat panel type and a system that does not require glasses-type auxiliary optical equipment (hereinafter simply referred to as “stereoscopic glasses”).

この方式の一例としては、例えば、表示パネルからの光線を制御する光学的画像選択部(以下、「光線制御素子」という)を、フラットパネルディスプレイ(Flat Panel Display:FPD)の直前に設置する方式がある。この方式は、比較的容易に実現できる方式として知られている。一般に、光線制御素子は、パララクスバリアおよび視差バリア等と呼ばれる。また、光線制御素子は、例えば、スリット(バリア)またはレンズアレイが主に使用される。   As an example of this method, for example, an optical image selection unit (hereinafter referred to as “light control element”) that controls light from the display panel is installed immediately before a flat panel display (FPD). There is. This method is known as a method that can be realized relatively easily. In general, the light beam control element is called a parallax barrier, a parallax barrier, or the like. For example, a slit (barrier) or a lens array is mainly used as the light beam control element.

光線制御素子は、表示パネルからの光線を制御することにより、観察者の位置または観察者の視線方向に対応する画像を選択的に表示する。すなわち、光線制御素子は、光線制御素子上の同一位置でも角度によって異なる画像が表示されるように光線を制御する。上記光線制御素子を備える映像表示装置は、2次元画像を表示するための画像表示面(以下、「画面」という)に多数の視線方向の画像(以下、「視差映像」という)を合成表示する。   The light beam control element selectively displays an image corresponding to the position of the viewer or the line of sight of the viewer by controlling light beams from the display panel. That is, the light beam control element controls the light beam so that different images are displayed depending on the angle even at the same position on the light beam control element. The video display device including the light beam control element synthesizes and displays a number of images in the line-of-sight direction (hereinafter referred to as “parallax video”) on an image display surface (hereinafter referred to as “screen”) for displaying a two-dimensional image. .

また、映像表示装置が多数の視線方向の画像を合成表示する方法としては、例えば、以下の2つの方法が提案されている。1つ目の方法は、画面の水平方向において画像の角度が切り替わるように、水平方向のみに光学的画像選択性を与える方法である。つまり、1つ目の方法は、左右視差(または「水平視差」という)のみを与える方法である。この方法で使用されるレンズアレイは、例えば、シリンドリカルレンズアレイ(「レンチキュラーシート」と呼ばれることもある)が挙げられる。   For example, the following two methods have been proposed as a method for the image display device to synthesize and display a number of images in the line-of-sight direction. The first method is a method of giving optical image selectivity only in the horizontal direction so that the angle of the image is switched in the horizontal direction of the screen. That is, the first method is a method that gives only the left-right parallax (or “horizontal parallax”). Examples of the lens array used in this method include a cylindrical lens array (sometimes referred to as a “lenticular sheet”).

2つ目の方法は、画面の水平方向および垂直方向の双方において画像の角度が切り替わるように、水平方向および垂直方向の双方に光学的画像選択性を与える方法である。つまり、2つ目の方法は、上下視差(または「水平垂直視差」という)を与える方法である。この方法で使用されるレンズアレイは、例えば、2次元レンズアレイ(「フライアイレンズアレイ」と呼ばれることもある)が挙げられる。   The second method is a method of giving optical image selectivity in both the horizontal direction and the vertical direction so that the angle of the image is switched in both the horizontal direction and the vertical direction of the screen. That is, the second method is a method of giving vertical parallax (or “horizontal vertical parallax”). Examples of the lens array used in this method include a two-dimensional lens array (sometimes referred to as a “fly-eye lens array”).

また、立体映像の表示方式の1つである、二眼式および多眼式を含む多眼式では、レンズアレイが、画素(またはドット)面上の近傍に配置される。多眼式において、レンズアレイから射出される光線は、観察者の視点に集中される。   Further, in a multi-view system including a binocular system and a multi-view system, which is one of stereoscopic image display systems, a lens array is arranged in the vicinity of a pixel (or dot) plane. In the multi-view system, the light rays emitted from the lens array are concentrated on the observer's viewpoint.

立体映像の他の表示方式としては、インテグラル・イメージング(Integral Imaging:II)方式、またはインテグラル・フォトグラフィ(Integral Photography:IP)方式がある。II方式及びIP方式において、レンズアレイは、多眼式と同様、画素(またはドット)面上の近傍に配置される。ただし、II方式及びIP方式では、レンズアレイのレンズピッチは画素(ドット)ピッチの整数倍又は整数倍に極めて近似した値に設定される。また、II方式またはIP方式では、レンズアレイから射出される光線は観察者の視点に集中されず、レンズアレイを構成する各レンズから互いに並行な光線が射出される(例えば、非特許文献1参照)。   Other display methods for stereoscopic video include an integral imaging (II) method and an integral photography (IP) method. In the II system and the IP system, the lens array is arranged in the vicinity on the pixel (or dot) surface, as in the multi-lens system. However, in the II system and the IP system, the lens pitch of the lens array is set to an integer multiple of the pixel (dot) pitch or a value very close to an integer multiple. In the II system or the IP system, the light beams emitted from the lens array are not concentrated on the viewpoint of the observer, but parallel light beams are emitted from the lenses constituting the lens array (see, for example, Non-Patent Document 1). ).

また、特許文献1では、IP方式を用いつつ、視野角の広い範囲にわたり立体映像を表示可能にする技術が提案されている。これにより、特許文献1の技術では、画面のサイズが大きくなるほど画面の中央付近以外の周辺部が正常に見えなくなるという問題を解決している。   Patent Document 1 proposes a technique that enables a stereoscopic image to be displayed over a wide range of viewing angles while using the IP method. As a result, the technique of Patent Document 1 solves the problem that as the screen size increases, peripheral portions other than the vicinity of the center of the screen cannot be normally viewed.

特開2003−287712号公報JP 2003-287712 A

増田千尋著,「3次元ディスプレイ」,産業図書株式会社Chihiro Masuda, “3D Display”, Sangyo Tosho Co., Ltd.

しかしながら、上記従来技術の構成では、より多くの視差数を確保して視域範囲を広げるために、映像表示装置が多数の視線方向に対応する視差映像を生成することが前提となる。このため、映像表示装置において、視差映像の数が多くなるほど、演算処理量はより多くなり、映像表示装置の消費電力が増大してしまうという課題がある。   However, in the configuration of the above prior art, in order to secure a larger number of parallaxes and widen the viewing zone range, it is assumed that the video display device generates parallax images corresponding to a large number of viewing directions. For this reason, in the video display device, as the number of parallax videos increases, the amount of calculation processing increases and there is a problem that the power consumption of the video display device increases.

本発明の目的は、視差映像の数を多く生成する場合でも、視聴者に高品位の立体映像を提供しつつ、立体映像を低電力で表示できる映像表示装置および映像表示方法を提供することである。   An object of the present invention is to provide a video display device and a video display method capable of displaying a stereoscopic video with low power while providing a high-quality stereoscopic video to a viewer even when generating a large number of parallax videos. is there.

本発明の一態様に係る映像表示装置は、複数の視差映像から構成される立体視用の映像を用いて、立体映像を表示する映像表示装置であって、視聴者の位置を示す位置情報を取得する位置情報取得部と、前記立体視用の映像を構成する前記複数の視差映像の各々に対応する視域範囲を示す視域範囲情報を取得する視域範囲情報取得部と、前記位置情報および前記視域範囲情報を用いて、視聴者の眼に入る視差映像を含む視差映像を特定する特定部と、前記特定部で特定された視差映像に関する情報に基づいて、視差映像生成の指示を行う指示部と、前記指示部で指示された視差映像に基づいて、前記立体視用の映像を生成する生成部と、前記立体視用の映像を用いて、前記立体映像を表示する表示部と、を具備する構成を採る。   A video display device according to an aspect of the present invention is a video display device that displays a stereoscopic video using a stereoscopic video composed of a plurality of parallax videos, and includes position information indicating a viewer's position. A position information acquisition unit to acquire, a viewing area range information acquisition section to acquire viewing area information indicating a viewing area corresponding to each of the plurality of parallax images constituting the stereoscopic video, and the position information And using the viewing area information, an identifying unit that identifies a parallax image including a parallax image that enters the viewer's eyes, and an instruction to generate a parallax image based on information about the parallax image identified by the identifying unit An instruction unit to perform, a generation unit that generates the stereoscopic video based on the parallax video instructed by the instruction unit, and a display unit that displays the stereoscopic video using the stereoscopic video. The structure which comprises is taken.

本発明の一態様に係る映像表示方法は、複数の視差映像から構成される立体視用の映像を用いて、立体映像を表示する映像表示方法であって、視聴者の位置を示す位置情報を取得するステップと、前記立体視用の映像を構成する前記複数の視差映像の各々に対応する視域範囲を示す視域範囲情報を取得するステップと、前記位置情報および前記視域範囲情報を用いて、視聴者の眼に入る視差映像を含む視差映像を特定するステップと、前記特定部で特定された視差映像に関する情報に基づいて、視差映像生成の指示を行うステップと、指示された視差映像に基づいて、前記立体視用の映像を生成するステップと、前記立体視用の映像を用いて、前記立体映像を表示するステップと、からなる。   A video display method according to an aspect of the present invention is a video display method for displaying a stereoscopic video using a stereoscopic video composed of a plurality of parallax videos, and includes position information indicating a viewer's position. Using the step of obtaining, the step of obtaining viewing zone information indicating the viewing zone range corresponding to each of the plurality of parallax images constituting the stereoscopic video, and using the position information and the viewing zone range information A step of specifying a parallax image including a parallax image entering the viewer's eyes, a step of instructing the generation of the parallax image based on information on the parallax image specified by the specifying unit, and the specified parallax image And generating the stereoscopic video image and displaying the stereoscopic video image using the stereoscopic video image.

本発明によれば、映像表示装置および映像表示方法は、視差映像の数を多く生成する場合でも、視聴者に高品位の立体映像を提供しつつ、立体映像を低電力で表示できる。   According to the present invention, the video display device and the video display method can display a stereoscopic video with low power while providing a high-quality stereoscopic video to a viewer even when a large number of parallax videos are generated.

本発明の実施の形態1に係る映像表示装置の構成の一例を示すブロック図1 is a block diagram showing an example of a configuration of a video display device according to Embodiment 1 of the present invention. 本発明の実施の形態1に係る映像表示処理の流れを示すフローチャート図The flowchart figure which shows the flow of the video display process which concerns on Embodiment 1 of this invention. 本発明の実施の形態1に係る視域範囲情報の一例を示す図The figure which shows an example of the visual field range information which concerns on Embodiment 1 of this invention. 本発明の実施の形態1に係る映像表示処理の一例を示す図The figure which shows an example of the video display process which concerns on Embodiment 1 of this invention 本発明の実施の形態1に係る映像表示処理の一例を示す図The figure which shows an example of the video display process which concerns on Embodiment 1 of this invention 本発明の実施の形態2に係る映像表示装置の構成の一例を示すブロック図The block diagram which shows an example of a structure of the video display apparatus concerning Embodiment 2 of this invention. 本発明の実施の形態2に係る映像表示処理の流れを示すフローチャート図The flowchart figure which shows the flow of the video display process which concerns on Embodiment 2 of this invention.

以下、本発明の各実施の形態について、図面を参照して詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

以下の説明において、映像表示装置は、立体視用の映像(画像)を生成する。1つの立体視用の映像は、位置または角度のそれぞれ異なる複数の視差映像から構成される。すなわち、立体視用の映像は、複数の視線方向の視差映像から構成される。このように構成された視差映像は、視聴者の視点位置(左右の眼球の位置)の違いによって、同一映像について左右の眼球に異なる視差映像がそれぞれ入る。これにより、視聴者は、左目に映る像と右目に映る像との微妙な差異(視差)が得られ、立体映像を知覚することが可能となる。   In the following description, the video display device generates a stereoscopic video (image). One stereoscopic image is composed of a plurality of parallax images having different positions or angles. That is, the stereoscopic video is composed of parallax videos in a plurality of viewing directions. In the parallax image configured in this way, different parallax images enter the left and right eyeballs for the same image depending on the viewpoint position of the viewer (the positions of the left and right eyeballs). Thereby, the viewer can obtain a subtle difference (parallax) between the image shown in the left eye and the image shown in the right eye, and can perceive a stereoscopic image.

(実施の形態1)
図1は、映像表示装置100の構成の一例を示すブロック図である。映像表示装置100は、例えばテレビジョンである。
(Embodiment 1)
FIG. 1 is a block diagram illustrating an example of the configuration of the video display device 100. The video display device 100 is a television, for example.

図1において、映像表示装置100は、位置情報取得部101、視域範囲情報取得部102、特定部103、指示部104、生成部105、および表示部106を有する。なお、映像表示装置100は、テレビジョンである場合には、電源部、操作部、放送受信部、映像入出力部、および音声入出力部等の上記以外の装置部も備えるが、ここではその図示および説明を省略する。   In FIG. 1, the video display device 100 includes a position information acquisition unit 101, a viewing area range information acquisition unit 102, a specification unit 103, an instruction unit 104, a generation unit 105, and a display unit 106. When the video display device 100 is a television, the video display device 100 also includes other device units such as a power supply unit, an operation unit, a broadcast receiving unit, a video input / output unit, and an audio input / output unit. Illustration and description are omitted.

位置情報取得部101は、視聴者の位置を特定し、視聴者の位置を示す位置情報を取得する。例えば、位置情報取得部101は、映像表示装置100に対する視聴者の位置(距離及び方向等)を特定する。また、位置情報取得部101は、視聴者の位置として、視聴者の視点(左右の目)の位置を特定してもよい。例えば、位置情報取得部101は、カメラ(図示せず)を用いた画像認識により視聴者の位置を特定してもよく、センサ(図示せず)を用いて視聴者の位置を特定してもよい。なお、センサは、例えば、超音波センサ、光センサ、ステレオカメラ、及び、赤外線センサ等が挙げられる。また、センサは、これらに限らず、映像表示装置100に対する視聴者の距離及び方向(角度)等を検出できればよい。位置情報取得部101は、特定した視聴者の位置(例えば視点の位置)を示す位置情報を、特定部103に出力する。   The position information acquisition unit 101 specifies the position of the viewer and acquires position information indicating the position of the viewer. For example, the position information acquisition unit 101 specifies the position (distance, direction, etc.) of the viewer with respect to the video display device 100. Further, the position information acquisition unit 101 may specify the position of the viewer's viewpoint (left and right eyes) as the viewer's position. For example, the position information acquisition unit 101 may specify the position of the viewer by image recognition using a camera (not shown), or may specify the position of the viewer using a sensor (not shown). Good. Examples of the sensor include an ultrasonic sensor, an optical sensor, a stereo camera, and an infrared sensor. Further, the sensor is not limited to this, and it is only necessary to be able to detect the distance and direction (angle) of the viewer with respect to the video display device 100. The position information acquisition unit 101 outputs position information indicating the specified viewer position (for example, the position of the viewpoint) to the specifying unit 103.

視域範囲情報取得部102は、後述する生成部105に対して、視域範囲情報の取得要求を出力し、視域範囲情報を取得する。そして、視域範囲情報取得部102は、取得した視域範囲情報を特定部103に出力する。ここで、立体視用の映像を構成する視差映像のそれぞれには、想定される視聴位置(視域範囲)が存在する。各視差映像の想定される視聴位置以外の位置では、視聴者が立体映像を知覚できなかったり、クロストーク現象が発生したりする。視域範囲情報取得部102が取得する視域範囲情報には、このような各視差映像にそれぞれ対応する視域範囲を示す情報が含まれる。換言すると、視域範囲情報には、視差映像を適正に見ることが可能な範囲(視域範囲)を示す情報が含まれる。   The viewing zone range information acquisition unit 102 outputs a viewing zone range information acquisition request to the generation unit 105 described later, and acquires the viewing zone range information. Then, the viewing zone range information acquisition unit 102 outputs the acquired viewing zone range information to the specifying unit 103. Here, an assumed viewing position (viewing area range) exists in each of the parallax images constituting the stereoscopic video. At a position other than the assumed viewing position of each parallax image, the viewer cannot perceive a 3D image or a crosstalk phenomenon occurs. The viewing zone range information acquired by the viewing zone range information acquisition unit 102 includes information indicating the viewing zone range corresponding to each parallax image. In other words, the viewing zone range information includes information indicating a range (viewing zone range) in which the parallax image can be properly viewed.

特定部103は、位置情報取得部101から入力される位置情報、および、視域範囲情報取得部102から入力される視域範囲情報を用いて、視聴者の眼に入る視差映像を特定する。特定部103は、特定した視差映像を含む情報を指示部104に出力する。なお、特定部103は、位置情報および視域範囲情報を用いて、視聴者の眼に入らない視差映像(視聴者の眼に入る視差映像以外の視差映像)を特定してもよい。   The specifying unit 103 uses the position information input from the position information acquiring unit 101 and the viewing zone range information input from the viewing zone range information acquiring unit 102 to specify a parallax image that enters the viewer's eyes. The specifying unit 103 outputs information including the specified parallax image to the instruction unit 104. The specifying unit 103 may specify a parallax image that does not enter the viewer's eyes (a parallax image other than the parallax image that enters the viewer's eyes) using the position information and the viewing area information.

指示部104は、特定部103から入力される情報に従って、生成部105に対して、映像生成の指示を行う。例えば、指示部104は、生成部105に対して、特定部103で特定された、視聴者の眼に入る視差映像の指示(映像制御指示)を行う。また、指示部104は、特定部103で特定された視聴者の眼に入る視差映像以外の視差映像(視聴者の眼に入らない視差映像)の生成を、停止させる指示(映像制御指示)を行う。   The instruction unit 104 instructs the generation unit 105 to generate a video according to the information input from the specifying unit 103. For example, the instruction unit 104 instructs the generation unit 105 to specify a parallax image (image control instruction) that is specified by the specifying unit 103 and enters the viewer's eyes. In addition, the instruction unit 104 issues an instruction (video control instruction) to stop the generation of the parallax video other than the parallax video that enters the viewer's eyes specified by the specifying unit 103 (parallax video that does not enter the viewer's eyes). Do.

生成部105は、指示部104からの映像制御指示に従って、立体視用の映像を生成する。例えば、生成部105は、指示部104から映像制御指示がある場合、映像生成指示に従って、視聴者の眼に入る視差映像を生成し、視聴者の眼に入らない視差映像の生成を停止する。また、生成部105は、指示部104から特に指示が無い場合、生成可能な全ての視差映像を生成する。なお、生成部105において、視差映像の生成方式については、レンチキュラ・レンズ方式、視差バリア方式、または、これらの方式以外の他の方式を用いてもよい。生成部105は、生成した視差映像群を表示部106に出力する。また、生成部105は、視域範囲情報取得部102から視域範囲情報の取得要求を受けた場合、生成した視差映像に関する視域範囲情報を視域範囲情報取得部102に出力する。   The generation unit 105 generates a stereoscopic video in accordance with the video control instruction from the instruction unit 104. For example, when there is a video control instruction from the instruction unit 104, the generation unit 105 generates a parallax video that enters the viewer's eyes according to the video generation instruction, and stops generating the parallax video that does not enter the viewer's eyes. In addition, when there is no instruction from the instruction unit 104, the generation unit 105 generates all the parallax images that can be generated. Note that the generation unit 105 may use a lenticular lens method, a parallax barrier method, or a method other than these methods as a method for generating a parallax image. The generation unit 105 outputs the generated parallax image group to the display unit 106. Further, when receiving the viewing range information acquisition request from the viewing zone range information acquisition unit 102, the generation unit 105 outputs the generated viewing zone range information regarding the parallax image to the viewing range information acquisition unit 102.

表示部106は、生成部105から入力される視差映像群を表示する。これにより、視聴者は、左右の眼で異なる視差映像を見ることができる。この結果、視聴者は、立体映像を見ることができる。   The display unit 106 displays the parallax image group input from the generation unit 105. Thereby, the viewer can see different parallax images with the left and right eyes. As a result, the viewer can view a stereoscopic image.

次に、映像表示装置100の動作について説明する。   Next, the operation of the video display device 100 will be described.

図2は、映像表示装置100の動作の一例を示すフローチャートである。   FIG. 2 is a flowchart showing an example of the operation of the video display device 100.

ステップ(以下、「ST」と示す)101において、位置情報取得部101は、視聴者の位置を特定し、特定した視聴者の位置を示す位置情報を取得する。   In step (hereinafter referred to as “ST”) 101, position information acquisition section 101 specifies the position of the viewer and acquires position information indicating the position of the specified viewer.

ST102において、視域範囲情報取得部102は、視域範囲情報を生成部105から取得する。図3は、視域範囲情報取得部102が取得する視域範囲情報の一例を示す。図3に示す視域範囲情報には、各視差映像(第1視差映像〜第n視差映像)にそれぞれ対応する視域範囲が含まれる。図3において、視域範囲は、映像表示装置100からの距離および映像表示装置100からの角度で表される。   In ST102, the viewing zone range information acquisition unit 102 acquires the viewing zone range information from the generation unit 105. FIG. 3 shows an example of viewing zone range information acquired by the viewing zone range information acquisition unit 102. The viewing zone range information illustrated in FIG. 3 includes a viewing zone range corresponding to each parallax video (first parallax video to n-th parallax video). In FIG. 3, the viewing zone range is represented by a distance from the video display device 100 and an angle from the video display device 100.

なお、図3に示す「映像表示装置からの距離」は、映像表示装置100が備える画面から正面方向の距離を示す。また、図3に示す「映像表示装置からの角度」は、映像表示装置100が備える画面に対して正面方向を「0度」とし、正面方向と各視差映像が放射される方向との間の角度を示す。また、図3に示すように、映像表示装置100からの角度は、画面から正面方向に向かって左側または右側への角度を示す。   The “distance from the video display device” shown in FIG. 3 indicates the distance in the front direction from the screen provided in the video display device 100. In addition, the “angle from the video display device” shown in FIG. 3 indicates that the front direction is “0 degrees” with respect to the screen included in the video display device 100, and is between the front direction and the direction in which each parallax video is emitted. Indicates the angle. Moreover, as shown in FIG. 3, the angle from the video display apparatus 100 shows the angle to the left side or the right side toward the front direction from the screen.

例えば、図3に示す第1視差映像の視域範囲は、映像表示装置100からの距離が1.0m〜2.0mであり、映像表示装置100からの角度が左側に15度(「左15度」)である範囲となる。つまり、図3に示す第1視差映像の視域範囲内では、第1視差映像は「視聴者の眼に入る視差映像」となる。一方、図3に示す第1視差映像の視域範囲外では、第1視差映像は「視聴者の眼に入らない視差映像」となる。図3に示す視域範囲内または視域範囲外の見え方は、他の視差映像についても同様である。   For example, the viewing range of the first parallax image shown in FIG. 3 is a distance of 1.0 m to 2.0 m from the image display device 100, and the angle from the image display device 100 is 15 degrees on the left side (“left 15”). Degree ”). That is, the first parallax video is a “parallax video that enters the viewer's eyes” within the viewing range of the first parallax video shown in FIG. 3. On the other hand, outside the viewing range of the first parallax video shown in FIG. 3, the first parallax video is “parallax video that does not enter the viewer's eyes”. The appearance in the viewing zone range or outside the viewing zone range shown in FIG. 3 is the same for other parallax images.

ST103において、特定部103は、ST101で取得された位置情報、および、ST102で取得された視域範囲情報を用いて、視聴者の眼に入る視差映像(特定の視差映像)を特定する。   In ST103, the identifying unit 103 identifies a parallax image (specific parallax image) that enters the viewer's eyes using the position information acquired in ST101 and the viewing area information acquired in ST102.

ST104において、指示部104は、ST103で視聴者の眼に入る視差映像が特定されたか否かを判断する。すなわち、指示部104は、視聴者の眼に入る視差映像が有るか否かを判断する。視聴者の眼に入る視差映像が有る場合(ST104:YES)、指示部104は、生成部105に対して、視聴者の眼に入る視差映像(特定の視差映像)のみを生成させる。換言すると、視聴者の眼に入る視差映像が有る場合(ST104:YES)、ST105において、指示部104は、生成部105に対して、視聴者の眼に入る視差映像以外の視差映像(視聴者の眼に入らない視差映像)の生成を停止させる。これにより、ST105において、生成部105は、視聴者の眼に入る視差映像(特定の視差映像)のみを生成する。   In ST104, instructing section 104 determines whether or not a parallax image entering the viewer's eyes has been identified in ST103. That is, the instruction unit 104 determines whether there is a parallax image that enters the viewer's eyes. When there is a parallax image that enters the viewer's eyes (ST104: YES), the instruction unit 104 causes the generation unit 105 to generate only a parallax image (a specific parallax image) that enters the viewer's eyes. In other words, when there is a parallax video that enters the viewer's eyes (ST104: YES), in ST105, the instruction unit 104 instructs the generation unit 105 to use a parallax video other than the parallax video that enters the viewer's eyes (viewer). Generation of the parallax image that does not enter the eye). Thereby, in ST105, the generation unit 105 generates only the parallax video (specific parallax video) that enters the viewer's eyes.

一方、視聴者の眼に入る視差映像が無い場合(ST104:NO)、ST106において、指示部104は、生成部105に対して何も指示しない。この場合、ST106において、生成部105は、生成可能な全ての視差映像を生成する。   On the other hand, when there is no parallax image entering the viewer's eyes (ST104: NO), in ST106, instruction unit 104 does not instruct generation unit 105. In this case, in ST106, the generation unit 105 generates all the parallax images that can be generated.

映像表示装置100は、以上の処理を、映像表示装置100が備える画面を構成する各画素について行う。   The video display device 100 performs the above processing for each pixel constituting the screen included in the video display device 100.

ST107において、表示部106は、各画素についてST105またはST106で生成された視差映像から成る視差映像群を、画面に表示する。   In ST107, display section 106 displays a parallax video group consisting of the parallax video generated in ST105 or ST106 for each pixel on the screen.

図4は、映像表示での1画素(画像を構成する最小単位)の一例を表す。なお、図4では、説明の都合上、1画素当たり5個の視差映像を生成する例で説明するが、これに限定されない。ここでは、図4に示すように、映像表示での1画素は、5つの方向((1)〜(5))に放射される視差映像で構成される。つまり、図4に示す映像表示での1画素は、表示パネル(例えば液晶パネル)の5画素に相当する。図4に示すように、これらの視差映像は、レンチキュラーシートによって、5つの方向(方向(1)〜(5))へ放射される。例えば、図4において、視聴者は、右目で方向(1)に放射される視差映像を見て、左目で方向(2)に放射される視差映像を見る。こうすることで、視聴者は、双方の目で見る映像の微妙な差異(視差)により、立体映像を見ることができる。   FIG. 4 shows an example of one pixel (minimum unit constituting an image) in video display. For convenience of explanation, FIG. 4 illustrates an example in which five parallax images are generated per pixel, but the present invention is not limited to this. Here, as shown in FIG. 4, one pixel in the video display is composed of parallax images radiated in five directions ((1) to (5)). That is, one pixel in the video display shown in FIG. 4 corresponds to five pixels of a display panel (for example, a liquid crystal panel). As shown in FIG. 4, these parallax images are radiated in five directions (directions (1) to (5)) by the lenticular sheet. For example, in FIG. 4, the viewer looks at the parallax image radiated in the direction (1) with the right eye and views the parallax image radiated in the direction (2) with the left eye. By doing so, the viewer can view a stereoscopic image due to a subtle difference (parallax) between the images seen by both eyes.

次いで、図4に示す1画素に対する映像表示装置100の動作の一例について説明する。   Next, an example of the operation of the video display apparatus 100 for one pixel shown in FIG. 4 will be described.

映像表示装置100の位置情報取得部101は、映像表示装置100に対する視聴者の位置を特定する。例えば、図4において、位置情報取得部101は、視聴者の位置が位置Aであると特定する。この場合、位置情報には、位置Aを示す情報が含まれる。   The position information acquisition unit 101 of the video display device 100 specifies the position of the viewer with respect to the video display device 100. For example, in FIG. 4, the position information acquisition unit 101 specifies that the position of the viewer is position A. In this case, the position information includes information indicating the position A.

そして、特定部103は、位置情報取得部101で取得した位置情報、および、視域範囲情報取得部102で取得した視域範囲情報(例えば図3参照)を用いて、視聴者の眼に入る視差映像を特定する。例えば、図4では、特定部103は、位置Aに位置する視聴者の眼に入る視差映像として、方向(1)へ放出される視差映像を特定する。つまり、図4では、位置Aに位置する視聴者に対して、方向(1)へ放出される視差映像以外の視差映像(方向(2)〜(5))は、「視聴者の眼に入らない視差映像」となる。   Then, the specifying unit 103 enters the viewer's eyes using the position information acquired by the position information acquiring unit 101 and the viewing area information (see, for example, FIG. 3) acquired by the viewing area information acquiring unit 102. Identify parallax images. For example, in FIG. 4, the specifying unit 103 specifies the parallax image emitted in the direction (1) as the parallax image that enters the viewer's eyes located at the position A. In other words, in FIG. 4, the parallax images (directions (2) to (5)) other than the parallax images emitted in the direction (1) for the viewer located at the position A are “entered into the viewer's eyes”. No parallax video ".

そこで、指示部104は、生成部105に対して、図4に示す5個の視差映像のうち、位置Aに位置する視聴者の眼に入る視差映像(方向(1))の生成のみを指示する。また、指示部104は、図4に示す5個の視差映像のうち、位置Aに位置する視聴者の眼に入らない他の視差映像(方向(2)〜(5))の生成の停止を指示する。   Therefore, the instruction unit 104 instructs the generation unit 105 only to generate a parallax image (direction (1)) that enters the viewer's eyes located at the position A among the five parallax images illustrated in FIG. To do. In addition, the instruction unit 104 stops generating other parallax images (directions (2) to (5)) that do not enter the eyes of the viewer located at the position A among the five parallax images illustrated in FIG. Instruct.

これにより、生成部105は、図4に示す方向(1)に放射される視差映像のみを生成し、方向(2)〜(5)に放射される視差映像の生成を停止する。   Thereby, the production | generation part 105 produces | generates only the parallax image radiated | emitted in the direction (1) shown in FIG. 4, and stops the production | generation of the parallax image radiated | emitted in the directions (2)-(5).

このように、映像表示装置100は、視聴者の位置を特定することで、視聴者が立体映像の視聴に必要な視差映像のみを生成する。すなわち、映像表示装置100は、視聴者による立体映像の視聴に影響を与えない他の視差映像を停止する。こうすることで、映像表示装置100は、視聴者に対して高品質な立体映像を提供しつつ、消費電力を削減することが可能となる。   As described above, the video display apparatus 100 generates only the parallax video necessary for the viewer to view the stereoscopic video by specifying the position of the viewer. That is, the video display apparatus 100 stops other parallax video that does not affect the viewing of the stereoscopic video by the viewer. By doing so, the video display device 100 can reduce power consumption while providing high-quality stereoscopic video to the viewer.

図4では、映像表示での1画素について説明した。これに対し、図5では、複数の画素(ここでは7画素)に対する映像表示装置100の動作の一例について説明する。図5では、一例として、図4と同様、映像表示での1画素は5つの視差映像から構成される。すなわち、図5に示すように、各画素は、方向(1)〜(5)にそれぞれ放射される視差映像で構成される。   In FIG. 4, one pixel in video display has been described. On the other hand, FIG. 5 illustrates an example of the operation of the video display apparatus 100 with respect to a plurality of pixels (here, 7 pixels). In FIG. 5, as an example, as in FIG. 4, one pixel in video display is composed of five parallax videos. That is, as shown in FIG. 5, each pixel is composed of parallax images emitted in directions (1) to (5).

この場合、映像表示装置100の位置情報取得部101は、図5に示す視聴者の右目の視点位置および左目の視点位置をそれぞれ特定する。すなわち、位置情報取得部101が取得する位置情報は、視聴者の右目の視点位置および左目の視点位置を含む。   In this case, the position information acquisition unit 101 of the video display device 100 specifies the right eye viewpoint position and the left eye viewpoint position of the viewer shown in FIG. That is, the position information acquired by the position information acquisition unit 101 includes the right eye viewpoint position and the left eye viewpoint position of the viewer.

次いで、特定部103は、位置情報および視域範囲情報を用いて、視聴者の左右の眼にそれぞれ入る視差映像を、画素ごとに特定する。例えば、図5に示すように、特定部103は、視聴者の右目に入る視差映像として、画素1の方向(5)に放射される視差映像を特定する。同様に、特定部103は、視聴者の右目に入る視差映像として、画素2の方向(4)に放射される視差映像を特定する。特定部103は、画素3〜画素5についても同様にして、視聴者の右目に入る視差映像を特定する。   Next, the specifying unit 103 specifies, for each pixel, the parallax images that respectively enter the viewer's left and right eyes, using the position information and the viewing zone range information. For example, as illustrated in FIG. 5, the specifying unit 103 specifies a parallax image radiated in the direction (5) of the pixel 1 as a parallax image that enters the viewer's right eye. Similarly, the specifying unit 103 specifies the parallax image radiated in the direction (4) of the pixel 2 as the parallax image that enters the viewer's right eye. The specifying unit 103 specifies the parallax image that enters the viewer's right eye in the same manner for the pixels 3 to 5.

同様に、図5に示すように、特定部103は、視聴者の左目に入る視差映像として、画素3の方向(5)に放射される視差映像を特定する。同様に、特定部103は、視聴者の左目に入る視差映像として、画素4の方向(4)に放射される視差映像を特定する。特定部103は、画素5〜画素7についても同様にして、視聴者の左目に入る視差映像を特定する。   Similarly, as illustrated in FIG. 5, the specifying unit 103 specifies the parallax image radiated in the direction (5) of the pixel 3 as the parallax image that enters the viewer's left eye. Similarly, the specifying unit 103 specifies the parallax image radiated in the direction (4) of the pixel 4 as the parallax image that enters the viewer's left eye. The specifying unit 103 specifies the parallax image that enters the viewer's left eye in the same manner for the pixels 5 to 7.

そして、指示部104は、図5に示すように、視聴者の左右の眼のいずれかに入る視差映像のみの生成を生成部105に対して指示する。つまり、指示部104は、図5に示すように、視聴者の左右の眼のいずれにも入らない視差映像の生成の停止を生成部105に対して指示する。   Then, as illustrated in FIG. 5, the instruction unit 104 instructs the generation unit 105 to generate only a parallax image that enters one of the left and right eyes of the viewer. That is, as illustrated in FIG. 5, the instruction unit 104 instructs the generation unit 105 to stop generating a parallax image that does not enter any of the viewer's left and right eyes.

例えば、図5に示す画素4を一例に説明する。図5に示す画素4において、指示部104は、生成部105に対して、方向(2)および(4)にそれぞれ放射される2つの視差映像の生成のみを指示する。すなわち、指示部104は、生成部105に対して、方向(1)、(3)および(5)にそれぞれ放射される3つの視差映像の生成の停止を指示する。これにより、映像表示装置100では、図5に示す画素4を構成する5個の視差映像のうち、視聴者の眼(左右の眼)に入らない3つの視差映像の分、消費電力を低減することができる。指示部104は、他の画素についても同様にして、生成部105に対して、映像生成の可否(生成又は停止)を指示する。   For example, the pixel 4 shown in FIG. 5 will be described as an example. In the pixel 4 illustrated in FIG. 5, the instruction unit 104 instructs the generation unit 105 only to generate two parallax images radiated in the directions (2) and (4), respectively. That is, the instruction unit 104 instructs the generation unit 105 to stop generating three parallax images emitted in the directions (1), (3), and (5). As a result, the video display device 100 reduces power consumption by the amount of three parallax images that do not enter the viewer's eyes (left and right eyes) out of the five parallax images constituting the pixel 4 shown in FIG. be able to. The instruction unit 104 instructs the generation unit 105 to determine whether or not to generate video (generation or stop) in the same manner for other pixels.

以上説明したように、本実施の形態に係る映像表示装置は、視聴者の位置に応じて、視聴者による立体映像の視聴に必要な視差映像のみを生成する。これにより、映像表示装置は消費電力を低減することができ、かつ、視聴者は立体映像を視聴することができる。よって、本実施の形態によれば、映像表示装置は、視差映像の数を多くする場合でも、視聴者に高品位の立体映像を提供しつつ、立体映像を低電力で表示できる。   As described above, the video display apparatus according to the present embodiment generates only the parallax video necessary for viewing the stereoscopic video by the viewer according to the position of the viewer. Thereby, the video display apparatus can reduce power consumption, and the viewer can view the stereoscopic video. Therefore, according to the present embodiment, the video display device can display stereoscopic video with low power while providing high-quality stereoscopic video to the viewer even when the number of parallax videos is increased.

なお、本実施の形態では、映像表示装置が視聴者の眼に入る視差映像以外の視差映像を停止する場合について説明した。つまり、映像表示装置が、視聴者の眼に入る視差映像のみを、映像表示装置の生成対象である特定の視差映像とする場合について説明した。しかし、本実施の形態において、映像表示装置は、視聴者の眼に入る視差映像のみでなく、視聴者の眼に入る視差映像に近接する視差映像も生成してもよい。すなわち、映像表示装置は、視聴者の眼に入る視差映像、及び、視聴者の眼に入る視差映像に近接する視差映像を、映像表示装置の生成対象である特定の視差映像としてもよい。換言すると、映像表示装置は、複数の視差映像のうち、視聴者の眼に入る視差映像及び視聴者の眼に入る視差映像を含む特定の視差映像以外の視差映像の生成を停止させる。例えば、図4において、「視聴者の眼に入る視差映像」が方向(3)に放射される視差映像である場合について説明する。この場合、例えば、映像表示装置は、方向(3)に放射される視差映像のみでなく、方向(3)に放射される視差映像に近接する方向(2)及び(4)にそれぞれ放射される視差映像も生成してもよい。こうすることで、映像表示装置は、現在の視聴者の位置からの多少のずれを考慮して、視差映像の生成を制御することができる。これにより、例えば、図4に示す位置Cに位置していた視聴者が首を動かす等して位置B又は位置Cに位置するようになっても、映像表示装置は、新たに視差映像を生成することなく、適切に立体映像を表示することができる。   In the present embodiment, the case where the video display device stops parallax video other than the parallax video entering the viewer's eyes has been described. That is, the case has been described in which the video display device sets only the parallax video that enters the viewer's eyes as the specific parallax video that is the generation target of the video display device. However, in the present embodiment, the video display device may generate not only the parallax video entering the viewer's eye but also the parallax video close to the parallax video entering the viewer's eye. That is, the video display device may use the parallax video that enters the viewer's eyes and the parallax video that is close to the parallax video that enters the viewer's eyes as the specific parallax video to be generated by the video display device. In other words, the video display device stops generating the parallax video other than the specific parallax video including the parallax video entering the viewer's eyes and the parallax video entering the viewer's eyes among the plurality of parallax videos. For example, in FIG. 4, a case where the “parallax image entering the viewer's eyes” is a parallax image radiated in the direction (3) will be described. In this case, for example, the video display device radiates not only in the parallax video radiated in the direction (3) but also in the directions (2) and (4) close to the parallax video radiated in the direction (3). A parallax image may also be generated. In this way, the video display apparatus can control the generation of the parallax video in consideration of a slight deviation from the current viewer position. As a result, for example, even if the viewer who was located at the position C shown in FIG. 4 moves his / her neck to come to the position B or the position C, the video display device newly generates a parallax video. Therefore, it is possible to display a stereoscopic image appropriately.

(実施の形態2)
本実施の形態では、映像表示装置が、視聴者の過去の位置情報を用いて、視聴者の今後の位置(視聴者の移動先)を予測する場合について説明する。
(Embodiment 2)
In the present embodiment, a case will be described in which the video display device predicts the viewer's future position (viewer's destination) using the viewer's past position information.

図6は、本実施の形態に係る映像表示装置の構成の一例を示すブロック図であり、実施の形態1の図1に対応するものである。図6において、図1と同一部分には、同一符号を付し、これについての説明を省略する。図6に示す映像表示装置200は、図1に示す映像表示装置100の構成に加え、予測部201及び記憶部202を更に具備する。   FIG. 6 is a block diagram showing an example of the configuration of the video display apparatus according to the present embodiment, and corresponds to FIG. 1 of the first embodiment. In FIG. 6, the same parts as those in FIG. 1 are denoted by the same reference numerals, and description thereof will be omitted. The video display device 200 illustrated in FIG. 6 further includes a prediction unit 201 and a storage unit 202 in addition to the configuration of the video display device 100 illustrated in FIG.

予測部201は、現在の視聴者の位置(例えば視点位置)を示す位置情報を、位置情報取得部101から取得する。また、予測部201は、過去の視聴者の位置を示す位置情報を、後述する記憶部202から取得する。例えば、予測部201は、過去の視聴者の位置情報の取得要求を記憶部202に出力することで、当該過去の視聴者の位置情報を取得する。そして、予測部201は、現在の位置情報及び過去の位置情報を用いて、視聴者が次に移動する位置(視聴者の移動先)を予測する。例えば、予測部201は、視聴者の位置の変化の軌跡を時系列で特定することで、視聴者が次に移動する移動先を予測する。そして、予測部201は、現在の視聴者の位置情報、及び、予測した視聴者の移動先を示す位置情報を特定部203に出力する。また、予測部201は、現在の視聴者の位置情報を記憶部202に出力する。   The prediction unit 201 acquires position information indicating the current viewer position (for example, the viewpoint position) from the position information acquisition unit 101. In addition, the prediction unit 201 acquires position information indicating the positions of past viewers from the storage unit 202 described later. For example, the prediction unit 201 obtains the position information of the past viewer by outputting a request for obtaining the position information of the past viewer to the storage unit 202. Then, the prediction unit 201 predicts the position where the viewer will move next (the movement destination of the viewer) using the current position information and the past position information. For example, the predicting unit 201 predicts a destination to which the viewer will move next by specifying a trajectory of a change in the position of the viewer in time series. Then, the prediction unit 201 outputs the current viewer position information and the position information indicating the predicted destination of the viewer to the specifying unit 203. Also, the prediction unit 201 outputs the current viewer position information to the storage unit 202.

記憶部202は、予測部201から入力される視聴者の位置情報を保持する。これにより、記憶部202には、位置情報取得部101が取得した過去の視聴者の位置情報が格納される。また、記憶部202は、過去の位置情報の取得要求が予測部201から入力された場合、保持している過去の視聴者の位置情報を予測部201に出力する。   The storage unit 202 holds viewer position information input from the prediction unit 201. Thereby, the location information of the past viewer acquired by the location information acquisition unit 101 is stored in the storage unit 202. In addition, when a request for acquisition of past position information is input from the prediction unit 201, the storage unit 202 outputs the stored past viewer position information to the prediction unit 201.

特定部203は、予測部201から入力される現在の視聴者の位置情報、及び、視域範囲情報取得部102から入力される視域範囲情報を用いて、実施の形態1の特定部103と同様の処理を行う。すなわち、特定部203は、現在の視聴者の位置情報及び視域範囲情報を用いて、現在の視聴者の眼に入る視差映像(現在の特定の視差映像)を特定する。   The specifying unit 203 uses the current viewer position information input from the prediction unit 201 and the viewing area information input from the viewing area information acquisition unit 102, and the specifying unit 103 of the first embodiment Similar processing is performed. That is, the specifying unit 203 specifies a parallax video (current specific parallax video) that enters the eyes of the current viewer using the current viewer position information and viewing zone range information.

そして、指示部104は、実施の形態1と同様、生成部105に対して、現在の視聴者の眼に入る視差映像の指示を行う。また、指示部104は、生成部105に対して、現在の視聴者の眼に入る視差映像以外の視差映像(現在の視聴者の眼に入らない視差映像)の生成を停止させる指示を行う。   Then, in the same way as in the first embodiment, the instruction unit 104 instructs the generation unit 105 of a parallax image that enters the eyes of the current viewer. In addition, the instruction unit 104 instructs the generation unit 105 to stop generating the parallax video other than the parallax video that enters the eyes of the current viewer (parallax video that does not enter the eyes of the current viewer).

さらに、特定部203は、予測部201が予測した視聴者の移動先を示す位置情報、及び、視域範囲情報取得部102から入力される視域範囲情報を用いて次の処理を行う。すなわち、特定部203は、視聴者の移動先(予測された視聴者の位置)での、視聴者の眼に入る視差映像(移動先での特定の視差映像)を特定する。   Further, the specifying unit 203 performs the following processing using the position information indicating the viewer's destination predicted by the prediction unit 201 and the viewing area information input from the viewing area information acquisition unit 102. That is, the specifying unit 203 specifies a parallax image (a specific parallax image at the destination) that enters the viewer's eyes at the viewer's destination (predicted viewer position).

そして、例えば、指示部104は、生成部105に対して、予測された視聴者の移動先での視聴者の眼に入る視差映像の生成を予め予約する。一方、指示部104は、生成部105に対して、予測された視聴者の移動先での視聴者の眼に入らない視差映像の生成の停止を予め予約する。   For example, the instruction unit 104 reserves in advance the generation unit 105 to generate a parallax image that enters the viewer's eyes at the predicted viewer's destination. On the other hand, the instruction unit 104 reserves in advance the generation unit 105 to stop generating the parallax video that does not enter the viewer's eyes at the predicted viewer's destination.

図7は、映像表示装置200の動作の一例を示すフローチャートであり、実施の形態1の図2に対応するものである。図7において、図2と同一部分には同一ステップ番号を付し、これについての説明を省略する。   FIG. 7 is a flowchart showing an example of the operation of the video display apparatus 200, and corresponds to FIG. 2 of the first embodiment. In FIG. 7, the same steps as those in FIG. 2 are denoted by the same step numbers, and description thereof will be omitted.

ST201において、予測部201は、ST101で取得された現在の視聴者の位置情報、及び、記憶部202が保持する過去の視聴者の位置情報を用いて、視聴者の移動先を予測する。予測部201は、現在の視聴者の位置情報と、予測した視聴者の移動先を示す位置情報を特定部203に出力する。また、予測部201は、現在の視聴者の位置情報を記憶部202に出力する。   In ST201, the prediction unit 201 predicts the destination of the viewer using the current viewer position information acquired in ST101 and the past viewer position information stored in the storage unit 202. The prediction unit 201 outputs the current viewer position information and the position information indicating the predicted viewer movement destination to the specifying unit 203. Also, the prediction unit 201 outputs the current viewer position information to the storage unit 202.

ST202において、特定部203は、ST101で取得された現在の視聴者の位置情報と、ST201で予測された視聴者の移動先と、視域範囲情報取得部102が取得した視域範囲情報とを用いて、次の処理を行う。すなわち、ST202において、特定部203は、現在の視聴者の眼に入る視差映像、及び、視聴者の移動先での視聴者の眼に入る視差映像を含む特定の視差映像を特定する。   In ST202, the identifying unit 203 obtains the current viewer position information acquired in ST101, the viewer's destination predicted in ST201, and the viewing area information acquired by the viewing area information acquiring unit 102. To perform the following processing. That is, in ST202, the identification unit 203 identifies a specific parallax image including a parallax image that enters the current viewer's eye and a parallax image that enters the viewer's eye at the destination of the viewer.

ST203において、指示部104は、ST201で予測された視聴者の移動先での視聴者の眼に入る視差映像(視聴者の移動先での特定の視差映像)が、有るか否かを判断する。視聴者の移動先での視聴者の眼に入る視差映像が有る場合(ST203:YES)、指示部104は、ST204へ進む。   In ST203, instructing section 104 determines whether or not there is a parallax video (a specific parallax video at the viewer's destination) that enters the viewer's eyes at the viewer's destination predicted at ST201. . If there is a parallax image that enters the viewer's eyes at the viewer's destination (ST203: YES), the instruction unit 104 proceeds to ST204.

ST204において、指示部104は、生成部105に対して、視聴者の移動先での視聴者の眼に入る視差映像以外の視差映像の生成の停止を予約する。また、ST204において、指示部104は、生成部105に対して、視聴者の移動先での視聴者の眼に入る視差映像の生成を予約してもよい。   In ST204, instructing section 104 reserves generation section 105 to stop generating a parallax video other than the parallax video that enters the viewer's eyes at the viewer's destination. Also, in ST204, the instruction unit 104 may reserve the generation unit 105 to generate a parallax image that enters the viewer's eyes at the viewer's destination.

一方、視聴者の移動先での視聴者の眼に入る視差映像が無い場合(ST203:NO)、指示部104は、ST107へ進む。   On the other hand, when there is no parallax image that enters the viewer's eyes at the destination of the viewer (ST203: NO), instruction unit 104 proceeds to ST107.

なお、図7において、映像表示装置200は、ST104〜ST106の処理(現在の視聴者の位置に関する処理)の後に、ST203〜ST204の処理(視聴者の移動先の位置に関する処理)を行う。しかし、映像表示装置200において、ST104〜ST106の処理及びST203〜ST204の処理の順序は、これに限らない。例えば、映像表示装置200は、ST104〜ST106の処理及びST203〜ST204の処理の双方を同時に実施してもよい。   In FIG. 7, the video display apparatus 200 performs the processing of ST203 to ST204 (processing related to the position of the viewer's destination) after the processing of ST104 to ST106 (processing related to the current viewer position). However, in the video display apparatus 200, the order of the processing of ST104 to ST106 and the processing of ST203 to ST204 is not limited to this. For example, the video display apparatus 200 may simultaneously perform both the processing of ST104 to ST106 and the processing of ST203 to ST204.

ここで、例えば、映像表示装置200は、実際に視聴者の位置情報を取得してから視差映像の生成の可否を判断するまでの間にタイムラグが生じる場合を想定する。   Here, for example, it is assumed that the video display apparatus 200 has a time lag between the actual acquisition of viewer position information and the determination of whether or not to generate a parallax video.

例えば、映像表示装置200は、現在生成している視差映像が、予測した視聴者の移動先では視聴者の眼に入る視差映像以外の視差映像となると判断したとする。つまり、映像表示装置200は、現在生成している視差映像が、予測した視聴者の移動先で「視聴者の眼に入らない視差映像」となると判断したとする。   For example, it is assumed that the video display device 200 determines that the currently generated parallax video is a parallax video other than the parallax video that enters the viewer's eyes at the predicted destination of the viewer. In other words, the video display apparatus 200 determines that the currently generated parallax video is “a parallax video that does not enter the viewer ’s eyes” at the predicted destination of the viewer.

この場合、上述したように、映像表示装置200は、現在生成している視差映像の生成の停止を予め予約する。これにより、映像表示装置200は、視聴者が実際に、予測した視聴者の移動先へ移動したタイミングで現在生成している視差映像の生成を停止することができる。これに対して、仮に、映像表示装置200は、実際に視聴者の位置情報を取得して視聴者の移動先を特定する場合、視聴者の位置を特定してから視差映像の停止までにタイムラグが生じてしまう。このように、映像表示装置200は、実際に視聴者の位置情報を取得するよりも前のタイミングで、当該視差映像の生成から停止への切替を行うことができる。よって、映像表示装置200では、上記タイムラグに相当する時間の分、消費電力を低減することができる。   In this case, as described above, the video display device 200 reserves in advance to stop the generation of the currently generated parallax video. Thereby, the video display apparatus 200 can stop the generation of the currently generated parallax video at the timing when the viewer actually moves to the predicted destination of the viewer. On the other hand, if the video display device 200 actually acquires the viewer position information and specifies the viewer's destination, the video display device 200 determines the time lag between the specification of the viewer's position and the stop of the parallax video. Will occur. As described above, the video display apparatus 200 can switch from the generation of the parallax video to the stop at a timing before actually acquiring the viewer's position information. Therefore, the video display device 200 can reduce power consumption by the time corresponding to the time lag.

このように、本実施の形態に係る映像表示装置は、視聴者の位置の変化を予測して、予測された視聴者の移動先での、視差映像の生成の可否(生成又は停止)を予め特定する。そして、映像表示装置は、視聴者の移動先での視差映像の生成及び停止の処理を、実際に視聴者の位置を取得するよりも前のタイミングで予約する。これにより、映像表示装置は、予測した視聴者の移動先の位置に、視聴者が実際に位置したタイミングで、予め予約した処理を実行することができる。よって、本実施の形態における映像表示装置は、実施の形態1と比較して、視差映像の生成と停止の切替をより迅速に行うことができる。   As described above, the video display apparatus according to the present embodiment predicts whether or not the viewer is likely to change the position of the viewer and determines whether or not to generate the parallax video at the predicted destination of the viewer (generation or stop). Identify. Then, the video display device reserves the process of generating and stopping the parallax video at the viewer's destination at a timing before actually acquiring the viewer's position. As a result, the video display device can execute the processing reserved in advance at the timing when the viewer is actually positioned at the predicted position of the viewer's destination. Therefore, the video display apparatus according to the present embodiment can switch between generation and stop of the parallax video more quickly than in the first embodiment.

また、本実施の形態に係る映像表示装置は、実施の形態1と同様、視聴者の位置に応じて、必要な視差映像のみを生成する。これにより、映像表示装置は消費電力を低減することができ、かつ、視聴者は立体映像を視聴することができる。   Also, the video display apparatus according to the present embodiment generates only the necessary parallax video according to the position of the viewer, as in the first embodiment. Thereby, the video display apparatus can reduce power consumption, and the viewer can view the stereoscopic video.

以上、本発明の各実施の形態について説明した。   The embodiments of the present invention have been described above.

なお、上記実施の形態では、映像表示装置が視差映像の生成の可否を画素ごとに判断する場合について説明したが、これに限らない。例えば、映像表示装置は、複数の画素における視差映像の生成の可否(生成又は停止)と、視聴者の位置との対応関係を事前に対応付けてもよい。例えば、映像表示装置は、各画素を構成する複数の視差映像の生成の可否を示すパターン(生成可否パターン)を予め保持してもよい。例えば、映像表示装置は、視聴者がとりうる位置の候補にそれぞれ対応する複数の上記生成可否パターンを対応付ければよい。すなわち、映像表示装置は、視聴者の位置を特定し、特定した視聴者の位置に応じた生成可否パターンに基づいて、各画素における視差映像の生成の可否を判断すればよい。これにより、映像表示装置は、視聴者の位置を特定する度に視差映像の生成の可否の判断を行う必要が無くなる。   In the above embodiment, the case has been described in which the video display apparatus determines whether the generation of the parallax video is possible for each pixel. However, the present invention is not limited to this. For example, the video display device may associate in advance the correspondence relationship between the availability (generation or stop) of parallax video generation in a plurality of pixels and the position of the viewer. For example, the video display apparatus may hold in advance a pattern (generation availability pattern) indicating whether or not a plurality of parallax videos constituting each pixel can be generated. For example, the video display device may associate a plurality of the above-described generation propriety patterns respectively corresponding to position candidates that the viewer can take. In other words, the video display device may specify the viewer's position and determine whether or not the parallax video can be generated in each pixel based on the generation possibility pattern according to the specified viewer position. This eliminates the need for the video display device to determine whether or not to generate a parallax video every time the viewer's position is specified.

また、上記実施の形態では、図4及び図5に示すように、各画素を構成する視差映像の数を5個の場合について説明した。しかし、各画素を構成する視差映像の数は5個に限らず、他の数でもよい。   Further, in the above embodiment, as shown in FIGS. 4 and 5, the case where the number of parallax images constituting each pixel is five has been described. However, the number of parallax images constituting each pixel is not limited to five and may be other numbers.

また、上記実施の形態では、視域範囲として、映像表示装置からの視聴者の距離、および、映像表示装置からの視聴者の角度(方向)を用いる場合について説明した。ただし、映像表示装置からの視聴者の距離に対して、映像表示装置の画面のサイズが相対的に小さい場合、視域範囲を映像表示装置からの方向のみで表してもよい。   In the above-described embodiment, the case where the viewer's distance from the video display device and the viewer's angle (direction) from the video display device are used as the viewing area range has been described. However, when the screen size of the video display device is relatively small with respect to the distance of the viewer from the video display device, the viewing zone range may be represented only by the direction from the video display device.

本発明に係る映像表示装置および映像表示方法は、視聴者が立体視用の映像を利用した立体映像を高品位で見ることができ、かつ、省電力を実現できる映像表示装置および映像表示方法として有用である。   The video display device and the video display method according to the present invention are a video display device and a video display method that enable viewers to view stereoscopic video using stereoscopic video with high quality and realize power saving. Useful.

100,200 映像表示装置
101 位置情報取得部
102 視域範囲情報取得部
103,203 特定部
104 指示部
105 生成部
106 表示部
201 予測部
202 記憶部
DESCRIPTION OF SYMBOLS 100,200 Image | video display apparatus 101 Position information acquisition part 102 Viewing zone range information acquisition part 103,203 Specification part 104 Instruction part 105 Generation part 106 Display part 201 Prediction part 202 Storage part

Claims (7)

複数の視差映像から構成される立体視用の映像を用いて、立体映像を表示する映像表示装置であって、
視聴者の位置を示す位置情報を取得する位置情報取得部と、
前記立体視用の映像を構成する前記複数の視差映像の各々に対応する視域範囲を示す視域範囲情報を取得する視域範囲情報取得部と、
前記位置情報および前記視域範囲情報を用いて、視聴者の眼に入る視差映像を含む視差映像を特定する特定部と、
前記特定部で特定された視差映像に関する情報に基づいて、視差映像生成の指示を行う指示部と、
前記指示部で指示された視差映像に基づいて、前記立体視用の映像を生成する生成部と、
前記立体視用の映像を用いて、前記立体映像を表示する表示部と、
を具備する映像表示装置。
A video display device that displays a stereoscopic video using a stereoscopic video composed of a plurality of parallax videos,
A position information acquisition unit that acquires position information indicating the position of the viewer;
A viewing area information acquisition unit that acquires viewing area information indicating a viewing area corresponding to each of the plurality of parallax images constituting the stereoscopic image;
Using the position information and the viewing zone range information, a specifying unit that specifies a parallax image including a parallax image that enters the viewer's eyes;
An instruction unit that gives an instruction to generate a parallax image based on information on the parallax image specified by the specifying unit;
A generating unit configured to generate the stereoscopic video based on the parallax video instructed by the instruction unit;
A display unit for displaying the stereoscopic video using the stereoscopic video;
A video display device comprising:
前記指示部は、前記生成部に対して、前記特定部で特定された視差映像の生成のみを指示する、
請求項1記載の映像表示装置。
The instruction unit instructs the generation unit only to generate the parallax image specified by the specifying unit.
The video display device according to claim 1.
前記指示部は、前記生成部に対して、前記複数の視差映像のうち、前記特定部で特定された視差映像、及び、前記特定部で特定された視差映像に近接する視差映像を含む視差映像の生成のみを指示する、
請求項1記載の映像表示装置。
The instructing unit includes a parallax image including a parallax image specified by the specifying unit and a parallax image close to the parallax image specified by the specifying unit among the plurality of parallax images. Only the generation of
The video display device according to claim 1.
前記位置情報取得部が取得した過去の前記位置情報を保持する記憶部と、
前記位置情報取得部が取得した現在の位置情報と、前記記憶部が保持する過去の位置情報とを用いて、視聴者の移動先を予測する予測部と、を更に具備し、
前記特定部は、前記現在の視聴者の位置情報と、前記予測部が予測した視聴者の移動先と、前記視域範囲情報とを用いて、現在の視聴者の眼に入る第1の視差映像、及び、前記予測部で予測された視聴者の移動先での視聴者の眼に入る第2の視差映像を含む視差映像を特定し、
前記指示部は、前記生成部に対する現在のタイミングでの視差映像生成の指示として、前記特定部で特定された前記第1の視差映像の生成のみを指示し、前記生成部に対する、視聴者が前記予測部で予測された移動先へ移動したタイミングでの視差映像生成の指示として、前記特定部で特定された前記第2の視差映像の生成のみを指示する、
請求項1記載の映像表示装置。
A storage unit that holds the past location information acquired by the location information acquisition unit;
A prediction unit that predicts a viewer's destination using the current position information acquired by the position information acquisition unit and past position information held by the storage unit;
The specifying unit uses the current viewer's position information, the viewer's movement destination predicted by the prediction unit, and the viewing area information to generate a first parallax that enters the current viewer's eyes. Specifying a parallax video including a video and a second parallax video entering the viewer's eyes at the viewer's destination predicted by the prediction unit;
The instruction unit instructs only the generation of the first parallax image specified by the specifying unit as an instruction to generate the parallax image at the current timing with respect to the generation unit. Instructing only the generation of the second parallax image specified by the specifying unit as an instruction to generate the parallax image at the timing of moving to the destination predicted by the prediction unit,
The video display device according to claim 1.
前記位置情報は、視聴者の視点位置を示す、
請求項1記載の映像表示装置。
The position information indicates a viewer's viewpoint position.
The video display device according to claim 1.
前記位置情報は、前記映像表示装置からの距離、及び、前記映像表示装置からの角度を含む、
請求項1記載の映像表示装置。
The position information includes a distance from the video display device and an angle from the video display device.
The video display device according to claim 1.
複数の視差映像から構成される立体視用の映像を用いて、立体映像を表示する映像表示方法であって、
視聴者の位置を示す位置情報を取得するステップと、
前記立体視用の映像を構成する前記複数の視差映像の各々に対応する視域範囲を示す視域範囲情報を取得するステップと、
前記位置情報および前記視域範囲情報を用いて、視聴者の眼に入る視差映像を含む視差映像を特定するステップと、
前記特定部で特定された視差映像に関する情報に基づいて、視差映像生成の指示を行うステップと、
指示された視差映像に基づいて、前記立体視用の映像を生成するステップと、
前記立体視用の映像を用いて、前記立体映像を表示するステップと、
からなる映像表示方法。
A video display method for displaying a stereoscopic video using a stereoscopic video composed of a plurality of parallax videos,
Obtaining position information indicating the position of the viewer;
Obtaining viewing zone range information indicating a viewing zone range corresponding to each of the plurality of parallax images constituting the stereoscopic video; and
Identifying a parallax video including a parallax video entering the viewer's eyes using the position information and the viewing zone range information;
Instructing the generation of parallax video based on information on the parallax video specified by the specifying unit;
Generating the stereoscopic video based on the instructed parallax video;
Displaying the stereoscopic video using the stereoscopic video;
A video display method comprising:
JP2011085337A 2011-04-07 2011-04-07 Video display apparatus and video display method Withdrawn JP2012222549A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011085337A JP2012222549A (en) 2011-04-07 2011-04-07 Video display apparatus and video display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011085337A JP2012222549A (en) 2011-04-07 2011-04-07 Video display apparatus and video display method

Publications (1)

Publication Number Publication Date
JP2012222549A true JP2012222549A (en) 2012-11-12

Family

ID=47273617

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011085337A Withdrawn JP2012222549A (en) 2011-04-07 2011-04-07 Video display apparatus and video display method

Country Status (1)

Country Link
JP (1) JP2012222549A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015089104A (en) * 2013-09-26 2015-05-07 Nltテクノロジー株式会社 Stereoscopic image display device, terminal device, stereoscopic image display method, and program thereof
JP2017038367A (en) * 2015-08-07 2017-02-16 三星電子株式会社Samsung Electronics Co.,Ltd. Rendering method and apparatus for plurality of users
JP2019213127A (en) * 2018-06-07 2019-12-12 日本放送協会 Ip stereoscopic image display device and program thereof
JP2021064834A (en) * 2019-10-10 2021-04-22 日本放送協会 Stereoscopic image display system

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015089104A (en) * 2013-09-26 2015-05-07 Nltテクノロジー株式会社 Stereoscopic image display device, terminal device, stereoscopic image display method, and program thereof
JP2017038367A (en) * 2015-08-07 2017-02-16 三星電子株式会社Samsung Electronics Co.,Ltd. Rendering method and apparatus for plurality of users
JP2019213127A (en) * 2018-06-07 2019-12-12 日本放送協会 Ip stereoscopic image display device and program thereof
JP7165513B2 (en) 2018-06-07 2022-11-04 日本放送協会 IP stereoscopic video display device and its program
JP2021064834A (en) * 2019-10-10 2021-04-22 日本放送協会 Stereoscopic image display system
JP7304264B2 (en) 2019-10-10 2023-07-06 日本放送協会 3D image display system

Similar Documents

Publication Publication Date Title
KR101292513B1 (en) Stereoscopic image display apparatus, stereoscopic image display method and stereoscopic image determining apparatus
KR20220155970A (en) Three dimensional glasses free light field display using eye location
EP2659680B1 (en) Method and apparatus for providing mono-vision in multi-view system
JP2019508726A5 (en)
JP5050120B1 (en) Stereoscopic image display device
JP6256901B2 (en) Video display device
US9571824B2 (en) Stereoscopic image display device and displaying method thereof
KR101975246B1 (en) Multi view image display apparatus and contorl method thereof
US20160165223A1 (en) Light-restricted projection units and three-dimensional display systems using the same
JP2010113159A (en) Stereoscopic image display apparatus and method
US20140071237A1 (en) Image processing device and method thereof, and program
JP4892205B2 (en) Stereoscopic image display apparatus and stereoscopic image display method
JP2010113161A (en) Video display apparatus
JP2012222549A (en) Video display apparatus and video display method
JP2013161035A (en) Picture display device
JP2007017635A (en) Stereoscopic image display device and stereoscopic image display method
KR101746719B1 (en) Output method of view images in three-dimensional display by different distance between display panel and lens
JP2001218231A (en) Device and method for displaying stereoscopic image
US9270980B2 (en) Autostereoscopic display system and method
KR101103710B1 (en) Image display apparatus using projection optics
KR20150139095A (en) Glasses-free 3D image display device using lens array
KR101274325B1 (en) Apparatus and method for multi-view 3d video display
KR20170122687A (en) Non optical plate multiview 2d/3d conversion parallax lighting system
WO2022228451A1 (en) Human eye tracking-based display processing method, apparatus and device, and storage medium
JP5343157B2 (en) Stereoscopic image display device, display method, and test pattern

Legal Events

Date Code Title Description
A300 Application deemed to be withdrawn because no request for examination was validly filed

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20140701