JPWO2012060169A1

JPWO2012060169A1 - Stereoscopic image display device and display adjustment method thereof

Info

Publication number: JPWO2012060169A1
Application number: JP2012541782A
Authority: JP
Inventors: 隆昭光永; 京一郎澤近; 景井　美帆; 美帆景井; 修二久保
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2010-11-02
Filing date: 2011-09-28
Publication date: 2014-05-12
Anticipated expiration: 2031-09-28
Also published as: WO2012060169A1; JP5512821B2

Abstract

ユーザが立体画像の視差調整を容易に行うことができる立体画像表示装置を提供することを目的とする。画像記憶部２２から立体画像を読み出す画像再生部２３と、リアルタイムで表示オブジェクトを合成し、立体画像を生成する画像生成部２４と、これらの立体画像を表示する視差バリア方式の表示部１０とを備え、再生画像及び生成画像に共通の視差調整量に基づいて、画像再生部２３は、読み出した立体画像について両眼視差のオフセット調整を行い、画像生成部２４は、表示オブジェクトごとに両眼視差のスケール調整を行って、立体画像を生成する。このため、再生画像及び生成画像について個別に視差調整を行う必要がなく、ユーザによる視差調整の作業を簡略化することができる。It is an object of the present invention to provide a stereoscopic image display device that allows a user to easily adjust parallax of a stereoscopic image. An image reproduction unit 23 that reads a stereoscopic image from the image storage unit 22, an image generation unit 24 that combines display objects in real time to generate a stereoscopic image, and a parallax barrier display unit 10 that displays these stereoscopic images. The image reproducing unit 23 performs binocular parallax offset adjustment on the read stereoscopic image based on the parallax adjustment amount common to the reproduced image and the generated image, and the image generating unit 24 performs binocular parallax for each display object. The three-dimensional image is generated by adjusting the scale. For this reason, it is not necessary to individually adjust the parallax for the reproduced image and the generated image, and the parallax adjustment work by the user can be simplified.

Description

本発明は、立体画像表示装置及びその表示調整方法に係り、さらに詳しくは、表示される立体画像の立体感をユーザが調整することができる立体画像表示装置の改良に関する。 The present invention relates to a stereoscopic image display device and a display adjustment method thereof, and more particularly to an improvement of a stereoscopic image display device that allows a user to adjust the stereoscopic effect of a displayed stereoscopic image.

左眼及び右眼に異なる画像を視認させることにより、両眼視差を利用して立体画像を表示する方法として、視差バリア方式、レンティキュラレンズ方式、シーケンシャルフレーム方式などが知られている。このような方法で表示された立体画像は、視覚疲労や不快感などを観者に与える場合がある。このような視覚疲労などの感じ方には個人差があるが、立体画像の奥行き幅が大きくなるほど、立体視することが難しくなり、視覚疲労や不快感も増大すると考えられる。このため、立体画像表示装置は、表示する立体画像の奥行き幅をユーザ自身が調整できるように構成されていることが望ましい。 As a method of displaying a stereoscopic image using binocular parallax by causing the left eye and the right eye to visually recognize different images, a parallax barrier method, a lenticular lens method, a sequential frame method, and the like are known. A stereoscopic image displayed by such a method may give visual fatigue or discomfort to the viewer. There are individual differences in how to feel such visual fatigue, but it is considered that as the depth width of the stereoscopic image increases, stereoscopic viewing becomes difficult and visual fatigue and discomfort increase. For this reason, it is desirable that the stereoscopic image display device is configured so that the user can adjust the depth width of the stereoscopic image to be displayed.

例えば、ＴＶゲーム装置のように、リアルタイムで画像の生成及び表示を行っている画像生成装置であれば、立体画像の奥行き幅を容易に変化させることができるため、ユーザの好みに応じて、表示される立体画像の奥行き幅を調整することができる。しかしながら、予め記憶している画像データに基づいて立体画像を表示する画像再生装置であれば、ユーザの好みに応じて、立体画像の奥行き幅を調整することはできないという問題があった。 For example, in the case of an image generation device that generates and displays an image in real time, such as a TV game device, the depth width of a stereoscopic image can be easily changed. The depth width of the stereoscopic image to be adjusted can be adjusted. However, in the case of an image reproducing device that displays a stereoscopic image based on pre-stored image data, there is a problem that the depth width of the stereoscopic image cannot be adjusted according to the user's preference.

そこで、画像再生装置であれば、表示画面からの浮き上がり量を抑制することが考えられる。画像再生装置は、立体画像の奥行き幅を変化させることはできないが、表示画面に対する結像位置を画像全体として後方へ移動させることはできる。このため、ユーザの好みに応じて、画像全体を後方へ移動させ、表示画面からの浮き上がり量を抑制すれば、ユーザに与える視覚疲労や不快感などを軽減することができると考えられる。 Therefore, in the case of an image playback device, it is conceivable to suppress the amount of lifting from the display screen. The image reproducing apparatus cannot change the depth width of the stereoscopic image, but can move the imaging position with respect to the display screen backward as the entire image. For this reason, it is considered that visual fatigue and discomfort given to the user can be reduced by moving the entire image backward in accordance with the user's preference and suppressing the amount of lifting from the display screen.

特開平９−１９１３９３号公報JP-A-9-191393

視覚疲労などの軽減方法が、画像生成装置の場合と、画像再生装置の場合とで異なることから、様々なアプリケーションプログラムを実行することができる立体画像表示装置の場合、ユーザが同一であっても、ＴＶゲームなどの画像生成プログラムについての調整作業と、動画ビュアなどの画像再生プログラムについての調整作業とを個別に行わなければならず、調整作業が煩雑であるという問題があった。 Since the method for reducing visual fatigue is different between the case of the image generation device and the case of the image reproduction device, in the case of a stereoscopic image display device capable of executing various application programs, even if the user is the same There is a problem that adjustment work for an image generation program such as a TV game and adjustment work for an image reproduction program such as a video viewer must be performed separately, and the adjustment work is complicated.

本発明は、上記の事情に鑑みてなされたものであり、ユーザが立体画像の視差調整を容易に行うことができる立体画像表示装置を提供することを目的とする。特に、共通のパラメータを指定することにより、生成された画像及び再生された画像のいずれについても視差調整を行うことができる立体画像表示装置を提供することを目的とする。さらに、この様な立体画像表示装置における表示調整方法を提供することを目的とする。 The present invention has been made in view of the above circumstances, and an object thereof is to provide a stereoscopic image display device that allows a user to easily adjust parallax of a stereoscopic image. In particular, an object of the present invention is to provide a stereoscopic image display device that can perform parallax adjustment for both a generated image and a reproduced image by specifying common parameters. Furthermore, it aims at providing the display adjustment method in such a three-dimensional image display apparatus.

本発明による立体画像表示装置は、左眼用画像及び右眼用画像をそれぞれ表示することにより、両眼視差を利用して立体画像を表示する表示手段と、上記左眼用画像及び上記右眼用画像を規定する第１の立体画像データを保持する画像記憶手段と、上記画像記憶手段から第１の立体画像データを読み出し、上記表示手段により表示させる画像再生手段と、表示オブジェクトごとに両眼視差を異ならせて、２以上の上記表示オブジェクトを合成することにより、上記左眼用画像及び上記右眼用画像を規定する第２の立体画像データを生成し、上記表示手段により表示させる画像生成手段とを備え、更に以下の構成を有している。 The stereoscopic image display apparatus according to the present invention includes a display unit that displays a stereoscopic image using binocular parallax by displaying a left-eye image and a right-eye image, and the left-eye image and the right-eye image. Image storage means for holding first stereoscopic image data defining an image for use, image reproduction means for reading out the first stereoscopic image data from the image storage means and displaying it by the display means, and both eyes for each display object Generating second stereoscopic image data defining the left-eye image and the right-eye image by synthesizing two or more display objects with different parallaxes, and generating the image to be displayed by the display means And further comprising the following configuration.

第１の本発明による立体画像表示装置は、第１及び第２の立体画像データに共通する視差調整量を指定するための視差調整量指定手段とを備え、上記画像再生手段が、上記視差調整量に基づいて、第１の立体画像データの両眼視差のオフセットを調整し、上記画像生成手段が、上記視差調整量に基づいて、第２の立体画像データの両眼視差のスケールを調整するように構成される。 The stereoscopic image display device according to the first aspect of the present invention includes a parallax adjustment amount specifying means for specifying a parallax adjustment amount common to the first and second stereoscopic image data, and the image reproducing means includes the parallax adjustment. The binocular parallax offset of the first stereoscopic image data is adjusted based on the amount, and the image generation means adjusts the binocular parallax scale of the second stereoscopic image data based on the parallax adjustment amount. Configured as follows.

この様な構成により、ユーザが指定した視差調整量に基づいて、第１の立体画像データについては両眼視差のオフセット調整が行われ、第２の立体画像データについては両眼視差のスケール調整が行われる。つまり、第１の立体画像データについては、立体画像の結像位置を前後方向に移動させ、第２の立体画像データについては、立体画像の奥行き幅を伸縮させるという互いに異なる調整処理が、共通のパラメータに基づいて行われる。従って、第１及び第２の立体画像データについて個別の調整作業を行う必要がなく、ユーザによる調整作業を簡略化することができる。 With such a configuration, the binocular parallax offset adjustment is performed for the first stereoscopic image data and the binocular parallax scale adjustment is performed for the second stereoscopic image data based on the parallax adjustment amount specified by the user. Done. That is, for the first stereoscopic image data, different adjustment processes such as moving the imaging position of the stereoscopic image in the front-rear direction and expanding and contracting the depth width of the stereoscopic image for the second stereoscopic image data are common. This is done based on parameters. Therefore, it is not necessary to perform individual adjustment work on the first and second stereoscopic image data, and the adjustment work by the user can be simplified.

なお、上記第１及び第２の立体画像データの視差調整は、視覚疲労などを感じるユーザが立体感を抑制するために行うものであってもよいが、逆に、視覚疲労などを感じないユーザが、立体感を強調するために行うものであってもよい。 The parallax adjustment of the first and second stereoscopic image data may be performed by a user who feels visual fatigue or the like in order to suppress the stereoscopic effect, but conversely, a user who does not feel visual fatigue or the like. However, it may be performed to emphasize the three-dimensional effect.

第２の本発明による立体画像表示装置は、上記構成に加えて、上記画像再生手段が、上記視差調整量に基づいて立体画像の結像位置を後方へ移動させ、上記画像生成手段が、上記視差調整量に基づいて立体画像の奥行き幅を縮小させるように構成される。 In the stereoscopic image display device according to the second aspect of the present invention, in addition to the above configuration, the image reproducing means moves the imaging position of the stereoscopic image backward based on the parallax adjustment amount, and the image generating means The stereoscopic image is configured to reduce the depth width based on the parallax adjustment amount.

この様な構成により、第１及び第２の立体画像データのいずれについても、共通のパラメータによって、立体画像の表示画面からの浮き上がり量を減少させ、ユーザに与える視覚疲労や不快感を抑制することができる。従って、視覚疲労や不快感を抑制するための調整作業を簡略化することができる。 With such a configuration, for both the first and second stereoscopic image data, the amount of floating from the display screen of the stereoscopic image is reduced by a common parameter, and visual fatigue and discomfort given to the user are suppressed. Can do. Therefore, the adjustment work for suppressing visual fatigue and discomfort can be simplified.

第３の本発明による立体画像表示装置は、上記構成に加えて、上記画像再生手段が、上記視差調整量に対応づけられたオフセット量に基づいて、第１の立体画像データの両眼視差を調整し、上記画像生成手段が、上記視差調整量に対応づけられたスケールファクタに基づいて、第２の立体画像データの両眼視差を調整するように構成される。 In the stereoscopic image display device according to the third aspect of the present invention, in addition to the above-described configuration, the image reproducing means can calculate binocular parallax of the first stereoscopic image data based on an offset amount associated with the parallax adjustment amount. The image generation means is configured to adjust the binocular parallax of the second stereoscopic image data based on a scale factor associated with the parallax adjustment amount.

第４の本発明による立体画像表示装置は、上記構成に加えて、上記画像再生手段が、上記オフセット量に基づいて、上記左眼用画像及び上記右眼用画像を左右方向に相対的にシフトさせ、上記画像生成手段が、上記スケールファクタに基づいて、上記左眼用画像内及び上記右眼用画像内における上記表示オブジェクトの結像位置を左右方向に相対的にシフトさせるように構成される。 In the stereoscopic image display device according to the fourth aspect of the present invention, in addition to the above configuration, the image reproduction means relatively shifts the left-eye image and the right-eye image in the left-right direction based on the offset amount. And the image generation means is configured to relatively shift the imaging position of the display object in the left-eye image and the right-eye image in the left-right direction based on the scale factor. .

第５の本発明による立体画像表示装置は、上記構成に加えて、上記表示手段が、多数の縦長画像に分割された上記左眼用画像及び上記右眼用画像を左右方向に交互に並べて表示する平面表示手段と、多数の縦長バリアが形成され、上記左眼用画像を左眼で視認させるとともに、上記右眼用画像を右眼で視認させる遮光手段とを有する。 In the stereoscopic image display device according to the fifth aspect of the present invention, in addition to the above configuration, the display means displays the left-eye image and the right-eye image divided into a plurality of vertically long images alternately in the left-right direction. A flat display means for forming a plurality of vertically long barriers, and a light shielding means for visually recognizing the image for the left eye with the left eye and visually recognizing the image for the right eye with the right eye.

第６の本発明による立体画像表示装置の表示調整方法は、左眼用画像及び右眼用画像を規定する第１の立体画像データを保持する画像記憶手段を備えた立体画像表示装置の表示調整方法において、上記左眼用画像及び上記右眼用画像をそれぞれ表示することにより、両眼視差を利用して立体画像を表示する表示ステップと、上記画像記憶手段から第１の立体画像データを読み出し、上記表示ステップにより表示させる画像再生ステップと、表示オブジェクトごとに両眼視差を異ならせて、２以上の上記表示オブジェクトを合成することにより、上記左眼用画像及び上記右眼用画像を規定する第２の立体画像データを生成し、上記表示ステップにより表示させる画像生成ステップと、第１及び第２の立体画像データに共通する視差調整量を指定するための視差調整量指定ステップとを備え、上記画像再生ステップでは、上記視差調整量に基づいて、第１の立体画像データの両眼視差のオフセットを調整し、上記画像生成ステップでは、上記視差調整量に基づいて、第２の立体画像データの両眼視差をスケーラブルに調整するように構成される。 A display adjustment method for a stereoscopic image display device according to a sixth aspect of the present invention is a display adjustment method for a stereoscopic image display device including image storage means for holding first stereoscopic image data that defines an image for the left eye and an image for the right eye. In the method, a display step of displaying a stereoscopic image using binocular parallax by displaying the image for the left eye and the image for the right eye, respectively, and reading the first stereoscopic image data from the image storage means The left-eye image and the right-eye image are defined by synthesizing two or more display objects by changing the binocular parallax for each display object and the image reproduction step to be displayed in the display step. Specify the parallax adjustment amount common to the first and second stereoscopic image data, and the image generation step for generating the second stereoscopic image data and displaying it by the display step. A parallax adjustment amount designation step for adjusting the binocular parallax offset of the first stereoscopic image data based on the parallax adjustment amount in the image reproduction step, and the parallax adjustment amount in the image generation step. Based on the adjustment amount, the binocular parallax of the second stereoscopic image data is configured to be scalable.

本発明によれば、再生表示される第１の立体画像と、リアルタイムで生成及び表示が行われる第２の立体画像について、共通の視差調整量を指定することにより、第１の立体画像データについては両眼視差のオフセット調整が行われ、第２の立体画像データについては両眼視差のスケール調整が行われる。従って、第１及び第２の立体画像データについて個別の調整作業を行う必要がなく、ユーザによる調整作業を簡略化することができる。 According to the present invention, the first stereoscopic image data is specified by specifying a common parallax adjustment amount for the first stereoscopic image to be reproduced and displayed and the second stereoscopic image that is generated and displayed in real time. The binocular parallax offset adjustment is performed, and the binocular parallax scale adjustment is performed on the second stereoscopic image data. Therefore, it is not necessary to perform individual adjustment work on the first and second stereoscopic image data, and the adjustment work by the user can be simplified.

本発明の実施の形態１による立体画像表示装置１００の一例を示した外観図である。1 is an external view showing an example of a stereoscopic image display apparatus 100 according to Embodiment 1 of the present invention. 表示部１０による立体画像の表示原理を説明するための説明図である。FIG. 4 is an explanatory diagram for explaining a principle of displaying a stereoscopic image by the display unit. 表示部１０が平面画像を表示している場合の様子を示した図である。It is the figure which showed the mode in case the display part 10 is displaying the plane image. 人物像Ｍが表示画面１１ｄよりも前方に浮き上がるように表示されている場合の様子を示した図である。It is the figure which showed the mode in case the person image M is displayed so that it may float up ahead of the display screen 11d. 人物像Ｍが表示画面１１ｄよりも後方に沈み込むように表示されている場合の様子を示した図である。It is the figure which showed the mode in case the person image M is displayed so that it may sink behind back from the display screen 11d. 本発明の実施の形態１による立体画像表示装置１００の一構成例を示した図である。It is the figure which showed the example of 1 structure of the stereo image display apparatus 100 by Embodiment 1 of this invention. 視差オフセット調整及び視差スケール調整についての説明図であり、左眼用画像１５Ｌ及び右眼用画像１５Ｒが示されている。It is explanatory drawing about parallax offset adjustment and parallax scale adjustment, and image 15L for left eyes and image 15R for right eyes are shown. 視差オフセット調整及び視差スケール調整についての説明図であり、立体画像中の表示オブジェクトＡ，Ｂの前後方向の結像位置が示されている。It is explanatory drawing about parallax offset adjustment and parallax scale adjustment, and the imaging position of the front-back direction of the display objects A and B in a stereo image is shown. 本発明の実施の形態１による視差調整量の一例を示した図である。It is the figure which showed an example of the parallax adjustment amount by Embodiment 1 of this invention. 本発明の実施の形態２による立体画像表示装置１０１の一構成例を示した図である。It is the figure which showed the example of 1 structure of the stereo image display apparatus 101 by Embodiment 2 of this invention. 本発明の実施の形態３による視差調整量の一例を示した図である。It is the figure which showed an example of the parallax adjustment amount by Embodiment 3 of this invention.

実施の形態１．
図１は、本発明の実施の形態１による立体画像表示装置１００の一例を示した外観図であり、立体画像表示装置１００の一例として携帯電話機が示されている。この携帯電話機は、略矩形からなる薄型筐体の前面に、表示部１０、通話用レシーバ３１、通話用マイクロフォン３２、操作キー３３を備えている。表示部１０は、両眼視差を利用して立体画像を表示する表示手段である。ここでは、表示部１０がタッチパネルからなり、表示領域に形成されたタッチセンサが、表示領域に対するユーザ操作を検出することにより、種々の操作入力を行うことができるものとする。Embodiment 1 FIG.
FIG. 1 is an external view showing an example of a stereoscopic image display apparatus 100 according to Embodiment 1 of the present invention. A mobile phone is shown as an example of the stereoscopic image display apparatus 100. This cellular phone includes a display unit 10, a call receiver 31, a call microphone 32, and operation keys 33 on the front surface of a thin casing having a substantially rectangular shape. The display unit 10 is a display unit that displays a stereoscopic image using binocular parallax. Here, it is assumed that the display unit 10 includes a touch panel, and a touch sensor formed in the display area can perform various operation inputs by detecting user operations on the display area.

図２〜図５は、図１の表示部１０による立体画像の表示原理を説明するための説明図であり、図２には、表示部１０の概略構成が示されている。表示部１０は、表示パネル１１及びバリアパネル１２によって構成され、左眼及び右眼によって異なる画像を視認させることにより、両眼視差を利用して立体画像を表示する。このような立体画像の表示方法は視差バリア方式（パララックスバリア方式）と呼ばれている。 2-5 is explanatory drawing for demonstrating the display principle of the stereo image by the display part 10 of FIG. 1, The schematic structure of the display part 10 is shown by FIG. The display unit 10 includes a display panel 11 and a barrier panel 12, and displays a stereoscopic image using binocular parallax by visually recognizing different images for the left eye and the right eye. Such a stereoscopic image display method is called a parallax barrier method (parallax barrier method).

表示パネル１１は、液晶パネルや有機ＥＬパネルなどを用いた薄型の表示装置であり、平面画像が表示される表示画面１１ｄを有している。バリアパネル１２は、液晶パネルを用いた遮光装置であり、表示パネル１１の前方に配置され、表示画面１１ｄに対応する透過窓１２ｄを有している。この透過窓１２ｄは、その透過領域内の一部に表示画面１１ｄからの出力光を遮断するバリア１２ｂが形成されている。 The display panel 11 is a thin display device using a liquid crystal panel, an organic EL panel, or the like, and has a display screen 11d on which a planar image is displayed. The barrier panel 12 is a light shielding device using a liquid crystal panel, and is disposed in front of the display panel 11 and has a transmission window 12d corresponding to the display screen 11d. The transmission window 12d is formed with a barrier 12b that blocks output light from the display screen 11d in a part of the transmission area.

表示パネル１１の表示画面１１ｄには、多数の縦長画像１６Ｌ，１６Ｒにそれぞれ分割された左眼用画像１５Ｌ及び右眼用画像１５Ｒが左右方向に交互に並べて表示される。一方、バリアパネル１２の透過窓１２ｄ内には、多数の縦長バリア１２ｂが互いに離間させながら左右方向に並べられている。このため、ユーザの両眼の位置を考慮し、縦長画像１６Ｌ，１６Ｒ及び縦長バリア１２ｂの幅や位置を調整することにより、左眼用画像１５Ｌを左眼のみで視認させ、右眼用画像１５Ｒを右眼のみで視認させることができる。このようにして、両眼に異なる画像１５Ｌ，１５Ｒを視認させると、立体画像を知覚させることができる。 On the display screen 11d of the display panel 11, a left-eye image 15L and a right-eye image 15R that are divided into a number of vertically long images 16L and 16R are alternately displayed in the left-right direction. On the other hand, in the transmission window 12d of the barrier panel 12, a number of vertically long barriers 12b are arranged in the left-right direction while being separated from each other. For this reason, in consideration of the position of both eyes of the user, by adjusting the widths and positions of the vertically long images 16L and 16R and the vertically long barrier 12b, the left eye image 15L can be viewed only by the left eye, and the right eye image 15R Can be viewed with only the right eye. In this way, when different images 15L and 15R are visually recognized by both eyes, a stereoscopic image can be perceived.

図３〜図５は、立体画像における前後方向の表現方法についての説明図である。いずれも図中の（ａ）には、左眼用画像１５Ｌ及び右眼用画像１５Ｒの一例が示され、（ｂ）には、両眼から人物像Ｍへの視線方向が示されている。なお、本明細書では、表示画面１１ｄよりも手前側を「前方」、表示画面１１ｄよりも奥側を「後方」、表示画面１１ｄに垂直な方向を「前後方向」と呼ぶことにする。 3-5 is explanatory drawing about the expression method of the front-back direction in a stereo image. In each of the drawings, (a) shows an example of the left-eye image 15L and the right-eye image 15R, and (b) shows the line-of-sight direction from both eyes to the person image M. In this specification, the front side of the display screen 11d is called “front”, the back side of the display screen 11d is called “rear”, and the direction perpendicular to the display screen 11d is called “front-rear direction”.

図３は、表示部１０が平面画像を表示している場合の様子を示した図である。図中の（ａ）に示された左眼用画像１５Ｌ及び右眼用画像１５Ｒは同一の画像である。この場合、右眼及び左眼のいずれから見ても、表示画面１１ｄ上の同じ表示位置に同じ画像が視認される。このため、立体画像のような奥行きが知覚されることはなく、通常の平面画像として視認される。図中の（ｂ）には、画像中の人物像Ｍに注目しているとき、両眼から人物像Ｍへ向かう視線方向がそれぞれ描かれている。２つの視線は表示画面１１ｄ上で交差しているため、人物像Ｍが表示画面１１ｄ上に表示されていると知覚される。このとき、２つの視線方向のなす角度αは「輻輳角」と呼ばれ、この輻輳角αは、観者の両眼の距離と、顔から表示パネル１１までの距離とによって決まる。 FIG. 3 is a diagram illustrating a state where the display unit 10 displays a planar image. The left-eye image 15L and the right-eye image 15R shown in (a) in the figure are the same image. In this case, the same image is visually recognized at the same display position on the display screen 11d when viewed from either the right eye or the left eye. For this reason, the depth like a stereoscopic image is not perceived and is visually recognized as a normal planar image. (B) in the drawing shows the line-of-sight directions from both eyes toward the person image M when attention is paid to the person image M in the image. Since the two lines of sight intersect on the display screen 11d, it is perceived that the person image M is displayed on the display screen 11d. At this time, the angle α formed by the two line-of-sight directions is called a “convergence angle”, and the convergence angle α is determined by the distance between the eyes of the viewer and the distance from the face to the display panel 11.

図４は、人物像Ｍが表示画面１１ｄから浮き上がるように表示されている場合の様子を示した図である。図４の（ａ）では、図３の（ａ）に比べて、人物像Ｍの表示位置を左眼用画像１５Ｌでは右へシフトさせ、右眼用画像１５Ｒでは左へシフトさせている。このため、図４の（ｂ）では、両眼から人物像Ｍへ向かう視線が表示画面１１ｄよりも前方で交差し、その輻輳角βは、図３の輻輳角αよりも大きくなっている。つまり、左眼用画像１５Ｌ及び右眼用画像１５Ｒにおける人物像Ｍの表示位置を左右方向に相対的にシフトさせることにより、人物像Ｍについて正の両眼視差γ（＝β−α）を生じさせている。その結果、両眼視差γに相当する距離だけ人物像Ｍを浮き上がらせ、人物像Ｍが表示画面１１ｄよりも前方に表示されていると知覚させることができる。 FIG. 4 is a diagram illustrating a state where the person image M is displayed so as to be lifted from the display screen 11d. In FIG. 4A, the display position of the human image M is shifted to the right in the left eye image 15L and to the left in the right eye image 15R as compared to FIG. Therefore, in FIG. 4B, the line of sight from both eyes toward the person image M intersects in front of the display screen 11d, and the convergence angle β is larger than the convergence angle α in FIG. That is, a positive binocular parallax γ (= β−α) is generated for the human image M by relatively shifting the display position of the human image M in the left-eye image 15L and the right-eye image 15R in the left-right direction. I am letting. As a result, the person image M can be lifted by a distance corresponding to the binocular parallax γ, and it can be perceived that the person image M is displayed in front of the display screen 11d.

図５は、人物像Ｍが表示画面１１ｄよりも沈み込むように表示されている場合の様子を示した図である。図５の（ａ）では、図３の（ａ）に比べて、人物像Ｍの表示位置を左眼用画像１５Ｌでは左へシフトさせ、右眼用画像１５Ｒでは右へシフトさせている。このため、図５の（ｂ）では、両眼から人物像Ｍへ向かう視線が表示画面１１ｄよりも後方で交差し、その輻輳角βは、図３の輻輳角αよりも小さくなっている。つまり、左眼用画像１５Ｌ及び右眼用画像１５Ｒにおける人物像Ｍの表示位置を左右方向に相対的にシフトさせることにより、人物像Ｍについて負の両眼視差γ（＝β−α）を生じさせている。その結果、両眼視差γに相当する距離だけ人物像Ｍを沈み込ませ、人物像Ｍが表示画面１１ｄよりも後方に表示されていると知覚させることができる。 FIG. 5 is a diagram illustrating a state in which the person image M is displayed so as to sink more than the display screen 11d. 5A, the display position of the person image M is shifted to the left in the left-eye image 15L and to the right in the right-eye image 15R, compared to FIG. 3A. Therefore, in FIG. 5B, the line of sight from both eyes to the person image M intersects behind the display screen 11d, and the convergence angle β is smaller than the convergence angle α in FIG. That is, a negative binocular parallax γ (= β−α) is generated for the human image M by relatively shifting the display position of the human image M in the left-eye image 15L and the right-eye image 15R in the left-right direction. I am letting. As a result, the human image M can be sunk by a distance corresponding to the binocular parallax γ, and it can be perceived that the human image M is displayed behind the display screen 11d.

つまり、左眼用画像１５Ｌ内における人物像Ｍの表示位置に対し、右眼用画像１５Ｒ内における人物像Ｍの表示位置を相対的に左へシフトさせれば、人物像Ｍの結像位置は、シフト量に応じた距離だけ表示画面１１ｄよりも前方へ移動する。同様にして、逆方向にシフトさせれば、人物像Ｍの結像位置は、シフト量に応じた距離だけ表示画面１１ｄよりも後方へ移動する。この様にして、対応する画像の表示位置を左右方向に相対的にシフトさせることにより、当該画像の結像位置を前後方向に移動させることができる。 That is, if the display position of the person image M in the right eye image 15R is relatively shifted to the left with respect to the display position of the person image M in the left eye image 15L, the image formation position of the person image M is Then, it moves forward from the display screen 11d by a distance corresponding to the shift amount. Similarly, if the image is shifted in the reverse direction, the image formation position of the person image M moves backward from the display screen 11d by a distance corresponding to the shift amount. In this manner, the image formation position of the image can be moved in the front-rear direction by relatively shifting the display position of the corresponding image in the left-right direction.

なお、本明細書では、便宜上、表示装置１１よりも後方で結像させ、画像が沈み込んでいるように知覚させる場合の視差を負の値で表す一方、表示装置１１よりも前方で結像させ、画像が浮き上がっているように知覚させる場合の視差を正の値で表すことにより、前後方向の視差を統一的に取り扱っている。このため、視差の減少は、画像の浮き上がりの抑制と沈み込みの強調とを意味し、視差の増加は、画像の浮き上がりの強調と沈み込みの抑制とを意味するものとする。 In this specification, for the sake of convenience, an image is formed behind the display device 11 and the parallax when the image is perceived as sinking is expressed by a negative value, while the image is formed in front of the display device 11. The parallax in the front-rear direction is handled in a unified manner by expressing the parallax when the image is perceived to be floating as a positive value. For this reason, a reduction in parallax means suppression of image lifting and emphasis on sinking, and an increase in parallax means enhancement of lifting of image and suppression of sinking.

図６は、本発明の実施の形態１による立体画像表示装置１００の一構成例を示した図である。この立体画像表示装置１００は、画像指定部２０、視差調整量指定部２１、画像記憶部２２、画像再生部２３、画像生成部２４、表示オブジェクト記憶部２５及び表示部１０により構成される。 FIG. 6 is a diagram showing a configuration example of the stereoscopic image display apparatus 100 according to Embodiment 1 of the present invention. The stereoscopic image display device 100 includes an image designation unit 20, a parallax adjustment amount designation unit 21, an image storage unit 22, an image reproduction unit 23, an image generation unit 24, a display object storage unit 25, and the display unit 10.

画像指定部２０は、画像再生部２３及び画像生成部２４に対し、表示部１０に表示させる立体画像を指定する手段である。画像記憶部２２内に保持されている立体画像を表示させる場合であれば、ファイル名などにより立体画像データを指定した画像再生コマンドを画像再生部２３へ出力する。２以上の表示オブジェクトを合成した新たな立体画像を生成して表示させる場合であれば、合成すべき２以上の表示オブジェクトを指定するとともに、表示オブジェクトごとの両眼視差を指定した画像生成コマンドを画像生成部２４へ出力する。 The image designation unit 20 is a unit that designates a stereoscopic image to be displayed on the display unit 10 for the image reproduction unit 23 and the image generation unit 24. If a stereoscopic image held in the image storage unit 22 is to be displayed, an image playback command specifying stereoscopic image data by a file name or the like is output to the image playback unit 23. In the case of generating and displaying a new stereoscopic image obtained by synthesizing two or more display objects, an image generation command for designating two or more display objects to be synthesized and designating binocular parallax for each display object is provided. The image is output to the image generation unit 24.

視差調整量指定部２１は、ユーザ操作に基づいて視差調整量を指定する手段である。視差調整量は、立体画像の表示画面１１ｄからの浮き上がり量を調整するためのパラメータであり、ここでは、調整レベル０〜６の７段階の中から任意の調整レベルがユーザによって選択されるものとする。調整レベル０〜４は、浮き上がり量を抑制するレベルであり、数字が小さくなるほど抑制が強くなる。調整レベル５は浮き上がり量を調整しないレベル、調整レベル６は浮き上がり量を増大させるレベルである。立体画像の浮き上がり量が大きくなれば、当該立体画像を見ているユーザは眼に疲れを感じ易くなる。しかしながら、その程度には個人差があるため、視差調整量を指定することにより、ユーザの好みに応じて、浮き上がり量を調整することができる。例えば、初期値を調整レベル５とし、視覚疲労を感じる場合には、その程度に応じて調整レベル０〜４のいずれかを選択すればよい。逆に、立体感を強調させたい場合には、調整レベル６を選択すればよい。 The parallax adjustment amount designation unit 21 is a means for designating the parallax adjustment amount based on a user operation. The parallax adjustment amount is a parameter for adjusting the amount of floating of the stereoscopic image from the display screen 11d. Here, an arbitrary adjustment level is selected by the user from seven adjustment levels 0 to 6. To do. Adjustment levels 0 to 4 are levels for suppressing the amount of lifting, and the smaller the number, the stronger the suppression. The adjustment level 5 is a level at which the lifting amount is not adjusted, and the adjustment level 6 is a level at which the lifting amount is increased. If the amount of lifting of the stereoscopic image increases, the user who is viewing the stereoscopic image is likely to feel tired in the eyes. However, since there is a difference between individuals, the amount of lift can be adjusted according to the user's preference by specifying the parallax adjustment amount. For example, when the initial value is the adjustment level 5 and visual fatigue is felt, any one of the adjustment levels 0 to 4 may be selected according to the degree. Conversely, when it is desired to enhance the stereoscopic effect, adjustment level 6 may be selected.

画像記憶部２２は、外部から立体画像表示装置１００へ予め入力され、あるいは、立体画像表示装置１００内において予め生成された立体画像データを記憶する記憶手段である。立体画像データは、立体画像を表示するための左眼用画像１５Ｌ及び右眼用画像１５Ｒを規定するデータである。例えば、左眼用画像を規定するデータと、右眼用画像を規定するデータとからなるものであってもよいし、左眼用画像及び左眼用画像のいずれか一方を規定するデータと、両者の差分を規定するデータとからなるものであってもよい。 The image storage unit 22 is a storage unit that stores stereoscopic image data that is input in advance to the stereoscopic image display device 100 from the outside or that is generated in advance in the stereoscopic image display device 100. The stereoscopic image data is data defining a left-eye image 15L and a right-eye image 15R for displaying a stereoscopic image. For example, it may consist of data defining a left-eye image and data defining a right-eye image, or data defining either a left-eye image or a left-eye image; It may consist of data defining the difference between the two.

画像再生部２３は、画像記憶部２２に保持されている立体画像を表示部１０に表示させる立体画像の表示制御手段であり、画像読出部２３１及び視差オフセット調整部２３２からなる。例えば、既存の静止画や動画を再生するアプリケーションプログラムが画像再生部２３に相当する。 The image reproduction unit 23 is a stereoscopic image display control unit that displays a stereoscopic image held in the image storage unit 22 on the display unit 10, and includes an image reading unit 231 and a parallax offset adjustment unit 232. For example, an application program for reproducing an existing still image or moving image corresponds to the image reproduction unit 23.

画像読出部２３１は、画像指定部２０から画像再生コマンドが入力された場合に、画像再生コマンドが指定する立体画像データを画像記憶部２２から読み出す。 When an image reproduction command is input from the image designating unit 20, the image reading unit 231 reads the stereoscopic image data designated by the image reproduction command from the image storage unit 22.

視差オフセット調整部２３２は、画像読出部２３１が読み出した立体画像データに対し、その両眼視差をオフセットさせる視差オフセット調整を行っている。この視差オフセット調整は、左眼用画像１５Ｌ及び右眼用画像１５Ｒについて、画像全体を左右方向に相対的にシフトさせることにより、立体画像の両眼視差のオフセットを調整する視差調整である。オフセット量は、視差調整量に基づいて決定される。このような視差オフセット調整を行うことにより、立体画像の結像位置を前後方向に移動させることができる。 The parallax offset adjustment unit 232 performs parallax offset adjustment for offsetting the binocular parallax with respect to the stereoscopic image data read by the image reading unit 231. This parallax offset adjustment is parallax adjustment that adjusts the binocular parallax offset of the stereoscopic image by relatively shifting the entire image in the left-right direction with respect to the left-eye image 15L and the right-eye image 15R. The offset amount is determined based on the parallax adjustment amount. By performing such parallax offset adjustment, the imaging position of the stereoscopic image can be moved in the front-rear direction.

画像生成部２４は、画像指定部２０から画像生成コマンドが入力された場合に、２以上の表示オブジェクトを合成することにより、新たな立体画像を生成し、表示部１０に表示させる表示制御手段であり、視差スケール調整部２４１及びオブジェクト合成部２４２からなる。例えば、ＴＶゲームのようにリアルタイムで画像の生成及び表示を行うアプリケーションプログラムが画像生成部２４に相当する。 The image generation unit 24 is a display control unit that generates a new stereoscopic image by combining two or more display objects when an image generation command is input from the image designation unit 20 and displays the new stereoscopic image on the display unit 10. And a parallax scale adjustment unit 241 and an object composition unit 242. For example, an application program that generates and displays an image in real time like a TV game corresponds to the image generation unit 24.

オブジェクト合成部２４２は、画像生成コマンドにより指定された２以上の表示オブジェクトを表示オブジェクト記憶部２５から読み出し、これらの表示オブジェクトを合成することにより、立体画像データを生成する。このとき、各表示オブジェクトの前後方向の結像位置は、画像生成コマンドによって指定され、視差スケール調整部２４１により調整された表示オブジェクトごとの両眼視差に基づいて決められる。 The object composition unit 242 reads out two or more display objects specified by the image generation command from the display object storage unit 25 and composes these display objects to generate stereoscopic image data. At this time, the imaging position in the front-rear direction of each display object is determined based on the binocular parallax for each display object designated by the image generation command and adjusted by the parallax scale adjustment unit 241.

視差スケール調整部２４１は、表示オブジェクトごとの両眼視差をスケーラブルに調整する視差スケール調整を行っている。この視差スケール調整は、画像生成コマンドが指定する表示オブジェクトごとの両眼視差にスケールファクタを掛けることにより、立体画像の両眼視差をスケーラブルに調整する視差調整である。スケールファクタは、視差調整量に基づいて決定される係数であり、全ての表示オブジェクトについて同じ係数が用いられる。このような視差調整を行うことにより、各表示オブジェクトの前方への浮き出し及び後方への沈み込みをともに強調又は抑制し、立体画像の奥行き幅を伸縮させることができる。 The parallax scale adjustment unit 241 performs parallax scale adjustment that adjusts the binocular parallax for each display object in a scalable manner. This parallax scale adjustment is a parallax adjustment that adjusts the binocular parallax of a stereoscopic image in a scalable manner by multiplying the binocular parallax for each display object specified by the image generation command by a scale factor. The scale factor is a coefficient determined based on the parallax adjustment amount, and the same coefficient is used for all display objects. By performing such parallax adjustment, it is possible to emphasize or suppress both the forward protrusion and the backward sink of each display object, and to expand and contract the depth width of the stereoscopic image.

図７及び図８は、本発明の実施の形態１による視差オフセット調整及び視差スケール調整についての説明図である。図７には、左眼用画像１５Ｌ及び右眼用画像１５Ｒが示され、図８には、立体画像中の表示オブジェクトＡ，Ｂの前後方向の結像位置が示されている。なお、各図の（ａ）には、視差調整を行わない場合、（ｂ）には、視差オフセット調整を行った場合、（ｃ）には、視差レンジ調整を行った場合が示されている。 7 and 8 are explanatory diagrams for the parallax offset adjustment and the parallax scale adjustment according to the first embodiment of the present invention. FIG. 7 shows a left-eye image 15L and a right-eye image 15R, and FIG. 8 shows imaging positions in the front-rear direction of the display objects A and B in the stereoscopic image. In addition, (a) of each figure shows the case where parallax adjustment is not performed, (b) where parallax offset adjustment is performed, and (c) where parallax range adjustment is performed. .

図７の（ａ）には、視差調整を行わない場合の左眼用画像１５Ｌ及び右眼用画像１５Ｒが示されている。表示オブジェクトＡは、右眼用画像１５Ｒ内における表示位置が、左眼用画像１５Ｌ内におる表示位置よりも右へシフトしているため、その両眼視は負の値になり、表示画面１１ｄよりも後方に沈み込んで表示される。逆に、表示オブジェクトＢは、右眼用画像１５Ｒ内における表示位置が、左眼用画像１５Ｌ内におる表示位置よりも左へシフトしているため、その両眼視差は正の値になり、表示画面１１ｄよりも前方に浮き上がって表示される。つまり、表示オブジェクトＡ，Ｂの前後方向の結像位置は、図８の（ａ）に示したように知覚される。図中のＲ１は、立体画像の奥行き幅であり、Ｓ１は、立体画像の表示画面１１ｄからの浮き上がり量である。 FIG. 7A shows a left-eye image 15L and a right-eye image 15R when parallax adjustment is not performed. Since the display position of the display object A in the right-eye image 15R is shifted to the right of the display position in the left-eye image 15L, the binocular vision is a negative value, and the display screen 11d It is displayed by sinking backward. Conversely, the display position of the display object B in the right-eye image 15R is shifted to the left from the display position in the left-eye image 15L, so that the binocular parallax becomes a positive value. The image is displayed so as to float forward from the display screen 11d. That is, the imaging positions in the front-rear direction of the display objects A and B are perceived as shown in FIG. In the figure, R1 is the depth width of the stereoscopic image, and S1 is the amount of floating of the stereoscopic image from the display screen 11d.

図７の（ｂ）には、視差シフト調整が行われた場合の左眼用画像１５Ｌ及び右眼用画像１５Ｒが示されている。ここでは、図７の（ａ）に比べて、左眼用画像１５Ｌを左へシフトさせるとともに、右眼用画像１５Ｒを右へシフトさせることにより、立体画像を後方へ移動させている。つまり、表示オブジェクトＡ，Ｂは、いずれも左眼用画像１５Ｌでは左へシフトし、右眼用画像１５Ｒでは右へシフトし、ともに表示画面１１ｄの後方へ移動する。このため、表示オブジェクトＡ，Ｂの前後方向の結像位置は、図８の（ｂ）に示したように知覚される。つまり、立体画像を後方へ移動させたことにより、視差調整を行わない図８の（ａ）の場合と比較すれば、奥行き幅Ｒ１に変化はないが、立体画像の浮き上がり量Ｓ１が抑制され、観者の視覚疲労や不快感などを軽減することができる。 FIG. 7B shows a left-eye image 15L and a right-eye image 15R when the parallax shift adjustment is performed. Here, as compared with FIG. 7A, the left-eye image 15L is shifted to the left, and the right-eye image 15R is shifted to the right, thereby moving the stereoscopic image backward. That is, the display objects A and B both shift to the left in the left-eye image 15L, shift to the right in the right-eye image 15R, and both move to the rear of the display screen 11d. For this reason, the imaging positions in the front-rear direction of the display objects A and B are perceived as shown in FIG. That is, by moving the stereoscopic image backward, compared to the case of FIG. 8A in which the parallax adjustment is not performed, the depth width R1 is not changed, but the lifting amount S1 of the stereoscopic image is suppressed, It can reduce the visual fatigue and discomfort of the viewer.

図７の（ｃ）には、視差スケール調整が行われた場合の左眼用画像１５Ｌ及び右眼用画像１５Ｒが示されている。ここでは、表示オブジェクトＡ，Ｂの両眼視差の絶対値をともに減少させるように、沈み込んで表示されている表示オブジェクトＡを前方に移動させ、浮き上がって表示されている表示オブジェクトＢを後方に移動させている。すなわち、表示オブジェクトＡを左眼用画像１５Ｌでは右へシフトさせ、右眼用画像１５Ｒでは左へシフトさせている。一方、表示オブジェクトＢを左眼用画像１５Ｌでは左へシフトさせ、右眼用画像１５Ｒでは右へシフトさせている。その結果、表示オブジェクトＡ，Ｂの前後方向の結像位置は、図８の（ｂ）に示したように知覚される。つまり、表示オブジェクトＡ，Ｂの両眼視差をスケーラブルに縮小したことにより、立体画像の奥行き幅Ｒ２は、Ｒ１よりも短くなり、視差調整を行わない図８（ａ）の場合と比較すれば、立体感が抑制され、観者の視覚疲労や不快感などを軽減することができる。 FIG. 7C illustrates a left-eye image 15L and a right-eye image 15R when the parallax scale adjustment is performed. Here, the display object A that is sinking and moving is moved forward so that the absolute values of the binocular parallax of the display objects A and B are both reduced, and the display object B that is floating and displayed is moved backward. It is moved. That is, the display object A is shifted to the right in the left-eye image 15L, and is shifted to the left in the right-eye image 15R. On the other hand, the display object B is shifted to the left in the left-eye image 15L and to the right in the right-eye image 15R. As a result, the imaging positions in the front-rear direction of the display objects A and B are perceived as shown in FIG. That is, by reducing the binocular parallax of the display objects A and B in a scalable manner, the depth width R2 of the stereoscopic image becomes shorter than R1, and compared with the case of FIG. 8A where no parallax adjustment is performed. The three-dimensional effect is suppressed, and the visual fatigue and discomfort of the viewer can be reduced.

この様にして、再生画像及び生成画像に共通の視差調整量に基づいて、生成画像に対しては、視差スケール調整が行われる一方、再生画像に対しては、視差オフセット調整が行われる。つまり、生成画像の場合には、より自然に調整することができるスケール調整が採用され、スケール調整を行うことができない再生画像の場合には、オフセット調整が採用される。しかも、再生画像及び生成画像のいずれの場合であっても、共通のパラメータに基づいて、表示画面１１ｄからの浮き上がり量が調整される。 In this manner, the parallax scale adjustment is performed on the generated image based on the parallax adjustment amount common to the reproduced image and the generated image, while the parallax offset adjustment is performed on the reproduced image. That is, in the case of a generated image, scale adjustment that can be adjusted more naturally is adopted, and in the case of a reproduced image that cannot be adjusted, offset adjustment is adopted. Moreover, the amount of lifting from the display screen 11d is adjusted based on the common parameters in both cases of the reproduced image and the generated image.

図９は、本発明の実施の形態１による視差調整量の一例を示した図である。視差調整量指定部２１では、視差調整量として、７つの調整レベル０〜６のいずれかを指定することができ、各調整レベル０〜６には、シフト量及びスケールファクタがそれぞれ対応づけられている。ここでは、調整レベル５が視差調整を行わない調整レベルであり、ユーザが調整レベルを選択しなかった場合に初期値として指定される。 FIG. 9 is a diagram showing an example of the parallax adjustment amount according to the first embodiment of the present invention. The parallax adjustment amount designation unit 21 can designate one of seven adjustment levels 0 to 6 as the parallax adjustment amount, and each adjustment level 0 to 6 is associated with a shift amount and a scale factor, respectively. Yes. Here, the adjustment level 5 is an adjustment level at which parallax adjustment is not performed, and is designated as an initial value when the user does not select an adjustment level.

シフト量は、視差オフセット調整を行う場合に、左眼用画像１５Ｌ及び右眼用画像１５Ｒを左右方向に相対的にシフトさせる距離であり、立体画像は、このシフト量に相当するオフセット量だけ前後方向に移動する。図９では、シフト量が、符号付きのピクセル数で示されている。正の符号は、左眼用画像１５Ｌに対し、右眼用画像１５Ｒを相対的に左へシフトさせることにより、立体画像を前方へ移動させ、浮き上がらせる視差調整であることを示している。これに対し、負の符号は、左眼用画像１５Ｌに対し、右眼用画像１５Ｒを相対的に右へシフトさせることにより、立体画像を後方へ移動させ、沈み込ませる視差調整であることを示している。 The shift amount is a distance by which the left-eye image 15L and the right-eye image 15R are relatively shifted in the left-right direction when parallax offset adjustment is performed, and the stereoscopic image is moved forward and backward by an offset amount corresponding to the shift amount. Move in the direction. In FIG. 9, the shift amount is indicated by the number of signed pixels. A positive sign indicates parallax adjustment in which the stereoscopic image is moved forward and lifted by relatively shifting the right-eye image 15R to the left with respect to the left-eye image 15L. On the other hand, the negative sign is a parallax adjustment that moves the stereoscopic image backward and sinks it by shifting the right-eye image 15R to the right relative to the left-eye image 15L. Show.

視差調整量指定部２１を用いて、ユーザが調整レベル０を指定した場合、調整レベル０に対応づけられたシフト量「−１０」が、視差オフセット調整部２３２へ出力される。この場合、視差オフセット調整部２３２は、左眼用画像１５Ｌを左へ５ピクセル、右眼用画像１５Ｒを右へ５ピクセルだけシフトさせ、両画像１５Ｌ，１５Ｒを左右方向に相対的に−１０ピクセルだけシフトさせ、立体画像を沈み込ませる。 When the user designates the adjustment level 0 using the parallax adjustment amount designation unit 21, the shift amount “−10” associated with the adjustment level 0 is output to the parallax offset adjustment unit 232. In this case, the parallax offset adjustment unit 232 shifts the left-eye image 15L by 5 pixels to the left and the right-eye image 15R by 5 pixels to the right, so that both the images 15L and 15R are relatively −10 pixels in the left-right direction. Shift only and sink the stereoscopic image.

また、ユーザが調整レベル５を指定した場合、調整レベル５に対応づけられたシフト量「０」が、視差オフセット調整部２３２へ出力される。この場合、視差オフセット調整部２３２は、視差調整を行わない。 When the user designates the adjustment level 5, the shift amount “0” associated with the adjustment level 5 is output to the parallax offset adjustment unit 232. In this case, the parallax offset adjustment unit 232 does not perform parallax adjustment.

また、ユーザが調整レベル６を指定した場合、調整レベル６に対応づけられたシフト量「＋２」が、視差オフセット調整部２３２へ出力される。この場合、視差オフセット調整部２３２は、左眼用画像１５Ｌを右へ１ピクセル、右眼用画像１５Ｒを左へ１ピクセルだけシフトさせ、両画像１５Ｌ，１５Ｒを左右方向に相対的に＋２ピクセルだけシフトさせ、立体画像を浮き上がらせる。 When the user designates the adjustment level 6, the shift amount “+2” associated with the adjustment level 6 is output to the parallax offset adjustment unit 232. In this case, the parallax offset adjustment unit 232 shifts the left-eye image 15L by 1 pixel to the right and the right-eye image 15R by 1 pixel to the left, and relatively shifts both the images 15L and 15R by +2 pixels in the left-right direction. Shift to raise the 3D image.

一方、スケールファクタは、視差スケール調整を行う場合に、表示オブジェクトごとの両眼視差をスケーラブルに調整するための係数であり、表示オブジェクトの両眼視差として、画像生成コマンドが指定する両眼視差とスケールファクタとの積を用いることにより、表示画面１１ｄから表示オブジェクトの結像位置までの距離をスケーラブルに調整することができる。つまり、立体画像の浮き上がり及び沈み込みをスケーラブルに調整することができる。ここでは、画像生成コマンドが、表示オブジェクトごとの両眼視差として、左眼用画像１５Ｌ及び右眼用画像１５Ｒ間における左右方向のシフト量を指定するものとして説明する。 On the other hand, the scale factor is a coefficient for scalable adjustment of the binocular parallax for each display object when performing the parallax scale adjustment, and the binocular parallax specified by the image generation command as the binocular parallax of the display object. By using the product of the scale factor, the distance from the display screen 11d to the imaging position of the display object can be adjusted in a scalable manner. That is, the rising and sinking of the stereoscopic image can be adjusted in a scalable manner. Here, a description will be given assuming that the image generation command designates the left-right shift amount between the left-eye image 15L and the right-eye image 15R as the binocular parallax for each display object.

視差調整量指定部２１を用いて、ユーザが調整レベル０を指定した場合、調整レベル０に対応づけられたスケールファクタ「０」が、視差スケール調整部２４１へ出力される。この場合、視差スケール調整部２４１は、画像生成コマンドが指定する表示オブジェクトごとの両眼視差にかかわらず、全ての表示オブジェクトの両眼視差を０にする。従って、オブジェクト合成部２４２は、全ての表示オブジェクトについて両眼視差のない立体画像を生成し、表示部１０には平面画像が表示される。 When the user designates the adjustment level 0 using the parallax adjustment amount designation unit 21, the scale factor “0” associated with the adjustment level 0 is output to the parallax scale adjustment unit 241. In this case, the parallax scale adjustment unit 241 sets the binocular parallax of all display objects to 0 regardless of the binocular parallax for each display object specified by the image generation command. Therefore, the object composition unit 242 generates a stereoscopic image without binocular parallax for all display objects, and a flat image is displayed on the display unit 10.

また、ユーザが調整レベル１を指定した場合、調整レベル１に対応づけられたスケールファクタ「０．３３」が、視差スケール調整部２４１へ出力される。この場合、視差スケール調整部２４１は、画像生成コマンドが指定する表示オブジェクトごとの両眼視差の０．３３倍を求める。そして、オブジェクト合成部２４２は、表示オブジェクトの両眼視差として、０．３３倍の両眼視差を用いて立体画像を生成する。このため、立体画像の奥行き幅も０．３３倍になる。 Further, when the user designates the adjustment level 1, the scale factor “0.33” associated with the adjustment level 1 is output to the parallax scale adjustment unit 241. In this case, the parallax scale adjustment unit 241 calculates 0.33 times the binocular parallax for each display object specified by the image generation command. Then, the object composition unit 242 generates a stereoscopic image using the binocular parallax of 0.33 times as the binocular parallax of the display object. For this reason, the depth width of a three-dimensional image also becomes 0.33 times.

また、ユーザが調整レベル５を指定した場合、調整レベル５に対応づけられたスケールファクタ１が、視差スケール調整部２４１へ出力される。この場合、視差スケール調整部２４１による表示オブジェクトごとの両眼視差の調整は行わない。 Further, when the user designates the adjustment level 5, the scale factor 1 associated with the adjustment level 5 is output to the parallax scale adjustment unit 241. In this case, the binocular parallax for each display object is not adjusted by the parallax scale adjustment unit 241.

また、ユーザが調整レベル６を指定した場合、調整レベル５に対応づけられたスケールファクタ「１．２」が、視差スケール調整部２４１へ出力される。この場合、視差スケール調整部２４１は、画像生成コマンドが指定する表示オブジェクトごとの両眼視差の１．２倍を求める。そして、オブジェクト合成部２４２は、表示オブジェクトの両眼視差として、１．２倍の両眼視差を用いて立体画像を生成する。このため、立体画像の奥行き幅も１．２倍になる。 When the user designates the adjustment level 6, the scale factor “1.2” associated with the adjustment level 5 is output to the parallax scale adjustment unit 241. In this case, the parallax scale adjustment unit 241 calculates 1.2 times the binocular parallax for each display object specified by the image generation command. Then, the object composition unit 242 generates a stereoscopic image using binocular parallax of 1.2 times as the binocular parallax of the display object. For this reason, the depth width of a stereoscopic image also becomes 1.2 times.

実施の形態２．
図１０は、本発明の実施の形態２による立体画像表示装置１０１の一構成例を示した図である。この立体画像表示装置１０１は、図２の立体画像表示装置１００と比較すれば、視差調整量記憶部２６を備えている点で異なる。なお、図２の立体画像表示装置１００と共通する構成部分について、重複する説明は省略する。Embodiment 2. FIG.
FIG. 10 is a diagram showing a configuration example of the stereoscopic image display apparatus 101 according to the second embodiment of the present invention. This stereoscopic image display device 101 is different from the stereoscopic image display device 100 of FIG. 2 in that it includes a parallax adjustment amount storage unit 26. In addition, the overlapping description is abbreviate | omitted about the component which is common in the stereoscopic image display apparatus 100 of FIG.

この立体画像表示装置１０１は、多数のアプリケーションプログラムを実行することができ、各アプリケーションプログラムにより立体画像が表示される。例えば、静止画を再生するプログラム、動画を再生するプログラム、画像を生成するＴＶゲームプログラムなどを実行することができる。 The stereoscopic image display apparatus 101 can execute a large number of application programs, and a stereoscopic image is displayed by each application program. For example, a program for reproducing a still image, a program for reproducing a moving image, a TV game program for generating an image, and the like can be executed.

視差調整量記憶部２６は、視差調整量指定部２１においてユーザが指定した視差調整量を記憶する記憶手段であり、１つの共通設定２６ａと、１又は２以上の個別設定２６ｂとを保持している。共通設定２６ａは、特定のアプリケーションプログラムに対応づけられていない視差調整量からなる設定データであり、例えば、立体画像表示装置１０１の初期設定画面においてユーザが指定した視差調整量が、共通設定２６ａとして記憶されている。個別設定２６ｂは、アプリケーションに対応づけられた視差調整量からなる設定データであり、例えば、アプリケーションプログラムの実行中にユーザが視差調整量を指定した場合に、当該視差調整量が、個別設定２６ｂとして当該アプリケーションプログラムに対応づけて記憶される。 The parallax adjustment amount storage unit 26 is a storage unit that stores the parallax adjustment amount designated by the user in the parallax adjustment amount designation unit 21, and holds one common setting 26 a and one or more individual settings 26 b. Yes. The common setting 26a is setting data including a parallax adjustment amount that is not associated with a specific application program. For example, the parallax adjustment amount specified by the user on the initial setting screen of the stereoscopic image display apparatus 101 is the common setting 26a. It is remembered. The individual setting 26b is setting data including a parallax adjustment amount associated with an application. For example, when the user specifies a parallax adjustment amount during execution of the application program, the parallax adjustment amount is set as the individual setting 26b. It is stored in association with the application program.

視差調整量指定部２１は、アプリケーションプログラムが起動されると、当該プリケーションプログラムに対応づけられた個別設定２６ｂがあれば、その個別設定２６ｂを当該アプリケーションプログラムにおける視差調整量として採用する。一方、起動されたプリケーションプログラムに対応づけられた個別設定２６ｂがない場合には、共通設定２６ａを当該アプリケーションプログラムにおける視差調整量として採用する。つまり、個別設定２６ｂは共通設定２６ａよりも優先される。 When the application program is activated, the parallax adjustment amount designation unit 21 adopts the individual setting 26b as the parallax adjustment amount in the application program if there is an individual setting 26b associated with the application program. On the other hand, when there is no individual setting 26b associated with the activated application program, the common setting 26a is adopted as the parallax adjustment amount in the application program. That is, the individual setting 26b has priority over the common setting 26a.

本実施の形態によれば、視差調整量記憶部２６が、アプリケーションプログラムに対応づけられていない共通設定２６ａを保持することにより、アプリケーションプログラムごとに視差調整量を指定することなく、視差調整を行うことができる。また、視差調整量記憶部２６が、アプリケーションに対応づけられた個別設定２６ｂを保持することにより、特定のアプリケーションプログラムについては、共通設定２６ａとは異なる視差調整を行うことができる。例えば、ＴＶゲームプログラムの場合、ゲーム制作者の意図により、立体画像の奥行き幅や浮き上がり量がある範囲に収まるように想定されていると考えられる。このため、アプリケーションに対応づけられた視差調整量を個別設定２６ｂとして保持しておくことにより、利便性を向上させることできる。 According to the present embodiment, the parallax adjustment amount storage unit 26 performs the parallax adjustment without specifying the parallax adjustment amount for each application program by holding the common setting 26a that is not associated with the application program. be able to. Further, the parallax adjustment amount storage unit 26 holds the individual setting 26b associated with the application, so that the parallax adjustment different from the common setting 26a can be performed for a specific application program. For example, in the case of a TV game program, it is considered that the depth width and the amount of lifting of a stereoscopic image are assumed to be within a certain range depending on the intention of the game creator. For this reason, it is possible to improve convenience by holding the parallax adjustment amount associated with the application as the individual setting 26b.

実施の形態３．
本実施の形態では、個別設定２６ｂが、画像生成を行うアプリケーションプログラムのみを対象とし、画像再生を行うアプリケーションプログラムは対象としない場合の例について説明する。Embodiment 3 FIG.
In the present embodiment, an example will be described in which the individual setting 26b targets only an application program that performs image generation and does not target an application program that performs image reproduction.

一般に、画像再生を行うアプリケーションプログラムの場合、立体画像の奥行き幅や浮き上がり量はアプリケーションプログラムには依存せず、再生される立体画像データに依存する。このため、個別設定２６ｂは、画像生成を行うアプリケーションプログラムのみを対象とし、画像再生を行うアプリケーションプログラムの実行中に指定された視差調整量は、表示中の立体画像のみを対象とする一時設定とし、アプリケーションプログラムに対応づけられた個別設定２６ｂとして記憶しないように構成することもできる。このような一時設定を行う場合、共有設定２６ａを行う場合に比べて、より細かな視差調整を行うことができることが望ましい。 In general, in the case of an application program that performs image reproduction, the depth width and the amount of floating of a stereoscopic image do not depend on the application program but depend on the reproduced stereoscopic image data. For this reason, the individual setting 26b is intended only for an application program that performs image generation, and the parallax adjustment amount specified during the execution of the application program that performs image reproduction is a temporary setting for only a stereoscopic image that is being displayed. Further, it may be configured not to be stored as the individual setting 26b associated with the application program. When such temporary setting is performed, it is desirable that finer parallax adjustment can be performed as compared with the case where the sharing setting 26a is performed.

図１１は、本発明の実施の形態３による視差調整量の一例を示した図である。図中の（ａ）には、共通設定２６ａ及び個別設定２６ｂとして選択可能な４段階の調整レベル０，１，３及び５が示され、図中の（ｂ）には、一時設定として選択可能な７段階の調整レベル０〜６が示されている。 FIG. 11 is a diagram showing an example of the parallax adjustment amount according to the third embodiment of the present invention. (A) in the figure shows four adjustment levels 0, 1, 3, and 5 that can be selected as the common setting 26a and the individual setting 26b, and (b) in the figure can be selected as a temporary setting. Seven adjustment levels 0 to 6 are shown.

共通設定２６ａ及び個別設定２６ｂとして、視差調整量を指定する場合には、調整レベル０、１、３及び５の４段階から任意の調整レベルを選択することができる。一方、再生中の画像に対する一時設定として、視差調整量を指定する場合には、調整レベル０〜６の７段階から任意の調整レベルを選択することができる。つまり、一時設定であれば、共通設定２６ａ及び個別設定２６ｂの場合に比べて、より細かく視差調整量を指定することができる。 When the parallax adjustment amount is designated as the common setting 26a and the individual setting 26b, an arbitrary adjustment level can be selected from four levels of adjustment levels 0, 1, 3, and 5. On the other hand, when a parallax adjustment amount is designated as a temporary setting for an image being reproduced, an arbitrary adjustment level can be selected from seven stages of adjustment levels 0 to 6. That is, if the setting is temporary, the parallax adjustment amount can be specified more finely than in the case of the common setting 26a and the individual setting 26b.

さらに、上記一時設定は、再生中の画像のみを対象とする視差調整量であるため、当該立体画像データに対応づけて、画像記憶部２２に保持しておくことが望ましい。この場合、画像再生を行うアプリケーションプログラムが起動されると、まず共通設定２６ａの視差調整量が採用されるが、一時設定が対応づけられた立体画像データの再生を行っている間は、当該一時設定の視差調整量が採用される。つまり、立体画像データに対応づけられた一時設定は、共通設定２６ａよりも優先される。 Furthermore, since the temporary setting is a parallax adjustment amount for only the image being reproduced, it is desirable to store the temporary setting in the image storage unit 22 in association with the stereoscopic image data. In this case, when an application program for image reproduction is started, the parallax adjustment amount of the common setting 26a is first adopted. However, while the stereoscopic image data associated with the temporary setting is being reproduced, The set parallax adjustment amount is adopted. That is, the temporary setting associated with the stereoscopic image data has priority over the common setting 26a.

なお、上記実施の形態では、視差バリア方式の立体画像表示装置の例について説明したが、本発明は、このような場合のみには限定されない。すなわち、両眼視差を利用して、両眼に互いに異なる画像を視認させることにより、立体画像を表示する立体画像表示装置であればよく、レンティキュラレンズ方式やシーケンシャルフレーム方式を採用した立体画像表示装置にも適用することができる。 In the above embodiment, an example of a parallax barrier type stereoscopic image display device has been described. However, the present invention is not limited to such a case. In other words, any stereoscopic image display device that displays stereoscopic images by using binocular parallax to visually recognize different images from both eyes may be used, and stereoscopic image display adopting a lenticular lens method or a sequential frame method may be used. It can also be applied to devices.

１０表示部
１１表示パネル
１１ｄ表示画面
１２バリアパネル
１２ｂバリア
１２ｄ透過窓
１５Ｌ左眼用画像
１５Ｒ右眼用画像
２０画像指定部
２１視差調整量指定部
２２画像記憶部
２３画像再生部
２３１画像読出部
２３２視差オフセット調整部
２４画像生成部
２４１視差スケール調整部
２４２オブジェクト合成部
２５表示オブジェクト記憶部
２６視差調整量記憶部
２６ａ共通設定
２６ｂ個別設定
１００，１０１立体画像表示装置DESCRIPTION OF SYMBOLS 10 Display part 11 Display panel 11d Display screen 12 Barrier panel 12b Barrier 12d Transmission window 15L Left eye image 15R Right eye image 20 Image designation part 21 Parallax adjustment amount designation part 22 Image storage part 23 Image reproduction part 231 Image reading part 232 Parallax offset adjustment unit 24 image generation unit 241 parallax scale adjustment unit 242 object synthesis unit 25 display object storage unit 26 parallax adjustment amount storage unit 26a common setting 26b individual setting 100, 101 stereoscopic image display device

Claims

Display means for displaying a stereoscopic image using binocular parallax by displaying a left-eye image and a right-eye image,
Image storage means for holding first stereoscopic image data defining the left-eye image and the right-eye image;
Image reproduction means for reading first stereoscopic image data from the image storage means and displaying the first stereoscopic image data by the display means;
By combining two or more display objects with different binocular parallax for each display object, second stereoscopic image data defining the left-eye image and the right-eye image is generated, and the display Image generating means to be displayed by the means;
A parallax adjustment amount designation means for designating a parallax adjustment amount common to the first and second stereoscopic image data,
The image reproduction means adjusts the binocular parallax offset of the first stereoscopic image data based on the parallax adjustment amount,
The stereoscopic image display device, wherein the image generation means adjusts the binocular parallax scale of the second stereoscopic image data based on the parallax adjustment amount.

The image reproducing means moves the imaging position of the stereoscopic image backward based on the parallax adjustment amount,
The stereoscopic image display apparatus according to claim 1, wherein the image generation unit reduces the depth width of the stereoscopic image based on the parallax adjustment amount.

The image reproduction means adjusts the binocular parallax of the first stereoscopic image data based on the offset amount associated with the parallax adjustment amount,
The stereoscopic image display according to claim 1 or 2, wherein the image generation means adjusts the binocular parallax of the second stereoscopic image data based on a scale factor associated with the parallax adjustment amount. apparatus.

The image reproduction means relatively shifts the left-eye image and the right-eye image in the left-right direction based on the offset amount,
The image generation means is configured to relatively shift the display position of the display object in the left-eye image and the right-eye left-eye image in the left-right direction based on the scale factor. Item 4. The stereoscopic image display device according to Item 3.

The display means is a flat display means for alternately displaying the left-eye image and the right-eye image divided into a plurality of vertically long images in the left-right direction; and
2. The stereoscopic image according to claim 1, wherein a plurality of vertically long barriers are formed, and includes a light-shielding unit that allows the left eye image to be visually recognized by the left eye and the right eye image to be visually recognized by the right eye. Display device.

In a display adjustment method of a stereoscopic image display device including an image storage unit that holds first stereoscopic image data defining a left-eye image and a right-eye image,
A display step of displaying a stereoscopic image using binocular parallax by displaying the image for the left eye and the image for the right eye, respectively;
An image reproduction step of reading the first stereoscopic image data from the image storage means and displaying the first stereoscopic image data;
By combining two or more display objects with different binocular parallax for each display object, second stereoscopic image data defining the left-eye image and the right-eye image is generated, and the display An image generation step to be displayed in steps;
A parallax adjustment amount specifying step for specifying a parallax adjustment amount common to the first and second stereoscopic image data,
In the image reproduction step, the binocular parallax offset of the first stereoscopic image data is adjusted based on the parallax adjustment amount;
In the image generation step, the binocular parallax scale of the second stereoscopic image data is adjusted based on the parallax adjustment amount.