JP4783817B2 - Stereoscopic image display device - Google Patents

Stereoscopic image display device Download PDF

Info

Publication number
JP4783817B2
JP4783817B2 JP2008173279A JP2008173279A JP4783817B2 JP 4783817 B2 JP4783817 B2 JP 4783817B2 JP 2008173279 A JP2008173279 A JP 2008173279A JP 2008173279 A JP2008173279 A JP 2008173279A JP 4783817 B2 JP4783817 B2 JP 4783817B2
Authority
JP
Japan
Prior art keywords
stereoscopic image
image
display
stereoscopic
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008173279A
Other languages
Japanese (ja)
Other versions
JP2008306739A (en
Inventor
裕之 堅田
竜二 北浦
敏男 野村
端 内海
典男 伊藤
寛 草尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP2008173279A priority Critical patent/JP4783817B2/en
Publication of JP2008306739A publication Critical patent/JP2008306739A/en
Application granted granted Critical
Publication of JP4783817B2 publication Critical patent/JP4783817B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Liquid Crystal Display Device Control (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Description

本発明は、電子映像を立体観察するための立体画像表示装置に関する。   The present invention relates to a stereoscopic image display device for stereoscopically viewing an electronic video.

従来から、CRT(Cathode Ray Tube)や液晶表示装置(LCD : Liquid CrystalDisplay)を使用して立体画像を表示する装置においては、2枚の画像を眼幅方向にずらして視差を与えて画面上に表示し、左右眼別に呈示して立体視を行っている。   Conventionally, in a device that displays a stereoscopic image using a CRT (Cathode Ray Tube) or a liquid crystal display (LCD), two images are shifted in the eye width direction to give parallax on the screen. They are displayed and presented separately for the left and right eyes for stereoscopic viewing.

このような装置において、例えば特許文献1には、立体視の許容遊技時間が経過すると、立体画像を通常の平面画像に強制的に切り替える立体表示遊技機が開示されている。また、特許文献2には、装置を連続的に長時間使用しないように内部にタイマーを設置し、電源がオンにされてから第1の所定の時間が経てば強制的に電源がオフにされ、その後第2の所定時間が経過するまでは電源がオンにならない画像表示装置が開示されている。   In such an apparatus, for example, Patent Document 1 discloses a stereoscopic display gaming machine that forcibly switches a stereoscopic image to a normal planar image when an allowable gaming time for stereoscopic vision has elapsed. In Patent Document 2, a timer is installed inside the apparatus so as not to continuously use the apparatus for a long time, and the power is forcibly turned off after a first predetermined time since the power is turned on. Then, an image display apparatus is disclosed in which the power is not turned on until a second predetermined time elapses thereafter.

特開平7−16351号公報Japanese Patent Laid-Open No. 7-16351 特開平6−333479号公報JP-A-6-333479

しかし、特許文献1に開示された技術では、長時間の観察による眼の疲労が原因で視差を感知する能力が低下した場合においても、視差を調整することなく立体表示を続けるため、視差を徐々に小さくして観察者の眼の負担を減らすといったような細かい調整ができない。また、特許文献2に開示された技術では、一度電源がオフになれば所定の時間が経つまで電源がオンにならず、例えば画像の平面表示と立体表示を適応的に切り替えて表示ができるようなディスプレイにおいて、観察時に眼に負担のかかる立体表示を長時間使用したときのみ電源をオフにしたい場合に対応できず、一度電源が強制的にオフにされると、所定の時間が経過するまでは、眼に負担のかかりにくい平面表示の使用もできなくなる。   However, in the technique disclosed in Patent Document 1, even when the ability to sense parallax is reduced due to eye fatigue due to long-time observation, since the stereoscopic display is continued without adjusting the parallax, the parallax is gradually reduced. It is impossible to make fine adjustments such as reducing the burden on the viewer's eyes. Further, in the technique disclosed in Patent Document 2, once the power is turned off, the power is not turned on until a predetermined time elapses, and for example, it is possible to adaptively switch between flat display and three-dimensional display of an image for display. If you want to turn off the power only when you use a stereoscopic display that is burdensome on your eyes for a long time on an observable display, and once the power is forcibly turned off, until the specified time has passed In other words, it becomes impossible to use a flat display that is less burdensome on the eyes.

また、立体画像をデジタル放送等で放送するような場合、コンテンツ作成者やコンテンツ配信事業者の意図によって、放送する立体画像を連続して立体表示する制限時間を放送局側で設定したいという要求があるが、従来の技術ではこれにこたえることが出来なかった。   In addition, when a stereoscopic image is broadcast by digital broadcasting or the like, there is a request that the broadcasting station wants to set a time limit for continuous stereoscopic display of the stereoscopic image to be broadcast according to the intention of the content creator or content distribution company. There is, however, the conventional technology could not respond to this.

また、一般に立体画像の飛び出し量や引っ込み量(ここでは「立体感」と呼ぶ)の強弱は、画像毎に異なるため、立体感の強い立体画像と立体感の弱い立体画像について、立体視を同一の許容遊戯時間で制限することは適切ではない。立体感の強さによって目に与える負担が異なると考えられるからである。さらに、立体画像をデジタル放送等で放送する場合、受信機のチャンネルを切り替えることで立体感の異なる立体画像を連続して視聴する際に、立体視の制限をどのように行うかについて、従来検討がなされていないという問題があった。   In general, the amount of pop-out and retraction of a stereoscopic image (herein referred to as “stereoscopic effect”) varies from image to image. It is not appropriate to limit the allowable play time. This is because the burden given to the eyes varies depending on the strength of the three-dimensional effect. Furthermore, when broadcasting stereoscopic images by digital broadcasting, etc., conventional studies have been conducted on how to limit stereoscopic vision when continuously viewing stereoscopic images with different stereoscopic effects by switching the receiver channel. There was a problem that was not done.

本発明は、このような従来技術の問題点に鑑み、観察者の眼の保護に当たってより柔軟な制御を可能にし、使い勝手のよい立体画像表示装置を提供することを目的とする。   SUMMARY OF THE INVENTION The present invention has been made in view of the above-described problems of the prior art, and it is an object of the present invention to provide a user-friendly stereoscopic image display device that enables more flexible control in protecting the eyes of an observer.

前記目的と達成するため、観察者の左右眼別に画像を表示する本発明による立体画像表示装置は、複数の画像から立体画像を作成する立体画像作成手段と、立体画像作成手段に対して立体画像の視差を調節する視差調整手段とを備え、立体画像表示時間が第1の所定時間を超えた場合、視差調整手段が立体画像作成手段に対して作成する立体画像の視差を小さくすることを特徴とする。   In order to achieve the above object, a stereoscopic image display device according to the present invention for displaying images according to the left and right eyes of an observer includes a stereoscopic image creating means for creating a stereoscopic image from a plurality of images, and a stereoscopic image for the stereoscopic image creating means. A parallax adjusting unit that adjusts the parallax of the stereoscopic image, and when the stereoscopic image display time exceeds the first predetermined time, the parallax of the stereoscopic image created by the parallax adjusting unit with respect to the stereoscopic image creating unit is reduced And

本構成によれば、観察者の眼の疲労に応じて表示される立体画像の視差を調整することにより、簡易な構成で観察者の眼を保護することができる。   According to this configuration, the observer's eyes can be protected with a simple configuration by adjusting the parallax of the stereoscopic image displayed according to the fatigue of the viewer's eyes.

立体画像の視差を記憶する記憶手段を備え、視差調整手段が立体画像作成手段に対して作成する立体画像の視差を小さくした後、第2の所定時間を超えた場合、視差調整手段は、記憶手段に記憶された視差に基づいて、立体画像作成手段に対して作成する立体画像の視差をもとに戻すようにしてもよい。   A storage unit that stores the parallax of the stereoscopic image, and when the second predetermined time is exceeded after the parallax adjustment unit reduces the parallax of the stereoscopic image created by the stereoscopic image creation unit, the parallax adjustment unit stores the parallax; Based on the parallax stored in the means, the parallax of the stereoscopic image created for the stereoscopic image creating means may be restored.

本発明の他の態様による立体画像表示装置は、複数の画像から立体画像を作成する立体画像作成手段と、立体画像作成手段に対して警告表示を作成する警告表示制御手段とを備え、立体画像の表示時間が第1の所定時間を超えた場合、警告表示制御手段が立体画像作成手段に対して前記警告表示を作成する。   A stereoscopic image display apparatus according to another aspect of the present invention includes a stereoscopic image creating unit that creates a stereoscopic image from a plurality of images, and a warning display control unit that creates a warning display for the stereoscopic image creating unit. When the display time exceeds the first predetermined time, the warning display control means creates the warning display for the stereoscopic image creation means.

本構成によれば、長時間立体画像を表示した際に警告のメッセージを表示することにより、観察者はいち早く長時間観察したという警告を受けることができるため観察者の眼を保護に役立てることができる。   According to this configuration, by displaying a warning message when a stereoscopic image is displayed for a long time, the observer can receive a warning that he / she has observed for a long time, so that the eyes of the observer can be used for protection. it can.

警告表示は立体表示するのが好ましく、警告表示を立体表示し、警告表示以外は平面表示するようにしてもよい。また、警告表示を観察者が立体として知覚できる限界の位置に立体表示するようにしてもよい。これにより観察者はいち早く警告メッセージを感じ取ることができるため観察者の眼の保護に役立てることができる。   The warning display is preferably three-dimensionally displayed. The warning display may be three-dimensionally displayed, and a plane other than the warning display may be displayed. Further, the warning display may be three-dimensionally displayed at a limit position where the observer can perceive it as a three-dimensional image. As a result, the observer can quickly feel the warning message, which can be used to protect the eyes of the observer.

本発明の他の態様による立体画像表示装置は、複数の画像から立体画像を作成する立体画像作成手段と、複数の画像から平面画像を作成する平面画像作成手段と、立体画像作成手段が作成した立体画像あるいは平面画像作成手段が作成した平面画像を表示する表示手段とを備え、立体画像表示時間が第1の所定時間を超えた時、少なくとも表示手段の電源を含む電源を自動的に遮断し、表示手段の電源自動遮断後、立体画像を表示していない時間が第2の所定時間を超えるまでに遮断された電源を復帰させる操作が行われた場合は、表示手段に平面画像作成手段によって作成した平面画像を表示することを特徴とする。   A stereoscopic image display apparatus according to another aspect of the present invention includes a stereoscopic image creating unit that creates a stereoscopic image from a plurality of images, a planar image creating unit that creates a planar image from a plurality of images, and a stereoscopic image creating unit. Display means for displaying a stereoscopic image or a planar image created by the planar image creation means, and automatically shuts off the power including at least the power of the display means when the stereoscopic image display time exceeds the first predetermined time. After the automatic power shutoff of the display means, when an operation to restore the power that has been shut off before the time when the stereoscopic image is not displayed exceeds the second predetermined time is performed on the display means by the plane image creating means The created planar image is displayed.

立体画像を表示していない時間が第2の所定時間を超えても自動的に遮断された電源を復帰させる操作が行われなかった場合には、装置全体の電源を切る。従って、立体画像を表示していない時間が第2の所定時間を超えた後に電源が投入された場合には、立体画像表示装置は通常状態に戻って立体画像を表示する。   If the operation of restoring the power supply that is automatically shut off is not performed even when the stereoscopic image is not displayed exceeds the second predetermined time, the entire apparatus is turned off. Therefore, when the power is turned on after the time when the stereoscopic image is not displayed exceeds the second predetermined time, the stereoscopic image display device returns to the normal state and displays the stereoscopic image.

本構成によれば、立体画像の長時間の連続的な表示が行われた場合に強制的に立体画像表示装置の電源をオフにし、観察者が再度電源をオンにしても所定の時間が経過するまでは立体画像の表示を禁止するため、観察者の眼を確実に保護することができ、また所定の時間が経過しないうちに再度電源をオンにした場合でも観察者の眼に負担の少ない平面画像の表示を許可することにより立体画像表示装置を継続的に使用することができる。   According to this configuration, when a stereoscopic image is continuously displayed for a long time, the stereoscopic image display device is forcibly turned off, and a predetermined time elapses even when the observer turns on the power again. Until then, the display of stereoscopic images is prohibited, so the eyes of the observer can be reliably protected, and even if the power is turned on again after a predetermined time has passed, the burden on the eyes of the observer is small The stereoscopic image display device can be used continuously by permitting the display of the planar image.

本発明の立体画像表示装置は、更に、立体画像フォーマットデータを復号するための立体画像復号手段と、立体画像復号手段で復号された立体画像データを左右眼別の画像データに分離する分離手段を備えるようにしてもよい。立体画像フォーマットデータのフォーマットは、立体画像表示用のデータであるか否かを示す少なくとも1つの立体画像識別情報と、第1の所定時間と第2の所定時間の少なくともどちらか一方を含む少なくとも1つの立体画像制御情報と、少なくとも1つの画像データを含むことができる。画像データは圧縮画像データとすることができる。立体画像復号手段は、立体画像フォーマットデータの立体画像制御情報を解析する立体画像制御情報解析手段と、立体画像フォーマットデータの立体画像データを復号する画像データ部復号手段とを備えることができる。   The stereoscopic image display apparatus of the present invention further includes a stereoscopic image decoding means for decoding the stereoscopic image format data, and a separating means for separating the stereoscopic image data decoded by the stereoscopic image decoding means into image data for the left and right eyes. You may make it prepare. The format of the stereoscopic image format data is at least one including at least one stereoscopic image identification information indicating whether or not the data is for stereoscopic image display, and at least one of a first predetermined time and a second predetermined time. One stereoscopic image control information and at least one image data can be included. The image data can be compressed image data. The stereoscopic image decoding unit can include a stereoscopic image control information analyzing unit that analyzes the stereoscopic image control information of the stereoscopic image format data, and an image data unit decoding unit that decodes the stereoscopic image data of the stereoscopic image format data.

本構成によれば、立体画像フォーマットデータの立体画像制御情報内に含まれる、視差を変更することなく観察者が立体画像を鑑賞できる時間や、立体画像として連続的に鑑賞できる時間を表す情報を復号することにより、立体画像制御情報を持つデータの単位で視差を減らすことなく鑑賞できる時間や、連続的に鑑賞できる時間をそれぞれ調整するため、例えば視差が大きく負担のかかるデータである場合とそうでない場合などで、それらの時間を変更し、観察者の眼の負担を減らすことができる。   According to this configuration, the information that is included in the stereoscopic image control information of the stereoscopic image format data and that represents the time during which an observer can view a stereoscopic image without changing the parallax or the time that can be continuously viewed as a stereoscopic image. In order to adjust the time that can be viewed without reducing parallax and the time that can be continuously viewed in units of data having stereoscopic image control information by decoding, for example, when the parallax is large and burdensome data In such a case, it is possible to reduce the burden on the eyes of the observer by changing those times.

また、前記立体画像フォーマットデータによれば、立体画像フォーマットデータを伝送する場合、視差が大きく負担のかかるデータである場合とそうでない場合などに応じて、視差を変更することなく観察者が立体画像を鑑賞できる時間や、立体として連続的に鑑賞できる時間を表す情報を、伝送側で予め記録して伝送することができるので、観察者の眼に大きな負担がかからないよう長時間連続鑑賞できないようなデータを提供することが出来る。   Further, according to the stereoscopic image format data, when transmitting stereoscopic image format data, the observer can change the stereoscopic image without changing the parallax depending on whether the parallax is large and burdensome data or not. Because information that represents the time that can be viewed and the time that can be continuously viewed as a three-dimensional image can be recorded and transmitted in advance on the transmission side, it cannot be viewed continuously for a long time so that it does not place a heavy burden on the eyes of the observer Data can be provided.

また、前記立体画像フォーマットデータによれば、視差を変更することなく観察者が立体画像を鑑賞できる時間や、立体として連続的に鑑賞できる時間を表す情報を、立体画像フォーマットデータの立体画像制御情報内に含むことにより、画像のデータと別に伝送する必要がなく、使い勝手がよい。   Further, according to the stereoscopic image format data, information indicating the time during which an observer can view a stereoscopic image without changing the parallax or the time during which a viewer can continuously appreciate a stereoscopic image is displayed as the stereoscopic image control information of the stereoscopic image format data. By including it, it is not necessary to transmit it separately from the image data, and it is easy to use.

以上説明したように本発明によれば、観察者の眼の疲労に応じて表示される立体画像の視差を調整したり、長時間立体画像を表示した際に警告のメッセージを表示したり、長時間連続して立体画像の表示が行われた場合に強制的に表示を中止し、観察者が再度表示する操作を行っても所定の時間が経過するまでは立体画像の表示を禁止する等の手段により、簡易な構成で観察者の眼を保護することができる。   As described above, according to the present invention, the parallax of the stereoscopic image displayed according to the eye fatigue of the observer is adjusted, a warning message is displayed when the stereoscopic image is displayed for a long time, For example, when a stereoscopic image is displayed continuously for a period of time, the display is forcibly stopped, and even if the observer performs an operation to display again, the display of the stereoscopic image is prohibited until a predetermined time elapses. By means, it is possible to protect the eyes of the observer with a simple configuration.

また、立体感の強い立体画像と立体感の弱い立体画像の違いを立体強度を用いて表現し、立体強度の大きさによって立体表示を制限することが可能となる。さらに、複数の立体画像を連続して観察した場合には累積強度を計算し、累積強度と所定のしきい値の比較によって立体表示を制限することにより、例えばデジタル放送等でチャンネルを切り替えて立体強度の異なる立体画像を連続して視聴する場合でも、立体表示の制限を容易に行うことが可能となる。   In addition, a difference between a stereoscopic image having a strong stereoscopic effect and a stereoscopic image having a weak stereoscopic effect can be expressed using the stereoscopic strength, and the stereoscopic display can be limited by the magnitude of the stereoscopic strength. Furthermore, when a plurality of stereoscopic images are observed continuously, the cumulative intensity is calculated, and the stereoscopic display is restricted by comparing the cumulative intensity with a predetermined threshold value. Even when viewing stereoscopic images with different intensities continuously, it is possible to easily limit the stereoscopic display.

以下、図面を参照して本発明の実施の形態を説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図1は、本発明による立体画像表示装置の第1の実施形態の構成例を示す図である。
まず、入力画像データが2つの場合について説明する。
FIG. 1 is a diagram illustrating a configuration example of a first embodiment of a stereoscopic image display device according to the present invention.
First, a case where there are two input image data will be described.

本発明における第1の実施形態の立体画像表示装置は、左右眼別の画像データを入力として立体画像データを作成する立体画像作成手段1と、左右眼別の画像データのどちらか一方のデータから平面画像を作成する平面画像作成手段6と、入出力する画像データを切り替えるためのスイッチ11,12,13,14と、それらのスイッチを、左右眼別の画像データ(左眼用画像データL,右眼用画像データR)を用いて立体表示を行うか平面表示を行うかを示す表示モード情報M1に合わせて制御するスイッチ制御手段10と、立体画像作成手段1又は平面画像作成手段6で作成された画像もしくは入力画像をそのまま格納するフレームメモリ2と、立体表示と平面表示が可能であり、表示モード情報M1に応じてフレームメモリ2の画像データを立体画像として、もしくは平面画像として表示する表示手段3と、立体画像表示の際に、立体画像の表示時間を計測する時間計測判定手段4と、立体画像の表示時間が所定の時間を超えた場合、立体画像作成手段1に左右眼別の画像の視差を調整して立体画像を作成することを指示する視差制御手段5から構成されている。表示モード情報M1については後述する。
また、上記表示手段3は、左右眼別の画像(2視点の画像)を表示する2眼式の表示手段とする。
The stereoscopic image display device according to the first embodiment of the present invention is based on either one of the stereoscopic image creation means 1 that creates stereoscopic image data by using the image data for left and right eyes and the image data for left and right eyes. A plane image creating means 6 for creating a plane image, switches 11, 12, 13, and 14 for switching input / output image data, and these switches are used for left and right eye image data (left eye image data L, Created by the switch control means 10 for controlling according to display mode information M1 indicating whether to perform stereoscopic display or planar display using the right-eye image data R), and the stereoscopic image creation means 1 or the planar image creation means 6 The frame memory 2 for storing the processed image or the input image as it is, stereoscopic display and planar display are possible, and the image data of the frame memory 2 is displayed according to the display mode information M1. Display means 3 for displaying a three-dimensional image as a three-dimensional image or a two-dimensional image, a time measurement determining means 4 for measuring the display time of a three-dimensional image when displaying a three-dimensional image, and a three-dimensional image display time exceeding a predetermined time The parallax control unit 5 instructs the stereoscopic image creation unit 1 to create a stereoscopic image by adjusting the parallax of the images for the left and right eyes. The display mode information M1 will be described later.
Further, the display means 3 is a twin-lens display means for displaying left and right eye-specific images (bi-viewpoint images).

以下、本発明の第1の実施形態について詳細に説明する。
入力画像A1として左眼用画像データLが、入力画像A2として右眼用画像データRが、外部から装置に入力される。また、外部から表示モード情報M1がスイッチ制御手段10に入力される。ここで表示モード情報M1について説明する。表示モード情報M1には、立体画像表示モード(あるいは立体表示モード)、左眼用平面画像表示モード(あるいは左眼用平面表示モード)、右眼用平面画像表示モード(あるいは右眼用平面表示モード)、入力画像スルー表示モード(あるいはスルー表示モード)の4種類があり、本装置は入力された表示モード情報M1に合わせて、立体画像表示及び、左眼用画像を用いた平面画像表示、右眼用画像を用いた平面画像表示、入力画像をそのまま平面表示する入力画像スルー表示のそれぞれを切り替える。表1に表示モード情報M1の値とモード名及び各モードで表示される画像をまとめる。
Hereinafter, a first embodiment of the present invention will be described in detail.
Image data L for the left eye is input as the input image A1, and image data R for the right eye is input from the outside to the apparatus as the input image A2. Further, display mode information M1 is input to the switch control means 10 from the outside. Here, the display mode information M1 will be described. The display mode information M1 includes a stereoscopic image display mode (or stereoscopic display mode), a planar image display mode for left eye (or planar display mode for left eye), a planar image display mode for right eye (or a planar display mode for right eye). ), There are four types of input image through display mode (or through display mode), and this apparatus displays a stereoscopic image, a planar image display using an image for the left eye, and a right according to the input display mode information M1. Switching between planar image display using an ophthalmic image and input image through display in which an input image is planarly displayed as it is is switched. Table 1 summarizes the value of the display mode information M1, the mode name, and the image displayed in each mode.

Figure 0004783817
Figure 0004783817

まず、表示モード情報M1が入力画像スルー表示モードである場合の本表示装置の動作について説明する。この場合、例えば入力画像A1をスルー表示する。スイッチ制御手段10は、スイッチ11と12をオフにして、入力画像A1がスルーで、フレームメモリ2に接続されるようにスイッチ13とスイッチ14をそれぞれ切り替える。入力画像A1が、スイッチ13,14を通してフレームメモリ2に書き込まれる。フレームメモリ2から入力画像A1が表示手段3に入力される。表示手段3は入力画像A1を平面表示する。また、入力画像A1の代わりにA2を用いてもよく、どちらの入力画像を使用するかを任意に設定できるようにしてもよい。   First, the operation of the present display device when the display mode information M1 is the input image through display mode will be described. In this case, for example, the input image A1 is displayed through. The switch control means 10 turns off the switches 11 and 12 and switches the switches 13 and 14 so that the input image A1 is through and is connected to the frame memory 2. The input image A1 is written into the frame memory 2 through the switches 13 and 14. An input image A1 is input from the frame memory 2 to the display means 3. The display means 3 displays the input image A1 on a plane. Further, A2 may be used instead of the input image A1, and which input image is used may be arbitrarily set.

次に、表示モード情報M1が左眼用平面画像表示モードである場合の本表示装置の動作について説明する。スイッチ制御手段10は、スイッチ11と12をオフにして、左眼用画像データLが平面画像作成手段6に入力されるようにスイッチ13を、フレームメモリ2と平面画像作成手段6が接続されるようにスイッチ14をそれぞれ切り替える。平面画像作成手段6に左眼用画像データLがスイッチ13を通じて入力される。平面画像作成手段6において左眼用画像を用いた平面画像データが作成され、スイッチ14を通して、フレームメモリ2に書き込まれる。フレームメモリ2から平面画像データが表示手段3に入力される。表示手段3は入力された平面画像データを平面表示する。   Next, the operation of the display device when the display mode information M1 is the left-eye planar image display mode will be described. The switch control means 10 is connected to the switch 13 so that the left eye image data L is input to the planar image creating means 6 by turning off the switches 11 and 12, and the frame memory 2 and the planar image creating means 6 are connected. Each switch 14 is switched as described above. Left-eye image data L is input to the planar image creating means 6 through the switch 13. Planar image data using the left-eye image is created by the planar image creation means 6 and is written into the frame memory 2 through the switch 14. Plane image data is input from the frame memory 2 to the display means 3. The display means 3 displays the input plane image data on a plane.

図2は、表示モード情報M1が左眼用画像Lを平面画像として表示するモードである場合に平面画像作成手段6で作成されるデータの構成及びその表示方法の一例を示す図である。左眼用画像データLを垂直方向の短冊状に分解した画像をL1,L2,L3,L4,L5,L6,L7,L8とすると、平面画像作成手段6で作成される平面画像データは左眼用画像データLの一部(図2の左眼用画像データLの太枠部分)をそのまま用いる。ここではL2,L3,L4,L5,L6,L7を表示することとする。図2では表示するフレームを正面から見た図と上から見た図の2種類を示している。フレームを上から見た図では、簡単のため、立体表示モードで用いるスリット(詳細は後述する)を図示していない。この図からからわかるように、平面画像データ201のL2〜L7は観察者の右眼および左眼で観察される。こうして観察者は左眼用画像Lから作成された画像を平面画像として観察することができる。   FIG. 2 is a diagram showing an example of the structure of data created by the planar image creating means 6 and its display method when the display mode information M1 is a mode for displaying the left eye image L as a planar image. Assuming L1, L2, L3, L4, L5, L6, L7, and L8 are images obtained by separating the left-eye image data L into vertical strips, the planar image data created by the planar image creating means 6 is the left eye. A part of the image data L for use (the thick frame portion of the image data L for the left eye in FIG. 2) is used as it is. Here, L2, L3, L4, L5, L6, and L7 are displayed. FIG. 2 shows two types of a frame to be displayed: a view seen from the front and a view seen from above. In the view of the frame from above, for the sake of simplicity, slits (details will be described later) used in the stereoscopic display mode are not shown. As can be seen from this figure, L2 to L7 of the planar image data 201 are observed with the right and left eyes of the observer. Thus, the observer can observe the image created from the left-eye image L as a planar image.

また表示手段3は、立体表示と平面表示が可能な表示手段と上記では説明したが、立体表示のみしか出来なくても構わない。図3は表示手段3が立体表示のみしか出来ない場合に、表示モード情報M1が左眼用画像Lを平面画像として表示するモードである際に平面画像作成手段6で作成されるデータの作成方法及びその表示方法の一例を示す図である。この場合、表示手段3で表示に用いられる画像は、図2で説明したものと同じものとする。表示手段3のディスプレイ面上にはスリット300が備えられており、フレーム301に表示されたL2、L4、L6の画像が観察者の左眼に、L3,L5,L7の画像が観察者の右眼に送られることにより観察者は左眼用画像Lから作成された画像を平面画像として観察することができる。また、表示手段3のディスプレイ面上にはスリットの代わりにレンズを備えても良い。   The display means 3 has been described above as a display means capable of three-dimensional display and two-dimensional display. However, only the three-dimensional display may be performed. FIG. 3 shows a method of creating data created by the planar image creating means 6 when the display means 3 is capable of displaying only the stereoscopic display and the display mode information M1 is a mode for displaying the left eye image L as a planar image. It is a figure which shows an example of the display method. In this case, the image used for display by the display means 3 is the same as that described in FIG. A slit 300 is provided on the display surface of the display means 3, and the images L2, L4, and L6 displayed on the frame 301 are on the left eye of the observer, and the images L3, L5, and L7 are on the right of the observer. By being sent to the eye, the observer can observe the image created from the left-eye image L as a planar image. A lens may be provided on the display surface of the display means 3 instead of the slit.

また、表示モード情報M1が右眼用平面画像表示モードである場合は、左眼用平面画像表示モードと同様な方法で右眼用画像から平面画像を作成して表示を行う。   When the display mode information M1 is the right-eye planar image display mode, a planar image is created from the right-eye image and displayed in the same manner as the left-eye planar image display mode.

次に表示モード情報M1が立体画像表示モードである場合の本表示装置の動作について説明する。表示モード情報M1が立体画像表示モードである場合、スイッチ制御手段10は、スイッチ11,12をオンにし、立体画像作成手段1とフレームメモリ2を接続されるように、スイッチ14を制御する。外部から立体画像作成手段1にスイッチ11を通じて左眼用画像データLが、スイッチ12を通じて右眼用画像データRがそれぞれ入力される。次に立体画像作成手段1において立体画像データが作成され、フレームメモリ2に書き込まれる。最後にフレームメモリ2から立体画像データが表示手段3に入力される。表示手段3は入力された立体画像データを立体表示する。   Next, the operation of the display device when the display mode information M1 is the stereoscopic image display mode will be described. When the display mode information M1 is the stereoscopic image display mode, the switch control means 10 turns on the switches 11 and 12 and controls the switch 14 so that the stereoscopic image creation means 1 and the frame memory 2 are connected. The left-eye image data L and the right-eye image data R are input from the outside to the stereoscopic image creating means 1 through the switch 11 and the switch 12, respectively. Next, stereoscopic image data is created in the stereoscopic image creating means 1 and written into the frame memory 2. Finally, stereoscopic image data is input from the frame memory 2 to the display means 3. The display means 3 stereoscopically displays the input stereoscopic image data.

図4は立体画像データの作成及びその表示の一例を示す図である。左眼用画像データLを垂直方向の短冊状に分解した画像をL1,L2,L3,L4,L5,L6,L7,L8、右眼用画像データRを垂直方向の短冊状に分解した画像をR1,R2,R3,R4,R5,R6,R7,R8とする。このとき表示する画像の水平方向のサイズは左眼用画像データL及び右眼用画像データRの水平方向のサイズよりも小さいとする。例えば図4の左右眼別の画像において太枠で示した範囲内の画像が実際に表示されるとすると、立体画像データは図4のようにL2,R3,L4,R5,L6,R7を用いて作成される。立体画像表示装置のディスプレイ面上にはスリット300あるいはレンズが備えられており、立体画像データ301に表示されたL2,L4,L6の画像が観察者の左眼に、R3,R5,R7の画像が観察者の右眼に送られることにより観察者は立体画像を観察することができる。   FIG. 4 is a diagram showing an example of creation and display of stereoscopic image data. L1, L2, L3, L4, L5, L6, L7, L8, and the image obtained by decomposing the right-eye image data R into vertical strips. R1, R2, R3, R4, R5, R6, R7, R8. The horizontal size of the image displayed at this time is assumed to be smaller than the horizontal size of the left-eye image data L and the right-eye image data R. For example, if the image within the range indicated by the thick frame in the image for each of the left and right eyes in FIG. 4 is actually displayed, the stereoscopic image data uses L2, R3, L4, R5, L6, and R7 as shown in FIG. Created. A slit 300 or a lens is provided on the display surface of the stereoscopic image display device, and the images L2, L4, and L6 displayed in the stereoscopic image data 301 are displayed on the left eye of the observer, and the images R3, R5, and R7. Is sent to the right eye of the observer, the observer can observe the stereoscopic image.

図4の例では、入力された画像データの間引きと合成を行って立体画像を合成する方法を説明した。図1の立体画像作成手段1では、この間引きと合成を両方行ってもよいが、間引き処理は外部で行い、合成のみを内部で行うようにしてもよい。後者の場合、外部から立体画像作成手段1に入力される左眼用画像データL及び左眼用画像データRはそれぞれ、L2,L4,L6,L8のみと、R1,R3,R5,R7のみとで構成されたデータとなる。   In the example of FIG. 4, the method of synthesizing a stereoscopic image by thinning and synthesizing input image data has been described. In the stereoscopic image creating means 1 of FIG. 1, both the thinning and the synthesis may be performed, but the thinning process may be performed externally and only the synthesis may be performed internally. In the latter case, the left-eye image data L and the left-eye image data R input to the stereoscopic image creating means 1 from the outside are only L2, L4, L6, and L8, and only R1, R3, R5, and R7, respectively. The data is composed of

本実施形態では、立体表示を所定時間継続すると立体画像の視差が小さくなるよう調整する。立体画像の視差および像の見え方について図18を用いて説明する。   In the present embodiment, the stereoscopic image is adjusted so that the parallax of the stereoscopic image is reduced when the stereoscopic display is continued for a predetermined time. The parallax of the stereoscopic image and how the image is seen will be described with reference to FIG.

図18で、観察者の左眼と右眼の間の距離をeとし、観察者とディスプレイとの間の距離をLとする。図18(a)では、右眼で観察する像と左眼で観察する像がディスプレイ上の同一点(P1)にある。この時、像はディスプレイ面上にあるように感知される。   In FIG. 18, the distance between the left eye and the right eye of the observer is e, and the distance between the observer and the display is L. In FIG. 18A, the image observed with the right eye and the image observed with the left eye are at the same point (P1) on the display. At this time, the image is sensed as being on the display surface.

次に図18(b)に示すように、右眼で観察する像をP1から左方向にwだけ移動させる。右眼で観察する像はP2の位置にくる。この時、像はS1の位置あるように観察され、ディスプレイ面からdだけ観察者側に飛び出しているように感知される。   Next, as shown in FIG. 18B, the image observed with the right eye is moved leftward from P1 by w. The image observed with the right eye is at the position P2. At this time, the image is observed to be at the position S1, and it is sensed that the image is projected from the display surface to the viewer side by d.

次に図18(c)に示すように、右眼で観察する像をP1から右方向にwだけ移動させる。右眼で観察する像はP3の位置にくる。この時、像はS2の位置あるように観察され、ディスプレイ面からdだけ奥にあるように感知される。   Next, as shown in FIG. 18C, the image observed with the right eye is moved from P1 to the right by w. The image observed with the right eye is at the position P3. At this time, the image is observed to be at the position of S2, and it is sensed that the image is located d behind the display surface.

一般に立体画像の各画素は異なる視差を有しているが、ここでは画像全体から観察者が受ける立体感を「視差」と呼ぶことにする。また、視差の調整は後述するように左眼用画像と右眼用画像の水平方向の相対位置を変更することによって行うものとする。   In general, each pixel of a stereoscopic image has different parallax, but here, the stereoscopic effect that the observer receives from the entire image is referred to as “parallax”. Further, the parallax adjustment is performed by changing the relative position in the horizontal direction between the left-eye image and the right-eye image, as will be described later.

ここで、図5に示すフローチャートを用いて、図1に示した立体画像表示装置による立体画像表示の処理動作を説明する。   Here, the processing operation of the stereoscopic image display by the stereoscopic image display apparatus shown in FIG. 1 will be described using the flowchart shown in FIG.

初期状態において、立体画像表示装置は、所定の視差Aにて立体画像表示を行う(S11)。時間計測判定手段4は視差Aにて立体画像表示を行っている時間を計測する。このとき、立体表示を開始した時刻を起点として時間計測判定手段4は計測を行う。立体画像作成手段1は立体画像を表示している間、時間計測判定手段4に立体画像表示通知信号を送り、時間計測判定手段4は立体画像表示通知信号が入力されている時間t1を計測する。   In the initial state, the stereoscopic image display apparatus performs stereoscopic image display with a predetermined parallax A (S11). The time measurement determination unit 4 measures the time during which the stereoscopic image display is performed with the parallax A. At this time, the time measurement determination unit 4 performs measurement from the time when the stereoscopic display is started. While the stereoscopic image is being displayed, the stereoscopic image creation means 1 sends a stereoscopic image display notification signal to the time measurement determination means 4, and the time measurement determination means 4 measures the time t 1 when the stereoscopic image display notification signal is input. .

時間計測判定手段4では、計測した時間t1が決められた時間TIME1を超えたか否かを判定し(S12)、越えていなければステップ11に戻って視差Aによる立体画像表示を続ける。計測した時間t1が決められた時間TIME1を超えた場合、時間計測判定手段4は、視差制御手段5に時間計測終了信号T1を出力する。   The time measurement determination means 4 determines whether or not the measured time t1 exceeds the determined time TIME1 (S12), and if not, returns to step 11 and continues displaying the stereoscopic image by the parallax A. When the measured time t1 exceeds the determined time TIME1, the time measurement determination unit 4 outputs a time measurement end signal T1 to the parallax control unit 5.

視差制御手段5に時間計測終了信号T1が入力されると、視差制御手段5は立体画像作成手段1に、視差を小さくして立体画像を作成するように指示する信号を送る。立体画像作成手段1は視差を小さくして立体画像を作成すると同時に時間計測判定手段4へリセット信号を送る。このとき立体画像作成手段1では、視差を小さくする前の視差(視差A)を示す情報を記憶しておく。こうして、表示手段3に、視差Aより小さな視差Bの立体画像が表示される(S13)。   When the time measurement end signal T1 is input to the parallax control unit 5, the parallax control unit 5 sends a signal instructing the stereoscopic image creating unit 1 to create a stereoscopic image with a reduced parallax. The stereoscopic image creating unit 1 creates a stereoscopic image by reducing the parallax, and simultaneously sends a reset signal to the time measurement determination unit 4. At this time, the stereoscopic image creating unit 1 stores information indicating the parallax (parallax A) before the parallax is reduced. In this way, a stereoscopic image with a parallax B smaller than the parallax A is displayed on the display means 3 (S13).

ここで記憶する「視差を示す情報」とは、例えば立体画像データを作成する際における立体画像データ上に配置される左眼用画像データLに対する右眼用画像データRの相対的な位置によって表される。   The “information indicating parallax” stored here is expressed by the relative position of the right-eye image data R with respect to the left-eye image data L arranged on the stereoscopic image data when the stereoscopic image data is created, for example. Is done.

このとき、ディスプレイ面より手前に感知される立体画像の視差を小さくしたい場合は、立体画像を奥に引っ込めてディスプレイ面に近づけるよう立体画像を作成し直す。具体的には右眼用画像データRを、左眼用画像データLに対して水平に右方向にシフトすれば良い。逆に視差を大きくしたい場合は、立体画像を手前に出すよう立体画像を作成し直す。具体的には右眼用画像データRを、左眼用画像データLに対して水平に左方向にシフトすれば良い。   At this time, when it is desired to reduce the parallax of the stereoscopic image sensed in front of the display surface, the stereoscopic image is recreated so that the stereoscopic image is withdrawn to the back and brought closer to the display surface. Specifically, the right-eye image data R may be shifted horizontally with respect to the left-eye image data L in the right direction. Conversely, when it is desired to increase the parallax, the stereoscopic image is recreated so as to bring the stereoscopic image to the front. Specifically, the right-eye image data R may be shifted horizontally to the left with respect to the left-eye image data L.

また、ディスプレイ面より奥に感知される立体画像の視差を小さくしたい場合は立体画像を手前に出してディスプレイ面に近づけるよう立体画像を作成し直し、視差を大きくしたい場合は奥に引っ込めるよう立体画像を作成し直せばよい。この時、右眼用画像データRのシフトの方向は、立体画像がディスプレイ面より手前に感知されていた場合とは逆方向となる。   In addition, if you want to reduce the parallax of a stereoscopic image that is sensed deeper than the display surface, recreate the stereoscopic image so that the stereoscopic image comes out toward you and bring it closer to the display surface. Can be recreated. At this time, the shift direction of the right-eye image data R is opposite to that in the case where the stereoscopic image is sensed in front of the display surface.

次に、立体画像の視差調整ために、右眼用画像Lを水平方向にシフトして立体画像を作成する方法の一例を、表2を用いて説明する。   Next, an example of a method for creating a stereoscopic image by shifting the right-eye image L in the horizontal direction in order to adjust the parallax of the stereoscopic image will be described with reference to Table 2.

Figure 0004783817
Figure 0004783817

左眼用画像データLと右眼用画像データRの、それぞれの一部から作成した立体画像を現在の表示位置より手前に出したい場合は、画像データをL、Rの順で並べて、それぞれの画像データの、より外側の領域を用いて立体画像を作成する。逆に立体画像をディスプレイ面より奥に引っ込めたい場合は、画像データをL、Rの順で並べて、それぞれの画像データのより内側の領域を用いて立体画像を作成する。例えば図4で画像の左上を座標の原点(0,0)、水平方向をx、垂直方向をyとする。図4の太枠部分の左上の座標が、左、右共に(1,0)である場合に作成した立体画像を手前に出したい場合、新たにそれらの座標を、左は(0,0)、右は(2,0)として、立体画像を作成し直せばよい。逆にディスプレイ面より奥に引っ込めたい場合は、左の座標を(2,0)、右の座標を(0,0)として、立体画像を作成し直せばよい。   When a stereoscopic image created from a part of each of the left-eye image data L and the right-eye image data R is to be displayed in front of the current display position, the image data are arranged in the order of L and R, respectively. A stereoscopic image is created using a region outside the image data. Conversely, when it is desired to retract the stereoscopic image from the display surface, the image data is arranged in the order of L and R, and a stereoscopic image is created using the inner area of each image data. For example, in FIG. 4, the upper left corner of the image is the origin of coordinates (0, 0), the horizontal direction is x, and the vertical direction is y. When the upper left coordinate of the thick frame portion in FIG. 4 is (1, 0) on both the left and right sides, if it is desired to put out the created stereoscopic image, these coordinates are newly added, and the left side is (0, 0). The right side is (2, 0), and the stereoscopic image may be recreated. Conversely, if the user wants to withdraw from the display surface, the left coordinate is (2, 0) and the right coordinate is (0, 0).

視差を小さくした立体画像データを作成する方法について、図6を用いて説明する。図6は、ディスプレイ面より手前に見える立体画像に対して視差を小さくして表示したい場合における立体画像データの作成及びその表示の一例を示す図である。例えば、図4の立体画像データをディスプレイ面より前に見える立体画像を表示するためのデータとする。このとき視差を小さくして立体画像を表示するには、立体画像が奥に引っ込むように作成し直せばよい。つまり、表2で説明したように、図6に示すように太枠部分の左上の座標を、左眼用画像データLについては(0,0)、右眼用画像データRについては(2,0)とすればよい。このとき、図4における立体画像データ上のデータL2,L4,L6の位置にそれぞれ、左眼用画像データLのL1,L3,L5のデータが配置される。同様に図4における立体画像データ上のR3,R5,R7の位置にそれぞれ、右眼用画像データRのR4,R6,R8のデータが配置される。立体画像データ301のL1,L3,L5は左眼で、R4,R6,R8は右眼で観察され、観察者は立体画像データを立体と認識する。   A method of creating stereoscopic image data with reduced parallax will be described with reference to FIG. FIG. 6 is a diagram illustrating an example of creation and display of stereoscopic image data when it is desired to display a stereoscopic image that is visible in front of the display surface with a reduced parallax. For example, the stereoscopic image data in FIG. 4 is data for displaying a stereoscopic image that can be seen in front of the display surface. At this time, in order to display a stereoscopic image with a reduced parallax, the stereoscopic image may be recreated so as to be retracted. That is, as described in Table 2, as shown in FIG. 6, the upper left coordinates of the thick frame portion are (0, 0) for the left eye image data L and (2, 2) for the right eye image data R. 0). At this time, the data L1, L3, and L5 of the left-eye image data L are arranged at the positions of the data L2, L4, and L6 on the stereoscopic image data in FIG. Similarly, R4, R6, and R8 data of the right-eye image data R are arranged at positions R3, R5, and R7 on the stereoscopic image data in FIG. In the stereoscopic image data 301, L1, L3, and L5 are observed with the left eye, and R4, R6, and R8 are observed with the right eye, and the observer recognizes the stereoscopic image data as a stereoscopic.

このように、視差を小さくしたい場合は図4の太枠部分を左眼用画像データLでは左側に、右眼用画像データRでは右にシフトして立体画像データを作成する。また、視差を大きくしたい場合は、太枠部分のシフト方向を逆にして、立体画像データを作成すればよい。   As described above, when it is desired to reduce the parallax, the thick frame portion in FIG. 4 is shifted to the left in the left-eye image data L and to the right in the right-eye image data R to create stereoscopic image data. If it is desired to increase the parallax, the stereoscopic image data may be created by reversing the shift direction of the thick frame portion.

このように、視差Aによる立体画像の表示時間が決められた時間TIME1を超えたことにより、表示される立体画像が小さな視差Bの立体画像に変更された場合、時間計測判定手段4は計測中の時間をリセットし、視差変更後の立体画像が表示されている時間t2の計測を始める。   In this manner, when the displayed stereoscopic image is changed to a small stereoscopic image with a small parallax B because the display time of the stereoscopic image with the parallax A exceeds the determined time TIME1, the time measurement determination unit 4 is measuring. And the measurement of the time t2 when the stereoscopic image after the parallax change is displayed is started.

次に、時間計測判定手段4は計測した時間t2を決められた時間TIME2と比較し(S14)、時間t2が決められた時間TIME2に達しない間はステップ13に戻って小さな視差Bの立体画像を表示し続ける。計測した時間t2すなわち視差Bでの立体画像表示時間が決められた時間TIME2に達すれば、時間計測判定手段4は、視差制御手段5に時間計測終了信号T2を出力する。視差制御手段5に時間計測終了信号T2が入力されると、視差制御手段5は、立体画像の視差を立体画像作成手段1で記憶していた視差に戻すように指示する信号を、立体画像作成手段1へ出力する。立体画像作成手段1に元の視差に戻すように指示する信号が入力されると、立体画像作成手段1は視差を元の視差に戻して立体画像を作成すると同時に時間計測判定手段4へリセット信号を送る。このとき、視差を直ちに元の視差Aに戻すようにしてもよいが、段階的に視差が大きくなるように立体画像を作成し、表示するようにしてもよい。   Next, the time measurement determination means 4 compares the measured time t2 with the determined time TIME2 (S14), and returns to step 13 while the time t2 does not reach the determined time TIME2, and returns to the small parallax B stereoscopic image. Continue to be displayed. When the measured time t2, that is, the stereoscopic image display time at the parallax B, reaches the determined time TIME2, the time measurement determination unit 4 outputs a time measurement end signal T2 to the parallax control unit 5. When the time measurement end signal T <b> 2 is input to the parallax control unit 5, the parallax control unit 5 generates a signal for instructing to return the parallax of the stereoscopic image to the parallax stored in the stereoscopic image creation unit 1. Output to means 1. When a signal instructing the stereoscopic image creating unit 1 to return to the original parallax is input, the stereoscopic image creating unit 1 creates a stereoscopic image by returning the parallax to the original parallax, and at the same time, a reset signal to the time measurement determining unit 4 Send. At this time, the parallax may be immediately returned to the original parallax A, but a stereoscopic image may be created and displayed so that the parallax increases step by step.

上で述べたように、視差が変更されたときは、立体画像作成手段1は時間計測判定手段4へリセット信号を出力する。時間計測判定手段4はリセット信号が入力されると、計測時間を0にリセットして再度計測を開始する。以上のような動作により、所定の視差で立体表示を行った時間を計測し、これに従って視差を調整しながら立体画像を作成する。   As described above, when the parallax is changed, the stereoscopic image creation unit 1 outputs a reset signal to the time measurement determination unit 4. When the reset signal is input, the time measurement determination unit 4 resets the measurement time to 0 and starts measurement again. By the operation as described above, a time for performing stereoscopic display with a predetermined parallax is measured, and a stereoscopic image is created while adjusting the parallax according to the time.

次に、立体画像作成手段1、時間計測判定手段4、視差制御手段5の間で伝送される信号について表3を参照して説明する。   Next, signals transmitted between the stereoscopic image creation means 1, the time measurement determination means 4, and the parallax control means 5 will be described with reference to Table 3.

Figure 0004783817
Figure 0004783817

状態[1−1]は、時間計測判定手段4が計測を開始したときの状態であり、このとき本装置が立体画像を表示していることを示す立体画像表示通知信号が、立体画像作成手段1から時間計測判定手段4へ出力される。   The state [1-1] is a state when the time measurement determination unit 4 starts measurement, and a stereoscopic image display notification signal indicating that the apparatus is displaying a stereoscopic image at this time is a stereoscopic image creation unit. 1 is output to the time measurement determination means 4.

状態[1−2]は、時間計測判定手段4の計測時間が決められた時間TIME1を経過したときの状態であり、時間計測判定手段4から視差制御手段5へ、時間TIME1が経過したことを表す時間計測終了信号T1が出力され、それに応じて視差制御手段5から立体画像作成手段1へ、視差を小さくして立体画像を作成することを指示する信号が出力される。立体画像作成手段1に視差を小さくして立体画像を作成することを指示する信号が入力されると同時に、時間計測判定手段4をリセットすることを指示するリセット信号が、立体画像作成手段1から時間計測判定手段4へ出力される。   The state [1-2] is a state when the time TIME1 for which the measurement time of the time measurement determination unit 4 has been determined has elapsed. The state [1-2] indicates that the time TIME1 has passed from the time measurement determination unit 4 to the parallax control unit 5. A time measurement end signal T1 is output, and a signal instructing to create a stereoscopic image with a reduced parallax is output from the parallax control unit 5 to the stereoscopic image creation unit 1 accordingly. When a signal instructing to create a stereoscopic image with a reduced parallax is input to the stereoscopic image creating unit 1, a reset signal instructing to reset the time measurement determination unit 4 is received from the stereoscopic image creating unit 1. It is output to the time measurement determination means 4.

状態[1−3]は、時間計測判定手段4の計測時間が決められた時間TIME2を経過したときの状態であり、時間計測判定手段4から視差制御手段5へ、時間TIME2が経過したことを表す時間計測終了信号T2が出力され、それに応じて視差制御手段5から立体画像作成手段1へ視差を戻して立体画像を作成することを指示する信号が出力される。これと同時に立体画像表示通知信号が、立体画像作成手段1から時間計測判定手段4に出力される。   The state [1-3] is a state when the time TIME2 for which the measurement time of the time measurement determination unit 4 is determined has elapsed. The state [1-3] indicates that the time TIME2 has passed from the time measurement determination unit 4 to the parallax control unit 5. A time measurement end signal T2 is output, and in response thereto, a signal instructing to return the parallax from the parallax control means 5 to the stereoscopic image creation means 1 and create a stereoscopic image is output. At the same time, a stereoscopic image display notification signal is output from the stereoscopic image creation means 1 to the time measurement determination means 4.

状態[1−4]は、立体画像作成手段1において、立体画像を作成する際に用いる視差が元の視差に戻ったときの状態であり、このときリセット信号が、立体画像作成手段1から時間計測判定手段4へ出力される。   The state [1-4] is a state when the parallax used when creating the stereoscopic image is returned to the original parallax in the stereoscopic image creating unit 1, and at this time, the reset signal is sent from the stereoscopic image creating unit 1 to the time. It is output to the measurement determination means 4.

このようにして、長時間立体画像を観察することにより観察者の眼が疲労して観察者の視差を感知する能力が衰えた場合であっても、視差を小さくした立体画像を表示することにより観察者の眼を保護することができる。また観察者の眼の疲労が回復し、観察者の視差を感知する能力が復活するに従い、視差を元に戻して立体画像を表示するため、違和感の少ない立体画像の表示が可能となる。上記で説明した時間TIME1及びTIME2はそれぞれ、立体画像表示装置内部のメモリに予め設定された値を保存しておくことができる。   In this way, by observing a stereoscopic image for a long time, even if the observer's eyes are fatigued and the ability to sense the parallax of the observer has declined, by displaying the stereoscopic image with reduced parallax, The eyes of the observer can be protected. In addition, as the fatigue of the observer's eyes is recovered and the viewer's ability to sense parallax is restored, the stereoscopic image is displayed with the parallax restored, so that a stereoscopic image with less discomfort can be displayed. Each of the times TIME1 and TIME2 described above can store a preset value in a memory inside the stereoscopic image display device.

また、時間TIME1及びTIME2の予め設定された値はそれぞれが1つずつではなく、例えば入力画像の画面サイズや入力画像が動画であればその全再生時間などといった鑑賞時の目の疲れと関連のある要素をパラメータとして、それらのパラメータの組み合わせに応じた数だけ設定されていても構わない。また観察者が、これらの時間TIME1、TIME2をそれぞれ設定あるいは変更できるようにしてもよい。   In addition, the preset values of time TIME1 and TIME2 are not one each, but for example, the screen size of the input image or the total playback time of the input image if it is a movie, etc. A certain element may be set as a parameter, and a number corresponding to the combination of these parameters may be set. The observer may be able to set or change these times TIME1 and TIME2.

また、図1の立体画像表示装置の前段に、図7に示すような立体画像フォーマットデータF1を復号するための立体画像復号手段500と、立体画像復号手段500で復号された立体画像データを左右眼別の画像データに分離する分離手段504を配置してもよい。このとき、立体画像フォーマットデータF1の内部に、前述した時間TIME1、TIME2に相当する値を予め保存しておき、立体画像表示装置において、TIME1とTIME2にそれらの値を代入して用いてもよい。このときの立体画像復号手段500の動作について次に説明する。立体画像復号手段500は、立体画像制御情報解析手段501、画像データ部復号手段502及びスイッチ503を備え、立体画像フォーマットデータF1を復号する。   In addition, the stereoscopic image decoding unit 500 for decoding the stereoscopic image format data F1 as shown in FIG. 7 and the stereoscopic image data decoded by the stereoscopic image decoding unit 500 are arranged on the left and right sides of the stereoscopic image display device of FIG. Separation means 504 for separating the image data for each eye may be arranged. At this time, values corresponding to the above-described times TIME1 and TIME2 may be stored in advance in the stereoscopic image format data F1, and these values may be substituted and used for TIME1 and TIME2 in the stereoscopic image display device. . The operation of the stereoscopic image decoding unit 500 at this time will be described next. The stereoscopic image decoding unit 500 includes a stereoscopic image control information analysis unit 501, an image data unit decoding unit 502, and a switch 503, and decodes the stereoscopic image format data F1.

ここで、立体画像フォーマットデータF1について説明する。図8は立体画像フォーマットデータF1の一例を示す図である。図示する立体画像フォーマットデータF1は、立体画像制御情報部と画像データ部から構成されている。このうち、立体画像制御情報部は立体画像フォーマットデータF1が立体画像表示用のデータであるか否かを示す立体画像識別情報I1と制御情報I2から、画像データ部は符号化データDから、それぞれ構成されている。ここで制御情報I2とは、前記した時間TIME1及びTIME2を示す情報である。また、画像データ部における符号化データは、例えば、対応する左眼用画像データLと右眼用画像データRを左右に並べた画像をJPEGやMPEG等の符号化方式を用いて符号化されたものとすることができる。立体画像フォーマットデータF1におけるデータの格納は、I1,I2,Dの順とする。   Here, the stereoscopic image format data F1 will be described. FIG. 8 is a diagram illustrating an example of the stereoscopic image format data F1. The illustrated stereoscopic image format data F1 includes a stereoscopic image control information portion and an image data portion. Among these, the stereoscopic image control information part is from stereoscopic image identification information I1 and control information I2 indicating whether or not the stereoscopic image format data F1 is data for stereoscopic image display, and the image data part is from encoded data D, respectively. It is configured. Here, the control information I2 is information indicating the above-described times TIME1 and TIME2. Also, the encoded data in the image data portion is, for example, an image obtained by arranging corresponding left-eye image data L and right-eye image data R side by side using an encoding method such as JPEG or MPEG. Can be. Data is stored in the stereoscopic image format data F1 in the order of I1, I2, and D.

立体画像制御情報解析手段501は、立体画像識別情報I1を解析し、立体画像フォーマットデータF1が立体画像表示用のデータであると判定した場合、制御情報I2を時間TIME1及びTIME2を示す値として、表1の立体画像表示モードを表示モード情報M1として、それぞれ立体画像表示装置へ出力し、画像データ部復号手段502と分離手段504が接続されるようにスイッチ503を切り替える。これと同時に、符号化データDを画像データ部復号手段502に出力する。画像データ部復号手段502では符号化データDを復号して立体画像データW2を生成し、スイッチ503を通して、立体画像データW2を分離手段504に出力する。分離手段504では、入力された立体画像データW2を左眼用画像データLと右眼用画像データRに分離してそれぞれ、出力画像データO1、O2として立体画像表示装置へ出力する。出力画像データO1,O2は、それぞれ入力画像A1及びA2として、図1の立体画像表示装置に入力される。   When the stereoscopic image control information analyzing unit 501 analyzes the stereoscopic image identification information I1 and determines that the stereoscopic image format data F1 is data for displaying a stereoscopic image, the control information I2 is set as a value indicating time TIME1 and TIME2. The stereoscopic image display mode shown in Table 1 is output as the display mode information M1 to the stereoscopic image display device, and the switch 503 is switched so that the image data part decoding unit 502 and the separation unit 504 are connected. At the same time, the encoded data D is output to the image data part decoding means 502. The image data part decoding unit 502 decodes the encoded data D to generate stereoscopic image data W2, and outputs the stereoscopic image data W2 to the separation unit 504 through the switch 503. The separation unit 504 separates the input stereoscopic image data W2 into left-eye image data L and right-eye image data R, and outputs them to the stereoscopic image display device as output image data O1 and O2, respectively. The output image data O1 and O2 are input to the stereoscopic image display device of FIG. 1 as input images A1 and A2, respectively.

また、立体画像フォーマットデータF1の内部の制御情報I2内に保存する値は、前記TIME1とTIME2のどちらか一方の値でも構わなく、保存されていないデータは予め設定された値を用いるようにしてもよい。   In addition, the value stored in the control information I2 in the stereoscopic image format data F1 may be one of the values of TIME1 and TIME2, and a pre-set value is used for unsaved data. Also good.

また、立体画像フォーマットデータF1の内部の制御情報I2内に保存する値は、前記TIME1とTIME2のどちらか一方の値でも構わなく、保存されていないデータは予め設定された値を用いるようにしてもよい。   In addition, the value stored in the control information I2 in the stereoscopic image format data F1 may be one of the values of TIME1 and TIME2, and a pre-set value is used for unsaved data. Also good.

例えばTIME1のみを保存した立体画像フォーマットデータF1を再生する場合、立体表示時間の計測値がTIME1に達した時点で、視差を小さくするように立体画像の表示制御を行うが、その後の表示制御は再生装置毎に自由に行えるものとする。すなわち、立体表示時間がTIME1を経過した後は、
(i)次に電源を切るまでは視差を小さくしたまま立体表示を継続する
(ii)再生装置が独自にTIME2に相当する時間を設定し、既に説明した手法によって視差を元の状態に戻す。
(iii)再生装置が独自に所定の時間を設定し、立体表示時間が所定の時間に達した時点で立体表示から平面表示に切り替える。
などの処理を行うことが出来る。
For example, when reproducing the stereoscopic image format data F1 storing only TIME1, when the measured value of the stereoscopic display time reaches TIME1, the display control of the stereoscopic image is performed so as to reduce the parallax. It can be freely performed for each playback device. In other words, after the 3D display time has passed TIME1,
(I) The stereoscopic display is continued while reducing the parallax until the power is next turned off. (Ii) The playback apparatus uniquely sets a time corresponding to TIME2, and returns the parallax to the original state by the method already described.
(Iii) The playback device uniquely sets a predetermined time, and switches the stereoscopic display to the flat display when the stereoscopic display time reaches the predetermined time.
Etc. can be performed.

なお、上記では立体表示時間の計測値がTIME1に達した時点で、視差を小さくする例を述べたが、TIME1に達した時点で立体表示から平面表示に切り替えるようにしても良い。これによって、立体画像のコンテンツ作成者の意図を反映し、観察者の眼の疲労をより早く回復することが可能となる。   In the above description, an example in which the parallax is reduced when the measurement value of the stereoscopic display time reaches TIME1 is described. However, the stereoscopic display may be switched to the flat display when TIME1 is reached. As a result, the intention of the creator of the stereoscopic image content can be reflected, and the eye fatigue of the observer can be recovered more quickly.

立体画像フォーマットデータF1が立体画像表示用のデータでないことを立体画像識別情報I1が示す場合、制御情報I2は出力しない。入力画像スルー表示モードを示す情報を表示モード情報M1として立体画像表示装置へ出力する。これと同時に、画像データ部復号手段502の出力が、出力画像データO1として出力されるようにスイッチ503を切り替える。これと同時に符号化データDを画像データ部復号手段502に出力する。画像データ部復号手段502では符号化データDを復号する。復号されたデータを平面画像データW1とすると、平面画像データW1は出力画像データO1として出力され、入力画像A1として図1の立体画像表示装置に入力される。   When the stereoscopic image identification information I1 indicates that the stereoscopic image format data F1 is not data for displaying a stereoscopic image, the control information I2 is not output. Information indicating the input image through display mode is output to the stereoscopic image display device as display mode information M1. At the same time, the switch 503 is switched so that the output of the image data part decoding means 502 is output as the output image data O1. At the same time, the encoded data D is output to the image data part decoding means 502. The image data part decoding means 502 decodes the encoded data D. Assuming that the decoded data is plane image data W1, the plane image data W1 is output as output image data O1 and input as an input image A1 to the stereoscopic image display apparatus of FIG.

また、上記で説明した立体画像フォーマットデータF1の画像データ部のデータは符号化されたデータでなくても構わない。例えば無圧縮のデータでも構わない。   Further, the data of the image data portion of the stereoscopic image format data F1 described above may not be encoded data. For example, uncompressed data may be used.

また、上記で表示モード情報M1は立体画像識別情報I1から求めることを説明したが、外部から入力してもよく、さらに外部から入力された方の値を優先して用いても構わない。ただし、立体画像フォーマットデータF1が立体画像表示用のデータでないことを立体画像識別情報I1が示す場合のみ、表示モード情報M1は強制的に入力画像スルー表示モードを示す値にする。   In the above description, the display mode information M1 is obtained from the stereoscopic image identification information I1. However, the display mode information M1 may be input from the outside, and the value input from the outside may be used preferentially. However, only when the stereoscopic image identification information I1 indicates that the stereoscopic image format data F1 is not stereoscopic image display data, the display mode information M1 is forcibly set to a value indicating the input image through display mode.

また、上記で説明した立体画像フォーマットデータF1の立体画像制御情報部は、データF1内において繰り返し挿入されていても構わない。図9は立体画像コンテンツを放送で受信する際の一例を示す図である。例えば放送衛星21から放送された立体画像コンテンツの放送波を移動受信端末22で受信する。このとき放送される放送コンテンツは、複数の番組配列情報と立体画像コンテンツで構成されており、立体画像制御情報部はこの番組配列情報の一部として挿入されていても構わない。   Further, the stereoscopic image control information part of the stereoscopic image format data F1 described above may be repeatedly inserted in the data F1. FIG. 9 is a diagram illustrating an example when receiving stereoscopic image content by broadcasting. For example, the mobile reception terminal 22 receives a broadcast wave of stereoscopic image content broadcast from the broadcast satellite 21. The broadcast content broadcast at this time is composed of a plurality of program arrangement information and stereoscopic image content, and the stereoscopic image control information section may be inserted as a part of this program arrangement information.

また、立体画像フォーマットデータF1において、立体画像制御情報部は画像データ部に挿入されていても構わない。例えば画像データ部がMPEG−4で符号化されたデータである場合、立体画像制御情報部はMPEG−4符号化データ内で規定される所定の位置に挿入されていても構わない。   In the stereoscopic image format data F1, the stereoscopic image control information part may be inserted in the image data part. For example, when the image data portion is data encoded by MPEG-4, the stereoscopic image control information portion may be inserted at a predetermined position defined in the MPEG-4 encoded data.

また、立体表示を開始した時刻を起点として時間計測判定手段4は計測を行うことを上記で説明したが、放送の場合、放送コンテンツの受信を開始してから最初に立体画像制御情報部のデータを受信した時刻、もしくは番組配列情報内に立体画像制御情報部のデータが含まれているなら、最初にその番組配列情報を受信した時刻を起点にして時間計測判定手段4は表示時間の計測を開始しても構わない。また、最初に受信した上記番組配列情報内に番組再生に必要な時間情報が含まれていれば、その情報を用いて作成した時刻を、時間計測判定手段4で行われる計測の起点としてもよい。   In addition, it has been described above that the time measurement determination unit 4 performs the measurement starting from the time when the stereoscopic display is started. However, in the case of broadcasting, the data of the stereoscopic image control information section is first obtained after the reception of the broadcast content is started. If the data of the stereoscopic image control information part is included in the program arrangement information, the time measurement determination means 4 measures the display time from the time of receiving the program arrangement information first. You can start. If the time information necessary for program reproduction is included in the program arrangement information received first, the time created using the information may be used as the starting point of the measurement performed by the time measurement determination means 4. .

また上記では、立体画像フォーマットデータF1が放送波で伝送される場合について説明したが、例えば伝送経路として、ケーブルやインターネットなどのネットワークなどが使用されても構わないし、伝送される代わりにハードディスクや光ディスクなどの記録媒体に記録されていても構わない。   In the above description, the case where the stereoscopic image format data F1 is transmitted by broadcast waves has been described. For example, a network such as a cable or the Internet may be used as a transmission path. It may be recorded on a recording medium such as

図10は、立体画像フォーマットデータF1が、記録媒体に記録されて利用される場合のデータの流れの一例を説明する図である。例えば、立体画像データが立体画像符号化手段510に入力される。立体画像符号化手段510は入力された立体画像データを符号化し、立体画像フォーマットデータF1を作成し、記録媒体511に出力する。記録媒体511は、ハードディスクや、光ディスクなどを内蔵しており、入力されたデジタルデータを記録することができるものとする。記録媒体511から、立体画像フォーマットデータF1が立体画像復号手段512へ出力される。立体画像復号手段512は、上で説明した立体画像復号手段500と同様にして、立体画像フォーマットデータF1を復号し、制御情報I2及び表示モード情報M1、立体画像データを出力する。   FIG. 10 is a diagram illustrating an example of a data flow when the stereoscopic image format data F1 is recorded on a recording medium and used. For example, stereoscopic image data is input to the stereoscopic image encoding unit 510. The stereoscopic image encoding means 510 encodes the input stereoscopic image data, creates stereoscopic image format data F1, and outputs it to the recording medium 511. The recording medium 511 includes a hard disk, an optical disk, and the like, and can record input digital data. The stereoscopic image format data F1 is output from the recording medium 511 to the stereoscopic image decoding unit 512. The stereoscopic image decoding unit 512 decodes the stereoscopic image format data F1 in the same manner as the stereoscopic image decoding unit 500 described above, and outputs control information I2, display mode information M1, and stereoscopic image data.

また、図11は、立体画像フォーマットデータF1の伝送経路としてネットワークが使われた場合のデータの流れの一例を説明する図である。例えば、立体画像データが立体画像符号化手段520に入力される。立体画像符号化手段520は入力された立体画像データを符号化し、立体画像フォーマットデータF1を作成する。立体画像フォーマットデータF1は、ネットワーク522を通じて立体画像復号手段523に伝送される。立体画像復号手段523は、上で説明した立体画像復号手段500と同様にして、立体画像フォーマットデータF1を復号し、制御情報I2及び表示モード情報M1、立体画像データを出力する。   FIG. 11 is a diagram for explaining an example of a data flow when a network is used as a transmission path of the stereoscopic image format data F1. For example, stereoscopic image data is input to the stereoscopic image encoding unit 520. The stereoscopic image encoding means 520 encodes the input stereoscopic image data and creates stereoscopic image format data F1. The stereoscopic image format data F1 is transmitted to the stereoscopic image decoding unit 523 through the network 522. The stereoscopic image decoding unit 523 decodes the stereoscopic image format data F1 in the same manner as the stereoscopic image decoding unit 500 described above, and outputs control information I2, display mode information M1, and stereoscopic image data.

また、立体画像フォーマットデータF1は、BSやCSなどの放送に用いられるデータに変換され、伝送されても構わない。例えば、立体画像データが立体画像作成手段520に入力される。立体画像作成手段520は入力された立体画像データを符号化し、立体画像フォーマットデータF1を作成し、BSデータ作成手段521に出力する。BSデータ作成手段521は、立体画像フォーマットデータF1を用いてBSデータを作成し、ネットワーク522を通じてBSデータ復号手段524へ出力する。BSデータ復号手段524は、入力されたBSデータを復号して立体画像フォーマットデータF1を生成し、立体画像復号手段523へ出力する。立体画像復号手段523は、上で説明した立体画像復号手段500と同様にして、立体画像フォーマットデータF1を復号し、制御情報I2及び表示モード情報M1、立体画像データを出力する。   The stereoscopic image format data F1 may be converted into data used for broadcasting such as BS and CS and transmitted. For example, stereoscopic image data is input to the stereoscopic image creation unit 520. The stereoscopic image creation means 520 encodes the inputted stereoscopic image data, creates stereoscopic image format data F1, and outputs it to the BS data creation means 521. The BS data creating unit 521 creates BS data using the stereoscopic image format data F 1 and outputs the BS data to the BS data decoding unit 524 through the network 522. The BS data decoding unit 524 generates the stereoscopic image format data F1 by decoding the input BS data, and outputs it to the stereoscopic image decoding unit 523. The stereoscopic image decoding unit 523 decodes the stereoscopic image format data F1 in the same manner as the stereoscopic image decoding unit 500 described above, and outputs control information I2, display mode information M1, and stereoscopic image data.

こうして立体画像表示装置では、制御情報I2の値からそれぞれ処理に用いる時間TIME1及びTIME2を取得して使用することができ、立体表示する個々のデータに応じて、時間TIME1及びTIME2を設定できるため便利である。   In this way, the stereoscopic image display apparatus can acquire and use the times TIME1 and TIME2 used for processing from the value of the control information I2, respectively, and can conveniently set the times TIME1 and TIME2 according to individual data to be stereoscopically displayed. It is.

次に、入力画像データが3つの場合について説明する。 図12は、入力画像データが3つの場合の第1の実施形態の立体画像表示装置の構成例を示す図である。   Next, a case where there are three input image data will be described. FIG. 12 is a diagram illustrating a configuration example of the stereoscopic image display apparatus according to the first embodiment when the number of input image data is three.

この立体画像表示装置は、3つの視点から撮影された多視点画像データ(入力画像X,Y,Z)を入力として立体画像データを作成し、フレームメモリ2に出力する立体画像作成手段600と、多視点画像データのいずれか一つのデータから平面画像を作成する平面画像作成手段6と、入出力する画像データを切り替えるためのスイッチ11,12,601,602,603と、それらのスイッチを、多視点画像データを用いて立体表示を行うか平面表示を行うかを示す表示モード情報M′1に合わせて制御するスイッチ制御手段604と、立体画像作成手段600又は平面画像作成手段6で作成された画像もしくは入力画像をそのまま格納するフレームメモリ2と、立体表示と平面表示が可能な表示手段であり、かつ表示モード情報M′1に応じてフレームメモリ2の画像データを立体画像として表示もしくは平面画像として表示する表示手段3と、立体画像表示の際に、立体画像の表示時間を計測する時間計測判定手段4と、立体画像の表示時間が所定の時間を超えた場合、立体画像作成手段600に前記多視点画像の視差を調整して立体画像を作成することを指示する視差制御手段5とを備えて構成されている。表示モード情報M′1については後述する。   The stereoscopic image display apparatus generates stereoscopic image data by using multi-viewpoint image data (input images X, Y, Z) photographed from three viewpoints, and outputs the stereoscopic image data to the frame memory 2; A planar image creating means 6 for creating a planar image from any one of the multi-viewpoint image data, switches 11, 12, 601, 602, 603 for switching input / output image data, and those switches Created by the switch control means 604 for controlling according to the display mode information M′1 indicating whether to perform stereoscopic display or planar display using the viewpoint image data, and the stereoscopic image creation means 600 or the planar image creation means 6. A frame memory 2 for storing an image or an input image as it is, display means capable of stereoscopic display and planar display, and display mode information M′1 Accordingly, display means 3 for displaying the image data of the frame memory 2 as a stereoscopic image or a flat image, a time measurement determining means 4 for measuring the display time of the stereoscopic image at the time of stereoscopic image display, and display of the stereoscopic image When the time exceeds a predetermined time, the stereoscopic image creating unit 600 is configured to include a parallax control unit 5 that instructs to create a stereoscopic image by adjusting the parallax of the multi-viewpoint image. The display mode information M′1 will be described later.

ここで、フレームメモリ2と、表示手段3、時間計測判定手段4、視差制御手段5、平面画像作成手段6、スイッチ11,12は前述した、2つの画像が入力された場合の第1の実施形態の立体画像表示装置と同じ動作をするため、図12における番号も同じものとする。以下、図12を用いて、入力画像データが3つの場合における、本発明の第1の実施形態を説明する。   Here, the frame memory 2, the display unit 3, the time measurement determination unit 4, the parallax control unit 5, the planar image creation unit 6, and the switches 11 and 12 are the first implementations when the above-described two images are input. In order to perform the same operation as the three-dimensional image display device of the embodiment, the numbers in FIG. Hereinafter, the first embodiment of the present invention in the case of three input image data will be described with reference to FIG.

外部から表示モード情報M′1がスイッチ制御手段604に入力される。表示モード情報M′1には、立体画像表示モード1〜4、平面画像表示モード1〜3、入力画像スルー表示モードの8種類があり、本装置は入力された表示モード情報M′1に合わせて、入力画像のうちのいずれか2つ、もしくは3つを用いた立体画像表示及び、入力画像のうちのいずれか1つを用いた平面画像表示、入力画像をそのまま平面表示する入力画像スルー表示のそれぞれを切り替える。   Display mode information M ′ 1 is input to the switch control means 604 from the outside. There are eight types of display mode information M′1, three-dimensional image display modes 1 to 4, planar image display modes 1 to 3, and input image through display mode. This apparatus matches the input display mode information M′1. 3D image display using any two or three of the input images, flat image display using any one of the input images, and input image through display for displaying the input image as it is Switch each of the.

表4に表示モード情報M′1の値とモード名及び各モードで表示される画像の関係をまとめて示す。   Table 4 summarizes the relationship between the value of the display mode information M′1, the mode name, and the image displayed in each mode.

Figure 0004783817
Figure 0004783817

立体画像表示モード1では、入力画像データXとYを用いて立体画像(2視点)を作成し、立体表示する。立体画像表示モード2では、入力画像データYとZを用いて立体画像(2視点)を作成し、立体表示する。立体画像表示モード3では、入力画像データXとZを用いて立体画像(2視点)を作成し、立体表示する。立体画像表示モード4では、入力画像データXとY,Zを用いて立体画像(3視点)を作成し、立体表示する。   In the stereoscopic image display mode 1, a stereoscopic image (two viewpoints) is created using the input image data X and Y, and is stereoscopically displayed. In the stereoscopic image display mode 2, a stereoscopic image (two viewpoints) is created using the input image data Y and Z, and is stereoscopically displayed. In the stereoscopic image display mode 3, a stereoscopic image (two viewpoints) is created using the input image data X and Z, and is stereoscopically displayed. In the stereoscopic image display mode 4, a stereoscopic image (three viewpoints) is created using the input image data X, Y, and Z, and is stereoscopically displayed.

平面画像表示モード1では、入力画像Xを用いて平面画像を作成し、平面表示する。平面画像表示モード2では、入力画像データYを用いて平面画像を作成し、平面表示する。平面画像表示モード3では、入力画像データZを用いて平面画像を作成し、平面表示する。入力画像スルー表示モードでは、入力画像データX,Y,Zのいずれかひとつをそのままスルー表示する。   In the planar image display mode 1, a planar image is created using the input image X and displayed in a planar manner. In the planar image display mode 2, a planar image is created using the input image data Y and displayed in a planar manner. In the planar image display mode 3, a planar image is created using the input image data Z and displayed in a planar manner. In the input image through display mode, any one of the input image data X, Y, and Z is directly displayed as it is.

以上8つの表示モードにおける本表示装置の動作について説明する。まず、表示モード情報M′1が立体画像表示モード1〜3のいずれかである場合の本装置の動作について説明する。   The operation of the display device in the eight display modes will be described. First, the operation of this apparatus when the display mode information M′1 is any one of the stereoscopic image display modes 1 to 3 will be described.

立体画像表示モード1〜3のいずれかがスイッチ制御手段604に入力される。スイッチ制御手段604は、スイッチ602をオフにして、表4を参照して各モードで立体画像を作成するのに必要な画像データ(入力画像X,Y,Zのうちいずれか2つ)が、立体画像作成手段600に入力されるようにスイッチ11,12,601を制御し、立体画像作成手段600とフレームメモリ2が接続されるようにスイッチ603を制御する。次に、立体画像作成手段600は、前述した入力画像データが2つの場合において説明した表示モード情報M1の、立体画像表示モードと同様にして、立体画像データ(2視点)を作成し、フレームメモリ2に出力する。最後にフレームメモリ2から立体画像データが表示手段3に入力される。表示手段3は入力された立体画像データ(2視点の画像データ)を立体表示する。   Any one of the stereoscopic image display modes 1 to 3 is input to the switch control means 604. The switch control means 604 turns off the switch 602, and referring to Table 4, the image data (two of the input images X, Y, Z) necessary for creating a stereoscopic image in each mode is The switches 11, 12, and 601 are controlled so as to be input to the stereoscopic image creating unit 600, and the switch 603 is controlled so that the stereoscopic image creating unit 600 and the frame memory 2 are connected. Next, the stereoscopic image creation means 600 creates stereoscopic image data (two viewpoints) in the same manner as the stereoscopic image display mode of the display mode information M1 described in the case where there are two pieces of input image data. Output to 2. Finally, stereoscopic image data is input from the frame memory 2 to the display means 3. The display means 3 stereoscopically displays the input stereoscopic image data (two-viewpoint image data).

また、時間計測手段4及び視差制御手段5は、入力画像データが2つの場合と同様の動作を行い、視差の調節をして立体表示を行う。   Further, the time measuring unit 4 and the parallax control unit 5 perform the same operation as in the case of two input image data, and adjust the parallax to perform stereoscopic display.

以上の説明では、表示手段3は左右眼別の画像(2視点の画像)を表示する2眼式の表示手段としたが、3視点の画像を表示する多眼式の表示手段を備えるようにしてもよく、この場合には立体画像表示モード4が選択可能である。   In the above description, the display unit 3 is a binocular display unit that displays images for the left and right eyes (bi-viewpoint image). However, the display unit 3 is provided with a multi-view display unit that displays a 3-viewpoint image. In this case, the stereoscopic image display mode 4 can be selected.

次に、表示モード情報M′1が立体画像表示モード4である場合の本装置の動作について説明する。   Next, the operation of this apparatus when the display mode information M′1 is the stereoscopic image display mode 4 will be described.

立体画像表示モード4がスイッチ制御手段604に入力される。スイッチ制御手段604は、スイッチ602をオフにし、表4を参照して各モードで立体画像を作成するのに必要な画像データ(入力画像X及びY,Z)が、立体画像作成手段600に入力されるようにスイッチ11,12,601を制御し、立体画像作成手段600とフレームメモリ2が接続されるようにスイッチ603を制御する。次に、立体画像作成手段600において、立体画像データ(3視点)が作成され、フレームメモリ2に書き込まれる。最後にフレームメモリ2から立体画像データが表示手段3に入力される。表示手段3は入力された立体画像データ(3視点)を立体表示する。   The stereoscopic image display mode 4 is input to the switch control unit 604. The switch control means 604 turns off the switch 602 and inputs image data (input images X and Y, Z) necessary for creating a stereoscopic image in each mode with reference to Table 4 to the stereoscopic image creating means 600. Thus, the switches 11, 12, 601 are controlled, and the switch 603 is controlled so that the stereoscopic image creating means 600 and the frame memory 2 are connected. Next, stereoscopic image data (three viewpoints) is generated in the stereoscopic image generating means 600 and written into the frame memory 2. Finally, stereoscopic image data is input from the frame memory 2 to the display means 3. The display means 3 stereoscopically displays the input stereoscopic image data (three viewpoints).

このとき立体画像作成手段600において作成される立体画像データ(3視点)について、図13を参照して説明する。図13は入力画像データが3つの場合の立体画像データの作成及びその表示の一例を示す図である。   The stereoscopic image data (three viewpoints) created by the stereoscopic image creation means 600 at this time will be described with reference to FIG. FIG. 13 is a diagram showing an example of creation and display of stereoscopic image data when there are three input image data.

入力画像データXを垂直方向の短冊状に分解した画像をX1,X2,X3,X4,X5,X6,X7,X8、入力画像データYを垂直方向の短冊状に分解した画像をY1,Y2,Y3,Y4,Y5,Y6,Y7,Y8、入力画像データZを垂直方向の短冊状に分解した画像をZ1,Z2,Z3,Z4,Z5,Z6,Z7,Z8とする。このとき表示する画像の水平方向のサイズは入力画像データXとY,Z、それぞれの水平方向のサイズよりも小さいとする。   X1, X2, X3, X4, X5, X6, X7, and X8 are images obtained by decomposing input image data X into vertical strips, and Y1, Y2, and X1 are images obtained by decomposing input image data Y into vertical strips. Images obtained by decomposing Y3, Y4, Y5, Y6, Y7, Y8 and the input image data Z into strips in the vertical direction are denoted as Z1, Z2, Z3, Z4, Z5, Z6, Z7, and Z8. It is assumed that the horizontal size of the image displayed at this time is smaller than the horizontal size of each of the input image data X, Y, and Z.

例えば、図13の入力画像データX,Y,Zにおいて太枠で示した範囲内の画像が実際に表示されるとすると、立体画像データ(3視点)は図13のようにX2,Y3,Z4,X5,Y6,Z7を用いて作成される。立体画像表示装置のディスプレイ面上にはスリット300が備えられており、ディスプレイに表示されたX2,X5の画像が観察者の左眼に、Y3,Y6の画像が観察者の右眼に送られることにより観察者は、観察位置1からの立体画像を観察することができる。また、観察者が右に動くことにより、Y3,Y6の画像が観察者の左眼に、Z4,Z7の画像が観察者の右眼に送られることにより観察者は、観察位置2から立体画像を観察することができる。   For example, if the image within the range indicated by the thick frame in the input image data X, Y, and Z in FIG. 13 is actually displayed, the stereoscopic image data (three viewpoints) is X2, Y3, and Z4 as shown in FIG. , X5, Y6, Z7. A slit 300 is provided on the display surface of the stereoscopic image display device, and images X2 and X5 displayed on the display are sent to the left eye of the observer, and images Y3 and Y6 are sent to the right eye of the observer. Thus, the observer can observe the stereoscopic image from the observation position 1. Also, when the observer moves to the right, the images Y3 and Y6 are sent to the left eye of the observer, and the images Z4 and Z7 are sent to the right eye of the observer, so that the observer can view the stereoscopic image from the observation position 2. Can be observed.

また視差の調節は、3視点以上の画像のうち観察者の目に届く2視点の画像の間の視差について、入力画像データが2つの場合で説明した方法と同様に行う。   The parallax adjustment is performed in the same manner as the method described in the case of two input image data with respect to the parallax between two viewpoint images that reach the observer's eyes among images of three or more viewpoints.

例えば、まず観察位置1の視差を調節する。入力画像データXとYの太枠をそれぞれ動かして立体画像を作成することによって、観察位置1の視差を調節する。このとき、入力画像データZの太枠は、隣り合う視点の入力画像データであるYの太枠と同じだけ動かして配置して立体画像を作成する。この場合、観察位置1における視差は変化するが、観察位置2における視差は変化しない。   For example, first, the parallax at the observation position 1 is adjusted. The parallax at the observation position 1 is adjusted by moving the thick frames of the input image data X and Y to create a stereoscopic image. At this time, the thick frame of the input image data Z is moved and arranged by the same amount as the thick frame of Y that is the input image data of the adjacent viewpoint to create a stereoscopic image. In this case, the parallax at the observation position 1 changes, but the parallax at the observation position 2 does not change.

次に、観察位置2の視差を調節してもよい。例えば上記の観察位置1の視差を調節で説明したように入力画像Zの太枠を入力画像データであるYの太枠と同じだけ動かした後、入力画像Zの太枠をさらに動かして立体画像を作成することによって、観察位置2の視差視差を調節する。   Next, the parallax at the observation position 2 may be adjusted. For example, as described in the adjustment of the parallax at the observation position 1 above, after moving the thick frame of the input image Z by the same amount as the thick frame of Y which is the input image data, the thick frame of the input image Z is further moved to move the stereoscopic image To adjust the parallax parallax at the observation position 2.

このようにして、3視点の画像を表示する多眼式の表示手段であっても、観察位置1と観察位置2のそれぞれに対して、入力画像データが2つの場合で説明した方法と同様に視差の調節を行うことができる。   In this way, even with a multi-view display unit that displays images from three viewpoints, the method described in the case of two input image data for each of the observation position 1 and the observation position 2 is used. The parallax can be adjusted.

次に、表示モード情報M′1が平面画像表示モード1〜3である場合の本装置の動作について説明する。平面画像表示モード1〜3のいずれかが、スイッチ制御手段604に入力される。スイッチ制御手段604は、スイッチ11,12,601をオフにし、表4を参照してそれぞれのモードで平面画像を作成するのに必要な画像データ(入力画像X,Y,Zのうちいずれか1つ)が、平面画像作成手段6に入力されるようにスイッチ602を制御し、平面画像作成手段6とフレームメモリ2が接続されるようにスイッチ603を制御する。平面画像作成手段6は、前述した入力画像データが2つの場合において説明した表示モード情報M1の左眼(もしくは右眼)用平面画像表示モードと同様にして、平面画像データを作成し、フレームメモリ2に出力する。最後にフレームメモリ2から平面画像データが表示手段3に入力される。表示手段3は入力された平面画像データを平面表示する。   Next, the operation of this apparatus when the display mode information M′1 is the planar image display mode 1 to 3 will be described. Any one of the planar image display modes 1 to 3 is input to the switch control means 604. The switch control means 604 turns off the switches 11, 12, and 601 and refers to Table 4 to generate image data (any one of the input images X, Y, and Z necessary for creating a planar image in each mode). The switch 602 controls the switch 602 so that it is input to the planar image creating means 6 and controls the switch 603 so that the planar image creating means 6 and the frame memory 2 are connected. The planar image creation means 6 creates planar image data in the same manner as the planar image display mode for the left eye (or right eye) of the display mode information M1 described in the case where there are two pieces of input image data described above. Output to 2. Finally, planar image data is input from the frame memory 2 to the display means 3. The display means 3 displays the input plane image data on a plane.

また、表示モード情報M′1が入力画像スルー表示モードである場合の本装置の動作について説明する。入力画像スルー表示モードが、スイッチ制御手段604に入力される。スイッチ制御手段604は、スイッチ11,12,601をオフにし、入力画像X(入力画像X,Y,Zのうちいずれか1つ)がフレームメモリ2に入力されるようにスイッチ602とスイッチ603を制御する。入力画像がフレームメモリ2に出力される。最後にフレームメモリ2から平面画像データが表示手段3に入力される。表示手段3は入力された平面画像データを平面表示する。   The operation of this apparatus when the display mode information M′1 is the input image through display mode will be described. The input image through display mode is input to the switch control means 604. The switch control unit 604 turns off the switches 11, 12, and 601, and switches the switch 602 and the switch 603 so that the input image X (any one of the input images X, Y, and Z) is input to the frame memory 2. Control. An input image is output to the frame memory 2. Finally, planar image data is input from the frame memory 2 to the display means 3. The display means 3 displays the input plane image data on a plane.

以上、表示モード情報M′1に対する本装置の動作について説明したが、このようにして、入力画像が3つである場合にも、入力画像データが2つの場合と同様にして、観察者の目の疲労に合わせて、視差を調整して立体画像を表示することが可能である。またこのとき必要に応じて平面画像を表示することも出来る。   The operation of the present apparatus with respect to the display mode information M′1 has been described above. In this way, even when there are three input images, the eyes of the observer are the same as in the case of two input image data. It is possible to display the stereoscopic image by adjusting the parallax according to the fatigue of the camera. At this time, a plane image can be displayed as necessary.

またさらに、入力画像の数がm(mは4以上の整数)個の場合でも、入力の数と、入力と立体画像作成手段600をつなぐスイッチの数、スイッチ602の入力との接点の数、表示モード情報M′1の種類を、入力画像データが2の場合から3の場合に拡張した場合と同様に拡張を行うことにより、立体画像の表示及び、その視差を調節することができる。   Furthermore, even when the number of input images is m (m is an integer of 4 or more), the number of inputs, the number of switches connecting the input and the stereoscopic image creating means 600, the number of contacts with the input of the switch 602, By expanding the type of the display mode information M′1 in the same way as when the input image data is expanded from 2 to 3, the display of the stereoscopic image and the parallax thereof can be adjusted.

また、立体画像フォーマットデータF1の画像データ部は、n(n≧1)視点から構成されていてもよく、この場合、制御情報I2内に、立体画像フォーマットデータF1に含まれる視点数を含めてもよく、このとき例えば、図7の立体画像復号手段500において、立体画像フォーマットデータF1に含まれる視点数を示すデータを立体画像制御情報解析手段501から分離手段504に伝送し、立体画像データWを視点の数だけ分離して出力する。   Further, the image data portion of the stereoscopic image format data F1 may be configured from n (n ≧ 1) viewpoints. In this case, the control information I2 includes the number of viewpoints included in the stereoscopic image format data F1. In this case, for example, in the stereoscopic image decoding unit 500 of FIG. 7, data indicating the number of viewpoints included in the stereoscopic image format data F1 is transmitted from the stereoscopic image control information analyzing unit 501 to the separating unit 504, and the stereoscopic image data W Are output by separating them by the number of viewpoints.

次に、本発明の第2の実施形態について説明する。
図14は、本発明による立体画像表示装置の第2の実施形態の構成例を示す図である。
本発明における第2の実施形態の立体画像表示装置は、左右眼別の画像データを入力として立体画像データを作成する立体画像作成手段100と、左右眼別の画像データのどちらか一方のデータから平面画像を作成する平面画像作成手段6と、入出力する画像データを切り替えるためのスイッチ11,12,13,14と、それらのスイッチを表示モード情報M1に従って制御するスイッチ制御手段10と、立体画像作成手段100又は平面画像作成手段6で作成された画像もしくは入力画像をそのまま格納するフレームメモリ2と、表示モード情報M1に応じてフレームメモリ2の画像データを立体画像として表示もしくは平面画像として表示する表示手段3と、立体画像の表示時間を計測する時間計測判定手段101と、立体画像の表示時間が所定の時間を超えた場合、立体画像作成手段100に現在表示している立体画像上に警告のメッセージを表示するように指示する警告表示制御手段102から構成されている。ここでフレームメモリ2と表示手段3、平面画像作成手段6、スイッチ制御手段10、スイッチ11,12,13,14は前述した第1の実施形態の立体画像表示装置と同じ動作をするため、図14における番号も同じものとする。
Next, a second embodiment of the present invention will be described.
FIG. 14 is a diagram illustrating a configuration example of the second embodiment of the stereoscopic image display apparatus according to the present invention.
The stereoscopic image display apparatus according to the second embodiment of the present invention is based on either one of the stereoscopic image creation means 100 that creates stereoscopic image data by inputting the image data for the left and right eyes, and the image data for the left and right eyes. Planar image creating means 6 for creating a planar image, switches 11, 12, 13, and 14 for switching input / output image data, switch control means 10 for controlling these switches in accordance with display mode information M1, and stereoscopic image The frame memory 2 that stores the image or input image created by the creation means 100 or the planar image creation means 6 as it is, and the image data in the frame memory 2 is displayed as a stereoscopic image or a planar image according to the display mode information M1. Display means 3, time measurement determination means 101 for measuring the display time of a stereoscopic image, and display of a stereoscopic image If during exceeds a predetermined time, and a warning display control means 102 for instructing to display a warning message on the three-dimensional image that is currently displayed on the stereoscopic image creating unit 100. Here, since the frame memory 2, the display means 3, the plane image creation means 6, the switch control means 10, and the switches 11, 12, 13, and 14 operate in the same manner as the stereoscopic image display apparatus of the first embodiment described above, FIG. The number in 14 is the same.

第1の実施形態と同様にして、外部から表示モード情報M1がスイッチ制御手段10に入力される。ここで表示モード情報M1は、第1の実施形態で説明したものと同様である。ここで、表示モード情報M1が入力画像スルー表示モードである場合と、左眼用もしくは右眼用画像を用いた平面画像表示である場合における本表示装置の動作は第1の実施形態で説明した表示装置と同様である。   Similarly to the first embodiment, display mode information M1 is input to the switch control means 10 from the outside. Here, the display mode information M1 is the same as that described in the first embodiment. Here, the operation of the display device when the display mode information M1 is the input image through display mode and when the display mode information M1 is the planar image display using the left-eye image or the right-eye image has been described in the first embodiment. This is the same as the display device.

次に、表示モード情報M1が立体画像表示モードである場合の動作について説明する。
外部から立体画像作成手段100に入力画像A1として左眼用画像データL及び入力画像A2として右眼用画像データRがそれぞれ入力される。
Next, an operation when the display mode information M1 is the stereoscopic image display mode will be described.
The left-eye image data L and the right-eye image data R are input as the input image A1 and the input image A2 from the outside to the stereoscopic image creating unit 100, respectively.

表示モード情報M1が立体画像表示モードである場合、スイッチ制御手段10は、スイッチ11,12をオンにし、立体画像作成手段100とフレームメモリ2を接続されるように、スイッチ14を制御する。外部から立体画像作成手段100にスイッチ11を通じて左眼用画像データLが、スイッチ12を通じて右眼用画像データRがそれぞれ入力される。次に立体画像作成手段100において立体画像データが作成され、フレームメモリ2に書き込まれる。最後にフレームメモリ2から立体画像データが表示手段3に入力される。表示手段3は入力された立体画像を立体表示する。   When the display mode information M1 is the stereoscopic image display mode, the switch control unit 10 turns on the switches 11 and 12 and controls the switch 14 so that the stereoscopic image creation unit 100 and the frame memory 2 are connected. The left-eye image data L and the right-eye image data R are input from the outside to the stereoscopic image creating means 100 through the switch 11 and the switch 12, respectively. Next, stereoscopic image data is generated in the stereoscopic image generating means 100 and written into the frame memory 2. Finally, stereoscopic image data is input from the frame memory 2 to the display means 3. The display means 3 displays the input stereoscopic image in three dimensions.

ここで、図15に示すフローチャートを用いて、図14に示した立体画像表示装置による立体画像表示の処理動作を説明する。   Here, the processing operation of the stereoscopic image display by the stereoscopic image display apparatus shown in FIG. 14 will be described using the flowchart shown in FIG.

初期状態において、立体画像表示装置は、立体画像表示を行う(S21)。図14に示す時間計測判定手段101は立体表示を行っている間、その時間を計測する。立体画像作成手段100は立体画像を表示している間、時間計測判定手段101に立体画像表示通知信号を送り、時間計測判定手段101は立体画像表示通知信号が入力されている時間t3を計測する。このとき、立体表示を開始した時刻を起点として時間計測判定手段101は計測を行う。   In the initial state, the stereoscopic image display apparatus performs stereoscopic image display (S21). The time measurement determination unit 101 shown in FIG. 14 measures the time during the stereoscopic display. While displaying the stereoscopic image, the stereoscopic image creating unit 100 sends a stereoscopic image display notification signal to the time measurement determination unit 101, and the time measurement determination unit 101 measures the time t3 when the stereoscopic image display notification signal is input. . At this time, the time measurement determination unit 101 performs measurement from the time when the stereoscopic display is started.

時間計測判定手段101では、計測した時間t3が決められた時間TIME3を超えたか否かを判定し(S22)、越えていなければステップ21に戻って立体画像表示を続ける。計測した時間t3が決められた時間TIME3を超えると、警告表示制御手段102は立体画像作成手段100に、表示している立体画像上に警告のメッセージを上書きして立体で表示するように指示する信号を送る。この信号が入力されると、立体画像作成手段100では現在作成している立体画像面上に警告のメッセージを上書きして立体画像を作成し、出力する(S23)。このとき警告のメッセージが最前面になるように(観察者から見て最も浮き上がってみえるように)立体画像を作成する。   The time measurement determination means 101 determines whether or not the measured time t3 exceeds the determined time TIME3 (S22), and if not, returns to step 21 and continues displaying the stereoscopic image. When the measured time t3 exceeds the determined time TIME3, the warning display control unit 102 instructs the stereoscopic image creation unit 100 to overwrite the warning message on the displayed stereoscopic image and display the stereoscopic image. Send a signal. When this signal is input, the stereoscopic image creating means 100 creates a stereoscopic image by overwriting the warning message on the currently created stereoscopic image surface, and outputs it (S23). At this time, a three-dimensional image is created so that the warning message is at the forefront (so that it appears to be the highest when viewed from the observer).

例えば、観察者が立体として知覚できる限界の飛び出し位置に警告のメッセージが立体で表示されるように、警告のメッセージの部分に視差を与えたものを、現在表示している立体画像上に上書き、合成して、立体画像を作成するようにしてもよい。また、このときの視差を立体表示限界視差とする。   For example, the warning message part with parallax is overwritten on the currently displayed stereoscopic image so that the warning message is displayed in 3D at the limit pop-out position that the observer can perceive as 3D, A three-dimensional image may be created by synthesis. In addition, the parallax at this time is set as a stereoscopic display limit parallax.

また、これまで表示していた立体画像の代わりに左(又は右)眼用の画像だけを用いて平面画像を作成し、警告のメッセージの部分だけが立体表示されるように、警告のメッセージの部分に視差を与えたものを、平面画像上に上書き、合成して、立体画像を作成するようにしてもよい。あるいは、これまで表示していた立体画像の代わりに所定の画像を用いて平面画像を作成し、警告のメッセージの部分に視差を与えたものを、平面画像上に上書き、合成して、立体画像を作成するようにしてもよい。例えば黒い画面を作成し、その画面上に警告のメッセージを上書きしてもよい。   Also, instead of the stereoscopic image that has been displayed so far, a plane image is created using only the image for the left (or right) eye, and the warning message is displayed so that only the warning message portion is stereoscopically displayed. A stereoscopic image may be created by overwriting and synthesizing a portion with parallax on a portion on a planar image. Alternatively, a stereoscopic image is created by using a predetermined image instead of the stereoscopic image that has been displayed so far, and a parallax is given to the portion of the warning message, and the stereoscopic image is overwritten and synthesized on the stereoscopic image. You may make it create. For example, a black screen may be created and a warning message may be overwritten on the screen.

また、現在表示している立体画像の左眼用画像と右眼用画像を用いて、所定の画素数単位に分割されたブロック単位で視差ベクトルを求め、求めた視差ベクトルの中で最も飛びだし量が大きくなる視差ベクトルの値を最大視差として、この値よりも大きい視差を警告のメッセージの部分に与えるようにしてもよい。このとき、与える視差は、前記立体表示限界視差を超えないようにする。なお、上記視差ベクトルは、ブロックマッチングなどによって求めることが可能である。また、最大視差は画素単位の視差ベクトルなど、ブロック単位の視差ベクトル以外のデータから求めてもよい。   Also, using the left-eye image and right-eye image of the currently displayed stereoscopic image, a disparity vector is obtained in units of blocks divided into a predetermined number of pixels, and the most pop-out amount of the obtained disparity vectors The parallax vector value that increases the maximum parallax may be used, and a parallax larger than this value may be given to the warning message portion. At this time, the given parallax should not exceed the stereoscopic display limit parallax. The disparity vector can be obtained by block matching or the like. In addition, the maximum parallax may be obtained from data other than the parallax vector in block units, such as a parallax vector in pixel units.

次に、立体画像作成手段100、時間計測判定手段101、警告表示制御手段102との間で伝送される信号について、表5を参照して説明する。   Next, signals transmitted among the stereoscopic image creating unit 100, the time measurement determining unit 101, and the warning display control unit 102 will be described with reference to Table 5.

Figure 0004783817
Figure 0004783817

状態[2−1]は、時間計測判定手段101が立体画像表示時間の計測を開始したときの状態であり、このとき本装置が立体画像を表示していることを示す立体画像表示通知信号が、立体画像作成手段100から時間計測判定手段101へ出力される。   The state [2-1] is a state when the time measurement determination unit 101 starts measuring the stereoscopic image display time, and at this time, a stereoscopic image display notification signal indicating that the present apparatus displays a stereoscopic image is displayed. The stereoscopic image creation unit 100 outputs the time measurement determination unit 101.

状態[2−2]は、時間計測判定手段101の計測時間が決められた時間TIME3を経過したときの状態であり、時間計測判定手段101から警告表示制御手段102へ、時間TIME3を経過したことを表す時間計測終了信号T3が出力され、警告表示制御手段102から立体画像作成手段100へ、現在作成している立体画像上に警告のメッセージを表示することを指示する信号がそれぞれ出力される。このようにして、観察者はいち早く長時間観察したという警告を知ることができるため観察者の眼を保護することができる。   The state [2-2] is a state when the time TIME3 determined by the time measurement determination unit 101 has elapsed, and the time TIME3 has passed from the time measurement determination unit 101 to the warning display control unit 102. A time measurement end signal T3 representing the above is output, and a signal instructing to display a warning message on the currently generated stereoscopic image is output from the warning display control unit 102 to the stereoscopic image generating unit 100. In this way, since the observer can know the warning that he / she has observed quickly for a long time, the eyes of the observer can be protected.

また上記では、警告メッセージ自体を立体画像として作成し、現在表示している立体画像もしくは、平面画像に変換した画像上に上書きして表示する場合について述べたが、警告メッセージ自体が平面画像であっても構わない。また警告メッセージを表示する代わりに、ブザーなどを鳴らしてもかまわないし、ランプやインジケーターなどを点灯させてもかまわない。警告メッセージを表示した後、所定の時間が経過すればディスプレイの表示を止める、もしくはディスプレイの電源を切っても構わない。   In the above description, the warning message itself is created as a three-dimensional image and overwritten on the currently displayed three-dimensional image or an image converted to a flat image. However, the warning message itself is a flat image. It doesn't matter. Instead of displaying a warning message, you may sound a buzzer or turn on a lamp or indicator. After the warning message is displayed, the display on the display may be stopped or the display may be turned off when a predetermined time has elapsed.

上記で説明した決められた時間TIME3は、観察者が立体画像を立体として鑑賞できる連続鑑賞時間を表す。この時間TIME3は、立体画像表示装置内部のメモリに予め設定された値を保存しておいてもよい。また、この時間TIME3の予め設定された値は、1つではなく、例えば入力画像の画面サイズや入力画像が動画であればその全再生時間などといった鑑賞時の目の疲れと関連のある要素をパラメータとして、それらのパラメータの組み合わせに応じた数だけ設定されていても構わない。また、観察者が時間TIME3を変更できるようにしてもよい。   The determined time TIME3 described above represents a continuous viewing time during which the observer can view the stereoscopic image as a stereoscopic image. For the time TIME3, a preset value may be stored in a memory inside the stereoscopic image display device. In addition, the preset value of this time TIME3 is not one. For example, the screen size of the input image or the total reproduction time of the input image if it is a moving image is an element related to eye fatigue during viewing. As the parameters, the number corresponding to the combination of these parameters may be set. Further, the observer may be able to change the time TIME3.

また、図14の立体画像表示装置の前段に、図7で示したものと同様に立体画像フォーマットデータF2を復号するための立体画像復号手段と、立体画像復号手段で復号された立体画像データを左右眼別の画像データに分離する分離手段を配置してもよい。このとき立体画像フォーマットデータF2の構成は、本発明の第1の実施形態で説明した立体画像フォーマットデータF1と同様に、立体画像制御情報部と画像データ部から構成することができる。ただし、立体画像フォーマットデータF2の内部の制御情報I2内に保存されている値は、前述した時間TIME3に相当する値とし、立体画像表示装置において、時間計測判定手段101で用いる時間TIME3にこの値を代入して用いてもよい。   Further, in the preceding stage of the stereoscopic image display device of FIG. 14, the stereoscopic image decoding means for decoding the stereoscopic image format data F2 and the stereoscopic image data decoded by the stereoscopic image decoding means are the same as those shown in FIG. Separation means for separating the left and right eye image data may be arranged. At this time, the configuration of the stereoscopic image format data F2 can be configured by a stereoscopic image control information portion and an image data portion, similarly to the stereoscopic image format data F1 described in the first embodiment of the present invention. However, the value stored in the control information I2 in the stereoscopic image format data F2 is a value corresponding to the above-described time TIME3, and this value is set at the time TIME3 used by the time measurement determination unit 101 in the stereoscopic image display device. May be used.

また、このときの立体画像復号手段及び分離手段の動作は、本発明の第1の実施形態で説明したものと同様である。   In addition, the operations of the stereoscopic image decoding unit and the separation unit at this time are the same as those described in the first embodiment of the present invention.

また、上記で説明した立体画像フォーマットデータF2の画像データ部のデータは符号化されたデータでなくても構わない。例えば無圧縮のデータでも構わない。また、上記で説明した立体画像フォーマットデータF2の立体画像制御情報部は、本発明の第1の実施形態で説明したものと同様に、例えば番組配列情報の一部として、データF2内において繰り返し挿入されていても構わない。   The data in the image data portion of the stereoscopic image format data F2 described above may not be encoded data. For example, uncompressed data may be used. Further, the stereoscopic image control information portion of the stereoscopic image format data F2 described above is repeatedly inserted into the data F2, for example, as a part of the program arrangement information, as described in the first embodiment of the present invention. It does not matter.

また、立体画像フォーマットデータF2において、本発明の第1の実施形態で説明したものと同様、立体画像制御情報部は画像データ部に挿入されていても構わない。例えば画像データ部がMPEG−4で符号化されたデータである場合、立体画像制御情報部はMPEG−4符号化データ内に規定される所定の位置に挿入されていても構わない。   Further, in the stereoscopic image format data F2, the stereoscopic image control information part may be inserted in the image data part as described in the first embodiment of the present invention. For example, when the image data portion is data encoded by MPEG-4, the stereoscopic image control information portion may be inserted at a predetermined position defined in the MPEG-4 encoded data.

また、表示装置に上記の放送を受信できる受信手段が備わっており、かつ録画手段が備わっている、もしくは外部の録画装置が接続されていたりする場合、立体画像の放送を受信中に決められた時間TIME3を超過した場合、立体画像表示装置の表示手段に警告メッセージを表示すると同時に録画を開始し、その後の放送を録画し続けても構わない。   Also, if the display device is equipped with receiving means capable of receiving the above-mentioned broadcast and is equipped with a recording means or an external recording device is connected, it is determined during reception of the stereoscopic image broadcast When the time TIME3 is exceeded, a warning message may be displayed on the display means of the stereoscopic image display device, and recording may be started simultaneously with subsequent broadcast recording.

また、立体表示を開始した時刻を起点として時間計測判定手段101は計測を行うことを上記で説明したが、本発明の第1の実施形態で説明したものと同様、放送の場合、放送コンテンツの受信を開始してから最初に立体画像制御情報部のデータを受信した時刻、もしくは番組配列情報内に立体画像制御情報部のデータが含まれているなら、最初にその番組配列情報を受信した時刻を起点にして時間計測判定手段101は表示時間の計測を開始しても構わない。また、最初に受信した上記番組配列情報内に番組再生に必要な時間情報が含まれていれば、その情報を用いて作成した時刻を、時間計測判定手段101で行われる計測の起点としてもよい。   In addition, as described above, the time measurement determination unit 101 performs the measurement starting from the time when the stereoscopic display is started. However, in the case of broadcasting, in the case of broadcasting, the content of the broadcasting content is described as described in the first embodiment of the present invention. The time when the data of the stereoscopic image control information part is first received after the reception is started, or the time when the program arrangement information is first received if the data of the stereoscopic image control information part is included in the program arrangement information The time measurement determination unit 101 may start measurement of the display time from the starting point. If the time information necessary for program reproduction is included in the program arrangement information received first, the time created using the information may be used as the starting point of the measurement performed by the time measurement determination unit 101. .

また上記では、立体画像フォーマットデータF2が放送波で伝送される場合について説明したが、例えば伝送経路として、ケーブルやインターネットなどのネットワークなどが使用されても構わないし、伝送される代わりにハードディスクや光ディスクなどの記録媒体に記録されていても構わない。   In the above description, the case where the stereoscopic image format data F2 is transmitted by a broadcast wave has been described. For example, a network such as a cable or the Internet may be used as a transmission path. It may be recorded on a recording medium such as

こうして立体画像表示装置では、立体画像フォーマットデータF2の制御情報の値から決められた時間TIME3を、本発明の第1の実施形態の場合と同様に代入して使用することができ、立体表示する個々のデータに応じて、時間計測判定手段101で用いる時間TIME3を設定できるため便利である。   In this way, in the stereoscopic image display device, the time TIME3 determined from the control information value of the stereoscopic image format data F2 can be substituted and used in the same manner as in the first embodiment of the present invention, and stereoscopic display is performed. This is convenient because the time TIME3 used by the time measurement determination means 101 can be set according to individual data.

以上では入力画像が2つである場合について装置の動作を説明したが、この第2の実施形態は、入力画像データが3つ以上の場合に対しても、本発明の第1の実施形態と同様に拡張することができる。   Although the operation of the apparatus has been described in the case where there are two input images, the second embodiment is different from the first embodiment of the present invention in the case where there are three or more input image data. It can be extended as well.

また、立体画像フォーマットデータF2の画像データ部は、n(n≧1)視点から構成されていてもよく、この場合には、本発明の第1の実施形態にて説明した拡張方法と同様の方法で、立体画像復号手段500と分離手段504を拡張すればよい。   Further, the image data portion of the stereoscopic image format data F2 may be configured from n (n ≧ 1) viewpoints. In this case, the image data portion is the same as the expansion method described in the first embodiment of the present invention. The stereoscopic image decoding unit 500 and the separating unit 504 may be expanded by the method.

次に、本発明の第3の実施形態について説明する。
図16は、本発明による立体画像表示装置の第3の実施形態の構成例を示す図である。
本発明における第3の実施形態の立体画像表示装置は、左右眼別の画像データを用いて、立体表示を行うか平面表示を行うかを示す表示モード情報M1と、平面表示のみを行うことを示す平面表示モード情報M2のどちらか一方をスイッチ制御手段200の入力に切り替えるためのスイッチ201と、スイッチ201の切り替えを行うための立体表示禁止フラグを記憶するためのメモリを備えたモードスイッチ制御手段202と、左右眼別の画像データから立体画像を作成する立体画像作成手段203と、左右眼別の画像データのどちらか一方のデータから平面画像を作成する平面画像作成手段6と、入出力する画像データを切り替えるためのスイッチ11,12,13,14と、それらのスイッチを制御するスイッチ制御手段200と、立体画像作成手段203又は平面画像作成手段6で作成された画像を格納するフレームメモリ2と、フレームメモリ2の画像データを用いて立体画像を表示する表示手段3と、立体画像の表示時間を計測する第1の時間計測判定手段204と、立体画像の表示時間が所定の時間を超えた場合に強制的に第2の時間計測判定手段205以外の電源を切る電源制御手段206と、強制的に電源が切られてからの経過時間を計測する第2の時間計測判定手段205から構成されている。ここでフレームメモリ2と表示手段3、平面画像作成手段6、スイッチ11,12,13,14は、前述した第1及び第2の実施形態の立体画像表示装置と同じ動作をするため、図16における番号も同じものとする。
Next, a third embodiment of the present invention will be described.
FIG. 16 is a diagram illustrating a configuration example of the third embodiment of the stereoscopic image display device according to the present invention.
The stereoscopic image display apparatus according to the third embodiment of the present invention performs display mode information M1 indicating whether stereoscopic display or planar display is performed using only the left and right eye image data, and performs only planar display. Mode switch control means comprising a switch 201 for switching either one of the displayed flat display mode information M2 to an input of the switch control means 200, and a memory for storing a stereoscopic display prohibition flag for switching the switch 201 202, a stereoscopic image creating unit 203 that creates a stereoscopic image from left and right eye image data, and a planar image creating unit 6 that creates a planar image from either one of the left and right eye image data. Switches 11, 12, 13, 14 for switching image data, switch control means 200 for controlling those switches, A frame memory 2 for storing an image created by the image creation means 203 or the planar image creation means 6, a display means 3 for displaying a stereoscopic image using image data of the frame memory 2, and a display time of the stereoscopic image are measured. A first time measurement determination unit 204; a power control unit 206 forcibly turning off power other than the second time measurement determination unit 205 when the display time of the stereoscopic image exceeds a predetermined time; It is comprised from the 2nd time measurement determination means 205 which measures the elapsed time after being cut. Here, the frame memory 2, the display unit 3, the planar image creation unit 6, and the switches 11, 12, 13, and 14 operate in the same manner as the stereoscopic image display devices of the first and second embodiments described above. The numbers in are also the same.

表示モード情報M1は、第1の実施形態で説明したものと同様である。また平面表示モード情報M2については後述する。   The display mode information M1 is the same as that described in the first embodiment. The flat display mode information M2 will be described later.

第1及び第2の実施形態と同様にして、外部から表示モード情報M1がスイッチ制御手段200に入力される。ここで、表示モード情報M1が入力画像スルー表示モードである場合と、左眼用もしくは右眼用画像を用いた平面画像表示である場合における本表示装置の動作は、第1の実施形態で説明した表示装置の動作と同様である。   In the same manner as in the first and second embodiments, display mode information M1 is input to the switch control unit 200 from the outside. Here, the operation of the display device when the display mode information M1 is the input image through display mode and when the display mode information M1 is the planar image display using the left-eye or right-eye image will be described in the first embodiment. This is the same as the operation of the display device.

次に、表示モード情報M1が立体画像表示モードである場合について説明する。外部からスイッチ201に表示モード情報M1と、平面表示モード情報M2がスイッチ201に入力される。スイッチ201は、表示モード情報M1か、平面表示モード情報M2のどちらか一方を、スイッチ制御手段200の入力に接続する。スイッチ201の切り替えは、モードスイッチ制御手段202により制御される。   Next, the case where the display mode information M1 is the stereoscopic image display mode will be described. Display mode information M1 and flat display mode information M2 are input to the switch 201 from the outside. The switch 201 connects either the display mode information M1 or the flat display mode information M2 to the input of the switch control means 200. Switching of the switch 201 is controlled by the mode switch control means 202.

モードスイッチ制御手段202は、内部にメモリを備えており、立体表示禁止フラグをメモリに記憶する。ここでモードスイッチ制御手段202はスイッチ201を制御する手段であり、例えば立体表示禁止フラグが0の場合は表示モード情報M1が、1の場合は平面表示モード情報M2がスイッチ制御手段200に入力されるようにスイッチ201を制御する。立体表示禁止フラグの初期値を0とすると、動作開始時にはスイッチ201は表示モード情報M1側に接続される。   The mode switch control unit 202 includes a memory therein and stores a stereoscopic display prohibition flag in the memory. Here, the mode switch control means 202 is a means for controlling the switch 201. For example, when the stereoscopic display prohibition flag is 0, the display mode information M1 is input to the switch control means 200 when the display mode information M1 is 1. The switch 201 is controlled so that If the initial value of the stereoscopic display prohibition flag is set to 0, the switch 201 is connected to the display mode information M1 side at the start of operation.

ここで平面表示モード情報M2について説明する。平面表示モード情報M2は、例えば表6に示すように、表示モード情報M1で説明した左眼用平面画像表示モードもしくは右眼用平面画像表示モードの2種類のみから構成される。   Here, the flat display mode information M2 will be described. For example, as shown in Table 6, the flat display mode information M2 includes only two types of the left-eye flat image display mode and the right-eye flat image display mode described in the display mode information M1.

Figure 0004783817
Figure 0004783817

図17は、本発明の第3の実施形態の立体画像表示装置の立体表示開始後の動作を示すフローチャートである。図16及び図17を用いて、それぞれの表示モードにおける本装置の動作を詳細に説明する。   FIG. 17 is a flowchart showing the operation after the start of stereoscopic display of the stereoscopic image display apparatus according to the third embodiment of the present invention. The operation of the present apparatus in each display mode will be described in detail with reference to FIGS.

装置の電源が投入されると、初期処理の後、ステップ31において、立体表示をすべきかどうかを判定する。この判定処理は、表示モード情報M1の内容に基づいて行われる。表示モード情報M1が平面画像表示モードである場合には、ステップ32に進み、表示モード情報M1の示すところに従って平面画像表示を行う。   When the apparatus is turned on, after the initial processing, it is determined in step 31 whether or not stereoscopic display should be performed. This determination process is performed based on the content of the display mode information M1. When the display mode information M1 is the planar image display mode, the process proceeds to step 32, and the planar image display is performed according to the location indicated by the display mode information M1.

表示モード情報M1が立体画像表示モードである場合には、ステップ31からステップ33に進み、モードスイッチ制御手段202内部のメモリにある立体表示禁止フラグの値を0とし、ステップ34に進む。ステップ34では、立体画像作成手段203で立体画像を作成し、第1の時間計測判定手段204で立体画像を表示している時間t4を計測する。このとき、第1の時間計測判定手段204は、立体画像表示を開始した時刻を起点として計測を行う。   If the display mode information M1 is the stereoscopic image display mode, the process proceeds from step 31 to step 33, the value of the stereoscopic display prohibition flag in the memory inside the mode switch control means 202 is set to 0, and the process proceeds to step 34. In step 34, a stereoscopic image is created by the stereoscopic image creation means 203, and the time t4 during which the stereoscopic image is displayed is measured by the first time measurement determination means 204. At this time, the first time measurement determination unit 204 performs measurement starting from the time when the stereoscopic image display is started.

表示モード情報M1はスイッチ制御手段200に入力され、入力された表示モード情報M1が立体画像表示モードである場合、スイッチ制御手段200は、スイッチ11及び12をオン、スイッチ13をオフにし、スイッチ14をフレームメモリ2と立体画像作成手段203が接続されるように制御する。スイッチ11及びスイッチ13に左眼用画像データLが、スイッチ12及びスイッチ13には右眼用画像データRがそれぞれ外部から入力される。左眼用画像データL及び右眼用画像データRがそれぞれ、スイッチ11,12を通じて立体画像作成手段203に入力される。立体画像作成手段203では、第1の実施形態で説明したのと同様にして立体画像データが作成され、スイッチ14を通してフレームメモリ2に書き込まれる。作成された立体画像データは、フレームメモリ2から表示手段3に入力されて表示される。立体画像作成手段203は立体画像を表示している間、第1の時間計測判定手段204に立体画像表示通知信号を送り、第1の時間計測判定手段204は立体画像表示通知信号が入力されている間、その時間を計測する。   The display mode information M1 is input to the switch control means 200. When the input display mode information M1 is the stereoscopic image display mode, the switch control means 200 turns on the switches 11 and 12, turns off the switch 13, and turns off the switch 14. Are controlled so that the frame memory 2 and the stereoscopic image creating means 203 are connected. The left eye image data L is input to the switch 11 and the switch 13, and the right eye image data R is input to the switch 12 and the switch 13, respectively. Left-eye image data L and right-eye image data R are input to the stereoscopic image creation means 203 through the switches 11 and 12, respectively. In the stereoscopic image creating means 203, stereoscopic image data is created in the same manner as described in the first embodiment, and written into the frame memory 2 through the switch. The created stereoscopic image data is input from the frame memory 2 to the display means 3 and displayed. While the stereoscopic image is being displayed, the stereoscopic image creation means 203 sends a stereoscopic image display notification signal to the first time measurement determination means 204, and the first time measurement determination means 204 receives the stereoscopic image display notification signal. Measure the time while you are.

次に判定ステップ35に進む。第1の時間計測判定手段204で計測した時間t4は電源制御手段206に入力される。判定ステップ35では、電源制御手段206において、第1の時間計測判定手段204から入力された計測時間t4が決められた時間TIME4を超過したか否かを判定する。計測した時間t4が時間TIME4を越えていないと判定された場合、ステップ34に戻り、立体画像作成手段203による立体画像の作成、及び作成された立体画像の表示手段3へ表示を行う。第1の時間計測判定手段204で計測した時間t4が時間TIME4を越えたと判定された場合、ステップ36に進む。   Next, the process proceeds to determination step 35. The time t4 measured by the first time measurement determination unit 204 is input to the power supply control unit 206. In determination step 35, the power supply control means 206 determines whether or not the measurement time t4 input from the first time measurement determination means 204 has exceeded a predetermined time TIME4. If it is determined that the measured time t4 does not exceed the time TIME4, the process returns to step 34, where the stereoscopic image creating means 203 creates a stereoscopic image and displays the created stereoscopic image on the display means 3. When it is determined that the time t4 measured by the first time measurement determination unit 204 exceeds the time TIME4, the process proceeds to step 36.

ステップ36において、本装置は次のような動作をする。電源制御手段206から、モードスイッチ制御手段202へ、画像の立体表示を禁止することを示す立体表示禁止信号を送信し、第2の時間計測判定手段205へ計測時間を0にリセットして計測を開始するように指示する計測開始信号を送信する。そして、装置の一部電源をオフにする。例えば、モードスイッチ制御手段202と第2の時間計測判定手段205以外の電源を強制的にオフにする。モードスイッチ制御手段202では、立体表示禁止信号が入力されると同時に、モードスイッチ制御手段202内のメモリに立体表示禁止フラグを1にして記憶する。   In step 36, the apparatus operates as follows. The power control unit 206 transmits a stereoscopic display prohibition signal indicating prohibition of stereoscopic display of an image to the mode switch control unit 202, and resets the measurement time to 0 to the second time measurement determination unit 205 to perform measurement. A measurement start signal instructing to start is transmitted. And the partial power supply of an apparatus is turned off. For example, the power supply other than the mode switch control unit 202 and the second time measurement determination unit 205 is forcibly turned off. In the mode switch control means 202, at the same time as the stereoscopic display prohibition signal is inputted, the stereoscopic display prohibition flag is set to 1 and stored in the memory in the mode switch control means 202.

ここで、立体画像作成手段203、第1の時間計測判定手段204、電源制御手段206、第2の時間計測判定手段205、モードスイッチ制御手段202との間で伝送される信号について、表7を参照して説明する。   Here, Table 7 shows the signals transmitted among the stereoscopic image creation means 203, the first time measurement determination means 204, the power supply control means 206, the second time measurement determination means 205, and the mode switch control means 202. The description will be given with reference.

Figure 0004783817
Figure 0004783817

状態[5−1]は、第1の時間計測判定手段204が立体画像表示時間の計測を開始したときの状態であり、このとき本装置が立体画像を表示していることを示す立体画像表示通知信号が、立体画像作成手段203から第1の時間計測判定手段204へ出力される。   The state [5-1] is a state when the first time measurement determination unit 204 starts measuring the stereoscopic image display time, and at this time, the stereoscopic image display indicating that the present apparatus displays a stereoscopic image. A notification signal is output from the stereoscopic image creation means 203 to the first time measurement determination means 204.

状態[5−2]は、第1の時間計測判定手段204の計測時間が決められた時間TIME4を経過したときの状態であり、第1の時間計測判定手段204から電源制御手段206へ時間TIME4が経過したことを表す時間計測終了信号T4が出力され、それに応じて電源制御手段206から、第2の時間計測判定手段205へ計測時間を0にリセットして計測を開始するように指示する計測開始信号と、モードスイッチ制御手段202へ立体表示禁止信号が、それぞれ出力される。   The state [5-2] is a state when the time TIME4 for which the measurement time of the first time measurement determination unit 204 is determined has elapsed, and the time TIME4 is transferred from the first time measurement determination unit 204 to the power supply control unit 206. A time measurement end signal T4 indicating that the period of time has elapsed has been output, and accordingly, the power supply control means 206 instructs the second time measurement determination means 205 to reset the measurement time to 0 and start measurement. A start signal and a stereoscopic display prohibition signal are output to the mode switch control means 202, respectively.

計測開始信号を受けた第2の時間計測判定手段205は、立体表示を中止してからの経過時間(立体画像非表示時間)t5の計測を開始する。   Receiving the measurement start signal, the second time measurement determination unit 205 starts measuring the elapsed time (stereoscopic image non-display time) t5 after stopping the stereoscopic display.

次に、判定ステップ37に進む。判定ステップ37では、第2の時間計測判定手段205によって計測された時間t5が決められた時間TIME5を超過したか否かを判定する。時間t5が時間TIME5を経過したと判定された場合、モードスイッチ制御手段202は、立体表示禁止フラグを0にしてメモリに記憶し、第2の時間計測判定手段205へ計測停止信号を送り、モードスイッチ制御手段202の電源をオフにする。第2の時間計測判定手段205に計測停止信号が入力されると同時に、第2の時間計測判定手段205は計測時間t5をリセットし、第2の時間計測判定手段205の電源をオフにする。   Next, the process proceeds to determination step 37. In the determination step 37, it is determined whether or not the time t5 measured by the second time measurement determination means 205 has exceeded the determined time TIME5. When it is determined that the time t5 has passed the time TIME5, the mode switch control means 202 sets the stereoscopic display prohibition flag to 0 and stores it in the memory, sends a measurement stop signal to the second time measurement determination means 205, and sets the mode. The power source of the switch control means 202 is turned off. At the same time as the measurement stop signal is input to the second time measurement determination unit 205, the second time measurement determination unit 205 resets the measurement time t5 and turns off the power of the second time measurement determination unit 205.

表8に、このとき、第2の時間計測判定手段205、モードスイッチ制御手段202の間で伝送される信号について示す。   Table 8 shows signals transmitted between the second time measurement determination unit 205 and the mode switch control unit 202 at this time.

Figure 0004783817
Figure 0004783817

状態[6−1]は、第2の時間計測判定手段205の計測時間t5が決められた時間TIME5を経過したときの状態であり、第2の時間計測判定手段205からモードスイッチ制御手段202へ時間TIME5が経過したことを表す時間計測終了信号T5が、モードスイッチ制御手段202から第2の時間計測判定手段205へ計測停止信号が、それぞれ出力される。   The state [6-1] is a state when the measurement time t5 of the second time measurement determination unit 205 has passed the determined time TIME5. From the second time measurement determination unit 205 to the mode switch control unit 202. A time measurement end signal T5 indicating that the time TIME5 has passed is output from the mode switch control means 202 to the second time measurement determination means 205, respectively.

このようにして、装置の一部の電源が強制的にオフにされてから決められた時間TIME5を経過しても電源がオンされなかった場合(画像表示を再開するための操作が行われなかった場合)には、ステップ38に進み、モードスイッチ制御手段202は立体表示禁止フラグを0にしてメモリに記憶し、すべての電源をオフにして動作を終了する。   In this way, when the power is not turned on even after a predetermined time TIME5 has elapsed since part of the power of the apparatus is forcibly turned off (the operation for resuming image display is not performed). In step 38, the mode switch control means 202 sets the stereoscopic display prohibition flag to 0 and stores it in the memory, turns off all power supplies, and ends the operation.

判定ステップ37において、ステップ36で計測開始された立体画像非表示時間t5が決められた時間TIME5を経過していないと判定された場合、判定ステップ39へ進む。   If it is determined in the determination step 37 that the stereoscopic image non-display time t5 started in step 36 has not passed the determined time TIME5, the process proceeds to a determination step 39.

判定ステップ39では、本装置に画像を表示するための操作が行われたか否か、すなわち装置の電源スイッチが押されたか否かを判定する。電源スイッチが押されていないと判定された場合は、ステップ37に戻って時間t5の計測を続行する。一方、電源スイッチが押されたと判定された場合は、ステップ40へ進む。ステップ40では、本装置全体の電源をオンにするための処理を行う。その後、ステップ41に進み、本装置は立体画像の表示を禁止し、以下のようにして平面画像の表示を行う。   In a determination step 39, it is determined whether or not an operation for displaying an image on the apparatus has been performed, that is, whether or not the power switch of the apparatus has been pressed. If it is determined that the power switch has not been pressed, the process returns to step 37 to continue measuring time t5. On the other hand, if it is determined that the power switch has been pressed, the process proceeds to step 40. In step 40, a process for turning on the power of the entire apparatus is performed. Thereafter, the process proceeds to step 41, where the apparatus prohibits the display of a stereoscopic image and displays a planar image as follows.

例えば図16において、外部からスイッチ201に表示モード情報M1と、平面表示モード情報M2が入力される。モードスイッチ制御手段202は、メモリにある立体表示禁止フラグを参照し、その値が1であるので、平面表示モード情報M2がスイッチ制御手段200に入力されるようにスイッチ201を制御する。スイッチ201は表示モード情報M2側に接続され、スイッチ制御手段200にスイッチ201を通して平面表示モード情報M2が入力される。   For example, in FIG. 16, display mode information M1 and flat display mode information M2 are input to the switch 201 from the outside. The mode switch control unit 202 refers to the stereoscopic display prohibition flag in the memory, and since the value thereof is 1, the mode switch control unit 202 controls the switch 201 so that the flat display mode information M2 is input to the switch control unit 200. The switch 201 is connected to the display mode information M2 side, and the plane display mode information M2 is input to the switch control means 200 through the switch 201.

ここで、平面表示モード情報M2が左眼用平面画像表示モードであるとすると、スイッチ制御手段200は、スイッチ11及び12をオフにし、スイッチ13を左眼用画像データLが平面画像作成手段6に入力されるように、スイッチ14をフレームメモリ2と平面画像作成手段6が接続されるようにそれぞれ切り替える。平面画像作成手段6において左眼用画像の平面画像データが作成され、スイッチ14を通して、フレームメモリ2に書き込まれる。フレームメモリ2から平面画像データが表示手段3に入力される。表示手段3は入力された平面画像データを表示する。このとき作成される平面画像は、本発明の第1の実施形態及び第2の実施形態で説明した、表示モード情報M1が左眼用平面画像表示モードである場合と同様にして作成される。以上のように平面表示モード情報M2に従って、平面画像の作成、表示を行う。   Here, assuming that the planar display mode information M2 is the left-eye planar image display mode, the switch control unit 200 turns off the switches 11 and 12, and the switch 13 displays the left-eye image data L as the planar image creation unit 6. Are switched so that the frame memory 2 and the planar image creating means 6 are connected to each other. Planar image data of the left-eye image is created by the planar image creation means 6 and is written into the frame memory 2 through the switch 14. Plane image data is input from the frame memory 2 to the display means 3. The display means 3 displays the input plane image data. The planar image created at this time is created in the same manner as in the case where the display mode information M1 is the left-eye planar image display mode described in the first and second embodiments of the present invention. As described above, a plane image is created and displayed according to the plane display mode information M2.

また、このようにして平面画像を表示している間も、第2の時間計測判定手段205は時間t5の計測を続けており、立体表示の際と同様に第2の時間計測判定手段205で計測した時間t5は、モードスイッチ制御手段202に入力される。ステップ42では、計測時間t5が決められた時間TIME5に達しているか否かの判定を行い、第2の時間計測判定手段205で計測された時間t5が決められた時間TIME5を経過するまでは平面画像の表示を行い、計測された時間t5が時間TIME5に達すると同時に、ステップ43に進む。ステップ43において、モードスイッチ制御手段202は、第2の時間計測判定手段205へ計測停止信号を送る等の立体表示再開処理を行う。第2の時間計測判定手段205は、計測停止信号が入力されると同時に計測時間をリセットし、時間の計測を止める。その後、ステップ33に戻り、モードスイッチ制御手段202は、立体表示禁止フラグを0にしてメモリに記憶する。以降、立体表示禁止フラグが0であるので、表示モード情報M1に沿って立体画像を表示する。   Further, the second time measurement determination unit 205 continues to measure the time t5 while the planar image is displayed in this way, and the second time measurement determination unit 205 performs the same as in the case of the stereoscopic display. The measured time t5 is input to the mode switch control means 202. In step 42, it is determined whether or not the measurement time t5 has reached the determined time TIME5, and the plane until the time t5 measured by the second time measurement determination means 205 passes the determined time TIME5. The image is displayed, and at the same time as the measured time t5 reaches time TIME5, the process proceeds to step 43. In step 43, the mode switch control unit 202 performs a stereoscopic display restart process such as sending a measurement stop signal to the second time measurement determination unit 205. The second time measurement determination unit 205 resets the measurement time simultaneously with the input of the measurement stop signal, and stops the time measurement. Thereafter, returning to step 33, the mode switch control means 202 sets the stereoscopic display prohibition flag to 0 and stores it in the memory. Thereafter, since the stereoscopic display prohibition flag is 0, a stereoscopic image is displayed along the display mode information M1.

また、この時、モードスイッチ制御手段202に、画像の立体表示を許可することを示す立体表示許可信号が入力される場合、画面上に立体画像の表示を許可するメッセージを表示してもよい。   At this time, when a 3D display permission signal indicating that 3D image display is permitted is input to the mode switch control unit 202, a message permitting display of 3D images may be displayed on the screen.

このようにして、立体画像の長時間の連続的な表示が行われた場合は強制的に立体画像表示装置の電源をオフにし、観察者が再度電源をオンにしても、電源が強制的にオフにされてから決められた時間TIME5が経過するまでは立体画像の表示を禁止することにより、観察者の眼を確実に保護することができる。また強制的に電源がオフにされてから所定の時間TIME5が経っていない状態で、再度電源をオンにした場合、観察者の眼に負担の少ない平面画像の表示を許可することにより立体画像表示装置を継続的に使用することができる。   In this way, when a stereoscopic image is displayed continuously for a long time, the power of the stereoscopic image display device is forcibly turned off, and even if the observer turns on the power again, the power is forcibly By prohibiting the display of the stereoscopic image until a predetermined time TIME5 has passed since the turning off, it is possible to reliably protect the eyes of the observer. In addition, when the power is turned on again after a predetermined time TIME5 has not passed since the power was forcibly turned off, stereoscopic image display is permitted by allowing display of a flat image with less burden on the eyes of the observer The device can be used continuously.

また、立体画像の表示時間t4が決められた時間TIME4に達した後は、表示手段3の電源のみを切るようにしても構わない。表示手段3の電源のみが切られた後、観察者が立体画像表示装置に備わっている何らかのボタンを押すことにより、再度、表示手段3の電源が入るようにしても構わない。例えば電源ボタンを押すと、表示手段3の電源が入るようにしても構わない。   Alternatively, only the display unit 3 may be turned off after the stereoscopic image display time t4 reaches a predetermined time TIME4. After only the display unit 3 is turned off, the display unit 3 may be turned on again by the observer pressing a button on the stereoscopic image display device. For example, when the power button is pressed, the display unit 3 may be turned on.

上記で説明した決められた時間TIME4は、観察者が立体画像を立体として鑑賞できる連続鑑賞時間を表す。上記で説明した時間TIME4及びTIME5はそれぞれ、立体画像表示装置内部のメモリに予め設定された値が保存されていてもよい。また時間TIME4及びTIME5の予め設定された値はそれぞれが1つずつではなく、例えば入力画像の画面サイズや入力画像が動画であればその全再生時間などといった鑑賞時の目の疲れと関連のある要素をパラメータとして、それらのパラメータの組み合わせに応じた数だけ設定されていても構わない。また、観察者がTIME4とTIME5の値をそれぞれ変更できるようにしてもよい。   The determined time TIME4 described above represents a continuous viewing time during which the observer can view a stereoscopic image as a stereoscopic image. For the times TIME4 and TIME5 described above, preset values may be stored in a memory inside the stereoscopic image display device. Also, the preset values of time TIME4 and TIME5 are not one each, but are related to eye fatigue during viewing such as the screen size of the input image or the total playback time if the input image is a moving image, for example. The elements may be set as parameters, and the number corresponding to the combination of these parameters may be set. The observer may be able to change the values of TIME4 and TIME5.

また、図16の立体画像表示装置の前段に、図7で示したものと同様に立体画像フォーマットデータF3を復号するための立体画像復号手段と、前記立体画像復号手段で復号された立体画像データを左右眼別の画像データに分離する分離手段を配置してもよい。このとき、立体画像フォーマットデータF3の構成は、本発明の第1及び第2の実施形態で説明したF1及びF2と同様に、立体画像制御情報部と画像データ部から構成する。ただし、立体画像フォーマットデータF3の内部の制御情報I2内に保存されている値は、前述した時間TIME4とTIME5に相当する値であり、立体画像表示装置はF3からそれらの値を取得して利用するようにしてもよい。   In addition, the stereoscopic image decoding means for decoding the stereoscopic image format data F3, and the stereoscopic image data decoded by the stereoscopic image decoding means, as shown in FIG. Separating means for separating the left and right eye image data may be arranged. At this time, the configuration of the stereoscopic image format data F3 includes a stereoscopic image control information portion and an image data portion, similarly to F1 and F2 described in the first and second embodiments of the present invention. However, the values stored in the control information I2 inside the stereoscopic image format data F3 are values corresponding to the above-described times TIME4 and TIME5, and the stereoscopic image display apparatus acquires these values from F3 and uses them. You may make it do.

また、立体画像フォーマットデータF3の内部の制御情報I2内に保存する値は、時間TIME4もしくはTIME5のどちらか一方でもかまわなく、保存されていないデータは予め設定された値を用いるようにしてもよい。   Further, the value stored in the control information I2 inside the stereoscopic image format data F3 may be either time TIME4 or TIME5, and a pre-set value may be used for unsaved data. .

また、このときの立体画像復号手段及び分離手段の動作は、本発明の第1及び第2の実施形態で説明したものと同様である。また、上記で説明した立体画像フォーマットデータF3の画像データ部のデータは符号化されたデータでなくても構わない。例えば無圧縮のデータでも構わない。   In addition, the operations of the stereoscopic image decoding unit and the separation unit at this time are the same as those described in the first and second embodiments of the present invention. Further, the data of the image data portion of the stereoscopic image format data F3 described above may not be encoded data. For example, uncompressed data may be used.

また、上記で説明した立体画像フォーマットデータF3の立体画像制御情報部は、本発明の第1及び第2の実施形態で説明したものと同様に、例えば番組配列情報の一部として、データF3内において繰り返し挿入されていても構わない。立体画像フォーマットデータF3において、本発明の第1及び第2の実施形態で説明したものと同様、立体画像制御情報部は画像データ部に挿入されていても構わない。例えば画像データ部がMPEG−4で符号化されたデータである場合、立体画像制御情報部はMPEG−4符号化データ内で規定された所定の位置に挿入されていても構わない。   Further, the stereoscopic image control information part of the stereoscopic image format data F3 described above is, for example, in the data F3 as a part of the program arrangement information, as described in the first and second embodiments of the present invention. It may be inserted repeatedly. In the stereoscopic image format data F3, the stereoscopic image control information part may be inserted into the image data part, as described in the first and second embodiments of the present invention. For example, when the image data portion is data encoded by MPEG-4, the stereoscopic image control information portion may be inserted at a predetermined position defined in the MPEG-4 encoded data.

また、立体表示を開始した時刻を起点として第1の時間計測判定手段204は計測を行うことを上記で説明したが、本発明の第1及び第2の実施形態で説明したものと同様、放送の場合、放送コンテンツの受信を開始してから最初に立体画像制御情報部のデータを受信した時刻、もしくは番組配列情報内に立体画像制御情報部のデータが含まれているなら、最初にその番組配列情報を受信した時刻を起点にして、第1の時間計測判定手段204は表示時間の計測を開始しても構わない。また、最初に受信した上記番組配列情報内に番組再生に必要な時間情報が含まれていれば、その情報を用いて作成した時刻を、第1の時間計測判定手段204で行われる計測の起点としてもよい。   In addition, although the first time measurement determination unit 204 has been described above to perform the measurement starting from the time when the stereoscopic display is started, the broadcast is the same as that described in the first and second embodiments of the present invention. In this case, the time when the data of the stereoscopic image control information portion is first received after the start of the reception of the broadcast content, or if the data of the stereoscopic image control information portion is included in the program arrangement information, the program is first displayed. Starting from the time when the sequence information is received, the first time measurement determination unit 204 may start measuring the display time. If the time information necessary for program reproduction is included in the program arrangement information received first, the time created using the information is the starting point of the measurement performed by the first time measurement determination unit 204. It is good.

また上記では、立体画像フォーマットデータF3が放送波で伝送される場合について説明したが、例えば伝送経路として、ケーブルやインターネットなどのネットワークなどが使用されても構わないし、伝送される代わりにハードディスクや光ディスクなどの記録媒体に記録されていても構わない。   In the above description, the case where the stereoscopic image format data F3 is transmitted by broadcast waves has been described. For example, a network such as a cable or the Internet may be used as a transmission path. It may be recorded on a recording medium such as

こうして立体画像表示装置では、立体画像フォーマットデータF3の制御情報の値から時間TIME4とTIME5を、本発明の第1及び第2の実施形態の場合と同様に代入して使用することができ、立体表示する個々のデータに応じて、TIME4とTIME5を設定できるため便利である。また上記で説明したように、立体画像の長時間の連続的な表示が行われ、強制的に立体画像表示装置の電源がオフにされ、観察者が再度電源をオンにした場合、立体画像表示装置の電源が強制的にオフにされる直前の状態で、立体画像表示装置が表示を再開できるようにしても構わない。例えば、あるファイルを再生している途中で電源をオフにされたのであれば、オフになる直前の時間から再生を再開したり、放送を見ていた場合、同じチャンネルの放送をすぐに受信しても構わない。   In this way, in the stereoscopic image display device, the times TIME4 and TIME5 can be substituted and used from the control information value of the stereoscopic image format data F3 in the same manner as in the first and second embodiments of the present invention. This is convenient because TIME4 and TIME5 can be set according to the individual data to be displayed. Also, as described above, when a stereoscopic image is displayed continuously for a long time, the stereoscopic image display device is forcibly turned off, and the observer turns on the power again, the stereoscopic image display is performed. The stereoscopic image display apparatus may be configured to resume display immediately before the apparatus is forcibly turned off. For example, if the power is turned off while playing a file, if you resume playback from the time immediately before it was turned off or watch the broadcast, you will receive the same channel broadcast immediately. It doesn't matter.

また、表示装置に上記の放送を受信できる受信手段が備わっており、かつ録画手段が備わっているもしくは外部の録画装置が接続されていたりする場合には、決められた時間TIME4以上連続的に立体画像を観察した時、立体画像の放送を受信中に立体画像表示装置の電源をオフにすると同時に録画を開始し、受信手段と録画手段は電源をオフにせずに放送を受信し続け、電源がオフにされた間の放送を録画し続けても構わない。このようにすることで、電源がオフになっている間に放送された立体画像を後で再生して鑑賞できるようになる。   In addition, when the display device is provided with receiving means capable of receiving the above-mentioned broadcast and is provided with recording means or an external recording device is connected, the three-dimensional image is continuously displayed for a predetermined time TIME4 or more. When the image is observed, the stereoscopic image display device is turned off while receiving the stereoscopic image broadcast, and simultaneously starts recording. The receiving means and the recording means continue to receive the broadcast without turning off the power, and the power is turned on. You can keep recording the broadcast while it is turned off. In this way, it is possible to reproduce and view a stereoscopic image broadcast while the power is off.

以上では、入力画像が2つである場合における装置の動作について説明したが、本実施形態は、本発明の第1及び第2の実施形態において説明した方法と同様の方法により入力画像データが3つ以上の場合に対しても拡張することができる。   The operation of the apparatus in the case where there are two input images has been described above, but in this embodiment, the input image data is 3 by the same method as that described in the first and second embodiments of the present invention. It can be extended to more than one case.

また、立体画像フォーマットデータF3の画像データ部は、n(n≧1)視点から構成されていてもよく、この場合には、本発明の第1及び第2の実施形態において説明したのと同様の方法で、立体画像復号手段500と分離手段504を拡張すればよい。   Further, the image data portion of the stereoscopic image format data F3 may be configured from n (n ≧ 1) viewpoints, and in this case, the same as described in the first and second embodiments of the present invention. In this way, the stereoscopic image decoding unit 500 and the separating unit 504 may be expanded.

上述した本発明の第1、第2、第3の実施形態の立体画像表示装置において、パスワードを記憶する手段と、パスワードを入力するパスワード入力部とを備え、使用の際にパスワードの入力を要求する。このとき立体画像表示装置はパスワード毎に観察者を区別し、観察者毎に立体画像表示時間を管理するようにしてもよい。   The stereoscopic image display device according to the first, second, and third embodiments of the present invention described above includes a means for storing a password and a password input unit for inputting the password, and requests the input of the password when used. To do. At this time, the stereoscopic image display device may distinguish an observer for each password and manage the stereoscopic image display time for each observer.

パスワード毎に観察者を区別して観察者毎に立体画像を表示する時間を管理することにより他の観察者が使用した条件に影響されず、それぞれの観察者で立体画像表示装置を使用することができる。すなわち、使用時にパスワードを要求してパスワード毎に観察者を区別して観察者毎に立体画像を表示する時間を管理することにより、一人の観察者が立体画像を表示するモードで立体画像表示装置を長時間使用して電源を強制的にオフにされた後でも、他の観察者は立体画像を表示するモードで立体画像表示装置を使用することができる。   By managing the time for displaying the stereoscopic image for each observer by distinguishing the observer for each password, it is possible to use the stereoscopic image display device for each observer without being affected by the conditions used by other observers. it can. That is, a stereoscopic image display device is configured in a mode in which a single observer displays a stereoscopic image by requesting a password at the time of use and managing the time for displaying the stereoscopic image for each observer by distinguishing the observer for each password. Even after the power is forcibly turned off after a long period of use, other viewers can use the stereoscopic image display device in a mode for displaying a stereoscopic image.

また、本発明による視差の調節をした立体表示、警告表示、平面表示への移行、観察者毎のパスワードの使用についても、多眼式の表示装置に適用することが可能である。   In addition, stereoscopic display with adjustment of parallax, warning display, transition to flat display, and use of a password for each observer according to the present invention can also be applied to a multi-view display device.

次に本発明の第4の実施形態について説明する。
第1の実施形態についての説明で述べたように、立体画像は視差を有し、観察者は視差によって立体感を感知する。立体画像の各画素の視差は異なるが、例えば大きな視差を有する画素が多い立体画像の立体感は大きく、大きな視差を有する画素が少ない立体画像の立体感は小さい。このように立体感の大小を示す指標を「立体強度」と呼ぶ。本実施形態は、複数の立体画像が異なる立体強度を持つ場合の立体画像表示の制限方法に関するものである。
Next, a fourth embodiment of the present invention will be described.
As described in the description of the first embodiment, the stereoscopic image has parallax, and the observer senses the stereoscopic effect by the parallax. Although the parallax of each pixel of the stereoscopic image is different, for example, the stereoscopic effect of the stereoscopic image with many pixels having large parallax is large, and the stereoscopic effect of the stereoscopic image with few pixels having large parallax is small. The index indicating the magnitude of the stereoscopic effect is called “stereoscopic strength”. This embodiment relates to a method for restricting stereoscopic image display when a plurality of stereoscopic images have different stereoscopic strengths.

立体強度は、画素毎の視差の値の平均値(静止画では画面全体の平均値。動画像の場合は動画像全体の平均値)によって客観的に決めても良いし、主観評価によって決めても良い。あるいは、両者の加重平均によって決定しても良い。客観評価値としては、平均値の代わりに加重平均値、メディアン、最大値などを利用しても良い。動画の場合はフレーム毎の最大値を求め、この最大値の全フレームにわたる平均値、メディアン、最大値などを客観評価値としても良い。   The three-dimensional intensity may be determined objectively by the average value of parallax values for each pixel (average value of the entire screen in the case of a still image or average value of the entire moving image in the case of a moving image), or by subjective evaluation. Also good. Or you may determine by the weighted average of both. As the objective evaluation value, a weighted average value, median, maximum value, or the like may be used instead of the average value. In the case of a moving image, the maximum value for each frame may be obtained, and the average value, median, maximum value, etc. of all the maximum values over all frames may be used as the objective evaluation value.

一般に、立体強度の大きな立体画像を観察する場合、立体強度の小さなものに比べて眼の疲労が早まるため、立体強度によって立体表示の許容時間等に差を設ける必要がある。   In general, when observing a stereoscopic image having a high stereoscopic strength, eye fatigue is accelerated compared to a stereoscopic image having a low stereoscopic strength. Therefore, it is necessary to provide a difference in the allowable time for stereoscopic display depending on the stereoscopic strength.

図19は、立体強度(I)と立体表示の許容時間との関係を示す図である。図19(a)はI=1の場合であり、立体表示時間(横軸)の経過と共に一定の割合(k=α)で増加する「累積強度」(縦軸)が計算されるものとする。ここで、累積強度の値は時間0で0、時間t1でTHとなっている。また、THは所定のしきい値を示し、累積強度の値がTHに達する時間(t1)で、本発明の立体表示装置は以下のような処理を行う。   FIG. 19 is a diagram illustrating the relationship between the stereoscopic strength (I) and the allowable time for stereoscopic display. FIG. 19A shows a case where I = 1, and it is assumed that “cumulative intensity” (vertical axis) that increases at a constant rate (k = α) as the stereoscopic display time (horizontal axis) elapses is calculated. . Here, the value of the cumulative intensity is 0 at time 0 and TH at time t1. Further, TH represents a predetermined threshold value, and the stereoscopic display device of the present invention performs the following process at the time (t1) when the cumulative intensity value reaches TH.

(1)表示モードを立体表示から平面表示に切り替える。
(2)視差が少なくなるよう調節して立体表示を継続する
(3)画面に警告メッセージを表示する。
(1)の方法を採る場合、t1は、立体表示を連続する時間(立体表示時間)の許容時間の意味を持つ。また、(3)のメッセージは、立体表示時間が許容時間を経過した旨、平面表示への切り替えを促す旨などを示すものとする。これらの処理は、いずれか一つを用いても良いが、複数を組み合わせて用いることもできる。例えば(1)と(2)を組み合わせ、表示モードを平面表示に切り替えると同時に画面にその旨を知らせるメッセージを表示する。
(1) Switch the display mode from stereoscopic display to flat display.
(2) Continue stereoscopic display by adjusting the parallax to be reduced. (3) Display a warning message on the screen.
In the case of adopting the method (1), t1 has a meaning of an allowable time of a time for continuous stereoscopic display (stereoscopic display time). In addition, the message (3) indicates that the stereoscopic display time has passed the permissible time, prompts the user to switch to flat display, and the like. Any one of these processes may be used, but a plurality may be used in combination. For example, (1) and (2) are combined, and at the same time the display mode is switched to flat display, a message informing that is displayed on the screen.

図19(b)はI=2の場合であり、上記と同様に累積強度が計算されるが、一定の割合kは図19(a)の2倍(k=2α)とする。従って累積強度の値がしきい値THに達する時間(t2)は、t1の半分となる。立体表示装置が上記(1)の方法をとる場合、立体画像表示の許容時間は図19(a)の場合の半分となる。   FIG. 19B shows a case where I = 2, and the cumulative intensity is calculated in the same manner as described above, but the constant ratio k is twice that of FIG. 19A (k = 2α). Therefore, the time (t2) for the cumulative intensity value to reach the threshold value TH is half of t1. When the stereoscopic display device adopts the above method (1), the allowable time for displaying a stereoscopic image is half that in the case of FIG.

一般に累積強度(AI)は、立体強度Iと立体表示時間tを用いて以下のように表される。   Generally, the cumulative intensity (AI) is expressed as follows using the three-dimensional intensity I and the three-dimensional display time t.

AI=f(I,t)
ここで、f(I,t)はIおよびtの関数とする。図19の場合
f(I,t)=k(I)・t
となる。ただし、k(I)はIの関数であり、図19の場合は
k(I)=α・I (αは定数)
である。
AI = f (I, t)
Here, f (I, t) is a function of I and t. In the case of FIG. 19 f (I, t) = k (I) · t
It becomes. However, k (I) is a function of I. In the case of FIG. 19, k (I) = α · I (α is a constant)
It is.

f,kの関数としては他にも
f(I,t)=k(I)・t+m (mは定数)
k(I)=α・I+β (α,βは定数)
などの一次関数や二次以上の関数あるいはその他の関数を用いても構わない。また、定数m,α,βは実験によって決められる値である。αが正であれば上式のk(I)はIの単調増加関数となり、k(I)が正であれば上式のf(I,t)はtの単調増加関数となる。
Other functions of f and k are f (I, t) = k (I) · t + m (m is a constant)
k (I) = α · I + β (α and β are constants)
A linear function, a quadratic or higher function, or other functions may be used. The constants m, α, and β are values determined by experiments. If α is positive, k (I) in the above equation becomes a monotonically increasing function of I, and if k (I) is positive, f (I, t) in the above equation becomes a monotonically increasing function of t.

累積強度を時間と共に図19のように増加させる場合、本発明の立体表示装置では一定時間間隔(d)毎に一定量(s・I)を累積強度に足し込む処理を行う。ここでsはあらかじめ定められた定数であるり、sとαの関係は次のようになる。   When the cumulative intensity is increased with time as shown in FIG. 19, the stereoscopic display device of the present invention performs a process of adding a constant amount (s · I) to the cumulative intensity at regular time intervals (d). Here, s is a predetermined constant, and the relationship between s and α is as follows.

α=(s/d)
この時の累積強度と時間の関係を図20に示す。例えば時間を秒で表し、立体強度Iが1の立体画像に対して1秒毎に累積強度を3だけ増加させる場合、d=1、s=3となる。
α = (s / d)
The relationship between the cumulative intensity and time at this time is shown in FIG. For example, when the time is expressed in seconds and the cumulative intensity is increased by 3 every second for a stereoscopic image having a stereoscopic intensity I of 1, d = 1 and s = 3.

本発明の立体表示装置は累積強度をs・Iだけ増加させる毎に累積強度としきい値THを比較し、累積強度がTHより小さければ立体表示を継続し、TH以上であれば上記(1)〜(3)に述べたような処理のいずれかが採られる。   The stereoscopic display device of the present invention compares the cumulative intensity with the threshold value TH every time the cumulative intensity is increased by s · I. If the cumulative intensity is smaller than TH, the stereoscopic display is continued. Any one of the processes described in (3) is adopted.

立体強度とその累積強度および立体表示の許容時間との関係を示す別の例を図21に示す。この例では立体強度Iが1の場合と2の場合で累積強度は同じ割合で増加し、しきい値THが異なる値をとるものとする。すなわち、I=1で用いる値TH1に対し、I=2ではTH1の半分のしきい値TH2を用いる。これによって、I=1の時は時間t1で累積強度がしきい値に達し、I=2の時はt1の半分の時間t2で累積強度がしきい値に達する。累積強度がしきい値に到達後、立体表示装置は上記(1)〜(3)のいずれかの処理を行う。   FIG. 21 shows another example showing the relationship between the three-dimensional intensity, its accumulated intensity, and the allowable time for three-dimensional display. In this example, the cumulative intensity increases at the same rate when the solid intensity I is 1 and 2, and the threshold value TH is different. In other words, a threshold value TH2 that is half of TH1 is used when I = 2 with respect to a value TH1 that is used when I = 1. Thus, when I = 1, the cumulative intensity reaches the threshold at time t1, and when I = 2, the cumulative intensity reaches the threshold at time t2 which is half of t1. After the cumulative intensity reaches the threshold value, the stereoscopic display device performs any one of the processes (1) to (3).

このように、異なる立体強度に対して異なるしきい値を用いることでも本実施形態の目的を達することが可能である。
次に、立体強度の異なる複数の立体画像を連続して立体表示した場合の立体表示の制限方法について説明する。
Thus, the object of the present embodiment can be achieved by using different threshold values for different solid strengths.
Next, a method for restricting stereoscopic display when a plurality of stereoscopic images having different stereoscopic strengths are stereoscopically displayed in succession will be described.

図22に表示時間と累積強度の関係の例を示す。この例では、時間0から時間aまで立体強度I=2の立体画像を立体表示し、時間aから時間bまで立体強度I=3の立体画像を立体表示し、時間b以降に立体強度I=3の立体画像を立体表示する。この時、累積強度は時間0から時間aまで傾きk=2αで増加し、時間aから時間bまで傾きk=αで増加し、時間bからは傾きk=3αで増加する。THmはしきい値であり、累積強度がTHmに達した時間cにおいて、上述した(1)〜(3)のいずれかの処理が採られる。   FIG. 22 shows an example of the relationship between display time and accumulated intensity. In this example, a stereoscopic image having a stereoscopic intensity I = 2 is stereoscopically displayed from time 0 to time a, a stereoscopic image having a stereoscopic intensity I = 3 is stereoscopically displayed from time a to time b, and the stereoscopic intensity I = 3 stereoscopic images are displayed in 3D. At this time, the cumulative intensity increases from time 0 to time a with a slope k = 2α, increases from time a to time b with a slope k = α, and increases from time b with a slope k = 3α. THm is a threshold value, and at the time c when the cumulative intensity reaches THm, any one of the processes (1) to (3) described above is adopted.

(1)の処理を採る場合、時間cで立体表示装置の表示モードが平面表示に切り替えられる。これ以降の処理について、本実施形態では詳細な説明を省略するが、例えば図22のように時間c以降の累積強度を一定の割合で減少させ、累積強度が0となった時点で再度立体表示に切換える。   When the process (1) is adopted, the display mode of the stereoscopic display device is switched to flat display at time c. Although detailed description of the subsequent processing is omitted in the present embodiment, for example, as shown in FIG. 22, the cumulative intensity after the time c is decreased at a certain rate, and when the cumulative intensity becomes 0, the stereoscopic display is performed again. Switch to.

図23は本実施形態の立体画像符号化装置を示すブロック図である。
立体画像制御情報生成手段2301は、立体強度としきい値から図8で述べた立体画像制御情報部を生成する。例えば、立体強度として1から4の整数を用い、これを2ビットの変数“3D_intensity”で表現する。また、しきい値として0から65535の変数を用い、これを16ビットの変数“3D_threshold”で表現する。これらの情報は固定長あるいは可変長で符号化されるものとし、可変長符号化の場合はハフマン符号化や算術符号化等が用いられるものとする。
FIG. 23 is a block diagram showing the stereoscopic image encoding apparatus of this embodiment.
The stereoscopic image control information generation unit 2301 generates the stereoscopic image control information unit described in FIG. 8 from the stereoscopic intensity and the threshold value. For example, an integer from 1 to 4 is used as the solid intensity, and this is expressed by a 2-bit variable “3D_intensity”. Also, a variable from 0 to 65535 is used as the threshold value, and this is expressed by a 16-bit variable “3D_threshold”. These pieces of information are encoded with a fixed length or a variable length. In the case of variable length encoding, Huffman encoding, arithmetic encoding, or the like is used.

立体画像符号化手段2302は、原画像データをJPEG等の静止画符号化方式あるいはMPEG等の動画符号化方式にて符号化し、符号化データを得る。ここで原画像データは右眼用画像データおよび左眼用画像データから成るものとする。右眼用画像データと左眼用画像データを各々間引き、両者を左右に合成し、符号化用の画像を得るための前処理もここで行われる。また、符号化にはJPEG,MPEG等の画像圧縮の他、ビットマップによる表現や、コンピュータグラフィックス等による表現も含まれるものとする。   The stereoscopic image encoding means 2302 encodes original image data by a still image encoding method such as JPEG or a moving image encoding method such as MPEG to obtain encoded data. Here, it is assumed that the original image data includes right-eye image data and left-eye image data. The pre-processing for thinning out the right-eye image data and the left-eye image data, combining them both right and left, and obtaining an image for encoding is also performed here. In addition, encoding includes not only image compression such as JPEG and MPEG, but also bitmap representation and computer graphics representation.

多重化手段2303は、符号化データと立体画像制御情報部を多重化して立体画像フォーマットデータを得る。この時、立体画像識別情報I1も立体画像フォーマットデータに挿入される。これについては図8、図9を用いて説明しているため説明を省略する。多重化された立体画像フォーマットデータは、記録媒体に蓄積あるいは伝送媒体に送出される。   The multiplexing unit 2303 multiplexes the encoded data and the stereoscopic image control information unit to obtain stereoscopic image format data. At this time, the stereoscopic image identification information I1 is also inserted into the stereoscopic image format data. Since this has been described with reference to FIGS. 8 and 9, a description thereof will be omitted. The multiplexed stereoscopic image format data is stored in a recording medium or transmitted to a transmission medium.

以上のようにして、立体画像に対する立体強度やしきい値を示す情報が、立体画像の符号化データと共に蓄積あるいは伝送される。   As described above, information indicating the stereoscopic intensity and threshold value for a stereoscopic image is stored or transmitted together with the encoded data of the stereoscopic image.

図24は本実施形態の立体画像復号装置を示すブロック図である。
逆多重化手段2401は、記録媒体に蓄積あるいは伝送媒体に送出された立体画像フォーマットデータを入力とし、これから符号化データと立体画像制御情報部を分離する。
FIG. 24 is a block diagram showing a stereoscopic image decoding apparatus according to this embodiment.
The demultiplexing means 2401 receives the stereoscopic image format data stored in the recording medium or sent to the transmission medium, and separates the encoded data and the stereoscopic image control information section from this.

立体画像復号手段2403は、符号化データを復号し復号画像データを得る。ここで復号画像データは右眼用画像データおよび左眼用画像データから成るものとする。右眼用画像データと左眼用画像データの分離もここで行われる。   The stereoscopic image decoding unit 2403 decodes the encoded data to obtain decoded image data. Here, it is assumed that the decoded image data includes right-eye image data and left-eye image data. Separation of the image data for the right eye and the image data for the left eye is also performed here.

立体画像制御情報解析手段2402は、立体画像制御情報部を解析し、立体強度およびしきい値を復号する。例えば、立体強度として2ビットの変数“3D_intensity”得られ、しきい値として16ビットの変数“3D_threshold”が得られる。   The stereoscopic image control information analyzing unit 2402 analyzes the stereoscopic image control information part and decodes the stereoscopic intensity and the threshold value. For example, a 2-bit variable “3D_intensity” is obtained as the solid intensity, and a 16-bit variable “3D_threshold” is obtained as the threshold.

以上のようにして、立体画像の符号化データと共に蓄積あるいは伝送された立体強度やしきい値を示す情報が復号される。   As described above, the information indicating the stereoscopic intensity and the threshold value stored or transmitted together with the encoded data of the stereoscopic image is decoded.

図25(a)は本実施形態の立体画像表示装置を示すブロック図である。本装置では、立体強度としきい値を用い、上述の方法によって立体表示を(1)〜(3)のように制限する。   FIG. 25A is a block diagram showing the stereoscopic image display apparatus of this embodiment. In this apparatus, the stereoscopic display is limited as shown in (1) to (3) by using the three-dimensional intensity and the threshold value by the above-described method.

表示制御手段2501は、立体強度に応じて累積強度を計算し、累積強度としきい値の比較結果に基づいて立体画像作成手段2502、平面画像作成手段2503、スイッチ2504、表示手段2505を以下のように制御する。   The display control means 2501 calculates the cumulative intensity according to the three-dimensional intensity, and based on the comparison result between the cumulative intensity and the threshold, the three-dimensional image creating means 2502, the planar image creating means 2503, the switch 2504, and the display means 2505 are as follows. To control.

累積強度がしきい値よりも小さい場合、立体画像作成手段2502を動作させて立体表示用の画像を作成し、平面画像作成手段2503は停止させる。スイッチ2504は立体画像作成手段2502側に接続され、立体表示用の画像が表示手段2505に送られる。さらに、表示手段2505を立体表示モードに設定し、立体表示用の画像を表示する。   When the accumulated intensity is smaller than the threshold value, the stereoscopic image creating means 2502 is operated to create an image for stereoscopic display, and the planar image creating means 2503 is stopped. The switch 2504 is connected to the stereoscopic image creating means 2502 side, and an image for stereoscopic display is sent to the display means 2505. Further, the display unit 2505 is set to the stereoscopic display mode, and an image for stereoscopic display is displayed.

累積強度がしきい値以上で、上述の(1)のように立体表示を制限する場合、平面画像作成手段2503を動作させて平面表示用の画像を作成し、立体画像作成手段2502は停止させる。スイッチ2504は平面画像作成手段2503側に接続され、平面表示用の画像が表示手段2505に送られる。さらに、表示手段2505を平面表示モードに設定し、平面表示用の画像を表示する。   When the cumulative intensity is greater than or equal to the threshold value and stereoscopic display is restricted as in (1) above, the planar image creating means 2503 is operated to create an image for planar display, and the stereoscopic image creating means 2502 is stopped. . The switch 2504 is connected to the plane image creating means 2503 side, and an image for plane display is sent to the display means 2505. Further, the display unit 2505 is set to the flat display mode, and an image for flat display is displayed.

立体強度がしきい値以上で、上述の(2)のように立体表示を制限する場合、立体画像作成手段2502の動作は、累積強度がしきい値よりも小さい場合と基本的に同じであるが、表示制御手段2501は立体画像作成手段2502の動作モードを変更し、立体画像作成手段は、前述した方法により視差の少ない立体画像を作成する。   When the stereoscopic intensity is equal to or greater than the threshold and the stereoscopic display is limited as described in (2) above, the operation of the stereoscopic image creating means 2502 is basically the same as when the cumulative intensity is smaller than the threshold. However, the display control unit 2501 changes the operation mode of the stereoscopic image creating unit 2502, and the stereoscopic image creating unit creates a stereoscopic image with less parallax by the method described above.

立体強度がしきい値以上で、上述の(3)のように立体表示を制限する場合も、累積強度がしきい値よりも小さい場合と基本的に同じであるが、表示手段2505によって警告メッセージが表示される。   The case where the solid intensity is equal to or higher than the threshold and the stereoscopic display is restricted as in (3) above is basically the same as the case where the cumulative intensity is smaller than the threshold, but the display unit 2505 gives a warning message. Is displayed.

立体表示用の画像および平面表示用の画像の作成方法は実施形態1〜3で述べたものと同様であるため、ここでは説明を省略する。   Since the method for creating the stereoscopic display image and the flat display image is the same as that described in the first to third embodiments, description thereof is omitted here.

累積強度がしきい値に達した際の処理として、これまで(1)〜(3)の処理を例示したが、あらかじめ処理の内容を複数セット用意しておき、どのセットを採るかを適応的に選択出来るようにしても良い。例えば、処理のセットとして
A.処理(1)を行う。
B.処理(2)を行う。
C.処理(3)を行う。
D.処理(1)及び(3)を行う。
E.処理(2)及び(3)を行う。
をあらかじめ定義しておき、セットA〜Eのいずれを採るかを示す情報を、立体画像制御情報部に含めるようにする。従って、立体画像符号化装置では上記セットを示す情報Sを立体画像の符号化データと共に蓄積あるいは伝送し、立体画像復号装置では情報Sを復号し、立体画像表示装置では情報Sに基づいて、累積強度がしきい値に達した際の処理を選択する。
As the processing when the cumulative intensity reaches the threshold value, the processing of (1) to (3) has been exemplified so far. However, a plurality of processing contents are prepared in advance, and it is adaptive to determine which set is taken. You may make it possible to select. For example, A. Process (1) is performed.
B. Process (2) is performed.
C. Process (3) is performed.
D. Processes (1) and (3) are performed.
E. Processes (2) and (3) are performed.
Is defined in advance, and information indicating which of the sets A to E is taken is included in the stereoscopic image control information section. Therefore, the stereoscopic image encoding apparatus stores or transmits the information S indicating the set together with the encoded data of the stereoscopic image, the stereoscopic image decoding apparatus decodes the information S, and the stereoscopic image display apparatus accumulates the information S based on the information S. Select what happens when the intensity reaches a threshold.

次に、立体画像表示装置において、立体強度やしきい値に補正を行う手法について説明する。上述の方法では、同じ立体画像を特性(ディスプレイサイズ、観察距離等)の異なる表示手段で表示する場合でも、特性に関らず同じ立体強度としきい値が用いられていた。しかし、観察者の眼に対する影響は、例えばディスプレイサイズが大きくなれば大きく、あるいは観察距離が近くなれば大きくなると考えられるため、表示手段の特性によって立体強度やしきい値に補正を行うことが好ましい。例えば、立体画像の符号化データと共に蓄積あるいは伝送される立体強度やしきい値としては、標準ディスプレイサイズ、標準観察距離等の標準特性を備えた表示手段について最適に定められた値(標準立体強度、標準しきい値)を用い、各表示装置は各々の表示手段の特性に基づいて、標準立体強度、標準しきい値を補正する。   Next, a method for correcting the stereoscopic strength and the threshold value in the stereoscopic image display apparatus will be described. In the above-described method, even when the same stereoscopic image is displayed by display means having different characteristics (display size, observation distance, etc.), the same stereoscopic intensity and threshold value are used regardless of the characteristics. However, since the influence on the eyes of the observer is considered to increase as the display size increases, or as the observation distance decreases, it is preferable to correct the stereoscopic strength and the threshold according to the characteristics of the display means. . For example, as the stereoscopic intensity and threshold value stored or transmitted together with the encoded data of the stereoscopic image, the optimum value (standard stereoscopic intensity) for display means having standard characteristics such as standard display size and standard observation distance is used. , The standard threshold value), and each display device corrects the standard solid intensity and the standard threshold value based on the characteristics of each display means.

このような補正を行うために、図25(a)に示す立体画像表示装置において、表示制御手段2501の入力部分に、図25(b)に示す補正手段2506を接続する。補正手段2506では、標準立体強度(In)および標準しきい値(THn)の補正が行われ、補正後の立体強度(I)およびしきい値(TH)が出力される。IおよびTHは、一般に
I=G(In)
TH=H(THn)
のように、それぞれ表示手段の特性に応じた補正関数G、Hによって与えられる。補正関数は例えば、
G(In)=N1・In+N2
H(THn)=N3・THn+N3
のような一次関数で表現することが可能である。ただし、N1〜N3は実験等によって求める値である。より簡単には、THnのみを補正することとし、
I=In
TH=N・THn
のようにしてI,THを求めてもよいし、逆にInのみを補正するようにしても良い。
In order to perform such correction, the correction unit 2506 shown in FIG. 25B is connected to the input portion of the display control unit 2501 in the stereoscopic image display apparatus shown in FIG. The correction means 2506 corrects the standard solid intensity (In) and the standard threshold value (THn), and outputs the corrected solid intensity (I) and threshold value (TH). I and TH are generally I = G (In)
TH = H (THn)
As described above, the correction functions G and H are given according to the characteristics of the display means. The correction function is, for example,
G (In) = N1 · In + N2
H (THn) = N3 · THn + N3
It can be expressed by a linear function such as However, N1 to N3 are values obtained by experiments or the like. More simply, only THn is corrected,
I = In
TH = N · THn
In this way, I and TH may be obtained, or conversely, only In may be corrected.

上の式の場合、表示装置が備える表示手段の観察距離は標準観察距離と同じで、ディプレイサイズが標準ディスプレイサイズよりも大きい時はNを1より小さな値とし、反対にディプレイサイズが標準ディスプレイサイズよりも小さい時はNを1より大きな値とする。   In the case of the above formula, the viewing distance of the display means provided in the display device is the same as the standard viewing distance. When the display size is larger than the standard display size, N is set to a value smaller than 1, and the display size is standard. When it is smaller than the display size, N is set to a value larger than 1.

以上のように、第4の実施形態では左眼用画像データ、右眼用画像データから成る2視点の画像データを用いて説明してきたが、第1の実施形態と同様に3視点以上を含む多視点の画像データにも第4の実施形態を適用できることは明らかである。   As described above, in the fourth embodiment, description has been made using two-viewpoint image data including left-eye image data and right-eye image data. However, as in the first embodiment, three or more viewpoints are included. It is clear that the fourth embodiment can be applied to multi-viewpoint image data.

本発明の第1の実施形態の立体画像表示装置の構成を示す図。The figure which shows the structure of the three-dimensional image display apparatus of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像表示装置による平面画像データの構成及びその表示方法の一例を示す図。The figure which shows an example of the structure of the plane image data by the three-dimensional image display apparatus of the 1st Embodiment of this invention, and its display method. 本発明の第1の実施形態の立体画像表示装置において、表示手段3が立体表示のみしか出来ない場合の立体画像データの作成及びその表示方法の一例を示す図。The figure which shows an example of the production | generation of the stereo image data in case the display means 3 can only perform a stereo display, and its display method in the stereo image display apparatus of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像表示装置による立体画像データの作成及びその表示方法の一例を示す図。The figure which shows an example of the production | generation of the stereo image data by the stereo image display apparatus of the 1st Embodiment of this invention, and its display method. 本発明の第1の実施形態の立体画像表示装置による立体画像表示の処理動作を説明するフローチャート。The flowchart explaining the processing operation of the stereoscopic image display by the stereoscopic image display apparatus of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像表示装置による立体画像データの作成及びその表示方法の一例を示す図。The figure which shows an example of the production | generation of the stereo image data by the stereo image display apparatus of the 1st Embodiment of this invention, and its display method. 本発明の第1の実施形態の立体画像フォーマットデータF1を復号する立体画像復号手段500の一例を示す図。The figure which shows an example of the stereo image decoding means 500 which decodes the stereo image format data F1 of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像フォーマットデータF1の一例を示す図。The figure which shows an example of the stereo image format data F1 of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像コンテンツを放送で受信する際の一例を示す図。The figure which shows an example at the time of receiving the stereo image content of the 1st Embodiment of this invention by broadcast. 本発明の第1の実施形態の立体画像フォーマットデータF1の伝送経路として記録媒体が使われた場合の立体画像フォーマットデータF1の流れの一例を説明する図。The figure explaining an example of the flow of the stereo image format data F1 when a recording medium is used as a transmission path | route of the stereo image format data F1 of the 1st Embodiment of this invention. 本発明の第1の実施形態の立体画像フォーマットデータF1の伝送経路としてネットワークが使われた場合の立体画像フォーマットデータF1の流れの一例を説明する図。The figure explaining an example of the flow of the stereo image format data F1 at the time of using a network as a transmission path | route of the stereo image format data F1 of the 1st Embodiment of this invention. 本発明における入力画像データが3つの場合の、第1の実施形態の立体画像表示装置の構成を示す図。The figure which shows the structure of the stereo image display apparatus of 1st Embodiment in case the input image data in this invention are three. 本発明における入力画像データが3つの場合の、第1の実施形態の立体画像データの作成およびその表示の一例を示す図。The figure which shows an example of preparation of the stereo image data of 1st Embodiment, and its display in case the input image data in this invention are three. 本発明の第2の実施形態の立体画像表示装置の構成を示す図。The figure which shows the structure of the stereo image display apparatus of the 2nd Embodiment of this invention. 本発明の第2の実施形態の立体画像表示装置による立体画像表示の処理動作を説明するフローチャート。The flowchart explaining the processing operation of the stereoscopic image display by the stereoscopic image display apparatus of the 2nd Embodiment of this invention. 本発明の第3の実施形態の立体画像表示装置の構成を示す図。The figure which shows the structure of the three-dimensional image display apparatus of the 3rd Embodiment of this invention. 本発明の第3の実施形態の立体画像表示装置の動作を示すフローチャート。The flowchart which shows operation | movement of the three-dimensional image display apparatus of the 3rd Embodiment of this invention. 立体画像の視差および像の見え方を示す図。The figure which shows the parallax of a stereo image, and the appearance of an image. 立体強度と立体表示の許容時間との関係の例を示す図。The figure which shows the example of the relationship between solid intensity | strength and permissible time of a stereoscopic display. 累積強度と時間の関係を示す図である。It is a figure which shows the relationship between accumulation intensity and time. 立体強度と立体表示の許容時間との関係の他の例を示す図。The figure which shows the other example of the relationship between solid intensity | strength and permissible time of a stereoscopic display. 表示時間と累積強度の関係の例を示す図。The figure which shows the example of the relationship between display time and accumulated intensity. 第4の実施形態の立体画像符号化装置を示すブロック図。The block diagram which shows the stereo image coding apparatus of 4th Embodiment. 第4の実施形態の立体画像復号装置を示すブロック図。The block diagram which shows the stereo image decoding apparatus of 4th Embodiment. 第4の実施形態の立体画像表示装置を示すブロック図。The block diagram which shows the three-dimensional image display apparatus of 4th Embodiment.

符号の説明Explanation of symbols

1,100,203,600:立体画像作成手段
2:フレームメモリ
3:表示手段
4,101,204,205:時間計測判定手段
5:視差制御手段
6:平面画像作成手段
10,200,604:スイッチ制御手段
11,12,13,14、201,601,602,603:スイッチ
102:警告表示制御手段
202:モードスイッチ制御手段
206:電源制御手段
300:スリット
301:フレーム
500,512,523:立体画像復号手段
501:立体画像制御情報解析手段
502:画像データ部復号手段
504:分離手段
510,520:立体画像符号化手段
511:記録媒体
521:BSデータ作成手段
522:ネットワーク
524:BSデータ復号手段
2301:立体画像制御情報生成手段
2302:立体画像符号化手段
2303:多重化手段
2401:逆多重化手段
2402:立体画像制御情報解析手段
2403:立体画像復号手段
2501:表示制御手段
2502:立体画像作成手段
2503:平面画像作成手段
2504:スイッチ
2505:表示手段
2506:補正手段
1, 100, 203, 600: Stereoscopic image creation means 2: Frame memory 3: Display means 4, 101, 204, 205: Time measurement determination means 5: Parallax control means 6: Plane image creation means 10, 200, 604: Switch Control means 11, 12, 13, 14, 201, 601, 602, 603: Switch 102: Warning display control means 202: Mode switch control means 206: Power supply control means 300: Slit 301: Frame 500, 512, 523: Stereoscopic image Decoding unit 501: Stereo image control information analysis unit 502: Image data part decoding unit 504: Separation unit 510, 520: Stereo image encoding unit 511: Recording medium 521: BS data creation unit 522: Network 524: BS data decoding unit 2301 : Stereo image control information generating means 2302: Stereo image encoding means 23 3: Multiplexing means 2401: Demultiplexing means 2402: Stereo image control information analysis means 2403: Stereo image decoding means 2501: Display control means 2502: Stereo image creation means 2503: Plane image creation means 2504: Switch 2505: Display means 2506 : Correction means

Claims (1)

観察者の左右眼別に画像を表示する立体画像表示装置において、複数の画像から立体画像を作成する立体画像作成手段と、前記複数の画像から平面画像を作成する平面画像作成手段と、前記立体画像作成手段が作成した立体画像あるいは前記平面画像作成手段が作成した平面画像を表示する表示手段とを備え、
立体画像表示時間が第1の所定時間を超えた時、少なくとも前記表示手段の電源を含む電源を自動的に遮断し、前記表示手段の電源自動遮断後、立体画像を表示していない時間が第2の所定時間を超えるまでに前記遮断された電源を復帰させる操作が行われた場合は、前記表示手段に前記平面画像作成手段によって作成した平面画像を表示することを特徴とする立体画像表示装置。
In a stereoscopic image display device that displays images according to the left and right eyes of an observer, stereoscopic image creation means for creating a stereoscopic image from a plurality of images, planar image creation means for creating a planar image from the plurality of images, and the stereoscopic image Display means for displaying a stereoscopic image created by the creating means or a planar image created by the planar image creating means,
When the stereoscopic image display time exceeds the first predetermined time, the power supply including at least the power supply of the display means is automatically shut off. After the power supply of the display means is automatically shut off, the time during which no stereoscopic image is displayed is A stereoscopic image display device that displays a planar image created by the planar image creation means on the display means when an operation to restore the shut-off power supply is performed before a predetermined time of 2 is exceeded .
JP2008173279A 2002-09-27 2008-07-02 Stereoscopic image display device Expired - Fee Related JP4783817B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008173279A JP4783817B2 (en) 2002-09-27 2008-07-02 Stereoscopic image display device

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2002283850 2002-09-27
JP2002283850 2002-09-27
JP2008173279A JP4783817B2 (en) 2002-09-27 2008-07-02 Stereoscopic image display device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2002318895A Division JP4713054B2 (en) 2002-09-27 2002-10-31 Stereo image display device, stereo image encoding device, stereo image decoding device, stereo image recording method, and stereo image transmission method

Publications (2)

Publication Number Publication Date
JP2008306739A JP2008306739A (en) 2008-12-18
JP4783817B2 true JP4783817B2 (en) 2011-09-28

Family

ID=35632735

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2008101054A Expired - Fee Related JP4898734B2 (en) 2002-09-27 2008-04-09 Stereoscopic image display device, stereoscopic image display method, and stereoscopic image transmission method
JP2008101069A Expired - Fee Related JP4879932B2 (en) 2002-09-27 2008-04-09 Stereoscopic image display method and stereoscopic image transmission method
JP2008173279A Expired - Fee Related JP4783817B2 (en) 2002-09-27 2008-07-02 Stereoscopic image display device

Family Applications Before (2)

Application Number Title Priority Date Filing Date
JP2008101054A Expired - Fee Related JP4898734B2 (en) 2002-09-27 2008-04-09 Stereoscopic image display device, stereoscopic image display method, and stereoscopic image transmission method
JP2008101069A Expired - Fee Related JP4879932B2 (en) 2002-09-27 2008-04-09 Stereoscopic image display method and stereoscopic image transmission method

Country Status (2)

Country Link
JP (3) JP4898734B2 (en)
CN (1) CN1703915A (en)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101237590B (en) * 2007-02-01 2010-05-19 广达电脑股份有限公司 3D image display method
US8335425B2 (en) * 2008-11-18 2012-12-18 Panasonic Corporation Playback apparatus, playback method, and program for performing stereoscopic playback
WO2010058546A1 (en) * 2008-11-18 2010-05-27 パナソニック株式会社 Reproduction device, reproduction method, and program for stereoscopic reproduction
JP5594536B2 (en) 2008-12-09 2014-09-24 ソニー株式会社 Image processing apparatus and method, program, and recording medium
JP2010141446A (en) * 2008-12-10 2010-06-24 Brother Ind Ltd Head mount display and image presentation method in same
US8269821B2 (en) * 2009-01-27 2012-09-18 EchoStar Technologies, L.L.C. Systems and methods for providing closed captioning in three-dimensional imagery
JP2010252046A (en) * 2009-04-15 2010-11-04 Olympus Imaging Corp Image pickup apparatus
JP5252223B2 (en) 2009-06-09 2013-07-31 ソニー株式会社 Video display device and video display system
JP5249149B2 (en) * 2009-07-17 2013-07-31 富士フイルム株式会社 Stereoscopic image recording apparatus and method, stereoscopic image output apparatus and method, and stereoscopic image recording and output system
KR20110025123A (en) * 2009-09-02 2011-03-09 삼성전자주식회사 Method and apparatus for multiple-speed reproduction of video image
JP5540746B2 (en) * 2009-11-20 2014-07-02 ソニー株式会社 RECEPTION DEVICE, TRANSMISSION DEVICE, COMMUNICATION SYSTEM, RECEPTION DEVICE CONTROL METHOD, AND PROGRAM
JP2011228969A (en) * 2010-04-21 2011-11-10 Hitachi Consumer Electronics Co Ltd Video processing apparatus
JP5496802B2 (en) * 2010-07-22 2014-05-21 シャープ株式会社 Image display device, control method, program, and recording medium
JP5750779B2 (en) * 2010-09-02 2015-07-22 オリンパス株式会社 Imaging apparatus, image communication system, and image communication method
KR20120056929A (en) * 2010-09-20 2012-06-05 엘지전자 주식회사 Mobile terminal and operation control method thereof
US20130169543A1 (en) * 2010-09-20 2013-07-04 Mediatek Singapore Pte. Ltd. Rendering Apparatuses, Display System and Methods for Rendering Multimedia Data Objects with a Function to Avoid Eye Fatigue
JP5543892B2 (en) * 2010-10-01 2014-07-09 日立コンシューマエレクトロニクス株式会社 REPRODUCTION DEVICE, REPRODUCTION METHOD, DISPLAY DEVICE, AND DISPLAY METHOD
KR101296902B1 (en) 2010-12-08 2013-08-14 엘지디스플레이 주식회사 Image processing unit and stereoscopic image display device using the same, and image processing method
JP2012129845A (en) * 2010-12-16 2012-07-05 Jvc Kenwood Corp Image processing device
CN103348682B (en) * 2010-12-29 2016-10-26 汤姆逊许可公司 The method and apparatus that single vision is provided in multi-view system
JP5075996B2 (en) * 2011-02-23 2012-11-21 株式会社東芝 Video display method and video display device
JP4889820B2 (en) * 2011-07-06 2012-03-07 富士フイルム株式会社 Stereoscopic image display apparatus and stereoscopic image display method
JP4889821B2 (en) * 2011-07-06 2012-03-07 富士フイルム株式会社 Stereoscopic image display apparatus and stereoscopic image display method
US8994796B2 (en) 2011-07-06 2015-03-31 Fujifilm Corporation Stereo image display apparatus and stereo image display method
CN103533333B (en) * 2013-10-28 2016-02-10 青岛海信电器股份有限公司 Depth of field control method, depth of field adjusting device and display unit
CN104967837A (en) * 2015-06-30 2015-10-07 西安三星电子研究有限公司 Device and method for adjusting three-dimensional display effect
US11373740B2 (en) 2016-07-04 2022-06-28 Plano Pte Ltd Apparatus and method for monitoring use of a device
CN108347594A (en) * 2018-03-09 2018-07-31 京东方科技集团股份有限公司 3D glasses, display server, display, display system and its working method
CN109951642B (en) 2019-03-27 2021-05-04 京东方科技集团股份有限公司 Display method, display device, electronic apparatus, and storage medium

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0918894A (en) * 1995-06-26 1997-01-17 Sanyo Electric Co Ltd Stereoscopic image display device
JPH0984057A (en) * 1995-09-20 1997-03-28 Sanyo Electric Co Ltd Stereoscopic video equipment
JP3504111B2 (en) * 1996-06-27 2004-03-08 株式会社東芝 Stereoscopic system, stereoscopic method, and storage medium for storing computer program for displaying a pair of images viewed from two different viewpoints in a stereoscopic manner
JP4149037B2 (en) * 1998-06-04 2008-09-10 オリンパス株式会社 Video system

Also Published As

Publication number Publication date
JP2008245293A (en) 2008-10-09
JP2008306739A (en) 2008-12-18
CN1703915A (en) 2005-11-30
JP4898734B2 (en) 2012-03-21
JP2008263607A (en) 2008-10-30
JP4879932B2 (en) 2012-02-22

Similar Documents

Publication Publication Date Title
JP4783817B2 (en) Stereoscopic image display device
KR100804572B1 (en) 3-d image display unit, 3-d image recording device, 3-d image encoding device, 3-d image decoding device, 3-d image recording method and 3-d image transmitting method
US8116557B2 (en) 3D image processing apparatus and method
US8913108B2 (en) Method of processing parallax information comprised in a signal
JP4259913B2 (en) Stereoscopic image processing apparatus, stereoscopic image processing program, and recording medium recording the program
US20130038611A1 (en) Image conversion device
WO2010092823A1 (en) Display control device
JP5546633B2 (en) Stereoscopic image reproducing apparatus, stereoscopic image reproducing system, and stereoscopic image reproducing method
JP4145122B2 (en) Stereoscopic image display device
WO2011036844A1 (en) Three dimensional image processing device and control method thereof
US20130315473A1 (en) Image processing device and image processing method
US20130182078A1 (en) Stereoscopic image data creating device, stereoscopic image data reproducing device, and file management method
JP2012044308A (en) Three dimensional image output device and three dimensional image display device
WO2012117703A1 (en) Three-dimensional image processing device, three-dimensional image processing method, spectacles device for viewing three-dimensional image, integrated circuit for three-dimensional image processing device, optical disk playback device, three-dimensional video signal playback device, and three-dimensional video signal display device
JP4713054B2 (en) Stereo image display device, stereo image encoding device, stereo image decoding device, stereo image recording method, and stereo image transmission method
WO2011118215A1 (en) Video processing device
JP2004165710A (en) Stereoscopic image display apparatus, stereoscopic image recording method, and stereoscopic image transmission method
JP2004165709A (en) Stereoscopic image display apparatus, stereoscopic image recording method, and stereoscopic image transmission method
JP2014053782A (en) Stereoscopic image data processor and stereoscopic image data processing method
JP5899910B2 (en) Image processing apparatus, image processing method, and image processing program
WO2013108307A1 (en) Image processing device and image processing method
JP5250604B2 (en) Stereoscopic image display apparatus, stereoscopic image display method, and program
KR20120047099A (en) System and device for processing stereo image, and glasses
JP2013031057A (en) Image processing apparatus and image processing method

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110705

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110711

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140715

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees