JP2005165032A - Stereoscopic video display apparatus - Google Patents

Stereoscopic video display apparatus Download PDF

Info

Publication number
JP2005165032A
JP2005165032A JP2003404784A JP2003404784A JP2005165032A JP 2005165032 A JP2005165032 A JP 2005165032A JP 2003404784 A JP2003404784 A JP 2003404784A JP 2003404784 A JP2003404784 A JP 2003404784A JP 2005165032 A JP2005165032 A JP 2005165032A
Authority
JP
Japan
Prior art keywords
image
eye
display
foreground
foreground image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003404784A
Other languages
Japanese (ja)
Other versions
JP4549661B2 (en
Inventor
Takashi Kawai
隆史 河合
Takashi Shibata
隆史 柴田
Yoshihiro Yoshihara
義弘 葭原
Nobuyuki Miyake
信行 三宅
Masao Yamamoto
正男 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Waseda University
Arisawa Mfg Co Ltd
Nikon Corp
Scalar Corp
Original Assignee
Waseda University
Arisawa Mfg Co Ltd
Nikon Corp
Scalar Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Waseda University, Arisawa Mfg Co Ltd, Nikon Corp, Scalar Corp filed Critical Waseda University
Priority to JP2003404784A priority Critical patent/JP4549661B2/en
Publication of JP2005165032A publication Critical patent/JP2005165032A/en
Application granted granted Critical
Publication of JP4549661B2 publication Critical patent/JP4549661B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a stereoscopic video display apparatus, capable of suppressing eyestrain by removing or reducing the mismatching of a visual system and capable of being adaptive to the reproduction positions of various stereoscopic images. <P>SOLUTION: The stereoscopic video display device 10 is constituted of a display 21 for displaying a left eye image and a right eye image on a screen; an image display processing means for performing processing for displaying the right and left images on the screen of the display 21; a telecentric optical system 22 arranged between an observer and the display 21; a driving means 23 for moving the display 21, in a direction of bringing the display 21 close to and/or separating it from the telecentric optical system 22; and a control means for sending a control signal for controlling the operation of the driving means to the driving means 23 in synchronism with the display processing of the right and left images and moving the display 21 back and forth, according to changes in the depth directions of reproduction positions of noticed points in the right and left images. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、観察者に対して立体映像を呈示する立体映像呈示装置に係り、例えば、注視点(視標)を含む近景画像と、その背景となる遠景画像とを用いて立体映像を呈示する場合等に利用できる。   The present invention relates to a stereoscopic video presentation device that presents a stereoscopic video to an observer, and presents a stereoscopic video using, for example, a foreground image including a gazing point (target) and a background image as a background thereof. Can be used in some cases.

従来より、観察者に対して立体映像を呈示する際には、左眼用画像と右眼用画像との対応点を左右にずらして画面上に表示し、その両眼視差を利用して画像の各点を画面の手前側に飛び出させ、あるいは画面の奥側に引っ込ませることにより、立体感を作り出す手法が採られている。   Conventionally, when a stereoscopic image is presented to an observer, the corresponding points of the left-eye image and the right-eye image are shifted on the left and right and displayed on the screen, and the image using the binocular parallax is displayed. A method of creating a three-dimensional effect by projecting each of the points to the front side of the screen or retracting the points to the back side of the screen is employed.

図14は、このような両眼視差を利用した従来の立体映像呈示方法の原理説明図である。図14において、図示されない偏光フィルタや液晶シャッタ等を用いることにより、観察者の左眼と右眼とで観察される画像を分離し、左眼により、画像呈示面90に表示された左眼用画像のみが観察され、右眼により、画像呈示面90に表示された右眼用画像のみが観察されるようにする。例えば、観察者が、左眼により、P1点の対象を観察し、右眼により、これに対応するP2点の対象を観察したとすると、左眼と右眼との視線方向の交差点である画面手前のP3点で、それらの対象が融像され、立体像として再生される。   FIG. 14 is an explanatory diagram of the principle of a conventional stereoscopic video presenting method using such binocular parallax. In FIG. 14, by using a polarizing filter or a liquid crystal shutter (not shown), an image observed by the left eye and right eye of the observer is separated, and the left eye displayed on the image presentation surface 90 by the left eye. Only the image is observed, and only the right-eye image displayed on the image presentation surface 90 is observed by the right eye. For example, if the observer observes the target of point P1 with the left eye and observes the target of point P2 corresponding to this with the right eye, a screen that is the intersection of the left eye and the right eye in the line-of-sight direction At the front P3 point, those objects are fused and reproduced as a stereoscopic image.

ところで、2眼式立体映像は、新しい映像情報メディアとして、その社会的・経済的な波及効果が期待されるため、これまで様々な研究がなされてきたが、応用領域が不明瞭であること、観察により眼精疲労が生じること等の原因により、未だ普及していないのが現状である。とりわけ、立体映像観察により生じる眼精疲労は、視覚系の不整合が主な原因と考えられており、これまでにも様々な検討が行われている。この視覚系の不整合は、図14に示すように両眼視差を利用した立体映像の観察を行う場合に、輻輳は、再生される立体像の位置に働くのに対し、左眼および右眼の各水晶体の調節は、画像呈示面90に固定されているために生じる、輻輳と調節との奥行き情報の矛盾のことである。なお、自然視の状態では、輻輳と調節との奥行き情報は一致しているので、眼精疲労は生じない。   By the way, binocular stereoscopic video is expected to have a social and economic ripple effect as a new video information media, so various researches have been made so far, but the application area is unclear, At present, it has not yet spread due to causes such as eye strain caused by observation. In particular, eye strain caused by stereoscopic image observation is considered to be caused mainly by inconsistencies in the visual system, and various studies have been conducted so far. As shown in FIG. 14, this visual system mismatch is caused when the stereoscopic image using binocular parallax is observed, while the convergence acts on the position of the reproduced stereoscopic image, whereas the left eye and the right eye The adjustment of each lens is a contradiction in the depth information between the convergence and the adjustment caused by being fixed to the image display surface 90. In the natural vision state, the depth information of the convergence and the adjustment is the same, and thus eye strain does not occur.

そこで、このような眼精疲労の問題を解決するために、本願出願人により、立体映像観察において単焦点レンズを観察メガネに付加することで調節距離のシフト効果を誘起し、さらには、輻輳性調節といった人間の視覚特性を踏まえた立体像の再生位置の制御を行うことで視覚性の不整合を軽減することができる立体映像観察装置が既に提案されている(特許文献1参照)。この立体映像観察装置によれば、立体映像観察中の水晶体の屈折値を立体像の再生位置に近似させることができるとともに、補正レンズを用いることで眼精疲労の自覚症状も軽減できるという効果が得られる。   Therefore, in order to solve such a problem of eye strain, the applicant of the present application induced a shift effect of the adjustment distance by adding a single focus lens to the observation glasses in the stereoscopic image observation, and further, the convergence property There has already been proposed a stereoscopic image observation apparatus that can reduce the inconsistency in visibility by controlling the reproduction position of a stereoscopic image based on human visual characteristics such as adjustment (see Patent Document 1). According to this stereoscopic image observation apparatus, the refraction value of the crystalline lens during stereoscopic image observation can be approximated to the reproduction position of the stereoscopic image, and the subjective symptoms of eye strain can be reduced by using a correction lens. can get.

特開2002−341289号公報(段落[0012]、図1、要約)JP 2002-341289 A (paragraph [0012], FIG. 1, abstract)

しかしながら、前述した特許文献1に記載された立体映像観察装置では、視覚系の不整合は解消または軽減できるものの、単焦点レンズを用いていることから、補正が可能な範囲が限定され、多様な立体像の再生位置への対応が困難であるという課題が残る。   However, in the stereoscopic image observation apparatus described in Patent Document 1 described above, the inconsistency of the visual system can be eliminated or reduced. However, since a single focus lens is used, the range that can be corrected is limited, and various There remains a problem that it is difficult to cope with the reproduction position of the stereoscopic image.

また、補正が可能な範囲を拡大するため、オートフォーカスレンズのような焦点距離の可変調整が可能なレンズ系を眼前に配置する方法も考えられるが、大掛かりな装置を観察者の頭に装着することになり、現実的ではないという問題がある。さらに、そのようなレンズ系を用いた場合には、焦点距離も変わるが、レンズの度が変わるので画角も変わってしまうという問題がある。例えば、近くの対象を観察する際には、視野角が広くなる等、再生位置によって対象が大きくなったり、小さくなったり変化し、要するに、ズームの機構が同時に入ってきてしまうという問題がある。   In order to expand the range that can be corrected, a method of arranging a lens system capable of variably adjusting the focal length such as an autofocus lens in front of the eyes can be considered, but a large-scale device is attached to the observer's head. As a result, there is a problem that it is not realistic. Further, when such a lens system is used, the focal length also changes, but there is a problem that the angle of view also changes because the degree of the lens changes. For example, when observing a nearby object, there is a problem in that the object becomes larger or smaller depending on the reproduction position, for example, the viewing angle is widened.

本発明の目的は、視覚系の不整合を解消または軽減して眼精疲労を抑えることができ、かつ、多様な立体像の再生位置に対応することができる立体映像呈示装置を提供するところにある。   An object of the present invention is to provide a stereoscopic image display device that can eliminate or reduce visual system inconsistencies to suppress eye strain, and can correspond to various stereoscopic image reproduction positions. is there.

本発明は、観察者に対して立体映像を呈示する立体映像呈示装置であって、左眼用画像および右眼用画像が画面表示されるディスプレイと、このディスプレイの画面上に左眼用画像および右眼用画像を表示する処理を行う画像表示処理手段と、観察者とディスプレイとの間に配置されたテレセントリック光学系と、ディスプレイをテレセントリック光学系に対して近接離隔する方向に移動させる駆動手段と、画像表示処理手段による左眼用画像および右眼用画像の表示処理と同期させて駆動手段の動作制御を行うための制御信号を駆動手段に送ることにより、左眼用画像内および右眼用画像内に対応点としてそれぞれ設定された注視点を再生させる位置の奥行き方向の変化に応じてディスプレイを移動させる制御手段とを備えたことを特徴とするものである。   The present invention is a stereoscopic video presentation device that presents a stereoscopic video to an observer, a display on which a left-eye image and a right-eye image are displayed on a screen, and a left-eye image and a left-eye image on the display screen. Image display processing means for performing processing for displaying an image for the right eye, a telecentric optical system disposed between the observer and the display, and drive means for moving the display in a direction in which the display is moved closer to and away from the telecentric optical system; By sending a control signal for controlling the operation of the driving means in synchronization with the display processing of the left eye image and the right eye image by the image display processing means to the left eye image and for the right eye And control means for moving the display in accordance with the change in the depth direction of the position at which the point of interest set as the corresponding point in the image is reproduced. Is shall.

ここで、「左眼用画像」および「右眼用画像」は、実写画像でもよく、3Dのコンピュータ・グラフィクスをレンダリング処理により2次元化して得られた画像等でもよい。   Here, the “left-eye image” and the “right-eye image” may be a real image, or an image obtained by two-dimensionalizing 3D computer graphics by a rendering process.

また、「注視点を再生させる位置の奥行き方向の変化に応じてディスプレイを移動させる」とは、注視点の再生位置が観察者に近づく場合には、ディスプレイも観察者に近づく方向に移動させ、注視点の再生位置が観察者から遠ざかる場合には、ディスプレイも観察者から遠ざかる方向に移動させるという意味である。   In addition, “move the display according to the change in the depth direction of the position where the gazing point is reproduced” means that when the reproduction position of the gazing point approaches the observer, the display is moved in the direction approaching the observer, This means that when the reproduction position of the gazing point moves away from the observer, the display is moved in a direction away from the observer.

さらに、注視点の再生位置の制御は、ディスプレイの移動のみにより行ってもよく、あるいは、ディスプレイの移動と、左眼用画像内の注視点とこれに対応する右眼用画像内の注視点とを左右方向にずらす両眼視差との組合せにより行ってもよい。但し、視覚系の不整合を、より軽減するという観点等から、ディスプレイの移動のみにより行うことが好ましい。   Furthermore, the control of the reproduction position of the gazing point may be performed only by moving the display, or the movement of the display, the gazing point in the image for the left eye, and the corresponding gazing point in the image for the right eye. May be performed in combination with binocular parallax that shifts in the horizontal direction. However, it is preferable to perform only the movement of the display from the viewpoint of further reducing the inconsistency of the visual system.

このような本発明においては、注視点の再生位置の奥行き方向の変化に応じてディスプレイを前後に移動させるので、水晶体の調節が、移動するディスプレイの位置に追従して働くようになり、調節距離の動的な光学補正が実現される。そして、注視点の再生位置の制御は、ディスプレイの移動を伴う形で行われるので、注視点の再生位置にディスプレイの位置を一致させるか、または近づけることができるため、輻輳がディスプレイの画像呈示面の位置またはその近傍位置に働くようになる。従って、観察中、輻輳距離と調節距離とを一致させるか、または近づけることが可能となる。このため、左眼用画像と右眼用画像との視差量を変化させることのみにより注視点の再生位置を制御する従来の方法の場合に比べ、視覚系の不整合に基づく眼精疲労を抑えることができるようになる。   In the present invention, since the display is moved back and forth in accordance with the change in the depth direction of the reproduction position of the gazing point, the adjustment of the crystalline lens works following the position of the moving display, and the adjustment distance Dynamic optical correction is realized. And since the control of the reproduction position of the gazing point is performed with the movement of the display, the position of the display can be matched or brought close to the reproduction position of the gazing point. It works at the position of or near the position. Accordingly, during observation, the convergence distance and the adjustment distance can be matched or brought close to each other. Therefore, compared with the conventional method of controlling the reproduction position of the gazing point only by changing the amount of parallax between the image for the left eye and the image for the right eye, eye strain due to inconsistency in the visual system is suppressed. Will be able to.

また、注視点の再生位置の制御は、ディスプレイの移動を伴う形で行われるので、前述した特許文献1に記載された単焦点レンズを用いて光学補正を行う方法の場合に比べ、補正範囲が広範になり、多様な立体像の再生位置への対応が可能となる。   In addition, since the control of the reproduction position of the gazing point is performed with the movement of the display, the correction range is larger than in the case of the optical correction using the single focus lens described in Patent Document 1 described above. It becomes wide and can cope with the reproduction position of various stereoscopic images.

さらに、観察者とディスプレイとの間にテレセントリック光学系が配置されているので、ディスプレイが前後に移動しても、視野角(画角)を一定または略一定に保つことができるため、ズームの機構を伴わない光学補正が実現される。   In addition, since a telecentric optical system is arranged between the observer and the display, the viewing angle (viewing angle) can be kept constant or substantially constant even when the display moves back and forth. Optical correction without accompanying is realized.

また、ディスプレイを移動させると、上記の如く視野角は一定または略一定に保たれるが、視線方向は変化するので、従来の方法による観察の場合と同様に、立体映像の奥行き感(飛び出し感)の制御を容易に行うことが可能となる。   When the display is moved, the viewing angle is kept constant or substantially constant as described above, but the line-of-sight direction changes. ) Can be easily controlled.

そして、以上のように、ディスプレイの物理的な位置移動と、テレセントリック光学系の屈折を利用することで、立体映像観察における輻輳開散運動が誘発され、これらにより前記目的が達成される。   As described above, by utilizing the physical position movement of the display and the refraction of the telecentric optical system, the convergence and diverging motion in stereoscopic image observation is induced, and the above-described purpose is achieved.

また、前述した立体映像呈示装置において、画像表示処理手段は、左眼用画像内の注視点とこれに対応する右眼用画像内の注視点とがディスプレイの画面上の左右方向の中央位置で重なる状態でこれらの左眼用画像および右眼用画像を表示する処理を行う構成とされていることが望ましい。   Further, in the above-described stereoscopic video presenting apparatus, the image display processing means is configured such that the gazing point in the left-eye image and the corresponding gazing point in the right-eye image are at the center position in the horizontal direction on the display screen. It is desirable that the processing for displaying these left-eye image and right-eye image in a state of overlapping is performed.

このように左眼用画像内の注視点と右眼用画像内の注視点とを重ねる処理を行う構成とした場合には、注視点の再生位置とディスプレイの位置とを一致させることができるため、輻輳がディスプレイの画像呈示面の位置に働くようになる。従って、輻輳と調節とが共にディスプレイの画像呈示面の位置に働くので、観察中、輻輳距離と調節距離とを常に一致させることが可能となる。このため、視覚系の不整合に基づく眼精疲労を、より一層抑えることができるようになる。   In this way, when the processing for overlapping the gazing point in the image for the left eye and the gazing point in the image for the right eye is performed, the reproduction position of the gazing point and the display position can be matched. , The congestion works on the position of the image display surface of the display. Therefore, both the convergence and the adjustment act on the position of the image display surface of the display, so that the convergence distance and the adjustment distance can always be matched during observation. For this reason, it is possible to further suppress eye strain based on visual system mismatch.

さらに、前述した立体映像呈示装置において、画像表示処理手段は、ディスプレイの画面上に注視点を含む近景画像を構成する左眼用近景画像および右眼用近景画像を表示する処理を行う近景画像表示処理手段と、ディスプレイの画面上に注視点よりも遠方に位置する背景となる遠景画像を構成する左眼用遠景画像および右眼用遠景画像を表示する処理を行う遠景画像表示処理手段とを含んで構成され、制御手段は、制御信号を駆動手段に送ることにより、近景画像内に設定された注視点を再生させる位置の奥行き方向の変化に応じてディスプレイを移動させる構成とされ、近景画像表示処理手段は、左眼用近景画像内の注視点とこれに対応する右眼用近景画像内の注視点とがディスプレイの画面上の左右方向の中央位置で重なる状態でこれらの左眼用近景画像および右眼用近景画像を表示する処理を行う構成とされ、遠景画像表示処理手段は、ディスプレイの前方または後方への移動に伴って左眼用遠景画像および右眼用遠景画像をそれぞれ交差方向または同側方向にシフトさせる処理を行う構成とされていることが望ましい。   Further, in the above-described stereoscopic video presenting apparatus, the image display processing means performs a process of displaying a left-eye foreground image and a right-eye foreground image constituting a foreground image including a gazing point on a display screen. Processing means and distant view image display processing means for performing processing for displaying a distant view image for the left eye and a distant view image for the right eye constituting a distant view image as a background located farther from the gazing point on the display screen. The control means is configured to move the display in accordance with a change in the depth direction of the position for reproducing the gazing point set in the foreground image by sending a control signal to the drive means, and foreground image display The processing means performs processing in a state where the gazing point in the left-eye foreground image and the corresponding gazing point in the right-eye foreground image overlap at the horizontal center position on the display screen. The left-eye foreground image and the right-eye foreground image are displayed, and the far-field image display processing means is adapted to move the display forward or backward to move the left-eye foreground image and the right-eye foreground image. It is desirable that the image is shifted in the cross direction or the same direction.

このように近景画像についてディスプレイの移動により注視点の再生位置の制御を行い、かつ、遠景画像についてディスプレイの移動に伴って左右の画像をシフトさせる処理を行う構成とした場合には、注視点を含む近景画像については、輻輳距離と調節距離とを常に一致させることにより、視覚系の不整合に基づく眼精疲労を抑えることが可能となり、遠景画像については、ディスプレイの移動に伴って生じた視差変化をキャンセルし、遠景画像を一定の奥行き距離に保つことが可能となる。   As described above, when the processing for controlling the reproduction position of the gazing point is performed by moving the display for the foreground image and the processing for shifting the left and right images with the movement of the display is performed for the distant view image, the gazing point is changed. For near-field images, it is possible to suppress eye strain based on visual system inconsistencies by always matching the convergence distance and the adjustment distance, and for distant view images, the parallax caused by the movement of the display It is possible to cancel the change and keep the distant view image at a certain depth distance.

そして、前述した立体映像呈示装置において、近景画像表示処理手段は、ディスプレイの前方または後方への移動に伴って左眼用近景画像および右眼用近景画像をそれぞれ縮小または拡大する処理を行う構成としてもよい。   In the stereoscopic video presenting apparatus described above, the foreground image display processing means performs a process for reducing or enlarging the left-eye foreground image and the right-eye foreground image, respectively, as the display moves forward or backward. Also good.

このように近景画像をディスプレイの移動に伴って縮小または拡大する処理を行う構成とした場合には、注視点を含む対象(被写体)の再生位置がディスプレイの移動により前方または後方に移動した際に、その対象についての視野角を変化させることが可能となる。すなわち、自然視の状態では、物理的な大きさが変化しない対象(同一物)が前方または後方に移動すると、その対象が観察者から遠ざかったときには視野角が小さくなり、観察者に近づいたときには視野角が大きくなるのに対し、テレセントリック光学系を配置した場合には、ディスプレイを移動させて注視点を含む対象を前方または後方に移動させても、視野角は一定または略一定に保たれるので、自然視の状態とは異なる見え方になり、その対象の見かけ上の大きさが変化してしまう。従って、ディスプレイが前方に移動して観察者から遠ざかったときには近景画像を縮小して視野角を小さくし、一方、ディスプレイが後方に移動して観察者に近づいたときには近景画像を拡大して視野角を大きくすることにより、自然視の状態と同じ見え方にすることが可能となる。   When the processing for reducing or enlarging the foreground image with the movement of the display is performed as described above, when the reproduction position of the target (subject) including the gazing point is moved forward or backward by the movement of the display, The viewing angle of the object can be changed. That is, in a natural vision state, when an object (the same object) whose physical size does not change moves forward or backward, the viewing angle decreases when the object moves away from the observer, and when the object approaches the observer When the telecentric optical system is arranged, the viewing angle is kept constant or substantially constant even if the object including the gazing point is moved forward or backward when the telecentric optical system is arranged. Therefore, it looks different from the state of natural vision, and the apparent size of the object changes. Therefore, when the display moves forward and away from the observer, the near-field image is reduced to reduce the viewing angle, while when the display moves backward and approaches the observer, the near-field image is enlarged and the viewing angle is increased. By increasing the value, it becomes possible to make it look the same as in the natural vision state.

また、前述した立体映像呈示装置において、観察者の左眼および/または右眼の水晶体の屈折値を測定する水晶体屈折値測定手段を備え、この水晶体屈折値測定手段による測定結果が、近景画像表示処理手段による近景画像の表示処理、遠景画像表示処理手段による遠景画像の表示処理、またはディスプレイを移動させるために行われる制御手段による駆動手段の動作制御処理のうちの少なくとも一つの処理にフィードバックされる構成とされていることが望ましい。   The stereoscopic image presenting apparatus described above further includes a lens refraction value measuring unit that measures the refraction value of the lens of the left eye and / or the right eye of the observer, and the measurement result by the lens refraction value measuring unit is displayed in the foreground image display. Feedback is provided to at least one of display processing of the foreground image by the processing means, display processing of the distant view image by the distant view image display processing means, or operation control processing of the driving means by the control means performed to move the display. It is desirable to have a configuration.

このように水晶体屈折値測定手段による測定結果を立体映像の呈示処理にフィードバックさせる構成とした場合には、観察者の実際の観察状況に即して適切な立体映像の呈示を行うことが可能となる。例えば、時間情報をフィードバックし、観察者による調節の追従速度に応じて、注視点の再生位置の制御の速度を変化させたり、距離情報をフィードバックし、近視の観察者に対してボケのない立体映像を呈示したりすること等が可能となる。   In this way, when the measurement result by the lens refraction value measuring means is configured to be fed back to the stereoscopic image presentation process, it is possible to present an appropriate stereoscopic image in accordance with the actual observation state of the observer. Become. For example, the time information is fed back, the speed of control of the reproduction position of the gazing point is changed according to the follow-up speed of the adjustment by the observer, the distance information is fed back, and the three-dimensional object that is not blurred to the myopic observer It is possible to present an image.

以上に述べたように本発明によれば、ディスプレイを前後に移動させて注視点の再生位置の制御を行うので、視覚系の不整合を解消または軽減して眼精疲労を抑えることができ、かつ、多様な立体像の再生位置に対応することができるうえ、観察者とディスプレイとの間にテレセントリック光学系を配置したので、ディスプレイが移動しても視野角を一定または略一定に保つことができるという効果がある。   As described above, according to the present invention, the playback position of the gazing point is controlled by moving the display back and forth, so that eye strain can be suppressed by eliminating or reducing inconsistencies in the visual system, In addition, it can handle various stereoscopic image playback positions, and a telecentric optical system is placed between the viewer and the display, so that the viewing angle can be kept constant or substantially constant even when the display moves. There is an effect that can be done.

以下に本発明の一実施形態について図面を参照して説明する。図1には、本実施形態の立体映像呈示装置10の全体構成が示されている。図2は、装置本体20の縦断面図である。図3には、立体映像呈示装置10の構成が信号や光の流れとともに示されている。図4は、マイクロポールを実装した液晶ディスプレイ21の構造の説明図である。また、図5は、テレセントリック光学系22により形成される光路の説明図であり、図6は、物理的な画面とテレセントリック光学系22を通した見かけの画面との関係の説明図であり、図7〜図10は、遠景画像の表示処理の説明図である。さらに、図11は、水晶体の屈折値の測定方法の説明図であり、図12および図13には、水晶体の屈折値の実測を行った比較実験結果が示されている。   An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 shows an overall configuration of a stereoscopic video presenting apparatus 10 of the present embodiment. FIG. 2 is a longitudinal sectional view of the apparatus main body 20. In FIG. 3, the configuration of the stereoscopic image presentation device 10 is shown along with the flow of signals and light. FIG. 4 is an explanatory diagram of the structure of the liquid crystal display 21 on which a micropole is mounted. 5 is an explanatory diagram of an optical path formed by the telecentric optical system 22, and FIG. 6 is an explanatory diagram of a relationship between a physical screen and an apparent screen through the telecentric optical system 22. 7 to 10 are explanatory diagrams of distant view image display processing. Further, FIG. 11 is an explanatory diagram of a method for measuring the refractive value of the crystalline lens, and FIGS. 12 and 13 show the results of a comparative experiment in which the refractive value of the crystalline lens was actually measured.

図1および図3において、立体映像呈示装置10は、立体映像を再生する装置本体20と、装置本体20に画像信号を供給するコンピュータ40と、装置本体20に制御信号を供給するコントローラ70と、立体映像観察者の水晶体の屈折値を測定する水晶体屈折値測定手段である赤外線オプトメータ80とを備えている。   1 and 3, a stereoscopic video presentation device 10 includes a device main body 20 that reproduces a stereoscopic video, a computer 40 that supplies an image signal to the device main body 20, a controller 70 that supplies a control signal to the device main body 20, And an infrared optometer 80 which is a lens refraction value measuring means for measuring the refraction value of the lens of the stereoscopic image observer.

図2および図3において、装置本体20は、左眼用画像および右眼用画像が画面表示される液晶ディスプレイ(LCD:Liquid Crystal Display)21と、観察者と液晶ディスプレイ21との間に配置されたテレセントリック光学系22と、液晶ディスプレイ21をテレセントリック光学系22に対して近接離隔する方向に移動させる駆動手段であるステッピングモータ23と、装置本体20の筐体に形成された覗き窓24(図1参照)の近傍に配置された左眼用および右眼用の偏光フィルタ25,26(図7参照)と、覗き窓24の近傍であって偏光フィルタ25,26よりも手前側(観察者側)の位置に配置されたダイクロックミラー27とを含んで構成されている。   2 and 3, the apparatus main body 20 is arranged between a liquid crystal display (LCD) 21 on which a left-eye image and a right-eye image are displayed on the screen, and between an observer and the liquid crystal display 21. The telecentric optical system 22, the stepping motor 23 that is a driving means for moving the liquid crystal display 21 in the direction of approaching and separating from the telecentric optical system 22, and the viewing window 24 formed in the housing of the apparatus main body 20 (FIG. 1). (See FIG. 7), and near the viewing window 24 and in front of the polarizing filters 25 and 26 (observer side). And a dichroic mirror 27 arranged at the position of.

図1および図3において、コンピュータ40は、マウスやキーボード等の入力手段41と、作業や監視等のために左眼用画像および右眼用画像が重ねられた状態で画面表示される作業用ディスプレイ42と、立体映像の呈示に必要な各種処理を行う処理手段50と、処理手段50による処理で用いられるデータを記憶する記憶手段60とを含んで構成されている。   1 and 3, the computer 40 is a work display that is displayed on the screen in a state where an input means 41 such as a mouse and a keyboard and an image for the left eye and an image for the right eye are overlaid for work and monitoring. 42, a processing unit 50 that performs various processes necessary for presenting a stereoscopic video, and a storage unit 60 that stores data used in processing by the processing unit 50.

図3において、処理手段50は、装置本体20を構成する液晶ディスプレイ21の画面上に左眼用画像および右眼用画像を表示する処理を行う画像表示処理手段51と、画像表示処理手段51による左眼用画像および右眼用画像の表示処理と同期させてステッピングモータ23の動作制御を行うための制御信号をコントローラ70に送信する制御信号送信手段52とを含んで構成されている。   In FIG. 3, the processing means 50 includes an image display processing means 51 that performs processing for displaying a left-eye image and a right-eye image on the screen of the liquid crystal display 21 that constitutes the apparatus main body 20, and an image display processing means 51. The control signal transmitting means 52 is configured to transmit a control signal for controlling the operation of the stepping motor 23 to the controller 70 in synchronization with the display processing of the left eye image and the right eye image.

画像表示処理手段51は、液晶ディスプレイ21の画面上に注視点を含む近景画像を構成する左眼用近景画像および右眼用近景画像を表示する処理を行う近景画像表示処理手段51Aと、液晶ディスプレイ21の画面上に注視点よりも遠方に位置する背景となる遠景画像を構成する左眼用遠景画像および右眼用遠景画像を表示する処理を行う遠景画像表示処理手段51Bとを含んで構成されている。また、画像表示処理手段51は、作業用ディスプレイ42にも、液晶ディスプレイ21と同じ画面を表示する処理を行う。   The image display processing means 51 includes a foreground image display processing means 51A that performs processing for displaying a left-eye foreground image and a right-eye foreground image that form a foreground image including a gazing point on the screen of the liquid crystal display 21, and a liquid crystal display. 21 includes a distant view image display processing means 51B for performing processing for displaying a distant view image for the left eye and a distant view image for the right eye that form a distant view image that is a background located farther than the gazing point. ing. Further, the image display processing means 51 performs processing for displaying the same screen as the liquid crystal display 21 on the work display 42.

近景画像表示処理手段51Aは、本実施形態では、左眼用近景画像内の注視点とこれに対応する右眼用近景画像内の注視点とが液晶ディスプレイ21の画面上の左右方向の中央位置で重なる状態で、これらの左眼用近景画像および右眼用近景画像を表示する処理を行うものである。また、近景画像表示処理手段51Aは、ユーザの選択があった場合には、液晶ディスプレイ21の前方または後方への移動に伴って左眼用近景画像および右眼用近景画像をそれぞれ縮小または拡大する処理も行う。すなわち、液晶ディスプレイ21が基準位置(例えば、2.0D=仮想距離50cm相当)よりも前方(観察者から遠ざかる方向)に移動した場合には、左眼用近景画像および右眼用近景画像は、それぞれ縮小され、一方、液晶ディスプレイ21が基準位置よりも後方(観察者に近づく方向)に移動した場合には、左眼用近景画像および右眼用近景画像は、それぞれ拡大される。   In this embodiment, the foreground image display processing means 51A is configured such that the gazing point in the left-eye foreground image and the corresponding gazing point in the right-eye foreground image correspond to the center position in the horizontal direction on the screen of the liquid crystal display 21. In this state, the processing for displaying these left-eye foreground image and right-eye foreground image is performed. When the user selects, the foreground image display processing means 51A reduces or enlarges the left-eye foreground image and the right-eye foreground image as the liquid crystal display 21 moves forward or backward, respectively. Processing is also performed. That is, when the liquid crystal display 21 is moved forward (in a direction away from the observer) from a reference position (for example, 2.0D = equivalent to a virtual distance of 50 cm), the left-eye foreground image and the right-eye foreground image are On the other hand, when the liquid crystal display 21 is moved backward (in the direction approaching the observer) from the reference position, the left-eye foreground image and the right-eye foreground image are respectively enlarged.

遠景画像表示処理手段51Bは、液晶ディスプレイ21の前方または後方への移動に伴って左眼用遠景画像および右眼用遠景画像をそれぞれ交差方向または同側方向にシフトさせる処理を行うものである。すなわち、液晶ディスプレイ21が基準位置(例えば、2.0D=仮想距離50cm相当)よりも前方(観察者から遠ざかる方向)に移動した場合には、左眼用遠景画像および右眼用遠景画像は、それぞれ交差方向にシフトされ、一方、液晶ディスプレイ21が基準位置よりも後方(観察者に近づく方向)に移動した場合には、左眼用遠景画像および右眼用遠景画像は、それぞれ同側方向にシフトされる(図7、図8参照)。   The distant view image display processing means 51B performs a process of shifting the distant view image for the left eye and the distant view image for the right eye in the crossing direction or the ipsilateral direction as the liquid crystal display 21 moves forward or backward. That is, when the liquid crystal display 21 is moved forward (in a direction away from the observer) from a reference position (for example, 2.0D = equivalent to a virtual distance of 50 cm), the left-eye distant view image and the right-eye distant view image are When the liquid crystal display 21 is moved backward (in the direction approaching the observer) from the reference position, the left-eye far view image and the right-eye far view image are respectively in the same direction. Shifted (see FIGS. 7 and 8).

記憶手段60は、立体映像コンテンツとしての画像を記憶する画像記憶手段61と、近景画像および遠景画像の再生情報を記憶する再生情報記憶手段62と、各観察者の情報を個別に記憶するユーザ情報記憶手段63とを含んで構成されている。   The storage unit 60 includes an image storage unit 61 that stores an image as stereoscopic video content, a reproduction information storage unit 62 that stores reproduction information of a foreground image and a distant view image, and user information that stores information on each observer individually. The storage means 63 is included.

画像記憶手段61には、立体映像コンテンツとして、近景画像および遠景画像が記憶されている。   The image storage means 61 stores a foreground image and a distant view image as stereoscopic video content.

近景画像は、例えば蝶1等の画像(図1参照)であり、複数枚の一連の画像群(時系列で描画内容が変化する画像群、例えば蝶が羽を動かしている場合等のように動作を表現する時系列の画像群)により構成され、左右の眼で異なる映像を呈示する場合には、左右それぞれについて一連の画像群により構成される。従って、左右の眼に同じ映像を呈示する場合には、一枚の画像を左眼用近景画像および右眼用近景画像の両方として用いるので、複数枚の一連の画像群は、一組用意すればよく、この場合には、近景画像自体(例えば蝶そのもの)は、立体像ではなく平面的に見え、近景画像の前後の移動や、遠景画像との相対的な位置関係で奥行き感が生じることになる。一方、左右の眼で異なる映像を呈示する場合には、同じ瞬間に液晶ディスプレイ21に画面表示される一対の左眼用近景画像および右眼用近景画像は、異なる画像であるため、近景画像自体(例えば蝶そのもの)にも凹凸感が生じ、立体像として再生される。   The foreground image is, for example, an image of the butterfly 1 or the like (see FIG. 1), and a series of a plurality of image groups (an image group whose drawing contents change in time series, for example, when the butterfly moves its wings) In the case where different images are presented by the left and right eyes, the left and right eyes are each composed of a series of image groups. Therefore, when the same image is presented to the left and right eyes, a single image is used as both the left-eye foreground image and the right-eye foreground image, so a set of a plurality of image groups is prepared. In this case, the foreground image itself (for example, the butterfly itself) looks planar rather than a three-dimensional image, and a sense of depth occurs due to the movement of the foreground image back and forth and the relative positional relationship with the distant view image. become. On the other hand, when different images are presented by the left and right eyes, the pair of left-eye foreground image and right-eye foreground image displayed on the liquid crystal display 21 at the same moment are different images, and thus the foreground image itself. (For example, the butterfly itself) also has an uneven feeling and is reproduced as a three-dimensional image.

遠景画像は、例えば背景の山2等の画像(図1参照)であり、1枚(左右の眼に同じ映像を呈示する場合)または2枚(左右の眼に異なる映像を呈示する場合)の画像により構成される。遠景画像についても、近景画像の場合と同様であり、左眼用遠景画像と右眼用遠景画像とに同じ画像を用いれば、遠景画像自体(例えば山そのもの)は平面的に見え、一方、左眼用遠景画像と右眼用遠景画像とに異なる画像を用いれば、遠景画像自体(例えば山そのもの)にも凹凸感が生じ、立体像として再生される。   The distant view image is, for example, an image of the background mountain 2 or the like (see FIG. 1). One image (when the same image is presented to the left and right eyes) or two images (when different images are presented to the left and right eyes) Consists of images. The distant view image is the same as the case of the foreground image. If the same image is used for the left eye far view image and the right eye far view image, the distant view image itself (for example, the mountain itself) looks planar, while the left view image When different images are used for the far-eye image for the eye and the far-eye image for the right eye, the distant view image itself (for example, the mountain itself) also has an uneven feeling and is reproduced as a stereoscopic image.

再生情報記憶手段62には、近景画像の動きのシーケンス(時系列の奥行き方向の再生位置であり、時間とディオプタ(D)単位の位置とを対にして幾つか指定して設定する。ユーザが自在に編集することができ、再生位置は、例えば、2.5D(40cm)から無限遠までの範囲で設定できる。)、近景画像の切替間隔(例えば、デフォルト値は1.0秒で、0.1秒〜30.0秒の間で設定可能)、近景画像透過色、オペレーティングシステム標準の色選択、近景画像の再生位置の変化に伴って液晶ディスプレイ21の実際の画面上での近景画像サイズを縮小・拡大するか否かの選択、近景画像の画像呈示面上での視野角(例えば、デフォルト値は4度)、遠景画像の再生位置までの距離(例えばデフォルト値が100mで、1m〜1000mの間で設定可能)、近景画像が指定された2点間を移動するときにメートル(m)の次元でリニアに動くかディオプタ(D)の次元でリニアに動くかの選択等の各種情報が記憶される。なお、ディオプタ(D)単位の数値は、メートル距離の逆数である。   The playback information storage means 62 designates and sets several sequences of foreground image motion (time-series playback positions in the depth direction, time and position in diopter (D) units). The playback position can be set in a range from 2.5D (40 cm) to infinity, for example.), Foreground image switching interval (for example, the default value is 1.0 second, 0 .. can be set between 1 second and 30.0 seconds), foreground image transmission color, operating system standard color selection, and foreground image size on the actual screen of the liquid crystal display 21 as the playback position of the foreground image changes Selection of whether to reduce or enlarge the image, viewing angle of the foreground image on the image display surface (for example, the default value is 4 degrees), distance to the playback position of the foreground image (for example, the default value is 100 m, 1 m to 10 Various settings such as selection of whether to move linearly in the dimension of meter (m) or linearly in the dimension of diopter (D) when the foreground image moves between two designated points. Is memorized. In addition, the numerical value of a diopter (D) unit is a reciprocal number of meter distance.

ユーザ情報記憶手段63には、ユーザ名、左右の眼の間隔、屈折値(左S値、左C値、右S値、右C値)、補正値の計算方法(左眼のS+C/2とするか、右眼のS+C/2とするか、それらの平均とするか、手動編集とするかの別)、補正値等の各種情報が記憶される。なお、補正値は、赤外線オプトメータ80により観察中に測定した屈折値を用いてリアルタイムで計算してもよい。   The user information storage means 63 stores the user name, the distance between the left and right eyes, a refraction value (left S value, left C value, right S value, right C value), and a correction value calculation method (left eye S + C / 2). And the right eye S + C / 2, the average of them, or manual editing), and various information such as correction values are stored. The correction value may be calculated in real time using the refraction value measured during observation with the infrared optometer 80.

そして、処理手段50に含まれる各手段51,52は、コンピュータ40の本体の内部に設けられた中央演算処理装置(CPU)、およびこのCPUの動作手順を規定する一つまたは複数のプログラムにより実現される。   Each means 51 and 52 included in the processing means 50 is realized by a central processing unit (CPU) provided inside the main body of the computer 40 and one or a plurality of programs that define the operation procedure of the CPU. Is done.

また、記憶手段60に含まれる各手段61〜63は、例えばハードディスク等により好適に実現されるが、記憶容量やアクセス速度等に問題が生じない範囲であれば、ROM、EEPROM、フラッシュ・メモリ、RAM、MO、CD−ROM、CD−R、CD−RW、DVD−ROM、DVD−RAM、FD、磁気テープ、あるいはこれらの組合せ等を採用してもよい。   Each means 61 to 63 included in the storage means 60 is preferably realized by, for example, a hard disk or the like. However, as long as there is no problem in storage capacity, access speed, etc., ROM, EEPROM, flash memory, RAM, MO, CD-ROM, CD-R, CD-RW, DVD-ROM, DVD-RAM, FD, magnetic tape, or a combination thereof may be employed.

図2および図3において、制御信号送信手段52から、画像表示処理手段51による左眼用近景画像および右眼用近景画像の表示処理と同期させてコントローラ70に制御信号が送信されると、コントローラ70では、この信号をステッピングモータ23の動作制御を行うための信号に変換してステッピングモータ23に供給する。そして、ステッピングモータ23は、コントローラ70から供給される制御信号に基づき動作し、図示されないベルト等を介して液晶ディスプレイ21を前後に移動させる。これにより、左眼用近景画像内および右眼用近景画像内に対応点としてそれぞれ設定された注視点の再生位置の奥行き方向の変化に応じ、液晶ディスプレイ21が前後に移動するようになっている。従って、制御信号送信手段52およびコントローラ70により、ステッピングモータ23の動作制御を行って液晶ディスプレイ21を前後に移動させる制御手段71が構成されている。本実施形態では、近景画像表示処理手段51Aにより、左眼用近景画像内の注視点とこれに対応する右眼用近景画像内の注視点とが液晶ディスプレイ21の画面上の左右方向の中央位置で重なる状態で表示されるので、制御手段71は、制御信号をステッピングモータ23に送ることにより、近景画像内に設定された注視点の再生位置に液晶ディスプレイ21を移動させる制御を行う。   2 and 3, when a control signal is transmitted from the control signal transmission unit 52 to the controller 70 in synchronization with the display processing of the left-eye foreground image and the right-eye foreground image by the image display processing unit 51, the controller In 70, this signal is converted into a signal for controlling the operation of the stepping motor 23 and supplied to the stepping motor 23. The stepping motor 23 operates based on a control signal supplied from the controller 70, and moves the liquid crystal display 21 back and forth via a belt or the like (not shown). As a result, the liquid crystal display 21 moves back and forth in accordance with the change in the depth direction of the reproduction position of the gazing point set as the corresponding point in the left-eye foreground image and the right-eye foreground image. . Therefore, the control signal transmitting means 52 and the controller 70 constitute a control means 71 that controls the operation of the stepping motor 23 and moves the liquid crystal display 21 back and forth. In the present embodiment, the foreground image display processing means 51A causes the gazing point in the left-eye foreground image and the corresponding gazing point in the right-eye foreground image to be centered in the horizontal direction on the screen of the liquid crystal display 21. Therefore, the control means 71 performs control to move the liquid crystal display 21 to the reproduction position of the gazing point set in the foreground image by sending a control signal to the stepping motor 23.

図4において、液晶ディスプレイ21は、LCDパネル21Aと、このLCDパネル21Aの表示画面の手前側(観察者側)に装着されたマイクロポール(μPol)21Bとを含んで構成されている。図4に示す如く、マイクロポール21Bは、微細な偏光素子で構成された光学系であり、LCDパネル21Aの画素のラインに合わせ、1ライン(横方向に走る各ライン)毎に交互に直交した偏光素子を配置して形成されている。例えば、N行目のライン21B(N)と、(N+2)行目のライン21B(N+2)とが、同じα度の偏光方向であり、(N+1)行目のライン21B(N+1)と、(N+3)行目のライン21B(N+3)とが、同じβ度の偏光方向であり、α度とβ度との差が90度である。観察にあたっては、それらに対応して互いに偏光方向を直交させた偏光フィルタ25,26(図7参照)を用いることで、左眼用画像と右眼用画像との分離を行っている。なお、左眼用画像を偶数ラインとし、右眼用画像を奇数ラインとするか、あるいはその逆とするかは、選択できるようになっている。   In FIG. 4, the liquid crystal display 21 includes an LCD panel 21A and a micropole (μPol) 21B attached to the front side (observer side) of the display screen of the LCD panel 21A. As shown in FIG. 4, the micropole 21B is an optical system composed of fine polarizing elements, and is alternately orthogonal to each line (each line running in the horizontal direction) according to the pixel line of the LCD panel 21A. A polarizing element is arranged. For example, the Nth line 21B (N) and the (N + 2) th line 21B (N + 2) have the same α-degree polarization direction, and the (N + 1) th line 21B (N + 1) and ( The line 21B (N + 3) in the (N + 3) th row has the same polarization direction of β degrees, and the difference between α degrees and β degrees is 90 degrees. In the observation, the left-eye image and the right-eye image are separated by using the polarization filters 25 and 26 (see FIG. 7) whose polarization directions are orthogonal to each other correspondingly. Note that it is possible to select whether the left-eye image is an even line and the right-eye image is an odd line, or vice versa.

図2および図5において、テレセントリック光学系22は、観察者に近い方から、第1レンズ22A、第2レンズ22B、第3レンズ22C、および第4レンズ22Dをこの順に配置して構成されている。表1には、これらの4つの各レンズ22A,22B,22C,22Dの仕様が示されている。   2 and 5, the telecentric optical system 22 is configured by arranging a first lens 22A, a second lens 22B, a third lens 22C, and a fourth lens 22D in this order from the side closer to the observer. . Table 1 shows the specifications of each of these four lenses 22A, 22B, 22C, 22D.

Figure 2005165032
Figure 2005165032

表1において、表面または裏面の別については、観察者の側を向いた面を表面としている。また、間隔については、表1中の一番上側の間隔が、左右の眼の位置と第1レンズ22Aの表面の中心位置との間隔であり、上から2番目の間隔が、第1レンズ22Aの表面の中心位置と裏面の中心位置との間隔(第1レンズ22Aの中心部分の厚み)であり、上から3番目の間隔が、第1レンズ22Aの裏面の中心位置と第2レンズ22Bの表面の中心位置との間隔であり、上から4番目の間隔が、第2レンズ22Bの表面の中心位置と裏面の中心位置との間隔(第2レンズ22Bの中心部分の厚み)であり、以下同様で、一番下側の間隔が、第4レンズ22Dの裏面の中心位置と液晶ディスプレイ21の基準位置(2.0D=仮想距離50cm相当の位置)との間隔である。   In Table 1, with respect to the difference between the front surface and the back surface, the surface facing the observer is the front surface. As for the interval, the uppermost interval in Table 1 is the interval between the positions of the left and right eyes and the center position of the surface of the first lens 22A, and the second interval from the top is the first lens 22A. Is the distance between the center position of the front surface and the center position of the back surface (the thickness of the center portion of the first lens 22A), and the third distance from the top is the center position of the back surface of the first lens 22A and the second lens 22B. The distance from the center position of the front surface, and the fourth distance from the top is the distance between the center position of the front surface of the second lens 22B and the center position of the back surface (the thickness of the center portion of the second lens 22B), Similarly, the lowermost interval is the interval between the center position of the back surface of the fourth lens 22D and the reference position of the liquid crystal display 21 (2.0D = position corresponding to a virtual distance of 50 cm).

図5に示すように、テレセントリック光学系22を通過して形成される光路を考慮した場合には、液晶ディスプレイ21の位置がテレセントリック光学系22から遠ざかっていくと、すなわち観察者から遠ざかっていくと、左眼の視線方向(画面の中心を視る方向)は、矢印E1,E2,E3の如く、また、右眼の視線方向(画面の中心を視る方向)は、矢印F1,F2,F3の如く、いずれも外向きに広がって輻輳角が小さくなっていき、徐々に遠くを見ている状態に変化していく。これに対し、左右の眼の視線方向は変化するものの、視線方向が矢印E1,E2,E3または矢印F1,F2,F3のときの画面全体を視る視野角φ1,φ2,φ3は、一定または略一定に保たれる。   As shown in FIG. 5, when an optical path formed through the telecentric optical system 22 is taken into consideration, if the position of the liquid crystal display 21 moves away from the telecentric optical system 22, that is, moves away from the observer. The left eye gaze direction (direction in which the center of the screen is viewed) is as indicated by arrows E1, E2, and E3, and the right eye gaze direction (direction in which the center of the screen is viewed) is indicated by arrows F1, F2, and F3. As shown in the figure, each of them spreads outward, the angle of convergence becomes smaller, and gradually changes to a state of looking far away. On the other hand, although the gaze directions of the left and right eyes change, the viewing angles φ1, φ2, and φ3 for viewing the entire screen when the gaze directions are arrows E1, E2, E3 or arrows F1, F2, F3 are constant or It is kept almost constant.

図6において、左右の眼から物理的な距離Zの位置にある液晶ディスプレイ21の実際の画面(物理的な画面)を、テレセントリック光学系22を通して右眼で見た場合には、第1レンズ22Aの表面と右眼との間に形成された光路KL,KRにより、画面全体を視る視野角φが形成される。左眼で見た場合も左右方向に反転するだけで同様である。このとき、左眼および右眼の視線方向(液晶ディスプレイ21の実際の画面の中心を視る方向)を矢印Eおよび矢印Fの方向とすると、矢印Eおよび矢印Fの方向の延長線(図中二点鎖線)どうしの交差する位置が見かけの画面Gの位置となり、左右の眼からこの見かけの画面Gの位置までの距離dを仮想距離と呼ぶものとする。そして、仮想距離dの位置にある見かけの画面Gのサイズは、光路KL,KRの各延長線(図中二点鎖線)と見かけの画面Gとが交差する点どうしの間隔として定まる。また、液晶ディスプレイ21の実際の画面(物理的な画面)上の任意の位置の点TZは、仮想距離dの位置にある見かけの画面G上では、光路KTの延長線(図中二点鎖線)と見かけの画面Gとが交差する位置にある点Tdとして見える。例えば、液晶ディスプレイ21の実際の画面サイズが6インチである場合に、見かけの画面Gが仮想距離d=50cm(0.5m)の位置になるように液晶ディスプレイ21を移動させたとすると、見かけの画面Gのサイズは15インチとなり、この際の視野角φは約34度となる。なお、本実施形態では、見かけの画面Gが仮想距離d=d1=50cm(0.5m)となる位置(ディオプタ単位では、1/0.5=2.0D)を基準位置とする。 In FIG. 6, when the actual screen (physical screen) of the liquid crystal display 21 located at a physical distance Z from the left and right eyes is viewed with the right eye through the telecentric optical system 22, the first lens 22 </ b> A. A viewing angle φ for viewing the entire screen is formed by the optical paths KL and KR formed between the surface of the lens and the right eye. The same applies to the left eye when it is reversed in the horizontal direction. At this time, if the line-of-sight directions of the left eye and the right eye (the direction of viewing the center of the actual screen of the liquid crystal display 21) are the directions of arrows E and F, the extension lines in the directions of arrows E and F (in the figure) The position where the two-dot chain line intersects becomes the position of the apparent screen G, and the distance d from the left and right eyes to the position of the apparent screen G is called a virtual distance. The size of the apparent screen G at the position of the virtual distance d is determined as an interval between points where the extended lines (two-dot chain lines in the figure) of the optical paths KL and KR and the apparent screen G intersect. Further, the point TZ at an arbitrary position on the actual screen (physical screen) of the liquid crystal display 21 is an extension line of the optical path KT (two-dot chain line in the figure) on the apparent screen G at the position of the virtual distance d. ) And the apparent screen G appear as a point Td at the position where it intersects. For example, when the actual screen size of the liquid crystal display 21 is 6 inches and the liquid crystal display 21 is moved so that the apparent screen G is positioned at the virtual distance d = 50 cm (0.5 m), The size of the screen G is 15 inches, and the viewing angle φ at this time is about 34 degrees. In the present embodiment, the position where the apparent screen G is the virtual distance d = d 1 = 50 cm (0.5 m) (1 / 0.5 = 2.0 D in diopter units) is set as the reference position.

図11において、偏光フィルタ25,26と左右の眼との間には、赤外線の波長だけを反射するダイクロックミラー27が、偏光フィルタ25,26に対して45度傾いた状態で配置されている。赤外線オプトメータ80は、水晶体の厚みの変化に基づいて屈折値を測定する機器であり、立体映像を観察中の観察者の水晶体の屈折値をリアルタイムで測定するために設けられている。この赤外線オプトメータ80から発せられた赤外線は、図中点線の如く、ダイクロックミラー27で反射されて直角に曲がって水晶体に至る。そして、水晶体から出た赤外線は、再び、ダイクロックミラー27で反射されて直角に曲がり、赤外線オプトメータ80に戻る。一方、液晶ディスプレイ21から発せられた画像の光は、図中実線の如く、ダイクロックミラー27を通過し、水晶体に至る。   In FIG. 11, a dichroic mirror 27 that reflects only the infrared wavelength is disposed between the polarizing filters 25 and 26 and the left and right eyes in a state inclined by 45 degrees with respect to the polarizing filters 25 and 26. . The infrared optometer 80 is a device that measures the refraction value based on a change in the thickness of the crystalline lens, and is provided to measure the refractive value of the crystalline lens of an observer who is observing a stereoscopic image in real time. The infrared rays emitted from the infrared optometer 80 are reflected by the dichroic mirror 27 and bent at a right angle to reach the crystalline lens as indicated by the dotted line in the figure. Then, the infrared light emitted from the crystalline lens is again reflected by the dichroic mirror 27, bent at a right angle, and returned to the infrared optometer 80. On the other hand, the light of the image emitted from the liquid crystal display 21 passes through the dichroic mirror 27 and reaches the crystalline lens as shown by the solid line in the figure.

また、図3に示すように、赤外線オプトメータ80による屈折値の測定結果は、フィードバック情報として処理手段50に送信され、近景画像表示処理手段51Aによる近景画像の表示処理、遠景画像表示処理手段51Bによる遠景画像の表示処理、または液晶ディスプレイ21を移動させるために行われる制御手段71によるステッピングモータ23の動作制御処理を行う際の補正情報として用いられる。   As shown in FIG. 3, the measurement result of the refraction value by the infrared optometer 80 is transmitted as feedback information to the processing means 50, and the foreground image display processing by the foreground image display processing means 51A, the distant view image display processing means 51B. Is used as correction information when performing a distant view image display process or an operation control process of the stepping motor 23 by the control means 71 performed to move the liquid crystal display 21.

このような本実施形態においては、以下のようにして立体映像呈示装置10により観察者への立体映像の呈示が行われる。   In the present embodiment, a stereoscopic video is presented to an observer by the stereoscopic video presenting apparatus 10 as follows.

先ず、入力手段41を操作し、近景画像内の注視点の再生位置等の再生情報を設定し、再生情報記憶手段62に記憶させておくとともに、左右の眼の間隔等のユーザ情報を設定し、ユーザ情報記憶手段63に記憶させておく。なお、近景画像の注視点は、必ずしも蝶1等のような動作を表現したい対象の輪郭内(つまり、蝶1の胴体部分や羽部分や足部分等)に収まっている必要はなく、動作を表現したい対象の輪郭の外側に設定されていてもよい。   First, the input means 41 is operated to set reproduction information such as the reproduction position of the gazing point in the foreground image and store it in the reproduction information storage means 62 and also set user information such as the distance between the left and right eyes. And stored in the user information storage means 63. Note that the gaze point of the foreground image does not necessarily have to be within the contour of the object to be represented as the motion of the butterfly 1 or the like (that is, the body portion, the wing portion, or the foot portion of the butterfly 1). It may be set outside the contour of the object to be expressed.

次に、観察者が覗き窓24から装置本体20の内部を覗いている状態で、近景画像表示処理手段51Aにより、画像記憶手段61に記憶された左眼用近景画像および右眼用近景画像を液晶ディスプレイ21の画面上に表示する。この際、近景画像表示処理手段51Aは、図7に示すように、左眼用近景画像内の注視点(例えば、蝶1の胴体部分等)と、これに対応する右眼用近景画像内の注視点とが、画面の左右方向の中央位置で重なるように表示する。   Next, in the state where the observer is looking into the inside of the apparatus main body 20 from the viewing window 24, the foreground image display processing unit 51A displays the foreground image for the left eye and the foreground image for the right eye stored in the image storage unit 61. It is displayed on the screen of the liquid crystal display 21. At this time, as shown in FIG. 7, the foreground image display processing means 51 </ b> A includes a gazing point (for example, the body part of the butterfly 1) in the left-eye foreground image and the corresponding right-eye foreground image in the foreground image for the right eye. The gazing point is displayed so as to overlap at the center position in the horizontal direction of the screen.

また、近景画像表示処理手段51Aは、ユーザの選択があった場合には、図7に示すように、基準位置(仮想距離d=d1)に再現される蝶1Aを含む近景画像に対し、基準位置よりも遠方位置(仮想距離d>d1)に再現される蝶1Bを含む近景画像を縮小して表示し、一方、基準位置よりも近方位置(仮想距離d<d1)に再現される蝶1Cを含む近景画像を拡大して表示してもよい。この際の縮小・拡大の比率は、例えば仮想距離dに反比例させる。従って、何ら近景画像の縮小・拡大を行わない場合には、蝶1A、蝶1B、蝶1Cの視野角は、テレセントリック光学系22の性質により一定または略一定に保たれるので、その結果、基準位置にいる蝶1Aよりも遠方位置にいる蝶1Bの方が、見かけのサイズが大きくなり、一方、基準位置にいる蝶1Aよりも近方位置にいる蝶1Cの方が、見かけのサイズが小さくなるが、縮小・拡大を行うことにより、基準位置の蝶1Aの視野角よりも遠方の蝶1Bの視野角が小さくなり、基準位置の蝶1Aの視野角よりも近方の蝶1Cの視野角が大きくなるので、その結果、基準位置にいる蝶1Aと、遠方位置にいる蝶1Bと、近方位置にいる蝶1Cとで、見かけのサイズが同じになる。 Further, when the user selects, the foreground image display processing means 51A, as shown in FIG. 7, for the foreground image including the butterfly 1A reproduced at the reference position (virtual distance d = d 1 ) The near-field image including the butterfly 1B reproduced at a position farther than the reference position (virtual distance d> d 1 ) is reduced and displayed, while being reproduced at a position closer to the reference position (virtual distance d <d 1 ). The close-up image including the butterfly 1C to be displayed may be enlarged and displayed. In this case, the reduction / enlargement ratio is inversely proportional to the virtual distance d, for example. Therefore, when the near-field image is not reduced or enlarged, the viewing angles of the butterfly 1A, the butterfly 1B, and the butterfly 1C are kept constant or substantially constant depending on the properties of the telecentric optical system 22, and as a result, the reference The butterfly 1B located farther than the butterfly 1A at the position has a larger apparent size, while the butterfly 1C located closer to the butterfly 1A at the reference position has a smaller apparent size. However, by performing the reduction / enlargement, the viewing angle of the butterfly 1B farther than the butterfly 1A at the reference position becomes smaller, and the viewing angle of the butterfly 1C nearer than the viewing angle of the butterfly 1A at the reference position. As a result, the butterfly 1A at the reference position, the butterfly 1B at the far position, and the butterfly 1C at the near position have the same apparent size.

そして、上記のような近景画像表示処理手段51Aによる表示処理と同期させて、制御信号送信手段52は、再生情報記憶手段62に記憶された近景画像の注視点の再生位置の情報に基づきコントローラ70に制御信号を送信し、コントローラ70は、この制御信号を変換してステッピングモータ23に供給する。すると、ステッピングモータ23が動作し、液晶ディスプレイ21が近景画像内の注視点の再生位置まで移動する。例えば、近景画像内の注視点の再生位置が左右の眼の位置から見かけ上100cmの位置であれば、液晶ディスプレイ21は、見かけの画面G(図6参照)が仮想距離d=100cm(1.0D)になる位置まで移動する。なお、左眼用近景画像と右眼用近景画像とを異なる画像として近景画像自体(例えば、蝶1そのもの)に凹凸感を持たせる立体映像呈示を行う場合には、近景画像の注視点(例えば、蝶1の胴体部分)のみが仮想距離d=100cmの見かけの画面G上に再生されればよく、注視点以外の点(例えば、蝶1の羽部分や足部分)については仮想距離d=100cmの見かけの画面Gの前後に再生されてもよい。   Then, in synchronization with the display processing by the foreground image display processing unit 51A as described above, the control signal transmission unit 52 is based on the information on the reproduction position of the gazing point of the foreground image stored in the reproduction information storage unit 62. The controller 70 converts the control signal and supplies it to the stepping motor 23. Then, the stepping motor 23 operates and the liquid crystal display 21 moves to the reproduction position of the gazing point in the foreground image. For example, if the reproduction position of the gazing point in the foreground image is apparently 100 cm from the position of the left and right eyes, the liquid crystal display 21 has an apparent screen G (see FIG. 6) with a virtual distance d = 100 cm (1. 0D). In addition, when performing stereoscopic video presentation that gives the foreground image itself (for example, butterfly 1 itself) a feeling of unevenness by using the left-eye foreground image and the right-eye foreground image as different images, the gaze point of the foreground image (for example, , The body part of the butterfly 1) only needs to be reproduced on the apparent screen G with the virtual distance d = 100 cm, and for points other than the point of sight (for example, the wing part or foot part of the butterfly 1), the virtual distance d = It may be reproduced before and after the apparent screen G of 100 cm.

さらに、以上のような近景画像表示処理手段51Aによる近景画像の表示処理と併せて、遠景画像表示処理手段51Bにより、画像記憶手段61に記憶された左眼用遠景画像および右眼用遠景画像を液晶ディスプレイ21の画面上に表示する。この際、遠景画像表示処理手段51Bは、再生情報記憶手段62に記憶された遠景画像の再生位置の情報(図9の距離D)およびユーザ情報記憶手段63に記憶された左右の眼の間隔の情報(図9の距離L)等に基づき、図7に示すように、液晶ディスプレイ21が基準位置(仮想距離d=d1相当)よりも遠方(d>d1)に移動した場合には、左眼用遠景画像および右眼用遠景画像を、それぞれ交差方向にシフトし、一方、液晶ディスプレイ21が基準位置よりも近方(d<d1)に移動した場合には、左眼用遠景画像および右眼用遠景画像を、それぞれ同側方向にシフトする。 Further, in conjunction with the foreground image display processing by the foreground image display processing means 51A as described above, the far-eye image display processing means 51B converts the far-eye image for the left eye and the far-eye image for the right eye stored in the image storage means 61. It is displayed on the screen of the liquid crystal display 21. At this time, the distant view image display processing means 51B determines the information on the reproduction position of the distant view image stored in the reproduction information storage means 62 (distance D in FIG. 9) and the distance between the left and right eyes stored in the user information storage means 63. Based on the information (distance L in FIG. 9) and the like, as shown in FIG. 7, when the liquid crystal display 21 moves farther (d> d 1 ) than the reference position (equivalent to the virtual distance d = d 1 ), If the far-eye image for the left eye and the far-sight image for the right eye are shifted in the crossing direction, respectively, and the liquid crystal display 21 moves closer to the reference position (d <d 1 ), the far-eye image for the left eye And the far-eye image for the right eye are shifted in the same direction.

例えば、背景となる山2(図1参照)等の遠景画像を常に左右の眼の位置から見かけ上の距離D(例えばD=100m等)の位置に再生したい場合には、液晶ディスプレイ21が近景画像内の注視点の再生位置の変化に伴って移動しても、左眼で左眼用遠景画像内の特定点(例えば、山2の稜線部分等)を視る視線方向が矢印EDの方向で固定され、かつ、右眼で対応する右眼用遠景画像内の特定点を視る視線方向が矢印FDの方向で固定され、輻輳角θDが一定に保たれるようにする必要がある。しかし、液晶ディスプレイ21を前後に移動させると、視線方向が変化し(図5参照)、見かけの画面G(図6参照)も遠方または近方に移動するとともに、見かけの画面Gのサイズも変化するので、遠景画像内の特定点の見かけ上の位置が左右方向に移動してしまうため、このような移動をキャンセルするシフト処理を行う必要がある。 For example, when it is desired to always reproduce a distant view image such as the background mountain 2 (see FIG. 1) from the position of the left and right eyes to an apparent distance D (for example, D = 100 m), the liquid crystal display 21 is in the foreground. Even if the gazing point in the image moves as the playback position changes, the line of sight for viewing a specific point (for example, the ridge line portion of the mountain 2) in the far-eye image for the left eye with the left eye is indicated by the arrow E D The direction of the line of sight is fixed in the direction of the arrow F D , and the angle of convergence θ D must be kept constant, with the right eye looking at a specific point in the corresponding far-eye image for the right eye. There is. However, when the liquid crystal display 21 is moved back and forth, the line-of-sight direction changes (see FIG. 5), the apparent screen G (see FIG. 6) also moves far or near, and the size of the apparent screen G also changes. Therefore, the apparent position of the specific point in the distant view image moves in the left-right direction, and it is necessary to perform a shift process for canceling such movement.

具体的には、図7において、見かけの画面Gが基準位置(仮想距離d=d1)にある場合に、左眼用遠景画像内の山2Aが、矢印EDの方向の延長線上にあったとすると、何らシフト処理を行うことなく、見かけの画面Gが基準位置よりも遠方位置(d>d1)に移動したときには、図示の如く、矢印EDの方向の延長線上よりも左側の位置に左眼用遠景画像内の山2Bが見えることになるので、これを図中点線で示された山2Cのように矢印EDの方向の延長線上に持ってくる必要があるため、左眼用遠景画像を交差方向(右方向)にシフトする処理を行う。一方、何らシフト処理を行うことなく、見かけの画面Gが基準位置よりも近方位置(d<d1)に移動したときには、図示の如く、矢印EDの方向の延長線上よりも右側の位置に左眼用遠景画像内の山2Dが見えることになるので、これを図中点線で示された山2Eのように矢印EDの方向の延長線上に持ってくる必要があるため、左眼用遠景画像を同側方向(左方向)にシフトする処理を行う。 Specifically, in FIG. 7, when the apparent screen G is at the reference position (virtual distance d = d 1 ), the mountain 2A in the left-eye distant view image is on the extension line in the direction of the arrow E D. If the apparent screen G moves to a position farther than the reference position (d> d 1 ) without performing any shift processing, the position on the left side of the extension line in the direction of the arrow E D as shown in the figure. Since the mountain 2B in the far-eye image for the left eye is visible, it is necessary to bring the mountain 2B on the extended line in the direction of the arrow E D as shown by the mountain 2C indicated by the dotted line in the figure. A process for shifting the far-field image in the crossing direction (to the right) is performed. On the other hand, when the apparent screen G moves to a position closer to the reference position (d <d 1 ) without performing any shift processing, a position on the right side of the extension line in the direction of the arrow E D as shown in the figure. Since the mountain 2D in the far-eye image for the left eye can be seen on the left eye, it is necessary to bring the mountain 2D on the extended line in the direction of the arrow E D like the mountain 2E indicated by the dotted line in the figure. Processing for shifting the far-field image in the same direction (left direction) is performed.

また、右眼と右眼用遠景画像との関係も、上記の左眼と左眼用遠景画像との関係を左右方向に反転させれば同様であり、見かけの画面Gが基準位置(仮想距離d=d1)にある場合に、右眼用遠景画像内の山2Fが、矢印FDの方向の延長線上にあったとすると、遠方位置(d>d1)にある見かけの画面Gでは、山2Gを図中点線で示された山2Hに移動させるように、右眼用遠景画像を交差方向(左方向)にシフトし、一方、近方位置(d<d1)にある見かけの画面Gでは、山2Jを図中点線で示された山2Kに移動させるように、右眼用遠景画像を同側方向(右方向)にシフトする処理を行う。 Further, the relationship between the right eye and the far-eye image for the right eye is similar if the relationship between the left-eye and the far-eye image for the left eye is reversed in the left-right direction, and the apparent screen G becomes the reference position (virtual distance). In the case of d = d 1 ), if the mountain 2F in the far-eye image for the right eye is on the extension line in the direction of the arrow F D , the apparent screen G at the far position (d> d 1 ) The distant image for the right eye is shifted in the crossing direction (left direction) so as to move the mountain 2G to the mountain 2H indicated by the dotted line in the figure, while the apparent screen at the near position (d <d 1 ) In G, processing for shifting the far-eye image for the right eye in the same direction (right direction) is performed so that the mountain 2J is moved to the mountain 2K indicated by the dotted line in the drawing.

なお、図7では、左眼用遠景画像内の山2Dと、山2Aと、山2Bは、一直線上に記載されているが、実際には、見かけの画面G上における山の見える位置は、前述した図6における物理的な画面上の点TZと、見かけの画面G上の点Tdとの関係で定まるので、厳密には一直線上には並ばず、山は、見かけの画面Gが遠方に行くに従って、中心から、より離れる位置に見えるようになり、山2Dと、山2Aと、山2Bとは、図中の左上方向に向かって曲がるカーブ上に記載されることになる。また、右眼用遠景画像内の山2Jと、山2Fと、山2Gも同様であり、図7では一直線上に記載されているが、厳密には、図中の右上方向に向かって曲がるカーブ上に記載されることになる。   In FIG. 7, the mountain 2D, the mountain 2A, and the mountain 2B in the left-eye distant view image are described on a straight line, but actually, the position where the mountain can be seen on the apparent screen G is Since it is determined by the relationship between the point TZ on the physical screen in FIG. 6 and the point Td on the apparent screen G, strictly speaking, it does not line up on a straight line. As it goes, it becomes visible at a position farther from the center, and the mountain 2D, the mountain 2A, and the mountain 2B are described on a curve that curves in the upper left direction in the drawing. The same applies to the mountain 2J, mountain 2F, and mountain 2G in the right-eye distant view image, which are described on a straight line in FIG. 7, but strictly speaking, a curve that curves toward the upper right in the figure. Will be described above.

そして、以上のような遠景画像のシフト処理を液晶ディスプレイ21の物理的な画面上で考えると、図8のように説明することができる。すなわち、図8において、背景となる山2(図1参照)等の遠景画像を常に左右の眼の位置から見かけ上の距離D(例えばD=100m等)の位置に再生したい場合には、矢印EDの方向と矢印FDの方向との延長線(図中二点鎖線)どうしの交差する位置が左右の眼の位置から距離Dの位置であるとすると、左眼および右眼の視線方向は、矢印EDおよび矢印FDの方向でそれぞれ固定される必要がある。従って、液晶ディスプレイ21の画面から発せられてテレセントリック光学系22を構成する第4レンズ22Dの裏面に入射される遠景画像の光は、常に一定方向から来なければならないので、結局、左眼用遠景画像内の特定点は、液晶ディスプレイ21の物理的な画面上で、光路K1上に位置しなければならず、右眼用遠景画像内の特定点は、光路K2上に位置しなければならない。 If the above-mentioned shift process of the distant view image is considered on the physical screen of the liquid crystal display 21, it can be explained as shown in FIG. That is, in FIG. 8, when it is desired to always reproduce a distant view image such as the background mountain 2 (see FIG. 1) from the position of the left and right eyes to an apparent distance D (for example, D = 100 m), the arrow When intersecting the position of and how extension line (two-dot chain line) in the direction of the direction of the arrow F D of E D is assumed to be at a distance D from the position of the right and left eyes, gaze direction of the left and right eyes Needs to be fixed in the directions of arrows E D and F D , respectively. Accordingly, the light of the distant view image emitted from the screen of the liquid crystal display 21 and incident on the back surface of the fourth lens 22D constituting the telecentric optical system 22 must always come from a certain direction. The specific point in the image must be located on the optical path K1 on the physical screen of the liquid crystal display 21, and the specific point in the far-eye image for the right eye must be located on the optical path K2.

このため、液晶ディスプレイ21が基準位置(仮想距離d=d1相当:例えば仮想距離50cm相当=2.0D)にある場合に、左眼用遠景画像内の特定点がPA点の位置(図7の山2Aの位置に対応する位置)にあったとすると、液晶ディスプレイ21が基準位置よりも遠方位置(d>d1相当)にあるときには、特定点がPB点(図7の山2Bに対応)からPC点(図7の山2Cに対応)に移動するように、左眼用遠景画像を交差方向(右方向)にシフトし、一方、液晶ディスプレイ21が基準位置よりも近方位置(d<d1相当)にあるときには、特定点がPD点(図7の山2Dに対応)からPE点(図7の山2Eに対応)に移動するように、左眼用遠景画像を同側方向(左方向)にシフトする。 Therefore, when the liquid crystal display 21 is at the reference position (equivalent to virtual distance d = d 1 : for example, virtual distance 50 cm equivalent = 2.0D), the specific point in the far-eye image for the left eye is the position of the PA point (FIG. 7). If the liquid crystal display 21 is far from the reference position (corresponding to d> d 1 ), the specific point is the PB point (corresponding to the mountain 2B in FIG. 7). The left-eye distant view image is shifted in the crossing direction (right direction) so as to move to the PC point (corresponding to the mountain 2C in FIG. 7), while the liquid crystal display 21 is closer to the reference position (d < when in the d 1 equivalent), as specified point moves from the PD point (corresponding to the mountain 2D of FIG. 7) to the PE point (corresponding to the mountain 2E of FIG. 7), the distant view image for the left eye ipsilateral direction ( Shift left).

また、右眼用遠景画像の場合も同様であり、液晶ディスプレイ21が基準位置(仮想距離d=d1相当)にある場合に、右眼用遠景画像内の特定点がPF点の位置(図7の山2Fの位置に対応する位置)にあったとすると、液晶ディスプレイ21が基準位置よりも遠方位置(d>d1相当)にあるときには、特定点がPG点(図7の山2Gに対応)からPH点(図7の山2Hに対応)に移動するように、右眼用遠景画像を交差方向(左方向)にシフトし、一方、液晶ディスプレイ21が基準位置よりも近方位置(d<d1相当)にあるときには、特定点がPJ点(図7の山2Jに対応)からPK点(図7の山2Kに対応)に移動するように、右眼用遠景画像を同側方向(右方向)にシフトする。 The same applies to the far-eye image for the right eye. When the liquid crystal display 21 is at the reference position (corresponding to the virtual distance d = d 1 ), the specific point in the far-eye image for the right eye is the position of the PF point (see FIG. If the liquid crystal display 21 is located farther than the reference position (corresponding to d> d 1 ), the specific point corresponds to the PG point (corresponding to the mountain 2G in FIG. 7). ) To the PH point (corresponding to the mountain 2H in FIG. 7), the right-eye distant view image is shifted in the crossing direction (left direction), while the liquid crystal display 21 is closer to the reference position (d <when in d 1 equivalent), as the specific point to move to the PJ point (PK point from the corresponding) to the mountain 2J 7 (corresponding to the mountain 2K of FIG. 7), the lateral right-eye distant view image Shift (to the right).

図9には、遠景画像表示処理手段51Bによる遠景画像のシフト量の算出方法が示されている。図9において、左右の眼の位置から遠景画像を再生したい位置までの距離をDとし、左右の眼の位置から見かけの画面G(図6参照)までの距離(仮想距離)をdとし、瞳孔間隔の半分の長さをLとし、求めたい遠景画像の見かけのシフト量(中心からのシフト量)をsとする。このとき、遠景画像を正しく距離Dの位置に表示したいときの輻輳角θDは、次の式(1)で求まる。 FIG. 9 shows a method for calculating the shift amount of the distant view image by the distant view image display processing means 51B. In FIG. 9, the distance from the position of the left and right eyes to the position where the distant view image is desired to be reproduced is D, the distance (virtual distance) from the position of the left and right eyes to the apparent screen G (see FIG. 6) is d, and the pupil Let L be the half length of the interval, and let s be the apparent shift amount (shift amount from the center) of the distant view image to be obtained. At this time, the convergence angle θ D when it is desired to correctly display the distant view image at the position of the distance D is obtained by the following equation (1).

θD=tan-1(L/D) ・・・・・・・・・・・・・・・・・・・・(1) θ D = tan −1 (L / D) (1)

また、液晶ディスプレイ21を仮想距離dに相当する位置に配置することにより発生する輻輳角θd(仮想距離dにある見かけの画面G上の中央位置に表示された近景画像内の注視点を見る際に生じる輻輳角)は、次の式(2)で求まる。 Further, the convergence angle θ d generated by disposing the liquid crystal display 21 at a position corresponding to the virtual distance d (see a gazing point in the foreground image displayed at the center position on the apparent screen G at the virtual distance d). The angle of convergence that occurs at this time is obtained by the following equation (2).

θd=tan-1(L/d) ・・・・・・・・・・・・・・・・・・・・(2) θ d = tan −1 (L / d) (2)

従って、液晶ディスプレイ21の位置によらず、つまり見かけの画面Gまでの仮想距離dによらず遠景画像を常に輻輳角θDで表示させるために必要なシフト角Δθは、次の式(3)で求まる。 Therefore, the shift angle Δθ necessary for always displaying the distant view image at the convergence angle θ D regardless of the position of the liquid crystal display 21, that is, regardless of the virtual distance d to the apparent screen G, is expressed by the following equation (3). It is obtained by

Δθ=θd−θD=tan-1(L/d)−tan-1(L/D) ・・・・(3) Δθ = θ d −θ D = tan −1 (L / d) −tan −1 (L / D) (3)

通常、輻輳角θdおよびシフト角Δθは、微小であるから、見かけのシフト量sは、次の式(4)で求まる。 Usually, since the convergence angle θ d and the shift angle Δθ are very small, the apparent shift amount s can be obtained by the following equation (4).

s≒d×tan(Δθ)=d×tan{tan-1(L/d)−tan-1(L/D)}
・・・・・・・・(4)
s≈d × tan (Δθ) = d × tan {tan −1 (L / d) −tan −1 (L / D)}
(4)

ここで、テレセントリック光学系22を通して形成される見かけの画面Gまでの仮想距離dと、見かけの画面Gのサイズとは、比例する。このことは、一画面を構成する画素数は一定であることを考慮すると、見かけの画素サイズが、仮想距離dと比例することを意味する。従って、ある仮想距離d1の位置に表示した場合に、見かけの画面Gのサイズの横幅がwとなることがわかっている光学系および表示デバイスの場合、横方向の画素数をxとすると、画素サイズはw/xとなり、任意の仮想距離dにおける見かけの画素サイズpxは、次の式(5)で求まる。 Here, the virtual distance d to the apparent screen G formed through the telecentric optical system 22 is proportional to the size of the apparent screen G. This means that the apparent pixel size is proportional to the virtual distance d, considering that the number of pixels constituting one screen is constant. Therefore, in the case of an optical system and a display device in which the horizontal width of the apparent screen G size is known to be w when displayed at a certain virtual distance d 1 , where x is the number of pixels in the horizontal direction, pixel size w / x, and the apparent in any virtual distance d pixel size p x is obtained by the following equation (5).

x=(w×d)/(x×d1) ・・・・・・・・・・・・・・・・・(5) p x = (w × d) / (x × d 1 ) (5)

従って、シフトしなければならない画素数Δxは、見かけのシフト量sを見かけの画素サイズpxで除して、次の式(6)で求まる。 Therefore, the number of pixels must be shifted Δx is divided by the pixel size p x apparent the apparent shift amount s, calculated by the following equation (6).

Δx=s/px
≒{(x×d1)/w}×tan{tan-1(L/d)−tan-1(L/D)}
・・・・・・・・(6)
Δx = s / p x
≈ {(x × d 1 ) / w} × tan {tan −1 (L / d) −tan −1 (L / D)}
... (6)

例えば、遠景画像をD=100m遠方に設定した場合、近景画像(画面の中心)に対する遠景画像のシフト量は、ピクセル単位で示すと、図10のようになる。なお、計算には、w=15インチ×(4/5)×2.54=30.48cm、d1=50cm、L=65/2mm=3.25cm、x=1024ピクセルを用いた。図10において、横軸は、近景画像内の注視点(例えば、蝶1の胴体部分等)の再生位置までの距離(仮想距離d)であり、縦軸は、遠景画像を中心からシフトする画素数Δx(ピクセル単位)である。 For example, when the distant view image is set to D = 100 m away, the shift amount of the distant view image with respect to the foreground image (the center of the screen) is as shown in FIG. In the calculation, w = 15 inches × (4/5) × 2.54 = 30.48 cm, d 1 = 50 cm, L = 65/2 mm = 3.25 cm, and x = 1024 pixels were used. In FIG. 10, the horizontal axis is the distance (virtual distance d) to the reproduction position of the gazing point (for example, the body part of the butterfly 1) in the foreground image, and the vertical axis is a pixel that shifts the distant view image from the center. The number Δx (in pixels).

このような本実施形態によれば、次のような効果がある。すなわち、立体映像呈示装置10は、近景画像表示処理手段51Aによる表示処理と同期させて、制御手段71により、近景画像内の注視点の再生位置の奥行き方向の変化に応じて液晶ディスプレイ21を前後に移動させるので、観察者の水晶体の調節が、移動する液晶ディスプレイ21に追従して働くようになり、調節距離の動的な光学補正を実現できる。   According to this embodiment, there are the following effects. That is, the stereoscopic video presenting apparatus 10 moves the liquid crystal display 21 back and forth according to the change in the depth direction of the reproduction position of the gazing point in the foreground image by the control unit 71 in synchronization with the display processing by the foreground image display processing unit 51A. Therefore, the adjustment of the observer's crystalline lens works following the moving liquid crystal display 21, and dynamic optical correction of the adjustment distance can be realized.

そして、近景画像表示処理手段51Aは、左眼用近景画像内の注視点とこれに対応する右眼用近景画像内の注視点とが液晶ディスプレイ21の画面上の左右方向の中央位置で重なる状態で、これらの左眼用近景画像および右眼用近景画像を表示する処理を行うので、制御手段71による近景画像内の注視点の再生位置(見かけの位置)の制御は、近景画像内の注視点の再生位置と液晶ディスプレイ21の位置(見かけの画面Gの位置)とを一致させることにより実現できる。従って、輻輳が液晶ディスプレイ21の画像呈示面の位置に働くようになるので、輻輳と調節とが共に液晶ディスプレイ21の画像呈示面の位置に働き、観察中、輻輳距離と調節距離とを常に一致させることができる。このため、左眼用画像と右眼用画像との視差量を変化させることにより注視点の再生位置を制御する従来の方法の場合に比べ、視覚系の不整合に基づく眼精疲労を抑えることができる。   Then, the foreground image display processing means 51A has a state in which the gazing point in the left-eye foreground image and the corresponding gazing point in the right-eye foreground image overlap at the horizontal center position on the screen of the liquid crystal display 21. Thus, since the processing for displaying the left-eye foreground image and the right-eye foreground image is performed, the control of the reproduction position (apparent position) of the gazing point in the foreground image by the control means 71 is performed in the foreground image. This can be realized by matching the reproduction position of the viewpoint with the position of the liquid crystal display 21 (the position of the apparent screen G). Accordingly, since the convergence works on the position of the image display surface of the liquid crystal display 21, both the convergence and the adjustment work on the position of the image display surface of the liquid crystal display 21, and the convergence distance and the adjustment distance always coincide with each other during the observation. Can be made. Therefore, compared to the conventional method of controlling the reproduction position of the gazing point by changing the amount of parallax between the image for the left eye and the image for the right eye, it suppresses eye strain based on visual system mismatch. Can do.

また、近景画像内の注視点の再生位置の制御は、液晶ディスプレイ21の移動を伴う形で行われるので、前述した特許文献1に記載された単焦点レンズを用いて光学補正を行う方法の場合に比べ、補正範囲が広範になり、多様な立体像の再生位置に対応することができる。   In addition, since the control of the reproduction position of the gazing point in the foreground image is performed with the movement of the liquid crystal display 21, the method of performing optical correction using the single focus lens described in Patent Document 1 described above. Compared to the above, the correction range is wide, and it is possible to cope with various stereoscopic image reproduction positions.

さらに、観察者と液晶ディスプレイ21との間にテレセントリック光学系22が配置されているので、液晶ディスプレイ21が前後に移動しても、視野角(画角)を一定または略一定に保つことができるため、ズームの機構を伴わない光学補正を実現できる。   Furthermore, since the telecentric optical system 22 is disposed between the observer and the liquid crystal display 21, the viewing angle (view angle) can be kept constant or substantially constant even when the liquid crystal display 21 moves back and forth. Therefore, optical correction without a zoom mechanism can be realized.

そして、立体映像呈示装置10は、遠景画像表示処理手段51Bにより、液晶ディスプレイ21の前方または後方への移動に伴って左眼用遠景画像および右眼用遠景画像をそれぞれ交差方向または同側方向にシフトさせる処理を行うので、液晶ディスプレイ21の移動に伴って生じた視差変化をキャンセルし、遠景画像を一定の奥行き距離に保つことができる。   Then, the stereoscopic image presenting apparatus 10 causes the far-view image display processing unit 51B to convert the far-eye image for the left eye and the far-view image for the right eye in the crossing direction or the ipsilateral direction as the liquid crystal display 21 moves forward or backward, respectively. Since the shift processing is performed, the parallax change caused by the movement of the liquid crystal display 21 can be canceled, and the distant view image can be kept at a constant depth distance.

また、近景画像表示処理手段51Aは、ユーザの選択があった場合には、液晶ディスプレイ21の前方または後方への移動に伴って左眼用近景画像および右眼用近景画像をそれぞれ縮小または拡大する処理を行うので、近景画像内の注視点を含む対象(例えば、蝶1等)の再生位置が液晶ディスプレイ21の移動により前方または後方に移動した際に、その対象(例えば蝶1等)についての視野角を変化させることができる。従って、液晶ディスプレイ21が前方に移動して観察者から遠ざかったときには近景画像を縮小してその対象(例えば蝶1等)についての視野角を小さくし、一方、液晶ディスプレイ21が後方に移動して観察者に近づいたときには近景画像を拡大してその対象(例えば蝶1等)についての視野角を大きくすることにより、その対象(例えば蝶1等)の動きを、自然視の状態と同じ見え方で観察することができる。   When the user selects, the foreground image display processing means 51A reduces or enlarges the left-eye foreground image and the right-eye foreground image as the liquid crystal display 21 moves forward or backward, respectively. Since the processing is performed, when the reproduction position of the object including the gazing point in the foreground image (for example, butterfly 1) is moved forward or backward by the movement of the liquid crystal display 21, the object (for example, butterfly 1) is The viewing angle can be changed. Therefore, when the liquid crystal display 21 moves forward and moves away from the observer, the foreground image is reduced to reduce the viewing angle for the target (for example, butterfly 1 etc.), while the liquid crystal display 21 is moved backward. When approaching the observer, the foreground image is enlarged to increase the viewing angle of the object (for example, butterfly 1 etc.), so that the movement of the object (for example butterfly 1 etc.) looks the same as the state of natural vision Can be observed.

さらに、立体映像呈示装置10は、赤外線オプトメータ80を備えているので、立体映像観察中の観察者の左眼および/または右眼の水晶体の屈折値(つまり、観察中の人間のピント調節)をリアルタイムで測定し、この測定結果を近景画像表示処理手段51Aによる近景画像の表示処理、遠景画像表示処理手段51Bによる遠景画像の表示処理、または液晶ディスプレイ21を移動させるために行われる制御手段71によるステッピングモータ23の動作制御処理にフィードバックさせることができる。このため、観察者の実際の観察状況に即して適切な立体映像の呈示を行うことができる。   Further, since the stereoscopic image presenting apparatus 10 includes the infrared optometer 80, the refractive value of the lens of the left eye and / or right eye of the observer who is observing the stereoscopic image (that is, the focus adjustment of the human being observed). Is measured in real time, and the result of the measurement is displayed by the foreground image display processing means 51A, the distant view image display processing means 51B by the distant view image display process, or the control means 71 for moving the liquid crystal display 21. It is possible to feed back to the operation control process of the stepping motor 23 according to the above. For this reason, it is possible to present an appropriate stereoscopic image in accordance with the actual observation state of the observer.

そして、立体映像呈示装置10は、再生情報記憶手段62を備えているので、近景画像の動きのシーケンス(再生位置および再生速度の情報を含む。)を含む近景画像の再生に必要な各種情報、あるいは遠景画像の再生位置の情報を自在に設定して記憶させることができる。このため、近景画像の再生位置および再生速度を自在に制御でき、あるいは遠景画像の再生位置を自在に設定でき、多様な立体映像の呈示を行うことができる。   Since the stereoscopic video presenting apparatus 10 includes the reproduction information storage unit 62, various information necessary for reproducing the foreground image including the sequence of the movement of the foreground image (including information on the reproduction position and the reproduction speed), Alternatively, information on the reproduction position of the distant view image can be freely set and stored. For this reason, the playback position and playback speed of the foreground image can be freely controlled, or the playback position of the distant view image can be set freely, and various stereoscopic images can be presented.

また、立体映像呈示装置10は、ユーザ情報記憶手段63を備えているので、観察者の屈折値や瞳孔間隔といった個人情報を記憶させることができ、個人差にも対応することができる。   In addition, since the stereoscopic image presentation apparatus 10 includes the user information storage unit 63, personal information such as an observer's refraction value and pupil interval can be stored, and individual differences can be accommodated.

さらに、立体映像呈示装置10は、近景画像の再生位置を、調節距離の単位であるディオプタ(D:メートル距離の逆数)で制御し、かつ、光学補正もディオプタ単位でリニアに行うことができる。   Further, the stereoscopic video presenting apparatus 10 can control the reproduction position of the foreground image with a diopter (D: reciprocal of meter distance) that is a unit of adjustment distance, and can also perform optical correction linearly in units of diopter.

なお、本発明の効果を確かめるために、従来の方法により立体映像を観察した場合と、本発明の立体映像呈示装置10を用いて立体映像を観察した場合とで、赤外線オプトメータ80を用いて近景画像内の注視点の再生位置を変化させたときの観察者の水晶体の屈折値の変化を測定する比較実験を行った。図12には、光学補正を行わない従来の立体映像観察の場合の測定結果が示されている。この場合は、液晶ディスプレイの位置を固定し、左右の画像をずらしてその視差量を変化させることにより近景画像内の注視点の再生位置の制御を行っている。一方、図13には、光学補正を行った本発明の立体映像呈示装置10による観察の場合の測定結果が示されている。この場合は、液晶ディスプレイ21の位置を前後に移動させ、左右の画像は、ずらさずに固定している。図12および図13のいずれも、横軸が時間(秒単位)であり、縦軸が、白丸の点については、測定した水晶体の屈折値(ディオプタ単位)であり、黒四角の点については、設定した近景画像内の注視点の再生位置(ディオプタ単位)である。   In order to confirm the effect of the present invention, the infrared optometer 80 is used when a stereoscopic image is observed by a conventional method and when a stereoscopic image is observed using the stereoscopic image presentation device 10 of the present invention. A comparative experiment was conducted to measure the change in the refractive value of the observer's crystalline lens when the reproduction position of the gazing point in the foreground image was changed. FIG. 12 shows a measurement result in the case of conventional stereoscopic image observation without optical correction. In this case, the position of the liquid crystal display is fixed, and the reproduction position of the gazing point in the foreground image is controlled by shifting the right and left images and changing the parallax amount. On the other hand, FIG. 13 shows a measurement result in the case of observation by the stereoscopic image presenting apparatus 10 of the present invention that has been optically corrected. In this case, the position of the liquid crystal display 21 is moved back and forth, and the left and right images are fixed without shifting. In both FIG. 12 and FIG. 13, the horizontal axis is time (second unit), and the vertical axis is the measured refraction value (diopter unit) of the crystalline lens for the white circle point, and for the black square point, This is the reproduction position (in diopter units) of the gazing point in the set foreground image.

図12によれば、従来の方法では、測定した水晶体の屈折値(白丸の点)と、近景画像内の注視点の再生位置(黒四角の点)とが一致していないのに対し、図13によれば、本発明の立体映像呈示装置10では、測定した水晶体の屈折値(白丸の点)と、近景画像内の注視点の再生位置(黒四角の点)とが一致し、調節距離と輻輳距離とが一致していることがわかり、これにより本発明の効果が顕著に示された。   According to FIG. 12, in the conventional method, the measured refraction value of the crystalline lens (white dot) does not match the reproduction position of the gazing point (black square point) in the foreground image. 13, in the stereoscopic image presenting apparatus 10 of the present invention, the measured refraction value (white dot) of the crystalline lens coincides with the reproduction position of the gazing point (black square point) in the foreground image, and the adjustment distance is adjusted. And the convergence distance agree with each other, and the effect of the present invention is remarkably shown.

なお、本発明は前記実施形態に限定されるものではなく、本発明の目的を達成できる範囲内での変形等は本発明に含まれるものである。   Note that the present invention is not limited to the above-described embodiment, and modifications and the like within a scope where the object of the present invention can be achieved are included in the present invention.

すなわち、前記実施形態では、マイクロポール21Bおよび偏光フィルタ25,26を用いた左右映像の分離方式を採用していたが、本発明の立体映像呈示装置に適用する分離方式は、これに限定されるものではなく、例えば、ディスプレイでの左眼用画像と右眼用画像との交互切換表示処理およびこれと同期して左眼と右眼との透光/遮光を切り換える液晶シャッタメガネによる分離方式等でもよい。   That is, in the above-described embodiment, the left and right image separation method using the micropole 21B and the polarization filters 25 and 26 is adopted. However, the separation method applied to the stereoscopic image presenting device of the present invention is limited to this. For example, alternate display processing of the left-eye image and the right-eye image on the display, and a separation method using liquid crystal shutter glasses that switches between light transmission / light-shielding between the left eye and the right eye in synchronization therewith, etc. But you can.

また、前記実施形態では、液晶ディスプレイ21が用いられていたが、本発明の立体映像呈示装置に適用するディスプレイは、これに限定されるものではなく、例えば、CRTディスプレイ等であってもよい。   Moreover, in the said embodiment, although the liquid crystal display 21 was used, the display applied to the stereo image presentation apparatus of this invention is not limited to this, For example, a CRT display etc. may be sufficient.

さらに、前記実施形態では、第1、第2、第3、第4レンズ22A,22B,22C,22Dにより構成されるテレセントリック光学系22を用いていたが、本発明の立体映像呈示装置に適用するテレセントリック光学系は、これに限定されるものではなく、要するに、ディスプレイの前後の移動に対し、視線方向(画面の中心を見る方向)を変化させつつ、視野角(画角)を一定または略一定に保つことができる光学系であればよい。   Furthermore, in the said embodiment, although the telecentric optical system 22 comprised by the 1st, 2nd, 3rd, 4th lens 22A, 22B, 22C, 22D was used, it applies to the stereo image presentation apparatus of this invention. The telecentric optical system is not limited to this. In short, the viewing angle (viewing angle) is constant or substantially constant while changing the line-of-sight direction (direction for viewing the center of the screen) with respect to the back and forth movement of the display. Any optical system can be used as long as it can be maintained.

以上のように、本発明の立体映像呈示装置は、例えば、注視点(視標)を含む近景画像と、その背景となる遠景画像とを用いて立体映像を呈示する場合等に用いるのに適している。   As described above, the stereoscopic video presenting device of the present invention is suitable for use when, for example, a stereoscopic video is presented using a foreground image including a gazing point (target) and a background image as a background thereof. ing.

本発明の一実施形態の立体映像呈示装置の全体構成図。1 is an overall configuration diagram of a stereoscopic video presenting apparatus according to an embodiment of the present invention. 前記実施形態の装置本体の縦断面図。The longitudinal cross-sectional view of the apparatus main body of the said embodiment. 前記実施形態の立体映像呈示装置の構成を信号や光の流れとともに説明する図。The figure explaining the structure of the three-dimensional image presentation apparatus of the said embodiment with the flow of a signal and light. 前記実施形態のマイクロポールを実装した液晶ディスプレイの構造の説明図。Explanatory drawing of the structure of the liquid crystal display which mounted the micropole of the said embodiment. 前記実施形態のテレセントリック光学系により形成される光路の説明図。Explanatory drawing of the optical path formed with the telecentric optical system of the said embodiment. 前記実施形態の液晶ディスプレイの物理的な画面とテレセントリック光学系を通した見かけの画面との関係の説明図。Explanatory drawing of the relationship between the physical screen of the liquid crystal display of the said embodiment, and the apparent screen through a telecentric optical system. 前記実施形態の遠景画像表示処理手段による遠景画像の表示処理の説明図。Explanatory drawing of the display process of a distant view image by the distant view image display process means of the said embodiment. 前記実施形態の遠景画像表示処理手段による遠景画像の表示処理の別の説明図。Another explanatory view of the distant view image display processing by the distant view image display processing means of the embodiment. 前記実施形態の遠景画像表示処理手段による遠景画像のシフト量の算出方法の説明図。Explanatory drawing of the calculation method of the shift amount of a distant view image by the distant view image display process means of the said embodiment. 前記実施形態の遠景画像表示処理手段による遠景画像のシフト量の算出結果を示す図。The figure which shows the calculation result of the shift amount of a distant view image by the distant view image display process means of the said embodiment. 前記実施形態の水晶体の屈折値の測定方法の説明図。Explanatory drawing of the measuring method of the refractive value of the crystalline lens of the said embodiment. 水晶体の屈折値の実測を行った比較実験結果(従来の方法による場合)を示す図。The figure which shows the comparative experiment result (in the case of the conventional method) which measured the refractive value of the crystalline lens. 水晶体の屈折値の実測を行った比較実験結果(本発明の方法による場合)を示す図。The figure which shows the comparative experiment result (in the case of the method of this invention) which measured the refractive value of the crystalline lens. 従来の方法による立体映像観察中の視覚系の不整合の説明図。Explanatory drawing of the mismatch of the visual system during stereoscopic image observation by the conventional method.

符号の説明Explanation of symbols

10 立体映像呈示装置
21 液晶ディスプレイ
22 テレセントリック光学系
23 駆動手段であるステッピングモータ
51 画像表示処理手段
51A 近景画像表示処理手段
51B 遠景画像表示処理手段
71 制御手段
80 水晶体屈折値測定手段である赤外線オプトメータ
DESCRIPTION OF SYMBOLS 10 Stereoscopic image presentation apparatus 21 Liquid crystal display 22 Telecentric optical system 23 Stepping motor which is a drive means 51 Image display processing means 51A Foreground image display processing means 51B Distant view image display processing means 71 Control means 80 Infrared optometer which is a crystalline refraction value measurement means

Claims (5)

観察者に対して立体映像を呈示する立体映像呈示装置であって、
左眼用画像および右眼用画像が画面表示されるディスプレイと、
このディスプレイの画面上に前記左眼用画像および前記右眼用画像を表示する処理を行う画像表示処理手段と、
前記観察者と前記ディスプレイとの間に配置されたテレセントリック光学系と、
前記ディスプレイを前記テレセントリック光学系に対して近接離隔する方向に移動させる駆動手段と、
前記画像表示処理手段による前記左眼用画像および前記右眼用画像の表示処理と同期させて前記駆動手段の動作制御を行うための制御信号を前記駆動手段に送ることにより、前記左眼用画像内および前記右眼用画像内に対応点としてそれぞれ設定された注視点を再生させる位置の奥行き方向の変化に応じて前記ディスプレイを移動させる制御手段と
を備えたことを特徴とする立体映像呈示装置。
A stereoscopic image presentation device for presenting a stereoscopic image to an observer,
A display on which a left eye image and a right eye image are displayed on the screen;
Image display processing means for performing processing for displaying the left-eye image and the right-eye image on a screen of the display;
A telecentric optical system disposed between the observer and the display;
Driving means for moving the display in the direction of approaching and separating from the telecentric optical system;
By sending a control signal for controlling the operation of the driving means in synchronization with the display processing of the left-eye image and the right-eye image by the image display processing means, the left-eye image And a control means for moving the display in accordance with a change in the depth direction of the position at which the point of interest set as the corresponding point is reproduced in the image for right and in the right-eye image. .
請求項1に記載の立体映像呈示装置において、
前記画像表示処理手段は、前記左眼用画像内の前記注視点とこれに対応する前記右眼用画像内の前記注視点とが前記ディスプレイの画面上の左右方向の中央位置で重なる状態でこれらの左眼用画像および右眼用画像を表示する処理を行う構成とされている
ことを特徴とする立体映像呈示装置。
The stereoscopic image presentation device according to claim 1,
The image display processing means is configured such that the gazing point in the left-eye image and the corresponding gazing point in the right-eye image overlap with each other at a horizontal center position on the display screen. A stereoscopic video presenting apparatus characterized in that the processing for displaying the left-eye image and the right-eye image is performed.
請求項2に記載の立体映像呈示装置において、
前記画像表示処理手段は、前記ディスプレイの画面上に前記注視点を含む近景画像を構成する左眼用近景画像および右眼用近景画像を表示する処理を行う近景画像表示処理手段と、前記ディスプレイの画面上に前記注視点よりも遠方に位置する背景となる遠景画像を構成する左眼用遠景画像および右眼用遠景画像を表示する処理を行う遠景画像表示処理手段とを含んで構成され、
前記制御手段は、前記制御信号を前記駆動手段に送ることにより、前記近景画像内に設定された前記注視点を再生させる位置の奥行き方向の変化に応じて前記ディスプレイを移動させる構成とされ、
前記近景画像表示処理手段は、前記左眼用近景画像内の前記注視点とこれに対応する前記右眼用近景画像内の前記注視点とが前記ディスプレイの画面上の左右方向の中央位置で重なる状態でこれらの左眼用近景画像および右眼用近景画像を表示する処理を行う構成とされ、
前記遠景画像表示処理手段は、前記ディスプレイの前方または後方への移動に伴って前記左眼用遠景画像および前記右眼用遠景画像をそれぞれ交差方向または同側方向にシフトさせる処理を行う構成とされている
ことを特徴とする立体映像呈示装置。
The stereoscopic image presentation device according to claim 2,
The image display processing means includes a foreground image display processing means for performing processing for displaying a left-eye foreground image and a right-eye foreground image that constitute the foreground image including the gazing point on the display screen, and the display A distant view image display processing means for performing processing for displaying a distant view image for the left eye and a distant view image for the right eye constituting a distant image as a background located farther than the gazing point on the screen,
The control means is configured to move the display according to a change in a depth direction of a position for reproducing the gazing point set in the foreground image by sending the control signal to the driving means.
The foreground image display processing means overlaps the gazing point in the left-eye foreground image and the corresponding gazing point in the right-eye foreground image at the center position in the left-right direction on the screen of the display. In the state, it is configured to perform processing for displaying these left-eye foreground image and right-eye foreground image,
The distant view image display processing means is configured to perform processing for shifting the distant view image for the left eye and the distant view image for the right eye in the crossing direction or the ipsilateral direction as the display moves forward or backward, respectively. 3D image display device characterized by that.
請求項3に記載の立体映像呈示装置において、
前記近景画像表示処理手段は、前記ディスプレイの前方または後方への移動に伴って前記左眼用近景画像および前記右眼用近景画像をそれぞれ縮小または拡大する処理を行う構成とされている
ことを特徴とする立体映像呈示装置。
The stereoscopic image presentation device according to claim 3,
The foreground image display processing means is configured to perform processing for reducing or enlarging the left-eye foreground image and the right-eye foreground image, respectively, as the display moves forward or backward. 3D image presentation device.
請求項3または4に記載の立体映像呈示装置において、
前記観察者の左眼および/または右眼の水晶体の屈折値を測定する水晶体屈折値測定手段を備え、
この水晶体屈折値測定手段による測定結果が、前記近景画像表示処理手段による前記近景画像の表示処理、前記遠景画像表示処理手段による前記遠景画像の表示処理、または前記ディスプレイを移動させるために行われる前記制御手段による前記駆動手段の動作制御処理のうちの少なくとも一つの処理にフィードバックされる構成とされている
ことを特徴とする立体映像呈示装置。
The stereoscopic image presentation device according to claim 3 or 4,
A lens refraction value measuring means for measuring a refraction value of a lens of the left eye and / or right eye of the observer;
The measurement result by the lens refraction value measuring means is performed to move the display of the foreground image by the foreground image display processing means, the display processing of the distant view image by the distant view image display processing means, or the display. A stereoscopic video presenting apparatus characterized by being fed back to at least one of the operation control processes of the driving means by the control means.
JP2003404784A 2003-12-03 2003-12-03 3D image presentation device Expired - Fee Related JP4549661B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003404784A JP4549661B2 (en) 2003-12-03 2003-12-03 3D image presentation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003404784A JP4549661B2 (en) 2003-12-03 2003-12-03 3D image presentation device

Publications (2)

Publication Number Publication Date
JP2005165032A true JP2005165032A (en) 2005-06-23
JP4549661B2 JP4549661B2 (en) 2010-09-22

Family

ID=34727689

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003404784A Expired - Fee Related JP4549661B2 (en) 2003-12-03 2003-12-03 3D image presentation device

Country Status (1)

Country Link
JP (1) JP4549661B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9204122B2 (en) 2010-09-23 2015-12-01 Thomson Licensing Adaptation of 3D video content
JP2018514806A (en) * 2015-04-13 2018-06-07 イー.ブイ.エス.ソシエタ ア レスポンサビリタ リミタータ センプリフィカータ Equipment for improving binocular vision
JP2019215411A (en) * 2018-06-12 2019-12-19 株式会社ザクティ Eyepiece optical system, electronic view finder, and imaging apparatus
JP7474124B2 (en) 2019-06-26 2024-04-24 中強光電股▲ふん▼有限公司 Optical lens assembly and head-mounted display device

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01284091A (en) * 1988-05-10 1989-11-15 Nec Home Electron Ltd Stereoscopic television reproducing device and its variable focus shutter spectacles
JPH0730928A (en) * 1993-07-12 1995-01-31 Canon Inc Stereoscopic image observing device
JPH085955A (en) * 1994-06-17 1996-01-12 Sanyo Electric Co Ltd Device and method for displaying virtual image type stereoscopic picture
JPH10239634A (en) * 1997-02-27 1998-09-11 Minolta Co Ltd Stereoscopic video display device
JP2002196280A (en) * 2000-10-17 2002-07-12 Olympus Optical Co Ltd Display device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01284091A (en) * 1988-05-10 1989-11-15 Nec Home Electron Ltd Stereoscopic television reproducing device and its variable focus shutter spectacles
JPH0730928A (en) * 1993-07-12 1995-01-31 Canon Inc Stereoscopic image observing device
JPH085955A (en) * 1994-06-17 1996-01-12 Sanyo Electric Co Ltd Device and method for displaying virtual image type stereoscopic picture
JPH10239634A (en) * 1997-02-27 1998-09-11 Minolta Co Ltd Stereoscopic video display device
JP2002196280A (en) * 2000-10-17 2002-07-12 Olympus Optical Co Ltd Display device

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9204122B2 (en) 2010-09-23 2015-12-01 Thomson Licensing Adaptation of 3D video content
JP2018514806A (en) * 2015-04-13 2018-06-07 イー.ブイ.エス.ソシエタ ア レスポンサビリタ リミタータ センプリフィカータ Equipment for improving binocular vision
JP2019215411A (en) * 2018-06-12 2019-12-19 株式会社ザクティ Eyepiece optical system, electronic view finder, and imaging apparatus
JP7474124B2 (en) 2019-06-26 2024-04-24 中強光電股▲ふん▼有限公司 Optical lens assembly and head-mounted display device

Also Published As

Publication number Publication date
JP4549661B2 (en) 2010-09-22

Similar Documents

Publication Publication Date Title
WO2010084716A1 (en) Image processing device, program, image processing method, recording method, and recording medium
CN110520781A (en) Central fovea display can be turned to
JPH06281878A (en) Compound eye type image display device
EP1187495A2 (en) Apparatus and method for displaying image data
WO2015186735A1 (en) Mirror display system
JP3758265B2 (en) 3D image display method and display device thereof
JP7409641B2 (en) head mounted display
US11012681B2 (en) System and method for enhanced motion parallax in a 3D display
JPH09331552A (en) Multi-focus head mount type display device
KR100908677B1 (en) 3D image display device and stereoscopic image display method using display pixel change
JPH08327948A (en) Method and device for displaying stereoscopic picture
JP4549661B2 (en) 3D image presentation device
JP3425402B2 (en) Apparatus and method for displaying stereoscopic image
JP3246701B2 (en) 3D display device
JP2002303821A (en) Stereoscopic display device and screen control method of stereoscopic display device
CN114624886A (en) Imaging device, method and augmented or virtual reality equipment
JP3825414B2 (en) 3D display device
KR101371772B1 (en) Stereovision optometry apparatus
JPH08223609A (en) Three-dimensional display method and display device for enabling focus control
JPH07111664A (en) Head-mounted type stereoscopic video display device
US6614426B1 (en) Method and device for displaying simulated 3D space as an image
JP7139548B2 (en) head mounted display
CN211791831U (en) Integrated imaging display system
JP3431549B2 (en) 3D display method
JP3425416B2 (en) Apparatus and method for displaying stereoscopic image

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061113

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100216

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100629

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100707

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 4549661

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130716

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees
R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370