JP5102521B2 - Video display device and binocular visual function inspection device - Google Patents

Video display device and binocular visual function inspection device Download PDF

Info

Publication number
JP5102521B2
JP5102521B2 JP2007075355A JP2007075355A JP5102521B2 JP 5102521 B2 JP5102521 B2 JP 5102521B2 JP 2007075355 A JP2007075355 A JP 2007075355A JP 2007075355 A JP2007075355 A JP 2007075355A JP 5102521 B2 JP5102521 B2 JP 5102521B2
Authority
JP
Japan
Prior art keywords
unit
video
reference pattern
video display
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007075355A
Other languages
Japanese (ja)
Other versions
JP2008229175A (en
Inventor
はるか 天沼
亮 河村
弘子 中山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2007075355A priority Critical patent/JP5102521B2/en
Publication of JP2008229175A publication Critical patent/JP2008229175A/en
Application granted granted Critical
Publication of JP5102521B2 publication Critical patent/JP5102521B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Eye Examination Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Description

本発明は、任意曲面に歪みの無い映像を表示する映像表示装置、および、当該映像表示装置を備えた両眼視機能検査装置に関する。   The present invention relates to an image display device that displays an image having no distortion on an arbitrary curved surface, and a binocular vision function inspection device including the image display device.

従来より、眼科検査においては、各種の表示装置に映像を表示させることがなされている。例えば、下記の非特許文献1におけるHessスクリーンテストでは、プロジェクタによって格子縞を赤く表示し、被験者の右手で持っているペン状の光出射装置から緑色の矢印を投影させる。被験者は、眼前に設けられた赤・緑のガラスを通じて、赤枠上の指示された点を矢印で順次指していく。そして、この作業を赤・緑のガラスの位置関係を逆にして行い、矢印で指し示した位置が対称となっているかを検査する。   Conventionally, in an ophthalmic examination, an image is displayed on various display devices. For example, in the Hess screen test described in Non-Patent Document 1 below, the grid pattern is displayed in red by a projector, and a green arrow is projected from a pen-like light emitting device held by the subject's right hand. The subject sequentially points to the point indicated on the red frame with the arrows through the red and green glasses provided in front of the eyes. Then, this operation is performed by reversing the positional relationship between the red and green glasses to check whether the position indicated by the arrow is symmetric.

また、従来において、両眼視機能検査装置としては、下記の特許文献1に記載されたものが知られている。両眼視機能検査装置は、斜視の度合いを客観的に計測するために、基準画像および指標画像のうち、いずれか一方を左目用画像とし、他方を右目用画像として、3次元表示装置に表示させる。基準画像の所定の基準位置と指標画像の表示位置とが一致するように、指標画像の表示位置を移動させるための移動指令を、被検査者によって入力し、移動指令に基づいて、指標画像の表示位置を移動させる。基準画像の基準位置と指標画像の表示位置とが一致したと被検査者が視覚認識したときに、その旨を示す確認入力を被検査者に行わせ、基準画像の基準位置に対する指標画像のずれ量を算出している。
丸尾敏夫、松井瑞夫、小口芳久、湖崎克著「眼科検査法ハンドブッ ク」医学書院出版、1995年1月15日、p207-209
Conventionally, as a binocular visual function testing device, one described in Patent Document 1 below is known. In order to objectively measure the degree of strabismus, the binocular visual function inspection device displays either one of the reference image and the index image as the left-eye image and the other as the right-eye image on the three-dimensional display device. Let A movement command for moving the display position of the index image is input by the examinee so that the predetermined reference position of the reference image matches the display position of the index image, and based on the movement command, the index image Move the display position. When the inspected person visually recognizes that the reference position of the reference image matches the display position of the index image, the inspector performs confirmation input to that effect, and the deviation of the index image from the reference position of the reference image The amount is calculated.
Toshio Maruo, Mizuo Matsui, Yoshihisa Oguchi, Katsushi Kozaki “Handbook of Ophthalmic Examination” Medical School Publishing, January 15, 1995, p207-209

しかしながら、上述した非特許文献1に記載のプロジェクタや、特許文献1に記載の3Dディスプレイ装置では、正確な歪み補正処理を施していないために、歪んだ映像によって検査が行われている。   However, since the projector described in Non-Patent Document 1 and the 3D display device described in Patent Document 1 do not perform accurate distortion correction processing, inspection is performed using a distorted image.

そこで、本発明は、上述した実情に鑑みて提案されたものであり、歪み補正を行うことによって、歪みの無い映像を提示できる映像表示装置、両眼視機能検査装置を提供することを目的とする。   Therefore, the present invention has been proposed in view of the above-described circumstances, and an object thereof is to provide a video display device and a binocular visual function inspection device that can present a video without distortion by performing distortion correction. To do.

本発明は、任意曲面の映像表示部に映像を投影する映像表示装置を有し、映像表示部に表示する視角に対応した基準パターンを設定する基準パターン設定部と、基準パターン設定部によって設定された基準パターンを表す映像データを入力し、当該映像データに所定の歪み補正処理を施して映像表示部に映像を投影する映像投影部と、映像提示手段に提示された映像を歪み無く観察させるためのパラメータとして、映像表示部と映像投影部との位置パラメータと、映像表示部の形状と、映像投影部の画角及び特性と、観察者の視点位置とを少なくとも入力するパラメータ入力手段と、パラメータ入力手段によって入力された映像表示部の形状と、映像投影部の画角及び特性と、観察者の視点位置とに基づいて、映像投影部が映像データに歪み補正処理を施すための補正パラメータを演算する補正パラメータ演算部と、映像投影部の位置を計測する投影部位置計測部と、投影部位置計測部によって計測された投影部位置を用いて補正パラメータを更新する補正パラメータ更新演算部と、観察者の視点位置を計測する視点位置計測部とを備え、前記補正パラメータ更新演算部は、前記視点位置計測部によって計測された視点位置に基づいて、観察者の視点位置の移動前後において同じ視角に対応した基準パターンを保持する前記補正パラメータを更新することを特徴とする。 The present invention includes an image display device that projects an image on an image display unit having an arbitrary curved surface, and is set by a reference pattern setting unit that sets a reference pattern corresponding to a viewing angle displayed on the image display unit, and a reference pattern setting unit. A video projection unit that inputs video data representing the reference pattern, performs a predetermined distortion correction process on the video data, and projects the video on the video display unit, and allows the video presented on the video presentation unit to be observed without distortion Parameter input means for inputting at least the position parameters of the image display unit and the image projection unit, the shape of the image display unit, the angle of view and characteristics of the image projection unit, and the viewpoint position of the observer, The video projection unit distorts the video data based on the shape of the video display unit input by the input means, the angle of view and characteristics of the video projection unit, and the viewpoint position of the observer. A correction parameter is calculated using a correction parameter calculation unit that calculates a correction parameter for performing a positive process, a projection unit position measurement unit that measures the position of the video projection unit, and a projection unit position measured by the projection unit position measurement unit. A correction parameter update calculation unit for updating, and a viewpoint position measurement unit for measuring the viewpoint position of the observer, wherein the correction parameter update calculation unit is based on the viewpoint position measured by the viewpoint position measurement unit. The correction parameter that holds the reference pattern corresponding to the same viewing angle before and after the movement of the viewpoint position is updated .

本発明によれば、視角に対応した基準パターンに対して歪み補正を行うことによって、歪みの無い映像を提示できる。   According to the present invention, an image without distortion can be presented by performing distortion correction on a reference pattern corresponding to a viewing angle.

以下、本発明の実施の形態について図面を参照して説明する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings.

本発明に係る映像表示装置は、例えば図1に示すように構成されたスクリーンである映像表示部1に映像を表示させる映像表示システムにおける映像投影部2及び制御装置3に適用される。この映像表示システムは、映像表示部1に表示された映像を被験者に観察させる両眼視機能検査装置に搭載されるものである。   The video display device according to the present invention is applied to a video projection unit 2 and a control device 3 in a video display system that displays a video on a video display unit 1 that is a screen configured as shown in FIG. This video display system is mounted on a binocular visual function testing device that allows a subject to observe a video displayed on the video display unit 1.

この両眼視機能検査装置は、例えば、映像投影部2から投影した映像光を映像表示部1に表示させ、当該映像表示部1に表示された映像を被験者に観察させる。これに対し、両眼視機能検査装置は、現状における被験者が観察している映像の見え方を、図示しない入力デバイスを操作させて、当該入力デバイスの操作入力信号を入力する。これによって、両眼視機能検査装置は、被験者の視機能を診断しようとするものである。   For example, the binocular vision function inspection apparatus displays the image light projected from the image projection unit 2 on the image display unit 1 and causes the subject to observe the image displayed on the image display unit 1. On the other hand, the binocular visual function testing device inputs an operation input signal of the input device by operating an input device (not shown) to see how an image currently observed by the subject is viewed. Thus, the binocular visual function testing device is intended to diagnose the visual function of the subject.

この映像表示システムの映像表示部1は、その映像表示面が任意曲面となっていても良い。本例においては、被験者に向けて凹部となっている球面の一部を利用したドーム型のスクリーンである場合について説明する。また、映像が投影される映像表示部1としては、例えば、映写面の表面にアルミ粉末などを塗布した所謂シルバースクリーンを用いる。更に、映像表示部1の形状としては、観察者に凹部を向けた半球ドーム型だけではなく、平面スクリーンや、円筒型の一部を用いた2次曲面スクリーンであっても良く、半球ドーム型スクリーン、平面スクリーン、2次曲面を種々組み合わせて形成したスクリーンであっても良い。このような様々な形状の映像表示部1であっても、映像表示システムは、当該形状に応じた映像の歪み補正処理を行うことになる。   The video display unit 1 of this video display system may have an arbitrary curved surface. In this example, a case where the screen is a dome type screen using a part of a spherical surface that is a concave portion toward the subject will be described. As the image display unit 1 on which the image is projected, for example, a so-called silver screen in which aluminum powder is applied to the surface of the projection surface is used. Furthermore, the shape of the image display unit 1 is not limited to a hemispherical dome shape with a concave portion facing the observer, but may be a flat screen or a quadratic curved screen using a part of a cylindrical shape. A screen formed by variously combining a screen, a flat screen, and a quadric surface may be used. Even in the video display unit 1 having such various shapes, the video display system performs a video distortion correction process corresponding to the shape.

映像投影部2は、所謂投影型のプロジェクタである。この映像投影部2は、制御装置3から供給される各種のパラメータを用いて歪み補正処理等を行うCPU等を備えている。なお、映像投影部1にCPUを備えていなくても、制御装置3で歪み補正処理等を行っても良いことは勿論である。   The video projection unit 2 is a so-called projection type projector. The video projection unit 2 includes a CPU that performs distortion correction processing and the like using various parameters supplied from the control device 3. Of course, even if the video projection unit 1 does not include a CPU, the control device 3 may perform distortion correction processing or the like.

このような映像表示システムは、その機能的な構成を図2に示すように、各種の設定値を入力する入力I/F部(パラメータ入力手段)11と、補正パラメータ演算部12と、基準パターン設定部13と、補正パラメータ更新演算部14と、第1計測値出力部15と、投影部位置計測部16とを備える。   As shown in FIG. 2, such a video display system has an input I / F unit (parameter input means) 11 for inputting various set values, a correction parameter calculation unit 12, a reference pattern, and the like. A setting unit 13, a correction parameter update calculation unit 14, a first measurement value output unit 15, and a projection unit position measurement unit 16 are provided.

基準パターン設定部13は、映像表示部1に表示する視角に対応した基準パターンを設定するものである。この基準パターン設定部13は、基準パターンを表す映像データが格納されている。この基準パターンは、図3に示すように、映像表示部1に表示させたいパターンの間隔が、視角に対して設定されている。なお、図3に示す基準パターンは、複数のドットの間隔が視角に対応して設定されているものであるが、これに限らず、線(升目)、幾何学形状、ドット、カラーバー(光)の間隔が視角に対応したものであっても良い。   The reference pattern setting unit 13 sets a reference pattern corresponding to the viewing angle displayed on the video display unit 1. The reference pattern setting unit 13 stores video data representing the reference pattern. In this reference pattern, as shown in FIG. 3, the interval between patterns to be displayed on the video display unit 1 is set with respect to the viewing angle. The reference pattern shown in FIG. 3 is a pattern in which the interval between a plurality of dots is set corresponding to the viewing angle, but is not limited to this, and is not limited to this. ) May correspond to the viewing angle.

図4に示すように、基準パターンにおける間隔Dimgは、映像表示部1の投影面から距離Leyeだけ離れた視点位置Peyeから視角θeyeで基準パターンを見た場合の間隔に相当し、且つ、映像表示部1の投影面から距離Lprojだけ離れた映像投影部2の投影位置Pprojから画角θprojで映像光を投影した場合の間隔に相当する。   As shown in FIG. 4, the interval Dimg in the reference pattern corresponds to the interval when the reference pattern is viewed at the viewing angle θeye from the viewpoint position Peye separated from the projection plane of the image display unit 1 by the distance Leye, and the image display This corresponds to an interval when image light is projected at an angle of view θproj from the projection position Pproj of the image projection unit 2 separated from the projection plane of the unit 1 by a distance Lproj.

入力I/F部11は、映像投影部2の種類や画角θprojを入力する投影部情報入力部21と、映像表示部1と映像投影部2との位置パラメータを入力する位置パラメータ入力部22と、映像表示部1の形状を入力する表示部形状入力部23と、映像表示部1に表示された映像を見る被験者の視点位置Peyeを入力する視点位置入力部24とを備える。これらの入力部21〜24へは、図示しないパーソナルコンピュータのキーボード等によって各種の情報が入力される。   The input I / F unit 11 includes a projection unit information input unit 21 that inputs the type and angle of view θproj of the video projection unit 2, and a position parameter input unit 22 that inputs positional parameters of the video display unit 1 and the video projection unit 2. And a display unit shape input unit 23 for inputting the shape of the video display unit 1 and a viewpoint position input unit 24 for inputting the viewpoint position Peye of the subject who views the video displayed on the video display unit 1. Various information is input to these input units 21 to 24 by a keyboard of a personal computer (not shown).

この入力I/F部11に入力された各種の情報は、補正パラメータ演算部12によって読み込まれる。補正パラメータ演算部12は、表示部形状入力部23によって入力された映像表示部1の形状と、投影部情報入力部21によって入力された映像投影部2の画角θprojと、視点位置入力部24によって入力された被験者の視点位置Peyeとに基づいて、映像投影部2が映像データに歪み補正処理を施すためのパラメータを演算する。この補正パラメータは、映像投影部2から映像表示部1に投影される映像光の歪みを補正するための歪み補正用のテーブルである。この歪み補正テーブルは、平面の投影面と任意形状の映像表示部1の投影面のメッシュモデルとの対応マップであり、当該歪み補正テーブルに従って映像投影部2によって座標変換を行わせ、画素ごとに、平面表示用の映像信号を任意形状投影面への表示用の出力映像信号に変換するためのものである。なお、上述したように歪み補正処理等を制御装置3が行って映像投影部2に出力する構成であっても良い。   Various information input to the input I / F unit 11 is read by the correction parameter calculation unit 12. The correction parameter calculation unit 12 includes the shape of the video display unit 1 input by the display unit shape input unit 23, the angle of view θproj of the video projection unit 2 input by the projection unit information input unit 21, and the viewpoint position input unit 24. The video projection unit 2 calculates parameters for performing distortion correction processing on the video data, based on the viewpoint position Peye of the subject input by. This correction parameter is a distortion correction table for correcting distortion of video light projected from the video projection unit 2 onto the video display unit 1. This distortion correction table is a correspondence map between a flat projection surface and a mesh model of the projection surface of the image display unit 1 having an arbitrary shape. The image projection unit 2 performs coordinate conversion according to the distortion correction table, and each pixel is converted. This is for converting a video signal for flat display into an output video signal for display on an arbitrary-shaped projection plane. Note that, as described above, a configuration in which the control device 3 performs distortion correction processing or the like and outputs it to the video projection unit 2 may be employed.

映像投影部2は、基準パターン設定部13によって設定された基準パターンを表す映像データを入力し、当該映像データに所定の歪み補正処理を施して映像表示部1に映像を投影する。この歪み補正処理を行うとき、映像投影部2は、補正パラメータ演算部12によって演算された歪み補正テーブルに従って座標変換を行う。この座標変換された歪み補正済の映像データは、映像投影部2から出力される映像光に変換される。   The video projection unit 2 receives video data representing the reference pattern set by the reference pattern setting unit 13, performs a predetermined distortion correction process on the video data, and projects the video on the video display unit 1. When performing this distortion correction processing, the video projection unit 2 performs coordinate conversion according to the distortion correction table calculated by the correction parameter calculation unit 12. The coordinate-converted video data after distortion correction is converted into video light output from the video projection unit 2.

映像表示システムは、映像投影部2から映像表示部1に映像光を投影している時において、投影部位置計測部16によって、映像投影部2の投影位置Pprojを計測する。この映像投影部2の投影位置Pprojは、第1計測値出力部15から補正パラメータ更新演算部14に出力される。補正パラメータ更新演算部14は、投影位置Pprojを入力すると、当該投影位置Pprojが変更されたか否かを判定して、投影位置Pprojが変更された場合には、歪み補正テーブルを更新して映像投影部2に供給する。   In the video display system, when the video light is projected from the video projection unit 2 onto the video display unit 1, the projection position measurement unit 16 measures the projection position Pproj of the video projection unit 2. The projection position Pproj of the video projection unit 2 is output from the first measurement value output unit 15 to the correction parameter update calculation unit 14. When the projection position Pproj is input, the correction parameter update calculation unit 14 determines whether or not the projection position Pproj has been changed. If the projection position Pproj has been changed, the correction parameter update calculation unit 14 updates the distortion correction table to project the image. Supply to part 2.

このような映像表示システムによれば、基準パターンの間隔(=表示したい視角)に対して、視点位置Peye、映像表示部1の位置、投影位置Pprojから、視点位置Peyeと映像表示部1の位置との距離Leye及び投影位置Pprojと映像表示部1の位置との距離Lprojを計算し、映像投影部2で表示する際の視角を計算する。   According to such a video display system, the viewpoint position Peye and the position of the video display unit 1 are determined from the viewpoint position Peye, the position of the video display unit 1 and the projection position Pproj with respect to the interval of the reference pattern (= viewing angle to be displayed). The distance Leye and the distance Lproj between the projection position Pproj and the position of the video display unit 1 are calculated, and the viewing angle when displayed on the video projection unit 2 is calculated.

このような映像表示システムは、図5にその処理手順を示すように、先ず、ステップS1にて入力I/F部11に対して各種設定の入力が行われると、ステップS2にて補正パラメータ演算部12によって補正パラメータを演算を行う。なお、この補正パラメータの演算(歪み補正テーブルの演算)は、後のステップS8の前であれば何時行っても良い処理である。   In such a video display system, as shown in the processing procedure in FIG. 5, first, when various settings are input to the input I / F unit 11 in step S1, correction parameter calculation is performed in step S2. The correction parameter is calculated by the unit 12. The calculation of the correction parameter (the calculation of the distortion correction table) is a process that may be performed any time before the subsequent step S8.

ステップS3において、基準パターン設定部13によって、基準パターンの選択が行われる。この基準パターンの選択処理は、被験者又は映像表示システムの管理者による操作キーの入力などによって行われても良く、自動的に順次変更されるものであっても良い。   In step S <b> 3, the reference pattern setting unit 13 selects a reference pattern. This reference pattern selection processing may be performed by an operation key input by the subject or the administrator of the video display system, or may be automatically and sequentially changed.

ステップS4において、入力I/F部11によって、視角θeyeが入力されると、ステップS5において、映像投影部2によって、基準パターンにおける間隔(長さ)Dimgの計算を行う。このとき、Dimgは、距離Leye×tan(θeye)の演算を映像投影部2によって行うことで求められる。この距離Leyeは、ステップS1で入力された映像表示部1の位置と視点位置Peyeとの距離を用いる。次に、ステップS6において、映像投影部2によって、ステップS5で求められたDimgから、映像投影部2の視角(画角θproj)を計算する。ここで、映像投影部2の画角θprojは、ステップS5で求めたtan−1(Dimg/距離Lproj)で求められる。この距離Lprojは、ステップS1で入力された映像表示部1の位置と投影位置Pprojとの距離を用いる。 In step S4, when the viewing angle θeye is input by the input I / F unit 11, the video projection unit 2 calculates the interval (length) Dimg in the reference pattern in step S5. At this time, Dimg is obtained by calculating the distance Leye × tan (θeye) by the video projection unit 2. The distance Leye uses the distance between the position of the video display unit 1 and the viewpoint position Peye input in step S1. Next, in step S6, the video projection unit 2 calculates the viewing angle (view angle θproj) of the video projection unit 2 from the Dimg obtained in step S5. Here, the angle of view θproj of the video projection unit 2 is obtained by tan −1 (Dimg / distance Lproj) obtained in step S5. This distance Lproj uses the distance between the position of the image display unit 1 and the projection position Pproj input in step S1.

次のステップS7においては、映像投影部2によって、ステップS3で選択された基準パターンの表示パターンを作成する。このとき、映像投影部2は、ステップS5で求められた間隔Dimgのパターンを映像投影部2の画角θprojで表示させる表示パターンの映像データを作成する。   In the next step S7, the video projection unit 2 creates a display pattern of the reference pattern selected in step S3. At this time, the video projection unit 2 creates video data of a display pattern for displaying the pattern of the interval Dimg obtained in step S5 at the angle of view θproj of the video projection unit 2.

次のステップS8において、映像投影部2は、ステップS7で作成された表示パターンに対して、ステップS2で計算された歪み補正テーブルを用いた歪み補正処理を行う。これにより、映像データに、映像表示部1の形状、映像表示部1と映像投影部2との位置関係、映像表示部1と視点位置Peyeとの位置関係に基づく歪み補正を適用する。   In the next step S8, the video projection unit 2 performs a distortion correction process using the distortion correction table calculated in step S2 for the display pattern created in step S7. Thus, distortion correction based on the shape of the video display unit 1, the positional relationship between the video display unit 1 and the video projection unit 2, and the positional relationship between the video display unit 1 and the viewpoint position Peye is applied to the video data.

次のステップS9において、映像投影部2は、ステップS8にて歪み補正が適用された映像データを映像光に変換して、当該映像光を映像表示部1に投影する。   In the next step S9, the video projection unit 2 converts the video data to which the distortion correction is applied in step S8 into video light, and projects the video light on the video display unit 1.

次のステップS10において、投影部位置計測部16は、ステップS9から映像表示部1への映像光の投影が開始された後に、投影位置Pprojを計測する。この投影位置Pprojは、第1計測値出力部15を介して補正パラメータ更新演算部14に送られる。補正パラメータ更新演算部14は、ステップS11において、ステップS8に歪み補正を適用した時点から、投影位置Pprojが変更されているか否かを判定する。投影位置Pprojが変更された場合には、ステップS12において、投影位置Pprojの変更に従って歪み補正テーブルを更新して、映像投影部2に供給し、再度ステップS8にて歪み補正を行わせる。一方、投影位置Pprojが変更されていない場合には、処理を終了する。これにより、投影後に投影位置Pprojが変更されても、当該変更に対応した歪み補正をできる。   In the next step S10, the projection unit position measurement unit 16 measures the projection position Pproj after the projection of the video light onto the video display unit 1 is started from step S9. The projection position Pproj is sent to the correction parameter update calculation unit 14 via the first measurement value output unit 15. In step S11, the correction parameter update calculation unit 14 determines whether or not the projection position Pproj has been changed from the point in time when distortion correction is applied to step S8. When the projection position Pproj is changed, in step S12, the distortion correction table is updated according to the change of the projection position Pproj, supplied to the video projection unit 2, and distortion correction is performed again in step S8. On the other hand, if the projection position Pproj has not been changed, the process is terminated. Thereby, even if the projection position Pproj is changed after projection, distortion correction corresponding to the change can be performed.

以上説明したように、本発明を適用した映像表示システムによれば、任意形状の映像表示部1に対して、指定した視点位置に対して、基準パターン設定部13で指定した視角で基準パターンを歪みなく投影できる。さらに、投影部位置計測部16で得られた投影部位置を補正パラメータ更新演算部14に適用することで、映像投影部2の移動後も視点位置から見た基準パターンを保持することができる。   As described above, according to the video display system to which the present invention is applied, the reference pattern is displayed at the viewing angle specified by the reference pattern setting unit 13 with respect to the specified viewpoint position with respect to the video display unit 1 having an arbitrary shape. Can project without distortion. Furthermore, by applying the projection unit position obtained by the projection unit position measurement unit 16 to the correction parameter update calculation unit 14, the reference pattern viewed from the viewpoint position can be held even after the video projection unit 2 is moved.

したがって、この映像表示システムによれば、両眼視機能検査装置に搭載された場合において、被験者に歪みのない映像を提示することができ、被験者の正確な両眼視機能検査を実現することができる。また、検査中に、投影位置Pprojが変更されるような事態が発生しても、両眼視機能検査を中断することなく、速やかに歪み補正を施して、表示パターンを変更する必要がない。   Therefore, according to this video display system, when mounted on the binocular visual function testing device, it is possible to present a video without distortion to the subject and to realize an accurate binocular visual function test of the subject. it can. Further, even if a situation occurs in which the projection position Pproj is changed during the inspection, it is not necessary to quickly correct the distortion and change the display pattern without interrupting the binocular visual function inspection.

つぎに、本発明を適用した映像表示システムにおいて、被験者の視点位置を計測する視点位置計測部を更に備えたものについて説明する。   Next, a video display system to which the present invention is applied will be described which further includes a viewpoint position measuring unit that measures the viewpoint position of the subject.

この映像表示システムは、図6に示すように、補正パラメータ更新演算部14に接続された第2計測値出力部31と視点位置計測部32とを更に備える。視点位置計測部32は、例えば、被験者に装着させた偏光眼鏡や、その他の物に設置されており、視点位置Peyeの移動に応じて移動するものであれば良い。   As shown in FIG. 6, the video display system further includes a second measurement value output unit 31 and a viewpoint position measurement unit 32 connected to the correction parameter update calculation unit 14. The viewpoint position measurement unit 32 may be any apparatus that is installed in, for example, polarized glasses worn by the subject or other objects and moves according to the movement of the viewpoint position Peye.

視点位置計測部32は、視点位置Peyeを計測すると、当該視点位置Peyeを第2計測値出力部31に出力する。この視点位置Peyeは、第2計測値出力部31を介して補正パラメータ更新演算部14に入力される。   When the viewpoint position measurement unit 32 measures the viewpoint position Peye, the viewpoint position measurement unit 32 outputs the viewpoint position Peye to the second measurement value output unit 31. The viewpoint position Peye is input to the correction parameter update calculation unit 14 via the second measurement value output unit 31.

補正パラメータ更新演算部14は、視点位置計測部32によって計測された視点位置に基づいて、被験者の視点位置Peyeの移動前後において同じ視角θeyeに対応した基準パターンを保持する補正パラメータを更新する。すなわち、視点位置Peyeの変更前に表示させていた表示パターンの見え方と、視点位置Peyeの変更後に表示させる表示パターンの見え方とを同じとする。このため、補正パラメータ更新演算部14は、視点位置Peyeが変更された場合には、当該視点位置Peyeの変更に基づいて歪み補正テーブルを更新して、映像投影部2に出力する。   Based on the viewpoint position measured by the viewpoint position measurement unit 32, the correction parameter update calculation unit 14 updates the correction parameter that holds the reference pattern corresponding to the same viewing angle θeye before and after the movement of the viewpoint position Peye of the subject. That is, the appearance of the display pattern displayed before the change of the viewpoint position Peye and the appearance of the display pattern displayed after the change of the viewpoint position Peye are the same. For this reason, when the viewpoint position Peye is changed, the correction parameter update calculation unit 14 updates the distortion correction table based on the change of the viewpoint position Peye and outputs it to the video projection unit 2.

このような映像表示システムは、図7に示すように、ステップS21において視点位置計測部32によって計測された視点位置Peyeを第2計測値出力部31を介して補正パラメータ更新演算部14に入力する。   As shown in FIG. 7, such a video display system inputs the viewpoint position Peye measured by the viewpoint position measurement unit 32 in step S <b> 21 to the correction parameter update calculation unit 14 via the second measurement value output unit 31. .

そして、ステップS22において、補正パラメータ更新演算部14によって視点位置Peyeが変更されたと判定した場合には、ステップS23において、歪み補正テーブルを更新し、映像投影部2によって再度歪み補正処理を行わせる。これにより、視点位置Peyeの移動前後においても、表示パターンの見え方を同じとすることができる。   If it is determined in step S22 that the viewpoint position Peye has been changed by the correction parameter update calculation unit 14, the distortion correction table is updated in step S23, and the video projection unit 2 performs distortion correction processing again. Thereby, the appearance of the display pattern can be made the same before and after the movement of the viewpoint position Peye.

なお、ステップS21〜ステップS23が行われている時に、上述したステップS10〜ステップS12を並列して行っていても良いことは勿論である。   Of course, when the steps S21 to S23 are being performed, the above-described steps S10 to S12 may be performed in parallel.

以上のように、本発明を適用した映像表示システムによれば、視点位置Peyeが変更された場合であっても、視点位置Peyeの移動前後において当該視点位置Peyeから見た基準パターンを保持することができる。したがって、この映像表示システムによれば、両眼視機能検査装置に搭載された場合において、被験者に歪みのない映像を提示することができ、被験者の正確な両眼視機能検査を実現することができる。また、検査中に、被験者の動きによって視点位置Peyeが変更されるような事態が発生しても、両眼視機能検査を中断することなく、速やかに歪み補正を施して、表示パターンを変更する必要がない。   As described above, according to the video display system to which the present invention is applied, even when the viewpoint position Peye is changed, the reference pattern viewed from the viewpoint position Peye is retained before and after the movement of the viewpoint position Peye. Can do. Therefore, according to this video display system, when mounted on the binocular visual function testing device, it is possible to present a video without distortion to the subject and to realize an accurate binocular visual function test of the subject. it can. In addition, even if a situation occurs in which the viewpoint position Peye is changed by the movement of the subject during the examination, the display pattern is changed by quickly correcting distortion without interrupting the binocular visual function examination. There is no need.

つぎに、本発明を適用した映像表示システムにおいて、映像投影部2によって映像表示部1に表示させる表示領域を切り換えるための表示領域入力部41を更に備えたものについて説明する。   Next, a video display system to which the present invention is applied will be described which further includes a display area input unit 41 for switching a display area to be displayed on the video display unit 1 by the video projection unit 2.

この映像表示システムの表示領域入力部41は、図8に示すように、補正パラメータ更新演算部14に接続されている。また、図8において、補正パラメータ更新演算部14に接続されている位置計測部43は、上述の投影部位置計測部16及び視点位置計測部32に相当し、計測値出力部42は、上述の第1計測値出力部15及び第2計測値出力部31に相当するものである。   As shown in FIG. 8, the display area input unit 41 of this video display system is connected to the correction parameter update calculation unit 14. In FIG. 8, the position measurement unit 43 connected to the correction parameter update calculation unit 14 corresponds to the projection unit position measurement unit 16 and the viewpoint position measurement unit 32 described above, and the measurement value output unit 42 includes the above-described measurement value output unit 42. This corresponds to the first measurement value output unit 15 and the second measurement value output unit 31.

表示領域入力部41は、図9及び図10に示すように、映像表示部1のうち、映像を表示する表示領域1aと非表示領域1bとの区分を入力する。この表示領域1a及び非表示領域1bを示す情報は、補正パラメータ更新演算部14に入力される。図9に示した例は、映像表示部1の略中央を表示領域1aとし、映像表示部1の周囲部分を非表示領域1bとした場合であり、図10に示した例では、映像表示部1の略中央を非表示領域1bとし、映像表示部1の周囲部分を表示領域1aとした場合である。   As shown in FIGS. 9 and 10, the display area input unit 41 inputs a classification between a display area 1 a for displaying video and a non-display area 1 b in the video display unit 1. Information indicating the display area 1 a and the non-display area 1 b is input to the correction parameter update calculation unit 14. The example shown in FIG. 9 is a case where the approximate center of the video display unit 1 is the display region 1a and the peripheral part of the video display unit 1 is the non-display region 1b. In the example shown in FIG. This is a case where the approximate center of 1 is the non-display area 1b and the peripheral portion of the video display unit 1 is the display area 1a.

図9に示すような表示領域1a及び非表示領域1bを設定する場合、例えば、表示領域1aの幅Wを入力することによって、表示領域1aを表す座標値及び/又は非表示領域1bを表す座標値を認識する。また、映像投影部2の投影位置Pprojにおける映像全体の投影範囲を示す画角をφprojとして指定することによって、表示領域1aを指定しても良い。   When setting the display area 1a and the non-display area 1b as shown in FIG. 9, for example, by inputting the width W of the display area 1a, the coordinate value representing the display area 1a and / or the coordinate representing the non-display area 1b. Recognize the value. Alternatively, the display area 1a may be specified by specifying an angle of view indicating the projection range of the entire video at the projection position Pproj of the video projection unit 2 as φproj.

このように、図9に示すような表示領域1aと図10に示すような表示領域1aとで表示領域を切り換えることによって、例えば、図9に示すような映像を表示させることによって、被験者の中心視での映像の見え方を検査し、図10に示すような映像を表示させることによって、被験者の周辺視での映像の見え方を検査することができる。   In this way, by switching the display area between the display area 1a as shown in FIG. 9 and the display area 1a as shown in FIG. 10, for example, by displaying an image as shown in FIG. By inspecting the visual appearance of the video and displaying the video as shown in FIG. 10, the visual appearance of the subject in the peripheral vision can be inspected.

このような映像表示システムは、図11に示すように、ステップS9において映像投影部2から映像表示部1に映像光を投影した後のステップS31において、補正パラメータ更新演算部14によって、表示領域1aを指定する入力があったか否かを判定する。表示領域1aの指定入力があったと判定した場合、ステップS32において、映像投影部2によって、歪み補正処理を行う。このとき、映像投影部2は、表示領域1aを構成する映像データについて歪み補正テーブルを用いた歪み補正処理を行うことになる。   As shown in FIG. 11, in such a video display system, in step S31 after the video light is projected from the video projection unit 2 to the video display unit 1 in step S9, the correction parameter update calculation unit 14 causes the display region 1a to be displayed. It is determined whether or not there is an input for designating. When it is determined that there is a designation input for the display area 1a, the video projection unit 2 performs distortion correction processing in step S32. At this time, the video projection unit 2 performs a distortion correction process using the distortion correction table on the video data constituting the display area 1a.

以上のように、本発明を適用した映像表示システムによれば、映像投影部2から出力される基準パターンの表示領域1aを任意の形状に変更できるので、被験者の中心視での映像の見え方を検査する場合や、被験者の周辺視での映像の見え方を検査する場合といったように、表示領域1aの変更に対応して歪み補正処理を行うことができる。なお、上述した例では、基準パターンの表示領域1aを任意に変更できるとしたが、被験者の検査内容に応じて映像表示部1の右半分又は左半分のみを表示領域1aとできるのは勿論である。   As described above, according to the video display system to which the present invention is applied, the reference pattern display area 1a output from the video projection unit 2 can be changed to an arbitrary shape. The distortion correction processing can be performed in response to the change of the display area 1a, such as when examining the display area 1a or when examining the appearance of the image in the peripheral vision of the subject. In the above-described example, the reference pattern display area 1a can be arbitrarily changed, but it is needless to say that only the right half or the left half of the video display unit 1 can be set as the display area 1a according to the examination content of the subject. is there.

つぎに、本発明を適用した映像表示システムにおいて、被験者の視点位置Peyeから、基準パターンを見るための観察視野角φeyeを制御するものについて説明する。なお、この映像表示システムは、図12に示すように、投影位置Pproj、視点位置Peyeを計測する機能、表示領域を入力する機能を備えていても良い。   Next, in the video display system to which the present invention is applied, the one that controls the observation viewing angle φeye for viewing the reference pattern from the viewpoint position Peye of the subject will be described. As shown in FIG. 12, the video display system may have a function of measuring the projection position Pproj and the viewpoint position Peye and a function of inputting a display area.

この映像表示システムは、図12に示すように、図9で説明したように、表示領域1aの大きさを観察視野角φeyeで設定するための観察視野角入力部44を備える。また、観察視野角入力部44は、図10に示す非表示領域1bを観察視野角φeyeで設定するものであっても良い。この観察視野角入力部44は、補正パラメータ更新演算部14に接続されている。   As shown in FIG. 12, the video display system includes an observation viewing angle input unit 44 for setting the size of the display area 1a with the observation viewing angle φeye as described with reference to FIG. Further, the observation viewing angle input unit 44 may set the non-display area 1b shown in FIG. 10 with the observation viewing angle φeye. The observation viewing angle input unit 44 is connected to the correction parameter update calculation unit 14.

このような映像表示システムは、図13に示すように、ステップS9において映像投影部2から映像表示部1に映像光を投影した後のステップS41において、補正パラメータ更新演算部14によって、表示領域1a又は非表示領域1bを指定する観察視野角φeyeの入力があったか否かを判定する。観察視野角φeyeの指定入力があったと判定した場合、ステップS42において、映像投影部2によって、歪み補正処理を行う。このとき、映像投影部2は、表示領域1aを構成する映像データについて歪み補正テーブルを用いた歪み補正処理を行うことになる。   In such a video display system, as shown in FIG. 13, in step S41 after the video light is projected from the video projection unit 2 to the video display unit 1 in step S9, the correction parameter update calculation unit 14 causes the display region 1a to be displayed. Alternatively, it is determined whether or not an observation viewing angle φeye for designating the non-display area 1b has been input. When it is determined that the observation viewing angle φeye is designated, the video projection unit 2 performs distortion correction processing in step S42. At this time, the video projection unit 2 performs a distortion correction process using the distortion correction table on the video data constituting the display area 1a.

以上のように、本発明を適用した映像表示システムによれば、基準パターンを見させる観察視野角φeyeを任意に設定することができるので、被験者の視角θeyeに応じた両眼視機能検査を行う場合であっても、当該設定したい観察視野角φeyeに応じて歪み補正処理を行うことができる。   As described above, according to the video display system to which the present invention is applied, since the observation viewing angle φeye for viewing the reference pattern can be arbitrarily set, the binocular visual function test according to the visual angle θeye of the subject is performed. Even in this case, the distortion correction processing can be performed according to the observation viewing angle φeye desired to be set.

つぎに、上述した本発明を適用した映像表示システムにおいて、図14に示すように、基準パターン設定部13で設定された基準パターンの色を変更する色設定部51を更に備えたものについて説明する。   Next, in the video display system to which the present invention described above is applied, as shown in FIG. 14, a system further provided with a color setting unit 51 for changing the color of the reference pattern set by the reference pattern setting unit 13 will be described. .

この色設定部51は、基準パターン設定部13にて設定された基準パターンの色を変更するものである。この色設定は、被験者又は映像表示システムの管理者による操作キーの入力などによって行われても良く、自動的に順次変更されるものであっても良い。   The color setting unit 51 changes the color of the reference pattern set by the reference pattern setting unit 13. This color setting may be performed by an operation key input by the subject or the administrator of the video display system, or may be automatically and sequentially changed.

例えば、図15(a)、図15(b)に示すようなドットを配列した基準パターンにおいて、図15(a)に示すように基準パターンの背景を黒としドットを黄色で描画したり、図15(b)に示すように基準パターンの背景を薄緑としドットを紺色で描画することができる。   For example, in the reference pattern in which dots are arranged as shown in FIGS. 15A and 15B, the background of the reference pattern is black and dots are drawn in yellow as shown in FIG. As shown in FIG. 15B, the background of the reference pattern can be light green and the dots can be drawn in a dark blue color.

このような映像表示システムは、図16に示すように、ステップS9において映像投影部2から映像表示部1に映像光を投影した後のステップS43において、色設定部51に対して新たな色の指定があったか否かを判定する。そして、色の指定があった場合には、当該変更後の色で基準パターンを再描画して、映像投影部2から映像表示部1に映像光を投影する。   In such a video display system, as shown in FIG. 16, in step S43 after the video light is projected from the video projection unit 2 to the video display unit 1 in step S9, a new color is displayed to the color setting unit 51. It is determined whether there is a specification. When a color is designated, the reference pattern is redrawn with the changed color, and video light is projected from the video projection unit 2 onto the video display unit 1.

以上のように、本発明を適用した映像表示システムによれば、基準パターンの色を変更することで、被験者ごとに見やすい色(例えば弱視者に高コントラストな映像を提供する)や、背景に対して見やすい色(例えば水色の背景ならば基準パターンを緑ではなく黒に変更するなど)をその場で設定することができる。また、後述の立体映像での表示時には、赤青メガネなどを使用する際に、必要な色で基準パターンを表示することができる。   As described above, according to the video display system to which the present invention is applied, by changing the color of the reference pattern, it is easy to see for each subject (for example, providing a high-contrast video to a low vision person) and the background. Colors that are easy to see (for example, if the background is light blue, the reference pattern is changed to black instead of green) can be set on the spot. In addition, when displaying a stereoscopic image, which will be described later, a reference pattern can be displayed in a necessary color when using red / blue glasses or the like.

つぎに、本発明を適用した映像表示システムにおいて、基準パターンの背景を設定できる映像表示システムについて説明する。   Next, the video display system to which the background of the reference pattern can be set in the video display system to which the present invention is applied will be described.

この映像表示システムは、図17に示すように、基準パターン設定部13で設定された基準パターンの背景となる背景画像を設定する背景画像指定部61と、基準パターン設定部13で設定された基準パターンに背景画像指定部61で設定された背景画像を重畳する重畳部62とを更に備えている。   As shown in FIG. 17, the video display system includes a background image designating unit 61 that sets a background image as a background of the reference pattern set by the reference pattern setting unit 13, and a reference set by the reference pattern setting unit 13. A superimposing unit 62 that superimposes the background image set by the background image designating unit 61 on the pattern is further provided.

背景画像指定部61によって指定される背景としては、例えば図18(a)に示すように、空映像が挙げられる。この空映像の背景画像が指定された場合、背景画像指定部61は、当該背景画像を重畳部62に出力する。重畳部62は、基準パターン設定部13から図18(b)に示す基準パターンが入力された場合、当該背景画像と基準パターンとを重畳して、図18(c)に示す重畳映像を作成し、映像投影部2に出力する。   As a background specified by the background image specifying unit 61, for example, as shown in FIG. When the background image of the aerial video is designated, the background image designating unit 61 outputs the background image to the superimposing unit 62. When the reference pattern shown in FIG. 18B is input from the reference pattern setting unit 13, the superimposing unit 62 superimposes the background image and the reference pattern to create a superimposed image shown in FIG. 18C. And output to the video projection unit 2.

このような映像表示システムは、図19に示すように、ステップS9において映像投影部2から映像表示部1に映像光を投影した後のステップS51において、背景画像指定部61に対して背景画像の新たな指定があったか否かを判定する。そして、背景画像の指定があった場合には、重畳部62は、ステップS52において、当該背景画像を背景画像指定部61から読み込み、ステップS53において、既に基準パターン設定部13で設定されている基準パターンと背景画像とを重畳させる。   In such a video display system, as shown in FIG. 19, in step S51 after projecting video light from the video projection unit 2 to the video display unit 1 in step S9, a background image is displayed on the background image designating unit 61. It is determined whether there is a new designation. When the background image is specified, the superimposing unit 62 reads the background image from the background image specifying unit 61 in step S52, and the reference already set by the reference pattern setting unit 13 in step S53. The pattern and the background image are superimposed.

以上のように、本発明を適用した映像表示システムによれば、黒背景、単一色の背景だけでなく、風景写真などの背景に対して基準パターンを表示することでより日常生活に近い映像を見ながら、両眼視機能検査を実現することができる。   As described above, according to the video display system to which the present invention is applied, it is possible to display an image closer to everyday life by displaying a reference pattern on a background such as a landscape photograph as well as a black background and a single color background. Binocular visual function test can be realized while watching.

つぎに、上述した本発明を適用した映像表示システムにおいて、以前に記憶しておいたデータを用いて補正パラメータを演算するものについて説明する。   Next, a description will be given of the calculation of the correction parameter using previously stored data in the video display system to which the present invention is applied.

この映像表示システムは、図20に示すように、視点位置入力部24に入力された視点位置Peyeを用いて補正パラメータ演算部12により補正パラメータが演算されて、映像を表示させた後に、少なくとも被験者の右眼位置、左眼位置、右眼位置と左眼位置の中心位置、視点高さheye又は身長hからなる視点位置データを記憶する記憶部71を備える。被験者の右眼位置、左眼位置、右眼位置と左眼位置の中心位置の関係は、図21に示すように、視点位置Peyeを中心位置として、個人の眼間距離(d,−d)に依存する位置が右眼位置、左眼位置となる。その後、再度同じ被験者が両眼視機能検査を行う場合、補正パラメータ演算部12は、記憶部71に記憶された視点位置データを読み出して補正パラメータを演算する。   In this video display system, as shown in FIG. 20, the correction parameter calculation unit 12 calculates the correction parameter using the viewpoint position Peye input to the viewpoint position input unit 24 and displays the video. Storage unit 71 that stores viewpoint position data including right eye position, left eye position, center position of right eye position and left eye position, viewpoint height heye or height h. The subject's right eye position, left eye position, and the relationship between the right eye position and the center position of the left eye position, as shown in FIG. 21, are the individual interocular distances (d, -d) with the viewpoint position Peye as the center position. The position depending on the right eye position and the left eye position. Thereafter, when the same subject performs the binocular visual function test again, the correction parameter calculation unit 12 reads the viewpoint position data stored in the storage unit 71 and calculates the correction parameter.

視点高さのデータがない場合、視点高さは、被験者の身長から仮想的に設定する。図21に示すように、右眼及び左眼の中心を仮想的に視点位置Peyeと設定しておき、右眼、左眼はそれぞれの方向にdだけ離れているとする。この場合、仮想的な視点位置Pveyeは、図22(a)の上面図、図22(b)の側面図に示すように設定できる。右眼及び左眼の中心とし、視点高さを、仮想の被験者の身長hに対して導出した視点高さとする。右眼、左眼は記録する値をd、左眼の場合は−dとして1つのデータにまとめてもよく、身長ではなく視点高さを記録してもよい。また、データ読み込みの利便性を考えて、登録時に名称を付ける、日付を記録する、連番を付ける、などが考えられる。 When there is no viewpoint height data, the viewpoint height is virtually set from the height of the subject. As shown in FIG. 21, it is assumed that the center of the right eye and the left eye is virtually set as the viewpoint position Peye, and the right eye and the left eye are separated by d in each direction. In this case, the virtual viewpoint position Pveye can be set as shown in the top view of FIG. 22A and the side view of FIG. And the center of the right eye and the left eye, the point of view height, to a viewpoint height was derived for the height h v of the virtual subject. The right eye and the left eye may be recorded as one data as d, and in the case of the left eye as -d, the viewpoint height may be recorded instead of the height. In addition, for convenience of data reading, it is possible to give a name at the time of registration, record a date, and give a serial number.

このような映像表示システムにおいては、図23に示すように、ステップS1の後のステップS61において、補正パラメータ演算部12は、ステップS1で入力された各種情報に基づいて、記憶部71に記憶されているデータを読み込むか否かを判定し、データを読み込む場合にはステップS62にて記憶値の読み込みを行う。一方、記憶部71の記憶値を読み込まない場合、ステップS63において、記憶部71に、ステップS1で入力した各種のデータを保存するか否かを判定し、保存する場合には、当該データを保存してステップS2に処理を進める。このとき、記憶部71は、ステップS1で入力された項目ごとに記憶部71に保存するか否かを判定しても良い。なお、図23において、ステップS9の後の処理については、上述した何れかの処理を行っても良い。   In such a video display system, as shown in FIG. 23, in step S61 after step S1, the correction parameter calculation unit 12 is stored in the storage unit 71 based on various information input in step S1. Whether or not to read the stored data is determined, and when the data is to be read, the stored value is read in step S62. On the other hand, when the stored value of the storage unit 71 is not read, in step S63, it is determined whether or not the various data input in step S1 is stored in the storage unit 71. Then, the process proceeds to step S2. At this time, the memory | storage part 71 may determine whether it preserve | saves in the memory | storage part 71 for every item input by step S1. In FIG. 23, any of the processes described above may be performed as the process after step S9.

以上のように、本発明を適用した映像表示システムによれば、一度でも両眼視機能検査を行った被験者に関する被験者の右眼位置、左眼位置、右眼位置と左眼位置の中心位置、視点高さ又は身長からなる視点位置データを記憶しておくことにより、次回の両眼視機能検査の時に当該被験者から見て歪みの無い基準パターンを短時間で表示することができる。   As described above, according to the video display system to which the present invention is applied, the right eye position, the left eye position, the center position of the right eye position and the left eye position of the subject regarding the subject who has performed the binocular visual function test even once, By storing viewpoint position data consisting of viewpoint height or height, a reference pattern without distortion seen from the subject can be displayed in a short time at the next binocular visual function test.

つぎに、本発明を適用した映像表示システムにおいて、補正パラメータを選択できるものについて説明する。   Next, a description will be given of a video display system to which the present invention can be applied that can select a correction parameter.

この映像表示システムは、図24に示すように、補正パラメータ演算部12により演算された補正パラメータを記憶する記憶部71及び一時記憶部81を更に備え、映像投影部2は、記憶部71に記憶された補正パラメータと、入力I/F部11から入力した映像表示部1の形状と、映像投影部2の画角と、視点位置入力部24によって入力された観察者の視点位置とに基づいて演算された補正パラメータとのうち、選択された補正パラメータを用いて歪み補正処理を行うものである。   As shown in FIG. 24, the video display system further includes a storage unit 71 and a temporary storage unit 81 for storing the correction parameters calculated by the correction parameter calculation unit 12. The video projection unit 2 stores the correction parameters in the storage unit 71. Based on the corrected parameters, the shape of the video display unit 1 input from the input I / F unit 11, the angle of view of the video projection unit 2, and the viewpoint position of the observer input by the viewpoint position input unit 24. Among the calculated correction parameters, a distortion correction process is performed using a selected correction parameter.

一時記憶部81は、入力I/F部11で設定された値に基づいて補正パラメータ演算部12で演算された補正パラメータ又は記憶部71に記憶されて読み込まれた補正パラメータを一時的に保存する。一時記憶部81は、必要に応じて補正パラメータ更新演算部14に補正パラメータを出力する。一時記憶部81から補正パラメータを受信した場合、補正パラメータ更新演算部14は、一時記憶部81より渡された補正パラメータを映像投影部2に出力して、当該補正パラメータによって基準パターンに歪み補正処理をさせる。   The temporary storage unit 81 temporarily saves the correction parameter calculated by the correction parameter calculation unit 12 based on the value set by the input I / F unit 11 or the correction parameter stored and read in the storage unit 71. . The temporary storage unit 81 outputs correction parameters to the correction parameter update calculation unit 14 as necessary. When the correction parameter is received from the temporary storage unit 81, the correction parameter update calculation unit 14 outputs the correction parameter passed from the temporary storage unit 81 to the video projection unit 2, and performs distortion correction processing on the reference pattern using the correction parameter. Let

このような映像表示システムは、図25に示すように、ステップS71において、ステップS1で入力した各種情報を保存するか否かを判定し、必要に応じて、ステップS72にて各種情報を保存する。その後、映像表示システムは、ステップS73にてステップS1で入力した各種情報を用いて第1補正パラメータを計算して、ステップS74にて当該計算した第1補正パラメータを一時記憶部81に保存する。次に、補正パラメータ演算部12は、ステップS75にて以前に記憶部71に記憶しておいた同じ被験者の過去の各種情報を読み出し、ステップS76にて当該読み出した各種情報を用いて第2補正パラメータを計算し、ステップS77にて当該第2補正パラメータを一時記憶部81に保存する。   As shown in FIG. 25, such a video display system determines in step S71 whether or not to save various information input in step S1, and stores various information in step S72 as necessary. . Thereafter, the video display system calculates the first correction parameter using the various information input in step S1 in step S73, and stores the calculated first correction parameter in the temporary storage unit 81 in step S74. Next, the correction parameter calculation unit 12 reads various past information of the same subject previously stored in the storage unit 71 in step S75, and performs the second correction using the read various information in step S76. The parameter is calculated, and the second correction parameter is stored in the temporary storage unit 81 in step S77.

その後、映像表示システムは、ステップS3〜ステップS7の後、ステップS78において第1補正パラメータを選択して歪み補正処理を行うか否かを判定する。第1補正パラメータを選択して歪み補正処理を行う場合には、ステップS79において、補正パラメータ演算部12によって、一時記憶部81から第1補正パラメータを読み込み、第2補正パラメータを選択して歪み補正処理を行う場合には、ステップS80において、補正パラメータ演算部12によって一時記憶部81から第2補正パラメータを読み込む。   Thereafter, after step S3 to step S7, the video display system selects a first correction parameter in step S78 and determines whether or not to perform distortion correction processing. When the distortion correction processing is performed by selecting the first correction parameter, in step S79, the correction parameter calculation unit 12 reads the first correction parameter from the temporary storage unit 81, selects the second correction parameter, and corrects the distortion. When processing is performed, the second correction parameter is read from the temporary storage unit 81 by the correction parameter calculation unit 12 in step S80.

次に、ステップS8においては、ステップS79又はステップS80で読み込んだ補正パラメータを補正パラメータ演算部12から映像投影部2に送り、映像投影部2によって、何れかの補正パラメータによって歪み補正処理を行う。その後のステップS9において、基準パターンの映像光は、映像投影部2から映像表示部1に投影される。   Next, in step S8, the correction parameter read in step S79 or step S80 is sent from the correction parameter calculation unit 12 to the video projection unit 2, and the video projection unit 2 performs distortion correction processing using any correction parameter. In subsequent step S9, the image light of the reference pattern is projected from the image projection unit 2 onto the image display unit 1.

次に、例えば被験者や管理者の入力デバイスの操作などによって、基準パターンの歪み補正を更に行う必要があるか否かの操作入力信号が入力された場合には、更に歪み補正処理を行う必要があると判断して、処理をステップS81からステップS78に戻す。このステップS78においても、第1補正パラメータ又は第2補正パラメータを選択するか否かが判定されることになる。   Next, for example, when an operation input signal indicating whether or not further correction of the reference pattern needs to be performed is input by operating the input device of the subject or the administrator, it is necessary to perform further distortion correction processing. If it is determined that there is, the process returns from step S81 to step S78. Also in this step S78, it is determined whether or not to select the first correction parameter or the second correction parameter.

以上のように、本発明を適用した映像表示システムによれば、以前に両眼視機能検査を行った時の補正パラメータを記憶部71に記憶しておき、この補正パラメータと、今回に入力I/F部11から入力した各種情報に基づいて補正パラメータ演算部12によって演算した補正パラメータとを比較することができる。したがって、補正パラメータの比較によって、両眼視機能検査の履歴を追跡して、データの比較を実現することができる。   As described above, according to the video display system to which the present invention is applied, the correction parameter obtained when the binocular visual function test was previously performed is stored in the storage unit 71, and this correction parameter and the input I at this time are stored. The correction parameter calculated by the correction parameter calculation unit 12 based on various information input from the / F unit 11 can be compared. Therefore, the comparison of data can be realized by tracking the history of the binocular visual function test by comparing the correction parameters.

つぎに、本発明を適用した映像表示システムにおいて、映像表示部1に表示されている基準パターンの表示位置を変更するものについて説明する。   Next, a description will be given of a video display system to which the present invention is applied, in which the display position of the reference pattern displayed on the video display unit 1 is changed.

この映像表示システムは、図26に示すように、補正パラメータ演算部12及び補正パラメータ更新演算部14と接続された表示位置指定部91を備える。この表示位置指定部91は、基準パターン設定部13によって設定されて、映像投影部2から投影されて映像表示部1に表示されている基準パターンの表示位置を変更するために操作される外部操作手段である。   As shown in FIG. 26, the video display system includes a display position designation unit 91 connected to the correction parameter calculation unit 12 and the correction parameter update calculation unit 14. The display position specifying unit 91 is an external operation that is set by the reference pattern setting unit 13 and is operated to change the display position of the reference pattern projected from the video projection unit 2 and displayed on the video display unit 1. Means.

表示位置指定部91によって映像表示部1における基準パターンの表示位置が指定されると、補正パラメータ演算部12及び補正パラメータ更新演算部14は、指定された表示位置に基づいて表示位置を計算する。そして、変更後の表示位置に表示された場合にも歪みが無い映像とするための補正パラメータを演算する。   When the display position of the reference pattern in the video display unit 1 is specified by the display position specifying unit 91, the correction parameter calculation unit 12 and the correction parameter update calculation unit 14 calculate the display position based on the specified display position. Then, a correction parameter for calculating an image without distortion even when displayed at the changed display position is calculated.

表示位置指定部91は、例えば図27に示すように、視点位置Peyeの移動角度θを基準パターンの表示位置の変更値として入力しても良く、図28に示すように、映像表示部1内における上下左右の4方向の移動量を基準パターンの表示位置の変更値として入力しても良い。移動角度θが表示位置指定部91に入力された場合、補正パラメータ演算部12及び補正パラメータ更新演算部14は、当該移動角度θによって変更される基準パターンの移動距離Ltanθを演算する。   For example, as shown in FIG. 27, the display position designating unit 91 may input the movement angle θ of the viewpoint position Peye as a change value of the display position of the reference pattern. As shown in FIG. The amount of movement in the four directions of up, down, left and right may be inputted as a change value of the display position of the reference pattern. When the movement angle θ is input to the display position designating unit 91, the correction parameter calculation unit 12 and the correction parameter update calculation unit 14 calculate the movement distance Ltanθ of the reference pattern that is changed by the movement angle θ.

このような映像表示システムは、図29に示すように、ステップS2にて歪み補正のための補正パラメータを演算した後のステップS81において、表示位置指定部91に対して表示位置の指定があった場合には、当該表示位置の情報を補正パラメータ演算部12に供給する。これに対し、補正パラメータ演算部12は、ステップS82において表示位置の計算を行い、ステップS3以降の処理を行う。これによって、ステップS81で指定された表示位置に基準パターンの表示を行う。その後、補正パラメータ更新演算部14は、表示位置指定部91に基準パターンの表示位置が指定されたか否かを判定し、基準パターンの表示位置が変更された場合には、ステップS84にて表示位置を再計算して、ステップS7に処理を戻す。   In such a video display system, as shown in FIG. 29, the display position is designated to the display position designation unit 91 in step S81 after calculating the correction parameters for distortion correction in step S2. In this case, the display parameter information is supplied to the correction parameter calculation unit 12. On the other hand, the correction parameter calculation unit 12 calculates the display position in step S82, and performs the processing after step S3. As a result, the reference pattern is displayed at the display position designated in step S81. Thereafter, the correction parameter update calculation unit 14 determines whether or not the display position of the reference pattern is specified in the display position specifying unit 91. If the display position of the reference pattern is changed, the display position is displayed in step S84. Is recalculated, and the process returns to step S7.

以上のように、本発明を適用した映像表示システムによれば、両眼視機能検査において、被験者又は管理者の意図に応じて基準パターンの表示位置を任意に設定することができ、任意の場所に基準パターンを表示できる。これにより、両眼視機能検査の自由度を高めることができる。   As described above, according to the video display system to which the present invention is applied, in the binocular visual function test, the display position of the reference pattern can be arbitrarily set according to the intention of the subject or the administrator, and any location Can display the reference pattern. Thereby, the freedom degree of a binocular visual function test | inspection can be raised.

つぎに、本発明を適用した映像表示システムにおいて、複数の映像投影部2を使用したものについて説明する。   Next, a video display system to which the present invention is applied will be described using a plurality of video projection units 2.

この映像表示システムは、図30に示すように、3台の映像投影部2A,2B,2Cを備え、当該3台の映像投影部2A,2B,2Cを1台の制御装置3によって制御している。また、図31に示すように、各映像投影部2A,2B,2Cに対して1台の制御装置3A,3B,3Cを接続しても良い。   As shown in FIG. 30, the video display system includes three video projection units 2A, 2B, and 2C, and the three video projection units 2A, 2B, and 2C are controlled by a single control device 3. Yes. Further, as shown in FIG. 31, one control device 3A, 3B, 3C may be connected to each of the video projection units 2A, 2B, 2C.

このように複数の映像投影部2A,2B,2Cを備えた映像表示システムによれば、例えば図32に示すように、映像表示部1の外周部には図中点線で示す低解像度映像101’を表示させ、映像表示部1の中央部には高解像度映像102’を表示させることができる。すなわち、第1の映像投影部2に接続された制御装置3によって低解像度映像101と中央部をマスクする表示範囲情報103とを組み合わせて、外周部に表示される低解像度映像101’を第1の映像投影部2から投影させ、第2の映像投影部2に接続された制御装置3によって高解像度映像102と外周部をマスクする表示範囲情報104とを組み合わせて、中央部に表示される高解像度映像102’を第2の映像投影部2から投影させることができる。   As described above, according to the video display system including the video projection units 2A, 2B, 2C, for example, as shown in FIG. Can be displayed, and a high-resolution video 102 ′ can be displayed at the center of the video display unit 1. In other words, the control device 3 connected to the first video projection unit 2 combines the low resolution video 101 and the display range information 103 that masks the central portion, so that the low resolution video 101 ′ displayed on the outer peripheral portion is the first. The high-resolution video 102 and the display range information 104 for masking the outer periphery are combined by the control device 3 that is projected from the video projection unit 2 and connected to the second video projection unit 2, and is displayed at the center. The resolution image 102 ′ can be projected from the second image projection unit 2.

また、図32に示す例に限らず、映像表示部1の左半分には格子状映像を表示させ、映像表示部1の右半分には幾何学図形映像を表示させるといった組み合わせや、同じ図形で色が異なるものなどの複数の映像を組み合わせて出力することができる。   Further, the present invention is not limited to the example shown in FIG. 32, and a combination of displaying a grid-like image on the left half of the image display unit 1 and displaying a geometric figure image on the right half of the image display unit 1 or the same graphic. Multiple videos such as those with different colors can be combined and output.

このような映像表示システムは、図33に示すように、ステップS1〜ステップS7の処理を行ったステップS91において、映像投影部2A,2B,2Cの個数分だけ表示領域の指定を行う。このとき、図26で示した表示位置指定部91によって、各映像投影部2A,2B,2Cについて表示領域が、制御装置3A,3B,3Cのそれぞれに入力される。次のステップS92において、各映像投影部2A,2B,2Cに接続された制御装置3A,3B,3Cによって表示領域の計算が行われ、全ての映像投影部2A,2B,2Cについて表示領域の指定が完了したか否かが判定されて、完了した場合には、ステップS8の歪み補正処理後に、ステップS9にて各映像投影部2A,2B,2Cから映像が投影される。   As shown in FIG. 33, such a video display system designates display areas as many as the number of video projecting units 2A, 2B, and 2C in step S91 in which the processing of steps S1 to S7 is performed. At this time, the display position designation unit 91 shown in FIG. 26 inputs the display areas for the video projection units 2A, 2B, and 2C to the control devices 3A, 3B, and 3C, respectively. In the next step S92, display areas are calculated by the control devices 3A, 3B, and 3C connected to the video projection units 2A, 2B, and 2C, and display areas are designated for all the video projection units 2A, 2B, and 2C. In step S9, images are projected from the image projection units 2A, 2B, and 2C after the distortion correction processing in step S8.

以上のように、本発明を適用した映像表示システムによれば、例えば図32に示したように、映像表示部1のうちの異なる表示領域ごとに異なる映像投影部2を使用する場合、異なる解像度映像を映像表示部1に投影する場合、同じ映像を2つ重ねて輝度を変える場合などのように、単一の映像投影部2では実現できない映像を投影できる。これにより、この映像表示システムを搭載した両眼視機能検査装置によれば、当該両眼視機能検査の自由度を高めることができる。   As described above, according to the video display system to which the present invention is applied, when different video projection units 2 are used for different display areas in the video display unit 1 as shown in FIG. When a video is projected on the video display unit 1, a video that cannot be realized by the single video projection unit 2 can be projected, such as a case where the luminance is changed by overlapping two identical videos. Thereby, according to the binocular visual function inspection apparatus equipped with this video display system, the degree of freedom of the binocular visual function inspection can be increased.

つぎに、本発明を適用した映像表示システムにおいて、基準パターン設定部13によって設定された基準パターンを、立体映像として表示させるものについて説明する。   Next, in the video display system to which the present invention is applied, a description will be given of what displays the reference pattern set by the reference pattern setting unit 13 as a stereoscopic video.

この映像表示システムは、図34に示すように、右眼用映像を投影する映像投影部2Rと、左眼用映像を投影する映像投影部2Lとが、制御装置3に接続されて構成されている。右眼用映像と左眼用映像とは、奥行き方向の表示位置によって視差の付いた同じ映像である。この右眼用映像及び左眼用映像の視点位置は、左右それぞれを入力しても良く、1つ入力してある値d(通常2.7〜3.3cm程度)を用いて、中心の視点位置Peyeから+dだけずれた右眼用映像、中心の視点位置Peyeから−dだけずれた左眼用映像としてもよい。   As shown in FIG. 34, this video display system is configured by connecting a video projection unit 2R that projects a right-eye video and a video projection unit 2L that projects a left-eye video to a control device 3. Yes. The right-eye video and the left-eye video are the same video with parallax depending on the display position in the depth direction. The right eye image and the left eye image may be input to the left and right viewpoints, and a single viewpoint value d (usually about 2.7 to 3.3 cm) is used. A right-eye image shifted by + d from the position Peye and a left-eye image shifted by −d from the central viewpoint position Peye may be used.

なお、映像表示システムは、図35に示すように、映像投影部2R、映像投影部2Lにそれぞれ接続された右眼用補正処理部110R、左眼用補正処理部110Lを備える。これらの右眼用補正処理部110R及び左眼用補正処理部110Lは、それぞれ、右眼用の補正パラメータ、左眼用の補正パラメータを用いて歪み補正処理を行うことになる。また、右眼用補正処理部110R、左眼用補正処理部110Lを備える場合、何れかの処理部110によって基準パターンの設定処理等を行っても良く、共通した処理を片方の処理部110で行っても良い。なお、これらの処理部110は、上述の制御装置3と同一の機能を有する。   As shown in FIG. 35, the video display system includes a video projection unit 2R and a right eye correction processing unit 110R and a left eye correction processing unit 110L connected to the video projection unit 2L, respectively. The right-eye correction processing unit 110R and the left-eye correction processing unit 110L perform distortion correction processing using the right-eye correction parameter and the left-eye correction parameter, respectively. When the right eye correction processing unit 110R and the left eye correction processing unit 110L are provided, the reference pattern setting processing or the like may be performed by any of the processing units 110, and the common processing is performed by one processing unit 110. You can go. Note that these processing units 110 have the same functions as the control device 3 described above.

また、図36に示すように、右眼用補正処理部110R、左眼用補正処理部110Lとに共通した処理を行う共通処理部111を接続して、入力I/F部11の処理、基準パターン設定部13の処理等の共通処理を行わせても良い。   As shown in FIG. 36, a common processing unit 111 that performs processing common to the right-eye correction processing unit 110R and the left-eye correction processing unit 110L is connected, so that the processing of the input I / F unit 11 and the reference Common processing such as processing of the pattern setting unit 13 may be performed.

このような映像表示システムは、基準パターン設定部13によって設定された基準パターンを立体映像とするために、図37に示すように、映像投影部2R、映像投影部2Lには右眼用、左眼用の偏光フィルタ121R、121Lを設置し、被験者には映像投影部2R、映像投影部2Lと同じ偏光フィルタを備えた偏光板122を右眼、左眼の直前に設ける。また、映像投影部2R、映像投影部2Lで交互に映像を投影する場合には、当該時分割制御に対応したシャッタ動作をする液晶シャッタメガネを被験者に装着させるものであっても良い。   In such a video display system, in order to make the reference pattern set by the reference pattern setting unit 13 into a three-dimensional image, as shown in FIG. 37, the video projection unit 2R and the video projection unit 2L are for the right eye, The polarizing filters 121R and 121L for eyes are installed, and the subject is provided with a polarizing plate 122 having the same polarizing filter as the video projection unit 2R and the video projection unit 2L in front of the right eye and the left eye. Further, when images are alternately projected by the image projection unit 2R and the image projection unit 2L, liquid crystal shutter glasses that perform a shutter operation corresponding to the time division control may be attached to the subject.

このように、映像表示システムによって立体の基準パターンを表示させる場合、ステップS1の後のステップS101において、右眼、左眼それぞれの視点位置から映像表示部1を見た場合の歪み補正のための補正パラメータを設定し、当該それぞれの補正パラメータを一時的に記憶しておく。その後、ステップS3〜ステップS7において、映像投影部2R、映像投影部2Lに共通した処理を行った後、ステップS103において、映像投影部2R、映像投影部2Lは、自己が右眼用映像を出力するか否かを判定し、右眼用映像を出力する場合には、ステップS104〜ステップS106の処理を行い、そうでない場合には、ステップS107〜ステップS109の処理を行う。すなわち、映像投影部2RはステップS104〜ステップS106の処理を行い、映像投影部2LはステップS107〜ステップS109の処理を行う。   As described above, when displaying the three-dimensional reference pattern by the video display system, in step S101 after step S1, the distortion correction is performed when the video display unit 1 is viewed from the viewpoint positions of the right eye and the left eye. Correction parameters are set, and the respective correction parameters are temporarily stored. Thereafter, in steps S3 to S7, processing common to the video projection unit 2R and the video projection unit 2L is performed, and then in step S103, the video projection unit 2R and the video projection unit 2L output the right-eye video. If it is determined whether or not to output the right-eye video, the process of step S104 to step S106 is performed. If not, the process of step S107 to step S109 is performed. That is, the video projection unit 2R performs the processes of steps S104 to S106, and the video projection unit 2L performs the processes of steps S107 to S109.

ステップS104,107は、それぞれ右眼用映像、左眼用映像を作成し、ステップS105,108は、それぞれ右眼用映像、左眼用映像に歪み補正処理を行い、ステップS106,109は、それぞれの映像投影部2R、映像投影部2Lによって右眼用映像、左眼用映像を投影する。これによって、映像表示システムは、2台の映像投影部2R、映像投影部2Lを利用して、映像表示部1に立体の基準パターンを表示することができる。   Steps S104 and 107 create right-eye video and left-eye video, respectively. Steps S105 and 108 perform distortion correction processing on the right-eye video and left-eye video, respectively. Steps S106 and 109 respectively The right-eye video and the left-eye video are projected by the video projection unit 2R and the video projection unit 2L. Accordingly, the video display system can display a three-dimensional reference pattern on the video display unit 1 by using the two video projection units 2R and 2L.

また、このように立体の基準パターンを映像表示部1に表示する場合において、複数個の処理部によって図38に示す処理を行うことが望ましい。   Further, in the case of displaying the three-dimensional reference pattern on the video display unit 1 in this way, it is desirable to perform the processing shown in FIG. 38 by a plurality of processing units.

すなわち、2個の第1処理部、第2処理部を備える場合、図39に示すように、ステップS1〜ステップS3の処理A、ステップS3〜ステップS106の処理Cを第1処理部で行うと共に、ステップS2及びステップS3の処理BとステップS107〜ステップS109の処理Dを第2処理部で行う。また、他の例を図40に示すように、3個の第1処理部、第2処理部、第3処理部を備える場合、ステップS1のみの処理Aを第1処理部で行い、映像投影部2R、映像投影部2Lそれぞれの計算であるステップS101,S102の処理B,Cを第2処理部、第3処理部で行う。また、映像投影部2R、映像投影部2Lについて共通の処理であるステップS3〜ステップS7の処理Dを第1処理部で行い、右眼用映像のためのステップS104〜ステップS106の処理Eを第2処理部で行い、左眼用映像のためのステップS107〜ステップS109を第3処理部で行う。このように、複数の処理部で処理負担を分割することによって、立体映像で基準パターンを表示する処理をスムーズに実現できる。   That is, when two first processing units and second processing units are provided, as shown in FIG. 39, the processing A in steps S1 to S3 and the processing C in steps S3 to S106 are performed in the first processing unit. , Step B in Steps S2 and S3 and Step D in Steps S107 to S109 are performed by the second processing unit. As another example shown in FIG. 40, when three first processing units, a second processing unit, and a third processing unit are provided, the processing A of only step S1 is performed by the first processing unit, and image projection is performed. Processes B and C in steps S101 and S102, which are calculations performed by the unit 2R and the video projection unit 2L, are performed by the second processing unit and the third processing unit. Further, the processing D in steps S3 to S7, which is a common process for the video projection unit 2R and the video projection unit 2L, is performed in the first processing unit, and the processing E in steps S104 to S106 for the right-eye video is performed in the first. The second processing unit performs steps S107 to S109 for the left-eye video in the third processing unit. As described above, by dividing the processing burden among the plurality of processing units, it is possible to smoothly realize the process of displaying the reference pattern in the stereoscopic video.

以上のように、本発明を適用した映像表示システムによれば、右眼用映像、左眼用映像を別個に表示して両眼視機能検査を行う検査方法のみならず、右眼用映像と左眼用映像とを同時に映像表示部1に表示させて、立体視ならではの奥行き方向を含む任意の位置に映像を表示できる。これによって、両眼視機能検査において、奥行き方向に関する検査も歪みの無い映像で行わせることができる。   As described above, according to the video display system to which the present invention is applied, not only the inspection method for performing the binocular visual function test by separately displaying the video for the right eye and the video for the left eye, The image for the left eye can be displayed on the image display unit 1 at the same time, and the image can be displayed at an arbitrary position including the depth direction unique to stereoscopic viewing. Thereby, in the binocular visual function test, the test in the depth direction can be performed with an image having no distortion.

なお、上述の実施の形態は本発明の一例である。このため、本発明は、上述の実施形態に限定されることはなく、この実施の形態以外であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることは勿論である。   The above-described embodiment is an example of the present invention. For this reason, the present invention is not limited to the above-described embodiment, and various modifications can be made depending on the design and the like as long as the technical idea according to the present invention is not deviated from this embodiment. Of course, it is possible to change.

本発明を適用した映像表示システムのブロック図である。1 is a block diagram of a video display system to which the present invention is applied. 本発明を適用した映像表示システムにおける機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて映像表示部に表示させる基準パターンを示す図である。It is a figure which shows the reference | standard pattern displayed on a video display part in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、視角と画角の関係を示す図である。It is a figure which shows the relationship between a viewing angle and a view angle in the video display system to which this invention is applied. 本発明を適用した映像表示システムにより基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying a reference | standard pattern by the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、視点位置を計測する構成を追加した機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure which added the structure which measures a viewpoint position in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、視点位置を計測する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying the reference | standard pattern by adding the process which measures a viewpoint position in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、表示領域を入力する構成を追加した機能的な構成を示すブロック図である。In the video display system to which the present invention is applied, it is a block diagram showing a functional configuration to which a configuration for inputting a display area is added. 本発明を適用した映像表示システムにおいて、表示領域を幅を指定することの説明図である。It is explanatory drawing of designating the width | variety of a display area in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、映像表示部の略中央を非表示領域1bとしたことの説明図である。In the video display system to which the present invention is applied, it is an explanatory diagram that the approximate center of the video display unit is a non-display area 1b. 本発明を適用した映像表示システムにおいて、表示領域を入力する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of adding the process which inputs a display area, and displaying a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、視野角を入力する構成を追加した機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure which added the structure which inputs a viewing angle in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、視野角を入力する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying the reference | standard pattern by adding the process which inputs a viewing angle in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、基準パターンの色を入力する構成を追加した機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure which added the structure which inputs the color of a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、基準パターンの色を偏光させる処理の説明図である。It is explanatory drawing of the process which polarizes the color of a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、基準パターンの色を入力する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of adding the process which inputs the color of a reference | standard pattern, and displaying a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、背景画像を指定する構成を追加した機能的な構成を示すブロック図である。In the video display system to which the present invention is applied, it is a block diagram showing a functional configuration to which a configuration for designating a background image is added. 本発明を適用した映像表示システムにおいて、背景画像を基準パターンに重畳させる処理の説明図である。It is explanatory drawing of the process which superimposes a background image on a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、背景画像を指定する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying the reference | standard pattern by adding the process which designates a background image in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、入力された各種情報を記憶する構成を追加した機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure which added the structure which memorize | stores the various information input in the video display system to which this invention is applied. 視点位置Peyeに対する右眼位置、左眼位置の説明図である。It is explanatory drawing of the right eye position and left eye position with respect to viewpoint position Peye. 仮想視点位置を設定した時の上面図、側面図である。It is the top view and side view when a virtual viewpoint position is set. 本発明を適用した映像表示システムにおいて、各種情報を記憶する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying the reference | standard pattern by adding the process which memorize | stores various information in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、補正パラメータを記憶する構成を追加した機能的な構成を示すブロック図である。It is a block diagram which shows the functional structure which added the structure which memorize | stores a correction parameter in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、補正パラメータを記憶する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of adding the process which memorize | stores a correction parameter, and displaying a reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、表示位置を指定する構成を追加した機能的な構成を示すブロック図である。In the video display system to which the present invention is applied, it is a block diagram showing a functional configuration to which a configuration for specifying a display position is added. 本発明を適用した映像表示システムにおいて、視角の移動角度を表示位置の指定に用いることの説明図である。It is explanatory drawing of using the moving angle of a viewing angle for designation | designated of a display position in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、基準パターンの上下左右の移動を表示位置の指定に用いることの説明図である。In the video display system to which the present invention is applied, it is an explanatory diagram of using the vertical and horizontal movements of the reference pattern for designating the display position. 本発明を適用した映像表示システムにおいて、表示位置を指定する処理を追加して基準パターンを表示させる時の処理を示すフローチャートである。It is a flowchart which shows the process at the time of displaying the reference | standard pattern by adding the process which designates a display position in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えた構成のブロック図である。1 is a block diagram of a configuration including a plurality of video projection units in a video display system to which the present invention is applied. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えた他の構成のブロック図である。FIG. 10 is a block diagram of another configuration including a plurality of video projection units in a video display system to which the present invention is applied. 本発明を適用した映像表示システムにおいて、映像表示部の外周と中央とで異なる映像を表示させる処理の説明図である。It is explanatory drawing of the process which displays a video different in the outer periphery and center of a video display part in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えた構成によって基準パターンを表示する処理のフローチャートである。It is a flowchart of the process which displays a reference | standard pattern by the structure provided with the several image | video projection part in the image | video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えて立体映像を表示する構成のブロック図である。In the video display system to which the present invention is applied, it is a block diagram of a configuration that includes a plurality of video projection units and displays a stereoscopic video. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えて立体映像を表示する他の構成のブロック図である。In the video display system to which the present invention is applied, it is a block diagram of another configuration that includes a plurality of video projection units and displays a stereoscopic video. 本発明を適用した映像表示システムにおいて、複数の映像投影部を備えて立体映像を表示する他の構成のブロック図である。In the video display system to which the present invention is applied, it is a block diagram of another configuration that includes a plurality of video projection units and displays a stereoscopic video. 本発明を適用した映像表示システムにおいて、偏光方式によって立体映像を表示する他の構成のブロック図である。In the video display system to which the present invention is applied, it is a block diagram of another configuration for displaying a stereoscopic video by a polarization method. 本発明を適用した映像表示システムにおいて、立体の基準パターンを表示する処理のフローチャートである。It is a flowchart of the process which displays the solid reference | standard pattern in the video display system to which this invention is applied. 本発明を適用した映像表示システムにおいて、複数の処理部によって処理を分担して、立体の基準パターンを表示する処理のフローチャートである。In the video display system to which the present invention is applied, the processing is shared by a plurality of processing units to display a three-dimensional reference pattern. 本発明を適用した映像表示システムにおいて、複数の処理部によって処理を分担して、立体の基準パターンを表示する他の処理のフローチャートである。In the video display system to which the present invention is applied, the processing is shared by a plurality of processing units, and is a flowchart of other processing for displaying a three-dimensional reference pattern.

符号の説明Explanation of symbols

1 映像表示部
1a 表示領域
1b 非表示領域
2 映像投影部
2A,2B,2C 映像投影部
2L 映像投影部
2R 映像投影部
3 制御装置
3A,3B,3C 制御装置
11 入力I/F部
12 補正パラメータ演算部
13 基準パターン設定部
14 補正パラメータ更新演算部
15 第1計測値出力部
16 投影部位置計測部
21 投影部情報入力部
22 位置パラメータ入力部
23 表示部形状入力部
24 視点位置入力部
31 第2計測値出力部
32 視点位置計測部
41 表示領域入力部
42 計測値出力部
43 位置計測部
44 観察視野角入力部
51 色設定部
61 背景画像指定部
62 重畳部
71 記憶部
81 一時記憶部
91 表示位置指定部
101 低解像度映像
102 高解像度映像
103 表示範囲情報
104 表示範囲情報
110 処理部
110L 左眼用補正処理部
110R 右眼用補正処理部
111 共通処理部
121 偏光フィルタ
122 偏光板
DESCRIPTION OF SYMBOLS 1 Image | video display part 1a Display area 1b Non-display area 2 Image | video projection part 2A, 2B, 2C Image | video projection part 2L Image | video projection part 2R Image | video projection part 3 Control apparatus 3A, 3B, 3C Control apparatus 11 Input I / F part 12 Correction parameter Calculation unit 13 Reference pattern setting unit 14 Correction parameter update calculation unit 15 First measurement value output unit 16 Projection unit position measurement unit 21 Projection unit information input unit 22 Position parameter input unit 23 Display unit shape input unit 24 Viewpoint position input unit 31 First 2 Measurement value output unit 32 Viewpoint position measurement unit 41 Display area input unit 42 Measurement value output unit 43 Position measurement unit 44 Observation viewing angle input unit 51 Color setting unit 61 Background image designation unit 62 Superimposition unit 71 Storage unit 81 Temporary storage unit 91 Display position designation unit 101 Low resolution video 102 High resolution video 103 Display range information 104 Display range information 110 Parts 110L for the left eye correction processing unit 110R for the right eye correction processing unit 111 shared processing unit 121 polarizing filter 122 polarizer

Claims (11)

任意曲面の映像表示部に映像を投影する映像表示装置であって、
前記映像表示部に表示する視角に対応した基準パターンを設定する基準パターン設定部と、
前記基準パターン設定部によって設定された基準パターンを表す映像データを入力し、当該映像データに所定の歪み補正処理を施して前記映像表示部に映像を投影する映像投影部と、
前記映像提示手段に提示された映像を歪み無く観察させるためのパラメータとして、前記映像表示部と前記映像投影部との位置パラメータと、前記映像表示部の形状と、前記映像投影部の画角及び特性と、観察者の視点位置とを少なくとも入力するパラメータ入力手段と、
前記パラメータ入力手段によって入力された前記映像表示部の形状と、前記映像投影部の画角及び特性と、観察者の視点位置とに基づいて、前記映像投影部が前記映像データに歪み補正処理を施すための補正パラメータを演算する補正パラメータ演算部と、
前記映像投影部の位置を計測する投影部位置計測部と、
前記投影部位置計測部によって計測された投影部位置を用いて前記補正パラメータを更新する補正パラメータ更新演算部と
観察者の視点位置を計測する視点位置計測部とを備え、
前記補正パラメータ更新演算部は、前記視点位置計測部によって計測された視点位置に基づいて、観察者の視点位置の移動前後において同じ視角に対応した基準パターンを保持する前記補正パラメータを更新すること
を特徴とする映像表示装置。
An image display device that projects an image on an arbitrary curved image display unit,
A reference pattern setting unit that sets a reference pattern corresponding to a viewing angle displayed on the video display unit;
A video projection unit that inputs video data representing a reference pattern set by the reference pattern setting unit, performs a predetermined distortion correction process on the video data, and projects a video on the video display unit;
As parameters for observing the video presented to the video presentation means without distortion, positional parameters of the video display unit and the video projection unit, the shape of the video display unit, the angle of view of the video projection unit, and Parameter input means for inputting at least the characteristics and the viewpoint position of the observer;
The video projection unit performs distortion correction processing on the video data based on the shape of the video display unit input by the parameter input unit, the angle of view and characteristics of the video projection unit, and the viewpoint position of the observer. A correction parameter calculation unit for calculating a correction parameter to be applied;
A projection unit position measurement unit for measuring the position of the video projection unit;
A correction parameter update calculation unit that updates the correction parameter using the projection unit position measured by the projection unit position measurement unit ;
A viewpoint position measuring unit that measures the viewpoint position of the observer,
The correction parameter update calculation unit updates the correction parameter holding the reference pattern corresponding to the same viewing angle before and after the movement of the observer's viewpoint position based on the viewpoint position measured by the viewpoint position measurement unit. A characteristic video display device.
前記映像投影部によって前記映像表示部に表示させる表示領域を切り換える表示領域切換部を更に備えることを特徴とする請求項に記載の映像表示装置。 The video display apparatus according to claim 1 , further comprising a display area switching unit that switches a display area to be displayed on the video display unit by the video projection unit. 観察者の視点位置からの観察視野角を制御する視野角変更手段を更に備えたことを特徴とする請求項1又は請求項2に記載の映像表示装置。 Video display according to the viewer's further comprising a viewing angle changing means for controlling the observation viewing angle from the viewpoint position to claim 1 or claim 2, characterized in. 前記基準パターン設定部で設定された基準パターンの色を変更する色設定部を更に備えたことを特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。 Video display according to any one of claims 1 to 3, further comprising a color setting unit to change the color of the reference pattern set in the reference pattern setting unit. 前記基準パターン設定部で設定された基準パターンの背景となる背景画像を設定する背景画像指定部と、
前記基準パターン設定部で設定された基準パターンに前記背景画像指定部で設定された背景画像を重畳する重畳部と
を更に備えたことを特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。
A background image designating unit for setting a background image as a background of the reference pattern set by the reference pattern setting unit;
Any one of claims 1 to 4, characterized in that further comprising a superimposing unit that superimposes the background image set in the background image specifying unit to a reference pattern set by the reference pattern setting section The video display device described in 1.
前記パラメータ入力手段に入力された視点位置を用いて前記補正パラメータ演算部により補正パラメータが演算されて、映像を表示させた後に、少なくとも観察者の右眼位置、左眼位置、右眼位置と左眼位置の中心位置、視点高さ又は身長からなる視点位置データを記憶する記憶部を備え、
前記補正パラメータ演算部は、前記記憶部に記憶された視点位置データを読み出して補正パラメータを演算すること
を特徴する請求項1乃至請求項の何れか一項に記載の映像表示装置。
After the correction parameter is calculated by the correction parameter calculation unit using the viewpoint position input to the parameter input means and the image is displayed, at least the right eye position, the left eye position, the right eye position, and the left of the viewer A storage unit that stores viewpoint position data including the center position, viewpoint height, or height of the eye position;
The video display device according to any one of claims 1 to 5 , wherein the correction parameter calculation unit calculates the correction parameter by reading the viewpoint position data stored in the storage unit.
前記補正パラメータ演算部により演算された補正パラメータを記憶する記憶部を更に備え、
前記映像投影部は、前記記憶部に記憶された補正パラメータと、前記パラメータ入力手段によって入力された前記映像表示部の形状と、前記映像投影部の画角と、観察者の視点位置とに基づいて演算された補正パラメータとのうち、選択された補正パラメータを用いて歪み補正処理を行うこと
を特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。
A storage unit for storing the correction parameter calculated by the correction parameter calculation unit;
The video projection unit is based on the correction parameters stored in the storage unit, the shape of the video display unit input by the parameter input unit, the angle of view of the video projection unit, and the viewpoint position of the observer. of the calculated correction parameter Te, the image display device according to any one of claims 1 to 6, characterized in that performing the distortion correction processing using the selected correction parameter.
前記基準パターン設定部によって設定されて、前記映像投影部から投影されて前記映像表示部に表示されている基準パターンの表示位置を変更するために操作される外部操作手段を更に備えたことを特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。 The apparatus further comprises an external operation means that is set by the reference pattern setting unit, and is operated to change a display position of the reference pattern that is projected from the video projection unit and displayed on the video display unit. The video display device according to any one of claims 1 to 7 . 前記映像投影部を複数備え、各映像投影部から異なる映像を前記映像表示装置に表示させることを特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。 Wherein a plurality of the image projection unit, an image display device according to different video from the image projection unit to any one of claims 1 to 8, characterized in that to be displayed on the video display device. 前記映像投影部は、前記基準パターン設定部によって設定された基準パターンを立体映像として表示させることを特徴とする請求項1乃至請求項の何れか一項に記載の映像表示装置。 The image projection section, the image display device according to any one of claims 1 to 9, characterized in that to display the reference pattern set by the reference pattern setting unit as the stereoscopic images. 請求項1乃至請求項10の何れか一項に記載の映像表示装置を備え、
前記基準パターン設定部によって設定される基準パターンは、観察者の両眼視機能検査のための映像であることを特徴とする両眼視機能検査装置。
A video display device according to any one of claims 1 to 10 , comprising:
The binocular visual function inspection device, wherein the reference pattern set by the reference pattern setting unit is an image for a binocular visual function inspection of an observer.
JP2007075355A 2007-03-22 2007-03-22 Video display device and binocular visual function inspection device Expired - Fee Related JP5102521B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007075355A JP5102521B2 (en) 2007-03-22 2007-03-22 Video display device and binocular visual function inspection device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007075355A JP5102521B2 (en) 2007-03-22 2007-03-22 Video display device and binocular visual function inspection device

Publications (2)

Publication Number Publication Date
JP2008229175A JP2008229175A (en) 2008-10-02
JP5102521B2 true JP5102521B2 (en) 2012-12-19

Family

ID=39902678

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007075355A Expired - Fee Related JP5102521B2 (en) 2007-03-22 2007-03-22 Video display device and binocular visual function inspection device

Country Status (1)

Country Link
JP (1) JP5102521B2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5173395B2 (en) * 2007-12-25 2013-04-03 パナソニック株式会社 Visual function inspection device
JP2010097056A (en) * 2008-10-17 2010-04-30 Seiko Epson Corp Display apparatus
JP2011004930A (en) * 2009-06-25 2011-01-13 Panasonic Electric Works Co Ltd Ophthalmologic examination apparatus and hess examination apparatus
JP4888579B2 (en) 2010-04-21 2012-02-29 パナソニック電工株式会社 Visual function inspection device
JP4873103B2 (en) * 2011-09-07 2012-02-08 パナソニック電工株式会社 Visual function inspection program and visual function inspection control device
JP2016019194A (en) * 2014-07-09 2016-02-01 株式会社東芝 Image processing apparatus, image processing method, and image projection device
JP7117525B2 (en) * 2018-05-31 2022-08-15 パナソニックIpマネジメント株式会社 CONTROL DEVICE, CONTROL METHOD, PROGRAM, AND PROJECTION TYPE VIDEO DISPLAY SYSTEM

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3008304B2 (en) * 1990-11-29 2000-02-14 アイシン精機株式会社 Mobile station location reporting device
JP3074825B2 (en) * 1991-08-29 2000-08-07 株式会社島津製作所 Balance function evaluation device
JP3651204B2 (en) * 1996-12-18 2005-05-25 トヨタ自動車株式会社 Stereoscopic image display device, stereoscopic image display method, and recording medium
JP2000245697A (en) * 1999-03-04 2000-09-12 Nippon Hoso Kyokai <Nhk> Vision function measurement device and storage medium for visual function measurement
JP2002296542A (en) * 2001-03-30 2002-10-09 Topcon Corp Visual mark for stereoscopic vision inspection
JP3992045B2 (en) * 2005-02-18 2007-10-17 松下電工株式会社 Video signal processing apparatus and method, and virtual reality generation apparatus
JP4046121B2 (en) * 2005-03-24 2008-02-13 セイコーエプソン株式会社 Stereoscopic image display apparatus and method
JP2006285482A (en) * 2005-03-31 2006-10-19 Toppan Printing Co Ltd Device for correcting image geometry
JP4815881B2 (en) * 2005-06-06 2011-11-16 カシオ計算機株式会社 Projection apparatus, distance measuring method using phase difference sensor, and program

Also Published As

Publication number Publication date
JP2008229175A (en) 2008-10-02

Similar Documents

Publication Publication Date Title
US9060693B2 (en) Visual function testing device
JP5102521B2 (en) Video display device and binocular visual function inspection device
US7072504B2 (en) Image synthesis apparatus
US20170192236A1 (en) Method of Adapting a Virtual Reality Helmet
JP5173395B2 (en) Visual function inspection device
US20120249951A1 (en) Optotype presenting apparatus
WO2016038997A1 (en) Display device, method for driving display device, and electronic device
CN105684074A (en) Image display device and image display method, image output device and image output method, and image display system
CN105764405A (en) System and method for measurement of refractive error of eye based on subjective distance metering
JP5079575B2 (en) Target presentation device
JP5417417B2 (en) Visual function inspection device
KR20080100984A (en) Three-dimensional picture display method and apparatus
JP2006203668A (en) Image creation system and image creation method
JP5022878B2 (en) Binocular inspection device
JP6500570B2 (en) Image display apparatus and image display method
JP6002204B2 (en) 3D display device calibration system and calibration method thereof
US20180045934A1 (en) Medical observation device, lens driving control device, lens driving control method, program, and video microscope device
JP6608208B2 (en) Image display device
JP2017181657A (en) Eyeglasses wearing image analyzer, eyeglasses wearing image analysis method, and eyeglasses wearing image analysis program
JP4873103B2 (en) Visual function inspection program and visual function inspection control device
JP2006133688A (en) Composite display device
JPH08182650A (en) Visual function inspection device
CN114690413A (en) Near-to-eye display device and method for adjusting visual field distortion
JP2009156955A (en) Video presentation system
JP2012170546A (en) Visual line position-estimating system and program for the same

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20090924

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111220

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20120111

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120208

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120904

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120928

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151005

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees