JP3148791B2 - Visual acuity recovery device using head-mounted display device - Google Patents

Visual acuity recovery device using head-mounted display device

Info

Publication number
JP3148791B2
JP3148791B2 JP07511794A JP7511794A JP3148791B2 JP 3148791 B2 JP3148791 B2 JP 3148791B2 JP 07511794 A JP07511794 A JP 07511794A JP 7511794 A JP7511794 A JP 7511794A JP 3148791 B2 JP3148791 B2 JP 3148791B2
Authority
JP
Japan
Prior art keywords
training
depth
distance
visual
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP07511794A
Other languages
Japanese (ja)
Other versions
JPH07275286A (en
Inventor
誠一 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Priority to JP07511794A priority Critical patent/JP3148791B2/en
Publication of JPH07275286A publication Critical patent/JPH07275286A/en
Application granted granted Critical
Publication of JP3148791B2 publication Critical patent/JP3148791B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Rehabilitation Tools (AREA)

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は、視力回復訓練における
頭部搭載型ディスプレイ装置(HMD)を利用する視力
回復装置に関し、より詳細には、奥行きの異なる可視標
識を反復して継続的に凝視するなどして視力を回復させ
る視力回復訓練や、両眼の融合力を高めるフュージョン
トレーニング,目の周りの筋肉を和らげる訓練に使用す
る視力回復装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a visual acuity recovery apparatus using a head mounted display (HMD) in a visual acuity recovery training, and more particularly, to a continuous visual fixation of visible signs having different depths. The present invention relates to a visual acuity recovery apparatus used for visual acuity recovery training for recovering visual acuity by performing, for example, fusion training for enhancing the fusion power of both eyes, and training for relaxing muscles around the eyes.

【0002】[0002]

【従来の技術】人間の眼は、近くを見る時には毛様体が
緊張してチン氏体を緩め水晶体を厚くし、遠くを見る場
合は毛様体を弛緩してチン氏体を引っ張って水晶体を薄
くすることによって、網膜に焦点を合わせている。とこ
ろが、近くのものを見る時間が長くなると毛様体の緊張
状態が連続化し、その結果、弛緩できない状態、すなわ
ち水晶体が常に厚くなり、遠くのものに対して焦点が合
わなくなる仮性近視になる。
2. Description of the Related Art The human eye relaxes the chin and thickens the lens when looking closer, and thickens the lens when looking distantly, pulls the chin and pulls the lens. The focus is on the retina by making it thinner. However, the longer the time to look at a near object, the more the tension state of the ciliary body becomes continuous, resulting in a state in which the ciliary body cannot relax, that is, a pseudo myopia in which the crystalline lens is always thick and cannot be focused on a distant object.

【0003】前記の仮性近視は先天性な近視とは異な
り、一種の筋肉の疲れ或いは癖に起因するものであるか
ら、適切な視力回復訓練を実施することによって回復可
能とされている。例えば、近視を矯正する場合、被矯正
者は可視指標を3m程度離れた場所に設置し、例えば、
1.5D程の矯正用眼鏡をかける。続いて、提示された
可視指標を一定時間(例えば、10秒程度)凝視して、
手元にあるカードなどを一定時間凝視するといった手順
を反復する。例えば、同じ可視指標について2回この手
順を繰り返す。この手順を、例えば2回繰り返して行
い、一回の視力回復訓練を終了する。
[0003] Pseudomyopia is different from congenital myopia and is caused by a kind of muscle fatigue or habit. Therefore, it can be recovered by performing appropriate vision recovery training. For example, when correcting myopia, the corrected person sets the visible index at a location about 3 m away, for example,
Wear 1.5D corrective glasses. Subsequently, the presented visual indices are stared for a certain time (for example, about 10 seconds),
The procedure of staring at a card or the like at hand for a certain time is repeated. For example, this procedure is repeated twice for the same visible index. This procedure is repeated twice, for example, to complete one sight recovery training.

【0004】この訓練に用いられる装置として、可視指
標の提示装置があり、その装置に対し、複数の可視指標
(例えば、ランドルト環)が円状に配置され、視力回復
訓練手順に従ってランドルト環が順次一つずつシフト提
示(照明)する表示手段や、また、この訓練手順を指示
する音声を再生する制御手段を備えた視力回復装置が提
案されている。
As a device used for this training, there is a device for presenting a visible index, and a plurality of visible indices (for example, Landolt rings) are arranged in a circle on the device, and the Landolt rings are sequentially arranged in accordance with a vision recovery training procedure. There has been proposed a visual acuity recovery device including display means for presenting (lighting) one shift at a time, and control means for reproducing a voice instructing the training procedure.

【0005】例えば、特開昭60−90556号公報の
ものは、ランドルト環などの可視標識を反復して継続的
に凝視することで視力を回復させるために、複数の表示
手段をそれぞれ個別に照明する対応する複数の照明手段
と、第1の信号を発生する制御手段と、第1の信号に応
動して複数の照明手段を選択的に駆動する選択駆動手段
とを含み、前記制御手段は、所定の視力回復訓練手順に
従って第1の信号を発生し、これによって複数の照明手
段が順次択一的に駆動され、この駆動された照明手段に
対応する表示手段が照明されるものである。
For example, Japanese Patent Application Laid-Open No. 60-90556 discloses a method in which a plurality of display means are individually illuminated in order to restore visual acuity by repeatedly staring at a visible marker such as a Landolt ring repeatedly and continuously. A plurality of corresponding lighting means, a control means for generating a first signal, and a selection driving means for selectively driving the plurality of lighting means in response to the first signal, wherein the control means comprises: A first signal is generated according to a predetermined vision recovery training procedure, whereby a plurality of lighting means are sequentially driven alternately, and a display means corresponding to the driven lighting means is illuminated.

【0006】前記近視訓練以外にも視機能を高める訓練
がある。例えば、脳に像を正しく結びつける力(融合
力)を身につける訓練で、例えば、図23に示すような
融合カード(フュージョンカード)と呼ばれるカードを
目から30cmで維持して、8つの◎を左右一組として下
から順に輻輳(寄せ目)して融合した状態を15秒ずつ
維持させる訓練がある。この訓練によって緊張なくバラ
ンスよく両目を使い、眼を正しく輻輳させる力が身につ
くとされている。また、目の周りを手でマッサージして
筋肉を和らげる訓練がある。これらの訓練には、特別な
装置を必要としなかった。
[0006] In addition to the above-mentioned myopia training, there is training for enhancing visual functions. For example, in training to acquire the power (fusion power) to properly connect an image to the brain, for example, a card called a fusion card (fusion card) as shown in FIG. There is training to maintain the fused state by converging (crossing) sequentially from the bottom as a set of left and right for 15 seconds. It is said that with this training, both eyes are used without tension and the ability to correctly converge the eyes is acquired. In addition, there is training to relax muscles by hand massage around the eyes. No special equipment was required for these trainings.

【0007】[0007]

【発明が解決しようとする課題】前述のように、従来の
視力回復装置においては、被験者の頭を固定するため
に、顎載せ台などで頭を固定しなくてはいけないもので
あった。このような状態でのトレーニングは被矯正者に
過度な負担がかかるものであった。また、3m程度離れ
て設置する必要があるため、訓練のシステムが大きくな
ってしまい、一人で気楽にトレーニングすることは無理
であった。また、特別な装置を必要としない前記融合ト
レーニングにおいても、目の前にカードを維持しなくて
はならず、快適なトレーニング環境とは言い難いもので
あった。更に、訓練の際の可視指標はランドルト環とい
った面白みがない静止映像であり、訓練は退屈なものに
なりがちであった。
As described above, in the conventional visual acuity recovery apparatus, in order to fix the subject's head, the head must be fixed with a chin rest or the like. Training in such a state places an excessive burden on the corrected person. In addition, since it is necessary to install the apparatus at a distance of about 3 m, the training system becomes large, and it is impossible to easily perform training alone. Further, even in the above-mentioned integrated training that does not require a special device, the card must be maintained in front of the eyes, which is hardly a comfortable training environment. Furthermore, the visual indices at the time of training are still images that are not interesting, such as the Landolt ring, and the training tends to be boring.

【0008】本発明は、このような実情に鑑みてなされ
たもので、視力・視機能回復訓練において、焦点距離調
節手段と奥行調節手段とを備え、小スペースでしかも実
像での訓練に近い状態で快適な訓練を可能とする視力回
復装置を提供することを目的としている。
The present invention has been made in view of the above circumstances, and is provided with a focal length adjusting means and a depth adjusting means in a visual acuity / visual function recovery training, in a small space and close to a real image training. It is an object of the present invention to provide a visual acuity recovery device that enables comfortable and comfortable training.

【0009】[0009]

【課題を解決するための手段】本発明は、上記課題を解
決するために、(1)視力回復訓練で使用する視力回復
装置において、眼球調節トレーニングに必要な虚像距離
の変更を行う焦点調節手段と、両眼融合トレーニングに
必要な虚像までの奥行きの変更を行う奥行き調節手段
と、眼筋調節トレーニングに必要な可視指標の提示を行
う可視指標提示手段と、目の周りのマッサージを行う触
覚刺激発生手段と、前記焦点調節手段で設定された虚像
距離と前記奥行き調節手段で設定された奥行き距離とを
一致させる制御手段とを備えたこと、更には、(2)前
記焦点調節手段は、レンズやミラーなどの光学的方法に
より焦点距離を変更するか、或いは、実像距離の変更で
虚像距離を変更すること、更には、(3)前記奥行き調
節手段は、輻輳,両目視差で像の奥行き距離を変更する
こと、更には、(4)前記可視指標提示手段は、前記制
御手段により設定された距離で、視力回復トレーニング
に適切な時間間隔,位置に視覚刺激を提示すること、更
には、(5)前記触覚刺激発生手段は、振動による触覚
刺激を発生させること、更には、(6)前記触覚刺激発
生手段は、温度差による触覚刺激を発生させることを特
徴としたものである。
SUMMARY OF THE INVENTION In order to solve the above-mentioned problems, the present invention provides (1) a focus adjusting means for changing a virtual image distance required for eyeball adjustment training in a visual acuity recovery apparatus used in visual acuity recovery training. And depth adjustment means for changing the depth up to the virtual image required for binocular fusion training, visual index presentation means for presenting the visible index required for ocular muscle adjustment training, and tactile stimulation to massage around the eyes Generating means, and control means for making the virtual image distance set by the focus adjusting means coincide with the depth distance set by the depth adjusting means. (2) The focus adjusting means comprises a lens The focal length is changed by an optical method such as a mirror or a mirror, or the virtual image distance is changed by changing the real image distance. Changing the depth length of the image by the disparity, furthermore, (4) the visible index presenting means, at a distance set by said control means, suitable time intervals visual recovery training, presenting visual stimuli to the position (5) The haptic stimulus generating means generates a haptic stimulus by vibration, and (6) The haptic stimulus generating means generates a haptic stimulus by a temperature difference. Things.

【0010】[0010]

【作用】本発明では、焦点距離調節手段と奥行き調節手
段とを用いることにより、小さいスペースでのトレーニ
ングを可能としている。更に、奥行き調節手段で設定さ
れた奥行き距離と焦点距離調節距離で設定させた虚像距
離を一致させるための制御手段を備えることにより、実
像での訓練に近い状況を実現している。触立刺激発生手
段によって、目の周りの筋肉のマッサージも簡単に行う
ことができ、可視指標は動画も用いることができるた
め、快適な訓練を可能としている。更に、本発明による
視力回復装置では、映像は目の前に固定しているため、
被矯正者は姿勢を維持する必要がなく、自由な姿勢での
訓練が可能となる。
According to the present invention, training can be performed in a small space by using the focal length adjusting means and the depth adjusting means. Further, by providing control means for matching the depth distance set by the depth adjustment means with the virtual image distance set by the focal length adjustment distance, a situation close to training with a real image is realized. The tactile stimulus generating means can easily massage the muscles around the eyes, and a moving image can be used as the visual index, so that comfortable training is possible. Further, in the eyesight recovery device according to the present invention, since the image is fixed in front of the eyes,
The corrective does not need to maintain a posture, and can perform training in a free posture.

【0011】[0011]

【実施例】実施例について、図面を参照して以下に説明
する。図1は、本発明による視力回復装置を備えた頭部
搭載型ディスプレイの一実施例を説明するための構成図
で、図中、11はスイッチである。本発明による視力回
復装置の実施例は、使用者の頭に固定される頭部搭載型
DISPLAY(以下、HMD)を有する。このHMDは、2
枚の液晶パネルと2組の拡大レンズ系を持ち、訓練の選
択や開始,終了などのスイッチ11が設置されている。
Embodiments will be described below with reference to the drawings. FIG. 1 is a configuration diagram for explaining an embodiment of a head mounted display provided with a visual acuity recovery device according to the present invention, in which 11 is a switch. An embodiment of a vision recovery device according to the present invention is a head mounted type that is fixed to a user's head.
DISPLAY (hereinafter, HMD). This HMD is 2
It has two liquid crystal panels and two sets of magnifying lens systems, and is provided with a switch 11 for selecting, starting, and ending training.

【0012】図2は、パネル対とレンズ系の構成例を示
す図で、図中、21は液晶パネル、22はレンズ系であ
る。液晶パネル21は、その手前に並行に設置されたレ
ンズ系22を通して観察される。この際、レンズ系は液
晶パネルの虚像を作りだし、使用者はその虚像を観察す
ることになる。
FIG. 2 is a diagram showing a configuration example of a panel pair and a lens system. In the figure, reference numeral 21 denotes a liquid crystal panel, and reference numeral 22 denotes a lens system. The liquid crystal panel 21 is observed through a lens system 22 installed in parallel in front of the liquid crystal panel 21. At this time, the lens system creates a virtual image of the liquid crystal panel, and the user observes the virtual image.

【0013】図3〜図5は、実像と虚像の光学的関係を
示す摸式図で、図中、31,41,51は使用者の目、
32,42,44,52はレンズ系、33,45,53
は液晶パネル(実対象物)、34,46,54は虚像で
ある。使用者から虚像までの距離は、レンズ系の焦点距
離や実像までの距離に従って計算される。すなわち、図
3のような実像33と虚像34の距離関係である状態に
おいて、図4のように、レンズ44を一枚付加すると焦
点距離が大きくなり、従って虚像までの距離が短くな
る。
FIGS. 3 to 5 are schematic diagrams showing the optical relationship between a real image and a virtual image, in which 31, 41, and 51 are the eyes of the user.
32, 42, 44 and 52 are lens systems, 33, 45 and 53
Is a liquid crystal panel (real object), and 34, 46, and 54 are virtual images. The distance from the user to the virtual image is calculated according to the focal length of the lens system and the distance to the real image. That is, in the state where the distance between the real image 33 and the virtual image 34 is as shown in FIG. 3, if one lens 44 is added as shown in FIG. 4, the focal length becomes longer, and the distance to the virtual image becomes shorter.

【0014】図6は、図4における焦点調節手段の構成
例を示す部分拡大図で、図中、60,61は液晶パネ
ル、62,63は調節用レンズ、64,65はレンズで
ある。調節用レンズ62,63の出し入れが可能となっ
ており、この出し入れは、例えばモータ駆動により瞬時
に実施され、虚像距離の変更も瞬時に実施される。
FIG. 6 is a partially enlarged view showing an example of the configuration of the focus adjusting means in FIG. 4. In the drawing, reference numerals 60 and 61 denote liquid crystal panels, 62 and 63 denote adjustment lenses, and 64 and 65 denote lenses. The adjustment lenses 62 and 63 can be moved in and out, and this movement is instantaneously performed by, for example, driving a motor, and the change of the virtual image distance is also instantaneously performed.

【0015】あるいは、図5のように単一の焦点距離の
レンズ系52を用いて対象物53までの距離(以下、対
象物間距離)を変化させることによっても、虚像54ま
での距離は変更可能である。図7は、図5における焦点
調節手段の構成例を示した部分拡大図で、図中、70,
71は液晶パネル、72,73はレンズである。例え
ば、モータ駆動によりレンズ72,73が平行移動され
る。この機構によると、虚像距離のリニアな変化が可能
となる。
Alternatively, the distance to the virtual image 54 is also changed by changing the distance to the object 53 (hereinafter, the distance between the objects) using the lens system 52 having a single focal length as shown in FIG. It is possible. FIG. 7 is a partially enlarged view showing a configuration example of the focus adjusting means in FIG.
71 is a liquid crystal panel, and 72 and 73 are lenses. For example, the lenses 72 and 73 are translated by driving the motor. According to this mechanism, the virtual image distance can be changed linearly.

【0016】2枚の液晶パネルは、図2に示すように左
右並行に設置させる。この左右のパネルの間隔によっ
て、使用者のパネルまでの奥行きが設定される。図8
は、奥行き関係を摸式的に示す図で、図中、81,8
2,84,85はパネル、83,86は奥行き位置であ
る。図8によると、2枚のパネル81,82の間隔が近
いほど、奥行き的に近くに知覚され83、離れると遠く
84,85,86に知覚される。
As shown in FIG. 2, the two liquid crystal panels are set in parallel on the left and right. The depth to the user's panel is set by the distance between the left and right panels. FIG.
Is a diagram schematically showing the depth relationship, in which 81, 8
2, 84 and 85 are panels, and 83 and 86 are depth positions. According to FIG. 8, the closer the distance between the two panels 81 and 82 is, the closer it is perceived to be closer to the depth 83.

【0017】図9及び図10は、奥行き調節手段の構成
例を示す図で、図中、91,92は液晶パネル、93,
94は奥行き位置、101,102は液晶パネル、10
4,105は提示位置(近)、103,106は提示位
置(遠)である。2枚のパネル91,92が、例えばモ
ータ駆動によって変更され、奥行きが変更される。或い
は、メカニカルな変更ではなく、図10のように、大き
な液晶パネル101,102の上で表示位置を変更する
ことによって奥行きを変更する。これらの奥行き調節手
段で設定されて奥行き距離と虚像距離調節手段で設定さ
れた虚像距離は、制御部によって一致するようにコント
ロールされる。
FIGS. 9 and 10 show examples of the structure of the depth adjusting means. In FIG.
94 is a depth position, 101 and 102 are liquid crystal panels, 10
Reference numerals 4 and 105 denote presentation positions (near), and 103 and 106 denote presentation positions (far). The two panels 91 and 92 are changed, for example, by driving a motor, and the depth is changed. Alternatively, instead of a mechanical change, the depth is changed by changing the display position on the large liquid crystal panels 101 and 102 as shown in FIG. The depth distance set by these depth adjusting means and the virtual image distance set by the virtual image distance adjusting means are controlled by the control unit so as to match.

【0018】図11は、本発明による視力回復装置のブ
ロック図で、図中、111は制御部、112は虚像距離
変更部(レンズ切り替え駆動,対象間距離変更)、11
3は奥行き設定部(パネル間距離の変更,映像提示位置
変更)、114は触覚刺激発生部(振動発生,温度差発
生)、115は可視指標提示部(画像メモリ)、116
は表示部(CRT,液晶パネル)、117は訓練項目選
択部(スイッチ)、118はスイッチ、119は映像信
号である。
FIG. 11 is a block diagram of a visual acuity recovery apparatus according to the present invention. In the figure, reference numeral 111 denotes a control unit, 112 denotes a virtual image distance changing unit (lens switching drive, object distance changing), 11
Reference numeral 3 denotes a depth setting unit (change of inter-panel distance, change of image presentation position); 114, a tactile stimulus generation unit (vibration generation, temperature difference generation); 115, a visible index presentation unit (image memory);
Is a display unit (CRT, liquid crystal panel), 117 is a training item selection unit (switch), 118 is a switch, and 119 is a video signal.

【0019】制御部111は、虚像距離変更部112と
奥行き設定部113とに接続されている。前記虚像距離
変更部は、調節レンズの付加の出し入れやレンズと液晶
パネル間の距離の変更を行う部分である。前記奥行き調
節部は左右の液晶パネル間の距離を変更あるいは液晶パ
ネル内の映像提示位置の設定する部分である。また、こ
の他に制御部111は、触覚刺激発生部114と可視指
標提示部115と接続している。前記触覚刺激発生部1
14は、目の周りの筋肉の緊張をときほぐすマッサージ
に使用されるものである。
The control unit 111 is connected to the virtual image distance changing unit 112 and the depth setting unit 113. The virtual image distance changing unit is a unit for changing the distance between the lens and the liquid crystal panel by adding or removing an adjusting lens. The depth adjusting section is a section for changing the distance between the left and right liquid crystal panels or setting the image presentation position in the liquid crystal panels. In addition, the control unit 111 is connected to the tactile stimulus generation unit 114 and the visible index presentation unit 115. The tactile stimulus generator 1
Numeral 14 is used for a massage to relieve the tension of the muscles around the eyes.

【0020】図12は、触覚刺激発生部の構成例を示す
図で、図中、121は触覚刺激発生回路の取付位置であ
る。図中の黒丸部分121に、例えば、振動回路を設置
して目の周りに振動を与える。この黒丸は、使用者がH
MDを装着した時に、図13の◎に示す位置131にあ
たる。あるいは、黒丸のところに、例えばサーモモジュ
ールを設置して、温度差を目の周りに与える。これらの
触覚刺激によって、目の周りの筋肉は緩和し、疲れをと
ることが可能となる。可視指標提示部は、図14(a)
〜(c),図15(a)〜(c)に示した訓練パターン
類をメモリに記憶しており、制御部から要請がきた時、
要請されたパターンを表示部116に提示する装置であ
る。また、外部からの映像信号119を液晶パネルに提
示する機能も備えている。
FIG. 12 is a diagram showing an example of the configuration of the tactile stimulus generation unit. In the figure, reference numeral 121 denotes a mounting position of the tactile stimulus generation circuit. For example, a vibrating circuit is provided in the black circle portion 121 in the figure to vibrate around the eyes. This black circle indicates that the user
When the MD is mounted, it corresponds to the position 131 indicated by ◎ in FIG. Alternatively, for example, a thermo module is installed at a black circle to give a temperature difference around the eyes. These tactile stimuli allow the muscles around the eyes to relax and relieve fatigue. The visible index presenting unit is shown in FIG.
15 (c) and the training patterns shown in FIGS. 15 (a) to 15 (c) are stored in the memory, and when a request is received from the control unit,
This is a device that presents the requested pattern on the display unit 116. In addition, a function of presenting an external video signal 119 to a liquid crystal panel is provided.

【0021】制御部111は、訓練項目選択部117と
も接続している。該訓練画面選択部117は、スイッチ
118,11とも接続しており、訓練の選択を使用者の
ボタン応答によって選択する部分である。訓練項目選択
部117は、使用者のボタン応答によって制御部111
に訓練項目メニューの提示を要請する。可視指標提示部
115は、図16に示すような訓練項目メニュー画面も
記憶しており、制御部111から要請を受けた時に訓練
メニューを提示する。該訓練メニューには、本実施例で
行うことのできる訓練のメニューが書かれている。前述
した特開昭60−90556号公報を含めた従来の視力
回復装置では、この訓練メニューの調節力訓練のみしか
行えないが、本実施例によると、4つの訓練を行うこと
が可能である。
The control unit 111 is also connected to a training item selection unit 117. The training screen selection unit 117 is also connected to the switches 118 and 11, and is a part for selecting a training by a user's button response. The training item selection unit 117 controls the control unit 111 based on the user's button response.
Of the training item menu. The visible index presentation unit 115 also stores a training item menu screen as shown in FIG. 16 and presents a training menu when receiving a request from the control unit 111. In the training menu, a training menu that can be performed in this embodiment is written. In the conventional visual acuity recovery apparatus including the above-mentioned Japanese Patent Application Laid-Open No. 60-90556, only the adjustment training of the training menu can be performed, but according to the present embodiment, four trainings can be performed.

【0022】図17〜図21は、制御部の制御動作を説
明するためのフローチャートである。以下、各ステップ
に従って順に説明する。図17に示すように、S11で
電源が入れられ、S13で訓練項目選択部117から訓
練要請の有無を判定する。要請がある場合、すなわち使
用者がボタン11で応答した場合は、可視指標提示部1
15に訓練メニューの提示を要請し、ない場合には、可
視指標提示部115に入力される映像を提示することを
要請し、S12に戻る。従って、本実施例では、使用者
が視力回復装置に利用しようとしないならば、入力映像
をみる通常のHMDとしても利用できる。この入力映像
とは、外部から入力された映像であり、ビデオからの或
いは放送されている一般の映像である。要請がある場合
には、S16〜S19でどの訓練が選択されを判定し、
それぞれのフローチャートにいく。この選択は、使用者
が図16のメニューからボタンによって選択ができるよ
うになっている。ここでS20で終了が選択された場合
は、S12に戻る。
FIGS. 17 to 21 are flowcharts for explaining the control operation of the control unit. Hereinafter, the steps will be sequentially described. As shown in FIG. 17, the power is turned on in S11, and the presence or absence of a training request from the training item selection unit 117 is determined in S13. When there is a request, that is, when the user responds with the button 11, the visible indicator presenting unit 1
15 is requested to present a training menu. If there is no training menu, a request is made to present a video to be input to the visible index presenting unit 115, and the process returns to S12. Therefore, in the present embodiment, if the user does not intend to use the visual acuity recovery device, the user can use the device as a normal HMD for viewing an input image. The input video is a video input from the outside, and is a general video from a video or being broadcast. If there is a request, determine which training is selected in S16 to S19,
Go to each flowchart. This selection is made so that the user can make a selection from the menu of FIG. 16 using buttons. If the end is selected in S20, the process returns to S12.

【0023】前記S16で眼筋訓練が選択された場合
(図中B)、図14に示すような眼筋訓練パターンを用
いて訓練が行われる。この訓練では、被矯正者は、まず
図14(a)の黒丸を一定時間凝視し、続いて、図14
(b),(c)の黒丸を凝視する。この手順を、例え
ば、4回繰り返して訓練を終了する。図18のS21で
虚像距離変更部112に、例えば5mの虚像距離の設定
が要請される。S22で可視指標提示部115に、図1
4(a)に示すようなパターンを提示することを要請
し、S23で一定時間を確認する。ここで、S24で図
14(b)のパターン提示を要請、S25で一定時間を
確認、S26で図14(c)のパターンを提示、S27
で一定時間を確認する。S28でS22〜S27を、例
えば4回繰り返したかどうかを判定し、繰り返していれ
ばS12に戻る。
When the eye muscle training is selected in S16 (B in the figure), the training is performed using the eye muscle training pattern as shown in FIG. In this training, the person to be corrected first stares at the black circle in FIG.
Staring at the black circles in (b) and (c). This procedure is repeated, for example, four times to end the training. In S21 of FIG. 18, the virtual image distance changing unit 112 is requested to set a virtual image distance of, for example, 5 m. In S22, the visible index presenting unit 115
A request to present a pattern as shown in FIG. 4A is made, and a certain time is confirmed in S23. Here, a request for the pattern shown in FIG. 14B is made in S24, a certain time is confirmed in S25, the pattern shown in FIG. 14C is shown in S26, and S27.
Check for a certain time with. In S28, it is determined whether S22 to S27 have been repeated, for example, four times, and if it has been repeated, the process returns to S12.

【0024】前記S17で融合力訓練が選択された場合
(図中C)、図15(a)〜(c)に示すような融合パ
ターンを用いて訓練が行われる。この訓練では、被矯正
者は、まず図15(a)の◎を一定時間凝視し、続い
て、図15(b),(c)の◎を凝視して、融合する。
この手順を、例えば、4回繰り返して訓練を終了する。
図19のS31で虚像距離変更部112に、例えば30
cmの虚像距離の設定が要請される。S32で可視指標提
示部115に図15(a)のパターンを提示することを
要請し、S33で訓練時間、例えば30秒の経過を確認
し、S34で図15(b)のパターン提示を要請する。
更に、S35で訓練時間を確認、S36で図15(c)
のパターンを提示、S37で一定時間を確認する。S3
8でS32〜S37を、例えば4回繰り返したかどうか
を判定し、繰り返していればS12に戻る。
When the fusion training is selected in S17 (C in the figure), the training is performed using the fusion patterns as shown in FIGS. 15 (a) to 15 (c). In this training, the corrected person first stares at ◎ in FIG. 15A for a certain period of time, and then stares at ◎ in FIGS. 15B and 15C and fuses.
This procedure is repeated, for example, four times to end the training.
In S31 of FIG. 19, for example, 30
Setting of the virtual image distance of cm is requested. In S32, the visual index presenting unit 115 is requested to present the pattern of FIG. 15A, and in S33, the elapse of the training time, for example, 30 seconds, is confirmed, and in S34, the pattern of FIG. 15B is requested. .
Further, the training time is confirmed in S35, and FIG.
Is presented, and a predetermined time is confirmed in S37. S3
In S8, it is determined whether S32 to S37 have been repeated, for example, four times, and if it has been repeated, the process returns to S12.

【0025】前記S18でマッサージが選択された場合
(図中D)、図20のS41で触覚刺激発生部114
に、例えば暖かくする触覚刺激を発生することを要請
し、S42で一定時間、例えば30秒の経過を確認し、
S43で、例えば冷たくする触覚刺激の発生を要請す
る。S44で一定時間を確認し、S41に戻る。
When the massage is selected in S18 (D in the figure), the tactile stimulus generation unit 114 is selected in S41 in FIG.
For example, a request to generate a tactile stimulus for warming is requested, and after a certain period of time, for example, 30 seconds is confirmed in S42,
In S43, for example, it is requested to generate a tactile stimulus to be cooled. After confirming the predetermined time in S44, the process returns to S41.

【0026】前記S19で調節力訓練が選択された場合
(図中E)、図21のS51で虚像距離変更部112
に、例えば、∞の虚像距離の設定が要請される。S52
で奥行き設定部113に∞の奥行きが設定される。この
ように、調節力訓練選択された場合、制御部111によ
って虚像距離と奥行き距離が一致するように設定され
る。S53で可視指標提示部115に入力映像を提示す
ることが要請される。S54で訓練時間、例えば3分の
経過を確認し、S55で虚像距離変更部112に、例え
ば50cmの虚像距離、S56に50cmの奥行き距離の設
定を要請し、S57で可視指標提示部115に入力映像
を提示することが要請され、S58で訓練時間が確認さ
れる。S59でS51〜S58を、例えば4回繰り返し
たかどうかを判定し、繰り返していればS12に戻る。
これらのフローチャートの全てのステップにおいて、使
用者のボタンによる強制終了が発生し、S12に戻る。
When accommodation training is selected in S19 (E in the figure), the virtual image distance changing unit 112 is selected in S51 in FIG.
For example, setting of the virtual image distance of ∞ is requested. S52
, The depth setting unit 113 sets the depth ∞. As described above, when the accommodation power training is selected, the control unit 111 sets the virtual image distance and the depth distance to be equal. In S53, it is requested to present the input video to the visible index presenting unit 115. In S54, the training time, for example, 3 minutes, is confirmed. In S55, the virtual image distance changing unit 112 is requested to set, for example, a virtual image distance of 50 cm, and in S56, a depth distance of 50 cm is input. It is requested to present a video, and the training time is confirmed in S58. In S59, it is determined whether S51 to S58 have been repeated, for example, four times, and if it has been repeated, the process returns to S12.
In all steps of these flowcharts, forced termination by the button of the user occurs, and the process returns to S12.

【0027】本実施例では、可視指標として可視指標提
示部に記憶された映像を提示するものを示したが、外部
に映像発生装置(例えば、ビデオ等)を用いて動画の可
視指標を用いることも可能である。例えば、眼筋訓練に
図22に示すような映像を用いることが可能である。図
22を用いた訓練は、被矯正者が時計回りに回転移動す
る図22の●を目で追う訓練である。以上の構成によっ
て、本発明に従って視力回復装置が実現できる。また、
本実施例で用いた虚像距離,奥行き距離,訓練時間など
は一意なものではない。
In the present embodiment, the image stored in the visible index presenting section is presented as the visible index. However, the visible index of the moving image is externally used by using a video generator (eg, video). Is also possible. For example, an image as shown in FIG. 22 can be used for eye muscle training. The training using FIG. 22 is a training in which the corrected person follows the black circle in FIG. With the above configuration, a vision recovery device can be realized according to the present invention. Also,
The virtual image distance, the depth distance, the training time, and the like used in the present embodiment are not unique.

【0028】[0028]

【発明の効果】以上の説明から明らかなように、本発明
による視力回復装置は、虚像までの距離を変える焦点調
節手段と、虚像までの奥行き距離を変える奥行き調節手
段と、訓練のパターンを提示する可視指標提示手段と、
虚像距離と奥行き距離を一致させる制御手段とを備えて
おり、前記焦点調節手段は、光学的に焦点距離を変更す
るか、或いは実像距離の変更で虚像距離を変更すること
によって、虚像距離を変更するものであり、また、前記
奥行き調節手段は、輻輳,両目視差で像の奥行き距離を
変更するものであり、前記可視指標提示手段は、制御手
段により設定された距離で、視力回復トレーニングに適
切な時間間隔,位置に視覚刺激を提示するものである。
更に、目の周りのマッサージを行う触覚刺激発生手段を
備えており、該触覚刺激発生手段は、振動によるあるい
は温度差による触覚刺激を発生させるものである。この
ような構成により、小さいスペースでの視力,視機能回
復トレーニングを可能としている。また、奥行き距離と
虚像距離を一致させることにより、実像での訓練に近い
状況を実現し、可視指標を目の前に固定することによ
り、自由な姿勢での訓練を可能としている。さらに、目
の周りに刺激を加えることで、筋肉のマッサージも簡単
に行うことができる。更に、可視指標として動画や一般
の入力映像を用いることが可能である。
As is apparent from the above description, the visual acuity recovery apparatus according to the present invention presents a focus adjusting means for changing the distance to the virtual image, a depth adjusting means for changing the depth distance to the virtual image, and a training pattern. Means for presenting a visible index ,
Control means for matching the virtual image distance and the depth distance, wherein the focus adjustment means changes the virtual image distance by changing the focal length optically or by changing the virtual image distance by changing the real image distance. The depth adjusting means changes the depth distance of the image based on convergence and binocular disparity, and the visible index presenting means adjusts the depth distance of the image based on the distance set by the control means. Visual stimuli are presented at various time intervals and positions.
Further, a haptic stimulus generating means for massaging around the eyes is provided, and the haptic stimulus generating means generates a haptic stimulus by vibration or a temperature difference. With such a configuration, it is possible to perform visual acuity and visual function recovery training in a small space. Also, by matching the depth distance and the virtual image distance, a situation close to training with a real image is realized, and by fixing the visible index in front of the eyes, training in a free posture is enabled. Furthermore, by applying stimulation around the eyes, muscle massage can be easily performed. Furthermore, a moving image or a general input image can be used as the visible index.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明による視力回復装置を備えた頭部搭載型
ディスプレイの一実施例を説明するための構成図であ
る。
FIG. 1 is a configuration diagram illustrating an embodiment of a head-mounted display including a visual acuity recovery device according to the present invention.

【図2】本発明におけるパネル対とレンズ系の構成例を
示す図である。
FIG. 2 is a diagram illustrating a configuration example of a panel pair and a lens system according to the present invention.

【図3】本発明における実像と虚像の光学的関係を示す
摸式図である。
FIG. 3 is a schematic diagram showing an optical relationship between a real image and a virtual image in the present invention.

【図4】本発明における実像と虚像の光学的関係を示す
他の摸式図である。
FIG. 4 is another schematic diagram showing an optical relationship between a real image and a virtual image in the present invention.

【図5】本発明における実像と虚像の光学的関係を示す
更に他の摸式図である。
FIG. 5 is still another schematic diagram showing an optical relationship between a real image and a virtual image in the present invention.

【図6】本発明における焦点調節手段の構成例を示す部
分拡大図である。
FIG. 6 is a partially enlarged view showing a configuration example of a focus adjusting unit in the present invention.

【図7】本発明における焦点調節手段の他の構成例を示
す部分拡大図である。
FIG. 7 is a partially enlarged view showing another example of the configuration of the focus adjusting means in the present invention.

【図8】本発明における奥行き関係を示す摸式図であ
る。
FIG. 8 is a schematic diagram showing a depth relationship in the present invention.

【図9】本発明における奥行き調節手段の構成例を示す
部分拡大図である。
FIG. 9 is a partially enlarged view illustrating a configuration example of a depth adjusting unit according to the present invention.

【図10】本発明における奥行き調節手段の構成例を示
す他の部分拡大図である。
FIG. 10 is another partially enlarged view showing a configuration example of the depth adjusting means in the present invention.

【図11】本発明による視力回復装置の一実施例を説明
するためのブロック図である。
FIG. 11 is a block diagram illustrating an embodiment of a visual acuity recovery device according to the present invention.

【図12】本発明における触覚刺激発生手段の構成例を
示す斜視図である。
FIG. 12 is a perspective view illustrating a configuration example of a tactile stimulus generation unit according to the present invention.

【図13】本発明における触覚刺激発生装置が使用者の
どこに位置するかを示した透視図である。
FIG. 13 is a perspective view showing where the tactile stimulus generator of the present invention is located on the user.

【図14】本発明における眼筋訓練パターンの一例を示
すパターン図である。
FIG. 14 is a pattern diagram showing an example of an eye muscle training pattern according to the present invention.

【図15】本発明における融合パターン(フュージョン
カード)の一例を示すパターン図である。
FIG. 15 is a pattern diagram showing an example of a fusion pattern (fusion card) in the present invention.

【図16】本発明における訓練項目メニュー画面の一例
を示すパターン図である。
FIG. 16 is a pattern diagram showing an example of a training item menu screen according to the present invention.

【図17】本発明における制御部の制御動作を示すフロ
ーチャート(その1)である。
FIG. 17 is a flowchart (part 1) illustrating a control operation of a control unit according to the present invention.

【図18】本発明における制御部の制御動作を示すフロ
ーチャート(その2)である。
FIG. 18 is a flowchart (part 2) illustrating a control operation of the control unit according to the present invention.

【図19】本発明における制御部の制御動作を示すフロ
ーチャート(その3)である。
FIG. 19 is a flowchart (part 3) illustrating a control operation of the control unit according to the present invention.

【図20】本発明における制御部の制御動作を示すフロ
ーチャート(その4)である。
FIG. 20 is a flowchart (part 4) illustrating a control operation of the control unit in the present invention.

【図21】本発明における制御部の制御動作を示すフロ
ーチャート(その5)である。
FIG. 21 is a flowchart (No. 5) showing a control operation of the control unit in the present invention.

【図22】本発明における動画の可視指標の一例を示す
パターン図である。
FIG. 22 is a pattern diagram showing an example of a moving image visible index according to the present invention.

【図23】従来の融合パターンの一例を示すパターン図
である。
FIG. 23 is a pattern diagram showing an example of a conventional fusion pattern.

【符号の説明】[Explanation of symbols]

111…制御部、112…虚像距離変更部(レンズ切り
替え駆動,対象間距離変更)、113…奥行き設定部
(パネル間距離の変更,映像提示位置変更)、114…
触覚刺激発生部(振動発生,温度差発生)、115…可
視指標提示部(画像メモリ)、116…表示部(CR
T,液晶パネル)、117…訓練項目選択部(スイッ
チ)、118…スイッチ、119…映像信号。
111: control unit, 112: virtual image distance changing unit (lens switching drive, change of distance between objects), 113: depth setting unit (change of inter-panel distance, change of image presentation position), 114 ...
Tactile stimulus generation unit (vibration generation, temperature difference generation), 115: visible index presentation unit (image memory), 116: display unit (CR
T, liquid crystal panel), 117: training item selection unit (switch), 118: switch, 119: video signal.

Claims (6)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 視力回復訓練で使用する視力回復装置に
おいて、眼球調節トレーニングに必要な虚像距離の変更
を行う焦点調節手段と、両眼融合トレーニングに必要な
虚像までの奥行きの変更を行う奥行き調節手段と、眼筋
調節トレーニングに必要な可視指標の提示を行う可視指
標提示手段と、目の周りのマッサージを行う触覚刺激発
生手段と、前記焦点調節手段で設定された虚像距離と前
記奥行き調節手段で設定された奥行き距離とを一致させ
る制御手段とを備えたことを特徴とする頭部搭載型ディ
スプレイ装置を利用した視力回復装置。
1. A visual acuity recovery apparatus used in visual acuity recovery training, wherein a focus adjustment means for changing a virtual image distance required for eyeball adjustment training, and a depth adjustment for changing a depth up to a virtual image required for binocular fusion training. Means, visual index presenting means for presenting a visual index necessary for eye muscle accommodation training, tactile stimulus generating means for massaging around the eyes, virtual image distance set by the focus adjusting means and the depth adjusting means And a control means for matching the depth distance set with the head.
An eyesight recovery device using a spray device .
【請求項2】 前記焦点調節手段は、レンズやミラーな
どの光学的方法により焦点距離を変更するか、或いは、
実像距離の変更で虚像距離を変更することを特徴とした
請求項1記載の頭部搭載型ディスプレイ装置を利用した
視力回復装置。
2. The method according to claim 1, wherein the focus adjustment unit changes a focal length by an optical method such as a lens or a mirror, or
The visual acuity recovery apparatus using the head-mounted display device according to claim 1, wherein the virtual image distance is changed by changing the real image distance.
【請求項3】 前記奥行き調節手段は、輻輳,両目視差
で像の奥行き距離を変更することを特徴とした請求項1
記載の頭部搭載型ディスプレイ装置を利用した視力回復
装置。
3. The apparatus according to claim 1, wherein the depth adjusting means changes the depth distance of the image based on convergence and binocular disparity.
A visual acuity recovery device using the head-mounted display device as described in the above.
【請求項4】 前記可視指標提示手段は、前記制御手段
により設定された距離で、視力回復トレーニングに適切
な時間間隔,位置に視覚刺激を提示することを特徴とし
た請求項1記載の頭部搭載型ディスプレイ装置を利用し
視力回復装置。
Wherein said visual indicator indicating means is a distance set by said control means, suitable time intervals visual recovery training, the head of claim 1, wherein the wherein the presenting visual stimuli to the position Using on-board display devices
Vision recovery device.
【請求項5】 前記触覚刺激発生手段は、振動による触
覚刺激を発生させることを特徴とした請求項1記載の
部搭載型ディスプレイ装置を利用した視力回復装置。
Wherein said tactile stimulation generating means, the head of claim 1 wherein characterized in that to generate a tactile stimulation by vibration
An eyesight recovery device that uses a part-mounted display device.
【請求項6】 前記触覚刺激発生手段は、温度差による
触覚刺激を発生させることを特徴とした請求項1記載の
頭部搭載型ディスプレイ装置を利用した視力回復装置。
6. The haptic stimulus generating means according to claim 1, wherein the haptic stimulus generating means generates a haptic stimulus based on a temperature difference.
An eyesight recovery device that uses a head-mounted display device.
JP07511794A 1994-04-13 1994-04-13 Visual acuity recovery device using head-mounted display device Expired - Fee Related JP3148791B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP07511794A JP3148791B2 (en) 1994-04-13 1994-04-13 Visual acuity recovery device using head-mounted display device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP07511794A JP3148791B2 (en) 1994-04-13 1994-04-13 Visual acuity recovery device using head-mounted display device

Publications (2)

Publication Number Publication Date
JPH07275286A JPH07275286A (en) 1995-10-24
JP3148791B2 true JP3148791B2 (en) 2001-03-26

Family

ID=13566935

Family Applications (1)

Application Number Title Priority Date Filing Date
JP07511794A Expired - Fee Related JP3148791B2 (en) 1994-04-13 1994-04-13 Visual acuity recovery device using head-mounted display device

Country Status (1)

Country Link
JP (1) JP3148791B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009240642A (en) * 2008-03-31 2009-10-22 Panasonic Electric Works Co Ltd Ciliary muscle relaxation apparatus
US8403490B2 (en) 2007-09-26 2013-03-26 Panasonic Corporation Beam scanning-type display device, method, program and integrated circuit
KR20190039680A (en) * 2019-04-04 2019-04-15 엔에이치엔 주식회사 Method and system forcontrolling focusing length to enhance vision

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001013859A1 (en) * 1999-08-19 2001-03-01 Isao Noda Vision correcting/training device
KR20020010345A (en) * 2000-07-29 2002-02-04 조용준 Apparatus for moving the eye ball
JP2003047636A (en) * 2001-05-28 2003-02-18 Nikon Corp Eye fatigue relieving apparatus
JP3494375B1 (en) * 2002-04-30 2004-02-09 勝美 永吉 Training eye mask
JP2005324006A (en) * 2004-02-03 2005-11-24 Shinichiro Endo Eyesight recovery training apparatus
CN101836931B (en) * 2009-03-17 2013-09-11 陆健 Visual training glasses
JP6036291B2 (en) * 2012-12-28 2016-11-30 セイコーエプソン株式会社 Display device, display system, and display device control method
JP6232763B2 (en) * 2013-06-12 2017-11-22 セイコーエプソン株式会社 Head-mounted display device and method for controlling head-mounted display device
CN105832502B (en) * 2016-03-15 2018-01-02 广东卫明眼视光研究院 Intelligent vision functional training and instrument for training
CN109875863B (en) * 2019-03-14 2021-07-20 江苏睿世力科技有限公司 Head-mounted VR eyesight improving system based on binocular vision and mental image training
CN110840721B (en) * 2019-11-25 2022-04-15 北京耐德佳显示技术有限公司 Near-eye display-based eyesight prevention, control and training method and near-eye display equipment
CN113452986A (en) * 2020-03-24 2021-09-28 杨建刚 Display method and device applied to head-mounted display equipment and storage medium
CN114272091B (en) * 2021-12-21 2023-07-14 江西应用科技学院 Computer-aided vision correction training equipment and method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8403490B2 (en) 2007-09-26 2013-03-26 Panasonic Corporation Beam scanning-type display device, method, program and integrated circuit
JP2009240642A (en) * 2008-03-31 2009-10-22 Panasonic Electric Works Co Ltd Ciliary muscle relaxation apparatus
KR20190039680A (en) * 2019-04-04 2019-04-15 엔에이치엔 주식회사 Method and system forcontrolling focusing length to enhance vision
KR102009624B1 (en) * 2019-04-04 2019-08-12 엔에이치엔 주식회사 Method and system forcontrolling focusing length to enhance vision

Also Published As

Publication number Publication date
JPH07275286A (en) 1995-10-24

Similar Documents

Publication Publication Date Title
JP3148791B2 (en) Visual acuity recovery device using head-mounted display device
US11480784B2 (en) Binocular display with digital light path length modulation
AU2020202436B2 (en) System for measuring visual fixation disparity
CN107260505A (en) Sight protectio method, device and the VR glasses with eyesight protection function
US20140176902A1 (en) Shutter and polarized eyewear
CN110502100A (en) Virtual reality exchange method and device based on eye-tracking
JP4300844B2 (en) Eye function training device
JP4207459B2 (en) Image display device and eye fatigue elimination device
CN107307981B (en) Control method of head-mounted display device
US11774759B2 (en) Systems and methods for improving binocular vision
JP5990939B2 (en) Stereoscopic training support device, stereoscopic training support system, image processing device, image processing method, and program
JP3661173B2 (en) Binocular training device
JP3759187B2 (en) Binocular vision training device
JPH11109932A (en) Picture display device
JP6915368B2 (en) Multifocal visual output method, multifocal visual output device
JPH09102052A (en) Steroscopic picture display device
CN110812146B (en) Multi-region visual function adjusting method and device and virtual reality head-mounted display equipment
CN115280219A (en) System and method for enhancing vision
JPH08243137A (en) Visual acuity recovery training device
JPH07287187A (en) Video display device
JP2000171751A (en) Binocular display
KR102520460B1 (en) Device and method for treating hemineglect
JP2006055271A (en) Ocular function training apparatus and binoculars
WO2021112101A1 (en) Vision correction tool and vision correction method
US7354156B1 (en) Naturoptic method for restoring healthy vision

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080112

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090112

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100112

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110112

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees