CN109313343B - 图像投影系统、图像投影装置、图像投影方法及服务器装置 - Google Patents
图像投影系统、图像投影装置、图像投影方法及服务器装置 Download PDFInfo
- Publication number
- CN109313343B CN109313343B CN201780034880.6A CN201780034880A CN109313343B CN 109313343 B CN109313343 B CN 109313343B CN 201780034880 A CN201780034880 A CN 201780034880A CN 109313343 B CN109313343 B CN 109313343B
- Authority
- CN
- China
- Prior art keywords
- image
- projection
- information
- user
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 37
- 238000012545 processing Methods 0.000 claims abstract description 150
- 210000001525 retina Anatomy 0.000 claims abstract description 106
- 210000005252 bulbus oculi Anatomy 0.000 claims abstract description 17
- 230000000007 visual effect Effects 0.000 claims description 318
- 238000007689 inspection Methods 0.000 claims description 192
- 230000004304 visual acuity Effects 0.000 claims description 121
- 238000012360 testing method Methods 0.000 claims description 91
- 230000004438 eyesight Effects 0.000 claims description 76
- 230000002950 deficient Effects 0.000 claims description 52
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 87
- 230000006870 function Effects 0.000 description 15
- 210000001747 pupil Anatomy 0.000 description 13
- 210000000695 crystalline len Anatomy 0.000 description 12
- 230000003287 optical effect Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 8
- 238000012546 transfer Methods 0.000 description 7
- 230000000052 comparative effect Effects 0.000 description 6
- 239000013078 crystal Substances 0.000 description 6
- 210000001508 eye Anatomy 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 235000019557 luminance Nutrition 0.000 description 5
- 230000035945 sensitivity Effects 0.000 description 5
- 230000005856 abnormality Effects 0.000 description 4
- 230000010355 oscillation Effects 0.000 description 3
- 206010047571 Visual impairment Diseases 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000001886 ciliary effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000001678 irradiating effect Effects 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 210000003205 muscle Anatomy 0.000 description 2
- 210000001328 optic nerve Anatomy 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 208000029257 vision disease Diseases 0.000 description 2
- 241000885593 Geisha Species 0.000 description 1
- 208000013521 Visual disease Diseases 0.000 description 1
- 206010047555 Visual field defect Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000004456 color vision Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000006735 deficit Effects 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 229910052739 hydrogen Inorganic materials 0.000 description 1
- 238000012905 input function Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000004393 visual impairment Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B21/00—Projectors or projection-type viewers; Accessories therefor
- G03B21/14—Details
- G03B21/20—Lamp housings
- G03B21/2006—Lamp housings characterised by the light source
- G03B21/2033—LED or laser light sources
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
- A61B3/024—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for determining the visual field, e.g. perimeter types
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
- A61B3/028—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for testing visual acuity; for determination of refraction, e.g. phoropters
- A61B3/032—Devices for presenting test symbols or characters, e.g. test chart projectors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B26/00—Optical devices or arrangements for the control of light using movable or deformable optical elements
- G02B26/08—Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the direction of light
- G02B26/10—Scanning systems
- G02B26/12—Scanning systems using multifaceted mirrors
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/02—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes by tracing or scanning a light beam on a screen
- G09G3/025—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes by tracing or scanning a light beam on a screen with scanning or deflecting the beams in two directions or dimensions
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3188—Scale or resolution adjustment
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/08—Biomedical applications
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Molecular Biology (AREA)
- Ophthalmology & Optometry (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Heart & Thoracic Surgery (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Urology & Nephrology (AREA)
- Eye Examination Apparatus (AREA)
- Optical Elements Other Than Lenses (AREA)
- Eyeglasses (AREA)
- Mechanical Optical Scanning Systems (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明的终端装置(300)具有对由图像投影装置(200)投影的投影信息进行保持的投影对象保持部、保存了用于表示使用者(P)的视网膜上的投影信息的投影位置的位置信息的存储部、从存储部获取位置信息的位置信息获取部、生成用于将被保持的投影信息投影在由位置信息表示的位置处的图像(202D)的图像数据(D)的图像数据生成部、及将图像数据(D)输出至图像投影装置(200)的图像输出处理部,图像投影装置(200)具有用于射出光线的光源部、使来自终端装置(300)的图像数据(D)输入的图像输入部、生成基于所输入的图像数据(D)的图像用光线并进行来自光源部的图像用光线的射出控制的控制部、对图像用光线进行扫描的扫描镜、及将图像用光线作为由图像数据(D)表示的图像(202G)投影在使用者(P)的眼球的视网膜上的投影部。
Description
技术领域
本发明涉及图像投影系统、图像投影装置、图像投影方法、图像投影程序、及服务器装置。
背景技术
先前熟知一种图像投影装置,其使用了一种通过将基于图像数据的图像用光线投影在人的视网膜上,从而可不受人的水晶体功能的影响地使人对由图像数据表示的图像进行视认的方法。
[现有技术文献]
[专利文献]
[专利文献1](日本)特开2011-215194号公报
发明内容
[发明要解决的课题]
在先前的图像投影装置中,由于将由所输入的图像数据表示的图像或映像的整个范围原样地投影至人的视网膜,所以例如就具有视野狭窄等那样的问题的视野受限的人而言,无法使其看到所投影的图像或映像的整个范围。为此,以往例如存在即使视野受限的人等装戴了图像投影装置,也不能对图像或映像中尤其想要关注的部分进行视认的可能性。
公开的技术是鉴于上述事由而完成的,其目的在于提供一种可使图像投影至视野内的图像投影系统、图像投影装置、图像投影方法、图像投影程序、及服务器装置。
[用于解决课题的手段]
公开的技术是一种具有图像投影装置和与所述图像投影装置进行通信的终端装置的图像投影系统,其中,所述终端装置具有:对由所述图像投影装置投影的投影信息进行保持的投影对象保持部;保存了用于表示使用者的视网膜上的所述投影信息的投影位置的位置信息的存储部;从所述存储部获取所述位置信息的位置信息获取部;生成用于将所保持的所述投影信息投影至由所述位置信息表示的位置的图像的图像数据的图像数据生成部;及将所述图像数据输出至所述图像投影装置的图像输出处理部,所述图像投影装置具有:用于使光线射出的光源部;使来自所述终端装置的所述图像数据输入的图像输入部;生成基于所输入的所述图像数据的图像用光线、并进行来自所述光源部的所述图像用光线的射出控制的控制部;对所述图像用光线进行扫描的扫描镜;及将所述图像用光线作为由所述图像数据表示的所述图像而投影至所述使用者的眼球的视网膜上的投影部。
[发明效果]
可使图像投影在视野内。
附图说明
[图1]第一实施方式的图像的投影的概要的说明图。
[图2]图像投影装置的俯视图。
[图3]图像投影装置的投影部附近的扩大图。
[图4]扫描镜的振动的说明图。
[图5]终端装置的硬件构成的一例的说明图。
[图6]第一实施方式的图像投影系统的系统构成的说明图。
[图7]第一实施方式的图像生成处理部的功能的说明图。
[图8]第一实施方式的视野视力信息保存部的一例的示意图。
[图9]表示视界的一例的第一图。
[图10]说明第一实施方式的图像生成处理部的动作的流程图。
[图11]表示图像生成处理部生成的图像数据的例子的第一图。
[图12]表示视界的一例的第二图。
[图13]表示图像生成处理部生成的图像数据的例子的第二图。
[图14]表示图像生成处理部生成的图像数据的例子的第三图。
[图15]表示第一实施方式的投影信息的视认方法的一例的第一图。
[图16]表示第一实施方式的投影信息的视认方法的一例的第二图。
[图17]第二实施方式的图像投影系统的系统构成的一例的示意图。
[图18]第二实施方式的检查处理部的说明图。
[图19]第二实施方式的视野检查用图像的第一例的示意图。
[图20]第二实施方式的视野检查用图像的第二例的示意图。
[图21]表示第二实施方式的视力检查用图像的例子的第一图。
[图22]表示第二实施方式的视力检查用图像的例子的第二图。
[图23]对朗多环视标进行说明的图。
[图24]表示第二实施方式的视力检查用图像的例子的第三图。
[图25]表示第二实施方式的视力检查用图像的例子的第四图。
[图26]表示第二实施方式的视力检查用图像的例子的第五图。
[图27]对比敏感度检查用的图像的一例的示意图。
[图28]乱视检查用的图像的一例的示意图。
[图29]说明第二实施方式的检查处理部的处理的流程图。
[图30]第二实施方式的检查结果的输入画面的一例的示意图。
[图31]表示第二实施方式的视野检查图像的视认方法的一例的第一图。
[图32]表示第二实施方式的检查结果被输入了的状态的输入画面的一例的第一图。
[图33]表示第二实施方式的视野信息表的一例的第一图。
[图34]表示第二实施方式的视野检查图像的视认方法的一例的第二图。
[图35]表示第二实施方式的视野检查结果被输入了的状态的输入画面的一例的第二图。
[图36]表示第二实施方式的视野信息表的一例的第二图。
[图37]第二实施方式的视力检查用图像的视认方法的一例的示意图。
[图38]第二实施方式的视力检查结果被输入了的状态的输入画面的一例的示意图。
[图39]表示第二实施方式的视力信息表的一例的第一图。
[图40]表示第二实施方式的视力信息表的一例的第二图。
[图41]第三实施方式的图像投影系统的系统构成的说明图。
[图42]第四实施方式的图像投影系统的系统构成的说明图。
[图43]第五实施方式的图像投影系统的系统构成的说明图。
[图44]说明第五实施方式的图像生成处理部的功能的第一图。
[图45]第五实施方式的投影位置表的一例的示意图。
[图46]说明第五实施方式的投影设定部的处理的流程图。
[图47]说明第五实施方式的图像生成处理部的处理的流程图。
[图48A]第五实施方式的投影信息的选择画面的一例的示意图。
[图48B]投影信息的投影位置的设定画面的一例的示意图。
[图49]投影信息被投影至指定位置的例子的示意图。
[图50]说明第五实施方式的图像生成处理部的功能的第二图。
[图51]从上方观察第六实施方式的图像投影装置的图。
[图52]比较例的图像投影装置中的光线的光路的示意图。
[图53]第六实施方式的图像投影装置中的光线的光路的示意图。
[图54]图53的反射镜付近的放大图。
[图55]表示第六实施方式的反射镜表面的凹凸的斜视图。
[图56]表示反射镜的X方向上的高度Z的图。
具体实施方式
(第一实施方式)
下面参照附图对第一实施方式进行说明。图1是第一实施方式的图像的投影的概要的说明图。
本实施方式的图像投影系统100包括图像投影装置200和终端装置300。
就本实施方式的图像投影系统100而言,终端装置300根据表示装戴了图像投影装置200的使用者P的视野的信息和投影信息生成使图像投影至使用者P的视野的图像数据,并将其提供至图像投影装置200。
这里,投影信息是指,作为由图像投影装置200投影在使用者P的视网膜上的图像的基础的信息,其可为文字、数字等的记号,也可为图像。
本实施方式的图像投影装置200是应用了麦克斯韦观察法(Maxwellian view)的视网膜投影式头戴显示器。麦克斯韦观察法是指,先使基于图像数据的图像用光线在瞳孔的中心处进行收敛,再将其投影在视网膜上,藉此可不受人的水晶体功能的影响地使人对由图像数据表示的图像进行视认的方法。本实施方式的终端装置300例如为平板电脑、智能手机等,并可将图像数据发送至图像投影装置200。
图像投影装置200通过将基于从终端装置300发送的图像数据的图像用光线照射在使用者P的视网膜上,可使图像投影在使用者P的视网膜上。
就直接投影在人的视网膜上的图像而言,只要视网膜的功能正常,就可按照由图像数据表示的图像那样被视认。但是,在视网膜的功能、视神经等出现了问题的情况下,投影在视网膜上的图像就会以与由图像数据表示的图像不同的形态而被视认。
例如,在视野狭窄等导致视野受限的情况下,投影在视网膜上的图像仅可在视野受限的范围内被视认。换言之,投影在视网膜上的图像是作为一种欠缺的视野的部分丢失了的图像而被视认。
本实施方式中,着眼于该点,预先藉由视野检查等获取表示使用者的视网膜的视野的信息,然后参照表示视野的信息,由此可将图像投影在使用者的视野内。
例如,在使用者P的视野被限制的情况下,终端装置300根据表示使用者P的视野的信息、表示视力的信息、及投影信息生成使投影信息投影在使用者P的视野内的图像数据D,并将其发送至图像投影装置200。图像投影装置200可将基于图像数据D的图像投影在使用者P的视网膜上。
本实施方式中,通过这样的方式,就可将投影在使用者P的视网膜上的图像如图像201-P所示的那样作为以按照与使用者P的视力相对应的大小使信息投影在与使用者P 的视野相对应的区域内的图像。即,本实施方式中,藉由该构成,即使是视野受限的使用者,也可使图像投影在该使用者能够看见的位置。
接着,参照图2至图5对本实施方式的图像投影系统100的各装置进行说明。
图2是视野检查装置的俯视图。本实施方式的图像投影装置200具有投影部210和控制部230。
本实施方式的投影部210具有光源211、扫描镜212、反射镜213、反射镜214、反射镜215、及投影镜216。
光源211配置在眼镜式框架(frame)的镜脚250上。光源211在控制部230的指示下例如可射出一个或多个(plural)波长的光线L。光线L是用于将图像投影在使用者的眼球260的视网膜261上的图像用光线。下面的说明中将光线L称为图像用光线。
光源211例如可射出红色激光(波长:610nm~660nm左右)、绿色激光(波长: 515nm~540nm左右)、及蓝色激光(波长:440nm~480nm左右)。这里,射出红色、绿色、及蓝色激光。就本实施方式的光源211而言,作为光源211,例如可通过集成了RGB (红·绿·蓝)这三种颜色的激光二极管芯片、三色(三种颜色)合成装置、及微准直透镜的光源等实现。
扫描镜212配置在眼镜式框架的镜脚250上。扫描镜212沿水平方向和垂直方向对从光源211射出的图像用光线进行扫描。扫描镜212例如为MEMS(Micro ElectroMechanical System)反射镜。需要说明的是,从光源211射出的图像用光线例如可被反射镜213和反射镜214反射从而入射至扫描镜212。
本实施方式的控制部230可由CPU(Central Processing Unit)等的处理器、RAM(Random Access Memory)、及ROM(Read Only Memory)等实现。
处理器和内存例如可实装在与实装了扫描镜212(MEMS反射镜)的基板相同的基板上。另外,处理器和内存也可设置在与图像投影装置200连接的外部装置(例如,终端装置300等)内。
本实施方式的控制部230可对投影部210进行控制。控制部230可使基于所输入的图像数据的图像用光线从光源211射出。另外,本实施方式的控制部230还可使扫描镜212(MEMS反射镜)振动,从而对从光源211射出的图像用光线进行扫描,进而使图像投影在视网膜261上。
接着,基于图3和图4对图像投影装置200的投影部210所进行的图像的投影进行说明。
图3是图像投影装置的投影部附近的放大图。
如图2和图3所示,被扫描镜212扫描了的图像用光线藉由反射镜215被反射至眼镜式框架的透镜251。本实施方式中,由于投影部210配置在透镜251的眼球260侧的表面上,所以被扫描镜212扫描了的图像用光线可入射至投影镜216。
就投影镜216而言,在图像用光线入射的区域216a内,其为自由曲面或者自由曲面和衍射面的合成结构的半反射镜(half mirror)。据此,入射至投影镜216的图像用光线可在眼球260的瞳孔262附近收敛,然后再投射至视网膜261。
所以,使用者不仅可识别由图像用光线所形成的图像,而且还可通过透视 (see-through)的方式对外界影像进行视认。
图4是第1反射镜的振动的说明图。需要说明的是,图4中示出了扫描镜212从点A振动至点B的情形。
作为由扫描镜212对图像用光线进行扫描从而将图像投影至视网膜261的方法,存在一种从图像投影区域的左上向右下对光进行高速扫描,由此使图像显示的方法(例如,光栅扫描(raster scan))。
本实施方式中,如图4所示,扫描镜212为了对图像用光线(光线L)进行扫描,可在比图像被投影在视网膜261上的区域H(图4的虚线范围)还大的范围内沿水平方向 (第1方向)和垂直方向(与第1方向交叉的第2方向)进行振动。图4中以符号50示出了扫描镜212的振动。
当在扫描镜212进行了较大振动的范围内对图像用光线进行扫描从而将图像投影在视网膜261上时,图像的失真(distortion)较大。所以,本实施方式中,图像用光线在扫描镜212的振动较小的范围内被扫描。
需要说明的是,图4中尽管以图像用光线被扫描为矩形形状的情况为例进行了图示,但并不限定于该情况,还可为被扫描成梯形形状等的其他情况。
接着,对本实施方式的终端装置300进行说明。图5是终端装置的硬件构成的一例的说明图。
本实施方式的终端装置300包括分别由总线B进行了相互连接的显示操作装置301、驱动装置302、辅助存储装置303、内存装置304、演算处理装置305、及接口装置 306。
显示操作装置301为触屏等,并具有使信息显示的显示功能和使信息输入的输入功能。接口装置306包括LAN卡等,用于与网络进行连接。
终端装置300中被执行的图像投影程序是对终端装置300进行控制的各种程序的至少一部分。图像投影程序例如可通过记录介质(存储介质)307的分发、从网络下载等的方式进行提供。记录(存储)了图像投影程序的记录介质307可采用如CD-ROM、软盘、光磁碟等那样的将信息以光记录、电记录、或磁记录的方式进行记录的记录介质、如ROM、闪存等那样的将信息以电记录的方式进行记录的半导体存储器等的各种类型的记录介质。
另外,就图像投影程序而言,将记录有该图像投影程序的记录介质307放入驱动装置302后,可从记录介质307经由驱动装置302被安装(install)至辅助存储装置303。从网络下载的图像投影程序可经由接口装置306被安装于辅助存储装置303。
辅助存储装置303除了可保存被安装的图像投影程序之外,还可保存一些必要的文件、数据等。内存装置304在计算机起动时从辅助存储装置303读取图像投影程序并对其进行保存。另外,演算处理装置305可基于内存装置304中保存的图像投影程序实现如后所述的各种处理。
需要说明的是,本实施方式中,终端装置300是具有显示操作装置301的终端装置,但并不限定于此。终端装置300例如也可为台式电脑或笔记本电脑。此情况下,终端装置300也可具有替代显示操作装置301的用于输入信息的鼠标、键盘等的输入装置和用于显示信息的显示器等的输出装置。
接着,参照图6对本实施方式的图像投影系统100进行说明。图6是第一实施方式的图像投影系统的系统构成的说明图。
本实施方式的图像投影系统100具有图像投影装置200和终端装置300。图像投影系统100中,图像投影装置200与终端装置300连接,并可与终端装置300进行通信。
需要说明的是,图6的例子中,尽管图像投影装置200和终端装置300通过无线方式进行通信,但并不限定于此。就图像投影装置200和终端装置300而言,只要可被连接成能够进行通信的状态,可采用任何方法进行连接。
本实施方式的终端装置300具有图像生成处理部310、图像输出处理部320、及视野视力信息保存部330。
本实施方式的图像生成处理部310可参照视野视力信息保存部330中保存的终端装置300的使用者P的视野信息和视力信息生成图像数据,以将作为投影对象的信息的投影信息投影在使用者的视野内。关于图像生成处理部310,将在下面进行详述。
这里,投影信息可为使用者需要的信息或以感兴趣的信息为主体的信息。
图像输出处理部320可将从图像生成处理部310接收的图像数据输出至外部的装置。具体而言,本实施方式的图像输出处理部320将从图像生成处理部310接收的图像数据输出(发送)至图像投影装置200。
视野视力信息保存部330对表示图像投影装置200的使用者P的视野的信息和表示使用者P的视力的信息进行保存。
本实施方式中,表示视野的信息是指,表示使用者P的视网膜的区域的信息,是一种对使用者P能够看到所投影的图像的视网膜的区域进行表示的信息。另外,本实施方式的表示视力的信息是指,表示视网膜本身的视力的信息。具体而言,本实施方式的表示视力的信息是指,例如随基于睫状肌(ciliary muscle)的水晶体的厚度的调整等进行变化的一般意义上的视力,是一种对视网膜的黄斑区的动向(变化)进行表示的信息。关于视野视力信息保存部330,将在下面进行详述。
接着,参照图7对本实施方式的图像生成处理部310进行说明。图7是第一实施方式的图像生成处理部的功能的说明图。
本实施方式的图像生成处理部310具有投影请求受理部311、投影对象获取部312、视野视力信息获取部313、及图像数据生成部314。
投影请求受理部311用于对显示操作装置301等中所输入的投影信息的投影请求进行受理(接受)。
投影对象获取部312可获取投影信息。投影信息例如可为终端装置300的辅助存储装置33等中保存的内容数据等,也可为终端装置300从外部的服务器、存储装置等中获取的内容数据等。另外,投影信息可为文本数据,也可为包含动画的图像数据。此外,本实施方式的图像投影装置200内置有摄像装置,故投影信息还可为由图像投影装置 200中内置的摄像装置所拍摄的图像。
视野视力信息获取部313用于从视野视力信息保存部330中获取图像投影装置200的使用者P的视野信息和使用者P的视力信息。换言之,视野视力信息获取部313是一种可获取表示投影信息的投影位置的信息的位置信息获取部。
图像数据生成部314可根据视野信息生成用于显示投影信息的图像的图像数据,并可将所生成的图像数据传送给图像输出处理部320。
接着,参照图8对本实施方式的视野视力信息保存部330进行说明。图8是第一实施方式的视野视力信息保存部的一例的示意图。
本实施方式的视野视力信息保存部330中,采用将视野信息和视力信息与使用者ID 进行了关联的表(table)来进行管理。
在本实施方式的视野视力信息保存部330中,作为信息的项目,具有使用者ID、视野、及视力,视野和视力与使用者ID进行了关联。项目「使用者ID」的值是用于对使用者进行识别的识别信息。需要说明的是,本实施方式中,作为用于对使用者进行识别的信息,也可采用使用者的姓名等来替代取代识别符(ID)。本实施方式中,将与使用者ID进行了关联的项目「视野」的值称为视野信息,将与使用者ID进行了关联的项目「视力」的值称为视力信息。
项目「视野」的值是表示使用者的视野的坐标信息。项目「视力」的值则表示使用者的视网膜本身的视力。
需要说明的是,图8的例子中,尽管视野信息和视力信息之间并没有进行关联,但在视野视力信息保存部330中也可对视野信息和视力信息进行关联。具体而言,视野视力信息保存部330中,可对由视野信息表示的区域和表示该区域的视力的视力信息进行关联并进行管理。
另外,就本实施方式的视力信息而言,还可为对藉由朗多环视标等所获得的一般意义上的视力进行表示的信息。
下面,参照图9对本实施方式的视野信息进行说明。
图9是表示视界的一例的第一图。如图9所示,使用者P的视界111中存在欠缺区域112、113、114。即,使用者P的视网膜上的与欠缺区域112、113、114相对应的位置处出现了某种异常。
这样,在使包含投影信息的整个图像投影于视野存在欠缺区域的使用者的视网膜的情况下,被投影了的图像中也会反映出图9所示的欠缺区域112、113、114。所以,通过在欠缺区域之外的区域内对使用者P所需的或感兴趣的信息进行投影,即使具有欠缺区域使用者P也可对其所需的或感兴趣的信息进行视认。
就投影至欠缺区域的信息而言,只要是图像,可为与投影至不是欠缺区域的区域的图像连续的图像、单色图像等,也可在该区域内使图像用光线停止。
所以,本实施方式中,就用于表示使用者可对投影在使用者的视网膜上的图像进行视认的区域115的信息而言,在视野视力信息保存部330中作为表示使用者的视野的坐标信息(项目「视野」的值)而被保持。
本实施方式中,表示使用者的视野的信息例如可通过如下方式获得,即,将基于一般的动态视野检查、静态视野检查(基于Humphrey视野计(Humphrey Field Analyzer) 的视野检查)等所获得的表示视野欠缺的有无的检查结果作为图像读入,并将视野欠缺了的区域和没有欠缺的区域变换为坐标信息,由此可获得上述表示使用者的视野的信息。动态视野检查是指例如使用Goldmann视野计(Goldmann perimeter)所进行的视野检查等,静态视野检查是指例如使用Humphrey视野计所进行的视野检查等。
就本实施方式的视野视力信息保存部330而言,例如,可记录在移动记录介质等中,并可从该记录介质被读入终端装置300。另外,也可从外部的服务器等经由网络下载视野视力信息保存部330。本实施方式中,终端装置300只要可参照视野视力信息保存部 330即可,对终端装置300获取视野视力信息保存部330的获取方法并无特别限定。另外,本实施方式中,由于终端装置300只要可参照视野视力信息保存部330即可,所以视野视力信息保存部330还可保存在能与终端装置300进行通信的外部装置中。
接着,参照图10对本实施方式的图像生成处理部310的处理进行说明。图10是用于说明第一实施方式的图像生成处理部的动作的流程图。
本实施方式的图像生成处理部310当投影信息被选择后对投影请求受理部311是否受理(接受)了投影信息的投影请求进行判定(步骤S1001)。当在步骤S1001中没有受理投影请求的情况下,图像生成处理部310至受理投影请求为止进行待机。
当在步骤S1001中受理了投影请求的情况下,图像生成处理部310藉由投影对象获取部312获取被选择的投影信息(步骤S1002)。
接着,图像生成处理部310藉由视野视力信息获取部313从视野视力信息保存部330 中获取进行了投影请求的使用者的视野信息和视力信息(步骤S1003)。
然后,图像生成处理部310藉由图像数据生成部314根据投影信息以及视野信息和视力信息生成要传送给图像输出处理部320的图像数据(步骤S1004)。
接着,图像数据生成部314将所生成的图像数据传送至图像输出处理部320(步骤S1005),然后结束处理。
下面,参照图11对由本实施方式的图像生成处理部310生成的图像数据进行说明。
图11是表示由图像生成处理部生成的图像数据的例子的第一图。图11中对图像生成处理部310通过参照具有图8所示的视野的使用者P的视野信息和视力信息来生成图像数据的情况进行说明。
图像生成处理部310可生成表示使用者P的视野的区域115内的包含投影信息的图像数据。
图11所示的图像201-P是由视野视力信息保存部330中保存的视野信息所表示的区域115内的含有投影信息202的图像。需要说明的是,此时,就表示投影信息202的文字的大小等而言,可为与视野视力信息保存部330中保存的视力信息相对应的大小等。
本实施方式的图像生成处理部310生成用于表示该图像201-P的图像数据,并藉由图像投影装置200将图像201-P投影在使用者P的视网膜上。本实施方式中,通过这样地生成图像201-P,可将使用者P进行了投影请求的投影信息202以与使用者P的视力相对应的大小投影在使用者P的视野内。
需要说明的是,本实施方式中,尽管藉由图像数据生成部314生成了信息仅被投影在使用者的视野内那样的图像201-P的图像数据,但并不限定于此。
图像生成处理部310也可生成表示投影信息本身的图像的图像数据,并可将其与视野信息一起发送给图像投影装置200。
图像投影装置200可藉由控制部230根据视野信息对扫描镜212的振动进行控制从而调整图像的投影位置,并可使表示投影信息本身的图像投影在使用者的视野内。
具体而言,图像生成处理部310生成表示投影信息202本身的图像202G的图像数据,并藉由图像输出处理部320使视野信息与图像202G的图像数据一起输出至图像投影装置200。
此情况下,图像投影装置200只要根据视野信息对扫描镜212的振动进行控制从而调整图像的投影位置,并使图像202G的图像数据投影在由视野信息表示的区域内即可。
接着,参照图12至图14对其他例子进行说明。图12是表示视界的一例的第二图。
图12中示出了使用者Q的视界141。视界141中,由图12可知,存在欠缺区域142。即,使用者Q的视网膜上的与欠缺区域142相对应的位置处出现了某种异常。所以,被投影了的图像是作为一种缺少了与欠缺区域142相对应的位置的区域(阴影部分)的图像而被使用者Q视认。换言之,使用者Q只能对投影对象的图像中的、被投影在了使用者Q的视网膜上的与欠缺区域142之外的区域143相对应的位置处的图像进行视认。
图13是表示由图像生成处理部生成的图像数据的例子的第二图。图13中对图像生成处理部310通过参照具有图12所示的视野的使用者Q的视野信息和视力信息来生成图像数据的情况进行说明。
图像生成处理部310可生成表示使用者Q的视野的区域143内的包含投影信息203的图像数据。
图13所示的图像201-Q是表示使用者Q的视野信息的区域143内的包含投影信息203的图像。
本实施方式的图像生成处理部310可生成表示该图像201-Q的图像数据,并可藉由图像投影装置200使图像201-Q投影在使用者Q的视网膜上。本实施方式中,通过这样地生成图像201-Q,可将使用者Q进行了投影请求的投影信息203投影在使用者Q的视野内。
图14是表示由图像生成处理部生成的图像数据的例子的第三图。图14所示的图像201-QA示出了在使用者Q的视力比图13所示的例子还坏(还不好)的情况下由图像生成处理部310生成的图像。
图像201-QA中,表示投影信息203的文字大于图像201-Q中的表示投影信息203的文字。
这样,本实施方式中就可根据使用者的视力对投影在使用者的视网膜上的文字、图像、记号等的大小进行改变。
接着,参照图15和图16对投影信息的视认方法进行说明。图15是表示第一实施方式的投影信息的视认方法的一例的第一图。
图15示出了将图像201-Q投影在具有图12所示的视野的使用者Q的视网膜上的情况下的视认方法。
此情况下,由于图像201-Q被投影在了使用者Q的视网膜的与没有欠缺的区域143相对应的位置,所以使用者Q可对投影信息203进行视认。
图16是表示第一实施方式的投影信息的视认方法的一例的第二图。图16中,示出了在具有图12所示的视野的使用者Q的视网膜上进行了图像201-QA的投影的情况下的视认方法。图像201-QA中,根据使用者Q的视力信息,使表示投影信息203的文字变大了。
这样,本实施方式中,例如即使在视野存在欠缺的情况下,也可在视野中的使用者能够视认的区域内进行与使用者的视力相符的投影信息203的投影。
如上所述,根据本实施方式,通过使用视野检查的结果,可在图像投影装置200 的使用者的视野内进行使用者所需的或感兴趣的投影信息的投影。
所以,根据本实施方式,不仅可抑制视野的欠缺所导致的投影信息的丢失,而且还可将投影信息投影在使用者的视网膜上。
例如,本实施方式中,在视野受限的人利用电子字典进行术语的检索等的情况下等,可从对检索到的术语的检索结果进行表示的图像中仅提取出显示了术语的含义等的部分的图像,并可将所提取出的图像显示在视野内,据此,即使是视野受限的人,也可以无障碍地利用一般常用的电子字典。
另外,从临床结果可知,即使是视野受限的人,如果是日语,则只要能使5个以上的文字进入视野,就可进行「阅读」。这里所说的「阅读」是指眼睛逐个地看文字以理解其含义(NAOYUKI OSAKA,Kyoto University,Kyoto,Japan and KOICHI ODA, NationalInstitute of Special Education,Yokosuka,Japan,Effective visual field sizenecessary for vertical reading during Japanese text processing,Bulletin ofthe Psychonomic Society 1991,29(4),345-347)。
所以,本实施方式中,例如,即使是视野的欠缺部分较大,阅读等很困难的人,通过使5个以上的文字投影在其视野内,也可进行文章的阅读。
需要说明的是,本实施方式的图像生成处理部310中生成的图像数据也可包含动画数据。例如,在使电子书籍的内容投影至使用者的视野内的情况下,可采用使文本数据在使用者的视野内进行流动的方式对动画数据进行投影。
图像投影装置200还可通过控制部230并根据视野信息对扫描镜212的振动进行控制从而调整图像的投影位置,藉此可使表示投影信息本身的图像投影在使用者的视野内。
(第二实施方式)
下面对第二实施方式进行说明。第二实施方式与第一实施方式的不同点在于,将使用图像投影装置200所进行的视野检查的结果作为视野信息。所以,在下面的第二实施方式的说明中,仅对与第一实施方式不同的部分进行说明,对具有与第一实施方式相同的功能构成的部分,则赋予了与第一实施方式的说明中使用的符号相同的符号,并省略其说明。
图17是第二实施方式的图像投影系统的系统构成的一例的示意图。
本实施方式的图像投影系统100A具有图像投影装置200和终端装置300A。
本实施方式的终端装置300A具有图像生成处理部310、图像输出处理部320、视野视力信息保存部330A、及检查处理部340。
本实施方式的检查处理部340保持了与视野检查用图像G相对应的检查用图像数据,并可将检查用图像数据传送至图像输出处理部320。另外,本实施方式的检查处理部340可使视野检查用图像G显示在终端装置300A的显示操作装置301上,还可受理来自使用者的检查结果的输入,并可将检查结果保存在视野视力信息保存部330A中。关于检查处理部340,将在后面进行详述。
本实施方式的视野视力信息保存部330A具有视野信息表331和视力信息表332。视野信息表331中可对装戴了图像投影装置200的使用者的视野检查的检查结果进行保存。视力信息表332中可对装戴了图像投影装置200的使用者的视力检查的检查结果进行保存。关于视野信息表331和视力信息表332,将在后面进行详述。
接着,参照图18对本实施方式的检查处理部340进行说明。图18是第二实施方式的检查处理部的说明图。就图18所示的各部分而言,可通过由终端装置300A的演算处理装置305读取内存装置304等中保存的视野检查程序并进行执行而实现。
本实施方式的检查处理部340具有图像数据保持部341、显示控制部342、输入受理部343、图像数据选择部344、及检查结果保存部345。
图像数据保持部341保持了与视野检查用图像G相对应的视野检查用图像数据和与视力检查用图像T相对应的视力检查用图像数据。当开始进行检查的开始请求被受理后,本实施方式的图像数据保持部341可将基于所实施的检查的图像数据传送给图像输出处理部320和显示控制部342。
需要说明的是,在本实施方式的图像投影系统100A中,尽管检查用图像数据为仅由图像数据保持部341保持的数据,但并不限定于此。检查用图像数据也可由图像投影装置200的控制部230进行保持。
显示控制部342接收到检查用图像数据后,可使包含检查用图像的检查结果的输入画面显示在终端装置300的显示操作装置301上。更具体而言,显示控制部342使包含视野检查用图像G的检查结果的输入画面和/或包含视力检查用图像T的检查结果的输入画面进行显示。另外,本实施方式的显示控制部342也可在开始实施检查的开始请求被受理后再让用于选择视野检查或视力检查的选择画面进行显示。
输入受理部343可受理与在显示操作装置301上所进行的各种操作相应的输入。具体而言,输入受理部343可对开始进行检查的开始请求、检查结果的输入画面中的输入等进行受理。
图像数据选择部344可从图像数据保持部341中保持的检查用图像数据中选择与输入受理部343所受理的检查种类相应的图像数据,并可将其传送给显示控制部342。
检查结果保存部345可将输入受理部343所受理的检查结果以与用于表示使用者ID 和受理了检查结果的输入的日期和时间的信息相关联的方式保存在视野视力信息保存部330A中。
接着,参照图19和图20对本实施方式的视野检查用图像G进行说明。图19是第二实施方式的视野检查用图像的第一例的示意图,图20是第二实施方式的视野检查用图像的第二例的示意图。
图19所示的视野检查用图像G沿纵方向和横方向分别被分割成多个区域。换言之,视野检查用图像G由矩形上的区域的集合所形成。
在视野检查用图像G中的各区域内,作为用于对各区域进行识别的识别符,描绘了数字。需要说明的是,区域识别符并不限定于数字。区域的识别符例如也可为平假名、汉字、字母、其他语言的文字等。
另外,视野检查用图像G中,中央部分处可形成注视点M。需要说明的是,图19 的例子中,尽管将表示注视点M的标记设成了「+」,但表示注视点的标记的形状并不限定于此。表示注视点的标记的形状可为任意形状,只要能向使用者P显示其应注视的点即可。
视觉障碍中还存在一种即使可判别(辨别)图像等但却无法判别文字的障碍。本实施方式中,通过使区域的识别符为文字,也能对是否具有可识别出各区域的文字的能力进行判定。
通过使本实施方式的区域的识别符为文字,可获得上述效果,但该识别符并不一定必须是文字。例如,作为区域的识别符,还可在各区域上显示图像等。
例如,图19中也可为,使识别符为「1」的区域内显示苹果的图像,使识别符为「2」的区域内显示汽车的图像。另外还可为,例如使识别符为「1」的区域内显示星形标记的图像,使识别符为「2」的区域内显示心形标记的图像。
通过使识别符不为文字而是如上所述为图像,例如即使是不具有识字能力的使用者,也可使其对检查用图像中的能看见的区域和不能看见的区域进行判别。
另外,图19中尽管视野检查用图像G所含的区域的个数为100,但区域的数量并不限定于此。视野检查用图像G中的区域的个数也可根据视野检查用图像G的投影区域的大小进行确定。另外,就视野检查用图像G中的区域的个数而言,只要据其可把握使用者能看见的区域和不能看见的区域即可。
视野检查用图像G中,如果区域的个数过多,则使用者的负担可能会增加,如果区域的个数过少,则可能无法适当地把握能看见的区域和不能看见的区域。所以,本实施方式中,就视野检查用图像G中的区域的个数而言,优选为,在不增加使用者的负担的前提下可适当地获知使用者能看见的区域和不能看见的区域的个数左右。区域的数量例如也可根据反复进行使用了本实施方式的图像投影系统100A的视野检查所获得的结果来预先确定。
另外,本实施方式中,尽管视野检查用图像G所含的区域为矩形,但并不限定于此。视野检查用图像G所含的区域的形状也可圆形、椭圆形、或正方形。
20所示的视野检查用图像G1中,离中央处的注视点M越远的区域,该区域内所描绘的识别符的大小越大。
视野检查时,在让使用者P注视位于视野检查用图像G1的中央处的注视点的情况下,使用者P容易对注视点附近的区域的识别符进行视认,另一方面,离注视点越远的区域的识别符,其越难被使用者P视认。
所以,在视野检查用图像G1中,通过以注视点M为中心将沿远离注视点M的方向的位置的识别符描绘为逐渐增大,可提高视野检查用图像G1的周围的识别符的视认性。另外,视野检查用图像G1还可用于进行视网膜本身的视力分布的测定。
接着,参照图21至图28对视力检查用图像进行说明。图21是表示第二实施方式的视力检查用图像的例子的第一图。
在图21所示的视力检查用图像T中,配置了6行11列的朗多环视标。本实施方式中,表示视力检查用图像T所含的各朗多环视标的中心的坐标也可与视力检查用图像T相关联。
例如,可考虑如下情况,即,当视力检查用图像T显示在视力检查的检查结果的输入画面上时,使用者无法判定视力检查用图像T中的朗多环视标121~123的缺口。此情况下,本实施方式中,作为对使用者没能判定出缺口的朗多环视标进行指定的信息,可分别输出朗多环视标121~123的中心点P1、P2、P3的坐标。
图22是表示第二实施方式的视力检查用图像的例子的第二图。在图22所示的视力检查用图像T1中,配置了3行5列的朗多环视标,就视力检查用图像T1的朗多环视标而言,可知其大于图21所示的视力检查用图像T中的朗多环视标。
本实施方式中,例如,除了图21和图22所示的视力检查用图像之外,还可具有配置了与视力的等级相对应的大小的朗多环视标的、与视力的等级相对应的视力检查用图像。
这样,本实施方式中就可根据使用者的视力来选择投影至使用者的视网膜上的朗多环视标的大小,并可使配置了所选择的大小的朗多环视标的视力检查用图像投影在使用者的视网膜上。此时,就投影至使用者的视网膜上的朗多环视标的大小而言,例如可由使用者选择,也可由辅助检查者选择。
本实施方式中,通过使视力检查用图像T中的朗多环视标的大小变为更小的刻度、或连续地进行变化,还可进行至小数点后面2位的视力检测。
接着,参照图23对朗多环视标进行说明。图23是对朗多环视标进行说明的图。
朗多环视标是黑色的圆环,圆环整体的直径、圆弧的宽度、及环的开口的宽度(缺口宽度)为5:1:1。
本实施方式中,例如在从5m远的距离可对大约1.45mm的缺口进行判别的情况下,视力为1.0。更具体而言,当离5m远对直径为7.5mm、圆弧的宽度为1.5mm、且缺口的宽度为1.5mm的朗多环视标进行观察时,可将能够确定缺口的位置的视力作为「视力 1.0」。
所以,本实施方式中,例如在对视力是否为1.0以上进行计测的情况下,只要使用图像投影装置200将包含具有当从5m远的地方对直径为7.5mm、圆弧的宽度为1.5mm、且缺口的宽度为1.5mm的朗多环视标进行观察时的大小的朗多环视标的视力检查用图像T投影在视网膜上即可。
图24是表示第二实施方式的视力检查用图像的例子的第三图。
图24的例子中示出了朗多环视标的显示位置不同的视力检查用图像。在图24所示的视力检查用图像T11中,左上侧配置了1个朗多环视标,在视力检查用图像T12中,左下侧配置了1个朗多环视标。另外,在图24所示的视力检查用图像T13中,右上侧配置了1个朗多环视标。
本实施方式中,如图24所示,通过使朗多环视标的配置位置不同的视力检查用图像依次投影在使用者的视网膜上,除了视力之外,还可对是否存在视野的欠缺进行检查。
需要说明的是,图24中,尽管1个视力检查用图像中配置了1个朗多环视标,但并不限定于此。1个视力检查用图像中也可配置多个朗多环视标。
另外,图24的例子中,尽管是使朗多环视标的配置位置不同的视力检查用图像依次投影在使用者的视网膜上的构成,但并不限定于此。例如,视力检查用图像也可作为朗多环视标的位置进行移动的动画而被投影在使用者的视网膜上。
通过使用这样的视力检查用图像,本实施方式中,可对使用者的视野和视力进行关联。换言之,本实施方式中,可获知使用者的视网膜上的视力的分布。
图25是表示第二实施方式的视力检查用图像的例子的第四图。在图25所示的视力检查用图像T15中,配置了辉度不同的多个朗多环视标的图像151~156。
视力检查用图像T15中,辉度从朗多环视标的图像151开始朝向朗多环视标的图像156逐渐变小。
本实施方式中,通过这样地使朗多环视标的图像的辉度不同,可获知使用者为了判别图像所需的辉度。
需要说明的是,在本实施方式的视力检查用图像中,朗多环视标可为黑色的图像,也可为例如蓝色、红色、或绿色那样的黑色之外的颜色的图像。本实施方式中,通过改变朗多环视标的图像的颜色,不仅可进行视力检查,而且还可对是否存在色觉异常进行检查。
图26是表示第二实施方式的视力检查用图像的例子的第五图。本实施方式中,可藉由朗多环视标之外的图像进行视力检查。
图26所示的视力检查用图像T16包含ETDRS(Early Treatment of DiabeticRetinopathy Study)视力表。
ETDRS视力表中,列上的视标的大小的差为0.1logMAR单位,1行配置了5个视标。另外,作为视标的文字为Sloan字体的Sloan Letter set(C、D、H、K、N、O、R、S、 V、Z的10个文字)。另外,ETDRS视力表中,各个视标的间隔为1个视标的大小,结果并不是列,而是由视标进行了数值化。
这样,本实施方式中,还可采用朗多环视标之外的视标进行视力检查。朗多环视标之外的视标是指,除了ETDRS视力表之外,例如还包括Tumbling E视力表等。
图27是对比敏感度(contrast sensitivity)检查用图像的一例的示意图,图28是乱视检查用图像的一例的示意图。
本实施方式的视力检查用图像T中例如也可包括图27所示的对比敏感度检查用图像。
图27所示的图像171、172为用于使颜色的色阶(gradation)投影在整个视野内的图像。本实施方式中,通过这样地使颜色的色阶投影在使用者的视野内,并将使用者可识别的颜色作为检查结果进行输入,可对使用者的对比敏感度进行测定。
需要说明的是,本实施方式中,投影在整个视野内的图像也可不是具有色阶的图像,例如通过准备多个整个视野都为相同颜色那样的图像,并依次对这些图像进行投影,也可实现具有色阶的效果。
另外,本实施方式的视力检查用图像T中还可包含图28所示的用于乱视检查的图像 181和/或图像182。通过将这些图像包含在视力检查用图像T内,可对使用者是否为乱视进行检查。
接着,参照图29对本实施方式的终端装置300A的检查处理部340的处理进行说明。图29是对第二实施方式的检查处理部的处理进行说明的流程图。
本实施方式的终端装置300A藉由检查处理部340对输入受理部343是否受理了开始进行开始视野检查的开始请求进行判定(步骤S2901)。当在步骤S2901中没有受理开始请求的情况下,检查处理部340进入后述的步骤S2911。
在步骤S2901中受理了开始请求后,检查处理部340藉由图像数据选择部344从图像数据保持部341所保持的图像数据中选择并读取视野检查用图像数据,并将视野检查用图像数据传送给图像输出处理部320和显示控制部342(步骤S2902)。
图像输出处理部320使视野检查用图像数据发送给图像投影装置200(步骤S2903)。图像投影装置200中,所发送的视野检查用图像数据被输入控制部230后,藉由投影部 210,将基于视野检查用图像数据的图像用光线扫描至使用者的视网膜,以让使用者对视野检查用图像G进行视认。
显示控制部342根据检查用图像数据使包含视野检查用图像G的检查结果的输入画面显示在终端装置300A的显示操作装置301上(步骤S2904)。关于检查结果的输入画面,将在后面进行详述。
接着,检查处理部340对输入受理部343是否受理了受理输入画面中的视野检查的检查结果的输入进行判定(步骤S2905)。当在步骤S2905中没有受理检查结果的输入的情况下,输入受理部343进入后述的步骤S2908。
在步骤S2905中受理了检查结果的输入后,输入受理部343对是否受理了检查结果的保存指示进行判定(步骤S2906)。当在步骤S2906中没有受理保存指示的情况下,输入受理部343进入后述的步骤S2910。
在步骤S2906中受理了保存指示的输入后,检查处理部340藉由检查结果保存部345 将所输入的检查结果保存在视野视力信息保存部330A内(步骤S2907),然后结束处理。
当在步骤S2905中没被受理检查结果的输入的情况下,输入受理部343对是否仅过了预定的时间进行判定(步骤S2908)。当在步骤S2908中判定为没有经过预定的时间的情况下,输入受理部343返回步骤S2905。
当在步骤S2908中判定为经过了预定的时间的情况下,检查处理部340藉由显示控制部342使表示视野检查没有正常实施的信息显示在终端装置300上(步骤S2909),然后结束处理。
当在步骤S2906中没由受理保存指示的情况下,输入受理部343对是否经过了预定的时间进行判定(步骤S2910)。当在步骤S2910中判定为没有经过预定的时间的情况下,输入受理部343返回步骤S2906。
当在步骤S2910判定为经过了预定的时间的情况下,检查处理部340进入步骤S2909。
另外,就本实施方式的检查处理部340而言,当在步骤S2901中没有受理开始进行视野检查的开始请求的情况下,对是否由输入受理部343受理开始进行视力检查的开始请求进行判定(步骤S2911)。当在步骤S2911中判定为没有受理开始进行视力检查的开始请求的情况下,检查处理部340返回步骤S2901。
在步骤S2911中受理了开始进行视力检查的开始请求后,检查处理部340藉由图像数据选择部344从图像数据保持部341所保持的图像数据中选择并读取视力检查用图像数据,并将视力检查用图像数据传送给图像输出处理部320和显示控制部342(步骤 S2912),然后进入步骤S2903。
接着,参照图30对检查结果的输入画面进行说明。图30是第二实施方式的检查结果的输入画面的一例的示意图。
图30所示的检查结果的输入画面101上显示了视野检查用图像G。另外,输入画面101上还显示了用于使被验者(使用者)从视野检查用图像G中选择能够读出的数字的提示信息(message)102和用于进行检查结果的保存指示的按钮103。
需要说明的是,图30的例子中,提示信息102为「请使用者触碰读出的数字」,尽管其是一种用于促使被验者对视野检查用图像G中能够视认的数字进行选择的内容,但并不限定于此。提示信息102例如也可为一种用于促使被验者对视野检查用图像G中不能视认的数字进行选择的内容。
提示信息102的内容可由图像投影系统100A的管理者等预先设定。另外,例如也可由使用者来设定是选择能够读出的数字还是选择不能读出的数字。
接着,对本实施方式的视野视力信息保存部330A中保存的视野信息表331和视力信息表332进行说明。首先,参照图31至图36对使用者P的视野信息表331-P进行说明。
图31是表示第二实施方式的视野检查图像的视认方法的一例的第一图。图31示出了具有图9所示的视野的使用者P在观察视野检查用图像G的情况下的视认方法的例子。
使用者P的视界111中存在欠缺区域112、113、114(参照图9)。
这样,在使视野检查用图像G投影在视野存在欠缺区域的使用者P的视网膜上的情况下,欠缺区域112、113、114也会反映在视野检查用图像G中。
所以,视野检查用图像G如图31所示是作为一种缺少了与欠缺区域112、113、114相对应的位置的区域(阴影部分)的图像而被使用者P视认。所以,使用者无法对与欠缺区域相对应的位置的区域内所描绘的数字进行视认。
图31的例子中,欠缺区域112所含的区域是识别符为1、2、11、21的区域,欠缺区域113所含的区域是识别符为9、10、20、30的区域。所以,这些数字是不能被使用者P 读出的数字。
图32是表示第二实施方式的检查结果被输入了的状态的输入画面的一例的第一图。
图32所示的输入画面101A示出了输入画面101中输入了使用者P的检查结果的例子。
由输入画面101A可知,其中欠缺区域112~114所含的区域的数字都没有被选择,而欠缺区域112~114之外的区域的数字都被进行了选择。
在图32的输入画面101A中,尽管视野检查用图像G中的被选择了的区域被设定为与没有被选择的区域相比其较亮且可被容易看见,但并不限定于此。在输入画面101A 中,为了可对视野检查用图像G中的被选择了的区域和没有被选择的区域进行区别,优选为分别以不同的形态对它们进行显示。
从输入画面101A可知,其中作为使用者P能够读出的数字,以3~8、12~19、22~29、 31~89、91~99这样的情形被进行了选择。由此可知,在输入画面101A上显示的视野检查用图像G中,描绘了使用者P所选择的数字的区域为使用者P的视野。
输入画面101A中的检查结果的输入动作结束,按钮103被操作后,所输入的检查结果可作为视野信息表331而被保存在视力信息保存部330A中。
图33是表示第二实施方式的视野信息表的一例的第一图。
本实施方式的视野信息表331是针对每个使用者分别设定的视野信息表,图33中示出了使用者P的视野信息表331-P。
在本实施方式的视野信息表331-P中,作为信息的项目,具有使用者ID、检查日、输入时间、读出的数字、及没读出的数字。视野信息表331-P中,项目「使用者ID」与其他项目进行了关联。在下面的说明中,将视野信息表331-P中的包含各项目的值的信息称为视野检查结果信息。本实施方式的视野检查结果信息相当于表示使用者的视野的视野信息。
项目「检查日」的值为用于表示实施了视野检查的日期的信息。项目「输入时间」的值为用于表示终端装置300中输入了视野检查的检查结果的时间的信息。即,项目「输入时间」的值是用于表示实施了视野检查的时间的信息。
项目「读出的数字」的值表示视野检查用图像G中的使用者能够读出的数字。换言之,项目「读出的数字」的值表示检查结果的输入画面101上所显示的视野检查用图像G中的作为被读出的数字而被选择的区域内所描绘的数字。
项目「没读出的数字」的值表示视野检查用图像G中的使用者没有读出的数字。换言之,项目「没读出的数字」的值表示检查结果的输入画面101上所显示的视野检查用图像G中的作为被读出的数字而没被选择的区域内所描绘的数字。
从图33所示的视野信息表331-P可知,其中保存了使用者ID为001的使用者P的2016/4/10(检查日)的10:00(输入时间)所输入的检查结果和2016/4/13(检查日)的 18:00(输入时间)所输入的检查结果。
接着,参照图34至图36对使用者Q的视野信息表331-Q进行说明。
图34是表示第二实施方式的视野检查图像的视认方法的一例的第二图。图34示出了具有图12所示的视野的使用者Q在观察视野检查用图像G的情况下的视认方法的例子。
使用者Q的视界141中存在欠缺区域142(参照图12)。
所以,视野检查用图像G如图34所示是作为一种缺少了与欠缺区域142相对应的位置的区域(阴影部分)的图像而被使用者Q视认。所以,图34的例子中,与欠缺区域 142相对应的位置的区域内所描绘的数字是使用者Q无法读出的数字。
图35是表示第二实施方式的视野检查结果被输入了的状态的输入画面的一例的第二图。
图35所示的输入画面101B示出了输入画面101中输入了使用者Q的检查结果的例子。
从输入画面101B可知,其中欠缺区域142所含的区域的数字没有被选择,而欠缺区域142之外的区域的数字都被进行了选择。
从输入画面101B还可知,其中作为使用者Q能够读出的数字,以5~10、15~20、 25~30、35~40、45~50、55~59这样的情形被进行了选择。由此可知,描绘了使用者Q 所选择的数字的区域为使用者Q的视野。
输入画面101B中的检查结果的输入动作结束,按钮103被操作后,检查结果可作为视野信息表331-Q而被保存在视野视力信息保存部330A中。
图36是表示第二实施方式的视野信息表的一例的第二图。
由图36所示的视野信息表331-Q可知,其中的使用者ID为002的使用者Q所进行的视野检查的结果为2016/4/10(检查日)的10:00(输入时间)和2016/4/13(检查日)的 18:00(输入时间)所输入的结果。
这样,根据本实施方式,通过采用简易的构成进行视野检查,并将该检查结果作为用于表示使用者的视野的视野信息,就可生成视野信息表331。需要说明的是,本实施方式中,终端装置300A内保存的视野信息表331例如也可保存在医疗机关等的服务器等中。
需要说明的是,本实施方式中,尽管对视野检查用图像G的大小为覆盖使用者的视野的大小的情况进行了说明,但并不限定于此。
例如,本实施方式中,也可在图像投影装置200内设置用于对瞳孔的移动方向进行检测的机构。本实施方式中,通过在图像投影装置200内设置这样的机构,可将来自光源211的沿使用者的瞳孔的移动方向的图像用光线的照射方向改变为瞳孔移动后的方向。
这样,使用者就可在瞳孔移动后和移动前的这两种情况下都能对相同的视野检查用图像G进行视认。所以,使用者不需要面向固定的方向,即,能够以自由的姿势接受视野检查。另外,这样也不会受到使用者的姿势等的影响,检查时可让使用者总是能够对视野检查用图像G进行视认,由此可提高检查的精度。
另外,在本实施方式的视野信息表331中,例如,也可使用视野检查用图像G中的用于表示每个识别符所示的区域的位置的坐标信息来取代项目「读出的数字」的值和项目「没读出的数字」的值。此外,在视野信息表331中,作为信息的项目,例如还可具有用于表示项目「读出的数字」的值和项目「没读出的数字」的值所示的区域的位置的坐标信息。
坐标信息例如可从视野检查用图像数据中获得,例如可从各区域的识别符和用于指定与识别符相对应的区域的坐标信息被进行了关联的表等中获得。该表可预先在终端装置300中进行给定。
此外,本实施方式中,视野检查结果信息中也可包含区域被选择了的状态的视野检查用图像G的图像数据。即,本实施方式中,视野检查结果信息也可将图32和/或图 35所示的、区域被选择了的视野检查用图像G的图像数据作为视野检查结果信息的一个项目而进行保持。
另外,本实施方式中,也可阶段性地改变视野检查用图像G的亮度(辉度),并输入每次改变时的检查结果。此情况下,视野信息表331中可追加项目「视野检查用图像 G的亮度」,并可使检查结果信息中包含项目「视野检查用图像G的亮度」的值。
本实施方式中,通过按照每个视野检查用图像G的亮度输入检查结果,可对使用者的与亮度相对应的视野进行确定。
接着,参照图37至图40对视力信息表332进行说明。
图37是第二实施方式的视力检查用图像的视认方法的一例的示意图。图37示出了具有图12所示的视野的使用者Q在观察视力检查用图像T的情况下的视认方法的例子。
使用者Q的视界141中存在欠缺区域142。所以,对使用者Q而言,视力检查用图像 T如图37所示是作为一种缺少了与欠缺区域142相对应的位置的区域(阴影部分)的图像而被视认。所以,与欠缺区域相对应的位置的区域内所描绘的朗多环视标不能被使用者Q视认。因此,在图37的例子中,欠缺区域142所含的区域内所描绘的朗多环视标是使用者Q无法判别缺口的区域。
图38是第二实施方式的视力检查结果被输入了的状态的输入画面的一例的示意图。
图38所示的输入画面101C表示输入画面101中输入了使用者Q的视野检查的结果的例子。
本实施方式中,将包含大小不同的朗多环视标的视力检查用图像T依次投影在使用者Q的视网膜上。本实施方式中,例如,使用者Q读出投影至欠缺区域142之外的区域内的朗多环视标的缺口的方向,辅助检查者则在输入画面101C上选择使用者所读出的缺口的方向的朗多环视标。
需要说明的是,此时辅助检查者很难把握使用者的视野内存在欠缺区域142、和/或、视野的哪个部分是欠缺区域142。所以,例如在视力检查用图像T中可在朗多环视标的中心或附近处设置用于对各朗多环视标进行指定的识别符等。
例如,如图38所示,可在各朗多环视标的中心处对用于识别朗多环视标的识别符进行编号。
另外,由输入画面101C可知,其中欠缺区域142所含的区域的朗多环视标没有被选择,而欠缺区域142之外的区域的朗多环视标都被进行了选择。
从输入画面101C还可知,其中作为使用者Q能够判别缺口的朗多环视标,5~11的朗多环视标、16~22的朗多环视标、27~33的朗多环视标、38~44的朗多环视标、及50~52的朗多环视标被进行了选择。
本实施方式中,通过这样地进行视力检查,就可对使用者Q的视野的视力进行计测。另外,本实施方式中,进行视力检查的同时,还可实施使用者Q的视野内是否存在欠缺区域的视野检查。
输入画面101C中的视力检查的结果的输入动作结束,按钮103被操作后,视力检查的结果可被保存在视力信息表332-Q中。
图39是表示第二实施方式的视力信息表的一例的第一图。本实施方式的视力信息表332是针对每个使用者设定的表,图39中示出了使用者Q的视力信息表332-Q。
在本实施方式的视力信息表332-Q中,作为信息的项目,具有使用者ID、检查日、输入时间、没判别出的朗多环视标、及判别出的朗多环视标。视力信息表332-Q中,项目「使用者ID」和其他项目被进行了关联。在下面的说明中,视力信息表332-Q中的包括各项目的值的信息被称为视力信息。
项目「没判别出的朗多环视标」的值表示视力检查用图像T中的使用者不能判别出缺口的朗多环视标。换言之,项目「没判别出的朗多环视标」的值是对输入画面101C 上所显示的视力检查用图像T中的、作为缺口被判别的朗多环视标而没有被选择的朗多环视标进行指定的识别符。
项目「判别出的朗多环视标」的值表示视力检查用图像T中的使用者能够判别出缺口的朗多环视标。换言之,项目「判别出的朗多环视标」的值是对输入画面101C上所显示的视力检查用图像T中的、作为缺口被判别的朗多环视标而被选择了的朗多环视标进行指定的识别符。
由图39所示的视力信息表332-Q可知,其中使用者ID为002的使用者Q所进行的视力检查的结果为2016/4/10(检查日)的10:00(输入时间)所输入的结果。
需要说明的是,图39的例子中,尽管项目「没判别出的朗多环视标」和「判别出的朗多环视标」的值分别为用于识别朗多环视标的识别符,但并不限定于此。项目「没判别出的朗多环视标」和「判别出的朗多环视标」的值例如也可为输入画面101C中所选择的朗多环视标的中心点的坐标。
图40是表示第二实施方式的视力信息表的一例的第二图。图40所示的视力信息表332A-Q示出了在使1个朗多环视标进行移动的动画投影至使用者Q的视网膜的情况下的视力的检查结果的例子。
视力信息表332A-Q中,项目「判别出的朗多环视标」的值是表示视力检查用图像 T中的、显示了由使用者Q判别出了缺口的朗多环视标的区域的坐标的信息。
另外,项目「判别出的朗多环视标」的值是表示视力检查用图像T中的、显示了由使用者Q判别出了缺口的朗多环视标的区域的坐标的信息。另外,项目「没判别出的朗多环视标」的值是表示视力检查用图像T中的、显示了没被使用者Q判别出缺口的朗多环视标的区域的坐标的信息。需要说明的是,这里的坐标是指朗多环视标的中心点的坐标。
从图40的例子可知,就从坐标(x3,y3)至坐标(x4,y4)的包含了中心点的朗多环视标而言,其缺口被使用者Q判别出来了。同样,从图40的例子还可知,就从坐标(x1,y1)至坐标(x2,y2)的包括了中心点的朗多环视标而言,其缺口没有被使用者Q判别出来。
需要说明的是,本实施方式中,「朗多环视标的缺口的判别」是指包括如下两种情况,即,在对朗多环视标进行了视认的基础上正确地辨别出了缺口的方向的情况和尽管可对朗多环视标进行视认但却没有正确地辨别出缺口的方向的情况。
这样,根据本实施方式,利用麦克斯韦观察法使被分割为多个区域的视野检查用图像G直接投影至视网膜的预定位置,故视野检查用图像G的各区域与视网膜上的位置进行了对应,所以,只要针对每个区域进行能看见或不能看见的检查,就可进行视网膜上的各位置处的视野检查。
另外,根据本实施方式,利用麦克斯韦观察法使包含视力检查用视标图像的视力检查用图像T直接投影至视网膜的预定位置。所以,根据本实施方式,可对视网膜本身的视力进行计测。此外,本实施方式中,还可对视网膜上的视力分布进行计测。
再有,本实施方式中,图像投影装置200尽管为一般的眼镜那样的形状,但并不限定于此。例如也可为覆盖使用者P的双眼的护目镜(goggle)那样的形状。
另外,本实施方式中,图像投影装置200中进行图像的投影的区域H(参照图4) 优选具有覆盖使用者的视野的大小(范围)。覆盖使用者的视野的大小是指,例如,投影在视网膜上的图像在单眼看时覆盖鼻侧和上侧大约60度、下侧大约70度、耳侧大约 90~100度的大小(范围)。
本实施方式中,通过使进行图像(检查用图像)的投影的区域的大小为覆盖使用者(被验者)的视野的大小,即使是没有视野欠缺、无视网膜和/或视神经等的异常的使用者,也可对他们进行适当的视野检查。
需要说明的是,对预先知道了视野的一部分存在欠缺的使用者等来说,进行图像的投影的区域H也可小于上述的「在单眼看时覆盖鼻侧和上侧大约60度、下侧大约70 度、耳侧大约90~100度的大小(范围)」。
另外,当使用者P在终端装置300A上输入视野检查的结果时,可先取下装戴的图像投影装置200再进行输入,也可藉由没进行视野检查的那个眼睛观察终端装置300A 的画面并进行输入。
此情况下,例如在进行左眼的视野检查的情况下,可使用在眼镜式框架的左侧设置了图2的各部分的图像投影装置200,在进行右眼的视野检查的情况下,可使用在眼镜式框架的右侧设置了图2的各部分的图像投影装置200。另外,如果在装戴了图像投影装置200的状态下难以将检查结果输入终端装置300A,则也可让辅助检查者进行至终端装置300A的输入。此情况下,例如使用者可读出视认到的文字等,藉此将文字被读出的区域通知给辅助检查者。
(第三实施方式)
下面参照附图对第三实施方式进行说明。第三实施方式与第二实施方式的不同点在于,将第二实施方式的终端装置的功能设置于终端装置的外部的服务器。所以,在下面的第三实施方式的说明中,对具有与第二实施方式相同的功能构成的部分赋予了与第二实施方式的说明中所使用的符号相同的符号,并对其说明进行了省略。
图41使第三实施方式的图像投影系统的系统构成的说明图。
本实施方式的图像投影系统100B具有图像投影装置200、终端装置300B、及服务器400。需要说明的是,在图25的例子中,尽管图像投影装置200和终端装置300B各为 1台,但图像投影系统100B所具有的图像投影装置200和终端装置300B的台数也可为任意的数量。
本实施方式的终端装置300B可从服务器400接收图像数据,并可将接收到的图像数据发送至图像投影装置200。另外,本实施方式的终端装置300B还可显示由服务器 400指示的画面,并可将该画面上所输入的信息发送给服务器400。
本实施方式的服务器400经由网络与终端装置300B进行了连接。服务器400具有视野视力信息数据库330B、图像生成处理部310、检查处理部340A、及图像数据发送部 350。
在本实施方式的视野视力信息数据库330B中,就从终端装置300B上所输入的视野信息和视力信息而言,以与使用者ID和用于表示各信息的输入的日期和时间的信息相关联的方式被进行了保存。具体而言,视野视力信息数据库330B中,例如在存在多个终端装置300B的情况下,按照每个使用者ID(即,与每个使用者ID相对应地)对从每个终端装置300B上输入的视野信息表331和视力信息表332进行保存。
本实施方式的检查处理部340A可使包括视野检查用图像数据和/或视力检查用图像数据的检查结果的输入画面显示在终端装置300B的显示操作装置301上。另外,就本实施方式的检查处理部340A而言,输入受理部343可受理从终端装置300B的输入画面上所输入的信息。
本实施方式的图像数据发送部350可将视野检查用图像数据、视力检查用图像数据、及图像生成处理部310所生成的图像数据发送给终端装置300B。终端装置300B可将视野检查用图像数据、视力检查用图像数据、及图像生成处理部310所生成的图像数据输出至图像投影装置200。
本实施方式中,通过这样地在服务器400中设置检查处理部340A和图像生成处理部310,可减轻终端装置300B的处理的负担。
需要说明的是,本实施方式中,尽管图像生成处理部310和检查处理部340A被设置在了服务器400中,但并不限定于此。
图像生成处理部310和检查处理部340A也可分别设置在不同的服务器400内。此情况下,就视野视力信息数据库330B而言,其中可保存藉由检查处理部340A的视野检查而获得的每个使用者的视野信息,并可被设定为能够被图像生成处理部310进行参照 (访问)。
(第四实施方式)
下面参照附图对第四实施方式进行说明。第四实施方式与第二实施方式的不同点在于,服务器将包含检查处理部、图像生成处理部、及图像输出处理部的应用(application)发布至终端装置。所以,在下面的第四实施方式的说明中,对具有与第二实施方式相同的功能构成的部分赋予了与第二实施方式的说明中所使用的符号相同的符号,并对其说明进行了省略。
图42是第四实施方式的图像投影系统的系统构成的说明图。
本实施方式的图像投影系统100C具有图像投影装置200、终端装置300C、及服务器400A。
本实施方式的服务器400A具有应用(application)发布部410。另外,服务器400A具有用于实现图像生成处理部310、图像输出处理部320、及检查处理部340的功能的应用(application)420。
本实施方式的服务器400A中的应用发布部410从终端装置300C接收到应用420的发布请求后,向进行了发布请求的终端装置300C发布(发送)应用420。
接收到应用420的终端装置300C可变为具有图像生成处理部310、图像输出处理部320、及检查处理部340的终端装置300A。所以,本实施方式中,接收到应用420后的终端装置300C可仅藉由终端装置300C实施视野检查以获取使用者的视野信息和/或视力信息,并将基于所获取的视野信息和/或视力信息而生成的图像数据提供至图像投影装置200。
需要说明的是,本实施方式中,就由服务器400A所发布的应用420而言,尽管为包含了图像生成处理部310、图像输出处理部320、及检查处理部340的功能的应用,但并不限定于此。在从服务器400A向终端装置300C发布的应用420中,例如也可仅包括图像生成处理部310和图像输出处理部320的功能。此情况下,只要终端装置300C接受来自服务器400A的应用420的发布,并获得使用者的视野信息即可。
(第五实施方式)
下面参照附图对第五实施方式进行说明。第五实施方式与第一实施方式的不同点在于,对投影信息进行投影的位置由使用者设定。所以,在下面的第五实施方式的说明中,对具有与第一实施方式相同的功能构成的部分赋予了与第一实施方式的说明中所使用的符号相同的符号,并对其说明进行了省略。
图43是第五实施方式的图像投影系统的系统构成的说明图。本实施方式的图像投影系统100D具有图像投影装置200和终端装置300D。
本实施方式的终端装置300D具有图像生成处理部310A、图像输出处理部320、投影设定部355、及投影位置表360。
本实施方式的图像生成处理部310A可获取投影位置表360中保存的投影位置信息以替代视野信息。关于图像生成处理部310A,将在后面进行详述。
本实施方式的投影设定部355可进行投影信息的投影位置的设定。具体而言,投影设定部355将用于进行投影信息的投影位置的设定的设定画面显示在终端装置300D的显示操作装置301上,并使所输入的设定保存在投影位置表360中。
投影位置表360可按照每个使用者ID对投影信息和投影位置以彼此相关联的方式进行保存。关于投影位置表360,将在后面进行详述。
图44是用于说明第五实施方式的图像生成处理部的功能的第一图。本实施方式的图像生成处理部310A具有替代投影请求受理部311的投影判定部311A和替代视野视力信息获取部313的投影位置获取部313A。
投影判定部311A可对是否将投影信息输出至图像投影装置200进行判定。具体而言,投影判定部311A对是否为将投影位置表360中设定的投影信息投影至图像投影装置200的时机(timing)进行判定。
投影对象获取部312可获取要进行投影的文本数据、图像数据等的投影信息。投影位置获取部313A可从投影位置表360中获得用于表示与投影信息进行了关联的投影位置的信息。
接着,参照图45对本实施方式的投影位置表360进行说明。图45是第五实施方式的投影位置表的一例的示意图。
在本实施方式的投影位置表360中,作为信息的项目,具有投影信息和投影位置,两者之间进行了相互关联。
项目「投影信息」的值表示图像投影装置200中要被投影至使用者的视网膜上的信息。
项目「投影位置」的值表示用于指示使用者的视网膜上的投影信息的投影位置的投影位置信息。具体而言,项目「投影位置」的值表示投影信息的投影区域(矩形) 的矩形的左上的点的坐标和右下的点的坐标。需要说明的是,项目「投影位置」的值也可为矩形即投影区域的4个点的坐标。
图45中,投影信息「来信通知」被投影在左上的点的坐标为(x11,y11)且右下的点的坐标为(x21,y21)的矩形的内部。
接着,参照图46对本实施方式的投影设定部355的处理进行说明。图46是用于对第五实施方式的投影设定部的处理进行说明的流程图。
本实施方式的投影设定部355对是否受理投影信息的投影位置的设定请求进行判定(步骤S4601)。
当在步骤S4601中不受理设定请求的情况下,投影设定部355至受理设定请求为止进行待机。
当在步骤S4601中受理了设定请求的情况下,投影设定部355将投影信息的选择画面显示在终端装置300D的显示操作装置301上(步骤S4602),并受理选择画面中的投影信息的选择(步骤S4603)。
接着,投影设定部355使被选择的投影信息的投影位置的设定画面进行显示(步骤S4604),并受理投影位置的设定(步骤S4605)。
接着,投影设定部355对被选择的投影信息和用于表示被设定的投影位置的位置信息进行关联,并将它们保存在投影位置表360中(步骤S4606),然后结束处理。
接下来,参照图47对本实施方式的图像生成处理部310A的处理进行说明。图47是用于说明第五实施方式的图像生成处理部的处理的流程图。本实施方式的图像生成处理部310A藉由投影判定部311A对是否为对投影信息进行投影的时机(timing)进行判定(步骤S4701)。具体而言,例如在投影信息为来信通知的情况下,投影判定部311A 可在终端装置300D接收到来信通知时判定为是对投影信息进行投影的时机。
当在步骤S4701中判定为不是进行投影的时机的情况下,投影判定部311A至变为符合的时机为止进行待机。
当在步骤S4701中判定为是进行投影的时机的情况下,图像生成处理部310A参照投影位置表360以获取与投影信息相关联的投影位置信息。另外,图像生成处理部310A 还藉由投影对象获取部312获取投影信息(步骤S4702)。
接着,图像生成处理部310A可藉由图像数据生成部314生成用于表示投影信息的图像的图像数据(步骤S4703)。然后,图像数据生成部314将所生成的图像数据输出至图像输出处理部320(步骤S4704),之后结束处理。发送至图像输出处理部320的图像数据可由图像输出处理部320发送至图像投影装置200。
接着,参照图48A和图48B对本实施方式的设定画面进行说明。图48A是第五实施方式的投影信息的选择画面的一例的示意图,图48B是投影信息的投影位置的设定画面的一例的示意图。
在图48A所示的选择画面321-1中显示了用于提示投影信息的选择的提示信息322、投影信息一览表323、及使选择画面321-1迁移至设定画面321-2的按钮234。
从选择画面321-1的投影信息一览表323中选择投影信息并对按钮324进行操作后,终端装置300D可使显示操作装置301上显示的选择画面321-1迁移至图48B所示的设定画面321-2。
设定画面321-2可对用于提示投影位置的指定的提示信息325和用于表示图像投影装置200进行投影的投影区域的图像326进行显示。
本实施方式的投影设定部355例如可在选择画面321-1中的投影信息「来信通知」被选择且设定画面321-2中的区域327被指定的情况下,将来信通知和用于确定区域327 的坐标信息相关联地保存在投影位置表360中。
另外,例如投影设定部355可在选择画面321-1中的投影信息「时间(clock)」被选择且设定画面321-2中的区域328被指定的情况下,将时间和用于确定区域328的坐标信息相关联地保存在投影位置表360中。
需要说明的是,投影位置例如也可通过由使用者对设定画面321-2内的图像326上的预定区域进行触碰、或用手指进行画圈的方式来指定。
另外,本实施方式中,终端装置300D也可对使用者的视力信息进行保持,此时图像生成处理部310A可与投影位置和投影信息一起地获取使用者的视力信息,并可将要进行投影的投影信息的文字、数字、记号等的大小设定为基于视力信息的大小。
图49是将投影信息投影在指定位置处的例子的示意图。图49示出了使用者的视界的一部分。
在图49的例子可知,视界的区域327的位置处以可被视认的方式投影了来信通知,区域328的位置处以可被视认的方式投影了时间(clock)。
如上所述,本实施方式中,可使投影信息投影在使用者的视网膜上的任意位置。所以,根据本实施方式,使用者不需要为了对所投影的投影信息进行视认而移动视线或调整焦点。
为此,本实施方式中,例如即使在使用者难以从正在注视的对象物转移视线的情况下,也可让使用者对投影信息进行视认。所以,就本实施方式的图像投影系统100D 而言,如果使汽车等的移动体的驾驶者装戴图像投影装置200,并将交通信息等投影至预先指定的位置,驾驶者就可不移动视线地对交通信息进行视认。
另外,就本实施方式的图像投影系统100D而言,通过使正在做手术的医师等装戴图像投影装置200,并将手术时需要参照的数值、信息等作为投影信息,医师就可不从术野转移视线地对所需的信息进行视认。
需要说明的是,本实施方式的图像生成处理部310A、投影设定部355、及投影位置表360也可设置在终端装置300的外部的服务器中。另外,就本实施方式的图像生成处理部310A和投影设定部355而言,还可作为应用(application)而从外部的服务器发布(发送)至终端装置300。
接着,参照图50对本实施方式的终端装置300D的图像生成处理部的其他例子进行说明。
图50是对第五实施方式的图像生成处理部的功能进行说明的第二图。图50所示的图像生成处理部310B具有投影判定部311A、投影对象获取部312A、投影位置获取部 313A、及图像数据生成部314,可将从外部输入的声音变换为文字信息,并可将变换了的文字信息作为投影信息。
本实施方式的投影对象获取部312A具有声音获取部315和文字信息变换部316。
声音获取部315例如可获取从终端装置300D的麦克风等的声音输入装置输入的声音。文字信息变换部316可对由声音获取部315获取的声音进行解析,并可将其变换为文字信息。
就本实施方式的图像生成处理部310B而言,当声音获取部315从外部获取到声音后,文字信息变换部316将所获取的声音变换为文字信息,并将其作为投影信息。之后,通过将该投影信息投影到使用者的任意的视野内,使用者就可将声音作为文字而进行视认。
本实施方式中,通过使用该构成,即使是具有听觉障碍或具有视觉障碍的使用者,也可对声音信息进行知觉。所以,如果将该构成应用于例如美术馆等的声音介绍或歌舞伎的声音介绍,则使用者就可获得因障碍而难以获得的信息。
另外,即使在正常人使用本系统的情况下,由于可使声音信息作为文字信息而移动并投影至视野的任意的位置,所以也可以不用遮挡想关注的范围地对从声音变换出的文字信息进行视认。
(第六实施方式)
下面,参照附图对第六实施方式进行说明。第六实施方式与第一实施方式的不同点在于图像投影装置中的反射镜的形状。所以,在下面的第六实施方式的说明中,仅对与第一实施方式不同的不同点进行说明,对具有与第一实施方式相同的功能构成的部分则赋予了与第一实施方式的说明中所使用的符号相同的符号,并对其说明进行了省略。
图51是从上方观察第六实施方式的图像投影装置的图。本实施方式的图像投影装置200A可应用于第一至第五实施方式中所说明的图像投影系统。
本实施方式的图像投影装置200A具有投影部210A和控制部230。本实施方式的投影部210A具有光源211、扫描镜212A、反射镜215A、及投影镜216。本实施方式的投影部210A和第一实施方式的投影部210的不同点在于,本实施方式的投影部210A不具有反射镜213和反射镜214,具有替代扫描镜212的扫描镜212A,还具有替代反射镜215 的反射镜215A。
在本实施方式的图像投影装置200A中,将入射至投影镜216的光线的投影镜216内的行进方向作为X方向,并将与投影镜216的X方向正交(垂直)的方向作为Y方向。
扫描镜212A例如为MEMS反射镜,可对从光源211射出的激光(光线)L沿水平方向和垂直方向的二维方向进行扫描。另外,扫描镜212A可对从光源211射出的光线L进行二维扫描,并将其作为用于使图像投影在使用者的眼球260的视网膜26上的投影光。
反射镜215A可使被扫描镜212A扫描了的光线L朝向透镜251进行反射。
在透镜251的使用者的眼球260侧的表面上设置了具有自由曲面的投影镜216。投影镜216通过使被扫描镜212A扫描且被反射镜215A反射的光线L照射在眼球260的视网膜261上可将图像投影在视网膜261上。即,使用者藉由投影在视网膜261上的激光的残像效果(效应)可对图像进行识别。就投影镜216而言,被扫描镜212A扫描了的光线L的收敛位置可被设计为是眼球260的瞳孔262。光线L可从大致正侧方(即,从大致-X方向)入射至投影镜216。
需要说明的是,本实施方式中,如果使投影镜216的自由曲面的曲率较大,则可缩短从反射镜215A至瞳孔262的收敛位置的距离,由此可使图像投影装置200A小型化。
图52是比较例的图像投影装置中的光线的光路的示意图。图52中,光线L0至L2是被扫描镜212A沿水平方向进行了扫描的光线,并从-X方向照射至投影镜216。光线L0 是相当于图像的中心的光线,光线L1、L2是相当于图像的端部(边缘)的光线。光线 L0至L2分别被投影镜216的区域R0至R2反射。被反射了的光线L0至L2在位于虹彩(虹膜)263的中央的瞳孔262处进行收敛,并穿过水晶体264到达视网膜261。区域R0是对相当于图像的中心的光线L0进行反射的区域。区域R1是从区域R0往-X方向(光线L0 至L2入射的方向)的区域。区域R2是从区域R0往+X方向的区域。为了实现麦克斯韦观察(Maxwellian view),光线L0至L2在瞳孔262附近进行了交叉。但是,光线L0至L2 的聚焦位置F0至F2却偏离了视网膜261。
图52中,被投影镜216反射的光线L0作为大致平行的光而入射至水晶体264,并在视网膜261附近进行聚焦。被投影镜216反射的光线L1作为扩散光而入射至水晶体264。为此,光线L1在比视网膜261还远的位置处进行聚焦。被投影镜216反射的光线L2作为收敛光而入射至水晶体264。为此,光线L2在比视网膜261还近的位置处进行聚焦。这样,如果使光线L0在视网膜261附近进行聚焦,则聚焦位置F1变为比视网膜261还远离投影镜216的位置。变为聚焦位置F1和视网膜261的距离D1。聚焦位置F2变为比视网膜 261还接近投影镜216的位置。变为聚焦位置F2和视网膜26的距离D2。
上述聚焦位置F0至F2不同的原因在于投影镜216为自由曲面,如果要使从-X方向入射至投影镜216的光线L0至L2在瞳孔262处进行收敛,则投影镜216的区域R0至R2的曲率在X方向上不同、和/或、产生光线L0至L2的光路差。例如,区域R2的曲率大于R1。即,区域R2的聚光能(power)大于R1。为此,聚焦位置F2变为比F1还靠近光源侧。另外,如果要使投影镜216配置为与脸平行,则光线L2的光路的长度变为大于光线L1。据此,聚焦位置F2变为比F1更靠近光源侧。这样,比较例中,为了实现麦克斯韦观察而使光线L0至L2在瞳孔262附近进行收敛后,图像内会出现聚焦位置较大地偏离了视网膜261的区域。需要说明的是,Y方向的光学系统相对于X轴大致对称,故在Y方向上较难产生X方向那样的聚焦位置的偏差。
所以,本实施方式中,使用反射镜215A作为光学部品。图53是第六实施方式的图像投影装置内的光线的光路的示意图,图54是图53的反射镜付近的放大图。如图53和图54所示,照射在投影镜216的区域R0至R2上的光线L0至L2分别在反射镜215A内的区域S0至S2处被反射。反射镜215A具有自由曲面。其他构成都与上述比较例相同,故省略其说明。
图55是表示第六实施方式的反射镜表面的凹凸的斜视图,图56是表示反射镜的X方向上的高度Z的图。X方向和Y方向为与投影镜216的X方向和Y方向相对应的方向。反射镜215A的高度为Z方向。
图55中,Z方向上对反射镜215A的表面的凹凸进行了放大表示。如图55和图56所示,区域S0中反射镜215A的表面为大致平面,区域S1中反射镜215A的表面为凹面,区域S2中反射镜215A的表面为凸面。据此,区域S0中的聚光能基本为0(零),区域S1 中的聚光能为正,区域S2中的聚光能为负。所以,光线L0的聚焦位置F0与比较例相比无变化。光线L1的聚焦位置F1与比较例的图52相比靠近光源,光线L2的聚焦位置F2 与图36相比远离光源。据此,聚焦位置F0至F2都变为视网膜261附近。
本实施方式中,可使反射镜215A的表面的Z为由下式所表示的自由曲面。
Z=Σaij×Xi×Yj
原点(X=0,Y=0)相当于图像的中心,例如相当于区域S0付近。aij是系数。为了使X方向的聚光能不同,i为奇数的项的系数aij的至少一个为有限的值(0之外)。
投影镜216的Y方向的聚光能相对于X轴对称。所以,j为奇数的项的系数aij为0。
本实施方式中,例如,使系数a30和a12为有限的值。据此,可实现如图55和图56 所示那样的自由曲面。为了进一步对反射镜215A的自由曲面进行调整,也可使系数a10 和/或a20为有限的值。此外,还可使高次的系数为有限的值。
这样,通过将反射镜215A的曲面设定为与组合了凹面、凸面、及平面的投影镜216的自由曲面相对应的自由曲面,就可实现图像投影装置200A为小型且失真较少的光学系统。
以上,基于各实施方式对本发明进行了说明,但本发明并不限定于上述实施方式中列举的构成、与其他要素的组合等、及这里所示的特征。关于这些,在不有损于本发明的主旨的范围内可对其进行变更,也可基于其应用形态进行适当地确定。
另外,本国际申请主张基于2016年6月9日申请的日本国专利申请第2016-115046号的优先权和2017年6月5日申请的日本国专利申请第2017-111151号的优先权,并将日本国专利申请第2016-115046号的内容和日本国专利申请第2017-111151号的内容全部引用于本国际申请。
[符号说明]
100、100A、100B 图像投影系统
200 图像投影装置
300、300A、300B、300C、300D 终端装置
310、310A 图像生成处理部
311 投影请求受理部
311A 投影判定部
312 投影对象获取部
313 视野视力信息获取部
313A 投影位置获取部
314 图像数据生成部
320 图像输出处理部
330、330A 视野视力信息保存部
330B 视野视力信息数据库
331 视野信息表
332 视力信息表
340 检查处理部
341 图像数据保持部
342 显示控制部
343 检查结果保存部
355 投影设定部
360 投影位置表
400 服务器
410 应用(application)发布部
Claims (16)
1.一种图像投影系统,具有图像投影装置和与所述图像投影装置进行通信的终端装置,其中,
所述终端装置具有:
投影对象保持部,对由所述图像投影装置实施投影的投影信息进行保持;
投影位置设定部,使让使用者指定所述使用者的视网膜上的所述投影信息的投影位置的设定画面显示在所述终端装置的显示部上,并使包括所述设定画面中由所述使用者指定的、所述使用者能够视认的视野区域的位置以及不能视认的欠缺区域的位置的位置信息与所述投影信息相关联;
存储部,保存有所述位置信息;
位置信息获取部,从所述存储部获取所述位置信息;
图像数据生成部,生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
图像输出处理部,使所述图像数据输出至所述图像投影装置,
所述图像投影装置具有:
光源部,用于射出光线;
图像输入部,输入来自所述终端装置的所述图像数据;
控制部,生成基于所输入的所述图像数据的图像用光线,并进行来自所述光源部的所述图像用光线的射出控制;
扫描镜,对所述图像用光线进行扫描;及
投影部,将所述图像用光线作为由所述图像数据表示的所述图像而投影在所述使用者的眼球的视网膜上。
2.一种图像投影系统,具有图像投影装置和与所述图像投影装置进行通信的终端装置,其中,
所述终端装置具有:
投影对象保持部,对由所述图像投影装置实施投影的投影信息进行保持;
存储部,将投影在使用者的视网膜上的被区分为每个区域都包含识别符的多个区域的检查用图像中的、所述区域的位置信息与所述识别符相关联的、由所述使用者能够视认的视野区域的所述识别符以及所述使用者不能视认的欠缺区域的所述识别符的位置信息作为表示所述使用者的视网膜上的所述投影信息的投影位置的位置信息而进行了保存;
位置信息获取部,从所述存储部获取所述位置信息;
图像数据生成部,生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
图像输出处理部,使所述图像数据输出至所述图像投影装置,
所述图像投影装置具有:
光源部,用于射出光线;
图像输入部,输入来自所述终端装置的所述图像数据;
控制部,生成基于所输入的所述图像数据的图像用光线,并进行来自所述光源部的所述图像用光线的射出控制;
扫描镜,对所述图像用光线进行扫描;及
投影部,将所述图像用光线作为由所述图像数据表示的所述图像而投影在所述使用者的眼球的视网膜上。
3.如权利要求1或2所述的图像投影系统,其中,
在所述终端装置中,
所述图像数据生成部生成表示被保持的所述投影信息的图像的图像数据,
所述图像输出处理部将表示所述投影信息的图像的图像数据和所述位置信息输出至所述图像投影装置,
在所述图像投影装置中,
所述投影部将基于所述图像数据的所述图像用光线作为表示所述投影信息的图像而投影在所述使用者的视网膜上的由所述位置信息表示的位置。
4.如权利要求3所述的图像投影系统,其中,
在所述存储部中保存了表示所述使用者的视力的信息,
所述图像数据生成部根据表示所述视力的信息确定进行投影的所述图像中所含的文字、数字、或记号的大小。
5.如权利要求4所述的图像投影系统,其中,
所述终端装置具有:
图像数据保持部,对表示检查用图像的检查用图像数据进行保持;
显示部,用于显示图像;及
显示控制部,根据所述检查用图像数据生成检查用图像并将该检查用图像显示在所述显示部上,
所述图像数据保持部对表示包含作为视力的视标的图像的视力检查用图像的视力检查用图像数据进行保持,
所述图像输出处理部将所述视力检查用图像数据输出至所述图像投影装置,并使对所述显示部上所显示的所述视力检查用图像中被选择的所述视标的图像进行确定的信息作为表示所述视力的信息而保存在所述存储部中。
6.如权利要求2所述的图像投影系统,其中,
所述终端装置具有:
图像数据保持部,对表示检查用图像的检查用图像数据进行保持;
显示部,用于显示图像;及
显示控制部,根据所述检查用图像数据生成检查用图像并将该检查用图像显示在所述显示部上,
所述图像输出处理部将所述检查用图像数据输出至所述图像投影装置,并使所述显示部上所显示的所述检查用图像中被选择的所述多个区域中的识别符作为所述位置信息而保存在所述存储部中。
7.如权利要求1所述的图像投影系统,其中,
所述投影位置设定部使对所述投影信息进行选择的选择画面显示在所述显示部上,并使所述选择画面中被选择的所述投影信息和所述位置信息相关联地保存在所述存储部中。
8.如权利要求1或2所述的图像投影系统,其中,
所述终端装置具有:
声音输入装置,获取所输入的声音;及
投影信息获取部,获取所述投影信息,
所述投影信息获取部具有:
声音获取部,获取输入进了所述声音输入装置的声音;及
文字信息变换部,将所获取的所述声音变换为文字信息,
所述投影部将所述文字信息投影在基于所述位置信息的位置。
9.一种图像投影装置,具有:
光源部,用于射出光线;
图像输入部,从终端装置输入包含投影信息的图像数据;
控制部,生成基于所输入的所述图像数据的图像用光线,并进行来自所述光源部的所述图像用光线的射出控制;
扫描镜,对所述图像用光线进行扫描;及
投影部,将所述图像用光线作为表示所述投影信息的图像而投影在使用者的眼球的视网膜上的预定的位置,
其中,所述预定的位置是基于从所述终端装置输入的位置信息的、除了欠缺区域之外的位置,该位置信息包括使让使用者指定所述使用者的视网膜上的所述投影信息的投影位置的设定画面显示在所述终端装置的显示部上的所述设定画面中由所述使用者指定的、所述使用者能够视认的视野区域的位置以及不能视认的所述欠缺区域的位置。
10.一种图像投影装置,具有:
光源部,用于射出光线;
图像输入部,从终端装置输入包含投影信息的图像数据;
控制部,生成基于所输入的所述图像数据的图像用光线,并进行来自所述光源部的所述图像用光线的射出控制;
扫描镜,对所述图像用光线进行扫描;及
投影部,将所述图像用光线作为表示所述投影信息的图像而投影在使用者的眼球的视网膜上的预定的位置,
其中,所述预定的位置是基于从所述终端装置输入的位置信息的、除了欠缺区域之外的位置,该位置信息是投影在使用者的视网膜上的被区分为每个区域都包含识别符的多个区域的检查用图像中的、所述区域的位置信息与所述识别符相关联的、由所述使用者能够视认的视野区域的所述识别符以及所述使用者不能视认的所述欠缺区域的所述识别符的位置信息。
11.一种基于具有图像投影装置和与所述图像投影装置进行通信的终端装置的图像投影系统的图像投影方法,具有:
所述终端装置对所述图像投影装置的投影信息进行保持的步骤;
所述终端装置使让使用者指定所述使用者的视网膜上的所述投影信息的投影位置的设定画面显示在所述终端装置的显示部上,并使包括所述设定画面中由所述使用者指定的、所述使用者能够视认的视野区域的位置以及不能视认的欠缺区域的位置的位置信息与所述投影信息相关联的步骤;
所述终端装置从保存了所述位置信息的存储部获取所述位置信息的步骤;
所述终端装置生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据的步骤;及
所述终端装置使所述图像数据输出至所述图像投影装置的步骤,
并具有:
所述图像投影装置输入来自所述终端装置的图像数据的步骤;
所述图像投影装置生成基于所输入的所述图像数据的图像用光线,并进行来自用于射出光线的光源部的所述图像用光线的射出控制的步骤;
所述图像投影装置使用扫描镜对所述图像用光线进行扫描的步骤;及
所述图像投影装置将所述图像用光线作为由所述图像数据表示的图像而投影在所述使用者的眼球的视网膜上的步骤。
12.一种基于具有图像投影装置和与所述图像投影装置进行通信的终端装置的图像投影系统的图像投影方法,具有:
所述终端装置对所述图像投影装置的投影信息进行保持的步骤;
所述终端装置从将投影在使用者的视网膜上的被区分为每个区域都包含识别符的多个区域的检查用图像中的、所述区域的位置信息与所述识别符相关联的、由所述使用者能够视认的视野区域的所述识别符以及所述使用者不能视认的欠缺区域的所述识别符的位置信息作为表示所述使用者的视网膜上的所述投影信息的投影位置的位置信息而进行了保存的存储器中获取所述位置信息的步骤;
所述终端装置生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据的步骤;及
所述终端装置使所述图像数据输出至所述图像投影装置的步骤,
并具有:
所述图像投影装置输入来自所述终端装置的图像数据的步骤;
所述图像投影装置生成基于所输入的所述图像数据的图像用光线,并进行来自用于射出光线的光源部的所述图像用光线的射出控制的步骤;
所述图像投影装置使用扫描镜对所述图像用光线进行扫描的步骤;及
所述图像投影装置将所述图像用光线作为由所述图像数据表示的图像而投影在所述使用者的眼球的视网膜上的步骤。
13.一种存储有由计算机执行的图像投影程序的计算机可读存储介质,所述图像投影程序使所述计算机执行以下处理,即:
由投影对象保持部对投影信息进行保持;
使让使用者指定所述使用者的视网膜上的所述投影信息的投影位置的设定画面显示在所述计算机的显示部上,并使包括所述设定画面中由所述使用者指定的、所述使用者能够视认的视野区域的位置以及不能视认的欠缺区域的位置的位置信息与所述投影信息相关联;
从保存了所述位置信息的存储部获取所述位置信息;
生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
使所述图像数据输出至用于将由所述图像数据表示的图像投影在使用者的视网膜上的图像投影装置。
14.一种存储有由计算机执行的图像投影程序的计算机可读存储介质,所述图像投影程序使所述计算机执行以下处理,即:
由投影对象保持部对投影信息进行保持;
从将投影在使用者的视网膜上的被区分为每个区域都包含识别符的多个区域的检查用图像中的、所述区域的位置信息与所述识别符相关联的、由所述使用者能够视认的视野区域的所述识别符以及所述使用者不能视认的欠缺区域的所述识别符的位置信息作为表示所述使用者的视网膜上的所述投影信息的投影位置的位置信息而进行了保存的存储器中获取所述位置信息;
生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
使所述图像数据输出至用于将由所述图像数据表示的图像投影在使用者的视网膜上的图像投影装置。
15.一种服务器装置,具有:
投影对象保持部,对投影信息进行保持;
投影位置设定部,使让使用者指定所述使用者的视网膜上的所述投影信息的投影位置的设定画面显示在终端装置的显示部上,并使包括所述设定画面中由所述使用者指定的、所述使用者能够视认的视野区域的位置以及不能视认的欠缺区域的位置的位置信息与所述投影信息相关联;
存储部,保存有所述位置信息;
位置信息获取部,从所述存储部获取所述位置信息;
图像数据生成部,生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
图像输出处理部,使由所述图像数据生成部生成的所述图像数据输出至所述终端装置,
其中,所述终端装置将所述图像数据输出至用于将由所述图像数据表示的图像投影在使用者的眼球的视网膜上的图像投影装置。
16.一种服务器装置,具有:
投影对象保持部,对投影信息进行保持;
存储部,将投影在使用者的视网膜上的被区分为每个区域都包含识别符的多个区域的检查用图像中的、所述区域的位置信息与所述识别符相关联的、由所述使用者能够视认的视野区域的所述识别符以及所述使用者不能视认的欠缺区域的所述识别符的位置信息作为表示所述使用者的视网膜上的所述投影信息的投影位置的位置信息而进行了保存;
位置信息获取部,从所述存储部获取所述位置信息;
图像数据生成部,生成用于将被保持的所述投影信息投影至由所述位置信息表示的、除了所述欠缺区域之外的位置的图像的图像数据;及
图像输出处理部,使由所述图像数据生成部生成的所述图像数据输出至终端装置,
其中,所述终端装置将所述图像数据输出至用于将由所述图像数据表示的图像投影在使用者的眼球的视网膜上的图像投影装置。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016115046 | 2016-06-09 | ||
JP2016-115046 | 2016-06-09 | ||
JP2017111151A JP6255524B2 (ja) | 2016-06-09 | 2017-06-05 | 画像投影システム、画像投影装置、画像投影方法、画像投影プログラム及びサーバ装置 |
JP2017-111151 | 2017-06-05 | ||
PCT/JP2017/021380 WO2017213241A1 (ja) | 2016-06-09 | 2017-06-08 | 画像投影システム、画像投影装置、画像投影方法、画像投影プログラム及びサーバ装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109313343A CN109313343A (zh) | 2019-02-05 |
CN109313343B true CN109313343B (zh) | 2021-02-05 |
Family
ID=60688431
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780034880.6A Active CN109313343B (zh) | 2016-06-09 | 2017-06-08 | 图像投影系统、图像投影装置、图像投影方法及服务器装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10409146B2 (zh) |
EP (1) | EP3470909B1 (zh) |
JP (2) | JP6255524B2 (zh) |
CN (1) | CN109313343B (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6255522B2 (ja) * | 2016-06-09 | 2017-12-27 | 株式会社Qdレーザ | 視野視力検査システム、視野視力検査装置、視野視力検査方法、視野視力検査プログラム及びサーバ装置 |
EP3502647A4 (en) * | 2016-08-18 | 2019-12-18 | QD Laser, Inc. | IMAGE INSPECTION DEVICE, IMAGE INSPECTION METHOD AND IMAGE INSPECTION DEVICE COMPONENT |
JP6209662B1 (ja) * | 2016-10-13 | 2017-10-04 | 株式会社Qdレーザ | 画像投影装置 |
WO2019050048A1 (ja) * | 2017-09-11 | 2019-03-14 | 株式会社ニコン | 眼科機器、管理装置、及び眼科機器の管理方法 |
EP3951478A4 (en) * | 2019-03-28 | 2022-12-21 | QD Laser, Inc. | IMAGE TRANSFER DEVICE AND IMAGE PROJECTION SYSTEM |
JP7484348B2 (ja) * | 2019-06-27 | 2024-05-16 | 株式会社リコー | 光学装置、映像表示装置、及び検眼装置 |
CN111175975B (zh) * | 2020-01-16 | 2022-04-19 | 华东交通大学 | 一种用于实现大焦深成像的近眼显示装置 |
JP7427237B2 (ja) * | 2020-02-21 | 2024-02-05 | 株式会社Qdレーザ | 画像投影装置、画像投影方法、プログラム |
CN113518211A (zh) * | 2020-04-10 | 2021-10-19 | 中强光电股份有限公司 | 投影系统以及投影操作方法 |
JP2023015560A (ja) * | 2021-07-20 | 2023-02-01 | セイコーエプソン株式会社 | 表示装置の制御方法及び表示装置 |
CN113985608A (zh) * | 2021-10-29 | 2022-01-28 | 金陵科技学院 | 一种ar眼镜成像位置主动调整方法 |
CN114040182A (zh) * | 2021-11-03 | 2022-02-11 | 珠海格力电器股份有限公司 | 空调的投影显示方法、装置与空调 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009268778A (ja) * | 2008-05-09 | 2009-11-19 | Panasonic Corp | 画像表示装置、画像表示方法、プログラムおよび集積回路 |
JP2010066599A (ja) * | 2008-09-11 | 2010-03-25 | Brother Ind Ltd | ヘッドマウントディスプレイ |
JP2012108379A (ja) * | 2010-11-18 | 2012-06-07 | Nec Corp | 情報表示システム、装置、方法及びプログラム |
CN103869470A (zh) * | 2012-12-18 | 2014-06-18 | 精工爱普生株式会社 | 显示装置及其控制方法、头戴式显示装置及其控制方法 |
WO2015031802A1 (en) * | 2013-08-30 | 2015-03-05 | Skreens Entertainment Technologies, Inc. | Video display system |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002031580A1 (de) * | 2000-10-07 | 2002-04-18 | Physoptics Opto-Electronic Gmbh | Informationssystem |
DE10103922A1 (de) * | 2001-01-30 | 2002-08-01 | Physoptics Opto Electronic Gmb | Interaktives Datensicht- und Bediensystem |
US6943754B2 (en) * | 2002-09-27 | 2005-09-13 | The Boeing Company | Gaze tracking system, eye-tracking assembly and an associated method of calibration |
JP5104679B2 (ja) * | 2008-09-11 | 2012-12-19 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
JP5293154B2 (ja) * | 2008-12-19 | 2013-09-18 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
WO2010116726A1 (ja) * | 2009-04-09 | 2010-10-14 | パナソニック株式会社 | ビーム走査型表示装置 |
JP5158062B2 (ja) * | 2009-12-01 | 2013-03-06 | ブラザー工業株式会社 | ヘッドマウントディスプレイ |
US9341843B2 (en) * | 2010-02-28 | 2016-05-17 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses with a small scale image source |
US9097891B2 (en) * | 2010-02-28 | 2015-08-04 | Microsoft Technology Licensing, Llc | See-through near-eye display glasses including an auto-brightness control for the display brightness based on the brightness in the environment |
US9759917B2 (en) * | 2010-02-28 | 2017-09-12 | Microsoft Technology Licensing, Llc | AR glasses with event and sensor triggered AR eyepiece interface to external devices |
JP2013521576A (ja) * | 2010-02-28 | 2013-06-10 | オスターハウト グループ インコーポレイテッド | 対話式ヘッド取付け型アイピース上での地域広告コンテンツ |
JP2011215194A (ja) | 2010-03-31 | 2011-10-27 | Brother Industries Ltd | 直視型の画像表示装置 |
US20120078628A1 (en) * | 2010-09-28 | 2012-03-29 | Ghulman Mahmoud M | Head-mounted text display system and method for the hearing impaired |
US9217867B2 (en) * | 2011-03-24 | 2015-12-22 | Seiko Epson Corporation | Head-mounted display device and control method for the head-mounted display device |
JP6155622B2 (ja) * | 2012-12-18 | 2017-07-05 | セイコーエプソン株式会社 | 表示装置、頭部装着型表示装置、表示装置の制御方法、および、頭部装着型表示装置の制御方法 |
JP6209456B2 (ja) * | 2013-05-31 | 2017-10-04 | 株式会社Qdレーザ | 画像投影装置及び投射装置 |
US10268041B2 (en) * | 2014-05-24 | 2019-04-23 | Amalgamated Vision Llc | Wearable display for stereoscopic viewing |
-
2017
- 2017-06-05 JP JP2017111151A patent/JP6255524B2/ja active Active
- 2017-06-08 US US16/306,966 patent/US10409146B2/en active Active
- 2017-06-08 CN CN201780034880.6A patent/CN109313343B/zh active Active
- 2017-06-08 EP EP17810414.7A patent/EP3470909B1/en active Active
- 2017-11-15 JP JP2017219694A patent/JP6898648B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009268778A (ja) * | 2008-05-09 | 2009-11-19 | Panasonic Corp | 画像表示装置、画像表示方法、プログラムおよび集積回路 |
JP2010066599A (ja) * | 2008-09-11 | 2010-03-25 | Brother Ind Ltd | ヘッドマウントディスプレイ |
JP2012108379A (ja) * | 2010-11-18 | 2012-06-07 | Nec Corp | 情報表示システム、装置、方法及びプログラム |
CN103869470A (zh) * | 2012-12-18 | 2014-06-18 | 精工爱普生株式会社 | 显示装置及其控制方法、头戴式显示装置及其控制方法 |
WO2015031802A1 (en) * | 2013-08-30 | 2015-03-05 | Skreens Entertainment Technologies, Inc. | Video display system |
Non-Patent Citations (1)
Title |
---|
Development of the fitting method of HMD (eyesight aid) to support visibility of low vision;Yasuyuki MURAI et al;《Dai 14 Kai Forum on Information Technology Koen Ronbunshu》;20150824;第3卷;545-546 * |
Also Published As
Publication number | Publication date |
---|---|
CN109313343A (zh) | 2019-02-05 |
US20190137857A1 (en) | 2019-05-09 |
JP2017223943A (ja) | 2017-12-21 |
JP2018063436A (ja) | 2018-04-19 |
JP6255524B2 (ja) | 2017-12-27 |
US10409146B2 (en) | 2019-09-10 |
JP6898648B2 (ja) | 2021-07-07 |
EP3470909B1 (en) | 2023-08-09 |
EP3470909A1 (en) | 2019-04-17 |
EP3470909A4 (en) | 2020-01-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109313343B (zh) | 图像投影系统、图像投影装置、图像投影方法及服务器装置 | |
US11686945B2 (en) | Methods of driving light sources in a near-eye display | |
US12102388B2 (en) | Eye center of rotation determination, depth plane selection, and render camera positioning in display systems | |
US9028067B1 (en) | Relocated virtual retinal image method and system | |
JP6255522B2 (ja) | 視野視力検査システム、視野視力検査装置、視野視力検査方法、視野視力検査プログラム及びサーバ装置 | |
CN108701227A (zh) | 用于生物安全的蓝光调节 | |
EP3611555A1 (en) | Image magnification on a head mounted display | |
US20210022606A1 (en) | Image processing method, program, image processing device, and ophthalmic system | |
RU2709114C1 (ru) | Способ проверки зрения, устройство для проверки зрения и сервер для скачивания для хранения программы или способа проверки зрения | |
CN109310315B (zh) | 视野视力检查系统、视野视力检查装置、视野视力检查方法、存储介质及服务器装置 | |
CN106249866A (zh) | 视觉辅助眼镜及其图像识别方法 | |
WO2017213241A1 (ja) | 画像投影システム、画像投影装置、画像投影方法、画像投影プログラム及びサーバ装置 | |
US11918286B2 (en) | Ophthalmic instrument, management method, and management device | |
US12073018B2 (en) | Multiple gaze dependent illumination sources for retinal eye tracking | |
JP7133163B2 (ja) | 網膜走査型画像投影装置、網膜走査型画像投影方法、網膜走査型画像投影システム | |
US20210121059A1 (en) | Ophthalmic instrument, management device, and method for managing an ophthalmic instrument | |
KR20180078610A (ko) | 시점 추적기능을 가지는 정보제공장치 | |
JP2019097806A (ja) | 網膜走査型視力検査装置、網膜走査型視力検査システム、網膜走査型視力検査方法 | |
CN116482854A (zh) | 使用自混合干涉测量的眼睛跟踪 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |