JP7165994B2 - 眼の計測を収集するための方法及びデバイス - Google Patents
眼の計測を収集するための方法及びデバイス Download PDFInfo
- Publication number
- JP7165994B2 JP7165994B2 JP2019524069A JP2019524069A JP7165994B2 JP 7165994 B2 JP7165994 B2 JP 7165994B2 JP 2019524069 A JP2019524069 A JP 2019524069A JP 2019524069 A JP2019524069 A JP 2019524069A JP 7165994 B2 JP7165994 B2 JP 7165994B2
- Authority
- JP
- Japan
- Prior art keywords
- eye
- camera
- optical path
- mirror
- light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005259 measurement Methods 0.000 title claims description 21
- 238000000034 method Methods 0.000 title claims description 5
- 210000001508 eye Anatomy 0.000 claims description 121
- 230000003287 optical effect Effects 0.000 claims description 62
- 238000004458 analytical method Methods 0.000 claims description 17
- 210000001747 pupil Anatomy 0.000 claims description 16
- 208000014733 refractive error Diseases 0.000 claims description 7
- 210000001525 retina Anatomy 0.000 claims description 5
- 230000004308 accommodation Effects 0.000 claims description 3
- 210000004087 cornea Anatomy 0.000 claims description 3
- 239000013598 vector Substances 0.000 description 9
- 210000003128 head Anatomy 0.000 description 7
- 239000011521 glass Substances 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000001228 spectrum Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 230000004424 eye movement Effects 0.000 description 3
- 230000004434 saccadic eye movement Effects 0.000 description 3
- 238000001429 visible spectrum Methods 0.000 description 3
- 230000003542 behavioural effect Effects 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 238000002329 infrared spectrum Methods 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000001179 pupillary effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 210000000744 eyelid Anatomy 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000004461 rapid eye movement Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000004256 retinal image Effects 0.000 description 1
- 230000000638 stimulation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/147—Details of sensors, e.g. sensor lenses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
- A61B2017/00017—Electrical control of surgical instruments
- A61B2017/00216—Electrical control of surgical instruments with eye tracking or head position tracking control
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0008—Apparatus for testing the eyes; Instruments for examining the eyes provided with illuminating means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/35—Nc in input of data, input till input file format
- G05B2219/35503—Eye tracking associated with head mounted display to detect eye position
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Ophthalmology & Optometry (AREA)
- Optics & Photonics (AREA)
- Vascular Medicine (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Eye Examination Apparatus (AREA)
- Image Input (AREA)
- Position Input By Displaying (AREA)
Description
Claims (15)
- 眼の画像を取得することができる収集空間(29)に位置する眼(1)から、視線角度、屈折誤差(refractive error)、眼の光学ねじれ(eye optical torsion)、眼の調節(accomodation)を含む計測を収集するデバイスにおいて、前記収集空間(29)の方に光を放出するように構成された少なくとも1つの光源(11)と、前記収集空間(29)から光を受信して像データを生成するように構成されたカメラ(15)と、前記像データから少なくとも1つの計測を抽出するように構成された解析ユニット(14)とを含むデバイスにおいて、前記カメラ(15)は、前記カメラの光軸に対して異なる角度が付けられている少なくとも第1の光路(17)及び第2の光路(19)を介して前記収集空間から光を受信するように構成され、前記第1の光路(17)の前記光は、第1のミラー(21)を介して受信され、前記第1の光路(17)および前記第2の光路(19)が前記カメラに前記眼の画像の重複部分を提供することにより、前記カメラが単一の眼の少なくとも2つの表現を受信でき、前記第1の光路(17)の長さと前記第2の光路(19)の長さとが異なることを特徴とするデバイス。
- 請求項1に記載のデバイスにおいて、前記第2の光路(19)の前記光は、第2のミラー(23)を介して受信されることを特徴とするデバイス。
- 請求項2に記載のデバイスにおいて、前記第1の光路(17)の長さは、前記第2の光路(19)の長さに比べて、前記眼と前記カメラとの間の最短距離の1%を超える長さの差を有することを特徴とするデバイス。
- 請求項2または3に記載のデバイスにおいて、前記カメラは、前記第1および第2のミラーを含む複数のミラーであって、別のミラーの領域と重複する前記収集空間の領域を描写する、前記収集空間と前記カメラとの間の個別の光路をそれぞれ提供する複数のミラーから光を受信するように構成されることを特徴とするデバイス。
- 請求項4に記載のデバイスにおいて、前記複数のミラーは、前記収集空間に面する凹面(39)に配設されることを特徴とするデバイス。
- 請求項2乃至5の何れか1項に記載のデバイスにおいて、各ミラーの法線とカメラの光軸との間の角度は、15°未満であることを特徴とするデバイス。
- 請求項1乃至6の何れか1項に記載のデバイスにおいて、前記解析ユニット(11)は、眼の角膜上に生成された可視の輝きとその眼の瞳孔との間の距離を測定して、ユーザの眼の視線角度を判定するように構成されることを特徴とするデバイス。
- 請求項1乃至7の何れか1項に記載のデバイスにおいて、前記解析ユニット(11)は、単一の眼の少なくとも2つの表現に基づいて解析を実行することにより、ユーザの眼の視線角度を判定するように構成されることを特徴とするデバイス。
- 請求項1乃至8の何れか1項に記載のデバイスにおいて、前記解析ユニット(11)は、ユーザの網膜の像を記録して、眼の屈折誤差を判定するように構成されることを特徴とするデバイス。
- 請求項1乃至9の何れか1項に記載のデバイスにおいて、前記解析ユニット(11)は、虹彩の角度特徴(iris angular feature)を判定して、ユーザの眼の光学ねじれを判定するように構成されることを特徴とするデバイス。
- 請求項1乃至10の何れか1項に記載のデバイスにおいて、さらに前記収集空間と前記第1のミラーとの間に位置する少なくとも1つの二色性フィルターミラー(25)を含み、当該二色性フィルターミラー(25)が、前記収集空間と前記第1のミラーとの間に位置することを特徴とするデバイス。
- 請求項11に記載のデバイスにおいて、第1及び第2の二色性フィルターミラーは、前記カメラと、それぞれ第1及び第2のユーザの眼のために構成された前記収集空間の第1及び第2の部分との間の光路に位置することを特徴とするデバイス。
- 請求項1乃至12の何れか1項に記載のデバイスにおいて、前記少なくとも1つの光源(11)は、赤外光を生成することを特徴とするデバイス。
- 眼の画像を取得することができる収集空間(29)に位置する眼(1)から、視線角度、屈折誤差(refractive error)、眼の光学ねじれ(eye optical torsion)、眼の調整(accomodation)を含む計測を収集する方法であって、少なくとも1つの光源は、前記収集空間の方に光を放出し、カメラは、前記収集空間から光を受信して像データを生成し、及び前記像データは、前記像データから少なくとも1つの計測を抽出するために解析される、方法において、前記カメラは、前記カメラの光軸に対して異なる角度が付けられている少なくとも第1及び第2の光路を介して前記収集空間から光を受信し、前記第1の光路の前記光は第1のミラーを介して受信され、前記第1の光路(17)および前記第2の光路(19)が前記カメラに前記眼の画像の重複部分を提供することにより、前記カメラが単一の眼の少なくとも2つの表現を受信でき、前記第1の光路(17)の長さと前記第2の光路(19)の長さとが異なることを特徴とする方法。
- 請求項14に記載の方法において、ユーザの眼の視線角度は、単一の眼の少なくとも2つの表現に基づいて解析を実行することによって判定されることを特徴とする方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
SE1651488A SE541262C2 (en) | 2016-11-15 | 2016-11-15 | Method and device for eye metric acquisition |
SE1651488-7 | 2016-11-15 | ||
PCT/SE2017/051098 WO2018093313A1 (en) | 2016-11-15 | 2017-11-03 | Method and device for eye metric acquisition |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2020513609A JP2020513609A (ja) | 2020-05-14 |
JP2020513609A5 JP2020513609A5 (ja) | 2021-11-04 |
JP7165994B2 true JP7165994B2 (ja) | 2022-11-07 |
Family
ID=62146643
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019524069A Active JP7165994B2 (ja) | 2016-11-15 | 2017-11-03 | 眼の計測を収集するための方法及びデバイス |
Country Status (6)
Country | Link |
---|---|
US (1) | US11624907B2 (ja) |
EP (1) | EP3542308B1 (ja) |
JP (1) | JP7165994B2 (ja) |
CN (1) | CN109964230B (ja) |
SE (1) | SE541262C2 (ja) |
WO (1) | WO2018093313A1 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2020357870A1 (en) | 2019-10-04 | 2022-04-28 | Alcon Inc. | Adjustable intraocular lenses and methods of post-operatively adjusting intraocular lenses |
GB2596300A (en) * | 2020-06-23 | 2021-12-29 | Sony Interactive Entertainment Inc | Gaze tracking apparatus and systems |
JP2022039127A (ja) * | 2020-08-28 | 2022-03-10 | 株式会社日立エルジーデータストレージ | ヘッドマウントディスプレイ |
WO2022074973A1 (ja) * | 2020-10-05 | 2022-04-14 | ソニーグループ株式会社 | 視線検出装置及び表示装置 |
BR112023018612A2 (pt) * | 2021-04-06 | 2023-10-24 | Alcon Inc | Aparelho, sistemas e métodos para avaliar objetivamente a acomodação em um olho |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000232960A (ja) | 1999-01-21 | 2000-08-29 | Leica Microsystems Inc | 広いレンジの焦点位置に亘るデータを用いた自動オプトメータ評価方法 |
JP2005528600A (ja) | 2002-05-30 | 2005-09-22 | ヴィズイクス・インコーポレーテッド | 眼の回し運動の向きと位置の追跡 |
JP2009131381A (ja) | 2007-11-29 | 2009-06-18 | Hamamatsu Photonics Kk | 眼球運動計測装置 |
US20150185503A1 (en) | 2013-12-27 | 2015-07-02 | Larry R. Tate | Automatic focus prescription lens eyeglasses |
JP2016093249A5 (ja) | 2014-11-12 | 2017-12-21 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11235316A (ja) * | 1998-02-20 | 1999-08-31 | Canon Inc | 検眼装置 |
US7280678B2 (en) * | 2003-02-28 | 2007-10-09 | Avago Technologies General Ip Pte Ltd | Apparatus and method for detecting pupils |
US7508965B2 (en) * | 2004-06-01 | 2009-03-24 | Lumidigm, Inc. | System and method for robust fingerprint acquisition |
JPWO2006088042A1 (ja) * | 2005-02-16 | 2008-07-03 | 松下電器産業株式会社 | 生体判別装置および認証装置ならびに生体判別方法 |
US8885882B1 (en) * | 2011-07-14 | 2014-11-11 | The Research Foundation For The State University Of New York | Real time eye tracking for human computer interaction |
GB2495323B (en) * | 2011-10-07 | 2018-05-30 | Irisguard Inc | Improvements for iris recognition systems |
US8824779B1 (en) * | 2011-12-20 | 2014-09-02 | Christopher Charles Smyth | Apparatus and method for determining eye gaze from stereo-optic views |
EP2696259B1 (en) | 2012-08-09 | 2021-10-13 | Tobii AB | Fast wake-up in a gaze tracking system |
KR101769177B1 (ko) * | 2012-10-09 | 2017-08-18 | 한국전자통신연구원 | 시선 추적 장치 및 방법 |
US9426447B2 (en) | 2012-10-09 | 2016-08-23 | Electronics And Telecommunications Research Institute | Apparatus and method for eye tracking |
CN105828700B (zh) * | 2013-12-09 | 2018-07-06 | Smi创新传感技术有限公司 | 操作眼睛跟踪装置的方法和提供主动照明控制用于改进的眼睛跟踪稳定性的眼睛跟踪装置 |
US9699436B2 (en) * | 2014-09-16 | 2017-07-04 | Microsoft Technology Licensing, Llc | Display with eye-discomfort reduction |
JP6471466B2 (ja) * | 2014-11-12 | 2019-02-20 | 株式会社ニデック | 眼科装置、及びそれに用いる処理プログラム |
US9791924B2 (en) * | 2014-12-23 | 2017-10-17 | Mediatek Inc. | Eye tracking with mobile device in a head-mounted display |
WO2017134412A1 (en) * | 2016-02-04 | 2017-08-10 | Milan Momcilo Popovich | Holographic waveguide optical tracker |
-
2016
- 2016-11-15 SE SE1651488A patent/SE541262C2/en unknown
-
2017
- 2017-11-03 EP EP17871428.3A patent/EP3542308B1/en active Active
- 2017-11-03 US US16/349,682 patent/US11624907B2/en active Active
- 2017-11-03 WO PCT/SE2017/051098 patent/WO2018093313A1/en unknown
- 2017-11-03 JP JP2019524069A patent/JP7165994B2/ja active Active
- 2017-11-03 CN CN201780069942.7A patent/CN109964230B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000232960A (ja) | 1999-01-21 | 2000-08-29 | Leica Microsystems Inc | 広いレンジの焦点位置に亘るデータを用いた自動オプトメータ評価方法 |
JP2005528600A (ja) | 2002-05-30 | 2005-09-22 | ヴィズイクス・インコーポレーテッド | 眼の回し運動の向きと位置の追跡 |
JP2009131381A (ja) | 2007-11-29 | 2009-06-18 | Hamamatsu Photonics Kk | 眼球運動計測装置 |
US20150185503A1 (en) | 2013-12-27 | 2015-07-02 | Larry R. Tate | Automatic focus prescription lens eyeglasses |
JP2016093249A5 (ja) | 2014-11-12 | 2017-12-21 |
Also Published As
Publication number | Publication date |
---|---|
EP3542308A4 (en) | 2020-06-03 |
EP3542308A1 (en) | 2019-09-25 |
EP3542308B1 (en) | 2021-12-22 |
SE1651488A1 (sv) | 2018-05-16 |
WO2018093313A1 (en) | 2018-05-24 |
CN109964230A (zh) | 2019-07-02 |
JP2020513609A (ja) | 2020-05-14 |
CN109964230B (zh) | 2023-08-15 |
US11624907B2 (en) | 2023-04-11 |
US20190361231A1 (en) | 2019-11-28 |
SE541262C2 (en) | 2019-05-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7165994B2 (ja) | 眼の計測を収集するための方法及びデバイス | |
EP3371781B1 (en) | Systems and methods for generating and using three-dimensional images | |
US11675432B2 (en) | Systems and techniques for estimating eye pose | |
US6659611B2 (en) | System and method for eye gaze tracking using corneal image mapping | |
US9070017B2 (en) | Methods and apparatus for estimating point-of-gaze in three dimensions | |
US20170092007A1 (en) | Methods and Devices for Providing Enhanced Visual Acuity | |
CN112805659A (zh) | 通过用户分类为多深度平面显示系统选择深度平面 | |
US10775647B2 (en) | Systems and methods for obtaining eyewear information | |
CN115053270A (zh) | 用于基于用户身份来操作头戴式显示系统的系统和方法 | |
CN115040069A (zh) | 一种订购眼镜的系统 | |
KR20170136582A (ko) | 눈 추적 디바이스 및 눈 추적 디바이스를 동작시키기 위한 방법 | |
JP6631951B2 (ja) | 視線検出装置及び視線検出方法 | |
JP2020513609A5 (ja) | 眼の計測を収集するための方法及びデバイス | |
US10188291B2 (en) | Device for screening convergence insufficiency and related methods | |
JP7293726B2 (ja) | 自覚式検眼装置及び自覚式検眼プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20201009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210615 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210616 |
|
A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20210915 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220301 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220531 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220920 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221018 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7165994 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |