JP2016085588A - 視線検出装置および視線検出方法 - Google Patents
視線検出装置および視線検出方法 Download PDFInfo
- Publication number
- JP2016085588A JP2016085588A JP2014217651A JP2014217651A JP2016085588A JP 2016085588 A JP2016085588 A JP 2016085588A JP 2014217651 A JP2014217651 A JP 2014217651A JP 2014217651 A JP2014217651 A JP 2014217651A JP 2016085588 A JP2016085588 A JP 2016085588A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- center
- line
- distance
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/107—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining the shape or measuring the curvature of the cornea
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/19—Sensors therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
Abstract
【解決手段】光を照射する光源をそれぞれ含み、所定の位置に対して対称に配置された複数の照明部と、前記複数の照明部に対してそれぞれ内側またはそれぞれ外側に配置された複数の撮像部と、照明部によって光が照射され、撮像部によって撮像された被験者の眼球の画像から瞳孔の中心を示す第1位置と、角膜反射の中心を示す第2位置と、を検出する位置検出部と、所定の位置と、表示部上の第3位置と、第1位置と、第2位置と、に基づいて、角膜の曲率中心を示す第4位置を算出する算出部と、を備える。
【選択図】図6
Description
瞳孔中心位置と角膜曲率中心位置との距離を算出する算出処理は、図9および図10で説明した方法に限られるものではない。以下では、算出処理の他の例について図13および図14を用いて説明する。
距離616=(L614×L1102)/(L1101−L1102)・・・(1)
(1)2つの光源のうち、2台のカメラからそれぞれ遠い光源を点灯させたときの画像を撮影し使用することにより、瞳孔だけをより暗く撮影でき、瞳孔検出精度、および視線検出精度を向上させることができる。
(2)それぞれカメラから遠い1つの光源を使用するため、特許文献1および2のような方法に比べ2つの光源の位置を離す必要がなくコンパクトにすることが可能である。
101 表示部
102a 右カメラ
102b 左カメラ
103a、103b LED光源
150 記憶部
201 表示画面
205 スピーカ
300 制御部
313 駆動・IF部
316 LED駆動制御部
322 スピーカ駆動部
351 点灯制御部
352 位置検出部
353 曲率中心算出部
354 視線検出部
355 視点検出部
356 出力制御部
357 評価部
Claims (6)
- 光を照射する光源をそれぞれ含み、所定の位置に対して対称に配置された複数の照明部と、
前記複数の照明部に対してそれぞれ内側またはそれぞれ外側に配置された複数の撮像部と、
前記照明部によって光が照射され、前記撮像部によって撮像された被験者の眼球の画像から瞳孔の中心を示す第1位置と、角膜反射の中心を示す第2位置と、を検出する位置検出部と、
前記所定の位置と、表示部上の第3位置と、前記第1位置と、前記第2位置と、に基づいて、角膜の曲率中心を示す第4位置を算出する算出部と、
を備える視線検出装置。 - 複数の前記照明部のそれぞれを、異なるタイミングで点灯するように制御する点灯制御部をさらに備え、
前記位置検出部は、複数の前記照明部のうち第1照明部によって光が照射されたときに、複数の前記撮像部のうち前記第1照明部からの距離が他の撮像部より長い第1撮像部によって撮像された第1画像と、複数の前記照明部のうち第2照明部によって光が照射されたときに、複数の前記撮像部のうち前記第2照明部からの距離が他の撮像部より長い第2撮像部によって撮像された第2画像とから、前記第1位置と前記第2位置とを検出する、
請求項1に記載の視線検出装置。 - 前記第1位置と前記第4位置とに基づいて視線を検出する視線検出部をさらに備える、
請求項1または2に記載の視線検出装置。 - 前記算出部は、
前記所定の位置と前記第2位置とを結ぶ第1直線と、
前記第1位置と前記第3位置とを結ぶ第2直線と、を算出し、
前記第1直線と前記第2直線との交点と、前記第1位置との距離を第1距離として、
前記第1直線上に存在し、前記第1位置からの距離が前記第1距離となる前記第4位置を算出する、
請求項1〜3のいずれか1項に記載の視線検出装置。 - 前記算出部は、
前記所定の位置と前記第3位置とを結ぶ第1線分と、
前記第1線分に平行で、前記第1位置から前記第1直線に向かう第2線分と、を算出し、
前記第1線分の長さに対する前記第2線分の長さの比率と、
前記第3位置と前記第4位置との距離に対する前記第1距離の比率と、が等しくなる前記第1距離を算出する、
請求項4に記載の視線検出装置。 - 光源をそれぞれ含み、所定の位置に対して対称に配置された複数の照明部によって光が照射され、前記複数の照明部に対してそれぞれ内側またはそれぞれ外側に配置された複数の撮像部によって撮像された被験者の眼球の画像から瞳孔の中心を示す第1位置と、角膜反射の中心を示す第2位置と、を検出する位置検出ステップと、
前記所定の位置と、表示部上の第3位置と、前記第1位置と、前記第2位置と、に基づいて、角膜の曲率中心を示す第4位置を算出する算出ステップと、
を含む視線検出方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217651A JP6201956B2 (ja) | 2014-10-24 | 2014-10-24 | 視線検出装置および視線検出方法 |
EP15190678.1A EP3011894B1 (en) | 2014-10-24 | 2015-10-20 | Eye gaze detection apparatus and eye gaze detection method |
US14/918,262 US10085636B2 (en) | 2014-10-24 | 2015-10-20 | Eye gaze detection apparatus and eye gaze detection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014217651A JP6201956B2 (ja) | 2014-10-24 | 2014-10-24 | 視線検出装置および視線検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016085588A true JP2016085588A (ja) | 2016-05-19 |
JP6201956B2 JP6201956B2 (ja) | 2017-09-27 |
Family
ID=54360872
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014217651A Active JP6201956B2 (ja) | 2014-10-24 | 2014-10-24 | 視線検出装置および視線検出方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10085636B2 (ja) |
EP (1) | EP3011894B1 (ja) |
JP (1) | JP6201956B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017217026A1 (ja) * | 2016-06-16 | 2017-12-21 | アルプス電気株式会社 | 角膜中心検出装置および視線検出装置 |
WO2018173359A1 (ja) * | 2017-03-24 | 2018-09-27 | 株式会社Jvcケンウッド | 視線検出装置、視線検出方法及び視線検出プログラム |
WO2019026330A1 (ja) | 2017-08-02 | 2019-02-07 | 株式会社Jvcケンウッド | 視線検出装置及び視線検出方法 |
CN111052042A (zh) * | 2017-09-29 | 2020-04-21 | 苹果公司 | 基于注视的用户交互 |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3187100A4 (en) * | 2014-08-29 | 2018-05-09 | Alps Electric Co., Ltd. | Line-of-sight detection device |
US10726574B2 (en) * | 2017-04-11 | 2020-07-28 | Dolby Laboratories Licensing Corporation | Passive multi-wearable-devices tracking |
CN110215186A (zh) * | 2019-05-09 | 2019-09-10 | 南京览视医疗科技有限公司 | 一种自动对准定位眼底相机及其工作方法 |
CN110537897B (zh) * | 2019-09-10 | 2022-04-05 | 北京未动科技有限公司 | 视线追踪方法和装置、计算机可读存储介质、电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2739331B2 (ja) * | 1988-11-16 | 1998-04-15 | 株式会社エイ・ティ・アール通信システム研究所 | 非接触視線検出装置 |
JP2011206542A (ja) * | 2010-03-30 | 2011-10-20 | National Univ Corp Shizuoka Univ | 自閉症診断支援用装置 |
WO2014136803A1 (ja) * | 2013-03-07 | 2014-09-12 | 株式会社Jvcケンウッド | 診断支援装置および診断支援方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6659611B2 (en) * | 2001-12-28 | 2003-12-09 | International Business Machines Corporation | System and method for eye gaze tracking using corneal image mapping |
JP4824420B2 (ja) | 2006-02-07 | 2011-11-30 | アイテック株式会社 | 視線ベクトル検出方法及び同装置 |
EP2238889B1 (en) * | 2009-04-01 | 2011-10-12 | Tobii Technology AB | Adaptive camera and illuminator eyetracker |
FR3008719B1 (fr) | 2013-07-19 | 2015-11-20 | Seb Sa | Semelle de fer a repasser presentant des proprietes de resistance a l'abrasion ameliorees |
JP6269177B2 (ja) * | 2013-11-29 | 2018-01-31 | 株式会社Jvcケンウッド | 瞳孔検出装置、視線検出装置および瞳孔検出方法 |
JP2016028669A (ja) | 2014-07-23 | 2016-03-03 | 株式会社Jvcケンウッド | 瞳孔検出装置、および瞳孔検出方法 |
-
2014
- 2014-10-24 JP JP2014217651A patent/JP6201956B2/ja active Active
-
2015
- 2015-10-20 US US14/918,262 patent/US10085636B2/en active Active
- 2015-10-20 EP EP15190678.1A patent/EP3011894B1/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2739331B2 (ja) * | 1988-11-16 | 1998-04-15 | 株式会社エイ・ティ・アール通信システム研究所 | 非接触視線検出装置 |
JP2011206542A (ja) * | 2010-03-30 | 2011-10-20 | National Univ Corp Shizuoka Univ | 自閉症診断支援用装置 |
WO2014136803A1 (ja) * | 2013-03-07 | 2014-09-12 | 株式会社Jvcケンウッド | 診断支援装置および診断支援方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017217026A1 (ja) * | 2016-06-16 | 2017-12-21 | アルプス電気株式会社 | 角膜中心検出装置および視線検出装置 |
WO2018173359A1 (ja) * | 2017-03-24 | 2018-09-27 | 株式会社Jvcケンウッド | 視線検出装置、視線検出方法及び視線検出プログラム |
JP2018161249A (ja) * | 2017-03-24 | 2018-10-18 | 株式会社Jvcケンウッド | 視線検出装置、視線検出方法及び視線検出プログラム |
WO2019026330A1 (ja) | 2017-08-02 | 2019-02-07 | 株式会社Jvcケンウッド | 視線検出装置及び視線検出方法 |
JP2019025195A (ja) * | 2017-08-02 | 2019-02-21 | 株式会社Jvcケンウッド | 視線検出装置及び視線検出方法 |
US11061470B2 (en) | 2017-08-02 | 2021-07-13 | Jvckenwood Corporation | Eye tracking device and eye tracking method |
CN111052042A (zh) * | 2017-09-29 | 2020-04-21 | 苹果公司 | 基于注视的用户交互 |
US11714592B2 (en) | 2017-09-29 | 2023-08-01 | Apple Inc. | Gaze-based user interactions |
US11762619B2 (en) | 2017-09-29 | 2023-09-19 | Apple Inc. | Controlling external devices using reality interfaces |
US11762620B2 (en) | 2017-09-29 | 2023-09-19 | Apple Inc. | Accessing functions of external devices using reality interfaces |
Also Published As
Publication number | Publication date |
---|---|
EP3011894A1 (en) | 2016-04-27 |
US20160113486A1 (en) | 2016-04-28 |
JP6201956B2 (ja) | 2017-09-27 |
US10085636B2 (en) | 2018-10-02 |
EP3011894B1 (en) | 2017-10-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10722113B2 (en) | Gaze detection apparatus and gaze detection method | |
JP6201956B2 (ja) | 視線検出装置および視線検出方法 | |
JP6210023B2 (ja) | 視線検出支援装置および視線検出支援方法 | |
US11023039B2 (en) | Visual line detection apparatus and visual line detection method | |
WO2015146491A1 (ja) | 検出装置および検出方法 | |
JP6900994B2 (ja) | 視線検出装置及び視線検出方法 | |
JP6245093B2 (ja) | 診断支援装置および診断支援方法 | |
JP2016028669A (ja) | 瞳孔検出装置、および瞳孔検出方法 | |
JP6380178B2 (ja) | 診断支援装置および診断支援方法 | |
JP6856017B2 (ja) | 角膜反射位置検出装置、視線検出装置及び角膜反射位置検出方法 | |
JP6135550B2 (ja) | 診断支援装置および診断支援方法 | |
JP6593133B2 (ja) | 診断支援装置および診断支援方法 | |
JP2015144635A (ja) | 検出装置および検出方法 | |
JP6327171B2 (ja) | 注視点検出装置および注視点検出方法 | |
JP6471533B2 (ja) | 視線検出装置および視線検出方法 | |
JP6909391B2 (ja) | 視線検出装置及び視線検出方法 | |
JP6187347B2 (ja) | 検出装置および検出方法 | |
JP6269177B2 (ja) | 瞳孔検出装置、視線検出装置および瞳孔検出方法 | |
JP2017131446A (ja) | 瞳孔検出装置、および瞳孔検出方法 | |
JP2016157326A (ja) | 視線検出装置および視線検出方法 | |
JP2015181797A (ja) | 検出装置および検出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160929 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170516 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170711 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170801 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170814 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6201956 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |