JP2015047427A - 視線検出装置 - Google Patents
視線検出装置 Download PDFInfo
- Publication number
- JP2015047427A JP2015047427A JP2013182757A JP2013182757A JP2015047427A JP 2015047427 A JP2015047427 A JP 2015047427A JP 2013182757 A JP2013182757 A JP 2013182757A JP 2013182757 A JP2013182757 A JP 2013182757A JP 2015047427 A JP2015047427 A JP 2015047427A
- Authority
- JP
- Japan
- Prior art keywords
- center
- image
- quadratic function
- pupil
- reflection light
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Eye Examination Apparatus (AREA)
Abstract
【解決手段】 カメラで撮影した人の目の画像から瞳孔画像を抽出して瞳孔中心算出部25で瞳孔の中心が算出される。目の角膜からの反射光のスポット像は、角膜反射光中心検出部26でその中心が算出される。ここでは、二次関数補間手段26aが設けられており、隣接する限られた数の画素の中心の座標と、この画素で得られる輝度信号の強度とから二次関数補間によって二次関数が求められ、その極値を得る座標から角膜反射光の中心が求められる。視線方向算出部28では、角膜中心と角膜反射光の中心とから視線方向が算出される。
【選択図】図1
Description
この視線検出装置は、目を含む顔面に赤外光を与えた状態で、カメラで目を含む画像を取得する。取得された画像から、瞳孔の中心位置を検出し、さらに角膜からの反射光の中心を検出する。そして、瞳孔の中心位置と角膜からの反射光の中心位置とから、視線の向きが算出される。
前記角膜反射光中心算出部には、角膜反射光を含む画像上に設定された任意の座標軸(X0)に位置する複数の画素の輝度を取得し、前記輝度を座標(x)を変数とする二次関数f(x)として補間計算し、二次関数f(x)が極値となる座標(xp)を算出して、その座標(xp)を角膜反射光の中心とする二次関数補間手段が設けられていることを特徴とするものである。
図1に車載用の視線検出装置1が示されている。視線検出装置1は、受像装置10と、この受像装置10に電気的に接続された制御回路部20とから構成されている。
瞳孔画像抽出部23の差動回路23cで得られた瞳孔画像信号24aにおいて表現される瞳孔画像は、網膜34から反射された反射光が瞳孔32を通じて得られたものであり、瞳孔に対応した部分が他の部分よりも輝度が高くなっている。
暗瞳孔画像検出部23bで検出された暗瞳孔画像信号24bには、赤外光が角膜31の反射点35で反射されたプルキニエ像のスポット画像35aの輝度信号が含まれる。図4に、カメラ13で撮像された1フレームにおいて得られるプルキニエ像のスポット画像35aが示されている。このスポット画像35aは中心部で輝度が高く、周囲に向かうにしたがって輝度が低くなる。
で表すことができる。
f(i)=axi 2+bxi+c
f(ii)=axii 2+bxii+c
f(iii)=axiii 2+bxiii+c
となる。前述のように3つのx座標は互いに同じ間隔で配置された隣接する画素の中心であるため、ここでは座標軸X0上のそれぞれの位置を、xi=−1、xii=0、xiii=1とする。このとき
f(i)=a−b+c
f(ii)=c
f(iii)=a+b+c
となる。これを整理すると、
f(i)=a−b+f(ii)
f(iii)=a+b+f(ii)
となり、ここから、
a={f(i)+f(iii)−2・f(ii)}/2
b={f(iii)−f(i)}/2
が求められる。よってf(x)が極値となる座標軸X0上の座標位置(xp)は、
xp=(1/2){(f(iii)−f(i))/(2・f(ii)−f(i)−f(iii))}
となる。
10 受像装置
11 第1の光源
12 第2の光源
13 カメラ
20 制御回路部
22 画像取得部
23 瞳孔画像抽出部
25 瞳孔中心算出部
26 角膜反射光中心検出部
26a 二次関数補間手段
26b σ算出部
26c 切り替え部
28 視線方向算出部
32 瞳孔
34 網膜
VL 視線
X0 座標軸
Claims (6)
- 人の目に検知光を与える光源と、人の目を含む画像を取得する画像取得部と、取得した画像から瞳孔画像を抽出する瞳孔画像抽出部と、瞳孔画像から瞳孔中心を算出する瞳孔中心算出部と、取得した画像から得られた角膜反射光の中心を検出する角膜反射光中心検出部と、瞳孔中心と角膜反射光の中心とから視線方向を算出する視線方向算出部とが設けられた視線検出装置において、
前記角膜反射光中心算出部には、角膜反射光を含む画像上に設定された任意の座標軸(X0)に位置する複数の画素の輝度を取得し、前記輝度を座標(x)を変数とする二次関数f(x)として補間計算し、二次関数f(x)が極値となる座標(xp)を算出して、その座標(xp)を角膜反射光の中心とする二次関数補間手段が設けられていることを特徴とする視線検出装置。 - 前記角膜反射光中心算出部では、前記二次関数の分散σ2または標準偏差σが所定値以下のときに、前記二次関数補間手段による二次関数補間が行われる請求項1記載の視線検出装置。
- 前記分散σ2が4以下または前記標準偏差σが2以下のときに二次関数補間が行われる請求項2記載の視線検出装置。
- しきい値以上の輝度を取得した座標軸(X0)上の画素が所定数以下のときに、前記二次関数補間手段による二次関数補間が行われる請求項1記載の視線検出装置。
- 二次関数補間が行われないときは、重心計算法によって、輝度が極値となる座標が算出される請求項2ないし4のいずれかに記載の視線検出装置。
- 二次関数補間が行われないときは、楕円輪郭推定法によって、角膜反射光の中心座標が算出される請求項2ないし4のいずれかに記載の視線検出装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013182757A JP6169446B2 (ja) | 2013-09-04 | 2013-09-04 | 視線検出装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013182757A JP6169446B2 (ja) | 2013-09-04 | 2013-09-04 | 視線検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015047427A true JP2015047427A (ja) | 2015-03-16 |
JP6169446B2 JP6169446B2 (ja) | 2017-07-26 |
Family
ID=52697932
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013182757A Expired - Fee Related JP6169446B2 (ja) | 2013-09-04 | 2013-09-04 | 視線検出装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6169446B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10417512B2 (en) | 2015-07-06 | 2019-09-17 | Denso Corporation | Driver abnormality detection device and driver abnormality detection method |
JP2020151089A (ja) * | 2019-03-19 | 2020-09-24 | 株式会社トプコン | 眼科情報処理装置、眼科装置、眼科情報処理方法、及びプログラム |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03177828A (ja) * | 1989-12-07 | 1991-08-01 | Asahi Optical Co Ltd | 視線検出装置の視線検出方法 |
-
2013
- 2013-09-04 JP JP2013182757A patent/JP6169446B2/ja not_active Expired - Fee Related
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03177828A (ja) * | 1989-12-07 | 1991-08-01 | Asahi Optical Co Ltd | 視線検出装置の視線検出方法 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10417512B2 (en) | 2015-07-06 | 2019-09-17 | Denso Corporation | Driver abnormality detection device and driver abnormality detection method |
JP2020151089A (ja) * | 2019-03-19 | 2020-09-24 | 株式会社トプコン | 眼科情報処理装置、眼科装置、眼科情報処理方法、及びプログラム |
JP7248467B2 (ja) | 2019-03-19 | 2023-03-29 | 株式会社トプコン | 眼科情報処理装置、眼科装置、眼科情報処理方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP6169446B2 (ja) | 2017-07-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101278430B1 (ko) | 실시간으로 몇몇 사람들의 눈을 인식하고 추적하기 위한 방법 및 회로 장치 | |
US10499808B2 (en) | Pupil detection system, gaze detection system, pupil detection method, and pupil detection program | |
US9563981B2 (en) | Information processing apparatus, information processing method, and program | |
EP2824417B1 (en) | Distance calculation device and distance calculation method | |
US10417782B2 (en) | Corneal reflection position estimation system, corneal reflection position estimation method, corneal reflection position estimation program, pupil detection system, pupil detection method, pupil detection program, gaze detection system, gaze detection method, gaze detection program, face orientation detection system, face orientation detection method, and face orientation detection program | |
JP6346525B2 (ja) | 視線検出装置 | |
KR101769177B1 (ko) | 시선 추적 장치 및 방법 | |
JP6669019B2 (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム | |
US20200279094A1 (en) | Vehicle safety system with no-control operation | |
EP3769146A1 (en) | Hybrid depth detection and movement detection | |
JP5466610B2 (ja) | 視線推定装置 | |
JP2013186042A (ja) | 距離算出装置及び距離算出方法 | |
AU2016397317A1 (en) | Passenger counting device, system, method and program, and vehicle movement amount calculation device, method and program | |
JP2015206798A (ja) | 距離算出装置 | |
WO2019182841A1 (en) | Active stereo matching for depth applications | |
US8983147B2 (en) | Eyelid detection device | |
US11509813B2 (en) | Image processing device | |
JP6441581B2 (ja) | フレキシブルディスプレイの曲げモーションに対する光検出 | |
JP6669182B2 (ja) | 乗員監視装置 | |
JP6950390B2 (ja) | 表示制御プログラム、装置、及び方法 | |
JP4193342B2 (ja) | 3次元データ生成装置 | |
JP2016099759A (ja) | 顔検出方法、顔検出装置、及び顔検出プログラム | |
JP6169446B2 (ja) | 視線検出装置 | |
JP2018101212A (ja) | 車載器および顔正面度算出方法 | |
JP2014052813A (ja) | 瞳孔検出装置および瞳孔検出方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161115 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161116 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161202 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170530 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170628 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6169446 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |