JP2011125693A - 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね - Google Patents
眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね Download PDFInfo
- Publication number
- JP2011125693A JP2011125693A JP2010255389A JP2010255389A JP2011125693A JP 2011125693 A JP2011125693 A JP 2011125693A JP 2010255389 A JP2010255389 A JP 2010255389A JP 2010255389 A JP2010255389 A JP 2010255389A JP 2011125693 A JP2011125693 A JP 2011125693A
- Authority
- JP
- Japan
- Prior art keywords
- distance
- electrooculogram
- right eye
- eye
- left eye
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/107—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining the shape or measuring the curvature of the cornea
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/7445—Display arrangements, e.g. multiple display units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
Abstract
【解決手段】右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離とを取得する距離取得部11と、距離取得部11が取得した右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離を、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離から任意の3次元空間位置に発生する眼電位理論値を算出するための関数である眼電位モデルの入力とすることにより、任意の3次元空間位置に発生する眼電位理論値を算出する眼電位理論値算出部13とを備える。
【選択図】図4
Description
そこで、EOGの非線形モデルが非特許文献1に開示されている。非特許文献1では、眼球を角膜がプラス、網膜がマイナスを成す電池とみなし、眼球運動を、電池が回転するものとみなすモデル(電池モデル)を提案している。電極から、角膜中心点、網膜中心点までの距離をそれぞれr、r’とし、眼球内部で網膜から角膜に向かって流れる電流をI、眼球周辺の導電率をσとするとき、電極に発生する電位vは、以下の(式1)により計算される。
本発明の第1の実施形態である視線検出装置について説明する。まず、本実施の形態に係る視線検出装置の構成について説明した後、本発明における眼電位モデルについて説明し、次に、そのモデルパラメータの推定法について説明する。最後に、眼電位モデルを用いた視線検出法を説明する。なお、眼電位モデルおよび推定したモデルパラメータを用いれば、頭部の任意の3次元空間位置に発生する眼電位理論値を算出する眼電位推定装置となり、また、視線検出時の眼電位理論値を用いれば、観測電圧から眼電位を分離する眼電位計測装置となるが、以下では、観測電圧からユーザの視線角度を検出する視線検出装置について説明する。
図1は、本発明の実施の形態1に係る視線検出装置の構成を示すブロック図である。
図4は、本発明の実施の形態1における眼電位モデルの模式図(目の位置での頭部断面図)である。この眼電位モデルは、視線検出装置1の眼電位理論値算出部13において、眼電位理論値を算出する際に用いられる。
次に、眼電位モデルの未知パラメータ(モデルパラメータ)である、眼球半径a、両眼間隔b、電極座標(xe,ye,ze)、所定係数α1、α2、α3、α4のキャリブレーションについて説明する。このキャリブレーション処理はモデルパラメータ推定部12により実行される(図2のS3)。なお、以下では、眼球半径aおよび両眼間隔bは、人間の平均値であるa=12mmおよびb=65mmとし、モデルパラメータ推定部12は、電極座標(xe,ye,ze)および所定係数α1、α2、α3、α4のみを推定する。
まず、眼電位取得部14は、キャリブレーション用データ(学習データ)を取得する。図6を用いて、キャリブレーションデータ取得方法について説明する。なお、以下ではサッケード運動(跳躍眼球運動)を用いてキャリブレーションを行うことで、キャリブレーション時のドリフトノイズ(低周波ノイズ)混入を低減させ高精度なキャリブレーションを行う。ただし、ここでは概要のみの説明とし、キャリブレーションのための較正指標の提示方法およびサッケード運動の検出方法などの詳細は実施の形態2において説明する。
ユーザは、両眼の中心3001を、モニタ3000の中心位置3002に合わせ着席し、モニタ3000との間に設置した基準指標3003(z軸上)を注視する。基準指標3003は、ユーザの親指を目の前に立てて代用するなど、なんでもよいが、動かないものが好ましい。
(1) モニタ3000上に較正指標3004(視線位置θ)が提示されたら、ユーザは較正指標3004をサッケード運動(跳躍眼球運動)により注視する。このとき、眼電位取得部14は、サッケード運動による観測電圧変化量Δv(ユーザが基準指標3003を注視している時と較正指標3004を注視している時の電極における観測電圧の変化量)を検出し、キャリブレーションデータ(θ、Δv)を記録する。
次に、モデルパラメータ推定部12は、眼電位取得部14が取得したキャリブレーションデータに基づいて、モデルパラメータの推定を行う。つまり、モデルパラメータ推定部12は、各電極i(i=1,…,N)に対するM個のキャリブレーションデータ(θj,Δvi,j)(j=1,…,M)に対応する眼電位理論値
最後に、視線検出方法を説明する。この方法に基づく視線検出処理は、眼電位取得部14および視線検出部15により実行される。
次に、前述したサッケード運動を用いたキャリブレーション方法(以下、較正方法と記載することもある)について詳細に説明する。まず、全体構成を説明し、次に、サッケード検出方法を2通り説明する。また、まばたきによる較正精度劣化に対する対策方法も説明する。なお、下記の各構成は、本発明の効果を減殺しない限り、任意の組み合わせで組み合わせることが出来るものとする。
図9は、本発明の実施の形態2に係る視線検出装置100の構成を表すブロック図である。図9に示される視線検出装置100は、較正部101と、較正パラメータ更新指示部102と、較正指標提示部103と、サッケード検出部104と、較正パラメータ計算部105と、スイッチ106とを備える。
図16は、本発明の実施の形態2に係るサッケード検出部200の構成を表すブロック図である。図16に示されるサッケード検出部200は、眼電位原信号に最大値フィルタ処理を適用する最大値フィルタ部(第1のフィルタ処理部)201と、眼電位原信号に最小値フィルタ処理を適用する最小値フィルタ部(第2のフィルタ処理部)202と、減算部203とを備える。
nが奇数の場合(−n/2<i<n/2)
nが偶数の場合(−n/2≦i<n/2)または(−n/2<i≦n/2)
nが奇数の場合(−n/2<i<n/2)
nが偶数の場合(−n/2≦i<n/2)または(−n/2<i≦n/2)
次に、実施の形態2に係るサッケード検出部の他の例として、サッケード検出部500のブロック図を図21に示す。
ここで、fdelay(x)は遅延処理後の眼電位原信号(遅延信号)、tは遅延時間である。上記遅延処理を、図12に示される眼電位原信号に適用することによって遅延信号が得られる。そして、減算部203によって、眼電位原信号から遅延信号を減算した例を図22に示す。なお、眼電位原信号から符号付のサッケード成分を検出するために、遅延時間t=0.25秒としている。図22を参照すれば、サッケードの発生した時間帯を含む符号付のサッケード信号が得られていることがわかる。
次に、まばたきの影響を考慮した較正方法を説明する。
次に、実施の形態3に係るサッケード検出装置のブロック図を図27に示す。実施の形態3は、眼電位原信号を多チャンネルで計測する際のサッケード検出装置に関するものである。このサッケード検出装置は、図9に示した実施の形態2に係る視線検出装置100のサッケード検出部104の代わりに用いられる。
次に、図29及び図30を参照して、本発明の実施の形態4に係るウェアラブルカメラ1600を説明する。このウェアラブルカメラ1600は、例えば、ユーザの側頭部に装着され、ユーザの視線方向の映像を撮像する装置である。具体的には、ウェアラブルカメラ1600は、撮像部1601と、撮像制御部1602と、視線検出装置1603とを備える。
次に、図31および図32を参照して、本発明の実施の形態5に係るヘッドマウントディスプレイ1700を説明する。このヘッドマウントディスプレイ1700は、例えば、めがね形状を有しており、ユーザの眼前に画像を表示し、表示された画像上に示されているマウスをユーザの視線方向に移動させる装置である。具体的には、ヘッドマウントディスプレイ1700は、表示部1701と、表示制御部1702と、視線検出装置1703とを備える。
次に、図34および図35を参照して、本発明の実施の形態6に係る電子めがね1800を説明する。この電子めがね1800は、ユーザの視線位置に合わせてレンズの焦点を変化させることができるめがねである。具体的には、電子めがね1800は、レンズ1801と、焦点制御部1802と、視線検出装置1803とを備える。
上記実施の形態において、各ブロックは、LSIなどの半導体装置により個別に1チップ化されてもよいし、一部または全部を含むように1チップ化されてもよい。なお、ここでは、LSIとしたが、集積度の違いにより、IC、システムLSI、スーパーLSI、ウルトラLSIと呼称されることもある。
10 ディスプレイ
11 距離取得部
12 モデルパラメータ推定部
13 眼電位理論値算出部
14 眼電位取得部
15 視線検出部
20 第1の較正指標
30 第2の較正指標
101 較正部
102 較正パラメータ指示部
103 較正指標提示部
104、200、500、2000 サッケード検出部
105 較正パラメータ計算部
106 スイッチ
201 最大値フィルタ部
202 最小値フィルタ部
203 減算部
501 遅延信号生成部
1000、4002、4005、4006 電極
1001 右眼角膜電荷
1002 右眼網膜電荷
1003 左眼角膜電荷
1004 左眼網膜電荷
1005 不均一な誘電率空間
1600 ウェアラブルカメラ
1601 撮像部
1602 撮像制御部
1700 ヘッドマウントディスプレイ
1701 表示部
1702 表示制御部
1704 マウス
1705 アイコン
1801 レンズ
1802 焦点制御部
2001 合成信号生成部
3000 モニタ
3001 両眼の中心
3002 中心位置
3003 基準指標
3004 較正指標
3005 ユーザ
4001 めがね
4003 鼻パッドの位置
4004 フレームが耳に接触する位置
Claims (20)
- 生体に発生する眼電位の理論値を推定する眼電位推定装置であって、
右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから前記任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離とを取得する距離取得部と、
前記距離取得部が取得した前記右眼角膜距離、前記右眼網膜距離、前記左眼角膜距離および前記左眼網膜距離を、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離から前記任意の3次元空間位置に発生する眼電位理論値を算出するための関数である眼電位モデルの入力とすることにより、前記任意の3次元空間位置に発生する眼電位理論値を算出する眼電位理論値算出部と
を備える眼電位推定装置。 - 前記距離取得部は、左眼の注視点および右眼の注視点が同一点であると仮定することにより、両眼の平行運動成分と、両眼から注視点までの奥行き距離または両眼の輻輳運動成分とから、前記右眼角膜距離、前記右眼網膜距離、前記左眼角膜距離および前記左眼網膜距離を算出する
請求項1記載の眼電位推定装置。 - 前記眼電位モデルは、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離のそれぞれに対して個別に設定可能である所定係数を含む
請求項1または2記載の眼電位推定装置。 - さらに、
複数の視線位置のそれぞれにおいて、互いに異なる位置に配置された複数の電極のそれぞれにおいて発生する前記眼電位モデルを用いて算出される理論電圧と、前記複数の電極における観測電圧との差が最小になるような前記所定係数α1、α2、α3およびα4を推定するモデルパラメータ推定部を備える
請求項4記載の眼電位推定装置。 - 前記モデルパラメータ推定部は、
複数の電極i(i=1,…,N)のそれぞれに対し、M個の異なる視線位置θj(j=1,…,M)における観測電圧をΔvi=(Δvi,1,…,Δvi,M)t、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離のそれぞれに設定可能な前記所定係数をαi=(αi,1,αi,2,αi,3,αi,4)t、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離をそれぞれri,j,1,ri,j,2,ri,j,3,ri,j,4、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離を変換するための関数をfi,1,fi,2,fi,3,fi,4とするとき、行列Aiを、
基準電極Rに対し、前記M個の異なる視線位置θj(j=1,…,M)における右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離のそれぞれに設定可能な前記所定係数をαR=(αR,1,αR,2,αR,3,αR,4)t、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離をそれぞれrR,j,1,rR,j,2,rR,j,3,rR,j,4、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離を変換するための関数をfR,1,fR,2,fR,3,fR,4とするとき、行列ARを
請求項6記載の眼電位推定装置。 - 前記モデルパラメータ推定部は、眼電位の計測対象である生体に対して前後方向の眼球運動における、前記複数の電極における観測電圧を用いて、前記所定係数α1、α2、α3およびα4を推定する
請求項6または7記載の眼電位推定装置。 - 前記モデルパラメータ推定部は、サッケード運動を行うことにより取得される前記複数の電極における観測電圧を用いて、前記所定係数α1、α2、α3およびα4を推定する
請求項6〜8のいずれか1項記載の眼電位推定装置。 - 前記眼電位モデルは、眼電位理論値とユーザの視線方向との対応関係を示したルックアップテーブルを用いて構成される
請求項1〜9のいずれか1項記載の眼電位推定装置。 - さらに、
ユーザの両眼の間に配置され、眼電位を測定し、眼電位原信号を出力する少なくとも1つの電極を備える
請求項1〜10のいずれか1項記載の眼電位推定装置。 - 前記少なくとも1つの電極は、めがねのフレームに内蔵され、めがねが皮膚と接触する位置に配置されている複数の電極を含む
請求項11記載の眼電位推定装置。 - さらに、
耳の前後に配置され、眼電位を測定し、眼電位原信号を出力する複数の電極を備える
請求項1〜10のいずれか1項記載の眼電位推定装置。 - 眼電位算出装置により、生体に発生する眼電位の理論値を算出する眼電位算出方法であって、
右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから前記任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離とを取得する取得ステップと、
前記取得ステップにおいて取得された前記右眼角膜距離、前記右眼網膜距離、前記左眼角膜距離および前記左眼網膜距離を、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離から前記任意の3次元空間位置に発生する眼電位理論値を算出するための関数である眼電位モデルの入力とすることにより、前記任意の3次元空間位置に発生する眼電位理論値を算出する算出ステップと
を含む眼電位算出方法。 - 眼電位からユーザの視線方向を検出する視線検出装置であって、
眼球運動によって生じる眼電位を測定し、眼電位原信号を出力する眼電位測定部と、
ユーザに対して較正指標を提示する較正指標提示部と、
前記較正指標提示部によって提示された前記較正指標にユーザの視線位置が移動する際の眼球の急速な運動であるサッケード運動を前記眼電位原信号から検出し、前記サッケード運動の前後における眼電位の変化量である眼電位変化量を出力するサッケード検出部と、
前記較正指標提示部によって提示された前記較正指標の位置、及び前記サッケード検出部から出力された前記眼電位変化量に基づいて、右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから前記任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離と、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離のそれぞれに対して個別に設定可能である所定係数とから前記任意の3次元空間位置に発生する眼電位理論値を算出するための関数である眼電位モデルの前記所定係数を計算する較正パラメータ計算部と、
前記眼電位モデルに基づいて、前記眼電位原信号からユーザの視線方向を検出する較正部と
を備える視線検出装置。 - 前記サッケード検出部は、
前記眼電位原信号を所定の時間遅延させて遅延信号を出力する遅延信号生成部と、
前記眼電位原信号から前記遅延信号を減算して得られる出力信号を生成する減算部と、
前記出力信号のうちの予め定めた閾値を上回る信号をサッケード運動を示すサッケード信号と判定するサッケード判定部とを有し、
前記所定の遅延時間は、ユーザが前記較正指標を固視している時間より短い
請求項15記載の視線検出装置。 - ユーザの視線方向の映像を撮像するウェアラブルカメラであって、
撮像部と、
請求項15または16に記載の視線検出装置と、
前記視線検出装置によって検出された視線方向を前記撮像部に撮像させる撮像制御部と
を備えるウェアラブルカメラ。 - ユーザの視線方向にマウスを移動させるヘッドマウントディスプレイであって、
画像およびマウスを表示する表示部と、
請求項15または16に記載の視線検出装置と、
前記視線検出装置によって検出された視線方向に表示部に表示されているマウスを移動させる表示制御部と
を備えるヘッドマウントディスプレイ。 - ユーザの視線位置に合わせてレンズの焦点を変化させる電子めがねであって、
焦点を変化させることができるレンズと、
請求項15または16に記載の視線検出装置と、
前記視線検出装置によって検出された視線位置に合わせて前記レンズの焦点を変化させる焦点制御部と
を備える電子めがね。 - 生体に発生する眼電位の理論値を算出するプログラムであって、
右眼角膜および右眼網膜のそれぞれから任意の3次元空間位置までの距離である右眼角膜距離および右眼網膜距離と、左眼角膜および左眼網膜のそれぞれから前記任意の3次元空間位置までの距離である左眼角膜距離および左眼網膜距離とを取得する取得ステップと、
前記取得ステップにおいて取得された前記右眼角膜距離、前記右眼網膜距離、前記左眼角膜距離および前記左眼網膜距離を、右眼角膜距離、右眼網膜距離、左眼角膜距離および左眼網膜距離から前記任意の3次元空間位置に発生する眼電位理論値を算出するための関数である眼電位モデルの入力とすることにより、前記任意の3次元空間位置に発生する眼電位理論値を算出する算出ステップと
をコンピュータに実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010255389A JP5490664B2 (ja) | 2009-11-18 | 2010-11-15 | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009262679 | 2009-11-18 | ||
JP2009262679 | 2009-11-18 | ||
JP2010255389A JP5490664B2 (ja) | 2009-11-18 | 2010-11-15 | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2011125693A true JP2011125693A (ja) | 2011-06-30 |
JP5490664B2 JP5490664B2 (ja) | 2014-05-14 |
Family
ID=44278164
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010255389A Active JP5490664B2 (ja) | 2009-11-18 | 2010-11-15 | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね |
Country Status (2)
Country | Link |
---|---|
US (1) | US8449116B2 (ja) |
JP (1) | JP5490664B2 (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014068832A1 (en) | 2012-11-02 | 2014-05-08 | Sony Corporation | Image display device and information input device |
WO2015159851A1 (ja) * | 2014-04-14 | 2015-10-22 | 株式会社ジェイアイエヌ | 検出ユニット、アイウエア、及び眼電位検出システム |
US9486156B2 (en) | 2012-03-21 | 2016-11-08 | Panasonic Intellectual Property Management Co., Ltd. | Eye fatigue determination apparatus and eye fatigue determination method |
US9864191B2 (en) | 2013-05-21 | 2018-01-09 | Panasonic Intellectual Property Management Co., Ltd. | Viewer with varifocal lens and video display system |
KR101911630B1 (ko) | 2017-04-05 | 2018-10-24 | 한양대학교 산학협력단 | 안구의 전기 전도도 추정 방법 및 장치 |
JP2019162251A (ja) * | 2018-03-19 | 2019-09-26 | 株式会社東芝 | 眼球回転検出装置、電子機器及びシステム |
US10602953B2 (en) | 2015-11-27 | 2020-03-31 | Kabushiki Kaisha Toshiba | Electro-oculographic detector and electro-oculographic detection method |
JP2021009719A (ja) * | 2020-10-01 | 2021-01-28 | 株式会社東芝 | 電子機器及び表示方法 |
WO2021029342A1 (ja) * | 2019-08-14 | 2021-02-18 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、視線検出システム、視線検出方法および視線検出プログラム |
JP2022059595A (ja) * | 2020-10-01 | 2022-04-13 | 株式会社東芝 | 電子機器及び表示方法 |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120105740A1 (en) | 2000-06-02 | 2012-05-03 | Oakley, Inc. | Eyewear with detachable adjustable electronics module |
US8482488B2 (en) | 2004-12-22 | 2013-07-09 | Oakley, Inc. | Data input management system for wearable electronically enabled interface |
US7013009B2 (en) | 2001-06-21 | 2006-03-14 | Oakley, Inc. | Eyeglasses with wireless communication features |
US7740353B2 (en) | 2006-12-14 | 2010-06-22 | Oakley, Inc. | Wearable high resolution audio visual interface |
EP2672880B1 (en) * | 2011-02-09 | 2019-05-22 | Apple Inc. | Gaze detection in a 3d mapping environment |
US8953242B2 (en) | 2011-03-31 | 2015-02-10 | Honeywell International Inc. | Varible focus stereoscopic display system and method |
US8885882B1 (en) | 2011-07-14 | 2014-11-11 | The Research Foundation For The State University Of New York | Real time eye tracking for human computer interaction |
JP2015515638A (ja) | 2012-02-17 | 2015-05-28 | オークリー インコーポレイテッド | 眼鏡類に電子デバイスを取り外し可能に連結するためのシステムおよび方法 |
CN104246682B (zh) | 2012-03-26 | 2017-08-25 | 苹果公司 | 增强的虚拟触摸板和触摸屏 |
JP5661067B2 (ja) * | 2012-05-29 | 2015-01-28 | 株式会社ジェイアイエヌ | アイウエア |
CN205177388U (zh) | 2013-03-15 | 2016-04-20 | 奥克利有限公司 | 目镜系统 |
CN205691887U (zh) | 2013-06-12 | 2016-11-16 | 奥克利有限公司 | 模块化通信系统和眼镜通信系统 |
JP6273823B2 (ja) * | 2013-12-19 | 2018-02-07 | 株式会社デンソー | 状態推定装置、および状態推定プログラム |
US20150302422A1 (en) * | 2014-04-16 | 2015-10-22 | 2020 Ip Llc | Systems and methods for multi-user behavioral research |
US9946340B2 (en) * | 2014-11-06 | 2018-04-17 | Kabushiki Kaisha Toshiba | Electronic device, method and storage medium |
JP2018500957A (ja) * | 2014-11-27 | 2018-01-18 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 視力と聴力を評価するためのシステムと方法 |
JP6334484B2 (ja) * | 2015-09-01 | 2018-05-30 | 株式会社東芝 | メガネ型ウェアラブル装置及びその制御方法及び情報管理サーバー |
KR102466996B1 (ko) | 2016-01-06 | 2022-11-14 | 삼성전자주식회사 | 눈 위치 예측 방법 및 장치 |
US10137893B2 (en) * | 2016-09-26 | 2018-11-27 | Keith J. Hanna | Combining driver alertness with advanced driver assistance systems (ADAS) |
US10757328B2 (en) | 2016-12-23 | 2020-08-25 | Microsoft Technology Licensing, Llc | Eye tracking using video information and electrooculography information |
EP3697286A4 (en) * | 2017-10-19 | 2021-07-28 | Virginia Commonwealth University | EYE TRACKING PROCEDURES AND SYSTEMS ACTIVATED BY EYE VERGENCE |
US10860095B2 (en) | 2019-05-02 | 2020-12-08 | Cognixion | Dynamic eye-tracking camera alignment utilizing eye-tracking maps |
US11786694B2 (en) | 2019-05-24 | 2023-10-17 | NeuroLight, Inc. | Device, method, and app for facilitating sleep |
KR102097390B1 (ko) * | 2019-10-10 | 2020-04-06 | 주식회사 메디씽큐 | 시선 검출 기반의 스마트 안경 표시 장치 |
JP6957695B1 (ja) * | 2020-07-30 | 2021-11-02 | 株式会社ジンズホールディングス | プログラム、情報処理方法、及び情報処理装置 |
CN113178001B (zh) * | 2021-04-01 | 2023-07-04 | 北京科技大学 | 面向孔源性视网膜脱离的硅油填充模拟方法及电子设备 |
WO2023004063A1 (en) * | 2021-07-21 | 2023-01-26 | Dolby Laboratories Licensing Corporation | Screen interaction using eog coordinates |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07504833A (ja) * | 1992-02-05 | 1995-06-01 | バイオコントロール、システムズ、インコーポレイテッド | 視軸集中および斜視測定のために眼球運動を追跡する方法および装置 |
JP2007252879A (ja) * | 2006-02-27 | 2007-10-04 | Univ Of Electro-Communications | 眼球位置計測方法及び眼球位置計測装置 |
JP2007268164A (ja) * | 2006-03-31 | 2007-10-18 | National Univ Corp Shizuoka Univ | 視線移動検出方法及び視線移動検出装置 |
JP2009240551A (ja) * | 2008-03-31 | 2009-10-22 | Panasonic Corp | 視線検出装置 |
JP2011125692A (ja) * | 2009-11-18 | 2011-06-30 | Panasonic Corp | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7306337B2 (en) * | 2003-03-06 | 2007-12-11 | Rensselaer Polytechnic Institute | Calibration-free gaze tracking under natural head movement |
JP4966816B2 (ja) * | 2007-10-25 | 2012-07-04 | 株式会社日立製作所 | 視線方向計測方法および視線方向計測装置 |
-
2010
- 2010-11-15 JP JP2010255389A patent/JP5490664B2/ja active Active
- 2010-11-17 US US12/947,908 patent/US8449116B2/en active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07504833A (ja) * | 1992-02-05 | 1995-06-01 | バイオコントロール、システムズ、インコーポレイテッド | 視軸集中および斜視測定のために眼球運動を追跡する方法および装置 |
JP2007252879A (ja) * | 2006-02-27 | 2007-10-04 | Univ Of Electro-Communications | 眼球位置計測方法及び眼球位置計測装置 |
JP2007268164A (ja) * | 2006-03-31 | 2007-10-18 | National Univ Corp Shizuoka Univ | 視線移動検出方法及び視線移動検出装置 |
JP2009240551A (ja) * | 2008-03-31 | 2009-10-22 | Panasonic Corp | 視線検出装置 |
JP2011125692A (ja) * | 2009-11-18 | 2011-06-30 | Panasonic Corp | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 |
Non-Patent Citations (2)
Title |
---|
JPN6014003992; 板井陽俊 他: '外積展開による衝動性眼球運動時の脳波信号における不要信号除去' 電子情報通信学会技術研究報告 ニューロコンピューティング Vol.109 No.280, 20091112, P.7-12, 電子情報通信学会 * |
JPN6014003993; 山内勇次 他: '眼球電池モデルの解析に対応した眼電位(EOG)測定法について' 電子情報通信学会技術研究報告 MEとバイオサイバネティックス Vol.103 No.184, 20030713, P.31-34, 電子情報通信学会 * |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9486156B2 (en) | 2012-03-21 | 2016-11-08 | Panasonic Intellectual Property Management Co., Ltd. | Eye fatigue determination apparatus and eye fatigue determination method |
WO2014068832A1 (en) | 2012-11-02 | 2014-05-08 | Sony Corporation | Image display device and information input device |
US9841812B2 (en) | 2012-11-02 | 2017-12-12 | Sony Corporation | Image display device and information input device |
US9864191B2 (en) | 2013-05-21 | 2018-01-09 | Panasonic Intellectual Property Management Co., Ltd. | Viewer with varifocal lens and video display system |
WO2015159851A1 (ja) * | 2014-04-14 | 2015-10-22 | 株式会社ジェイアイエヌ | 検出ユニット、アイウエア、及び眼電位検出システム |
US10602953B2 (en) | 2015-11-27 | 2020-03-31 | Kabushiki Kaisha Toshiba | Electro-oculographic detector and electro-oculographic detection method |
KR101911630B1 (ko) | 2017-04-05 | 2018-10-24 | 한양대학교 산학협력단 | 안구의 전기 전도도 추정 방법 및 장치 |
JP2019162251A (ja) * | 2018-03-19 | 2019-09-26 | 株式会社東芝 | 眼球回転検出装置、電子機器及びシステム |
US10466781B2 (en) | 2018-03-19 | 2019-11-05 | Kabushiki Kaisha Toshiba | Eye movement detecting device, electronic device and system |
US11054900B2 (en) | 2018-03-19 | 2021-07-06 | Kabushiki Kaisha Toshiba | Eye movement detecting device, electronic device and system |
US11481028B2 (en) | 2018-03-19 | 2022-10-25 | Kabushiki Kaisha Toshiba | Eye movement detecting device, electronic device and system |
US11886635B2 (en) | 2018-03-19 | 2024-01-30 | Kabushiki Kaisha Toshiba | Eye movement detecting device, electronic device and system |
WO2021029342A1 (ja) * | 2019-08-14 | 2021-02-18 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、視線検出システム、視線検出方法および視線検出プログラム |
JP2021029279A (ja) * | 2019-08-14 | 2021-03-01 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、視線検出システム、視線検出方法および視線検出プログラム |
JP7269131B2 (ja) | 2019-08-14 | 2023-05-08 | 株式会社ソニー・インタラクティブエンタテインメント | 情報処理装置、視線検出システム、視線検出方法および視線検出プログラム |
JP2021009719A (ja) * | 2020-10-01 | 2021-01-28 | 株式会社東芝 | 電子機器及び表示方法 |
JP2022059595A (ja) * | 2020-10-01 | 2022-04-13 | 株式会社東芝 | 電子機器及び表示方法 |
JP7309830B2 (ja) | 2020-10-01 | 2023-07-18 | 株式会社東芝 | 電子機器及び表示方法 |
Also Published As
Publication number | Publication date |
---|---|
JP5490664B2 (ja) | 2014-05-14 |
US8449116B2 (en) | 2013-05-28 |
US20110178784A1 (en) | 2011-07-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5490664B2 (ja) | 眼電位推定装置、眼電位算出方法、視線検出装置、ウェアラブルカメラ、ヘッドマウントディスプレイおよび電子めがね | |
JP5613025B2 (ja) | 視線検出装置、視線検出方法、眼電位計測装置、ウェアラブルカメラ、ヘッドマウントディスプレイ、電子めがねおよび眼科診断装置 | |
Holmqvist et al. | RETRACTED ARTICLE: Eye tracking: empirical foundations for a minimal reporting guideline | |
US9439592B2 (en) | Eye tracking headset and system for neuropsychological testing including the detection of brain damage | |
US10314485B2 (en) | Portable google based VOG system with comparative left and right eye ocular response analysis with MTBI analysis using percent of saccade function of smooth pursuit test | |
JP5204781B2 (ja) | 視線検出装置、撮像装置、視線検出方法、プログラム、及び集積回路 | |
US8333475B2 (en) | Electro-oculography measuring device, ophthalmological diagnosis device, eye-gaze tracking device, wearable camera, head-mounted display, electronic eyeglasses, electro-oculography measuring method, and recording medium | |
Otero-Millan et al. | Knowing what the brain is seeing in three dimensions: A novel, noninvasive, sensitive, accurate, and low-noise technique for measuring ocular torsion | |
Hennessey et al. | Noncontact binocular eye-gaze tracking for point-of-gaze estimation in three dimensions | |
JP2014124308A (ja) | 眼電位生成装置、眼電位生成方法およびビューワー | |
Aziz et al. | An assessment of the eye tracking signal quality captured in the HoloLens 2 | |
Rigas et al. | Photosensor oculography: survey and parametric analysis of designs using model-based simulation | |
CN112512402A (zh) | 裂隙灯显微镜以及眼科系统 | |
JP5343790B2 (ja) | 脳活動情報出力装置、脳活動情報出力方法、およびプログラム | |
Tatiyosyan et al. | Standalone cooperation-free OKN-based low vision contrast sensitivity estimation in VR-a pilot study | |
US20220183553A1 (en) | Handheld optical imaging devices and methods | |
Tatler et al. | Eye movement recordings in natural settings | |
Dunn | Required accuracy of gaze tracking for varifocal displays | |
JP4802329B2 (ja) | 眼球位置計測方法及び眼球位置計測装置 | |
JP2012139272A (ja) | 顔表面の運動機能の測定装置及び測定方法並びに測定用補助具 | |
Cercenelli et al. | Quantitative approach for the analysis of fusional convergence using eye-tracking and saclab toolbox | |
Abdulin et al. | Study of Additional Eye-Related Features for Future Eye-Tracking Techniques | |
Abdulin et al. | Custom video-oculography device and its application to fourth purkinje image detection during saccades | |
Szmigiel et al. | Stable distribution in application to fixational eye movement description | |
Burchell et al. | Is a depth camera in agreement with an electromagnetic tracking device when measuring head position? |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130319 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140131 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140226 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5490664 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |