JP2010511281A - 視標追跡の照光 - Google Patents

視標追跡の照光 Download PDF

Info

Publication number
JP2010511281A
JP2010511281A JP2009539209A JP2009539209A JP2010511281A JP 2010511281 A JP2010511281 A JP 2010511281A JP 2009539209 A JP2009539209 A JP 2009539209A JP 2009539209 A JP2009539209 A JP 2009539209A JP 2010511281 A JP2010511281 A JP 2010511281A
Authority
JP
Japan
Prior art keywords
ill
light
control signal
eye
light source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009539209A
Other languages
English (en)
Other versions
JP5284975B2 (ja
Inventor
レンストロム,ベングト
Original Assignee
トビイ テクノロジー エービー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by トビイ テクノロジー エービー filed Critical トビイ テクノロジー エービー
Publication of JP2010511281A publication Critical patent/JP2010511281A/ja
Application granted granted Critical
Publication of JP5284975B2 publication Critical patent/JP5284975B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0008Apparatus for testing the eyes; Instruments for examining the eyes provided with illuminating means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30041Eye; Retina; Ophthalmic
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Eye Examination Apparatus (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Studio Devices (AREA)
  • Position Input By Displaying (AREA)
  • Non-Portable Lighting Devices Or Systems Thereof (AREA)

Abstract

本発明は、自動視標追跡に関し、少なくとも1つの撮像装置(150)は、対象(180)の少なくとも1つの目(181;182)を表している連続する画像データ(DEYE)を記録する。処理ユニット(170)は、前記画像データ(DEYE)を受け取り、これに基づいて前記少なくとも1つの目(181;182)の位置推定を生成するように適合されている。また、前記処理ユニット(170)は制御信号(CILL)を生成し、これが少なくとも1つの光源(140)によって受信される。次に、少なくとも1つの光ビーム(L)を送る照光領域(AILL)の空間位置が、前記制御信号(CILL)の特性によって決まるように、前記少なくとも1つの光源(140)は、少なくとも1つの可変の光ビーム(L)を放射する。詳細には、前記照光領域(AILL)に前記少なくとも1つの目(181;182)の位置推定が含まれるように、前記処理ユニット(170)は前記制御信号(CILL)を生成する。

Description

本発明は、一般に、人の目の位置の自動決定および追跡に関する。より詳細には、本発明は、請求項1のプリアンブル部に記載のシステム、ならびに対応する請求項13のプリアンブル部に記載の方法に関する。また、本発明は、請求項19に記載のコンピュータプログラム、ならびに請求項20に記載のコンピュータ読み取り可能な媒体にも関する。
自動視標追跡(eye tracking)の概念は当業界において公知であり、目および視点の自動追跡を行うために多くのさまざまな技術が開発されてきた。リモートの邪魔にならない(non-obstructive)視標追跡の分野において最も広く使用されている設計は、瞳孔中心角膜反射(PCCR:pupil center corneal reflection:)法をベースにしている。この方法の背後にある基本的な考えは、少なくとも1つの光源(例えば赤外光)を使用して、カメラによって目の一連の画像をキャプチャすることにある。各画像内で、角膜および瞳孔内の光源の反射(輝き)が特定される。次に、輝きから瞳孔の中心までによって定義されるベクトルが使用され、目の注視方向(gaze direction)が推定される。
しかし、対象の目に適切に照光されることを保証するためには、比較的高い光パワーが必要である。これがひいては、エネルギー消費を比較的大きくしてしまう。更に、能力の高い冷却機構(resourceful cooling)と光源が一体化されている光源またはユニットを提供することが必要となる。エネルギー消費と熱の放散は、二重の意味で問題となる。すなわち、所要電力が大きいために、視標追跡装置への電力供給に、標準的なコンピュータ出力インタフェース(例えばUSBフォーマット(USB:Universal Serial Bus)インタフェース)を通常は使用することができなくなる。更に、光源によって生じる高温により、通常は、視標追跡装置に搭載されている電子部品の予想寿命が短くなってしまう。これらの問題は、カメラの視野角を狭めて、光源が、比較的狭い空間部分に照光するだけで済むようにすることによって、多少軽減することができる。しかし、自動視標追跡を可能にするために、対象の目がかなり狭い空間に制限されるため、新たな問題が生じてしまう。
このため、本発明の目的は、上記の問題を解決し、比較的広い空間にいる対象に対して、信頼性の高い自動視標追跡を提供する、電力効率が高く確実な解決策を提供することにある。
本発明の一態様によれば、この目的は、最初に記載のシステムによって達成され、このシステムでは、前記少なくとも1つの光源が、前記少なくとも1つの光源からの少なくとも1つの光ビームを送る照光領域の空間位置を変更するように適合されている。前記少なくとも1つの光源は、制御信号を受け取り、前記制御信号によって指定される照光領域の方に前記少なくとも1つの光ビームを送るように適合されている。前記処理ユニットは、前記照光領域に、前記少なくとも1つの撮像装置によって実際に記録された少なくとも1つの目、あるいは、前記少なくとも1つの目の記録済みの画像に基づいて予想される目の位置の位置推定が含まれるように、前記少なくとも1つの目の前記位置推定に基づいて前記制御信号を生成するように適合されている。
本提案の適応的な光照射方向により、エネルギー消費を比較的低く押さえつつ、大きな操作空間に照光することが可能となる。このように所要エネルギーが少ないことにより、例えばUSBフォーマットのインタフェースなどの従来のコンピュータインターフェースを介してシステムに電力供給することが可能となる。このため、本解決策は、非常に柔軟であり、実装しやすい。
本発明の本態様の好ましい一実施形態によれば、前記少なくとも1つの光源は、前記制御信号に応じて個々に制御可能な複数の発光素子を有する。このため、対象の方に放射される光を効率的に制御することができる。
本発明の本態様の別の好ましい実施形態によれば、前記発光素子は、第1の数の素子の行と第2の数の素子の列とを有するアレイに配置されている。すなわち、このような構成によって、指定された領域への光照射の制御が容易となる。
本発明の本態様の更に別の好ましい実施形態によれば、第1の素子からの前記光が、前記照光領域の第1の部分の方に送られ、第2の素子からの前記光が、前記照光領域の第2の部分の方に送られるように、前記少なくとも1つの光源が、前記発光素子から放射される前記光に影響するように適合されている少なくとも1つのコリメーティングレンズ素子を有する。このため、発光素子のグループを使用して、指定された領域に共に照光することができる。
本発明の本態様の別の好ましい実施形態によれば、上記の実施形態に代えて、あるいはこれに加えて、前記発光素子が互いに異なる向きに配置されている。ここで、第1の素子が、第1の次元において、前記アレイの法平面に対して第1の角度をなす第1の主発光軸を有し、第2の素子が、前記法平面に対する角度が、少なくとも前記第1の次元において前記第1の角度と異なる第2の主発光軸を有する。
本発明の本態様の更に別の好ましい実施形態によれば、前記照光領域が少なくとも一次元で調節可能なように、前記少なくとも1つの光源が、前記制御信号に応じて少なくとも1本の軸を中心に傾斜可能である。別の実施形態では、前記照光領域が少なくとも一次元で調節可能なように、前記少なくとも1つの光源が、前記制御信号に応じて少なくとも1本の軸を中心に傾斜可能な少なくとも1つのミラーの方に光を放射するように構成されている。いずれの場合も、光の線または光の点の投射を、対象の目の動きに追従するように効率的に制御することができる。
本発明の本態様の更に別の好ましい実施形態によれば、前記制御信号は、光が放射される少なくとも1つのオン期間と、光が放射されない少なくとも1つのオフ期間とを指定するために更に適合されている。このため、例えば、少なくとも1つの撮像装置の露出時間中に光が放射されるように、対象の方に放射される光を効率的に制御することができる。
本発明の本態様の別の好ましい実施形態によれば、前記処理ユニットは、入力パラメータを受け取り、これに応じて、前記制御信号の前記オン期間およびオフ期間を設定するように適合されている。これにより、発光を利便性よく制御することができる。
本発明の本態様の更に別の好ましい実施形態によれば、前記制御信号の特性に応じて、所定の素子から放射される前記光の強度を変更可能なように、前記少なくとも1つの光源の少なくとも1つの発光素子のそれぞれが前記制御信号に応じて制御可能である。例えば、前記制御信号は、オン期間の間に放射される光のパワーを規定する光強度パラメータを指定しうる。前記光強度パラメータは、前記オン期間にわたって一定の光強度であっても、この期間に変化する強度値であってもよい。このため、発光を調整するための選択肢が更に広がる。
本発明の別の態様によれば、この目的は、最初に記載の方法によって達成され、この方法では、前記少なくとも1つの光源が、前記少なくとも1つの光源からの少なくとも1つの光ビームを送る照光領域の空間位置を変更するように適合されている。前記方法は、制御信号を受け取るステップと、制御信号に応じて、前記少なくとも1つの光源からの前記少なくとも1つの光ビームを照光領域の方に送るステップと、を有する。前記少なくとも1つの目の前記位置推定に基づいて、前記照光領域に前記位置推定が含まれるように、前記処理ユニットにおいて前記制御信号が生成される。
本方法と、その好ましい実施形態の利点は、本提案のシステムに関する上記の説明から明らかである。
本発明の更に別の態様によれば、この目的は、コンピュータの内部メモリに読み出し可能であり、前記コンピュータ上で実行されると、上で提案した方法を制御するためのソフトウェアを含むコンピュータプログラムによって実現される。
本発明の別の態様によれば、この目的は、上で提案した方法をコンピュータに実行させるように制御するためのプログラムが記録されているコンピュータ読み取り可能な媒体によって実現される。
本発明の更に別の利点、有利な特徴および用途は、以下の説明と従属請求項から明らかとなろう。
本発明の一実施形態に係るシステムの概略図を示す。 本発明の一実施形態に従って提案される光源に含まれる発光素子のアレイを示す。 本発明の実施形態に係る発光素子および光源の異なる構成を示す。 本発明の実施形態に係る発光素子および光源の異なる構成を示す。 本発明の実施形態に係る発光素子および光源の異なる構成を示す。 本発明の実施形態に係る発光素子および光源の異なる構成を示す。 本発明の一実施形態による制御信号のフォーマットを示す。 本発明に係る一般的な視標追跡方法をフローチャートによって示す。
本発明について、例として開示する好ましい実施形態により、添付の図面を参照してより詳しく説明する。
最初に図1を参照すると、同図は、本発明の一実施形態に係るシステムの概略図を示す。このシステムは、対象180の少なくとも1つの目181および182のそれぞれの位置を自動的に登録および追跡するように適合されている。好ましくは、システムは対象180の注視方向を決定し、これにより、例えばコンピュータスクリーン120上の視点Pが求められるように更に適合されている。これにより、対象180は、視点Pの移動シーケンスに応じて、スクリーン120と関連しているコンピュータ装置を制御することができる。
本提案のシステムは、少なくとも1つの撮像装置150(例えばビデオカメラの形など)、少なくとも1つの光源140および処理ユニット170を有する。
撮像装置150は、少なくとも1つの目181および182をそれぞれ表している連続する画像データDEYEを登録するように適合されている。処理ユニット170は、画像データDEYEを受け取り、これに基づいて少なくとも1つの目181および182のそれぞれの位置推定を生成するように適合されている。
光源140は、対象180に光を照射するように配置されており、撮像装置150に対して正確に定義された位置にある。ここで、光源140は、上記のスクリーン120の近くに配置されている視標追跡ユニット160の撮像装置150のすぐ近くに配置されている(co-located)。例えば、視標追跡ユニット160は、スクリーン120のフレーム130に取り付けられる。更に、光源140は、少なくとも1つの光源140からの少なくとも1つの光ビームLを送る照光領域AILLの空間位置を変更するように適合されている。詳細には、光源140は、処理ユニット170から制御信号CILLを受け取り、制御信号CILLによって指定される照光領域AILLの方に少なくとも1つの光ビームLを送るように適合されている。
これに対して、処理ユニット170は、少なくとも1つの目181および182のそれぞれの位置推定に基づいて、照光領域AILLに位置推定が含まれるように、制御信号CILLを生成するように適合されている。図5を参照して後述するように、位置推定は、少なくとも1つの目の表現を含む実際に記録された連続する画像データDEYEによって与えられるか、あるいは、位置推定は、記録済みの連続する画像データDEYEに基づいて予想される目の位置を表す。更に、処理ユニット170は、好ましくは、プログラムが記録されているコンピュータ読み取り可能な媒体175(例えばメモリモジュール)を備えるか、これと関連しており、このプログラムは、処理ユニット170に、上記の手順に従って少なくとも1つの光源を制御させるように適合されている。
図2は、本発明の一実施形態に従って提案される光源140に含まれる発光素子のアレイ240を示す。アレイ240は、第1の数#(例えば10)の素子の行と第2の数#(例えば12)の素子の列とを有する。アレイ240は、制御信号CILLを受け取ることができる入力を有する。アレイ240は、素子の1つ以上のグループが選択的に発光するように、制御信号CILLに応じて発光素子を制御するように更に適合されている。例えば、図2に示すように、4つの発光素子241からなる2つのグループがそれぞれ発光し、対象180上の指定された照光領域AILLの方にそれぞれの光ビームLを送るように、制御信号CILLはアレイ240を制御する。
アレイ240の素子は、好ましくは、発光ダイオード(LED)である。これらの素子は、アレイ240を形成するために、プリント回路基板(または基板)上に表面実装されてもよい。別の実施形態では、発光素子が、回路基板にハンダ付けされるか、またはワイヤ巻きされたスルーホール搭載LEDであってもよい。前者の場合は、LEDは、通常比較的広い光放射ローブ(例えば90°〜100°)を有するが、後者の場合、各LEDは通常レンズ素子を有しており、これが光放射ローブの幅を狭める(例えば5°〜10°)。これについては、図3a,3bを参照して下記で更に詳しく説明する。
図3aは、本発明の第1実施形態に係る光源のアレイ240における発光素子241,242の構成を示す。この実施形態では、光源は、アレイ240の前(例えば発光素子241,242と、目的の照光領域AILLとの間)に取り付けられたコリメーティングレンズ素子310を有する。レンズ素子310は、目的の領域AILL、すなわち、対象180の少なくとも1つの目181および182のそれぞれの位置推定を含む領域AILLが照光されるように、素子241および242から放射される光Lに影響するように適合されている。詳細には、コリメーティングレンズ素子310は、第1の素子241から放射される光が、照光領域AILLの第1の部分A1の方に送られるように、光Lに影響するように適合されている。同様に、第2の素子242から放射される光は、照光領域AILLの第2の部分A2の方に送られる。このため、素子241と素子242は、共に領域AILLに照光する。
当然、光源に複数のコリメーティングレンズ素子310が含まれていてもよい。更に、小型化のために、これらのレンズ素子の1つ以上がいわゆるフレネルレンズであってもよい。
図3aに示す本発明の実施形態におけるアレイ240の発光素子241,242は、好ましくは、プリント回路基板/基板に表面実装されたLEDであってもよい。このタイプの素子は、光放射ローブが通常比較的広く(90°のオーダー)、このため、集束素子(例えば本提案のコリメーティングレンズ)が特に有用となりうる。
図3bは、本発明の第2実施形態に係る光源のアレイ240における発光素子241,241aの構成を示す。ここで、発光素子は、図3aと基本的には同様に(例えば、行と列に、あるいは同心円状に)編成されうる。しかし、図3bに示す実施形態では、発光素子が、互いに異なる向きに配置されている。つまり、第1の素子241aは、第1の次元において、アレイ240の法平面Nに対して第1の角度αをなす第1の主発光軸Aを有する。しかし、第2の素子241は、法平面Nに対する角度が、少なくとも第1の次元において第1の角度αと異なる第2の主発光軸を有する。したがって、第1の発光素子241aと第2の発光素子241が、基本的に全く同じ光学特性を有すると仮定すると、これらの素子は、第1の次元に対して異なる方向に発光し、この方向の差は、素子の主発光軸間の角度差によって与えられる。当然、アレイ240の発光素子が、複数の次元において(例えばアレイ240の行の延長線と列の延長線の両方に対して)互いに異なる主軸を有してもよい。更に、アレイ240の2つ以上の素子が同じ軸を有する場合、すなわち正確に同じ向きである場合も、除外されるわけではない。
図3bに示す本発明の実施形態のアレイ240の発光素子241a,241は、好ましくは、回路基板に、スルーホール搭載されハンダ付けされるか、あるいはワイヤ巻きされたLEDでもよい。このタイプの素子には、通常、個々にレンズ素子を有しており、このため、光放射ローブが比較的狭い(10°のオーダー)。このため、このような素子は、指定された領域AILLの直接照光に適している。
上記の実施形態に代えて、あるいはこれに加えて、少なくとも1つの透明または反射グレーティング素子が使用されてもよく、その際、グレーティングの幾何学的特性に対して放射光の波長が慎重に選択される。すなわち、これにより、グレーティングを通過する異なる光ビーム同士が有効に(constructive)妨害しあう結果、指定された照光領域の方に光を送ることができる。このため、この実施形態では、制御信号CILLの特性が、放射光の波長および/またはグレーティングの幾何学的特性を決定する。
更に別の代替の実施形態では、反射器ベースの光学部品が、指定された照光領域AILLの方に光ビームLを送るために、光源140に使用されてもよい。例えば、光を放射するために、いわゆるラインレーザまたはLEDのアレイが使用されてもよい。ラインレーザ(LEDのアレイ)が、ラインレーザ(LEDのアレイ)の延長線と平行な軸を中心に傾斜可能であるか、あるいは、ラインレーザ(LEDのアレイ)が、凹状の断面を有する長尺状のミラーの方に光を放射するように構成されており、このミラーは、ミラーの長さと、レーザ(LED)によって生成される光の線との両方に略平行な軸を中心に傾斜可能である。
図3cは前者の代替の実施形態に係る、すなわち光源340が制御信号CILLに応じて傾斜可能である本発明の実施形態を示す。一方、図3dは、後者の代替の実施形態に係る、すなわち光源340が固定されているが、光源340の前にあるミラー345が制御信号CILLに応じて傾斜可能である本発明の実施形態を示す。
上記のいずれの場合でも、光の線の投射を、傾斜軸と交差する次元において移動させることができ、これにより、例えば対象の目の対のどのような上下移動にも追従することができる。
指定された領域AILLへの光を更に集光させるために、シングルポイントレーザ(またはLED)が使用されてもよく、この場合、レーザ自体が二次元で調節可能であるか、または、レーザの前にある円形の凹状ミラーが二次元で調節可能である。調整軸は、通常、互いに直交している。このため、光の点の投射を、二次元平面内の任意の点に移動させることができ、これにより、対象の目のどのような空間内の動きにも追従することができる。
図4は、本発明の一実施形態による制御信号CILLのフォーマットを示す図を示す。図の縦軸は、本提案の光源140の特定の発光素子から放射される光Lの強度Iを表し、図の水平軸は時間tを表している。
この場合、光源140が複数の発光素子を有し、これらの素子が、制御信号CILLに応じて、個々に、または2つ以上の素子の集合で制御可能であるとする。制御信号CILLは、光Lが対象の素子から放射されるオン期間を指定する。制御信号CILLは、同様に、光が放射されないオフ期間を指定する。ここで、第1のオン期間tON1がt=0で開始している。この後に、第1のオフ期間tOFF1が続く。続いて、第2のオン期間tON2、第2のオフ期間tOFF2、…のように、このパターンが繰り返される。
図4からわかるように、オン期間tON1,tON2とオフ期間tOFF1,tOFF2は、それぞれ、時間が等しくなくてもよい。好ましくは、オン期間tON1,tON2およびオフ期間tOFF1,tOFF2のそれぞれの期間は、制御信号CILLに応じて変更可能である。これによって、少なくとも1つの撮像装置150の動作に対して発光を最適化することができる。
本発明の好ましい一実施形態によれば、処理ユニット170は、入力パラメータPON−OFF(図1参照)を受け取り、これに応じて、制御信号CILLのオン期間tON1,tON2およびオフ期間tOFF1,tOFF2をそれぞれ設定するように適合されている。このため、オン期間tON1およびtON2が少なくとも1つの撮像装置150の露光と同期されるように、オン期間tON1およびtON2の時間が計測されうる。すなわち、これにより、放射される光パワーを最適に使用することができる。一般に、撮像装置150は、非露光期間に放射される光エネルギーを使用することができないため、オン期間tON1およびtON2のそれぞれの期間を、少なくとも1つの撮像装置150の露光時間よりも短い値か、あるいはこれと等しい値に設定することが更に有利である。
本提案のシステムの性能を更に改善するために、制御信号CILLの特性に応じて強度Iを変更可能なように、光源140の発光素子が、制御信号CILLに応じて制御可能であってもよい。好ましくは、制御信号CILLは、オン期間tONの間に放射される光Lのパワーを規定する光強度パラメータIを指定する。図4に示すように、光強度パラメータIがオン期間tONにわたって一定の値Iであっても、パラメータIが、オン期間tONの間の強度Iの特定の変化(例えば漸増またはパルス幅変調)を指定してもよい。
以上をまとめるために、次に、図5のフローチャートを参照して、本発明による視標追跡システムを制御するための一般的な方法について説明する。
最初のステップ510において、撮像装置によって記録された連続する画像データに、対象の少なくとも1つの目が検出されているかどうかをチェックする。1つ以上の目が検出されたことが判明した場合、ステップ520に移る。しかし、目が検出されなかった場合、ステップ560の処理に進む。
ステップ520において、画像データに基づいて、少なくとも1つの目のそれぞれの位置推定を決定する。好ましくは、ここに記載の処理ユニットは、位置推定に、従来の視標追跡アルゴリズムを適用する。
その後、ステップ530において、少なくとも1つの光源によって対象180に光を照射する。その際、位置推定を含む照光領域の方に少なくとも1つの光ビームを送る。好ましくは、同様にステップ520の後に、ステップ530と並列に実行されるステップ540において、位置推定を含む画像データを記録する。
ステップ530およびステップ540の後にステップ550が続き、ステップ540で記録された画像データを評価し、目を表しているデータが、画像データ内に存在するかどうかを判定する。また、ステップ550において、処理ユニットは、好ましくは従来の視標追跡アルゴリズムを適用する。
その後、ステップ570において、終了基準を満たしているかどうか、例えば、所定のユーザコマンドが受信されたかどうかをチェックする。終了基準を満たしていることが判明した場合、処理は終了する。そうでない場合には、ステップ510の処理に戻る。
ステップ560において、対象の目の少なくとも1つの記録済みの画像に基づいて、少なくとも1つの目の少なくとも1つの位置推定を決定する。この推定は、好ましくは、処理ユニットにより、少なくとも1つの目が存在する記録済みの画像から、動きベクトルを推定することによって決定される。ステップ560の後、上記のステップ530およびステップ540の処理に進む。
図5を参照して説明したプロセスステップと、ステップの任意のサブシーケンスの全ては、プログラムされたコンピュータ装置によって制御され得る。更に、図面を参照して上述した本発明の実施形態は、コンピュータ装置と、コンピュータ装置において実行されるプロセスを備えるが、本発明は、本発明を実施するように適合されたコンピュータプログラム(特に担体にあるコンピュータプログラム)にも拡張される。プログラムは、ソースコード、オブジェクトコード、コード中間ソースの形のほか、例えば部分的にコンパイルされた形、あるいは、本発明に係るプロセスの実装に使用するために適した任意の他の形のオブジェクトコードの形をとってもよい。プログラムは、オペレーティングシステムの一部であっても、独立したアプリケーションであってもよい。担体(Carrier)は、プログラムを伝達することが可能な任意の実体またはデバイスであってもよい。例えば、担体には、フラッシュメモリ、ROM(リードオンリーメモリ)、例えばCD(コンパクトディスク)、半導体ROM、PROM(消去可能PROM)、EEPROM(電気的消去可能PROM)といった記憶媒体、あるいは、例えばフロッピー(登録商標)ディスクまたはハードディスクといった磁気記録媒体が含まれうる。更に、担体は、電気ケーブルまたは光ケーブル、無線あるいは他の手段を介して伝達されうる電気信号または光信号などの伝達可能担体でもよい。プログラムが、ケーブルまたは他のデバイスまたは手段によって直接伝達されうる信号において実施される場合、担体がこのようなケーブルまたは装置または手段によって構成されてもよい。別の実施形態では、担体が、プログラムが組み込まれている集積回路、関連するプロセスを実行するため、あるいは関連するプロセスの実行に使用するように適合された集積回路であってもよい。
「含む/有する」という用語が本明細書で使用される場合、これらは、記載した特徴、整数、ステップまたは構成要素の存在を指すものとする。しかし、これらの用語は、1つ以上の追加の機能、整数、ステップまたは構成要素またはその群の存在または追加を排除するものではない。
本明細書における先行技術の引用は、引用された先行技術がオーストラリアにおける共通の一般的な知識の一部を形成していることを認めるものでも示唆するものでもない。
本発明は、図に記載した実施形態に限定されることはなく、特許請求の範囲内で自由に変形することができる。

Claims (20)

  1. 対象(180)の少なくとも1つの目(181;182)のそれぞれの位置を自動的に記録および追跡するためのシステムであって、
    前記少なくとも1つの目(181;182)を表している連続する画像データ(DEYE)を記録するように適合された少なくとも1つの撮像装置(150)と、
    前記対象(180)に照光するために配置され、それぞれが、前記撮像装置(150)に対して正確に定義された位置にある少なくとも1つの光源(140)と、
    前記画像データ(DEYE)を受け取り、これに基づいて前記少なくとも1つの目(181;182)の位置推定を生成するように適合された処理ユニット(170)とを備え、
    前記少なくとも1つの光源(140)は、
    前記少なくとも1つの光源(140)からの少なくとも1つの光ビーム(L)を送る照光領域(AILL)の空間位置を変更し、
    制御信号(CILL)を受け取り、
    前記制御信号(CILL)によって指定される照光領域(AILL)の方に、前記少なくとも1つの光ビーム(L)を送るように適合されており、
    前記処理ユニット(170)は、前記少なくとも1つの目(181;182)の前記位置推定に基づいて、前記照光領域(AILL)に前記位置推定が含まれるように、前記制御信号(CILL)を生成するように適合されていることを特徴とするシステム。
  2. 前記少なくとも1つの光源(140)は、前記制御信号(CILL)に応じて個々に制御可能な複数の発光素子(241,241a,242)を有することを特徴とする請求項1に記載のシステム。
  3. 前記発光素子(241,241a,242)は、第1の数(#)の素子の行(241)と第2の数(#)の素子の列とを有するアレイ(240)に配置されていることを特徴とする請求項2に記載のシステム。
  4. 第1の素子(241)から放射される前記光が、前記照光領域(AILL)の第1の部分(A1)の方に送られ、第2の素子(242)から放射される前記光が、前記照光領域(AILL)の第2の部分(A2)の方に送られるように、前記少なくとも1つの光源(140)は、前記発光素子から放射される前記光(L)に影響するように適合されている少なくとも1つのコリメーティングレンズ素子(310)を備えることを特徴とする請求項2または3に記載のシステム。
  5. 第1の素子(241a)が、第1の次元において、前記アレイ(240)の法平面(N)に対して第1の角度(α)をなす第1の主発光軸(A)を有し、第2の素子(241)が、前記法平面(N)に対する角度が、少なくとも前記第1の次元において前記第1の角度(α)と異なる第2の主発光軸を有するように、前記発光素子(241)が互いに異なる向きに配置されていることを特徴とする請求項2乃至4のいずれか1項に記載のシステム。
  6. 前記照光領域(AILL)が少なくとも一次元で調節可能なように、前記少なくとも1つの光源(340)が、前記制御信号(CILL)に応じて少なくとも1本の軸を中心に傾斜可能であることを特徴とする請求項1に記載のシステム。
  7. 前記照光領域(AILL)が少なくとも一次元で調節可能なように、前記少なくとも1つの光源(340)が、前記制御信号(CILL)に応じて少なくとも1本の軸を中心に傾斜可能な少なくとも1つのミラー(345)の方に光(L)を放射するように構成されていることを特徴とする請求項1に記載のシステム。
  8. 前記制御信号(CILL)は、前記少なくとも1つの光源(140,340)の少なくとも1つの発光素子(241,241a,242)のそれぞれから光(L)が放射される少なくとも1つのオン期間(tON1,tON2)と、光が放射されない少なくとも1つのオフ期間(tOFF1,tOFF2)とを指定するように適合されていることを特徴とする請求項1乃至7のいずれか1項に記載のシステム。
  9. 前記処理ユニット(170)は、入力パラメータ(PON−OFF)を受け取り、これに応じて、前記制御信号(CILL)の前記オン期間およびオフ期間(tON1,tON2;tOFF1,tOFF2)を設定するように適合されていることを特徴とする請求項8に記載のシステム。
  10. 前記制御信号(CILL)の特性に応じて、所定の素子から放射される前記光(L)の強度(I)を変更可能なように、前記少なくとも1つの光源(140,340)の少なくとも1つの発光素子(241,241a,242)のそれぞれが前記制御信号に応じて制御可能であることを特徴とする請求項1乃至9のいずれか1項に記載のシステム。
  11. 前記制御信号(CILL)は、前記オン期間(tON)の間に放射される前記光(L)のパワーを規定する光強度パラメータ(I)を指定することを特徴とする請求項10に記載のシステム。
  12. 前記光強度パラメータ(I)は、前記オン期間(tON)にわたって一定の値(I)であることを特徴とする請求項11に記載のシステム。
  13. 対象(180)の少なくとも1つの目(181;182)のそれぞれの位置を自動的に記録および追跡するための方法であって、
    前記少なくとも1つの目(181;182)を表している連続する画像データ(DEYE)を、少なくとも1つの撮像装置(150)によって記録するステップと、
    前記撮像装置(150)に対して正確に定義された位置にある少なくとも1つの光源(140)によって前記対象(180)に照光するステップと、
    前記画像データ(DEYE)に基づいて、処理ユニット(170)によって前記少なくとも1つの目(181;182)の位置推定を生成するステップとを有し、
    前記少なくとも1つの光源(140)は、前記少なくとも1つの光源(140)からの少なくとも1つの光ビーム(L)を送る照光領域(AILL)の空間位置を変更するように適合されており、
    前記方法は、
    制御信号(CILL)を受け取るステップと、
    制御信号(CILL)に応じて、前記少なくとも1つの光源(140)からの前記少なくとも1つの光ビーム(L)を照光領域(AILL)の方に送るステップと、
    前記少なくとも1つの目(181;182)の前記位置推定に基づいて、前記照光領域(AILL)に前記位置推定が含まれるように、前記処理ユニット(170)において前記制御信号(CILL)を生成するステップとを有することを特徴とする方法。
  14. 前記制御信号(CILL)は、前記少なくとも1つの光源(140,340)の少なくとも1つの発光素子(241,241a,242)のそれぞれから光(L)が放射される少なくとも1つのオン期間(tON1,tON2)と、光が放射されない少なくとも1つのオフ期間(tOFF1,tOFF2)とを指定することを特徴とする請求項13に記載の方法。
  15. 入力パラメータ(PON−OFF)を受け取り、これに応じて、前記制御信号(CILL)の前記オン期間およびオフ期間(tON1,tON2;tOFF1,tOFF2)を設定するステップを特徴とする請求項14に記載の方法。
  16. 前記制御信号の特性(CILL)に応じて、所定の素子から放射される前記光(L)の強度(I)が変更されるように、前記少なくとも1つの光源(140,340)の少なくとも1つの発光素子(241,241a,242)のそれぞれを、前記制御信号に応じて制御するステップを特徴とする請求項13〜15のいずれか1項に記載の方法。
  17. 前記制御信号(CILL)は、前記オン期間(tON)の間に放射される前記光(L)のパワーを規定する光強度パラメータ(I)を指定することを特徴とする請求項16に記載の方法。
  18. 前記光強度パラメータ(I)は、前記オン期間(tON)にわたって一定の値(I)であることを特徴とする請求項17に記載のシステム。
  19. コンピュータの内部メモリに読み出し可能であり、前記コンピュータ上で実行されると、請求項13〜18のいずれか1項に記載のステップを制御するためのソフトウェアを含むコンピュータプログラム。
  20. 請求項13〜18のいずれか1項に記載のステップをコンピュータに実行させるように制御するためのプログラムが記録されているコンピュータ読み取り可能な媒体(175)。
JP2009539209A 2006-11-29 2007-11-29 視標追跡の照光 Expired - Fee Related JP5284975B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
SE0602545-6 2006-11-29
SE0602545A SE0602545L (en) 2006-11-29 2006-11-29 Eye tracking illumination
US86947006P 2006-12-11 2006-12-11
US60/869,470 2006-12-11
PCT/SE2007/001058 WO2008066460A1 (en) 2006-11-29 2007-11-29 Eye tracking illumination

Publications (2)

Publication Number Publication Date
JP2010511281A true JP2010511281A (ja) 2010-04-08
JP5284975B2 JP5284975B2 (ja) 2013-09-11

Family

ID=40512338

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009539209A Expired - Fee Related JP5284975B2 (ja) 2006-11-29 2007-11-29 視標追跡の照光

Country Status (8)

Country Link
US (1) US8025405B2 (ja)
EP (2) EP2371271A1 (ja)
JP (1) JP5284975B2 (ja)
KR (1) KR101495364B1 (ja)
CN (1) CN101541229B (ja)
AT (1) ATE518476T1 (ja)
SE (1) SE0602545L (ja)
WO (1) WO2008066460A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013528406A (ja) * 2010-03-22 2013-07-11 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 観察者の視線を追跡するシステム及び方法
JP2016059634A (ja) * 2014-09-18 2016-04-25 富士通株式会社 電子機器及び光照射装置
JP2016532396A (ja) * 2013-09-03 2016-10-13 シーイング マシーンズ リミテッド 低電力眼追跡システムおよび眼追跡方法

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10039445B1 (en) 2004-04-01 2018-08-07 Google Llc Biosensors, communicators, and controllers monitoring eye movement and methods for using them
DE102009010263B4 (de) 2009-02-24 2011-01-20 Reiner Kunz Verfahren zur Navigation eines endoskopischen Instruments bei der technischen Endoskopie und zugehörige Vorrichtung
EP2236074B1 (en) 2009-04-01 2021-05-26 Tobii AB Visual display with illuminators for gaze tracking
FR2945434B1 (fr) * 2009-05-12 2012-12-14 Essilor Int Paire de lunettes ophtalmiques adaptee pour caracteriser une convergence des yeux d'un porteur.
US9373123B2 (en) 2009-12-30 2016-06-21 Iheartmedia Management Services, Inc. Wearable advertising ratings methods and systems
US9047256B2 (en) 2009-12-30 2015-06-02 Iheartmedia Management Services, Inc. System and method for monitoring audience in response to signage
US8890946B2 (en) 2010-03-01 2014-11-18 Eyefluence, Inc. Systems and methods for spatially controlled scene illumination
FR2960412B1 (fr) * 2010-05-25 2013-03-22 Essilor Int Dispositif et procede de mesure d'une distance caracteristique de lecture d'un individu en posture naturelle de vision de pres
FR2960413B1 (fr) * 2010-05-25 2013-03-22 Essilor Int Dispositif de mesure d'une distance caracteristique de lecture d'un individu
US20130094712A1 (en) * 2010-07-16 2013-04-18 Amir Said Systems and methods for eye tracking using retroreflector-encoded information
US8885877B2 (en) 2011-05-20 2014-11-11 Eyefluence, Inc. Systems and methods for identifying gaze tracking scene reference locations
US8911087B2 (en) 2011-05-20 2014-12-16 Eyefluence, Inc. Systems and methods for measuring reactions of head, eyes, eyelids and pupils
EP2581034B1 (en) * 2011-10-11 2016-02-17 Tobii AB Eye-tracker illumination
ES2620762T3 (es) 2011-10-27 2017-06-29 Tobii Ab Gestión de potencia en un sistema de rastreo ocular
US8976110B2 (en) 2011-10-27 2015-03-10 Tobii Technology Ab Power management in an eye-tracking system
US8929589B2 (en) 2011-11-07 2015-01-06 Eyefluence, Inc. Systems and methods for high-resolution gaze tracking
US9679215B2 (en) 2012-01-17 2017-06-13 Leap Motion, Inc. Systems and methods for machine control
US8693731B2 (en) 2012-01-17 2014-04-08 Leap Motion, Inc. Enhanced contrast for object detection and characterization by optical imaging
US10691219B2 (en) 2012-01-17 2020-06-23 Ultrahaptics IP Two Limited Systems and methods for machine control
US8638989B2 (en) 2012-01-17 2014-01-28 Leap Motion, Inc. Systems and methods for capturing motion in three-dimensional space
US11493998B2 (en) 2012-01-17 2022-11-08 Ultrahaptics IP Two Limited Systems and methods for machine control
US9070019B2 (en) 2012-01-17 2015-06-30 Leap Motion, Inc. Systems and methods for capturing motion in three-dimensional space
US9501152B2 (en) 2013-01-15 2016-11-22 Leap Motion, Inc. Free-space user interface and control using virtual constructs
CA2870751C (en) * 2012-07-31 2015-08-18 Japan Science And Technology Agency Point-of-gaze detection device, point-of-gaze detecting method, personal parameter calculating device, personal parameter calculating method, program, and computer-readable storage medium
US10585530B2 (en) 2014-09-23 2020-03-10 Neonode Inc. Optical proximity sensor
US9921661B2 (en) 2012-10-14 2018-03-20 Neonode Inc. Optical proximity sensor and associated user interface
US9164625B2 (en) 2012-10-14 2015-10-20 Neonode Inc. Proximity sensor for determining two-dimensional coordinates of a proximal object
US9285893B2 (en) * 2012-11-08 2016-03-15 Leap Motion, Inc. Object detection and tracking with variable-field illumination devices
EP2731049A1 (en) 2012-11-13 2014-05-14 Tobii Technology AB Eye-tracker
US9612656B2 (en) 2012-11-27 2017-04-04 Facebook, Inc. Systems and methods of eye tracking control on mobile device
US9265458B2 (en) 2012-12-04 2016-02-23 Sync-Think, Inc. Application of smooth pursuit cognitive testing paradigms to clinical drug development
US10609285B2 (en) 2013-01-07 2020-03-31 Ultrahaptics IP Two Limited Power consumption in motion-capture systems
US9465461B2 (en) 2013-01-08 2016-10-11 Leap Motion, Inc. Object detection and tracking with audio and optical signals
US9459697B2 (en) 2013-01-15 2016-10-04 Leap Motion, Inc. Dynamic, free-space user interactions for machine control
SE536990C2 (sv) * 2013-01-22 2014-11-25 Crunchfish Ab Förbättrad spårning av ett objekt för styrning av ett beröringsfritt användargränssnitt
US9380976B2 (en) 2013-03-11 2016-07-05 Sync-Think, Inc. Optical neuroinformatics
WO2014200589A2 (en) 2013-03-15 2014-12-18 Leap Motion, Inc. Determining positional information for an object in space
US9916009B2 (en) 2013-04-26 2018-03-13 Leap Motion, Inc. Non-tactile interface systems and methods
US10281987B1 (en) 2013-08-09 2019-05-07 Leap Motion, Inc. Systems and methods of free-space gestural interaction
US9721383B1 (en) 2013-08-29 2017-08-01 Leap Motion, Inc. Predictive information for free space gesture control and communication
US10310597B2 (en) 2013-09-03 2019-06-04 Tobii Ab Portable eye tracking device
US10686972B2 (en) 2013-09-03 2020-06-16 Tobii Ab Gaze assisted field of view control
WO2015034560A1 (en) 2013-09-03 2015-03-12 Tobii Technology Ab Portable eye tracking device
US9632572B2 (en) 2013-10-03 2017-04-25 Leap Motion, Inc. Enhanced field of view to augment three-dimensional (3D) sensory space for free-space gesture interpretation
CN103536285B (zh) * 2013-10-17 2015-09-09 中国人民解放军成都军区总医院 一种基于瞳孔反射的便携式颅内压无创检测装置
US9996638B1 (en) 2013-10-31 2018-06-12 Leap Motion, Inc. Predictive information for free space gesture control and communication
TW201518979A (zh) * 2013-11-15 2015-05-16 Utechzone Co Ltd 手持式眼控接目裝置、及密碼輸入裝置、方法以及電腦可讀取記錄媒體及電腦程式產品
US9613262B2 (en) 2014-01-15 2017-04-04 Leap Motion, Inc. Object detection and tracking for providing a virtual device experience
GB2523356A (en) * 2014-02-21 2015-08-26 Tobii Technology Ab Apparatus and method for robust eye/gaze tracking
US10572008B2 (en) 2014-02-21 2020-02-25 Tobii Ab Apparatus and method for robust eye/gaze tracking
US10204658B2 (en) 2014-07-14 2019-02-12 Sony Interactive Entertainment Inc. System and method for use in playing back panorama video content
US9952883B2 (en) 2014-08-05 2018-04-24 Tobii Ab Dynamic determination of hardware
DE202014103729U1 (de) 2014-08-08 2014-09-09 Leap Motion, Inc. Augmented-Reality mit Bewegungserfassung
KR101619651B1 (ko) 2014-11-26 2016-05-10 현대자동차주식회사 운전자 감시장치 및 그의 조명제어방법
DK179537B1 (en) * 2015-02-04 2019-02-08 Itu Business Development A/S Tin traces and eye tracking methods
EP3259734A4 (en) 2015-02-20 2019-02-20 Seeing Machines Limited GLARE REDUCTION
US10805592B2 (en) * 2016-06-30 2020-10-13 Sony Interactive Entertainment Inc. Apparatus and method for gaze tracking
CN110392539B (zh) * 2017-03-02 2021-06-15 昕诺飞控股有限公司 照明系统和方法
JP7142246B2 (ja) * 2017-08-24 2022-09-27 パナソニックIpマネジメント株式会社 生体計測装置、ヘッドマウントディスプレイ装置、および生体計測方法
TWI647472B (zh) * 2018-01-22 2019-01-11 國立臺灣大學 雙模式視線追蹤方法與系統
EP4085321A4 (en) 2019-12-31 2024-01-24 Neonode Inc. CONTACTLESS TOUCHLESS INPUT SYSTEM
CN116507267A (zh) * 2020-09-22 2023-07-28 苹果公司 用于视网膜眼睛跟踪的多个注视相关照明源
US11503998B1 (en) 2021-05-05 2022-11-22 Innodem Neurosciences Method and a system for detection of eye gaze-pattern abnormalities and related neurological diseases

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1020998A (ja) * 1996-06-28 1998-01-23 Osaka Kagaku Gijutsu Center 位置指示装置
JPH1066678A (ja) * 1996-08-28 1998-03-10 Nippon Telegr & Teleph Corp <Ntt> 非接触視線測定装置
JP2003088500A (ja) * 2001-07-10 2003-03-25 Santen Pharmaceut Co Ltd サルの視野測定システム及び視野測定方法
JP2005185431A (ja) * 2003-12-25 2005-07-14 National Univ Corp Shizuoka Univ 視線検出方法および視線検出装置
JP2006087727A (ja) * 2004-09-24 2006-04-06 Nippon Telegr & Teleph Corp <Ntt> 視線測定方法及び視線測定装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4889422A (en) * 1986-01-28 1989-12-26 George Pavlidis Method and means for detecting dyslexia
JP3289953B2 (ja) * 1991-05-31 2002-06-10 キヤノン株式会社 視線方向検出装置
AUPP048097A0 (en) 1997-11-21 1997-12-18 Xenotech Research Pty Ltd Eye tracking apparatus
US6396461B1 (en) * 1998-08-05 2002-05-28 Microvision, Inc. Personal display with vision tracking
JP4469044B2 (ja) * 2000-01-07 2010-05-26 株式会社ニデック 眼科装置
US6603491B2 (en) * 2000-05-26 2003-08-05 Jerome H. Lemelson System and methods for controlling automatic scrolling of information on a display or screen
CA2545202C (en) * 2003-11-14 2014-01-14 Queen's University At Kingston Method and apparatus for calibration-free eye tracking
EP1850731A2 (en) 2004-08-12 2007-11-07 Elop Electro-Optical Industries Ltd. Integrated retinal imager and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1020998A (ja) * 1996-06-28 1998-01-23 Osaka Kagaku Gijutsu Center 位置指示装置
JPH1066678A (ja) * 1996-08-28 1998-03-10 Nippon Telegr & Teleph Corp <Ntt> 非接触視線測定装置
JP2003088500A (ja) * 2001-07-10 2003-03-25 Santen Pharmaceut Co Ltd サルの視野測定システム及び視野測定方法
JP2005185431A (ja) * 2003-12-25 2005-07-14 National Univ Corp Shizuoka Univ 視線検出方法および視線検出装置
JP2006087727A (ja) * 2004-09-24 2006-04-06 Nippon Telegr & Teleph Corp <Ntt> 視線測定方法及び視線測定装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CSNG199800749023; 伴野 明 Akira TOMONO: '瞳孔の抽出処理と頭部の動きを許容する視線検出装置の試作 Pupil Extraction Processing and Gaze Point D' 電子情報通信学会論文誌 (J76-D-II) 第3号 THE TRANSACTIONS OF THE INSTITUTE OF ELECTRONI 第J76-D-II巻, 199303, P636-P646, 社団法人電子情報通信学会 THE INSTITUTE OF ELECTRO *
JPN6012041062; 伴野 明 Akira TOMONO: '瞳孔の抽出処理と頭部の動きを許容する視線検出装置の試作 Pupil Extraction Processing and Gaze Point D' 電子情報通信学会論文誌 (J76-D-II) 第3号 THE TRANSACTIONS OF THE INSTITUTE OF ELECTRONI 第J76-D-II巻, 199303, P636-P646, 社団法人電子情報通信学会 THE INSTITUTE OF ELECTRO *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013528406A (ja) * 2010-03-22 2013-07-11 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 観察者の視線を追跡するシステム及び方法
JP2016532396A (ja) * 2013-09-03 2016-10-13 シーイング マシーンズ リミテッド 低電力眼追跡システムおよび眼追跡方法
US10321055B2 (en) 2013-09-03 2019-06-11 Seeing Machines Limited Low power eye tracking system and method
JP2016059634A (ja) * 2014-09-18 2016-04-25 富士通株式会社 電子機器及び光照射装置

Also Published As

Publication number Publication date
US20100066975A1 (en) 2010-03-18
ATE518476T1 (de) 2011-08-15
KR101495364B1 (ko) 2015-02-24
US8025405B2 (en) 2011-09-27
JP5284975B2 (ja) 2013-09-11
CN101541229B (zh) 2011-06-15
EP2083670A4 (en) 2010-02-03
EP2371271A1 (en) 2011-10-05
CN101541229A (zh) 2009-09-23
EP2083670A1 (en) 2009-08-05
KR20090098795A (ko) 2009-09-17
SE0602545L (en) 2008-05-30
EP2083670B1 (en) 2011-08-03
WO2008066460A1 (en) 2008-06-05

Similar Documents

Publication Publication Date Title
JP5284975B2 (ja) 視標追跡の照光
JP7206460B2 (ja) 準スパース光学照明
JP4966284B2 (ja) 散乱光を使用して光ナビゲーションを実行するためのシステムおよび方法
CN107577341B (zh) 眼睛追踪器照明
WO2017213052A1 (ja) 測距システム及び測距方法
JP6168870B2 (ja) 撮像装置、カメラシステム及び制御方法
JP6970376B2 (ja) 画像処理システム、及び画像処理方法
JP2011530722A (ja) 温度補償された合焦時間を有する液体レンズ
JP2008158247A (ja) 撮像装置用フラッシュ装置および撮像装置
JP2011530722A5 (ja)
US8426820B2 (en) Image sensor system
KR20220155242A (ko) 센서 모듈 및 이를 포함하는 3차원 영상
JP6447881B2 (ja) 光源装置及び投影装置
TWI691736B (zh) 發光裝置及應用其之圖像採集裝置
JP5737311B2 (ja) コード読取装置及びプログラム
JP2011070197A (ja) パターン生成方法及びパターン生成装置並びにレーザ加工装置
JP2006004632A (ja) 照明装置
JP2016057495A (ja) 撮像システム、照明装置及び制御方法
JP2006277481A (ja) 光学情報読取装置
JP2006313201A (ja) 画像プロジェクタ装置
JP7046144B1 (ja) 光学機器
JP2008003499A (ja) 焦点検出装置、カメラ、および焦点検出方法
JP2023065240A (ja) パターンプロジェクタ、計測装置、制御システム、及び物品の製造方法
JP2021006848A (ja) 電子機器
JP2011191960A (ja) スキャナ装置及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101115

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121003

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130507

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130530

R150 Certificate of patent or registration of utility model

Ref document number: 5284975

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees