JP2016515431A - 視線追跡のための方法 - Google Patents
視線追跡のための方法 Download PDFInfo
- Publication number
- JP2016515431A JP2016515431A JP2016505925A JP2016505925A JP2016515431A JP 2016515431 A JP2016515431 A JP 2016515431A JP 2016505925 A JP2016505925 A JP 2016505925A JP 2016505925 A JP2016505925 A JP 2016505925A JP 2016515431 A JP2016515431 A JP 2016515431A
- Authority
- JP
- Japan
- Prior art keywords
- eye
- box
- sparse
- kernel
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 93
- 210000001747 pupil Anatomy 0.000 claims abstract description 46
- 230000008859 change Effects 0.000 claims abstract description 16
- 238000001914 filtration Methods 0.000 claims abstract description 7
- 238000004364 calculation method Methods 0.000 claims description 74
- 210000003128 head Anatomy 0.000 claims description 36
- 230000001815 facial effect Effects 0.000 claims description 6
- 238000010408 sweeping Methods 0.000 claims description 3
- 238000009432 framing Methods 0.000 claims description 2
- 230000033001 locomotion Effects 0.000 description 48
- 238000012545 processing Methods 0.000 description 19
- 230000000694 effects Effects 0.000 description 15
- 230000006870 function Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 8
- 230000004424 eye movement Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000008901 benefit Effects 0.000 description 6
- 230000002452 interceptive effect Effects 0.000 description 6
- 230000009466 transformation Effects 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000004886 head movement Effects 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 230000006978 adaptation Effects 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 4
- 210000000744 eyelid Anatomy 0.000 description 4
- 210000000887 face Anatomy 0.000 description 4
- 239000011521 glass Substances 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000012937 correction Methods 0.000 description 3
- 238000003708 edge detection Methods 0.000 description 3
- 238000005457 optimization Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 208000003443 Unconsciousness Diseases 0.000 description 2
- 230000009471 action Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 208000001692 Esotropia Diseases 0.000 description 1
- 241001469893 Oxyzygonectes dovii Species 0.000 description 1
- 208000004350 Strabismus Diseases 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 210000001847 jaw Anatomy 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000002187 spin decoupling employing ultra-broadband-inversion sequences generated via simulated annealing Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Ophthalmology & Optometry (AREA)
- Psychiatry (AREA)
- Social Psychology (AREA)
- Image Analysis (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
a.カメラを通して顔のデジタルビデオストリームを得るステップであって、目および/または瞳が認識されて前記目および/または瞳の位置を判断し、前記目および/または瞳は次いで空間定義域における対応するボックスにおいて識別され、ボックスのコンテンツはさらなる計算のための入力である、ステップと;
b.プロセッサによって、ボックスのコンテンツを周波数ドメインコンテンツに変換させるステップと;
c.前記ボックスの周波数ドメインコンテンツに、プロセッサによって1つまたは複数の疎ゾーンを加えて、ボックス内の周波数ドメインエリアの小部分、および、前記1つまたは複数の疎ゾーンを少なくとも部分的に重ね合わせるフィルタリングカーネルを共に包含するステップと;
d.プロセッサによって、それぞれの疎ゾーン内の周波数データと前記カーネルとの乗算を行って、その結果を組み合わせて単一値にするステップと;
e.前記デジタルビデオストリームの各フレームに対して前記単一値を得る上記ステップ(a)〜(d)を繰り返すステップであって、前記単一値の変動は時間による視線方向の変化の典型である、ステップと、を含む。
空間定義域における対応するボックスにおいて目または瞳を識別しかつ当該目または瞳をフレーミングするステップであって、ボックスのサイズは前記カメラに対する顔の位置および向きの関数であり、ボックスのコンテンツはさらなる計算のための入力である、ステップと;
プロセッサによって、ボックスのコンテンツを周波数ドメインコンテンツに変換させるステップと;
前記ボックスの周波数ドメインコンテンツに、プロセッサによって1つまたは複数の疎ゾーンを加えて、ボックス内の周波数ドメインエリアの小部分、および、前記1つまたは複数の疎ゾーンを少なくとも部分的に重ね合わせるフィルタリングカーネルを共に包含するステップと;
プロセッサによって、それぞれの疎ゾーン内の周波数データと前記カーネルとの乗算を行って、その結果を組み合わせてそれぞれの疎ゾーンの単一値にするステップと;
前記デジタルビデオストリームの各フレームに対して前記単一値を得る上記ステップ(a)〜(d)を繰り返すステップであって、前記単一値の変動は時間に伴う視線方向の変化の典型である、ステップと、を含む。
Claims (20)
- a.カメラを通して顔のデジタルビデオストリームを得るステップであって、目および/または瞳が認識されて前記目および/または瞳の位置を判断し、前記目および/または瞳は次いで空間定義域における対応するボックスにおいて識別され、前記ボックスのコンテンツはさらなる計算のための入力である、ステップと、
b.プロセッサによって、前記ボックスの前記コンテンツを周波数ドメインコンテンツに変換させるステップと、
c.前記ボックスの前記周波数ドメインコンテンツに、プロセッサによって1つまたは複数の疎ゾーンを加えて、ボックス内の周波数ドメインエリアの小部分、および、前記1つまたは複数の疎ゾーンを少なくとも部分的に重ね合わせるフィルタリングカーネルを共に包含するステップと、
d.プロセッサによって、それぞれの疎ゾーン内の周波数データと前記カーネルとの乗算を行って、その結果を組み合わせて単一値にするステップと、
e.前記デジタルビデオストリームの各フレームに対して前記単一値を得る上記ステップ(a)〜(d)を繰り返すステップであって、前記単一値の変動は時間による視線方向の変化の典型である、ステップと、を含む、視線追跡のための方法。 - プロセッサによって、頭の向き、および、場合により、前記瞳および目の前記位置からさらなる顔の特徴を予測することをさらに含む、請求項1に記載の方法。
- それぞれの目に対して光条件のタイプ、および、ユーザの目のタイプを分類するために所定の分類器を使用することをさらに含む、請求項2に記載の方法。
- 前記ボックスはそれぞれの瞳に対して中央に置かれる、請求項1に記載の方法。
- 前記ボックスは1つの目に対してのみ施される、請求項1に記載の方法。
- 初期化における視線方向の較正をさらに含む、請求項1に記載の方法。
- 前記較正は、ゲインおよびオフセットの直接的な較正である、請求項6に記載の方法。
- 前記較正は、一定時間に前記単一値を正規化するように行われる、請求項6に記載の方法。
- 前記条件のために保存された較正によって前記ユーザの前記目に対する分類器のリアルタイムの教育を組み合わせることによって、較正は保存され、再較正する必要ないユーザ認識を可能にする、請求項6に記載の方法。
- 前記カーネルは2次元フィルタ、例えば、ガボールフィルタを含む、請求項1に記載の方法。
- 目を中心にした前記ボックスを定める状態、前記カメラに対する顔の位置、および、向きを、前記デジタルビデオストリームからの最終視線計算サイクルの終了後に、プロセッサによって更新することをさらに含む、請求項2に記載の方法。
- 前記デジタルビデオストリームからの最終視線計算サイクルの終了後に、それぞれの視線方向およびそれぞれの目に対して使用される前記疎ゾーンおよびカーネルの判断を繰り返すことをさらに含む、請求項11に記載の方法。
- ステップ(b)は離散フーリエ変換を採り入れるプロセッサによって行われる、請求項1に記載の方法。
- ステップ(b)は高速フーリエ変換を採り入れるプロセッサによって行われる、請求項1に記載の方法。
- ステップ(b)はGoertzelアルゴリズムを採り入れるプロセッサによって行われる、請求項1に記載の方法。
- 前記単一値は疎ゾーン内の値の合計である、請求項1に記載の方法。
- それぞれの疎ゾーンは単一チャネルに対応し、ステップ(e)はフレームごとに変化する値の単一のベクトルをもたらす、請求項1に記載の方法。
- 単一値へと処理される値の配列を生じさせるために、プロセッサによってカーネルパラメータを掃引することをさらに含む、請求項17に記載の方法。
- 複数の所与の疎周波数ゾーンおよびカーネルの場合、プロセッサによって計算を並列に行うことをさらに含む、請求項1に記載の方法。
- ビデオストリームを生じさせるように構成される少なくとも1つのデジタルカメラ、および、少なくとも1つのプロセッサを備えるデバイスを動作させて、前記ビデオストリームにおいて顔が捕獲される時に視線追跡を得るための方法であって、
a.空間定義域における対応するボックスにおいて目または瞳を識別しかつ前記目または瞳をフレーミングするステップであって、前記ボックスのサイズは前記カメラに対する顔の位置および向きの関数であり、前記ボックスのコンテンツはさらなる計算のための入力である、ステップと、
b.プロセッサによって、前記ボックスのコンテンツを周波数ドメインコンテンツに変換させるステップと、
c.前記ボックスの前記周波数ドメインコンテンツに、プロセッサによって1つまたは複数の疎ゾーンを加えて、ボックス内の周波数ドメインエリアの小部分、および、前記1つまたは複数の疎ゾーンを少なくとも部分的に重ね合わせるフィルタリングカーネルを共に包含するステップと、
d.プロセッサによって、それぞれの疎ゾーン内の周波数データと前記カーネルとの乗算を行って、その結果を組み合わせてそれぞれの疎ゾーンの単一値にするステップと、
e.前記デジタルビデオストリームの各フレームに対して前記単一値を得る上記ステップ(a)〜(d)を繰り返すステップであって、前記単一値の変動は時間に伴う視線方向の変化の典型である、ステップと、を含む、方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP13162802.6 | 2013-04-08 | ||
EP13162802.6A EP2790126B1 (en) | 2013-04-08 | 2013-04-08 | Method for gaze tracking |
PCT/IB2014/060520 WO2014167491A1 (en) | 2013-04-08 | 2014-04-08 | Method for gaze tracking |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016515431A true JP2016515431A (ja) | 2016-05-30 |
JP6288530B2 JP6288530B2 (ja) | 2018-03-07 |
Family
ID=48128096
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016505925A Active JP6288530B2 (ja) | 2013-04-08 | 2014-04-08 | 視線追跡のための方法 |
Country Status (10)
Country | Link |
---|---|
US (2) | US9811157B2 (ja) |
EP (1) | EP2790126B1 (ja) |
JP (1) | JP6288530B2 (ja) |
KR (1) | KR20150143584A (ja) |
CN (1) | CN105247539B (ja) |
AU (1) | AU2014252252B2 (ja) |
HK (1) | HK1214668A1 (ja) |
IL (1) | IL241948B (ja) |
TW (1) | TWI594193B (ja) |
WO (1) | WO2014167491A1 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020507864A (ja) * | 2017-02-17 | 2020-03-12 | コジセン エッセエッレエッレ | コンテンツ検出のための画像処理方法 |
US10628947B2 (en) | 2016-11-22 | 2020-04-21 | Samsung Electronics Co., Ltd. | Method and apparatus for tracking eyes of user and method of generating inverse-transform image |
Families Citing this family (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10884577B2 (en) * | 2013-01-15 | 2021-01-05 | Poow Innovation Ltd. | Identification of dynamic icons based on eye movement |
US9958938B2 (en) * | 2014-01-24 | 2018-05-01 | Sony Corporation | Gaze tracking for a mobile device |
US10332229B2 (en) | 2014-05-12 | 2019-06-25 | Palo Alto Research Center Incorporated | System and method for high performance k-means clustering on GPU with smart kernels |
US9558094B2 (en) * | 2014-05-12 | 2017-01-31 | Palo Alto Research Center Incorporated | System and method for selecting useful smart kernels for general-purpose GPU computing |
US10682038B1 (en) | 2014-09-19 | 2020-06-16 | Colorado School Of Mines | Autonomous robotic laparoscope based on eye tracking |
WO2016072965A1 (en) * | 2014-11-03 | 2016-05-12 | Bayerische Motoren Werke Aktiengesellschaft | Method and system for calibrating an eye tracking system |
KR102469507B1 (ko) * | 2014-12-17 | 2022-11-22 | 소니그룹주식회사 | 정보 처리 장치, 정보 처리 방법 및 프로그램 |
CN106157251B (zh) * | 2015-04-01 | 2018-10-26 | 武汉大学 | 一种基于柯西正则化的人脸超分辨率方法 |
CN104850228B (zh) * | 2015-05-14 | 2018-07-17 | 上海交通大学 | 基于移动终端的锁定眼球的注视区域的方法 |
US9829976B2 (en) * | 2015-08-07 | 2017-11-28 | Tobii Ab | Gaze direction mapping |
US9857871B2 (en) | 2015-09-04 | 2018-01-02 | Sony Interactive Entertainment Inc. | Apparatus and method for dynamic graphics rendering based on saccade detection |
EP3353630B1 (en) | 2015-09-24 | 2021-05-26 | Tobii AB | Eye-tracking enabled wearable devices |
US10565446B2 (en) | 2015-09-24 | 2020-02-18 | Tobii Ab | Eye-tracking enabled wearable devices |
US10220172B2 (en) | 2015-11-25 | 2019-03-05 | Resmed Limited | Methods and systems for providing interface components for respiratory therapy |
US10740710B2 (en) * | 2016-03-25 | 2020-08-11 | Nebbiolo Technologies, Inc. | Fog computing facilitated flexible factory |
US10192528B2 (en) | 2016-03-31 | 2019-01-29 | Sony Interactive Entertainment Inc. | Real-time user adaptive foveated rendering |
US10169846B2 (en) * | 2016-03-31 | 2019-01-01 | Sony Interactive Entertainment Inc. | Selective peripheral vision filtering in a foveated rendering system |
US10401952B2 (en) | 2016-03-31 | 2019-09-03 | Sony Interactive Entertainment Inc. | Reducing rendering computation and power consumption by detecting saccades and blinks |
US10372205B2 (en) | 2016-03-31 | 2019-08-06 | Sony Interactive Entertainment Inc. | Reducing rendering computation and power consumption by detecting saccades and blinks |
EP3236277B1 (en) | 2016-04-18 | 2021-12-01 | Centre Hospitalier Universitaire Vaudois (CHUV) | Differentiated tissue excitation by mri using binomial off-resonance 1-1 rf pulses |
CN109416572A (zh) | 2016-04-29 | 2019-03-01 | 托比股份公司 | 启用眼睛跟踪的可穿戴设备 |
CN106713764A (zh) * | 2017-01-24 | 2017-05-24 | 维沃移动通信有限公司 | 一种拍照方法及移动终端 |
EP3364342A1 (en) * | 2017-02-17 | 2018-08-22 | Cogisen SRL | Method for image processing and video compression |
KR20200055704A (ko) * | 2017-09-20 | 2020-05-21 | 매직 립, 인코포레이티드 | 눈 추적을 위한 개인화된 뉴럴 네트워크 |
CN107622248B (zh) * | 2017-09-27 | 2020-11-10 | 威盛电子股份有限公司 | 一种注视识别及互动方法与装置 |
ES2789583T3 (es) * | 2017-12-06 | 2020-10-26 | Essilor Int | Método y aparato para determinar la postura de referencia de la cabeza de un sujeto |
JP6973258B2 (ja) * | 2018-04-13 | 2021-11-24 | オムロン株式会社 | 画像解析装置、方法およびプログラム |
WO2019218274A1 (zh) * | 2018-05-16 | 2019-11-21 | 深圳阜时科技有限公司 | 一种光源模组、图像获取装置、身份识别装置及电子设备 |
US11353952B2 (en) | 2018-11-26 | 2022-06-07 | Tobii Ab | Controlling illuminators for optimal glints |
CN110309846A (zh) * | 2019-04-26 | 2019-10-08 | 哈尔滨理工大学 | 一种基于深度空间域网络的图像识别方法 |
US11307409B2 (en) * | 2019-05-21 | 2022-04-19 | Google Llc | Methods and systems to track a gaze of an eye |
TWI719490B (zh) | 2019-05-28 | 2021-02-21 | 國立中正大學 | 影像缺陷條紋之移除方法及其系統 |
CN113139411A (zh) * | 2020-01-20 | 2021-07-20 | 北京芯海视界三维科技有限公司 | 实现信息统计的方法、装置和产品 |
CN114511894A (zh) * | 2020-10-28 | 2022-05-17 | 北京京东方光电科技有限公司 | 瞳孔中心坐标的获取系统及获取方法 |
CN112749655A (zh) * | 2021-01-05 | 2021-05-04 | 风变科技(深圳)有限公司 | 视线追踪方法、装置、计算机设备和存储介质 |
US11947717B2 (en) * | 2021-01-22 | 2024-04-02 | Blink Technologies Inc. | Gaze estimation systems and methods using relative points of regard |
CN113208558B (zh) * | 2021-04-30 | 2022-10-21 | 南昌虚拟现实研究院股份有限公司 | 眼球追踪方法、装置、电子设备及存储介质 |
KR20230001715A (ko) * | 2021-06-29 | 2023-01-05 | 삼성전자주식회사 | 시선 방향 인식 시에 에러를 보정하는 전자 장치 및 전자 장치의 동작 방법 |
GB2608705B (en) * | 2021-06-30 | 2023-11-01 | Apple Inc | Eye tracking data filtering |
EP4113464A1 (en) | 2021-06-30 | 2023-01-04 | Tobii AB | An eye tracking system |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002352228A (ja) * | 2001-05-25 | 2002-12-06 | Toshiba Corp | 画像処理システム及びこれを用いた運転支援システム |
JP2008206830A (ja) * | 2007-02-27 | 2008-09-11 | Tokyo Univ Of Science | 統合失調症診断装置及びプログラム |
JP2009279099A (ja) * | 2008-05-20 | 2009-12-03 | Asahi Kasei Corp | 瞬目種別識別装置、瞬目種別識別方法、及び瞬目種別識別プログラム |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6437758B1 (en) * | 1996-06-25 | 2002-08-20 | Sun Microsystems, Inc. | Method and apparatus for eyetrack—mediated downloading |
US7091471B2 (en) * | 2004-03-15 | 2006-08-15 | Agilent Technologies, Inc. | Using eye detection for providing control and power management of electronic devices |
EP2003759B1 (de) * | 2007-06-14 | 2020-03-04 | SMA Solar Technology AG | Verfahren zur Inselnetzerkennung |
US8200022B2 (en) * | 2008-03-24 | 2012-06-12 | Verint Systems Ltd. | Method and system for edge detection |
US20100010370A1 (en) * | 2008-07-09 | 2010-01-14 | De Lemos Jakob | System and method for calibrating and normalizing eye data in emotional testing |
US20110205148A1 (en) * | 2010-02-24 | 2011-08-25 | Corriveau Philip J | Facial Tracking Electronic Reader |
US9901828B2 (en) * | 2010-03-30 | 2018-02-27 | Sony Interactive Entertainment America Llc | Method for an augmented reality character to maintain and exhibit awareness of an observer |
US9213405B2 (en) * | 2010-12-16 | 2015-12-15 | Microsoft Technology Licensing, Llc | Comprehension and intent-based content for augmented reality displays |
US9064308B2 (en) * | 2011-04-13 | 2015-06-23 | Raytheon Company | System and method for residual analysis of images |
EP2587342A1 (en) * | 2011-10-28 | 2013-05-01 | Tobii Technology AB | Method and system for user initiated query searches based on gaze data |
WO2013066334A1 (en) * | 2011-11-03 | 2013-05-10 | Intel Corporation | Eye gaze based image capture |
CN103164022B (zh) * | 2011-12-16 | 2016-03-16 | 国际商业机器公司 | 多指触摸方法和装置、便携式终端设备 |
US8710986B2 (en) * | 2012-01-19 | 2014-04-29 | Utechzone Co., Ltd. | Gaze tracking password input method and device utilizing the same |
EP2696259B1 (en) * | 2012-08-09 | 2021-10-13 | Tobii AB | Fast wake-up in a gaze tracking system |
US9424467B2 (en) * | 2013-03-14 | 2016-08-23 | Disney Enterprises, Inc. | Gaze tracking and recognition with image location |
CN103356163B (zh) * | 2013-07-08 | 2016-03-30 | 东北电力大学 | 基于视频图像和人工神经网络的凝视点测量装置及其方法 |
-
2013
- 2013-04-08 EP EP13162802.6A patent/EP2790126B1/en active Active
-
2014
- 2014-04-07 TW TW103112702A patent/TWI594193B/zh active
- 2014-04-08 JP JP2016505925A patent/JP6288530B2/ja active Active
- 2014-04-08 CN CN201480030894.7A patent/CN105247539B/zh active Active
- 2014-04-08 KR KR1020157031855A patent/KR20150143584A/ko not_active Application Discontinuation
- 2014-04-08 WO PCT/IB2014/060520 patent/WO2014167491A1/en active Application Filing
- 2014-04-08 US US14/247,589 patent/US9811157B2/en active Active
- 2014-04-08 AU AU2014252252A patent/AU2014252252B2/en active Active
-
2015
- 2015-10-07 IL IL241948A patent/IL241948B/en active IP Right Grant
-
2016
- 2016-03-03 HK HK16102452.9A patent/HK1214668A1/zh unknown
-
2017
- 2017-09-29 US US15/720,355 patent/US20180032135A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002352228A (ja) * | 2001-05-25 | 2002-12-06 | Toshiba Corp | 画像処理システム及びこれを用いた運転支援システム |
JP2008206830A (ja) * | 2007-02-27 | 2008-09-11 | Tokyo Univ Of Science | 統合失調症診断装置及びプログラム |
JP2009279099A (ja) * | 2008-05-20 | 2009-12-03 | Asahi Kasei Corp | 瞬目種別識別装置、瞬目種別識別方法、及び瞬目種別識別プログラム |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10628947B2 (en) | 2016-11-22 | 2020-04-21 | Samsung Electronics Co., Ltd. | Method and apparatus for tracking eyes of user and method of generating inverse-transform image |
US11417003B2 (en) | 2016-11-22 | 2022-08-16 | Samsung Electronics Co., Ltd. | Method and apparatus for tracking eyes of user and method of generating inverse-transform image |
JP2020507864A (ja) * | 2017-02-17 | 2020-03-12 | コジセン エッセエッレエッレ | コンテンツ検出のための画像処理方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105247539A (zh) | 2016-01-13 |
CN105247539B (zh) | 2018-12-21 |
TW201506806A (zh) | 2015-02-16 |
US20140300538A1 (en) | 2014-10-09 |
JP6288530B2 (ja) | 2018-03-07 |
IL241948B (en) | 2019-03-31 |
US9811157B2 (en) | 2017-11-07 |
EP2790126B1 (en) | 2016-06-01 |
TWI594193B (zh) | 2017-08-01 |
WO2014167491A1 (en) | 2014-10-16 |
AU2014252252B2 (en) | 2018-12-06 |
AU2014252252A1 (en) | 2015-10-29 |
US20180032135A1 (en) | 2018-02-01 |
KR20150143584A (ko) | 2015-12-23 |
EP2790126A1 (en) | 2014-10-15 |
HK1214668A1 (zh) | 2016-07-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6288530B2 (ja) | 視線追跡のための方法 | |
US11170210B2 (en) | Gesture identification, control, and neural network training methods and apparatuses, and electronic devices | |
US11747898B2 (en) | Method and apparatus with gaze estimation | |
CN110032271B (zh) | 对比度调节装置及其方法、虚拟现实设备及存储介质 | |
Corcoran et al. | Real-time eye gaze tracking for gaming design and consumer electronics systems | |
US20170045950A1 (en) | Gesture Recognition Systems | |
US11610289B2 (en) | Image processing method and apparatus, storage medium, and terminal | |
WO2022134971A1 (zh) | 一种降噪模型的训练方法及相关装置 | |
EP4024270A1 (en) | Gesture recognition method, electronic device, computer-readable storage medium, and chip | |
JP2017523498A (ja) | 効率的なフォレストセンシングに基づくアイトラッキング | |
EP2790130A1 (en) | Method for object recognition | |
CN115661336A (zh) | 一种三维重建方法及相关装置 | |
Wan et al. | Robust and accurate pupil detection for head-mounted eye tracking | |
Jankó et al. | Improving human-computer interaction by gaze tracking | |
CN117274383A (zh) | 视点预测方法及装置、电子设备和存储介质 | |
Kim et al. | Gaze estimation using a webcam for region of interest detection | |
Li et al. | Lightweight neural network for enhancing imaging performance of under-display camera | |
CN116686006A (zh) | 基于可变形模型的三维扫描配准 | |
Yang et al. | Spatialgaze: towards spatial gaze tracking for extended reality | |
CN114546112B (zh) | 一种注视点估计方法、装置、存储介质 | |
US20240119570A1 (en) | Machine learning model training using synthetic data for under-display camera (udc) image restoration | |
US20240135673A1 (en) | Machine learning model training using synthetic data for under-display camera (udc) image restoration | |
Gu et al. | Quality Assessment of Visual Content | |
Carapencea et al. | Real-time gaze tracking with a single camera | |
CN116917947A (zh) | 像素对齐的体积化身 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170221 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170501 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170419 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170707 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170718 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171013 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180124 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6288530 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |