JP6770488B2 - 注視対象物推定装置、注視対象物推定方法、およびプログラム - Google Patents
注視対象物推定装置、注視対象物推定方法、およびプログラム Download PDFInfo
- Publication number
- JP6770488B2 JP6770488B2 JP2017115785A JP2017115785A JP6770488B2 JP 6770488 B2 JP6770488 B2 JP 6770488B2 JP 2017115785 A JP2017115785 A JP 2017115785A JP 2017115785 A JP2017115785 A JP 2017115785A JP 6770488 B2 JP6770488 B2 JP 6770488B2
- Authority
- JP
- Japan
- Prior art keywords
- sight
- line
- driver
- gaze object
- gaze
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Traffic Control Systems (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Eye Examination Apparatus (AREA)
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
(1)固視微動・・・移動速度が0〜300°/秒の視線移動
(2)跳躍運動(サッカード)・・・移動速度が300〜600°/秒の視線移動
(3)振動ノイズ・・・移動速度が600°/秒〜の視線移動
固視微動は、運転者が視線をあまり動かしていない状態であり、このときに運転者が注視行動をとっていると判断される。跳躍運動は、視線の動きが大きい場合であり、ある方向への固視微動から別の方向への固視微動へと移行する際に見られる視線の動きである。なお、ここで示した視線の移動速度の具体的な数値範囲は一例であり、「固視微動」「跳躍運動」「振動ノイズ」を分類する数値範囲は、システムの開発者・運用者が適宜設定してよい。
10 カメラ
11 モデル記憶部
12 制御部
13 視線検出部
14 注視対象物決定部
15 出力部
Claims (8)
- 運転者を撮影するカメラと、
前記カメラにて撮影した映像から前記運転者の視線を逐次検出する視線検出部と、
前記運転者の視線の方向、及び、その移動履歴を入力とし、注視対象物を出力とするモデルを記憶した記憶部と、
前記視線検出部にて検出した視線の方向及び前記移動履歴を前記モデルに適用して、前記運転者が注視した注視対象物を求める注視対象物決定部と、
を備える注視対象物推定装置。 - 前記モデルは、前記運転者の視線の方向、及び、前記移動履歴に加え、前記運転者の顔向きを入力とするモデルである請求項1に記載の注視対象物推定装置。
- 前記注視対象物決定部は、前記視線の移動速度に応じて、視線の固視微動と視線の跳躍運動とを検出し、現在運転者の視線が固視微動をしている位置に対して視線が跳躍運動をした方向を前記移動履歴として用いて、前記注視対象物を求める請求項1または2に記載の注視対象物推定装置。
- 前記注視対象物決定部は、前記視線の移動速度に応じて、視線の固視微動と視線の跳躍運動とを検出し、現在運転者の視線が固視微動をしている位置に対して視線が跳躍運動をする前の固視微動の位置を前記移動履歴として用いて、前記注視対象物を求める請求項1または2に記載の注視対象物推定装置。
- 前記注視対象物決定部は、前記視線の移動速度に応じて、視線の固視微動と視線の跳躍運動とを検出し、現在運転者の視線が固視微動をしている位置に対して視線が跳躍運動をする前の固視微動において運転者が注視していた対象物を前記移動履歴として用いて、前記注視対象物を求める請求項1または2に記載の注視対象物推定装置。
- 前記注視対象物決定部は、前記視線の移動速度に応じて、視線の固視微動と視線の跳躍運動とを検出し、(1)現在運転者の視線が固視微動をしている位置に対して視線が跳躍運動をした方向、(2)前記跳躍運動をする前の固視微動の位置、(3)前記跳躍運動をする前の固視微動において注視していた対象物、のうちのいずれか2つまたは全部の組合せを前記移動履歴として用いて、前記注視対象物を求める請求項1または2に記載の注視対象物推定装置。
- 車両に搭載されたカメラにて撮影された映像から運転者の視線を逐次検出するステップと、
記憶部から、前記運転者の視線の方向、及び、その移動履歴を入力とし、注視対象物を出力とするモデルを読み出すステップと、
前記映像から検出した視線の方向及び前記移動履歴を前記モデルに適用して、前記運転者が注視した注視対象物を求めるステップと、
を備える注視対象物推定方法。 - 車両に搭載されたカメラにて撮影された映像に基づいて運転者が注視している対象物を推定するためのプログラムであって、コンピュータに、
前記映像から前記運転者の視線を逐次検出するステップと、
記憶部から、前記運転者の視線の方向、及び、その移動履歴を入力とし、注視対象物を出力とするモデルを読み出すステップと、
前記映像から検出した視線の方向及び前記移動履歴を前記モデルに適用して、前記運転者が注視した注視対象物を求めるステップと、
を実行させるプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017115785A JP6770488B2 (ja) | 2017-06-13 | 2017-06-13 | 注視対象物推定装置、注視対象物推定方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017115785A JP6770488B2 (ja) | 2017-06-13 | 2017-06-13 | 注視対象物推定装置、注視対象物推定方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019003312A JP2019003312A (ja) | 2019-01-10 |
JP6770488B2 true JP6770488B2 (ja) | 2020-10-14 |
Family
ID=65007906
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017115785A Active JP6770488B2 (ja) | 2017-06-13 | 2017-06-13 | 注視対象物推定装置、注視対象物推定方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6770488B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7432198B2 (ja) * | 2019-06-03 | 2024-02-16 | 学校法人早稲田大学 | 状況認識推定システム及び運転支援システム |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014077814A (ja) * | 2011-02-14 | 2014-05-01 | Panasonic Corp | 表示制御装置および表示制御方法 |
JP2014181927A (ja) * | 2013-03-18 | 2014-09-29 | Aisin Aw Co Ltd | 情報提供装置、及び情報提供プログラム |
JP6187155B2 (ja) * | 2013-10-28 | 2017-08-30 | 株式会社デンソーアイティーラボラトリ | 注視対象物推定装置 |
JP5850092B2 (ja) * | 2014-06-05 | 2016-02-03 | 日本電気株式会社 | 表示装置、制御方法及びプログラム |
JP2017072896A (ja) * | 2015-10-05 | 2017-04-13 | パイオニア株式会社 | 情報処理装置、情報処理方法、情報処理プログラム及び記録媒体 |
-
2017
- 2017-06-13 JP JP2017115785A patent/JP6770488B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019003312A (ja) | 2019-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20190065872A1 (en) | Behavior recognition apparatus, learning apparatus, and method and program therefor | |
EP3491493B1 (en) | Gesture based control of autonomous vehicles | |
US9390337B2 (en) | Alertness level detection apparatus and alertness level detection method | |
US10417782B2 (en) | Corneal reflection position estimation system, corneal reflection position estimation method, corneal reflection position estimation program, pupil detection system, pupil detection method, pupil detection program, gaze detection system, gaze detection method, gaze detection program, face orientation detection system, face orientation detection method, and face orientation detection program | |
CN111566612A (zh) | 基于姿势和视线的视觉数据采集系统 | |
US20160004321A1 (en) | Information processing device, gesture detection method, and gesture detection program | |
US10068143B2 (en) | Method for calibrating a camera for a gaze direction detection in a vehicle, device for a motor vehicle having a camera and at least one further element, and computer program product | |
CN106406515B (zh) | 推测车辆乘客视线的方法和机构 | |
US10719133B2 (en) | Apparatus and method for determining an intended target | |
WO2013145223A1 (ja) | 画像認識装置、画像認識方法、画像認識プログラム、及び記録媒体 | |
JP6479272B1 (ja) | 視線方向較正装置、視線方向較正方法および視線方向較正プログラム | |
CN110031975B (zh) | 在车辆中校准增强现实眼镜的方法和系统与增强现实眼镜 | |
US20180241970A1 (en) | Driving assistance method and driving assistance device and program using same | |
WO2019097595A1 (ja) | 車外コミュニケーション装置、車外コミュニケーション方法、情報処理装置、及び車外コミュニケーションプログラム | |
JP2016091192A (ja) | 虚像表示装置、制御方法、プログラム、及び記憶媒体 | |
JP6770488B2 (ja) | 注視対象物推定装置、注視対象物推定方法、およびプログラム | |
JP2019114902A (ja) | 半導体装置、撮像システム、及びプログラム | |
US20230300290A1 (en) | Information display system, information display method, and non-transitory recording medium | |
JP4568024B2 (ja) | 眼球運動測定装置、及び眼球運動測定プログラム | |
JP2021193636A (ja) | 撮影装置、制御方法、プログラム及び記憶媒体 | |
KR20240024809A (ko) | 신호 처리 장치, 신호 처리 방법, 기록 매체 및 신호 처리 시스템 | |
US11461928B2 (en) | Location estimation apparatus | |
CN116615765A (zh) | 驾驶员状态检测方法、装置及存储介质 | |
KR102486161B1 (ko) | 차량, 차량의 제어 방법 및 영상 탐색 장치 | |
JP2018173757A (ja) | 検知装置、学習装置、検知方法、学習方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191121 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200901 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200925 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6770488 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |