JP5570386B2 - 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 - Google Patents
注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 Download PDFInfo
- Publication number
- JP5570386B2 JP5570386B2 JP2010233868A JP2010233868A JP5570386B2 JP 5570386 B2 JP5570386 B2 JP 5570386B2 JP 2010233868 A JP2010233868 A JP 2010233868A JP 2010233868 A JP2010233868 A JP 2010233868A JP 5570386 B2 JP5570386 B2 JP 5570386B2
- Authority
- JP
- Japan
- Prior art keywords
- eyeball
- attention state
- user
- attention
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 68
- 238000004590 computer program Methods 0.000 title claims description 15
- 238000004458 analytical method Methods 0.000 claims description 141
- 210000005252 bulbus oculi Anatomy 0.000 claims description 126
- 230000004424 eye movement Effects 0.000 claims description 82
- 230000004434 saccadic eye movement Effects 0.000 claims description 64
- 238000005259 measurement Methods 0.000 claims description 62
- 230000014759 maintenance of location Effects 0.000 claims description 45
- 238000001514 detection method Methods 0.000 claims description 30
- 210000004556 brain Anatomy 0.000 claims description 18
- 210000001508 eye Anatomy 0.000 claims description 11
- 238000002474 experimental method Methods 0.000 description 28
- 238000012545 processing Methods 0.000 description 28
- 238000007792 addition Methods 0.000 description 17
- 238000007796 conventional method Methods 0.000 description 17
- 238000002570 electrooculography Methods 0.000 description 16
- 238000012935 Averaging Methods 0.000 description 14
- 210000003128 head Anatomy 0.000 description 14
- 230000008569 process Effects 0.000 description 14
- 230000004044 response Effects 0.000 description 14
- 230000008859 change Effects 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000004070 electrodeposition Methods 0.000 description 7
- 230000001149 cognitive effect Effects 0.000 description 6
- 210000004087 cornea Anatomy 0.000 description 5
- 238000004904 shortening Methods 0.000 description 5
- 239000008186 active pharmaceutical agent Substances 0.000 description 4
- 230000037007 arousal Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 230000004397 blinking Effects 0.000 description 3
- 210000000624 ear auricle Anatomy 0.000 description 3
- 210000001595 mastoid Anatomy 0.000 description 3
- 238000002156 mixing Methods 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000012850 discrimination method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 210000001061 forehead Anatomy 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 206010041349 Somnolence Diseases 0.000 description 1
- SAZUGELZHZOXHB-UHFFFAOYSA-N acecarbromal Chemical compound CCC(Br)(CC)C(=O)NC(=O)NC(C)=O SAZUGELZHZOXHB-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- GTKRFUAGOKINCA-UHFFFAOYSA-M chlorosilver;silver Chemical compound [Ag].[Ag]Cl GTKRFUAGOKINCA-UHFFFAOYSA-M 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000011109 contamination Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000004461 rapid eye movement Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000001028 reflection method Methods 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 210000004761 scalp Anatomy 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- Eye Examination Apparatus (AREA)
Description
図5の縦方向には、実験参加者、および、実験参加者がその実験時間中に継続して集中状態であったか散漫状態であったかが示されている。図5の横方向には、10秒ごとの判別結果を示す。図5中の数字は、1が集中と判別された場合、2が散漫と判別された場合を示す。なお、判別結果の個数が異なるのは、同じコースを通過する時間が人や条件によって異なるためである。
図6は、本実施形態による注意状態判別システム1のブロック構成図を示す。
本実施形態の注意状態判別システム3及び注意状態判別装置4を説明する。
2 注意状態判別装置
10 ユーザ
20 脳波計測部
30 眼球運動計測部
40 サッケード検出部
45 EFRP取得部(電位取得部)
50 EFRP切出部
60 EFRP分類部
70 注意量判別部
80 統合判別部
Claims (13)
- 解析区間ごとにユーザの注意状態を判定する注意状態判別システムであって、
前記解析区間は複数の部分区間から構成されており、
ユーザの脳波信号を計測する脳波計測部と、
前記ユーザの眼球運動を計測する眼球運動計測部と、
計測された眼球運動から眼球停留の開始時刻を検出するサッケード検出部と、
各部分区間を代表する眼球停留関連電位を取得する電位取得部であって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、電位取得部と、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別する注意量判別部と、
前記部分区間毎の注意状態の判別結果に最も多く含まれる判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別する統合判別部と
を備えた、注意状態判別システム。 - 解析区間ごとにユーザの注意状態を判定する注意状態判別システムであって、
前記解析区間は複数の部分区間から構成されており、
ユーザの脳波信号を計測する脳波計測部と、
前記ユーザの眼球運動を計測する眼球運動計測部と、
計測された眼球運動から眼球停留の開始時刻を検出するサッケード検出部と、
各部分区間を代表する眼球停留関連電位を取得する電位取得部であって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、電位取得部と、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別する注意量判別部と、
前記部分区間毎の注意状態の判別結果に異なる判別結果が同数含まれていた場合には、最後に判別された部分区間の注意状態の判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別する統合判別部と
を備えた、注意状態判別システム。 - 前記統合判別部は、一定時間が経過するたびに新たな解析区間における前記ユーザの注意状態を判別する、請求項1または2に記載の注意状態判別システム。
- 前記各部分区間内で複数の眼球停留が発生するときにおいて、
前記サッケード検出部は、前記各部分区間内において前記複数の眼球停留の各々の開始時刻を検出し、
前記電位取得部は、前記各部分区間内で検出された前記複数の眼球停留の各々の開始時刻を起点として、前記脳波信号の複数の電位を取得し、前記複数の電位に基づいて前記各部分区間を代表する眼球停留関連電位を取得する、請求項1または2に記載の注意状態判別システム。 - 前記電位取得部は、前記解析区間よりも短い、予め定められた複数の期間を前記複数の部分区間として、部分区間ごとに前記複数の電位を取得して加算平均する、請求項1または2に記載の注意状態判別システム。
- 前記電位取得部は、前記眼球停留関連電位を予め定められた数以上検出したときに、前記部分区間を確定させる、請求項1または2に記載の注意状態判別システム。
- 前記注意量判別部は、前記各部分区間において加算平均した眼球停留関連電位の大きさが所定の閾値以上の場合は、前記ユーザは集中していると判別し、前記各部分区間において加算平均した眼球停留関連電位の大きさが所定の閾値より小さい場合、前記ユーザの注意が散漫であると判別する、請求項1または2に記載の注意状態判別システム。
- 解析区間ごとにユーザの注意状態を判定する注意状態判別装置であって、
前記解析区間は複数の部分区間から構成されており、
ユーザの眼球運動を計測する眼球運動計測部によって計測された眼球運動から眼球停留の開始時刻を検出するサッケード検出部と、
各部分区間を代表する眼球停留関連電位を取得する電位取得部であって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される、ユーザの脳波信号を計測する脳波計測部によって計測された脳波信号の電位である、電位取得部と、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別する注意量判別部と、
前記部分区間毎の注意状態の判別結果に最も多く含まれる判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別する統合判別部と
を備えた、注意状態判別装置。 - 解析区間ごとにユーザの注意状態を判定する注意状態判別装置であって、
前記解析区間は複数の部分区間から構成されており、
ユーザの眼球運動を計測する眼球運動計測部によって計測された眼球運動から眼球停留の開始時刻を検出するサッケード検出部と、
各部分区間を代表する眼球停留関連電位を取得する電位取得部であって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される、ユーザの脳波信号を計測する脳波計測部によって計測された脳波信号の電位である、電位取得部と、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別する注意量判別部と、
前記部分区間毎の注意状態の判別結果に異なる判別結果が同数含まれていた場合には、最後に判別された部分区間の注意状態の判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別する統合判別部と
を備えた、注意状態判別装置。 - 解析区間ごとにユーザの注意状態を判定するための注意状態判別方法であって、
前記解析区間は複数の部分区間から構成されており、
ユーザの脳波信号を計測するステップと、
前記ユーザの眼球運動を計測するステップと、
計測された眼球運動から眼球停留の開始時刻を検出するステップと、
各部分区間を代表する眼球停留関連電位を取得するステップであって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、ステップと、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別するステップと、
前記部分区間毎の注意状態の判別結果に最も多く含まれる判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別するステップと
を包含する、注意状態判別方法。 - 解析区間ごとにユーザの注意状態を判定するための注意状態判別方法であって、
前記解析区間は複数の部分区間から構成されており、
ユーザの脳波信号を計測するステップと、
前記ユーザの眼球運動を計測するステップと、
計測された眼球運動から眼球停留の開始時刻を検出するステップと、
各部分区間を代表する眼球停留関連電位を取得するステップであって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、ステップと、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別するステップと、
前記部分区間毎の注意状態の判別結果に異なる判別結果が同数含まれていた場合には、最後に判別された部分区間の注意状態の判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別するステップと
を包含する、注意状態判別方法。 - 解析区間ごとにユーザの注意状態を判定する注意状態判別装置に実装されたコンピュータによって実行されるコンピュータプログラムであって、
前記解析区間は複数の部分区間から構成されており、
前記コンピュータプログラムは、前記コンピュータに対し、
計測されたユーザの脳波信号のデータを受け取るステップと、
計測された前記ユーザの眼球運動のデータを受け取るステップと、
計測された眼球運動から眼球停留の開始時刻を検出するステップと、
各部分区間を代表する眼球停留関連電位を取得するステップであって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、ステップと、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別するステップと、
前記部分区間毎の注意状態の判別結果に最も多く含まれる判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別するステップと
を実行させる、コンピュータプログラム。 - 解析区間ごとにユーザの注意状態を判定する注意状態判別装置に実装されたコンピュータによって実行されるコンピュータプログラムであって、
前記解析区間は複数の部分区間から構成されており、
前記コンピュータプログラムは、前記コンピュータに対し、
計測されたユーザの脳波信号のデータを受け取るステップと、
計測された前記ユーザの眼球運動のデータを受け取るステップと、
計測された眼球運動から眼球停留の開始時刻を検出するステップと、
各部分区間を代表する眼球停留関連電位を取得するステップであって、各眼球停留関連電位は、前記各部分区間内で検出された眼球停留の各開始時刻を起点として特定される前記脳波信号の電位である、ステップと、
前記各部分区間を代表する眼球停留関連電位を利用して、前記部分区間毎の前記ユーザの注意状態を判別するステップと、
前記部分区間毎の注意状態の判別結果に異なる判別結果が同数含まれていた場合には、最後に判別された部分区間の注意状態の判別結果を利用して、前記解析区間における前記ユーザの注意状態を判別するステップと
を実行させる、コンピュータプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010233868A JP5570386B2 (ja) | 2010-10-18 | 2010-10-18 | 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010233868A JP5570386B2 (ja) | 2010-10-18 | 2010-10-18 | 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012085747A JP2012085747A (ja) | 2012-05-10 |
JP5570386B2 true JP5570386B2 (ja) | 2014-08-13 |
Family
ID=46258061
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010233868A Expired - Fee Related JP5570386B2 (ja) | 2010-10-18 | 2010-10-18 | 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5570386B2 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
PL406957A1 (pl) * | 2014-01-27 | 2015-08-03 | Intelclinic Spółka Z Ograniczoną Odpowiedzialnością | System do zarządzania snem polifazowym, sposób jego działania, urządzenie do analizy snu, sposób klasyfikacji aktualnej fazy snu oraz zastosowanie systemu i urządzenia do zarządzania snem polifazowym |
WO2016194849A1 (ja) * | 2015-06-01 | 2016-12-08 | アルプス電気株式会社 | 眼鏡型電子機器 |
EP3112922A1 (en) * | 2015-06-30 | 2017-01-04 | Thomson Licensing | A gaze tracking device and a head mounted device embedding said gaze tracking device |
JP6675535B2 (ja) * | 2015-09-30 | 2020-04-01 | 東海光学株式会社 | 脳活動検出システム、脳活動検出システムを使用した脳活動の解析方法、そのような脳活動の解析方法による個人特性の評価方法及び個人の見え方の評価方法 |
IL269861B2 (en) * | 2017-04-14 | 2023-11-01 | Magic Leap Inc | Multimodal eye tracking |
KR101831967B1 (ko) | 2017-10-20 | 2018-02-23 | 상명대학교산학협력단 | 인체 미동 기반 뇌 정보 추출 방법 |
KR101870919B1 (ko) | 2017-10-20 | 2018-06-25 | 상명대학교산학협력단 | 동공 크기 변화율을 이용한 뇌 정보 (EEG spectrum) 추출 방법 및 그 장치 |
US11109795B2 (en) * | 2018-07-27 | 2021-09-07 | Ronald Siwoff | Device and method for measuring and displaying bioelectrical function of the eyes and brain |
WO2020138012A1 (ja) * | 2018-12-27 | 2020-07-02 | 株式会社村田製作所 | 認知能力検出装置、および、認知能力検出システム |
JP2020202977A (ja) * | 2019-06-18 | 2020-12-24 | 富士ゼロックス株式会社 | 情報処理装置及び情報処理プログラム |
KR20210026305A (ko) * | 2019-08-29 | 2021-03-10 | 주식회사 룩시드랩스 | 선호도 결정 방법 및 이를 이용한 선호도 결정용 디바이스 |
CN113440151B (zh) * | 2021-08-03 | 2024-04-12 | 合肥科飞康视科技有限公司 | 一种专注力检测系统、检测方法及系统的使用方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0467466A (ja) * | 1990-07-06 | 1992-03-03 | Sony Corp | 信号判別装置 |
JP3120224B2 (ja) * | 1997-08-27 | 2000-12-25 | 技術研究組合医療福祉機器研究所 | Mri装置 |
JP4822235B2 (ja) * | 2001-03-21 | 2011-11-24 | 公益財団法人新産業創造研究機構 | 眼球停留関連電位解析装置 |
JP4929681B2 (ja) * | 2005-11-02 | 2012-05-09 | トヨタ自動車株式会社 | 眼球停留関連電位解析装置及び解析方法 |
JP2010057710A (ja) * | 2008-09-04 | 2010-03-18 | Toyota Central R&D Labs Inc | 集中度算出装置及びプログラム |
-
2010
- 2010-10-18 JP JP2010233868A patent/JP5570386B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2012085747A (ja) | 2012-05-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5570386B2 (ja) | 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 | |
JP4733242B2 (ja) | 運転注意量判別装置、方法、および、コンピュータプログラム | |
US9480429B2 (en) | State-of-attention determination apparatus | |
JP2012085746A (ja) | 注意状態判別システム、方法、コンピュータプログラムおよび注意状態判別装置 | |
JP4625544B2 (ja) | 運転注意量判定装置、方法およびプログラム | |
Kapitaniak et al. | Application of eye-tracking in drivers testing: A review of research | |
Wang et al. | The sensitivity of different methodologies for characterizing drivers’ gaze concentration under increased cognitive demand | |
JP6343808B2 (ja) | 視野算出装置および視野算出方法 | |
JP4500369B2 (ja) | 注意散漫検出装置、注意散漫検出方法およびコンピュータプログラム | |
JP5127576B2 (ja) | 精神作業負荷検出装置及びそれを備えた自動二輪車 | |
JP2010131401A (ja) | 被験者の頭及び目の動きを分析する方法及び装置 | |
US11211095B1 (en) | Modifying media content playback based on user mental state | |
JP2011180873A (ja) | 運転支援装置、及び運転支援方法 | |
CN109875583B (zh) | 一种基于ar技术的疲劳驾驶检测系统及方法 | |
JP2013244116A (ja) | 注意状態推定装置及び注意状態推定方法 | |
JP2015095111A (ja) | 運転支援システム | |
Niwa et al. | A wearable device for traffic safety-a study on estimating drowsiness with eyewear, JINS MEME | |
JP2013111348A (ja) | 状態判定装置および状態判定方法 | |
Golz et al. | Detection and prediction of driver’s microsleep events | |
Wan et al. | A study of Chinese professional drivers' electroencephalogram characteristics under angry driving based on field experiments | |
US11462100B2 (en) | Traffic surveillance system using error monitoring | |
Djerf et al. | Measuring drivers’ gaze concentration: Comparison of metrics and eye tracking systems with respect to gaze concentration | |
Terada et al. | Influence of Brightness and Traffic Flow on Driver’s Eye-Fixation-Related Potentials |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130725 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20140121 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140304 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140502 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140603 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140624 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5570386 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |