JP6556860B2 - 情報処理方法、情報処理装置、プログラム及びアイウエア - Google Patents
情報処理方法、情報処理装置、プログラム及びアイウエア Download PDFInfo
- Publication number
- JP6556860B2 JP6556860B2 JP2017549938A JP2017549938A JP6556860B2 JP 6556860 B2 JP6556860 B2 JP 6556860B2 JP 2017549938 A JP2017549938 A JP 2017549938A JP 2017549938 A JP2017549938 A JP 2017549938A JP 6556860 B2 JP6556860 B2 JP 6556860B2
- Authority
- JP
- Japan
- Prior art keywords
- identification information
- signal
- peak
- unit
- biological
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/398—Electrooculography [EOG], e.g. detecting nystagmus; Electroretinography [ERG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2503/00—Evaluating a particular growth phase or type of persons or animals
- A61B2503/20—Workers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1103—Detecting eye twinkling
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/389—Electromyography [EMG]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/48—Other medical applications
- A61B5/4806—Sleep evaluation
- A61B5/4809—Sleep detection, i.e. determining whether a subject is asleep or not
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- Ophthalmology & Optometry (AREA)
- Pathology (AREA)
- Human Computer Interaction (AREA)
- Eye Examination Apparatus (AREA)
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
Description
本実施例では、生体信号として眼電位信号を例にし、理論的に同様の信号を測定可能な電極の位置としては、メガネに設けられる一対のノーズパッドを例にする。図1は、実施例におけるメガネ100の前方からの一例を示す斜視図である。図2は、実施例におけるメガネ100の後方からの一例を示す斜視図である。メガネ100は、レンズ110及びフレーム120を備える。メガネ100及びフレーム120は、アイウエアの一例である。
図3は、実施例における処理装置200の構成の一例を示すブロック図である。図3に示すように、処理装置200は、処理部202、送信部204、6軸センサ206、及び電源部208を有する。また、各生体電極31、33、35は、例えば増幅部を介して電線を用いて処理部202に接続される。なお、処理装置200の各部は、一方のテンプルに設けられるのではなく、一対のテンプルに分散して設けられてもよい。
次に、増幅部250の構成について説明する。図5は、実施例における増幅部250の構成の一例を示す図である。図5に示すように、増幅部250は、第1アンプ260及び第2アンプ270を有する。第1アンプ260は、第2アンプ270の前段に位置し、バッファアンプとして機能するアンプである。以下、第1アンプ260をバッファアンプ260とも称する。第2アンプ270は、メインのアンプとして機能するアンプである。以下、第2アンプ270は、メインアンプ270とも称する。メインアンプ270により増幅された信号は処理装置200に有線又は無線を用いて出力される。
次に、外部装置300の構成について説明する。図8は、実施例における外部装置300の構成の一例を示すブロック図である。図8に示すように、外部装置300は、通信部310、記憶部320、及び制御部330を有する。
図9A〜Cは、信号記憶部322に記憶される各生体信号の値の例を示す。なお、図9A〜Cに示す例では、所定のサンプリングレートでサンプリングされた生体信号の値が記憶される。図9A〜Cに示す例では、横軸が時間(サンプリング時点)を表し、縦軸が、信号強度を表す。
次に、図10及び図11を用いて、図9A〜Cに示す生体信号とは異なる3つの生体信号、及び識別情報が信号記憶部322に記憶された例について説明する。図10は、3つの生体信号、及び各信号に付与された識別情報の一例を示す図である。図10に示すテーブルでは、一行目に各生体信号及び各識別情報が項目として挙げられている。例えば、生体信号として、信号A(ChA Signal)、信号B(ChB Signal)、信号C(ChC Signal)、識別情報として、識別情報A(ChA peakID)、識別情報B(ChB peakID)、識別情報C(ChC peakID)を含む。
次に、一般的なピークの同期処理を表す比較例における処理コストと、実施例における処理コストとを比較する。図12は、比較例における処理コストの一例を説明するための図である。ここで、「一般的なピークの同期処理」とは、(1)信号毎に閾値判定を行い、(2)ピークを検出し、(3)最後にピーク同士の時間差を判定して、対応するピークを抽出する方法である。
・データ区間:300秒
・解像度(サンプリング数):200Hz
・含まれる(検出される)ピーク:400ピーク
・チャネル数(信号数):3チャネル
・同じピークであると判断する間隔:0.1sec
・センサデータ:200(Hz)×300(秒)=60000
・ピーク越え判定(閾値判定):1(条件分岐(閾値以上か否か)の計算量を1とする。)
・ピーク毎合計:60000×1=60000
・ピーク越えの判定結果を有するか否かの処理:60000
・ピーク毎の特徴点抽出集計:0.5(条件分岐の半分の計算量)
・ピーク毎合計:60000×0.5=30000
・(1)+(2)の全チャネルの合計:(60000+30000)×3=270000
・ピーク数:400
・1つのピークに対して同じ事象であるか否かの判定:800(計算量は2とする。計算量×他のピーク数=2×400)
・他の信号との組み合わせ:(n−1)!=2
・合計:400×800×2=640000
・センサデータ:200(Hz)×300(秒)=60000
・ピーク越え判定を各チャネルで行う:3(条件分岐×3=1×3)
・合計:60000×3=180000
・ピーク越えの判定結果を有するか否かの処理:60000
・ピーク毎の特徴点抽出集計:1.0(0.5(条件分岐の半分の処理負荷)×2(全てのチャネルに対応するピークがあるわけではないため、単純に3倍にはならない))
・全チャネルの合計:60000×1.0×3=180000
次に、実施例における外部装置300の動作について説明する。図14は、実施例における抽出処理Aの一例を示すフローチャートである。抽出処理Aは、上述した抽出処理の中でシンプルな抽出処理を表す。図14に示すフローチャートは、例えば、使用者がメガネ100を装着して、第1電極152、第2電極154、及び第3電極156が使用者の皮膚に接触した状態であって、外部装置300が信号取得モードである動作モード(通常モード)に設定された場合に開始する。
瞬目や視線移動等の判定する前処理として、ピークの幅判定について説明する。例えば、ピークの幅判定部(不図示)は、抽出された左眼の眼電位信号及び右眼の眼電位信号それぞれのピーク値において、第1閾値以上又は第2閾値以下である時間を示すピークの幅を特定する。
瞬目の判定について説明する。例えば、瞬目判定部(不図示)は、眉間の第3電極156を基準とした第1電極152の電位と第2電極154の電位が同位相の負であり、かつ、ピークの幅が所定時間(例えば、0.25秒)以内である場合、瞬目と判定する。
視線移動の判定について説明する。例えば、視線移動判定部(不図示)は、眉間の第3電極156を基準とした第1電極152の電位と第2電極154の電位が同位相でピークの幅が所定時間(例えば、0.25秒)以内でない場合、上下方向の視線移動と判定する。具体的には、視線移動判定部は、第1電極152の電位及び第2電極154の電位が負の電位である場合、視線が上に移動したと判定する。一方、視線移動判定部は、第1電極152の電位及び第2電極154の電位が正の電位である場合、視線が下に移動したと判定する。
120 フレーム
124 眉間部
140 ノーズパッド
152 第1電極
154 第2電極
156 第3電極
200 処理装置
300 外部装置
320 記憶部
330 制御部
332 取得部
334 検出部
336 付与部
338 抽出部
340 受付部
342 特定部
Claims (9)
- 制御部を有するコンピュータが実行する情報処理方法であって、
前記制御部は、
複数の生体信号を取得すること、
所定の時間単位ごとに各生体信号のピーク部分を検出すること、
前記生体信号ごとに、ピークの識別情報を付与する場合、同一ピークを形成する1又は複数のピーク部分に、同じ識別情報を付与すること、
少なくとも2つの生体信号の前記時間単位ごとの識別情報に基づいて、前記少なくとも2つの生体信号から、対応するピークの組み合わせを抽出すること、
を実行する情報処理方法。 - 前記抽出することは、
前記時間単位ごとに、前記識別情報が付与されているピーク部分を有する生体情報が複数ある場合、該複数の生体信号の前記識別情報を対応付けて、前記対応するピークの組み合わせとすることを含む、請求項1に記載の情報処理方法。 - 前記検出することは、
前記時間単位ごとの各生体信号の信号値が、第1閾値以上又は第2閾値以下の場合に、前記信号値を前記ピーク部分として検出し、
前記付与することは、
連続して前記第1閾値以上又は前記第2閾値以下となる信号値のピーク部分を、前記同一ピークであると判定することを含む、請求項1又は2に記載の情報処理方法。 - 前記制御部は、
前記複数の生体信号から、少なくとも2つの生体信号の指定を受け付けることをさらに実行し、
前記抽出することは、
受付けられた少なくとも2つの生体信号の識別信号に基づいて抽出処理を行う、請求項1乃至3いずれか一項に記載の情報処理方法。 - 前記制御部は、
前記少なくとも2つの生体信号の中から1つの第1生体信号を特定することをさらに実行し、
前記抽出することは、
前記少なくとも2つの生体信号の中の他の生体信号の各識別情報から、前記第1生体信号の各識別情報に対応する識別情報を抽出すること、
前記識別情報の抽出結果に基づいて、前記対応するピークの抽出処理を行うことを含む、請求項1乃至4いずれか一項に記載の情報処理方法。 - 前記抽出することは、
前記識別情報の抽出結果に、前記第1生体信号のピーク値を含めることを含む、請求項5に記載の情報処理方法。 - 複数の生体信号を取得する取得部と、
所定の時間単位ごとに各生体信号のピーク部分を検出する検出部と、
前記生体信号ごとに、ピークの識別情報を付与する場合、同一ピークを形成する1又は複数のピーク部分に、同じ識別情報を付与する付与部と、
少なくとも2つの生体信号の前記時間単位ごとの識別情報に基づいて、前記少なくとも2つの生体信号から、対応するピークの組み合わせを抽出する抽出部と、
を備える情報処理装置。 - コンピュータに、
複数の生体信号を取得すること、
所定の時間単位ごとに各生体信号のピーク部分を検出すること、
前記生体信号ごとに、ピークの識別情報を付与する場合、同一ピークを形成する1又は複数のピーク部分に、同じ識別情報を付与すること、
少なくとも2つの生体信号の前記時間単位ごとの識別情報に基づいて、前記少なくとも2つの生体信号から、対応するピークの組み合わせを抽出すること、
を実行させるプログラム。 - フレームと、
前記フレームに設けられる一対のノーズパッドと、
前記一対のノーズパッドに設けられる各電極と、
前記フレームに設けられる加速度センサ及び/又は角速度センサと、
前記各電極、前記加速度センサ/角速度センサから各生体信号を取得する取得部と、
所定の時間単位ごとに各生体信号のピーク部分を検出する検出部と、
前記生体信号ごとに、ピークの識別情報を付与する場合、同一ピークを形成する1又は複数のピーク部分に、同じ識別情報を付与する付与部と、
少なくとも2つの生体信号の前記時間単位ごとの識別情報に基づいて、前記少なくとも2つの生体信号から、対応するピークの組み合わせを抽出する抽出部と、
を備えるアイウエア。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/081865 WO2017081793A1 (ja) | 2015-11-12 | 2015-11-12 | 情報処理方法、情報処理装置、プログラム及びアイウエア |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017081793A1 JPWO2017081793A1 (ja) | 2018-08-23 |
JP6556860B2 true JP6556860B2 (ja) | 2019-08-07 |
Family
ID=58694840
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017549938A Active JP6556860B2 (ja) | 2015-11-12 | 2015-11-12 | 情報処理方法、情報処理装置、プログラム及びアイウエア |
Country Status (3)
Country | Link |
---|---|
US (1) | US10966651B2 (ja) |
JP (1) | JP6556860B2 (ja) |
WO (1) | WO2017081793A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USD1017678S1 (en) | 2023-02-21 | 2024-03-12 | Vuzix Corporation | Smart glasses |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6431705B1 (en) * | 1999-11-10 | 2002-08-13 | Infoeye | Eyewear heart rate monitor |
US20040070729A1 (en) | 2001-02-19 | 2004-04-15 | Peter Wiebe | Device and method for determining the viewing direction in terms of a fix reference co-ordinates system |
WO2006105474A2 (en) | 2005-03-31 | 2006-10-05 | Proteus Biomedical, Inc. | Automated optimization of multi-electrode pacing for cardiac resynchronization |
JP5734740B2 (ja) * | 2011-05-23 | 2015-06-17 | 株式会社豊田中央研究所 | 弾性波検出装置及び弾性波検出プログラム |
JP2014124308A (ja) * | 2012-12-26 | 2014-07-07 | Panasonic Corp | 眼電位生成装置、眼電位生成方法およびビューワー |
-
2015
- 2015-11-12 WO PCT/JP2015/081865 patent/WO2017081793A1/ja active Application Filing
- 2015-11-12 JP JP2017549938A patent/JP6556860B2/ja active Active
- 2015-11-12 US US15/775,228 patent/US10966651B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20180344196A1 (en) | 2018-12-06 |
WO2017081793A1 (ja) | 2017-05-18 |
JPWO2017081793A1 (ja) | 2018-08-23 |
US10966651B2 (en) | 2021-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2668898B1 (en) | Eyewear | |
US20160070122A1 (en) | Computerized replacement temple for standard eyewear | |
JP2015213734A (ja) | プログラム、情報処理装置、及びアイウエア | |
KR20160108967A (ko) | 생체신호 측정장치 및 이를 이용한 생체신호 측정방법 | |
EP3586733B1 (en) | Information processing method, information processing device, and program | |
JP6687639B2 (ja) | 情報処理方法、情報処理装置、プログラム及びアイウエア | |
JP6656166B2 (ja) | プログラム、情報処理装置、及びアイウエア | |
JP6556860B2 (ja) | 情報処理方法、情報処理装置、プログラム及びアイウエア | |
WO2015159851A1 (ja) | 検出ユニット、アイウエア、及び眼電位検出システム | |
KR101416616B1 (ko) | 다중 생체 신호 기반의 워드 스펠러 | |
JP6594953B2 (ja) | 視線移動検出方法、プログラム、情報処理装置及びアイウエア | |
US20190320891A1 (en) | System, Device and Method for Eye Activity Monitoring | |
WO2016076268A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
WO2016072395A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
WO2017064800A1 (ja) | プログラム、情報処理装置、及びアイウエア | |
Barbara et al. | Comparative performance analysis of a commercial wearable EOG glasses for an asynchronous virtual keyboard | |
WO2017064799A1 (ja) | アイウエア | |
WO2016152849A1 (ja) | 信号処理方法、プログラム、情報処理装置及びアイウエア | |
WO2017150148A1 (ja) | 瞬目検出装置、眼鏡型電子機器、瞬目検出方法およびプログラム | |
WO2021260829A1 (ja) | 情報入力装置 | |
EP3725221A1 (en) | System, device and method for eye activity monitoring | |
CA2824972A1 (en) | Eyewear |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180509 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190627 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190710 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6556860 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |