JP5365956B2 - 脳情報出力装置、ロボット、および脳情報出力方法 - Google Patents
脳情報出力装置、ロボット、および脳情報出力方法 Download PDFInfo
- Publication number
- JP5365956B2 JP5365956B2 JP2009041337A JP2009041337A JP5365956B2 JP 5365956 B2 JP5365956 B2 JP 5365956B2 JP 2009041337 A JP2009041337 A JP 2009041337A JP 2009041337 A JP2009041337 A JP 2009041337A JP 5365956 B2 JP5365956 B2 JP 5365956B2
- Authority
- JP
- Japan
- Prior art keywords
- intention
- identifier
- brain
- intention identifier
- learning
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 210000004556 brain Anatomy 0.000 title claims abstract description 88
- 238000000034 method Methods 0.000 title claims description 39
- 230000007177 brain activity Effects 0.000 claims abstract description 51
- 238000004364 calculation method Methods 0.000 claims description 47
- 238000012545 processing Methods 0.000 claims description 43
- 230000006870 function Effects 0.000 claims description 22
- 230000009471 action Effects 0.000 claims description 15
- 102000001554 Hemoglobins Human genes 0.000 claims 2
- 108010054147 Hemoglobins Proteins 0.000 claims 2
- 230000008569 process Effects 0.000 description 25
- 238000002474 experimental method Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 13
- 238000002599 functional magnetic resonance imaging Methods 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 7
- 238000005259 measurement Methods 0.000 description 7
- 238000012937 correction Methods 0.000 description 6
- 238000004497 NIR spectroscopy Methods 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000002600 positron emission tomography Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6813—Specially adapted to be attached to a specific body part
- A61B5/6814—Head
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J13/00—Controls for manipulators
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0073—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by tomography, i.e. reconstruction of 3D images from 2D projections
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
- A61B5/316—Modalities, i.e. specific diagnostic methods
- A61B5/369—Electroencephalography [EEG]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Computing Systems (AREA)
- Biomedical Technology (AREA)
- Mathematical Physics (AREA)
- Data Mining & Analysis (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Heart & Thoracic Surgery (AREA)
- Robotics (AREA)
- Biophysics (AREA)
- Mechanical Engineering (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Pathology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Dermatology (AREA)
- Neurology (AREA)
- Neurosurgery (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Description
次に、確率算出手段1171は、境界面からの入力特徴量群の距離を算出する(図14参照)。そして、確率算出手段1171は、当該距離をロジスティック関数(シグモイド関数)に入力し、0〜1の値に変換する。そして、確率算出手段1171は、当該変換した値(0〜1)を、第一の意図識別子の確率とする。そして、確率算出手段1171は、第二の意図識別子の確率を、「1−第一の意図識別子の確率」により算出する。
過去データを使わない場合(実験当日のデータのみ学習データとして用いた場合)では、脳情報出力装置11(脳・機械インタフェース)を使う実験当日の280のデータ(各タスク毎に70のデータ)を脳情報出力装置11に入れ、意図判別情報を構成した。そして、別に用意した実験当日の140データを入力された脳活動データとして、脳情報出力装置11は意図識別子を推定し、その正誤により、脳情報出力装置11の性能を検証した。
実験2において、過去データをどの程度入れたほうが良いのかの検証を行った。実験2における環境は、実験1の環境と同様である。実験2は2008年9月から12月まで行い、最後の3日(11月21日、11月27日、12月4日)のデータをテストデータとして使い、意図判別アルゴリズムの学習には9月データのみ、9月から11月データ、10月データから11月データ、11月データのみのケースを比較したところ、図9のような結果が得られた。
また、人間の脳の状態は時々刻々と変わっており過去のデータを使うと判別性能が落ちると言われていたが、本実施の形態によれば、過去のデータから特徴量を適切に抽出し、過去のデータの入れ方を工夫することにより、前述のように判別性能が大幅に上がることが分かった。
11 脳情報出力装置
12 ロボット
111 意図判別情報格納部
112 学習データ取得部
113 学習特徴量群取得部
114 意図判別情報蓄積部
115 脳活動データ取得部
116 特徴量群取得部
117 意図識別子取得部
118 意図識別子出力部
121 動作情報格納部
122 意図識別子受付部
123 実行部
1171 確率算出手段
1172 意図識別子取得手段
Claims (9)
- ユーザの意図を識別する情報である意図識別子と、当該意図識別子で識別される意図の元にユーザが一連の行為を行った際に当該ユーザの脳から取得された一のデータである学習データから、抽出された1以上の特徴量である学習特徴量群とを対に有する2以上の意図判別情報であり、取得日が異なる前記学習データから抽出された2以上の各学習特徴量群を有する2以上の意図判別情報を格納し得る意図判別情報格納部と、
ユーザから脳活動のデータである脳活動データを取得する脳活動データ取得部と、
前記脳活動データから、1以上の特徴量である入力特徴量群を取得する特徴量群取得部と、
前記入力特徴量群に対応する意図識別子を、前記意図判別情報格納部に格納されている2以上の意図判別情報から取得する意図識別子取得部と、
前記意図識別子取得部が取得した意図識別子を出力する意図識別子出力部とを具備する脳情報出力装置。 - 前記意図識別子取得部は、
現在から、予め決められた日数前より新しい日以降に取得された学習データから生成された学習特徴量群を有する2以上の意図判別情報から、前記入力特徴量群に対応する意図識別子を取得する請求項1記載の脳情報出力装置。 - 一の意図の元にユーザが一連の行為を行った際に、当該ユーザの脳から一の学習データを取得する学習データ取得部と、
前記学習データ取得部が取得した学習データから、1以上の特徴量である学習特徴量群を取得する学習特徴量群取得部と、
前記学習特徴量群取得部が取得した学習特徴量群と、前記一の意図を識別する意図識別子とを対応付けた意図判別情報を、前記学習データの取得日が識別できるように、前記意図判別情報格納部に蓄積する意図判別情報蓄積部とをさらに具備する請求項1または請求項2記載の脳情報出力装置。 - 前記意図識別子取得部は、
前記意図判別情報格納部の2以上の意図判別情報を用いて、前記特徴量群取得部が取得した入力特徴量群が、前記2以上の意図判別情報に含まれる2以上の意図識別子の各々に対応する確率を、前記2以上の意図識別子ごとに算出する確率算出手段と、
前記確率算出手段が算出した意図識別子ごとの確率から、最も大きい確率に対応する意図識別子を取得する意図識別子取得手段とを具備する請求項1から請求項3いずれか記載の脳情報出力装置。 - 前記確率算出手段は、
第一から第N(Nは2以上の自然数)のN個の各意図識別子の確率を算出する場合に、前記学習特徴量群から、第一の意図識別子に対して、当該第一の意図識別子と他の意図識別子との2つのクラスに分けるための境界面の情報を得る処理である境界面取得処理を行い、かつ当該境界面取得処理を第二から第Nの意図識別子に対しても行い、次に、取得した境界面の情報により示される境界面からの入力特徴量群の距離を算出し、次に、N個の意図識別子ごとに、当該距離をロジスティック関数に入力し0〜1の値に変換し、次に、当該変換した値である各意図識別子の確率を取得し、次に、各意図識別子の確率をマージすることにより、前記2以上の意図識別子ごとに確率を算出する請求項4記載の脳情報出力装置。 - 前記学習データおよび前記脳活動データは、一のユーザの頭部のヘモグロビン量に関する情報であるヘモグロビン情報である請求項1から請求項5いずれか記載の脳情報出力装置。
- 意図識別子と当該意図識別子に対応する動作を行わせる動作モジュールとの組である動作情報を2以上格納し得る動作情報格納部と、
請求項1から請求項6いずれか記載の脳情報出力装置から出力された意図識別子を受け付ける意図識別子受付部と、
前記意図識別子受付部が受け付けた意図識別子に対応する動作モジュールを実行する実行部とを具備するロボット。 - ユーザから脳活動のデータである脳活動データを取得する脳活動データ取得ステップと、
前記脳活動データから、1以上の特徴量である入力特徴量群を取得する特徴量群取得ステップと、
2以上の意図判別情報であり、取得日が異なる学習データから抽出された2以上の各学習特徴量群を有する2以上の意図判別情報から、前記入力特徴量群に対応する意図識別子を取得する意図識別子取得ステップと、
前記意図識別子取得部が取得した意図識別子を出力する意図識別子出力ステップとを具備する脳情報出力方法。 - 前記意図識別子取得ステップは、
現在から、予め決められた日数前より新しい日以降に取得された学習データから生成された学習特徴量群を有する2以上の意図判別情報から、前記入力特徴量群に対応する意図識別子を取得する請求項8記載の脳情報出力方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009041337A JP5365956B2 (ja) | 2009-02-24 | 2009-02-24 | 脳情報出力装置、ロボット、および脳情報出力方法 |
PCT/JP2010/052630 WO2010098283A1 (ja) | 2009-02-24 | 2010-02-22 | 脳情報出力装置、ロボット、および脳情報出力方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009041337A JP5365956B2 (ja) | 2009-02-24 | 2009-02-24 | 脳情報出力装置、ロボット、および脳情報出力方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010198233A JP2010198233A (ja) | 2010-09-09 |
JP5365956B2 true JP5365956B2 (ja) | 2013-12-11 |
Family
ID=42665490
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009041337A Expired - Fee Related JP5365956B2 (ja) | 2009-02-24 | 2009-02-24 | 脳情報出力装置、ロボット、および脳情報出力方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP5365956B2 (ja) |
WO (1) | WO2010098283A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6014869B2 (ja) * | 2014-09-12 | 2016-10-26 | 株式会社国際電気通信基礎技術研究所 | 動作識別システム、情報処理装置、情報処理プログラム、および情報処理システム |
JP6668811B2 (ja) | 2016-02-23 | 2020-03-18 | セイコーエプソン株式会社 | 訓練装置、訓練方法、プログラム |
CN109483572B (zh) * | 2018-10-15 | 2021-09-07 | 昆明理工大学 | 一种基于家庭智能服务机器人控制系统及其控制方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS6354618A (ja) * | 1986-08-25 | 1988-03-09 | Canon Inc | 入力装置 |
JP2000172407A (ja) * | 1998-12-07 | 2000-06-23 | Hitachi Ltd | 生体信号による機器制御装置 |
JP2003058298A (ja) * | 2001-08-20 | 2003-02-28 | Fuji Xerox Co Ltd | 情報分類装置、情報分類方法、情報分類プログラム及びコンピュータ読み取り可能な記録媒体 |
JP3949469B2 (ja) * | 2002-02-22 | 2007-07-25 | 三菱電機株式会社 | 脳波信号を用いた制御装置及び制御方法 |
JP3993069B2 (ja) * | 2002-10-30 | 2007-10-17 | 三菱電機株式会社 | 脳波信号を利用した制御装置 |
JP2004180817A (ja) * | 2002-12-02 | 2004-07-02 | National Institute Of Advanced Industrial & Technology | 生体信号を利用した作業支援マニピュレータシステム |
JP2006051343A (ja) * | 2004-07-16 | 2006-02-23 | Semiconductor Energy Lab Co Ltd | 生体信号処理装置、無線メモリ、生体信号処理システム及び被制御装置の制御システム |
JP2006072606A (ja) * | 2004-09-01 | 2006-03-16 | National Institute Of Information & Communication Technology | インターフェイス装置、インターフェイス方法及びその装置を用いた制御訓練装置 |
JP2006289565A (ja) * | 2005-04-12 | 2006-10-26 | Japan Science & Technology Agency | ロボット操作装置及びロボット |
JP5150942B2 (ja) * | 2006-02-03 | 2013-02-27 | 株式会社国際電気通信基礎技術研究所 | 活動補助システム |
JP2008054752A (ja) * | 2006-08-29 | 2008-03-13 | Aruze Corp | 遊技機 |
JP4272702B2 (ja) * | 2006-11-15 | 2009-06-03 | パナソニック株式会社 | 脳波識別方法の調整装置、方法およびコンピュータプログラム |
JP4411442B2 (ja) * | 2007-02-20 | 2010-02-10 | 国立大学法人 岡山大学 | 脳波−運動指令変換装置 |
-
2009
- 2009-02-24 JP JP2009041337A patent/JP5365956B2/ja not_active Expired - Fee Related
-
2010
- 2010-02-22 WO PCT/JP2010/052630 patent/WO2010098283A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
WO2010098283A1 (ja) | 2010-09-02 |
JP2010198233A (ja) | 2010-09-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5531237B2 (ja) | 脳情報出力装置、ロボット、および脳情報出力方法 | |
Xie et al. | Wavelet-based sparse functional linear model with applications to EEGs seizure detection and epilepsy diagnosis | |
US10039501B2 (en) | Computer-aided diagnosis (CAD) apparatus and method using consecutive medical images | |
CN109344889B (zh) | 脑疾病分类装置、用户终端和计算机可读存储介质 | |
US20220343496A1 (en) | Systems and methods for accurate and rapid positron emission tomography using deep learning | |
Mokhtari et al. | Decoding brain states using backward edge elimination and graph kernels in fMRI connectivity networks | |
JP5365956B2 (ja) | 脳情報出力装置、ロボット、および脳情報出力方法 | |
Asghar et al. | Semi-skipping layered gated unit and efficient network: hybrid deep feature selection method for edge computing in EEG-based emotion classification | |
WO2022202943A1 (ja) | 心電図解析支援装置、プログラム、心電図解析支援方法、及び心電図解析支援システム | |
US11460528B2 (en) | MRI reconstruction with image domain optimization | |
US20210319539A1 (en) | Systems and methods for background aware reconstruction using deep learning | |
Lakshmi Devasena et al. | Efficient computer aided diagnosis of abnormal parts detection in magnetic resonance images using hybrid abnormality detection algorithm | |
JP6458387B2 (ja) | 生体電気ノイズ同定システム及び生体電気ノイズ除去システム | |
KR101914189B1 (ko) | 복수의 뇌신호에 대한 공통 패턴을 제공하는 장치 및 방법 | |
Onay et al. | Assessment of CSP-based two-stage channel selection approach and local transformation-based feature extraction for classification of motor imagery/movement EEG data | |
KR101345216B1 (ko) | 다수 피험자의 뇌전도 분석 방법 및 장치 | |
JP2010198237A (ja) | 意図判別情報取得装置、脳情報出力装置、ロボット、および意図判別情報取得方法 | |
US10143406B2 (en) | Feature-quantity extracting apparatus | |
Abenna et al. | An enhanced motor imagery EEG signals prediction system in real-time based on delta rhythm | |
JP5256517B2 (ja) | 脳情報出力装置、ロボット、および脳情報出力方法 | |
JP2019080809A (ja) | 状態推定装置 | |
Kowshik et al. | Nurse Care Activity Recognition from Accelerometer Sensor Data Using Fourier-and Wavelet-based Features | |
JP2010198235A (ja) | 脳情報出力装置、ロボット、および脳情報出力方法 | |
Gutierrez-Cáceres et al. | Computer aided medical diagnosis tool to detect normal/abnormal studies in digital mr brain images | |
Calhas et al. | fMRI multiple missing values imputation regularized by a recurrent denoiser |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20120221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130521 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130820 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130830 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5365956 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |