JP2010000283A - リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム - Google Patents

リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム Download PDF

Info

Publication number
JP2010000283A
JP2010000283A JP2008163092A JP2008163092A JP2010000283A JP 2010000283 A JP2010000283 A JP 2010000283A JP 2008163092 A JP2008163092 A JP 2008163092A JP 2008163092 A JP2008163092 A JP 2008163092A JP 2010000283 A JP2010000283 A JP 2010000283A
Authority
JP
Japan
Prior art keywords
information
synchronization signal
hemoglobin
electroencephalogram
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008163092A
Other languages
English (en)
Inventor
Akihiro Ishikawa
亮宏 石川
Tatsuya Okabe
達哉 岡部
Masaaki Sato
雅昭 佐藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Shimadzu Corp
ATR Advanced Telecommunications Research Institute International
Original Assignee
Honda Motor Co Ltd
Shimadzu Corp
ATR Advanced Telecommunications Research Institute International
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd, Shimadzu Corp, ATR Advanced Telecommunications Research Institute International filed Critical Honda Motor Co Ltd
Priority to JP2008163092A priority Critical patent/JP2010000283A/ja
Priority to US12/488,031 priority patent/US8396525B2/en
Publication of JP2010000283A publication Critical patent/JP2010000283A/ja
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7285—Specific aspects of physiological measurement analysis for synchronising or triggering a physiological measurement or image acquisition with a physiological event or waveform, e.g. an ECG signal
    • A61B5/7289—Retrospective gating, i.e. associating measured signals or images with a physiological event after the actual measurement or image acquisition, e.g. by simultaneously recording an additional physiological signal during the measurement or image acquisition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A61B5/14553—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases specially adapted for cerebral tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/24—Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316—Modalities, i.e. specific diagnostic methods
    • A61B5/369—Electroencephalography [EEG]
    • A61B5/384—Recording apparatus or displays specially adapted therefor

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Psychiatry (AREA)
  • Optics & Photonics (AREA)
  • Neurology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Psychology (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physiology (AREA)
  • Signal Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

【課題】従来、脳活動に起因する血流変化と電気的信号を同時かつリアルタイムに計測できず、脳の状態を十分に把握できなかった。
【解決手段】同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得したＮＩＲＳ脳計測装置から、順次当該ヘモグロビン情報を受信するヘモグロビン情報受信部と、同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、被験者の脳波情報を取得した脳波計測装置から、当該脳波情報を、順次、受信する脳波情報受信部と、ヘモグロビン情報と脳波情報との同期を取る処理を行う同期処理部と、同期がとられたヘモグロビン情報と脳波情報とを出力する出力部とを具備するリアルタイム同時計測装置により、脳の状態を十分に把握できる。
【選択図】図１

Description

本発明は、ＮＩＲＳ測定情報（後述する「ヘモグロビン情報」と同様）とＥＥＧ測定情報（後述する「脳波情報」と同様）等の情報を、同期をとって取得し、出力するリアルタイム同時計測システム等に関するものである。
従来、ＮＩＲＳ法（近赤外分光法）を利用した脳活動の計測を行う装置があった（例えば、特許文献１参照）。以下、ＮＩＲＳ法について、説明する。
まず、へモグロビンは、血液中で酸素を運搬する役割を果たしている。血液中に含まれるヘモグロビン濃度は、血管の拡張・収縮に応じて増減するため、ヘモグロビン濃度を測定することによって、血管の拡張・収縮を検出することが知られている。
そこで、ヘモグロビン濃度が生体内部の酸素代謝機能に対応することを利用することにより、光を用いて生体内部を簡便に無侵襲で測定する生体測定方法が知られている。ヘモグロビン濃度は、可視光から近赤外領域までの波長の光を生体に照射することにより、生体を透過して得られる光量から求められる。
さらに、ヘモグロビンは、酸素と結合してオキシヘモグロビンとなり、一方、酸素と離れてデオキシヘモグロビンとなる。脳内では、血流再配分作用によって活性化している部位には酸素供給が行われ、酸素と結合したオキシヘモグロビン濃度が増加することも知られている。よって、オキシヘモグロビン濃度を測定することにより、脳活動の観察に応用することができる。オキシヘモグロビンとデオキシヘモグロビンとは、可視光から近赤外領域にかけて異なる分光吸収スペクトル特性を有しているので、例えば、近赤外光を用いてオキシヘモグロビン濃度及びデオキシヘモグロビン濃度を求めることができる。
そこで、非侵襲で脳活動を測定するために、送光プローブと受光プローブとを備える光生体測定装置が開発されている。光生体測定装置では、被検体の頭部皮膚表面上に配置した送光プローブにより、脳に近赤外光を照射するとともに、頭部皮膚表面上に配置した受光プローブにより、脳から放出された近赤外光の光量を検出する。近赤外光は、頭部皮膚組織や骨組織を透過し、かつ、血液中のオキシヘモグロビン、デオキシヘモグロビンにより吸収される。よって、送光プローブと受光プローブとを用いて受光量情報を得ることにより、脳の測定部位のオキシヘモグロビン濃度、デオキシヘモグロビン濃度、さらにはこれらから算出される全ヘモグロビン濃度の経時変化を測定データとして求めることができる。これらから脳の賦活を測定することができる。かかる光生体測定装置が実施する脳活動の計測をＮＩＲＳ法という。
また、従来、ＥＥＧ法（脳波）を利用した脳活動の計測を行う装置があった（例えば、非特許文献１参照）。なお、ＥＥＧとは、「Ｅｌｅｃｔｒｏｅｎｃｅｐｈａｌｏｇｒａｐｙ」の略であり、脳波のことである。ＥＥＧ法とは、脳活動に起因した脳内の電気的変化を頭皮上の電位差として外部から安全に調べる方法である。
また、従来、頭部においてＥＥＧ測定を行うための頭部用用具が存在した（例えば、特許文献２参照）。
特開２００３−３２２６１２号公報（第１頁、第１図等） 特開平５−２６１０７６号公報（第１頁、第１図等） 一條貞雄他、「脳波判読に関する１０１章」、医学書院、１９９９年５月
しかしながら、従来、ＮＩＲＳ測定情報とＥＥＧ測定情報との同期をとって取得し、そのＮＩＲＳ測定情報とＥＥＧ測定情報をリアルタイムに同期を取りながら表示することができなかった。そのため、ＮＩＲＳおよびＥＥＧを使って、脳の活動状態をリアルタイムに把握できない、という課題があった。さらに具体的には、従来、脳活動に起因する血流変化と電気的信号を同時かつリアルタイムに計測できず、脳の状態を十分に把握できなかった。
本第一の発明のリアルタイム同時計測システムは、同期信号出力装置とＮＩＲＳ脳計測装置と脳波計測装置とリアルタイム同時計測装置を具備するリアルタイム同時計測システムであって、前記同期信号出力装置は、前記ＮＩＲＳ脳計測装置と前記脳波計測装置とにおける情報取得のための同期をとるための信号である同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する同期信号出力部を具備し、前記ＮＩＲＳ脳計測装置は、前記同期信号出力装置から前記同期信号を受信するＮＩＲＳ同期信号受信部と、前記ＮＩＲＳ同期信号受信部が同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得するヘモグロビン情報取得部と、前記ヘモグロビン情報を、順次、前記リアルタイム同時計測装置に送信するヘモグロビン情報送信部とを具備し、前記脳波計測装置は、前記同期信号出力装置から前記同期信号を受信する脳波同期信号受信部と、前記脳波同期信号受信部が同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得する脳波情報取得部と、前記脳波情報を、順次、前記リアルタイム同時計測装置に送信する脳波情報送信部とを具備し、前記リアルタイム同時計測装置は、前記ヘモグロビン情報を、順次、受信するヘモグロビン情報受信部と、前記脳波情報を、順次、受信する脳波情報受信部と、前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理部と、前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力部とを具備するリアルタイム同時計測システムである。
かかる構成により、ＮＩＲＳ測定情報およびＥＥＧ測定情報の同期が精度高くとれ、ＮＩＲＳ測定情報およびＥＥＧ測定情報をリアルタイムに表示しながら脳の状態を把握できる。また、ＮＩＲＳが測定対象にしている脳の血流変化、ＥＥＧが測定対象にしている脳の電気活動等の関係を明らかにできる。なお、本リアルタイム同時計測システムにおいて、同期信号出力装置を用いて、ＮＩＲＳ測定情報およびＥＥＧ測定情報の同期をとるため、両情報の同期が非常に精度高くとれる。
また、本第二の発明のリアルタイム同時計測システムは、第一の発明に対して、前記同期信号出力装置の前記同期信号出力部は、電気信号により実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第一同期信号出力手段と、ソフトウェアにより実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第二同期信号出力手段と、前記２つの同期信号出力手段のうち、いずれの同期信号出力手段により、同期信号を出力するかを示す選択情報を格納している選択情報格納手段と、前記選択情報に応じて、前記第一同期信号出力手段または前記第二同期信号出力手段のいずれかに同期信号の出力を指示する同期信号出力指示手段とを具備するリアルタイム同時計測システムである。
かかる構成により、周辺装置の仕様に合致する通信手段を、選択して利用できる。また、２種類の通信手段を切り替えて、各通信手段の長所を生かしつつ、ＮＩＲＳ測定情報およびＥＥＧ測定情報が取得できる。
また、本第三の発明のリアルタイム同時計測システムは、第一、第二いずれかの発明に対して、前記リアルタイム同時計測装置は、前記ヘモグロビン情報を格納し得る第一共有メモリと、前記脳波情報を格納し得る第二共有メモリとをさらに具備し、前記同期処理部は、前記ヘモグロビン情報を前記第一共有メモリに書き込むヘモグロビン情報記録手段と、前記脳波情報を前記第二共有メモリに書き込む脳波情報記録手段と、前記第一共有メモリからヘモグロビン情報、前記第二共有メモリから脳波情報を読み出し、前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理手段とを具備するリアルタイム同時計測システムである。
かかる構成により、ＮＩＲＳ−ＥＥＧ同時計測時だけではなく、ＮＩＲＳ単体計測時、ＥＥＧ単体計測時でも、システムの変更を全くせずに、同じシステムでリアルタイム計測が可能となる。
また、本第四の発明のリアルタイム同時計測システムは、第一、第二いずれかの発明に対して、第一操作装置、第二操作装置、および第三操作装置とをさらに具備するリアルタイム同時計測システムであって、前記第一操作装置は、ユーザから指示を受け付ける指示受付部と、前記指示を前記第一操作装置および前記第二操作装置に対して指示を送信する指示送信部とを具備し、前記第二操作装置は、前記第一操作装置から前記指示を受信する第二指示受信部と、前記第二指示受信部が受信した前記指示を前記ＮＩＲＳ脳計測装置に対して指示を送信する第二指示送信部とを具備し、前記第三操作装置は、前記第一操作装置から前記指示を受信する第三指示受信部と、前記第三指示受信部が受信した前記指示を前記脳波計測装置に対して指示を送信する第三指示送信部とを具備するリアルタイム同時計測システムである。
かかる構成により、ＮＩＲＳ脳計測装置と脳波計測装置とに対して、同時に同一の指示が出せ、ＮＩＲＳ脳計測装置と脳波計計測装置とを第一操作装置で全て制御が可能となる。
また、本第五の発明のリアルタイム同時計測システムは、第一から第四いずれかの発明に対して、前記リアルタイム同時計測装置は、情報を格納し得る情報格納部と、前記情報を出力する情報出力部とをさらに具備し、前記出力部は、前記同期がとられたヘモグロビン情報と脳波情報と、前記情報出力部が出力した情報とを対応付けて蓄積するリアルタイム同時計測システムである。
かかる構成により、被験者に対して出力した情報が、脳の状態にどのような影響を与えたかを分析することが、リアルタイムでより正確にできるようになる。
また、本第六の発明のリアルタイム同時計測システムは、第一から第五いずれかの発明に対して、前記ヘモグロビン情報取得部がヘモグロビン情報を取得する第一のサンプリング周波数と、前記脳波情報取得部が脳波情報を取得する第二のサンプリング周波数とが異なり、前記同期処理部は、第一のサンプリング周波数と第二のサンプリング周波数のうち大きい方のサンプリング周波数に対応するモグロビン情報または脳波情報をそのまま取得し、小さい方のサンプリング周波数に対応する脳波情報またはモグロビン情報について、大きい方のサンプリング周波数の情報と同一の数と情報なるように、時間的に最も近くに受信された情報を複写する、または受信された情報を外挿または内挿することにより前記ヘモグロビン情報と前記脳波情報との同期を取るリアルタイム同時計測システムである。
かかる構成により、ＮＩＲＳ脳計測装置と脳波計測装置との仕様の違いを吸収して、精度高く脳の状態を把握できる。
また、本第七の発明のリアルタイム同時計測システムは、第一から第六いずれかの発明に対して、前記リアルタイム同時計測システムは、生体情報取得装置をさらに具備し、前記生体情報取得装置は、前記被験者の１以上の箇所から生体に関する情報である生体情報を、順次、取得する生体情報取得部と、前記生体情報を、順次、前記リアルタイム同時計測装置に送信する生体情報送信部とを具備し、前記リアルタイム同時計測装置は、前記生体情報を、順次、受信する生体情報受信部をさらに具備し、前記リアルタイム同時計測装置の同期処理部は、前記ヘモグロビン情報と前記脳波情報と前記生体情報との同期を取る処理を行い、前記出力部は、前記同期がとられたヘモグロビン情報と脳波情報と生体情報とを出力するリアルタイム同時計測システムである。
かかる構成により、脳活動計測時の生体情報も利用可能となり、さらに精度高く脳の状態を把握できる。例えば、筋電情報や眼電情報や心電情報などの生体情報を使ったアーチファクト除去が好適である。
また、本第八の発明のリアルタイム同時計測システムは、第七の発明に対して、前記生体情報取得部は、前記被験者の体全体または体の一部から筋電に関する情報である筋電情報、または前記被験者の眼周辺の眼電に関する情報である眼電情報、または前記被験者の心臓周辺の心電に関する情報である心電情報を、順次、取得するリアルタイム同時計測システムである。
かかる構成により、脳活動計測時のノイズとなる生体情報、例えば、筋電情報や眼電情報や心電情報などといったアーチファクトを除去し、さらに精度高く脳の状態を把握できる。
また、本第九の発明のリアルタイム同時計測システムは、第一から第八いずれかの発明に対して、前記ヘモグロビン情報と前記脳波情報、または前記ヘモグロビン情報と前記脳波情報と前記生体情報は、それぞれ同期信号を対応付けて有し、前記リアルタイム同時計測装置は、前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報、または前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報と前記同期信号と対応付けられている生体情報のぞれぞれを異なるタイミングで受信し、前記同期処理部は、前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報、または前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報と前記同期信号と対応付けられている生体情報を受信した後、前記ヘモグロビン情報と前記脳波情報、または前記ヘモグロビン情報と前記脳波情報と前記生体情報との同期を取る処理を行うリアルタイム同時計測システムである。
かかる構成により、例えば、ＮＩＲＳ脳計測装置と脳波計測装置がそれぞれ異なるタイミングで、ヘモグロビン情報と脳波情報を測定している状況でも、後に、両情報の同期をとることができる。
また、本第十の発明のリアルタイム同時計測システムは、第一から第八いずれかの発明に対して、同期信号出力装置とＮＩＲＳ脳計測装置と脳波計測装置と複数のリアルタイム同時計測装置を具備するリアルタイム同時計測システムであって、前記ヘモグロビン情報送信部と前記脳波情報送信部、または前記ヘモグロビン情報送信部と前記脳波情報送信部と前記生体情報送信部は、ぞれぞれヘモグロビン情報と脳波情報、またはヘモグロビン情報と脳波情報と生体情報を、前記複数のリアルタイム同時計測装置に送信するリアルタイム同時計測システムである。
かかる構成により、複数のリアルタイム同時計測装置上で動作する各アプリケーションがヘモグロビン情報と脳波情報と生体情報を利用する場合、自マシンの共有メモリにアクセスすればよく、共有メモリへのアクセス時の遅れを解消できる。
本発明によるリアルタイム同時計測システムによれば、ＮＩＲＳ測定情報およびＥＥＧ測定情報の同期が精度高くとれる。
以下、リアルタイム同時計測システム等の実施形態について図面を参照して説明する。なお、実施の形態において同じ符号を付した構成要素は同様の動作を行うので、再度の説明を省略する場合がある。
（実施の形態）
本実施の形態において、ＮＩＲＳ測定情報とＥＥＧ測定情報を、同期をとって取得し、出力するリアルタイム同時計測システムについて説明する。本リアルタイム同時計測システムは、同期のための装置（後述する同期信号出力装置４）を有する。また、本実施の形態において、ＮＩＲＳ測定情報とＥＥＧ測定情報と生体情報とを、同期をとって取得し、出力するリアルタイム同時計測システムについて説明する。
図１は、本実施の形態におけるリアルタイム同時計測システムのブロック図である。リアルタイム同時計測システムは、第一操作装置１、第二操作装置２、第三操作装置３、同期信号出力装置４、ＮＩＲＳ脳計測装置５、脳波計測装置６、生体情報取得装置７、リアルタイム同時計測装置８を具備する。リアルタイム同時計測システムは、複数のリアルタイム同時計測装置８を具備しても良い。
第一操作装置１は、第一指示受付部１１、第一指示送信部１２を具備する。第二操作装置２は、第二指示受信部２１、第二指示送信部２２を具備する。第三操作装置３は、第三指示受信部３１、第三指示送信部３２を具備する。
同期信号出力装置４は、同期信号出力部４１を具備する。同期信号出力部４１は、選択情報格納手段４１１、第一同期信号出力手段４１２、第二同期信号出力手段４１３、同期信号出力指示手段４１４を具備する。
ＮＩＲＳ脳計測装置５は、ＮＩＲＳ同期信号受信部５１、ヘモグロビン情報取得部５２、ヘモグロビン情報送信部５３を具備する。
脳波計測装置６は、脳波同期信号受信部６１、脳波情報取得部６２、脳波情報送信部６３を具備する。
生体情報取得装置７は、生体同期信号受信部７１、生体情報取得部７２、生体情報送信部７３を具備する。生体情報取得部７２は、筋電情報取得手段７２１、眼電情報取得手段７２２、心電情報取得手段７２３を具備する。
図２は、リアルタイム同時計測装置８のブロック図である。リアルタイム同時計測装置８は、情報格納部８０、第一共有メモリ８１、第二共有メモリ８２、第三共有メモリ８３、情報出力部８４、ヘモグロビン情報受信部８５、脳波情報受信部８６、生体情報受信部８７、同期処理部８８、出力部８９を具備する。同期処理部８８は、同期処理手段８８１、ヘモグロビン情報記録手段８８２、脳波情報記録手段８８３、生体情報記録手段８８４を具備する。
第一指示受付部１１は、ユーザから指示を受け付ける。指示とは、例えば、ＮＩＲＳ脳計測装置５、および脳波計測装置６を操作する指示である。また、指示とは、例えば、各装置における測定の開始指示である。指示の入力手段は、キーボードやマウスやテンキーやメニュー画面によるもの等、何でも良い。第一指示受付部１１は、キーボード等の入力手段のデバイスドライバーや、メニュー画面の制御ソフトウェア等で実現され得る。
第一指示送信部１２は、第一指示受付部１１が受け付けた指示を第二操作装置２および第三操作装置３に対して指示を送信する。なお、第一指示送信部１２は、生体情報取得装置７に対して指示を送信しても良いし、生体情報取得装置７に接続されている、図示しない第四操作装置に対して指示を送信しても良い。第一指示送信部１２は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
第二指示受信部２１は、第一操作装置１から指示を受信する。
第二指示送信部２２は、第二指示受信部２１が受信した指示を、ＮＩＲＳ脳計測装置５に送信する。第二指示受信部２１および第二指示送信部２２は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
第三指示受信部３１は、第一操作装置１から指示を受信する。
第三指示送信部３２は、第三指示受信部３１が受信した指示を、脳波計測装置６に送信する。第三指示受信部３１および第三指示送信部３２は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
同期信号出力部４１は、ＮＩＲＳ脳計測装置５と脳波計測装置６とにおける情報取得のための同期をとるための信号である同期信号を、ＮＩＲＳ脳計測装置５および脳波計測装置６に出力する。同期信号は、通常、定期的に出力するが、非定期でも良い。同期信号出力部４１は、通常、自身が有する時計のクロックを用いて、同期信号を出力する。ここで、出力とは、通常、送信である。同期信号出力部４１は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
選択情報格納手段４１１は、２つの同期信号出力手段（第一同期信号出力手段４１２と第二同期信号出力手段４１３）のうち、いずれの同期信号出力手段により、同期信号を出力するかを示す選択情報を格納している。選択情報は、例えば、「１」（第一同期信号出力手段４１２を選択）、「０」（第二同期信号出力手段４１３を選択）のいずれかである。選択情報格納手段４１１は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。選択情報格納手段４１１に選択情報が記憶される過程は問わない。例えば、記録媒体を介して選択情報が選択情報格納手段４１１で記憶されるようになってもよく、通信回線等を介して送信された選択情報が選択情報格納手段４１１で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された選択情報が選択情報格納手段４１１で記憶されるようになってもよい。
第一同期信号出力手段４１２は、電気信号により実現される同期信号を、ＮＩＲＳ脳計測装置５および脳波計測装置６に出力する。つまり、この同期信号は、ハードウェア的な信号であると言える。第一同期信号出力手段４１２は、例えば、ＢＮＣケーブルにより、同期信号を送信する。第一同期信号出力手段４１２は、後述する第二同期信号出力手段４１３と比較して、通信によるオーバーヘッドが少なく、ＮＩＲＳ脳計測装置５、脳波計測装置６、生体情報取得装置７における情報取得の、より正確な同期が取りやすい。第一同期信号出力手段４１２は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
第二同期信号出力手段４１３は、ソフトウェアにより実現される同期信号を、ＮＩＲＳ脳計測装置５および脳波計測装置６に出力する。つまり、この同期信号は、ソフトウェア的な信号であると言える。第二同期信号出力手段４１３は、第一同期信号出力手段４１２と比較して、周辺設備が整いやすい。第二同期信号出力手段４１３は、例えば、ＬＡＮにより、同期信号を送信する。第二同期信号出力手段４１３は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
同期信号出力指示手段４１４は、選択情報格納手段４１１に格納されている選択情報に応じて、第一同期信号出力手段４１２または第二同期信号出力手段４１３のいずれかに同期信号の出力を指示する。そして、第一同期信号出力手段４１２または第二同期信号出力手段４１３は、同期信号出力指示手段４１４における指示に応じて、同期信号を出力する。なお、同期信号の出力を指示する動作は、例えば、いずれかの通信手段を起動したり、いずれかの通信手段に対応する関数やメソッドを呼び出したりする処理等であり、結果として、いずれかの通信手段により同期信号が出力されれば良い。同期信号出力指示手段４１４は、通常、ＭＰＵやメモリ等から実現され得る。同期信号出力指示手段４１４の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
ＮＩＲＳ脳計測装置５は、近赤外光を用いて頭皮上から非侵襲的に脳機能マッピングする、「光機能画像法」の原理を応用した装置である。また、ＮＩＲＳ脳計測装置５は、通常、測定開始の指示を受け付け、順次、ヘモグロビン情報を取得し、リアルタイム同時計測装置８に送信する。また、ＮＩＲＳ脳計測装置５は、同期信号出力装置４から受信した同期信号に合わせ、ヘモグロビン情報を取得する。
ＮＩＲＳ同期信号受信部５１は、同期信号出力装置４から同期信号を受信する。ＮＩＲＳ同期信号受信部５１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
ヘモグロビン情報取得部５２は、ＮＩＲＳ同期信号受信部５１が同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得する。ここで、受信したタイミングとは、定期的に同期信号を受信する場合、同期信号受信後にヘモグロビン情報を取得することである。ヘモグロビン情報取得部５２は、ＮＩＲＳ同期信号受信部５１が同期信号を受信したタイミングに合わせてヘモグロビン情報を取得し、その後、定期的に、順次、ヘモグロビン情報を取得することは好適である。また、ヘモグロビン情報取得部５２は、ＮＩＲＳ同期信号受信部５１が同期信号を受信した後のみ、ヘモグロビン情報を取得しても良い。ヘモグロビン情報取得部５２は、通常、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を、順次、取得する。ヘモグロビン情報取得部５２は、第一のサンプリング周波数で、ヘモグロビン情報を、順次、取得する。なお、第一のサンプリング周波数は、通常、後述する第二のサンプリング周波数とは異なる。第一のサンプリング周波数は、例えば、４０Ｈｚである。ヘモグロビン情報取得部５２は、公知技術により実現され得るので詳細な説明を省略する。また、ヘモグロビン情報のデータ構造は問わない。ヘモグロビン情報は、ヘモグロビン量でも良いし、ヘモグロビン量を算出するための電圧などでも良い。ヘモグロビン情報の例については後述する。ヘモグロビン情報取得部５２は、通常、ＭＰＵやメモリ等から実現され得る。ヘモグロビン情報取得部５２の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
ヘモグロビン情報送信部５３は、ヘモグロビン情報を、順次、リアルタイム同時計測装置８に送信する。ヘモグロビン情報送信部５３は、ヘモグロビン情報を、順次、複数のリアルタイム同時計測装置８に送信しても良い。かかる場合、ヘモグロビン情報送信部５３は、例えば、マルチキャストにより、ヘモグロビン情報を、順次、複数のリアルタイム同時計測装置８に送信する。複数のリアルタイム同時計測装置８上で動作する各アプリケーションがヘモグロビン情報を利用する場合、自マシンの共有メモリにアクセスすればよく、共有メモリへのアクセス時の遅れを解消できる。ヘモグロビン情報送信部５３は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
脳波計測装置６は、脳波を計測する装置である。脳波を計測する機能を有する装置として、例えば、ＢｉｏＳｅｍｉ社の装置（ＡｃｔｉｖｅＴｗｏシステム）等が存在する。また、脳波計測装置６は、通常、測定開始の指示を受け付け、順次、脳波情報を取得し、リアルタイム同時計測装置８に送信する。また、脳波計測装置６は、同期信号出力装置４から受信した同期信号に合わせ、脳波情報を取得する。
脳波同期信号受信部６１は、同期信号出力装置４から同期信号を受信する。脳波同期信号受信部６１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
脳波情報取得部６２は、脳波同期信号受信部６１が同期信号を受信したタイミングで、被験者の脳波に関する情報である脳波情報を取得する。ここで、受信したタイミングとは、定期的に同期信号を受信する場合、同期信号受信後に脳波情報を取得することである。脳波情報取得部６２は、脳波同期信号受信部６１が同期信号を受信したタイミングに合わせて脳波情報を取得し、その後、定期的に、順次、脳波情報を取得することは好適である。また、脳波情報取得部６２は、脳波同期信号受信部６１が同期信号を受信した後のみ、脳波情報を取得しても良い。脳波情報取得部６２は、通常、被験者の脳波に関する情報である脳波情報を、順次、取得する。脳波情報取得部６２は、第二のサンプリング周波数で、脳波情報を、順次、取得する。なお、第二のサンプリング周波数は、例えば、１０２４Ｈｚである。脳波情報取得部６２は、公知技術により実現可能であるので、詳細な説明を省略する。また、脳波情報は、例えば、頭皮上での電位差（単位は、例えば、「マイクロボルト」）である。脳波情報取得部６２は、通常、ＭＰＵやメモリ等から実現され得る。脳波情報取得部６２の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
脳波情報送信部６３は、脳波情報取得部６２が取得した脳波情報を、順次、リアルタイム同時計測装置８に送信する。脳波情報送信部６３は、脳波情報を、順次、複数のリアルタイム同時計測装置８に送信しても良い。かかる場合、脳波情報送信部６３は、例えば、マルチキャストにより、脳波情報を、順次、複数のリアルタイム同時計測装置８に送信する。複数のリアルタイム同時計測装置８上で動作する各アプリケーションが脳波情報を利用する場合、自マシンの共有メモリにアクセスすればよく、共有メモリへのアクセス時の遅れを解消できる。脳波情報送信部６３は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
生体情報取得装置７は、生体情報を取得する装置である。生体情報については、後述する。また、生体情報取得装置７は、通常、測定開始の指示を受け付け、順次、生体情報を取得し、リアルタイム同時計測装置８に送信する。また、生体情報取得装置７は、同期信号出力装置４から受信した同期信号に合わせ、生体情報を取得する。
生体同期信号受信部７１は、同期信号出力装置４から同期信号を受信する。生体同期信号受信部７１は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
生体情報取得部７２は、生体同期信号受信部７１が同期信号を受信したタイミングで、一の被験者の頭部の生体情報を取得する。ここで、受信したタイミングとは、定期的に同期信号を受信する場合、同期信号受信後に生体情報を取得することである。生体情報取得部７２は、生体同期信号受信部７１が同期信号を受信したタイミングに合わせて生体情報を取得し、その後、定期的に、順次、生体情報を取得することは好適である。また、生体情報取得部７２は、生体同期信号受信部７１が同期信号を受信した後のみ、生体情報を取得しても良い。通常、生体情報取得部７２は、被験者の１以上の箇所から生体に関する情報である生体情報を、順次、取得する。また、ここで、生体情報とは、筋電情報、眼電情報、心電情報のうちの1以上の情報を含む情報である。また、筋電情報とは、被験者の体全体または体の一部から取得され得る筋電（ＥＭＧ）に関する情報である。また、眼電情報とは、被験者の眼周辺から取得され得る眼電（ＥＯＧ）に関する情報である。さらに、心電情報とは、被験者の心臓周辺から取得され得る心電（ＥＣＧ）に関する情報である。また、生体情報取得部７２は、公知技術により実現可能であるので、詳細な説明を省略する。
筋電情報取得手段７２１は、被験者の体全体または体の一部から、筋電情報を、順次、取得する。筋電情報取得手段７２１は、図３に示すように、被験者の左右の腕部の４箇所から順次、筋電情報を取得することは好適である。
眼電情報取得手段７２２は、図３に示すように、被験者の顔部の４箇所から順次、眼電情報を取得することは好適である。
心電情報取得手段７２３は、図３に示すように、被験者の心臓周辺から順次、心電情報を取得することは好適である。
なお、図３の小矩形（９）は、筋電情報や眼電情報や心電情報を取得するための電極である。また、図３において、ＮＩＲＳ脳計測装置５が取得するヘモグロビン情報のチャネル数は、例えば、４８である。つまり、Ｌｉｎｅ３１を流れる信号の数は、４８である。また、脳波計測装置６が取得する脳波情報のチャネル数は、例えば、６４である。つまり、Ｌｉｎｅ３２を流れる信号の数は、６４である。また、筋電情報は、例えば、筋線維が興奮する際に発生する活動電位である。また、ＮＩＲＳ脳計測装置５が取得するヘモグロビン情報のチャネル数や、脳波計測装置６が取得する脳波情報のチャネル数は、上記に記載されたチャネル数に限らないことは言うまでもない。
生体情報送信部７３は、生体情報取得部７２が取得した生体情報を、順次、リアルタイム同時計測装置８に送信する。生体情報送信部７３は、生体情報を、順次、複数のリアルタイム同時計測装置８に送信しても良い。かかる場合、生体情報送信部７３は、例えば、マルチキャストにより、生体情報を、順次、複数のリアルタイム同時計測装置８に送信する。複数のリアルタイム同時計測装置８上で動作する各アプリケーションが生体情報を利用する場合、自マシンの共有メモリにアクセスすればよく、共有メモリへのアクセス時の遅れを解消できる。生体情報送信部７３は、通常、無線または有線の通信手段で実現されるが、放送手段で実現されても良い。
リアルタイム同時計測装置８は、ヘモグロビン情報と脳波情報との同期をとり、出力する装置である。また、リアルタイム同時計測装置８は、ヘモグロビン情報と脳波情報と生体情報との同期をとり、出力する装置であることは好適である。
情報格納部８０は、情報を格納し得る。ここで、情報とは、被験者に対する指示、被験者に見せて、反応を検査するための情報などである。情報格納部８０は、不揮発性の記録媒体が好適であるが、揮発性の記録媒体でも実現可能である。情報格納部８０に情報が記憶される過程は問わない。例えば、記録媒体を介して情報が情報格納部８０で記憶されるようになってもよく、通信回線等を介して送信された情報が情報格納部８０で記憶されるようになってもよく、あるいは、入力デバイスを介して入力された情報が情報格納部８０で記憶されるようになってもよい。
第一共有メモリ８１は、ヘモグロビン情報を格納し得る。第二共有メモリ８２は、脳波情報を格納し得る。第三共有メモリ８３は、生体情報を格納し得る。
第一共有メモリ８１、第二共有メモリ８２、および第三共有メモリ８３は、通常、不揮発性の記録媒体で実現されるが、揮発性の記録媒体で実現されても良い。
情報出力部８４は、情報格納部８０に格納されている情報を出力する。ここで、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタへの印字、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラム等への処理結果の引渡し等を含む概念である。情報出力部８４は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。情報出力部８４は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
ヘモグロビン情報受信部８５は、ＮＩＲＳ脳計測装置５から、ヘモグロビン情報を、順次、受信する。ヘモグロビン情報受信部８５は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
脳波情報受信部８６は、脳波計測装置６から、脳波情報を、順次、受信する。脳波情報受信部８６は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
生体情報受信部８７は、生体情報取得装置７から、生体情報を、順次、受信する。生体情報受信部８７は、通常、無線または有線の通信手段で実現されるが、放送を受信する手段で実現されても良い。
同期処理部８８は、ヘモグロビン情報と脳波情報との同期を取る処理を行う。また、同期処理部８８は、ヘモグロビン情報と脳波情報と生体情報との同期を取る処理を行っても良い。なお、生体情報とは、上述したように、筋電情報、眼電情報、心電情報のうち、１種類以上の情報を含む。同期を取る処理とは、例えば、異なるサンプリング周波数でサンプリングされた２種類以上の情報（例えば、ヘモグロビン情報と脳波情報）について、情報の数を合わせる処理である。また、同期を取る処理とは、例えば、情報の取得が開始されたタイミング合わせる処理である。開始タイミングを合わせる処理として、例えば、２種類以上の情報について、スタート以前の情報を消去し、情報の頭をそろえる処理である。かかる場合、ヘモグロビン情報と脳波情報と生体情報とには、それぞれスタート情報が書き込まれている。また、同期を取る処理とは、例えば、２種類以上の情報について、同期信号をチェックし、同期信号を用いて、２種類以上の情報のタイミングを合わせる処理である。なお、かかる場合、例えば、ヘモグロビン情報と脳波情報と生体情報とには、それぞれ同期信号が書き込まれている。
さらに具体的には、同期処理部８８は、例えば、第一のサンプリング周波数と第二のサンプリング周波数のうち大きい方のサンプリング周波数に対応するヘモグロビン情報または脳波情報をそのまま取得し、小さい方のサンプリング周波数に対応する脳波情報またはヘモグロビン情報について、大きい方のサンプリング周波数の情報と同一の数の情報となるように、時間的に最も近くに受信された情報を複写することによりヘモグロビン情報と脳波情報との同期を取る。かかる場合、同期処理部８８は、例えば、ヘモグロビン情報および脳波情報が有する開始フラグを用いて、最初のサンプリングデータを合わせる。また、同期処理部８８は、受信された情報を用いて、当該情報を外挿または内挿することにより、小さい方のサンプリング周波数に対応する脳波情報またはヘモグロビン情報について、大きい方のサンプリング周波数の情報と同一の数の情報となるようにして、両データの同期をとっても良い。なお、外挿または内挿する処理について、公知技術であるので詳細な説明を省略する。
また、同期処理部８８は、他の方法により、ヘモグロビン情報と脳波情報との同期をとっても良い。つまり、例えば、同期処理部８８は、第一のサンプリング周波数と第二のサンプリング周波数のうち小さい方のサンプリング周波数に対応するヘモグロビン情報または脳波情報をそのまま取得し、大きい方のサンプリング周波数に対応する脳波情報またはヘモグロビン情報について、小さい方のサンプリング周波数の情報と同一の数の情報となるように、情報を間引いて、取得する。なお、かかる場合も、上記と同様に、同期処理部８８は、例えば、ヘモグロビン情報および脳波情報が有する開始フラグを用いて、最初のサンプリングデータを合わせる。
同期処理部８８は、通常、ＭＰＵやメモリ等から実現され得る。同期処理部８８の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
同期処理手段８８１は、受信されたヘモグロビン情報、および脳波情報との同期を取る処理を行う。また、同期処理手段８８１は、受信されたヘモグロビン情報、脳波情報、および生体情報との同期を取る処理を行っても良い。同期を取る処理の例については、既に説明した。同期処理手段８８１は、通常、ＭＰＵやメモリ等から実現され得る。同期処理手段８８１の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
ヘモグロビン情報記録手段８８２は、同期処理手段８８１の処理後のヘモグロビン情報を第一共有メモリ８１に記録する。
脳波情報記録手段８８３は、同期処理手段８８１の処理後の脳波情報を第二共有メモリ８２に記録する。
生体情報記録手段８８４は、同期処理手段８８１の処理後の生体情報を第三共有メモリ８３に記録する。なお、同期処理手段８８１の処理後の各情報（ヘモグロビン情報、脳波情報、生体情報）は、受信された各情報と同じでも良い。
ヘモグロビン情報記録手段８８２、脳波情報記録手段８８３、および生体情報記録手段８８４は、通常、ＭＰＵやメモリ等から実現され得る。ヘモグロビン情報記録手段８８２等の処理手順は、通常、ソフトウェアで実現され、当該ソフトウェアはＲＯＭ等の記録媒体に記録されている。但し、ハードウェア（専用回路）で実現しても良い。
出力部８９は、同期がとられたヘモグロビン情報と脳波情報とを出力する。また、出力部８９は、同期がとられたヘモグロビン情報と脳波情報と生体情報とを出力しても良い。また、出力部８９は、同期がとられたヘモグロビン情報と脳波情報と、情報出力部８４が出力した情報とを対応付けて蓄積することは好適である。さらに、出力部８９は、同期がとられたヘモグロビン情報と脳波情報と生体情報と、情報出力部８４が出力した情報とを対応付けて蓄積することは好適である。なお、出力とは、ディスプレイへの表示、プロジェクターを用いた投影、プリンタへの印字、音出力、外部の装置への送信、記録媒体への蓄積、他の処理装置や他のプログラム等への処理結果の引渡し等を含む概念である。また、同期がとられたヘモグロビン情報と脳波情報等は、例えば、発話できない障害者の意思を推定するために利用され得る。また、同期がとられたヘモグロビン情報と脳波情報等は、例えば、被験者の脳の状態を推定するために利用され得る。また、同期がとられたヘモグロビン情報と脳波情報と、情報出力部８４が出力した情報とを対応付けられている情報は、出力された情報と、被験者の脳波の状態との関係を把握、分析するなどのために利用できる。その他、同期がとられたヘモグロビン情報と脳波情報等の利用方法は問わない。出力部８９は、ディスプレイやスピーカー等の出力デバイスを含むと考えても含まないと考えても良い。出力部８９は、出力デバイスのドライバーソフトまたは、出力デバイスのドライバーソフトと出力デバイス等で実現され得る。
次に、リアルタイム同時計測システムの動作について説明する。ＮＩＲＳ脳計測装置５、脳波計測装置６、および生体情報取得装置７は、それぞれ、対応する情報を、所定のサンプリング周波数で、かつ、同期信号出力装置４から受信した同期信号に合わせて、順次、取得し、リアルタイム同時計測装置８に送信する。
次に、リアルタイム同時計測装置８の動作について図４のフローチャートを用いて説明する。
（ステップＳ４０１）情報出力部８４は、情報格納部８０に格納されている情報を出力するタイミングが否かを判断する。情報を出力するタイミングであればステップＳ４０２に行き、情報を出力するタイミングでなければステップＳ４０４に行く。なお、情報出力部８４は、例えば、図示しない受付手段がユーザから指示を受け付けた場合、情報を出力するタイミングである、と判断する。また、情報出力部８４は、例えば、予め決められた時刻になったことをトリガーとして、情報を出力するタイミングである、と判断しても良い。
（ステップＳ４０２）情報出力部８４は、情報格納部８０に格納されている情報を取得する。なお、情報出力部８４は、例えば、ユーザ指示に対応する情報を、情報格納部８０から取得する。
（ステップＳ４０３）情報出力部８４は、ステップＳ４０２で取得した情報を出力する。ステップＳ４０１に戻る。
（ステップＳ４０４）ヘモグロビン情報受信部８５、脳波情報受信部８６、または生体情報受信部８７は、情報を受信したか否かを判断する。情報を受信すればステップＳ４０５に行き、情報を受信しなければステップＳ４０９に行く。
（ステップＳ４０５）同期処理部８８は、同期処理を行う。同期処理の例について、図５、図６を用いて説明する。
（ステップＳ４０６）出力部８９は、同期がとられた情報が存在するか否かを判断する。情報が存在すればステップＳ４０７に行き、情報が存在しなければステップＳ４０１に戻る。
（ステップＳ４０７）出力部８９は、出力する情報を構成する。出力部８９は、例えば、同期がとられたヘモグロビン情報と脳波情報と、情報出力部８４が出力した情報とを対応付けて、出力する情報を構成する。また、出力部８９は、例えば、同期がとられたヘモグロビン情報と脳波情報と生体情報と、情報出力部８４が出力した情報とを対応付けて、出力する情報を構成する。
（ステップＳ４０８）出力部８９は、ステップＳ４０７で構成した情報を出力し、ステップＳ４０１に戻る。
（ステップＳ４０９）図示しない手段（例えば、受付部）は、終了指示を受け付けたか否かを判断する。終了指示を受け付ければ処理を終了し、終了指示を受け付けなければステップＳ４０１に戻る。
なお、図４のフローチャートにおいて、リアルタイム同時計測装置８は、ヘモグロビン情報と脳波情報のみを受信して処理しても良い。かかる場合、生体情報受信部８７は不要である。
また、図４のフローチャートにおいて、出力部８９は、情報出力部８４が出力した情報を含まずに、出力する情報を構成しても良い。
次に、ステップＳ４０５における同期処理の第一の例について、図５のフローチャートを用いて説明する。第一の同期処理は、情報の受信後、直ちに、同期処理を行う例である。
（ステップＳ５０１）同期処理手段８８１は、受信していない種類の情報（ヘモグロビン情報、または脳波情報、または生体情報のうちの一つまたは二つ）が存在するか否かを判断する。受信していない種類の情報が存在すればステップＳ５０２に行き、存在しなければステップＳ５０３に行く。
（ステップＳ５０２）同期処理手段８８１は、受信していない種類の情報について、最近に受信した情報をコピーする。そのコピー処理により、すべての種類の情報の数が同一になる。つまり、コピー処理により、すべての種類の情報について、情報を取得するサンプリング周波数は擬似的に同一となる。
（ステップＳ５０３）同期処理部８８（ヘモグロビン情報記録手段８８２、脳波情報記録手段８８３、または生体情報記録手段８８４）は、すべての種類の情報（ヘモグロビン情報と脳波情報、またはヘモグロビン情報と脳波情報と生体情報）を、それぞれ別個の共有メモリ（第一共有メモリ８１、第二共有メモリ８２、または第三共有メモリ８３）に書き込み、ステップＳ５０１に戻る。なお、共有メモリとは、メモリ上又はファイル上にある共有データ保持領域である。また、共有メモリとは、リアルタイム同時計測装置８が保持している記憶媒体であり、１以上のアプリケーションや装置（図示しない）からアクセス可能な記憶媒体である。
なお、図５のフローチャートにおいて、同期処理部８８は、ステップＳ５０３において情報を共有メモリに書き込んだが、出力部８９に渡すなど、情報に対して他の処理をしても良い。
次に、ステップＳ４０５の同期処理の第二の例について、図６のフローチャートを用いて説明する。第二の同期処理は、情報の出力時に、同期処理を行う例である。
（ステップＳ６０１）同期処理部８８は、受信された情報を、その種類ごとに、異なる共有メモリ（第一共有メモリ８１、第二共有メモリ８２、または第三共有メモリ８３）に書き込む。なお、情報の種類とは、例えば、ヘモグロビン情報、または脳波情報、または生体情報である。
（ステップＳ６０２）同期処理部８８は、情報の出力タイミングであるか否かを判断する。出力タイミングであればステップＳ６０３に行き、出力タイミングでなければ上位処理にリターンする。例えば、リアルタイム同時計測装置８は、自身が保持している時計を用いて、出力タイミングか否かを判断する。例えば、リアルタイム同時計測装置８は、定期的（例えば、１０ｍｓｅｃごと）に、情報を出力する。
（ステップＳ６０３）同期処理部８８は、情報をアクセスするための現在のポインタから、所定時間の情報を、共有メモリから読み出す。同期処理部８８は、すべての種類の情報を、情報の種類ごとに読み出し、メモリ上に配置する。なお、情報を読み出した場合、情報をアクセスするためのポインタは、次の読み出しの位置まで移動する。
（ステップＳ６０４）同期処理部８８は、ステップＳ６０３で読み出した情報の中に、同期をとるためのスタートビットが存在するか否かを判断する。スタートビットが存在すればステップＳ６０５に行き、スタートビットが存在しなければステップＳ６０７に行く。
（ステップＳ６０５）同期処理部８８は、すべての種類の情報について、スタートビット以前の情報を削除する。
（ステップＳ６０６）同期処理部８８は、すべての種類の情報について、スタートビットから所定時間の情報を、それぞれ、対応する共有メモリ（第一共有メモリ８１、第二共有メモリ８２、または第三共有メモリ８３）から読み出し、メモリ上に配置する。
（ステップＳ６０７）同期処理部８８は、すべての種類の情報の中から、最大の情報数（Ｘ）を取得する。
（ステップＳ６０８）同期処理部８８は、情報数（Ｘ）に合うように、最大の情報数ではない種類の情報に対して補完処理を行う。補完処理とは、情報数（Ｘ）になるように、最近に受信した情報をコピーや外挿や内挿することである。上位処理にリターンする。
以下、本実施の形態におけるリアルタイム同時計測システムの具体的な動作について説明する。
図７は、実装されたリアルタイム同時計測システムである。図７において、同期信号出力装置４は隠れている。同期信号出力装置４は、ＮＩＲＳ脳計測装置５、脳波計測装置６、および生体情報取得装置７と、ＬＡＮおよびＢＮＣケーブルにより接続されている。また、図７において、ＢＭＩ処理データとは、同期がとられた後の情報（例えば、ＮＩＲＳ情報、脳波情報、生体情報などを含む）である。
図８は、同期信号出力装置４である。図８において、同期信号生成用ＰＣが同期信号を生成し、同期信号出力回路を経て、ＮＩＲＳ同期信号受信部５１、脳波同期信号受信部６１、生体同期信号受信部７１へ同期信号を出力している。
図９は、被験者が頭部にかぶる測定器具である。図９において、ヘモグロビン情報取得部５２と、脳波情報取得部６２のハードウェア構成が示されている。なお、ヘモグロビン情報取得部５２は、例えば、７８０ｎｍ、８０５ｎｍ、８３０ｎｍの近赤外光を発光させて頭部に当てた場合の電圧と、発光しない場合の電圧を取得し、当該取得した電圧を、予め決められた式（ヘモグロビン量を算出する式）に代入し、ヘモグロビン量であるヘモグロビン情報を取得する。また、ヘモグロビン情報取得部５２は、例えば、４８チャネル（図９において、４８の測定点が存在する）から、ヘモグロビン情報を取得する。なお、ヘモグロビン情報取得部５２は、予め決められた式の情報を保持している。
かかる状況において、ユーザは、測定開始の指示を第一操作装置１に入力する。そして、第一指示受付部１１は、測定開始の指示を受け付ける。次に、第一指示送信部１２は、測定開始の指示を、第二操作装置２および第三操作装置３に送信する。そして、第二操作装置２の第二指示受信部２１、および第三操作装置３の第三指示受信部３１は、測定開始の指示を受信する。次に、第二操作装置２の第二指示送信部２２は、測定開始の指示を、ＮＩＲＳ脳計測装置５に送信する。さらに、第三操作装置３の第三指示受信部３１は、測定開始の指示を、脳波計測装置６に送信する。なお、ＮＩＲＳ脳計測装置５、および脳波計測装置６に送信される情報は、例えば、図１０の情報である。図１０は、ＮＩＲＳ脳計測装置５、脳波計測装置６、生体情報取得装置７などにトリガーをかけるためのトリガー情報である。トリガー情報は、例えば、８ｂｉｔであり、測定開始の指示を示すスタートビット（１ｂｉｔ目）、測定終了の指示を示すエンドビット（２ｂｉｔ目）、同期をとるためのイベントビット（３ｂｉｔ目）を有する。トリガー情報は、例えば、４ｂｉｔ目から６ｂｉｔ目までは、タスク判別用に利用され得る。また、７、８ｂｉｔ目は、目印用に利用され得る。タスク判別用のビットとは、情報出力部８４にどのような情報を表示したかをデータとして残すためのものである。また、目印とは、実験中に記録したい項目などがあった場合に、データとして残すためのものである。
そして、ＮＩＲＳ脳計測装置５のＮＩＲＳ同期信号受信部５１は、スタートを示すトリガー情報を受信する。次に、ヘモグロビン情報取得部５２は、順次、ＮＩＲＳ脳計測装置５固有の周波数（例えば、４０Ｈｚ）で、ヘモグロビン情報を順次取得していく。そして、ヘモグロビン情報送信部５３は、ヘモグロビン情報取得部５２が取得したヘモグロビン情報を順次、リアルタイム同時計測装置８に送信する。
また、脳波計測装置６の脳波同期信号受信部６１は、スタートを示すトリガー情報を受信する。次に、脳波情報取得部６２は、順次、脳波計測装置６固有の周波数（例えば、１０２４Ｈｚ）で、脳波情報を順次取得していく。そして、脳波情報送信部６３は、脳波情報取得部６２が取得した脳波情報を順次、リアルタイム同時計測装置８に送信する。
次に、リアルタイム同時計測装置８の情報出力部８４は、情報「右手を挙げてください。」を情報格納部８０から読み出し、ディスプレイに表示する、とする。そして、被験者は、ディスプレイに表示された「右手を挙げてください。」を見て、右手を挙げた、とする。なお、現在も、ＮＩＲＳ脳計測装置５はヘモグロビン情報を取得、送信し続け、脳波計測装置６は脳波情報を取得、送信し続けている。
次に、同期信号出力装置４は、選択情報格納手段４１１に格納されている選択情報に従って、定期的に（例えば、１ｋＨｚの周期で）、第一同期信号出力手段４１２または第二同期信号出力手段４１３により、同期信号を、ＮＩＲＳ脳計測装置５および脳波計測装置６に送信する。なお、第二同期信号出力手段４１３が送信する同期信号の例は、図１０のトリガー情報と同様の構造であり、例えば、３ｂｉｔ目が「１」、その他のｂｉｔが「０」である情報である。
そして、ＮＩＲＳ脳計測装置５のＮＩＲＳ同期信号受信部５１、および脳波計測装置６の脳波同期信号受信部６１は、同期信号であるトリガー情報を受信する。そして、当該同期信号に合わせ、ＮＩＲＳ脳計測装置５のヘモグロビン情報取得部５２は、ヘモグロビン情報を取得し、ヘモグロビン情報送信部５３は、ヘモグロビン情報を、リアルタイム同時計測装置８に送信する。また、当該同期信号に合わせ、脳波計測装置６の脳波情報取得部６２は、脳波情報を取得し、脳波情報送信部６３は、脳波情報を、リアルタイム同時計測装置８に送信する。
そして、リアルタイム同時計測装置８は、例えば、ＮＩＲＳ脳計測装置５から、図１１に示すヘモグロビン情報を、順次、受信する。また、リアルタイム同時計測装置８は、例えば、脳波計測装置６から、図１２に示す脳波情報を、順次、受信する。なお、図１１において、ヘモグロビン情報は８ｍｓｅｃごとに受信される。図１２において、脳波情報は２ｍｓｅｃごとに受信される。そして、図１１、図１２から、ＮＩＲＳ脳計測装置５におけるヘモグロビン情報の取得の第一のサンプリング周波数と、脳波計測装置６における脳波情報の取得の第二のサンプリング周波数が異なることが分かる。第一のサンプリング周波数と第二のサンプリング周波数とは、ここでは、１：４である。なお、図１１、図１２の情報を、グラフにした図が図１３である。
次に、同期処理部８８は、例えば、２ｍｓｅｃごとに、以下の同期処理を行う。つまり、脳波情報もヘモグロビン情報も受信された場合、同期処理部８８は、両方の情報を、それぞれ、第一共有メモリ８１または第二共有メモリ８２に書き込む。また、脳波情報のみ受信された場合、同期処理部８８は、脳波情報を第二共有メモリ８２に書き込み、かつ、ヘモグロビン情報を補完する。かかる補完は、例えば、最近に受信されたヘモグロビン情報を第一共有メモリ８１に書き込む。かかる処理により、同期処理部８８は、同期がとれた脳波情報とヘモグロビン情報を得る。つまり、同期処理部８８は、図１４のグラフに示すような脳波情報とヘモグロビン情報を得る。
次に、出力部８９は、同期がとられた脳波情報とヘモグロビン情報を出力する。かかる出力例は、図１４である。なお、出力部８９は、図１５の情報を、例えば、他の処理装置や他のプログラムへ引き渡しても良い。図１５の情報は、図１４のグラフを構成するための元になる情報である。
なお、図１１、図１２等において、ヘモグロビン情報と脳波情報は、各々１チャネルから取得された情報であった。しかし、ヘモグロビン情報と脳波情報は、通常、２以上のチャネルから取得される。
また、上記具体例において、同期処理部８８は、ヘモグロビン情報と脳波情報との同期を取る処理を行った。しかし、同様のアルゴリズムで、同期処理部８８は、ヘモグロビン情報と脳波情報と生体情報との同期を取る処理を行うことは好適である。
以上、本実施の形態によれば、脳活動に起因した血流変化を測定するＮＩＲＳと脳活動に起因した電気活動を測定するＥＥＧを同時かつ同期を取りながら取得し、リアルタイムに使用することが可能となり、精度高く脳の状態を把握できるだけでなく、既存技術では不可能であった脳活動に起因した血流変化と電気活動の関係を調べることができる。
また、本実施の形態によれば、ヘモグロビン情報と脳波情報と生体情報とを同時かつ同期を取りながら取得し、リアルタイムに使用することが可能となり、さらに精度高く脳の状態を把握できるだけでなく、既存技術では不可能であった脳活動に起因した血流変化と電気活動の関係を調べることができる。
また、本実施の形態によれば、同期信号出力装置４から同期信号を、ＮＩＲＳ脳計測装置５と脳波計測装置６、またはＮＩＲＳ脳計測装置５と脳波計測装置６と生体情報取得装置７に送信し、同期を取りながら取得することにより、精度高く同期がとれ、より精度高く脳の状態を把握できる。つまり、脳活動の計測のためには、数１０ｍｓｅｃ単位の精度が必要であり、かかる要求に対応するために、同期信号出力装置４から同期信号は重要である。なお、同期信号出力装置４が存在しない場合、ＮＩＲＳ脳計測装置５と脳波計測装置６の測定開始の時期や情報記録の時期が、数１００ｍｓｅｃ〜数ｓｅｃ、ずれる場合があり得る。
また、本リアルタイム同時計測システムは、具体的には、例えば、ヘモグロビン情報と脳波情報を同時かつ同期を取りながら取得し、リアルタイムに使用することにより、例えば、リハビリに利用できる。つまり、脳の一部を損傷した患者が、自分の意思で手や足を動かそうとしていて、動かない場合、本情報処理システムにより、脳活動が正常または異常状態から脱した状態で働いていることが分かり、リハビリのモチベーションを維持できる。
また、本リアルタイム同時計測システムは、例えば、スポーツのイメージトレーニングに利用できる。つまり、ユーザがイメージトレーニングを行っている際に、脳活動がイメージトレーニングしている状態になっているか否かが分かり、適切なイメージトレーニングを行うことに寄与する。
さらに、本リアルタイム同時計測システムは、例えば、ユーザの感情をコントロールする訓練などにも利用できる。つまり、感情の高まりがあることがリアルタイムに分かり、感情の高まりを抑える訓練が可能となる。
なお、本実施の形態において、同期をとるためのアルゴリズムやタイミングは問わない。つまり、例えば、ＮＩＲＳ脳計測装置５、脳波計測装置６、および生体情報取得装置７は、それぞれ、ヘモグロビン情報、脳波情報、および生体情報を取得し、格納しておく。そして、ヘモグロビン情報、脳波情報、および生体情報は、同期信号（例えば、時刻情報）と対になっている。次に、ＮＩＲＳ脳計測装置５、脳波計測装置６、および生体情報取得装置７は、それぞれタイミングを合わせず（タイミングを問わず）、ヘモグロビン情報、脳波情報、および生体情報をリアルタイム同時計測装置８に送信する。そして、リアルタイム同時計測装置８は、上述した処理と同様の処理により、同期信号を用いて、ヘモグロビン情報、脳波情報、および生体情報の同期をとる。なお、リアルタイム同時計測装置８は、ヘモグロビン情報、脳波情報、および生体情報のうち、任意の２種類の情報の同期をとる処理のみを行っても良い。なお、同期信号とは、同期をとるために利用できる情報であれば、時刻情報以外の情報でも良いことは言うまでもない。
また、本実施の形態によれば、同期がとられたヘモグロビン情報と脳波情報等の利用態様も種々あり得、問わない。
また、本実施の形態において、リアルタイム同時計測システムは、複数のＮＩＲＳ脳計測装置５を連結して、複数のヘモグロビン情報を取得しても良い。
また、本実施の形態の具体例において、ヘモグロビン情報と脳波情報を同時に、かつ同期を取りながら取得し、リアルタイムに出力した。しかし、リアルタイム同時計測システムは、ヘモグロビン情報（ＮＩＲＳ）と脳波情報と生体情報（例えば、ＥＭＧ）とを同時に、かつ同期を取りながら取得し、リアルタイムに出力しても良い。かかる場合の出力例は、図１６である。
また、本実施の形態の具体例において、同期信号出力装置４から出した同期信号を脳波同期信号受信部６１、ＮＩＲＳ同期信号受信部５１で受信した例を図１７に示す。図１７は、脳波計測同期信号受信部６１のサンプリング周波数を１０２４Ｈｚ、ＮＩＲＳ同期信号受信部５１のサンプリング周波数を７．６９Ｈｚにした場合で、スタート信号として「２」のシグナルを、同期信号として「１」のシグナルを出した例である。
さらに、本実施の形態における処理は、ソフトウェアで実現しても良い。そして、このソフトウェアをソフトウェアダウンロード等により配布しても良い。また、このソフトウェアをＣＤ−ＲＯＭなどの記録媒体に記録して流布しても良い。なお、このことは、本明細書における他の実施の形態においても該当する。なお、本実施の形態におけるリアルタイム同時計測装置を実現するソフトウェアは、以下のようなプログラムである。つまり、このプログラムは、コンピュータを、同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得したＮＩＲＳ脳計測装置から、当該ヘモグロビン情報を、順次、受信するヘモグロビン情報受信部と、同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得した脳波計測装置から、当該脳波情報を、順次、受信する脳波情報受信部と、前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理部と、前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力部として機能させるためのプログラムである。
また、上記プログラムにおいて、前記同期信号出力部は、電気信号により実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第一同期信号出力手段と、ソフトウェアにより実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第二同期信号出力手段と、前記２つの同期信号出力手段のうち、いずれの同期信号出力手段により、同期信号を出力するかを示す選択情報を格納している選択情報格納手段と、前記選択情報に応じて、前記第一同期信号出力手段または前記第二同期信号出力手段のいずれかに同期信号の出力を指示する同期信号出力指示手段とを具備するものとして、コンピュータを機能させるためのプログラムであることは好適である。
また、上記プログラムにおいて、前記同期処理部は、前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理手段と、前記同期処理手段の処理後のヘモグロビン情報を前記第一共有メモリに書き込むヘモグロビン情報記録手段と、前記同期処理手段の処理後の脳波情報を前記第二共有メモリに書き込む脳波情報記録手段とを具備するものとして、コンピュータを機能させるためのプログラムであることは好適である。
また、上記プログラムにおいて、記憶媒体に格納されている情報を出力する情報出力部とをさらに具備し、前記出力部は、前記同期がとられたヘモグロビン情報と脳波情報と、前記情報出力部が出力した情報とを対応付けて蓄積するものとして、コンピュータを機能させるためのプログラムであることは好適である。
また、上記プログラムにおいて、前記ヘモグロビン情報取得部がヘモグロビン情報を取得する第一のサンプリング周波数と、前記脳波情報取得部が脳波情報を取得する第二のサンプリング周波数とが異なり、前記同期処理部は、第一のサンプリング周波数と第二のサンプリング周波数のうち大きい方のサンプリング周波数に対応するモグロビン情報または脳波情報をそのまま取得し、小さい方のサンプリング周波数に対応する脳波情報またはモグロビン情報について、大きい方のサンプリング周波数の情報と同一の数と情報なるように、時間的に最も近くに受信された情報を複写する、または受信された情報を外挿または内挿することにより前記ヘモグロビン情報と前記脳波情報との同期を取るものとして、コンピュータを機能させるためのプログラムであることは好適である。
また、上記プログラムにおいて、生体情報を、順次、受信する生体情報受信部をさらに具備し、前記リアルタイム同時計測装置の同期処理部は、前記ヘモグロビン情報と前記脳波情報と前記生体情報との同期を取る処理を行い、前記出力部は、前記同期がとられたヘモグロビン情報と脳波情報と生体情報とを出力するものとして、コンピュータを機能させるためのプログラムであることは好適である。
また、図１８は、本明細書で述べたプログラムを実行して、上述した実施の形態のリアルタイム同時計測装置等を実現するコンピュータの外観を示す。上述の実施の形態は、コンピュータハードウェア及びその上で実行されるコンピュータプログラムで実現され得る。図１８は、このコンピュータシステム３４０の概観図であり、図１９は、コンピュータシステム３４０の内部構成を示す図である。
図１８において、コンピュータシステム３４０は、ＦＤドライブ３４１１、ＣＤ−ＲＯＭドライブ３４１２を含むコンピュータ３４１と、キーボード３４２と、マウス３４３と、モニタ３４４とを含む。
図１８において、コンピュータ３４１は、ＦＤドライブ３４１１、ＣＤ−ＲＯＭドライブ３４１２に加えて、ＭＰＵ３４１３と、ＣＤ−ＲＯＭドライブ３４１２及びＦＤドライブ３４１１に接続されたバス３４１４と、ブートアッププログラム等のプログラムを記憶するためのＲＯＭ３４１５と、ＣＰＵ３４１３に接続され、アプリケーションプログラムの命令を一時的に記憶するとともに一時記憶空間を提供するためのＲＡＭ３４１６と、アプリケーションプログラム、システムプログラム、及びデータを記憶するためのハードディスク３４１７とを含む。ここでは、図示しないが、コンピュータ３４１は、さらに、ＬＡＮへの接続を提供するネットワークカードを含んでも良い。
コンピュータシステム３４０に、上述した実施の形態のリアルタイム同時計測装置等の機能を実行させるプログラムは、ＣＤ−ＲＯＭ３５０１、またはＦＤ３５０２に記憶されて、ＣＤ−ＲＯＭドライブ３４１２またはＦＤドライブ３４１１に挿入され、さらにハードディスク３４１７に転送されても良い。これに代えて、プログラムは、図示しないネットワークを介してコンピュータ３４１に送信され、ハードディスク３４１７に記憶されても良い。プログラムは実行の際にＲＡＭ３４１６にロードされる。プログラムは、ＣＤ−ＲＯＭ３５０１、ＦＤ３５０２またはネットワークから直接、ロードされても良い。
プログラムは、コンピュータ３４１に、上述した実施の形態のリアルタイム同時計測装置等の機能を実行させるオペレーティングシステム（ＯＳ）、またはサードパーティープログラム等は、必ずしも含まなくても良い。プログラムは、制御された態様で適切な機能（モジュール）を呼び出し、所望の結果が得られるようにする命令の部分のみを含んでいれば良い。コンピュータシステム３４０がどのように動作するかは周知であり、詳細な説明は省略する。
なお、上記プログラムにおいて、情報を送信する送信ステップや、情報を受信する受信ステップなどでは、ハードウェアによって行われる処理、例えば、送信ステップにおけるモデムやインターフェースカードなどで行われる処理（ハードウェアでしか行われない処理）は含まれない。
また、上記プログラムを実行するコンピュータは、単数であってもよく、複数であってもよい。すなわち、集中処理を行ってもよく、あるいは分散処理を行ってもよい。
また、上記各実施の形態において、一の装置に存在する２以上の通信手段（指示受付部、指示送信部など）は、物理的に一の媒体で実現されても良いことは言うまでもない。
また、上記各実施の形態において、各処理（各機能）は、単一の装置（システム）によって集中処理されることによって実現されてもよく、あるいは、複数の装置によって分散処理されることによって実現されてもよい。
本発明は、以上の実施の形態に限定されることなく、種々の変更が可能であり、それらも本発明の範囲内に包含されるものであることは言うまでもない。
以上のように、本発明にかかるリアルタイム同時計測システムは、ＮＩＲＳ測定情報およびＥＥＧ測定情報の同期が精度高くとれる、という効果を有し、リアルタイム同時計測システム等として有用である。
実施の形態におけるリアルタイム同時計測システムのブロック図 同リアルタイム同時計測装置のブロック図 同リアルタイム同時計測システムの概念図 同リアルタイム同時計測装置の動作について説明するフローチャート 同同期処理の例について説明するフローチャート 同同期処理の例について説明するフローチャート 同実装されたリアルタイム同時計測システムを示す図 同同期信号出力装置を示す図 同被験者が頭部にかぶる測定器具を示す図 同ＮＩＲＳ脳計測装置等に送信される情報の例を示す図 同リアルタイム同時計測装置が受信するヘモグロビン情報を示す図 同リアルタイム同時計測装置が受信する脳波情報を示す図 同リアルタイム同時計測装置が受信した情報を示すグラフ 同同期処理後のグラフ 同同期処理後の情報を示す図 同同期処理後のグラフの例を示す図 同脳波同期信号受信部およびＮＩＲＳ同期信号受信部が受信した同期信号の例を示す図 同リアルタイム同時計測装置等を実現するコンピュータシステムの概観図 同コンピュータシステムの内部構成を示す図
符号の説明
１ 第一操作装置
２ 第二操作装置
３ 第三操作装置
４ 同期信号出力装置
５ ＮＩＲＳ脳計測装置
６ 脳波計測装置
７ 生体情報取得装置
８ リアルタイム同時計測装置
１１ 第一指示受付部
１２ 第一指示送信部
２１ 第二指示受信部
２２ 第二指示送信部
３１ 第三指示受信部
３２ 第三指示送信部
４１ 同期信号出力部
５１ ＮＩＲＳ同期信号受信部
５２ ヘモグロビン情報取得部
５３ ヘモグロビン情報送信部
６１ 脳波同期信号受信部
６２ 脳波情報取得部
６３ 脳波情報送信部
７１ 生体同期信号受信部
７２ 生体情報取得部
７３ 生体情報送信部
８０ 情報格納部
８１ 第一共有メモリ
８２ 第二共有メモリ
８３ 第三共有メモリ
８４ 情報出力部
８５ ヘモグロビン情報受信部
８６ 脳波情報受信部
８７ 生体情報受信部
８８ 同期処理部
８９ 出力部
４１１ 選択情報格納手段
４１２ 第一同期信号出力手段
４１３ 第二同期信号出力手段
４１４ 同期信号出力指示手段
７２１ 筋電情報取得手段
７２２ 眼電情報取得手段
７２３ 心電情報取得手段
８８１ 同期処理手段
８８２ ヘモグロビン情報記録手段
８８３ 脳波情報記録手段
８８４ 生体情報記録手段

Claims (13)

  1. 同期信号出力装置とＮＩＲＳ脳計測装置と脳波計測装置とリアルタイム同時計測装置を具備するリアルタイム同時計測システムであって、
    前記同期信号出力装置は、
    前記ＮＩＲＳ脳計測装置と前記脳波計測装置とにおける情報取得のための同期をとるための信号である同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する同期信号出力部を具備し、
    前記ＮＩＲＳ脳計測装置は、
    前記同期信号出力装置から前記同期信号を受信するＮＩＲＳ同期信号受信部と、
    前記ＮＩＲＳ同期信号受信部が同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得するヘモグロビン情報取得部と、
    前記ヘモグロビン情報を、順次、前記リアルタイム同時計測装置に送信するヘモグロビン情報送信部とを具備し、
    前記脳波計測装置は、
    前記同期信号出力装置から前記同期信号を受信する脳波同期信号受信部と、
    前記脳波同期信号受信部が同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得する脳波情報取得部と、
    前記脳波情報を、順次、前記リアルタイム同時計測装置に送信する脳波情報送信部とを具備し、
    前記リアルタイム同時計測装置は、
    前記ヘモグロビン情報を、順次、受信するヘモグロビン情報受信部と、
    前記脳波情報を、順次、受信する脳波情報受信部と、
    前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理部と、
    前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力部とを具備するリアルタイム同時計測システム。
  2. 前記同期信号出力装置の前記同期信号出力部は、
    電気信号により実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第一同期信号出力手段と、
    ソフトウェアにより実現される同期信号を、前記ＮＩＲＳ脳計測装置および前記脳波計測装置に出力する第二同期信号出力手段と、
    前記２つの同期信号出力手段のうち、いずれの同期信号出力手段により、同期信号を出力するかを示す選択情報を格納している選択情報格納手段と、
    前記選択情報に応じて、前記第一同期信号出力手段または前記第二同期信号出力手段のいずれかに同期信号の出力を指示する同期信号出力指示手段とを具備する請求項１記載のリアルタイム同時計測システム。
  3. 前記リアルタイム同時計測装置は、
    前記ヘモグロビン情報を格納し得る第一共有メモリと、
    前記脳波情報を格納し得る第二共有メモリとをさらに具備し、
    前記同期処理部は、
    前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理手段と、
    前記同期処理手段の処理後のヘモグロビン情報を前記第一共有メモリに書き込むヘモグロビン情報記録手段と、
    前記同期処理手段の処理後の脳波情報を前記第二共有メモリに書き込む脳波情報記録手段とを具備する請求項１または請求項２記載のリアルタイム同時計測システム。
  4. 第一操作装置、第二操作装置、および第三操作装置とをさらに具備する請求項１から請求項３いずれか記載のリアルタイム同時計測システムであって、
    前記第一操作装置は、
    ユーザから指示を受け付ける第一指示受付部と、
    前記指示を前記第二操作装置および前記第三操作装置に対して指示を送信する第一指示送信部とを具備し、
    前記第二操作装置は、
    前記第一操作装置から前記指示を受信する第二指示受信部と、
    前記第二指示受信部が受信した前記指示を前記ＮＩＲＳ脳計測装置に対して指示を送信する第二指示送信部とを具備し、
    前記第三操作装置は、
    前記第一操作装置から前記指示を受信する第三指示受信部と、
    前記第三指示受信部が受信した前記指示を前記脳波計測装置に対して指示を送信する第三指示送信部とを具備する請求項１から請求項３いずれか記載のリアルタイム同時計測システム。
  5. 前記リアルタイム同時計測装置は、
    情報を格納し得る情報格納部と、
    前記情報を出力する情報出力部とをさらに具備し、
    前記出力部は、
    前記同期がとられたヘモグロビン情報と脳波情報と、前記情報出力部が出力した情報とを対応付けて蓄積する請求項１から請求項４いずれか記載のリアルタイム同時計測システム。
  6. 前記ヘモグロビン情報取得部がヘモグロビン情報を取得する第一のサンプリング周波数と、前記脳波情報取得部が脳波情報を取得する第二のサンプリング周波数とが異なり、
    前記同期処理部は、
    第一のサンプリング周波数と第二のサンプリング周波数のうち大きい方のサンプリング周波数に対応するモグロビン情報または脳波情報をそのまま取得し、小さい方のサンプリング周波数に対応する脳波情報またはモグロビン情報について、大きい方のサンプリング周波数の情報と同一の数と情報なるように、時間的に最も近くに受信された情報を複写する、または受信された情報を外挿または内挿することにより前記ヘモグロビン情報と前記脳波情報との同期を取る請求項１から請求項５いずれか記載のリアルタイム同時計測システム。
  7. 前記リアルタイム同時計測システムは、
    生体情報取得装置をさらに具備し、
    前記生体情報取得装置は、
    前記被験者の１以上の箇所から生体に関する情報である生体情報を、順次、取得する生体情報取得部と、
    前記生体情報を、順次、前記リアルタイム同時計測装置に送信する生体情報送信部とを具備し、
    前記リアルタイム同時計測装置は、
    前記生体情報を、順次、受信する生体情報受信部をさらに具備し、
    前記リアルタイム同時計測装置の同期処理部は、
    前記ヘモグロビン情報と前記脳波情報と前記生体情報との同期を取る処理を行い、
    前記出力部は、
    前記同期がとられたヘモグロビン情報と脳波情報と生体情報とを出力する請求項１から請求項６いずれか記載のリアルタイム同時計測システム。
  8. 前記生体情報取得部は、
    前記被験者の体全体または体の一部から筋電に関する情報である筋電情報、または前記被験者の眼周辺の眼電に関する情報である眼電情報、または前記被験者の心臓周辺の心電に関する情報である心電情報を、順次、取得する請求項７記載のリアルタイム同時計測システム。
  9. 前記ヘモグロビン情報と前記脳波情報、または前記ヘモグロビン情報と前記脳波情報と前記生体情報は、それぞれ同期信号を対応付けて有し、
    前記リアルタイム同時計測装置は、
    前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報、または前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報と前記同期信号と対応付けられている生体情報のぞれぞれを異なるタイミングで受信し、
    前記同期処理部は、
    前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報、または前記同期信号と対応付けられているヘモグロビン情報と前記同期信号と対応付けられている脳波情報と前記同期信号と対応付けられている生体情報を受信した後、前記ヘモグロビン情報と前記脳波情報、または前記ヘモグロビン情報と前記脳波情報と前記生体情報との同期を取る処理を行う請求項１から請求項８いずれか記載のリアルタイム同時計測システム。
  10. 同期信号出力装置とＮＩＲＳ脳計測装置と脳波計測装置と複数のリアルタイム同時計測装置を具備する請求項１から請求項９いずれか記載のリアルタイム同時計測システムであって、
    前記ヘモグロビン情報送信部と前記脳波情報送信部、または前記ヘモグロビン情報送信部と前記脳波情報送信部と前記生体情報送信部は、
    ぞれぞれヘモグロビン情報と脳波情報、またはヘモグロビン情報と脳波情報と生体情報を、前記複数のリアルタイム同時計測装置に送信する請求項１から請求項９いずれか記載のリアルタイム同時計測システム。
  11. 同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得したＮＩＲＳ脳計測装置から、当該ヘモグロビン情報を、順次、受信するヘモグロビン情報受信部と、
    前記同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得した脳波計測装置から、当該脳波情報を、順次、受信する脳波情報受信部と、
    前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理部と、
    前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力部とを具備するリアルタイム同時計測装置。
  12. ヘモグロビン情報受信部、脳波情報受信部、同期処理部、および出力部により実現されるリアルタイム同時計測方法であって、
    前記ヘモグロビン情報受信部により、同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得したＮＩＲＳ脳計測装置から、当該ヘモグロビン情報を、順次、受信するヘモグロビン情報受信ステップと、
    前記脳波情報受信部により、前記同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得した脳波計測装置から、当該脳波情報を、順次、受信する脳波情報受信ステップと、
    前記同期処理部により、前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理ステップと、
    前記出力部により、前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力ステップとを具備するリアルタイム同時計測方法。
  13. コンピュータを、
    同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、一の被験者の頭部のヘモグロビン量に関する情報であるヘモグロビン情報を取得したＮＩＲＳ脳計測装置から、当該ヘモグロビン情報を、順次、受信するヘモグロビン情報受信部と、
    同期信号出力装置から出力された同期信号を受信し、当該同期信号を受信したタイミングで、前記被験者の脳波に関する情報である脳波情報を取得した脳波計測装置から、当該脳波情報を、順次、受信する脳波情報受信部と、
    前記ヘモグロビン情報と前記脳波情報との同期を取る処理を行う同期処理部と、
    前記同期がとられたヘモグロビン情報と脳波情報とを出力する出力部として機能させるためのプログラム。
JP2008163092A 2008-06-23 2008-06-23 リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム Pending JP2010000283A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2008163092A JP2010000283A (ja) 2008-06-23 2008-06-23 リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム
US12/488,031 US8396525B2 (en) 2008-06-23 2009-06-19 Real-time simultaneous measurement system, real-time simultaneous measurement apparatus, real-time simultaneous measurement method, and storage medium in which program is stored

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008163092A JP2010000283A (ja) 2008-06-23 2008-06-23 リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム

Publications (1)

Publication Number Publication Date
JP2010000283A true JP2010000283A (ja) 2010-01-07

Family

ID=41431930

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008163092A Pending JP2010000283A (ja) 2008-06-23 2008-06-23 リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム

Country Status (2)

Country Link
US (1) US8396525B2 (ja)
JP (1) JP2010000283A (ja)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5610065B2 (ja) * 2011-04-11 2014-10-22 株式会社島津製作所 ホルダセット及びそれを用いた脳機能計測装置
US8885464B2 (en) 2011-04-28 2014-11-11 Bio-Signal Group Corp. Wireless EEG data recovery
CN102894971A (zh) * 2011-07-29 2013-01-30 中国科学院沈阳自动化研究所 脑电和近红外光谱联合采集脑信号的头盔
KR101314570B1 (ko) * 2011-10-12 2013-10-07 서울대학교산학협력단 정밀한 제어를 위한 뇌-기계 인터페이스 장치 및 방법
CN102715889B (zh) * 2012-06-11 2014-01-29 天津大学 一种脑力负荷检测方法
CN102779229B (zh) * 2012-06-14 2015-04-29 天津大学 一种基于脑功能状态的自适应自动化方法
US10528135B2 (en) 2013-01-14 2020-01-07 Ctrl-Labs Corporation Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
US20140240103A1 (en) 2013-02-22 2014-08-28 Thalmic Labs Inc. Methods and devices for combining muscle activity sensor signals and inertial sensor signals for gesture-based control
US10152082B2 (en) 2013-05-13 2018-12-11 North Inc. Systems, articles and methods for wearable electronic devices that accommodate different user forms
US11426123B2 (en) 2013-08-16 2022-08-30 Meta Platforms Technologies, Llc Systems, articles and methods for signal routing in wearable electronic devices that detect muscle activity of a user using a set of discrete and separately enclosed pod structures
US11921471B2 (en) 2013-08-16 2024-03-05 Meta Platforms Technologies, Llc Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
US20150124566A1 (en) 2013-10-04 2015-05-07 Thalmic Labs Inc. Systems, articles and methods for wearable electronic devices employing contact sensors
US10042422B2 (en) 2013-11-12 2018-08-07 Thalmic Labs Inc. Systems, articles, and methods for capacitive electromyography sensors
US9788789B2 (en) 2013-08-30 2017-10-17 Thalmic Labs Inc. Systems, articles, and methods for stretchable printed circuit boards
US9372535B2 (en) * 2013-09-06 2016-06-21 Thalmic Labs Inc. Systems, articles, and methods for electromyography-based human-electronics interfaces
US9483123B2 (en) 2013-09-23 2016-11-01 Thalmic Labs Inc. Systems, articles, and methods for gesture identification in wearable electromyography devices
WO2015081113A1 (en) 2013-11-27 2015-06-04 Cezar Morun Systems, articles, and methods for electromyography sensors
WO2015123445A1 (en) 2014-02-14 2015-08-20 Thalmic Labs Inc. Systems, articles, and methods for elastic electrical cables and wearable electronic devices employing same
US10199008B2 (en) 2014-03-27 2019-02-05 North Inc. Systems, devices, and methods for wearable electronic devices as state machines
CN106456136B (zh) * 2014-05-20 2021-03-26 株式会社岛津制作所 光测量系统以及脑功能光测量方法
US9880632B2 (en) 2014-06-19 2018-01-30 Thalmic Labs Inc. Systems, devices, and methods for gesture identification
US10595741B2 (en) * 2014-08-06 2020-03-24 Institute Of Automation Chinese Academy Of Sciences Method and system for brain activity detection
WO2016041187A1 (zh) * 2014-09-19 2016-03-24 中国科学院自动化研究所 光电同步脑活动记录的数据存储方法
US9807221B2 (en) 2014-11-28 2017-10-31 Thalmic Labs Inc. Systems, devices, and methods effected in response to establishing and/or terminating a physical communications link
US10078435B2 (en) 2015-04-24 2018-09-18 Thalmic Labs Inc. Systems, methods, and computer program products for interacting with electronically displayed presentation materials
JP6542582B2 (ja) * 2015-05-20 2019-07-10 株式会社トプコン 眼科検査支援システム
US10799161B2 (en) 2016-04-04 2020-10-13 Technische Universität Berlin Biosignal acquisition device and system, method for acquisition of biosignals
US11635736B2 (en) 2017-10-19 2023-04-25 Meta Platforms Technologies, Llc Systems and methods for identifying biological structures associated with neuromuscular source signals
US10990174B2 (en) 2016-07-25 2021-04-27 Facebook Technologies, Llc Methods and apparatus for predicting musculo-skeletal position information using wearable autonomous sensors
US11216069B2 (en) 2018-05-08 2022-01-04 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
CN106236085B (zh) * 2016-09-26 2019-03-08 中国医学科学院生物医学工程研究所 用于检测neg脑活动仪同步性的发生装置及检测方法
US11481030B2 (en) 2019-03-29 2022-10-25 Meta Platforms Technologies, Llc Methods and apparatus for gesture detection and classification
US11907423B2 (en) 2019-11-25 2024-02-20 Meta Platforms Technologies, Llc Systems and methods for contextualized interactions with an environment
US11961494B1 (en) 2019-03-29 2024-04-16 Meta Platforms Technologies, Llc Electromagnetic interference reduction in extended reality environments
US11493993B2 (en) 2019-09-04 2022-11-08 Meta Platforms Technologies, Llc Systems, methods, and interfaces for performing inputs based on neuromuscular control
US11150730B1 (en) 2019-04-30 2021-10-19 Facebook Technologies, Llc Devices, systems, and methods for controlling computing devices via neuromuscular signals of users
US10937414B2 (en) 2018-05-08 2021-03-02 Facebook Technologies, Llc Systems and methods for text input using neuromuscular information
US11567573B2 (en) 2018-09-20 2023-01-31 Meta Platforms Technologies, Llc Neuromuscular text entry, writing and drawing in augmented reality systems
US10592001B2 (en) 2018-05-08 2020-03-17 Facebook Technologies, Llc Systems and methods for improved speech recognition using neuromuscular information
US10905350B2 (en) 2018-08-31 2021-02-02 Facebook Technologies, Llc Camera-guided interpretation of neuromuscular signals
US11797087B2 (en) 2018-11-27 2023-10-24 Meta Platforms Technologies, Llc Methods and apparatus for autocalibration of a wearable electrode sensor system
US11868531B1 (en) 2021-04-08 2024-01-09 Meta Platforms Technologies, Llc Wearable device providing for thumb-to-finger-based input gestures detected based on neuromuscular signals, and systems and methods of use thereof
CN113143290B (zh) * 2021-04-30 2024-01-19 西安臻泰智能科技有限公司 一种脑电装置的数据同步方法及脑电装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU667199B2 (en) 1991-11-08 1996-03-14 Physiometrix, Inc. EEG headpiece with disposable electrodes and apparatus and system and method for use therewith
JP2003322612A (ja) 2002-04-30 2003-11-14 Communication Research Laboratory 脳活動計測装置、脳活動計測用頭部装着具
EP1665988A4 (en) * 2003-09-19 2011-06-22 Hitachi Medical Corp SYSTEM FOR PROCESSING ORGANIZATION INFORMATION SIGNALS COMPRISING A COMBINATION OF A DEVICE FOR MEASURING THE LIGHT OF AN ORGANISM AND A DEVICE FOR MEASURING BRAIN WAVE AND PROBE USED THEREIN

Also Published As

Publication number Publication date
US8396525B2 (en) 2013-03-12
US20090318785A1 (en) 2009-12-24

Similar Documents

Publication Publication Date Title
JP2010000283A (ja) リアルタイム同時計測システム、リアルタイム同時計測装置、リアルタイム同時計測方法、およびプログラム
JP6559762B2 (ja) 多部位血管内測定のための方法
EP2934324B1 (en) Display control for a multi-sensor medical device
US8731644B2 (en) ECG device with impulse and channel switching ADC noise filter and error corrector for derived leads
US8358734B2 (en) X-ray computerized tomography apparatus, breathing indication apparatus and medical imaging apparatus
US20090259137A1 (en) Determination of biosensor contact quality
JP2018526180A (ja) 遠隔医療により患者の重要な生理学的データを測定および報告する統合医療機器およびホームベースシステム
JP2007289540A (ja) ストレスセンサシステム
US20050033144A1 (en) Biological-sound data processing system, program, and recording medium
JP2007307365A (ja) 臨床侵襲的処置の際に電気生理学的及び血行動態生理学的診断用監視を行うための単一収集システム
CN107865652A (zh) 类心电图波形的装置和方法
KR20070122012A (ko) 생체 정보 인식 및 분석을 통한 진단시스템 및 그 방법
WO2009104644A1 (ja) 近赤外分光法と脳波のリアルタイム同時計測装置、計測方法、およびプログラムを記録した記録媒体
RU2615721C2 (ru) Устройство для кардиографического контроля состояния пациентов
CN116096299A (zh) 结合生理信号的超声成像方法和电子设备
EP2984984B1 (en) Device and method for recording physiological signal
Ishikawa et al. Development of double density whole brain fNIRS with EEG system for brain machine interface
JP6073558B2 (ja) 医用画像診断装置
Sabirli et al. A comparative study of the validity and reliability of two wireless telemetry electrocardiogram devices in the emergency medicine department
JP2009254904A (ja) 超音波画像診断装置
JP4822399B2 (ja) 医用画像診断装置
US20230210393A1 (en) Method and device for multidimensional analysis of the dynamics of cardiac activity
US20160188827A1 (en) Hybrid Signal Acquisition And System For Combined Electroencephalography And Cardiac Electrophysiology Studies
CN117338237A (zh) 医用数据采集系统、方法、装置及计算机可读存储介质
Jongmans YLab Validation Study: Measuring Stress