JP7312977B2 - 情報処理方法、情報処理装置、および情報処理システム - Google Patents
情報処理方法、情報処理装置、および情報処理システム Download PDFInfo
- Publication number
- JP7312977B2 JP7312977B2 JP2022176080A JP2022176080A JP7312977B2 JP 7312977 B2 JP7312977 B2 JP 7312977B2 JP 2022176080 A JP2022176080 A JP 2022176080A JP 2022176080 A JP2022176080 A JP 2022176080A JP 7312977 B2 JP7312977 B2 JP 7312977B2
- Authority
- JP
- Japan
- Prior art keywords
- subject
- information processing
- blood flow
- cerebral blood
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims description 96
- 238000003672 processing method Methods 0.000 title claims description 38
- 230000003727 cerebral blood flow Effects 0.000 claims description 116
- 238000012545 processing Methods 0.000 claims description 59
- 230000008859 change Effects 0.000 claims description 24
- 230000002123 temporal effect Effects 0.000 claims description 20
- 238000012360 testing method Methods 0.000 claims description 16
- 230000008921 facial expression Effects 0.000 claims description 5
- 230000002194 synthesizing effect Effects 0.000 claims description 2
- 238000001514 detection method Methods 0.000 description 51
- 102000001554 Hemoglobins Human genes 0.000 description 48
- 108010054147 Hemoglobins Proteins 0.000 description 48
- 238000010586 diagram Methods 0.000 description 29
- 210000004556 brain Anatomy 0.000 description 19
- 238000003745 diagnosis Methods 0.000 description 16
- 201000010099 disease Diseases 0.000 description 13
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 13
- 238000005259 measurement Methods 0.000 description 13
- 238000004497 NIR spectroscopy Methods 0.000 description 12
- 238000004171 remote diagnosis Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 11
- 239000008280 blood Substances 0.000 description 10
- 210000004369 blood Anatomy 0.000 description 10
- 238000004891 communication Methods 0.000 description 10
- 230000004044 response Effects 0.000 description 9
- 208000024891 symptom Diseases 0.000 description 8
- 210000003128 head Anatomy 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 230000002490 cerebral effect Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000007177 brain activity Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 230000001815 facial effect Effects 0.000 description 4
- 210000001061 forehead Anatomy 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000010354 integration Effects 0.000 description 4
- 208000020016 psychiatric disease Diseases 0.000 description 3
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000017531 blood circulation Effects 0.000 description 2
- 239000012503 blood component Substances 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000000306 component Substances 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 206010052804 Drug tolerance Diseases 0.000 description 1
- 206010024796 Logorrhoea Diseases 0.000 description 1
- 206010026749 Mania Diseases 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000003925 brain function Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000026781 habituation Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 206010025482 malaise Diseases 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 230000036651 mood Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 201000000980 schizophrenia Diseases 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/147—Details of sensors, e.g. sensor lenses
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B10/00—Other methods or instruments for diagnosis, e.g. instruments for taking a cell sample, for biopsy, for vaccination diagnosis; Sex determination; Ovulation-period determination; Throat striking implements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
- A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
- A61B5/0022—Monitoring a patient using a global network, e.g. telephone networks, internet
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
- A61B5/026—Measuring blood flow
- A61B5/0261—Measuring blood flow using optical means, e.g. infrared light
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/1032—Determining colour for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/14546—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring analytes not otherwise provided for, e.g. ions, cytochromes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
- A61B5/14552—Details of sensors specially adapted therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1495—Calibrating or testing of in-vivo probes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/40—Detecting, measuring or recording for evaluating the nervous system
- A61B5/4058—Detecting, measuring or recording for evaluating the nervous system for evaluating the central nervous system
- A61B5/4064—Evaluating the brain
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/6802—Sensor mounted on worn items
- A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
- A61B5/683—Means for maintaining contact with the body
- A61B5/6831—Straps, bands or harnesses
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
- A61B5/7271—Specific aspects of physiological measurement analysis
- A61B5/7275—Determining trends in physiological measurement data; Predicting development of a medical condition based on physiological measurements, e.g. determining a risk factor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
- A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/176—Dynamic expression
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
- A61B2562/02—Details of sensors specially adapted for in-vivo measurements
- A61B2562/0204—Acoustic sensors
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
- A61B2576/026—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part for the brain
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/14—Vascular patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/15—Biometric patterns based on physiological signals, e.g. heartbeat, blood flow
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Surgery (AREA)
- Pathology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Physiology (AREA)
- Optics & Photonics (AREA)
- Psychiatry (AREA)
- Cardiology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Psychology (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Theoretical Computer Science (AREA)
- Neurology (AREA)
- Social Psychology (AREA)
- Dentistry (AREA)
- Developmental Disabilities (AREA)
- Educational Technology (AREA)
- Hospice & Palliative Care (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Child & Adolescent Psychology (AREA)
- Hematology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Signal Processing (AREA)
- Artificial Intelligence (AREA)
- Pulmonology (AREA)
- Computer Vision & Pattern Recognition (AREA)
Description
第1の項目に係る情報処理方法は、第1のコンピュータに接続または内蔵される第1のカメラから、被検者の顔の少なくとも一部の画像を示す第1の画像データを取得することと、前記第1のコンピュータに接続または内蔵され、前記被検者の脳血流の状態を示す脳血流情報を検出する検出装置から、前記脳血流情報を取得することと、前記第1の画像データに基づく第1の画像と、前記脳血流情報に基づく第2の画像とを含む出力画像を、前記第1のコンピュータに遠隔ネットワークを介して接続される第2のコンピュータに接続
または内蔵されるディスプレイに表示させることと、を含む。前記第1の画像は前記被検者の前記顔の前記少なくとも一部を含む動画像であり、前記第2の画像は前記脳血流情報の経時変化を示す画像である。
第1の項目に係る情報処理方法において、前記第1の画像が、前記被検者の表情の変化、前記被検者の視線の変化、および前記被検者の顔色の変化からなる群から選択される少なくとも1つを示していてもよい。
第1または第2の項目に係る情報処理方法において、前記第2の画像が、数値化された前記脳血流情報の前記経時変化を示すグラフであってもよい。
第3の項目に係る情報処理方法は、前記第1のコンピュータに接続または内蔵される出力装置に、前記被検者により行われるタスクを示すタスク情報を出力させることをさらに含んでいてもよい。前記第2の画像は、前記脳血流情報の前記経時変化と、前記タスク情報が出力された期間との対応関係を示す画像を含んでいてもよい。
第4の項目に係る情報処理方法は、前記第1のカメラからの第2の画像データ、前記第1のコンピュータに接続または内蔵された第2のカメラからの第3の画像データ、および前記第1のコンピュータに接続または内蔵されるマイクからの音声データからなる群から選択される少なくとも1つのデータから基準を超える変化を検出すること、をさらに含んでいてもよい。前記第2の画像は、前記脳血流情報の前記経時変化と、前記少なくとも1つのデータから前記変化を検出した期間との対応関係を示す画像を含んでいてもよい。
第3に係る情報処理方法は、前記脳血流情報のうち、前記被検者の脳の少なくとも一つの特定領域に関する部分を選択することと、前記部分をグラフ化することと、をさらに含んでいてもよい。
第6の項目に係る情報処理方法は、前記ディスプレイに、前記特定領域を決定するため
の項目を表示させることと、前記第2のコンピュータに接続または内蔵される入力装置から、前記項目に関する入力情報を取得することと、をさらに含んでいてもよい。前記特定領域は、前記入力情報に応じて決定されてもよい。
第6の項目に係る情報処理方法は、前記第1のコンピュータに接続または内蔵される出力装置に、前記被検者により行われる予備タスクを示す予備タスク情報を出力させること、をさらに含んでいてもよい。前記特定領域は、前記予備タスク情報に対する前記脳血流情報の変化に応じて決定されてもよい。
第1の項目に係る情報処理方法は、前記脳血流情報のうち、前記被検者の脳の少なくとも一つの特定領域に関する部分を選択することと、前記部分を前記第1のコンピュータから前記第2のコンピュータへと前記遠隔ネットワークを介して送信することと、を含んでいてもよい。
第9の項目に係る情報処理方法は、前記ディスプレイに、前記特定領域を決定するための項目を表示させることと、前記第2のコンピュータに接続または内蔵される入力装置から、前記項目に関する入力情報を取得することと、をさらに含んでいてもよい。前記特定領域は、前記入力情報に応じて決定されてもよい。
第9の項目に係る情報処理方法は、前記第1のコンピュータに接続または内蔵される出力装置に、前記被検者により行われる予備タスクを示す予備タスク情報を出力させること、をさらに含んでいてもよい。前記特定領域は、前記予備タスク情報に対する前記脳血流情報の変化に応じて決定されてもよい。
第1から第3の項目のいずれかに係る情報処理方法において、前記出力画像が、前記第1の画像と第2の画像とが合成されることにより得られてもよい。
することができる。
第12の項目に係る情報処理方法において、前記検出装置が、前記被検者の頭部における被検部に出射光を照射する少なくとも1つの光源と、前記被検部から戻った反射光を検出するイメージセンサと、前記イメージセンサによって検出された前記反射光の情報から、前記被検部における前記脳血流情報を生成して出力する処理回路と、を備えてもよい。前記少なくとも1つの光源は、前記被検部における複数の領域を前記出射光で照射してもよい。前記イメージセンサは、前記複数の領域からの前記反射光の強度分布を示す信号を出力してもよい。前記処理回路は、前記イメージセンサから出力された前記信号に基づいて、前記脳血流情報を生成して出力してもよい。前記第2の画像は、前記複数の領域における前記脳血流情報の前記経時変化を示してもよい。
第13の項目に係る情報処理方法において、前記少なくとも1つの光源が、波長が650nm以上805nm未満である第1の出射光を前記被検部に照射する第1の光源と、波長が805nmより長く950nm以下である第2の出射光を前記被検部に照射する第2の光源と、を含んでいてもよい。前記イメージセンサは、前記第1の出射光の照射に起因して前記被検部から戻った第1の反射光の量に応じた第1の電気信号、および前記第2の出射光の照射に起因して前記被検部から戻った第2の反射光の量に応じた第2の電気信号を出力してもよい。前記処理回路は、前記第1の電気信号および前記第2の電気信号に基づいて、前記被検部における脳血液中の酸素化ヘモグロビンおよび脱酸素化ヘモグロビンのそれぞれの濃度を示す情報を前記脳血流情報として生成してもよい。前記第2の画像は、前記被検部における前記酸素化ヘモグロビンおよび前記脱酸素化ヘモグロビンからなる群から選択される少なくとも一方の濃度の経時変化を示す情報を含んでいてもよい。
第1から第14の項目のいずれかに係る情報処理方法において、前記第2のコンピュータは、前記診断者の操作に応答して、前記ディスプレイに表示される画像を切り替えてもよい。第1から第14の項目のいずれかに係る情報処理方法は、前記第1の画像を前記ディスプレイに表示させることと、前記操作に応答して、前記第1の画像に加えて、または前記第1の画像に代えて、前記第2の画像を前記ディスプレイに表示させることと、をさらに含んでいてもよい。
第1から第15の項目のいずれかに係る情報処理方法において、前記検出装置が、前記第1のコンピュータに接続され、かつヘッドマウント装置に内蔵されていてもよい。
第1から第16の項目のいずれかに係る情報処理方法は、前記被検者の心理状態および前記被検者が病気である確率からなる群から選択される少なくとも1つの推定を行うことと、前記推定の結果を前記ディスプレイに表示させることと、をさらに含んでいてもよい。
第18の項目に係る情報処理装置は、第1のコンピュータと第2のコンピュータとにネットワークを介して接続される情報処理装置であって、処理回路と、コンピュータプログラムを格納したメモリと、を備える。前記コンピュータプログラムは、前記処理回路に、前記第1のコンピュータに接続または内蔵されるカメラから、被検者の顔の少なくとも一部の画像を示す第1の画像データを取得することと、前記第1のコンピュータに接続または内蔵され、前記被検者の脳血流の状態を示す脳血流情報を検出する検出装置から、前記脳血流情報を取得することと、前記第1の画像データに基づく第1の画像と、前記脳血流情報に基づく第2の画像とを含む出力画像を、前記第1のコンピュータに遠隔ネットワークを介して接続される前記第2のコンピュータに接続または内蔵されるディスプレイに表示させることと、を実行させる。前記第1の画像は前記被検者の前記顔の前記少なくとも一部を含む動画像であり、前記第2の画像は前記脳血流情報の経時変化を示す画像である。
第19の項目に係る情報処理システムは、第18の項目に係る情報処理装置と、前記ディスプレイと、を備える。
第19の項目に係る情報処理システムは、前記検出装置と、前記カメラと、をさらに備えていてもよい。
ログラムされる、Field Programmable Gate Array(FPGA)、又はLSI内部の接合関係の再構成又はLSI内部の回路区画のセットアップができるreconfigurable logic deviceも同じ目的で使うことができる。
本実施形態は、診断者(例えば医師)が、例えば、被検者(例えば患者)の心理状態を遠隔診断するための情報処理方法、情報処理装置、および情報処理システムに関する。本実施形態では、診断者と被検者とは、遠く離れた2つの場所(例えば、病院と被検者の自宅)にいるものとする。当該2つの場所は、遠隔ネットワークによって接続される。
図1は、本実施形態における情報処理システム100の構成を模式的に示すブロック図である。情報処理システム100は、検出装置10と、カメラ20と、ディスプレイ30と、情報処理装置40とを備える。検出装置10およびカメラ20は、被検者側の場所に配置されている。ディスプレイ30は、診断者側の場所に配置されている。情報処理装置40は、検出装置10と、カメラ20と、ディスプレイ30とに、遠隔ネットワークを介して接続されている。情報処理装置40は、例えばインターネット上のサーバコンピュー
タであり得る。なお、情報処理装置40が、遠隔ネットワークではなく、例えばLANまたは単なるケーブルから構成されるネットワークを介して、検出装置10、カメラ20、またはディスプレイ30と接続された場合であっても、本開示の技術を適用することができる。
(1)カメラ20から、被検者1の顔の少なくとも一部を含む画像を示す第1の画像データを取得する。
(2)検出装置10から、被検者1の脳血流情報を取得する。
(3)取得した脳血流情報に基づいて、被検者1の心理状態を診断するための情報を含む第2の画像データを生成する。
(4)第1および第2の画像データに基づく少なくとも1つの画像を、ディスプレイ30に表示させる。
る。処理回路42と、メモリ44とは、1つの集積回路によって実現されていてもよい。処理回路42は、例えばデジタルシグナルプロセッサ(DSP)、またはフィールドプログラマブルゲートアレイ(FPGA)などのプログラマブルロジックデバイス(PLD)によって実現されてもよい。
ず、被検者1の額がヘッドマウント装置70で覆われることにより、屋外で使用する場合でも、環境光の影響を小さくすることができる。また、ヘッドマウント装置70がヘッドマウントディスプレイ装置であってもよい。その場合、バーチャルリアリティーによって、遠隔地からでも、その場にいるような自然な診断が可能になる。バーチャルリアリティーの特徴を活かした新しいタスクを実施することもできる。
次に、本実施形態における情報処理システムの動作の例を説明する。以下の説明では、一例として、図7および図8の構成が採用されているものとする。脳血流情報として、酸素化ヘモグロビンの濃度および脱酸素化ヘモグロビンの濃度の情報が生成されるものとする。
被検者の脳血流の経時変化および/または空間分布のデータが、そのときの病状に関連付けられて記録媒体に記録されている。情報処理装置40の処理回路42は、今回の被検者1の脳血流のデータと、蓄積された過去のデータとを比較することで、被検者1の状態を推定することができる。この推定結果を診断結果と呼ぶ。情報処理装置40は、脳血流の生成データである第2の画像データおよび診断結果を示すデータを、診断者コンピュータ60に送信する。診断者コンピュータ60は、ディスプレイ30に脳血流情報および診断結果を示す画像を表示させる。
スクでは、被検者1がリラックスしている状態と、被検者1が課題に取り組んでいる状態との間の血流量の変化が調べられる。
次に、診断者コンピュータ60におけるディスプレイ30への表示例を説明する。
2 被検部
10 検出装置
12 光源
14 光検出器
16 処理回路
20 カメラ
30 ディスプレイ
40 信号処理装置
42 処理回路
44 メモリ
46 プログラム
50 被検者コンピュータ
60 診断者コンピュータ
70 ヘッドマウント装置
Claims (7)
- 第1のカメラから、被検者の顔の少なくとも一部を示す第1動画像を取得することと、
光検出器によって検出された前記被検者の頭部からの光の情報に基づき、前記被検者の脳血流の経時変化を示す第2動画像を生成することと、
前記第1動画像と、前記第2動画像とを含む出力画像を、ネットワークを介してディスプレイに表示させることと、
を含み、
前記ディスプレイに表示される前記第2動画像のフレームレートは、前記ディスプレイに表示される前記第1動画像のフレームレートよりも低い、
情報処理方法。 - 前記第1動画像は、前記被検者の表情の変化、前記被検者の視線の変化、および前記被
検者の顔色の変化からなる群から選択される少なくとも1つを示す、
請求項1に記載の情報処理方法。 - 前記出力画像は、前記第1動画像と前記第2動画像とが合成されることにより得られる、
請求項1に記載の情報処理方法。 - 前記第2動画像に基づいて、前記被検者の心理状態および前記被検者が病気である確率からなる群から選択される少なくとも1つの推定を行うことと、
をさらに含む、
請求項1に記載の情報処理方法。 - 前記第2動画像は、前記被検者の被検部における前記脳血流の2次元濃度分布を示す画像を含み、
前記ディスプレイに前記出力画像を表示させることは、前記2次元濃度分布を示す画像と、前記脳血流の前記経時変化を示すグラフをともに表示させることを含む、
請求項1に記載の情報処理方法。 - 請求項1に記載の情報処理方法をコンピュータに実行させるプログラム。
- 第1のカメラと、
光検出器と、
処理回路と、
を備え、
前記処理回路は、
前記第1のカメラから、被検者の顔の少なくとも一部を示す第1動画像を取得し、
前記光検出器によって検出された前記被検者の頭部からの光の情報に基づき、前記被検者の脳血流の経時変化を示す第2動画像を生成し、
前記第1動画像と、前記第2動画像とを含む出力画像を、ネットワークを介してディスプレイに表示させるために出力し、
出力される前記第2動画像のフレームレートは、出力される前記第1動画像のフレームレートよりも低い、
情報処理システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017123223 | 2017-06-23 | ||
JP2017123223 | 2017-06-23 | ||
JP2018079949A JP7178614B2 (ja) | 2017-06-23 | 2018-04-18 | 情報処理方法、情報処理装置、および情報処理システム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018079949A Division JP7178614B2 (ja) | 2017-06-23 | 2018-04-18 | 情報処理方法、情報処理装置、および情報処理システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023002822A JP2023002822A (ja) | 2023-01-10 |
JP7312977B2 true JP7312977B2 (ja) | 2023-07-24 |
Family
ID=64735735
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022176080A Active JP7312977B2 (ja) | 2017-06-23 | 2022-11-02 | 情報処理方法、情報処理装置、および情報処理システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US12029530B2 (ja) |
JP (1) | JP7312977B2 (ja) |
WO (1) | WO2018235466A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019176535A1 (ja) * | 2018-03-15 | 2019-09-19 | パナソニックIpマネジメント株式会社 | ユーザの心理状態を推定するためのシステム、記録媒体、および方法 |
CN111528826A (zh) * | 2020-05-25 | 2020-08-14 | 陈聪 | 一种获取脑阻抗血流图数据的方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004255075A (ja) | 2003-02-27 | 2004-09-16 | Hamamatsu Photonics Kk | 濃度測定装置 |
JP2009268707A (ja) | 2008-05-08 | 2009-11-19 | Hitachi Ltd | 生体光計測装置 |
WO2012074039A1 (ja) | 2010-12-02 | 2012-06-07 | 大日本印刷株式会社 | 医用画像処理装置 |
JP2015116213A (ja) | 2013-12-16 | 2015-06-25 | 株式会社国際電気通信基礎技術研究所 | 脳活動訓練装置および脳活動訓練方法 |
JP2015134157A (ja) | 2013-12-20 | 2015-07-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 光脳機能計測装置 |
JP2016007300A (ja) | 2014-06-24 | 2016-01-18 | 株式会社日立メディコ | 生体光計測装置及び生体光計測方法 |
WO2016084834A1 (ja) | 2014-11-25 | 2016-06-02 | 株式会社日立ハイテクノロジーズ | 計測システム、頭部装着装置、プログラム、およびサービス提供方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002143097A (ja) | 2000-11-10 | 2002-05-21 | Kuniaki Otsuka | 疾病発症予知通報システム及び方法 |
JP3711385B2 (ja) | 2002-05-20 | 2005-11-02 | 独立行政法人情報通信研究機構 | 生体活動計測装置 |
JP3598379B2 (ja) | 2002-05-24 | 2004-12-08 | 独立行政法人情報通信研究機構 | 画像生体診断装置 |
JP4285012B2 (ja) * | 2003-01-31 | 2009-06-24 | 株式会社日立製作所 | 学習状況判断プログラム及びユーザ状況判断システム |
US20110144520A1 (en) * | 2009-12-16 | 2011-06-16 | Elvir Causevic | Method and device for point-of-care neuro-assessment and treatment guidance |
JP6008099B2 (ja) | 2012-07-30 | 2016-10-19 | 学校法人日本大学 | 脳活動状態解析装置、脳活動状態解析方法、及び脳活動状態解析プログラム |
US20140275891A1 (en) * | 2013-03-13 | 2014-09-18 | Cephalogics, LLC | Optical tomography sensor and related apparatus and methods |
WO2015168579A1 (en) * | 2014-05-02 | 2015-11-05 | Stephanie Littell | Methods of measuring head, neck, and brain function and predicting and diagnosing memory impairment |
CN106236060B (zh) | 2015-06-04 | 2021-04-09 | 松下知识产权经营株式会社 | 生物体信息检测装置 |
JP6865384B2 (ja) | 2016-02-17 | 2021-04-28 | パナソニックIpマネジメント株式会社 | 生体情報検出装置 |
JP7178614B2 (ja) * | 2017-06-23 | 2022-11-28 | パナソニックIpマネジメント株式会社 | 情報処理方法、情報処理装置、および情報処理システム |
-
2018
- 2018-05-17 WO PCT/JP2018/019002 patent/WO2018235466A1/ja active Application Filing
-
2022
- 2022-08-09 US US17/884,267 patent/US12029530B2/en active Active
- 2022-11-02 JP JP2022176080A patent/JP7312977B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004255075A (ja) | 2003-02-27 | 2004-09-16 | Hamamatsu Photonics Kk | 濃度測定装置 |
JP2009268707A (ja) | 2008-05-08 | 2009-11-19 | Hitachi Ltd | 生体光計測装置 |
WO2012074039A1 (ja) | 2010-12-02 | 2012-06-07 | 大日本印刷株式会社 | 医用画像処理装置 |
JP2015116213A (ja) | 2013-12-16 | 2015-06-25 | 株式会社国際電気通信基礎技術研究所 | 脳活動訓練装置および脳活動訓練方法 |
JP2015134157A (ja) | 2013-12-20 | 2015-07-27 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America | 光脳機能計測装置 |
JP2016007300A (ja) | 2014-06-24 | 2016-01-18 | 株式会社日立メディコ | 生体光計測装置及び生体光計測方法 |
WO2016084834A1 (ja) | 2014-11-25 | 2016-06-02 | 株式会社日立ハイテクノロジーズ | 計測システム、頭部装着装置、プログラム、およびサービス提供方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2018235466A1 (ja) | 2018-12-27 |
US12029530B2 (en) | 2024-07-09 |
US20220378298A1 (en) | 2022-12-01 |
JP2023002822A (ja) | 2023-01-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7178614B2 (ja) | 情報処理方法、情報処理装置、および情報処理システム | |
JP7312977B2 (ja) | 情報処理方法、情報処理装置、および情報処理システム | |
JP7386440B2 (ja) | 生体計測装置、生体計測装置の作動方法、及び判定装置 | |
AU2014225626B2 (en) | Form factors for the multi-modal physiological assessment of brain health | |
US9814425B2 (en) | Health monitoring appliance | |
US8968195B2 (en) | Health monitoring appliance | |
US8708903B2 (en) | Patient monitoring appliance | |
US9060683B2 (en) | Mobile wireless appliance | |
US8500636B2 (en) | Health monitoring appliance | |
US20150269825A1 (en) | Patient monitoring appliance | |
JP7386438B2 (ja) | 生体計測装置、生体計測方法、コンピュータ読み取り可能な記録媒体、およびプログラム | |
Nie et al. | SPIDERS+: A light-weight, wireless, and low-cost glasses-based wearable platform for emotion sensing and bio-signal acquisition | |
JP2024016142A (ja) | コンピュータにおける情報処理方法および生体計測システム | |
Lin et al. | Heart rate estimation using wrist-acquired photoplethysmography under different types of daily life motion artifact | |
CN115770013B (zh) | 辅助弱势人群的眼动测试方法、装置、设备及介质 | |
Güttler | Development of an Ambient Health Monitoring System for a Self-Sufficient and Independent Life in Old Age | |
Ulsamer et al. | Motor Imagery to Control Mobile Applications-An fNIRS Study. | |
Ubale et al. | SMART HEALTHCARE MONITORING SYSTEM | |
JP2017086992A (ja) | 感情判定装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230620 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230621 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230629 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7312977 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |