JP2021033677A - 情報処理装置及びプログラム - Google Patents

情報処理装置及びプログラム Download PDF

Info

Publication number
JP2021033677A
JP2021033677A JP2019153630A JP2019153630A JP2021033677A JP 2021033677 A JP2021033677 A JP 2021033677A JP 2019153630 A JP2019153630 A JP 2019153630A JP 2019153630 A JP2019153630 A JP 2019153630A JP 2021033677 A JP2021033677 A JP 2021033677A
Authority
JP
Japan
Prior art keywords
user
information
processor
information processing
measured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019153630A
Other languages
English (en)
Other versions
JP7296626B2 (ja
Inventor
佐藤 雅弘
Masahiro Sato
雅弘 佐藤
賢吾 得地
Kengo Tokuchi
賢吾 得地
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Business Innovation Corp
Original Assignee
Fuji Xerox Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fuji Xerox Co Ltd filed Critical Fuji Xerox Co Ltd
Priority to JP2019153630A priority Critical patent/JP7296626B2/ja
Priority to US16/740,488 priority patent/US20210063971A1/en
Priority to CN202010030546.7A priority patent/CN112433600A/zh
Publication of JP2021033677A publication Critical patent/JP2021033677A/ja
Application granted granted Critical
Publication of JP7296626B2 publication Critical patent/JP7296626B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/0205Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric not using a model or a simulator of the controlled system
    • G05B13/021Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric not using a model or a simulator of the controlled system in which a variable is automatically adjusted to optimise the performance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Detecting, measuring or recording devices for evaluating the respiratory organs
    • A61B5/082Evaluation by breath analysis, e.g. determination of the chemical composition of exhaled breath
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/318Heart-related electrical modalities, e.g. electrocardiography [ECG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/369Electroencephalography [EEG]
    • A61B5/377Electroencephalography [EEG] using evoked responses
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2816Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Molecular Biology (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Neurosurgery (AREA)
  • Neurology (AREA)
  • Dermatology (AREA)
  • Automation & Control Theory (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Pulmonology (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Vascular Medicine (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Radiology & Medical Imaging (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Psychiatry (AREA)

Abstract

【課題】生体情報を利用して機器を操作する場合において、機器の操作の精度を向上させることができる情報処理装置及びプログラムを提供する。
【解決手段】情報処理システムにおいて、情報処理装置のプロセッサ30は、外部からの刺激を受けたユーザから発生した生体情報に基づいて機器を操作する。生体情報と、機器の操作を示す基準生体情報との差異が許容範囲内である場合、プロセッサは、生体情報に基づいて機器を操作する。プロセッサは、生体情報に基づいて機器を操作する前に、機器の操作の可否をユーザに問い合わせるための情報を出力し、機器を操作する指示をユーザから受けた場合、機器を操作する。
【選択図】図2

Description

本発明は、情報処理装置及びプログラムに関する。
脳波等の生体情報を用いて機器を操作することが考えられる。
引用文献1には、使用者の脳波から脳波生体信号を検出し、使用者の表面筋電位から表面筋電位生体信号を検出し、両生体信号に基づいて制御信号を演算する装置が記載されている。
引用文献2には、使用者の脳波を取得し、その脳波を分析することで得られた分析結果に従って複数の被操作装置を選択的に操作する装置が記載されている。
特開2015−211705号公報 特開2016−67922号公報
ところで、生体情報によって機器を正確に操作できるとは限らない。
本発明の目的は、生体情報を利用して機器を操作する場合において、機器の操作の精度を向上させることにある。
請求項1に係る発明は、プロセッサを有し、前記プロセッサは、外部からの刺激を受けたユーザから発生した生体情報に基づいて機器を操作する、情報処理装置である。
請求項2に係る発明は、前記生体情報と、前記機器の操作を示す基準生体情報との差異が許容範囲内である場合、前記プロセッサは、前記生体情報に基づいて前記機器を操作する、ことを特徴とする請求項1に記載の情報処理装置である。
請求項3に係る発明は、前記プロセッサは、前記生体情報に基づいて前記機器を操作する前に、前記機器の操作の可否を前記ユーザに問い合わせるための情報を出力し、前記機器を操作する指示を前記ユーザから受けた場合、前記機器を操作する、ことを特徴とする請求項1又は請求項2に記載の情報処理装置である。
請求項4に係る発明は、前記機器の動作を止める場合、前記プロセッサは、前記機器の操作の可否を前記ユーザに問い合わせずに、前記機器の動作を止める、ことを特徴とする請求項3に記載の情報処理装置である。
請求項5に係る発明は、前記機器の性能レベルを低下させる場合、前記プロセッサは、前記機器の操作の可否を前記ユーザに問い合わせずに、前記機器の性能レベルを低下させる、ことを特徴とする請求項3に記載の情報処理装置である。
請求項6に係る発明は、前記外部からの刺激は、前記ユーザの会話相手の音声である、ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置である。
請求項7に係る発明は、前記外部からの刺激は、匂いである、ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置である。
請求項8に係る発明は、前記外部からの刺激は、温度である、ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置である。
請求項9に係る発明は、前記外部からの刺激は、前記ユーザが目視した状況である、ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置である。
請求項10に係る発明は、前記プロセッサは、前記ユーザの睡眠中は、前記生体情報に基づいて前記機器を操作しない、ことを特徴とする請求項1から請求項9のいずれか一項に記載の情報処理装置である。
請求項11に係る発明は、前記プロセッサは、前記生体情報の変化の大きさに応じて、前記機器の性能レベルを変更する、ことを特徴とする請求項1から請求項10のいずれか一項に記載の情報処理装置である。
請求項12に係る発明は、前記プロセッサは、前記生体情報の変化の速さに応じて、前記機器の性能レベルを変更する、ことを特徴とする請求項1から請求項10のいずれか一項に記載の情報処理装置である。
請求項13に係る発明は、前記ユーザから複数の生体情報が測定された場合、前記プロセッサは、予め定められた優先順位に従って、生体情報に基づいて前記機器を操作する、ことを特徴とする請求項1から請求項12のいずれか一項に記載の情報処理装置である。
請求項14に係る発明は、前記機器に対する操作を示す生体情報が前記ユーザから測定された時点から予め定められた時間内に、前記操作と異なる操作を示す別の生体情報が前記ユーザから測定された場合、前記プロセッサは、予め定められた優先順位に従って、生体情報に基づいて前記機器を操作する、ことを特徴とする請求項1から請求項12のいずれか一項に記載の情報処理装置である。
請求項15に係る発明は、前記生体情報は脳波である、ことを特徴とする請求項1から請求項14のいずれか一項に記載の情報処理装置である。
請求項16に係る発明は、コンピュータに、外部からの刺激を受けたユーザから発生した生体情報に基づいて機器を操作させる、プログラムである。
請求項1,2,16に係る発明によれば、生体情報を利用して機器を操作する場合において、機器の操作の精度を向上させることができる。
請求項3に係る発明によれば、ユーザの意図に反して機器が操作されることを防止することができる。
請求項4に係る発明によれば、問い合わせに対して回答するという手間を掛けずに、機器の動作を止めることができる。
請求項5に係る発明によれば、問い合わせに対して回答するという手間を掛けずに、機器の性能レベルを低下させることができる。
請求項6に係る発明によれば、会話相手の音声を受けたユーザから発生した生体情報に基づいて機器を操作することができる。
請求項7に係る発明によれば、匂いを嗅いだユーザから発生した生体情報に基づいて機器を操作することができる。
請求項8に係る発明によれば、温度を感じたユーザから発生した生体情報に基づいて機器を操作することができる。
請求項9に係る発明によれば、ユーザが目視した状況に応じて当該ユーザから発生した生体情報に基づいて機器を操作することができる。
請求項10に係る発明によれば、ユーザの睡眠中に生体情報に基づいて機器が操作されることが防止される。
請求項11,12に係る発明によれば、生体情報に基づいて機器の性能レベルを変更することができる。
請求項13,14に係る発明によれば、複数の生体情報が測定された場合であっても、生体情報に基づいて機器を操作することができる。
請求項15に係る発明によれば、脳波に基づいて機器を操作することができる。
本実施形態に係る情報処理システムの構成を示すブロック図である。 本実施形態に係る情報処理装置の構成を示すブロック図である。 管理テーブルを示す図である。 管理テーブルを示す図である。
図1を参照して、本実施形態に係る情報処理システムについて説明する。図1には、本実施形態に係る情報処理システムの構成の一例が示されている。
本実施形態に係る情報処理システムは、情報処理装置10と、1又は複数の生体情報測定装置12と、1又は複数のマイク14と、1又は複数のカメラ16と、1又は複数の臭気センサ18と、1又は複数の温度センサ20と、1又は複数の機器22とを含む。なお、図1に示されている各装置及び各センサの数は一例に過ぎず、各装置及び各センサの数が、図1に示されている各装置及び各センサの数に限定されるものではない。また、情報処理システムは、図1に示されている装置以外の他の装置(例えばサーバ等の外部装置)を含んでもよい。
情報処理装置10、生体情報測定装置12、マイク14、カメラ16、臭気センサ18、温度センサ20、及び、機器22は、他の装置や他のセンサ等と通信するように構成されている。その通信は、ケーブルを利用する有線通信であってもよいし、無線通信であってもよい。つまり、各装置及び各センサは、他の装置や他のセンサ等とケーブルによって物理的に接続されて、情報を互いに送受信してもよいし、無線通信によって互いに情報を送受信してもよい。無線通信として、例えば、近距離無線通信やWi−Fi(登録商標)等が用いられる。これら以外の規格の無線通信が用いられてもよい。近距離無線通信は、例えば、Bluetooth(登録商標)やRFID(Radio Frequency Identifier)やNFC等である。各装置は、LAN(Local Area Network)やインターネット等の通信経路を介して他の装置や他のセンサ等と通信してもよい。
情報処理装置10は、例えば、パーソナルコンピュータ(以下、「PC」と称する)、タブレットPC、スマートフォン、携帯電話、又は、その他の装置である。情報処理装置10は、ユーザが携帯することが可能な端末装置(例えば、タブレットPCやスマートフォンや携帯電話等)であってもよいし、テーブル等に設置されて使用される装置であってもよい。情報処理装置10は、通信機能とマイクとスピーカとを有するスマートスピーカであってもよい。情報処理装置10は、屋内(例えば、部屋の床、天井、テーブル等)に設置されてもよいし、屋外に設置されてもよい。また、情報処理装置10は、移動可能な装置(例えば自走式の装置)でもよい。
生体情報測定装置12は、センサや電極等を有し、ユーザの生体情報を測定するように構成されている。複数の生体情報測定装置12が情報処理システムに含まれている場合、各生体情報測定装置12は、異なる種類の生体情報を測定してもよい。もちろん、すべての生体情報測定装置12の中の一部又は全部は、同じ種類の生体情報を測定するように構成されてもよい。また、各生体情報測定装置12は、1つの種類の生体情報を測定するように構成されてもよいし、複数の種類の生体情報を測定するように構成されてもよい。
生体情報測定装置12は、自装置で測定した生体情報を情報処理装置10に送信する。生体情報測定装置12は、生体情報を測定する度に生体情報を情報処理装置10に送信してもよいし、生体情報を記憶し、予め定められた時間間隔毎に生体情報を情報処理装置10に送信してもよいし、ユーザが指定したタイミングで生体情報を情報処理装置10に送信してもよい。また、生体情報測定装置12は、他の生体情報測定装置12が測定した生体情報を当該他の生体情報測定装置12から受信し、自装置が測定した生体情報と当該他の生体情報測定装置12が測定した生体情報とを情報処理装置10に送信してもよい。
生体情報測定装置12は、自装置又は他の生体情報測定装置が測定した生体情報を分析し、その分析結果を示す情報を情報処理装置10に送信してもよい。例えば、生体情報測定装置12はプロセッサを含み、当該プロセッサが生体情報を分析してもよい。もちろん、その分析は情報処理装置10にて行われてもよい。
生体情報測定装置12は、バッテリを含み、当該バッテリから供給される電力によって駆動してもよいし、情報処理装置10から電力の供給を受けて駆動してもよい。
生体情報測定装置12は、生体情報測定装置12全体がユーザに装着されて生体情報を測定するウェアラブル装置であってもよい。例えば、生体情報測定装置12は、ユーザの頭部に装着される装置であってもよいし、ユーザの耳に装着されるヒアラブル装置であってもよいし、ユーザの腕や手や手首や指等に装着される装置(例えば腕時計型の装置等)であってもよいし、ユーザの首に掛けられる装置であってもよいし、ユーザの胴体や足等に装着される装置であってもよい。
生体情報は、生体であるユーザから発する様々な生理学的情報や解剖学的情報である。生体情報の概念の範疇には、例えば、脳の活動を示す情報(例えば、脳波、脳の血流量、脳磁場信号等)、脈拍数、血圧、心拍数、心電波形、筋電波形、眼球運動、体温、発汗量、視線、音声、及び、ユーザの動き等が含まれる。これら生体情報の一例に過ぎず、他の生理学的情報や解剖学的情報が生体情報として用いられてもよい。生体情報測定装置12は、これらの生体情報の中の1つの生体情報を測定してもよいし、複数の生体情報を測定してもよい。
情報処理装置10は、生体情報測定装置12から生体情報を受けて、生体情報の分析、生体情報の記憶、生体情報の出力、生体情報の分析結果を示す情報の記憶、及び、生体情報の分析結果を示す情報の出力等を行う。もちろん、生体情報の分析は生体情報測定装置12によって行われてもよい。生体情報を出力することは、例えば、生体情報を表示することや、生体情報を音声情報として出力すること等である。生体情報の分析結果を示す情報を出力することは、例えば、分析結果を示す情報を表示することや、分析結果を音声情報として出力すること等である。情報処理装置10は、生体情報や分析結果を示す情報を他の装置に送信してよい。
情報処理装置10は、1又は複数の生体情報測定装置12を含んでもよい。つまり、1又は複数の生体情報測定装置12は、情報処理装置10に組み込まれて、1つの装置が構成されてもよい。1又は複数の生体情報測定装置12を含む情報処理装置10全体が、ユーザに装着されて生体情報を測定してもよい。つまり、情報処理装置10はウェアラブル装置であってもよい。例えば、情報処理装置10は、ユーザの頭部に装着される装置であってもよいし、ユーザの耳に装着されるヒアラブル装置であってもよいし、ユーザの腕や手や手首や指等に装着される装置(例えば腕時計型の装置)であってもよいし、ユーザの首に掛けられる装置であってもよいし、ユーザの胴体や足等に装着される装置であってもよい。
もちろん、情報処理装置10と生体情報測定装置12は、別々の装置であってもよい。例えば、情報処理装置10はスマートスピーカであり、生体情報測定装置12は、ユーザに装着されるウェアラブル装置であってもよい。
マイク14は、音波を集める装置である。マイク14の周囲の音(例えば、人の音声やその他の音)がマイク14に入力されて、マイク14によって音データが生成される。マイク14に入力された音を表す音データは、マイク14の周囲の環境を示す環境情報の一例に相当する。その意味で、マイク14は、環境情報測定装置の一例に相当する。また、マイク14に入力されたユーザの音声を表す音データは、当該ユーザの生体情報の一例に相当する。その意味で、マイク14は、当該ユーザの生体情報を測定する生体情報測定装置の一例に相当する。
カメラ16は、撮影装置である。情報処理装置10の周囲やその他の場所がカメラ16によって撮影されて、当該周囲を表す画像データやその他の場所を表す画像データが生成される。当該画像データは、動画像データであってもよいし、静止画像データであってもよい。カメラ16によって撮影された画像データは、カメラ16の撮影範囲に含まれている環境を示す環境情報の一例に相当する。その意味で、カメラ16は、環境情報測定装置の一例に相当する。また、カメラ16によってユーザが撮影されることで生成された、当該ユーザを表す画像データは、当該ユーザの生体情報の一例に相当する。例えば、当該画像データから検知される当該ユーザの動きや当該ユーザの体型等は、当該ユーザの生体情報の一例に相当する。その意味で、カメラ16は、当該ユーザの生体情報を測定する生体情報測定装置の一例に相当する。
臭気センサ18は、臭気センサ18の周囲の匂いを測定し、測定した匂いを表す臭気データを生成する装置である。臭気センサ18によって測定された匂いを表す臭気データは、臭気センサ18の周囲の環境を示す環境情報の一例に相当する。その意味で、臭気センサ18は、環境情報測定装置の一例に相当する。また、臭気センサ18によって測定されたユーザの匂いを表す臭気データは、当該ユーザの生体情報の一例に相当する。その意味で、臭気センサ18は、当該ユーザの生体情報を測定する生体情報測定装置の一例に相当する。
温度センサ20は、温度センサ20の周囲の温度を測定し、測定した温度を表す温度データを生成する装置である。温度センサ20によって測定された温度を表す温度データは、温度センサ20の周囲の環境を示す環境情報の一例に相当する。その意味で、温度センサ20は、環境情報測定装置の一例に相当する。また、温度センサ20によって測定されたユーザの温度を表す温度データは、当該ユーザの生体情報の一例に相当する。その意味で、温度センサ20は、当該ユーザの生体情報を測定する生体情報測定装置の一例に相当する。
なお、カメラ16、臭気センサ18及び温度センサ20は、情報処理システムに含まれなくてもよいし、これらの中の少なくとも1つが情報処理システムに含まれもよい。これら以外の環境情報測定装置(例えば、湿度センサや照度センサや気圧センサや赤外線センサ等)が、情報処理システムに含まれてもよい。1又は複数の環境情報測定装置が、情報処理装置10に含まれてもよい。例えば、カメラ16が情報処理装置10に含まれてもよい。また、マイク14が情報処理装置10に含まれてもよい。
機器22は、例えば、PC、タブレットPC、スマートフォン、携帯電話、ロボット(例えば、人型ロボット、人以外の動物型ロボット、掃除ロボット、及び、それら以外のロボット等)、プロジェクタ、液晶ディスプレイ等の表示装置、記録装置、再生装置、カメラ等の撮像装置、冷蔵庫、炊飯器、電子レンジ、コーヒーメーカー、掃除機、洗濯機、空調機、照明機器、時計、監視カメラ、自動車、二輪車、航空機(例えば無人航空機(例えばドローン))、ゲーム機、ガスレンジ、温水洗浄便座、換気扇、呼び鈴、玄関モニタ、エレベータ、ドア、窓、又は、各種のセンシング機器(例えば温度センサ、湿度センサ、電圧センサ、電流センサ等)等の装置である。機器22の概念の範疇には機器全般が含まれてもよい。例えば、情報機器、映像機器、音響機器、その他の機器も、本実施形態に係る機器22の範疇に含まれてもよい。
以下、情報処理装置10の構成について詳しく説明する。
情報処理装置10は、例えば、通信装置24と、UI26と、記憶装置28と、プロセッサ30とを含む。情報処理装置10は、これら以外の構成を含んでもよい。
通信装置24は通信インターフェースであり、他の装置にデータを送信する機能、及び、他の装置から送信されてきたデータを受信する機能を有する。通信装置24は、無線通信機能を有してもよいし、有線通信機能を有してもよい。通信装置24は、例えば近距離無線通信を利用することで他の装置と通信してもよいし、LANやインターネット等の通信経路を介して他の装置と通信してもよい。通信装置24は、生体情報測定装置12と通信することで、生体情報測定装置12から送信されてきた生体情報を受信する。通信装置24は、生体情報測定装置12の動作を制御するための制御情報を生体情報測定装置12に送信してもよい。また、通信装置24は、環境情報測定装置と通信することで、環境情報測定装置から送信されてきた環境情報を受信する。通信装置24は、環境情報測定装置の動作を制御するための制御情報を環境情報測定装置に送信してもよい。
UI26はユーザインターフェースであり、表示装置と操作装置とを含む。表示装置は、液晶ディスプレイやELディスプレイ等である。操作装置は、キーボードや入力キーや操作パネル等である。UI26は、表示装置と操作装置とを兼ね備えたタッチパネル等のUIであってもよい。また、マイクがUI26に含まれてもよいし、音を発するスピーカがUI26に含まれてもよい。
記憶装置28は、各種のデータを記憶する1又は複数の記憶領域を構成する装置である。記憶装置28は、例えば、ハードディスクドライブ、各種のメモリ(例えばRAMやDRAMやROM等)、その他の記憶装置(例えば光ディスク等)、又は、それらの組み合わせである。1又は複数の記憶装置28が情報処理装置10に含まれている。
記憶装置28には、管理情報が記憶されている。管理情報は、機器22を操作するための生体情報を管理するための情報である。例えば、機器22の操作毎に、機器22の操作を示す制御情報と、当該機器22を操作するときに、その操作を行うユーザから発生すると想定される基準生体情報とが、予め紐付けられて管理情報に登録されている。基準生体情報は、機器22の操作を示す情報であるともいえる。ユーザ毎に、制御情報と基準生体情報とが紐付けられて管理情報に登録されてもよい。
プロセッサ30は、外部からの刺激を受けたユーザから発生した生体情報に基づいて機器22を操作するように構成されている。
外部からの刺激は、例えば、機器22の操作に関する刺激である。例えば、機器22の操作が必要となる環境等が、外部からの刺激の一例に該当する。機器22の操作が必要となる環境は、例えば、機器22に関する会話や、機器22の操作が必要となる匂いや温度等である。プロセッサ30は、環境情報測定装置によって測定された環境情報に基づいて、外部からの刺激を検出し、ユーザが外部から刺激を受けたか否かを判断する。また、プロセッサ30は、ユーザから測定された生体情報が、外部からの刺激を受けた当該ユーザから発生した生体情報であるか否かを判断する。つまり、プロセッサ30は、ユーザから測定された生体情報が、外部からの刺激に起因して当該ユーザから発生した生体情報であるか否かを判断する。ユーザから測定された生体情報が、外部からの刺激を受けた当該ユーザから発生した生体情報である場合、つまり、ユーザから測定された生体情報が、外部からの刺激に起因して当該ユーザから発生した生体情報である場合、プロセッサ30は、当該生体情報に基づいて機器22を操作する。環境情報測定装置は、例えば、マイク14、カメラ16、臭気センサ18、及び、温度センサ20等である。これら以外のセンサ等が環境情報測定装置として用いられてもよい。プロセッサ30は、例えば、マイク14によって測定された音データ、カメラ16によって撮影された画像データ、臭気センサ18によって測定された臭気データ、及び、温度センサ20によって測定された温度データの中の少なくとも1つのデータに基づいて、ユーザが外部から刺激を受けたか否かを判断する。プロセッサ30は、これら以外のデータに基づいて、ユーザが外部から刺激を受けたか否かを判断してもよい。
例えば、ユーザ及びその周囲がカメラ16によって撮影され、プロセッサ30は、その撮影によって生成された画像データを解析することで、当該ユーザが外部から刺激を受けたか否かを判断する。具体例を挙げて説明すると、ユーザの手がつねられている様子が画像データに表されている場合、プロセッサ30は、そのときに測定された生体情報(例えば脳波)は、ユーザの手がつねられたという外部からの刺激に起因して当該ユーザから発生した生体情報であると認識する。
例えば、特定の環境情報が測定され、その特定の環境情報が測定された後にユーザから測定された生体情報は、外部からの刺激を受けた当該ユーザから発生した生体情報であると推測される。つまり、測定された生体情報は、外部からの刺激に起因してユーザから発生した生体情報であると推測される。この場合、特定の環境情報が表す環境が、外部からの刺激の一例に相当する。例えば、特定の環境情報が測定された時点から予め定められた時間が経過するまでの間にユーザから測定された生体情報は、外部からの刺激を受けた当該ユーザから発生した生体情報であると推測される。特定の環境情報が表す環境は、例えば、機器22の操作に関する環境である。例えば、機器22の操作に関する特定の環境情報が測定された場合、プロセッサ30は、その特定の環境情報が測定された後にユーザから測定された生体情報に基づいて、機器22を操作する。外部からの刺激に起因してユーザから発生した生体情報に基づいて機器22を操作することで、ユーザの意図を反映して機器22の操作の精度を向上させることができる。
例えば、ユーザから発生して生体情報測定装置12によって測定された生体情報と、管理情報に登録されている基準生体情報との差異が許容範囲内である場合、プロセッサ30は、当該基準生体情報に紐付けられている制御情報を機器22に送信することで、当該機器22を操作する。許容範囲は、例えば予め定められている。ユーザによって許容範囲が変更されてもよい。
例えば、プロセッサ30は、ユーザから測定された生体情報が表す波形と、基準生体情報が表す波形との差異が許容範囲内に含まれるか否かを判断する。その判断のための要素として、例えば、波形の形状、ピーク、周期又は振幅等の、波形の特徴が用いられる。
例えば、脳の活動を測定する生体情報測定装置12と情報処理装置10とによって、ブレイン・マシン・インターフェースが構築されてもよい。ブレイン・マシン・インターフェースの方式は、侵襲式であってもよいし、非侵襲式であってもよい。この場合、プロセッサ30は、ユーザの脳の活動(例えば脳波等)に基づいて機器22を操作する。プロセッサ30は、機器22を操作するために、脳波から特徴的な成分を抽出し、その抽出された成分に基づいて機器22を操作してもよい。脳波から特徴的な成分を抽出するために、高速フーリエ変換(FFT:Fast Fourier Transform)や、ウェーブレット変換(WT:Wavelet Transform)、TFD(Time Frequency Distribution)、EM(Eigenvector Methods)、自己回帰モデル(ARM:Auto Regressive Method)等が用いられてもよい。また、特徴の抽出によって得られた特徴ベクトルを用いて、脳波と機器22の操作とを結び付ける方法として、例えば、独立成分分析(ICA:Independent Component Analysis)、k平均法、サポートベクターマシン(SVM:Support Vector Machine)、畳み込みニューラルネットワーク等が用いられてもよい。
また、プロセッサ30は、情報処理装置10の各部の動作を制御するように構成されている。プロセッサ30は、メモリを含んでもよい。
以下、具体例を挙げて、本実施形態に係る情報処理システムについて詳しく説明する。
図3には、管理情報の一例である管理テーブルの一例が示されている。管理テーブルのデータは、記憶装置28に記憶されている。管理テーブルのデータは、記憶装置28に記憶されずに、サーバ等の外部装置に記憶されてもよい。
管理テーブルにおいては、機器22の操作毎に、IDと、機器情報と、制御情報と、基準生体情報の一例である基準脳波とが予め紐付けられている。図3に示されている管理テーブルは、個々のユーザの具体的な生体情報が反映された管理テーブルではない。ここでは、生体情報の一例として脳波が用いられているが、脳波以外の生体情報が用いられてもよい。
IDは、機器22の操作を管理するための情報である。機器情報は、操作される機器22を識別するための情報であり、例えば、当該機器22の名称、機器ID又は型番等である。制御情報は、当該機器22の操作を示す情報である。基準脳波は、当該機器22の操作を示す生体情報であって、当該機器22を操作するときに、その操作を行うユーザから発生すると想定される生体情報である。基準脳波は、例えば、統計的な処理によって定められ、当該基準脳波に紐付けられている操作を行うユーザから一般的に発生すると想定される脳波である。なお、脳波そのもの(つまり波形)が、管理テーブルに登録されずに、脳波を分析することで特定された操作を示す情報が、管理テーブルに登録されてもよい。
以下、具体例を挙げて説明する。
ID「1」に紐付けられている情報は、機器22の一例である「エアコンα」の操作に関する情報である。
ID「1」に紐付けられている制御情報は、「「エアコンα」の電源がオフのときに電源をオンする」という操作を示す情報である。
ID「1」に紐付けられている基準脳波は、「「エアコンα」の電源をオンする」という操作を表す脳波である。つまり、この基準脳波は、「エアコンα」の電源がオフの場合においてユーザが電源をオンするときに当該ユーザから発せられると想定される脳波である。
例えば、「エアコンα」の電源がオフのときに、外部からの刺激に起因して、ID「1」に紐付けられている基準脳波がユーザから測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンする。例えば、プロセッサ30は、ID「1」に紐付けられている制御情報を「エアコンα」に送信することで、「エアコンα」の電源をオンする。
「エアコンα」の電源がオフのときに、外部からの刺激に起因して、ID「1」に紐付けられている基準脳波との差異が許容範囲内に含まれる脳波がユーザから測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンしてもよい。例えば、プロセッサ30は、ユーザから測定された脳波と基準脳波のそれぞれから、脳波の形状、ピーク、周期及び振幅等の特徴を抽出し、各波形の特徴を比較し、両波形の特徴の差異が許容範囲内であるか否かを判断する。
また、プロセッサ30は、ユーザから測定された脳波と基準脳波との間の類似度を算出し、その類似度が閾値以上であるか否かを判断してもよい。閾値は、許容範囲に対応する値である。両波形の間の類似度が閾値以上である場合、プロセッサ30は、両波形は類似していると判断し、ユーザから測定された波形と基準脳波との差異が許容範囲内であると判断する。つまり、「エアコンα」の電源がオフのときに、ID「1」に紐付けられている基準脳波との間の類似度が閾値以上となる脳波がユーザから測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンしてもよい。
ID「1」の操作以外の操作についても、ID「1」についての操作と同様に、外部からの刺激に起因して発生したユーザの脳波に基づいて、機器22が操作される。
なお、機器22の操作毎に、複数の異なる基準生体情報の組み合わせと制御情報とが紐付けられていてもよい。例えば、「エアコンα」の電源がオフの場合においてユーザが電源をオンするときに当該ユーザから発せられると想定される脳波(つまり基準脳波)と、そのときに当該ユーザが有すると想定される体温(つまり基準体温)とが、基準生体情報として、「エアコンα」の電源をオンするという操作を示す制御情報に紐付けられていてもよい。この場合、外部からの刺激に起因してユーザから測定された脳波と基準脳波との差異が許容範囲内であり、かつ、そのときに測定されたユーザの体温と基準体温との差異が許容範囲内である場合、プロセッサ30は、当該基準脳波と当該基準体温とに紐付けられている制御情報に従って、「エアコンα」の電源をオンにする。脳波や体温以外の生体情報が用いられてもよい。
なお、ユーザが生体情報によって機器22を操作するときに、ユーザは、操作される機器22を識別するための機器情報を表す音声を発し、プロセッサ30は、当該音声を解析することで、操作される機器22を特定してもよい。なお、ユーザの音声は、マイク14によって測定される。プロセッサ30は、管理テーブルにおいて、操作される機器22を検索し、その機器22についての操作を制御する。例えば、「エアコンα」の電源をオンするという操作を表す脳波がユーザから発せられている状態において、ユーザが「エアコンα」を表す音声を発した場合、プロセッサ30は、その音声に基づいて、操作される機器22が「エアコンα」であることを特定し、測定された脳波に紐付けられている制御情報に従って、「エアコンα」の電源をオンする。図3に示す例では、「エアコンα」についての操作は、ID「1」に紐付けられた操作と、ID「2」に紐付けられた操作が、管理テーブルに登録されている。プロセッサ30は、ID「1」及びID「2」のそれぞれに紐付けられている脳波と、ユーザから測定された脳波とを比較する。ID「1」に紐付けられている脳波と、ユーザから測定された脳波との差異が、許容範囲内であり、ID「2」に紐付けられている脳波と、ユーザから測定された脳波との差異が、許容範囲内ではない場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」を操作する。この場合、プロセッサ30は、「エアコンα」の電源をオンにする。一方、ID「1」に紐付けられている脳波と、ユーザから測定された脳波との差異が、許容範囲内ではなく、ID「2」に紐付けられている脳波と、ユーザから測定された脳波との差異が、許容範囲内である場合、プロセッサ30は、ID「2」に紐付けられている制御情報に従って、「エアコンα」を操作する。この場合、プロセッサ30は、「エアコンα」の電源をオフにする。
また、ユーザ毎に、機器情報と、制御情報と、基準生体情報とが紐付けられて管理テーブルに登録されてもよい。具体的には、個々のユーザの具体的な基準生体情報が管理テーブルに登録されてもよい。
図4には、個々のユーザの具体的な基準生体情報が登録されている管理テーブルが示されている。図4に示されている管理テーブルにおいては、機器22の操作毎に、IDと、機器情報と、制御情報と、基準生体情報の一例である基準脳波と、ユーザ情報とが紐付けられている。ユーザ情報は、ユーザを識別するための情報(例えば、ユーザ名やユーザID等)である。なお、ユーザ情報は、管理テーブルに登録されていなくてもよい。
ユーザ情報に紐付けられている基準脳波は、当該ユーザ情報が示すユーザが、当該基準脳波に紐付けられている制御情報が示す操作を行ったときに、当該ユーザから測定された脳波である。各ユーザの基準脳波は予め測定される。
例えば、ユーザAがエアコンαの電源を手動でオンしたときにユーザAの脳波が生体情報測定装置12によって測定され、その測定された脳波が、ユーザAがエアコンαの電源をオンするという操作を表す基準脳波として、管理テーブルに登録される。この場合、「エアコンα」を示す機器情報と、「エアコンα」の電源をオンする操作を示す制御情報と、測定されたユーザAの当該基準脳波と、ユーザAを識別するためのユーザ情報とが紐付けられて管理テーブルに登録される。その登録の作業は、情報処理装置10を用いて行われてもよいし、他の装置を用いて行われてもよい。図4に示す例では、これらの情報はID「1」の情報として登録される。他の操作や他のユーザについても同様である。
なお、登録の作業を複数回行い、これによって測定された複数の脳波の平均を、基準脳波として登録してもよい。例えば、ユーザAがエアコンαの電源を手動でオンし、そのときにユーザAから発生した脳波を生体情報測定装置12によって測定するという作業を、複数回行い、これによって測定された複数の脳波の平均を、基準脳波として管理テーブルに登録してもよい。
例えば、「エアコンα」の電源がオフのときに、外部からの刺激に起因して、ID「1」に紐付けられている基準脳波との差異が許容範囲内に含まれる脳波が測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンする。
例えば、ユーザAのみが情報処理装置10にログインしている状態で、ユーザAから、ID「1」に紐付けられている基準脳波との差異が許容範囲内に含まれる脳波が測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンにする。具体的には、ユーザAのみが情報処理装置10にログインしているときに、生体情報測定装置12によって脳波が測定されると、プロセッサ30は、ログインしているユーザAを識別するためのユーザ情報に紐付けられて管理テーブルに登録されている基準脳波を検索する。図4に示す例では、ID「1」に紐付けられている基準脳波と、ID「3」に紐付けられている基準脳波が、ユーザAの基準脳波として管理テーブルに登録されているため、これらの基準脳波が検索される。測定された脳波が、ID「1」に紐付けられている基準脳波と一致する場合、又は、測定された脳波とID「1」に紐付けられている基準脳波との差異が許容範囲内である場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンにする。測定された脳波が、ID「3」に紐付けられている基準脳波と一致する場合、又は、測定された脳波とID「3」に紐付けられた基準脳波との差異が許容範囲内である場合、プロセッサ30は、ID「3」に紐付けられている制御情報に従って、「エアコンα」の電源をオフにする。
別の例として、機器22を操作するユーザが「ユーザA」であることが情報処理装置10に設定されている状態で、ユーザAから、ID「1」に紐付けられている基準脳波が測定された場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンにしてもよい。具体的には、機器22を操作するユーザが「ユーザA」であることが情報処理装置10に設定されている状態で、生体情報測定装置12によって脳波が測定されると、プロセッサ30は、機器22を操作するユーザであるユーザAを識別するためのユーザ情報に紐付けられて管理テーブルに登録されている基準脳波を検索する。測定された脳波が、ID「1」に紐付けられている基準脳波と一致する場合、又は、測定された脳波とID「1」に紐付けられている基準脳波との差異が許容範囲内である場合、プロセッサ30は、ID「1」に紐付けられている制御情報に従って、「エアコンα」の電源をオンにする。機器22を操作するユーザは、例えば、ユーザによって情報処理装置10に設定される。
ユーザA以外の他のユーザについても、ユーザAと同様に、各情報が管理テーブルに登録される。例えば、ID「2」に紐付けられている各情報は、ユーザBが「エアコンα」の電源をオンにしたときの操作に関する情報である。ID「3」に紐付けられている各情報は、ユーザAが「エアコンα」の電源をオフにしたときの操作に関する情報である。
プロセッサ30は、生体情報に基づいて機器22を操作する前に、当該機器22の操作の可否をユーザに問い合わせるための情報を出力し、当該機器22を操作する指示を当該ユーザから受けた場合、当該機器22を操作してもよい。機器22の操作の可否をユーザに問い合わせるための情報を出力することは、例えば、その操作の内容を表す画像をUI26の表示部に表示させることであってもよいし、その操作の内容を表す音声をスピーカから発することであってもよい。つまり、プロセッサ30は、操作の可否の判断を、画像や音声等によってユーザに促してもよい。その操作を実行することの合意が当該ユーザから得られた場合、プロセッサ30は、当該ユーザから測定された脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を当該機器22に送信することで、当該機器22を操作する。例えば、合意を表す脳波が当該ユーザから測定された場合、プロセッサ30は、当該制御情報を当該機器22に送信することで当該機器22を操作する。
ユーザから測定された脳波との差異が許容範囲に含まれる基準脳波に紐付けられている制御情報が示す操作が、機器22の動作を止める操作である場合、プロセッサ30は、当該機器22の操作の可否をユーザに問い合わせずに、当該機器22の動作を止めてもよい。例えば、当該ユーザから測定された脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報が示す操作が、当該機器22の電源をオフにする操作や、当該機器22の動作を一時的に停止させる操作等である場合、プロセッサ30は、その操作の可否をユーザに問い合わせずに、当該機器22の電源をオフにしたり、当該機器22の動作を一時的に停止させたりする。
ユーザから測定された脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている操作が、機器22の性能レベルを低下させる操作である場合、プロセッサ30は、当該機器22の操作の可否をユーザに問い合わせずに、当該機器22の性能レベルを低下させてもよい。機器22の性能レベルを低下させることは、当該機器22の出力レベルを低下させることである。例えば、スピーカの音量を下げることや、エアコンの風量を弱めることや、冷房の温度を上げることや、暖房の温度を下げること等が、性能レベルを低下させることの一例に該当する。
ユーザが睡眠中は、プロセッサ30は、生体情報による機器22の操作を中止してもよい。プロセッサ30は、例えば公知の技術を用いることで、ユーザから測定される生体情報に基づいて、当該ユーザが睡眠中か否かを判断する。脳波の種類や強度や推移等に基づいて、人の睡眠状態を把握することができることが知られている。睡眠状態は、例えば、レム睡眠、ノンレム睡眠及び覚醒に分類される。もちろん、この分類は一例に過ぎず、別の分類が用いられてもよい。ここでは一例として、ユーザの睡眠状態が、レム睡眠又はノンレム睡眠である場合、ユーザの状態は眠っている状態であり、ユーザの睡眠状態が、覚醒である場合、ユーザの状態は眠っていない状態であるものとする。プロセッサ30は、公知技術を用いることで、測定された脳波の種類や強度や推移等に基づいて、ユーザの睡眠状態を判断する。
入眠するときの脳波は、β波、α波、θ波、δ波の順番で発生することが知られている。ユーザが体を横にして目を閉じると、β波が発生している状態から、体がリラックスしてきてα波が発生する。その段階から、意識が薄らいでくるとθ波が発生し、睡眠が深くなるとδ波が発生する。プロセッサ30は、このようにして発生する脳波を分析することで、ユーザの睡眠状態を判断する。
生体情報測定装置12の一例である加速度センサがユーザに装着され、ユーザの加速度、つまり動きが測定されてもよい。プロセッサ30は、加速度の大きさや変化量に基づいて、ユーザの睡眠状態を認識してもよい。また、プロセッサ30は、ユーザの脈拍数や血圧等に基づいて、ユーザの睡眠状態を把握してもよい。
操作対象の機器22が操作範囲内に存在しない場合、プロセッサ30は、警告を出力してもよい。プロセッサ30は、例えば、警告を示す情報をUI26の表示部に表示させてもよいし、警告音を発してもよい。操作範囲は、例えば、予め定められた位置を基準として、その位置から予め定められた距離以内の範囲である。予め定められた位置は、ユーザの位置であってもよいし、情報処理装置10が設置されている位置であってもよいし、ユーザによって指定された任意の位置であってもよい。例えば、ユーザが携帯する端末装置(例えばスマートフォン等)の位置をGPS(Global Positioning System)等によって特定することで、当該ユーザの位置が特定される。情報処理装置10の位置は、情報処理装置10に設定されていてもよいし、GPS等によって特定されてもよい。
プロセッサ30は、複数の機器22のそれぞれに対する操作の指示を表す生体情報を受け付けた場合、生体情報に対応する制御情報を各機器22に送信することで、各機器22を操作してもよい。
プロセッサ30は、ユーザから測定された生体情報の変化の大きさに応じて、機器22の性能レベルを変更してもよい。例えば、機器22毎に、生体情報の変化の大きさを示す情報と性能レベルを示す情報とが紐付けられて記憶装置28に記憶されている。プロセッサ30は、その紐付けられた情報を参照することで、生体情報の変化に応じて性能レベルを変更する。例えば、プロセッサ30は、生体情報の一例である脳波の振幅の変化の大きさに応じて、機器22の性能レベルを変更する。具体的には、プロセッサ30は、脳波の振幅の変化が大きいほど性能レベルを向上させる。例えば、プロセッサ30は、脳波の振幅の変化が大きいほど、スピーカの音量を上げたり、エアコンの風量を強めたり、冷房の温度を下げたり、暖房の温度を上げたりする。別の例として、プロセッサ30は、脳波のピークの変化の大きさや周期の変化の大きさ等に応じて、機器22の性能レベルを変更してもよい。
プロセッサ30は、ユーザから測定された生体情報の変化の速さに応じて、機器22の性能レベルを変更してもよい。例えば、機器22毎に、生体情報の変化の速さを示す情報と性能レベルを示す情報とが紐付けられて記憶装置28に記憶されている。プロセッサ30は、その紐付けられた情報を参照することで、生体情報の変化の速さに応じて性能レベルを変更する。例えば、プロセッサ30は、生体情報の一例である脳波の振幅の変化の速さに応じて、機器22の性能レベルを変更する。具体的には、プロセッサ30は、脳波の振幅の変化が速いほど性能レベルを向上させる。例えば、プロセッサ30は、脳波の振幅の変化が速いほど、スピーカの音量を上げたり、エアコンの風量を強めたり、冷房の温度を下げたり、暖房の温度を上げたりする。別の例として、プロセッサ30は、脳波のピークの変化の速さや周期の変化の速さ等に応じて、機器22の性能レベルを変更してもよい。
ユーザから複数の生体情報が測定された場合、プロセッサ30は、予め定められた優先順位に従って、生体情報に基づいて機器22を操作してもよい。例えば、ユーザから複数の生体情報が同時に測定された場合、プロセッサ30は、優先順位に従って生体情報に基づいて機器22を操作する。例えば、複数の生体情報のそれぞれが同一の機器22に対する操作を示している場合、プロセッサ30は、操作の内容に基づいて定められた優先順位に従って、生体情報に基づいて同一の機器22を操作する。別の例として、生体情報の種類に基づいて優先順位が定められてもよい。例えば、脳波の優先順位が最も高い優先順位に設定され、脈拍の優先順位が2番目に高い優先順位に設定される。他の種類の生体情報についても優先順位が予め設定される。例えば、脳波と脈拍とが測定された場合、プロセッサ30は、優先順位が高い脳波に基づいて機器22を操作し、優先順位が低い脈拍に基づいては機器22を操作しない。他の生体情報が測定された場合も、プロセッサ30は、優先順位が他の生体情報よりも高い生体情報に基づいて機器22を操作する。
ユーザの状態が、予め定められた平常状態とは異なる場合、プロセッサ30は、情報処理装置10の動作を停止してもよい。プロセッサ30は、ユーザから測定された生体情報に基づいてユーザの状態を判断する。例えば、ユーザの体温と平常状態の体温(例えば平熱)との差異が閾値以上となる場合、プロセッサ30は、ユーザの状態が平常状態とは異なる状態であると判断し、情報処理装置10の動作を停止する。これにより、生体情報による機器22の操作が行われなくなる。プロセッサ30は、ユーザの脈拍や血圧等に基づいて、ユーザの状態が平常状態か否かを判断してもよい。
機器22に対する操作(以下、「第1操作」と称する)を示す生体情報がユーザから測定された時点から予め定められた時間内に、当該操作とは異なる別の操作(以下、「第2操作」と称する)を示す別の生体情報が、当該ユーザから測定された場合、プロセッサ30は、予め定められた優先順位に従って、生体情報に基づいて当該機器22を操作する。第2操作は、第1操作が行われる機器22に対する操作である。例えば、操作の内容に基づいて優先順位が定められてもよい。第1操作の内容が第2操作の内容よりも優先順位が高い場合、プロセッサ30は、機器22に対して第1操作を行う。別の例として、生体情報の測定の順番に基づいて優先順位が定められてもよい。例えば、後に測定された生体情報の優先順位が先に測定された生体情報よりも優先順位が高い。この場合、プロセッサ30は、機器22に対して第2操作を行う。上述した優先順位は一例に過ぎず、その優先順位はユーザによって定められてもよい。
以下、具体的な実施例について詳しく説明する。
(実施例1)
変形例1では、マイク14によって測定された特定の音声が、外部からの刺激の一例に相当し、当該特定の音声を表す音声データが、特定の環境情報の一例に相当する。また、生体情報は一例として脳波である。特定の音声は、例えば、機器22の操作に関する音声(例えば会話等)である。特定の音声を表す音声データが測定された後にユーザから測定された生体情報は、外部からの刺激である特定の音声を受けた当該ユーザから発生した生体情報であると推測される。この場合、プロセッサ30は、特定の音声を受けた当該ユーザから発生した生体情報に基づいて、機器22を操作する。つまり、プロセッサ30は、特定の音声を聞いた当該ユーザから発生した生体情報に基づいて、機器22を操作する。例えば、特定の音声が測定された時点から予め定められた時間が経過するまでの間にユーザから測定された生体情報は、外部からの刺激である特定の音声を聞いた当該ユーザから発生した生体情報であると推測される。つまり、その測定された生体情報は、外部からの刺激である特定の音声を聞いたことに起因して当該ユーザから発生した生体情報であると推測される。
例えば、生体情報である脳波が測定されるユーザ(例えばユーザA)の会話相手の音声が、外部からの刺激の一例に相当し、その音声を表す音声データが、特定の環境情報の一例に相当する。
脳波が測定されるユーザAとその会話相手とが会話している場合、プロセッサ30は、その会話相手の音声を聞いたユーザAから測定された脳波を受け付け、当該脳波に紐付けられている操作を特定する。例えば、プロセッサ30は、図4に示されている管理テーブルを参照することで、ユーザAから測定された当該脳波に紐付けられている操作を特定する。具体的には、プロセッサ30は、ユーザAから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている操作を特定する。プロセッサ30は、その操作の内容を表す画像をUI26の表示部に表示させてもよいし、その操作の内容を表す音声をスピーカから発ししてもよい。その操作を実行することの合意がユーザAから得られた場合、プロセッサ30は、ユーザAから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を機器22に送信することで、当該機器22を操作する。
例えば、マイク14によって、ユーザAと会話相手の音声を表す音声データが測定され、プロセッサ30は、マイク14によって測定された音声データを解析することで、ユーザAと会話相手との間の会話の内容を認識する。また、カメラ16によってユーザAと会話相手が撮影され、プロセッサ30は、その撮影によって生成された画像データに基づいて、ユーザAと会話相手を認識してもよい。プロセッサ30は、機器22の操作に関する、会話相手の発言内容を認識し、その発言を聞いてユーザAから測定された脳波を受け付け、ユーザAの当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を機器22に送信する。機器22の操作に関する、会話相手の発言内容が、外部からの刺激の一例に相当し、その発言内容を表す音声データが、特定の環境情報の一例に相当する。その会話相手の発言の後に測定された脳波(例えば、その会話相手が発言した時点から予め定められた時間が経過するまでの間に測定された脳波)が、その会話相手の発言を聞いてユーザAから発せられた脳波、つまり、外部からの刺激を受けたユーザAから発せられた脳波であると推測される。
具体例を挙げて説明する。会話相手が「テレビで○○を見たい?」と発言した場合、その発言内容がマイク14によって測定され、プロセッサ30は、マイク14によって測定された音声を解析することで、その発言内容を認識する。その発言内容は、機器22であるテレビの操作に関する発言であり、外部からの刺激の一例に相当し、その発言内容を表す音声データは、特定の環境情報の一例に相当する。プロセッサ30は、その発言を受けたユーザAから測定された脳波を受け付ける。例えば、会話相手が「テレビで○○を見たい?」と発言した時点から予め定められた時間が経過するまでの間に測定された脳波が、その会話相手の発言を聞いたユーザAから発せられた脳波であると推測される。その脳波が、同意を表す脳波である場合、プロセッサ30は、「テレビをオンしますか?」といった内容のメッセージを出力する。例えば、プロセッサ30は、そのメッセージの音声をスピーカから発してもよいし、そのメッセージをUI26の表示部に表示させてもよい。プロセッサ30は、そのメッセージが出力された後にユーザAから測定された脳波を受け付ける。その脳波が、同意を表す脳波である場合、プロセッサ30は、機器22であるテレビをオンする操作を実行するための制御情報を当該テレビに送信することで、当該テレビの電源をオンする。
(実施例2)
変形例2では、臭気センサ18によって測定された特定の匂いが、外部からの刺激の一例に相当し、当該特定の匂いを表す臭気データが、特定の環境情報の一例に相当する。例えば、臭気センサ18によって、ユーザの周囲の匂いが測定される。また、生体情報は一例として脳波である。特定の匂いは、例えば、機器22の操作に関する匂いである。特定の匂いを表す臭気データが測定された後にユーザから測定された生体情報は、外部からの刺激である特定の匂いを受けた当該ユーザから発生した生体情報であると推測される。この場合、プロセッサ30は、特定の匂いを受けた当該ユーザから発生した生体情報に基づいて、機器22を操作する。つまり、プロセッサ30は、特定の匂いを嗅いた当該ユーザから発生した生体情報に基づいて、機器22を操作する。例えば、特定の匂いが測定された時点から予め定められた時間が経過するまでの間にユーザから測定された生体情報は、外部からの刺激である特定の匂いを嗅いだ当該ユーザから発生した生体情報であると推測される。つまり、その測定された生体情報は、外部からの刺激である特定の匂いを嗅いだことに起因して当該ユーザから発生した生体情報であると推測される。
特定の匂いが測定された場合、プロセッサ30は、その特定の匂いを嗅いたユーザから測定された脳波を受け付け、当該脳波に紐付けられている操作を特定する。例えば、プロセッサ30は、図4に示されている管理テーブルを参照することで、当該ユーザから測定された当該脳波に紐付けられている操作を特定する。具体的には、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている操作を特定する。プロセッサ30は、その操作の内容を表す画像をUI26の表示部に表示させてもよいし、その操作の内容を表す音声をスピーカから発してもよい。その操作を実行することの合意が当該ユーザから得られた場合、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を機器22に送信することで、当該機器22を操作する。機器22の操作に関する特定の匂いが測定された後に測定された脳波(例えば、特定の匂いが測定された時点から予め定められた時間が経過するまでの間に測定された脳波)が、その特定の匂いを嗅いだユーザから発せられた脳波、つまり、外部からの刺激を受けたユーザから発せられた脳波であると推測される。
具体例を挙げて説明する。料理をした後、部屋に調理時の匂いが残り、臭気センサ18によって、その匂いを表す臭気データが測定される。その匂いは、機器22である空気清浄機の操作に関する匂いであり、外部からの刺激の一例に相当し、その匂いを表す臭気データは、特定の環境情報の一例に相当する。プロセッサ30は、その匂いを嗅いだユーザから測定された脳波を受け付ける。例えば、料理の後の匂いが測定された時点から予め定められた時間が経過するまでの間に測定された、「匂いが不快」を表す脳波が、その匂いを嗅いだユーザから発せられた脳波であると推測される。この場合、プロセッサ30は、「空気清浄機をオンしますか?」といった内容のメッセージを出力する。例えば、プロセッサ30は、そのメッセージの音声をスピーカから発してもよいし、そのメッセージをUI26の表示部に表示させてもよい。プロセッサ30は、そのメッセージが出力された後にユーザから測定された脳波を受け付ける。その脳波が、同意を表す脳波である場合、プロセッサ30は、機器22である空気清浄機をオンする操作を実行するための制御情報を当該空気清浄機に送信することで、当該空気清浄機の電源をオンする。なお、空気清浄機と共に、又は、空気清浄機の代わりに、香りを拡散させるためのアロマディフューザーが用いられてもよい。
(変形例3)
変形例3では、温度センサ20によって測定された、特定の温度範囲に含まれる温度が、外部からの刺激の一例に相当し、当該特定の温度範囲に含まれる温度を表す温度データが、特定の環境情報の一例に相当する。例えば、温度センサ20によって、ユーザの周囲の温度が測定される。また、生体情報は一例として脳波である。例えば、特定の温度範囲に含まれる温度は、機器22の操作に関する温度である。特定の温度範囲に含まれる温度を表す温度データが測定された後にユーザから測定された生体情報は、外部からの刺激である温度を受けて当該ユーザから発生した生体情報であると推測される。この場合、プロセッサ30は、特定の温度範囲に含まれる温度を受けた当該ユーザから発生した生体情報に基づいて、機器22を操作する。つまり、プロセッサ30は、特定の温度範囲に含まれる温度を感じた当該ユーザから発生した生体情報に基づいて、機器22を操作する。例えば、特定の温度範囲に含まれる温度が測定された時点から予め定められた時間が経過するまでの間にユーザから測定された生体情報は、外部からの刺激である特定の温度範囲に含まれる温度を感じた当該ユーザから発生した生体情報であると推測される。つまり、その測定された生体情報は、外部からの刺激である特定の温度範囲に含まれる温度を感じたことに起因して当該ユーザから発生した生体情報であると推測される。
特定の温度範囲に含まれる温度が測定された場合、プロセッサ30は、その特定の温度範囲に含まれる温度を感じたユーザから測定された脳波を受け付け、当該脳波に紐付けられている操作を特定する。例えば、プロセッサ30は、図4に示されている管理テーブルを参照することで、ユーザから測定された当該脳波に紐付けられている操作を特定する。具体的には、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている操作を特定する。プロセッサ30は、その操作の内容を表す画像をUI26の表示部に表示させてもよいし、その操作の内容を表す音声をスピーカから発してもよい。その操作を実行することの合意がユーザから得られた場合、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を機器22に送信することで、当該機器22を操作する。機器22の操作に関する温度が測定された後に測定された脳波(例えば、特定の温度範囲に含まれる温度が測定された時点から予め定められた時間が経過するまでの間に測定された脳波)が、その温度を感じたユーザから発せられた脳波、つまり、外部からの刺激を受けたユーザから発せられた脳波であると推測される。
具体例を挙げて説明する。ユーザが帰宅したときに部屋が暑く、部屋に設置された温度センサ20によって、予め定められた閾値以上の温度が測定されたものとする。予め定められた閾値以上の温度は、特定の温度範囲に含まれる温度であり、ここでは一例として、一般的に人が暑さを感じると推測される温度である。特定の温度範囲に含まれる温度は、機器22であるエアコンの操作に関する温度であり、外部からの刺激の一例に相当し、その温度を表す温度データは、特定の環境情報の一例に相当する。プロセッサ30は、その温度を感じたユーザから測定された脳波を受け付ける。例えば、特定の温度範囲に含まれる温度が測定された時点から予め定められた時間が経過するまでの間に測定された、「暑くて不快」を表す脳波は、その温度を感じたユーザから発せられた脳波であると推測される。この場合、プロセッサ30は、「エアコンをオンにしますか?」といった内容のメッセージを出力する。例えば、プロセッサ30は、そのメッセージの音声をスピーカから発してもよいし、そのメッセージをUI26の表示部に表示させてもよい。プロセッサ30は、そのメッセージが出力された後にユーザから測定された脳波を受け付ける。その脳波が、同意を表す脳波である場合、プロセッサ30は、機器22であるエアコンをオンする操作を実行するための制御情報を当該エアコンに送信することで、当該エアコンの電源をオンする。
(変形例4)
変形例4では、生体情報が測定されるユーザが目視した特定の状況が、外部からの刺激の一例に相当し、当該特定の状況を表す画像データが、特定の環境情報の一例に相当する。例えば、カメラ16によって、ユーザとその周囲が撮影される。また、生体情報は一例として脳波である。例えば、特定の状況は、機器22の操作に関する状況である。特定の状況を表す画像データが測定された後にユーザから測定された生体情報は、外部からの刺激である特定の状況を受けた当該ユーザから発生した生体情報であると推測される。この場合、プロセッサ30は、特定の状況を受けた当該ユーザから発生した生体情報に基づいて、機器22を操作する。つまり、プロセッサ30は、特定の状況を目視した当該ユーザから発生した生体情報に基づいて、機器22を操作する。例えば、特定の状況を表す画像データが撮影された時点から予め定められた時間が経過するまでの間にユーザから測定された生体情報は、外部からの刺激である特定の状況を目視した当該ユーザから発生した生体情報であると推測される。つまり、その測定された生体情報は、外部からの刺激である特定の状況を目視したことに起因して当該ユーザから発生した生体情報であると推測される。
例えば、プロセッサ30は、ユーザとその周囲が表されている画像データを解析することで、ユーザが見ている方向を特定し、ユーザが目視している状況を認識する。
特定の状況を表す画像データが撮影された場合、プロセッサ30は、その特定の状況を目視したユーザから測定された脳波を受け付け、当該脳波に紐付けられている操作を特定する。例えば、プロセッサ30は、図4に示されている管理テーブルを参照することで、ユーザから測定された当該脳波に紐付けられている操作を特定する。具体的には、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている操作を特定する。プロセッサ30は、その操作の内容を表す画像をUI26の表示部に表示させてもよいし、その操作の内容を表す音声をスピーカから発してもよい。その操作を実行することの合意がユーザから得られた場合、プロセッサ30は、当該ユーザから測定された当該脳波との差異が許容範囲内に含まれる基準脳波に紐付けられている制御情報を機器22に送信することで、当該機器22を操作する。機器22の操作に関する特定の状況を表す画像データが撮影された後に測定された脳波(例えば、特定の状況を表す画像データが撮影された時点から予め定められた時間が経過するまでの間に測定された脳波)が、その特定の状況を目視したユーザから発せられた脳波、つまり、外部からの刺激を受けたユーザから発せられた脳波であると推測される。
具体例を挙げて説明する。ユーザが、床に落ちている綿埃を見つけ、ユーザがその状況を見ている様子がカメラ16によって撮影されて、その様子を表す画像データが生成されたものとする。床に綿埃が落ちている状況は、機器22であるロボット掃除機の操作に関する状況であり、外部からの刺激の一例に相当し、その状況を表す画像データは、特定の環境情報の一例に相当する。プロセッサ30は、その状況を見たユーザから測定された脳波を受け付ける。例えば、床に落ちている綿埃をユーザが見ている様子を表す画像データが撮影された時点から予め定められた時間が経過するまでの間に測定された、「埃が不快」を表す脳波は、その状況を見たユーザから発せられた脳波であると推測される。この場合、プロセッサ30は、「ロボット掃除機をオンにしますか?」といった内容のメッセージを出力する。例えば、プロセッサ30は、そのメッセージの音声をスピーカから発してもよいし、そのメッセージをUI26の表示部に表示させてもよい。プロセッサ30は、そのメッセージが出力された後にユーザから測定された脳波を受け付ける。その脳波が、同意を表す脳波である場合、プロセッサ30は、機器22であるロボット掃除機をオンする操作を実行するための制御情報を当該ロボット掃除機に送信することで、当該ロボット掃除機の電源をオンする。
上記各実施形態において、プロセッサとは広義的なプロセッサを指し、汎用的なプロセッサ(例えばCPU: Central Processing Unit、等)や、専用のプロセッサ(例えばGPU: Graphics Processing Unit、ASIC: Application Specific Integrated Circuit、FPGA: Field Programmable Gate Array、プログラマブル論理デバイス、等)を含むものである。また上記各実施形態におけるプロセッサの動作は、1つのプロセッサによって成すのみでなく、物理的に離れた位置に存在する複数のプロセッサが協働して成すものであってもよい。また、プロセッサの各動作の順序は上記各実施形態において記載した順序のみに限定されるものではなく、適宜変更してもよい。
10 情報処理装置、12 生体情報測定装置、22 機器、30 プロセッサ。

Claims (16)

  1. プロセッサを有し、
    前記プロセッサは、外部からの刺激を受けたユーザから発生した生体情報に基づいて機器を操作する、
    情報処理装置。
  2. 前記生体情報と、前記機器の操作を示す基準生体情報との差異が許容範囲内である場合、前記プロセッサは、前記生体情報に基づいて前記機器を操作する、
    ことを特徴とする請求項1に記載の情報処理装置。
  3. 前記プロセッサは、前記生体情報に基づいて前記機器を操作する前に、前記機器の操作の可否を前記ユーザに問い合わせるための情報を出力し、前記機器を操作する指示を前記ユーザから受けた場合、前記機器を操作する、
    ことを特徴とする請求項1又は請求項2に記載の情報処理装置。
  4. 前記機器の動作を止める場合、前記プロセッサは、前記機器の操作の可否を前記ユーザに問い合わせずに、前記機器の動作を止める、
    ことを特徴とする請求項3に記載の情報処理装置。
  5. 前記機器の性能レベルを低下させる場合、前記プロセッサは、前記機器の操作の可否を前記ユーザに問い合わせずに、前記機器の性能レベルを低下させる、
    ことを特徴とする請求項3に記載の情報処理装置。
  6. 前記外部からの刺激は、前記ユーザの会話相手の音声である、
    ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置。
  7. 前記外部からの刺激は、匂いである、
    ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置。
  8. 前記外部からの刺激は、温度である、
    ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置。
  9. 前記外部からの刺激は、前記ユーザが目視した状況である、
    ことを特徴とする請求項1から請求項5のいずれか一項に記載の情報処理装置。
  10. 前記プロセッサは、前記ユーザの睡眠中は、前記生体情報に基づいて前記機器を操作しない、
    ことを特徴とする請求項1から請求項9のいずれか一項に記載の情報処理装置。
  11. 前記プロセッサは、前記生体情報の変化の大きさに応じて、前記機器の性能レベルを変更する、
    ことを特徴とする請求項1から請求項10のいずれか一項に記載の情報処理装置。
  12. 前記プロセッサは、前記生体情報の変化の速さに応じて、前記機器の性能レベルを変更する、
    ことを特徴とする請求項1から請求項10のいずれか一項に記載の情報処理装置。
  13. 前記ユーザから複数の生体情報が測定された場合、前記プロセッサは、予め定められた優先順位に従って、生体情報に基づいて前記機器を操作する、
    ことを特徴とする請求項1から請求項12のいずれか一項に記載の情報処理装置。
  14. 前記機器に対する操作を示す生体情報が前記ユーザから測定された時点から予め定められた時間内に、前記操作と異なる操作を示す別の生体情報が前記ユーザから測定された場合、前記プロセッサは、予め定められた優先順位に従って、生体情報に基づいて前記機器を操作する、
    ことを特徴とする請求項1から請求項12のいずれか一項に記載の情報処理装置。
  15. 前記生体情報は脳波である、
    ことを特徴とする請求項1から請求項14のいずれか一項に記載の情報処理装置。
  16. コンピュータに、
    外部からの刺激を受けたユーザから発生した生体情報に基づいて機器を操作させる、
    プログラム。
JP2019153630A 2019-08-26 2019-08-26 情報処理装置及びプログラム Active JP7296626B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2019153630A JP7296626B2 (ja) 2019-08-26 2019-08-26 情報処理装置及びプログラム
US16/740,488 US20210063971A1 (en) 2019-08-26 2020-01-13 Information processing apparatus and non-transitory computer readable medium storing program
CN202010030546.7A CN112433600A (zh) 2019-08-26 2020-01-13 信息处理装置、存储介质及信息处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019153630A JP7296626B2 (ja) 2019-08-26 2019-08-26 情報処理装置及びプログラム

Publications (2)

Publication Number Publication Date
JP2021033677A true JP2021033677A (ja) 2021-03-01
JP7296626B2 JP7296626B2 (ja) 2023-06-23

Family

ID=74675937

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019153630A Active JP7296626B2 (ja) 2019-08-26 2019-08-26 情報処理装置及びプログラム

Country Status (3)

Country Link
US (1) US20210063971A1 (ja)
JP (1) JP7296626B2 (ja)
CN (1) CN112433600A (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022110509A (ja) * 2021-01-18 2022-07-29 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
US20230409115A1 (en) * 2022-05-24 2023-12-21 Lenovo (Singapore) Pte, Ltd Systems and methods for controlling a digital operating device via an input and physiological signals from an individual

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06289765A (ja) * 1993-03-31 1994-10-18 Casio Comput Co Ltd 学習装置
WO2008059878A1 (fr) * 2006-11-15 2008-05-22 Panasonic Corporation Dispositif d'ajustement pour un procédé d'identification d'ondes cérébrales, procédé d'ajustement et programme informatique
JP2011137917A (ja) * 2009-12-28 2011-07-14 Technos Japan:Kk 脳波のバイオフィードバックにより制御される脳トレーニング装置
JP2015192870A (ja) * 2014-03-25 2015-11-05 キッセイコムテック株式会社 意図推定方法、意図推定用プログラムおよび意図推定装置
US20170323161A1 (en) * 2014-11-06 2017-11-09 Samsung Electronics Co., Ltd. Method and apparatus for early warning of danger
US20190056707A1 (en) * 2017-08-18 2019-02-21 The Boeing Company Methods and Systems for Controlling Operation of Equipment Based on Biometric Data

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201238562A (en) * 2011-03-25 2012-10-01 Univ Southern Taiwan Brain wave control system and method
JP2013042768A (ja) * 2011-08-22 2013-03-04 Sony Corp 情報処理装置および方法、プログラム、並びに記録媒体
JP6213936B2 (ja) * 2014-03-20 2017-10-18 パナソニックIpマネジメント株式会社 睡眠環境制御システムおよびそれに用いられる睡眠環境制御プログラム
CN104202644B (zh) * 2014-09-29 2017-07-07 深圳市九洲电器有限公司 脑电波信号标准化输出方法、装置、机顶盒及系统
WO2016140408A1 (ko) * 2015-03-05 2016-09-09 주식회사 프라센 수면 유도 장치 및 이를 포함하는 수면 관리 시스템
JP6657682B2 (ja) * 2015-09-02 2020-03-04 Tdk株式会社 睡眠管理装置、睡眠管理システム、睡眠管理方法及びそのプログラム
KR102587452B1 (ko) * 2015-12-09 2023-10-11 삼성전자주식회사 생체 정보에 기반하여 장비를 제어하는 기법

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06289765A (ja) * 1993-03-31 1994-10-18 Casio Comput Co Ltd 学習装置
WO2008059878A1 (fr) * 2006-11-15 2008-05-22 Panasonic Corporation Dispositif d'ajustement pour un procédé d'identification d'ondes cérébrales, procédé d'ajustement et programme informatique
JP2011137917A (ja) * 2009-12-28 2011-07-14 Technos Japan:Kk 脳波のバイオフィードバックにより制御される脳トレーニング装置
JP2015192870A (ja) * 2014-03-25 2015-11-05 キッセイコムテック株式会社 意図推定方法、意図推定用プログラムおよび意図推定装置
US20170323161A1 (en) * 2014-11-06 2017-11-09 Samsung Electronics Co., Ltd. Method and apparatus for early warning of danger
US20190056707A1 (en) * 2017-08-18 2019-02-21 The Boeing Company Methods and Systems for Controlling Operation of Equipment Based on Biometric Data

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
EMANUEL DONCHIN 他: "The Mental Prosthesis:Assessing the Speed of a P300-Based Brain-Computer Interface", IEEE TRANSACTIONS ON REHABILITATION ENGINEERING, vol. 8, no. 2, JPN6022048939, June 2000 (2000-06-01), pages 174 - 179, XP011053699, ISSN: 0004925465 *

Also Published As

Publication number Publication date
US20210063971A1 (en) 2021-03-04
JP7296626B2 (ja) 2023-06-23
CN112433600A (zh) 2021-03-02

Similar Documents

Publication Publication Date Title
JP2023129585A (ja) 情報処理方法、情報処理装置、及び情報処理プログラム
JP2024045281A (ja) 情報処理方法
JP7359437B2 (ja) 情報処理装置、プログラム、及び、方法
JP7296626B2 (ja) 情報処理装置及びプログラム
US11755109B2 (en) Information processing apparatus and non-transitory computer readable medium storing program
US11636392B2 (en) Information processing device and non-transitory computer readable medium
US11868529B2 (en) Information processing device and non-transitory computer readable medium
JP7254345B2 (ja) 情報処理装置及びプログラム
JP7254346B2 (ja) 情報処理装置及びプログラム
JP7343168B2 (ja) 情報処理装置、プログラム、及び、方法
US20210165488A1 (en) Information processing apparatus and non-transitory computer readable medium
JP2021089501A (ja) 情報処理装置及びプログラム

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20210322

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20210416

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210507

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220214

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20221114

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230110

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230606

R150 Certificate of patent or registration of utility model

Ref document number: 7296626

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150