JPWO2017077623A1 - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents

情報処理装置、情報処理方法および情報処理プログラム Download PDF

Info

Publication number
JPWO2017077623A1
JPWO2017077623A1 JP2017548579A JP2017548579A JPWO2017077623A1 JP WO2017077623 A1 JPWO2017077623 A1 JP WO2017077623A1 JP 2017548579 A JP2017548579 A JP 2017548579A JP 2017548579 A JP2017548579 A JP 2017548579A JP WO2017077623 A1 JPWO2017077623 A1 JP WO2017077623A1
Authority
JP
Japan
Prior art keywords
heart rate
feature amount
information processing
time
processing apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017548579A
Other languages
English (en)
Other versions
JP6504264B2 (ja
Inventor
史歩 鷲澤
史歩 鷲澤
一穂 前田
一穂 前田
大輔 内田
大輔 内田
森 達也
達也 森
明大 猪又
明大 猪又
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Publication of JPWO2017077623A1 publication Critical patent/JPWO2017077623A1/ja
Application granted granted Critical
Publication of JP6504264B2 publication Critical patent/JP6504264B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/0245Detecting, measuring or recording pulse rate or heart rate by using sensing means generating electric signals, i.e. ECG signals
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4866Evaluating metabolism
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7282Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/10ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H20/00ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
    • G16H20/60ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to nutrition control, e.g. diets
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Artificial Intelligence (AREA)
  • Cardiology (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Obesity (AREA)
  • Chemical & Material Sciences (AREA)
  • Medicinal Chemistry (AREA)
  • Evolutionary Computation (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Nutrition Science (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

情報処理装置は、被分析者の心拍数を取得する心拍数取得部と、前記心拍数取得部が取得する心拍数の経時変化から特徴量を抽出する特徴量抽出部と、飲料摂取に係る心拍数の経時変化に関する情報を予め格納する格納部と、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報とに基づいて、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定する判定部と、を備える。

Description

本件は、情報処理装置、情報処理方法および情報処理プログラムに関する。
飲料の摂取を検知する技術が望まれている。例えば、飲料摂取の際の腕の動作を検出することで飲料の摂取を判定する技術が開示されている(例えば、特許文献1参照)。
特開2014−79506号公報
しかしながら、飲料摂取に伴う腕の動作は多様であるため、飲料摂取行動を正確に検出することは困難である。例えば、上記発明で想定される腕の動きは、あくまでも飲料摂取時になされる動作のごく一部に過ぎないため、その他の飲料摂取時の腕の動作の場合に検出漏れが発生する。また、日常生活における腕の動作は多種多様であるため誤検出が発生する。
1つの側面では、本件は、特定の行動に依存せず、また様々な環境下で飲料摂取を検知することができる情報処理装置、情報処理方法、および情報処理プログラムを提供することを目的とする。
1つの態様では、情報処理装置は、被分析者の心拍数を取得する心拍数取得部と、前記心拍数取得部が取得する心拍数の経時変化から特徴量を抽出する特徴量抽出部と、飲料摂取に係る心拍数の経時変化に関する情報を予め格納する格納部と、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報とに基づいて、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定する判定部と、を備える。
特定の行動に依存せず、また様々な環境下で飲料摂取を検知することができる。
第1実施形態に係る情報処理装置のハードウェア構成を例示するブロック図である。 (a)は情報処理プログラムの実行によって実現される各機能のブロック図であり、(b)は心拍変化算出部の各機能を表す機能ブロック図である。 飲料摂取検知処理を表すフローチャートの一例である。 飲料摂取に起因する心拍数の経時変化を例示する図である。 特徴量の算出処理を表すフローチャートの一例である。 速度特徴量の算出を例示する図である。 (a)は速度特徴量i〜速度特徴量iiiの算出処理を表すフローチャートの一例であり、(b)は差分特徴量iv〜差分特徴量viの算出処理を表すフローチャートの一例であり、(c)は交差特徴量viiの算出処理を表すフローチャートの一例である。 差分特徴量の算出を例示する図である。 交差特徴量の算出を例示する図である。 ベースライン特徴量の算出を例示する図である。 (a)はベースライン特徴量の算出処理を表すフローチャートの一例であり、(b)は変動特徴量の算出処理を表すフローチャートの一例であり、(c)は振幅特徴量の算出処理を表すフローチャートの一例であり、(d)は面積特徴量の算出処理を表すフローチャートの一例である。 変動特徴量の算出を例示する図である。 心拍特徴量の算出を例示する図である。 面積特徴量の算出を例示する図である。 近似の他の例を表す図である。 データベースに格納するモデルを作成する処理を表すフローチャートの一例である。 飲料摂取か飲料非摂取を判定するフローチャートの一例である。 マハラノビス距離を例示する図である。 飲料摂取量の算出を表すフローチャートの一例である。 第2実施形態に係る情報処理装置のハードウェア構成を例示するブロック図である。 飲料摂取検知処理を表すフローチャートの一例である。 (a)は第3実施形態に係る情報処理装置の機能ブロック図であり、(b)は心拍変化算出部の各機能を表す機能ブロック図である。 飲料摂取検知処理を表すフローチャートの一例である。 (a)は飲料摂取時の心拍数の経時変化信号s(t)を例示し、(b)は飲料摂取検知処理時に取得された心拍数の経時変化信号x(t)を例示する。 (a)および(b)は情報処理装置の他の装置構成を例示する図である。
以下、図面を参照しつつ、実施形態について説明する。
(第1実施形態)
図1は、第1実施形態に係る情報処理装置100のハードウェア構成を例示するブロック図である。図1で例示するように、情報処理装置100は、CPU101、RAM102、記憶装置103、表示装置104、心拍測定装置105などを備える。これらの各機器は、バスなどによって接続されている。
CPU(Central Processing Unit)101は、中央演算処理装置である。CPU101は、1以上のコアを含む。RAM(Random Access Memory)102は、CPU101が実行するプログラム、CPU101が処理するデータなどを一時的に記憶する揮発性メモリである。
記憶装置103は、不揮発性記憶装置である。記憶装置103として、例えば、ROM(Read Only Memory)、フラッシュメモリなどのソリッド・ステート・ドライブ(SSD)、ハードディスクドライブに駆動されるハードディスクなどを用いることができる。本実施形態に係る情報処理プログラムは、記憶装置103に記憶されている。表示装置104は、液晶ディスプレイ、エレクトロルミネッセンスパネル等であり、後述する飲料摂取検知処理の結果などを表示する。
心拍測定装置105は、飲料を摂取する人や動物などの被分析者の心拍(脈拍)を測定する装置である。心拍測定装置105は、心拍(脈拍)を測定することができれば特に限定されるものではない。例えば、心拍測定装置105は、心電計や脈動センサなどであってもよい。飲料とは、液体の飲み物であれば特に限定されるものではない。ただし、アルコール類の摂取時には飲料摂取終了後に、アルコールの吸収・分解などに起因して心拍数が上昇する場合があるため、非アルコール類を対象とすることが好ましい。
記憶装置103に記憶されている情報処理プログラムは、実行可能にRAM102に展開される。CPU101は、RAM102に展開された情報処理プログラムを実行する。それにより、情報処理装置100による各処理が実行される。図2(a)は、情報処理プログラムの実行によって実現される各機能のブロック図である。情報処理プログラムの実行によって、心拍数取得部10、心拍変化算出部20、判定部30、格納部40などが実現される。以下、格納部はデータベースを意味する。
図2(b)は、心拍変化算出部20の各機能を表す機能ブロック図である。図2(b)で例示するように、心拍変化算出部20は、速度特徴量算出部21、差分特徴量算出部22、交差特徴量算出部23、ベースライン特徴量算出部24、変動特徴量算出部25、振幅特徴量算出部26および面積特徴量算出部27などとして機能する。
(飲料摂取検知処理)
図3は、飲料摂取検知処理を表すフローチャートの一例である。図3で例示するように、心拍数取得部10は、心拍測定装置105から心拍を取得することで、心拍数の経時変化を取得する(ステップS1)。図4は、飲料摂取に起因する心拍数の経時変化を例示する。図4において、横軸は経過時間を表し、縦軸は心拍数を表す。心拍数は、単位時間あたりの拍動数のことであり、具体的には1分あたりの拍動数である。以下、特に断りが無い限り、心拍数とは、1分あたりの拍動数のことを意味する。また、飲料の摂取とは、所定の時間範囲内で飲料を口から1回以上飲み込むことを意味する。当該所定の時間範囲を超えて新たに飲料を飲み込む場合には、2度目の飲料摂取が行われたことになる。図4は、一度の飲料摂取に係る心拍数の経時変化を例示している。
図4で例示するように、飲料摂取に係る心拍数の経時変化は、飲料摂取開始時に心拍数が急激に上昇し、飲料摂取終了後に心拍数が緩やかに下降する傾向を有している。また、当該経時変化は、飲料摂取開始時に心拍数が一定速度で上昇し、飲料摂取終了後に不定速度で下降する傾向を有している。また、当該経時変化は、飲料摂取開始後の心拍数の急激な上昇の後、すぐに下降する傾向を有している。また、当該経時変化において、飲料摂取前の心拍数のベースライン(平均値)よりも飲料摂取後の心拍数のベースラインの方が大きくなる傾向がある。また、当該経時変化において、飲料摂取開始後に、飲料摂取前よりも心拍数のばらつき(分散)が大きくなる傾向がある。そこで、これらの傾向を事前にデータベースとして記憶しておき、被分析者の測定された心拍数の経時変化を照らし合わせることで、被分析者が飲料を摂取したか否かを判定することができる。データベースは、テキストファイルやバイナリファイルも含む。
再度図3を参照し、心拍変化算出部20は、心拍数取得部10が取得した心拍の経時変化において、飲料摂取に係る特徴量を算出する(ステップS2)。図5は、特徴量の算出処理を表すフローチャートの一例である。まず、飲料摂取に係る心拍数の経時変化は、飲料摂取開始時に心拍数が急激に上昇し、飲料摂取終了後に心拍数が緩やかに下降する傾向を有することから、速度特徴量算出部21は、心拍数変化の速度特徴量を算出する(ステップS11)。
速度特徴量算出部21は、飲料摂取開始時刻候補からの心拍数上昇速度(速度特徴量i)、心拍数下降の速度(速度特徴量ii)、心拍数上昇速度と下降速度の比(心拍数上昇下降速度比:速度特徴量iii)を速度特徴量として算出する。図6は、速度特徴量i〜速度特徴量iiiの算出を例示する。図7(a)は、速度特徴量i〜速度特徴量iiiの算出処理を表すフローチャートの一例である。
図7(a)で例示するように、速度特徴量算出部21は、飲料摂取開始時刻候補を算出する(ステップS21)。例えば、飲料摂取開始時刻候補は、所定時間(例:5秒)以上心拍数が上昇している際の、上昇開始時刻とする。飲料摂取開始時刻候補は、心拍数の立ち上がりが検出される時点ととらえることもできる。次に、速度特徴量算出部21は、最大心拍数時刻を算出する(ステップS22)。例えば、最大心拍数は、心拍数上昇期間内の心拍数の最大値である。心拍数上昇期間は、液体が口に含まれてから飲み込むまでにかかる時間(例えば20mlの飲料を口に含んでから1口で飲み込むまでに要する時間(例えば3秒))の定数倍とみなすことができる。例えば、1リットルの水を20mlずつ口に含んで飲み込むことを50回連続して行うのに要する時間(例えば150秒)が当該定数倍の時間に相当する。
次に、速度特徴量算出部21は、心拍数上昇速度を関数近似により算出する(ステップS23)。例えば、速度特徴量算出部21は、飲料摂取開始時刻候補から最大心拍数時刻までの心拍数を算出し、これを関数近似した時の近似直線の傾きaに相当する値を心拍数上昇速度として算出する。
次に、速度特徴量算出部21は、最小心拍数時刻を算出する(ステップS24)。例えば、最小心拍数は、心拍数下降期間内の心拍数の最小値である。心拍数下降期間は、液体を飲み込んでから胃に到達するまでにかかる時間(飲み込んだ飲料が胃に到達するまでに要する時間(例えば10秒))とみなすことができる。次に、速度特徴量算出部21は、心拍数下降速度を関数近似により算出する(ステップS24)。例えば、速度特徴量算出部21は、最大心拍数時刻から最小心拍数時刻までの心拍数を算出し、これを関数近似した時の近似直線の傾きaに相当する値を心拍数下降速度として算出する。
次に、速度特徴量算出部21は、心拍数上昇速度と下降速度との比|a|/|a|に相当する値を心拍数上昇下降速度比として算出する(ステップS26)。なお、上昇と下降との違いを示す値であれば当該速度比の変わりに用いることができる。そこで、速度特徴量算出部21は、上昇速度と下降速度との差(|a|−|a|)を速度特徴量iiiとして算出してもよい。なお、速度特徴量算出部21は、速度特徴量i〜速度特徴量iiiの少なくともいずれかを算出すればよい。
次に、飲料摂取に係る心拍数の経時変化は、飲料摂取開始時に心拍数が一定速度で上昇し、飲料摂取終了後に不定速度で下降する傾向を有していることから、再度図5を参照し、差分特徴量算出部22は、心拍数変化の差分特徴量を算出する(ステップS12)。具体的には、差分特徴量算出部22は、上昇期間内の実測値と近似直線との差分(上昇期間内差分:差分特徴量iv)、下降期間内での実測値と近似直線との差分(下降期間内差分:差分特徴量v)、上昇期間内差分と下降期間内差分との比(上昇下降期間内差分比:差分特徴量vi)を差分特徴量として算出する。差分は、実測値と近似直線との誤差と称することもできる。図7(b)は、差分特徴量iv〜差分特徴量viの算出処理を表すフローチャートの一例である。図8は、差分特徴量iv〜差分特徴量viの算出を例示する図である。
図7(b)で例示するように、差分特徴量算出部22は、心拍数の上昇期間を特定する(ステップS31)。例えば、上昇期間は、飲料摂取開始時刻候補から最大心拍数時刻までの期間である。次に、差分特徴量算出部22は、上昇期間内差分を実測値と近似直線との差により算出する(ステップS32)。例えば、上昇期間内差分は、上昇期間における実測値と近似直線の決定係数Rに相当する値である。決定係数Rは、下記式(1)で表すことができる。
Figure 2017077623
次に、差分特徴量算出部22は、下降期間を特定する(ステップS33)。例えば、下降期間は、最大心拍数時刻から最小心拍数時刻までの期間である。次に、差分特徴量算出部22は、下降期間内の差分を実測値と近似直線との差により算出する(ステップS34)。例えば、下降期間内差分は、下降期間における実測値と近似直線の決定係数Rに相当する値である。Rは、下記式(2)で表すことができる。
Figure 2017077623
次に、差分特徴量算出部22は、上昇期間内差分と下降期間内差分の比Ru/Rdに相当する値を上昇下降期間内差分比として算出する(ステップS35)。なお、上昇と下降との違いを示す値であれば当該差分比の変わりに用いることができる。そこで、差分特徴量算出部22は、上昇期間内差分と下降期間内差分との差(|R|−|R|)を差分特徴量viとして算出してもよい。なお、差分特徴量算出部22は、差分特徴量iv〜差分特徴量viの少なくともいずれかを算出すればよい。
次に、飲料摂取に係る心拍数の経時変化は、飲料摂取開始後の心拍数の急激な上昇の後、すぐに下降する傾向を有していることから、再度図5を参照し、交差特徴量算出部23は、心拍数変化の交差特徴量を算出する(ステップS13)。具体的には、交差特徴量算出部23は、最大心拍数時刻直後の下降を示す特徴量交差角度(交差特徴量vii)を交差特徴量として算出する。図9は、交差特徴量viiの算出を例示する図である。図7(c)は、交差特徴量viiの算出処理を表すフローチャートの一例である。図7(c)で例示するように、交差特徴量算出部23は、交差角度θを、上昇期間における近似直線と下降期間における近似直線とが交差する角度として算出する(ステップS41)。交差角度θは、例えば、下記式(3)および下記式(4)によって算出される。
Figure 2017077623
Figure 2017077623
次に、飲料摂取に係る心拍数の経時変化において、飲料摂取前の心拍数のベースラインよりも飲料摂取後の心拍数のベースラインの方が大きくなる傾向があることから、再度図5を参照し、ベースライン特徴量算出部24は、心拍数変化のベースライン特徴量を算出する(ステップS14)。具体的には、ベースライン特徴量算出部24は、上昇前期間のベースライン(ベースライン特徴量viii)、下降後期間のベースライン(ベースライン特徴量ix)、上昇前期間のベースラインと下降後期間のベースラインとの比(上昇前下降後期間ベースライン比:ベースライン特徴量)をベースライン特徴量として算出する。
図10は、ベースライン特徴量viii〜ベースライン特徴量ixの算出を例示する図である。図11(a)は、ベースライン特徴量viii〜ベースライン特徴量ixの算出処理を表すフローチャートの一例である。図11(a)で例示するように、ベースライン特徴量算出部24は、上昇前期間を特定する(ステップS51)。例えば、上昇前期間は、飲料摂取開始時刻候補の所定時間前から飲料摂取開始時刻候補までの期間である。所定時間前とは、例えば2分や30分であり、飲料摂取開始時刻以前で区間あたりのばらつきが所定値(例えば0.1や1)を超えた直後の時刻である。
次に、ベースライン特徴量算出部24は、上昇前期間のベースラインを、上昇前期間の心拍数の平均μに相当する値として算出する(ステップS52)。次に、ベースライン特徴量算出部24は、下降後期間を特定する(ステップS53)。例えば、下降後期間は、最小心拍数時刻から所定時間後までの期間である。所定時間後とは、例えば2分や30分であり、最小心拍数時刻以降で区間あたりのばらつきが所定値(例えば0.1や1)を超えた直前の時刻である。次に、ベースライン特徴量算出部24は、下降後期間ベースラインを、下降後期間内の心拍数の平均μに相当する値として算出する(ステップS54)。
次に、ベースライン特徴量算出部24は、上昇前期間ベースラインと下降後期間ベースラインの比μ/μを上昇前下降後期間ベースライン比として算出する(ステップS55)。なお、上昇前と下降後との違いを示す値であれば当該比の変わりに用いることができる。そこで、ベースライン特徴量算出部24は、上昇前期間のベースラインと下降後期間のベースラインとの差(|μ|−|μ|)をベースライン特徴量ixとして算出してもよい。なお、ベースライン特徴量算出部24は、ベースライン特徴量viii〜ベースライン特徴量ixの少なくともいずれかを算出すればよい。
次に、飲料摂取に係る心拍数の経時変化において、飲料摂取開始後に飲料摂取前よりも心拍数のばらつき(分散)が大きくなる傾向があることから、再度図5を参照して、変動特徴量算出部25は、心拍数変化の変動特徴量を算出する(ステップS15)。具体的には、変動特徴量算出部25は、上昇前期間変動(変動特徴量xi)、下降後期間変動(変動特徴量xii)、上昇前期間変動と下降後期間変動との比(上昇下降期間変動比:変動特徴量xiii)を変動特徴量として算出する。図11(b)は、変動特徴量の算出処理を表すフローチャートの一例である。図12は、変動特徴量の算出を例示する図である。
図11(b)で例示するように、変動特徴量算出部25は、上昇前期間変動を上昇前期間の心拍数の分散として算出する(ステップS61)。例えば、上昇前期間変動は、上昇前期間内の心拍数の平均μからのばらつきVに相当する値である。ばらつきVuは、下記式(5)で表すことができる。
Figure 2017077623
次に、変動特徴量算出部25は、下降後期間変動を下降後期間内の心拍数の分散として算出する(ステップS62)。例えば、下降後期間変動は、下降期間内の心拍数の平均μからのばらつきVに相当する値である。ばらつきVは、下記式(6)で表すことができる。
Figure 2017077623
次に、変動特徴量算出部25は、上昇前期間変動と下降後期間変動との比V/Vを上昇下降期間変動比として算出する(ステップS63)。なお、上昇前と下降後との違いを示す値であれば当該比の変わりに用いることができる。そこで、変動特徴量算出部25は、上昇前期間変動と下降後期間変動との差(|V|−|V|)を変動特徴量xiiiとして算出してもよい。なお、変動特徴量算出部25は、変動特徴量xi〜変動特徴量xiiiの少なくともいずれかを算出すればよい。
次に、飲料摂取に起因する心拍数変化において、心拍数の上昇幅も特徴量として用いることができる。そこで、再度図5を参照して、振幅特徴量算出部26は、振幅特徴量を算出する(ステップS16)。具体的には、図13で例示するように、上昇期間の最大心拍数の上昇幅を振幅特徴量xivとして算出する。図11(c)は、振幅特徴量xivの算出処理を表すフローチャートの一例である。図11(c)で例示するように、振幅特徴量算出部26は、最大心拍数時刻の心拍数を算出する(ステップS71)。例えば、心拍数ゼロを基準とすると、最大心拍数の値を振幅特徴量xivとして用いることができる。あるいは、飲料摂取開始時刻候補における心拍数を基準とすると、最大振幅数と、飲料摂取開始時刻候補における心拍数との差を振幅特徴量xivとして用いることができる。
次に、飲料摂取に起因する心拍数の経時変化において、心拍数の面積(積分値)も特徴量として用いることができる。そこで、再度図5を参照して、面積特徴量算出部27は、面積特徴量を算出する(ステップS17)。具体的には、図14で例示するように、心拍数の上昇期間および下降期間の心拍上昇値の合計(積分値)または、心拍上昇値の時間平均を面積特徴量xvとして算出する。心拍上昇値は、上昇前期間の心拍数の平均μからの上昇値を用いることができる。図11(d)は、面積特徴量xvの算出処理を表すフローチャートの一例である。図11(d)で例示するように、面積特徴量算出部27は、飲料摂取開始時刻候補から最小心拍数時刻までの上昇前期間ベースラインからの上昇値の総和を算出することで、面積特徴量xvとして算出する(ステップS81)。
なお、速度特徴量i〜速度特徴量iiiおよび差分特徴量iv〜差分特徴量viの算出に、直線近似を用いたが、二次曲線などの曲線近似を用いてもよい。ただし、上昇区間は急激な上昇になる傾向が強いため直線近似を用いることが好ましく、下降区間はなだらかな下降になる傾向が強いため曲線近似を用いることが好ましい。そこで、図15で例示するように、上昇区間では直線近似を用い、下降区間では曲線近似を用いるようにしてもよい。
格納部40は、事前に作成されたモデルを格納している。当該モデルは、飲料摂取時のモデルおよび飲料非摂取時のモデルを含む。飲料摂取時のモデルは、飲料摂取に起因する心拍数の経時変化における速度特徴量i〜iii、差分特徴量iv〜vi、交差特徴量vii、ベースライン特徴量viii〜x、変動特徴量xi〜xiii、振幅特徴量xivおよび面積特徴量xvを含む。飲料非摂取時のモデルは、飲料を摂取していない時間における心拍数の経時変化における速度特徴量i〜iii、差分特徴量iv〜vi、交差特徴量vii、ベースライン特徴量viii〜x、変動特徴量xi〜xiii、振幅特徴量xivおよび面積特徴量xvを含む。これらのモデルは、飲料摂取検知処理を利用する特定の被分析者の実際の測定値を用いて作成してもよく、不特定多数のユーザの実際の測定値を用いて作成してもよい。複数回の測定値を用いる場合には、その平均値を用いてもよい。また、あるいは飲料摂取時のモデルおよび飲料非摂取時のモデルは分析者が任意に作成してもよい。
図16は、格納部40に格納するモデルを作成する処理を表すフローチャートの一例である。この例は、飲料摂取検知処理を利用する被分析者の心拍数の測定値を用いて事前にモデルを作成する例である。図16で例示するように、心拍数取得部10は、ラベル付き心拍数データを順次読み込む(ステップS91)。ラベルは、上記被分析者が飲料を摂取した時にボタンを押すなどして作成することができる。
次に、心拍変化算出部20は、心拍数の時間変化の上昇及び下降に関する特徴量を算出する(ステップS92)。この特徴量には、速度特徴量i〜iii、差分特徴量iv〜vi、交差特徴量vii、ベースライン特徴量viii〜x、変動特徴量xi〜xiii、振幅特徴量xivおよび面積特徴量xvが含まれる。次に、心拍変化算出部20は、算出した特徴量をラベルとともに、モデル作成用データベースとして格納部40に格納する(ステップS93)。次に、判定部30は、全データについて処理が終了したか否かを判定する(ステップS94)。ステップS94で「No」と判定された場合、ステップS91から再度実行される。ステップS94で「Yes」と判定された場合、判定部30は、モデル作成用データベースを用いて、飲料摂取時のモデルおよび飲料非摂取時のモデルを作成する(ステップS95)。これらのモデルは、飲料摂取検知処理に用いられるモデルとして、格納部40に格納される。
次に、再度図3を参照して、判定部30は、心拍変化算出部20が算出した特徴量を用いて、飲料摂取検知処理時の心拍数の変化が飲料摂取に起因するか否かを判定する(ステップS3)。図17は、この場合の判定処理を表すフローチャートの一例である。図17で例示するように、判定部30は、飲料摂取検知処理時において測定された心拍数の経時変化から得られる特徴量と、格納部40に格納されている飲料摂取時のモデルおよび飲料非摂取時のモデルとの一致度(乖離度)を算出する(ステップS101)。一致度は、飲料摂取検知処理時において測定された心拍数の経時変化から得られる特徴量と飲料摂取時または飲料非摂取時のモデルとの似ている度合いを表しており、類似度または相似度と同義である。以下では、一致度算出方法としてマハラノビス距離を例示したが、これ以外にも、サポートベクタマシン、ブースティングやニューラルネットワークなどの任意のアルゴリズムを適用することができる。
例えば、判定部30は、一致度(乖離度)の算出に、マハラノビス距離を用いる。判定部30は、マハラノビス距離を算出する場合、パラメータとして、平均ベクトルと共分散行列を用いる。飲料摂取時の平均ベクトルと共分散行列をμおよびΣとし、飲料非摂取時の平均ベクトルと共分散行列をμおよびΣとし、判定すべきデータをx=(x,x,…)とする。x,x,…は、それぞれ特徴量i、特徴量ii、…を表している。マハラノビス距離は、下記式(7)および下記式(8)で表すことができる。なお、共分散行列が対角行列の場合は正規化ユークリッド距離(特徴量の分散が等しくなるように正規化している)を用い、単位行列の場合はユークリッド距離を用いてもよい。
Figure 2017077623
Figure 2017077623
次に、判定部30は、飲料摂取検知処理時に測定された心拍数変化は、距離が小さい方に属すると判定する(ステップS102)。したがって、図18で例示するようにD>Dであれば、判定部30は、飲料摂取検知処理時に測定された心拍数変化は、飲料非摂取時の心拍数変化であると判定する。なお、図18では、説明の簡略化のため、特徴量i,iiだけを用いた距離を例示している。また、D及びDnの値を用いて液体の粘度に関する情報を推定し、判定部30で判定した結果に付与してもよい。例えば、D<DでDとDの比が所定値(例えば2)以下の場合は、判定部30は、飲料摂取検知処理時に測定された心拍数変化は、粘度の低い飲料摂取時の心拍変化であると判定する。あるいは、飲料非摂取時のモデルではなく、複数の飲料摂取時のモデルからの距離を算出し、飲料の成分を推定し、判定部30で判定した結果に付与してもよい。例えば、水分のみの飲料摂取時モデル・塩分入り飲料摂取時のモデル・糖分入り飲料摂取時のモデルとの距離を用いて塩分や糖分の含有量を推定し、例えば10mgの塩分と10mgの糖分を含む飲料摂取時の心拍変化であると判定する。
本実施形態によれば、被分析者の心拍数の経時変化から抽出された特徴量と、データベースに格納された飲料摂取に係る特徴量との一致度に基づいて、被分析者の心拍数の経時変化が飲料摂取に起因するか否かが判定される。それにより、高い精度で飲料摂取を検知することができる。また、心拍数の経時変化を取得するだけで飲料摂取を検知することができる。心拍数の経時変化を測定できればよいため、飲料の摂取前後に特定の行動をする必要がない。また、腕などに身に付けた心拍数を測定できるウェアラブル機器を用いることにより、簡単かつ低負荷で飲料摂取を検知することができる。
データベースに格納された飲料非摂取に係る特徴量との一致度よりも、データベースに格納された飲料摂取に係る特徴量との一致度よりも高い場合に、心拍数の経時変化が飲料摂取に起因すると判定されることから、飲料摂取の検知精度が向上する。なお、飲料非摂取に係る特徴量との一致度については必ずしも算出しなくてもよい。例えば、データベースに格納された飲料摂取に係る特徴量との一致度が閾値以上であれば、心拍数の経時変化が飲料摂取に起因すると判定してもよい。例えば、図17のステップS102において、一致度と閾値との比較を行えばよい。なお、上述した特徴量のうち少なくともいずれか1つを用いればよいが、速度特徴量i〜iii、差分特徴量iv〜viおよび交差特徴量viiを用いることで、飲料摂取の検知精度が特に高くなる。
判定部30の判定結果とともに、運動や睡眠などの行動を合わせることで、生活習慣のアドバイスが可能になる。例えば、所定期間にわたり、起床後に飲料を摂取していない場合、「起床後に飲料を摂取しましょう」などのアドバイスを表示させる。また、所定時刻に飲料を摂取していない場合、「薬を飲み忘れていませんか」などのコメントを表示させる。
なお、判定結果は、飲料摂取回数・飲料摂取開始時刻・飲料摂取終了時刻・液体の粘度・飲料の成分・飲料摂取量のうち少なくともいずれかを一つを含んでもよい。飲料摂取回数は所定期間、例えば一日、にわたり飲料摂取と判定された回数に相当する。飲料摂取開始時刻は例えば飲料摂取開始時刻候補に相当し、飲料摂取終了時刻は例えば最大心拍数時刻に相当する。飲料摂取量は、例えば、飲料摂取時刻(飲料摂取終了時刻と飲料摂取開始時刻の差)を、飲料を一口飲みこむために要する時間で除算した値に相当する。飲料を一口飲みこむために要する時間は予めデータベースに格納された値であり、年齢や性別ごと、あるいは個人ごとに作成してもよい。
図19は、飲料摂取量の算出を表すフローチャートの一例である。図19で例示するように、心拍数取得部10は、心拍測定装置105から心拍を取得することで、心拍数の経時変化を取得する(ステップS1a)。次に、心拍変化算出部20は、心拍数取得部10が取得した心拍の経時変化において、飲料摂取に係る特徴量を算出する(ステップS2a)。次に、判定部30は、心拍変化算出部20が算出した特徴量を用いて、飲料摂取検知処理時の心拍数の変化が飲料摂取に起因するか否かを判定する(ステップS3a)。次に、判定部30は、ステップS3aで飲料摂取と判定された場合(ステップS4aのYes)に、飲料摂取量を算出する(ステップS5a)。ステップS5aの実行後またはステップS3aで飲料摂取と判定されなかった場合(ステップS4aのNo)、判定部30は、測定が終了したか否かを判定する(ステップS6a)。ステップS6aで「No」と判定された場合、ステップS1aから再度実行される。ステップS6aで「Yes」と判定された場合、フローチャートの実行が終了する。
(第2実施形態)
第2実施形態においては、飲料摂取検知処理において、被分析者の行動情報を反映させる例について説明する。図20は、第2実施形態に係る情報処理装置100aのハードウェア構成を例示するブロック図である。図20で例示するように、情報処理装置100aは、さらに行動情報検知装置106を備えている。行動情報検知装置106は、被分析者の行動情報を検知する装置である。
行動情報検知装置106は、飲料摂取と相関が低い行動を検知する。例えば、行動情報検知装置106は、物理的に飲料摂取ができない行動を検知する。具体的には、行動情報検知装置106は、被分析者の睡眠、発声、咀嚼、吐息などを検知する。また、行動情報検知装置106は、飲料を摂取しない可能性が高い行動を検知する。具体的には、行動情報検知装置106は、一般の習慣を検知する。例えば、行動情報検知装置106は、歩行、走行、階段昇降などの、被分析者が立脚して脚を動かしている行動を検知する。また、行動情報検知装置106は、食器洗い、掃除などの、被分析者が手を動かしている行動を検知する。また、行動情報検知装置106は、バイクなどの特定の乗り物に乗る行動を検知する。また、行動情報検知装置106は、排泄に関する行動を検知する。また、行動情報検知装置106は、入浴に関する行動を検知する。また、行動情報検知装置106は、個人の習慣を検知する。例えば、行動情報検知装置106は、特定の人との会話、会議中、尿意を催したくない場合(例えば行列に並んでいるなどの行動)を検知する。
または、行動情報検知装置106は、飲料摂取と相関が高い行動を検知する。例えば、行動情報検知装置106は、飲料摂取特有の行動(腕や胸などの、飲料摂取に応じて傾きが変化する部位の行動)を検知する。具体的には、行動情報検知装置106は、容器へ液体を入れる際の準備動作、ペットボトルの場合にキャップを開ける際の手の回転、容器を口に運ぶ際の前後または上下への動作、容器を口に含み飲み込む際の所定期間の静止状態、容器内の液体を飲み干す際の後ろまたは下への動作、容器を机等に戻す際の前後または上下への動作などを検知する。また、行動情報検知装置106は、飲料を摂取する可能性が高い行動を検知する。例えば、行動情報検知装置106は、一般の習慣を検知する。例えば、行動情報検知装置106は、起床後および就寝前は水を飲む行動、入浴前後に水を飲む行動、運動前後に水を飲む行動を検知する。また、行動情報検知装置106は、個人の習慣を検知する。例えば、行動情報検知装置106は、特定の時間(例えば15時)に水を飲む行動、特定の場所(例えばキッチン)に行って水を飲む行動などを検知する。なお、動作データを用いた行動の特定や、時刻や場所に関連するデータを用いた時刻および場所の特定は、既存技術を用いて取得してもよいし、被分析者が各動作を行った際にボタンを押すなどして作成したラベルを用いて取得してもよい。
図21は、本実施形態に係る飲料摂取検知処理を表すフローチャートの一例である。図21で例示するように、心拍数取得部10は、心拍測定装置105から心拍を取得することで、心拍数の経時変化を取得する(ステップS111)。なお、心拍数取得部10は、行動情報検知装置106が被分析者の行動を検知した場合には、心拍数の経時変化に合わせて被分析者の行動情報を取得する。次に、心拍変化算出部20は、心拍数取得部10が取得した心拍の経時変化において、飲料摂取に係る特徴量を算出する(ステップS112)。
次に、判定部30は、心拍変化算出部20で算出した特徴量と、飲料摂取時のモデルおよび飲料非摂取時のモデルとのマハラノビス距離を計算する(ステップS113)。次に、判定部30は、それぞれの距離の比を算出する(ステップS114)。当該比として、例えば、飲料摂取時のモデルとの距離/飲料非摂取時のモデルとの距離を用いることができる。
次に、判定部30は、心拍数取得部10が取得した心拍数の経時変化に被分析者の動作データが含まれていれば、当該動作データに係る行動を特定する(ステップS115)。次に、判定部30は、心拍数取得部10が取得した心拍数の経時変化に時刻や被分析者の場所に係るデータが含まれていれば、時刻や場所を特定する(ステップS116)。
次に、判定部30は、格納部40に予め格納されている閾値を参照し、行動情報検知装置106が検知した行動に関連付けられた閾値を取得する。判定部30は、ステップS114で計算した距離の比が取得した閾値以下であれば、飲料を摂取していないと判定する(ステップS117)。次に、判定部30は、測定が終了したか否かを判定する(ステップS118)。ステップS118で「No」と判定された場合、ステップS111から再度実行される。ステップS118で「Yes」と判定された場合、フローチャートの実行が終了する。
本実施形態によれば、被分析者の心拍数の経時変化が飲料摂取に起因するか否かを判定するに際して被分析者の行動情報を反映させることにより、飲料摂取の検知精度が向上する。例えば、飲料摂取の可能性が低い場合にステップS114で計算した距離比の閾値を小さくすることで、飲料摂取の誤検知を抑制することができる。また、飲料摂取の可能性が高い場合にステップS114で計算した距離比の閾値を大きくすることで、飲料非摂取の誤検知を抑制することができる。
(第3実施形態)
図22(a)は、第3実施形態に係る情報処理装置100bの機能ブロック図である。当該機能は、情報処理プログラムの実行によって実現される。第1実施形態と比較して、新たに体内機能定量化部50が実現される。図22(b)は、心拍変化算出部20の各機能を表す機能ブロック図である。心拍変化算出部20の各機能は、第1実施形態と同様である。体内機能定量化部50は、飲料摂取検知処理時に取得された心拍数の経時変化から得られた特徴量と、飲料摂取時のモデルとの比較により、体内機能を定量化する。例えば、体内機能定量化部50は、得られた心拍数の上昇速度がモデルの上昇速度の2倍であれば、普段よりも2倍喉が渇いていると判定する。また、体内機能定量化部50は、得られた心拍数の下降速度がモデル下降速度の1/2倍であれば、普段よりも2倍身体の働きが弱まっていると判定する。
図23は、本実施形態に係る飲料摂取検知処理を表すフローチャートの一例である。図23で例示するように、心拍数取得部10は、心拍測定装置105から心拍を取得することで、心拍数の経時変化を取得する(ステップS121)。次に、心拍変化算出部20は、心拍数取得部10が取得した心拍の経時変化において、飲料摂取に係る特徴量を算出する(ステップS122)。次に、判定部30は、ステップS122で算出された特徴量を用いて飲料摂取か飲料非摂取かを判定する(ステップS123)。
次に、体内機能定量化部50は、ステップS123で「飲料摂取」と判定されたか否かを判定する(ステップS124)。ステップS124で「Yes」と判定された場合、体内機能定量化部50は、格納部40を参照し、飲料摂取時のモデルの各特徴量を取得する(ステップS125)。飲料摂取のモデルに複数の特徴量が含まれている場合には、その平均値を取得してもよい。
次に、体内機能定量化部50は、ステップS122で算出された各特徴量と、ステップS125で取得された各特徴量との比を算出する(ステップS126)。次に、体内機能定量化部50は、心拍数の上昇速度に応じて喉の渇きを定量化する(ステップS127)。次に、体内機能定量化部50は、心拍数の下降速度に応じて身体の働きを定量化する(ステップS128)。体内機能定量化部50は、測定が終了したか否かを判定する(ステップS129)。ステップS129で「Yes」と判定された場合、フローチャートの実行が終了する。ステップS129で「No」と判定された場合、ステップS121から再度実行される。なお、ステップS124で「No」と判定された場合にもステップS129が実行される。
本実施形態によれば、被分析者の心拍数の経時変化の特徴量とデータベースに格納された特徴量との関係を用いることで、被分析者の体内機能を定量化することができる。
(他の特徴量)
上記各例においては、心拍数の経時変化における速度特徴量や差分特徴量などを用いたが、それに限られない。例えば、心拍数の経時変化の波形パターンを特徴量として用いてもよい。具体的には、被分析者の心拍数の波形パターンと、予め格納部40に格納されている飲料摂取時の波形パターンとの一致度(乖離度)が高い場合に、飲料摂取と判定してもよい。
格納部40に登録されている飲料摂取時の心拍数の経時変化信号をs(t)とし、飲料摂取検知処理時に取得された心拍数の経時変化信号をx(t)とする。図24(a)は、s(t)を例示する。図24(b)は、x(t)を例示する。この場合、両パターンの一致度は、例えば、下記式(9)を用いて算出することができる。下記式(9)では、差を算出し、値が小さいほど一致度が高いことを示す。Nは、信号の総数を表す。信号の数は、例えば上昇前期間の開始時刻から下降後期間の終了時刻までの秒数分とする。一致度が予め設定した閾値以上である場合、飲料摂取と判定することができる。信号の数と、信号の総数Nとが異なる場合には、信号を補間もしくは間引けばよい。
Figure 2017077623
(他の装置構成)
図25(a)および図25(b)は、情報処理装置100の他の装置構成を例示する図である。図25(a)で例示するように、情報処理装置は、CPU101、RAM102、記憶装置103および無線装置107を備えるサーバと、表示装置104、心拍測定装置105および無線装置108とを備えるウェアラブルデバイスとが無線でデータをやりとりする構成を有していてもよい。また、図25(b)で例示するように、情報処理装置は、CPU101、RAM102、記憶装置103および無線装置107を備えるサーバと、表示装置104および無線装置108を備える端末と、心拍測定装置105および無線装置109を備えるウェアラブルデバイスとが無線でデータをやりとりする構成を有していてもよい。行動情報検知装置106が備わっている場合には、ウェアラブルデバイスに行動情報検知装置106が設けられていてもよい。
なお、上記実施形態において、心拍数取得部10が、被分析者の心拍数を取得する心拍数取得部の一例として機能する。心拍変化算出部20が、心拍数取得部が取得する心拍数の経時変化から特徴量を抽出する特徴量抽出部の一例として機能する。格納部40が、飲料摂取に係る心拍数の経時変化から抽出された特徴量を予め格納するデータベースの一例として機能する。判定部30が、特徴量抽出部が抽出した特徴量とデータベースに格納された特徴量との一致度に基づいて、心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定する判定部の一例として機能する。行動情報検知装置106が、被分析者の行動情報を測定する行動情報測定装置の一例として機能する。体内機能定量化部50が、判定部により、心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因すると判定された場合に、特徴量抽出部が抽出した特徴量とデータベースに格納された特徴量との関係に基づいて、被分析者の体内機能を定量化する定量化部の一例として機能する。
以上、本発明の実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
10 心拍数取得部
20 心拍変化算出部
21 速度特徴量算出部
22 差分特徴量算出部
23 交差特徴量算出部
24 ベースライン特徴量算出部
25 変動特徴量算出部
26 振幅特徴量算出部
27 面積特徴量算出部
30 判定部
40 格納部
50 体内機能定量化部
100 情報処理装置
105 心拍測定装置
1つの態様では、情報処理装置は、被分析者の心拍数を取得する心拍数取得部と、前記心拍数取得部が取得する心拍数の経時変化から、心拍数の上昇または下降を検出し、前記心拍数の上昇が検出される前の心拍数の平均値またはばらつきと、前記下降後に所定値まで戻った後の心拍数の平均値またはばらつきを抽出する特徴量抽出部と、飲料摂取に係る心拍数の経時変化に関する情報を予め格納する格納部と、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報とに基づいて、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定する判定部と、を備える。

Claims (20)

  1. 被分析者の心拍数を取得する心拍数取得部と、
    前記心拍数取得部が取得する心拍数の経時変化から特徴量を抽出する特徴量抽出部と、
    飲料摂取に係る心拍数の経時変化に関する情報を予め格納する格納部と、
    前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報とに基づいて、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定する判定部と、を備えることを特徴とする情報処理装置。
  2. 前記判定部は、前記特徴量抽出部が抽出した特徴量と、前記格納部に格納された情報から抽出した特徴量との一致度が閾値以上であれば、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因すると判定することを特徴とする請求項1記載の情報処理装置。
  3. 前記格納部は、飲料非摂取に係る心拍数の経時変化に関する情報を予め格納し、
    前記判定部は、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報から抽出した飲料摂取に係る心拍数の特徴量との一致度が、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報から抽出した飲料非摂取に係る心拍数の特徴量との一致度よりも高い場合に、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因すると判定することを特徴とする請求項1記載の情報処理装置。
  4. 前記一致度は、ユークリッド距離、正規化ユークリッド距離、またはマハラノビス距離に基づいて算出されることを特徴とする請求項1〜3のいずれか一項に記載の情報処理装置。
  5. 前記被分析者の行動情報を測定する行動情報測定装置を備え、
    前記判定部は、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定するに際して、前記行動情報測定装置が測定した行動情報を反映させることを特徴とする請求項1〜4のいずれか一項に記載の情報処理装置。
  6. 前記判定部により、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因すると判定された場合に、前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報から抽出した特徴量との関係に基づいて、前記被分析者の体内機能を定量化する定量化部を備えることを特徴とする請求項1〜5のいずれか一項に記載の情報処理装置。
  7. 前記判定部により、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因すると判定された場合に、前記特徴量抽出部が抽出した特徴量と予め格納された飲料を一口飲み込むために要する時間とを用いて、飲料摂取量を推定する飲料摂取量推定部を備えることを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  8. 前記特徴量は、心拍数の上昇速度および心拍数の下降速度の少なくともいずれか一方を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  9. 前記特徴量は、心拍数の経時変化とその近似直線との誤差を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  10. 前記特徴量は、心拍数の経時変化の所定時刻以前の近似直線と前記最大心拍数時刻以後の近似直線との交差角度を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  11. 前記所定時刻は、最大心拍数時刻であることを特徴とする請求項10記載の情報処理装置。
  12. 前記特徴量は、心拍数の上昇が検出される前の平均値と、前記上昇後に所定値まで戻った後の平均値とを含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  13. 前記特徴量は、心拍数の上昇が検出される前の心拍数のばらつきと、前記上昇後に所定値まで戻った後の心拍数のばらつきとを含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  14. 前記特徴量は、心拍数のピーク値に基づく値を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  15. 前記特徴量は、心拍数の上昇から上昇後に所定値まで戻る前までの積分値を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  16. 前記特徴量は、心拍数の経時変化の波形パターンを含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  17. 前記特徴量は、心拍数の上昇速度、心拍数の下降速度、心拍数の経時変化とのその近似直線との誤差、心拍数の経時変化の最大心拍数時刻以前の近似直線と前記最大心拍数時刻以後の近似直線との交差角度、心拍数の上昇が検出される前の平均値と前記上昇後に所定値まで戻った後の平均値、心拍数の上昇が検出される前の心拍数のばらつきと前記上昇後に所定値まで戻った後の心拍数のばらつき、心拍数のピーク値に基づく値、心拍数の上昇から上昇後に所定値まで戻る前までの積分値、および心拍数の経時変化の波形パターン、の内一つ以上を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  18. 前記特徴量は、心拍数の上昇速度、心拍数の下降速度、心拍数の経時変化とのその近似直線との誤差、および心拍数の経時変化の最大心拍数時刻以前の近似直線と前記最大心拍数時刻以後の近似直線との交差角度を含むことを特徴とする請求項1〜6のいずれか一項に記載の情報処理装置。
  19. 被分析者の心拍数を心拍数取得部が取得し、
    前記心拍数取得部が取得した心拍数の経時変化から特徴量を特徴量抽出部が抽出し、
    飲料摂取に係る心拍数の経時変化に関する情報を格納部が予め格納し、
    前記特徴量抽出部が抽出した特徴量と前記格納部に格納された情報とに基づいて、前記心拍数取得部が取得した心拍数の経時変化が飲料摂取に起因するか否かを判定部が判定する、ことを特徴とする情報処理方法。
  20. コンピュータに、
    被分析者の心拍数を取得する処理と、
    取得された前記心拍数の経時変化から特徴量を抽出する処理と、
    飲料摂取に係る心拍数の経時変化に関する情報を予め格納部に格納させておく処理と、
    前記特徴量を抽出する処理によって抽出した特徴量と前記格納部に格納された情報とに基づいて、前記被分析者の心拍数の経時変化が飲料摂取に起因するか否かを判定する処理と、を実行させることを特徴とする情報処理プログラム。
JP2017548579A 2015-11-05 2015-11-05 情報処理装置、情報処理方法および情報処理プログラム Active JP6504264B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/081192 WO2017077623A1 (ja) 2015-11-05 2015-11-05 情報処理装置、情報処理方法および情報処理プログラム

Publications (2)

Publication Number Publication Date
JPWO2017077623A1 true JPWO2017077623A1 (ja) 2018-08-30
JP6504264B2 JP6504264B2 (ja) 2019-04-24

Family

ID=58661786

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017548579A Active JP6504264B2 (ja) 2015-11-05 2015-11-05 情報処理装置、情報処理方法および情報処理プログラム

Country Status (3)

Country Link
EP (1) EP3372154B1 (ja)
JP (1) JP6504264B2 (ja)
WO (1) WO2017077623A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6504264B2 (ja) * 2015-11-05 2019-04-24 富士通株式会社 情報処理装置、情報処理方法および情報処理プログラム
EP3836834A4 (en) * 2018-08-17 2021-09-29 LVL Technologies, Inc. SYSTEM AND METHOD FOR CONTEXTUAL DETECTION OF BEVERAGE CONSUMPTION
CN112971720B (zh) * 2021-02-07 2023-02-03 中国人民解放军总医院 检测入睡点的方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10504739A (ja) * 1994-07-21 1998-05-12 ラニアド, エラン・メイア 食物摂取を監視するための機器
JP2000245713A (ja) * 1999-02-26 2000-09-12 Sanyo Electric Co Ltd 行動認識装置
JP2003173375A (ja) * 2001-09-28 2003-06-20 Toshiba Corp 生活管理端末装置、生活管理方法並びに生活管理システム
JP2007048180A (ja) * 2005-08-12 2007-02-22 Yoriaki Yamai 体に良い食事摂取をナビゲートする装置
US20080300641A1 (en) * 2007-06-01 2008-12-04 Brunekreeft Willie N Cardiac information and activity information association systems, apparatus, and methods
JP2009219541A (ja) * 2008-03-13 2009-10-01 Toyota Motor Corp 飲酒状態検出装置
JP2010158267A (ja) * 2009-01-06 2010-07-22 Sony Corp ライフスタイルを評価するための方法、情報処理装置及びプログラム
WO2013077253A1 (ja) * 2011-11-25 2013-05-30 株式会社デルタツーリング 生体状態推定装置及びコンピュータプログラム
EP3372154A1 (en) * 2015-11-05 2018-09-12 Fujitsu Limited Data processing apparatus, data processing method and data processing program

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10504739A (ja) * 1994-07-21 1998-05-12 ラニアド, エラン・メイア 食物摂取を監視するための機器
JP2000245713A (ja) * 1999-02-26 2000-09-12 Sanyo Electric Co Ltd 行動認識装置
JP2003173375A (ja) * 2001-09-28 2003-06-20 Toshiba Corp 生活管理端末装置、生活管理方法並びに生活管理システム
JP2007048180A (ja) * 2005-08-12 2007-02-22 Yoriaki Yamai 体に良い食事摂取をナビゲートする装置
US20080300641A1 (en) * 2007-06-01 2008-12-04 Brunekreeft Willie N Cardiac information and activity information association systems, apparatus, and methods
JP2009219541A (ja) * 2008-03-13 2009-10-01 Toyota Motor Corp 飲酒状態検出装置
JP2010158267A (ja) * 2009-01-06 2010-07-22 Sony Corp ライフスタイルを評価するための方法、情報処理装置及びプログラム
WO2013077253A1 (ja) * 2011-11-25 2013-05-30 株式会社デルタツーリング 生体状態推定装置及びコンピュータプログラム
EP3372154A1 (en) * 2015-11-05 2018-09-12 Fujitsu Limited Data processing apparatus, data processing method and data processing program

Also Published As

Publication number Publication date
EP3372154B1 (en) 2019-12-04
WO2017077623A1 (ja) 2017-05-11
EP3372154A4 (en) 2018-11-07
EP3372154A1 (en) 2018-09-12
JP6504264B2 (ja) 2019-04-24

Similar Documents

Publication Publication Date Title
AU2018250385B2 (en) Motor task analysis system and method
US11642086B2 (en) Apparatus and method for correcting error of bio-information sensor, and apparatus and method for estimating bio-information
US20170273634A1 (en) Meal estimation method, meal estimation apparatus, and recording medium
CN107466222B (zh) 生命体征监测系统
Dubois et al. Measuring frailty and detecting falls for elderly home care using depth camera
JP6504264B2 (ja) 情報処理装置、情報処理方法および情報処理プログラム
US11617545B2 (en) Methods and systems for adaptable presentation of sensor data
JP6638734B2 (ja) 食事時間推定方法、食事時間推定プログラム及び食事時間推定装置
EP3314251A1 (en) Sweat monitoring apparatus and monitoring method
KR20170103704A (ko) 개인 식별 기능을 구비하는 신체 및 생체 정보 측정 및 관리 시스템
JP7131904B2 (ja) 生活習慣管理装置、方法およびプログラム
WO2017081790A1 (ja) 情報処理装置、情報処理方法および情報処理プログラム
US20230031995A1 (en) Motion-Based Cardiopulmonary Function Index Measuring Device, and Senescence Degree Prediction Apparatus and Method
JP2023521416A (ja) 環境健康監視および予測的評価を可能にする非接触型センサー駆動デバイス、システム、および方法
US20230218185A1 (en) Biological information processor, biological information processing method, and biological information processing program
AU2018421463A1 (en) Method and apparatus for determining the impact of behavior-influenced activities on the health level of a user

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180510

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180510

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190226

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190311

R150 Certificate of patent or registration of utility model

Ref document number: 6504264

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150