JP2012524579A - 人の姿勢を決定するシステムおよび方法 - Google Patents

人の姿勢を決定するシステムおよび方法 Download PDF

Info

Publication number
JP2012524579A
JP2012524579A JP2012506530A JP2012506530A JP2012524579A JP 2012524579 A JP2012524579 A JP 2012524579A JP 2012506530 A JP2012506530 A JP 2012506530A JP 2012506530 A JP2012506530 A JP 2012506530A JP 2012524579 A JP2012524579 A JP 2012524579A
Authority
JP
Japan
Prior art keywords
posture
frequency component
state
probability density
motion sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2012506530A
Other languages
English (en)
Other versions
JP2012524579A5 (ja
Inventor
シャロン、ピエール
Original Assignee
モベア エス.アー
コミシリア ア レネルジ アトミック エ オ エナジーズ オルタネティヴズ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by モベア エス.アー, コミシリア ア レネルジ アトミック エ オ エナジーズ オルタネティヴズ filed Critical モベア エス.アー
Publication of JP2012524579A publication Critical patent/JP2012524579A/ja
Publication of JP2012524579A5 publication Critical patent/JP2012524579A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116Determining posture transitions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1118Determining activity level
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1123Discriminating type of movement, e.g. walking or running
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/40Detecting, measuring or recording for evaluating the nervous system
    • A61B5/4076Diagnosing or monitoring particular conditions of the nervous system
    • A61B5/4094Diagnosing or monitoring seizure diseases, e.g. epilepsy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Neurology (AREA)
  • Neurosurgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

−少なくとも1個の測定軸を備えた少なくとも1個の運動センサ(CM)を含み、前記運動センサ(CM)をユーザーに堅牢に接続するための固定手段(MF)を備え、ユーザーの姿勢決定に適している解析手段(AN)であって、
−各々の姿勢について定義されている確率密度である、前記低周波および高周波成分の同時確率密度、および
−2個の連続する姿勢間の遷移確率
を組み合わせた解析手段(AN)
を含む、人の姿勢を決定するシステム。

Description

本発明は、人の姿勢を決定するシステムおよび方法に関する。
隠れマルコフモデルに基づく運動解析に関するシステムおよび方法が知られており、例えばDaniel Wilson、およびAndy Wilsonによる「Gesture recognition using the XWand」と題する文献およびP.V.Borzaによる「Motion−based gesture recognition with an accelerometer」(学士論文)にて記述されている。
Thilo Pfau、Marta Ferrari、Kevin Parsons、およびAlan Wilsonによる文献「A hidden Markov model−based stride segmentation technique applied to equine inertial sensor trunk movement data」(Journal of Biomechanics 41(2008)216−220)は馬の歩調解析に関係している。
しかし、これらのシステムおよび方法の精度に限界がある。
本発明の目的の一つは、移動要素、特に生物(人間または動物)の行動の決定精度を向上させることである。
本発明の一態様によれば、少なくとも1個の測定軸を備えた少なくとも1個の運動センサを含み、前記運動センサをユーザーに堅牢に接続するための固定手段を備えた、人の姿勢を決定するシステムを提案する。
本システムは、
−運動センサの各測定軸について、第1の閾値を上回る高周波、および前記第1の閾値以下である第2の閾値を下回る低周波を選択するフィルタと、
−運動センサに備えられた測定軸の前記高周波の2乗の和に等しい1次元高周波成分、および運動センサに備えられた測定軸の数に次元が等しい低周波成分を決定する手段と、
−前記高周波成分の確率密度を、運動センサに備えられた測定軸の数に自由度が等しいカイ2乗分布により定義し、且つ前記低周波成分の確率密度をガウス分布により定義して、前記高周波成分の確率密度および前記低周波成分の確率密度を計算する手段と、
−ユーザーの姿勢決定に適している解析手段であって、
−各々の姿勢について定義されている確率密度である、前記低周波および高周波成分の同時確率密度、および
−2個の連続する姿勢間の遷移確率を組み合わせた解析手段と
を含んでいる。
隠れマルコフモデルが2個のランダム過程により定義されること想起されたい。すなわち、本出願で「状態」と称する、観測されない、換言すれば隠れている第1のランダム過程、および所与の時刻における確率密度が、同時刻における状態の値に依存するとの観測である第2のランダム過程である。本発明のこの第1の態様によれば、当該状態は離散値を仮定している。
この種のシステムにより、移動要素、特に生物(人間または動物)の行動を向上した精度で決定することができる。
一実施形態において、前記決定手段は、運動センサに備えられた測定軸による測定値の1次結合に等しい1次元低周波成分の決定に適していて、前記高周波成分は、自由度を有するカイ2乗分布により定義されている。
一実施形態によれば、低周波成分および高周波成分の値の対の確率密度は、低周波成分の値が得られる確率密度と高周波成分の値が得られる確率密度の積を含んでいて、前記確率密度は各状態iについて次式:
Figure 2012524579
(式中、
x(n)は、1次元の信号であって、指標サンプルnを有する低周波成分を表し、
μx,iは、関連する隠れマルコフモデルの状態iを表す同次元のベクトルを低周波成分として表し、
σx,iは、関連する隠れマルコフモデルの状態iを表す低周波成分xの分散の2乗根を表し、
y(n)は、指標サンプルnを有する高周波成分を表し、
kは運動センサに備えられた測定軸の数を表し、
σy,iは、状態iにおける変数y(n)の時間平均に比例する量であり、例えば、σy,iは変数y(n)をkで除算した値の時間平均であり、および
Γは
Figure 2012524579
が成り立つガンマ関数である)
で定義されている。
観測された信号のこの種のモデリングは大多数の可能なケースに適している。
一実施形態において本システムは表示手段を含んでいる。
一実施形態によれば、前記運動センサは加速度計および/または磁力計および/またはジャイロメーターを含んでいる。
一実施形態において、本システムは、第1の加速度計であって、測定軸、およびユーザーが直立しているときに測定軸が体の垂直軸VTと一致するように第1の加速度計をユーザーの胴体に固定するのに適した固定手段を備えた第1の加速度計を含んでいる。
一実施形態によれば、前記解析手段は、起立または着座姿勢、歩行姿勢、傾斜姿勢、および横臥姿勢から最大4個の状態を有する隠れマルコフモデルを用いて、ユーザーの姿勢を時間の関数として決定するのに適している。
隠れマルコフモデルは次いで、以下により定義される。
−起立または着座姿勢、歩行姿勢、傾斜姿勢、および横臥姿勢から4値を仮定する、状態と表記される観測されない離散的過程。この変数または状態は、次数1のマルコフ連鎖であり、従ってある状態から別の状態への遷移確率により特徴付けられる。
−隠れマルコフモデルの観測された過程は多次元信号(x(n),y(n))であり、その確率密度は所与の時刻における状態(隠れた過程)に依存する。この確率密度は、以下の式:
Figure 2012524579
により上で定義された同時確率密度に対応する。
異なる状態または姿勢の関数としての確率密度Px,iおよびPy,iのパラメータの例を以下に挙げる。用語としての「状態」および「姿勢」は本出願全体を通じて同義である。
−起立または着座姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]であり、
−歩行姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−2;1]であり、
−傾斜姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]であり、
−横臥姿勢の場合、μ∈[−0.3;0.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]である。
(x(n),y(n))は、時刻nにおけるx(n)およびy(n)の状態iに関連付けられた確率密度を表す。これは、上で定義された確率密度Px,i(x(n))およびPy,i(y(n))の積に対応する。量θ(n)を考慮すれば、観測データx(n)およびy(n)を結合して、P(x(n),y(n))=P(θ(n)=p(θ(n)/E(n)=i)と書くことができ、ここにE(n)は状態を時刻nにおける状態を表す。θ(n)={x(n),y(n)}
しかし、観測データy(n)およびこれに関連付けられた確率密度Py,i(y(n))だけに基づいて時刻nにおける状態E(n)を決定するのでは一般に満足な結果が得られない。実際、1個のサンプルの観測では一般に姿勢を決定することができない。複数のサンプルを観測する必要がある。
従って、E(0:N)が時刻n=0と時刻n=Nの間の状態列を表し、θ(0:N)が時刻n=0と時刻n=Nの間に観測データを表すならば、状態E(0)、E(1)、・・・E(N)の列に対応する状態E(0:N)の列の確率はp(E(0:N)|θ(0:N−1))と書かれ、これは次式:
Figure 2012524579
に比例する。例えば、列E(0:N)={i,i,i,・・・i}の場合、この確率は、次式:
Figure 2012524579
で表される。
状態E(0:N)の推定列は、最も高い確率を有する列である。実際、全ての可能な列を考慮して各々の確率を計算するよりも、ビタビアルゴリズムをうまく用いてこの列を推定することができる。
P(E(0))は、初期状態E(0)に関連付けられた確率を表す。例えば、n=0ならば各々の可能な状態の等確率分布は選択することができる。
−p(θ(0)|E(0))は時刻E(0)におけるデータθ(0)の観測確率を表す。これはE(n)=iの場合の確率P(x(n=0),y(n=0))に対応する。
−p(E(n)|E(n−1))は時刻n−1における状態E(n−1)にある時刻で状態E(n)にある確率を表す。
−p(θ(n)|E(n))は状態E(n)にある場合に量θ(n)を観測する確率を表す。これは、E(n)=iを有する確率P(x(n),y(n))に対応する。
一実施形態において、本システムは更に、第2の加速度計であって、測定軸、およびユーザーが直立しているときに測定軸が体の垂直軸VTに一致するように第2の加速度計をユーザーの大腿に固定するのに適した固定手段を有する第2の加速度計を含んでいる。
例えば、前記解析手段は、起立姿勢、着座姿勢、横臥姿勢、および歩行姿勢から最大4個の状態を有する隠れマルコフモデルを用いてユーザーの姿勢を時間の関数として決定するのに適している。
この種のシステムにより、人の姿勢をリアルタイムに計算することができる。
一実施形態によれば、指標サンプルnに対して、x(n)は前記2個の加速度計の各低周波成分の対を表し、y(n)は前記第2の加速度計の高周波成分を表し、状態iに対応する値x(n)を得る確率密度は次式:
Figure 2012524579
(式中、
Σx,iは、モデルの状態iの信号x(n)の共分散行列を記述する2次元の対角行列であり、
μx,iは、モデルの状態iを表す2成分列ベクトルを表す)
により定義される。
これらの状態に関連付けられた変数x(n)およびy(n)の確率は以下のパラメータを有する上述の確率により定義される。
−起立姿勢(状態1)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,1=3e−2である。
−着座姿勢(状態2)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,2=3e−2である。
−横臥姿勢(状態3)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,3=3e−2である。
−歩行姿勢(状態4)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,4=1.2e−1である。
このように、上で詳述した推論によれば、E(0:N)は時刻n=0と時刻n=Nの間の状態列を表し、θ(0:N)が時刻n=0と時刻n=Nの間に観測されたデータを表すならば、E(0,N)は状態E(0),E(1),...E(N)の列に対応し、次式:
Figure 2012524579
を最大化する。
本実施形態によれば、θ(n)={x(n),y(n)}であって、x(n)およびy(n)は各々時刻nにおいて2個の加速度計で測定した信号S(n)の前記低および高周波成分である。
本発明の別の態様によれば、以下より特徴付けられる、人の姿勢を決定する方法も提案する。
−運動センサの各測定軸について、第1の閾値を上回る高周波、および前記第1の閾値以下である第2の閾値を下回る低周波を選択すべくフィルタリングを実行する。
−運動センサに備えられた測定軸の前記高周波の2乗の和に等しい1次元高周波成分、および運動センサに備えられた測定軸の数に次元が等しい低周波成分を決定する。
−前記高周波成分が、運動センサに備えられた測定軸の数に等しい自由度を有するカイ2乗分布により定義され、前記低周波成分が、ガウス分布により定義されている状態で、前記高周波成分の確率密度および前記低周波成分の確率密度を計算する。
−各々N個の姿勢に対応するN個の状態を有する隠れマルコフモデルを用いて、ユーザーの姿勢を時間の関数として決定し、この決定は以下を組み合わせることにより行われる。
−各々の姿勢について定義されている前記低周波および高周波成分の同時確率密度、および
−2個の連続する姿勢間の遷移確率。
本発明について、非限定的な例として記述され、且つ添付の図面に示す多くの実施形態を調べることにより理解が進むであろう。
本発明の一態様によるシステムを示す。 本発明の一態様によるシステムの記録の例を示す。 本発明の別態様によるシステムの記録の例を示す。
図1に、筐体BTに収容されていて、例えば、運動センサCMをユーザーに堅牢に接続するための弾性要素を含む固定手段を備えた少なくとも1個の測定軸を有する少なくとも1個の運動センサCMを含む、人の姿勢を決定するシステムを示す。運動センサCMは、1個、2個、または3個の測定軸を有する加速度計、磁力計、またはジャイロメーターであってよい。
本システムは、運動センサCMの各測定軸について、
第1の閾値S1を上回る高周波、および第1の閾値S1以下である第2の閾値S2を下回る低周波を選択すべくフィルタFILTを含んでいる。本システムはまた、運動センサCMに備えられた測定軸の前記高周波の2乗の和に等しい1次元高周波成分HF、および運動センサCMに備えられた測定軸の測定値の1次結合に等しい1次元低周波成分BFを決定する決定モジュールDETを含んでいる。
本システムはまた、前記高周波成分HFの確率Pの分散の2乗および前記低周波成分BFの確率Pの分散の2乗を計算する計算モジュールCALCを含んでいて、前記高周波成分HFは、自由度を有するカイ2乗分布により定義され、前記低周波成分BFはガウス分布により定義されている。
解析手段ANにより、各々がN個の姿勢に対応するN個の状態を有する隠れマルコフモデルを用いて、ユーザーの姿勢を時間の関数として決定することができる。
各状態iに対して、低周波成分BFおよび高周波成分HFの値の対(x(n),y(n))を得る同時確率P(x(n),y(n))の確率密度は、低周波成分BFの値x(n)を得る確率密度Px,iと高周波成分HFの値y(n)を得る確率密度Py,iの積に等しく、各状態iに対して確率密度Px,i、Py,iは次式:
Figure 2012524579
(式中、
x(n)は、指標サンプルnを有する低周波成分を表し、
μx,iは、関連する隠れマルコフモデルの状態iを表す同次元のベクトルを低周波成分として表し、
σx,iは、関連する隠れマルコフモデルの状態を表す低周波成分xの分散の2乗根を表し、
y(n)は、指標サンプルnを有する高周波成分を表し、
kは、運動センサに備えられた測定軸の数を表し、
σy,iは状態iにおける変数y(n)の時間平均に比例する量であり、例えば、σy,iは変数y(n)をkで除算した値の時間平均であり、および
Γは
Figure 2012524579
が成り立つガンマ関数である)
により定義される。
本システムはまた、ディスプレイ画面AFFを含んでいる。
第1の例において、本システムは、加速度計であって、測定軸、およびユーザーが直立しているときに測定軸が体の垂直軸VTに一致するように加速度計をユーザーの胴体に固定する固定要素を備えた加速度計を含んでいる。
ここで使用する隠れマルコフモデルは、4個の姿勢すなわち、起立または着座姿勢(状態1)、歩行姿勢(状態2)、傾斜姿勢(状態3)、および横臥姿勢(状態4)に対応する4個の状態を含んでいる。
隠れマルコフモデルの状態は以下のように定義される:
−起立または着座姿勢(状態1):μx,1=1、σx,1=0.2、σ=3e−2
−歩行姿勢(状態2):μ=1、σx,2=0.2、σ=1.2e−1
−傾斜姿勢(状態3):μ=0.5、σx,3=0.2、σ=3e−2
−横臥姿勢(状態4):μ=0、σx,4=0.2、σ=3e−2
次いで各時刻nにおける人の状態を以下のように決定することができる。
Figure 2012524579
時刻nにおいて人が状態iならば、E(n)=iである。
(x(n),y(n))は、x(n)およびy(n)の時刻nにおける状態iに関連付けられた確率密度を表す。これは以前に定義した確率密度Px,i(x(n))とPy,i(y(n))の積に対応している。観測データx(n)およびy(n)を結合して量θ(n)を考慮したならば、P(x(n),y(n))=P(θ(n)|E(n)=i)と書くことができ、ここにE(n)は時刻nにおける状態を表す。
しかし、観測データx(n)、y(n)および各々これらのデータに関連付けられた確率密度Px,i(x(n))、Py,i(y(n))だけに基づいて時刻nにおける状態E(n)を決定するのでは一般に満足な結果が得られない。
経験から、先験的事象、および例えば時刻n−1において決定された状態E(n−1)を考慮に入れる必要があることがわかる。
従って、E(0:N)が時刻n=0と時刻n=Nの間の状態列を表し、且つθ(0:N)が時刻n=0と時刻n=Nの間に観測されたデータを表すならば、状態E(0)、E(1)、...E(N)の列に対応する状態E(0:N)の列の確率はp(E(0:N)|θ(0:N−1))と書くことができ、これは次式:
Figure 2012524579
に比例する。
例えば、列E(0:N)={i,i,i,...,i}の場合、この確率は以下のように書くことができる。
Figure 2012524579
状態E(0:N)の推定された列は、最も高い確率を有する列である。実際には、全ての可能な列を考慮して各々について確率を計算するのではなく、ビタビアルゴリズムをうまく用いてこの列を推定することができる。
P(E(0))は初期状態E(0)に関連付けられた確率を表す。例えば、n=0ならば、各々の可能な状態の等確率分布は選択することができる。
−p(θ(0)|E(0))は時刻E(0)におけるデータθ(0)の観測確率を表す。これは、確率P(x(n=0),y(n=0))に対応し、E(n)=iである。
−p(E(n)|E(n−1))は時刻n−1で状態E(n−1)が優勢であるときに状態E(n)にある確率を表す。
−p(θ(n)|E(n))は状態E(n)にあるときに量θ(n)を観測する確率を表す。これは確率P(x(n),y(n))に対応し、E(n)=iである。
確率p(E(n)|E(n−1))は、状態E(n−1)から状態E(n)への遷移確率に対応する。これらの確率は、表記E(n−1)=jおよびE(n)=iを採用して以下の表に示す。
式(1)を最大化する状態E(0)...E(N)の列は、例えば当業者に公知のビタビアルゴリズムを用いて得ることができる。
従って、
1)各状態E(n)について、
−状態E(n)における量θ(n)の観測確率(p(θ(n)|E(n))と表記)
−状態E(n−1)から状態E(n)への遷移確率(p(E(n)|E(n−1))と表記)を求めることにより、
2)各状態E(0)に関連付けられた確率を求めることにより、
3)n=0からn=Nの間の各時刻nにおいて観測された値θ(n)を得ることにより、状態E(0)....E(N)の最も起こり得る列を得ることができる。
上の説明で、θ(n)={x(n),y(n)}であることを想起されたい。ここに、x(n)およびy(n)は各時刻nで加速度計により測定された信号S(n)の前記低および高周波成分である。
隠れマルコフモデルのある姿勢に対応する状態stateから、隠れマルコフモデルのある姿勢に対応する別の状態stateへの遷移確率密度P(state/state)は、本システムに良好な安定性を与えるように選択され、次表に示す。
Figure 2012524579
入力信号および上で定義された隠れマルコフモデルに基づいて、解析モジュールANは、従来の手順、例えば、観測された信号を考慮しながら最も起こり得る列を保持して、全ての可能な状態の列について関連付けられた確率を計算することにより、最も起こり得る状態(姿勢)の列を決定する。これについて例えば、L.R.RabinerおよびB.H.Juangによる文献「An introduction to hidden Markov models」(IEEE ASSP Magazine, January 1986)、またはCappe,Moulines およびRyden著「Inference in Hidden Markov Models」(Springer社の「Springer series in statistics」シリーズ)に記述されている。
本システムの異なる要素が例えば、図1aに示すように同一筐体BTに組み込まれていてよく、あるいは図1bに示すようにいくつかの要素が例えばポータブルコンピュータOPに外付けされていてもよい。
図2に、第1の例における本システムのユーザーの記録を取得した例を下側のグラフに、および本システムから得られた結果を示す。それによれば、ユーザーは36秒間起立または着座姿勢(状態1)を取り、次いで16秒間歩行姿勢(状態2)を取り、次いで8秒間起立または着座姿勢(状態1)を取り、次いで18秒間傾斜姿勢(状態3)を取り、次いで6秒間起立または着座姿勢(状態1)を取り、次いで30秒間歩行姿勢(状態2)を取り、次いで38秒間傾斜姿勢(状態3)を取り、次いで8秒間起立または着座姿勢(状態1)を取り、次いで51秒間歩行姿勢(状態2)を取り、そして最後に起立または着座姿勢(状態1)で終わることがわかる。
第2の例において、本システムは、第1の加速度計であって、測定軸、およびユーザーが直立しているときに測定軸が体の垂直軸VTと一致するように第1の加速度計をユーザーの胴体に固定する第1の固定要素を備えた第1の加速度計と、第2の加速度計であって、測定軸、およびユーザーが直立しているときに測定軸が体の垂直軸VTに一致するように第2の加速度計をユーザーの大腿に固定する第2の固定要素を備えた第2の加速度計とを含んでいる。
使用する隠れマルコフモデルは、4個の姿勢すなわち、起立姿勢(状態1)、着座姿勢(状態2)、横臥姿勢(状態3)、および歩行姿勢(状態4)に対応する4個の状態を含んでいる。
この場合、指標サンプルnに対して、x(n)は前記2個の加速度計の各低周波成分BFの対を表し、y(n)は前記第2の加速度計の高周波成分HFを表し、値x(n)を得る確率密度Pは次式:
Figure 2012524579
(式中、
Σx,iは、モデルの状態iの信号x(n)の共分散行列を記述する次元2の対角行列であり、
μx,iは、モデルの状態iを表す2成分列ベクトルを表す)
により定義される。
これらの状態に関連付けられた変数x(n)およびy(n)の確率は以下のパラメータを有する上述の確率により定義される。
−起立姿勢(状態1)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,1=3e−2である。
−着座姿勢(状態2)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,2=3e−2である。
−横臥姿勢(状態3)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,3=3e−2である。
−歩行姿勢(状態4)の場合、確率密度のパラメータは
Figure 2012524579
で定義される。
高周波成分y(n)の場合、そのパラメータはσy,4=1.2e−1である。
このように、上で詳述した推論によれば、E(0:N)は時刻n=0と時刻n=Nの間の状態列を表し、θ(0:N)が時刻n=0と時刻n=Nの間に観測されたデータを表すならば、E(0,N)は状態E(0),E(1),...E(N)の列に対応し、次式:
Figure 2012524579
を最大化する。
本実施形態によれば、θ(n)={x(n),y(n)}であって、x(n)およびy(n)は各々時刻nにおいて2個の加速度計で測定した信号S(n)の前記低周波および高周波成分である。
隠れマルコフモデルのある姿勢に対応する状態stateから、隠れマルコフモデルのある姿勢に対応する別の状態stateへの遷移確率密度P(state/state)は、本システムに良好な安定性を与えるように選択され、次表に示す。
Figure 2012524579
入力信号および上で定義された隠れマルコフモデルに基づいて、解析モジュールANは、従来の手順、例えば、観測された信号を考慮しながら最も起こり得る列を保持して、全ての可能な状態の列について関連付けられた確率を計算することにより、最も起こり得る状態(姿勢)の列を決定する。これについて例えば、L.R.RabinerおよびB.H.Juangによる文献「An introduction to hidden Markov models」(IEEE ASSP Magazine, January 1986)、またはCappe,Moulines およびRyden著「Inference in Hidden Markov Models」(Springer社の「Springer series in statistics」シリーズ)に記述されている。
図3に、第1の例における本システムのユーザーの記録を取得した例を下側のグラフに、および本システムから得られた結果を示す。それによれば、ユーザーは50秒間着座姿勢(状態2)を取り、次いで85秒間歩行姿勢(状態4)を取り、次いで50秒間起立姿勢(状態1)を取り、次いで61秒間歩行姿勢(状態4)を取り、次いで8秒間着座姿勢(状態2)を取り、次いで94秒間横臥姿勢(状態3)を取り、次いで54秒間歩行姿勢(状態4)を取り、そして最後に起立または着座姿勢(状態2)で終わることがわかる。
本発明は、姿勢の変化を正確に決定することにより、人の姿勢をより低コスト且つ向上した精度でリアルタイムまたは後で決定することが可能になる。

Claims (13)

  1. 少なくとも1個の測定軸を備えた少なくとも1個の運動センサ(CM)を含み、前記運動センサ(CM)をユーザーに堅牢に接続するための固定手段(MF)を備えた、人の姿勢を決定するシステムであって、
    −前記運動センサ(CM)の各測定軸について、第1の閾値(S1)を上回る高周波、および前記第1の閾値(S1)以下である第2の閾値(S2)を下回る低周波を選択するフィルタ(FILT)と、
    −前記運動センサ(CM)に備えられた前記測定軸(k)の前記高周波の2乗の和に等しい1次元高周波成分(HF)、および前記運動センサ(CM)に備えられた前記測定軸(k)の数にサイズが等しい低周波成分(BF)を決定する手段(DET)と、
    −前記高周波成分(HF)の確率密度を、前記運動センサに備えられた前記測定軸(k)の数に自由度が等しいカイ2乗分布により定義し、且つ前記低周波成分(BF)の確率密度をガウス分布により定義して、前記高周波成分(HF)の確率密度(P)および前記低周波成分(BF)の確率密度(P)を計算する手段(CALC)と、
    −前記ユーザーの姿勢決定に適している解析手段(AN)であって、
    −各々の姿勢について定義されている確率密度である、前記低周波および高周波成分の同時確率密度、および
    −2個の連続する姿勢間の遷移確率
    を組み合わせた解析手段(AN)と
    を含むことを特徴とするシステム。
  2. 前記決定手段(DET)が、前記運動センサ(CM)に備えられた前記測定軸による測定値の1次結合に等しい1次元低周波成分(BF)の決定に適していて、前記高周波成分は、自由度を有するカイ2乗分布により定義されている、請求項1に記載のシステム。
  3. 前記低周波成分(BF)および前記高周波成分(HF)の値の対(x(n),y(n))の確率密度(P(x(n),y(n)))が、前記低周波成分(BF)の値(x(n))が得られる確率密度(P)と、前記高周波成分(HF)の値(y(n))が得られる確率密度(P)の積を含んでいて、前記確率密度(P,P)は各状態iについて次式:
    Figure 2012524579
    (式中、
    x(n)は、1次元の信号であって、指標サンプルnを有する低周波成分を表し、
    μx,iは、関連する隠れマルコフモデルの状態iを表す同次元のベクトルを低周波成分として表し、
    σx,iは、関連する隠れマルコフモデルの状態iを表す低周波成分xの分散の2乗根を表し、
    y(n)は、指標サンプルnを有する高周波成分を表し、
    kは、運動センサに備えられた測定軸の数を表し、
    σy,iは、状態iにおける変数y(n)の時間平均に比例する量であり、例えば、σy,iは変数y(n)をkで除算した値の時間平均であり、および
    Γは、
    Figure 2012524579
    が成り立つガンマ関数である)
    で定義されている、請求項1または2に記載のシステム。
  4. 表示手段(AFF)を含んでいる、請求項1〜3のいずれか1項に記載のシステム。
  5. 前記運動センサ(CM)が加速度計および/または磁力計および/またはジャイロメーターを含んでいる、請求項1〜4のいずれか1項に記載のシステム。
  6. 第1の加速度計であって、測定軸、および前記ユーザーが直立しているときに前記測定軸が体の垂直軸VTと一致するように前記第1の加速度計を前記ユーザーの胴体に固定するのに適した固定手段を備えた第1の加速度計を含んでいる、請求項1〜5のいずれか1項に記載のシステム。
  7. 前記解析手段(AN)が、起立または着座姿勢、歩行姿勢、傾斜姿勢、および横臥姿勢から最大4個の状態を有する隠れマルコフモデルを用いて、ユーザーの姿勢を時間の関数として決定するのに適している、請求項6に記載のシステム。
  8. −起立または着座姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]であり、
    −歩行姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−2;1]であり、
    −傾斜姿勢の場合、μ∈[0.7;1.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]であり、
    −横臥姿勢の場合、μ∈[−0.3;0.3]、σ∈[0.05;0.4]、σ∈[1.10−3;5.10−1]である、請求項7に記載のシステム。
  9. 第2の加速度計であって、測定軸、および前記ユーザーが直立しているときに前記測定軸が体の垂直軸VTに一致するように前記第2の加速度計を前記ユーザーの大腿に固定するのに適した固定手段を有する第2の加速度計を更に含んでいる、請求項6に記載のシステム。
  10. 前記解析手段(AN)が、起立姿勢、着座姿勢、横臥姿勢、および歩行姿勢から最大4個の状態を有する隠れマルコフモデルを用いて前記ユーザーの姿勢を時間の関数として決定するのに適している、請求項9に記載のシステム。
  11. 指標サンプルnに対して、x(n)は前記2個の加速度計の各低周波成分(BF)の対を表し、y(n)は、前記第2の加速度計の高周波成分(HF)を表し、値x(n)を得る確率密度(P)は次式
    Figure 2012524579
    (式中、
    Σx,iは、前記モデルの状態iの信号x(n)の共分散行列を記述する次元2の対角行列であり、
    μx,iは、前記モデルの状態iを表す2成分列ベクトルを表す)
    により定義される、請求項10に記載のシステム。
  12. −起立姿勢の場合、
    Figure 2012524579
    であり、
    −着座姿勢の場合、
    Figure 2012524579
    であり、
    −横臥姿勢の場合、
    Figure 2012524579
    であり、および
    −歩行姿勢の場合、
    Figure 2012524579
    である、請求項11に記載のシステム。
  13. 人の姿勢を決定する方法であって、
    −運動センサ(CM)の各測定軸について、第1の閾値(S1)を上回る高周波、および前記第1の閾値(S1)以下である第2の閾値(S2)を下回る低周波を選択すべくフィルタリング(FILT)を実行するステップと、
    −前記運動センサ(CM)に備えられた測定軸(k)の前記高周波の和に等しい1次元高周波成分(HF)、および前記運動センサ(CM)に備えられた測定軸の数に次元が等しい低周波成分(BF)を決定する(DET)ステップと、
    −前記高周波成分(HF)が、前記運動センサ(CM)に備えられた測定軸(k)の数に等しい自由度を有するカイ2乗分布により定義され、前記低周波成分(BF)が、ガウス分布により定義されている状態で、前記高周波成分(HF)の確率密度(P)および前記低周波成分(BF)の確率密度(P)を計算する(CALC)ステップと、
    −各々N個の姿勢に対応するN個の状態を有する隠れマルコフモデルを用いて、ユーザーの姿勢を時間の関数として、
    −各々の姿勢について定義されている確率密度である、前記低周波および高周波成分の同時確率密度、および
    −2個の連続する姿勢間の遷移確率
    を組み合わせることにより決定するステップと
    を含むことを特徴とする方法。
JP2012506530A 2009-04-24 2010-04-26 人の姿勢を決定するシステムおよび方法 Pending JP2012524579A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR0952694 2009-04-24
FR0952694 2009-04-24
PCT/EP2010/055562 WO2010122174A1 (fr) 2009-04-24 2010-04-26 Systeme et procede de determination de la posture d'une personne

Publications (2)

Publication Number Publication Date
JP2012524579A true JP2012524579A (ja) 2012-10-18
JP2012524579A5 JP2012524579A5 (ja) 2014-07-17

Family

ID=41200528

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012506530A Pending JP2012524579A (ja) 2009-04-24 2010-04-26 人の姿勢を決定するシステムおよび方法

Country Status (6)

Country Link
US (1) US9445752B2 (ja)
EP (1) EP2421436A1 (ja)
JP (1) JP2012524579A (ja)
KR (1) KR20120027229A (ja)
CN (1) CN102438521A (ja)
WO (1) WO2010122174A1 (ja)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010122173A1 (fr) * 2009-04-24 2010-10-28 Commissariat A L'energie Atomique Et Aux Energies Alternatives Systeme et procede de determination de l'activite d'une personne allongee
US9072461B2 (en) 2011-02-25 2015-07-07 Embraer S.A. Posture observer for ergonomic observation, posture analysis and reconstruction
FR2981561B1 (fr) 2011-10-21 2015-03-20 Commissariat Energie Atomique Procede de detection d'activite a capteur de mouvements, dispositif et programme d'ordinateur correspondants
CN102488522A (zh) * 2011-11-22 2012-06-13 哈尔滨工业大学 基于Zigbee加速度传感网络的人体坐姿检测系统及检测方法
CN103957777B (zh) * 2011-12-07 2018-01-09 捷通国际有限公司 行为跟踪和修正系统
US8965599B2 (en) 2013-05-01 2015-02-24 Delphi Technologies, Inc. Passive entry and passive start system with operator walking detection
EP2835769A1 (en) 2013-08-05 2015-02-11 Movea Method, device and system for annotated capture of sensor data and crowd modelling of activities
US20160019360A1 (en) 2013-12-04 2016-01-21 Apple Inc. Wellness aggregator
AU2015312215B2 (en) * 2014-09-02 2017-10-19 Apple Inc. Physical activity and workout monitor
CN107921317B (zh) 2015-08-20 2021-07-06 苹果公司 基于运动的表盘和复杂功能块
US10264996B2 (en) * 2015-10-19 2019-04-23 Sayfe Kiaei Method and apparatus for wirelessly monitoring repetitive bodily movements
AU2017100667A4 (en) 2016-06-11 2017-07-06 Apple Inc. Activity and workout updates
CN108261585B (zh) * 2016-12-30 2022-06-07 上海移宇科技股份有限公司 一种人工胰腺闭环控制的系统和方法
CN107582061B (zh) * 2017-07-21 2020-03-27 青岛海信移动通信技术股份有限公司 一种识别人体运动状态的方法及智能移动设备
US11317833B2 (en) 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
DK201970532A1 (en) 2019-05-06 2021-05-03 Apple Inc Activity trends and workouts
US11277485B2 (en) 2019-06-01 2022-03-15 Apple Inc. Multi-modal activity tracking user interface
DK202070616A1 (en) 2020-02-14 2022-01-14 Apple Inc User interfaces for workout content
US11938376B2 (en) 2021-05-15 2024-03-26 Apple Inc. User interfaces for group workouts
CN114252073B (zh) * 2021-11-25 2023-09-15 江苏集萃智能制造技术研究所有限公司 一种机器人姿态数据融合方法
US11896871B2 (en) 2022-06-05 2024-02-13 Apple Inc. User interfaces for physical activity information
US11977729B2 (en) 2022-06-05 2024-05-07 Apple Inc. Physical activity information user interfaces

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0678902A (ja) * 1992-09-04 1994-03-22 Res:Kk 移動手段判別法
US20080275349A1 (en) * 2007-05-02 2008-11-06 Earlysense Ltd. Monitoring, predicting and treating clinical episodes
JP2010207488A (ja) * 2009-03-12 2010-09-24 Gifu Univ 行動解析装置及びプログラム

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6678413B1 (en) * 2000-11-24 2004-01-13 Yiqing Liang System and method for object identification and behavior characterization using video analysis
JP5028751B2 (ja) * 2005-06-09 2012-09-19 ソニー株式会社 行動認識装置
CN100487618C (zh) * 2007-06-08 2009-05-13 北京航空航天大学 一种基于遗传最优request和gupf的组合定姿方法
US8152694B2 (en) * 2009-03-16 2012-04-10 Robert Bosch Gmbh Activity monitoring device and method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0678902A (ja) * 1992-09-04 1994-03-22 Res:Kk 移動手段判別法
US20080275349A1 (en) * 2007-05-02 2008-11-06 Earlysense Ltd. Monitoring, predicting and treating clinical episodes
JP2010207488A (ja) * 2009-03-12 2010-09-24 Gifu Univ 行動解析装置及びプログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JEFF A. BILMES: "A GENTLE TUTORIAL OF THE EM ALGORITHM AND ITS APPLICATION TO PARAMETER ESTIMATION FOR GAUSSIAN MIXTU", INTERNATIONAL COMPUTER SCIENCE INSTITUTE [ONLINE], JPN5012015279, April 1998 (1998-04-01), ISSN: 0002831029 *

Also Published As

Publication number Publication date
WO2010122174A1 (fr) 2010-10-28
KR20120027229A (ko) 2012-03-21
EP2421436A1 (fr) 2012-02-29
US9445752B2 (en) 2016-09-20
CN102438521A (zh) 2012-05-02
US20120143094A1 (en) 2012-06-07

Similar Documents

Publication Publication Date Title
JP2012524579A (ja) 人の姿勢を決定するシステムおよび方法
JP2012524579A5 (ja)
JP2012524578A (ja) 可動要素の活動を決定するためのシステム及び方法
US20110012759A1 (en) Activity monitoring system insensitive to accelerations induced by external motion factors
Kozina et al. Three-layer activity recognition combining domain knowledge and meta-classification
US20120232430A1 (en) Universal actigraphic device and method of use therefor
JP6546661B2 (ja) 生理学的測定におけるアーティファクトを除去するデバイス及び方法
JP2014504932A (ja) 哺乳動物の体の向きを分類するための装置および方法
Azmi et al. Accelerator-based human activity recognition using voting technique with NBTree and MLP classifiers
Ruffaldi et al. Sensor fusion for complex articulated body tracking applied in rowing
KR102363879B1 (ko) 환자의 상지 동작에 의해 도출되는 특징값을 이용한 임상평가척도 예측 방법
Grecheneva et al. Estimation of human biomechanics during registration with a wearable device
Mehmood et al. Study of multi-classification of advanced daily life activities on shimmer sensor dataset
JP2009300227A (ja) 位置追跡システム、位置追跡装置、位置追跡方法およびプログラム
US20220262013A1 (en) Method for improving markerless motion analysis
WO2019115432A1 (en) Determining whether a hypothesis concerning a signal is true
US8898041B2 (en) System and method for determining the activity of a person lying down
CN114053679A (zh) 运动训练方法及其系统
CN115191933A (zh) 认知能力评估方法、系统及存储介质
Chien et al. Non-linear complementary filter based upper limb motion tracking using wearable sensors
Díaz-Ramírez et al. Time series data processing for classifying wandering patterns in people with dementia
Hemmatpour et al. A baseline walking dataset exploiting accelerometer and gyroscope for fall prediction and prevention systems
Hegazy et al. Multi-Sensor Fusion for Online Detection and Classification of Table Tennis Strokes.
Fürst-Walter et al. Design space exploration on efficient and accurate human pose estimation from sparse imu-sensing
Yogesh Instance based human physical activity (hpa) recognition using shimmer2 wearable sensor data sets

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140310

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140313

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140508

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140617

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140908

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20141017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141106

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140929

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150108

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150428