JP6403696B2 - 身体的活動のモニタリングデバイス及びその方法 - Google Patents

身体的活動のモニタリングデバイス及びその方法 Download PDF

Info

Publication number
JP6403696B2
JP6403696B2 JP2015561524A JP2015561524A JP6403696B2 JP 6403696 B2 JP6403696 B2 JP 6403696B2 JP 2015561524 A JP2015561524 A JP 2015561524A JP 2015561524 A JP2015561524 A JP 2015561524A JP 6403696 B2 JP6403696 B2 JP 6403696B2
Authority
JP
Japan
Prior art keywords
user
physical activity
exercise
monitoring device
overlapping
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015561524A
Other languages
English (en)
Other versions
JP2016513494A (ja
JP2016513494A5 (ja
Inventor
モリス,ダニエル
ケルナー,イリヤ
シャリフ,ファラー
トム,デニス
サポナス,ティー.スコット
ギロリー,アンドリュー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Corp
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of JP2016513494A publication Critical patent/JP2016513494A/ja
Publication of JP2016513494A5 publication Critical patent/JP2016513494A5/ja
Application granted granted Critical
Publication of JP6403696B2 publication Critical patent/JP6403696B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1118Determining activity level
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1123Discriminating type of movement, e.g. walking or running
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6813Specially adapted to be attached to a specific body part
    • A61B5/6824Arm or wrist
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1112Global tracking of patients, e.g. by using GPS
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0658Position or arrangement of display
    • A63B2071/0661Position or arrangement of display arranged on the user
    • A63B2071/0663Position or arrangement of display arranged on the user worn on the wrist, e.g. wrist bands
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/40Acceleration
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems

Description

運動及び他の身体的活動は、人間の健康や良好な状態にとって非常に有効な可能性がある。一部の人々は、個人トレーナを採用して、体系的な運動計画を通して健康や良好な状態を強化している。しかしながら、必ずしも全ての人が個人トレーナを採用することができるわけではない。個人トレーナと頻繁にトレーニングする人でさえも、身体的活動を行うときに毎回、個人トレーナを利用する可能性は低い。
身体的活動モニタリングデバイスは、ユーザの身体的活動特性(physical activity attribute)を測定するように構成される1つ以上のセンサを有するセンサアレイを含む。コントローラは、身体的活動特性に基づいて、ユーザが身体的活動に積極的に取り組んでいる時間間隔を自動的に決定する。コントローラは、身体的活動特性に基づいて、決定された時間間隔の間にユーザが積極的に取り組んでいる身体的活動のタイプも自動的に決定する。レポータは、その身体的活動のタイプに関する情報をユーザに出力する。
この「発明の概要」における記載は、以下で「発明を実施するための形態」において更に説明される概念の選択を簡略化した形で紹介するために提供される。この「発明の概要」における記載は、特許請求に係る主題の主要な特徴又は本質的特徴を特定するようには意図されておらず、また特許請求に係る主題の範囲を限定するのに使用されるようにも意図されていない。さらに、特許請求される主題は、本開示の任意の箇所で示されるいずれか又は全ての不利な点を解決する実装には限定されない。
本開示の実施形態に係る身体的活動モニタリングデバイスを装着しているユーザを示す図である。 本開示の実施形態に係る身体的活動モニタリングデバイスを示す図である。 本開示の実施形態に従って、ユーザが身体的活動に積極的に取り組んでいる期間を決定する例示の方法を示す図である。 本開示の実施形態に従って、ワークアウト計画の例示的区分の分析を示す図である。 本開示の実施形態に従って、身体的活動のタイプを認識する例示の方法を示す図である。 本開示の実施形態に従って、運動の反復をカウントする例示の方法を示す図である。 本開示の実施形態に従って、ゲーム体験を向上させる例示の方法を示す図である。 本開示の実施形態に従って、ユーザを身体的にトレーニングする例示の方法を示す図である。
本開示は、身体的活動モニタリングデバイス(PAMD:physical activity monitoring device)を対象としている。PAMDは、ゲーム体験を向上させ、かつ/又はワークアウト計画を受け取り、モニタリングするのに使用され得る。
ワークアウトでは、個人が、身体的活動又は運動を行うのに時間を費やすだけでなく、その活動からの回復に費やす時間、活動の準備に費やす時間、そして水を飲むことのように運動以外の活動を行うのに費やす時間がある。PAMDが、PAMDを装着しているユーザによって行われる身体的活動又は運動を認識して区別するために、最初に、実際の運動の時間と、運動以外の活動の時間を区別し得る。一部の実施形態では、PAMDは、PAMDを装着しているユーザの身体的活動特性を測定するように構成される1つ以上のセンサを含むセンサアレイを用いて、ユーザの動きをサンプリングする。サンプルされたデータは、次いで、運動の時間期間と運動以外の時間期間へと区分され得る。運動の時間期間内に、PAMDは、サンプルされたデータ内で固有の身体的活動又は運動を表すパターンを一意に識別するようトレーニングされ、これにより、PAMDを装着しているユーザによって行われる身体的活動又は運動を認識することができる。反復的な身体的活動又は運動について、PAMDは、PAMDを装着しているユーザによって行われる、所与の反復的な身体的活動又は運動の反復回数をカウントし得る。
図1は、本開示に係る身体的活動モニタリングデバイス102を装着しているユーザ101を示している。一部の実施形態において、PAMD102は、ウェアラブルなアームバンドの形であってよい。PAMD102は、ユーザ101が運動をしているか他の特定の身体的活動を行う間に、ユーザ101によって装着され得る。PAMDはスマート活動分析の方法を採用してよい。スマート活動分析は、PAMDが、PAMDを装着しているユーザによって実行される身体的活動又は運動を認識して、区別することを可能にし、さらに、PAMDが、PAMDを装着しているユーザによる身体的活動又は運動の反復をカウントするのを可能にする。
図2は、本開示の実施形態に係る身体的活動モニタリングデバイス200を概略的に示している。PAMD200は、センサアレイ210、論理マシン215、ストレージマシン217、コントローラ220、教師付き分類器(supervised classifier)230a、教師付き分類器230b、集約装置240、通信サブシステム250、レポータ260、投票マシン270及びディスプレイサブシステム280を含んでよい。
センサアレイ210は、加速度計214、GPS212、ジャイロスコープ216、心拍モニタ218及び/又は他の適切なセンサといった、1つ以上のセンサを含み得る。センサアレイ210からのデータは、デバイスが、PAMDを装着しているユーザによって行われる種々の身体的活動又は運動を自動的に区別するのを可能にし得る。一部の例において、加速度計214は、固定のサンプリングレートでユーザの動きをサンプリングすることができる。サンプリングは、25Hzのサンプリングレートで行われてもよく、あるいは50Hzといった別の適切なサンプリングレートで行われてもよい。GPS212からのデータは、ユーザが屋外で身体的活動又は運動を行う速度を学習するのに使用され得る。例えばGPSで得られるデータを使用して、ランニング、ウォーキング及び自転車に乗っている時間を区別することができる。さらに、GPSはユーザの位置を評価するのに使用されてもよい。そのような位置情報を使用して活動を区別することができる。例えばユーザは、テニスコートにいるときは、テニスをプレイしている可能性が高く、ゴルフコースにいるときはゴルフをしている可能性が高い。加速度計から受け取られるデータと併せて、GPSデータは、ユーザのストライドを調整(calibrate)するのに使用されてもよい。この情報を格納しておき、身体的活動又は運動が屋内で実行されるとき、あるいはGPSデータが他の理由により利用可能でないときに、この情報を使用して、同じ身体的活動又は運動を区別して調整することができ、これにより、GPSデータが存在しない場合にも、正確な距離及びペース情報を計算することが可能になる。
加速度計214は、任意選択により、3軸の加速度計とすることができる。加速度計214から受け取ったデータは、プッシュアップ、シットアップ、スクワット等を含め、種々の反復的な身体的活動又は運動のパターンにおける変化を検出するのに使用され得る。そのような反復的な身体的活動又は運動についての信号の反復性を使用して、これら及び同様の運動の反復を検出することができる。加速度計214から受け取ったデータは、ウォールスクワット、プランク、ヨガのポーズ等を含め、種々の静的な身体的活動のパターンにおける変化を検出するのにも使用され得る。
距離ベースの活動について、PAMD200はさらに、ウォーキング、ジョギング、早めのジョギング及びランニングを含め、動きのスピードの変化を検出して区別することができる。これは、加速度計214を用いてユーザの足音のスピードを測定することによって達成され得る。このデータは、その後、その活動に固有の距離の計算を動的に調整するのに使用され得る。例えばウォーキングの間にユーザがとった数歩は、ランニングの間に同じユーザがとった同じ歩数の距離よりも短い距離に相当することがある。身体的活動又は運動についての多くの期間にわたって、ウォーキングやジョギング、ランニング等のユーザの真のストライドの長さが、GPS212及び加速度計214からのデータを使用して学習され得る。
PAMD200はコントローラ220を更に含んでもよく、コントローラ220は、任意選択により、論理マシン215及びストレージマシン217の使用を介して裏付けされ得る。コントローラ220は、ユーザが身体的活動に積極的に取り組む時間間隔を、身体的活動特性に基づいて自動的に決定するように構成され得る。この処理は、本明細書では、区分化(segmentation)と呼ばれることもある。一例として、PAMD200は、ユーザが、運動としてジャンピングジャックを行うべきであることを指示することがある。この指示に続いて、ユーザは、運動の準備、例えば部屋の周りを歩くことや、水を取りに行くこと、あるいはジャンピングジャックを始めるための場所を確保する時間を要することがある。区分化の処理は、実際の運動の時間を、身体的活動又は運動に関連しない他の活動から分離することができる。運動以外の時間を分析対象から取り除くことにより、PAMD200が誤った反復をカウントする確率を低減することができる。同様に、ユーザが身体的活動又は運動に積極的に取り組んでいる時間期間からのデータのみを認識システムが分析する場合、PAMD200は、ユーザがどの身体的活動又は運動に取り組んでいるかをより正確に決定することができる。
一例において、PAMD200は、ユーザが時間ベースの活動、例えば30秒間のプッシュアップを実行すべきことを指示することがある。PAMD200は、ユーザがプッシュアップを行う位置に着く時間中はユーザの身体的活動特性の評価を開始しなければ、30秒のプッシュアップをより正確に追跡することができる。ユーザがプッシュアップを実行している時を正確に決定することにより、PAMD200はユーザのバイオメトリクスに関する正確な要求、例えばプッシュアップを行う間にユーザがどのくらいのカロリーを消費するかについての正確な要求を作成することができる。
PAMD200は、マシン学習を通して、ユーザが身体的活動又は運動に積極的に取り組んでいる期間を認識するようにトレーニングされ得る。この区分化の処理は、事前処理、特徴計算、分類及び集約というサブプロセスに更に分割され得る。
図3は、コントローラ220により、ユーザが身体的活動に積極的に取り組んでいる期間を判断するのに使用され得る、例示の方法300を示している。302において、方法300は、センサアレイ(例えばセンサアレイ210)から信号情報を受け取ることを含む。そのような信号情報を、例えばコントローラ220において受け取ってよい。信号情報は、ユーザの身体的活動特性を表す。一部の例において、この信号情報は、加速度計214又はジャイロスコープ216からの生データを含むことがある。加速度計214及びジャイロスコープ216は、それぞれ3つの生の信号を出力し、合計6つの生の入力信号を与える。生の入力信号は、次いでローパスフィルタを通過することがあり、その出力は6つの平滑化信号となり得る。
304において、方法300は、ユーザが身体的活動に積極的に取り組んでいる時間間隔を決定することを含み得る。例えばコントローラ220は、302において受け取った信号情報を、時間間隔を決定するための基準として使用することがある。図3に示されるように、時間間隔を決定する処理は、複数のサブプロセスを含み得る。そのようなサブプロセスの非限定的な例が下記に提供される。しかしながら、積極的な取り組みの時間間隔は、本開示の範囲から逸脱することなく、任意の適切な方法で決定されてよいことを理解されたい。
306において、方法300は、信号情報を、重複する区分(overlapping segment)に分割することを含み得る。一例において、データは、5秒の長さの時間枠(window)に分割され得る。それぞれの時間枠は、前の時間枠から200ミリ秒(ms)だけ進んでおり、それぞれの5秒の時間枠は、以前の時間枠及び後続の時間枠と4.8秒分のデータを共有する。
308において、方法300は、重複区分ごとに、所定の信号特徴(例えばセンサアレイの加速度計によって測定される加速度情報の加速度特徴)を識別することを含み得る。一部の例において、コントローラ220は、平滑化されたデータの5秒の時間枠のそれぞれを、後に身体的活動又は運動を特徴付けるのに使用される200個の信号特徴へと変換してよいが、より少ない又は多くの信号特徴が存在してもよい。一例において、6つの平滑化信号が10個の出力信号に変換され得る。この例において、10個の出力信号は、x軸、y軸及びz軸の平滑化された加速度データ、x軸、y軸及びz軸の平滑化されたジャイロスコープデータ、各サンプルにおける加速度計信号の規模、各サンプルにおけるジャイロスコープ信号の規模、3つの次元の加速度計信号の第1の主成分(first principal component)上への該3つの次元の加速度計信号の投影、y軸及びz軸の加速度計信号自体の主成分上へのy軸及びz軸の加速度計信号の投影、並びに3つの次元のジャイロスコープ信号の第1の主成分上への該3つの次元のジャイロスコープ信号の投影を含み得る。
出力信号は、PAMDの特徴に基づいて選択され得る。信号情報が3つの次元の信号を含む幾つかの実施形態では、3つの次元のうちの2つの次元の信号が、1つの次元の信号へと、次元を低減され得る。例えばPAMDがユーザの身体に付着されるデバイスとして構成されるか、他の方法でユーザの身体に固定されるよう構成される場合、x軸、y軸及びz軸における平滑化データは、これらの3つの軸におけるユーザの動きを正確に反映すると考えられ得る。しかしながら、例えばPAMDがウェアラブルなアームバンドとして構成される場合、PAMDはユーザの腕又は手首の周囲の回転を対象とすることがある。この例では、(例えばユーザの腕に沿った)x軸のデータは、x軸のユーザの動きを正確に反映すると考えられるが、y軸及びz軸のデータは、PAMDの位置に応じて複数の軸の動きを表す可能性がある。この例では、y軸及びz軸の加速度計信号の自身の主成分上への投影は、出力信号として選択され得る。y軸及びz軸の信号の次元を低減することによって、ユーザの腕の周囲のPAMDの回転は、未知の軸をより予測可能な信号へと圧縮することで説明され得る。
これらの出力信号のそれぞれについて、コントローラ220は、出力信号ごとに20個の信号特徴を計算することがある。コントローラ220は、より多くの又はより少ない数の信号特徴を計算してもよい。一部の例において、信号特徴は、自己相関ピークの数、負の自己相関ピークの数、最大自己相関値、最大自己相関値の対数、二乗平均平方根の振幅、平均、標準偏差、分布及び統合二乗平均平方根(integrated root-mean-square)の振幅を含み得る。信号特徴は強いピークの数を含んでもよく、この場合、強いピークは、隣接するピークよりも閾値分大きく、かつ隣接するピークから閾値分の差(threshold lag)離れている自己相関ピークの数として定義され得る。信号特徴は、弱いピークの数を含むこともあり、ここで、弱いピークは、隣接するピークの閾値の高さ以内であり、かつ隣接するピークから閾値分の差よりも離れていない自己相関ピークの数として定義され得る。信号特徴は、ゼロ交差の後の最初の自己相関ピークの値、局所的な非線形性、あるいはベストフィットのラインがデータ及びパワーバンドのセットをどれほどよく説明するかについての他の測定値を更に含んでもよく、この場合、センサアレイによって取得できる周波数範囲にわたって広がる各選択されたバンドのパワースペクトルの規模が計算される。この例では7つのパワーバンドが計算され得るが、例えば10個のパワーバンドのようにより多く又はより少ないパワーバンドが存在してもよい。
追加の信号特徴が各信号について計算されてもよい。5秒枠ごとに、信号特徴は、信号の自己相関性の指示、言い換えると、データがどのように反復するか又は自己相似であるかの指示を与えることがある。ユーザが運動している時間期間の信号は、ユーザが運動していない時間期間の信号よりもより反復的であり得る。幾つかの例において、ユーザが早い動きに取り組んでいる時間期間の信号は、運動でないものよりも、運動に対応する可能性が高いことがある。
310において、方法300は、それぞれの重複する区分について、教師付き分類器を使用して、所定の信号特徴を分析することを含み得る。図2に示されるように、コントローラ220は、教師付き分類器230aを含み得る。教師付き分類器230aは、重複する区分の間に、ユーザが身体的活動に積極的に取り組んでいるかどうかを認識するようトレーニングされ得る。一般に、教師付き分類器230a及び/又はコントローラ220の他の態様は、マシン学習プロセスを通してトレーニングされ、ユーザが身体的活動又は運動に積極的に取り組んでいることを表す信号特徴を認識し、さらに、ユーザが身体的活動又は運動に積極的に取り組んでいないことを表す信号特徴も認識することができる。
一例において、教師付き分類器230aは、サポートベクトルマシン(SVM)、例えば線形サポートベクトルマシンを用いる。一部の例では、教師付き分類器230aはマシン学習決定木を用いる。教師付き分類器230aがSVMを用いる幾つかの例では、SVMは、数のベクトルを生成するように構成され、所定の信号特徴に数のベクトルを乗算し、複数の乗算の積を得るように更に構成され得る。SVMは更に、乗算の積を、上述のようにマシン学習を通して決定される1つ又は複数の閾値と比較するように構成され得る。SVMは次いで、閾値を超える値を、ユーザが身体的活動に積極的に取り組む重複区分を表すものとして分類し、閾値未満の値を、ユーザが身体的活動に積極的に取り組んでいない重複区分を表すものとして分類する。
教師付分類器230aがSVMを含む一部の例では、所定の信号特徴を分析することは、複数のユーザ又はトレーニング対象者が身体的活動又は運動に積極的に取り組んでいた時間間隔、並びに複数のユーザ又はトレーニング対象者が身体的活動又は運動に積極的に取り組んでいなかった時間間隔の間にその複数のユーザから収集したデータで、サポートベクトルマシンをトレーニングすることを含んでもよい。所定の信号特徴を分析することは、変換ベクトルのセットと、重み付けベクトルと、ユーザが身体的活動又は運動に積極的に取り組んでいることを表す閾値とを生成することと、続いて、所定の信号特徴に変換ベクトル及び重み付けベクトルのセットを乗算して、複数の乗算の積を得ることとを更に含んでもよい。所定の信号特徴を分析することは、乗算の積を閾値と比較することと、閾値を超える値を、ユーザが身体的活動又は運動に積極的に取り組んでいる重複区分を表すものとして分類することと、閾値未満の値を、ユーザが身体的活動又は運動に積極的に取り組んでいない重複区分を表すものとして分類することとを更に含んでよい。
教師付き分類器230aは各分類セグメントを分類すると、PAMD200は、それぞれの5秒の時間枠の間にユーザが身体的活動又は運動に積極的に取り組んでいるかどうかに関して、単一の最良の推測を策定し得る。
図2に示されるように、PAMD200は集約装置240を更に含んでもよく、集約装置240は、複数の分類された重複区分によって定義される、ユーザが身体的活動に積極的に取り組んでいる可能性が高い時間間隔を決定するように構成される。言い換えると、集約装置240は、教師付き分類器230aの正確性を向上させ、重複区分のグループを分析して、運動又は運動以外を表すより長い時間間隔を決定し得る。
教師付き分類器230aによって作成される予測は、時々前後が反転することがある。一例において、ユーザがある時間期間の間、静止して立っていることがあり、一部の重複区分は、ユーザが身体的活動又は運動に取り組んでいるものとして分類されていることがある。反対も起こることがあり、ユーザがある時間期間の間運動しており、その期間の一部の重複区分が運動以外を表すものに分類されていることがある。一部の例において、ユーザは、運動の途中で一時停止して一息つくことがあるが、その一時停止のいずれかの横の重複区分は実際に、同じ身体的活動又は運動を表すことがある。ユーザが反復的な活動の途中で一時停止して一息つく例では、一時停止の両サイドの反復が、反復の合計数に加算されるべきである。このようにして、集約装置240は、ユーザが身体的活動又は運動に取り組む使用可能な時間間隔を出力するよう、分類器の出力を修正することができる。
集約装置240が、教師付き分類器230aの出力を修正する例が、図4に示されている。図4は、ワークアウト計画の一部であり得る身体的活動の区分の例を示している。グラフ401は、約1分に及ぶ時間間隔の間の教師付き分類器230aの出力を示す。各プロットポイント405は、1つの重複区分を表す。各重複区分には、(「運動」と分類される)1又は(「運動以外」と分類される)0の値が与えられる。グラフ402は、ユーザの実際の活動を示す。410に示されるように、ユーザは、20秒の間シットアップを行った。しかしながら、415に示されるように、一部の重複区分は、ユーザが身体的活動又は運動に積極的に取り組んでいなかったときであっても、最初に「運動」と分類されることがある。同様に、420に示されるように、ユーザが身体的活動又は運動に積極的に取り組んでいたときであっても、一部の重複区分は「運動以外」と分類されることもある。グラフ403に示されるように、集約装置240は、時間間隔430のように、ユーザが身体的活動又は運動に取り組んでいる使用可能な時間間隔を出力するように、分類器の出力を修正し得る。
集約装置240は、重複区分の分類を分析し、ユーザが身体的活動又は運動に取り組んでいる可能性が高い時間間隔を出力するのに、1つ以上の方法を用いてもよい。一例において、集約装置240は、ストリーク(streak)ベースの集約処理を使用する。この例では、集約装置240は、運動以外の状態をとることから始まり、続いて重複区分を順次分析する。所定の数(k)の重複区分が「運動」に分類される場合、集約装置240は、k個の重複区分の最初から開始する運動状態をとるように切り替わる。一例では、kが15個の重複区分に設定され得る。言い換えると、15個の連続する重複区分が「運動」に分類されると、集約装置は運動状態をとるように切り替わる。kと等しくても等しくなくてもよいが、別の所定の数(k)を使用して、集約装置240が、運動状態をとることから、運動以外の状態をとることへと切り替わるべきことを指示してもよい。
一部の例において、集約装置240は、パーセントベースの集約処理を使用する。この例では、集約装置240は、運動以外の状態をとることから始まり、続いて重複区分を順次分析する。重複区分の所定のパーセンテージ(p%)が所定の時間間隔(t)にわたって「運動」と分類される場合、「運動」と分類された重複区分の最初から開始して、運動状態をとるように切り替える。例えばpが75に等しく、tが10に等しいとすると、10秒間の重複区分の75%が「運動」と分類されるとき、集約装置240は、「運動」と分類される重複区分の最初から開始する運動状態をとるように切り替わる。p%と等しくても等しくなくてもよいが、別の所定の数(p%)を使用して、集約装置240が、運動状態をとることから、運動以外の状態をとることへと切り替わるべきことを指示してもよい。
一部の例において、集約装置240は、累積ベースの集約処理を使用する。この例では、集約装置240は、運動以外の状態をとることから始まり、重複区分を順次分析する。「運動」として分類される各重複区分が、ポイントを小計(subtotal)に追加する。小計が、所定の閾値(a)を超えると、集約装置240は、運動状態をとるように切り替わる。(a)と等しくても等しくなくてもよいが、別の所定の閾値(a)を使用して、集約装置240が、運動状態をとることから、運動以外の状態をとることへと切り替わるべきことを指示してもよい。
集約装置240は、これらの処理又は他の同様の処理のうちの1つ、あるいは複数の処理の組合せを使用して、教師付き分類器230aからのデータを分析して、ユーザが身体的活動又は運動に取り組む時間間隔を出力してもよい。例えば集約装置240は、ストリークベースの集約処理を使用して身体的活動又は運動の開始ポイントを決定し、次いで、ユーザが身体的活動又は運動を行うのを終了したかを判断する際に更に累積ベースの集約処理を使用してもよい。一部の実施形態において、集約装置240は、同時に複数の集約装置(例えばストリークベースの集約装置と累積ベースの集約装置)を実行し、複数の集約装置のうちのいずれか1つが身体的活動又は運動の開始又は終了を示すときに、身体的活動又は運動の開始又は終了を識別してもよい。
一部の例では、センサアレイからの初期データは、上述のような教師付き分類器230aによって、集約装置240の出力をマシン学習アルゴリズムへの入力として更に使用して、再分析されてもよい。所定の定数(constant)が、異なる運動又は異なるタイプの運動について共有されてもよく、異なる運動又は異なるタイプの運動について一意に割り当てられてもよい(例えばプッシュアップのような反復運動は、ジョギングのような非反復的運動とは異なる定数を使用してよい)。
コントローラ220は、決定された時間間隔の間にユーザが積極的に取り組んでいる身体的活動のタイプを、身体的活動特性に基づいて自動的に決定するようにも構成され得る。言い換えると、コントローラ220は、ユーザが身体的活動又は運動に取り組んでいると決定された各時間間隔の間に、そのユーザがどの運動に積極的に取り組んでいるのかを決定し得る。この処理は認識(recognition)とも呼ばれることがある。認識処理は、任意選択で集約処理の後に続いてもよく、かつ/又は一部の認識は区分化及び/又は集約と並行に実行されてもよい。一部の実施形態において、コントローラ220は、決定された時間間隔の間にユーザが積極的に取り組んでいる身体的活動のタイプを、決定された時間間隔に対応する身体的活動特性のみに基づいて自動的に決定するように構成されてもよい。言い換えると、運動時間として決定された時間期間の間にセンサアレイ210から受け取った身体的活動特性のみを使用して、身体的活動のタイプを決定する。
運動のタイプの認識は、運動の反復をカウントすること、運動の効果又は力を計算すること、運動の間のユーザのカロリー消費を決定すること等を含め、下位の用途において使用され得る。PAMD200は、ユーザの身体的活動特性を分析し、さらに、ユーザのフォームや、ユーザの運動体験を向上させ得る他の情報に関するフィードバックをユーザに提供するようにも構成され得る。コントローラ220は、身体的活動のタイプをユーザの身体的活動特性に基づいて認識するよう、マシン学習プロセスを通してトレーニングされ得る。一部の例において、PAMD200は、ユーザによって実行されるべき具体的な活動を指示してもよい。これらの例では、認識処理は無視されても、区分化処理と組み合わされても、かつ/又は区分化処理により強化されてもよい。
図5は、身体的活動又は運動のタイプの認識のための一例の方法500を示している。502において、方法500は、センサアレイ(例えばセンサアレイ210)から信号情報を受け取ることを含み得る。そのような信号情報は、例えばコントローラ220によって受け取られてよい。信号情報は、加速度計210及びジャイロスコープ216からの生のデータを含み得る。生のデータは、ローパスフィルタによって更に処理されて、平滑化された加速度計及びジャイロスコープデータが得られる。信号情報は、加速度計信号の第1の主成分上へ加速度計信号の投影も含み得る。信号情報は、ジャイロスコープ信号の第1の主成分上へのジャイロスコープ信号の投影も含み得る。
504において、方法500は、集約装置(例えば集約装置240)から時間間隔のセットを受け取ることを含み得る。そのような時間間隔のセットは、コントローラ220によって受け取られてよく、ユーザが身体的活動又は運動に取り組んでいる時間間隔を表してよい。506において、方法500は、時間間隔のセットの間にユーザが積極的に取り組む身体的活動のタイプを決定すること(例えば認識)を含んでよい。言い換えると、認識処理は、ユーザが身体的活動又は運動に取り組んでいることを集約装置240が示すときに適用され得る。
認識処理は、複数のサブプロセスを含み得る。そのようなサブプロセスの非限定的な例が、以下で与えられる。しかしながら、認識は、本開示の範囲から逸脱することなく、任意の適切な方法で実行されてよいことを理解されたい。
508において、方法500は、信号情報を重複区分に分割することを含み得る。一例では、データを5秒の長さの時間枠に分割してよい。各時間枠は、前の時間枠から200ミリ秒だけ進んでおり、それぞれの5秒の時間枠は、前の時間枠及び後続の時間枠と4.8秒のデータを共有する。
510において、方法500は、重複区分ごとに、所定の信号特徴を識別することを含み得る。一例において、平滑化されたデータのそれぞれの5秒の時間枠は、その後に身体的活動又は運動を特徴付けるのに使用される複数の信号特徴に変換され得る。1つの非限定的な例として、60個の信号特徴が使用され得る。例えばコントローラ220は、重複区分それぞれの3軸の各々について、20個の信号特徴を計算することができる。この例では、信号特徴は、5つの等間隔の自己相関ビン、二乗平均平方根の振幅、10個の等間隔のパワーバンド、平均、標準偏差、尖度及び四分位範囲を含む。3軸のそれぞれについて、他の信号特徴を計算してもよい。
512において、方法500は、教師付き分類器(例えば教師付き分類器230b)を使用して、重複区分ごとに所定の信号特徴を分析することを含み得る。教師付き分類器230bは、重複区分の間にユーザが積極的に取り組んでいる身体的活動のタイプを認識するようにトレーニングされ得る。教師付き分類器230bは、特定のタイプの身体的活動又は運動を表す信号特徴を認識するように、マシン学習処理を通してトレーニングされ得る。
一部の例において、教師付き分類器230bは、教師付き分類器230aに関連して上述したように、サポートベクトルマシン(SVM)及び/又は決定木を使用してよい。例えば所定の信号特徴を分析することは、複数のユーザが複数のタイプの身体的活動又は運動に取り組んでいた時間間隔の間に、その複数のユーザから収集されたデータでサポートベクトルマシンをトレーニングすることと、あるタイプの身体的活動又は運動にユーザが取り組んだことを表す変換ベクトルと重み付けベクトルのセットを生成することとを含むことがある。所定の信号特徴を分析することは更に、所定の信号特徴に変換ベクトルと重みベクトルのセットを乗算して、複数の乗算の積を取得することと、乗算の積を、複数の所定の活動の各々を表すデータセットと比較することと(なお、これらのデータセットは、マシン学習を通して予め決定されている)、重複区分を、身体的活動のタイプを表すものとして分類することを含んでもよい。
図2に示されるように、PAMD200は更に、投票マシン270も含み得る。投票マシン270は、ユーザが身体的活動に取り組んでいると集約装置240が決定した時間間隔の間に、そのユーザが積極的に取り組んでいる可能性が高い身体的活動のタイプを決定するように構成され得る。
区分化に関して上述したように、複数の重複区分を備える所与の時間間隔の間に、教師付き分類器は、どの身体的活動又は運動がユーザによって実行されているかに関して食い違う幾つかの予測を出力することがある。投票マシン270によって、ユーザが取り組む可能性が最も高いのはどの身体的活動又は運動であるかを決定する投票スキームが実装され得る。投票マシン270は、所与の時間間隔の間の身体的活動又は運動を出力することができ、この身体的活動又は運動が、反復運動の場合はカウントに使用する身体的活動又は運動がユーザに報告される。
一例において、投票マシン270は、単一の時間枠の開始2秒からの出力を、ユーザが身体的活動に取り組んでいると集約装置240が判断した時間間隔に報告する。運動期間の開始部分におけるユーザの身体的活動特性は、ユーザがまだ正しいフォームを取っていないことがあるので、信頼性がないことがある。同様に、運動期間の最後の部分におけるユーザの身体的活動は、ユーザがスローダウンしているか正しいフォームから外れていることがあるので、信頼性がないことがある。一部の例において、投票マシン270は、上述の集約処理と同様に実際の投票スキームを使用することができる。一部の例において、投票マシン270は、最初に報告されたものと異なる身体的活動又は運動にユーザが取り組んでいることを示す強力な証拠が提示される場合、運動期間中の出力を変更してもよい。
認識の投票段階の最後に、ユーザが身体的活動に取り組んでいると集約装置240が決定した各時間間隔は、あるタイプの身体的活動又は運動を表すものとして分類され得る。この情報は、レポータ260に配信されて、身体的活動のタイプに関する情報を出力し得る。
PAMD200は更に、ユーザが反復的な身体的活動又は運動を実行する反復回数を決定するように構成され得る。言い換えると、PAMD200は、ユーザによって実行される運動の反復回数をカウントすることができる。これは、ワークアウト計画を完了した後に、ユーザの活動の自動追跡についてレビューすることを可能にする。これは、PAMD200が目標の反復回数の完了を指示する場合に、リアルタイムのゴール評価も可能にし得る。カウントは、次元の低減及びピークの発見を含む方法を通して実装され得る。
一例において、カウント処理は、区分化及び認識がコントローラ220によって既に実行されていることを前提としてもよい。カウント処理は、身体的活動又は運動の最初と最後の時間の双方が決定されていることを前提としてもよい。処理は、入力が、時間間隔の分類及び開始時間と終了時間との間の生の加速度計センサデータを含むことも前提としてもよい。複数のタイプの身体的活動又は運動が存在することがあり、この場合、任意選択でジャイロスコープのセンサデータを使用して、カウントデータの精度を向上させることができる。一部の例において、カウント処理は、ユーザが反復的な身体的活動又は運動の反復を積極的に行っている間に生じることがある。一例において、ここで説明される方法は、連続するより大きな時間間隔で繰り返し用いられてもよい。一部の例において、中間のカウント結果を使用して、カウントの繰り返しの数を低減してもよい。
図6は、反復的な身体的活動又は運動の反復をカウントする例示の方法600を示す。602において、方法600は、センサアレイ(例えばセンサアレイ210)からの信号を受け取ることを含み得る。そのような信号情報は、例えばコントローラ220によって受け取られてよい。604において、方法600は、この信号を、センサアレイから受け取ったこの信号よりも少なくとも1つ少ない次元を有する、次元が低減された信号へと変換することを含み得る。606において、方法600は、次元が低減された信号のピークの数をカウントすることを含み得る。608において、方法600は、ピークの数を出力することを含み得る。
一例では、カウント方法を2つの段階に分けてもよい。第1の段階では、生のセンサデータが、コントローラ220によってセンサアレイ210から受け取られ、平滑な1次元信号へと処理される。この処理の結果、この1次元の信号は、身体的活動又は運動の反復の数と概ね同じ数のピーク又はサイクルを含み得ることになる。第2の段階は、1次元信号のピークの数をカウントすることを含む。このピークのカウントは、反復のカウントとして出力され得る。
生のセンサデータを平滑な1次元信号にする処理は、信号計算段階(signal computation stage)と呼ばれることがある。信号計算段階は、バンドパスフィルタを生のデータに適用することを含み得る。バンドパスフィルタは、高周波数のセンサノイズだけでなく、例えば重力の一定の加速度に起因する変化のような、信号内の低周波数の変化を除去するのに使用され得る。バンドパスフィルタは、反復をカウントすることに関連する周波数コンテンツを出力し得る。
信号計算段階は更に、データから平均を減算することを含んでもよい。これは、バンドパスフィルタ後に残っている信号内のいずれか残っている一定のバイアス(constant bias)を除去し得る。
信号計算段階は更に、主成分分析(PCA)をフィルタされたデータに適用することを含んでもよい。ここでのPCAの実装は、上述の区分化のためのPCAの適用と同様であるが、カウント処理のためのPCAは、固定サイズの重複区分とは対照的に、身体的活動又は運動の全体の期間について計算される。平滑な1次元信号は、フィルタされたデータが、PCAによって発見された第1の主成分上に投影されている結果であり得る。
PAMD200が、(図1に示されるように)ユーザの手首に装着されるデバイスである場合の例において、PCAの使用は、ほとんどの運動について、ユーザの腕の動きのほとんどが、単一の軸に沿った動きにより要約され得るという事実を生かしてよい。例えばショルダープレスでは、軸は垂直又は上下の軸であり得る。この軸上に信号データを投影することにより、加速度計214から受け取られる信号の次元は、3次元から1次元へと低減される。PCA投影は、信号のピークが反復に概ね対応するものであってよい。
この例のカウント方法は、次にカウント段階に進む。一部の例では、各反復は、単一の強いピークに対応することとなり、ピークのそれぞれは、同様の形状と振幅であり、比較的一定の周波数で生じる。これらの例において、強いピークをカウントすることは、任意の数の標準の信号処理技術によって達成され得る。しかしながら、必ずしも全ての信号がこれらのパラメータに適合するわけではない。反復ごとに複数のピークが存在することがあり、形状又は振幅に大きな変化があることがあり、そして、ピークは一定しない周波数で生じることがある。
したがって、信号データの広い範囲にわたってカウント精度を向上させるために、ヒューリスティック・ピークカウント方法が用いられることがある。一例において、方法は複数の段階に進む。一例において、方法は、候補ピークのセットを決定することと、局所期間予測値(local period estimate)を使用して候補ピークのセットをフィルタリングすることと、振幅統計値を使用して候補ピークのセットをフィルタリングすることと、候補ピークのセットからピークの数をカウントすることと、ピークの数を出力することとを含む。
一例において、方法は、運動の1つの反復を行うのに必要とされる最小及び最大時間の予測値を使用する。これらの値は、本明細書では、minAllowedPeriod及びmaxAllowedPeriodと呼ばれることがある。これらの値は、運動固有の基準に対するデータから推測され得る。例えばジャンピングジャックの値は、プッシュアップの値とは異なる。なぜなら、人々は、ジャンピングジャックをプッシュアップとは異なる速度で行う傾向があるからである。
カウント方法は、候補ピークのセットの計算で始まることがある。カウントされるピークの最終的なセットは、ピークのこのセットのサブセットとなり得る。候補ピークを計算するために、信号内の極大値が決定され得る。これらの極大値は、次いで振幅に基づいてソートされ得る。極大値は、最も近くの既に受け入れられた候補ピークから少なくともminAllowedPeriod秒、離れている限り、候補ピークとして受け入れられ得る。信号内の2つのピークがともに非常に近い場合(例えば20ミリ秒しか離れていない場合)、これらのうちの一方は、運動の「実際の」反復ではないことがある。この近接性の閾値は、人間が所与の運動を行うことができる、最も早い適切な速度に基づいて設定されてよい。
最小の分離を有するピークをカウントすることは、minAllowedPeriod に設定されるMINPEAKDISTANCE パラメータを有するMatlabのfindpeaks関数、又は他の等価な信号処理操作のような、標準の信号処理操作により行われ得る。この例において、これらの候補ピークは、カウント方法の次のステップへの入力である。
上記で検討したように、minAllowedPeriodは、マシン学習プロセス中にその運動について記録された最も早い反復に基づく、1つの反復を実行するのに必要な最小時間の推測値である。ほとんどの場合、ユーザが各反復に費やす実際の時間よりもかなり少ない。したがって、実際の運動の反復ごとに複数の候補ピークが存在し得る。後続のステップにおいて、各候補ピークの周囲の実際の運動期間が予測されてよく、この予測値を使用して候補ピークのセットを精査してよい。
例えば各候補ピークについて、加速度計は、ピークを中心とする時間枠内で計算され得る。この時間枠のサイズは、maxAllowedPeriod又は所定の期間(例えば9秒)のいずれか小さい方の2倍になるように設定され得る。[minAllowedPeriod,maxAllowedPeriod]の時間差の範囲内の最大加速度値が、次いで発見される。最大加速度値における時間差は、候補ピークについての運動時間の予測値となり得る。これらの予測値が計算されると、候補ピークを受け入れるかどうかを検討するときに、minAllowedPeriodが候補ピークと以前に選択されたピークとの間の最小許容距離として使用されないことがあることを除いて、上述のフィルタリング処理を繰り返してよい。むしろ、最小許容距離は、その候補ピークについて予測される時間の3/4に等しく設定され得る。この低減された候補ピークのセットは、カウント方法の次のステップへの入力を形成してよい。
次に、候補ピークのセットが、ピーク振幅に基づいてフィルタリングされ得る。候補ピークは全て、振幅及び示される40パーセンタイル値の最大ピーク(例えば10個の候補ピークが存在する場合、4番目に大きいピーク)に基づいて再びソートされ得る。このピークの振幅の半分よりも小さい振幅を有するピークは全て破棄され得る。この方法は、運動の反復が概して、高加速度の動きを伴うような大きな振幅のピークを有するべきであることを想定している。さらに、ある運動では、反復の全てのセットがほぼ同じ振幅を有するべきであることが想定されることがある。言い換えると、全てのピークが、最も大きいピークとほぼ同程度の大きさのピークであるべきである。
PCAによって見られる1次元信号のサイン(sign)は任意である。しかしながら、この問題は、幾つかの方法で対処され得る。特定の運動について、「上(up)」に確実に対応する特定の加速度計の軸が存在し、各反復がこの「上」方向に1つのピークを有することがある。例として、これは、ジャンピングジャックについて特定のセンサのセット内の「x」軸の場合である。これらの運動では、PCAの投影は、この投影における「上」軸のサインが正(positive)になるように更に操作され、この例では1次元の信号でピークをカウントすることが可能になる。コントローラ220は、ピークの数を反復の回数として指定してよく、方法は、反復の回数を出力することを更に備えてよい。
カウント方法は2回実行されてよく、1回はピークをカウントし、もう1回は谷(valley)をカウントする。一例において、方法は、候補の谷のセットを決定すること、候補の谷のセットを、局所期間予測値(local period estimate)を使用してフィルタリングすること、候補の谷のセットをフィルタリングすること、候補の谷の数を候補の谷のセットからカウントすること、谷の数をピークの数と比較すること、より大きい谷の数及びピークの数を反復の回数として指定すること、そして反復の回数を出力することを含む。
一例において、カウント方法が、ユーザが反復的な身体的活動又は運動に積極的に取り組んでいる期間に実行される場合、PCA軸が時間とともに変化し、振幅に基づく投影についての基準も時間とともにシフトし得るので、ピークをカウントする方法の出力では、あるフレームから次のフレームへと低減させることが可能である。ユーザが反復カウントの低減を混同するのを回避するため、方法は、カウントを低減することは許容しない。
一部の例では、ユーザは、目標とする反復回数を目指して、反復的な身体的活動又は運動を行っていることがある。この例では、カウント方法は、身体的活動特性に基づいて、ユーザが反復運動を行うのをやめたことを判断するステップと、カウント方法によって決定される反復回数を、目標の反復回数と比較するステップと、カウント方法によって決定された反復回数が目標数の閾値(例えば2)以内のとき、ユーザが反復運動を完了したと示すステップとを更に含んでよい。
さらに、身体的活動モニタリングデバイスは、ゲーム体験を向上させる方法の一部として用いられてもよい。これは、ユーザがゲームコンソールの体験をして、これを現実の世界まで拡張することを可能にしてもよい。ユーザは、家の中でゲームをプレイすることがあり、ゲームは、PAMDを用いる積極的なゲームコンセプトで家の外(あるいは、他の従来的ではないもの)を更に組み込むことがある。これは、ゲームコンソールの直ぐ近くの屋外でのユーザのアクションをゲームプレイの態様として最終的に使用しつつ、ユーザが実際の世界でゲームをプレイすることを可能にする。例えばユーザによって制御されるアバターやゲームのキャラクターは、ユーザが所定の時間又は距離を走る間にそのユーザによって消費されるカロリー数に基づいてより強くなることがある。
図7は、PAMDの使用によりゲーム体験を向上させる、1つの例示の方法700を示している。702において、方法700は、PAMDにおいてゲームシステムから、実行されるべき1つ以上の身体的活動の指示を受け取ることを含み得る。身体的活動は、ゲームシステムにおいてプレイされているゲームの拡張(extension)として実行され得る。例えばゲームは、ユーザに屋外で走るように言うことがあり、ユーザは、道に沿って標準の距離マーカーで、あるいはカロリー消費目標でジェム(gem)をロック解除してよく、このことは、家の中でのゲームプレイのユーザのレベルを向上させることになる。幾つかの例では、ゲームは、ユーザに所定の回数のプッシュアップを行うように言うことがあり、そのプッシュアップが行われると、ゲームプレイ内のユーザのゲームスコアを更に増加させることがある。
704において、方法700は、身体的活動モニタリングデバイスを装着しているユーザの身体的活動特性を測定することを含み得る。上述のように、PAMDは、ユーザが身体的活動又は運動に取り組んでいるときを自動的に決定するように構成され、ユーザがとっている身体的活動又は運動のタイプを自動的に決定するように更に構成され得る。これは更に、ゲームシステムが、様々な身体的活動又は運動をユーザに割り当てることを可能にする。
706において、方法700は、1つ以上の身体的活動の完了に向けたユーザの進行具合(progress)を、身体的特性に基づいて決定することを含み得る。上述のように、PAMDは、反復的な身体的活動又は運動の反復をカウントするように構成されてよく、GPS及び/又は加速度計からの信号情報を通して、ユーザが移動した距離をモニタリングするように更に構成されてもよい。これは、PAMDがユーザトラッキングメトリクスを提供し、完了に向けたユーザの進行具合を示すことを可能にし得る。
708において、方法700は、1つ以上の身体的活動の完了に向けたユーザの進行具合の指示を、ゲームデバイスに出力することを含み得る。PAMDは、ユーザが1つ以上の身体的活動を行っているとき、例えば通信サブシステム250を用いて、ゲームシステムに通信してよい。これは、ゲーム内のフィードバックが、ゲームデバイスからユーザに配信されることを可能にし得る。PAMD及び/又はゲームシステムは更に、パーソナルコンピュータ、モバイルコンピュータ又は他のデバイスとデータを同期するように構成されてもよく、これによりデータの統合及び記録を可能にする。
方法700は更に、1つ以上の身体的活動の完了に向けた進行具合によって影響されるように、ゲームのユーザ情報に指示することを含むことがある。これは、ユーザが、ゲームシステムに取り組んでいる間と、ゲームシステムの近くの屋外でPAMDを使用している間との双方においてゲームのフィードバックを受け取ることを可能にする。一例において、これは、ユーザが、ゲームスコア又はゲームプレイの他の態様に影響する成績を取得しつつ、ゲームプレイを継続するのを可能にし得る。
方法700は、身体的活動モニタリングデバイスにおいて、1つ以上の身体的活動を実行しているユーザの1つ以上の現在の生体マーカーを計算すること及び/又はユーザに1つ以上の現在の生体マーカーを示すことを更に含んでよい。PAMDは、フィットネス追跡のために、ユーザに関連するフィードバックを、心拍数及び個人的な心拍数ゾーンに関する情報、カバーされるルートを表示するGPS情報、距離、取られるステップ、運動の期間、実行される反復回数、日時、ユーザが1つ以上の身体的活動を行うことによって消費されるカロリー数及び他の関連する現在のバイオマーカーとともに与えるように構成され得る。
本開示に係るPAMDは、ユーザによって、ワークアウトを追跡し、フィットネスメトリクスを記録するのに使用され得る。さらに、PAMDは、ワークアウトを通してユーザをガイドし、ワークアウト中のユーザの進行具合をモニタするように構成され得る。言い換えると、身体的活動モニタリングデバイスは、身体トレーナとして機能し得る。
図8は、PAMDのユーザをトレーニングする方法800を示している。802において、方法800は、PAMDにおいて、複数の運動を含むワークアウト計画を受け取ることを含み得る。一例において、ユーザは、パーソナルコンピュータ、モバイルフォン又はゲームコンソール上で動作するアプリケーションで、ワークアウトをブラウズして選択することがあり、そして、そのワークアウト計画が(例えば通信サブシステム250を介して)PAMDに送信されることになる。
804において、ワークアウト計画に含まれる複数の運動のそれぞれについて、方法800は、運動をユーザに指示することを含み得る。PAMDは、ワークアウト計画を通して段階的にユーザを歩かせる情報を示すように構成される、ディスプレイサブシステム280及び/又はオーディオサブシステムを含み得る。例えばユーザは、PAMD上でワークアウトを選択し、ワークアウトを開始するよう要求することができる。PAMDは、ユーザに10回のプッシュアップと2マイルのランニング等をするように指示することができる。
806において、方法800は、上述のようにユーザによって装着されたPAMDにより、身体的活動特性を測定することを含み得る。808において、方法800は、身体的活動特性に基づいて、運動の完了に向かうユーザの進行具合に関する情報を出力することを含み得る。例えばユーザがプッシュアップを実行している間、PAMDは活動を認識し、ワークアウト内のその運動について、完了した反復回数又は残りの反復回数をカウントし得る。PAMDは、反復回数を動的に表示することができ、ユーザの心拍数や消費カロリー、ワークアウトの経過時間、そしてユーザによって現在実行されているワークアウト又は身体的活動若しくは運動に関連する他のメトリクスに関するフィードバックを表示してもよい。
ユーザが、PAMDによって指示されるとおりの運動を完了する場合、方法は、運動が完了したことをユーザに指示することを更に含んでもよい。例えばユーザが運動を完了すると、可聴アラーム又は物理的な信号により、ユーザが、その身体的活動又は運動を完了したこと、そして、ワークアウト計画における次の身体的活動又は運動に移る時間であることを指示してもよい。
810において、方法800は、ワークアウト計画が完了したかどうかを判断することを含み得る。ワークアウト計画が未完了の運動を含む場合、方法800は804に戻り、ここで方法800は次の運動をユーザに指示し得る。一例において、ディスプレイサブシステム280によって表示される情報は、次の運動をユーザに指示するように変化し得る。一部の例では、PAMDは、可聴のキューをユーザに与えてもよい。ワークアウト計画が完了した場合、PAMDは終了してよく、更にワークアウトの終了をユーザに指示してもよい。
一部の実施形態において、上述の方法及び処理は、1つ以上のコンピューティングデバイスのコンピューティングシステムに結び付けられることがある。特に、そのような及び処理は、コンピュータアプリケーションプログラム又はサービス、アプリケーションプログラミングインタフェース(API)、ライブラリ及び/又は他のコンピュータプログラム製品として実装され得る。
図2に戻ると、身体的活動モニタリングデバイス200は、コントローラ220をインスタンス化するように協働し得る論理マシン215とストレージマシン217、教師付き分類器230a、教師付き分類器230b、集約装置240、通信サブシステム250、レポータ260、投票マシン270及び/又はディスプレイサブシステム280を含む。
論理マシン215は、命令を実行するように構成される1つ以上の物理デバイスを含む。例えば論理マシンは、1つ以上のアプリケーション、サービス、プログラム、ルーチン、ライブラリ、オブジェクト、コンポーネント、データ構造又は他の論理的な構造体の一部である命令を実行するように構成され得る。そのような命令は、タスクを実行し、データタイプを実装し、1つ以上のコンポーネントの状態を変換し、技術的効果を達成し、かつ/又は他の方法で所望の結果に到達するように実装され得る。
論理マシン215は、ソフトウェア命令を実行するように構成される1つ以上のプロセッサを含み得る。あるいはまた、論理マシンは、ハードウェア又はファームウェア命令を実行するように構成される、1つ以上のハードウェア又はファームウェアの論理マシンを含んでもよい。論理マシンのプロセッサは、シングルコアであってもマルチコアであってもよく、そのプロセッサ上で実行される命令は、逐次処理、並行処理及び/又は分散処理のために構成され得る。論理マシンの個々のコンポーネントは、任意選択により、協働処理のためにリモートに配置かつ/又は構成され得る2つ以上の別個のデバイスの間で分散されてもよい。論理マシンの態様は、クラウドコンピューティング構成で構成される、リモートからアクセス可能なネットワーク化されたコンピューティングデバイスにおいて仮想化されて実行されてよい。
ストレージマシン217は、論理マシンによって実行可能な命令を保持して、本明細書で説明される方法及び処理を実装するように構成される、1つ以上の物理的なデバイスを含む。そのような方法及び処理が実装されるとき、ストレージマシン217の状態は−例えば異なるデータを保持するように−変換され得る。
ストレージマシン217は、取外し可能及び/又は組み込みデバイスを含むことがある。ストレージマシン217は、他の中でも特に、光メモリ(例えばCD、DVD、HD−DVD、Blu−Ray(登録商標)ディスク等)、半導体メモリ(例えばRAM、EPROM、EEPROM等)及び/又は磁気メモリ(例えばハードディスクドライブ、フロッピー(登録商標)ディスクドライブ、テープドライブ、MRAM等)を含んでよい。ストレージマシン217は、揮発性、非揮発性、動的、静的、読取/書込、読取専用、ランダムアクセス、逐次アクセス、位置アドレス可能、ファイルアドレス可能及び/又はコンテンツアドレス可能なデバイスを含み得る。
ストレージマシン217は、1つ以上の物理デバイスを含むことが認識されよう。しかしながら、ここで説明される命令の態様は代替的に、物理デバイスにより有限の期間の間保持されることがない、通信媒体(例えば電磁信号、光信号等)によって伝搬されてもよい。
論理マシン215及びストレージマシン217の態様は、1つ以上のハードウェア論理コンポーネントに一緒に統合されてもよい。そのようなハードウェア論理コンポーネントは、例えば特定プログラム又は特定用途向け集積回路(PASIC/ASIC)又はシステムオンチップ(SOC)を含み得る。
ディスプレイサブシステム280を使用して、ストレージマシン217により保持されるデータの視覚的表現を提示してもよい。この視覚的表現は、グラフィカルユーザインタフェース(GUI)の形をとることができる。本明細書で説明される方法及び処理が、ストレージマシンによって保持されるデータを変化させ、したがってストレージマシンの状態を変換すると、ディスプレイサブシステム280の状態は、元となるデータにおける変化を視覚的に表すように変換され得る。ディスプレイサブシステム280は、任意のタイプの技術を仮想的に使用する1つ以上のディスプレイデバイスを含み得る。そのようなディスプレイデバイスは論理マシン215及び/又はストレージマシン217と共有空間内で組み合わされてよく、あるいはそのようなディスプレイデバイスは周辺ディスプレイデバイスであってもよい。
通信サブシステム250は、PAMD200を1つ以上の他のコンピューティングデバイスと通信可能に結合するように構成され得る。通信サブシステム250は、1つ以上の異なる通信プロトコルと互換性のある有線及び/又は無線通信デバイスを含み得る。非限定的な例として、通信サブシステムは、無線電話ネットワーク経由、あるいは有線又は無線のローカル又はワイドエリアネットワーク経由の通信用に構成され得る。一部の実施形態において、通信サブシステムは、PAMD200が、インターネットのようなネットワークを介して他のデバイスへメッセージを送信し、かつ/又は他のデバイスからメッセージを受け取ることができるようにする。
PAMD200がGPS含むか、ユーザに関する生体データを収集するように構成される例において、通信サブシステム250は、ユーザに関するデータを、1つ以上の他のデバイスに伝送するように構成され得る。幾つかの例において、PAMD200及び/又は1つ以上の他のコンピューティングデバイスは、収集されて伝送され得るデータに関してユーザに通知するように構成され、PAMDがユーザに関するデータを収集、伝送又は他の方法により共有するのを許容する承諾を、ユーザが提供できるようにするよう更に構成され得る。
本明細書で説明される構成及び/又はアプローチは例示的性質であって、これらの具体的な実施形態及び実施例は、様々な変形が可能であるため、限定的な意味で解釈されるべきではないことが理解されよう。本明細書で説明される具体的なルーチン又は方法は、任意の数の処理ストラテジのうちの1つ以上を表してよい。したがって、例示及び/又は説明される様々な動作は、例示及び/又は説明されるシーケンスで実行されても、他のシーケンスで実行されても、並行に実行されてもよく、あるいは省略されてもよい。同様に上述の処理の順序も変更してよい。
本開示の主題は、本明細書で説明される様々な処理、システム及び構成、並びに他の特徴、機能、動作及び/又は特性、並びこれらのいずれか又は均等物の新規かつ非自明な組合せ及び副次的な組合せの全てを含む。

Claims (8)

  1. 身体的活動のモニタリングデバイスであって:
    ユーザが当該身体的活動のモニタリングデバイスを装着している間に、前記ユーザの身体的活動特性を測定するように構成される1つ以上のセンサを含む、センサアレイと;
    コントローラであって、
    前記センサアレイから信号情報を受け取り、
    前記信号情報を重複区分に分割し、
    各重複区分について所定の信号特徴を識別し、
    前記ユーザが重複区分の間に前記身体的活動に積極的に取り組んでいるかどうか、及び、前記重複区分の間に前記ユーザが積極的に取り組んでいる身体的活動のタイプ、を認識するようトレーニングされた教師付き分類器を使用して、各重複区分について前記所定の信号特徴を分析する、
    ように動作可能なコントローラと;
    分類される複数の重複区分によって定義される、前記ユーザが身体的活動に積極的に取り組んでいる可能性が高い時間間隔を決定するように構成される、集約装置と;
    前記ユーザが身体的活動に取り組んでいることが前記集約装置によって決定された時間間隔の間に、前記ユーザが積極的に取り組んでいる可能性の高い身体的活動のタイプを決定するように構成される、投票マシンと;
    前記身体的活動のタイプに関する情報を出力するレポータと;
    を具備する、モニタリングデバイス。
  2. 前記1つ以上のセンサは加速度計を含む、
    請求項1に記載のモニタリングデバイス。
  3. 前記信号情報は3次元の信号を含み、前記コントローラは、前記3次元のうちの2次元の信号を、1次元の信号へと次元を低減するように動作可能である、
    請求項1に記載のモニタリングデバイス。
  4. 前記教師付き分類器は、サポートベクトルマシンを含み、前記所定の信号特徴を分析するために、前記コントローラは、
    複数のユーザがある身体的活動に積極的に取り組んでいた時間間隔の間及び前記複数のユーザがある身体的活動に積極的に取り組んでいなかった時間間隔の間に、前記複数のユーザから収集されたデータで前記サポートベクトルマシンをトレーニングし、
    変換ベクトルのセットと、重み付けベクトルと、前記ユーザが身体的活動に積極的に取り組んでいることを示す閾値を生成し、
    前記所定の信号特徴に、前記変換ベクトルのセットと前記重み付けベクトルを乗算して、複数の乗算の積を取得し、
    前記乗算の積を前記閾値と比較し、
    前記閾値を超える値を、前記ユーザが身体的活動に積極的に取り組んでいる重複区分を表すものとして分類し、
    前記閾値未満の値を、前記ユーザが身体的活動に積極的に取り組んでいない重複区分を表すものとして分類し、
    前記分類された値に基づいて、前記ユーザが身体的活動に積極的に取り組んでいる可能性が高い時間間隔を表すものとして重複区分を分類する、
    ように動作可能である、請求項2に記載のモニタリングデバイス。
  5. 前記コントローラは、前記集約装置から時間間隔のセットを受け取るように更に動作可能であり、前記時間間隔のセットの間に前記ユーザが積極的に取り組んでいる身体的活動のタイプを決定するために、前記コントローラは、
    前記信号情報を重複区分に分割し、
    各重複区分について所定の信号特徴を識別し、
    前記ユーザが重複区分の間に取り組んでいる前記身体的活動のタイプを認識するようトレーニングされた教師付き分類器を使用して、各重複区分について前記所定の信号特徴を分析する
    ように動作可能である、請求項に記載のモニタリングデバイス。
  6. 前記教師付き分類器は、サポートベクトルマシンを含み、前記所定の信号特徴を分析するために、前記コントローラは、
    複数のユーザが複数のタイプの身体的活動に取り組んでいた時間間隔の間に、前記複数のユーザから収集されたデータで前記サポートベクトルマシンをトレーニングし、
    変換ベクトルのセットと、ユーザがあるタイプの身体的活動に取り組んでいることを示す重み付けベクトルとを生成し、
    前記所定の信号特徴に、前記変換ベクトルのセットと前記重み付けベクトルを乗算して、複数の乗算の積を取得し、
    前記乗算の積を、複数の所定の活動の各々を表すデータセットであって、マシン学習を通して予め定められたデータセットと比較し、
    重複区分を身体的活動のタイプを表すものとして分類する、
    ように動作可能である、請求項に記載のモニタリングデバイス。
  7. 前記コントローラは、前記ユーザがそれぞれの身体的活動を行う反復回数を決定するように更に構成される、
    請求項1に記載のモニタリングデバイス。
  8. 身体的活動をモニタリングする方法であって:
    1つ以上のセンサを含むセンサアレイで、前記1つ以上のセンサを含む身体的活動モニタリングデバイスを装着しているユーザの身体的活動特性を測定するステップと
    記センサアレイからの信号情報を重複区分に分割するステップと;
    各重複区分について所定の信号特徴を識別するステップと;
    前記ユーザが重複区分の間に前記身体的活動に積極的に取り組んでいるかどうか、及び、前記重複区分の間に前記ユーザが積極的に取り組んでいる身体的活動のタイプ、を認識するようトレーニングされた教師付き分類器を使用して、各重複区分について前記所定の信号特徴を分析するステップと;
    集約装置によって、分類される複数の重複区分によって定義される、前記ユーザが身体的活動に積極的に取り組んでいる可能性が高い時間間隔を決定するステップと;
    前記ユーザが身体的活動に取り組んでいると前記集約装置によって決定された時間間隔の間に、前記ユーザが取り組んでいる可能性が高い身体的活動のタイプを決定するステップと;
    前記身体的活動の前記タイプに関する情報を出力するステップと;
    を含む、方法。
JP2015561524A 2013-03-05 2014-03-04 身体的活動のモニタリングデバイス及びその方法 Active JP6403696B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/785,184 2013-03-05
US13/785,184 US9174084B2 (en) 2013-03-05 2013-03-05 Automatic exercise segmentation and recognition
PCT/US2014/020190 WO2014138007A1 (en) 2013-03-05 2014-03-04 Automatic exercise segmentation and recognition

Publications (3)

Publication Number Publication Date
JP2016513494A JP2016513494A (ja) 2016-05-16
JP2016513494A5 JP2016513494A5 (ja) 2017-03-30
JP6403696B2 true JP6403696B2 (ja) 2018-10-10

Family

ID=50382624

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015561524A Active JP6403696B2 (ja) 2013-03-05 2014-03-04 身体的活動のモニタリングデバイス及びその方法

Country Status (6)

Country Link
US (2) US9174084B2 (ja)
EP (1) EP2964075A1 (ja)
JP (1) JP6403696B2 (ja)
KR (1) KR102274478B1 (ja)
CN (1) CN105358046B (ja)
WO (1) WO2014138007A1 (ja)

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9339691B2 (en) 2012-01-05 2016-05-17 Icon Health & Fitness, Inc. System and method for controlling an exercise device
EP2969058B1 (en) 2013-03-14 2020-05-13 Icon Health & Fitness, Inc. Strength training apparatus with flywheel and related methods
GB2512380A (en) * 2013-03-28 2014-10-01 Caddieon Inc A System and Method for Detecting Golf Swing with a Ball Impact
WO2015100429A1 (en) 2013-12-26 2015-07-02 Icon Health & Fitness, Inc. Magnetic resistance mechanism in a cable machine
US10433612B2 (en) 2014-03-10 2019-10-08 Icon Health & Fitness, Inc. Pressure sensor to quantify work
US10426989B2 (en) 2014-06-09 2019-10-01 Icon Health & Fitness, Inc. Cable system incorporated into a treadmill
WO2015195965A1 (en) 2014-06-20 2015-12-23 Icon Health & Fitness, Inc. Post workout massage device
US10824954B1 (en) 2014-06-25 2020-11-03 Bosch Sensortec Gmbh Methods and apparatus for learning sensor data patterns of physical-training activities
US10694960B2 (en) 2014-09-29 2020-06-30 Microsoft Technology Licensing, Llc Wearable pulse pressure wave sensing device
US9848825B2 (en) 2014-09-29 2017-12-26 Microsoft Technology Licensing, Llc Wearable sensing band
GB2544941B (en) 2014-10-06 2020-11-04 Inmotion Llc Systems, devices and methods relating to motion data
JP2018506773A (ja) * 2014-12-16 2018-03-08 ソマティクス, インコーポレイテッド ジェスチャベースの行動を監視し、それに影響を与える方法およびシステム
US10391361B2 (en) 2015-02-27 2019-08-27 Icon Health & Fitness, Inc. Simulating real-world terrain on an exercise device
US20160249832A1 (en) * 2015-02-27 2016-09-01 Amiigo, Inc. Activity Classification Based on Classification of Repetition Regions
WO2016157217A2 (en) * 2015-04-01 2016-10-06 Saraogi Pratik Technological device to assist user in workouts and healthy living
KR20170020085A (ko) * 2015-08-13 2017-02-22 삼성전자주식회사 활동 정보 처리 방법 및 이를 지원하는 전자 장치
US10172541B2 (en) * 2015-09-25 2019-01-08 J-Mex Inc. Motion recognition device and method
CN105310696B (zh) * 2015-11-06 2018-06-26 中国科学院计算技术研究所 一种跌倒检测模型构建方法及相应的跌倒检测方法和装置
US11215457B2 (en) * 2015-12-01 2022-01-04 Amer Sports Digital Services Oy Thematic map based route optimization
US11144107B2 (en) 2015-12-01 2021-10-12 Amer Sports Digital Services Oy Apparatus and method for presenting thematic maps
US11137820B2 (en) 2015-12-01 2021-10-05 Amer Sports Digital Services Oy Apparatus and method for presenting thematic maps
US11210299B2 (en) 2015-12-01 2021-12-28 Amer Sports Digital Services Oy Apparatus and method for presenting thematic maps
GB2545668B (en) 2015-12-21 2020-05-20 Suunto Oy Sensor based context management
US11284807B2 (en) 2015-12-21 2022-03-29 Amer Sports Digital Services Oy Engaging exercising devices with a mobile device
DE102016015695A1 (de) 2015-12-21 2017-06-22 Suunto Oy Aktivitätsintensitätspegel-Bestimmung
DE102016015066A1 (de) 2015-12-21 2017-06-22 Suunto Oy Aktivitätsintensitätspegel-Bestimmung
US11541280B2 (en) 2015-12-21 2023-01-03 Suunto Oy Apparatus and exercising device
US11838990B2 (en) 2015-12-21 2023-12-05 Suunto Oy Communicating sensor data in wireless communication systems
US11587484B2 (en) 2015-12-21 2023-02-21 Suunto Oy Method for controlling a display
US10433768B2 (en) 2015-12-21 2019-10-08 Amer Sports Digital Services Oy Activity intensity level determination
US9870533B2 (en) * 2016-01-27 2018-01-16 Striiv, Inc. Autonomous decision logic for a wearable device
US10493349B2 (en) 2016-03-18 2019-12-03 Icon Health & Fitness, Inc. Display on exercise device
US10272317B2 (en) 2016-03-18 2019-04-30 Icon Health & Fitness, Inc. Lighted pace feature in a treadmill
US10625137B2 (en) 2016-03-18 2020-04-21 Icon Health & Fitness, Inc. Coordinated displays in an exercise device
US20180001139A1 (en) * 2016-06-29 2018-01-04 Stephanie Moyerman Accelerated pattern recognition in action sports
US10671705B2 (en) 2016-09-28 2020-06-02 Icon Health & Fitness, Inc. Customizing recipe recommendations
DE102017009171A1 (de) 2016-10-17 2018-04-19 Amer Sports Digital Services Oy Eingebettete rechenvorrichtung
US11703938B2 (en) 2016-10-17 2023-07-18 Suunto Oy Embedded computing device
US10984341B2 (en) * 2017-09-27 2021-04-20 International Business Machines Corporation Detecting complex user activities using ensemble machine learning over inertial sensors data
US10751571B2 (en) 2017-12-20 2020-08-25 Adidas Ag Automatic cycling workout detection systems and methods
CN108379816B (zh) * 2018-02-06 2019-06-18 浙江大学 一种智能拍球计数方法
CN108479042B (zh) * 2018-02-06 2019-06-18 浙江大学 一种基于音频信息的拍球计数方法
US20210228944A1 (en) 2018-07-27 2021-07-29 Tyromotion Gmbh System and method for physical training of a body part
US20220226695A1 (en) * 2019-05-28 2022-07-21 CoPilot Systems Inc. Systems and methods for workout tracking and classification
US10565894B1 (en) 2019-05-29 2020-02-18 Vignet Incorporated Systems and methods for personalized digital goal setting and intervention
CN110180158B (zh) * 2019-07-02 2021-04-23 乐跑体育互联网(武汉)有限公司 一种跑步状态识别方法、系统及终端设备
WO2021040428A1 (en) * 2019-08-29 2021-03-04 Samsung Electronics Co., Ltd. Method and system for identifying an activity of a user
IT201900019037A1 (it) * 2019-10-16 2021-04-16 St Microelectronics Srl Metodo perfezionato per rilevare un gesto di inclinazione del polso e unita' elettronica e dispositivo elettronico indossabile che implementano il medesimo
US11392195B2 (en) 2020-06-15 2022-07-19 Strongarm Technologies, Inc. Methods and apparatus for actions, activities and tasks classifications based on machine learning techniques
EP4294262A1 (en) * 2021-02-17 2023-12-27 Verily Life Sciences LLC Machine segmentation of sensor measurements and derivatives in virtual motor exams
CN115253256B (zh) * 2021-04-30 2024-02-27 安徽华米健康科技有限公司 周期性运动的周期计数方法和装置
KR102429683B1 (ko) * 2021-11-01 2022-08-09 주식회사 위니드소프트 듀얼 웨어러블 기기를 이용한 운동 분석 시스템 및 운동 분석 방법
US20230293941A1 (en) * 2022-03-21 2023-09-21 Samsung Electronics Company, Ltd. Systems and Method for Segmentation of Movement Repetitions and Extraction of Performance Metrics

Family Cites Families (52)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6171218B1 (en) 1995-06-22 2001-01-09 Michael J. Shea Exercise apparatus
US6842877B2 (en) * 1998-12-18 2005-01-11 Tangis Corporation Contextual responses based on automated learning techniques
US8956228B2 (en) 1999-12-03 2015-02-17 Nike, Inc. Game pod
US20070111858A1 (en) 2001-03-08 2007-05-17 Dugan Brian M Systems and methods for using a video game to achieve an exercise objective
US7946959B2 (en) 2002-05-30 2011-05-24 Nike, Inc. Training scripts
US7480512B2 (en) 2004-01-16 2009-01-20 Bones In Motion, Inc. Wireless device, program products and methods of using a wireless device to deliver services
US20050195094A1 (en) 2004-03-05 2005-09-08 White Russell W. System and method for utilizing a bicycle computer to monitor athletic performance
US7543330B2 (en) 2004-04-08 2009-06-02 International Business Machines Corporation Method and apparatus for governing the transfer of physiological and emotional user data
US7503476B2 (en) 2004-12-08 2009-03-17 Sun Coast Merchandise Corporation Pedometer and method of advertising
US8083589B1 (en) 2005-04-15 2011-12-27 Reference, LLC Capture and utilization of real-world data for use in gaming systems such as video games
US7827011B2 (en) * 2005-05-03 2010-11-02 Aware, Inc. Method and system for real-time signal classification
JP2007075172A (ja) 2005-09-12 2007-03-29 Sony Corp 音出力制御装置、音出力制御方法および音出力制御プログラム
US20070123754A1 (en) * 2005-11-29 2007-05-31 Cuddihy Paul E Non-encumbering, substantially continuous patient daily activity data measurement for indication of patient condition change for access by remote caregiver
DE602007001281D1 (de) * 2006-01-20 2009-07-30 Yamaha Corp Vorrichtung zur Steuerung der Wiedergabe von Musik und Vorrichtung zur Wiedergabe von Musik
JP4839853B2 (ja) * 2006-01-20 2011-12-21 ヤマハ株式会社 音楽再生制御装置及び音楽再生装置
JP4811046B2 (ja) 2006-02-17 2011-11-09 ソニー株式会社 コンテンツの再生装置、オーディオ再生機およびコンテンツの再生方法
US7771320B2 (en) 2006-09-07 2010-08-10 Nike, Inc. Athletic performance sensing and/or tracking systems and methods
US8235724B2 (en) * 2006-09-21 2012-08-07 Apple Inc. Dynamically adaptive scheduling system
US20080090703A1 (en) * 2006-10-14 2008-04-17 Outland Research, Llc Automated Personal Exercise Regimen Tracking Apparatus
US7853428B2 (en) 2007-01-11 2010-12-14 Yamaha Corporation Apparatus for displaying fitness exercise condition
FI121289B (fi) 2007-04-13 2010-09-15 Vti Technologies Oy Menetelmä ja laite liikkujan etenemisen mittaamiseksi
US8036826B2 (en) * 2007-05-18 2011-10-11 Mnt Innovations Pty Ltd Sports sensor
US8221290B2 (en) 2007-08-17 2012-07-17 Adidas International Marketing B.V. Sports electronic training system with electronic gaming features, and applications thereof
US20090075781A1 (en) 2007-09-18 2009-03-19 Sensei, Inc. System for incorporating data from biometric devices into a feedback message to a mobile device
US7988598B2 (en) 2008-07-08 2011-08-02 Michael Trzecieski Method and apparatus for interfacing between a wearable electronic device and a server and an article of fitness equipment
JP5250827B2 (ja) * 2008-09-19 2013-07-31 株式会社日立製作所 行動履歴の生成方法及び行動履歴の生成システム
GB2465824B (en) 2008-12-03 2011-04-06 James Christopher Irlam Motion analysis device for sports
US20100167801A1 (en) 2008-12-31 2010-07-01 Microsoft Corporation Kids personal health records fed into video games
GB0901020D0 (en) * 2009-01-21 2009-03-04 Birmingham City University A motion capture apparatus
US9067096B2 (en) 2009-01-30 2015-06-30 Apple Inc. Systems and methods for providing automated workout reminders
US20110054359A1 (en) 2009-02-20 2011-03-03 The Regents of the University of Colorado , a body corporate Footwear-based body weight monitor and postural allocation, physical activity classification, and energy expenditure calculator
JP5372557B2 (ja) * 2009-03-13 2013-12-18 株式会社日立製作所 知識創造行動分析システム、及び、処理装置
US8105208B2 (en) * 2009-05-18 2012-01-31 Adidas Ag Portable fitness monitoring systems with displays and applications thereof
US8200323B2 (en) 2009-05-18 2012-06-12 Adidas Ag Program products, methods, and systems for providing fitness monitoring services
US8500604B2 (en) 2009-10-17 2013-08-06 Robert Bosch Gmbh Wearable system for monitoring strength training
JP5382719B2 (ja) * 2009-12-14 2014-01-08 日本電信電話株式会社 行動・状態モニタリング方法およびプログラム
GB2492017B (en) * 2010-04-06 2017-02-22 Newhula Com Inc Virtual exerciser device
KR101125672B1 (ko) * 2010-05-20 2012-03-27 원광대학교산학협력단 운동패턴 분석방법 및 이를 이용한 운동량 산출장치
US9392941B2 (en) 2010-07-14 2016-07-19 Adidas Ag Fitness monitoring methods, systems, and program products, and applications thereof
JP5126310B2 (ja) 2010-07-22 2013-01-23 株式会社村田製作所 検査用同軸コネクタ及びレセプタクル
JP5786361B2 (ja) 2011-02-22 2015-09-30 ヤマハ株式会社 報知信号制御装置
WO2012118998A2 (en) * 2011-03-02 2012-09-07 The Regents Of The University Of California Apparatus, system, and method for detecting activities and anomalies in time series data
WO2012169003A1 (ja) * 2011-06-07 2012-12-13 株式会社日立製作所 情報処理システム及び情報処理方法
US9299036B2 (en) * 2011-08-31 2016-03-29 Striiv, Inc. Life pattern detection
WO2013033632A2 (en) * 2011-08-31 2013-03-07 Striiv, Inc. Platform mechanics
FR2981561B1 (fr) * 2011-10-21 2015-03-20 Commissariat Energie Atomique Procede de detection d'activite a capteur de mouvements, dispositif et programme d'ordinateur correspondants
US8652072B2 (en) * 2012-01-11 2014-02-18 Stimson Biokinematics, Llc Kinematic system
US9352207B2 (en) * 2012-01-19 2016-05-31 Nike, Inc. Action detection and activity classification
US20130196821A1 (en) 2012-01-31 2013-08-01 Icon Health & Fitness, Inc. Systems and Methods to Generate a Customized Workout Routine
US9606138B2 (en) * 2012-03-02 2017-03-28 Nec Corporation Motion recognition apparatus, motion recognition system, and motion recognition method
US20140074431A1 (en) * 2012-09-10 2014-03-13 Apple Inc. Wrist Pedometer Step Detection
US8670848B1 (en) 2012-09-13 2014-03-11 Mitac International Corp. Method of calculating target pace for achieving a goal on an exercise route and related portable electronic device

Also Published As

Publication number Publication date
CN105358046A (zh) 2016-02-24
KR102274478B1 (ko) 2021-07-06
KR20150123326A (ko) 2015-11-03
EP2964075A1 (en) 2016-01-13
JP2016513494A (ja) 2016-05-16
WO2014138007A1 (en) 2014-09-12
CN105358046B (zh) 2018-01-19
US20160074706A1 (en) 2016-03-17
US9174084B2 (en) 2015-11-03
US20140257533A1 (en) 2014-09-11

Similar Documents

Publication Publication Date Title
JP6403696B2 (ja) 身体的活動のモニタリングデバイス及びその方法
JP6564328B2 (ja) 身体活動監視デバイスを用いたゲームプレーの拡張
US8951165B2 (en) Personal training with physical activity monitoring device
US10802038B2 (en) Calculating pace and energy expenditure from athletic movement attributes
JP2016513999A5 (ja)
KR102151301B1 (ko) 인간 운동 활동의 유형을 결정하기 위한 방법 및 이를 구현하기 위한 장치
Novatchkov et al. Machine learning methods for the automatic evaluation of exercises on sensor-equipped weight training machines
Holatka et al. Volleyball setting technique assessment using a single point sensor
Hanada et al. BoxerSense: Punch Detection and Classification Using IMUs
Ferreira Classification of table tennis strokes using a wearable device and deep learning

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170221

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170221

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171219

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171220

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180316

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180814

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180911

R150 Certificate of patent or registration of utility model

Ref document number: 6403696

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250