JP2019534721A - 水泳分析のシステム及び方法 - Google Patents

水泳分析のシステム及び方法 Download PDF

Info

Publication number
JP2019534721A
JP2019534721A JP2019511727A JP2019511727A JP2019534721A JP 2019534721 A JP2019534721 A JP 2019534721A JP 2019511727 A JP2019511727 A JP 2019511727A JP 2019511727 A JP2019511727 A JP 2019511727A JP 2019534721 A JP2019534721 A JP 2019534721A
Authority
JP
Japan
Prior art keywords
user
wearable device
swimming
processor circuit
stroke
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019511727A
Other languages
English (en)
Other versions
JP6745980B2 (ja
Inventor
ラオ バラス ナラシンハ
ラオ バラス ナラシンハ
クレイグ エイチ マーメル
クレイグ エイチ マーメル
カルティク ジャヤラマン ラグラム
カルティク ジャヤラマン ラグラム
フン エイ ファム
フン エイ ファム
アダム エス ハウエル
アダム エス ハウエル
ジェイムズ ピー オクス
ジェイムズ ピー オクス
ヴィナイ アール マッジギ
ヴィナイ アール マッジギ
アルヴァラド アレクサンダー シング
アルヴァラド アレクサンダー シング
サニー ケイ チョウ
サニー ケイ チョウ
ウママヘシュ スリニヴァス
ウママヘシュ スリニヴァス
ロビン ティー ゲール
ロビン ティー ゲール
ロナルド ケイ ファン
ロナルド ケイ ファン
エディス マール アーノルド
エディス マール アーノルド
グネス デルヴィシュオール
グネス デルヴィシュオール
ケネス ウォーターズ
ケネス ウォーターズ
マシュー デマーズ
マシュー デマーズ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2019534721A publication Critical patent/JP2019534721A/ja
Application granted granted Critical
Publication of JP6745980B2 publication Critical patent/JP6745980B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B71/0622Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00Teaching not covered by other main groups of this subclass
    • G09B19/003Repetitive work cycles; Sequence of movements
    • G09B19/0038Sports
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0003Analysing the course of a movement or motion sequences during an exercise or trainings sequence, e.g. swing for golf or tennis
    • A63B24/0006Computerised comparison for qualitative assessment of motion sequences or the course of a movement
    • A63B2024/0012Comparing movements or motion sequences with a registered reference
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B24/00Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
    • A63B24/0062Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
    • A63B2024/0071Distinction between different activities, movements, or kind of sports performed
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B71/00Games or sports accessories not covered in groups A63B1/00 - A63B69/00
    • A63B71/06Indicating or scoring devices for games or players, or for other sports activities
    • A63B71/0619Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
    • A63B2071/0658Position or arrangement of display
    • A63B2071/0661Position or arrangement of display arranged on the user
    • A63B2071/0663Position or arrangement of display arranged on the user worn on the wrist, e.g. wrist bands
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2208/00Characteristics or parameters related to the user or player
    • A63B2208/03Characteristics or parameters related to the user or player the user being in water
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/17Counting, e.g. counting periodical movements, revolutions or cycles, or including further data processing to determine distances or speed
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/40Acceleration
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/40Acceleration
    • A63B2220/44Angular acceleration
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/62Time or time measurement used for time reference, time stamp, master time or clock signal
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/803Motion sensors
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2220/00Measuring of physical parameters relating to sporting activity
    • A63B2220/80Special sensors, transducers or devices therefor
    • A63B2220/83Special sensors, transducers or devices therefor characterised by the position of the sensor
    • A63B2220/836Sensors arranged on the body of the user
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2230/00Measuring physiological parameters of the user
    • A63B2230/04Measuring physiological parameters of the user heartbeat characteristics, e.g. ECG, blood pressure modulations
    • A63B2230/06Measuring physiological parameters of the user heartbeat characteristics, e.g. ECG, blood pressure modulations heartbeat rate only
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63BAPPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
    • A63B2244/00Sports without balls
    • A63B2244/20Swimming

Abstract

水泳セッションの間におけるユーザの動きを分析するシステム及び方法が記載される。1つ以上の動きセンサはユーザの動きデータを収集することができる。プロセッサ回路は動きデータに基づき動きの分析を行うことができる。プロセッサ回路は、ユーザの腕の振りが本当の水泳ストロークであるかどうかを決定することができる。プロセッサ回路はまた、ユーザが泳いでいるのか、それともターンしているのかを決定することができる。プロセッサ回路はまた、ユーザの水泳ストロークスタイルを分類することができる。プロセッサ回路はまた、ユーザの水泳ストローク局面を決定することができる。プロセッサ回路はまた、ユーザのストローク軌道の一貫性を決定することができる。

Description

(優先権の主張)
本出願は、2016年8月31日に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods of Arm Swing Motion Determination」と題する、米国仮特許出願第62/381,836号に対する優先権及びその利益を主張する。
本出願は、2016年8月31日に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods for Determining Orbit Consistency」と題する、米国仮特許出願第62/381,856号に対する優先権及びその利益を主張する。
本出願は、2016年8月31日に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods for Motion Determination using Likelihood Ratios」と題する、米国仮特許出願第62/381,644号に対する優先権及びその利益を主張する。
本出願は、2016年8月31日に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods of Classifying Swim Strokes」と題する、米国仮特許出願第62/381,972号に対する優先権及びその利益を主張する。
本出願は、2016年8月31日に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods of Determining Swim Stroke Phase」と題する、米国仮特許出願第62/382,006号に対する優先権及びその利益を主張する。
(関連出願の相互参照)
本出願は、_______に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods for Determining Swimming Metrics」と題する、同時係属中の米国特許出願第_______号(弁護士整理番号337722−628001)に関連する。
本出願は、_______に出願され、全体が本明細書において参照により組み込まれる、「Systems and Methods of Swimming Calorimetry」と題する、同時係属中の米国特許出願第_______号(弁護士整理番号337722−636001)に関連する。
本開示は概して水泳分析に関する。
ユーザが、腕の振りの動きを含む活動を行っている際には、ユーザの腕の伸展を測定することがしばしば必要とされる。一例として、ユーザがラップスイミングをしている際には、ユーザの腕の伸展は、小さな偶然的な腕の振りの動きと真の水泳ストロークとを区別するのを助けることができる。加えて、腕の伸展の決定は、異なる種類の水泳ストロークを分類するために用いることができる。したがって、腕の振りの動きを決定する方法及びシステムを提供することが望まれる。
更に、ユーザが複数の種類の動きを含む活動を行っている際には、動きの種類を分類することがしばしば必要とされる。一例として、ユーザがラップスイミングをしている際には、ユーザは、2つの種類の動き、すなわち泳ぎとターンとを切り替えることができる。別の例として、ユーザが走っている際には、ユーザは走りと歩きとを切り替えることができる。どの種類の動きをユーザが行っているのかを知ることは、ユーザのエネルギー消費を推定することを含む多くの適用において有用である。したがって、ユーザの動きの種類を決定する方法及びシステムを提供することが望まれる。
概して、4つの共通水泳ストロークスタイル、すなわち、バタフライ、自由形、平泳ぎ及び背泳ぎが存在する。ユーザが泳いでいる際には、ユーザは、異なる水泳ストロークスタイルのうちの任意のものを実行し、ユーザの水泳セッションの全期間を通してスタイルを変更することができる。どの種類の水泳スタイルをユーザが行っているのかを知ることは、ユーザのエネルギー消費を推定すること、ストローク計数、ラップ計数、及び距離校正を含む、多くの適用において有用である。したがって、水泳ストロークスタイルを分類する方法及びシステムを提供することが望まれる。
しかし、水泳ストロークスタイルを共通の個々の局面(例えば、グライド、プル、移行及びリカバリー)に分解しなければ、異なる水泳ストロークスタイルを分類することは困難である。ユーザが実行している水泳ストローク局面を知ることは、水泳ストロークスタイルを特定するのに役立つだけでなく、ターン検出、ラップ計数、ストローク計数、泳ぎ対非泳ぎの検出、及びユーザのストロークを理想的な局面パラメータセットと比較することによる「ストロークの良さ」の指導/測定においても有用である。したがって、水泳ストローク局面を決定する方法及びシステムを提供することが望まれる。
ユーザが泳いでいる際には、ユーザの腕の動作、又は軌道の一貫性を決定することがしばしば必要とされる。追跡すべき動作の一例は、ユーザの水泳ストロークである。例えば、理想的な状況では、自由形で泳いでいる個人はストロークのほぼ正確な複製を呈するべきである。しかし、実際には、個人がストロークを正確に繰り返す能力は多くの因子によって影響を受け得る。したがって、ユーザのストローク軌道の一貫性の測度は、ユーザの技量、効率、疲労、及び/又は健康を示唆することができる(例えば、動作を繰り返せないことは、病気又は怪我の兆候であり得る)。したがって、泳いでいる際のユーザのストローク軌道の一貫性を決定する方法及びシステムを提供することが望まれる。
本開示は、ユーザの腕の動きを決定する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、動きデータを用いて、動きデータに基づき第1の座標系において表される回転データを決定することと、プロセッサ回路によって、回転データに基づきモーメントアーム長を決定することと、プロセッサ回路によって、モーメントアーム長を閾値の長さと比較することと、プロセッサ回路によって、モーメントアーム長を閾値の長さと比較したことに基づき、ユーザの腕の振りが本当の水泳ストロークであると決定することと、プロセッサ回路によって、ユーザの腕の振りが水泳ストロークであると決定したことに応じて、ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を算出することであって、水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、プロセッサ回路によって、ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を出力することと、を含む。いくつかの実施形態では、第1の座標系はユーザデバイスに対する物体固定座標系であることができる。いくつかの実施形態では、本方法は、最小二乗方程式を解くことを含むことができる。
本開示はまた、ユーザが泳いでいると決定する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ユーザのトレーニングデータのセットを受信することと、プロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、動きデータに基づきユーザのヨー角を決定することと、プロセッサ回路によって、ヨー角に対応する尤度比の値を取得することと、プロセッサ回路によって、尤度比の値を閾値と比較することと、プロセッサ回路によって、尤度比の値を閾値と比較したことに基づき、ユーザが泳いでいると決定することと、プロセッサ回路によって、ユーザが泳いでいると決定したことに応じて、ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を算出することであって、水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、プロセッサ回路によって、ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を出力することと、を含むことができる。
本開示はまた、ユーザの水泳ストロークスタイルを分類する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、受信された動きデータに基づき基本周期を算出することと、プロセッサ回路によって、ウェアラブルデバイスの回転データを決定することであって、回転データは座標系において表される、ことと、プロセッサ回路によって、回転データから1つ以上の特徴を抽出することと、プロセッサ回路によって、1つ以上の特徴に基づきユーザの水泳ストロークスタイルを決定することと、プロセッサ回路によって、決定された水泳ストロークスタイルを出力することと、を含むことができる。いくつかの実施形態では、座標系はウェアラブルデバイスに対する物体固定座標系であることができる。いくつかの実施形態では、座標系は慣性座標系であることができる。
いくつかの実施形態では、1つ以上の特徴は、ウェアラブルデバイスの平均のクラウンの向き、ユーザの腕及び手首の回転の相関、あるいは総角速度へのウェアラブルデバイスのクラウンの周りの回転の寄与、のうちの少なくとも1つを含む。いくつかの実施形態では、1つ以上の特徴は、プル局面の間におけるウェアラブルデバイスのバンドの周りの相対的な腕の回転、ユーザのモーメントアーム、回転yに対する加速度zの比、加速度によって重み付けされた平均重力クラウン、ウェアラブルデバイスのバンドの上部の向きとウェアラブルデバイスのバンドを中心とする回転との間の相関、クラウン回転の二乗平均平方根(root mean square、RMS)、ウェアラブルデバイスのクラウンを中心とする最小回転、ウェアラブルデバイスのバンドを中心とする最大回転、又は最大回転xオーバーy、のうちの少なくとも1つを含む。
本開示はまた、ユーザの水泳ストロークの局面を決定する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、動きデータを用いて、ウェアラブルデバイスの回転データの第1のセットを決定することであって、回転データの第1のセットは第1の座標系において表される、ことと、プロセッサ回路によって、ウェアラブルデバイスの回転データの第1のセットを、第2の座標系において表される回転の第2のセットに変換することと、プロセッサ回路によって、回転データの第2のセット基づきユーザの水泳ストロークのグライド局面を決定することと、プロセッサ回路によって、回転データの第2のセットに基づきユーザの水泳ストロークの移行局面を決定することと、プロセッサ回路によって、決定されたグライド局面及び移行局面に基づきユーザの水泳ストロークのプル局面及びリカバリー局面を決定することと、プロセッサ回路によって、ユーザの水泳ストロークの決定されたグライド局面、移行局面、プル局面、及びリカバリー局面に基づきユーザの1つ以上の水泳メトリックを算出することであって、1つ以上の水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、ユーザの算出された1つ以上の水泳メトリックを出力することと、を含むことができる。いくつかの実施形態では、第1の座標系はウェアラブルデバイスに対する物体固定座標系であることができる。いくつかの実施形態では、第2の座標系は慣性座標系であることができる。
本開示はまた、ユーザのストローク軌道の一貫性を決定する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、動きデータを用いて、ユーザデバイスの回転データを決定することであって、回転データは座標系において表される、ことと、プロセッサ回路によって、回転データが第1の過去の期間内において最小分散を有する第1の方向を決定することと、プロセッサ回路によって、回転データが第2の過去の期間内において最小分散を有する第2の方向を決定することと、プロセッサ回路によって、第1の方向と第2の方向との差を決定することと、プロセッサ回路によって、第1の方向と第2の方向との差に基づきユーザのストローク軌道の一貫性を決定することと、プロセッサ回路によって、決定されたストローク軌道の一貫性を出力することと、を含むことができる。いくつかの実施形態では、座標系はユーザデバイスに対する物体固定座標系であることができる。いくつかの実施形態では、座標系は慣性座標系であることができる。
いくつかの実施形態では、本方法は、回転軸を決定することを含むことができる。いくつかの実施形態では、第1の過去の期間は実質的に10秒であることができる。いくつかの実施形態では、第2の過去の期間は実質的に3分であることができる。
本開示はまた、ユーザのストローク軌道の一貫性を決定する際のウェアラブルデバイスの精度を改善する方法に関する。いくつかの実施形態では、本方法は、ウェアラブルデバイスのプロセッサ回路によって、ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、プロセッサ回路によって、動きデータを用いて、座標系において表される回転データを決定することと、プロセッサ回路によって、回転データを用いてユーザのストローク軌道のヒストグラムを決定することと、プロセッサによって、ヒストグラムに基づきエントロピーのレベルを決定することと、プロセッサ回路によって、エントロピーの決定されたレベルに基づきユーザの軌道の一貫性のレベルを決定することと、プロセッサ回路によって、ユーザの軌道の一貫性の決定されたレベルを出力することと、を含むことができる。いくつかの実施形態では、座標系はユーザデバイスに対する物体固定座標系であることができる。いくつかの実施形態では、座標系は慣性座標系であることができる。
以下の詳細な説明及び図面から他の特徴及び利点が明らかになるであろう。
本開示の以下の詳細な説明を、添付の図面に関連して考慮しつつ参照することで、本開示の様々な目的、特徴、及び利点をより完全に理解することができる。図面において、同様の参照符号は同様の要素を特定する。
本開示のいくつかの実施形態に係るウェアラブルデバイス(又は「ユーザデバイス」)を示す。 本開示のいくつかの実施形態に係るウェアラブルデバイスのブロック図を示す。 本開示のいくつかの実施形態に係るコンパニオンデバイスを示す。 本開示のいくつかの実施形態に係る、物体固定座標系の例を示す。 本開示のいくつかの実施形態に係る、物体固定座標系の例を示す。 本開示のいくつかの実施形態に係る、物体固定座標系の例を示す。 本開示のいくつかの実施形態に係る、物体固定座標系の例を示す。 本開示のいくつかの実施形態に係る、物体固定座標系におけるウェアラブルデバイスの回転データのセットを示す。 本開示のいくつかの実施形態に係る、慣性座標系の例を示す。 本開示のいくつかの実施形態に係る、慣性座標系の例を示す。 本開示のいくつかの実施形態に係る、慣性座標系の例を示す。 本開示のいくつかの実施形態に係る、慣性座標系の例を示す。 本開示のいくつかの実施形態に係る、慣性座標系の例を示す。 本開示のいくつかの実施形態に係る、慣性座標系におけるウェアラブルデバイスの回転データのセットを示す。 本開示のいくつかの実施形態に係る、重力方向を決定する方法を示す。 本開示のいくつかの実施形態に係る、重力方向を決定する方法を示す。 本開示のいくつかの実施形態に係る、ユーザのモーメントアームを決定する方法を示す。 本開示のいくつかの実施形態に係る、モーメントアーム長の例を示す。 本開示のいくつかの実施形態に係る、物体固定座標系におけるウェアラブルデバイスの動きデータを示す。 本開示のいくつかの実施形態に係る、例示的なモーメントアームの算出を示す。 本開示のいくつかの実施形態に係る、例示的なモーメントアームの算出を示す。 本開示のいくつかの実施形態に係る、泳いでいる間のユーザの動きの種類を分類する方法を示す。 本開示のいくつかの実施形態に係る、ユーザの動きの種類を分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの動きの種類を分類する例を示す。 本開示のいくつかの実施形態に係る、ウェアラブルデバイスの1つ以上のセンサからの動き情報を受信する方法を示す。 本開示のいくつかの実施形態に係る、泳いでいる間のユーザのヨー角を示す。 本開示のいくつかの実施形態に係る、泳いでいる間のユーザの水泳ストロークスタイルを分類する方法を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストロークスタイルを分類する例を示す。 本開示のいくつかの実施形態に係る、異なる水泳ストロークスタイルの水泳ストローク局面を示す。 本開示のいくつかの実施形態に係る、異なる水泳ストロークスタイルの水泳ストローク局面を示す。 本開示のいくつかの実施形態に係る、ユーザの水泳ストローク局面を決定する方法を示す。 本開示のいくつかの実施形態に係る、異なる水泳ストローク局面を特定するグラフを示す。 本開示のいくつかの実施形態に係る、異なる水泳ストローク局面を特定するグラフを示す。 本開示のいくつかの実施形態に係る、異なる水泳ストローク局面を特定するグラフを示す。 本開示のいくつかの実施形態に係る、異なる水泳ストローク局面を特定するグラフを示す。 本開示のいくつかの実施形態に係る、ユーザの動きの種類を分類する例を示す。 本開示のいくつかの実施形態に係る、ユーザの動きの種類を分類する例を示す。 本開示のいくつかの実施形態に係る、水泳セッションの間におけるユーザのストローク軌道の一貫性を決定するプロセスを示し、本開示のいくつかの実施形態に係る、ウェアラブルデバイスの手首角度を示す。 本開示のいくつかの実施形態に係る、ユーザのストロークの軌道を示す。 本開示のいくつかの実施形態に係る、ユーザのストロークの軌道を示す。 本開示のいくつかの実施形態に係る、異なるサンプリング点におけるユーザの短期ストローク軌道の回転軸方向とユーザの長期/平均ストローク軌道の回転軸方向との継続的な差を示す。 本開示のいくつかの実施形態に係る、水泳セッションの間におけるユーザのストローク軌道の一貫性を決定するプロセスを示す。 本開示のいくつかの実施形態に係る、ユーザのストローク軌道のヒートマップを示す。
以下の説明において、本開示の完全な理解を提供するために、本開示のシステム、方法、及び媒体、並びにこうしたシステム、方法、及び媒体が動作する環境等に関し、多くの具体的な詳細が述べられている。しかし、本開示はこのような具体的な詳細がなくても実施することができ、また、当技術分野でよく知られている一定の機能は、本開示の複雑さを避けるために、詳細に説明していないということは、当業者にとっては明らかであろう。加えて、以下に提供される例は例示的であり、本開示の範囲内にある他のシステム、方法、及び媒体が存在すると考えられることは理解されよう。
本開示では、ユーザの活動中にユーザの腕の伸びを決定するように構成することができる、ウェアラブルデバイスについて説明する。ウェアラブルデバイスは、空間におけるウェアラブルデバイスの位置及び向きについてのデータを収集し、経時的なウェアラブルデバイスの位置及び向きの変化を追跡する、1つ以上の動きセンサを含むことができる。ユーザは、ウェアラブルデバイスを装着することができるので、動き情報は、ユーザの動作に関する情報を提供することができる。例えば、ユーザが水泳している場合、ユーザの腕は、典型的には特定の経路に沿って、特定の周波数で揺動する。ユーザが手首にウェアラブルデバイスを装着している場合、ウェアラブルデバイスは、ユーザの腕がある経路を移動している方法を感知することによって、ユーザがあるスタイルで水泳していることを推定することができる。ユーザが水泳するとき、ウェアラブルデバイスによって追跡することができる、かなり周期的なユーザの腕/手首の動きがある。
図1は、本開示のいくつかの実施形態による、ウェアラブルデバイス(又は「ユーザデバイス」)100の例である。いくつかの実施形態では、ウェアラブルデバイス100は、時計、及び/又は、個人の手首の周りに装着されるように構成されたフィットネスバンドなどの、任意の適切なウェアラブルデバイスとすることができる。
図2は、本開示のいくつかの実施形態による、ウェアラブルデバイス100内で見ることができる例示的な構成要素のブロック図を図示する。いくつかの実施形態では、ウェアラブルデバイス100は、メインプロセッサ210(又は「アプリケーションプロセッサ」)、動きコプロセッサ215、メモリ220、1つ以上の動きセンサ240、ディスプレイ270、インターフェース280、及び、心拍数センサ290を含むことができる。ウェアラブルデバイス100は、追加のモジュール、より少ない数のモジュール、又は、任意の適切な動作又は動作の組合せを実施する任意の他の適切なモジュールの組合せを含んでもよい。
いくつかの実施形態では、メインプロセッサ210は、1つ以上のコアを含み、様々なアプリケーション及びモジュールを実行する1つ以上のスレッドを収容することができる。ソフトウェアは、コンピュータ命令又はコンピュータコードを実行可能なメインプロセッサ210上で実行することができる。メインプロセッサ210はまた、特定用途向け集積回路(application specific integrated circuit、ASIC)、プログラマブル論理アレイ(programmable logic array、PLA)、フィールドプログラマブルゲートアレイ(field programmable gate array、FPGA)、又は任意の他の集積回路を使用したハードウェアに実装することができる。
いくつかの実施形態では、ウェアラブルデバイス100はまた、メインプロセッサ210よりも電力消費が少なくてすむ、動きコプロセッサ215を含むことができる。メインプロセッサ210は、汎用の演算及び通信のために構成されてもよいが、動きコプロセッサ215は、ウェアラブルデバイス100内の動きセンサ240、心拍数センサ290、及び他のモジュールからデータを受信して処理するといった、比較的限られたタスクのセットを実施するように構成することができる。多くの実施形態では、メインプロセッサ210は、電力を節約するために一定の時間に電源をダウンしてもよいが、動きコプロセッサ215は電源がオンのままである。これにより、動きコプロセッサ215は、「常時オン」プロセッサ(“always-on”processor、AOP)と呼ばれることがある。動きコプロセッサ215は、メインプロセッサ210の電源がオン又はオフするときに制御してもよい。
メモリ220は、非一時的なコンピュータ可読媒体、フラッシュメモリ、磁気ディスクドライブ、光学ドライブ、プログラマブル読出専用メモリ(programmable read-only memory、PROM)、読出専用メモリ(read-only memory、ROM)、又は任意の他のメモリ若しくはメモリの組合せとすることができる。メモリ220は、1つ以上のモジュール230を含むことができる。
メインプロセッサ210又は動きコプロセッサ215は、例えば図4、図11及び図12に関連して記述される方法など、本開示の中で議論される様々なステップをメインプロセッサ210又は動きコプロセッサ215に実施させるように構成された、メモリ220に格納されたモジュール230を実行するように構成することができる。
いくつかの実施形態では、ウェアラブルデバイス100は、1つ以上の動きセンサ240を含むことができる。例えば、動きセンサ240は、ジャイロスコープ250及び加速度計260を含むことができる。いくつかの実施形態では、加速度計260は、直線加速度を3次元(例えば、x軸、y軸、及びz軸)で測定する3軸加速度計とすることができる。いくつかの実施形態では、ジャイロスコープ250は、回転運動及び/又は角速度などの回転データを3次元(例えば、ヨー、ピッチ、及びロール)で測定する3軸ジャイロスコープとしてよい。いくつかの実施形態では、加速度計260は、微小電気機械システム(microelectromechanical system、MEMS)加速度計であってもよく、ジャイロスコープ250は、MEMSジャイロスコープであってもよい。ウェアラブルデバイス100のメインプロセッサ210又は動きコプロセッサ215は、ウェアラブルデバイス100の加速度、回転、位置又は向き情報を3次元空間を通して6つの自由度で追跡する1つ以上の動きセンサ240から、動き情報を受信することができる。
いくつかの実施形態では、ウェアラブルデバイス100は、加速度計260及びジャイロスコープ250の他に、他のタイプのセンサを含むことができる。例えば、ウェアラブルデバイス100は、高度計若しくは気圧計、又はGPSセンサなどの他のタイプの位置センサを含んでもよい。ウェアラブルデバイス100はまた、ディスプレイ270を含んでもよい。ディスプレイ270は、ユーザからタッチを介して入力を受けるとともに、ユーザに出力を提供するように構成された、結晶性(例えば、サファイア)又はガラスタッチスクリーンなどのスクリーンであってよい。例えば、ディスプレイ270は、現在の心拍数又は日々の平均的なエネルギー消費量を表示するように構成してもよい。ディスプレイ270は、例えば、どの情報を表示すべきか、又はユーザは、水泳セッション、ランニングセッション、重量挙げセッション、歩行セッション又はサイクリングセッションなど、身体的な活動を開始しようとしているのか(例えば、セッションの開始)それとも身体的な活動を終了しようとしているのか(例えば、セッションの終了)を選択するために、ユーザから入力を受け取る。いくつかの実施形態では、ウェアラブルデバイス100は、スピーカ(図示せず)で音声を生成するなど他の方法でユーザに出力を提示し、マイクロフォン(図示せず)を介して音声コマンドを受信するなど他の方法でユーザからの入力を受けることができる。
いくつかの実施形態では、ウェアラブルデバイス100は、インターフェース280を介して、出力をユーザに提示し、入力をユーザから受け取る構成を含む、外部装置と通信することができる。インターフェース280は、無線インターフェースであってよい。無線インターフェースは、「低エネルギーBluetooth(登録商標)」としても知られるBluetooth v4.0などの標準Bluetooth(IEEE802.15)インターフェースとすることができる。他の実施形態では、このインターフェースは、ロングタームエボリューション(Long Term Evolution、LTE)又はWi−Fi(IEEE802.11)(登録商標)プロトコルなどの、携帯電話ネットワークプロトコルにしたがって動作することができる。他の実施形態では、インターフェース280は、ヘッドホンジャック又はバスコネクタ(例えば、ライトニング、サンダーボルト、USB、等)などの有線インターフェースを含んでもよい。
ウェアラブルデバイス100は、心拍数センサ290から個人の現在の心拍数を測定することができる。心拍数センサ290はまた、所与の心拍数測定値の精度の相対尤度を示す信頼レベルを決定するように構成することができる。他の実施形態では、伝統的な心拍数モニタを使用してもよく、近接場通信方法(例えば、Bluetooth)によってウェアラブルデバイス100と通信してもよい。
ウェアラブルデバイス100は、本明細書でより詳細に記載されるように、スマートフォンなどのコンパニオンデバイス300(図3)と通信するように構成することができる。いくつかの実施形態では、ウェアラブルデバイス100は、ノートブック又はデスクトップコンピュータ、タブレット、ヘッドホン、Bluetoothヘッドセットなどの他の外部デバイスと通信するように構成することができる。
上で説明したモジュールは例であり、ウェアラブルデバイス100の実施形態は、図示していない他のモジュールを含んでもよい。例えば、ウェアラブルデバイス100のいくつかの実施形態は、充電式バッテリ(例えば、リチウムイオンバッテリ)、マイクロフォン又はマイクロフォンアレイ、1つ以上のカメラ、1つ以上のスピーカ、時計バンド、耐水性ケーシング又はコーティングなどを含むことができる。いくつかの実施形態では、ウェアラブルデバイス100内のすべてのモジュールは、電気的及び/又は機械的に共に結合することができる。いくつかの実施形態では、メインプロセッサ210は、各モジュール間の通信を調整することができる。
図3は、本発明のいくつかの実施形態によるコンパニオンデバイス300の一例を示す。ウェアラブルデバイス100は、有線又は無線通信チャネル(例えば、Bluetooth、Wi−Fiなど)を介して、コンパニオンデバイス300と通信するように構成することができる。いくつかの実施形態では、コンパニオンデバイス300は、スマートフォン、タブレットコンピュータ、又は同様なポータブルコンピューティングデバイスとすることができる。コンパニオンデバイス300は、ユーザによって携帯され、ユーザのポケット内に収容され、腕バンド又は同様のデバイスでユーザの腕に巻き付けられ、取付デバイス内に置かれ、又はウェアラブルデバイス100の通信可能範囲内に配置されてもよい。
いくつかの実施形態では、コンパニオンデバイス300は、位置センサ及び動きセンサ(図示せず)などの様々なセンサを含むことができる。コンパニオンデバイス300が、ウェアラブルデバイス100との通信に利用可能な場合には、ウェアラブルデバイス100は、コンパニオンデバイス300から追加データを受信して、そのキャリブレーション又は熱量測定プロセスを改善又は補足することができる。例えば、いくつかの実施形態では、ウェアラブルデバイス100は、GPSセンサを含んでいてもよい代替の実施形態とは逆に、GPSセンサを含んでいなくてもよい。ウェアラブルデバイス100が、GPSセンサを含んでいなくてもよい場合には、コンパニオンデバイス300のGPSセンサがGPS位置情報を収集し、ウェアラブルデバイス100が、コンパニオンデバイス300からインターフェース280(図2)を介して、GPS位置情報を受信することができる。
別の例では、ウェアラブルデバイス100は、高度計又は気圧計を含むことができる代替の実施形態とは逆に、高度計又は気圧計を含んでいなくてもよい。ウェアラブルデバイス100が、高度計又は気圧計を含んでいなくてもよい場合には、コンパニオンデバイス300の高度計又は気圧計が高度又は相対高度情報を収集し、ウェアラブルデバイス100が、コンパニオンデバイス300からインターフェース280(図2)を介して、高度又は相対高度情報を受信することができる。
別の例では、ウェアラブルデバイス100は、コンパニオンデバイス300から動き情報を受信することができる。ウェアラブルデバイス100は、コンパニオンデバイス300からの動き情報を、ウェアラブルデバイス100の1つ以上の動きセンサ240からの動き情報と比較することができる。加速度計260及び/又はジャイロスコープ250からのデータ等の動き情報は、その品質を向上させるために(例えば、高域、低域、帯域通過、又は帯域消去フィルタによって)フィルタリングしてもよい。例えば、低域フィルタを使用して、一部の周囲ノイズを除去することができる。
ウェアラブルデバイス100は、感知及び収集された動き情報を使用して、ユーザの活動を予測することができる。活動の例としては、歩行、走行、サイクリング、水泳、重量挙げなどが挙げられるが、これだけには限定されない。ウェアラブルデバイス100は、ユーザが静止しているとき(例えば、就寝、着座、静止状態、運転、又は車両の制御)にも、予測又は検出することができる。ウェアラブルデバイス100は、いくつかの実施形態では、コンパニオンデバイスからの動き情報を含む様々な動き情報を使用することができる。
ウェアラブルデバイス100は、様々なヒューリスティック、アルゴリズム、又は他の技術を使用して、ユーザの活動を予測することができる。ウェアラブルデバイス100はまた、1つの特定の予測(例えば、ユーザが水泳している尤度90%)、又は複数の予測(例えば、ユーザが水泳している尤度60%及びユーザが非水泳活動を行っている尤度40%)に関連付けられた信頼水準(例えば、尤度率、精度、等)を評価することができる。
デバイスの動きを特徴付ける際に考慮するのに役立つ複数の参照フレーム、例えば、身体固定参照フレーム及び慣性参照フレームがある。これら参照フレーム間の切り替えは、回転、又は一連の回転を行うことにより達成することができる。動きセンサによって収集されている大部分のデータは、身体固定参照フレーム内にあるので、そのデータを使用して水泳ストロークをカウントするために、データは身体固定参照フレームから慣性フレームへ変換される。
図4Aは、本開示のいくつかの実施形態による、身体固定参照フレーム400の例を示す。図4Aにおいて、身体固定参照フレーム400の回転軸は、ウェアラブルデバイス100に対するものである。例えば、z軸は、ウェアラブルデバイス100の表示面160に対して垂直である。x軸及びy軸は、3軸が相互に直交する限り、相対的に任意に選択することができる。図4Aにおいて、x軸は、ウェアラブルデバイス100のクラウン120によって示される方向と平行であり、y軸は、ウェアラブルデバイス100のバンド140の方向と平行である(ウェアラブルデバイス100のクラウン120によって示される方向は、ウェアラブルデバイス100のバンド140の方向に垂直であると仮定する)。
図4B〜図4Dは、本開示のいくつかの実施形態による、身体固定参照フレーム400における1つ以上の向きを表現する例を示す。図4Bにおいて、向き/方向410は、正のx軸に対して角度(φ)402、正のy軸に対して角度(θ)404、正のz軸に対して角度(Ψ)406を有する。方向410は、身体固定参照フレーム400において、[cos(φ),cos(θ),cos(Ψ)]と表現することができるが、これは、3次元回転データの第1のセットの非限定的な例/フォーマットである。例えば、図4Bの方向420は、正のx軸と平行で、正のx軸を指し示しており、そのため、方向420と正のx軸との間の角度(φ)は0度であり、方向420と正のy軸との間の角度(θ)は90度、方向420と正のz軸との間の角度(Ψ)は90度である。したがって、方向420は[1,0,0]である[cos(0),cos(90),cos(90)]として表現することができる。別の例として、図4Bの方向430は、正のz軸と平行で、正のz軸を指し示しており、そのため、方向430と正のx軸との間の角度(φ)は90度であり、方向430と正のy軸との間の角度(θ)は90度、方向430と正のz軸との間の角度(Ψ)は0度である。したがって、方向430は[0,0,1]である[cos(90),cos(90),cos(0)]として表現することができる。更に別の例として、方向440は、図4Bの重力の方向を表し、負のy軸と平行で、負のy軸を指し示しており、そのため、方向440と正のx軸との間の角度(φ)は90度であり、方向440と正のy軸との間の角度(θ)は180度、方向440と正のz軸との間の角度(Ψ)は90度である。したがって、方向440は[0,−1,0]である[cos(90),cos(180),cos(90)]として表現することができる。
図4Cにおいて、ウェアラブルデバイス100は垂直に保持されている。先に議論されているように、x軸はクラウン120によって示された方向と平行で、y軸はバンド140と平行で、z軸は表示面160に垂直である。図4Cの方向450は、クラウン120によって示された方向を表し、そのため、方向450と正のx軸との間の角度(φ)は0度、方向450と正のy軸との間の角度(θ)は90度、方向450と正のz軸との間の角度(Ψ)は90度である。したがって、方向450は[1,0,0]である[cos(0),cos(90),cos(90)]として表現することができる。別の例として、方向440は、図4Cの重力の方向を表し、負のy軸と平行で、負のy軸を指し示しており、そのため、方向440と正のx軸との間の角度(φ)は90度であり、方向440と正のy軸との間の角度(θ)は180度、方向440と正のz軸との間の角度(Ψ)は90度である。したがって、図4Cの方向440は[0,−1,0]である[cos(90),cos(180),cos(90)]として表現することができる。
図4Dにおいて、ウェアラブルデバイス100は、図4Cに比較して時計回りに45度回転している。先に議論されているように、x軸はクラウン120によって示された方向と平行で、y軸はバンド140と平行で、z軸は表示面160に垂直である。図4Dの方向450は、クラウン120によって示された方向を表し、そのため、方向450と正のx軸との間の角度(φ)は0度、方向450と正のy軸との間の角度(θ)は90度、方向450と正のz軸との間の角度(Ψ)は90度である。したがって、方向450は[1,0,0]である[cos(0),cos(90),cos(90)]として表現することができる。別の例として、方向440は、図4Dの重力の方向を表す。方向440と正のx軸との間の角度(φ)は45度、方向440と正のy軸との間の角度(θ)は135度、方向440と正のz軸との間の角度(Ψ)は90度である。したがって、図5Dの方向440は[0.707,−0.707,0]である[cos(45),cos(135),cos(0)]として表現することができる。
方向450の表現は、ウェアラブルデバイス100を回転させたとしても、図4C及び図4Dにおいて同じであることに留意されたい。これは、身体固定参照フレーム400は、ウェアラブルデバイス100に対して常に固定されているからである。その結果、ウェアラブルデバイス100の位置が変化するとき、身体固定参照フレーム400の3つの軸、並びに方向450も変化するが、方向450と3つの軸の間の相対位置はそのままで変化しない。一方、重力方向440は、「絶対」感覚では変化しないが、ウェアラブルデバイス100が位置を変えたときには、ウェアラブルデバイス100に対してその位置が変化する。このため、ウェアラブルデバイス100が位置を変えるとき、重力方向440の表現は、身体固定参照フレーム400内では固定したままではない。
図5は、本開示のいくつかの実施形態による、ウェアラブルデバイス100の回転データの第1のセットを示す。具体的には、図5は、身体固定参照フレーム400における重力の推定を示している。x軸はcos(φ)を示し、ここで、φは、身体固定参照フレーム400における重力と正のx軸の間の角度である。y軸はcos(θ)を示し、ここで、θは、身体固定参照フレーム400における重力と正のy軸の間の角度である。z軸はcos(ψ)示し、ここで、ψは、身体固定参照フレーム400における重力と正のz軸の間の角度である。例えば、ウェアラブルデバイス100が上空に向かって上向きで、表示面が地面と平行なときには、重力方向は[0,0,−1]として表すことができる。別の例として、クラウンが地面に向けて指し示された場合には、重力方向は[1,0,0]として表すことができる。身体固定参照フレームにおける重力の推定は、ウェアラブルデバイス100がピッチ及び/又はロール運動をするとき、指示をする助けとなる。例えば、上で論じたように、クラウンが地面の方を指し示すような位置にユーザの手首があるとき、重力方向は[1,0,0]である。次いで、ユーザが、自分の手首を上に90度回すと、ウェアラブルデバイス100の表示面が上空に向かって上を向き、表示面が地面と平行になる。そして、重力方向は[0,0,−1]として表される。次いで、ユーザが、自分の手首を縦方向に上へ90度放ると、ウェアラブルデバイス100のクラウンが上空に向かって上を向き、重力方向は[−0,0,0]として表される。これらの例は、身体固定参照フレーム400における重力方向は、ピッチ及び/又はロール運動に応答して変化しうることを示す。いくつかの実施形態では、身体固定参照フレーム400における重力推定を加速度計260と共に使用して、重力を推定することができる。しかし、身体固定参照フレーム400における重力方向は、ヨー運動に応答して変化することはない。例えば、ウェアラブルデバイス100が上空に向かって上を向き、表示面が地面と平行な場合には、重力方向は[0,0,−1]として表示される。次いで、ユーザが地平面に沿ってヨー運動すると、重力方向は[0,0,−1]のままである。また、上で論じたように、ウェアラブルデバイス100は、身体固定参照フレーム400と同じように回転するので、ウェアラブルデバイス100及びその構成部品の方向は固定される。例えば、クラウンが、上、真っ直ぐ、又は下を指し示しているかどうかに関わらず、クラウンの方向は常に、身体固定参照フレーム400において[1,0,0]として表される。したがって、いくつかの実施形態では、外部の参照に対して、ウェアラブルデバイス100の動作をより容易に示すために、身体固定ではない参照フレーム中のウェアラブルデバイス100の位置を表すのがより適切である。
図6は、本開示のいくつかの実施形態による、慣性参照フレーム600を示す。図6において、z軸(又はヨー軸)は重力の方向に基づく。x軸(又はロール軸)及びy軸(又はピッチ軸)は、3軸が相互に直交する限り相対的に任意に選択可能である。
図7A〜図7Dは、本開示のいくつかの実施形態による慣性参照フレーム700の一例を示す。図7Aは、ユーザが水泳している状況における慣性参照フレーム700を図示する。図7Aにおいて、ユーザはウェアラブルデバイス100を装着している。しかし、慣性参照フレームのz軸(又はヨー軸)は、ウェアラブルデバイスそれ自体よりも重力の方向に基づく。更に、ユーザがラップスイミングすることを想定すると、x軸(又はロール軸)は、ラップの方向に実質的に平行であり、y軸(又はピッチ軸)は、他の2つの軸に直交する。いくつかの実施形態では、x軸(又はロール軸)及びy軸(又はピッチ軸)は、3軸が相互に直交する限り相対的に任意に選択可能である。図7Aにおいて、z軸はまた、任意のヨー運動がz軸の周りを回転するのでヨー軸とも呼ばれる。同様に、x軸はまた、任意のロール運動がx軸の周りを回転するのでロール軸とも呼ばれる。また、y軸は、任意のピッチ運動がy軸の周りを回転するのでピッチ軸とも呼ばれる。身体固定参照フレーム400における3軸と慣性参照フレーム700における3軸との差を知ることにより、身体固定参照フレーム400内で表現された回転データは、Sabatiniに議論されるような当業者によって認められた技術を使用して、慣性参照フレーム700内で表現される技術に変換することができる。
図7Bは、ウェアラブルデバイス100が、慣性参照フレーム700に対して回転運動を行うことができることを示している。図7Bにおいて、向き/方向710は、正のx軸に対して角度(φ)702、正のy軸に対して角度(θ)704、及び正のz軸に対して角度(ψ)706を有する。方向710は、身体固定参照フレーム700において[cos(φ),cos(θ),cos(ψ)]として表すことができるが、これは、回転データの第2のセットの非限定的な例/フォーマットである。
図7C及び図7Dは、図4C及び図4Dにおける同一の向きが、慣性参照フレーム700においていかに異なって表現できるかを示す。図7Cにおいて、ウェアラブルデバイス100は、図4Cと同様に垂直に保持されている。先に論じたように、z軸は、慣性参照フレーム700において重力に基づく。図7Cにおいて、正のz軸が、重力の正反対の位置として選択され、x軸はz軸に垂直で水平に右を指し、y軸はx軸及びy軸の両方に垂直で図7Cから飛び出すように指す。図7Cの方向450は、クラウン120によって示された方向を表し、そのため、方向450と正のx軸との間の角度(φ)は0度、方向450と正のy軸との間の角度(θ)は90度、方向450と正のz軸との間の角度(ψ)は90度である。したがって、方向450は[1,0,0]である[cos(0),cos(90),cos(90)]として表現することができる。別の例として、方向440は、図7Cの重力の方向を表し、負のz軸と平行で、負のz軸を指し示しており、そのため、方向440と正のx軸との間の角度(φ)は90度であり、方向440と正のy軸との間の角度(θ)は90度、方向440と正のz軸との間の角度(ψ)は180度である。したがって、図7Cの方向440は[1,0,−0]である[cos(90),cos(90),cos(180)]として表現することができる。
図7Dにおいて、ウェアラブルデバイス100を図7Cに比較して時計回りに45度回転させる。3つの軸は重力に基づくので、それらは図7Cと同じように残すことができる。図7Dの方向450は、クラウン120によって示された方向を表し、方向450と正のx軸との間の角度(φ)は45度、方向450と正のy軸との間の角度(θ)は90度、方向450と正のz軸との間の角度(ψ)は135度である。したがって、方向450は[0.707,0,−0.707]である[cos(45),cos(90),cos(135)]として表現することができる。別の例として、方向440は、図7Dの重力の方向を表す。方向440と正のx軸との間の角度(φ)は90度、方向440と正のy軸との間の角度(θ)は90度、方向440と正のz軸との間の角度(ψ)は180度である。したがって、図7Dの方向440は[0,0,−1]である[cos(90),cos(90),cos(180)]として表現することができる。
ここで、重力方向440の表現は、たとえウェアラブルデバイス100が回転したとしても、図7C及び図7Dと同じであることに留意されたい。これは、慣性参照フレーム700は、重力に対して常に固定されるからである。この結果、ウェアラブルデバイス100の位置が変化した場合には、慣性参照フレーム700の3つの軸が一緒に移動することがない。一方、方向450は、3つの軸に対して移動するので、方向450の表現は、身体固定参照フレーム400内で固定されていても、慣性参照フレーム400内では変更することができる。
図8は、本開示のいくつかの実施形態による、ウェアラブルデバイス100の回転データの第1のセットを示す。具体的には、図8は、ユーザがラップスイミングしている間の、慣性参照フレーム700におけるクラウン方向の推定を示す。x軸はcos(φ)を示し、ここで、φは、慣性参照フレーム700におけるクラウン方向と正のx軸の間の角度である。y軸はcos(θ)を示し、ここで、θは、慣性参照フレーム700におけるクラウン方向と正のy軸の間の角度である。z軸はcos(ψ)示し、ここで、ψは、慣性参照フレーム700におけるクラウン方向と正のz軸の間の角度である。例えば、ウェアラブルデバイス100が上空に向かって上向きで、表示面が地面と平行で、クラウンがx軸の方を向いているときには、クラウン方向は[1,0,0]として表すことができる。ウェアラブルデバイス100がヨー運動を行い、クラウンが負のx軸の方を向く場合には、クラウン方向は[−1,0,0]として表すことができる。別の例として、クラウンが地面の方を指し示す場合、クラウン方向は[0,0,1]として表すことができる。ユーザがターンする度に、慣性参照フレーム700のクラウン方向と正のx軸の間の角度φが、実質的に180度程度変化するので、図8の回転データは,2つのクラスタ802及び804に大きく分割される。したがって、図8に示す回転データは、データをクラスタ802からクラスタ804へ、又はその逆に切り替えるときに、ウェアラブルデバイス100が、切り替え時に定常的な状態変化を受けることを示すことができる。
図9は、本開示のいくつかの実施形態による、重力の方向を決定する方法900を示す。重力の方向を知ることは、ウェアラブルデバイス100の、回転データなどの動き情報のための参照フレームを決定するために重要である。いくつかの実施形態では、方法900は、例えば、ステップを組み合わせ、分割、再配置、変更、追加、及び/又は除去することによって変更することができる。重力判定方法900はステップ910から開始することができる。
ステップ910において、動き情報は、ユーザのウェアラブルデバイス(例えば、ウェアラブルデバイス100)上の1つ以上の動きセンサ240から受信することができる。いくつかの実施形態では、動き情報は、ジャイロスコープ250などの1つ以上のセンサ240からの3次元回転情報、及び加速度計260などの1つ以上のセンサ240からの3次元加速度情報を含んでもよい。
ステップ920において、ウェアラブルデバイス100の角速度を、身体固定参照フレーム又は慣性参照フレームなどの参照フレームに対して決定してもよい。
ステップ930において、重力判定方法900は、ステップ920で決定されたウェアラブルデバイス100の角速度が閾値を下回るか否かを判定してもよい。例えば、閾値は、概ね、1秒当たり0.05ラジアン、0.2ラジアン、又は0.5ラジアン等としてもよい。角速度が閾値を超えた場合(例えば、ユーザが運動をしているとき)は、重力判定方法900はステップ910に戻ってもよい。いくつかの実施形態では、重力判定方法900は先に進む前に、ステップ910である時間(例えば、1秒、5秒、1分など)の間、休止又は待機してもよい。
角速度が閾値を下回る場合は(例えば、ユーザが相対的に静止しているとき)、重力判定方法900は、ステップ940に進むことができる。いくつかの実施形態では、ステップ940に進む前に、ウェアラブルデバイス100はまた、ステップ930で、ウェアラブルデバイス100に作用する力の大きさが、通常の重力(1G)とほぼ等しいかどうかを判定する。大きさが概ね通常の大きさではない場合、重力判定方法900はまたブロック910に戻ることができる。角速度が閾値を下回るとき(例えば、ユーザが相対的には静止しているとき)に重力の方向を推定することは、そうした場合には、ウェアラブルデバイス100は、他の動作による加速度による干渉又は混乱を受けることがないため、重要である。仮に、ウェアラブルデバイス100がx軸に沿って1gの加速度を有する場合、ウェアラブルデバイス100は重力方向を誤ってもよい。
ステップ940において、ウェアラブルデバイス100に対する重力の方向を推定してもよい。例えば、いくつかの実施形態では、ウェアラブルデバイス100が比較的静止して保持されるとき、ウェアラブルデバイス100内の加速度計260は、主として重力に起因する、ウェアラブルデバイス100に作用する力の方向についてのデータを提供することができる。いくつかの実施形態では、重力の方向の推定を一層改善するために、重力判定方法900は、ウェアラブルデバイス100を装着したユーザが、加速しているか(例えば、速度を上げる又は速度を落とす)又は概ね一定の速度で移動しているかを判定することができる。
いくつかの実施形態では、重力判定方法900は、推定された重力方向を出力した後で終了することができる。他の実施形態では、重力判定方法900は、ウェアラブルデバイスに対する重力方向を推定する方法を、洗練又は繰り返すために、ステップ910に戻ってもよい。
図10は、本開示のいくつかの実施形態による、重力方向を判定するための方法1000を示す。いくつかの実施形態では、方法1000は、ステップを組み合わせ、分割、再配置、変更、追加、及び/又は除去することによって変更することができる。重力判定方法1000は、ユーザがコンパニオンデバイス300を有する場合に使用することができ、ステップ1010から開始することができる。
ステップ1010において、重力判定方法1000は、コンパニオンデバイス(例えば、コンパニオンデバイス300)の存在を周期的に又は連続的にチェックすることができる。例えば、いくつかの実施形態では、ウェアラブルデバイス100は、コンパニオンデバイス300との間で、接続(例えば、Bluetooth、IEEE802.11、Wi−Fi、又は他の無線又は有線通信チャネル)が確立されたか、又は確立可能化どうか判定することができる。コンパニオンデバイス300が存在する場合、重力判定方法1000は、ステップ1020に進んでよい。
ステップ1020において、コンパニオンデバイス300に対する重力の方向を推定することができる。いくつかの実施形態では、重力判定方法1000とは対照的に、コンパニオンデバイス300の角速度のほとんど又はすべての回転が、重力の方向に直交するので、コンパニオンデバイス300の角速度が、閾値を下回るかどうかチェックすることは必要ないものとしてよい。
ステップ1030において、コンパニオンデバイス300に対する重力の方向を出力してもよい。いくつかの実施形態では、コンパニオンデバイス300に対する重力方向は、ウェアラブルデバイス100に対する重力の方向と組み合わされてもよいし、又は比較されてもよい。いくつかの実施形態では、コンパニオンデバイス300は更に、コンパニオンデバイスに対する重力の方向に関する回転速度を決定し、コンパニオンデバイス300に対する重力の方向に代えて、又はそれに加えて回転速度を出力することができる。
いくつかの実施形態では、重力判定方法1000は、推定された重力の方向を出力した後で終了することができる。他の実施形態では、重力判定方法1000は、ウェアラブルデバイスに対する重力の方向を推定する方法を洗練又は繰り返すために、ステップ1010に戻ることができる。
腕の振りの動きの判定
図11は、本開示のいくつかの実施形態による、ユーザの腕の振りの動きが、真正なスイムストロークか、又は偶然の動きかを判定するステップ1100を図示した流れ図を示す。いくつかの実施形態では、本方法は、1つ以上の動きセンサ240から動き情報を受信するステップ(ステップ1110)を含む。いくつかの実施形態では、ステップ1100は、例えば、ステップを組み合わせ、分割、再配置、変更、追加、及び/又は除去することによって変更することができる。
ステップ1110において、ウェアラブルデバイス100は、3次元動き情報を動きセンサ240から受信する。ステップ1120において、ウェアラブルデバイス100は、ウェアラブルデバイス100の3次元回転データの第1のセットを決定する。回転データは、角速度及び角加速度を含むことができる。
角速度は下記の式1によって表すことができる。
ω=[rad/s] 式1
角加速度は下記の式2によって表すことができる。
α=Δω/Δt 式2
いくつかの実施形態では、回転データはジャイロスコープ250から受信され、ウェアラブルデバイス100に対して身体固定参照フレーム内で表される。
動き情報はまた、3次元までのウェアラブルデバイス100の加速度測定値を含むことができる。加速度測定値は、半径方向及び接線方向加速度の組合せとすることができ、下記の式3で表現することができる。
A=ω×(ω×r)+(α×r)式3
r=モーメントアーム
いくつかの実施形態では、加速度測定は加速度計260から受信され、ウェアラブルデバイス100に対して身体固定参照フレーム内で表される。
ステップ1130において、ジャイロスコープから受信した回転データ及び加速度計から受信した加速度測定値に基づいて、モーメントアームを計算することができる。いくつかの実施形態では、例えば図12に示すように、ウェアラブルデバイス1225によって計算されたモーメントアーム1215は、肩関節1210からの腕の伸張部を表す。図12に示すように、モーメントアーム1215は、肩関節1210と肩関節の力線1220との間への垂直距離である。力線1220は、ユーザの肩関節の周りの腕の振りに対して接線の方向にあり、常に方向が変化する。
一実施形態では、モーメントアームは、式3に示すように、a=ω×(ω×r)+(α×r)の外積の行列表現を取ることによって計算される。以下は、モーメントアームrを求めるための加速度(a)の外積の計算である。
a=WWr(ここでWrは(ω×r)の外積を表す)+Ur(ここでUrは(α×r)の外積を表す;
a=(WW+U)r
例えば、Moore Penrose pseudoinverseを使用して、rの最小二乗法を解くことによりrの値を求めることができる。
モーメントアームは、加速度計及びジャイロスコープの測定値のいくつかのサンプルを取り出し、平均値を求めることにより正規化(N)することができる。これは下記の式で表すことができる:
N=(WW+U)N
N=(WW+U)N\aN
計算されたモーメントアーム長は、ユーザの腕の伸びを表し、水泳者の腕の振りの動きが偶然か真正な水泳ストロークであるかを判定するために使用することができる。例えば、ユーザの偶然的な腕の振りは、一般的にユーザの肘関節又は手首を中心に回転するが、ユーザの真正な水泳ストロークは一般的にユーザの肩を中心に回転する。このため、偶然的な腕の振りでは、真正な水泳ストロークよりも短いモーメントアーム長を有する。その結果、モーメントアーム長が長いほど、ユーザの腕の振りの動きが真正な水泳ストロークに近くなる。
ステップ1140において、計算されたモーメントアームに基づいて、ウェアラブルデバイスは、水泳者の腕の振りの動きは正しい水泳ストロークであったかどうか判定し、及び/又はその腕の振りの動きを特定のタイプの水泳ストロークとして分類する。水泳ストロークのタイプとしては、自由形、バタフライ、背泳、及び平泳ぎがある。一実施形態では、ウェアラブルデバイスは、モーメントアーム長の最小閾値を正しい水泳ストロークと関連付けたトレーニングデータを記憶する。ウェアラブルデバイスは、計算したモーメントアーム長を記憶した閾値と比較し、計算したアームの長さが記憶している閾値よりも長い場合には、ユーザの腕の振りの動きを真の回転と判定する。トレーニングデータは、性別、年齢、若しくは水泳のレベル、及び/又は他の適切な特性に基づいて、特定の水泳者用にカスタマイズすることができる。いくつかの実施形態では、トレーニングデータのセットは、水泳者のトレーニングセッションから見ることができる。
例えば、5cm未満のモーメントアームは、ストロークとは言えず、25cmよりも大きなモーメントアームはまさにストロークである。しかし、5〜25cmの間の腕の振りは、ストロークと言えようが、様々なレベルの信頼度が各長さに関連付けられることになる。
図13は、本開示のいくつかの実施形態による、適切な時間、例えば60秒間にわたる、ウェアラブルデバイス100の加速度データを含む回転データの第1のセットを示す。具体的には、図13は、水泳セッション中にユーザの手首に装着されたウェアラブルデバイス100の回転データの第1のセットを示し、この回転データの第1のセットは、図4A〜図4Dに関連して記述した身体固定参照フレーム内で表現される。x軸はWW+uを表し、rad2/s2で測定され、y軸は重力で正規化された加速度を表し、m/s2で測定される。
時間周期はユーザが設定することも、固定することもできる。いくつかの実施形態では、この時間周期はユーザがいくつかストロークを完了するのに必要な周期に比例する。ウェアラブルデバイス100は、ウェアラブルデバイス100によって検出されたユーザのストロークの平均的な持続時間に基づいて、時間周期を動的に設定することができる。例えば、ユーザが1ストロークを終了するのに3秒かかるとすると、時間周期は9秒に設定することができる。いくつかの実施形態では、ウェアラブルデバイス100は、サブストローク測定(例えば、250ms)又はマルチストローク測定(例えば、6〜9秒)を行うことができる。サブストローク測定は、近実時間測定値を入手するのに役立つが、ノイズの多い推定値となる可能性がある。一方、マルチストローク推定により、「平均的な」モーメントアームの推定値が入手できる。
図13に示す実施形態では、加速度データを含む回転データが、2つの腕の振りのセッションから測定される。腕の振りの一方のセッションは、グラフの上部に見えるドットのクラスタ1310によって示されるように、肩関節を中心に回転する。他方の腕の振りのセッションは、グラフの下部に見えるドットのクラスタ1320によって示されるように、肘関節を中心に回転する。肩関節を中心とする腕の振りから測定されるデータの勾配は、肘関節を中心とする腕の振りから測定されるデータの勾配よりも急である。本実施形態では、勾配の険しさはモーメントアーム長に対応する。換言すると、勾配が急になるほどモーメントアーム長が長くなる。典型的には、水泳ストロークの場合、モーメントアーム長は、肘関節よりも肩関節からの方が(ドットクラスタ1310のより急な勾配によって図13に示すように)より長い。腕の振りの回転が肩付近でのみ発生すると、モーメントアームは手首から肩にかけて算出される。腕の振りの回転が肘付近でのみ発生すると、モーメントアームは手首から肘にかけて算出される。しかしながら、腕の振りの動きは、肩回転と手首回転の組合せであるとすれば、この組み合わされた動きは、その組み合わされた動きのモーメントアームの近似値を提供することができる。
一実施形態では、ウェアラブルデバイス100は、異なる水泳ストロークタイプのそれぞれの特性であるモーメントアーム長を関連付けるトレーニングデータを記憶する。ウェアラブルデバイスは、計算されたモーメントアーム長を特徴的なモーメントアーム長の値と比較して、水泳ストロークのタイプを判定することができる。異なる水泳ストロークタイプのそれぞれの特徴的なモーメントアーム長の値は、性別、年齢、水泳のレベル、及び/又は他の適切な特性に基づいて、特定の水泳者用にカスタマイズすることができる。いくつかの実施形態では、トレーニングデータのセットは、水泳者のトレーニングセッションから見ることができる。図14Aは、平泳ぎに特徴的な、例示的なモーメントアームの測定値を示す。図14Bは、自由形に特徴的な、例示的なモーメントアームの測定値を示す。
いくつかの実施形態では、ウェアラブルデバイス100は、ジャイロスコープからの回転データ及び加速度計からの加速度測定値を含む、動きセンサからの動きデータの第1のセットを、動き情報の第2のセットに変換する。しかし、身体固定参照フレーム内で表現された動き情報の1つの欠点は、身体固定参照フレームがウェアラブルデバイス100に対するものであり、ウェアラブルデバイス100もまた水泳中に変化するため、身体固定参照フレームが、ユーザの腕/手首の動作、及び/又は位置を容易に示すことができないことである。
この問題に対処するために、ウェアラブルデバイス100は、身体固定参照フレーム内の動きデータを、「慣性/磁気センサを用いたカルマンフィルタに基づく向き判定:可観測性解析及び性能評価」(Angelo Maria Sabatini、2011年9月27日発行、Sensors 2011.11、9182〜9206)で論じられた技術などの当業者によって認められた技術を使用して、慣性参照フレーム内の回転データに変換する。
尤度比を用いた動き判定
試行として行われる多数の動き/フィットネス実験において、監督者は、ユーザによって行われる動きのタイプにタグ付けし、動きのタイプに関連付けられた1つ以上の特性を記録することができる。ユーザが動きのタイプを変更すると、監督者も動きのタイプの変更にタグを付けることができる。
例えば、ユーザが前後にラップスイミングしているとき、監督者は、ユーザが実際に前に水泳しているとき、及びユーザがターンしているときにタグ付けすることができる。監督者はまた、速度及びヨー角など、ユーザの水泳又はターンに関連付けられた1つ以上の特性を記録することできる。多数の実験後に、水泳行動対ターン行動を詳述するかなりの量のデータが得られることになる。以下でより詳細に論ずるように、次いで、これらのトレーニングデータは、ユーザが装着しているウェアラブルデバイスによって感知されたユーザの動き情報と共に使用して、ユーザの動きのタイプをリアルタイムに判定することができる。
図15は、本開示のいくつかの実施形態による、水泳セッション中にユーザが水泳中であるかターン中であるかを判定するステップ1500を示す流れ図を示す。いくつかの実施形態では、ステップ1500は、例えば、ステップを組み合わせ、分割、再配置、変更、追加、及び/又は除去することによって変更することができる。以下でより詳細に記述するように、いくつかの実施形態では、ステップ1500は5つのステップを含むことができる。ステップ1510において、ウェアラブルデバイス100は、ユーザのトレーニングデータのセットを受信する。ステップ1520において、ウェアラブルデバイス100は、ユーザのトレーニングデータのセットに基づいて、複数のヨー角に対する複数の尤度比LR(ヨー)を決定する。ステップ1530において、ウェアラブルデバイス100は、ウェアラブルデバイス100の1つ以上のセンサ240から受信した動き情報に基づいて、ユーザのヨー角を決定する。ステップ1540において、ウェアラブルデバイス100は、ヨー角に対応するLR(ヨー)の値を検索する。ステップ1550において、ウェアラブルデバイス100は、LR(ヨー)の値を閾値と比較することにより、ユーザが水泳しているかターンしているかを判定する。
ステップ1510において、ウェアラブルデバイス100は、ユーザのトレーニングデータのセットを受信する。いくつかの実施形態では、トレーニングデータのセットは、ユーザのトレーニングセッションから見ることができる。上で論じたように、これらのトレーニングセッション中に、監督者はユーザをモニタし、ユーザが水泳しているかターンしているか特定することができる。監督者はまた、水泳中のユーザの一定の特性を記録することができる。例えば、監督者は、ユーザの速度及び/又はヨー角を記録することができる。いくつかの実施形態では監督者を必要としない。代わりに、加速度計及び/又はジャイロスコープからの生データを分析することにより、ユーザが、いつ水泳し、ターンしたかを判断することができる。その結果、いくつかの実施形態では、セッション後に、学習データを分析し、タグ付けすることができる。
ヨー角は、ユーザの瞬間的な水泳方向とユーザの定常状態の水泳方向との間の角度を示すことができる。例えば、図18は、本開示のいくつかの実施形態による、水泳中のユーザのヨー角を示す。図18において、ユーザは、水泳プールの南端1810から北端1820へラップスイミングしている。方向1830は、ユーザの定常的な水泳方向を示す。方向1840、1850、1860、1870は、ユーザの瞬間的な水泳方向の4つのケースを示す。ユーザの瞬間的な水泳方向が1840であれば、方向1840と方向1830の間は0度であり、ユーザのヨー角は0度と示すことができる。ユーザの瞬間的な水泳方向が1850であれば、方向1830から方向1850まで時計周りに90度であり、ユーザのヨー角は90度として表示することができる。ユーザの瞬間的な水泳方向が1860であれば、方向1830から方向1860まで時計周りに180度であり、ユーザのヨー角は180度として表示することができる。ユーザの瞬間的な水泳方向が1870であれば、方向1830から方向1870まで時計周りに270度であり、ユーザのヨー角は270度として表示することができる。ヨー角を示す他の適切な方法も使用することができる。例えば、いくつかの実施形態では、ユーザの瞬間的な水泳方向が1870の場合、方向1830から方向1870までとは異なり、反時計周りに90度であることを示すために、ヨー角は270度というよりは90度と表すことができる。
いくつかの実施形態では、ヨー角及び/又は速度などのユーザの動きの特性は、トレーニングセッション中に監督者により直接見ることができる。いくつかの実施形態では、ユーザの動きの特性は、以下により詳細に記述するように、ウェアラブルデバイス100の動きセンサ240によって見ることができる。監督者はまた、ユーザの動きのタイプ(例えば、水泳対ターン)を特定するため、1つ以上のトレーニングセッションの後に、水泳行動対ターン行動を詳述するかなりの量の生データを得ることができる。いくつかの実施形態では、トレーニングセッションは、3〜5分間とすることができる。いくつかの実施形態では、トレーニングセッションは、10〜20分などのより長い継続時間とすることができる。いくつかの実施形態では、トレーニングセッションは任意の適切な継続時間とすることができる。生データは、所与の瞬間及び監督者によって特定された動きのタイプに対応する、ユーザのヨー角を示すことができる。例えば、生データは、{時間タグ、ヨー角、動きのタイプ}としてフォーマットすることができる。生データはまた、他の適切な情報を含み、任意の他の適切なフォーマットにすることができる。いくつかの実施形態では、監督者は必要としない;代わりに、加速度計及び/又はジャイロスコープからの生データを分析することにより、ユーザが、いつ水泳し、ターンしたかを判断することができる。その結果、いくつかの実施形態では、セッション後に、学習データを分析し、タグ付けすることができる。
次いで、トレーニングデータのセットは、生データに基づいて統計的に決定される。一実施形態では、トレーニングデータのセットは、ターン中であるユーザの複数のヨー角の第1の確率分布、P(ヨー|ターン)、水泳中であるユーザの複数のヨー角の第2の確率分布、P(ヨー|水泳)、及び、ユーザがターンしていることを示す第1の尤度とユーザが水泳していることを示す第2の尤度との比を示す因子、Kを含む。いくつかの実施形態では、トレーニングデータのセットはまた、任意の他の適切な情報を含むことができる。
図16Aは、本開示のいくつかの実施形態による、水泳中及びターン中のユーザの複数のヨー角の確率分布を示す。x軸はヨー(度)、y軸は、ユーザが水泳している及びユーザがターンしていることを示す確率質量関数(probability mass functions、PMF)である。図16Aにおいて、曲線1610は、水泳しているユーザの複数のヨー角の第2の確率分布、P(ヨー|水泳)を示す。また図16Aにおいて、曲線1620は、ターンしているユーザの複数のヨー角の第1の確率分布、P(ヨー|ターン)を示す。図16Aにおいて、ヨー角が概ね75度よりも小さい場合は、P(ヨー|水泳)>P(ヨー|ターン)である。このことは、ユーザが水泳しているときは、ヨー角は約75度よりも小さい可能性が高く、ユーザがターンしているときは、ヨー角は約75度よりも大きい可能性が高いことを示唆する。また図16Aにおいて、P(ヨー|水泳)は、概ね0度で最大値を有し、P(ヨー|ターン)は略ね180度で最大値を有する。このことは、ユーザが水泳しているときは、ヨー角はおそらく約0度であり、ユーザがターンしているときは、ヨー角はおそらく約180度であることを示唆する。
いくつかの実施形態では、係数Kは、ユーザが泳いでいることを示す第2の尤度P(泳ぎ中)に対する、ユーザが泳いでいることを示す第1の尤度P(ターン中)の比を示すことができ、式4によって表現されることができる。
K=P(ターン中)/P(泳ぎ中) 式4
いくつかの実施形態では、Kは、ユーザのトレーニングセッションからの観測に基づいて推定されることができる。例えば、ユーザが100mプールで泳ぐとき、ユーザは、50秒間泳いで、5秒間のみでターンすることもある。この例では、何れのランダムな時間においても、ユーザは、ターンすることよりも10倍泳いでいると見込まれ、Kは、0.1に等しくなり得る。
図15に戻って参照すると、ステップ1520において、P(ヨー|泳ぎ中)、P(ヨー|ターン中)及びKを含むトレーニングデータの組から、複数の尤度比、LR(ヨー)が、計算されることができる。一実施形態では、LR(ヨー)は、次の式5で表現されることができる。
LR(ヨー)=P(ターン中|ヨー)/P(泳ぎ中|ヨー) 式5
式5において、P(泳ぎ中|ヨー)は、ユーザが複数のヨー角で泳いでいる確率分布を示す。同様に、P(ターン中|ヨー)は、ユーザが複数のヨー角でターンしている確率分布を示す。P(泳ぎ中|ヨー)とP(ターン中|ヨー)は、それぞれ、式6及び式7で、更に表現されることができる。
P(泳ぎ中|ヨー)=P(ヨー|泳ぎ中)*P(泳ぎ中)/P(ヨー) 式6
P(ターン中|ヨー)=P(ヨー|ターン中)*P(ターン中)/P(ヨー) 式7
式4、5、6及び7から、LR(ヨー)は、式8で更に表されることができる。
LR(ヨー)=P(ターン中|ヨー)/P(泳ぎ中|ヨー)
=(P(ヨー|ターン中)*P(ターン中)/P(ヨー))/(P(ヨー|泳ぎ中)*P(泳ぎ中)/P(ヨー))
=P(ヨー|ターン中)/P(ヨー|泳ぎ中)*(P(ターン中)/P(泳ぎ中))
=K*P(ヨー|ターン中)/P(ヨー|泳ぎ中) 式8
式8は、LR(ヨー)が、トレーニングデータに含まれておりトレーニングセッションの生データから取得されることができる、K、P(ヨー|泳ぎ中)及びP(ヨー|ターン中)によって決定されることができることを示す。
代替的に、いくつかの実施形態では、LR(ヨー)は、式9及び10に示されているように、対数スケールで表現されることができる。
LR(ヨー)=log10(P(ターン中|ヨー)/P(泳ぎ中|ヨー))式9
=log10(K*P(ヨー|ターン中)/P(ヨー|泳ぎ中)) 式10
LR(ヨー)が式5に示されているように、(P(ターン中|ヨー)/P(泳ぎ中|ヨー)と表現されるとき、ヨー角が1よりも大きいLR(ヨー)の値を生ずる場合には、ユーザはこのヨー角でよりターン中でありそうであり、ヨー角が1よりも小さい値LR(ヨー)を生ずる場合には、ユーザはこのヨー角でより泳ぎ中でありそうである。
同様に、LR(ヨー)が式10に示されているように、log10(P(ターン中|ヨー)/P(泳ぎ中|ヨー))と表現されるとき、ヨー角が0よりも大きいLR(ヨー)の値を生ずるとき、ユーザはこのヨー角でよりターン中でありそうであり、ヨー角が0よりも小さい値LR(ヨー)を生ずる場合には、ユーザはこのヨー角でより泳ぎ中でありそうである。
図16Bは、LR(ヨー)が式10で表現されるときの複数のヨー角におけるLR(ヨー)の値を表す。x軸は、度で表されたヨーであり、y軸は、尤度比である。図16Bにおいて、曲線1630は、LR(ヨー)が0に等しいところを示す。図16Bにおいて、曲線1640は、ヨー角が約75度よりも大きいとき、LR(ヨー)は概ね0よりも大きいことを示唆し、それは、ユーザがよりターン中でありそうであることを意味し、ヨー角がヨー角が約75度よりも小さいとき、LR(ヨー)は概ね0よりも小さく、それは、ユーザがより泳ぎ中でありそうであることを意味する。
図15について上で考察したように、ステップ1510及び1520において、複数のヨー角におけるユーザの動きの尤度比、LR(ヨー)は、トレーニングデータの組に基づいて決定されることができる。いくつかの実施形態では、LR(ヨー)の参照表は、各ヨー角におけるLR(ヨー)の値を示すように決定されることができる。ユーザが未来の水泳セッションにあるときは、ユーザのヨー角が受けられ次第、対応するLR(ヨー)値が、参照表から引き出されることができ、ユーザが泳ぎ中かターン中かどうかの決定がリアルタイムでなされることができる。参照表は、追加のトレーニングセッションからのデータに基づいていつも微調整される及び/又は更新されることができる。
図15を参照すると、ステップ1530において、ウェアラブルデバイス100は、ウェアラブルデバイス100の1つ以上のセンサ240から受けられた動き情報に基づいてユーザのリアルタイムのヨー角を決定することができる。ステップ1530が、更に、図17に説明されている。図17は、本開示のいくつかの実施形態に従う泳ぎ中の間のユーザのヨー角を決定するプロセス1700を表すフローチャートを示す。いくつかの実施形態では、プロセス1700は、例えば、ステップを、組合せ、分割し、再配置し、変更し、加え、及び/又は削除することによって、変更されることができる。以下により詳細に記載されているように、いくつかの実施形態では、プロセス1700は、3つのステップを含むことができる。ステップ1710において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から動き情報を受ける。ステップ1720において、ウェアラブルデバイス100は、ウェアラブルデバイス100の回転データの第1の組を決定する。ステップ1730において、ウェアラブルデバイス100は、回転データの第1の組を、ユーザのヨー角を含む、回転データの第2の組に変換する。
ステップ1710において、動き情報は、ウェアラブルデバイス100上の1つ以上の動きセンサ240から受けられてもよい。いくつかの実施形態では、動き情報は、ジャイロスコープ250からの、ウェアラブルデバイス100の3次元回転データを含んでもよい。いくつかの実施形態では、動き情報は、加速度計260からのウェアラブルデバイス100の3次元加速度を含んでもよい。
ステップ1720において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から受けられた動き情報に基づいて、ウェアラブルデバイス100の回転データの第1の組を決定する。いくつかの実施形態では、ウェアラブルデバイス100の回転データは、座標系に対して、ウェアラブルデバイス100の角位置、角速度及び/又は角加速度などの、ウェアラブルデバイス100がどのように回転するかを含む。いくつかの実施形態では、ウェアラブルデバイス100の回転データが角加速度である場合には、角速度及び/又は角位置は、角加速度を時間について積分することによって、得られることができる。同様に、ウェアラブルデバイス100の回転データが角速度である場合には、角位置は、角速度を時間について積分することによって、得られることができる。いくつかの実施形態では、回転データの第1の組は、ジャイロスコープ250から受けられ、ウェアラブルデバイス100について、身体固定の座標系で表現される。
ステップ1730において、ウェアラブルデバイス100は、回転データの第1の組を回転データの2の組に変換する。上記のように、身体固定の座標系における回転データは、ウェアラブルデバイス100が外部の基準に対して動きをしているかどうかを容易に示すことはできない。この問題に対処するために、ウェアラブルデバイス100は、「Kalman−filter−based orientation determination using inertial/magnetic sensors:observability analysis and performance evaluation」 Angelo Maria Sabatini、2011年9月27日に発行された、Sensors 2011、11、9182〜9206において考察された技術のような当業者によって理解された技術を用いて、身体固定の座標系における回転データを慣性座標系における回転データへ返還する。
図15に戻って参照すると、ステップ1540において、ステップ1530において得られたヨー角は、対応するLR(ヨー)の値を引き出すために、ウェアラブルデバイス100によって用いられることができる。例えば、LR(ヨー)の値は、LR(ヨー)の参照表から引き出されることができる。
ステップ1550において、引き出されたLR(ヨー)の値に基づいて、ウェアラブルデバイス100は、引き出された値LR(ヨー)を閾値と比較することによって、ユーザが泳ぎ中であるかターン中であるかを決定することができる。具体的には、LR(ヨー)が式5におけるように表現されている場合には、閾値は1に設定されることができ、引き出されたLR(ヨー)の値が1よりも大きい場合、ユーザはより泳ぎ中でありそうであり、引き出されたLR(ヨー)の値が1よりも小さい場合、ユーザはよりターン中でありそうである。同様に、LR(ヨー)が式10におけるように表現されている場合には、閾値は0に設定されることができ、引き出されたLR(ヨー)の値が0よりも大きい場合、ユーザはより泳ぎ中でありそうであり、引き出されたLR(ヨー)の値が0よりも小さい場合、ユーザはよりターン中でありそうである。
泳法の分類
いくつかの実施形態では、本開示は、ユーザの泳法を、自由形、背泳ぎ、平泳ぎ及びバタフライを含む4つの共通の形のうちの1つに分類するように構成されてもよいウェアラブルデバイスを記載する。
図19は、本開示のいくつかの実施形態に従う、ユーザの泳法の形を分類するプロセス1900を表すフローチャートを示す。いくつかの実施形態では、動きセンサから情報を受けることと基本周期を計算するステップ(ステップ1910)、ウェアラブルデバイス100の回転データの組を決定するステップ(ステップ1920)、回転データの組から特徴の第1の組を抽出して背泳ぎと平泳ぎを分類しこれらの泳法の形を自由形とバタフライから区別する第1段階の分析を行うステップ(ステップ1930)及び回転データの組から特徴の第2の組を抽出して自由形をバタフライから区別する第2段階の分析を行うステップ(ステップ1940)を含むことができる。いくつかの実施形態では、プロセス1900は、例えば、ステップを、組合せ、分割し、再配置し、変更し、加え、及び/又は削除することによって、変更されることができる。
ステップ1910において、ウェアラブルデバイス100は、1つ以上の動きセンサ240からの出力情報を標本化する。いくつかの実施形態では、情報は、重力、加速度、回転又は姿勢のいかなる組合せも含むことができる。動きセンサ240からの標本化された情報出力に基づいて、基本周期が、計算されることができる。例えば、1つ以上の動きセンサ240からの情報が、14Hzで標本化されることができる。ストロークカウンタから取得されたストロークレートに基づいて、ウェアラブルデバイス100は、2ストロークに相当する期間の動き情報を標本化する。いくつかの実施形態では、標本化されたデータが十分に周期的な信号を示さない場合、ウェアラブルデバイス100は、十分に周期的な信号を受けるまで、動きセンサ情報を、再標本化する。ユーザのストロークを分類するプロセス1900は、ストロークごとを基本に行われることができるが、ユーザがラップ又はデータを報知するためのある規定された期間を終了した後に、ユーザに報知されることができる。
ステップ1920において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から受けられた情報に基づいて、3次元までの、ウェアラブルデバイス100の、加速度データを含む、回転データの組を決定する。いくつかの実施形態では、ウェアラブルデバイス100の回転データは、座標系に対する、ウェアラブルデバイス100の角位置、角速度及び/又は角加速度などの、ウェアラブルデバイス100がどのように回転しているか、を含む。いくつかの実施形態では、ウェアラブルデバイス100の回転データが角加速度である場合、角速度及び/又は角位置は、角加速度を時間について積分することによって得られることができる。同様に、ウェアラブルデバイス100の回転データが角速度である場合は、角位置は、角速度を時間について積分することによって得られることができる。いくつかの実施形態では、回転データの組は、ジャイロスコープ250から受けられ、ウェアラブルデバイス100について身体固定の座標系で表現される。いくつかの実施形態では、加速度データは、加速度計260から受けられ、これもまたウェアラブルデバイス100について身体固定の座標系で表現される。
図20は、水泳セッションの間ユーザによって身に着けられた、ウェアラブルデバイス100の例示的な三次元の経路を示す、一連のグラフ2000、2010、2020、2030を示す。具体的には、各グラフは、4つの泳法の形のうちの1つに対応し(すなわち、グラフ2000は自由形に対応し、グラフ2010は背泳ぎに対応し、グラフ2020は平泳ぎに対応し、グラフ2030はバタフライに対応する)、その泳法の形の30ストロークについてのウェアラブルデバイス100の三次元の経路を示す。各グラフは、3軸すなわちウェアラブルデバイスの表の面の向きを表す軸、ウェアラブルデバイスのクラウンの向きを表す軸及びウェアラブルデバイスのバンドの向きを表す軸を含む。各軸は、地を指し示していることを表す、1から、天を指し示していることを表す、−1までの範囲にある。グラフ2000、2010、2020及び2030によって示されているように、平泳ぎ(グラフ2020)と背泳ぎ(グラフ2010)の双方は、これらを自由形(グラフ2000)とバタフライ(グラフ2030)から区別することを容易にする独特の軌道を示す。しかしながら、自由形とバタフライは、互いに区別することをより難しくする、類似する三次元の経路を示す。したがって、開示された主題のいくつかの実施形態では、2段階の分析を行うことができる。第1段階の分析の間に、ステップ1930に関連して以下のように記載されているように、特徴は、回転データの組から抽出されて、平泳ぎと背泳ぎを識別し、これらの泳法の形をバタフライと自由形から区別する。ストロークが平泳ぎ又は背泳ぎであると特定された場合、分析の第2のレベルは行われる必要はない。そうではなく、平泳ぎと背泳ぎが除外される場合、第2段階の分析は、ステップ440に関連して以下に記載されているように、回転データの組に実行されることができて、ストロークが自由形かバタフライかを識別する。いくつかの実施形態では、第2段階の分析は、第1段階の分析の結果にかかわらず実行されることができる。
ステップ1930において、第1段階の分析は、回転データの組からある特徴を分析して背泳ぎと平泳ぎを識別しこれらのストロークの形をバタフライと自由形から区別することによって実行されることができる。開示された主題のいくつかの実施形態によれば、少なくとも3つの特徴が、背泳ぎと平泳ぎを識別しこれらのストロークの形をバタフライと自由形から区別するように用いられることができる。これらの3つの特徴は、(1)ユーザのストロークの最速部分の間の平均のクラウンの向き、(2)ユーザの腕と手首の回転の相関、及び(3)クラウンのまわりの回転のどのくらいが全角速度に寄与するか、を含むことができる。これらの前述の特徴は、自由形をバタフライから区別することは意図されていない。
いくつかの実施形態によれば、図21にグラフ2100によって示されているように、第1段階の分析の3つの特徴のうちの2つは、異なる泳ぎの形のそれぞれについてグラフに表されている。具体的には、y軸は、−1(負の相関、ここで手首と腕は異なる方向に回転する)から、0(相関なし)、1(正の相関、ここで手首と腕は同じ方向に回転する)までの範囲にわたる、ストロークの最速の部分の間の腕と手首の回転の相関を表す。グラフの左上部に示されているように、背泳ぎは、手首と腕の回転の正の相関を示し(すなわち、手首は内方に回転し、そして腕は下方に回転する)、一方、平泳ぎは、腕と手首の回転の負の相関を示す(すなわち、手首は外方に回転し、そして腕は下方に回転する)。更に、グラフ2100のx軸は、ユーザの指先(又はクラウン)が天に向かって上を向いている、−1から、ユーザの指先(又はクラウン)が下方に向けられて地を向いている、1までの範囲にわたる、ストロークの最速の部分の間のウェアラブルデバイス100の平均のクラウンの向き(これはユーザの指先の向きの代用となるものである)を表す。グラフ2100に示されているように、背泳ぎ2110の最速の部分の間(すなわち、手が水から出ていて天に向かって弧を作っているときの戻しフェーズの間)、ユーザの指先は、天に向かって上方に向き、平泳ぎ2140の間、ユーザの指先は、手が最速に動いているとき地に向かって下方に向く。
また、図21において、グラフ2100にも示されているように、バタフライ2130と自由形2120のストロークは、腕と手首との間の同様の相関を示す(すなわち、双方とも、腕と手首の回転の正の相関を示す)とともに、ストロークの最速の部分の間の同様のクラウンの向き(すなわち、指先は地に向かって下方を向いている)を示し、これらの2つの特徴に基づいてこれらのストロークを互いに区別することを難しくしている。これに対比して、背泳ぎは、(1)腕−手首の負の相関及び(2)平均のクラウンの向きがストロークの最速の部分の間天に向かって向いていることに基づいて容易に区別可能である。平泳ぎもまた、(1)腕−手首の正の相関及び(2)平均のクラウンの向きがストロークの最速の部分の間下方に向いていることに基づいて容易に区別可能である。
図22に示されている次の一連のグラフは、図21に関連して上で考察されたように、平均のクラウンの向きの特徴に焦点を当てている。具体的には、図22に示されている一連のグラフは、ストロークの最速の部分によって重みづけされた、重力に対する平均のクラウンの向きを示す。この特徴は、ユーザの腕が最も早く動いているとき、ユーザの指先が差している方向の代用となるものである。この平均のクラウンの向きの特徴は、次式で表現されることができる。
mean_gx_w1=sum(gravity_x*total_user_acceleration)/sum(total_user_acceleration) 式11
図22に示されている一連のグラフは、異なる泳法の形のそれぞれに対するクラウンの向きに対応する(すなわち、グラフ2200は自由形に対応し、グラフ2210は平泳ぎに対応し、グラフ2220は背泳ぎに対応し、グラフ2230はバタフライに対応する)。グラフそれぞれのy軸は、クラウンの向きzを表す。ここで、−1=クラウンが天に向かって上に向いている、0=クラウンが水平線に平行に向いている、及び1=クラウンが地に向かって下を向いている、である。グラフそれぞれのx軸は、秒で示した時間を表す。
クラウンの向きの特徴は、背泳ぎと平泳ぎを識別し、これらの泳法の形を他の泳法の形から区別するために用いられることができる。図2220に示されているように、背泳ぎにおけるユーザの指先は、ユーザの腕が水から出て速く動いているとき、水平線から天に向かい水平線に戻る弧をたどる。他の泳法の形とは異なり、背泳ぎにおけるクラウンの向きは、ストロークの半分の間水平線よりも上にあり、大きい加速度の点の間天を向いている。
平泳ぎについては、グラフ2210に示されているように、クラウンは、ストロークの穏やか部分の間水平線よりも上に行き、ストロークの最速の部分の間下方に向いている。自由形(グラフ2200)とバタフライ(グラフ2230)の双方については、クラウンは、これらのストロークの最速の部分の間水平線よりも上に行きかつ水平線に平行に向いており、この特徴に基づいてこれらのストロークを区別することを難しくしている。
開示された主題のいくつかの実施形態によれば、図23は、異なる泳法の形についてのクラウンの向きの特徴を図表で示すための他の方法である。この実施形態では、グラフ2300のx軸は、ストロークの最速の部分の間のクラウンの向きを表し(−1=クラウンが天に向かって上に向いている、0=クラウンが水平線に平行に向いている、及び1=クラウンが地に向かって下を向いている)、y軸は、さまざまな技量の泳ぎ手の大きな集団にわたって取られたストロークの数を表す。具体的には、グラフ2300は、異なる泳ストロークの形、すなわち、背泳ぎ(三角形からなる曲線2310によって示されている)、バタフライ(円からなる曲線2320によって示されている)、自由形(正方形からなる曲線2330によって示されている)及び平泳ぎ(星からなる曲線2340によって示されている)に対するクラウンの向きの分布を示す。グラフ2300に示されているように、クラウンの向きの特徴を用いて、背泳ぎが、他のストロークの形から最も容易に区別可能である。
図24に示されている次の一連のグラフは、図21に関連して考察されたように、手首−腕の相関の特徴に焦点を当てている。各グラフは、異なる泳法の形に対応する(すなわち、グラフ2400はバタフライに対応し、グラフ2410は背泳ぎに対応し、グラフ2420は平泳ぎに対応し、グラフ2430は自由形に対応する)。具体的には、図24に示されている一連のグラフは、前腕の回転に関して、バンドの頂部の位置(gravity_y)が前腕に垂直な軸のまわりにどのように回転するか(rotation_y)を示す。この特徴は、次式で表されることができる。
grav_rotation_norm_cfpy_w1=gravity_yとrotation_yとの間の重み付きピアソン相関 式12
以下に示されているように、相関は、各点における総角速度によって重み付けされることができて、ストロークのよりおそい部分の間に起こる集団を考慮に入れないようにする。
重み付き平均:
重み付き共分散:
重み付き相関:
図24の一連のグラフは、14Hzの標本化速度における標本の数を表す、x軸、及び、時計回りの動き(2.5)又は反時計回りにおける動き(−2.5)を表すy軸を含む。図24に示されている一連のグラフは、同じスケールとなるように正規化されている。具体的には、各信号は、可視化の目的のためにそれらのそれぞれの大きさを正規化するようにその標準偏差で除算されている。各グラフは、2つの曲線を示す。すなわち、破線によって示された、一方の曲線は、手首の回転(すなわち、前腕に垂直な軸の周りの回転を有するバンドの頂部の向き(gravity_y))を表し、実線によって示された、他方の曲線は、前腕の回転(rotation_y)を表す。
泳法の形のそれぞれに対して手首−前腕の相関を分析することは、平泳ぎを除いて、全ての泳法の形に対して手首−前腕の正の相関を示す。平泳ぎは、手首−前腕の負の相関を示す。具体的には、平泳ぎについて(グラフ2420)、手首は外向きに回転し、腕は下向きに回転する。全ての他のストロークについては、グラフ2400(バタフライ)、2410(背泳ぎ)及び2430(自由形)によって示されているように、手首は、内向きに回転し、そして腕は下向きに回転する(すなわち、正の相関)。したがって、この手首−前腕の相関の特徴は、平泳ぎを特定するために及びそれを他のストロークの形から区別するために用いられることができる。
腕と手首の回転の相関の特徴を図表で示す他の方法は、図25にグラフ2500によって示されている。x軸は、腕と手首の回転の相関を表し、ここで、−1は負の相関を示し、0は相関がないことを示し、1は正の相関を示す。y軸は、さまざまな力量の泳ぎ手の大きな集団からのストロークの数を表す。具体的には、グラフ2500は、異なるストロークの形、すなわち、平泳ぎ(星からなる曲線2510によって示されている)、自由形(正方形からなる曲線2520によって示されている)、背泳ぎ(三角形からなる曲線2530によって示されている)及びバタフライ(円からなる曲線2540によって示されている)に対する、腕と手首の回転の相関の分布を示す。グラフ2500に示されているように、腕と手首の回転の相関の特徴を用いて、平泳ぎを他のストロークの形から区別することは容易である。
図26に示されている一連のグラフは、開示された主題のいくつかの実施形態に従う、第1段階の分析に用いられることができて背泳ぎと平泳ぎを自由形とバタフライから識別し区別する第3の特徴に、焦点を当てている。具体的には、この特徴は、クラウンのまわりの回転のどのくらいが総角速度(及び符号)に寄与するかを分析する。
図26に示されている一連のグラフは、クラウンのまわりの正規化された角速度を表す、y軸、及び、14Hzの標本化速度における、標本の数を表すx軸を含む。自由形(2600)とバタフライ(2620)についてのグラフは、ユーザの腕が水から出ているときに自由形とバタフライの間の内向きの回転を捕捉する、式3について負の回転の平均を示す。他方、平泳ぎ(2610)と背泳ぎ(2630)についてのグラフは、正の回転の平均を示す。
クラウンのまわりの相対的な角速度の特徴を図表で示す他の方法は、図27にグラフ2700によって示されている。x軸は、クラウンのまわりの相対的な角速度を表す。y軸は、さまざまな技量レベルをもつ泳ぎ手の大集団からのストロークの数を表す。グラフは、異なるストロークの形に対するクラウンのまわりの相対的な角速度の分布を示す。グラフ2700に示されているように、クラウンのまわりの相対的な角速度の特徴を用いて、背泳ぎ(三角形からなる曲線2710によって示されている)と平泳ぎ(星からなる曲線2720によって示されている)を、自由形(正方形からなる曲線2730によって示されている)とバタフライ(円からなる曲線2740によって示されている)から区別することは容易である。
第1段階の分析について上で詳述された3つの特徴は、3法ロジスティック回帰において用いられ、泳法の形を分類することにおけるそれらの実用性によって重み付けされてもよい。本開示は、3法ロジスティック回帰に限定されることはなく、例えば、線形判別分析(LDA)、サポートベクターマシン(SVM)、ニューラルネットワーなどの、どのような選別器もここでは用いられることができ、同様の結果を生じることが、理解される。いくつかの実施形態では、腕−手首の相関の特徴と平均のクラウンの向きの特徴は、クラウンのまわりの回転の特徴よりもより大きな重み付けが与えられる。上で考察した3つの特徴は例示的であり、他の適切な特徴が用いられてもよい。
ステップ1940において、第1段階の分析が回転データの組について行われた後、第2段階の分析が行われることができ、回転データの組からのある一定の特徴が、自由形をバタフライから区別するために検討されることができる。いくつかの実施形態では、9つの特徴が、バタフライと自由形との間の区別をするために、第2段階の分析の間に用いられることができる。
用いられることができる第1の特徴は、次の式によって表現されることができる、引きフェーズの間のバンドのまわりの相対的な腕の回転である。
RMS(引きフェーズの間の回転y)/RMS(全ストロークの間の回転y)、ここでRMSは二乗平均である 式13
相対的な腕の回転の特徴の比は、バタフライについてより大きい傾向がある。何故ならば、バタフライは、自由形に比較して、引きフェーズの間にウェアラブルデバイス100のバンドのまわりのより多くの(より強い)回転を有する傾向があるが、戻しフェーズの間にバンドのまわりの同様の又はより少ない回転を有する傾向があるからである。バタフライの戻しフェーズの間、手のひらは、自由形の間よりも水平線により平行にとどまる傾向があり、これは、戻しの間バンドのまわりのより少ない回転の結果となる。両手は、バタフライにおいて戻しの間より平行であるので、回転は、顔のまわりにある傾向ある(バンドのまわりのより少ない回転)。自由形については、両手は、平行であるのはより少なく、そうなので、バンドのまわりのより多くの回転がある。
用いられることができる第2の特徴は、モーメントアームの特徴range(uxz)/range(wy)であり、ここで、
uxz=sqrt(sum(user_x2+user_z2),wy=abs(rotation_y),range(x)=max(x)−min(x) 式14
である。
モーメントアームの特徴は、自由形に比較して、バタフライの間、より長いモーメントアーム(すなわち、アームが延ばされている)を捕捉する。この特徴は、バンド(すなわち、軸y)のまわりの回転をバンドに垂直な平面における直線的加速度と比較する。モーメントアームが長いほど、回転に相対的な直線的加速度は大きくなるであろう。
図28に示されているグラフ2800は、上で考察した第1と第2の特徴をグラフ化している。具体的には、グラフ2800は、モーメントアームの特徴を表す、x軸、及び、引きフェーズの間の相対的な腕の回転の大きさを表す、y軸を含む。グラフ1500によって示されているように、これらの2つの特徴は、バタフライを自由形から区別することにおいて重要である。
バタフライ(2810)を自由形(2820)から区別ために用いられることができる第3の特徴は、回転yに対する加速度zの比である。これは、モーメントアームの他のバージョンであり、uz/wy、ここで、
uz=sum(abs(rotation_y)),uz+sum(abs(user_z)) 式15
によって表現されることができる。
バタフライを自由形から区別するために用いられることができる第4の特徴は、図21〜図23に関連して上述された、第1段階の分析の間に用いられる特徴と同様の、加速度によって重み付けされた平均重力クラウンである。この特徴は、クラウンの向き(これは、ストロークの間のユーザの指先の向きについて代用となるものである)を測定する。それは、ストロークの最速の部分によって重み付けされてストロークの戻しフェーズにより大きい重み付けを与える。バタフライにおいて、重力に対するクラウンの向きは、0に近く、これは、ユーザの両手が、自由形に比較して、バタフライの間、水平線により平行にとどまることを捕捉する。
バタフライを自由形から区別するために用いられることができる第5の特徴は、gravity_y(バンドの頂部)とrotation_y(バンドのまわりの回転)との間の相関であり、
によって測定されることができる。
具体的には、この特徴は、ストロークの間どのように手首と腕がいっしょに回転するかを測定する。手首と腕の相関は、自由形よりもバタフライについてより小さく、腕が回転しているが手首は回転しないことがバタフライストロークの間により多く起こることを示す。この特徴はまた、自由形に比較して、バタフライの間両手が水平線により平行にとどまる(すなわち、手首のより少ない回転ともに両腕の向きが変わる)ことを捕捉する。
バタフライを自由形から区別するために用いられることができる第6の特徴は、クラウンの回転のRMSであり、これは、式すなわち、
RMS(rotation_x) 式17
によって表現されることができる。
この特徴は、自由形に比較して、バタフライによって発揮されるより強い回転エネルギを捕捉する。
バタフライを自由形から区別するために用いられることができる第7の特徴は、クラウンのまわりの最小回転であり、これは、式すなわち、
min(rotation_x) 式18
によって表現されることができる。
この特徴もまた、自由形に比較して、バタフライによって発揮されるより強い回転エネルギを捕捉する。
バタフライを自由形から区別するために用いられることができる第8の特徴は、バンドのまわりの最大回転であり、これは、式すなわち、
max(rotation_y) 式19
によって表現されることができる。
この特徴もまた、自由形に比較して、バタフライによって発揮されるより強い回転エネルギを捕捉する。
バタフライを自由形から区別するために用いられることができる第9の特徴は、yに対するxの最大回転であり、これは、式すなわち、
max(abs(rotation_x)/max(abs(rotation_y)) 式20
によって表現されることができる。
この特徴もまた、自由形に比較して、バタフライによって発揮されるより強い回転エネルギを捕捉する。
これらの9つの特徴は、バタフライを自由形から区別することにおけるこれらの有用性に基づいて、バタフライを自由形から区別するために2法ロジスティク回帰においていっしょに用いられることができ、重み付けされることができる。ほとんどの分類器(SVM、LDAなど)がこの同じ特徴の組を用いて同様に動作するであろうことが理解される。上述した9つの特徴は例示的であり、他の適切な特徴が使用されることもできることが更に理解される。いくつかの実施形態では、第2段階の分析の9つの特徴は、次の、最大から最小にランク付された、有用性の順序を有する。
ストロークのフェーズを決定すること
本開示は、ユーザの泳法のフェーズを決定するように構成されることもできるウェアラブルデバイスを記載する。図29A〜図29Bに示されているように、泳法(例えば、バタフライ2925、自由形2930、背泳ぎ2935及び平泳ぎ2940)は、4つのフェーズ、すなわち、グライド2905、引き2910、移行2915及び戻し2920に分けられることができる。各フェーズは、そのフェーズに特有の一定の特徴を示す。例えば、グライド2905−ユーザの腕が進行の方向にユーザの前に伸ばされているとき−は、該してストロークの最も穏やかな部分である。このフェーズは、ストロークの他の3つのフェーズに比較して、ユーザの加速度の最小量及び最も安定な手首の向きを示す。次のフェーズ(すなわち、引きフェーズ2910)は、ユーザの手が、水中にあり、泳ぎ手を前方へ推進するときに、起こる。このフェーズは、グライドフェーズ2905から増大した加速度及び泳ぎ手の指先の向きにおける変化を示す。バタフライ、自由形及び背泳ぎについては、指先は、このフェーズを通して下を指す傾向がある。背泳ぎについては、指先は、引きフェーズの間水平線により平行であるであろう。図29A〜図29Bに示されている第3のフェーズは、移行フェーズ2915、引きフェーズ2910と戻しフェーズ2920との間のフェーズである。移行フェーズ2915では、泳ぎ手の指先の向きは、進行の方向とは逆であり、進行の方向とユーザの指先の現在の向きとの間で最大の角度を示すであろう。このフェーズは、通常最短の継続時間を有する。最後に、戻しフェーズ2920、泳ぎ手が泳ぎ手の手を進行の方向へ戻すときは、通常最大の加速度を示す。バタフライ用、自由形及び背泳ぎについては、手は、戻しフェーズの間水から出ている。平泳ぎについては、手は水の中にとどまる。戻しフェーズは、通常、全ての泳法にわたって最大の加速度を示すであろうが、違いは、平泳ぎについてより小さく表されるであろう。上で提供されたストロークは例示的であること、及び他のストロークは同様のフェーズに分けられることができることが、理解される。
図30は、本開示のいくつかの実施形態に従う、ユーザの泳法の形を決定するプロセス3000を表すフローチャートである。いくつかの実施形態では、方法は、動きセンサから情報を受けること(ステップ3010)、ウェアラブルデバイス100の、加速度データを含む、回転データの第1の組を決定すること(ステップ3020)、回転データの第1の組を回転データの第2の組に変換すること(ステップ3030)、データの第2の組に基づいてある一定のフェーズを決定すること(3040、3050)及びフェーズの特性を分析すること(ステップ3060)を含むことができる。いくつかの実施形態では、プロセス3000は、例えば、ステップを、組合せ、分割し、再配置し、変更し、加え、及び/又は削除することによって、変更されることができる。
ステップ3010において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から情報を受ける。いくつかの実施形態では、情報は、重力、加速度、回転又は姿勢のいずれの組み合わせも含むことができる。動きセンサ240から出力される情報に基づいて、基本周期が計算されることができる。ユーザが泳いでいないと決定される場合、いくつかの実施形態では、ウェアラブルデバイス100は、ストロークのフェーズを決定しないであろう。
1つ以上の動きセンサ240から出力される情報は、ユーザがストロークを完了するために必要な期間よりもわずかに長い期間に比例する時間定数に基づいて、遮断周波数をもつローパスフィルタを用いてフィルタにかけられることができる。
時間間隔はユーザによって設定されることができるか、又は、時間間隔は固定されることができる。いくつかの実施形態では、時間間隔は、平均のユーザが単一のストロークを完了するために必要とする期間よりも長い期間に比例する。いくつかの実施形態では、ウェアラブルデバイス100は、ウェアラブルデバイス100によって検出されるユーザのストロークの平均継続時間に基づいて、時間間隔を動的に設定することができる。例えば、ユーザがストロークを終了するのに3秒要する場合、時間間隔は、6秒に設定されることができる。
ステップ3020において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から受けられる情報に基づいて3次元までの、ウェアラブルデバイス100の、加速度データを含む、回転データの第1の組を決定する。いくつかの実施形態では、ウェアラブルデバイス100の回転データは、座標系に対する、ウェアラブルデバイス100の角位置、角速度及び/又は角加速度などの、ウェアラブルデバイス100がどのように回転しているか、を含む。いくつかの実施形態では、ウェアラブルデバイス100の回転データが角加速度である場合、角速度及び/又は角位置は、角加速度を時間について積分することによって得られることができる。同様に、ウェアラブルデバイス100の回転データが角速度である場合は、角位置は、角速度を時間について積分することによって得られることができる。いくつかの実施形態では、回転データの第1の組は、ジャイロスコープ250から受けられ、ウェアラブルデバイス100について身体固定の座標系で表現される。いくつかの実施形態では、加速度データは、加速度計260から受けられ、これもまたウェアラブルデバイス100について身体固定の座標系で表現される。
ステップ3030において、ウェアラブルデバイス100は、加速度データを含む、回転データの第1の組を、回転データの第2の組に変換する。上記のように、身体固定の座標系における回転データは、ウェアラブルデバイス100が外部の系に対して動きをしているかどうかを容易に示すことはできない。この問題に対処するために、ウェアラブルデバイス100は、「Kalman−filter−based orientation determination using inertial/magnetic sensors:observability analysis and performance evaluation」Angelo Maria Sabatini、2011年9月27日発行された、Sensors 2011、11、9182〜9206において考察された技術のような当業者によって理解された技術を用いて、身体固定の座標系における、加速度データを含む、回転データを慣性座標系における回転データへ返還する。
図31A〜図31Dは、本開示のいくつかの実施形態に従う、時間の間隔に対する慣性系におけるウェアラブルデバイス100の、加速度データを含む、回転データを表す。具体的には、図31A〜図31Dは、身体固定座標から慣性座標系へ変換された、水泳セッションの間泳ぎ手の手首に着けられたウェアラブルデバイス100についての、加速度データを含む、回転データの組を表す。x軸は、1つ以上の動きセンサ240から受けられる信号の時間間隔を表し、(1/100秒で)測定され、y軸は、重力で正規化された加速度を表し、m/s2で測定される。ユーザ加速度は、曲線3110によって表され、ヨー角は、曲線3120によって表されている。ヨー角は、ウェアラブルデバイス100のクラウンの向き(すなわち、ユーザの指先の方向)に対応する。
いくつかの実施形態では、曲線3145(黄色で示されている)によって表された、ピッチ角もまた、異なるフェーズを決定するために用いられることができる。例えば、ピッチ角は、0近く(グライド)から0よりも大きい角度(引き)となってそれから0に戻る(戻し)移行を示すであろう。例えば、ピッチが加速度といっしょに0に近いときの状態、すなわち、
状態1番(グライド):ピッチはゼロに近く、最小の加速度
状態2番(引き):ピッチは0近くから0でなくなり0近くに戻るように移行する
状態3番(移行):ピッチは再び0に近い
状態4番(戻し):ピッチはここでは0でなくても又は0であってもよく(ストロークの形及びユーザに依存して)が、加速度は他の3つのフェーズよりも概ね大きいはずである、を追跡することによって手が反対にあることが推定されることがでる。
図31A〜図31Dのそれぞれは、回転データに基づいてユーザの泳法の異なるフェーズを強調している。ステップ3040において、いくつかの実施形態によれば、泳法のグライドフェーズは、図31Aに示されているように、1つのストロークにわたって、ユーザの加速度の最小L2ノルムを見つけることによって決定されることができる。加速度の最も小さい量に対応する、加速度曲線3110に沿う最も低い点は、3130によって示され、グライドフェーズの中間点を表す。グライドフェーズの始まりは、中間点前の最大加速度の10%と定義されることができ、グライドフェーズの終わりは、中間点後の最大加速度の10%と定義されることができる(例えば、加速度曲線3110の点Aと点Bとの間の長さ)。一旦最小加速度が決定されると、基準ヨー角3140(すなわち、ヨー角が0度であるとき)は、最小加速度点に呼応して決定される。基準ヨー角3140は、最小加速度点の真下のヨー角曲線3120に沿う点である。
他の実施形態では、グライドの継続時間は、ヨー基準角の10度内の加速度曲線の部分に基づいて計算される。
ステップ3040において、移行フェーズは、基準ヨー角3140に関連して、図31Bに示されているように、最大ヨー角3150に基づいて決定される。移行期間の継続時間(すなわち、曲線の点Cと点Dとの間の部分)は、最大ヨー角の10度以内である。最大ヨー角3150は、泳ぎ手の指先が進行の方向とほとんど逆であるときの泳ぎ手の指先の向きを表す。換言すれば、曲線に沿う点は、進行の方向と泳ぎ手の指先の現在の向きとの間の最大角度を示す。
一旦泳法のグライドフェーズと移行フェーズが識別されると、戻しフェーズと引きフェーズは、グライドフェーズと移行フェーズの開始と終了に基づいて決定されることができる(ステップ3050)。例えば、図31Cに示されているように、点Bと点Cとの間及び点B’と点C’との間の、引きフェーズは、単に、グライドフェーズの終了と移行の開始との間の加速度曲線3110とヨー角曲線3120の部分である。そして、図31Dに示されているように、点Dと点Eとの間及び点D’と点E’との間の、戻しフェーズは、移行フェーズの終了と新たなグライドフェーズの開始との間(すなわち、旧グライドフェーズに1周期を加えた)の加速度曲線3110とヨー角曲線3120の部分である。戻しの期間は通常最大加速度を示す。
ステップ3060において、一旦泳法の異なるフェーズが識別されると、個々のフェーズの特性が識別され分析されることができる。いくつかの実施形態では、泳法の形の間で異なる特定のフェーズの特性が、ストロークを分類するために用いられることができる。例えば、戻しフェーズの間のより長い腕のスイープは、自由形ストロークに比較して、典型的にはバタフライに関連付けられる。したがって、戻しの間の測定された腕のスイープは、バタフライストロークと自由形ストロークとの間の区別をするために用いられることができる。他の例では、より長い移行フェーズは、バタフライストロークに比較して、典型的には自由形ストロークに関連付けられ、したがって、自由形ストロークを識別するために用いられることができる。別の例では、バタフライは、全てのフェーズにわたって、全ての回転のy軸エネルギに相対的な引きフェーズの間のy軸まわりの回転エネルギに基づいて、自由形から区別されることができる。これは、次の式によって計算されることができる。
相対的な引き回転Y=RMS(引きの間のrotation−y)/RMS(全てフェーズにわたるrotation−y)
RMS:root−mean−square(二乗平均平方根値)
比は、自由形に比較してバタフライについてより大きい。バタフライは、自由形よりも、引きフェーズの間のバンドのまわりのより多くの(より強い)回転を有する傾向があるが、戻し(両腕が戻しを通して水平線により平行である傾向があるフェーズ)の間のバンドのまわりの同様か又はより少ない回転を有する傾向がある。これらは、少数のサンプルに過ぎず、他の区別するフェーズの特性が、泳法を分類するために用いられることができる。
図32Aは、バタフライストロークの4つのフェーズに対する加速度とヨーのデータをグラフ化し、図32Bは、自由形ストロークの4つのフェーズをグラフ化している。x軸は、1つ以上の動きセンサ240から受けられた信号の時間間隔を表し、y軸は、重力によって正規化された加速度を表し、m/s2で測定される。ユーザ加速度データは、グラフの灰色の陰影が付けられた部分によって表され、ヨー角データは、黒い曲線で表されている。
図32A及び図32Bの双方において、グライド、引き、移行及び戻しのフェーズが、ラベル付けされている。図32Aに示されているバタフライストロークのフェーズを図32Bに示されている自由形ストロークの同様のフェーズと比較すると、同様のフェーズの間の次の違いが明瞭である。
上に示された表は、自由形ストロークとバタフライストロークのフェーズの同様なものの間のいくつかの相違の例を表す。当業者は、自由形ストロークとバタフライストロークの同様のフェーズの間に他の相違が存在しこれら2つのストロークを区別するために用いられることができることを理解するであろう。
本発明の他の応用において、特定のフェーズを決定することは、ターンの検出/ラップ計数の間の誤検出を抑制することに役立ち得る。例えば、グライドフェーズの間のヨー角のみが、ターンを検出する目的のために考慮されることができる。これは、ターン検出のために考慮された角度が、手がたいていは進行の方向を向いているときであり、したがってストローク間の相互の関係性のために何れのヨー角の効果も減少させることに役立つことを、確実にすることになる。換言すれば、ヨー角が全ストロークにわたって追跡される場合、それは、グライドから移行フェーズへの0度と180度との間になるであろうし、これは、ストロークの相互の関係性がフィルタされて除かれなければターンと混同されることになる。しかし、ヨーがグライドフェーズの間のみ追跡される場合、2つ連続するストローク間でグライドフェーズの間のヨーにおける180度の変化は、実際のターンである見込みがより大きい。
他の応用では、フェーズの決定は、真の泳法を決定することに役立ち得る。例えば、ユーザのストロークのフェーズの継続時間が、ユーザが実際のストロークを行ったかどうかを決定するためにモデルのストロークのフェーズの継続期間と比較されることができる。同様に、特定のフェーズに対する加速度及び手首の向きを含む他の特性が、ユーザが実際のストロークを行ったかどうかを決定するようにモデルのストロークのフェーズの同様の特性と比較するために用いられることができる。別の例では、ユーザのストロークは、ユーザが実際のストロークを行ったかどうかを決定するように、ストロークの4つフェーズ全てが正しい順序で行われたかどうかを決定するために、調べられることができる。
モデルのストロークは、性別、年齢又は泳ぎのレベル及び/又は他の適切な特性に基づいて特定の泳ぎ手に対しカストマイズされることができる。いくつかの実施形態では、モデルのストロークは、泳ぎ手のトレーニングセッションから観察される。
軌道の一貫性の決定
本開示は、ユーザが泳いでいる間のユーザのストロークの軌道の一貫性を決定するいくつかの方法を記載する。例えば、図33は、本開示のいくつかの実施形態に従う、水泳セッションの間のユーザのストロークの軌道の一貫性を決定するプロセス3300を表すフローチャートを示す。いくつかの実施形態では、プロセス3300は、例えば、ステップを、組合せ、分割し、再配置し、変更し、加え及び/又は削除することによって、変更されることができる。以下により詳細に記載されているように、プロセス3300は、5つのステップを含むことができる。ステップ3310において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から動き情報を受ける。ステップ3320において、ウェアラブルデバイス100は、ウェアラブルデバイス100の回転データの組を決定する。ステップ3330において、ウェアラブルデバイス100は、回転データの組が第1の過去の期間においてその方向に沿って最小の分散をもつ第1の方向を決定する。ステップ3340において、ウェアラブルデバイス100は、回転データの組が第2の過去の期間においてその方向に沿って最小の分散をもつ第2の方向を決定する。ステップ3350において、ウェアラブルデバイス100は、第1の方向と第2の方向と間の相違を決定してユーザのストロークの軌道の一貫性を決定する。
ステップ3330において、ウェアラブルデバイス100は、回転データの組が第1の過去の期間においてその方向に沿って最小の分散をもつ第1の方向を決定する。いくつかの実施形態では、第1の過去の期間は、相対的に短くてもよい。非限定的な例として、第1の過去の期間は、10秒であることができ、ステップ3330は、10秒毎に実行されることができる。いくつかの実施形態では、第2の回転データの組がその方向に沿って最小の分散を有する方向は、当業者によって理解される主成分を用いて決定されることができる。例えば、図34を参照すると、図34は、3つの軸、x、y及びzを有する三次元空間におけるユーザのストロークの軌道3410を示す。図34において、軌道3410は、楕円の形状を有し、x−y平面に沿っている。軌道3410に沿う位置は、x軸とy軸に沿う分散を有するが、軌道3410の何れの位置もz軸に沿う0成分を有するので、z軸に沿ういかなる分散も有しない。主成分分析を用いると、軌道3410の第3の主成分は、z軸に平行でありかつx−y平面に垂直である、方向3420であることになる。第3の主成分3420の1つの物理的な意味は、それが軌道3410の回転の軸を示すということである。この例では、軌道3410は、第1の過去の期間における回転データの組の軌道である場合、方向3420は、ステップ3330において決定された第1の方向である。第1の過去の期間が10秒に設定される場合、過去の10秒毎の回転データの組の軌道に対する新たな第1の方向となることになる。ユーザがストロークの完全な繰り返しを有するときの理想的な予想される展開では、10秒毎に決定された第1の方向は、同じになることになる。なぜならば、回転データの組の軌道がある期間の間重なることになるからである。しかし、実際の水泳セッションにおいては、ユーザは、ストロークの完全な繰り返しを維持しないであろうし、第1の過去の期間毎に決定された第1の方向は、変化するであろう。ユーザのストロークの動きの一貫性を示す1つの方法は、現在の第1の方向と、例えば、3分間又は何れか適切な期間などの、より長い過去の期間にわたる平均の第1の方向との間の偏差を測定することである。
図33に戻って参照すると、ステップ3340において、ウェアラブルデバイス100は、回転データの組が第2の過去の期間においてその方向に沿って最小の分散を有する第2の方向を決定する。いくつかの実施形態では、第2の方向は、ステップ3330において第1の方向が決定されるのと同じ方法によって決定されることができる。上記のように、いくつかの実施形態では、第2の過去の期間は、ステップ3330で用いられた第1の過去の期間よりも長い。例えば、第1の過去の期間が10秒である場合、第2の過去の期間は、いくつかの実施形態では、3分であることができる。3分は180秒であるから、3分毎に、1つの第2の方向と18個の第1の方向が決定されることができ、第2の方向は、過去3分において決定された平均の第1の方向である。
図35は、本開示のいくつかの実施形態に従うユーザのストロークの軌道を表す。図35において、3510は、特定の水泳セッションに対するユーザのストロークの軌道を示す。図34の軌道3410のようではなく、軌道3510は、完全に反復的ではなく、泳いでいる間のユーザのより現実的なストロークの動きを表す。図35において、線3520は、相対的により短い時間の期間にわたる軌道3510の第3の主成分の方向を表し、破線3530は、相対的により長い時間の期間にわたる軌道3510の第3の主成分の方向を表す。例えば、軌道3510は、3分にわたって泳いでいる間のユーザの回転データの組であることができる。そして、一実施形態では、図33に記載されているステップ3330は、10秒毎に実行されることができて、各10分の間の軌道3510の部分の第3の主成分を決定する。結果は、軌道3510の部分が各10分の間に最小分散をもつ方向である、線3520であることができる。また、図33に記載されているステップ3340は、全3分間にわたって軌道3510の第3の主成分を決定するように、実行されることができる。結果として、軌道3510が全3分間にわたって最小分散をもつ方向である、破線3530であることになり得る。軌道3510が10秒毎に完全に反復的である場合、線3520は、破線3530とぴったり揃うことになる。図35から、線3520と破線3530との間の偏差は、軌道3510がある期間の間にどのようにふらつくかの視覚的なインジケータを提供する。これは、ユーザのストロークの一貫性の尺度を提供する。
図33に戻って参照すると、ステップ3350において、ウェアラブルデバイス100は、第1の方向と第2の方向との相違を決定する。いくつかの実施形態では、第2の過去の期間は、第1の過去の期間よりも長く、第2の方向は、過去における複数の第1の方向の平均とみなされることができる。それらの実施形態において、ステップ3350で得られた相違は、ユーザの短い期間のストロークの軌道の回転の軸の方向がユーザの長い期間/平均のストロークの軌道の回転の軸の方向からどのように外れるかを示す。いくつかの実施形態では、相違の大きさが小さいことは、第1の過去の期間の間のユーザの高いレベルの軌道の一貫性を示し、相違の大きさが大きいことは、第1の過去の期間の間のユーザの低いレベルの軌道の一貫性を示す。高いレベルの軌道の一貫性は、とりわけ、ユーザがより高い泳ぎの技量、より高い効率性及び/又はより少ない疲労を有することを示すこともある。低いレベルの軌道の一貫性は、その逆を示すこともある。
図36は、本開示のいくつかの実施形態に従う異なる標本化点における、ユーザの短い期間のストロークの軌道の回転の軸の方向とユーザの長い期間/平均のストロークの軌道の回転の軸の方向との間の進行中の相違を表す。図36は、異なるフィルタによって処理されたデータを示す。ここで、3601は、拡張カルマンフィルタを表し、3602は相補フィルタを表す。図36において、x軸は、0.01秒毎に標本化される、標本化点を示す。y軸は、回転の平均の軸とストロークの各軌道に対する回転の瞬間的な軸との間の角度を示す。図36における標本化周期は、0.1秒であるが、標本化周期は、他の場合において、0.002秒と0.1秒との間などの、何れの他の適切な値でもあり得る。上述したように、いくつかの実施形態では、回転の瞬間的な軸は、相対的に短い期間にわたるユーザのストロークのストローク軌道の第3の主成分を決定することによって得られることができる。いくつかの実施形態では、かかる短い期間は、少なくとも1つから2つの軌道を得るために十分な時間であることができる。例えば、短い期間は、5秒から10秒であることができる。いくつかの実施形態では、他の適切な値が使用されることができる。回転の平均の軸は、相対的に長い期間にわたるユーザのストロークのストローク軌道の第3の主成分を決定することによって得られることができる。図36において、角度が0度である場合、回転の平均の軸と回転の瞬間的な軸との間の変動は無く、これは、ユーザのストローク軌道の一貫性のレベルが高いことを意味する。角度が0度から遠ざかるほど、ユーザのストロークの一貫性がより低くなる。いくつかの実施形態では、ユーザのストロークの低い一貫性のレベルは、ユーザが低い泳ぎの技量である、低い効率である、疲れている及び/又は健康に関連する問題を抱えていることを示すことができる。
いくつかの実施形態では、主成分分析を用いることに加えて又は代えて、ユーザのストロークの一貫性は、空間エントロピー分析を用いて決定されることができる。例えば、図37は、本開示のいくつかの実施形態に従う水泳セッションの間のユーザのストローク軌道の一貫性を決定するプロセス3700を表すフローチャートを示す。いくつかの実施形態では、プロセス3700は、例えば、ステップを、組合せ、分割し、再配置し、変更し、加え、及び/又は削除することによって、変更されることができる。以下により詳細に記載されているように、いくつかの実施形態では、プロセス3700は、4つのステップを含むことができる。ステップ3710において、ウェアラブルデバイス100は、1つ以上の動きセンサ240から動き情報を受ける。ステップ3720において、ウェアラブルデバイス100は、ウェアラブルデバイス100の回転データの組を決定する。ステップ3730において、ウェアラブルデバイス100は、回転データの組に基づいてユーザのストローク軌道のヒストグラムを決定する。ステップ3740において、ウェアラブルデバイス100は、ヒストグラムのエントロピーのレベルを決定する。
ステップ3730において、ウェアラブルデバイス100は、回転データの組に基づいてユーザのストローク軌道のヒストグラムを決定する。一実施形態では、ヒストグラムは、ユーザのストローク軌道のヒートマップであることができる。例えば、図38は、本開示のいくつかの実施形態に従うユーザのストローク軌道のヒートマップを表す。図38では、ヒートマップは、当業者によって理解される地平座標を表す2次元ヒストグラム3800で表現されている。ヒストグラム3800の水平軸は、地平座標の方位角であり、ここで、方位角は、0度から360度までの範囲のΦと示されることができる。ヒストグラム3800の縦軸は、地平座標の高度である。ここで、高度は、0度から180度までの範囲のΘと示されることができる。ここで、一実施形態では、0度は地平座標の天頂に対応し、180度は地平座標の天底に対応する。ヒストグラム3800は、ユーザのストローク軌道がどのように複数のΦ−Θビンに対応するかを示す。すなわち、各Φ−Θビンは、そのビンがユーザのストローク軌道にどのくらい対応しそうであるかを示すストロークの可能性を有することができる。ユーザのストローク軌道があるビンに高い頻度で対応する場合、そのビンは、ストロークの可能性のより高い値を有することができ、これは、ビン3810やビン3820などの、図38におけるより明るい色に対応する。ユーザのストローク軌道があるビンにより低い頻度で対応する場合、そのビンは、ストロークの可能性のより低い値を有することができ、これは、図38におけるより暗い色に対応する。
ステップ3740において、ウェアラブルデバイス100は、ヒストグラムのエントロピーのレベルを決定する。一実施形態では、エントロピーのレベルは、式21で表現されるように各Φ−Θビンのストロークの可能性の合計の絶対値として計算されることができる。
式21において、Pは、あるΦ−Θビンに点を有する軌道の経験確率測度を示す。いくつかの実施形態では、エントロピーは、軌道の確率測度が異なるΦ−Θビンにわたって広がっている程度を示す。図38において、完全に一貫性のあるストロークは、最小の数のΦ−Θビンを占めることになり、したがってより低いエントロピーのレベルを有する。他方において、非常に一貫性が少ないストロークは、多くのΦ−Θビンを占めることになり、したがってより高いエントロピーのレベルを有する。例えば、全てのΦ−Θビンにわたって一様にランダムなプロセスは、最も一貫性のないストローク軌道であることになり、最大のエントロピーを生ずることになる。したがって、ユーザのストローク軌道の一貫性のレベルは、エントロピーのレベルによって特徴づけられることができる。すなわち、エントロピーのレベルが低いほど、ユーザのストローク軌道はより一貫性がある。いくつかの実施形態では、ヒストグラムのエントロピーのレベルは、ヒストグラムの分散のレベルに関連する。ヒストグラムが小さな数のΦ−Θビンに集中している場合、分散のレベルは低い。ヒストグラムが大きな数のΦ−Θビンに広がっている場合、分散のレベルは高い。いくつかの実施形態では、図38は、抽出標本の総数によって正規化された2次元ヒストグラムとして見られることができる。
本開示はその応用が明細書に述べられた又は図面に表された構成の詳細及び構成要素の配列に限定されないことが理解されるべきである。本開示は他の実施形態が可能であり様々な方法で実施され実行されることが可能である。また、本明細書に用いられている表現や用語は説明の目的のためのものであり限定とみなされるべきではない。例えば、本開示に記載されている技術は、腕の伸びの量に基づいて真の泳ぎのストロークを識別すること又は泳法の形を分類することに限定されない。他の応用は、歩行活動に対する歩容解析又はウェイトトレーニング活動に対する繰り返しの計数のために腕の伸びの量を用いることを含む。
このようであるから、当業者は本開示が基づいている概念が本開示のいくつかの目的を実行するための他の構成、システム、方法及び媒体を設計するための基本として容易に利用されることもできることを理解するであろう。したがって、特許請求の範囲が本開示の趣旨及び範囲から逸脱することない限りそのような等価な構成を含むとみなされることは、重要である。
本開示は上述の例示的な実施形態に説明され表されているが、本開示は一例としてのみなされたものであること、及び本開示の趣旨及び範囲から逸脱することなく、以下の特許請求の範囲によってのみ限定される、本開示の実施の詳細において数々の変更がなされることもできることが理解される。

Claims (21)

  1. ユーザの腕の動きを決定する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記動きデータを用いて、前記動きデータに基づき座標系において表される回転データを決定することと、
    前記プロセッサ回路によって、前記回転データに基づきモーメントアーム長を算出することと、
    前記プロセッサ回路によって、前記モーメントアーム長を閾値の長さと比較することと、
    前記プロセッサ回路によって、前記モーメントアーム長を前記閾値の長さと比較したことに基づき、前記ユーザの腕の振りが水泳ストロークであると決定することと、
    前記プロセッサ回路によって、前記ユーザの腕の振りが水泳ストロークであると決定したことに応じて、前記ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を算出することであって、前記水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、
    前記プロセッサ回路によって、前記ユーザの前記水泳メトリック又は前記エネルギー消費のうちの前記少なくとも一方を出力することと、
    を含む、方法。
  2. 前記座標系が前記ユーザデバイスに対する物体固定座標系である、請求項1に記載の方法。
  3. 前記モーメントアーム長を算出することが、最小二乗方程式を解くことを含む、請求項1に記載の方法。
  4. ユーザが泳いでいると決定する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ユーザのトレーニングデータを受信することと、
    前記プロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記動きデータに基づき前記ユーザのヨー角を決定することと、
    前記プロセッサ回路によって、前記トレーニングデータに基づき前記ヨー角に対応する尤度比の値を決定することと、
    前記プロセッサ回路によって、尤度比の前記値を閾値と比較することと、
    前記プロセッサ回路によって、尤度比の前記値を前記閾値と比較したことに基づき、前記ユーザが泳いでいると決定することと、
    前記プロセッサ回路によって、前記ユーザが泳いでいると決定したことに応じて、前記ユーザの水泳メトリック又はエネルギー消費のうちの少なくとも一方を算出することであって、前記水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、
    前記プロセッサ回路によって、前記ユーザの前記水泳メトリック又は前記エネルギー消費のうちの前記少なくとも一方を出力することと、
    を含む、方法。
  5. ユーザの水泳ストロークスタイルを分類する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記受信された動きデータに基づき基本周期を算出することと、
    前記プロセッサ回路によって、前記ウェアラブルデバイスの回転データを決定することであって、前記回転データは座標系において表される、ことと、
    前記プロセッサ回路によって、前記回転データから1つ以上の特徴を抽出することと、
    前記プロセッサ回路によって、前記1つ以上の特徴に基づき前記ユーザの水泳ストロークスタイルを決定することと、
    前記プロセッサ回路によって、前記決定された水泳ストロークスタイルを出力することと、
    を含む、方法。
  6. 前記座標系が前記ウェアラブルデバイスに対する物体固定座標系である、請求項5に記載の方法。
  7. 前記座標系が慣性座標系である、請求項5に記載の方法。
  8. 前記1つ以上の特徴が、
    前記ウェアラブルデバイスの平均のクラウンの向き、
    ユーザの腕及び手首の回転の相関、あるいは
    総角速度への前記ウェアラブルデバイスのクラウンの周りの回転の寄与、
    のうちの少なくとも1つを含む、請求項5に記載の方法。
  9. 前記1つ以上の特徴が、
    プル局面の間における前記ウェアラブルデバイスのバンドの周りの相対的な腕の回転、
    前記ユーザのモーメントアーム、
    回転yに対する加速度zの比、
    加速度によって重み付けされた平均重力クラウン、
    前記ウェアラブルデバイスのバンドの上部の向きと前記ウェアラブルデバイスのバンドを中心とする回転との間の相関、
    クラウン回転の二乗平均平方根(RMS)、
    前記ウェアラブルデバイスのクラウンを中心とする最小回転、
    前記ウェアラブルデバイスのバンドを中心とする最大回転、又は最大回転xオーバーy、
    のうちの少なくとも1つを含む、請求項5に記載の方法。
  10. ユーザの水泳ストロークの局面を決定する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記動きデータを用いて、前記ウェアラブルデバイスの回転データの第1のセットを決定することであって、回転データの前記第1のセットは第1の座標系において表される、ことと、
    前記プロセッサ回路によって、前記ウェアラブルデバイスの回転データの前記第1のセットを、第2の座標系において表される回転の第2のセットに変換することと、
    前記プロセッサ回路によって、回転データの前記第2のセット基づきユーザの水泳ストロークのグライド局面を決定することと、
    前記プロセッサ回路によって、回転データの前記第2のセットに基づき前記ユーザの水泳ストロークの移行局面を決定することと、
    前記プロセッサ回路によって、前記決定されたグライド局面及び移行局面に基づき前記ユーザの水泳ストロークのプル局面及びリカバリー局面を決定することと、
    前記プロセッサ回路によって、前記ユーザの水泳ストロークの前記決定されたグライド局面、移行局面、プル局面、及びリカバリー局面に基づき前記ユーザの1つ以上の水泳メトリックを算出することであって、前記1つ以上の水泳メトリックは、ターン、呼吸、ラップ、水泳ストローク、又は水泳ストロークスタイルのうちの少なくとも1つを含む、ことと、
    前記プロセッサ回路によって、前記ユーザの前記算出された1つ以上の水泳メトリックを出力することと、
    を含む、方法。
  11. 前記第1の座標系が前記ウェアラブルデバイスに対する物体固定座標系である、請求項10に記載の方法。
  12. 前記第2の座標系が慣性座標系である、請求項10に記載の方法。
  13. ユーザのストローク軌道の一貫性を決定する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記動きデータを用いて、前記ユーザデバイスの回転データを決定することであって、前記回転データは座標系において表される、ことと、
    前記プロセッサ回路によって、前記回転データが第1の過去の期間内において最小分散を有する第1の方向を決定することと、
    前記プロセッサ回路によって、前記回転データが第2の過去の期間内において最小分散を有する第2の方向を決定することと、
    前記プロセッサ回路によって、前記第1の方向と前記第2の方向との差を決定することと、
    前記プロセッサ回路によって、前記第1の方向と前記第2の方向との前記差に基づき前記ユーザのストローク軌道の一貫性を決定することと、
    前記プロセッサ回路によって、前記ユーザの前記決定されたストローク軌道の一貫性を出力することと、
    を含む、方法。
  14. 前記座標系が前記ユーザデバイスに対する物体固定座標系である、請求項13に記載の方法。
  15. 前記座標系が慣性座標系である、請求項13に記載の方法。
  16. 前記第1の方向及び前記第2の方向付けを決定することが、回転軸を決定することを含む、請求項13に記載の方法。
  17. 前記第1の過去の期間が実質的に10秒である、請求項13に記載の方法。
  18. 前記第2の過去の期間が実質的に3分である、請求項13に記載の方法。
  19. ユーザのストローク軌道の一貫性を決定する際のウェアラブルデバイスの精度を改善する方法であって、前記方法は、
    ウェアラブルデバイスのプロセッサ回路によって、前記ウェアラブルデバイスの1つ以上の動きセンサからの動きデータを受信することであって、前記1つ以上の動きセンサは加速度計又はジャイロスコープのうちの少なくとも一方を含む、ことと、
    前記プロセッサ回路によって、前記動きデータを用いて、座標系において表される回転データを決定することと、
    前記プロセッサ回路によって、前記回転データを用いて前記ユーザのストローク軌道のヒストグラムを決定することと、
    前記プロセッサによって、前記ヒストグラムに基づきエントロピーのレベルを決定することと、
    前記プロセッサ回路によって、エントロピーの前記決定されたレベルに基づき前記ユーザの軌道の一貫性のレベルを決定することと、
    前記プロセッサ回路によって、前記ユーザの軌道の一貫性の前記決定されたレベルを出力することと、
    を含む、方法。
  20. 前記座標系が前記ユーザデバイスに対する物体固定座標系である、請求項19に記載の方法。
  21. 前記座標系が慣性座標系である、請求項19に記載の方法。
JP2019511727A 2016-08-31 2017-08-31 水泳分析のシステム及び方法 Active JP6745980B2 (ja)

Applications Claiming Priority (11)

Application Number Priority Date Filing Date Title
US201662381644P 2016-08-31 2016-08-31
US201662381972P 2016-08-31 2016-08-31
US201662381836P 2016-08-31 2016-08-31
US201662382006P 2016-08-31 2016-08-31
US201662381856P 2016-08-31 2016-08-31
US62/381,836 2016-08-31
US62/381,856 2016-08-31
US62/381,972 2016-08-31
US62/382,006 2016-08-31
US62/381,644 2016-08-31
PCT/US2017/049693 WO2018045211A1 (en) 2016-08-31 2017-08-31 Systems and methods of swimming analysis

Publications (2)

Publication Number Publication Date
JP2019534721A true JP2019534721A (ja) 2019-12-05
JP6745980B2 JP6745980B2 (ja) 2020-08-26

Family

ID=61241247

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019511727A Active JP6745980B2 (ja) 2016-08-31 2017-08-31 水泳分析のシステム及び方法

Country Status (8)

Country Link
US (2) US11103749B2 (ja)
EP (1) EP3491634A1 (ja)
JP (1) JP6745980B2 (ja)
KR (1) KR102252269B1 (ja)
CN (1) CN109643499B (ja)
AU (2) AU2017321776A1 (ja)
BR (1) BR112019003561B1 (ja)
WO (1) WO2018045211A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022060222A (ja) * 2020-03-19 2022-04-14 カシオ計算機株式会社 運動支援装置、運動支援方法及びプログラム

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10620232B2 (en) 2015-09-22 2020-04-14 Apple Inc. Detecting controllers in vehicles using wearable devices
US10687707B2 (en) 2016-06-07 2020-06-23 Apple Inc. Detecting activity by a wheelchair user
US10687752B2 (en) 2016-08-29 2020-06-23 Apple Inc. Detecting unmeasurable loads using heart rate and work rate
US11896368B2 (en) 2016-08-31 2024-02-13 Apple Inc. Systems and methods for determining swimming metrics
BR112019003561B1 (pt) 2016-08-31 2022-11-22 Apple Inc Sistema e método para melhorar uma exatidão de um dispositivo para ser usado junto ao corpo e determinar um movimento do braço de um usuário
US10617912B2 (en) 2016-08-31 2020-04-14 Apple Inc. Systems and methods of swimming calorimetry
US10512406B2 (en) 2016-09-01 2019-12-24 Apple Inc. Systems and methods for determining an intensity level of an exercise using photoplethysmogram (PPG)
US10478703B2 (en) * 2016-09-05 2019-11-19 Seiko Epson Corporation Information processing method, wearable apparatus, content reproduction device, content reproduction system, and content reproduction method
US11051720B2 (en) 2017-06-01 2021-07-06 Apple Inc. Fitness tracking for constrained-arm usage
EP3614260A4 (en) * 2017-11-20 2020-10-21 Shanghai Cambricon Information Technology Co., Ltd METHOD, DEVICE AND SYSTEM FOR PARALLEL PROCESSING OF TASKS, STORAGE MEDIUM AND COMPUTER DEVICE
US10945674B2 (en) * 2017-12-13 2021-03-16 Google Llc Methods, systems, and media for predicting sensor measurement quality
JP7169079B2 (ja) * 2018-03-28 2022-11-10 美津濃株式会社 判定プログラム、判定装置、アルゴリズム生成装置、および判定システム
US11704568B2 (en) * 2018-10-16 2023-07-18 Carnegie Mellon University Method and system for hand activity sensing
CN109395349B (zh) * 2018-12-05 2023-12-29 泰州职业技术学院 一种游泳辅助训练装置
CN109631888B (zh) * 2019-01-04 2021-11-05 北京卡路里信息技术有限公司 动作轨迹识别方法、装置、可穿戴设备及存储介质
JP7127605B2 (ja) * 2019-04-23 2022-08-30 カシオ計算機株式会社 運動支援装置、運動支援方法及び運動支援プログラム
KR20200137460A (ko) * 2019-05-30 2020-12-09 삼성전자주식회사 운동 환경에 따른 운동 정보를 제공하는 전자 장치 및 그 동작 방법
US20220161117A1 (en) * 2019-06-28 2022-05-26 RLT IP Ltd. Framework for recording and analysis of movement skills
US20210068713A1 (en) * 2019-09-09 2021-03-11 Apple Inc. Detecting swimming activities on a wearable device
US11937904B2 (en) 2019-09-09 2024-03-26 Apple Inc. Detecting the end of cardio machine activities on a wearable device
DE112020005388T5 (de) * 2019-10-31 2023-01-05 Robert Bosch Engineering And Business Solutions Private Limited Eine Vorrichtung und ein Verfahren zum Bestimmen einer Schwimmmetrik
KR102118682B1 (ko) 2019-11-18 2020-06-03 박동윤 레크리에이션 수영 지도 시스템
CN110930834B (zh) * 2019-11-25 2021-10-12 齐齐哈尔大学 一种获得匀加速运动液体液面高差的实验装置和方法
TWI745812B (zh) * 2019-12-25 2021-11-11 財團法人工業技術研究院 智慧即時運動疲勞偵測系統及方法、及智慧即時運動疲勞偵測裝置
GB2597336B (en) * 2020-09-08 2023-06-14 Swim Smooth Ltd System and method for coaching a swimmer
GB2614700A (en) * 2021-12-02 2023-07-19 Swim Smooth Ltd System and method for coaching a swimmer
CN114602155B (zh) * 2022-05-11 2023-02-21 荣耀终端有限公司 游泳信息统计方法、计算机可读存储介质和电子设备
CN117197193A (zh) * 2023-11-07 2023-12-08 杭州巨岩欣成科技有限公司 游泳速度估计方法、装置、计算机设备及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010051333A (ja) * 2008-08-26 2010-03-11 Citizen Holdings Co Ltd 水泳量計測装置
GB2465824A (en) * 2008-12-03 2010-06-09 James Christopher Irlam Motion analysis device for sports
WO2010090867A2 (en) * 2009-01-21 2010-08-12 SwimSense, LLC Multi-state performance monitoring system
JP2013039316A (ja) * 2011-08-19 2013-02-28 Etsuji Michiya 水中運動量計
JP2014042757A (ja) * 2012-08-28 2014-03-13 Seiko Instruments Inc 電子機器、泳法判別方法、及び泳法判別プログラム
WO2015126182A1 (ko) * 2014-02-21 2015-08-27 삼성전자 주식회사 콘텐츠를 표시하는 방법 및 이를 위한 전자 장치
US20150357948A1 (en) * 2014-06-05 2015-12-10 Kevin W. Goldstein Hand Worn Wireless Remote Controller For Motors
JP2016150018A (ja) * 2015-02-16 2016-08-22 セイコーエプソン株式会社 トレーニング管理システム、トレーニング管理方法およびトレーニング管理プログラム
JP2018000543A (ja) * 2016-07-01 2018-01-11 セイコーエプソン株式会社 ウェアラブル機器、制御方法、およびプログラム
JP2018015187A (ja) * 2016-07-27 2018-02-01 セイコーエプソン株式会社 水泳情報処理システム、情報処理装置、水泳情報処理方法、およびプログラム

Family Cites Families (196)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4566461A (en) 1983-02-15 1986-01-28 Michael Lubell Health fitness monitor
WO1990012538A1 (en) 1989-04-24 1990-11-01 Esar Shvartz Universal fitness testing system
US5663897A (en) 1995-06-08 1997-09-02 Strokz Digital Sports, Inc. Method and apparatus for analyzing a swimmer's swim stroke
US5664499A (en) 1996-08-28 1997-09-09 Kingsmill; William Gault Ski lift loader and unloader
US6059724A (en) 1997-02-14 2000-05-09 Biosignal, Inc. System for predicting future health
JPH11295104A (ja) 1998-04-14 1999-10-29 Osaka Prefecture Shakai Taiiku Kenkyusho 歩数データ管理システム、およびその出力媒体、記憶媒体
US6473483B2 (en) 1998-10-28 2002-10-29 Nathan Pyles Pedometer
US6675041B2 (en) 1999-05-18 2004-01-06 Physi-Cal Enterprises Lp Electronic apparatus and method for monitoring net calorie intake
US7156809B2 (en) 1999-12-17 2007-01-02 Q-Tec Systems Llc Method and apparatus for health and disease management combining patient data monitoring with wireless internet connectivity
AU2001231117A1 (en) 2000-01-24 2001-07-31 Ambulatory Monitoring, Inc. System and method of monitoring and modifying human activity-based behavior
FI115288B (fi) 2000-02-23 2005-04-15 Polar Electro Oy Palautumisen ohjaus kuntosuorituksen yhteydessä
WO2002087431A1 (en) 2001-05-01 2002-11-07 Structural Bioinformatics, Inc. Diagnosing inapparent diseases from common clinical tests using bayesian analysis
US8085153B2 (en) 2001-08-08 2011-12-27 O'connor Gerard Activity monitoring device
US20030032460A1 (en) 2001-08-09 2003-02-13 Cannon Joseph M. Multi-user hands-free wireless telephone gateway
US6868338B1 (en) * 2001-11-19 2005-03-15 Bbnt Solutions Llc Method and apparatus for recording and synthesizing position data
US6955542B2 (en) * 2002-01-23 2005-10-18 Aquatech Fitness Corp. System for monitoring repetitive movement
US20070100666A1 (en) 2002-08-22 2007-05-03 Stivoric John M Devices and systems for contextual and physiological-based detection, monitoring, reporting, entertainment, and control of other devices
US7062313B2 (en) 2002-09-27 2006-06-13 Polar Electro Oy Evaluation of exercise stress level dependent parameter
US7805149B2 (en) 2004-01-16 2010-09-28 Adidas Ag Location-aware fitness training device, methods, and program products that support real-time interactive communication and automated route generation
US20050107723A1 (en) 2003-02-15 2005-05-19 Wehman Thomas C. Methods and apparatus for determining work performed by an individual from measured physiological parameters
US6837827B1 (en) 2003-06-17 2005-01-04 Garmin Ltd. Personal training device using GPS data
RO122807B1 (ro) 2003-08-08 2010-02-26 Mihai Bacheş Dispozitiv de înot
EP1680010A4 (en) 2003-11-04 2009-07-01 Quantum Intech Inc SYSTEMS AND METHODS FACILITATING PHYSIOLOGICAL CONSISTENCY THROUGH RESPIRATORY TRAINING
US7311675B2 (en) 2003-12-10 2007-12-25 Georgia Tech Research Corporation Systems and methods for mobile activity monitoring
US8589174B2 (en) 2003-12-16 2013-11-19 Adventium Enterprises Activity monitoring
US20050212701A1 (en) 2004-02-13 2005-09-29 Stewart Nimmo Skier information system
US8894576B2 (en) 2004-03-10 2014-11-25 University Of Virginia Patent Foundation System and method for the inference of activities of daily living and instrumental activities of daily living automatically
JP2007532165A (ja) 2004-04-09 2007-11-15 コナー・オブライエン 運動量モニター
KR100635213B1 (ko) 2004-08-17 2006-10-16 엘지전자 주식회사 이동통신 단말기를 이용한 운동량 측정방법
US7254516B2 (en) 2004-12-17 2007-08-07 Nike, Inc. Multi-sensor monitoring of athletic performance
US7379844B2 (en) 2005-02-17 2008-05-27 Sungkyunkwan University Foundation For Corporate Collaboration Of Sungkyundwan University Particle sampling method and sensor fusion and filtering method
US7559877B2 (en) 2005-03-24 2009-07-14 Walkstyles, Inc. Interactive exercise device and system
EP1748636B1 (en) 2005-07-28 2008-11-19 Harman Becker Automotive Systems GmbH Improved communication in passenger compartments
US7534206B1 (en) 2005-09-19 2009-05-19 Garmin Ltd. Navigation-assisted fitness and dieting device
US7387029B2 (en) 2005-09-23 2008-06-17 Velocomp, Llp Apparatus for measuring total force in opposition to a moving vehicle and method of using
JP4785526B2 (ja) 2005-12-28 2011-10-05 セイコーインスツル株式会社 電子式歩数計
US8112149B2 (en) 2006-02-27 2012-02-07 Monitoring Information Technologies, Inc. System and method for heart and activity monitoring
US7467060B2 (en) 2006-03-03 2008-12-16 Garmin Ltd. Method and apparatus for estimating a motion parameter
US7827000B2 (en) 2006-03-03 2010-11-02 Garmin Switzerland Gmbh Method and apparatus for estimating a motion parameter
JP4904861B2 (ja) 2006-03-14 2012-03-28 ソニー株式会社 体動検出装置、体動検出方法および体動検出プログラム
US20070219059A1 (en) 2006-03-17 2007-09-20 Schwartz Mark H Method and system for continuous monitoring and training of exercise
US9390229B1 (en) 2006-04-26 2016-07-12 Dp Technologies, Inc. Method and apparatus for a health phone
US7643873B2 (en) 2006-04-28 2010-01-05 Idt Technology Limited Exercise data apparatus
US7771320B2 (en) 2006-09-07 2010-08-10 Nike, Inc. Athletic performance sensing and/or tracking systems and methods
US7690556B1 (en) 2007-01-26 2010-04-06 Dp Technologies, Inc. Step counter accounting for incline
JP4636206B2 (ja) 2007-03-30 2011-02-23 パナソニック電工株式会社 活動量計測システム
US7647196B2 (en) 2007-08-08 2010-01-12 Dp Technologies, Inc. Human activity monitoring device with distance calculation
US7668691B2 (en) 2007-08-29 2010-02-23 Microsoft Corporation Activity classification from route and sensor-based metadata
AU2008100295A4 (en) 2008-04-04 2008-05-29 Chen, Ilene Dr Total Immersion Freestyle Swimming
FI20085402A0 (fi) 2008-05-02 2008-05-02 Firstbeat Technologies Oy Kuntotesti
US8996332B2 (en) 2008-06-24 2015-03-31 Dp Technologies, Inc. Program setting adjustments based on activity identification
US20100030350A1 (en) 2008-07-29 2010-02-04 Pvi Virtual Media Services, Llc System and Method for Analyzing Data From Athletic Events
WO2010040417A1 (en) 2008-10-10 2010-04-15 Nokia Siemens Networks Oy Apparatus, method and program providing a confidence estimation of coverage hole detection
US20100184564A1 (en) 2008-12-05 2010-07-22 Nike, Inc. Athletic Performance Monitoring Systems and Methods in a Team Sports Environment
EP2398383A4 (en) 2009-02-20 2013-07-03 Univ Colorado Regents ARTICLE BASED BODY WEIGHT MONITOR AND POSITIONING INSTRUCTION, CLASSIFICATION OF BODY ACTIVITIES AND ENERGY CONSUMPTION CALCULATOR
JP5789199B2 (ja) 2009-02-25 2015-10-07 ヴァレンセル,インコーポレイテッド ヘッドセット及びイアバッド
US8681006B2 (en) * 2009-04-01 2014-03-25 Dayton Technologies Limited Swim monitor using a three-axis accelerometer
US20100274102A1 (en) 2009-04-22 2010-10-28 Streamline Automation, Llc Processing Physiological Sensor Data Using a Physiological Model Combined with a Probabilistic Processor
US9060722B2 (en) 2009-04-22 2015-06-23 Rodrigo E. Teixeira Apparatus for processing physiological sensor data using a physiological model and method of operation therefor
US9492092B2 (en) 2009-05-20 2016-11-15 Sotera Wireless, Inc. Method for continuously monitoring a patient using a body-worn device and associated system for alarms/alerts
US8696420B2 (en) * 2009-07-17 2014-04-15 Neal Mueller System and method for counting swimming laps
US8653956B2 (en) 2009-09-11 2014-02-18 Hti Ip, L.L.C. Method and system for implementing a geofence boundary for a tracked asset
US8376910B2 (en) 2009-10-02 2013-02-19 At&T Intellectual Property I, L.P. Methods, systems, and computer program products for providing remote participation in multi-media events
FI20096365A0 (fi) 2009-12-18 2009-12-18 Polar Electro Oy Järjestelmä harjoitukseen liittyvän tiedon käsittelemiseksi
US8334842B2 (en) 2010-01-15 2012-12-18 Microsoft Corporation Recognizing user intent in motion capture system
WO2011105914A1 (en) 2010-02-24 2011-09-01 Ackland, Kerri Anne Classification system and method
US8612181B2 (en) 2010-03-04 2013-12-17 Ipcomm Wireless system for monitoring and analysis of skiing
US20110238485A1 (en) 2010-03-26 2011-09-29 Nokia Corporation Method and apparatus for utilizing confidence levels to serve advertisements
US8531180B2 (en) 2010-03-30 2013-09-10 Apple Inc. Determining heading using magnetometer data and angular rate data
WO2012006549A2 (en) 2010-07-09 2012-01-12 The Regents Of The University Of California System comprised of sensors, communications, processing and inference on servers and other devices
KR101689887B1 (ko) 2010-07-09 2016-12-26 삼성전자주식회사 보행자의 보폭 추정 방법 및 이를 위한 휴대 단말
US20130135097A1 (en) 2010-07-29 2013-05-30 J&M I.P. Holding Company, Llc Fall-Responsive Emergency Device
US8890854B2 (en) 2010-08-27 2014-11-18 Apple Inc. Touch sensor panel calibration
US9800716B2 (en) 2010-09-21 2017-10-24 Cellepathy Inc. Restricting mobile device usage
US8750853B2 (en) 2010-09-21 2014-06-10 Cellepathy Ltd. Sensor-based determination of user role, location, and/or state of one or more in-vehicle mobile devices and enforcement of usage thereof
US9167991B2 (en) 2010-09-30 2015-10-27 Fitbit, Inc. Portable monitoring devices and methods of operating same
US10216893B2 (en) 2010-09-30 2019-02-26 Fitbit, Inc. Multimode sensor devices
US9433372B2 (en) 2010-12-23 2016-09-06 Zephyr Technology Corporation System method and device for providing an automated fitness test
US20120172677A1 (en) 2010-12-30 2012-07-05 Logan Robert J Systems and methods for monitoring and processing biometric data
US8449435B2 (en) 2011-03-14 2013-05-28 Lg Electronics Inc. Guiding exercise based on fat oxidation rate
US9317660B2 (en) 2011-03-31 2016-04-19 Adidas Ag Group performance monitoring system and method
FI20115351A0 (fi) 2011-04-12 2011-04-12 Firstbeat Technologies Oy Järjestelmä käyttäjän fyysisen tilan tarkkailemiseksi
US9378336B2 (en) 2011-05-16 2016-06-28 Dacadoo Ag Optical data capture of exercise data in furtherance of a health score computation
US8892391B2 (en) 2011-06-03 2014-11-18 Apple Inc. Activity detection
US20120322621A1 (en) 2011-06-20 2012-12-20 Bingham Jr Robert James Power measurement device for a bike trainer
US8638320B2 (en) 2011-06-22 2014-01-28 Apple Inc. Stylus orientation detection
US8928635B2 (en) 2011-06-22 2015-01-06 Apple Inc. Active stylus
US8787944B2 (en) 2011-08-18 2014-07-22 Rivada Research, Llc Method and system for providing enhanced location based information for wireless handsets
US20130085861A1 (en) 2011-09-30 2013-04-04 Scott Dunlap Persistent location tracking on mobile devices and location profiling
CA2852916A1 (en) 2011-10-17 2013-04-25 Intertrust Technologies Corporation Systems and methods for protecting and governing genomic and other information
US10006896B2 (en) 2011-11-14 2018-06-26 University of Pittsburgh—of the Commonwealth System of Higher Education Method, apparatus and system for food intake and physical activity assessment
US20130158686A1 (en) 2011-12-02 2013-06-20 Fitlinxx, Inc. Intelligent activity monitor
US20150119728A1 (en) 2011-12-02 2015-04-30 Fitlinxx, Inc. Health monitor
TW201328660A (zh) 2012-01-06 2013-07-16 Advanced Mediwatch Co Ltd 即時運動指導系統
JP5454593B2 (ja) 2012-01-26 2014-03-26 トヨタ自動車株式会社 心拍信号処理装置および心拍信号処理方法
GB201202637D0 (en) 2012-02-16 2012-04-04 Univ Leuven Kath Exercise system and method
US9597014B2 (en) 2012-06-22 2017-03-21 Fitbit, Inc. GPS accuracy refinement using external sensors
US20140180595A1 (en) 2012-12-26 2014-06-26 Fitbit, Inc. Device state dependent user interface management
US9168419B2 (en) * 2012-06-22 2015-10-27 Fitbit, Inc. Use of gyroscopes in personal fitness tracking devices
US9579048B2 (en) 2012-07-30 2017-02-28 Treefrog Developments, Inc Activity monitoring system with haptic feedback
WO2014032181A1 (en) 2012-08-27 2014-03-06 Université Du Québec À Chicoutimi Method to determine physical properties of the ground, foot-worn sensor therefore, and method to advise a user of a risk of falling based thereon
CA2883852A1 (en) 2012-09-04 2014-03-13 Whoop, Inc. Systems, devices and methods for continuous heart rate monitoring and interpretation
US8928624B2 (en) 2012-09-13 2015-01-06 Atmel Corporation Differential sensing for capacitive touch sensors
US9066210B2 (en) 2012-09-21 2015-06-23 Cellco Partnership Method and apparatus for automatic mobile communications restriction
US20140107932A1 (en) 2012-10-11 2014-04-17 Aliphcom Platform for providing wellness assessments and recommendations using sensor data
US20140109390A1 (en) 2012-10-24 2014-04-24 Robert Leslie Manning Oximeter integrated with wireless devices, that can be worn comfortably on the ear and can be connected to computing devices to provide the wearer information on their heart rate, oxygen saturation, breathing and calories expended whilst the device is worn. Data captured whilst wearing the device can be use at a future time to show, on a computing device, historic readings of the users heart rate, oxygen saturation levels, breathing rate, breathing volume and calories burned.
US10206589B2 (en) 2012-10-26 2019-02-19 Nike, Inc. Athletic performance monitoring system utilizing heart rate information
US9700240B2 (en) 2012-12-14 2017-07-11 Microsoft Technology Licensing, Llc Physical activity inference from environmental metrics
US20140172238A1 (en) 2012-12-15 2014-06-19 Dean A. Craine Motor Vehicle Driver and Passenger Identification System and Method
EP2745777A1 (en) 2012-12-19 2014-06-25 Stichting IMEC Nederland Device and method for calculating cardiorespiratory fitness level and energy expenditure of a living being
TWI457539B (zh) 2012-12-19 2014-10-21 Ind Tech Res Inst 多姿態步距校正定位系統與方法
US20140221854A1 (en) 2013-01-08 2014-08-07 National Electronics and Watch Company Measuring device, including a heart rate sensor, configured to be worn on the wrist of a user
US20140200906A1 (en) 2013-01-15 2014-07-17 Motorola Mobility Llc Displaying a statistically significant relation
US20140197963A1 (en) 2013-01-15 2014-07-17 Fitbit, Inc. Portable monitoring devices and methods of operating the same
US9089285B2 (en) 2013-01-31 2015-07-28 Salutron, Inc. Energy expenditure computation based on accelerometer and heart rate monitor
EP2770454A1 (en) 2013-02-22 2014-08-27 NIKE Innovate C.V. Activity monitoring, tracking and synchronization
US20140266789A1 (en) 2013-03-12 2014-09-18 The Inner Circle Group LLC System and method for determining a driver in a telematic application
US10448849B2 (en) 2013-03-15 2019-10-22 Vital Connect, Inc. Contextual heart rate monitoring
US10486049B2 (en) * 2013-03-15 2019-11-26 Amer Sports Digital Services Oy Device and method for monitoring swimming performance
US9668041B2 (en) 2013-05-22 2017-05-30 Zonaar Corporation Activity monitoring and directing system
CN104218976B (zh) * 2013-06-03 2019-01-08 飞比特公司 使用蓝牙的自适应数据传送设备和方法
US9448250B2 (en) 2013-06-08 2016-09-20 Apple Inc. Detecting mount angle of mobile device in vehicle using motion sensors
EP3019083A4 (en) 2013-07-12 2017-04-12 Royal Melbourne Institute Of Technology Sensor array system
US9264862B2 (en) 2013-08-15 2016-02-16 Apple Inc. Determining exit from a vehicle
US20150250417A1 (en) 2013-08-19 2015-09-10 bOMDIC Inc. Stamina monitoring method and device
US10188347B2 (en) 2013-08-23 2019-01-29 Nike, Inc. Energy expenditure device
US10470704B2 (en) 2013-09-16 2019-11-12 Koninklijke Philips N.V. System and method for estimating cardiovascular fitness of a person
US20150087929A1 (en) 2013-09-20 2015-03-26 Tuyymi Technologies LLC Method and System for Population Level Determination of Maximal Aerobic Capacity
US20150088006A1 (en) 2013-09-20 2015-03-26 Simbionics Method for determining aerobic capacity
US20150100141A1 (en) 2013-10-07 2015-04-09 Zinc Software Limited Head Worn Sensor Device and System for Exercise Tracking and Scoring
US9338759B2 (en) 2013-10-10 2016-05-10 Pushd Inc. Method and system for tracking a mobile user
KR102365120B1 (ko) 2013-11-22 2022-02-18 메디데이타 솔루션즈, 인코포레이티드 심장 활동 감지 및 분석용 등각 센서 시스템
US20150147734A1 (en) * 2013-11-25 2015-05-28 International Business Machines Corporation Movement assessor
US20150148632A1 (en) 2013-11-26 2015-05-28 David Alan Benaron Calorie Monitoring Sensor And Method For Cell Phones, Smart Watches, Occupancy Sensors, And Wearables
US20150182149A1 (en) 2013-12-27 2015-07-02 Simbionics Methods for optimally matching musical rhythms to physical and physiologic rhythms
CN106030247A (zh) 2014-02-26 2016-10-12 皇家飞利浦有限公司 用于测量骑车节奏的设备
EP3146896B1 (en) 2014-02-28 2020-04-01 Valencell, Inc. Method and apparatus for generating assessments using physical activity and biometric parameters
US9374477B2 (en) 2014-03-05 2016-06-21 Polar Electro Oy Wrist computer wireless communication and event detection
US20150328523A1 (en) 2014-05-19 2015-11-19 Garmin Switzerland Gmbh Devices and methods for analyzing golf swings
US9874457B2 (en) 2014-05-30 2018-01-23 Microsoft Technology Licensing, Llc Adaptive lifestyle metric estimation
US9999388B2 (en) 2014-06-26 2018-06-19 Kenneth Chatham Hand-held device for the endurance training and the determination of endurance metrics
US20150374240A1 (en) 2014-06-26 2015-12-31 Salutron, Inc. Heart Rate Inference Based On Accelerometer And Cardiac Model
US10568549B2 (en) 2014-07-11 2020-02-25 Amer Sports Digital Services Oy Wearable activity monitoring device and related method
WO2016018044A1 (en) 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable device and method of controlling the same
JP6109125B2 (ja) 2014-08-20 2017-04-05 キヤノン株式会社 半導体装置、固体撮像装置、および撮像システム
US10126427B2 (en) 2014-08-20 2018-11-13 Polar Electro Oy Estimating local motion of physical exercise
US11494390B2 (en) 2014-08-21 2022-11-08 Affectomatics Ltd. Crowd-based scores for hotels from measurements of affective response
US10186161B2 (en) 2014-08-27 2019-01-22 Icon Health & Fitness, Inc. Providing interaction with broadcasted media content
US10154789B2 (en) 2014-09-02 2018-12-18 Apple Inc. Latent load calibration for calorimetry using sensor fusion
WO2016044831A1 (en) 2014-09-21 2016-03-24 Athlete Architect Llc Methods and apparatus for power expenditure and technique determination during bipedal motion
US9410979B2 (en) * 2014-09-23 2016-08-09 Fitbit, Inc. Hybrid angular motion sensors
WO2016073620A1 (en) 2014-11-06 2016-05-12 Maven Machines, Inc. System for monitoring vehicle operator compliance with safe operating conditions
US9557868B2 (en) 2014-11-21 2017-01-31 Apple Inc. Noise reduction for touch sensor system with active stylus
US9413871B2 (en) 2014-12-09 2016-08-09 Toyota Motor Engineering & Manufacturing North America, Inc. Texting while driving caution system for a vehicle
US10244948B2 (en) 2015-03-06 2019-04-02 Apple Inc. Statistical heart rate monitoring for estimating calorie expenditure
US9613477B2 (en) 2015-04-21 2017-04-04 International Business Machines Corporation Collection of information using contactless devices in combination with mobile computing devices
US20160363449A1 (en) 2015-06-09 2016-12-15 Ohio State Innovation Foundation Apparatus and method for logging propulsion data associated with a manual mobility assistance device
US9931062B2 (en) 2015-06-23 2018-04-03 Motorola Mobility Llc Wearable device system with driver mode steering detection
WO2017007518A1 (en) 2015-07-07 2017-01-12 Obma Padraic R Noninvasive medical monitoring device, system and method
CN105031905B (zh) 2015-07-08 2018-03-27 广东欧珀移动通信有限公司 一种运动信息显示方法和装置
CN105068656A (zh) 2015-08-20 2015-11-18 舜林实业有限公司 一种穿戴式动态记录装置
US10854104B2 (en) * 2015-08-28 2020-12-01 Icuemotion Llc System for movement skill analysis and skill augmentation and cueing
US10699594B2 (en) 2015-09-16 2020-06-30 Apple Inc. Calculating an estimate of wind resistance experienced by a cyclist
US10620232B2 (en) 2015-09-22 2020-04-14 Apple Inc. Detecting controllers in vehicles using wearable devices
WO2017058927A1 (en) 2015-09-28 2017-04-06 University Of Virginia Patent Foundation Gait pathology detection and monitoring system, and method
US20170094450A1 (en) 2015-09-30 2017-03-30 Apple Inc. Crowdsourcing activity detection for group activities
US10292606B2 (en) 2015-11-05 2019-05-21 Logitech Europe, S.A. System and method for determining performance capacity
US10463909B2 (en) * 2015-12-27 2019-11-05 Seismic Holdings, Inc. System and method for using performance signatures
US10716478B2 (en) 2015-12-29 2020-07-21 Motorola Mobility Llc Wearable device heart monitor systems
US10197396B2 (en) 2016-01-27 2019-02-05 Apple Inc. Always on compass calibration system and methods
US10048777B2 (en) 2016-02-24 2018-08-14 Apple Inc. Adaptive make/break detection for a stylus touch device
US9811181B2 (en) 2016-02-24 2017-11-07 Apple Inc. Noise correction for a stylus touch device
US10456078B2 (en) 2016-03-03 2019-10-29 Chandrasekaran Jayaraman Wearable device and system for preventative health care for repetitive strain injuries
US10048803B2 (en) 2016-03-17 2018-08-14 Apple Inc. Detecting backside force in a touch-screen device
US10067625B2 (en) 2016-03-18 2018-09-04 Apple Inc. Virtual deflection determination for force-sensing
US10694994B2 (en) 2016-03-22 2020-06-30 Apple Inc. Techniques for jointly calibrating load and aerobic capacity
US9965941B2 (en) 2016-06-01 2018-05-08 Tile, Inc. User intervention based on external data in a tracking device environment
US10687707B2 (en) 2016-06-07 2020-06-23 Apple Inc. Detecting activity by a wheelchair user
US10261192B2 (en) * 2016-06-10 2019-04-16 Apple Inc. Radionavigation for swimmers
CN106023898B (zh) 2016-07-26 2018-07-24 京东方科技集团股份有限公司 像素电路、显示面板及驱动方法
US10918907B2 (en) * 2016-08-14 2021-02-16 Fitbit, Inc. Automatic detection and quantification of swimming
US20180049694A1 (en) 2016-08-16 2018-02-22 Apple Inc. Systems and methods for determining individualized energy expenditure
US10709933B2 (en) 2016-08-17 2020-07-14 Apple Inc. Pose and heart rate energy expenditure for yoga
CN106175781B (zh) * 2016-08-25 2019-08-20 歌尔股份有限公司 利用可穿戴设备监测游泳状态的方法及可穿戴设备
US10687752B2 (en) 2016-08-29 2020-06-23 Apple Inc. Detecting unmeasurable loads using heart rate and work rate
US11896368B2 (en) 2016-08-31 2024-02-13 Apple Inc. Systems and methods for determining swimming metrics
US10617912B2 (en) 2016-08-31 2020-04-14 Apple Inc. Systems and methods of swimming calorimetry
BR112019003561B1 (pt) 2016-08-31 2022-11-22 Apple Inc Sistema e método para melhorar uma exatidão de um dispositivo para ser usado junto ao corpo e determinar um movimento do braço de um usuário
US10512406B2 (en) 2016-09-01 2019-12-24 Apple Inc. Systems and methods for determining an intensity level of an exercise using photoplethysmogram (PPG)
US11051720B2 (en) 2017-06-01 2021-07-06 Apple Inc. Fitness tracking for constrained-arm usage
US20190076063A1 (en) 2017-09-11 2019-03-14 Apple Inc. Systems and methods of ski activity detection
US11937904B2 (en) 2019-09-09 2024-03-26 Apple Inc. Detecting the end of cardio machine activities on a wearable device
US20210068712A1 (en) 2019-09-09 2021-03-11 Apple Inc. Detecting the end of cycling activities on a wearable device
US20210068713A1 (en) 2019-09-09 2021-03-11 Apple Inc. Detecting swimming activities on a wearable device
US20210093917A1 (en) 2019-09-27 2021-04-01 Apple Inc. Detecting outdoor walking workouts on a wearable device
US20210093918A1 (en) 2019-09-27 2021-04-01 Apple Inc. Detecting the end of hiking activities on a wearable device

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010051333A (ja) * 2008-08-26 2010-03-11 Citizen Holdings Co Ltd 水泳量計測装置
GB2465824A (en) * 2008-12-03 2010-06-09 James Christopher Irlam Motion analysis device for sports
WO2010090867A2 (en) * 2009-01-21 2010-08-12 SwimSense, LLC Multi-state performance monitoring system
JP2013039316A (ja) * 2011-08-19 2013-02-28 Etsuji Michiya 水中運動量計
JP2014042757A (ja) * 2012-08-28 2014-03-13 Seiko Instruments Inc 電子機器、泳法判別方法、及び泳法判別プログラム
WO2015126182A1 (ko) * 2014-02-21 2015-08-27 삼성전자 주식회사 콘텐츠를 표시하는 방법 및 이를 위한 전자 장치
US20150357948A1 (en) * 2014-06-05 2015-12-10 Kevin W. Goldstein Hand Worn Wireless Remote Controller For Motors
JP2016150018A (ja) * 2015-02-16 2016-08-22 セイコーエプソン株式会社 トレーニング管理システム、トレーニング管理方法およびトレーニング管理プログラム
JP2018000543A (ja) * 2016-07-01 2018-01-11 セイコーエプソン株式会社 ウェアラブル機器、制御方法、およびプログラム
JP2018015187A (ja) * 2016-07-27 2018-02-01 セイコーエプソン株式会社 水泳情報処理システム、情報処理装置、水泳情報処理方法、およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022060222A (ja) * 2020-03-19 2022-04-14 カシオ計算機株式会社 運動支援装置、運動支援方法及びプログラム
JP7322985B2 (ja) 2020-03-19 2023-08-08 カシオ計算機株式会社 運動支援装置、運動支援方法及びプログラム

Also Published As

Publication number Publication date
CN109643499B (zh) 2022-02-15
US11103749B2 (en) 2021-08-31
BR112019003561B1 (pt) 2022-11-22
WO2018045211A1 (en) 2018-03-08
EP3491634A1 (en) 2019-06-05
CN109643499A (zh) 2019-04-16
KR20190035786A (ko) 2019-04-03
KR102252269B1 (ko) 2021-05-14
JP6745980B2 (ja) 2020-08-26
AU2017321776A1 (en) 2019-03-07
US20220241641A1 (en) 2022-08-04
AU2020273327B2 (en) 2022-09-22
AU2020273327A1 (en) 2020-12-17
BR112019003561A2 (pt) 2019-05-21
US20180056123A1 (en) 2018-03-01

Similar Documents

Publication Publication Date Title
AU2020273327B2 (en) Systems and methods of swimming analysis
US10617912B2 (en) Systems and methods of swimming calorimetry
US11896368B2 (en) Systems and methods for determining swimming metrics
US20210068713A1 (en) Detecting swimming activities on a wearable device
AU2015316575B2 (en) Inertial tracking based determination of the position of a mobile device carried by a user in a geographical area
Hsu et al. Wearable sport activity classification based on deep convolutional neural network
JP6083799B2 (ja) 携帯デバイスの携帯場所判定方法、携帯デバイス、携帯デバイスの携帯場所判定システム、プログラム及び情報記憶媒体
Thiemjarus et al. A study on instance-based learning with reduced training prototypes for device-context-independent activity recognition on a mobile phone
Jensen et al. Classification of kinematic swimming data with emphasis on resource consumption
JP5750742B2 (ja) 移動体の状態推定装置
US11937904B2 (en) Detecting the end of cardio machine activities on a wearable device
US20210093917A1 (en) Detecting outdoor walking workouts on a wearable device
US20190076063A1 (en) Systems and methods of ski activity detection
KR20170084643A (ko) 듀얼 스마트 밴드를 이용한 모션 분석 장치 및 방법
Windau et al. Situation awareness via sensor-equipped eyeglasses
Zhou et al. Limbmotion: Decimeter-level limb tracking for wearable-based human-computer interaction
Ghobadi et al. Foot-mounted inertial measurement unit for activity classification
JP2016090371A (ja) センサ情報を処理する情報処理装置、情報管理システム、情報表示システム、情報処理方法、プログラム、記録媒体及びサーバ装置
US10678337B2 (en) Context aware movement recognition system
US20220151511A1 (en) System, apparatus and method for activity classification for a watch sensor
Wang et al. Posture recognition and adaptive step detection based on hand-held terminal
Song et al. Magic Wand: Towards Plug-and-Play Gesture Recognition on Smartwatch
Chien et al. Model construction for human motion classification using inertial sensors
Jahan et al. Walking steps counting and distance measurement on user smart phone
WO2021255740A1 (en) Posture detection device and system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190227

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200311

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200706

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200804

R150 Certificate of patent or registration of utility model

Ref document number: 6745980

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250