JP2023527717A - ユーザ活動を監視するためのシステムおよび方法 - Google Patents
ユーザ活動を監視するためのシステムおよび方法 Download PDFInfo
- Publication number
- JP2023527717A JP2023527717A JP2022569279A JP2022569279A JP2023527717A JP 2023527717 A JP2023527717 A JP 2023527717A JP 2022569279 A JP2022569279 A JP 2022569279A JP 2022569279 A JP2022569279 A JP 2022569279A JP 2023527717 A JP2023527717 A JP 2023527717A
- Authority
- JP
- Japan
- Prior art keywords
- user
- activity
- sensor
- activity module
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B24/00—Electric or electronic controls for exercising apparatus of preceding groups; Controlling or monitoring of exercises, sportive games, training or athletic performances
- A63B24/0062—Monitoring athletic performances, e.g. for determining the work of a user on an exercise apparatus, the completed jogging or cycling distance
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B71/0622—Visual, audio or audio-visual systems for entertaining, instructing or motivating the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B71/0619—Displays, user interfaces and indicating devices, specially adapted for sport equipment, e.g. display mounted on treadmills
- A63B2071/065—Visualisation of specific exercise parameters
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B2071/0675—Input for modifying training controls during workout
-
- A—HUMAN NECESSITIES
- A63—SPORTS; GAMES; AMUSEMENTS
- A63B—APPARATUS FOR PHYSICAL TRAINING, GYMNASTICS, SWIMMING, CLIMBING, OR FENCING; BALL GAMES; TRAINING EQUIPMENT
- A63B71/00—Games or sports accessories not covered in groups A63B1/00 - A63B69/00
- A63B71/06—Indicating or scoring devices for games or players, or for other sports activities
- A63B2071/0694—Visual indication, e.g. Indicia
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Physical Education & Sports Medicine (AREA)
- Physics & Mathematics (AREA)
- Public Health (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Epidemiology (AREA)
- Human Computer Interaction (AREA)
- Primary Health Care (AREA)
- Biophysics (AREA)
- Neurosurgery (AREA)
- Neurology (AREA)
- Dermatology (AREA)
- General Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Multimedia (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Physiology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Pathology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Cardiology (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Pulmonology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
ある方法が、第1の活動を実施するよう促す第1のプロンプトを含む第1のメディアコンテンツをディスプレイデバイスに表示することを含む。この方法は、ユーザと関連付けられたデータであって、ユーザの動きと関連付けられたモーションデータと、ユーザと関連付けられた生理学的データと、を含むデータを受信することも含む。この方法は、ユーザが第1の活動を実施しているかどうかを、生理学的データ、モーションデータ、またはその両方に少なくとも部分的に基づいて判断することも含む。この方法は、ユーザと関連付けられた第1の生理学的パラメータを、ユーザと関連付けられた生理学的データに少なくとも部分的に基づいて第1のプロンプトの後に判断することも含む。この方法は、第1の生理学的パラメータが所定の閾値を超えているかどうかを判断することも含む。【選択図】図4
Description
(関連出願の相互参照)
本出願は、2020年5月28日に出願された米国仮特許出願第63/031,485号の恩恵と優先権を主張する。本明細書中、同文献全体を参考のため援用する。
技術分野
本出願は、2020年5月28日に出願された米国仮特許出願第63/031,485号の恩恵と優先権を主張する。本明細書中、同文献全体を参考のため援用する。
技術分野
本開示は概して、ユーザ活動を監視するためのシステムおよび方法に関するものであり、特に、ユーザが活動を実施しているかどうかを判断するためのシステムおよび方法に関するものである。
患者は、仮想遠隔活動セッション(例えば、理学療法、リハビリテーション、身体運動、呼吸運動、ダンス、瞑想など)を処方されることが多い。これらの活動セッションは、仮想または遠隔で届けられるので、処方提供者は、促した活動に患者が従っているかどうかを直接観察および検証することができない。同様に、提供者は、患者が様々な活動を実施しているときに、患者のバイタル(例えば、心拍数、呼吸数など)が安全範囲内にあるかどうかを直接検証することもできない。本開示は、これらの問題などを解決することを目的とする。
本開示のいくつかの実装形態によれば、ある方法が、第1の活動を実施するよう促す第1のプロンプトを含む第1のメディアコンテンツをディスプレイデバイスに表示することを含む。この方法は、ユーザと関連付けられたデータであって、(i)ユーザの動きと関連付けられたモーションデータと、(ii)ユーザと関連付けられた生理学的データと、を含むデータを1つ以上のセンサから受信することも含む。この方法は、ユーザが第1の活動を実施しているかどうかを、モーションデータ、生理学的データ、またはその両方に少なくとも部分的に基づいて判断することも含む。この方法は、ユーザと関連付けられた第1の生理学的パラメータを、ユーザと関連付けられた生理学的データに少なくとも部分的に基づいて第1のプロンプトの後に判断することも含む。この方法は、第1の生理学的パラメータが所定の閾値を超えているかどうかを判断することも含む。
本開示のいくつかの実装形態によれば、あるシステムが、ユーザと関連付けられたデータを生成するように構成された1つ以上のセンサと、機械可読命令およびメディアコンテンツを記憶するメモリと、制御システムと、を含む。制御システムは、機械可読命令を実行して、ディスプレイデバイスにメディアコンテンツの第1の部分を表示させるように構成された1つ以上のプロセッサを含み、メディアコンテンツの第1の部分は、第1の活動を実施するよう促す第1のプロンプトを含む。制御システムは、ユーザが第1の活動を実施しているかどうかを、1つ以上のセンサによって生成されたデータに少なくとも部分的に基づいて判断するようにさらに構成されている。制御システムは、ユーザと関連付けられた第1の生理学的パラメータを、1つ以上のセンサによって生成されたデータに少なくとも部分的に基づいて判断するようにさらに構成されている。制御システムは、第1の生理学的パラメータが所定の閾値を超えているかどうかを判断するようにさらに構成されている。
本開示のいくつかの実装形態によれば、あるデバイスが、ディスプレイデバイスのポートに受容されるように構成されたインターフェースと、機械可読命令およびメディアコンテンツを記憶するメモリと、制御システムと、を含む。制御システムは、インターフェースを介してディスプレイデバイスに制御信号を供給するように配設されている。制御システムは、ディスプレイデバイスにメディアコンテンツの第1の部分を表示させるために機械可読命令を実行するように構成された1つ以上のプロセッサを含み、メディアコンテンツの第1の部分は、第1の活動を実施することを促す第1のプロンプトを含む。制御システムは、ユーザと関連付けられたデータをセンサから受信するようにさらに構成されている。制御システムは、ユーザが第1の活動を実施しているかどうかを、センサによって生成されたデータに少なくとも部分的に基づいて判断するようにさらに構成されている。制御システムは、ユーザと関連付けられた第1の生理学的パラメータを、センサによって生成されたデータに少なくとも部分的に基づいて判断するようにさらに構成されている。制御システムは、ディスプレイデバイスに、判断された第1の生理学的パラメータの指標を表示させるようにさらに構成されている。
本開示のいくつかの実装形態によれば、ある方法が、第1の活動モジュールと第2の活動モジュールとを備える活動セッションを開始するようユーザに促すことを含む。第1の活動モジュールおよび第2の活動モジュールは、複数の活動モジュールから選択される。第2の活動モジュールは、第1の活動モジュールに後続する。この方法は、第1の活動モジュールの実施中にユーザと関連付けられた生理学的データを受信することも含む。この方法は、第1の活動モジュールの実施中にユーザの動きと関連付けられたモーションデータを受信することも含む。この方法は、ユーザと関連付けられた生理学的データの少なくとも一部分、ユーザの動きと関連付けられたモーションデータの少なくとも一部分、またはその両方に少なくとも部分的に基づいて活動セッションを変更することも含み、活動セッションを変更することは、(i)第1の持続時間中に第1の活動モジュールを一時停止すること、(ii)第2の持続時間中に第1のモジュールと第2のモジュールとの間で活動セッションを一時停止すること、(iii)第2の活動モジュールを、複数のモジュールから選択された第3の活動モジュールで代用すること、または(iv)それらの任意の組み合わせを含む。
上記の要旨は、本開示の各実装形態または各態様を示すことを意図していない。本開示のさらなる特徴および便益は、下記の詳細な説明および図から明らかである。
上記の要旨は、本開示の各実装形態または各態様を示すことを意図していない。本開示のさらなる特徴および便益は、下記の詳細な説明および図から明らかである。
本開示は、様々な変更および代替形態が可能であるが、本開示の具体的な実装形態および実施形態が図面に例として示されており、本明細書において詳述される。ただしそれは、開示された特定の形態に本開示を限定することを意図するものではなく、本開示は、添付の請求項によって定義される本開示の精神および範囲内に属するすべての改変物、均等物、および代替物を網羅するということを理解すべきである。
個人が、提供者(例えば、医師、看護師、療法士など)または別の専門家によって直接観察されることなく、自宅や、従来の医療もしくは治療施設外の別の場所で実施できる仮想遠隔活動セッション(例えば、理学療法、身体運動、リハビリテーション、肺リハビリテーションなど)を処方されることは少なくない。この仮想活動セッションは、ディスプレイデバイス(例えば、テレビ、コンピュータ、タブレット、スマートフォンなど)に表示できる特定の動きまたは身体運動を行う個人の記録映像を含み得る。ユーザは、映像内の活動を観察するように、そしてその活動を実施するよう促す動きに従うように促されるのが一般的である。
かかる仮想活動セッションは、インターネット接続されたデバイス(例えば、スマートフォン、タブレット、ラップトップなど)を使用することに技術的に習熟していなかったり、かかるデバイスを所有さえしていかったりする高齢者に配信されることが多い。例えば、ユーザが、養護施設、介護施設、退職者居住地区などに住む高齢者であり得る。これらの施設は、居住者ごとのテレビを有することが多い。そのため、メディアコンテンツを開始するためにユーザに求められる行動がほとんどまたは全くなく、テレビにプラグを差し込むだけで、要求されたコンテンツを自動的に表示できる仮想療法コンテンツを、デバイスを通じて配信することには利点があろう。
活動セッションが(例えば、対面ではなく)遠隔で配信されるため、提供者は、求められた活動にユーザが準拠しているかどうかを直接観察および検証することができない。例えば、コンプライアンスを検証するためのしくみが存在しないと、その活動が、ユーザにとって難しすぎたり、ユーザが活動を正しく行うように十分に(または全く)動機付けされなかったりし得る。カメラを使用して、セッション中にユーザを記録し、ユーザが活動に従ったことを検証できる可能性はあるが、第三者が映像を見たり画像を確認したりして、ユーザが活動を実施したかどうか、およびどのように実施したかを判断する必要があろう。さらに、活動を実施しているユーザを記録するためにカメラを使用することは、差し出がましく、プライバシーに関する懸念を生む可能性がある。例えば、ユーザが身体活動を実施している映像および/またはユーザの家屋もしくは生活空間の内部を別の人に見られる可能性があり、それによって個人情報が明らかになる可能性があるということを、そのユーザは望まないかもしれない。
同様に、対面環境では、提供者が、心拍数、心拍数変動性、心臓波形、呼吸数、呼吸数変動性、呼吸深度、発汗、温度(例えば、周囲温度、体温、中核体温、表面温度など)、血液酸素化、フォトプレチスモグラフィ、パルス伝送時間、血圧、またはそれらの任意の組み合わせなど、ユーザのバイタルを直接観察または検証し、ユーザが頑張り過ぎているかどうか、および/または活動を安全に実施しているかどうかを判断することができる。この監視は、頑張り過ぎが深刻な健康上のリスク(例えば、心臓発作、脳卒中、怪我、転倒など)をもたらし得る高齢者にとって特に重要である。そのため、活動中にユーザと関連付けられた生理学的データを自動的に監視して安全性リスクの有無を判断することには利点があろう。生理学的パラメータ(例えば、心拍数や呼吸速度など)が所定の閾値を超えていると判断したことを受けて、表示されたコンテンツを自動的に変更(例えば、一時停止または停止)することには、さらに利点があろう。本開示は、これらの問題などを解決することを目的とする。
図1を参照すると、本開示のいくつかの実装形態に係るシステム100が表されている。システム100は、制御システム110と、メモリデバイス114と、ディスプレイデバイス120と、1つ以上のセンサ130と、を含む。いくつかの実装形態においては、システム100が、任意選択で、ドングル170、リモートコントロール180、および/または二次デバイス190を含む。
制御システム110は、1つ以上のプロセッサ112(以下、プロセッサ112)を含む。制御システム110は概して、システム100の様々な構成要素を制御(例えば、作動)し、かつ/またはシステム100の構成要素によって取得および/または生成されたデータを分析するのに使用される。プロセッサ112は、汎用または特殊用途のプロセッサまたはマイクロプロセッサであり得る。図1には1個のプロセッサ112が示されているが、制御システム110は、単一のハウジング内に存在し得るか、互いに離れて所在し得る任意の適切な数のプロセッサ(例えば、1個のプロセッサ、2個のプロセッサ、5個のプロセッサ、10個のプロセッサなど)を含み得る。制御システム110は、例えば、ディスプレイデバイス120のハウジング内、ドングル170のハウジング内、リモートコントロール180のハウジング内、二次デバイス190のハウジング内、および/またはセンサ130のうちの1つ以上のセンサのハウジングに連結すること、および/またはその内部に位置付けることができる。制御システム110は、(1つのかかるハウジング内に)集中させるか、(物理的に別個である2つ以上のかかるハウジング内に)分散させることができる。制御システム110を格納する2つ以上のハウジングを含むかかる実装形態においては、かかるハウジングが、互いに近接して、かつ/または遠隔で所在することができる。
メモリデバイス114は、制御システム110のプロセッサ112によって実行可能な機械可読命令を記憶する。メモリデバイス114は、例えば、ランダムまたはシリアルアクセスメモリデバイス、ハードドライブ、ソリッドステートドライブ、フラッシュメモリデバイスなど、任意の適切なコンピュータ可読ストレージデバイスまたはメディアであり得る。図1には1つのメモリデバイス114が示されているが、システム100は、任意の適切な数のメモリデバイス114(例えば、1個のメモリデバイス、2個のメモリデバイス、5個のメモリデバイス、10個のメモリデバイスなど)を含み得る。メモリデバイス114は、ディスプレイデバイス120のハウジング内、ドングル170のハウジング内、リモートコントロール180のハウジング内、二次デバイス190のハウジング内、センサ130のうちの1つ以上のセンサのハウジング内、またはそれらの任意の組み合わせに連結すること、および/またはその内部に位置付けることができる。制御システム110と同様に、メモリデバイス114は、(1つのかかるハウジング内に)集中させるか、(物理的に異なる2つ以上のかかるハウジング内に)分散させることができる。
いくつかの実装形態においては、メモリデバイス114(図1)が、ユーザと関連付けられたユーザプロファイルを記憶する。ユーザプロファイルは、例えば、ユーザと関連付けられた人口統計情報、ユーザと関連付けられたバイオメトリック情報、ユーザと関連付けられた医療情報、自己申告によるユーザフィードバック、ユーザと関連付けられた睡眠パラメータ(例えば、1つ以上の以前の睡眠セッションから記録された睡眠関連パラメータ)、またはそれらの任意の組み合わせを含み得る。人口統計情報は、例えば、ユーザの年齢、ユーザの性別、ユーザの人種、不眠症の家族歴、ユーザの雇用状況、ユーザの教育状況、ユーザの社会経済的状況、またはそれらの任意の組み合わせを示す情報を含み得る。医療情報は、例えば、ユーザと関連付けられた1つ以上の病状、ユーザによる薬剤使用、またはその両方を示すものを含み得る。医療情報は、ユーザと関連付けられた転倒リスク評価(例えば、モールス転倒スケールを使用した転倒リスクスコア)も含み得る。医療情報データは、自己申告による主観的な睡眠スコア(劣悪、普通、良好など)、自己申告によるユーザの主観的なストレスレベル、自己申告によるユーザの主観的な疲労レベル、自己申告によるユーザの主観的な健康状態、ユーザが経験した最近のライフイベント、またはそれらの任意の組み合わせをさらに含み得る。いくつかの実装形態においては、メモリデバイス114が、ディスプレイデバイス120に表示できるメディアコンテンツを記憶する。
制御システム110およびメモリデバイス114が、システム100の別々かつ別個の構成要素として図1に記載および図示されているが、いくつかの実装形態においては、制御システム110および/またはメモリデバイス114が、ディスプレイデバイス120、ドングル170、リモートコントロール180、二次デバイス190、またはそれらの任意の組み合わせに統合されている。代替として、いくつかの実装形態においては、制御システム110またはその一部分(例えばプロセッサ112)がクラウドに所在し得(例えば、サーバに統合され、モノのインターネット(IoT)デバイスに統合され、クラウドに接続され、エッジクラウド処理を受け得るなど)、1つ以上のサーバ(例えば、リモートサーバ、ローカルサーバなど、またはそれらの任意の組み合わせ)に所在し得る。
本明細書に記載のとおり、プロセッサ112および/またはメモリデバイス114は、1つ以上のセンサ130からデータ(例えば、生理学的データおよび/またはモーションデータ)を受信することができ、そのデータは、メモリデバイス114内に記憶され、かつ/またはプロセッサ112によって分析される。プロセッサ112および/またはメモリデバイス114は、有線接続または無線接続を用いて(例えば、RF通信プロトコル、Wi-Fi通信プロトコル、Bluetooth(登録商標)通信プロトコル、セルラーネットワークなどを用いて)1つ以上のセンサ130と通信することができる。いくつかの実装形態において、システム100は、アンテナ、受信機(例えば、RF受信機)、送信機(例えば、RF送信機)、トランシーバ、またはそれらの任意の組み合わせを含み得る。かかる構成要素は、制御システム110のハウジング(例えば、プロセッサ112および/またはメモリデバイスと同じハウジング)、ディスプレイデバイス120、ドングル170、リモートコントロール180、または二次デバイス190に連結または統合することができる。
ディスプレイデバイス120は概して、静止画、ビデオ画像、またはその両方を含む画像(単数または複数)を表示するのに使用される。ディスプレイデバイス120は、例えば、テレビ(例えばスマートテレビ)、スマートフォン、タブレット、ラップトップ、モニタなどであり得る。いくつかの実装形態においては、ディスプレイデバイス120が、画像(単数または複数)および入力インターフェースを表示するように構成されたグラフィックユーザインターフェース(GUI)を含むヒューマンマシンインターフェース(HMI)の働きをする。ディスプレイデバイス120は、LEDディスプレイ、有機ELディスプレイ、液晶ディスプレイ等であり得る。入力インターフェースは、例えば、タッチスクリーンまたは接触感知基板、マウス、キーボード、またはディスプレイデバイス120とやりとりする人間ユーザによって行われる入力を感知するように構成された任意のセンサシステムであり得る。いくつかの実装形態においては、1つ以上のディスプレイデバイスを、システム100が使用すること、および/またはシステム100に含めることができる。
システム100の1つ以上のセンサ130が、レーダセンサ132、温度センサ138、マイクロフォン140、スピーカ142、カメラ144、赤外線センサ146、フォトプレチスモグラム(PPG)センサ148、心電図(ECG)センサ150、脳波(EEG)センサ152、静電容量センサ154、力センサ156、歪みゲージセンサ158、筋電図(EMG)センサ160、酸素センサ162、水分センサ164、LiDARセンサ166、心弾動図センサ、またはそれらの任意の組み合わせを含む。1つ以上のセンサ130はそれぞれ、メモリデバイス114または1つ以上の他のメモリデバイスで受信および記憶されるセンサデータ(例えば、ユーザと関連付けられたモーションデータおよび/または生理学的データを含む)を出力するように構成されているのが一般的である。
1つ以上のセンサ130は、レーダセンサ132、温度センサ138、マイクロフォン140、スピーカ142、カメラ144、赤外線センサ146、フォトプレチスモグラム(PPG)センサ148、心電図(ECG)センサ150、脳波(EEG)センサ152、静電容量センサ154、力センサ156、歪みゲージセンサ158、筋電図(EMG)センサ160、酸素センサ162、水分センサ164、およびLiDARセンサ166のそれぞれを含むものとして図示および記載されているが、1つ以上のセンサ130は、本明細書に記載および/図示されたセンサのそれぞれの任意の組み合わせおよび任意の個数を含み得るのが、より一般的である。
レーダセンサ132は、送信機134と受信機136とを含み、ユーザと関連付けられたモーションデータ、ユーザと関連付けられた生理学的データ、またはその両方を生成するのに使用されるのが一般的である。送信機134は、所定の周波数および/または所定の振幅(例えば、高周波帯域内、低周波帯域内、長波信号、短波信号など)を有する電波を生成および/または放射する。受信機136は、送信機134から放出された電波の反射を検出し、このデータを制御システム110によって分析して、例えば、ユーザと関連付けられた動きおよび/または生理学的パラメータを判断することができる。RF通信の具体的な形式は、Wi-FiやBluetooth(登録商標)等であり得る。RF受信機(RF受信機およびRF送信機のどちらか、または別のRFペア)は、制御システム110、1つ以上のセンサ130、ディスプレイデバイス120、またはそれらの任意の組み合わせの間での無線通信に使用することもできる。いくつかのかかる実装形態においては、レーダセンサ132が制御回路も含む。
いくつかの実装形態においては、レーダセンサ132が超広帯域(UWB)レーダセンサである。UWBは、(例えば、500MHzよりも高い周波数での)短距離高帯域幅通信に低エネルギーレベルを使用する。UWBレーダセンサによって放出された信号は、例えば、ユーザとレーダセンサ132との間に位置付けられ、かつ/またはそれらの間の直接的な見通し線を遮断する様々な障害物(例えばディスプレイデバイス120)を通過することができる。レーダセンサ132は、FMCW(周波数変調連続波)ベースのシステムまたはチップ上のシステムであり得、この周波数は、三角形(例えば、周波数が掃引上昇後に下降)、鋸歯(例えば、周波数ランプが掃引上昇または下降後にリセット)、階段状または非線形形状など、種々の形状を伴って時間と共に線形に増大(例えばチャープ)する。レーダセンサ132は、1つ以上の送信機および受信機と共に、時間または周波数が重複しない複数のチャープを使用することができ、24GHzもしくはその付近、またはミリメートル波(例えば、約76~81GHz)もしくはその付近、または同様の周波数など、任意の適切な周波数またはその付近で動作することができる。レーダセンサ132は、範囲ならびに角度および速度を測定することができる。
いくつかの実装形態においては、レーダセンサ132からのデータが、例えば、歩行、転倒、挙動などを含む(例えば活動中の)ユーザの動き(単数または複数)を示すモーションデータを生成するのに使用することができる。レーダセンサ132を使用してユーザの動きを検出することは、レーダセンサ132がユーザの画像および/または他の個人情報を取得しないので、例えばカメラ144と比較して利点がある。いくつかの実装形態においては、レーダセンサ132からのデータを、例えば、心拍数、心拍数変動、心臓波形、呼吸数、呼吸数変動、呼吸深度、発汗、温度(例えば、周囲温度、体温、中核体温、表面温度など)、血液酸素化、フォトプレチスモグラフィ、パルス伝送時間、血圧、またはそれらの任意の組み合わせなど、ユーザと関連付けられた1つ以上の生理学的パラメータを判断するのに使用することもできる。他の実装形態においては、レーダセンサ132からのデータを、(例えば、ユーザと関連付けられた旧記録データに基づいて)ユーザを識別するのに、またはユーザの本人性を検証するのに使用することができる。
いくつかの実装形態においては、レーダセンサ132がメッシュシステムの一部である。メッシュシステムの一例がWi-Fiメッシュシステムであり、このシステムは、メッシュノード、メッシュルータ(単数または複数)、およびメッシュゲートウェイ(単数または複数)を含み得、これらのそれぞれが移動式/可動式または固定式であり得る。かかる実装形態においては、Wi-Fiメッシュシステムが、Wi-Fiルータおよび/またはWi-Fiコントローラと、1つ以上の衛星(例えばアクセスポイント)と、を含み、これらのそれぞれが、送信機134および/または受信機136と同一または同様である受信機および/または送信機を含む。Wi-Fiルータおよび衛星は、Wi-Fi信号を使用して互いに常時通信する。Wi-Fiメッシュシステムは、物体や人が移動して信号を部分的に妨害することによってルータと衛星(単数または複数)との間で生じるWi-Fi信号の変化(例えば、受信信号強度の差)に基づいてモーションデータを生成するのに使用することができる。いくつかの実装形態においては、モーションセンサが、モーションを感知するためのコントローラソフトウェアを内蔵した高周波数5G携帯電話および/または基地局である。例えば、5Gネットワーク内のノードを、複数のチャネルをまたぐRSS(受信信号強度)のわずかな変化を用いてモーション感知に使用することができる。さらには、かかるモーションセンサを、家庭および/もしくは建物ならびに/または病院環境全体で、複数の標的からのモーション、呼吸、心臓、歩行、転倒、挙動分析などを処理するのに使用することができる。
温度センサ138は、メモリデバイス114に記憶すること、および/または制御システム110のプロセッサ112によって分析することのできる温度データを出力する。いくつかの実装形態においては、温度センサ138が、ユーザの中核体温、ユーザの皮膚温度、周囲温度、またはそれらの任意の組み合わせを示す温度データを生成する。温度センサ138は、例えば、熱電対センサ、サーミスタセンサ、シリコンバンドギャップ温度センサもしくは半導体ベースのセンサ、抵抗温度検出器、またはそれらの任意の組み合わせであり得る。
マイクロフォン140は、メモリデバイス114に記憶すること、および/または制御システム110のプロセッサ112によって分析することのできる音データを出力する。マイクロフォン140は、本明細書でさらに詳述するとおり、1つ以上の睡眠関連パラメータを(例えば、制御システム110を使用して)判断するために睡眠セッション中に音(単数または複数)(例えば、ユーザからの音)を記録するのに使用することができる。マイクロフォン140は、例えばディスプレイデバイス120に連結または統合することができる。いくつかの実装形態においては、システム100が複数のマイクロフォン(例えば、ビーム形成機能を有する2つ以上のマイクロフォンおよび/またはマイクロフォンの配列)を含み、複数のマイクロフォンのそれぞれによって生成された音データが、その複数のマイクロフォンのうちの別のものによって生成された音データを区別するのに使用できるようになっている。
スピーカ142は、システム100のユーザ(例えば、ユーザ)にとって可聴である音波を出力する。スピーカ142は、例えば、(例えば、ユーザの生理学的パラメータが所定の閾値を超えていることを受けて)アラートまたはメッセージをユーザに伝えるのに使用することができる。スピーカ142は、例えばディスプレイデバイス120に連結または統合することができる。
マイクロフォン140およびスピーカ142は、別々のデバイスとして使用することができる。いくつかのの実装形態においては、マイクロフォン140およびスピーカ142を、例えば、参照によりそれぞれ全体が本明細書に組み込まれるWO2018/050913およびWO2020/104465に記載のとおり、音響センサ141(例えば、ソナーセンサ)に組み入れることができる。かかる実装形態においては、スピーカ142が、所定の間隔で音波を生成または放出し、マイクロフォン140が、スピーカ142から放出された音波の反射を検出する。スピーカ142が生成または放出する音波は、ユーザまたはその同床者の睡眠を妨げないように、人間の耳には聞こえない周波数(例えば、20Hz未満または約18kHz超)を有する。制御システム110は、マイクロフォン140および/またはスピーカ142からのデータに少なくとも部分的に基づいて、例えば、ユーザの所在位置および/またはユーザの動きを判断することができる。かかる文脈においては、ソナーセンサが、超音波および/または低周波数超音波感知信号(例えば、約17~23kHz、18~22kHz、または17~18kHzの周波数範囲内)を空中で生成および/または送信することなどによるアクティブ音響センシングに関わるものと理解され得る。かかるシステムは、上記のWO2018/050913およびWO2020/104465と関連付けて考慮され得、両文献はそれぞれ、参照によってその全体が本明細書に組み込まれる。
カメラ144は、メモリデバイス114に記憶できる1つ以上の画像(例えば、静止画、ビデオ画像、熱画像、またはそれらの組み合わせ)として再現可能な画像データを出力する。カメラ144からの画像データは、制御システム110がユーザの動きを判断するのに(例えば、ユーザが療法に従っているかどうかを判断するのに)使用することができる。カメラ144からの画像データは、例えば、ユーザが活動(例えば療法)を実施しているかどうかを判断するのに、レーダセンサ132からのデータと組み合わせて使用することができる。いくつかの実装形態においては、システム100が、カメラ144を除外し、上記のレーダセンサ132のみを使用してモーションデータおよび/または生理学的データを生成する。
いくつかの実装形態においては、センサ130が、(i)マイクロフォン140と同一または同様であり、音響センサ141に統合されている第1のマイクロフォンと、(ii)マイクロフォン140と同一または同様だが、音響センサ141に統合されている第1のマイクロフォンとは別々かつ別個である第2のマイクロフォンと、を含む。
カメラ144は、CCD(電荷連結素子)センサまたはCMOS(相補型金属酸化膜半導体)センサであり得る。カメラ144は、可視光(明るい光または弱い光)、近赤外線、または赤外線、熱などを感知することができる。カメラ144は、RGB(赤緑青)カメラ、マルチスペクトル近赤外線(NIR)またはハイパースペクトルカメラであり得、ある範囲または焦点距離を有するある範囲のレンズおよびフィルタを有し得るか、可変焦点であり得る。カメラ処理により、フレームごとにモーションを追跡し、顔検出および自動ズームを実行して顔のみを処理するか、または人(の存在)を(実際に)識別した後に胸の動きを処理することができる。カメラ検出は、全体的なモーションの検出、モーションの分類、ならびに呼吸および心拍関連の胸部の動きなど細かいモーションの検出を含み得る。カメラ分析により、推定された脈遷移時間により(例えば、映像ベースのPPGを介して)、温度、(例えばトレーニング中の)汗をかくことまたは発汗、および血圧を推定することができる。
赤外線(IR)センサ146は、メモリデバイス114に記憶できる1つ以上の赤外線画像(例えば、静止画、ビデオ画像、またはその両方)として再現可能な赤外線画像データを出力する。IRセンサ146からの赤外線データは、例えば、ユーザの温度および/またはユーザの動きを判断するのに使用することができる。IRセンサ146は、ユーザの存在、位置、および/または動きを測定する際に、レーダセンサ132および/またはカメラ144と組み合わせて使用することもできる。IRセンサ146が、例えば、約700nmと約1mmとの間の波長を有する赤外光を検出することができるのに対し、カメラ144は、約380nmと約740nmとの間の波長を有する可視光を検出することができる。いくつかの例においては、IRセンサ146がパッシブ赤外線(PIR)センサである。
PPGセンサ148は、例えば、心拍数、心拍数変動、心周期、呼吸数、吸気振幅、呼気振幅、吸気対呼気比、推定血圧パラメータ(単数または複数)、またはそれらの任意の組み合わせなど1つ以上の生理学的パラメータを判断するのに使用できる、ユーザと関連付けられた生理学的データを出力する。PPGセンサ148は、ユーザが着用すること、ユーザが着用する衣類および/もしくは織地に埋め込むこと、または二次デバイス190に埋め込むこと、および/もしくは連結することができる。
ECGセンサ150は、ユーザの心臓の電気的活動と関連付けられた生理学的データを出力する。いくつかの実装形態においては、ECGセンサ150が、(例えば療法セッション中に)ユーザの一部分の上または周囲に位置付けられている1つ以上の電極を含む。ECGセンサ150からの生理学的データは、例えば、本明細書に記載されている生理学的パラメータのうちの1つ以上を判断するのに使用することができる。
EEGセンサ152は、ユーザの脳の電気的活動と関連付けられた生理学的データを出力する。いくつかの実装形態において、EEGセンサ152は、ユーザの頭皮の上または周囲に位置付けられている1つ以上の電極を含む。EEGセンサ152からの生理学的データは、例えば、ユーザの睡眠状態を判断するのに使用することができる。
静電容量センサ154、力センサ156、および歪みゲージセンサ158は、メモリデバイス114に記憶でき、かつ本明細書に記載されているパラメータのうちの1つ以上を判断するのに制御システム110が使用できるデータを出力する。EMGセンサ160は、1つ以上の筋肉によって生成された電気的活動と関連付けられた生理学的データを出力する。酸素センサ162は、ガスの酸素濃度を示す酸素データを出力する。酸素センサ162は、例えば、超音波酸素センサ、電気酸素センサ、化学酸素センサ、光学式酸素センサ、またはそれらの任意の組み合わせであり得る。いくつかの実装形態においては、1つ以上のセンサ130が、ガルバニック皮膚反応(GSR)センサ、血流センサ、呼吸センサ、脈拍センサ、血圧計センサ、オキシメトリセンサ、またはそれらの任意の組み合わせも含む。
水分センサ164は、メモリデバイス114に記憶でき、かつ制御システム110が使用できるデータを出力する。水分センサ164は、ユーザを取り巻く様々な領域における水分を検出するのに使用することができる。いくつかの実装形態においては、水分センサ164を二次デバイス190またはユーザの衣服に連結または統合して、ユーザの発汗を監視することができる。水分センサ164は、例えば、ユーザが仮想療法セッションを実施している部屋の内部の空気など、ユーザを取り巻く周囲環境の湿度を監視するのに使用することもできる。
光検出および測距(LiDAR)センサ166は、深度感知に使用することができる。このタイプの光学センサ(例えばレーザセンサ)は、物体を検出し、生活空間など周囲環境の3次元(3D)マップを作成するのに使用することができる。LiDARは一般に、パルスレーザを利用して飛行時間を計測する。LiDARは、3Dレーザスキャンとも称される。かかるセンサの一使用例においては、LiDARセンサ166を有する固定または(スマートフォンなどの)モバイルデバイスが、センサから5メートル以上離れた領域を測定およびマッピングすることができる。LiDARデータは、例えば電磁式RADARセンサによって推定されたポイントクラウドデータと融合させることができる。LiDARセンサ(単数または複数)166は、人工知能(AI)を使用して、(RADARに対して高反射性であり得る)ガラス窓など、RADARシステムにとっての問題をもたらし得る空間内の特徴を検出および分類することにより、RADARシステムのジオフェンスを自動的に作成することもできる。LiDARは、人の身長に加え、人が座ったとき、倒れたときなどに生じる身長の変化を推定するのに使用することもできる。LiDARは、環境の3Dメッシュ表現を形成するのに使用され得る。さらなる用途では、電波が通過する固体表面(例えば電波透過性材料)にLiDARが反射し得ることにより、異なるタイプの障害物の分類が可能となる。
図1では別々に示されているが、1つ以上のセンサ130の任意の組み合わせを、ディスプレイデバイス120、ドングル170、リモートコントロール180、二次デバイス190、またはそれらの任意の組み合わせを含むシステム100の構成要素のうちの任意の1つ以上に統合および/または連結することができる。例えば、レーダセンサ132は、ドングル170またはリモートコントロール180に統合および/または連結することができる。いくつかの実装形態においては、1つ以上のセンサ130のうちの少なくとも1つが、ディスプレイデバイス120に連結されておらず、ユーザに概ね隣接して位置付けられている(例えば、ユーザの一部分に位置付けられているか接触している、ユーザによって着用されている、家具に連結されているか位置付けられている、天井または壁に連結されている、など)。
ドングル170を含むシステム100の実装形態においては、ドングル170が、例えば、ディスプレイデバイス120を介して表示できるメディアコンテンツ(例えば仮想療法セッション)を記憶するのに使用されるのが一般的である。図2Aを参照すると、ドングル170は、第1のハウジング部分172と、インターフェース174と、コード176と、第2のハウジング部分176と、を含む。インターフェース174は、ディスプレイデバイス120の一部分(例えばポート)内に少なくとも部分的に受容されて、ドングル170をディスプレイデバイス120に通信可能に連結する。インターフェース174は、例えば、HDMI(登録商標)ポート、ミニHDMI(登録商標)ポート、USBポート、マイクロUSBポート、ミニUSBポート、USB-Aポート、USB-Bポート、USB-Cポート、DisplayPort、ミニDisplayPort、VGAポート、ミニVGAポート、S映像ポート、コンポジットポート、コンポーネントポートなどにおいて受容することができる。そのため、ドングル170は、その上に記憶されたメディアコンテンツをディスプレイデバイス120に表示することができる。
コード176は、インターフェース174および/または第1のハウジング部分172内の他の構成要素を、第2のハウジング部分178内の構成要素と通信可能に連結する。第2のハウジング部分178は、ドングル170をディスプレイデバイス120の一部分に連結するためのクリップを含む。例えば、図3Aおよび図3Bを参照すると、ドングル170の第2のハウジング部分178が、ディスプレイデバイス120の第1の部分(例えば、ベゼル、フレーム、外縁、スタンドなど)に連結できるのに対し、インターフェース174は、ディスプレイデバイス120または映像入力をディスプレイデバイス120に提供する別のデバイス(例えば、受信機またはケーブルボックス)の第2の部分(例えば、後部または側部入力ポート)に連結することができる。ドングル170は、図3Aではディスプレイデバイス120の上縁部に連結されているものとして示されているが、ドングル170は、ユーザ200がディスプレイデバイス120でメディアコンテンツを見るのを実質的に妨げないディスプレイデバイス120の任意の部分に連結(例えば、ディスプレイデバイス120のいずれかの側部または下縁部に連結)できるのがより一般的である。別の代替においては、ドングル170が、ディスプレイデバイス120に連結されず、ディスプレイデバイス120に概ね隣接して(例えば、メディアコンソール、棚、または他の家具上に)位置付けられる。
いくつかの実装形態においては、ドングル170の構成要素が、インターフェース174を介してディスプレイデバイス120によって通電される。他の実装形態においては、ドングル170が、例えばAC電源コンセントまたはUSBポートからドングル内の構成要素に電力を送達する第2のコードを含む。
上記のとおり、センサ(単数または複数)130、制御システム、および/またはメモリデバイス114のうちの少なくとも1つが、ドングル170に連結または統合されている。メモリデバイス114が、ディスプレイデバイス120に表示できるメディアコンテンツと、本明細書に記載されている機能のうちのいずれかを実行するように制御システム110によって実行可能である機械可読命令と、を記憶する。より具体的には、センサ(単数または複数)130は、ディスプレイデバイス120の概ね前に位置付けられたユーザ200に対して直接的な見通し線を有するように第2のハウジング部分178に連結または統合することができる。例えば、上記のレーダセンサ132(図1)は、レーダセンサ132がユーザ200の動きと関連付けられたモーションデータ、ユーザ200と関連付けられた生理学的データ、またはその両方を生成できるようにドングル170の第2のハウジング部分178に統合することができる。
いくつかの実装形態においては、ドングル170が、1つ以上のリモートデバイスまたはサーバと(例えば、Wi-Fiを介してインターネット経由で)通信することができる。例えば、ドングル170は、リモートサーバと通信して、メモリデバイス114に記憶するための新規または更新されたメディアコンテンツを受信することができる。別の例として、ドングル170は、リモートサーバと通信して、本明細書に記載されているユーザの実行と関連付けられたデータを(例えば、ユーザと関連付けられた医療提供者に)送信することができる。さらなる例として、ドングル170は、リモートサーバと通信して、ソフトウェアの更新プログラムまたはパッチを受信することができる。さらなる追加例として、ドングル170は、ディスプレイデバイス120がテレビ(例えば、スマートフォン、タブレット、ラップトップなど)であれば、ユーザと関連付けられたデバイスであって、ディスプレイデバイス120とは別々かつ別個であるデバイスと通信することができる。
いくつかの実装形態においては、ドングル170が、コード176と第2のハウジング部分178とを含まない。かかる実装形態においては、ドングル170が「メディアスティック」と称されることがあり、メモリ114および/または(1つ以上の)センサ130は、第1のハウジング部分172内に位置付けられている。
ドングル170は、本明細書では、直接有線接続を介してインターフェース174を介してディスプレイデバイス120に通信可能に連結されるものとして説明および図示されているが、いくつかの実装形態においては、ドングル170が、(例えば、Wi-FiまたはBluetooth(登録商標)を使用する)ワイヤレス接続を介してディスプレイデバイス120に通信可能に連結される。
リモートコントロール180は、ディスプレイデバイス120、ドングル170、またはその両方を制御および/または作動させるのに使用されるのが一般的である。図2Bを参照すると、リモートコントロール180は、ハウジング182と、ディスプレイデバイス120および/またはドングル170の機能を制御するための複数のユーザ選択可能ボタン184と、を含む。すなわち、リモートコントロール180は、ディスプレイデバイス120および/またはドングル170に無線通信可能に連結されている。
複数のユーザ選択可能ボタン184は、ディスプレイデバイス120および/またはドングル170に、例えば、電源オン操作、電源オフ操作、ボリュームアップ操作、ボリュームダウン操作、ミュート操作、再生操作、一時停止操作、停止操作、早送り操作、巻戻し操作、次に進む操作、戻り操作、記録操作、メニュー操作、またはそれらの任意の組み合わせを実行させることにより、表示されたメディアコンテンツを制御することができる。複数のユーザ選択可能ボタン184は、ユーザ200が、ディスプレイデバイス120に表示される1つ以上のユーザ選択可能要素を選択できるようにするための1つ以上のボタン(例えば、トラックパッド、タッチパッド、矢印キーなど)も含み得る。複数のユーザ選択可能ボタン184は、ユーザ200に支援が必要であることを示すアラートを第三者に送信するパニックボタンも含み得る。
いくつかの実装形態においては、1つ以上のセンサ130(図1)のうちの少なくとも1つが、リモートコントロール180のハウジング182に連結または統合されている。例えば、レーダセンサ132は、ドングル170ではなくハウジング182に連結または統合することができる。本例においては、リモートコントロール180を、ディスプレイデバイス120に概ね隣接して位置付け(例えば、ディスプレイデバイス120に隣接する家具の上に位置付け)、ディスプレイデバイス120の前に位置しているユーザと関連付けられたデータを収集できるのが一般的である。別の例として、マイクロフォン140を、(例えば、ユーザから音声コマンドを受信するために)リモートコントロール180に連結または統合することができる。さらなる例として、リモートコントロール180が、ユーザの体温をチェックするための赤外線センサ146および/またはユーザの酸素レベルをチェックするための酸素センサ162を含み得る。さらに別の例として、リモートコントロール180は、リモートコントロール180のモーションおよび/またはリモートコントロール180を保持しているユーザの動きを判断するのに使用できる1つ以上の加速度計および/またはジャイロスコープを含み得る。ハウジング182は、リモートコントロール180に通電するための電源(例えば、再充電可能バッテリまたは交換可能バッテリ)も含み得る。
二次デバイス190は、ディスプレイデバイス120、ドングル170、およびリモートコントロール180とは別々かつ別個であり、二次デバイス190がユーザと関連付けられたモーションデータおよび/または生理学的データを生成できるように、1つ以上のセンサ130のうちの少なくとも1つを含み得る。二次デバイス190は、ドングル170およびディスプレイデバイス120と同じ部屋または異なる部屋に位置付けることができる。例えば、ディスプレイデバイス120およびドングル170は、第1の部屋(例えば、寝室または居間)にあり得るのに対し、二次デバイス190は、第2の部屋(例えば浴室)に位置付けられ得る。いくつかの実装形態においては、二次デバイス190が、レーダセンサ132を含み、(例えばバスルーム内の)AC電源コンセントに差し込むことができる。他の実装形態においては、二次デバイス190が、ユーザが着用または身に着けることのできるウェアラブルデバイス(例えば、スマートウォッチまたはブレスレット)である。かかる実装形態においては、本明細書に記載されているセンサ130のうちの1つ以上を、ウェアラブル二次デバイス190に統合すること、または埋め込むことができる。
ドングル170またはリモートコントロール180を含まないシステム100の実装形態においては、1つ以上のセンサ130のうちの少なくとも1つを、ディスプレイデバイス120に連結または統合することができ、ドングル170に連結または統合されているものとして本明細書に記載されているセンサ(単数または複数)と同じ機能を実行することができる。例えば、かかる実装形態においては、レーダセンサ132を、ユーザと関連付けられたモーションデータおよび/または生理学的データを捕捉するためにディスプレイデバイス120に(例えば、ベゼルの中または上に)連結または統合することができる。
システム100は、上記構成要素のすべてを含むものとして示されているが、本開示の実装形態によれば、前記ユーザと関連付けられた生理学的パラメータおよび/または活動へのコンプライアンスを監視することを生成するためのシステムに含まれ得る構成要素は、それより多くも少なくもある。例えば、第1の代替システムは、制御システム110と、メモリデバイス114と、1つ以上のセンサ130のうちの少なくとも1つと、を含む。別の例として、第2の代替システムは、制御システム110と、メモリデバイス114と、1つ以上のセンサ130のうちの少なくとも1つと、ディスプレイデバイス120と、を含む。さらに別の例として、第3の代替システムは、制御システム110と、メモリデバイス114と、ディスプレイデバイス120と、1つ以上のセンサ130のうちの少なくとも1つと、ドングル170と、リモートコントロール180と、を含む。そのため、本明細書に表示および記載されている構成要素の任意の部分(単数または複数)を使用して、かつ/または1つ以上の他の構成要素と組み合わせて、様々なシステムを形成することができる。
図4を参照すると、本開示のいくつかの実装形態にかかる、活動へのユーザコンプライアンスを判断するための方法400が表されている。方法400の1つ以上のステップは、本明細書に記載されているシステム100(図1~図3B)の任意の要素または態様を用いて実施することができる。
方法400のステップ401は、第1のメディアコンテンツをディスプレイデバイス120に表示することを含む。第1のメディアコンテンツは、1つ以上の映像、1つ以上の画像、オーディオ、またはそれらの任意の組み合わせを含み得る。いくつかの実装形態においては、第1のメディアコンテンツが、ユーザが、例えば、理学療法、リハビリテーション、身体運動、呼吸運動、ダンス、瞑想など第1の活動を実施するよう促す1つ以上のプロンプトを含む。第1のメディアコンテンツは、例えば、ドングル170に連結または統合できるメモリデバイス114(図1)に記憶することができる。一例においては、インターフェース174がディスプレイデバイス120に連結されたことを受けて、制御システム110(図1)が、メモリデバイス114に記憶された機械可読命令を実行して、ドングル170に、ディスプレイデバイス120上で第1のメディアコンテンツを再生させる。別の例として、リモートコントロール180上での入力(例えば、ユーザからの手動入力)により、ドングル170に、ディスプレイデバイス120上で第1のメディアコンテンツを再生させることができる。別の例においては、制御システム110(図1)が、メモリデバイス114に記憶された機械可読命令を実行して、ドングル170に、所定の時刻(例えば、毎日午後1時)にディスプレイデバイス120上で第1のメディアコンテンツを自動的に再生させる。いくつかの実装形態においては、ステップ401が、ドングル170にディスプレイデバイス120上でメディアコンテンツを再生させる前に、(例えば、ユーザ名/パスワード、PIN、生体情報などを使用して)ユーザを認証すること、および/またはユーザに権限を付与することを含む。
いくつかの実装形態においては、第1のプロンプトが、ユーザが追従できる第1の活動を個人が実施している様子の記録映像である。例えば、個人124がディスプレイデバイス120に図3Aに表示されている。個人124は、第1の活動を実施しているユーザ以外の誰か(例えばインストラクタ)、またはユーザが第1の活動を実施している様子の旧記録映像であり得る。いくつかの実装形態においては、個人124が、ユーザが追従するように第1の活動を実施するアバター(例えば、人物の描像)である。かかる実装形態においては、ユーザの少なくとも一部分(例えばユーザの顔)の画像を、アバターの一部分に重ねることができる。他の実装形態においては、第1のプロンプトが、追加または代替として、ディスプレイデバイス120に表示される英数字テキスト、および/または(例えば、スピーカを介して)ユーザに伝えられ、ユーザに第1の活動を実施するように促すオーディオを含む。
いくつかの実装形態においては、表示された第1のメディアコンテンツが、ユーザが第三者(例えば、施設または家庭医療スタッフ看護師、家族、集中訓練モニタなど)と通信できるようにするためのチャットインターフェースを含み得る。他の実装形態においては、表示された第1のメディアコンテンツが、ユーザと関連付けられた1つ以上の画像および/または映像(例えば、家族の写真または映像)を含み得る。かかる実装形態においては、これらの画像および/または映像が、ユーザをリラックスさせたり気を紛らしたりすること、ならびにうつ病および/または動揺の症状を低減させるのを支援することができる(例えば回想療法)。
第1のメディアコンテンツは概して、テレビ、スマートフォン、タブレット、ラップトップなどを介して表示されるものとして本明細書に記載されているが、いくつかの実装形態においては、第1のメディアコンテンツを、仮想または拡張現実システム(例えば仮想現実ヘッドセット)を使用して配信または表示することができる。
方法400のステップ402は、第1のメディアコンテンツがディスプレイデバイス120に表示されている間にユーザと関連付けられた第1のデータを生成および/または受信することを含む。第1のデータは、ユーザの動き(またはその欠如)を示すモーションデータ、および/または、例えば、心拍数、心拍数変動、心臓波形、呼吸数、呼吸数変動、呼吸深度、一回換気量、吸気振幅、呼気振幅、吸気対呼気比、発汗、温度(例えば、周囲温度、体温、中核体温、表面温度など)、血液酸素化、フォトプレチスモグラフィ、パルス伝送時間、血圧、またはそれらの任意の組み合わせなど、ユーザの1つ以上の生理学的パラメータを示す生理学的データを含む。第1のデータは、本明細書に記載されているセンサ130のうちのいずれか1つによって生成することができる。いくつかの実装形態においては、モーションデータおよび生理学的データの両方がレーダセンサ132(図1)によって生成され、レーダセンサ132は、ドングル170もしくはリモートコントロール180に連結されているか、埋め込まれている。他の実装形態においては、モーションデータが、センサ130のうちの第1のセンサから生成および/または受信され、生理学的データが、センサ130のうちの第1のセンサとは異なるセンサ130のうちの第2のセンサから生成および/または受信される。第1のデータは、例えばメモリデバイス114によって受信および記憶することができる。
いくつかの実装形態においては、ステップ402が、ユーザの存在および/またはユーザの本人性を検証することを含む。例えば、ステップ402は、ユーザが1つ以上のセンサ130のうちの少なくとも1つの所定視野内にいるかどうかに基づいてユーザの存在を判断することを含み得る。ユーザの本人性は、レーダセンサ130、カメラ144(例えば、顔認識アルゴリズムを使用)、マイクロフォン140(例えば、音声認識アルゴリズムを使用)、またはそれらの任意の組み合わせなどのセンサ130のうちの少なくとも1つからのデータを用いて制御システム110により検証することができる。他の実装形態においては、ディスプレイデバイス120を介して認証および/または許諾情報(例えば、ユーザ名、パスワード、PINなど)を提供するようユーザに促すことができる。
方法400のステップ403は、ユーザが第1の活動を実施しているかどうかを、第1のデータに少なくとも部分的に基づいて判断すること(ステップ402)を含む。上記のとおり、いくつかの例においては、第1のメディアコンテンツに、個人またはアバターが第1の活動を実施している様子を収めた旧記録映像が含まれており、第1の活動を実施するようユーザに促す。そのため、ステップ403は、ユーザと関連付けられたモーションデータ(ステップ402)を旧記録モーションデータと比較して、ユーザが第1の活動を実施しているかどうかを判断することを含み得る。
いくつかの実装形態においては、ステップ403が、機械学習アルゴリズムを使用してデータを分析することにより、ユーザが第1の活動を実施しているかどうかを判断することを含む。かかる実装形態においては、機械学習アルゴリズムが、現在のモーションデータを入力として受信し、ユーザが第1の活動を実施しているかどうかの判断を出力するように(例えば、複数のユーザからの旧記録モーションデータを用いて)訓練することができる。いくつかの実装形態においては、ステップ403が、ユーザと関連付けられた現在のモーションデータと旧記録モーションデータとの間の一致の百分率を判断することを含み得る。一致の百分率が所定の閾値(例えば、少なくとも60%、少なくとも75%、少なくとも90%など)を超えていれば、ユーザは第1の活動を実施している。いくつかの例においては、ステップ403が、モーションデータに少なくとも部分的に基づいてユーザの運動範囲を判断すること(ステップ402)を含む。
いくつかの実装形態においては、ユーザが第1の活動を実施しているかどうかというステップ403の判断が二分決定(例えば、「はい」または「いいえ」)である。他の実装形態においては、ステップ403が、ユーザが第1の活動を実施している度合いを判断することを含む。ステップ403は、例えば、ユーザが実施している第1の活動の百分率(例えば、10%、50%、90%など)を判断することを含み得る。いくつかの実装形態においては、ステップ403が、第1の活動を実施しているときのユーザの成績(例えば、不良、可、良、優など)を測定することを含む。
いくつかの実装形態においては、方法400が、ユーザが第1の活動を実施していないと判断したことを受けて、アラートを生成することと、そのアラートをユーザまたは第三者に伝えることと、を含み得る。このアラートは、例えば、ディスプレイデバイス120および/またはスピーカ142を介してユーザに伝えることができる。別の例として、ユーザが第1の活動を実施していないと判断したことを受けて、第1の活動を実施するよう促す第2のプロンプトをユーザに伝えることができる。第2のプロンプトは、第1のプロンプトと同一または不同であり得る。さらに別の例においては、方法400が、ユーザが第1の活動を実施していない(例えば、ディスプレイデバイス120に表示されたメディアコンテンツを一時停止または停止している)と判断したことを受けて、ディスプレイデバイス120の動作を変更することを含み得る。さらなる例においては、方法400が、ユーザが第1の活動を実施していないと判断したことを受け、メディアコンテンツを変更して、第1の活動とは異なる第2の活動を実施するよう促す第2のプロンプトを表示することを含み得る。
方法400のステップ404は、ユーザと関連付けられた第1の生理学的パラメータ(ステップ402)を、第1のデータに少なくとも部分的に基づいて判断することを含む。例えば、メモリデバイス114は、制御システム110によって実行されると、制御システム110に生理学的データを分析させて(ステップ402)第1の生理学的パラメータを判断するための機械可読命令を含み得る。生理学的パラメータは、例えば、心拍数、心拍数変動、心周期、呼吸数、吸気振幅、呼気振幅、吸気対呼気比、推定血圧パラメータ(単数または複数)、またはそれらの任意の組み合わせであり得る。ステップ404は、任意の数の生理学的パラメータ(例えば複数のパラメータ)を判断することを含み得るのがより一般的である。判断された第1の生理学的パラメータを示す情報は、メモリデバイス114に記憶することができる。
いくつかの実装形態においては、ステップ404が、判断された第1の生理学的パラメータの1つ以上の指標をディスプレイデバイスに表示すること、または判断された第1の生理学的パラメータの指標を他の方法でユーザに伝えることを含む。このようにして、ユーザは、判断された第1の生理学的パラメータを、第1の活動を実施しながら略リアルタイムで見ることができる。このことはさらに、ユーザに第1の活動を安全に実行させる上でも役立ち得る。例えば、図3Aを参照すると、第1の指標122がディスプレイデバイス120に表示されている。第1の指標122は、英数字テキスト、記号、画像、オーディオ、またはそれらの任意の組み合わせを含み得る。いくつかの例においては、第1の指標122が、第1のメディアコンテンツに隣接して(例えば、個人124に隣接して)表示される。他の例においては、第1の指標122が、表示された第1のメディアコンテンツの一部分のに少なくとも部分的に重なる。
方法400のステップ405は、判断された第1の生理学的パラメータ(ステップ404)が所定の閾値を超えているかどうかを判断することを含む。いくつかの実装形態においては、第1の生理学的パラメータの所定の閾値が、危険または不健康なレベルを示す。例えば、第1の生理学的パラメータが心拍数であれば、この閾値は、ユーザに健康リスクをもたらし得る高い心拍数(例えば、120BPM超、130BPM超、150BPM超、175BPM超、200BPM超、250BPM超など)を示し得る。いくつかの例においては、所定の閾値が値の範囲である。
いくつかの実装形態においては、ステップ405が、ユーザと関連付けられた情報に基づいて所定の閾値を判断および/または調整することを含む。例えば、所定の閾値が、上記のユーザプロファイル(例えば、人口統計情報、医療情報、転倒リスク情報など)に少なくとも部分的に基づき、そのユーザについて判断および/または調整することができる。所定の閾値が心拍数であれば、安全な閾値は、例えば、ユーザの年齢および/または病状に依存し得る。安全範囲は、メモリデバイス114に記憶されたルックアップテーブルを使用して取得することができる。
いくつかの実装形態においては、方法400が、第1の判断された生理学的パラメータが第1の活動中に所定の閾値を超えたと判断したことを受けて、アラートを生成することと、そのアラートをユーザまたは第三者に伝えることと、を含み得る。このアラートは、例えば、ディスプレイデバイス120および/またはスピーカ142を介してユーザに伝えることができる。別の例として、このアラートを家族の一員または医療提供者/スタッフに伝え、第三者をチェックするよう促すことができる。さらに別の例として、このアラートを緊急サービスに伝えることができる。いくつかの実装形態においては、このアラートが、その挙動および/または動きを変更するようユーザに促すプロンプトまたはフィードバック(例えば、ディスプレイデバイス120に表示される英数字テキストまたは他の視覚的合図および/またはオーディオ)である。このアラートは、例えば、ユーザに自身の行動を減じる(例えば減速する)よう促して、(例えば、所定の閾値を超えないように)生理学的パラメータの変更を支援することができる。
他の実装形態においては、方法400が、第1の判断された生理学的パラメータが第1の活動中に所定の閾値を超えたと判断したことを受けて、ディスプレイデバイス120の動作を変更することを含み得る。例えば、制御システム110が、表示された第1のメディアコンテンツを一時停止または停止して、ユーザが第1の活動を引き続き実施するのを止めることができる。かかる実装形態においては、ステップ402~404を、生理学的パラメータがもう所定の閾値を超えていない(例えば、心拍数が安全なレベルに戻った)と判断されるまで1回以上繰り返すことができる。生理学的パラメータがもう所定の閾値を超えていないと判断したことを受けて、第1のメディアコンテンツが再開することができ、ユーザは第1の活動を引き続き実施することができる。代替として、生理学的パラメータが安全なレベルに戻った後に、第1のメディアコンテンツが表示されなくなる。代わりに、制御システム110は、第1の活動とは異なる(例えば、第1の活動よりも難度が低い)第2の活動を実施するよう促す第2のプロンプトを含む第2のメディアコンテンツをディスプレイデバイス120に表示して、生理学的パラメータが所定の閾値を再び超えるのを防ぐことを支援することができる。
いくつかの実装形態においては、方法400が、第1の活動を実施するようユーザに促すために第1の活動を実施している間に1つ以上のメッセージを(例えば、ディスプレイデバイス12を介して)ユーザに伝えることを含む。このメッセージは、英数字テキスト、オーディオ、画像、事前に記録された映像、またはそれらの任意の組み合わせを含み得る。かかる実装形態においては、このメッセージを、ユーザの名前を含むようにカスタマイズすることができる。
いくつかの実装形態においては、方法400が、学習人工知能(AI)システムを使用して(例えば、深層ニューラルネットワークを使用して)、第1のメディアコンテンツ(例えば映像ストリーム)およびメタデータを分析し、画像データを分類した後に、そのメディアコンテンツに対するユーザのコンプライアンスおよび関与、ならびに関連する生理学的パラメータをチェックすること(例えば、最適化された呼吸および心臓バイオメトリクス領域内で安全に運動することにより、例えば低リスクの良好な身体運動を行うことができる)と、将来のセッションのために同様のタイプの(ただし新しいコンテンツを伴う)メディアを選択して、ユーザがプログラムへの関与を保てるようにすることと、を含む。
いくつかの実装形態においては、ステップ401~405のうちの1つ以上を1回以上繰り返すことができる。例えば、ステップ402~405は、ユーザが第1の活動を完了したと判断されるまで1回以上繰り返すことができ、その時点で、第1のメディアコンテンツはディスプレイデバイスに表示されなくなる。いくつかの例においては、第1の活動が第2の活動のために行われた後にステップ401~405が繰り返され、第2の活動を実施するよう促す第2のプロンプトを含む第2のメディアコンテンツがディスプレイデバイスに表示される。いくつかの実装形態においては、第2の活動が第1の活動とは異なる。例えば、第2の活動が、第1の活動の難度とは異なる難度を有し得る。例えば、ユーザが第1の活動を十分に実施したと判断されれば、第2の活動は、完了した第1の活動の難度よりも高い難度を有し得る。このようにして、複数の活動を実施するようユーザに促すことができる。
図5を参照すると、本開示のいくつかの実装形態に係る方法500が表されている。方法500の1つ以上のステップは、本明細書に記載されているシステム100(図1~図2)の任意の要素または態様を用いて実施することができる。
方法500のステップ501は、活動セッションを開始するようユーザに促すことを含む。活動セッションは、複数の活動モジュールから選択される少なくとも1つの活動モジュールを含む。各活動モジュールは、1つ以上の身体活動を実施するようユーザに促すメディアコンテンツ(例えば、映像および/またはオーディオ)を含むのが一般的である。かかるメディアコンテンツは、例えば、ディスプレイデバイス120(図1)を使用してユーザに伝えることができる。ユーザは、(例えば、ディスプレイデバイス120を介して)活動モジュールを表示させることによって活動モジュールを開始するように促すことができる。例えば、ある活動モジュールは、筋肉の動き、身体の1つ以上の部位の動き(例えば、腕の動き、脚の動き、頭の動きなど)、一連の呼吸運動など、またはそれらの任意の組み合わせなど、一連の活動を実施するようユーザに促すことができる。各活動モジュールは、活動を実施する別の個人(例えば、コーチまたはインストラクタ)もしくは事前に記録されたアバターの映像、活動を実施するようユーザに指示するオーディオ、活動を実施するようユーザに指示するテキスト(例えば字幕)、またはそれらの任意の組み合わせを含み得る。このようにして、活動セッションを、例えば、理学療法セッション、肺療法セッション、または身体運動セッションとみなすことができる。
この複数の活動モジュールは、本明細書に記載されているメモリデバイス114に記憶することができる。この複数の活動モジュールは、任意の適切な数(例えば、2個、20個、50個、100個、1,000個、10,000個、100,000個など)の活動モジュールを含み得る。活動セッションは、この複数の活動モジュールのうちの少なくとも1つを含むが、この複数の活動モジュールのすべてを上限とする任意の適切な数の活動モジュールを含み得る。例えば図6Aを参照すると、活動セッション600が、第1の活動モジュール602Aと、第2の活動モジュール602Bと、第3の活動モジュール602Cと、を含み得る。活動モジュール602A~602Cは、同一または不同の持続時間および/または難度を有し得る。例示的、非限定的な一例として、第1の活動モジュール602Aは、ストレッチ活動(例えば、ウォームアップ)を実施するようユーザに促すことを含み得、第2の活動モジュール602Bは、(例えば、第1の活動モジュール602Aよりも難度の高い)1つ以上の運動を実施するようユーザに促すことを含み得、第3の活動モジュール602Cは、クールダウン活動を含み得る。
活動セッション内の1つ以上の活動モジュールは、複数の活動モジュールから様々な方法で選択することができる。いくつかの実装形態においては、活動セッションを備える活動モジュールのうちの1つ以上が、(例えば、ユーザ、医療専門家(例えば、療法士、医師)、コーチ、トレーナー、家族、友人などによって)手動で選択される。他の実装形態においては、活動セッションを含む複数の活動モジュールが自動的に選択される。例えば、活動セッションを含む複数の活動モジュールは、本明細書に記載されているユーザプロファイル内の情報(例えば、ユーザの年齢および/または性別などの人口統計情報、ユーザと関連付けられた医療情報など)に少なくとも部分的に基づいて自動的に選択することができる。別の例として、活動セッションを構成する複数の活動モジュールは、ユーザと関連付けられた旧記録生理学的データおよび/または旧記録モーションデータに少なくとも部分的に基づいて自動的に選択することができる。別の例として、活動セッションを含む複数の活動モジュールは、ユーザと関連付けられた現在の生理学的データおよび/または現在のモーションデータに少なくとも部分的に基づいて自動的に選択することができる。
いくつかの実装形態においては、活動セッションを備える活動モジュール(単数または複数)が、訓練された機械学習アルゴリズムを使用して複数のモジュールから自動的に選択される。機械学習アルゴリズムは、教師ありまたは教師なし学習技法を用いて訓練することができる。訓練データは、ユーザまたは1人以上の他の個人と関連付けることができる。そのため、機械学習アルゴリズムは、訓練データから学習し、現在のユーザに適応するといえる。訓練されると、機械学習アルゴリズムは、ユーザと関連付けられたユーザプロファイル、ユーザと関連付けられた旧記録生理学的データ、ユーザと関連付けられた旧記録モーションデータ、またはそれらの任意の組み合わせを入力として受信し、活動セッションを含む活動モジュール(単数または複数)を出力として選択するように構成されている。例えば、ユーザの活動モジュールを、他の同様の立場の個人(例えば、特定の選択および順序の活動モジュールで上手く行ったユーザと同じ年齢層に属する他のユーザ)の結果に基づいて選択することができる。
いくつかの実装形態においては、活動セッションを備える活動モジュール(単数または複数)が、ユーザの環境と関連付けられた情報に少なくとも部分的に基づいて自動的に選択される。かかる実装形態においては、1つ以上のセンサ(例えばレーダセンサ132)からのデータを、ユーザの環境を分析し、活動モジュールを選択するのに使用することができる。センサ(単数または複数)からのデータは、ユーザが活動を実施するための空間の量を判断するのに使用することができる。例えば、ユーザと障害物(例えば、家具、壁など)との間に数フィートしかない場合には、その障害物が干渉し得る動きを必要としない活動モジュールを選択することができる。別の例として、活動モジュールが機器(例えば、椅子または他の家具、重り、抵抗バンド、マット/パッド、ブレース、センサなど)の使用を必要とする場合には、センサ(単数または複数)からのデータを使用してかかる機器の有無を特定し、それに応じて活動モジュール(単数または複数)を選択することができる。例えば、活動モジュールが椅子を必要としても、その環境内で椅子が特定されなければ、その活動モジュールは活動セッションの一部として選択されない。これらの例においては、物体認識アルゴリズムを使用して、ユーザの環境における物体の有無を特定することができる。活動モジュールを選択するための環境パラメータのさらなる例は、周囲温度、周囲照明、周囲空気質、またはそれらの任意の組み合わせを含み得る。例えば、周囲温度が所定の閾値を超えていれば、(例えば、熱に関わる病気または怪我の防止を支援するために、)比較的強度の低い活動モジュールを選択することができる。別の例として、大気質が所定の閾値を下回って(例えば、劣悪な大気質を示して)いれば、比較的強度の低い活動モジュールを選択することができる。
方法500のステップ502は、活動セッションの第1の活動モジュールの実施中にユーザと関連付けられた生理学的データを受信することを含む。生理学的データは、例えば、心拍数、心拍数変動、心臓波形、呼吸数、呼吸数変動、呼吸深度、一回換気量、吸気振幅、呼気振幅、吸気対呼気比、発汗、温度(例えば、周囲温度、体温、中核体温、表面温度など)、血液酸素化、フォトプレチスモグラフィ、パルス伝送時間、血圧、またはそれらの任意の組み合わせなど、ユーザの1つ以上の生理学的パラメータを示す。
方法500のステップ503は、活動セッションの第1の活動モジュールの実施中にユーザと関連付けられたモーションデータを受信することを含む。モーションデータは、ユーザの動き(またはその欠如)を示す。モーションデータは、例えば、ユーザが第1の活動モジュール内の1つ以上の活動を実施しているかどうかを判断するのに使用することができる。モーションデータは、例えば、旧記録モーションデータ(例えば較正データ)と比較して、ユーザが第1の活動モジュール内の1つ以上の活動を実施しているかどうかを判断することができる。いくつかの実装形態においては、ユーザが第1の活動モジュールを遵守しているかどうかの判断が二分決定(例えば、「はい」または「いいえ」)である。他の実装形態においては、ユーザが第1の活動モジュールを遵守しているかどうかを判断することが、遵守の度合い(例えば、ユーザが第1の活動モジュールの10%、50%、90%などを実施している)についての判断を含む。モーションデータは、第1の活動を実施しているときのユーザの定性的成績(例えば、不良、可、良、優など)を判断するのに使用することもできる。
いくつかの実装形態においては、生理学的データ(ステップ502)およびモーションデータ(ステップ503)を、同じセンサから生成または取得することができる。例えば、生理学的データおよびモーションデータの両方を、本明細書に記載されているレーダセンサ132(図1)から生成または取得することができる。かかる実装形態においては、生理学的データおよびモーションデータが、ユーザが着用するデバイスに統合または連結されていないセンサ(例えばレーダセンサ132)から生成または取得することができる。言い換えれば、生理学的データおよび/またはモーションデータを生成または取得するためのセンサをユーザおよびユーザの衣服から物理的に離間させることができるため、データを生成するためにユーザが何らかのデバイスまたは機器を身に付ける必要がなくなる。他の実装形態においては、生理学的データおよびモーションデータを、異なるセンサから生成または取得することができる。かかる実装形態においては、生理学的データが第1のセンサによって生成できるのに対し、モーションデータは、第1のセンサとは異なる第2のセンサによって生成される。例えば、モーションデータがレーダセンサ132によって生成できるのに対し、生理学的データは、パルスオキシメータ濃度計センサ、PPGセンサ148、および/または温度センサ138(例えば、それらのうちの1つ以上が、活動セッション中にユーザが着用するウェアラブルデバイスに統合または連結されている)によって生成することができる。
方法500のステップ504は、活動セッションを開始した後(例えば、第1の活動モジュールを開始した後)に活動セッションを変更することを含む。活動セッションは、様々な方法で変更することができる。活動セッションは、例えば、その活動セッションを構成する1つ以上の活動モジュールを、複数の活動モジュールから選択された1つ以上の代替活動モジュールで代用することによって変更することができる。活動セッションは、その活動セッションに活動モジュールを追加するか、またはその活動セッションから活動モジュールを除去することによって変更することができる。活動セッションは、その活動セッション内の1つ以上の活動モジュールを並べ替えることによって変更することができる。別の例として、活動セッションは、その活動セッションを構成する1つ以上の活動モジュールを一時停止すること、またはその活動セッションを構成する1対の活動モジュールの間に一時停止を追加することによって変更することができる。さらなる例として、活動モジュールの再生速度を変更(例えば、加速または減速)すること、および/または活動モジュールの音量を変更(例えば、増大または低減)することができる。このようにして、活動セッションを、ユーザと関連付けられたリアルタイムの生理学的データおよび/またはモーションデータに基づいてユーザに適合させることができる。
例えば図6Bを参照すると、一例においては、活動セッション600(図6A)が、第2の活動モジュール602Bを第4の活動モジュール602Dで代用すること、および/または第3の活動モジュール602Cを第5の活動モジュール602Eで代用することにより、第1の変更された活動セッション600’を形成するように変更することができる。図6Cを参照すると、別の例においては、第1の活動モジュール602Aと第2の活動モジュール602Bとの間に第1の一時停止P1を追加すること、および/または第2の活動モジュール602B内に第2の一時停止P2を追加することにより、活動セッション600(図6A)を、第2の変更された活動セッション’’を形成するように変更することができ、それにより、第2の活動モジュール602Bを(一時停止前の)第1の部分と(一時停止後の)第2の部分とに分割することができる。さらに別の例として、図6Dを参照すると、第1の活動モジュール602Aを早期に終了し、第4の活動モジュール602Dを開始することにより、活動セッション600(図6A)を、第3の変更された活動セッション600’’’を形成するように変更することができる。
活動セッションは、第1の活動モジュールの実施中にユーザと関連付けられた生理学的データの少なくとも一部分(ステップ502)、第1の活動モジュールの実施中にユーザの動きと関連付けられたモーションデータの少なくとも一部分(ステップ503)、またはその両方に少なくとも部分的に基づいてステップ504で変更することができる。例えば、活動セッションは、第1の活動モジュールの実施中にユーザと関連付けられた生理学的パラメータ(例えば、心拍数、心拍数変動、呼吸速度、呼吸速度変動、体温など)と所定の閾値との間での比較を受け、生理学的データに基づいて変更することができる。所定の閾値は、本明細書に記載されているユーザプロファイル(例えば、ユーザの年齢、病状など)に基づき得る。生理学的データは、例えば、その生理学的データの傾向に基づいて、(例えば、活動セッションを含む次の活動モジュールの実施中に)ユーザと関連付けられた生理学的パラメータを予測するのにさらに使用することができる。例えば、生理学的パラメータが心拍数であり、心拍数が、第1の活動モジュールの実施中に所定の閾値を超えているか、第1または第2の活動モジュールの実施中に所定の閾値を超えると予想される場合には、活動セッションが、第2の活動モジュールを、第2の活動モジュールよりも難度が低い異なる活動モジュールで置き換えるように変更して、生理学的パラメータの閾値超過を防ぐのを支援することができる。別の例においては、生理学的パラメータが閾値を超えたことを受けて第1の活動モジュールを一時停止することができる。この一時停止は、生理学的パラメータの継続的な測定に基づく持続時間を有し得る(この一時停止は、例えば、パラメータが閾値を下回るまで継続する)。代替として、この一時停止は、所定の持続時間(例えば、10秒間、30秒間、1分間、3分間、10分間など)を有し得る。さらに別の例においては、生理学的パラメータが閾値を超えたことを受けて、第1の活動モジュールと次の活動モジュールとの間の一時停止を活動セッションに追加することができる。
別の例として、活動セッションは、ユーザの動きと、第1の活動モジュールによって必要とされる動きと、の間での比較を受け、モーションデータに基づいて変更することができる。例えば、ユーザが第1の活動モジュールに遵守してい(例えば、要求された動きを完了することができ)なければ、活動セッションは、第2の活動モジュールをよりも難度の低い別の活動モジュールで代用するように、第1の活動モジュールを終了するように、または活動セッションから活動モジュールを除去するように変更することができる。代替として、第1の活動モジュールを早期に終了することもできる。逆に、ユーザが第1の活動モジュールに準拠していれば、活動セッションは、第2の活動モジュールを難度の高い別の活動モジュールと交換するように、第1の活動モジュールを停止して別の活動モジュールへと続くように、または追加活動モジュールを活動セッションに追加するように変更することができる。
生理学的データとモーションデータとを併用して活動セッションを変更することもできる。例えば、モーションデータが、ユーザが第1の活動モジュールを遵守していることを示し、生理学的データが、生理学的パラメータ(例えば心拍数)が閾値を下回っていることを示していれば、第1の活動モジュールがユーザにとって易しすぎることを示し得るため、活動セッションを変更する(例えば、別の活動モジュールを活動セッションに追加する)ことができる。
いくつかの実装形態においては、方法500が、活動セッションの実施中に1つ以上の勧奨をユーザに伝えることをさらに含む。勧奨(単数または複数)は、活動モジュールの実施中、活動モジュール内の一時停止中、活動モジュール間の一時停止中、またはそれらの任意の組み合わせにおいてユーザに伝えることができる。いくつかの実装形態においては、勧奨(単数または複数)が、ユーザが活動セッションの実施中に追加機器を使用するための勧奨を含む。例えば、第2の活動モジュールが機器(例えば、重り、抵抗バンド、ブレースなど)の使用を必要とする場合には、勧奨を第2の活動の前(例えば、第1の活動モジュールと第2の活動モジュールとの間の一時停止中)にユーザに伝えて、使用する機器を持ってくるよう、および/または準備するようユーザに促すことができる。さらには、物体認識アルゴリズムを使用して機器の有無を特定して、ユーザが正しい機器を有するまで活動セッションを一時停止しておくこともできる。別の例として、活動モジュールが、生理学的パラメータ(例えば、心拍数、呼吸速度、体温など)が閾値を超えたために一時停止され、一時停止中にユーザに勧奨を伝えて、パラメータの変更を支援する(例えば、座る、呼吸運動を行う、流体を飲むなど)ことができる。
上記のとおり、いくつかの実装形態においては、活動セッションを、物体の有無、周囲温度、周囲照明、大気質などの環境パラメータに少なくとも部分的に基づいて変更することができる。かかる実装形態においては、これらの環境パラメータを、ユーザへの勧奨を生成するのに使用することもできる。例えば、周囲温度が所定の閾値を超えていれば、(例えば、サーモスタットを調節することによって)室温を下げる勧奨をユーザに伝えることができる。別の例として、周囲照明が所定の閾値を下回っていれば、照明を明るくする勧奨をユーザに伝えることができる。さらなる例として、ユーザが現在立っている場所で活動モジュールを実施するための空間が不十分であると判断されれば、その活動モジュールに十分な空間を有する部屋内の異なる場所に移動する勧奨をユーザに伝えることができる。
本明細書に記載のとおり、レーダセンサ132は、モーションデータおよび生理学的データの両方を取得するのに使用することができる。レーダセンサ132によって取得された生理学的データは、ユーザが静止しているか座っているときのほうが正確であり得る。そのため、場合によっては、ユーザが移動しているときにレーダセンサ132が正確なデータを取得しないことがある。この問題に対処するために、(例えば、変動性、予想値または履歴値との比較、ユーザの動きなどに基づいて)生理学的データが正確でないと判断したことを受けて、追加のセンサを使用する勧奨をユーザに伝えることができる。追加のセンサは、例えば、ウェアラブルデバイス(例えば、スマートウォッチまたはブレスレット)に埋め込むこと、または連結することができる。そのため、生理学的データを取得するために追加のセンサを使用するようユーザに促すことができる。
方法500の1つ以上のステップは、1回以上繰り返すことができる。例えば、ステップ502およびステップ503は、第1の活動モジュールに後続する第2の活動モジュールに対して繰り返すことができる。そのため、活動セッションは、本明細書に記載のとおり、その活動セッションの実施中の任意の時点で変更することができる。ステップ502およびステップ503で受信したデータは、複数回の反復を経て(例えばメモリに)記憶することにより、活動セッションに対する将来の変更の効果を高めることができる。例えば、これらのステップの繰り返しを用いて、ステップ504の実施中に活動セッションを変更する時期および方法を判断するのに使用される機械学習アルゴリズムを訓練することができる。このようにして、本明細書に記載されている方法500は、現在のユーザに基づいてどの活動モジュール(単数または複数)が最適であるかを適応的に学習し、それに応じて活動セッションを作成することができる。
本明細書では、システム100、方法400、および方法500について、1人のユーザを参照して説明してきたが、複数のユーザ(例えば、2人のユーザ、5人のユーザ、10人のユーザ、20人のユーザなど)で同時に使用できるのがより一般的である。システム100、方法400、および方法500は、例えば、集団療法環境で使用することができる。さらに、これらのシステムおよび方法について、ユーザに療法を提供することに関するものとして本明細書に記載してきたが、本明細書に記載されているシステムおよび方法は、例えば、身体運動用途など、非療法用途で使用できるのがより一般的である。かかる実装形態においては、本明細書に記載されているシステムおよび方法を用いて、ユーザが身体運動を実施しているかどうかを判断すること(例えば、コンプライアンスを監視すること)、および/またはユーザの生理学的パラメータが身体運動中に(例えば、安全上の理由で)所定の閾値を超えているかどうかを判断することができる。
以下の請求項1~83のうちいずれかの1つ以上からの1つ以上の要素または態様またはステップあるいはその一部(単数または複数)をその他の請求項1~83のいずれかの1つ以上あるいはその組み合わせからの1つ以上の要素または態様またはステップあるいはその一部(単数または複数)と組み合わせることにより、本開示の1つ以上のさらなる実装形態および/または請求項を形成することができ得る。
本開示について1つ以上の特定の実施形態または実装形態を参照して説明してきたが、当業者であれば、本開示の意図および範囲から逸脱すること無く多数の変更が可能であり得ることを認識する。これらの実装形態およびその明確な変更例はそれぞれ、本開示の意図および範囲に収まるものとして企図される。そして、本開示の各種態様によるさらなる実装形態が、本明細書に記載された実装形態のいずれかから任意の数の特徴を組み合わせ得ることも企図されている。
Claims (83)
- 第1の活動を実施するよう促す第1のプロンプトを含む第1のメディアコンテンツをディスプレイデバイスに表示することと、
ユーザと関連付けられたデータであって、(i)前記ユーザの動きと関連付けられたモーションデータと、(ii)前記ユーザと関連付けられた生理学的データと、を含むデータを1つ以上のセンサから受信することと、
前記ユーザが前記第1の活動を実施しているかどうかを、前記ユーザと関連付けられた前記モーションデータ、前記ユーザと関連付けられた前記生理学的データ、またはその両方に少なくとも部分的に基づいて判断することと、
前記ユーザと関連付けられた第1の生理学的パラメータを、前記ユーザと関連付けられた前記生理学的データに少なくとも部分的に基づいて前記第1のプロンプトの後に判断することと、
前記第1の生理学的パラメータが所定の閾値を超えているかどうかを判断することと、
を含む方法。 - (i)前記第1の生理学的パラメータが前記所定の閾値を超えていると判断すること、(ii)前記ユーザが前記第1の活動を実施していないと判断すること、または(iii)(i)および(ii)の両方を受けてアラートを生成することをさらに含む、請求項1に記載の方法。
- 前記ユーザが前記第1の活動を実施していないと判断したことを受けて、前記第1の活動を実施するよう促す第2のプロンプトを前記ディスプレイデバイスに表示することをさらに含む、請求項1または請求項2に記載の方法。
- (i)前記第1の生理学的パラメータが前記所定の閾値を超えていると判断すること、(ii)前記ユーザが前記第1の活動を実施していないと判断すること、または(iii)(i)および(ii)の両方を受けて前記ディスプレイデバイスの動作を変更することをさらに含む、請求項1から3のいずれか一項に記載の方法。
- 前記変更が、前記ディスプレイデバイスに表示される前記メディアコンテンツを一時停止することを含む、請求項4に記載の方法。
- 前記生理学的データに少なくとも部分的に基づいて前記変更後に前記ユーザと関連付けられた第2の生理学的パラメータを判断することと、
前記第2の生理学的パラメータが前記所定の閾値を超えているかどうかを判断することと、
前記生理学的パラメータが前記所定の閾値を下回っていると判断したことを受けて、前記メディアコンテンツを前記ディスプレイデバイス上で再開することと、
をさらに含む、請求項4または請求項5に記載の方法。 - 前記変更が、第2の活動を実施するよう促す第2のプロンプトを前記ディスプレイデバイスに表示することを含む、請求項4に記載の方法。
- 前記第2の活動が、前記ユーザが前記第1の活動を実施していたかどうかの前記判断、前記判断された第1の生理学的パラメータ、またはその両方に少なくとも部分的に基づいて選択される、請求項7に記載の方法。
- 前記判断された第1の生理学的パラメータの指標を前記ディスプレイデバイスに表示することをさらに含む、請求項1から8のいずれか一項に記載の方法。
- 前記判断された第1の生理学的パラメータの前記指標が、前記表示されたメディアコンテンツに重なるか、または隣接している、請求項9に記載の方法。
- 前記第1の生理学的パラメータが、心拍数、心拍数変動、呼吸数、呼吸数変動、またはそれらの任意の組み合わせを含む、請求項1から10のいずれか一項に記載の方法。
- 前記データに少なくとも部分的に基づいて、前記ユーザが前記第1の活動を完了したと判断することをさらに含む、請求項1から6および請求項9から11のいずれか一項に記載の方法。
- 前記ユーザが前記第1の活動を完了したと判断したことを受けて、第2の活動を実施するよう促す第2のプロンプトを含む第2のメディアコンテンツを前記ディスプレイデバイスに表示することをさらに含む、請求項12に記載の方法。
- 前記第2の活動が前記第1の活動とは異なる、請求項13に記載の方法。
- 前記ユーザの本人性を、前記1つ以上のセンサのうちの少なくとも1つからの前記データに少なくとも部分的に基づいて判断することをさらに含む、請求項1から14のいずれか一項に記載の方法。
- 前記第1のメディアコンテンツが、1つ以上のビデオ画像、1つ以上の静止画、オーディオ、またはそれらの任意の組み合わせを含む、請求項1から15のいずれか一項に記載の方法。
- 前記第1の活動が療法セッションである、請求項1から16のいずれか一項に記載の方法。
- 前記ユーザと関連付けられたユーザプロファイルであって、前記ユーザの年齢を示す情報、前記ユーザと関連付けられた医療情報、またはその両方を含むユーザプロファイルを示すデータを受信することをさらに含む、請求項1から17のいずれか一項に記載の方法。
- 前記所定の閾値を、前記ユーザプロファイルに少なくとも部分的に基づいて選択することをさらに含む、請求項18に記載の方法。
- 前記1つ以上のセンサがレーダセンサを含む、請求項1から19のいずれか一項に記載の方法。
- 前記レーダセンサが、(i)ドングル、または(ii)前記ドングル、前記ディスプレイデバイス、もしくはその両方と通信するように構成されたリモートコントロールに連結または統合されている、請求項20に記載の方法。
- 前記ドングルが、前記ディスプレイデバイスに通信可能に連結されており、前記第1のメディアコンテンツを記憶するメモリを含む、請求項21に記載の方法。
- 前記1つ以上のセンサが、第1のセンサおよび第2のセンサを含む、請求項1から19のいずれか一項に記載の方法。
- 前記第1のセンサが、前記モーションデータを生成するように構成されており、前記第2のセンサが、前記生理学的データを生成するように構成されている、請求項23に記載の方法。
- 前記第1のセンサが、ドングルまたはリモートコントロールに連結または統合されており、前記第2のセンサが、ウェアラブルデバイスに連結または統合されている、請求項24に記載の方法。
- 前記1つ以上のセンサが、前記ディスプレイデバイスに連結または統合されている第1のセンサを含む、請求項1から19のいずれか一項に記載の方法。
- 前記ユーザが前記第1の活動を実施しているかどうかを判断することが、前記モーションデータの少なくとも一部分を旧記録モーションデータと比較することを含む、請求項1から26のいずれか一項に記載の方法。
- 前記旧記録モーションデータが前記ユーザと関連付けられている、請求項27に記載の方法。
- 前記旧記録モーションデータが、1人以上の異なるユーザと関連付けられている、請求項27に記載の方法。
- 前記ユーザが前記第1の活動を実施しているかどうかを判断することが、機械学習アルゴリズムを使用することを含む、請求項1から29のいずれか一項に記載の方法。
- 1つ以上のプロセッサを備える制御システムと、
機械可読命令を記憶したメモリと、を備え、
前記制御システムが前記メモリに連結され、前記メモリ内の前記機械実行可能命令が前記制御システムの前記1つ以上のプロセッサのうちの少なくとも1つによって実行されたときに、請求項1から30のいずれか一項に記載の方法が実施される、システム。 - 1つ以上の指標をユーザに伝えるためのシステムであって、請求項1から30のいずれか一項に記載の方法を実施するように構成された制御システムを備える、システム。
- コンピュータによって実行されたときに、請求項1から30のいずれか一項に記載の方法を前記コンピュータに実行させる命令を備える、コンピュータプログラム製品。
- 前記コンピュータプログラム製品が非一時的コンピュータ可読媒体である、請求項33に記載のコンピュータプログラム製品。
- ユーザと関連付けられたデータを生成するように構成された1つ以上のセンサと、
機械可読命令およびメディアコンテンツを記憶するメモリと、
第1の活動を実施するよう促す第1のプロンプトを含む前記メディアコンテンツの第1の部分をディスプレイデバイスに表示させるため、
前記ユーザが前記第1の活動を実施しているかどうか、前記1つ以上のセンサによって生成された前記データに少なくとも部分的に基づいて判断するため、
前記ユーザと関連付けられた第1の生理学的パラメータを、前記1つ以上のセンサによって生成された前記データに少なくとも部分的に基づいて判断するため、および
前記第1の生理学的パラメータが所定の閾値を超えているかどうかを判断するため
に前記機械可読命令を実行するように構成された1つ以上のプロセッサを含む制御システムと、
を備えるシステム。 - 前記1つ以上のセンサがレーダセンサを含む、請求項35に記載のシステム。
- 前記レーダセンサが超広帯域(UWB)レーダセンサである、請求項36に記載のシステム。
- ハウジングをさらに備え、前記レーダセンサおよび前記メモリが前記ハウジングに連結または統合されている、請求項36または請求項37に記載のシステム。
- 前記制御システムが、前記ハウジングに連結または統合されている、請求項38に記載のシステム。
- 前記ディスプレイデバイスのポート内に受容されて前記ディスプレイデバイスと前記メモリとを通信可能に連結するように構成されたインターフェースをさらに備える、請求項38または請求項39に記載のシステム。
- 前記ポートが高精細度マルチメディアインターフェース(HDMI(登録商標))ポートまたはUSBポートである、請求項40に記載のシステム。
- 前記メモリが、前記ユーザと関連付けられたユーザプロファイルであって、前記ユーザの年齢を示す情報、前記ユーザと関連付けられた医療情報、またはその両方を含むユーザプロファイルを記憶する、請求項35から41のいずれか一項に記載のシステム。
- 前記システムがカメラを含まない、請求項35から42のいずれか一項に記載のシステム。
- 前記レーダセンサとは異なる、前記1つ以上のセンサのうちの第2のセンサを含む二次デバイスをさらに備える、請求項36から43のいずれか一項に記載のシステム。
- 前記制御システムが、前記第1の生理学的パラメータが前記所定の閾値を超えていると判断したことを受けて前記ディスプレイデバイスの動作を変更するようにさらに構成されている、請求項35から44のいずれか一項に記載のシステム。
- ディスプレイデバイスのポートに受容されるように構成されたインターフェースと、
機械可読命令およびメディアコンテンツを記憶するメモリと、
前記インターフェースを介して前記ディスプレイデバイスに制御信号を提供するように配置された制御システムであって、
第1の活動を実施するよう促す第1のプロンプトを含む前記メディアコンテンツの第1の部分を前記ディスプレイデバイスに表示させるため、
ユーザと関連付けられたデータをセンサから受信するため、
前記ユーザが前記第1の活動を実施しているかどうかを、前記受信されたデータに少なくとも部分的に基づいて判断するため、
前記ユーザと関連付けられた第1の生理学的パラメータを、前記受信されたデータに少なくとも部分的に基づいて判断するため、および
前記判断された第1の生理学的パラメータの指標を前記ディスプレイデバイスに表示させるため
に前記機械可読命令を実行するように構成された1つ以上のプロセッサを含む制御システムと、
を備えるデバイス。 - 第1のハウジング部分と第2のハウジング部分とをさらに備え、前記第2のハウジング部分が、前記ディスプレイデバイスの一部分に連結されるように構成されている、請求項46に記載のデバイス。
- 前記センサが、前記第2のハウジング部分に連結または統合されており、前記インターフェースが前記第1のハウジング部分に連結されている、請求項47に記載のデバイス。
- 前記第1のハウジング部分と前記第2のハウジング部分との間に延びるコードをさらに備える、請求項47または請求項48に記載のシステム。
- 前記ポートが高精細度マルチメディアインターフェース(HDMI(登録商標))ポートまたはUSBポートである、請求項46から49のいずれか一項に記載のデバイス。
- 前記センサをさらに備える、請求項46から50のいずれか一項に記載のデバイス。
- 前記センサがレーダセンサまたはLIDARセンサである、請求項51に記載のデバイス。
- 第1の活動モジュールと第2の活動モジュールとを含む活動セッションを開始するようユーザに促すことであって、前記第1の活動モジュールおよび前記第2の活動モジュールが、複数の活動モジュールから選択され、前記第2の活動モジュールが、前記第1の活動モジュールに後続する、促すことと、
前記第1の活動モジュールの実施中に前記ユーザと関連付けられた生理学的データを受信することと、
前記第1の活動モジュールの実施中に前記ユーザの動きと関連付けられたモーションデータを受信することと、
前記ユーザと関連付けられた前記生理学的データの少なくとも一部分、前記ユーザの動きと関連付けられた前記モーションデータの少なくとも一部分、またはその両方に少なくとも部分的に基づいて前記活動セッションを変更すること、
を含み、
前記活動セッションを変更することが、(i)第1の持続時間中に前記第1の活動モジュールを一時停止すること、(ii)第2の持続時間中に、前記第1のモジュールと前記第2のモジュールとの間の前記活動セッションを一時停止すること、(iii)前記第2の活動モジュールを、前記複数のモジュールから選択された第3の活動モジュールで代用すること、または(iv)それらの任意の組み合わせを含む、
方法。 - 前記第1の活動モジュールが第1の難度を有し、前記第2の活動モジュールが、前記第1の難度とは異なる第2の難度を有する、請求項53に記載の方法。
- 前記第3の活動モジュールが、前記第2の難度とは異なる第3の難度を有する、請求項54に記載の方法。
- 前記第1の活動モジュールおよび前記第2の活動モジュールが、前記ユーザと関連付けられたユーザプロファイル、前記ユーザと関連付けられた旧記録生理学的データ、前記ユーザと関連付けられた旧記録モーションデータ、またはそれらの任意の組み合わせに少なくとも部分的に基づいて前記複数のモジュールから選択される、請求項53から55のいずれか一項に記載の方法。
- 前記ユーザプロファイルが、前記ユーザと関連付けられた医療情報、前記ユーザと関連付けられた人口統計情報、またはその両方を含む、請求項56に記載の方法。
- 前記第1の活動モジュールおよび前記第2の活動モジュールが、訓練された機械学習アルゴリズムを使用して前記複数のモジュールから選択され、前記訓練された機械学習アルゴリズムが、(i)前記ユーザと関連付けられた前記ユーザプロファイル、前記ユーザと関連付けられた旧記録生理学的データ、前記ユーザと関連付けられた旧記録モーションデータ、またはそれらの任意の組み合わせを入力として受信するように、かつ(ii)前記第1の活動モジュールおよび前記第2の活動モジュールを出力するように構成されている、請求項56に記載の方法。
- 前記活動セッションを変更することが、前記第2の活動モジュールを前記第3の活動モジュールで代用することを含まず、前記第2の活動モジュールに後続する前記活動セッションに前記第3の活動を追加することをさらに含む、請求項53から58のいずれか一項に記載の方法。
- 前記活動セッションを変更することが、前記活動セッションから前記第2の活動モジュールを除去することと、前記第1の活動モジュールの後に前記活動セッションを終了することと、を含む、請求項53から58のいずれか一項に記載の方法。
- 前記第1の持続時間、前記第2の持続時間、またはその両方が、前記ユーザと関連付けられた前記生理学的データの少なくとも一部分、前記ユーザの動きと関連付けられた前記モーションデータの少なくとも一部分、またはその両方に少なくとも部分的に基づいて判断される、請求項53から60のいずれか一項に記載の方法。
- 前記活動セッションを開始するよう前記ユーザに促すことが、ディスプレイに前記第1の活動モジュールを表示させることを含む、請求項53から61のいずれか一項に記載の方法。
- 前記第1の活動モジュールの実施中に前記ユーザと関連付けられた第1の生理学的パラメータを、前記生理学的データに少なくとも部分的に基づいて判断することをさらに含む、請求項53から62のいずれか一項に記載の方法。
- 前記第1の生理学的パラメータと関連付けられた指標を、前記第1の活動モジュールの実施中に前記ユーザに伝えることをさらに含む、請求項63に記載の方法。
- 前記第1の生理学的パラメータが、心拍数、心拍数変動、呼吸数、呼吸数変動、またはそれらの任意の組み合わせを含む、請求項63に記載の方法。
- 前記第1の生理学的パラメータが所定の閾値を超えているかどうかを判断することをさらに含む、請求項63に記載の方法。
- 前記活動セッションを変更することが、(i)前記第1の活動モジュールを一時停止すること、または(ii)前記第1の生理学的パラメータが前記所定の閾値を超えていると判断したことを受けて前記第1の活動モジュールを終了することを含む、請求項66に記載の方法。
- 勧奨を前記ユーザに伝える、請求項67に記載の方法。
- 前記活動セッションを変更することが、前記第1の活動モジュールを一時停止することを含み、前記第1の活動モジュールが一時停止されている間に前記勧奨が前記ユーザに伝えられる、請求項68に記載の方法。
- 前記活動セッションを変更することが、前記第1の活動モジュールと前記第2の活動モジュールとの間で前記活動セッションを一時停止することを含み、前記第1の活動モジュールと前記第2の活動モジュールとの間で前記勧奨が前記ユーザに伝えられる、請求項68に記載の方法。
- 前記勧奨が、前記ユーザが前記第1の活動モジュール、前記第2の活動モジュール、またはその両方の実施中に追加機器を使用する勧奨を含む、請求項68から70のいずれか一項に記載の方法。
- 前記追加機器が、ブレース、家具、センサ、またはそれらの任意の組み合わせを含む、請求項71に記載の方法。
- 前記活動セッションを変更することが、前記第1の活動モジュールを一時停止することと、前記複数の活動モジュールから別の活動モジュールを選択することと、前記別の活動モジュールを開始するよう前記ユーザに促すことと、前記別の活動モジュールの後に前記第1の活動モジュールを再開することと、を含む、請求項53に記載の方法。
- 前記生理学的データおよび前記モーションデータが第1のセンサから受信される、請求項53から73のいずれか一項に記載の方法。
- 前記第1のセンサがレーダセンサまたはLIDARセンサである、請求項74に記載の方法。
- 前記第1のセンサが、前記ユーザによって着用されるデバイスに連結または統合されていない、請求項74に記載の方法。
- 前記生理学的データが第1のセンサから受信され、前記モーションデータが第2のセンサから受信される、請求項53から73のいずれか一項に記載の方法。
- 前記第1のセンサが、前記ユーザによって着用されるデバイスに連結または統合されている、請求項77に記載の方法。
- 前記活動セッションが、理学療法セッション、肺療法セッション、または身体運動セッションである、請求項53から78のいずれか一項に記載の方法。
- 1つ以上のプロセッサを備える制御システムと、
機械可読命令を記憶したメモリと、を備え、
前記制御システムが前記メモリに連結され、前記メモリ内の前記機械実行可能命令が前記制御システムの前記1つ以上のプロセッサのうちの少なくとも1つによって実行されたときに、請求項53から79のいずれか一項に記載の方法が実施される、
システム。 - 1つ以上の指標をユーザに伝えるためのシステムであって、請求項53から79のいずれか一項に記載の方法を実施するように構成された制御システムを備える、システム。
- コンピュータによって実行されたときに、請求項53から79のいずれか一項に記載の方法を前記コンピュータに実行させる命令を備える、コンピュータプログラム製品。
- 前記コンピュータプログラム製品が非一時的コンピュータ可読媒体である、請求項82に記載のコンピュータプログラム製品。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202063031485P | 2020-05-28 | 2020-05-28 | |
US63/031,485 | 2020-05-28 | ||
PCT/US2021/034758 WO2021243152A1 (en) | 2020-05-28 | 2021-05-28 | Systems and methods for monitoring user activity |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023527717A true JP2023527717A (ja) | 2023-06-30 |
Family
ID=76601771
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022569279A Pending JP2023527717A (ja) | 2020-05-28 | 2021-05-28 | ユーザ活動を監視するためのシステムおよび方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20230253103A1 (ja) |
EP (1) | EP4158644A1 (ja) |
JP (1) | JP2023527717A (ja) |
CA (1) | CA3172406A1 (ja) |
WO (1) | WO2021243152A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116897264B (zh) * | 2021-03-10 | 2024-02-23 | 三菱电机株式会社 | 环境控制系统、环境控制装置以及环境控制方法 |
CN115204221B (zh) * | 2022-06-28 | 2023-06-30 | 深圳市华屹医疗科技有限公司 | 生理参数的检测方法、设备及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9723381B2 (en) * | 2013-12-23 | 2017-08-01 | Nike, Inc. | Athletic monitoring system having automatic pausing of media content |
CN116035528A (zh) | 2016-09-19 | 2023-05-02 | 瑞思迈传感器技术有限公司 | 用于从音频和多模态信号中检测生理运动的装置、系统及方法 |
WO2018134646A1 (en) * | 2017-01-23 | 2018-07-26 | Oxstren Wearable Technologies Private Limited | Training of classifiers for identifying activities based on motion data |
JP2022507834A (ja) | 2018-11-19 | 2022-01-18 | レスメッド センサー テクノロジーズ リミテッド | 呼吸障害の検出のための方法および装置 |
-
2021
- 2021-05-28 EP EP21734657.6A patent/EP4158644A1/en active Pending
- 2021-05-28 WO PCT/US2021/034758 patent/WO2021243152A1/en unknown
- 2021-05-28 JP JP2022569279A patent/JP2023527717A/ja active Pending
- 2021-05-28 CA CA3172406A patent/CA3172406A1/en active Pending
- 2021-05-28 US US17/999,981 patent/US20230253103A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
CA3172406A1 (en) | 2021-12-02 |
US20230253103A1 (en) | 2023-08-10 |
EP4158644A1 (en) | 2023-04-05 |
WO2021243152A1 (en) | 2021-12-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11375948B2 (en) | Methods and systems for providing a preferred fitness state of a user | |
US11504020B2 (en) | Systems and methods for multivariate stroke detection | |
US20210000347A1 (en) | Enhanced physiological monitoring devices and computer-implemented systems and methods of remote physiological monitoring of subjects | |
US20220160298A1 (en) | Enhanced Smartwatch and Vitals Monitor | |
JP6268193B2 (ja) | 脈波測定装置、携帯機器、医療機器システム、及び生体情報コミュニケーションシステム | |
US9865176B2 (en) | Health monitoring system | |
US8684922B2 (en) | Health monitoring system | |
CN101198277B (zh) | 用于生理学和心理生理学监控的系统 | |
US20150294086A1 (en) | Devices, systems, and methods for automated enhanced care rooms | |
US20150294067A1 (en) | Devices, systems, and methods for automated enhanced care rooms | |
US11903680B2 (en) | Wearable-based health state verification for physical access authorization | |
US20100305466A1 (en) | Incentive spirometry and non-contact pain reduction system | |
US20150294085A1 (en) | Devices, systems, and methods for automated enhanced care rooms | |
KR20160075677A (ko) | 소비자 생체측정 장치 | |
US20220113799A1 (en) | Multiple switching electromyography (emg) assistive communications device | |
US20230253103A1 (en) | Systems and methods for monitoring user activity | |
Alhamid et al. | A multi-modal intelligent system for biofeedback interactions | |
WO2016137698A1 (en) | Calculating pulse transit time from chest vibrations | |
US20230107691A1 (en) | Closed Loop System Using In-ear Infrasonic Hemodynography and Method Therefor | |
Chickella et al. | 1.2. PERVASIVE AND PERSUASIVE TECHNOLOGIES IN MOTIVATING PEOPLE TO PHYSICAL ACTIVITIES OUTDOOR IN FITNESS PARKS |