JP2016533237A - 活動に基づくインテリジェント装置のモード切り替え - Google Patents

Abstract

消費者電子（ＣＥ）装置が、第１及び第２のユーザ活動にそれぞれ関連する少なくとも第１及び第２のユーザインターフェイス（ＵＩ）出力モードを有する。このＵＩ出力モードは、ＵＩ出力モードに関連するユーザ活動を示すセンサに基づいて自動的に設定される。【選択図】図１

Description

〔関連出願との相互参照〕
本出願は、２０１３年９月１７日に出願された米国仮特許出願第６１／８７８，８３５号、及び２０１４年９月２５日に出願された米国特許出願第１４／０３７，２２８号に対する優先権を主張するものである。

本出願は、一般に、身体活動及び／又はフィットネス運動を行う際に使用するように構成されたデジタルエコシステムに関する。

社会は、ますます健康志向になってきている。今では、人々が運動を通じて健康を維持するように促すために、様々な運動及びトレーニングが提供されている。本明細書で理解されるように、固定式運動装置には、運動する人の情報のためのデータディスプレイを備えるものが多くなってきており、この情報は個人に合わせられたものではなく、反復的で単調なものであることが多い。本明細書でさらに理解されるように、人々はトレーニングの補助として音楽を聴くことを楽しむが、通常、この音楽はジム内で放送されているものであったり、或いはユーザが装着できる録音装置で提供されるものであり、やはりパターンが単調で変化せず、行っている実際の運動から外れたようなビートであることが多い。

従って、本原理は、身体活動を行いながら消費者電子（ＣＥ）装置を用いてこの活動を高めることができると認識するが、ほとんどの聴覚的及び／又は視覚的補助器具は、実際の運動に直結しないという点で静的である。具体的には、本明細書で理解されるように、人々は、一般に異なる種類の活動中には異なる測定に関心を持つが、これには活動間で装置又はモードを切り替える必要があり面倒である。例えば、運動セッション中には、瞬間心拍数、ペース、距離及び時間が興味の対象になり得るが、環境活動の測定では、人々は一般的な動きにしか興味を持たない場合もある。通常、個人は、望む情報を得るために、通常はモードを切り替えたい旨をシステムに明示的に入力しなければならないが、異なる専用装置を切り替えることは煩わしい。実際、異なる活動には全く異なる装置が必要になることもある。

本原理は、ポータブルな補助器具を提供して、運動パフォーマンスを改善し、創造性を与え、社会的理由で運動パフォーマンスを共有できるようにし、個人の運動目標を達成する支援とし、運動の結果を分析して追究し、運動参加者に容易かつ直感的な形で仮想コーチングを提供することができると認識する。

従って、身体活動を読み取る装置のインテリジェントモードの正確な切り替えを行うために、個人に複数の情報ソースをリンクさせる。システムは、インテリジェントモードの切り替えに基づいて、視覚ユーザインターフェイス又は音声ボイスフィードバックなどの個人に提供するフィードバックを、特定の活動に最も関連するように自動的に調整することができる。また、モード切り替えに基づいて、ユーザのＣＥ装置が、装置のバッテリ寿命を最大化するように様々なセンサの作動及び停止を行うことができる。

ＣＥ装置のモードを自動的に切り替えるために使用できる情報には、ジム、プール、テニスコート、バスケットボールコート、サッカー／ホッケー場、ランニング用トラック、アウトドアトレールのような専用スポーツフィールドなどの場所などの関心地点情報がある。ある人物のカレンダー情報を学習行動パターンと同様に使用することもできる（従って、例えば誰かがカレンダーに走ることを入力していない場合でも、インテリジェントシステムは、その行動パターンを学習する）。同じ人物に複数のリンク装置を関連付けることもできる。従って、例えば、ある人物が腕時計をはめて携帯電話も持っている場合、両方の装置が相補的情報を提供することができる。システムは、ユーザが何をしているかを示すこの情報に基づいて、感知された活動に基づいて音声コーチングを切り替え、示される活動に関連する様々な測定結果を表示するようにユーザインターフェイスを修正し、様々なセンサをオン／オフして装置のバッテリ寿命を最大化することができる。

従って、活動に基づくモードを切り替える処理を自動化し、個人に提示する情報（視覚ユーザインターフェイス、及び音声コーチングのようないずれかの可聴インターフェイスの両方）を自動的に調整することにより、ユーザ体験が単純化されると理解することができる。さらに、正確な活動モニタリングのために、複数の装置を互いに協調するように同期させることもできる。例えば、ヘッドホンでの心拍モニタを手首に付けたコンピュータバングル又は腕時計に同期させて、バングル又は腕時計上のモニタから心拍情報を提示することができる。このように、ある人物が異なる装置を有している場合でも、クラウドサービス上で活動情報を単一のアカウントに集約することができ、この情報の集約は、単一の装置又はソースからの情報よりも鮮明な映像を提供する役に立つはずである。

装置は、ユーザ活動を示す情報に基づいてユーザインターフェイスモードを自動的に切り替えるように構成され、プロセッサが実行できる命令を含む少なくとも１つのコンピュータ可読記憶媒体と、このコンピュータ可読記憶媒体にアクセスして、プロセッサを構成する命令を実行するように構成された少なくとも１つのプロセッサとを含む。プロセッサは、装置のユーザの第１の活動を示す第１の信号を活動センサから受け取るように構成される。プロセッサは、第１の信号を受け取ったことに応答して、装置の聴覚及び／又は視覚ディスプレイ上に第１のユーザインターフェイス出力を設定する。次に、プロセッサは、装置のユーザの第２の活動を示す第２の信号を活動センサから受け取る。プロセッサは、第２の信号を受け取ったことに応答して、装置の聴覚及び／又は視覚ディスプレイ上に第２のユーザインターフェイス出力を設定する。

第１の信号を提供できる装置の活動センサは、第２の信号を提供することもできる。或いは、第２の活動センサが第２の信号を提供することもできる。第１の信号を提供できる活動センサは、位置センサ、モーションセンサ、生体センサ、近距離通信（ＮＦＣ）要素、又はユーザの学習行動パターンを含む電子的に記憶されたカレンダーとすることができる。さらに、第１の信号を提供できる活動センサは、第１の装置に含めることができ、聴覚及び／又は視覚ディスプレイは、第１の装置とは別の、第１の装置と無線通信するように構成された第２の装置上に支持される。プロセッサは、第１の信号に応答して活動センサを停止させ、第２の信号に応答して活動センサを作動させるようにプロセッサを構成する命令を実行することができる。

第１の活動は運動活動とすることができ、第１のユーザインターフェイス出力は、この運動活動に関連する第１の音声出力を含むことができる。動き検出器などの活動センサによって感知される第１の活動は、ランニング運動とすることができ、第１のユーザインターフェイス出力は、ランニングにおける経過時間、ランニングにおける走行距離、ランニングの高度、ランニングのペースのうちの少なくとも１つについての音声レポートを含むことができる。第１の活動は、水泳などの異なる活動とすることもでき、第１のユーザインターフェイス出力は、泳いだラップについての音声レポート、水泳に関連する音楽の少なくとも一方を含むことができる。第２の活動は、非運動活動とすることができ、第２のユーザインターフェイス出力は、非運動活動に関連する第２の音声出力を含むことができる。

別の態様では、消費者電子（ＣＥ）装置が、オーディオ及び／又はビデオディスプレイと、第１及び第２のユーザ活動にそれぞれ関連する少なくとも第１及び第２のユーザインターフェイス（ＵＩ）出力モードをディスプレイ上に設定するようにディスプレイを制御するよう構成されたプロセッサとを含む。消費者電子（ＣＥ）装置は、プロセッサがアクセス可能な、プロセッサによる実行時にプロセッサを構成する命令を含むコンピュータ可読記憶媒体も含む。この命令は、ＣＥ装置のユーザが第１のユーザ活動に関与していると判定したことに応答して、自動的に第１のＵＩ出力モードを設定するようにプロセッサを構成する。プロセッサは、ＣＥ装置のユーザが第２のユーザ活動に関与していると判定したことに応答して、自動的に第２のＵＩ出力モードを設定するようにも構成される。

別の態様では、方法が、装置のユーザの第１の活動を示す第１の信号を活動センサから受け取ることを含む。第１の信号を受け取ったことに応答して、装置の聴覚及び／又は視覚ディスプレイ上に第１のユーザインターフェイス出力が設定される。この方法は、装置のユーザの第２の活動を示す第２の信号を活動センサから受け取ることをさらに含む。第２の信号を受け取ったことに応答して、装置の聴覚及び／又は視覚ディスプレイ上に第２のユーザインターフェイス出力が設定される。

同じ参照符号が同じ要素を示す添付図面を参照することにより、本発明の詳細をその構造及び動作の両方に関して最も良く理解することができる。

本原理による、例を含むシステム例のブロック図である。 全体的ロジック例を示すフロー図である。 本原理による、第１の具体的なロジック例を示すフロー図である。 本原理による、第２の具体的なロジック例を示すフロー図である。 本原理による、第３の具体的なロジック例を示すフロー図である。 本原理による、第４の具体的なロジック例を示すフロー図である。 本原理による、第５の具体的なロジック例を示すフロー図である。 この場合は水泳である第１の活動に基づく第１のユーザインターフェイス（ＵＩ）出力モードの例を示す図である。 この場合はランニングである異なる活動に基づくユーザインターフェイス（ＵＩ）出力モードの例を示す図である。 非運動活動に基づく第３のユーザインターフェイス（ＵＩ）出力モードの例を示す図である。

本開示は、一般に消費者電子（ＣＥ）装置に基づくユーザ情報に関する。本明細書のシステムは、データを交換できるように互いにネットワークを介して接続されたサーバコンポーネント及びクライアントコンポーネントを含むことができる。クライアントコンポーネントは、ポータブルテレビ（例えば、スマートＴＶ、インターネット対応ＴＶ）、ラップトップコンピュータ及びタブレットコンピュータなどのポータブルコンピュータ、並びにスマートフォン及び後述するさらなる例を含むその他のモバイル装置を含む１又はそれ以上のコンピュータ装置を含むことができる。これらのクライアント装置は、様々な動作環境で動作することができる。例えば、クライアントコンピュータの一部は、一例として、Ｍｉｃｒｏｓｏｆｔ社製のオペレーティングシステム、又はＵｎｉｘオペレーティングシステム、又はＡｐｐｌｅ社又はＧｏｏｇｌｅ社製のオペレーティングシステムを使用することができる。これらの動作環境を使用して、Ｍｉｃｒｏｓｏｆｔ社又はＧｏｏｇｌｅ社又はＭｏｚｉｌｌａ又はその他のブラウザプログラムにより製作された、後述するインターネットサーバによってホストされるウェブアプリケーションにアクセスできるブラウザなどの１又はそれ以上のブラウジングプログラムを実行することができる。

サーバは、インターネットなどのネットワークを介してデータを送受信するようにサーバを構成する命令を実行する１又はそれ以上のプロセッサを含むことができる。或いは、ローカルイントラネット又は仮想プライベートネットワークを介してクライアントとサーバを接続することもできる。

クライアントとサーバの間では、ネットワークを介して情報を交換することができる。この目的及びセキュリティのために、サーバ及び／又はクライアントは、ファイヤウォール、ロードバランサ、一時記憶装置、及びプロキシ、並びに信頼性及びセキュリティを高めるその他のネットワークインフラを含むことができる。１又はそれ以上のサーバは、ネットワークメンバにオンラインソーシャルウェブサイトなどのセキュアなコミュニティを提供する方法を実施する装置を形成することができる。

本明細書で使用する命令とは、システム内で情報を処理するためのコンピュータ実行ステップのことを意味する。命令は、ソフトウェア、ファームウェア、又はハードウェアに実装することができ、システムのコンポーネントが行うあらゆるタイプのプログラムステップを含むことができる。

プロセッサは、アドレス回線、データ回線及び制御回線などの様々な回線、並びにレジスタ及びシフトレジスタによってロジックを実行できるいずれかの従来の汎用シングルチップ又はマルチチッププロセッサとすることができる。

フローチャートによって説明するソフトウェアモジュール、及び本明細書におけるユーザインターフェイスは、様々なサブルーチン、手続きなどを含むことができる。本開示を限定することなく、特定のモジュールにより実行されるものとして開示するロジックは、他のソフトウェアモジュールに再分配し、及び／又は単一のモジュールに組み合わせ、及び／又は共有可能なライブラリ内で利用することもできる。

本明細書で説明する本原理は、ハードウェア、ソフトウェア、ファームウェア、又はこれらの組み合わせとして実装することができ、従って例示的なコンポーネント、ブロック、モジュール、回路及びステップについては、これらの機能面から説明する。

上記で示唆したものに加え、以下で説明する論理ブロック、モジュール及び回路は、汎用プロセッサ、デジタルシグナルプロセッサ（ＤＳＰ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、又は特定用途向け集積回路（ＡＳＩＣ）などのその他のプログラマブル論理装置、離散ゲート又はトランジスタロジック、離散ハードウェアコンポーネント、又は本明細書で説明する機能を実行するように設計されたこれらのいずれかの組み合わせに実装し、又はこれらの組み合わせによって実行することができる。プロセッサは、コントローラ、状態機械、又はコンピュータ装置の組み合わせによって実装することができる。

以下で説明する機能及び方法は、ソフトウェアで実装した場合、限定するわけではないが、Ｃ＃、Ｃ＋＋などの適当な言語で書くことができ、ランダムアクセスメモリ（ＲＡＭ）、リードオンリメモリ（ＲＯＭ）、電気的に消去可能プログラム可能リードオンリメモリ（ＥＥＰＲＯＭ）、コンパクトディスクリードオンリメモリ（ＣＤ−ＲＯＭ）、又はデジタル多用途ディスク（ＤＶＤ）などのその他の光ディスクストレージ、磁気ディスクストレージ、又は取り外し可能なサムドライブなどを含むその他の磁気ストレージ装置などのコンピュータ可読記憶媒体に記憶し、又はこれらを通じて伝送することができる。ある接続は、コンピュータ可読媒体を設定することができる。このような接続は、一例として、光ファイバ、同軸線、デジタル加入者回線（ＤＳＬ）及びツイストペア線を含む有線ケーブルを含むことができる。このような接続は、赤外線及び無線を含む無線通信接続を含むこともできる。

１つの実施形態に含まれるコンポーネントは、他の実施形態においていずれかの適当な組み合わせで使用することができる。例えば、本明細書において説明する及び／又は図に示す様々なコンポーネントのいずれかを組み合わせ、置き換え、又は他の実施形態から除外することができる。

「Ａ、Ｂ及びＣのうちの少なくとも１つを有するシステム（同様に、「Ａ、Ｂ又はＣのうちの少なくとも１つを有するシステム」、及び「Ａ、Ｂ、Ｃのうちの少なくとも１つを有するシステム」）」は、Ａのみ、Ｂのみ、Ｃのみ、ＡとＢの両方、ＡとＣの両方、ＢとＣの両方、及び／又はＡとＢとＣ全てなどを有するシステムを含む。

図１について説明する前に、本明細書で説明するＣＥ装置及びソフトウェアは、デジタルエコシステムとの関連において使用可能であることが理解されると理解されたい。従って、本明細書で理解されるように、コンピュータエコシステム又はデジタルエコシステムは、持続可能性、自動組織性及び拡張性を特徴とする適応的かつ分散型の社会技術システムとすることができる。完全なコンピュータエコシステムは、養分循環及びエネルギーフローを通じて相互作用する生物及び非生物要素からなる環境エコシステムに端を発し、場合によってはＳｏｎｙ Ｅｌｅｃｔｒｏｎｉｃｓ社などの１つの会社が提供できるハードウェア、ソフトウェア及びサービスで構成することもできる。各コンピュータエコシステムの目的は、望まれる可能性のある全てを、少なくとも部分的にインターネットを介して交換できるサービス及び／又はソフトウェアの形で消費者に提供することである。さらに、コンピューティングクラウド内のアプリケーションなどの、エコシステムの要素間の相互関連性及び共有は、データを体系化してこれにアクセスする能力の向上を消費者にもたらし、それ自体を効率的な統合エコシステムの将来的な特徴として示す。

コンピュータエコシステムには、垂直型コンピュータエコシステム及び水平型コンピュータエコシステムという２つの一般型が存在する。垂直型のアプローチでは、エコシステムの事実上全ての態様が同じ会社に関連し（例えば、同じメーカーによって生産され）、特に互いにシームレスに相互作用するように設計される。一方、水平型エコシステムは、異なる団体によって開発されたハードウェア及びソフトウェアなどの態様を１つの統一エコシステムに統合する。水平型のアプローチでは、消費者及びメーカーからのより多くの種類の入力が可能になり、変化する需要に対する新たな革新及び適合の能力が増す。しかしながら、これに関わらず、本明細書で言及するものを含むデジタルエコシステムには、上述した水平型エコシステムの特性と垂直型エコシステムの特性を両方とも具体化できるものもあると理解されたい。

従って、身体活動を行いながらこれらのエコシステムを使用して、例えば、創造性、目的の成就及び／又は達成、自動コーチング／トレーニング、健康及び運動分析、便利なデータアクセス、（フィットネスデータなどの）グループ共有、並びに高精度な健康モニタリングを提供することができ、これらは全て、活動中にスタイリッシュかつ娯楽的な形で提供されるとさらに理解されたい。さらに、本明細書で開示する装置は、たとえ全ての人々がそれぞれのＣＥ装置上に同じタイプ及び組み合わせのセンサを有していなくても、運動中に（例えば、リアルタイムで）運動をモニタするために、及び／又は（例えば、ソーシャルネットワーキングサービスを用いて）友人とデータを共有するために使用するための（図１を参照しながら後述するような）様々なセンサからのデータに基づいて診断的判定を行うことができると理解される。

従って、本明細書で説明するＣＥ装置では、運動前、運動中及び運動後などに、過度に煩わしさ又は負担を感じることがないように容易かつ簡単に装置とのユーザ対話を行うことができると理解されたい。

ここで図１を詳細に参照すると、本原理による、上述し以下でさらに説明する、フィットネス運動を増進するための装置例の１つ又はそれ以上を含むことができるシステム例１０を示している。システム１０に含まれる第１の装置例は、（例えば、水泳中に使用できるように）防水処理することができる消費者電子（ＣＥ）装置例１２である。ＣＥ装置１２は、例えば、コンピュータ化されたインターネット対応（「スマート」）電話機、タブレットコンピュータ、ノートブックコンピュータ、コンピュータ化されたインターネット対応腕時計などのコンピュータ化されたウェアラブル装置、コンピュータ化されたインターネット対応ブレスレット、その他のコンピュータ化されたインターネット対応フィットネス装置、コンピュータ化されたインターネット対応音楽プレーヤ、コンピュータ化されたインターネット対応ヘッドホン、埋め込み型皮膚装着装置などのコンピュータ化されたインターネット対応埋め込み型装置、さらにはコンピュータ化されたインターネット対応テレビ（ＴＶ）などとすることができる。いずれにせよ、ＣＥ装置１２は、本原理を実施する（例えば、他のＣＥ装置と通信して本原理を実施し、本明細書で説明するロジックを実行し、本明細書で説明する他のいずれかの機能及び／又は動作を実行する）ように構成されると理解されたい。

従って、ＣＥ装置１２は、このような原理を実施するために、図１に示すコンポーネントの一部又は全部を含むことができる。例えば、ＣＥ装置１２は、１又はそれ以上のタッチ式ディスプレイ１４、本原理に従って音声を出力するための１又はそれ以上のスピーカ１６、及びＣＥ装置１２に可聴コマンドを入力してＣＥ装置１２の制御などを行うための、オーディオレシーバ／マイクなどの少なくとも１つのさらなる入力装置１８を含むことができる。ＣＥ装置例１２は、１又はそれ以上のプロセッサ２４の制御下でインターネット、ＷＡＮ、ＬＡＮなどの少なくとも１つのネットワーク２２を介して通信するための１又はそれ以上のネットワークインターフェイス２０を含むこともできる。プロセッサ２４は、画像を提示するようにディスプレイ１４を制御すること、ディスプレイ１４からの入力を受け取ることなどの、本明細書で説明するＣＥ装置１２の他の要素を含めて本原理を実施するようにＣＥ装置１２を制御すると理解されたい。さらに、ネットワークインターフェイス２０は、例えば、有線又は無線モデム又はルータ、或いは無線電話トランシーバ、ＷｉＦｉトランシーバなどのその他の適当なインターフェイスとすることもできる。

ＣＥ装置１２は、上述の内容に加えて、（有線接続などを用いて）別のＣＥ装置に物理的に接続するためのＵＳＢポートなどの１又はそれ以上の入力ポート２６、及び／又はＣＥ装置１２からヘッドホンを通じてユーザに音声を提示できるようにＣＥ装置１２にヘッドホンを接続するためのヘッドホンポートを含むこともできる。ＣＥ装置１２は、ディスク型ストレージ又は固体ストレージなどの１又はそれ以上の有形コンピュータ可読記憶媒体２８をさらに含むことができ、このコンピュータ可読記憶媒体２８は搬送波でなくてもよいと理解されたい。また、いくつかの実施形態では、ＣＥ装置１２が、以下に限定するわけではないが、例えば、少なくとも１つの衛星から地理的位置情報を受け取ってこの情報をプロセッサ２４に提供するように構成された、及び／又はＣＥ装置１２が配置されている高度をプロセッサ２４と協働して特定するように構成された、ＧＰＳ受信機及び／又は高度計３０などの位置又は場所受信機を含むこともできる。しかしながら、本原理に従ってＧＰＳ受信機及び／又は高度計以外の別の好適な位置受信機を使用し、例えば３次元全てでＣＥ装置１２の場所を特定することもできると理解されたい。

ＣＥ装置１２の説明を続けると、いくつかの実施形態では、ＣＥ装置１２が、例えば、熱探知カメラ、ウェブカメラなどのデジタルカメラ、及び／又はＣＥ装置１２に統合されて本原理に従い写真／画像及び／又はビデオを収集するようにプロセッサ２４により制御可能な（例えば、ソーシャルネットワークの友人とのハイキングなどの身体活動面を共有するための）カメラとすることができる１又はそれ以上のカメラ３２を含むこともできる。ＣＥ装置１２は、Ｂｌｕｅｔｏｏｔｈ及び／又は近距離無線通信（ＮＦＣ）技術をそれぞれ用いて他の装置と通信するためのＢｌｕｅｔｏｏｔｈトランシーバ３４及びその他のＮＦＣ要素３６を含むこともできる。ＮＦＣ要素の例としては、無線周波数識別（ＲＦＩＤ）要素を挙げることができる。

さらに、ＣＥ装置１２は、プロセッサ２４に入力を提供する１又はそれ以上のモーションセンサ３７（例えば、加速度計、ジャイロスコープ、車輪回転記録器、磁気センサ、受動ＩＲセンサなどの赤外線（ＩＲ）モーションセンサ、光学センサ、速度及び／又は歩調センサ、（ジェスチャコマンドなどを感知するための）ジェスチャセンサなど）を含むこともできる。ＣＥ装置１２は、１又はそれ以上の気候センサ３８（例えば、気圧計、湿度センサ、風センサ、光センサ、温度センサなど）及び／又は１又はそれ以上の生体センサ４０（例えば、心拍センサ及び／又は心臓モニタ、カロリー計算機、血圧センサ、発汗センサ、匂い及び香り検出器、指紋センサ、顔認識センサ、虹彩及び／又は網膜検出器、ＤＮＡセンサ、（血中酸素センサ、及び／又はＶＯ２ ｍａｘ（最大酸素摂取量）センサなどの）酸素センサ、ブドウ糖及び／又は血糖センサ、（スリープトラッカーなどの）睡眠センサ、歩数計及び／又は速度センサ、体温センサ、養分及び新陳代謝率センサ、音声センサ、肺入／出力及びその他の心臓血管センサなど）などの、やはりプロセッサ２４に入力を提供するさらに他のセンサを含むこともできる。上述の内容に加えて、いくつかの実施形態では、ＣＥ装置１２が、ＣＥ装置１２に給電を行うバッテリー（図示せず）を充電するための運動発電装置４２を含むこともできる。

引き続き図１を参照すると、システム１０は、ＣＥ装置１２に加えて、以下に限定されるわけではないが、コンピュータ化されたインターネット対応ブレスレット４４、コンピュータ化されたインターネット対応ヘッドホン及び／又はイヤホン４６、コンピュータ化されたインターネット対応衣類４８、（トレッドミル、運動バイク、エリプティカルマシンなどの）コンピュータ化されたインターネット対応運動器具５０などの１又はそれ以上の他のタイプのＣＥ装置を含むこともできる。また、運動器具５０が置かれたジムへの入場認可を可能にするコンピュータ化されたインターネット対応ジム入場キオスク５２も示している。本段落で説明したものを含む、システム１０に含まれる他のＣＥ装置は、以下に限定されるわけではないが、上述した生体センサ及びモーションセンサ、並びに位置受信機、カメラ、入力装置、さらには上述したスピーカなどの、ＣＥ装置１２に関連して上述した様々なコンポーネントの一部又は全部をそれぞれ含むことができると理解されたい。

従って、例えば、ヘッドホン／イヤホン４６は、ある人物がヘッドホンを着用している時にその人物の心拍数を検知するように構成された心拍センサを含むことができ、衣類４８は、発汗センサ、気候センサ、及びその人物のトレーニングの強度を測定するための心臓センサを含むことができ、運動器具５０は、ユーザの顔画像を収集することにより、ユーザが運動器具５０によって設定されたペースを維持しようともがいていることが特定の顔の表情によって示されているかどうかを判定できるようにするための、運動器具５０の一部に取り付けられたカメラ、及び／又は運動器具５０とＣＥ装置１２をペアにし、従って予め設定されたトレーニングルーチンのデータベースにアクセスするためのＮＦＣ要素を含むことができ、キオスク５２は、（装置１２上のＮＦＣ要素３６などの）相補的ＮＦＣ要素から受け取った入力に基づいて入場を許可されていると認証された人物に入場を許可するＮＦＣ要素を含むことができる。また、図１を参照して説明した装置は、簡単に後述するサーバ５４を含め、全てがこれらに含まれるそれぞれのネットワークインターフェイスを用いてネットワーク２２を介して互いに通信することができ、またこれらの装置の各々は、本原理によるロジック及び／又はソフトウェアコードを記憶するための、搬送波でなくてもよいコンピュータ可読記憶媒体を含むことができる。

ここで、上述した少なくとも１つのサーバ５４を参照すると、このサーバ５４は、少なくとも１つのプロセッサ５６と、ディスク型ストレージ又は固体ストレージなどの、搬送波でなくてもよい少なくとも１つの有形コンピュータ可読記憶媒体５８と、プロセッサ５６の制御下でネットワーク２２を介して図１の他のＣＥ装置と通信することを可能にし、実際には本原理に従ってこれらのＣＥ装置との通信を容易にすることができる少なくとも１つのネットワークインターフェイス６０とを含む。なお、ネットワークインターフェイス６０は、例えば、有線又は無線モデム又はルータ、ＷｉＦｉトランシーバ、或いは無線電話トランシーバなどの他の適当なインターフェイスとすることもできる。

従って、いくつかの実施形態では、サーバ５４をインターネットサーバとし、本原理に従ってＣＥ装置間のフィットネス協調及び／又はデータ交換を容易にし、実施形態例ではシステム１０のＣＥ装置がサーバ５４を介して「クラウド」環境にアクセスし、例えば運動中に聞く音楽をストリーミングし、及び／又は２又はそれ以上の装置をペアにすること（例えば、１つの装置から別の装置に音楽を「投げる」こと）ができるように「クラウド」機能を含んでこれを実行することができる。

ここで図２を参照すると、本原理による、ＣＥ装置１２などのＣＥ装置が実行するロジックのフローチャート例を示している。ブロック７０において、プロセッサ２４が、心拍センサ又はその他の生体センサ４０などの活動センサから信号を受け取り、ブロック７２において、この信号に応答して第１のＵＩ出力を設定する。このＵＩ出力は、ディスプレイ１４上に提示できるように設定することも、或いは別のディスプレイ上に提示できるようにシステム１０の別のコンポーネントに送信することもできる。ブロック７４において、プロセッサ２４は、第１の信号を生成（ブロック７０）したものと同じ活動センサであっても又はそうでなくてもよい活動センサから第２の活動信号を受け取る。ブロック７６において、第２の信号に応答して第２のＵＩが設定される。ブロック７７において、プロセッサ２４は、（単複の）活動信号に基づいて、いずれかの（単複の）センサを作動又は停止することができる。

次に、図３〜図７に、本原理による５つの具体的なロジック例を示す。まず図３を参照すると、ブロック７８において、プロセッサ２４が、活動センサから位置信号を受け取る。例えば、ＧＰＳ送受信機が、活動中のＣＥ装置のユーザの位置を確立することができる。ブロック８０において、プロセッサ２４は、例えばインターネットを介してダウンロードした、又はＣＥ装置に別様に記憶されているマップデータを用いて、この位置情報を場所に関連付けることができる。ブロック８２において、プロセッサ２４は、ＧＰＳ位置センサ及びマップデータによって確立された特定の位置に対応するＵＩを設定する。ＧＰＳを用いた例では、取得した情報を特定のランニング用トラック、ジムなどに関連付けることができ、設定されたＵＩは、この特定の位置に対応できるとともに、衛星位置画像、及び進んだ距離、経過時間などを取得する選択肢などの要素を含むことができる。

図４のロジックは、ブロック８４において、プロセッサ２４がモーションセンサ３７から信号を受け取ることを含む。この例では、モーションセンサ３７は活動センサを表し、プロセッサが位置の時間的変化率（速度）を取得する速度又は加速度センサ、或いは位置センサとすることもできる。判定区画８６において、プロセッサは、受け取った信号が閾値を超えているかどうかを判定し、閾値を超えている場合、ブロック９０において、ＵＩモードを新たな動き閾値に合わせて変更することができる。閾値を超えていない場合、ブロック８８において、プロセッサは、ＵＩモードを変更せずに現在の閾値ＵＩを用いて信号を受け取り続けることができる。

速度を用いた例では、例えば４ｍｐｈなどの閾値を上回る速度はランニングを示し、従ってＵＩ出力モードにそのように関連付けられ、４ｍｐｈ未満は非運動状態を示し、従ってＵＩ出力モードにそのように関連付けられ、４ｍｐｈは閾値例にすぎない。加速度センサにも同様のロジックを適用することができ、この場合、加速度閾値を０．５ｍｐｈとすることができ、０．５ｍｐｈを上回る加速度は、ランニングの速度が上がったことを示し、従ってＵＩ出力モードにそのように関連付けられ、０．５ｍｐｈ未満の加速度は、ランニングの速度が同じ又は下がったことを示し、従ってＵＩ出力モードにそのように関連付けられ、０．５ｍｐｈは閾値例にすぎない。

次に図５を参照すると、ブロック９２において、プロセッサ２４が生体センサ４０からの生体信号を受け取ることにより、別の具体例のロジックが開始する。ブロック９４において、プロセッサ２４は、この生体情報を、例えばウォーキング、ランニング、休息などの特定の活動に関連付け、次にブロック９６において、この関連付けられた活動に合わせてＵＩ出力を設定する。

この例では、生体センサ４０が活動センサを表し、ユーザの心拍数を検出してこの情報信号をプロセッサ２４に送信する心拍センサとすることもでき、プロセッサ２４は、その後にこの心拍数を活動に関連付けてＵＩを設定する。例えば、プロセッサ２４は、６５ｂｐｍの心拍数が休息を示すことができ、８５ｂｐｍがウォーキングを示すことができ、１１０ｂｐｍがランニングを示すことができると判断することができる。これらの心拍数は例示のためのものにすぎず、ユーザは、この特定のユーザに固有の異なる活動レベルに関連する数字を設定するように装置を予めプログラムしておきたいと望むこともできる。プロセッサ２４は、どの活動が行われているかを判断することに基づいて適切なＵＩを設定することができ、経時的な心拍数の変化に基づいて、ユーザに提示するグラフなどの情報をＵＩに組み込むことができる。

生体センサに取って変わる発汗センサにも同様のロジックを適用することができる。段階的発汗レベルは、プロセッサ２４に異なる活動レベルを示すことができ、プロセッサ２４は、湿度及び温度などの要素を組み込むこともできる。プロセッサ２４による発汗量に基づく活動レベルの決定に基づいて、異なるＵＩ出力モードを設定することができる。

ここで図６を参照すると、プロセッサ２４は、ブロック９８において、近距離通信（ＮＦＣ）要素と施設センサとのペアリングを設定することができる。この例では、ＮＦＣ要素は活動センサを表し、これを施設センサとペアリングすることにより、ブロック１００において、プロセッサ２４は、このペアリングをジム、プールなどの特定の場所に関連付けることができる。次に、ブロック１０２において、プロセッサ２４は、この関連付けられた場所に合わせてＵＩ出力を設定することができる。

例えば、ＣＥ装置１２は、プールに配置されてこのプールの施設センサとペアになった別のセンサを用いて設定した信号を認識できるＮＦＣ要素を含むことができる。プロセッサ２４は、このペアリングをプールの位置に関連付け、水泳を対象とするＵＩを設定し、泳いだラップ数、泳いだ距離などの情報を提供することができる。

図７に、時間的に繰返し設定された活動センサからの信号に基づいてＵＩ出力を設定するロジックを示す。ブロック１０４において、プロセッサ２４は、上記の図６でプールとペアになったＮＦＣ要素などの活動センサからの信号を、これらの信号が設定された日付、曜日及び／又は時間に関する情報と共に記憶することができる。同じ日付、曜日及び／又は時間に、例えば５回などのＮ回の事例数を上回って同じ信号が記憶されると、ブロック１０６において、プロセッサ２４は、次の信号を特定の活動に関連付け、ブロック１０８において、記憶された日付、曜日及び／又は時間に一致する各次の日付、曜日及び／又は時間に合わせてＵＩ出力を設定することができる。プールセンサとペアになったＮＦＣ要素の例を続けると、５回の月曜日にわたって毎週月曜日の午前７時に設定されたペアの信号は、プロセッサ２４がいずれかの月曜日の午前７時頃に受け取った信号を同じスイミング活動に関連付け、一貫性のある包括的なＵＩ出力を設定するために使用できる「メモリ」を形成することができる。

図８〜図１０に、様々な活動に基づくＵＩ出力モードの例を示す。まず図８を参照すると、ＣＥ装置１２は、リストバンド１１２及びディスプレイ１４を有する腕時計１１０とすることができる。スピーカ１６は、水泳を示す活動センサからの信号に応答して、プロセッサ２４の指示により、可聴ラップカウンタ又は娯楽用の音楽／ニュースレポートを提供することができる。

図９の腕時計１１０は、ここではランニングである活動を示す信号をプロセッサ２４に送信できる活動センサを含む。この活動センサは、トラック、従ってランニングに関連する位置情報をプロセッサ２４に送信できるＧＰＳロケータなどの位置センサとすることができる。或いは、この活動センサは、ランニングに関連する情報をプロセッサ２４に送信できるモーションセンサとすることもできる。いずれにせよ、ランニングの活動が行われている旨の指示により、腕時計１１０内のプロセッサ２４は、走った距離、ランニングのペース、方向、高度などの音声レポートをユーザの耳に対して再生できるスピーカ１６を含むことができるヘッドホン１１４に無線で音声信号を送信することができる。なお、活動センサは、腕時計１１０上に存在し、特定の活動に適合する音声モードを出力するヘッドホン１１４と無線で通信する。腕時計ディスプレイ１４も、同じ活動に適合するビデオモードを出力することができ、この場合、両ＣＥ装置（腕時計１１０とヘッドホン１１４）が活動に同期すると理解されたい。

次に図１０を参照して分かるように、腕時計１１０は、実行中の活動に関連するビデオモードをディスプレイ１４上に出力することができる。例えば、活動センサがランニングの活動を示す場合、プロセッサ２４は、毎時間消費されているカロリー数をディスプレイ１４上に表示するようにビデオＵＩ出力モードを設定することができる。図９のヘッドホン１１４を通じて提供される音声情報例は、この図１０に示すビデオＵＩ出力モードで腕時計１１０のディスプレイ１４上に提示することもできる。

図８〜図１０のＵＩ出力モードは、音声出力モードを示しているが、これらは、ビデオ又は音声とビデオの組み合わせにすることもできる。

本明細書では、特定の「活動に基づくインテリジェント装置のモード切り替え」を図示し詳細に説明したが、本発明に含まれる主題は、特許請求の範囲のみによって限定されると理解されたい。

１２ 消費者電子（ＣＥ）装置
１４ ディスプレイ
１６ スピーカ
１８ 入力装置
２０ ネットワークインターフェイス
２２ ネットワーク
２４ プロセッサ
２６ ポート
２８ 媒体
３０ ＧＰＳ
３２ カメラ
３４ Ｂｌｕｅｔｏｏｔｈ
３６ ＮＦＣ要素
３７ （単複の）モーションセンサ
３８ （単複の）気候センサ
４０ （単複の）生体センサ
４２ 運動発電装置
４４ インターネット対応ブレスレット
４６ インターネット対応ヘッドホン
４８ インターネット対応衣類
５０ インターネット対応運動器具
５２ インターネット対応ジム入場キオスク
５４ サーバ
５６ プロセッサ
５８ 媒体
６０ ネットワークインターフェイス

Claims (20)

1. ユーザ活動を示す情報に基づいてユーザインターフェイスモードを自動的に切り替えるように構成された装置であって、
   プロセッサによって実行可能な命令を含む少なくとも１つのコンピュータ可読記憶媒体と、
   前記コンピュータ可読記憶媒体にアクセスして前記命令を実行するように構成された少なくとも１つのプロセッサと、
   を備え、前記命令は、前記プロセッサを、
   前記装置のユーザの第１の活動を示す第１の信号を活動センサから受け取り、
   前記第１の信号を受け取ったことに応答して、前記装置の聴覚及び／又は視覚ディスプレイ上に第１のユーザインターフェイス出力を設定し、
   前記装置のユーザの第２の活動を示す第２の信号を活動センサから受け取り、
   前記第２の信号を受け取ったことに応答して、前記装置の前記聴覚及び／又は視覚ディスプレイ上に第２のユーザインターフェイス出力を設定する、
   ように構成する、
   ことを特徴とする装置。
2. 前記第１の信号を提供する前記活動センサは、前記第２の信号を提供する活動センサと同じ活動センサである、
   請求項１に記載の装置。
3. 前記第１の信号を提供する前記活動センサは、前記第２の信号を提供する活動センサと同じ活動センサでない、
   請求項１に記載の装置。
4. 前記プロセッサは、前記命令の実行時に、前記第１の信号に応答して活動センサを停止させ、前記第２の信号に応答して活動センサを作動させるように構成される、
   請求項１に記載の装置。
5. 前記第１の信号を提供する前記活動センサは、位置センサである、
   請求項１に記載の装置。
6. 前記第１の信号を提供する前記活動センサは、モーションセンサである、
   請求項１に記載の装置。
7. 前記第１の信号を提供する前記活動センサは、生体センサである、
   請求項１に記載の装置。
8. 前記第１の信号を提供する前記活動センサは、近距離通信（ＮＦＣ）要素である、
   請求項１に記載の装置。
9. 前記第１の信号を提供する前記活動センサは、第１の装置に含まれ、前記聴覚及び／又は視覚ディスプレイは、前記第１の装置とは別の、前記第１の装置と無線通信するように構成された第２の装置上に支持される、
   請求項１に記載の装置。
10. 前記第１の信号を提供する前記活動センサは、前記ユーザの学習行動パターンを含む電子的に記憶されたカレンダーである、
    請求項１に記載の装置。
11. 前記第１の活動は運動活動であり、前記第１のユーザインターフェイス出力は、前記運動活動に関する第１の音声出力を含む、
    請求項１に記載の装置。
12. 前記第２の活動は非運動活動であり、前記第２のユーザインターフェイス出力は、前記非運動活動に関する第２の音声出力を含む、
    請求項１１に記載の装置。
13. 前記第１の活動はランニングであり、前記第１のユーザインターフェイス出力は、ランニングにおける経過時間、ランニングにおける走行距離、ランニングの高度、ランニングのペース、のうちの少なくとも１つについての音声レポートを含む、
    請求項１に記載の装置。
14. 前記第１の活動は水泳であり、前記第１のユーザインターフェイス出力は、泳いだラップについての音声レポート、水泳に関連する音楽、の少なくとも一方を含む、
    請求項１に記載の装置。
15. 消費者電子（ＣＥ）装置であって、
    オーディオ及び／又はビデオディスプレイと、
    第１及び第２のユーザ活動にそれぞれ関連する少なくとも第１及び第２のユーザインターフェイス（ＵＩ）出力モードを前記ディスプレイ上に設定するように前記ディスプレイを制御するよう構成されたプロセッサと、
    前記プロセッサがアクセス可能な、命令を有するコンピュータ可読記憶媒体と、
    を備え、前記命令は、前記プロセッサによって実行された時に、前記プロセッサを、
    前記ＣＥ装置のユーザが前記第１のユーザ活動に関与していると判定したことに応答して、前記第１のＵＩ出力モードを自動的に設定し、前記ＣＥ装置のユーザが前記第２のユーザ活動に関与していると判定したことに応答して、前記第２のＵＩ出力モードを自動的に設定する、
    ように構成する、
    ことを特徴とする消費者電子（ＣＥ）装置。
16. 前記プロセッサに第１の信号を提供するように構成された位置センサを備え、前記プロセッサは、前記命令の実行時に、前記第１の信号を前記第１のユーザ活動に関連付けるように構成される、
    請求項１５に記載のＣＥ装置。
17. 前記プロセッサに第１の信号を提供するように構成されたモーションセンサを備え、前記プロセッサは、前記命令の実行時に、前記第１の信号を前記第１のユーザ活動に関連付けるように構成される、
    請求項１５に記載のＣＥ装置。
18. 前記プロセッサに第１の信号を提供するように構成された生体センサを備え、前記プロセッサは、前記命令の実行時に、前記第１の信号を前記第１のユーザ活動に関連付けるように構成される、
    請求項１５に記載のＣＥ装置。
19. 前記プロセッサに第１の信号を提供するように構成された近距離通信（ＮＦＣ）要素を備え、前記プロセッサは、前記命令の実行時に、前記第１の信号を前記第１のユーザ活動に関連付けるように構成される、
    請求項１５に記載のＣＥ装置。
20. 装置のユーザの第１の活動を示す第１の信号を活動センサから受け取るステップと、
    前記第１の信号を受け取ったことに応答して、前記装置の聴覚及び／又は視覚ディスプレイ上に第１のユーザインターフェイス出力を設定するステップと、
    前記装置のユーザの第２の活動を示す第２の信号を活動センサから受け取るステップと、
    前記第２の信号を受け取ったことに応答して、前記装置の前記聴覚及び／又は視覚ディスプレイ上に第２のユーザインターフェイス出力を設定するステップと、
    を含むことを特徴とする方法。

Images