JP6203881B2 - データ特徴の触覚表示方法 - Google Patents

Description

本開示は、包括的には人間とタッチスクリーンとの相互作用に関し、より詳細には、タッチスクリーンに結合されたコンピューターとユーザーが装着するポータブル装置との間でのデータ交換に関し、データ交換には対応する触覚効果が付随する。

新世代の消費者装置及び商用装置はますます、コンピューターとユーザーとの間で情報を交換する好ましい方法としてタッチスクリーン入力及びタッチスクリーンディスプレイに頼っている。例えば、仮想的なボタン、スライダー等をタッチスクリーンのディスプレイに表示することができ、ユーザーは、これらの仮想的な入力を「押下」又は他の様式で操作することにより、選択肢の中から好みを示し、又は選択することができる。ユーザーと、タッチスクリーンを使用する広範囲の普段使いの装置との相互作用が、日々の生活の単なる一部になるまでますます普及することになることが予想される。個人がＵＳＢフラッシュドライブ、ポータブルハードドライブ、メモリカード等のパーソナルポータブルデータ記憶装置を携帯することも一般的になりつつある。これらの装置は、例えば、金融記録、公文書、医療記録、写真及び映像、並びに音楽ファイル等の広範囲の有用なデータ及び情報を記憶するために人々により使用される。この傾向が、ポータブル記憶装置が個人により腕時計及び宝飾品と全く同じように一般的に装着されるようになるまで続くことも予想される。

上記傾向が進むにつれて、データ及び情報をコンピューター及び他の装置と個人のポータブル記憶装置との間で転送する改良されより簡易化された技法が出現するであろう。現在、この種のトランザクションは、個人のＵＳＢフラッシュドライブをコンピューターのＵＳＢポート内に装着することを含む。ドライブの存在の認識は、コンピューターのグラフィカルユーザーインターフェース（ＧＵＩ）内にドライブを表すアイコンとして表示される。次に、ユーザーは、ファイル、フォルダー、写真、音楽ファイル等を表示されているアイコン上にドラッグして、それらを挿入されたＵＳＢフラッシュドライブにコピー又は移動させることができる。これは、マウスを使用して行うことができ、又はタッチスクリーンを横切って指先を移動させることにより達成することができる。アイコンにドラッグされたアイテム毎に、進行バーが出現し、バーが左から右に進んだ場合、データ転送が完了する。次に、ユーザーは、ＵＳＢフラッシュドライブをＵＳＢポートから取り外し、転送されたデータが記憶された状態で持ち出すことができる。

情報をパーソナル記憶装置に転送する上記プロセスは機能的であるが、それでもやはり面倒で複雑であり、達成するために少なくとも適度のコンピュータースキルを必要とする。したがって、上記傾向に鑑みて、コンピューター又はディスプレイを有する他の装置と、個人のパーソナルポータブル記憶装置との間で情報及びデータを転送するより簡易でより直観的であり、かつよりインタラクティブな方法が現在必要とされており、その必要性は高まりつつある。これに関連して、ファイルがパーソナルポータブル記憶装置に含まれていることを個人に常時通知する必要性もある。本開示が主に対象とするのはこのような方法の提供である。

タッチスクリーンを有するコンピューター又は他の装置と、個人のパーソナルポータブル記憶装置との間でデータを転送する方法及び装置が開示される。本方法は、特別な振動触知前腕ディスプレイと組み合わせて、個人が装着するＢｌｕｅｔｏｏｔｈ（登録商標）又は他の無線パーソナルデータ記憶装置の使用を含む。振動触知前腕ディスプレイは、振動効果又は触覚効果をユーザーの前腕に所定のパターン又は順序で与えるように位置決めされた振動触知アクチュエーターの離間アレイを有する前腕帯の形態をとることができる。アクチュエーターはコントローラーにより制御され、コントローラーは装着されるパーソナル記憶装置にも結合される。コンピューターは、ユーザーが表面に加える接触及びジェスチャーに応答するようにプログラムされる。

可能な一例では、パーソナル記憶装置と、前腕ディスプレイとを装着した個人は、例えば、ユーザーがパーソナル記憶装置にロードしたい写真を表示したタッチスクリーンに近づくことができる。勿論、この例での写真は、音楽ファイル、ドキュメント等の実質的にあらゆる種類の情報を仮想的に表すアイコンで置き換えることができる。しかし、本例では、個人は、スクリーンの写真の近くを単に触れ、指のジェスチャーを実行することができ、ジェスチャーは、コンピューターにより、写真を個人の無線記憶装置にアップロードする要求を示すものとして解釈される。次に、画面上の写真を個人の手の下に移動させ、縮小させ、消失させて、写真が個人のパーソナル記憶装置に送られたことを示すことができる。その直後、振動触知前腕ディスプレイの個人の手の近くにある触覚アクチュエーターが起動し、データ送出の開始を示す振動を与える。写真の多くの部分がアップロードされるにつれて、個人の前腕のますます高い位置にある触覚アクチュエーターが起動して、データ転送の進行を示す。したがって、個人は、ファイルが自身の腕を上って移動するように感じる。転送が終了すると、異なる触覚効果を個人の前腕に与えて、写真のアップロードが完了したことを示すことができる。その後、個人は、前腕ディスプレイを通じて、アップロードされたファイルがまだ存在することを示す連続又は周期的な触覚効果を受けることができる。

このように、コンピューター及び他の装置とのデータ及び情報の交換を大幅に簡易化し、より直観的かつより有用にする方法及び装置が開示される。本方法は、アップロードされたファイルの存在及び恐らくは他の状態情報を示す、パーソナル記憶装置からの触覚メッセージを含むことができる。これらの態様、特徴、及び利点、並びに他の態様、特徴、及び利点は、以下のように概説される添付図面の図とともに取り入れられた後述する詳細な説明の検討からよりよく理解されるであろう。

本開示による前腕振動触知ディスプレイ及びパーソナル記憶装置を示す図である。 本開示による、コンピューターに結合されたタッチスクリーンビデオディスプレイを示す図である。 無線パーソナル記憶装置及び前腕振動触知ディスプレイが取り付けられた個人が該個人がアップロードしたいタッチスクリーン上の画像に手を伸ばしているところを示す図である。 個人がタッチスクリーンの画像の近傍に触れて画像を選択し、アップロードを要求する指ジェスチャーを実行しているところを示す図である。 データ転送が開始する際に個人の手の下で画像が縮小することと、データ転送の開始を触覚で示す振動触知前腕ディスプレイの第１のアクチュエーターの対応する起動とを示す図である。 データ転送が続いていることと、データ転送の進行を触覚で示す振動触知前腕ディスプレイの追加のアクチュエーターの順次起動とを示す図である。 データ転送が完了間近であることと、振動触知前腕ディスプレイのアクチュエーターの対応する起動とを示す図である。 データ転送の完了と、パーソナル記憶装置への写真の転送が完了したことを装着者に示す前腕振動触知ディスプレイを通しての対応する触覚効果の付与とを示す図である。

これより、図面の図をより詳細に参照する。図中、同様の参照番号はいくつかの図を通して同様の部分を示す。図１は、本発明の原理を実施する前腕振動触知ディスプレイを示す。この実施形態での振動触知ディスプレイ１１は、個人の前腕１２に巻かれて装着されるバンド又はスリーブ１３を備える。例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）対応フラッシュメモリチップ等の無線パーソナルメモリ装置１４が、スリーブに配置され、コンピューターと無線でデータを交換することが可能である。アクチュエーターコントローラー１６がスリーブ１３に配置され、メモリ装置１４に動作可能に結合されて、メモリ装置へのデータアップロードの状態又はメモリ装置からのデータダウンロードの状態を監視する。振動触知アクチュエーター１８のアレイがスリーブ１３に配置され、起動した場合、各アクチュエーターが振動触感覚を個人の前腕１２に加えることが可能なように位置決めされている。示される実施形態では、アクチュエーター１８は前腕１２から上に一列に延びて配置されているが、これは本発明を限定するものではなく、アクチュエーターは、特定の用途に合わせるために望ましい任意のパターン又はアレイに配置することができる。アクチュエーターのアレイの構成にかかわりなく、各アクチュエーター１８はアクチュエーターコントローラー１６に動作可能に接続されている。アクチュエーターコントローラーは、所望に応じてアクチュエーターを個々に、順次、グループで、又は他の様式で起動するようにプログラムされている。さらに、アクチュエーターコントローラーは、異なる振動触覚効果をアクチュエーターのうちの１つ又は全てに与えることが可能であり、異なる効果は個人により区別可能である。例えば、コントローラーは、触覚感覚をアクチュエーターに短いバーストで、長いバーストで、一連のバーストで、又は独特の振動プロファイルを有する触覚感覚で与えて、様々なメッセージ又は情報を個人に与えることができる。

図２は、タッチ対応のディスプレイ２４を有するタッチスクリーン２２を一般的な形態で示す。タッチスクリーンは、コンピューター２１に結合され、コンピューター２１により制御され、この実施形態では、コンピューター２１は一般的な形態で表される。しかし、コンピューターは、示されるようにスタンドアローンコンピューターとすることができ、又は例えば、キオスク、ＡＴＭ機、ビデオゲーム、携帯電話、携帯情報端末（ＰＤＡ）、若しくは他の電子装置等の装置に埋め込まれたコンピューター若しくはコントローラーとすることができる。コンピューター２１は、例えば、背景又はフィールド２３に配置されたグラフィック要素２６等の画像をタッチスクリーン２２に表示するようにプログラムされている。グラフィック要素２６については、写真として本明細書において考察するが、それらは、例えば、ファイル、フォルダー、ドキュメント、スプレッドシート、音楽、電子メール、ボイスメール、又はコンピューター画面上に日常的に表示される任意の他の種類の情報を示すアイコン又は表示等の実質的にあらゆる種類のグラフィック要素とすることができることが理解されるであろう。タッチスクリーン２２は、ディスプレイ２４の上に重なったタッチセンシティブパネルも含み、このパネルは、容量性タッチパネル、抵抗性タッチパネル、又は任意の他の適切な種類のタッチパネルとすることができる。タッチセンシティブパネルは個人による画面の静的な接触及び移動する、すなわち動的な接触を検知し、コンピューター２１に、画面への接触位置を示す情報及び画面上の接触の動的な移動についての情報を送信する。このようにして、個人は、接触及び指のジェスチャーを通じて、画面に提示された画像及び情報と相互作用し、コンピューターは、接触及びジェスチャーを要求、コマンド、指示等として解釈するようにプログラムされている。

一般に、タッチスクリーン技術、振動触知アクチュエーター及びコントローラー、並びに無線データ転送の詳細は、当業者に既知であるため、本明細書において詳細に説明する必要はない。しかし、次に、これらの技術を利用する本発明について、図３乃至図８を参照してより詳細に説明する。これらの図は、好ましい一実施形態での本開示の方法を順次示す。特に、本発明の方法論について、個人がタッチスクリーンと相互作用して、画面上の画像を、個人が装着する無線パーソナル記憶装置にアップロードすることに関して考察する。しかし、本発明が本発明の例として選択される特定の実施形態に限定されないし、そのような実施形態によって限定されることもないことを理解されたい。

図３は、画像が表示されるフィールド又は背景２４を表示するタッチスクリーンビデオディスプレイ２２を示し、この例では、画像は写真２０の画像である。画面に向かって伸びる個人の腕が見られる。上述したように構成された振動触知ディスプレイ１１が、個人の前腕１２に取り付けられている。この例では、個人は、コンピューター画面から無線パーソナル記憶装置にアップロードしたいアイテムとして写真２０を特定している。図４では、個人は、３０で示されるように自身の手１５を動かし、タッチスクリーンディスプレイ２２の写真２０又はその近傍に触れる。画面に結合されたコンピューターは、この接触を個人による写真２０の選択又は特定として解釈するようにプログラムされている。

個人が、選択された写真を使用して何をしてもらいたいかをコンピューターに命令するために、例えば、指の掴む動き等の指のジェスチャーが、タッチスクリーンの表面上で実行される。コンピューターは、写真を具現するデータを個人の無線パーソナル記憶装置にアップロードする命令としてジェスチャーを解釈するようにプログラムされている。次に、コンピューターは、個人の無線パーソナル記憶装置との通信を確立し、データアップロードを開始する。図５では、写真２０に対応するデータのアップロードが、３１に示されるように開始されている。アップロードの開始と同時に、振動触知ディスプレイ１１の振動触知コントローラーは、３２に示されるように、個人の手に最も近い振動触知アクチュエーターを起動する。これは、パーソナル記憶装置への写真２０の転送開始を確認する振動触覚フィードバックを個人に提供する。同時に、例えば、個人の手に「吸い込まれる」ように見えるような写真の操作等の視覚的な合図を、図５に示されるように、タッチスクリーンディスプレイ２２に表示することができる。

図６では、写真２０を具現するデータのアップロードが進行する。同時に、振動触知コントローラーは、アップロードの進行を監視し、３２に示されるように振動触知アクチュエーターを順次起動する。このようにして、振動触感覚は個人の前腕を徐々に上に移動し、アップロードの進行を示す。或る意味では、個人は、データが転送されるにつれて、ファイルが自身の前腕を上に移動するように感じる。図７では、アップロードは完了間近であり、振動触知アクチュエーターの全てが、パーソナル記憶装置への選択された写真のアップロードがほぼ完了したことの個人への指示として、それぞれ順番に起動されている。最後に、図８において、選択された写真を具現するデータのアップロードは完了し、写真は画面２２から消えている。この時点で、振動触知コントローラーは、３５に示されるように、異なる区別可能な触覚効果を有する振動触知アクチュエーターのうちの１つ又は複数を起動することにより、完了を信号で通知することができる。例えば、図８に示されるように、個人の手から最も遠いアクチュエーターは、パルスのように振動することができ、又は区別可能な振動プロファイルで振動することができる。これは、選択された写真がこの時点で、パーソナル記憶装置にアップロードされたことを個人に信号で通知する。

写真がアップロードされた後、パーソナル記憶装置を監視する振動触知コントローラーは、個人が、写真を含むファイルが存在することを示す連続又は断続した触覚通知を自身の前腕振動触知ディスプレイで受信するように、振動触知アクチュエーターのうちの１つ又は複数を起動することができる。個人が家に着いたとき、個人は、写真を自身のパーソナル記憶装置から、タッチスクリーンを組み込んだパーソナルホームコンピューター又は他の装置にダウンロードしたい場合がある。その場合、個人は、自身の手をパーソナルホームコンピューターの画面に配置し、コンピューターがパーソナル記憶装置からデータをダウンロードする要求として認識するようにプログラムされている指又は手のジェスチャーを実行することができる。コンピューターは、無線パーソナル記憶装置との通信を確立し、ダウンロードが開始される。同時に、前腕ディスプレイの振動触知アクチュエーターは、データが個人の腕を下って、戻って移動することを暗示し、又はそのように感じるパターンでコントローラーにより起動される。例えば、アクチュエーターは、データアップロード中に起動された順序とは逆の順序に起動することができる。ダウンロードが完了したとき、区別可能な触覚効果が与えられ、写真は、タッチスクリーン上の個人の手の下に出現する。この時点で、写真を具現するデータは、パーソナルコンピューター内部に記憶され、個人のパーソナル記憶装置から出されている。

したがって、タッチスクリーンに結合されたコンピューターに対しデータ及び情報を選択し、アップロードし、及びダウンロードする独自の技法及び方法論がここで開示されていることが分かる。本発明を好ましい実施形態及び方法論に関して説明したが、多くの他の実施形態が可能であり、全てが本発明の範囲内であることが理解されよう。例えば、振動触知ディスプレイは、個人の前腕に装着される必要はなく、それに代えて、足、胴周り、腕時計として、又は触覚振動触知効果を与えることができる体の任意の他の場所に装着することができる。さらに、パーソナル記憶装置は、振動触知ディスプレイに一体化する必要はなく、振動触知コントローラーに直接結合する必要はない。例えば、パーソナル記憶装置は、コントローラーとは別個に配置し、コントローラーと無線で通信可能とすることができる。記憶装置は、携帯電話、ＰＤＡ、又は音楽プレーヤー等の別の装置の一部とすることができる。さらに、振動触知アクチュエーターは、単純な線形パターンに配列して示されたが、振動触知触覚効果を個人に与えるために有用な実質的にあらゆるパターンに配置することもできる。振動触知アクチュエーターは１つのみであってもよく、インターフェース動作を表すために、その１つのみの振動触知アクチュエーター上に複数の触覚パターンが表示される。最後に、本発明が、好ましい実施形態におけるような写真のアップロード及びダウンロードに限定されないことが明らかなはずである。実際には、本願は、ドキュメント、音楽ファイル、フォルダー、スプレッドシートデータ、電子メール、ボイスメール、及び多くの他の情報等の個人がパーソナルメモリ装置にアップロードしたい場合がある任意の電子データ又は情報に適用可能である。これらの代替の形態の大半では、データは、写真の場合のように画像ではなくむしろ適切なアイコンにより画面に表される。最後に、好ましい実施形態では、振動触知感覚は順次与えられるが、それらは時間の経過に伴い他のパターンで与えることも同様に可能である。したがって、「時空的(spatiotemporal)」という言葉は、振動触知感覚を与えることができる広範囲のパターン及び順序を指すために使用することができる。これらの追加、削除、及び変更、並びに他の追加、削除、及び変更は、特許請求の範囲に記載の本発明の趣旨及び範囲から逸脱せずに、本明細書に示される好ましい実施形態に対して行うことができる。

Claims (13)

1. 装着可能な物品上における複数の振動触知アクチュエーターを備えるポータブル装置であって、
   前記ポータブル装置は、前記複数の振動触知アクチュエーターに結合されているアクチュエーターコントローラーを備えており、
   該アクチュエーターコントローラーは、
   第１の電子装置から第２の電子装置への情報の転送の開始より後であり且つ該情報の転送の完了より前において、該情報の転送の進行を示すように、前記複数の振動触知アクチュエーターのうちの少なくとも一つの振動触知アクチュエーターを作動させることであって、前記少なくとも一つの振動触知アクチュエーターは、前記情報が転送されるにつれて作動される、作動させることと、
   前記第１の電子装置から前記第２の電子装置への前記情報の転送の完了を示すように、前記複数の振動触知アクチュエーターのうちの少なくとも一つの振動触知アクチュエーターを作動させることと、
   を実行するようにプログラムされていることを特徴とする、ポータブル装置。
   
2. 前記アクチュエーターコントローラーは、前記複数の振動触知アクチュエーターのうちの少なくとも一つの振動触知アクチュエーターを、前記第１の電子装置から前記第２の電子装置への前記情報の転送の開始を示すように、作動させるようにさらにプログラムされていることを特徴とする、請求項１に記載のポータブル装置。
   
3. 前記第１の電子装置から前記第２の電子装置への前記情報の転送の開始を示すために用いられる前記少なくとも一つの振動触知アクチュエーターによって生成される振動触知感覚は、前記第１の電子装置から前記第２の電子装置への前記情報の転送の完了を示すために用いられる前記少なくとも一つの振動触知アクチュエーターによって生成される振動触知感覚とは異なることを特徴とする、請求項２に記載のポータブル装置。
   
4. 前記第１の電子装置から前記第２の電子装置への前記情報の転送の開始を示すために用いられる前記少なくとも一つの振動触知アクチュエーターによって生成される振動触知感覚及び前記第１の電子装置から前記第２の電子装置への前記情報の転送の完了を示すために用いられる前記少なくとも一つの振動触知アクチュエーターによって生成される振動触知感覚は、固有の振動プロファイルを備えることを特徴とする、請求項２に記載のポータブル装置。
   
5. 前記ポータブル装置は、パーソナル記憶装置をさらに備えており、
   前記第２の電子装置は、該パーソナル記憶装置であることを特徴とする、請求項１に記載のポータブル装置。
   
6. 前記装着可能な物品は、腕時計であることを特徴とする、請求項１に記載のポータブル装置。
   
7. 前記複数の振動触知アクチュエーターは、前記装着可能な物品上において所定のアレイで配置されていることを特徴とする、請求項１に記載のポータブル装置。
   
8. 前記アクチュエーターコントローラーは、前記複数の振動触知アクチュエーターに結合されており、
   前記アクチュエーターコントローラーは、前記複数の振動触知アクチュエーターを、所定の方法で、情報を個人に与えるように、作動させるようにプログラムされていることを特徴とする、請求項７に記載のポータブル装置。
   
9. 前記複数の振動触知アクチュエーターの前記所定のアレイは、直線パターンであることを特徴とする、請求項７に記載のポータブル装置。
   
10. 前記アクチュエーターコントローラーは、前記複数の振動触知アクチュエーターに結合されており、
    前記アクチュエーターコントローラーは、前記第１の電子装置から前記第２の電子装置への前記情報の転送の進行を示すように、前記複数の振動触知アクチュエーターを順次作動させるようにプログラムされていることを特徴とする、請求項９に記載のポータブル装置。
    
11. 請求項１乃至１０のいずれか一項に記載のポータブル装置と、
    コンピューターであって、該コンピューターは前記第１の電子装置である、コンピューターと、
    を備える、システム。
    
12. 前記コンピューターは、タッチスクリーンであって、該タッチスクリーンは、前記コンピューターから前記第２の電子装置への前記情報の転送の開始のための入力を感知するように構成されている、タッチスクリーンを備えていることを特徴とする、請求項１１に記載のシステム。
    
13. 前記コンピューターは、携帯電話であることを特徴とする、請求項１１又は１２に記載のシステム。

Images