JP6258023B2 - 強化された動的ハプティック効果 - Google Patents

強化された動的ハプティック効果 Download PDF

Info

Publication number
JP6258023B2
JP6258023B2 JP2013249262A JP2013249262A JP6258023B2 JP 6258023 B2 JP6258023 B2 JP 6258023B2 JP 2013249262 A JP2013249262 A JP 2013249262A JP 2013249262 A JP2013249262 A JP 2013249262A JP 6258023 B2 JP6258023 B2 JP 6258023B2
Authority
JP
Japan
Prior art keywords
haptic effect
value
actuator
dynamic
key frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013249262A
Other languages
English (en)
Other versions
JP2014115999A (ja
Inventor
コスタ ヘンリー ダ
コスタ ヘンリー ダ
エリック ガーベ
エリック ガーベ
サトヴィル シン バティア
サトヴィル シン バティア
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2014115999A publication Critical patent/JP2014115999A/ja
Application granted granted Critical
Publication of JP6258023B2 publication Critical patent/JP6258023B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02TCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
    • Y02T10/00Road transport of goods or passengers
    • Y02T10/80Technologies aiming to reduce greenhouse gasses emissions common to all road transportation technologies
    • Y02T10/82Elements for improving aerodynamics

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

一実施形態は、一般的なハプティック効果に関するものであり、特に動的ハプティック効果を生成するものに関する。
電子デバイスメーカは、ユーザのためにリッチなインターフェースを生成するために努力している。従来のデバイスは、ユーザへフィードバックを提供するために視覚及び音声のキューを用いている。いくつかのインターフェース装置では、運動感覚フィードバック(例えば、アクティブかつ抵抗性のフォースフィードバック等)及び/又は触覚フィードバック(例えば、振動、質感及び熱等)は、また、ユーザへ提供され、総称して“ハプティックフィードバック”又は“ハプティック効果”として一般的に広く知られている。ハプティックフィードバックは、ユーザインターフェースを強化かつ簡素化するキューを提供しうる。具体的には、振動効果又は振動触覚ハプティック効果は、特定のイベントをユーザへアラートするために電子デバイスのユーザへキューを提供する際に有益である、又はシミュレートされた又は仮想的な環境内での深い感覚の没入を生成するために現実的なフィードバックを提供する。
ハプティックフィードバックは、また、携帯電話、パーソナルデジタルアシスタント(“PDA’s”)、スマートフォン及び携帯ゲーム装置等の“ハンドヘルドデバイス”又は“ポータブルデバイス”として示される携帯電子機器にますます組み込まれている。例えば、いくつかの携帯ゲームアプリケーションは、ハプティックフィードバックを提供するように構成される規模の大きなゲームシステムで用いられる制御装置(例えば、ジョイスティック等)と同様の手法で振動することが可能である。また、携帯電話及びスマートフォンのようなデバイスは、振動によりユーザへ様々なアラートを提供することが可能である。例えば、携帯電話は、振動により着呼をユーザへアラートすることができる。同様に、スマートフォンは、スケジュールされたカレンダーアイテムをユーザへアラートする、又はユーザへ“to do”リストアイテム又はカレンダーアポイントメントのためのリマインダーを提供することができる。さらに、ハプティック効果は、ビデオゲームにおいてボールが弾む感覚のような“実世界”の動的イベントをシミュレートするために用いられうる。
一実施形態は、動的ハプティック効果を生成するシステムである。前記システムは、第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信する。前記システムは、さらに、第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信する。前記システムは、さらに、補間値を受信し、前記補間値は、前記第1の補間値と前記第2の補間値との間にある(又は前記第1の補間値又は前記第2の補間値のいずれかと等しい)。前記システムは、さらに、前記補間値、前記第1のキーフレーム及び前記第2のキーフレームから前記動的ハプティック効果を決定する。前記システムは、さらに、前記動的ハプティック効果を複数のアクチュエータに分配する。
別の実施形態は、動的ハプティック効果を生成するシステムである。前記システムは、複数のキーフレームを受信し、各キーフレームは、キーフレーム補間値、ハプティック効果及び指示値を含む。前記システムは、さらに、補間値を受信し、前記補間値は、少なくとも2つのキーフレーム補間値の間にある(又は少なくとも2つのキーフレーム補間値の1つと等しい)。前記システムは、さらに、前記動的ハプティック効果のための指示を決定する。前記システムは、さらに、複数のキーフレームから一又はそれ以上のキーフレームを選択し、各選択されたキーフレームは、指示と等しい指示値を含む。前記システムは、さらに、前記補間値及び前記指示から前記動的ハプティック効果を決定し、当該決定は、少なくとも2つの選択されたキーフレームの少なくとも2つのハプティック効果から前記動的ハプティック効果を補間することを含む。
添付の図面と共に、好ましい実施形態の以下の詳細な説明から、さらなる実施形態、詳細、利点、及び変更が明らかとなるであろう。
図1は、本発明の一実施形態に係るシステムのブロック図を示す。 図2は、本発明の一実施形態に係る、例示的な動的ハプティック効果の定義を示す。 図3は、本発明の一実施形態に係る、例示的なキーフレームの定義を示す。 図4は、本発明の一実施形態に係る、例示的な基本ハプティック効果ストレージブロックを示す。 図5は、本発明の一実施形態に係る、例示的なフレームリストブロックを示す。 図6は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。 図7は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。 図8は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。 図9は、本発明の一実施形態に係る、指示プロパティを含む例示的なキーフレームの定義を示す。 図10は、本発明の一実施形態に係る、ハプティック効果生成モジュールの機能のフロー図を示す。 図11は、本発明の一実施形態に係る、ハプティック効果生成モジュールの機能のフロー図を示す。
以下の説明されるように、“動的ハプティック効果”は、一又はそれ以上の入力パラメータに応じて、時間とともに進行するハプティック効果を示す。動的ハプティック効果は、所与の入力信号の状態での変化を表すハプティックデバイスで表示されるハプティック又は振動触覚効果である。入力信号は、ハプティック効果の生成に影響を与えるために、位置、加速度、圧力、向き又は近接のようなハプティックフィードバックを有する装置でのセンサによりキャプチャされる信号、又は他の装置によりキャプチャされ、ハプティック装置へ送られる信号でありうる。
動的効果信号は、任意の型の信号でありうるが、複雑である必要はない。例えば、動的効果信号は、効果信号の変換する特性で入力パラメータをマップするマッピングスキーマに基づいて時間とともに変化する又はリアルタイムで反応する位相、周波数又は振幅のようないくつかの特性を有する単純サイン波であってもよい。入力パラメータは、デバイスにより提供されることが可能な任意の型の入力であってもよく、通常、デバイスセンサ信号のような任意の型の信号であってもよい。デバイスセンサ信号は、任意の手段により生成されてもよく、通常、装置によるユーザのジェスチャをキャプチャすることにより生成されてもよい。動的効果は、ジェスチャインターフェースにとって非常に有益であるが、ジェスチャ又はセンサの使用は、動的信号を生成するために必ずしも必要ではない。
直接的にジェスチャを含まない1つの共通のシナリオは、アニメーション化されたウィジェットの動的ハプティック態様を定義している。例えば、ユーザがリストをスクロールするとき、ジェスチャの触覚を最も直感的に感じることは普通ではないが、ジェスチャに応じてウィジェットのモーションを直感的に感じることは普通である。スクロールリストの例では、リストを徐々に移動することは、スクロールの速度に応じて変化する動的ハプティックフィードバックを生成するが、スクロールバーを急に動かすことは、ジェスチャが完了した後にも動的ハプティックを生成する。これは、ウィジェットがいくつかの物理特性を有するイリュージョンを生成し、例えば、その速度又はモーションであるかどうかのようなウェジェットの状態についての情報をユーザに提供する。
ジェスチャは、意味又はユーザの意図を伝える任意の体の動きである。これは、より複雑なジェスチャを形成するために簡素なジェスチャが組み合わせられたものと理解される。例えば、指をタッチ検出面に接触することは、“フィンガー・オン(finger on)”ジェスチャとして示される一方で、指をタッチ検出面から離すことは、別の“フィンガー・オフ(finger off)”ジェスチャとして示される。“フィンガー・オン”と“フィンガー・オフ”との間の時間が相対的に短い場合には、組み合わせられたジェスチャは、“タッピング”として示され、“フィンガー・オン”と“フィンガー・オフ”との間の時間が相対的に長い場合には、組み合わせたジェスチャは、“ロングタッピング”として示され、“フィンガー・オン”と“フィンガー・オフ”との2次元的な(x,y)位置間の距離が相対的に大きい場合には、組み合わせたジェスチャは、“スワイピング”として示され、“フィンガー・オン”と“フィンガー・オフ”との2次元的な(x,y)位置間の距離が相対的に小さい場合には、組み合わせたジェスチャは、“スミアリング(smearing)”、“スマッジング(smudging)”又は“フリッキング(flicking)”として示される。任意の数の二次元又は三次元の簡素又は複雑なジェスチャは、任意の数の他のジェスチャを形成するために任意の手法で組み合わせられてもよく、複数の指の接触、掌又は握り拳の接触又は装置への近接を含むがこれに限定されない。ジェスチャは、また、加速度計、ジャイロスコープ、又は他のモーションセンサを有する装置により認識され、電気信号に変換される任意の形態の手の動きであってもよい。このような電気信号は、例えば、仮想的なサイコロを振ることのような動的効果をアクティブにすることができ、センサは、動的効果を生成するユーザの意図をキャプチャする。
一実施形態は、複数のアクチュエータにおいて一又はそれ以上の動的ハプティック効果を生成しうるシステムであり、一又はそれ以上の動的ハプティック効果は、複数のアクチュエータに分配されうる。システムは、動的ハプティック効果用の2又はそれ以上のキーフレームを定義しうる。一実施形態では、システムは、各キーフレームが、アクチュエータ値を用いて複数のアクチュエータの特定のアクチュエータを対象とすることを可能にし、別々のアクチュエータ値を補間することを可能にし、2又はそれ以上のキーフレーム内に記憶される2又はそれ以上のハプティック効果を補間することにより動的ハプティック効果を生成することを可能にし、補間されたアクチュエータ値に基づいて対象とされたアクチュエータに動的ハプティック効果を分配することを可能にする。別の実施形態では、システムは、各キーフレームが、複数のアクチュエータの特定のアクチュエータを対象とすることを可能にし、同一のアクチュエータを対象とするキーフレームを共にグループ化することを可能にし、各アクチュエータについてグループ化されたキーフレーム内に記憶されるハプティック効果を独立で補間することにより動的ハプティック効果を生成することを可能にする。別の実施形態では、システムは、複数のアクチュエータの動的ハプティック効果をどのように分配するかを示すアクチュエータ分配情報を求めることができる。システムは、その後、2又はそれ以上のキーフレーム内に記憶される2又はそれ以上のハプティック効果を補間することにより動的ハプティック効果を生成することができ、その後、アクチュエータ分配情報を用いて複数のアクチュエータに動的ハプティック効果を分配することができる。
別の実施形態は、一又はそれ以上のキーフレームを用いて動的ハプティック効果を生成しうるシステムであり、各キーフレームは、方向特性を含む。方向特性は、キーフレームが動的ハプティック効果の特定の方向のために用いられることを示すことができる。動的ハプティック効果の求められた方向に基づいて、求められた方向と等しい方向特性を有する一又はそれ以上キーフレームは、動的ハプティック効果を生成するために用いられうる。
動的ハプティック効果の1つのタイプは、第1の補間値と第2の補間値との間にある値である動的な値に基づいて第1のハプティック効果及び第2のハプティック効果を補間することにより生成されうるハプティック効果である。第1の補間値又は第2の補間値のいずれかと等しい動的な値は、“第1の補間値と第2の補間値との間にある”とみなされる。より具体的には、動的ハプティック効果の各パラメータのための値は、補間機能を用いて、第1のハプティック効果のパラメータの値を第2のハプティック効果のパラメータの値で補間することにより算出される。動的ハプティック効果の各パラメータ値の補間は、動的な値が第1の補間値と第2の補間値との間に位置することに基づきうる。動的ハプティック効果は、2012年7月11日に提出された“GENERATING HAPTIC EFFECTS FOR DYNAMIC EVENTS”という発明の名称の米国特許出願第13/546,351号(その内容が参照により本明細書に援用される)、及び2012年11月2日に提出された“ENCODING DYNAMIC HAPTIC EFFECTS”という発明の名称の米国特許出願第13/667,003号(その内容が参照により本明細書に援用される)にさらに説明される。動的ハプティック効果は、ハプティック効果信号を用いてエンコードされることができ、ハプティック効果信号は、動的ハプティック効果の表現である。ハプティック効果信号は、ディスク、メモリ、又は任意のコンピュータ可読記憶媒体に持続されうる。上述した実施形態では、動的ハプティック効果に関連付けられる2又はそれ以上のキーフレームは、ハプティック効果により生成される動的ハプティック効果の一又はそれ以上の入力パラメータを含みうる。
図1は、本発明の一実施形態に係るシステム10のブロック図を示す。一実施形態では、システム10は、モバイル装置の一部分であり、システム10は、モバイル装置のためにハプティック変換機能を提供する。図では単一のシステムを示したが、システム10の機能は、分散されたシステムとして実装されることができる。システム10は、情報を伝達するためのバス12又は他の通信機構と、情報を処理するために、バス12に接続されるプロセッサ22と、を含む。プロセッサ22は、任意のタイプの一般的な又は特殊用途のプロセッサであってもよい。システム10は、プロセッサ22により実行される情報及び命令を記憶するメモリ14をさらに含む。メモリ14は、ランダムアクセスメモリ(“RAM”)、リードオンリーメモリ(“ROM”)、磁気又は光ディスクのようなスタティックストレージ、又は任意のタイプのコンピュータ可読媒体の任意の組み合わせを含みうる。
コンピュータ可読媒体は、プロセッサ22によりアクセス可能であり、揮発性及び不揮発性媒体の両方、リムーバブル及びノンリムーバブル媒体、通信媒体、及びストレージ媒体を含む任意の取得可能な媒体であってもよい。通信媒体は、搬送波又は他の伝送機構のような変調されたデータ信号におけるコンピュータ可読命令、データ構造、プログラムモジュール又は他のデータを含んでもよく、既存の技術の情報伝達媒体の任意の形態を含んでもよい。ストレージ媒体は、RAM、フラッシュメモリ、ROM、erasable programmable read−only memory(“EPROM”)、electrically erasable programmable read−only memory(“EEPROM”)、レジスタ、ハードディスク、リムーバブルディスク、コンパクトディスクリードオンリーメモリ(“CD−ROM”)、又は既存の技術の任意の他のストレージ媒体の形態を含んでもよい。
一実施形態では、メモリ14は、プロセッサ22により実行されたときに、機能を提供するソフトウェアモジュールを記憶する。モジュールは、一実施形態のモバイル装置の他の部分と同様に、システム10にオペレーティングシステム機能を提供するオペレーティングシステム15を含む。モジュールは、以下に詳細を記載するように、動的ハプティック効果を生成するハプティック効果生成モジュール16を含む。特定の実施形態では、ハプティック効果生成モジュール16は、複数のモジュールを含むことができ、各個別のモジュールは、動的ハプティック効果を生成するための特定の個別の機能を提供する。システム10は、通常、Immersion CorporationによるIntegrator(登録商標)のような追加の機能を含むための一又はそれ以上の追加のアプリケーションモジュール18を含む。
システム10は、リモートソースからデータを送信及び/又は受信する実施形態において、赤外線、無線、Wi−Fi又はセルラーネットワーク通信のようなモバイル無線通信を提供するために、ネットワークインターフェースカードのような通信装置20をさらに含む。他の実施形態では、通信装置20は、イーサネット(登録商標)接続又はモデムのような有線通信を提供する。
プロセッサ22は、バス12を介して、グラフィック描写又はユーザインターフェースをユーザへ表示する液晶ディスプレイ(“LCD”)のようなディスプレイ24にさらに接続される。ディスプレイ24は、タッチスクリーンのような、プロセッサ22から信号を送受信するように構成される接触検知入力装置であってもよく、マルチタッチスクリーンであってもよい。プロセッサ22は、さらに、マウス又はスタイラスのようなユーザがシステム10とやりとりすることを可能にするキーボード又はカーソルコントロール18と接続されてもよい。
システム10は、一実施形態では、アクチュエータ26Aをさらに含む。プロセッサ22は、生成されたハプティック効果に関連付けられたハプティック信号をアクチュエータ26Aに送信し、次に、例えば振動触覚効果のようなハプティック効果を出力する。アクチュエータ26Aは、アクチュエータ回路を含む。アクチュエータ26Aは、例えば、電気モータ、電磁気アクチュエータ、ボイスコイル、形状記憶合金、電気活性ポリマー、ソレノイド、偏心モータ(eccentric rotating mass motor(“ERM”))、リニア共振アクチュエータ(inear resonant actuator(“LRA”))、圧電アクチュエータ、高帯域幅アクチュエータ、電気活性ポリマー(electroactive polymer(“EAP”))アクチュエータ、静電触覚ディスプレイ、又は超音波振動発生器であってもよい。別の実施形態では、システム10は、アクチュエータ26Aに加えて、一又はそれ以上の別のアクチュエータを含みうる。図示された実施形態では、システム10は、アクチュエータ26Aに加えて、アクチュエータ26Bを含む。しかし、これは、単なる一つの実施形態の例であり、別の実施形態では、システム10は、図1に図示されない追加のアクチュエータを含むことができる、又はアクチュエータ26Aのみを含むことができる。別の実施形態では、システム10とは別の装置は、ハプティック効果を生成するアクチュエータを含み、システム10は、通信装置20を通じて、生成されたハプティック効果信号を当該別の装置へ送信する。アクチュエータ26A及び26Bは、ハプティック出力装置の実施例であり、ハプティック出力装置は、駆動信号に応じて、振動触覚ハプティック効果のようなハプティック効果を出力するように構成される装置である。
図2は、本発明の一実施形態に係る、例示的な動的ハプティック効果の定義200を示す。一実施形態によれば、動的ハプティック効果は、一又はそれ以上のキーフレームを含むように定義されうる。キーフレームは、動的ハプティック効果を定義するために用いられうる基本ハプティック効果の表現である。また、実施形態によれば、ハプティック効果信号は、一又はそれ以上のキーフレームを用いて生成されることができ、ハプティック効果信号は、一又はそれ以上のキーフレームを記憶することができる信号である。一又はそれ以上のキーフレームを用いてハプティック効果信号を生成することにより、一又はそれ以上のキーフレームが生成され、続いて、ハプティック効果信号内に記憶される。ハプティック効果信号は、ハプティック効果ファイル内に記憶され、ハプティック効果ファイルから読み出されうる。
キーフレームは、基本ハプティック効果の定義を含みうる。基本ハプティック効果は、ハプティック効果の特性(より具体的には、ハプティック効果により生成された運動感覚フィードバック及び/又は触覚フィードバックの特性)を定義する一又はそれ以上のパラメータを含みうるハプティック効果であり、ハプティック効果は、例えば、振動ハプティック効果でありうる。一又はそれ以上のパラメータの例は、大きさ(magnitude)パラメータ、周波数パラメータ、周期パラメータ及び持続期間パラメータを含みうる。基本ハプティック効果の例は、“MagSweepハプティック効果”及び“周期ハプティック効果”を含みうる。MagSweepハプティック効果は、運動感覚フィードバック及び/又は触覚フィードバック(例えば、振動)を生成するハプティック効果である。周期ハプティック効果は、運動感覚フィードバック及び/又は触覚フィードバック(例えば、振動パターン)を繰り返すことを生成するハプティック効果である。パターンを繰り返すことの一例は、正弦、矩形、三角形、のこぎり波(sawtooth−up及びsawtooth−down)のような特定の形状のパルスを繰り返すことを含む。
キーフレームは、補間値を含みうる。補間値は、現在補間が生じていることを特定する値である。一実施形態では、補間値は、最小値から最大値までの整数値でありうる。一例として、補間値は、0から10,000でありうる。別の実施形態では、補間値は、固定点又は浮遊点の数値でありうる。補間値は、一又はそれ以上のビット内に記憶されうる。
キーフレームは、付加的に、リピートギャップ値も含みうる。リピートギャップ値は、基本ハプティック効果が連続的にプレイされたとき、基本ハプティック効果の2つの連続する例の間の時間間隔を示す値である。一実施形態では、リピートギャップ値は、基本ハプティック効果の2つの連続する例の間のミリ秒の数を示しうる。
図示された実施形態では、動的ハプティック効果定義200は、キーフレーム210、220、230及び240の4つのキーフレームを含む。しかし、これは、単なる一つの例の実施形態であり、別の実施形態では、動的ハプティック効果の定義は、多数のキーフレームを含みうる。キーフレーム210は、“周期(Periodic)1”の基本ハプティック効果基準、“0”の補間値、及び“10ms”のリピートギャップ値を含む。基本ハプティック効果基準“周期(Periodic)1”は、基本ハプティック効果260を示し、これは、動的ハプティック効果定義200内にも含まれる。よって、キーフレーム210は、“0”の補間値のための基本ハプティック効果として基本ハプティック効果260を定義する。キーフレーム210は、さらに、基本ハプティック効果260が連続的にプレイされたとき、基本ハプティック効果260の各連続する例の間に10msの時間間隔が存在することを示す。同様に、キーフレーム220は、“周期(Periodic)3”の基本ハプティック効果基準、“10”の補間値、及び“15ms”のリピートギャップ値を含む。基本ハプティック効果基準“周期(Periodic)3”は、基本ハプティック効果270を示し、これは、動的ハプティック効果定義200内にも含まれる。よって、キーフレーム210は、“0”の補間値のための基本ハプティック効果として基本ハプティック効果270を定義する。キーフレーム220は、さらに、基本ハプティック効果270が連続的にプレイされたとき、基本ハプティック効果270の各連続する例の間に15msの時間間隔が存在することを示す。
同様に、キーフレーム230は、“Periodic3”の基本ハプティック効果基準、“10”の補間値、及び“15ms”のリピートギャップ値を含む。前述したように、基本ハプティック効果基準“周期(Periodic)1”は、基本ハプティック効果260を示し、これは、動的ハプティック効果定義200内にも含まれる。よって、キーフレーム230は、“0”の補間値のための基本ハプティック効果として基本ハプティック効果260を定義する。これは、基本ハプティック効果が一以上の補間値のための基本ハプティック効果として定義されうることを示す。キーフレーム230は、さらに、基本ハプティック効果260が連続的にプレイされたとき、基本ハプティック効果260の各連続する例の間に5msの時間間隔が存在することを示す。同様に、キーフレーム240は、“周期(Periodic)2”の基本ハプティック効果基準、“30”の補間値、及び“20ms”のリピートギャップ値を含む。基本ハプティック効果基準“Periodic2”は、基本ハプティック効果280を示し、これは、動的ハプティック効果定義200内にも含まれる。よって、キーフレーム240は、“30”の補間値のための基本ハプティック効果として基本ハプティック効果280を定義する。キーフレーム240は、さらに、基本ハプティック効果280が連続的にプレイされたとき、基本ハプティック効果280の各連続する例の間に20msの時間間隔が存在することを示す。
一実施形態によれば、動的ハプティック効果は、動的ハプティック効果の終了の指示も含むように定義されうる。動的ハプティック効果の終了の指示は、動的ハプティック効果が追加のキーフレームを含まないことを示す。以下に詳細に説明されるように、動的ハプティック効果定義を解釈する装置は、連続的に、動的ハプティック効果定義の内容を解釈するように構成されうる。よって、前記指示は、動的ハプティック効果定義の終了を装置へ示すことができる。一実施形態では、動的ハプティック効果の終了時の指示は、追加のキーフレームとして考慮されうる。図示された実施形態では、動的ハプティック効果定義200は、動的ハプティック効果定義の終了200の終了を示す動的ハプティック効果定義の終了を含む。
図3は、本発明の一実施形態に係る、例示的なキーフレーム定義300を示す。前述したように、動的ハプティック効果定義は、一又はそれ以上のキーフレームを含む。実施形態によれば、キーフレーム定義は、一又はそれ以上の特性を含みうる。一又はそれ以上の特定の各々の特性は、値を含みうる。
キーフレーム定義は、タイプ特性を含みうる。一実施形態では、タイプ特性は、キーフレーム定義の第1の特性である。タイプ特性は、キーフレームが、動的ハプティック効果定義のための基本ハプティック効果を含むキーフレームであるか、又は動的ハプティック効果定義の終了を示すキーフレームであるかを示すことができる。図示された実施形態では、キーフレーム定義300は、キーフレーム定義300により定義されたキーフレームのタイプを示すタイプ特性310を含む。
キーフレーム定義は、また、基本ハプティック効果特性を含みうる。基本ハプティック効果特性は、キーフレームにための基本ハプティック効果に対する基準を記憶しうる。図示された実施形態では、キーフレーム定義300は、キーフレーム定義300により定義されるキーフレームのための基本ハプティック効果に対する基準を含む基本ハプティック効果特性320(“効果名(effect name)”として図3で識別される)を含む。
キーフレーム定義は、また、補間特性を含みうる。補間特性は、補間値を記憶することができ、補間値は、現在補間が生じていることを特定する。一実施形態では、補間値は、最小値から最大値までの整数値でありうる。一例として、補間値は、0から10,000でありうる。補間値は、一又はそれ以上のビットに記憶されうる。図示された実施形態では、キーフレーム定義300は、キーフレーム定義300により定義されるキーフレームのための補間値を含む補間特性330を含む。
キーフレーム定義は、リピートギャップ特性を付加的に含みうる(図3には図示せず)。リピートギャップ特性は、基本ハプティック効果が連続的にプレイされるときに、キーフレームのための基本ハプティック効果の2つの連続する例の間の時間間隔を示すリピートギャップ値を記憶しうる。一実施形態では、リピートギャップは、キーフレームのための基本ハプティック効果の2つの連続する例の間のミリ秒の数を示すことができる。
一実施形態では、ハプティック効果ファイルは、一又はそれ以上のハプティック効果を記憶するように構成されるコンピュータファイルであり、ハプティック効果ファイルは、ディスク、メモリ又は任意のコンピュータ可読媒体に持続されうる。実施形態によれば、ハプティック効果ファイルは、基本ハプティック効果ストレージブロック及びフレームリストブロックを用いて一又はそれ以上の動的ハプティック効果を記憶しうる。基本ハプティック効果ストレージブロックは、動的ハプティック効果が言及されうる一又はそれ以上のハプティック効果を記憶するために用いられうる。フレームリストブロックは、動的ハプティック効果定義に対応する一又はそれ以上のキーフレーム定義を記憶するために用いられうる。基本ハプティック効果ストレージブロック及びフレームリストブロックは、ここでより詳細に説明される。
図4は、本発明の一実施形態に係る、例示的な基本ハプティック効果ストレージブロック400を示す。前述したように、動的ハプティック効果定義は、一又はそれ以上の基本ハプティック効果を含むことができ、少なくとも1つの記憶された基本ハプティック効果は、動的ハプティック定義の少なくとも1つのキーフレームにより言及される。一実施形態では、一又はそれ以上の基本ハプティック効果は、基本ハプティック効果ストレージブロック400のような基本ハプティック効果ストレージブロック内に記憶されることができ、基本ハプティック効果ストレージブロックは、動的ハプティック効果定義内に記憶される。
実施形態によれば、一又はそれ以上の基本ハプティック効果は、基本ハプティック効果ストレージブロック400内にメッセージストリームとして記憶されうる。メッセージフォーマットの一例は、“codename z2”プロトコルメッセージフォーマットである。図示された実施形態では、基本ハプティック効果は、SetPeriodicModifierメッセージにより任意に先行されるSetPeriodicメッセージにより定義される。よって、基本ハプティック効果が、関連するエンベロープ(包絡線)を有するとき、SetPeriodicModifierメッセージは、ブロックのSetPeriodicメッセージの前に現れうる。一方で、SetPeriodicメッセージのみがブロックに現れることもできる。よって、実施形態によれば、基本ハプティック効果ストレージブロック(例えば、図4の基本ハプティック効果ストレージブロック400)に記憶されるような基本ハプティック効果は、(a)単一のSetPeriodicメッセージ(デフォルトエンベロープと仮定する)のメモリの8バイト;又は(b)SetPeriodicメッセージに続く第1のSetPeriodicModifierメッセージのメモリの16バイトのいずれかを取り得る。
実施形態によれば、基本ハプティック効果ストレージブロック(例えば、図4の基本ハプティック効果ストレージブロック400)は、一又はそれ以上の基本ハプティック効果定義を含むことができ、各基本ハプティック効果定義は、基本ハプティック効果に対応する。一又はそれ以上の基本ハプティック効果定義は、基本ハプティック効果ストレージブロック内で連続的であり、インデックスとそれぞれ関連付けられうる。
図示された実施形態では、基本ハプティック効果ストレージブロック400は、効果(Effect)0, 効果(Effect)1, 効果(Effect)2, 効果(Effect)3, 及び効果(Effect)4の5つの基本ハプティック効果を含む。Effect0は、基本ハプティック効果ストレージブロック400に位置する第1の基本ハプティック効果であり、Effect1は、基本ハプティック効果ストレージブロック400に位置する第2の基本ハプティック効果であり、Effect2は、基本ハプティック効果ストレージブロック400に位置する第3の基本ハプティック効果であり、Effect3は、基本ハプティック効果ストレージブロック400に位置する第4の基本ハプティック効果であり、Effect4は、基本ハプティック効果ストレージブロック400に位置する第5の基本ハプティック効果である。5つの基本ハプティック効果のそれぞれ(つまり、Effect0、Effect1、Effect2、Effect3及びEffect4)は、単一のSetPeriodicメッセージ又はSetPeriodicModifierメッセージ及びSetPeriodicメッセージの組み合わせのいずれかを含む基本ハプティック定義を含む。
図5は、本発明の一実施形態に係る、例示的なフレームリストブロック500を示す。前述したように、動的ハプティック効果定義は、一又はそれ以上のキーフレームを含むことができ、各キーフレームは、基本ハプティック効果を言及しうる。一実施形態では、一又はそれ以上のキーフレームは、フレームリストブロック500のようなフレームリストブロック内に記憶されることができ、フレームリストブロックは、動的ハプティック効果定義内に記憶される。
一実施形態によれば、フレームリストブロック500のようなフレームリストブロックは、第1のキーフレーム定義のためのタイプ特性を含む。タイプ特性に応じて、フレームリストブロックは、さらに、基本ハプティック効果特性、補間特性、リピートギャップ特性又はそれらの組み合わせのような第1のキーフレーム定義と関連付けられる一又はそれ以上の特性を含む。フレームリストブロックは、さらに、第1のキーフレーム定義の最後を示す第2のキーフレームのためのタイプ特性を含む。タイプ特性に応じて、フレームリストブロックは、さらに、基本ハプティック効果特性、補間特性、リピートギャップ特性又はそれらの組み合わせのような第2のキーフレーム定義と関連付けられる一又はそれ以上の特性を含む。これは、フレームリストブロックの各キーフレーム定義へ継続する。フレームリストブロックは、さらに、動的ハプティック効果の最後を示すタイプ特性を含む。実施形態によれば、フレームリストブロックのキーフレーム定義は、連続する命令である。言い換えれば、フレームリストブロックのイベントは、フレームリストブロック内に位置するために処理される。
実施形態によれば、一又はそれ以上のフレームリストブロックの特性は、付加的なデータバイトに続いて、単一のヘッダーバイトを用いてエンコードされうる。フレームリストブロックの一又はそれ以上の特性のエンコーディングスキームの一例は、以下のようになる。
実施形態によれば、キーフレームタイプ特性及び動的ハプティック効果特性の最後は、キーフレーム定義のタイプ特性に対応し、EffectNameAsOffSetU8タイプ特性は、キーフレーム定義の基本ハプティック効果特性に対応し、InterpolantU16特性は、キーフレーム定義の補間特性に対応し、RepeatGapU16特性は、キーフレーム定義のリピートギャップ特性に対応する。
図示された実施形態では、フレームリストブロック500は、キーフレーム定義510、520及び530を含む。キーフレーム定義510及び520は、各々が基本ハプティック効果キーフレームのための定義である。キーフレーム定義530は、フレームリストブロック内に記憶される動的ハプティック効果の最後の指示である。フレームリストブロック500の左カラムは、キーフレーム定義510、520及び530それぞれについてメモリ内で見つけられるバイトストリームを示す。フレームリストブロック500の右カラムは、キーフレーム定義510、520及び530のそれぞれについての各特性の意味を示す。
図示された実施形態によれば、キーフレーム定義510は、キーフレーム定義510のスタートを示すキーフレームタイプ特性(図5で示される“KeyFrame Event”)を含む。キーフレーム定義510は、さらに、キーフレーム定義510のための基本ハプティック効果への基準を記憶する基本ハプティック効果特性(図5で示される“EffectNameAsOffsetU8”)を含み、基本ハプティック効果特性は、ヘッダーバイト及びオフセットバイトを含む。キーフレーム定義510は、さらに、現在補間が行われていることを特定する補間値を記憶する補間特性(図5で示される“InterpolantU16”)を含み、補間特性は、ヘッダーバイト、最も重要なビット(a most significant bit(“MSB”))及び最も重要でないビット(a least significant bit(“LSB”))を含む。キーフレーム定義510は、さらに、キーフレームのための基本ハプティック効果の2つの連続する例の間の時間間隔を示すリピートギャップ値を記憶するリピートギャップ特性(図5で示される“RepeatGapU16”)を含み、リピートギャップ特性は、ヘッダーバイト、MSB及びLSBを含む。
さらに、キーフレーム定義520は、また、キーフレーム定義520のスタートを示すキーフレームタイプ特性(図5で示される“KeyFrame Event”)を含む。キーフレーム定義520は、さらに、キーフレーム定義520のための基本ハプティック効果への基準を記憶する基本ハプティック効果特性(図5で示される“EffectNameAsOffsetU16”)を含み、基本ハプティック効果特性は、ヘッダーバイト、基本ハプティック効果定義MSB及び基本ハプティック効果定義LSBを含む。キーフレーム定義520は、さらに、現在補間が行われていることを特定する補間値を記憶する補間特性(図5で示される“InterpolantU16”)を含み、補間特性は、ヘッダーバイト、MSB及びLSBを含む。図5に示されるように、キーフレーム定義510とは異なり、キーフレーム定義520は、リピートギャップ特性を含まない。最後に、キーフレーム定義530は、動的ハプティック効果定義の終了を示す動的ハプティック効果のタイプ特性(図5で示される“EndofDynamicHapticEffect”)の終了を示す。
実施形態によれば、動的ハプティック効果定義(例えば、図2の動的ハプティック効果定義200)は、ハプティック効果ファイル内に記憶されうる。前述したように、ハプティック効果ファイルは、一又はそれ以上の動的ハプティック効果を記憶するように構成されるコンピュータファイルである。動的ハプティック効果定義は、ハプティック効果ファイル内に記憶されることができ、ハプティック効果ファイルは、ディスク又はメモリのようなコンピュータ可読媒体内に持続されうる。動的ハプティック効果定義は、ハプティック効果から連続的に読み出され、解釈されうる。動的ハプティック効果定義の解釈に基づいて、動的ハプティック効果は、第1の補間値と第2の補間値との間にある値である動的な値に基づいて第1のハプティック効果及び第2のハプティック効果を補間することにより生成されうる。より具体的には、動的ハプティック効果の各パラメータに対する値は、補間機能を用いて、第1のハプティック効果のパラメータの値を第2のハプティック効果のパラメータの値で補間することにより、算出されうる。動的ハプティック効果の各パラメータの補間は、動的な値が第1の補間値と第2の補間値との間に位置することに基づきうる。例えば、第1の補間値が“0”であり、第2の補間値が“100”である場合、“50”の動的な値は、動的ハプティック効果を生成するために、“0”の第1の補間値に関連付けられる第1のハプティック効果が“100”の第2の補間値に関連付けられる第2のハプティック効果で補間されうる。第1のハプティック効果の各パラメータ値は、動的ハプティック効果のパラメータ値が第1のハプティック効果のパラメータ値及び第2のハプティック効果のパラメータ値の両方に基づくように、補間機能に基づいて第2の値のパラメータ値で補間されうる。また、実施形態によれば、動的ハプティック効果定義(例えば、図2の動的ハプティック効果定義200)は、ハプティック効果信号を生成するために用いられることができ、ハプティック効果信号は、ハプティック効果ファイル内に記憶されることができる。ハプティック効果信号は、その後ハプティック効果ファイルから読み出されうる。さらに、駆動信号は、ハプティック効果信号に応じてハプティック出力装置へ印加されうる。駆動信号は、ハプティック出力装置を用いてさらに生成されうる。
前述したように、システムは、動的ハプティック効果を生成し、ハプティック効果を複数のアクチュエータに分配することができる。動的ハプティック効果の生成及び分配は、異なる技術を用いて実装されうる。実装の例は、以下に説明される。
図6は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。実施形態によれば、動的ハプティック効果は、一又はそれ以上のキーフレームを含むことができ、各キーフレームは、アクチュエータを識別するアクチュエータ値を含むことができる。アクチュエータ値により識別されるアクチュエータは、キーフレームをターゲットとするアクチュエータである。動的ハプティック効果を生成するために、システムが、2又はそれ以上のキーフレームに記憶される各ハプティック効果を補間するとき、システムは、補間されたアクチュエータ値を生成するために、2又はそれ以上のキーフレームに記憶される各アクチュエータ値を補間することもできる。システムは、その後、生成された動的ハプティック効果を、2又はそれ以上のアクチュエータ値により識別される2又はそれ以上のアクチュエータに分配するために、補間されたアクチュエータ値を用いることができる。
例えば、図6に示すように、動的ハプティック効果610は、キーフレーム611及び612を含む。キーフレーム611は、“40%”の補間値、“20%”の大きさの値、“100ms”の持続期間の値、及び“1”のアクチュエータ値(“アクチュエータインデックスとして図6で識別される”)を含む。実施形態によれば、“20%”の大きさの値及び“100ms”の持続期間の値は、キーフレーム611内に記憶される基本ハプティック効果をまとめて示す。勿論、図示された実施形態は、1つの実施形態だけであり、別の実施形態では、基本ハプティック効果は、他のパラメータ(例えば、キーフレーム内に記憶される周波数パラメータ及び周期パラメータ)を含むことができる。キーフレーム612は、“80%”の補間値、“100%”の大きさの値、“200ms”の持続期間の値、及び“2”のアクチュエータ値を含む。実施形態によれば、“100%”の大きさの値及び“200ms”の持続期間の値は、キーフレーム612内に記憶される基本ハプティック効果をまとめて示す。
実施形態によれば、システムは、エフェクト補間部620において“70%”の補間値を受け付け、キーフレーム611の基本ハプティック効果(つまり、“20%”の大きさの値及び“100ms”の持続期間の値)をキーフレーム612の基本ハプティック効果(つまり、“100%”の大きさの値及び“200ms”の持続期間の値)で補間することができる。システムは、さらに、キーフレーム611のアクチュエータ値(つまり、アクチュエータ値“1”)をキーフレーム612のアクチュエータ値(つまり、アクチュエータ値“2”)で補間することができる。これらの2つの補間の結果は、補間されたパラメータ630であり、補間されたパラメータ630は、動的ハプティック効果610を表す。図示された実施形態によれば、補間されたパラメータ630は、“80%”の補間された大きさの値、“175ms”の補間された持続期間の値、“1.75”の補間されたアクチュエータ値(“アクチュエータインデックス”として図6で識別される)を含む。実施形態によれば、“80%”の補間された大きさの値は、補間機能に基づいて、“20%”及び“100%”の2つの大きさの値から補間される。さらに、“175ms”の補間された持続期間の値は、補間機能に基づいて、“100ms”及び“200ms”の2つの持続期間の値から補間される。加えて、“1.75”の補間されたアクチュエータ値もまた、補間機能に基づいて、“1”及び“2”の2つのアクチュエータ値から補間される。
さらに、実施形態によれば、効果分配部640において、システムは、動的ハプティック効果610を表す補間されたパラメータ630を、補間されたアクチュエータ値に基づいて複数のアクチュエータに分配することができ、システムは、補間されたアクチュエータ値に基づいて、複数のアクチュエータの各アクチュエータについてのターゲットとなるパラメータを生成する。各アクチュエータについてのターゲットとなるパラメータは、アクチュエータに分配される動的ハプティック効果610の一部を示す。図示された実施形態では、効果分配部640において、システムは、ターゲットとなるパラメータ650及びターゲットとなるパラメータ660を生成する。ターゲットとなるパラメータ650は、“20%”の大きさの値、“175ms”の持続期間の値、及び“1”のアクチュエータ値を含む。ターゲットとなるパラメータ660は、“60%”の大きさの値、“175ms”の持続期間の値、及び“2”のアクチュエータ値を含む。実施形態によれば、システムは、動的ハプティック効果610の25%をアクチュエータ“1”に分配し、動的ハプティック効果610の75%をアクチュエータ“2”に分配するために補間パラメータ630の“1.75”の補間されたアクチュエータ値を用いることができる。一実施形態では、大きさパラメータ及び周期パラメータのような動的ハプティック効果610の強度パラメータは、複数のアクチュエータに分配される。実施形態によれば、周波数パラメータ及び持続期間パラメータのような時間ベースのパラメータは、複数のアクチュエータと同様のままである。
よって、図示された実施形態では、補間パラメータ630の“80%”の補間された大きさの値は、ターゲットとなるパラメータ650に対して“20%”の大きさの値に分配され、ターゲットとなるパラメータ660に対して“60%”の大きさの値に分配される。さらに、図示された実施形態では、補間パラメータ630の持続期間“175ms”は、ターゲットとなるパラメータ650及びターゲットとなるパラメータ660の両方に含まれる。図示された実施形態は2つのキーフレームを含むが、各キーフレームは、アクチュエータ値を含み、よって、2つのアクチュエータを含み、当業者は、別の実施形態において、上記の実装が任意の数のキーフレームを含むことができ、各キーフレームはアクチュエータ値を含み、よって、任意の数のアクチュエータを含みうることを容易に理解するであろう。
よって、別の実施例では、第1のアクチュエータは、デバイスの左側にあり、第2のアクチュエータは、デバイスの右側にあってもよい。動的ハプティック効果の第1のキーフレームは、第1のアクチュエータにおいてプレイされうる。動的ハプティック効果の第2のキーフレームは、第2のアクチュエータにおいてプレイされうる。動的ハプティック効果を生成するためにシステムが第1のキーフレームから第2のキーフレームへ補間するとき、デバイスのユーザは、動的ハプティック効果が左のアクチュエータから右のアクチュエータへ移動するように感じることができる。
図7は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。実施形態によれば、動的ハプティック効果は、一又はそれ以上のキーフレームを含むことができ、各キーフレームは、アクチュエータを識別するアクチュエータ値を含むことができる。アクチュエータ値により識別されるアクチュエータは、キーフレームをターゲットとするアクチュエータである。システムは、その後、各アクチュエータ値により識別される各アクチュエータによる一又はそれ以上のキーフレームをグループ化しうる。より具体的には、システムは、一又はそれ以上のキーフレームのグループを生成することができ、グループの各キーフレームは、同一のアクチュエータをターゲットとする。動的ハプティック効果を生成するために、各アクチュエータについて、システムは、アクチュエータに関連付けられるグループの一又はそれ以上のキーフレームに記憶される各ハプティック効果を独立に補間しうる。
例えば、図7に示すように、動的ハプティック効果710は、キーフレーム711、712、713及び714を含む。キーフレーム711は、“40%”の補間値、“20%”の大きさの値、“100ms”の持続期間、及び“1”のアクチュエータ値(“アクチュエータインデックス”として図7で識別される)を含む。“20%”の大きさの値及び“100ms”の持続期間は、キーフレーム711内に記憶される基本ハプティック効果を集合的に表す。勿論、図示された実施形態は1つの実施形態の例のみであり、別の実施形態では、基本ハプティック効果は、キーフレーム内に記憶される他のパラメータ(例えば、周波数パラメータ及び周期パラメータ)を含むことができる。キーフレーム712は、“30%”の補間値、“80%”の大きさの値、“200ms”の持続期間、及び“2”のアクチュエータ値を含む。“80%”の大きさの値及び“200ms”の持続期間は、キーフレーム712内に記憶される基本ハプティック効果を集合的に表す。キーフレーム713は、“80%”の補間値、“100%”の大きさの値、“200ms”の持続期間、及び“1”のアクチュエータ値を含む。“100%”の大きさの値及び“200ms”の持続期間は、キーフレーム713内に記憶される基本ハプティック効果を集合的に表す。キーフレーム714は、“90%”の補間値、“50%”の大きさの値、“50ms”の持続期間、及び“2”のアクチュエータ値を含む。“50%”の大きさの値及び“50ms”の持続期間は、キーフレーム714内に記憶される基本ハプティック効果を集合的に表す。
実施形態によれば、効果グループ化部720において、システムは、キーフレーム711及び713内に記憶される“1”のアクチュエータ値に基づいてキーフレーム711及び713を共にグループ化することができ、グループをアクチュエータ721(つまり、アクチュエータ1)と関連させることができる。さらに、効果グループ化部720において、システムは、キーフレーム712及び714内に記憶される“2”のアクチュエータ値に基づいてキーフレーム712及び714を共にグループ化することができ、グループをアクチュエータ722(つまり、アクチュエータ2)と関連させることができる。
さらに、実施形態によれば、システムは、効果補間部730において“70%”の補間値を受け付けることができ、キーフレーム711の基本ハプティック効果(つまり、“20%”の大きさの値及び“100ms”の持続期間)をキーフレーム713の基本ハプティック効果(つまり、“100%”の大きさの値及び“200ms”の持続期間)で補間することができる。この補間の結果は、補間パラメータ750であり、補間パラメータ750は、アクチュエータ721において出力されうる動的ハプティック効果の一部を表す。図示された実施形態によれば、補間パラメータ750は、“80%”の補間された大きさの値と、“175ms”の補間された持続期間の値と、を含む。実施形態によれば、“80%”の補間された大きさの値は、補間機能に基づいて、“20%”及び“100%”の2つの大きさの値から補間される。さらに、“175ms”の補間された持続期間の値もまた、補間機能に基づいて、“100ms”及び“200ms,”の2つの持続期間の値から補間される。
また、実施形態によれば、システムは、効果補間部740において“70%”の補間値を独立に受け付けることができ、キーフレーム712の基本ハプティック効果(つまり、“80%”の大きさの値、及び“200ms”の持続期間)をキーフレーム714の基本ハプティック効果(つまり、“50%”の大きさの値、及び“50ms”の持続期間)で独立に補間することができる。この補間の結果は、補間パラメータ760であり、補間パラメータ760は、アクチュエータ722において出力できる動的ハプティック効果710の一部を表す。図示された実施形態によれば、補間パラメータ760は、“60%”の補間された大きさの値と、“100ms”の補間された持続期間の値と、を含む。実施形態によれば、“60%”の補間された大きさの値は、補間機能に基づいて、“80%”及び“50%”の2つの大きさの値から補間される。さらに、“100ms”の補間された持続期間の値もまた、補間機能に基づいて、“200ms”及び“50ms”の2つの持続期間の値から補間される。図示された実施形態は4つのキーフレームを含み、2つのアクチュエータを含むが、当業者は、別の実施形態において、上記の実装が任意の数のキーフレームを含むことができ、かつ任意の数のアクチュエータを含むことができることを容易に理解するであろう。
実施形態によれば、キーフレーム711及び713の基本ハプティック効果の補間、及びキーフレーム712及び714の基本ハプティック効果の補間は、独立に行われるが、独立な補間は、アクチュエータ721及び722において動的ハプティック効果を出力するように同期されることもできる。よって、アクチュエータ721及び722は、同期された手法で動的ハプティック効果710の各部分をそれぞれ出力することができる。図示された実施形態では、同一の補間値は、効果補間部730及び740に提供される。しかしながら、別の実施形態では、効果補間部730及び740は、異なる補間値をそれぞれ提供されうる。
図8は、本発明の一実施形態に係る、複数のアクチュエータにおいて動的ハプティック効果を生成することの例示的な実装のブロック図を示す。実施形態によれば、動的ハプティック効果は、一又はそれ以上のキーフレームを含むことができる。動的ハプティック効果を生成するために、システムが、2又はそれ以上のキーフレームに記憶される各ハプティック効果を補間するとき、システムは、動的ハプティック効果を複数のアクチュエータにどのように分布させるかを示すアクチュエータ分配情報を求めることもできる。システムは、その後、動的ハプティック効果を生成するために、2又はそれ以上のキーフレームに記憶される各ハプティック効果を補間することができ、その後、生成された動的ハプティック効果を複数のアクチュエータに分配するためにアクチュエータ分配情報を用いることができる。
例えば、図8に示すように、動的ハプティック効果810は、キーフレーム811及び812を含む。キーフレーム811は、“40%”の補間値と、“20%”の大きさの値と、“100ms”の持続期間の値と、を含む。実施形態によれば、“20%”の大きさの値及び“100ms”の持続期間の値は、キーフレーム811内に記憶される基本ハプティック効果を集合的に表す。勿論、図示された実施形態は1つの実施形態の例のみであり、別の実施形態では、基本ハプティック効果は、キーフレーム内に記憶される他のパラメータ(例えば、周波数パラメータ及び周期パラメータ)を含むことができる。キーフレーム812は、“80%”の補間値と、“100%”の大きさの値と、“200ms”の持続期間の値と、を含む。実施形態によれば、“100%”の大きさの値及び“200ms”の持続期間の値は、キーフレーム812内に記憶される基本ハプティック効果を集合的に表す。動的ハプティック効果810は、さらに、アクチュエータ分配情報813を含む(“アクチュエータ分配813”として図8で識別される)。アクチュエータ分配情報813は、動的ハプティック効果810をどのように複数のアクチュエータに分配するかを示す。図示された実施形態では、分配情報813は、動的ハプティック効果810の25%が第1のアクチュエータ(つまり、アクチュエータ1)に分配されることを示し、動的ハプティック効果810の75%が第2のアクチュエータ(つまり、アクチュエータ2)に分配されることを示す。
実施形態によれば、システムは、効果補間部820において“70%”の補間値を受け付けることができ、キーフレーム811の基本ハプティック効果(つまり、“20%”の大きさの値及び“100ms”の持続期間の値)をキーフレーム812の基本ハプティック効果(つまり、“100%”の大きさの値及び“100ms”の持続期間の値)で補間することができる。この補間の結果は、補間パラメータ830であり、補間パラメータ830は、動的ハプティック効果810を表す。図示された実施形態によれば、補間パラメータ830は、“80%”の補間された大きさの値と、“175ms”の補間された持続期間の値と、を含む。実施形態によれば、“80%”の補間された大きさの値は、補間機能に基づいて、“20%”及び“100%”の2つの大きさの値から補間される。さらに、“175ms”の補間された持続期間の値もまた、補間機能に基づいて、“100ms”及び“200ms”の2つの持続期間から補間される。
さらに、実施形態によれば、効果分配部840において、システムは、アクチュエータ分配情報813に基づいて、動的ハプティック効果810を表す補間パラメータ830を複数のアクチュエータに分配することができ、システムは、アクチュエータ分配情報813に基づいて、複数のアクチュエータの各アクチュエータに対するターゲットとなるパラメータを生成する。各アクチュエータに対するターゲットとなるパラメータは、アクチュエータに分配される動的ハプティック効果810の一部を示す。図示された実施形態では、効果分配部840において、システムは、ターゲットとなるパラメータ850と、ターゲットとなるパラメータ860と、を生成する。ターゲットとなるパラメータ850は、“20%”の大きさの値と、“175ms”の持続期間と、“1”のアクチュエータ値(“アクチュエータインデックス”として図8で識別される)と、を含む。ターゲットとなるパラメータ860は、“60%”の大きさの値と、“175ms”の持続期間と、“2”のアクチュエータ値と、を含む。実施形態によれば、システムは、動的ハプティック効果810の25%をアクチュエータ“1”に分配し、動的ハプティック効果810の75%をアクチュエータ“2”に分配するために、アクチュエータ分配情報813を用いることができる、一実施形態では、大きさパラメータ及び周期パラメータのような動的ハプティック効果810の強度パラメータは、複数のアクチュエータに分配される。実施形態によれば、周波数パラメータ及び持続期間パラメータのような時間ベースのパラメータは、複数のアクチュエータと同じままである。
よって、図示された実施形態では、補間パラメータ830の補間された大きさの値の“80%”は、ターゲットとなるパラメータ850に対する“20%”の大きさの値及びターゲットとなるパラメータ860に対する“60%”の大きさの値に分配される。さらに、図示された実施形態では、補間パラメータ830の補間された持続期間の値“175ms”は、ターゲットとなるパラメータ850及びターゲットとなるパラメータ860の両方に含まれる。図示された実施形態は2つのキーフレームを含み、2つのアクチュエータを含むが、当業者は、別の実施形態において、上記の実装が任意の数のキーフレームを含むことができ、かつ任意の数のアクチュエータを含むことができることを容易に理解するであろう。
一実施形態では、アクチュエータ分配情報813は、動的ハプティック効果810が記憶されるハプティック効果内に記憶されうる。別の実施形態では、アクチュエータ分配情報813は、動的ハプティック効果810の一又はそれ以上のキーフレーム内に記憶されうる。さらに別の実施形態では、アクチュエータ分配情報813は、動的ハプティック効果810の一又はそれ以上のキーフレームにより参照される基本ハプティック効果内に記憶されうる。さらに別の実施形態では、アクチュエータ分配情報813は、実行時にシステムにより求められうる。
一実施形態では、動的ハプティック効果810の一又はそれ以上のキーフレームがアクチュエータ値を含んでいたとしても、システムは、動的ハプティック効果810の一又はそれ以上のキーフレーム内に記憶される一又はそれ以上のアクチュエータ値を無視することができ、アクチュエータ分配情報813に基づいてハプティック効果810を複数のアクチュエータに分配することができる。
図9は、本発明の一実施形態に係る、指示プロパティを含む例示的なキーフレームの定義900を示す。実施形態によれば、前述したように、動的ハプティック効果は、一又はそれ以上のキーフレームを含むように定義されうる。また、前述したように、キーフレームは、基本ハプティック効果定義、補間値、及び付加的にリピートギャップ値を含みうる。
実施形態によれば、キーフレームは、また、方向値を含みうる。方向値は、動的ハプティック効果の方向を特定する値である。動的ハプティック効果の方向は、動的ハプティック効果に対する以前に受信した補間値と比較したときの動的ハプティック効果に対する受信した補間値の順序方向である。例えば、動的ハプティック効果に対する受信した補間値が“100”の値であり、動的ハプティック効果に対する以前に受信した補間値が“50”の値である場合、動的ハプティック効果の方向は、“上向き”として分類されることができ、これは、受信した補間値が、以前に受信した補間値よりも大きいためである。よって、一例として、“アップ”の方向値は、動的ハプティック効果の“上昇”方向を特定することができる。別の例として、動的ハプティック効果に対する受け付けた補間値が“100”の値であり、動的ハプティック効果に対する以前に受信した補間値が“200”の値である場合、動的ハプティック効果の方向は、“下向き”として分類されることができ、これは、受信した補間値が、以前に受信した補間値よりも小さいためである。よって、一例として、“ダウン”の方向値は、動的ハプティック効果の“下降”方向を特定することができる。実施形態では、方向値は、文字列の値(string value)でありうる。別の実施形態では、方向値は、固定少数点又は浮動少数点の数値でありうる。方向値は、一又はそれ以上のビット内に記憶されうる。
また、実施形態によれば、キーフレームは、また、カテゴリ値を付加的に含みうる。カテゴリ値は、動的ハプティック効果のカテゴリを特定する値である。動的ハプティック効果のカテゴリは、動的ハプティック効果の分類である。一実施形態では、動的ハプティック効果のカテゴリは、補間値と共に受信されうるカテゴリ値により求められうる。別の実施形態では、動的ハプティック効果のカテゴリは、受信された補間値に基づいて求められうる。実施形態では、カテゴリ値は、文字列の値でありうる。別の実施形態では、方向値は、固定少数点又は浮動少数点の数値でありうる。方向値は、一又はそれ以上のビット内に記憶されうる。
図示された実施形態では、動的ハプティック効果定義900は、キーフレーム910、920、930及び940の4つのキーフレームを含む。しかしながら、これは、単に一つの実施形態であり、別の実施形態では、動的ハプティック効果定義は、任意の数のキーフレームを含むことができる。キーフレーム910は、“Periodic1”の基本ハプティック効果基準、“0”の補間値、及び“10ms”のリピートギャップ値を含む。基本ハプティック効果基準“Periodic1”は、基本ハプティック効果960を示し、これは、また、動的ハプティック効果定義900内に含まれる。よって、キーフレーム910は、“0”の補間値に対する基本ハプティック効果としての基本ハプティック効果960を定義する。キーフレーム910は、さらに、基本ハプティック効果960が連続的にプレイされたときに、基本ハプティック効果960の連続する事例の間で10msの時間間隔が存在する。同様に、キーフレーム920は、“Periodic2”の基本ハプティック効果基準、“80”の補間値、及び“15ms”のリピートギャップ値を含む。基本ハプティック効果基準“Periodic2”は、基本ハプティック効果970を示し、これは、また、動的ハプティック効果定義900内に含まれる。よって、キーフレーム920は、“80”の補間値に対する基本ハプティック効果としての基本ハプティック効果970を定義する。キーフレーム920は、さらに、基本ハプティック効果970が連続的にプレイされたときに、基本ハプティック効果970の連続する事例の間で15msの時間間隔が存在する。
同様に、キーフレーム930は、“Periodic3”の基本ハプティック効果基準、“90”の補間値、及び“5ms”のリピートギャップ値を含む。基本ハプティック効果基準“Periodic3”は、基本ハプティック効果980を示し、これは、また、動的ハプティック効果定義900内に含まれる。よって、キーフレーム930は、“90”の補間値に対する基本ハプティック効果としての基本ハプティック効果980を定義する。キーフレーム930は、さらに、基本ハプティック効果980が連続的にプレイされたときに、基本ハプティック効果980の連続する事例の間で5msの時間間隔が存在する。同様に、キーフレーム940は、“Periodic3”の基本ハプティック効果基準、“100”の補間値、及び“20ms”のリピートギャップ値を含む。前述したように、基本ハプティック効果基準“Periodic3”は、基本ハプティック効果980を示し、これは、また、動的ハプティック効果定義900内に含まれる。よって、キーフレーム940は、“100”の補間値に対する基本ハプティック効果としての基本ハプティック効果980を定義する。キーフレーム940は、さらに、基本ハプティック効果980が連続的にプレイされたときに、基本ハプティック効果980の連続する事例の間で20msの時間間隔が存在する。
図示された実施形態によれば、キーフレーム910、920、930及び940のそれぞれは、また、方向値を含む。より具体的には、キーフレーム910及び930のそれぞれは、“アップ”の方向値を含み、キーフレーム920及び940のそれぞれは、“ダウン”の方向値を含む。よって、キーフレーム910及び930は、動的ハプティック効果900の方向が“上昇”方向であるときに、キーフレーム910及び930が使用されるキーフレームであることを示す(よって、キーフレーム910及び930の各基本ハプティック効果が使用される)。さらに、キーフレーム920及び940は、動的ハプティック効果900の方向が“下降”方向であるときに、キーフレーム910及び930が使用される(及びキーフレーム920及び940の各基本ハプティック効果が使用される)キーフレームであることを示す。別の実施形態では、キーフレーム910、920、930及び940は、また、それぞれ、カテゴリ値を付加的に含むことができる(図9には図示せず)。この別の実施形態では、キーフレーム910、920、930及び940は、さらに、動的ハプティック効果定義900のカテゴリが、各キーフレームのカテゴリ値(及び各基本ハプティック効果)と等しいカテゴリであるときに、各キーフレームが使用されることを示す。
実施形態によれば、動的ハプティック効果は、また、動的ハプティック効果の終了の指示を含むように定義されうる。動的ハプティック効果の終了の指示は、動的ハプティック効果が追加キーフレームを含まないことを示す。前述したように、動的ハプティック効果定義を解釈する装置は、連続する動的ハプティック効果の内容を解釈するように構成されうる。よって、前記指示は、動的ハプティック効果定義の終了を装置に示すことができる。一実施形態では、動的ハプティック効果の終了の指示は、追加キーフレームを考慮しうる。図示された実施形態では、動的ハプティック効果定義900は、動的ハプティック効果定義900の終了を示す動的ハプティック効果定義900の終了を含む。
一実施形態では、動的ハプティック効果は、装置のユーザインターフェースのエッジに沿うグローを表示するユーザインタフェースソフトウェアモジュールのために設計されうる。動的ハプティック効果は、複数のキーフレームを含んでもよく、各キーフレームは、補間値を含む。実施形態によれば、グローの増加に関連付けられる補間値と比べて、ユーザインターフェースのエッジに沿うグローの減少に関連付けられる補間値のほうが多く存在する。各キーフレーム内の方向値を記憶することにより、各方向値は、“GROW”又は“DECAY”のいずれかの値を含み、各キーフレーム(及び当該値の補間値のそれぞれ)は、動的ハプティック効果の特定の向きに関連付けられることができる(つまり、動的ハプティック効果の“増大(growing)”方向又は動的ハプティック効果の“減衰(decaying)”方向)。
図10は、本発明の一実施形態に係る、ハプティック効果生成モジュール(例えば、図1のハプティック効果生成モジュール16)の機能のフロー図を示す。一実施形態では、図10の機能は、図11の機能と共に、メモリ、他のコンピュータ可読媒体又は有形的表現媒体に記憶されるソフトウェアによりそれぞれ実装され、プロセッサにより実行される。別の実施形態では、当該機能は、(例えば、特定用途向け集積回路(“ASIC”)、プログラマブルゲートアレイ(“PGA”)、フィールドプログラマブルゲートアレイ(“FPGA”)等のアプリケーションを使用することによる)ハードウェアにより行われてもよく、ハードウェア及びソフトウェアの組み合わせにより行われてもよい。また、別の実施形態では、各機能は、アナログ構成要素を用いたハードウェアにより行われてもよい。
フローは開始し、1010へ進む。1010において、第1のキーフレームが受信され、第1のキーフレームは、第1の補間値と、第1のハプティック効果を含む。第1の補間値は、補間が第1のハプティック効果に生じることを特定する値でありうる。第1のキーフレームは、リピートギャップ値を含みうる。第1のハプティック効果は、振動ハプティック効果を含みことができ、複数のパラメータを含むことができる。複数のパラメータは、大きさパラメータ(magnitude parameter)、周波数パラメータ、周期パラメータ及び持続期間パラメータを含みうる。フローはその後1020へ進む。
1020において、第2のキーフレームが受信され、第2のキーフレームは、第2の補間値と、第2のハプティック効果を含む。第2の補間値は、補間が第2のハプティック効果に生じることを特定する値でありうる。第2のキーフレームは、リピートギャップ値を含みうる。第2のハプティック効果は、振動ハプティック効果を含みことができ、複数のパラメータを含むことができる。複数のパラメータは、大きさパラメータ、周波数パラメータ、周期パラメータ及び持続期間パラメータを含みうる。示された実施形態では、動的ハプティック効果は、2つのキーフレームを含むものとして定義されており、各キーフレームは、ハプティック効果を含む。しかし、それに替えて、動的ハプティック効果は、各キーフレームがハプティック効果を含む、3又はそれ以上のキーフレームを含むものとして定義されてもよい。フローはその後1030へ進む。
1030において、補間値が受信され、当該補間値は、第1の補間値と第2の補間値との間にある。フローはその後1040へ進む。1040において、動的ハプティック効果は、補間値から求められる。動的ハプティック効果の決定は、異なる実施形態に基づいてより詳細に説明される。フローはその後1050へ進む。1050において、動的ハプティック効果は、複数のアクチュエータに分配される。動的ハプティック効果の分配もまた、異なる実施形態に基づいてより詳細に説明される。フローはその後終了する。
一実施形態では、動的ハプティック効果の決定は、以下の機能性に基づいて行われうる。動的ハプティック効果は、第1のハプティック効果及び第2のハプティック効果から補間されうる。実施形態によれば、動的ハプティック効果の各パラメータに対する値は、補間機能を用いて、第1のハプティック効果の値を第2のハプティック効果のパラメータの値で補間することにより、算出されうる。動的ハプティック効果の各パラメータ値の補間は、受信された補間値が、第1のハプティック効果に対応する第1の補間値と、第2のハプティック効果に対応する第2の補間値との中間にあることに基づきうる。図示された実施形態では、動的ハプティック効果は、2つの基本ハプティック効果を補間することにより生成されうる。このような補間は、線形補間でありうる。しかし、それに替えて、動的ハプティック効果は、上述した機能性に基づく3又はそれ以上のハプティック効果を補間することにより生成されてもよい。このような補間は、スプライン補間であることができ、スプライン補間は、補間の一形態であり、補間機能は、スプラインと呼ばれる区分的多項式の特別なタイプであり、補間機能は、2又はそれ以上のキーフレームを用いて補間値を動的ハプティック効果にマップすることができる機能である。
さらに、実施形態によれば、動的ハプティック効果の分配は、以下の機能性に基づきうる。第1のアクチュエータ値が受信されうる。第1のアクチュエータ値は、複数のアクチュエータのうちの第1のアクチュエータに対応することができ、第1のアクチュエータ値は、第1のキーフレーム内に記憶されうる。第2のアクチュエータ値もまた受信されうる。第2のアクチュエータ値は、複数のアクチュエータのうちの第2のアクチュエータに対応することができ、第2のアクチュエータ値は、第2のキーフレーム内に記憶されうる。別の実施形態では、一又はそれ以上の追加アクチュエータ値が受信されうる。補間されたアクチュエータ値は、第1のアクチュエータ値及び第2のアクチュエータ値から補間されうる。実施形態によれば、補間されたアクチュエータ値は、補間機能を用いて、第1のアクチュエータ値を第2のアクチュエータ値で補間することにより算出されうる。しかし、補間されたアクチュエータ値は、上述した機能性に基づく3又はそれ以上のアクチュエータ値を補間することにより生成されてもよい。動的ハプティック効果は、その後、補間されたアクチュエータ値に基づいて第1のアクチュエータ値及び第2のアクチュエータ値に分配されうる。しかし、それに替えて、動的ハプティック効果は、上述した機能性に基づく3又はそれ以上のアクチュエータに分配されてもよい。
別の実施形態では、第3のキーフレーム及び第4のキーフレームが受信され、第3のキーフレームは、第3の補間値及び第3のハプティック効果を含み、第4のキーフレームは、第4の補間値及び第4のハプティック効果を含む。この実施形態では、動的ハプティック効果の分配は、以下の機能性に基づきうる。第1のアクチュエータ値が受信されうる。第1のアクチュエータ値は、複数のアクチュエータの第1のアクチュエータに対応することができ、第1のアクチュエータ値は、第1のキーフレーム及び第3のキーフレーム内に記憶されうる。第2のアクチュエータが受信されうる。第2のアクチュエータ値は、複数のアクチュエータの第2のアクチュエータに対応することができ、第2のアクチュエータ値は、第2のキーフレーム及び第4のキーフレーム内に記憶されうる。第1のキーフレーム及び第3のキーフレームは、共にグループ化されうる。第2のキーフレーム及び第4のキーフレームは、共にグループ化されうる。しかし、それに替えて、動的ハプティック効果は、上述した機能性に基づいて3又はそれ以上のアクチュエータに分配されてもよい。
さらに、実施形態によれば、動的ハプティック効果の決定は、以下の機能性に基づいて行われうる。第1のアクチュエータのための第1の動的ハプティック効果は、第1のハプティック効果及び第3のハプティック効果から補間されうる。第2のアクチュエータのための第2の動的ハプティック効果は、第2のハプティック効果及び第4のハプティック効果から補間されうる。しかし、それに替えて、各動的ハプティック効果は、上述した機能性に基づいて3又はそれ以上のハプティック効果を補間することにより生成されてもよい。
別の実施形態では、動的ハプティック効果の決定は、以下の機能性に基づいて行われうる。動的ハプティック効果は、前述したように、第1のハプティック効果及び第2のハプティック効果から補間されうる。しかし、それに替えて、動的ハプティック効果は、上述した機能性に基づいて3又はそれ以上のハプティック効果を補間することにより生成されてもよい。
実施形態では、動的ハプティック効果の決定は、以下の機能性に基づいて行われうる。アクチュエータ分配情報が受信されることができ、アクチュエータ分配情報は、複数のアクチュエータに動的ハプティック効果をどのように分配するかを示す。動的ハプティック効果は、その後、アクチュエータ分配情報に基づいて複数のアクチュエータに分配されうる。一実施形態では、アクチュエータ分配情報は、動的ハプティック効果が記憶されるハプティック効果ファイルに記憶されうる。別の実施形態では、アクチュエータ分配情報は、動的ハプティック効果の一又はそれ以上キーフレーム内に記憶されうる。さらに別の実施形態では、アクチュエータ分配情報は、動的ハプティック効果の一又はそれ以上キーフレームにより参照される動的ハプティック効果内に記憶されうる。さらに別の実施形態では、アクチュエータ分配情報は、ランタイムにおいて決定されうる。
図11は、本発明の別の実施形態に係る、ハプティック効果生成モジュール(例えば、図1のハプティック効果生成モジュール16)の機能のフロー図を示す。フローは開始し、1110へ進む。1110において、複数のキーフレームが受信される。各キーフレームは、キーフレーム補間値、ハプティック効果及び方向値を含む。フローはその後1120へ進む。1120において、補間値が受信される。補間値は、少なくとも2つのキーフレーム補間値の間にある。フローはその後1130へ進む。1130において、方向は、動的ハプティック効果のために決定される。フローはその後1140へ進む。1140において、一又はそれ以上のキーフレームは、複数のキーフレームから選択される。各選択されたキーフレームは、方向と等しい方向値を含む。フローはその後1150へ進む。1150において、動的ハプティック効果は、補間値及び方向から決定される。実施形態によれば、当該決定は、少なくとも2つの選択されたキーフレームの少なくとも2つのハプティック効果から動的ハプティック効果を補間することを含みうる。フローはその後終了する。
別の実施形態では、各キーフレームは、また、カテゴリ値を含みうる。カテゴリは、動的ハプティック効果のために決定されうる。一又はそれ以上のキーフレームは、選択された一又はそれ以上のキーフレームからさらに選択されうる。さらに選択された各キーフレームは、カテゴリと等しいカテゴリ値を含みうる。動的ハプティック効果は、補間値、方向及びカテゴリから決定されうる。別の実施形態によれば、当該決定は、少なくとも2つのさらに選択されたキーフレームの少なくとも2つのハプティック効果から動的ハプティック効果を補間することを含みうる。
よって、実施形態によれば、システムは、複数のアクチュエータにおいて一又はそれ以上の動的ハプティック効果の生成を提供することができ、一又はそれ以上ハプティック効果は、複数のアクチュエータに分配されうる。よって、システムは、異なるアクチュエータの動的ハプティック効果を動かすことにより動的ハプティック効果の空間特性をアニメーションにすることができる。これは、システムが動的ハプティック効果のパラメータとして空間的な位置を加えることを可能にし、よりロバストなハプティック体験を提供することができる。また、別の実施形態によれば、システムは、一又はそれ以上のキーフレームを用いて動的ハプティック効果の生成を提供することができ、各キーフレームは、方向特性を含む。これは、動的ハプティック効果が方向に応じて異なって変更されることを可能にし、よって、ハプティック体験をさらに向上させることができる。
本明細書を通して記載された本発明の特徴、構造、又は特性は、1つ以上の実施形態において任意の適切な方法において組み合わされてよい。例えば、「一実施形態」、「一部の実施形態」、「特定の実施形態」、「特定の実施形態(複数)」、又は他の類似の言語の使用は、本明細書を通じて、実施形態に関連して記載された特定の特徴、構造、又は特性が、本発明の少なくとも1つの実施形態に含まれ得るという事実に言及している。従って、「一実施形態」、「一部の実施形態」、「特定の実施形態」、「特定の実施形態(複数)」の言い回し、又は他の類似の言語の登場は、これら全てが、実施形態の同じ群のことを必ずしも言及しているのではなく、記載された特徴、構造、又は特性は、1つ以上の実施形態において任意の適切な方法において組み合わされてよい。
当業者は、上述した発明が、異なる順序におけるステップを用いて実施されてよく、及び/又は、記載された構成とは異なる構成における要素を用いて実施されてよいことを容易に理解する。それゆえ、本発明はこれらの好ましい実施形態に基づいて記載されているけれども、特定の修正、変更、及び代替の構成が明白であり、他方で本発明の趣旨及び範囲内にあることは、当業者にとって明白である。本発明の境界を決定するために、それゆえ、添付の特許請求の範囲に参照がなされるべきである。

Claims (14)

  1. 動的ハプティック効果を生成するコンピュータ実装方法であって、
    第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するステップと、
    第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するステップと、
    一又はそれ以上の追加キーフレームを受信するステップであって、各追加キーフレームは、追加補間値及び追加ハプティック効果を含む、ステップと、
    前記第1の補間値と前記第2の補間値との間にある補間値を受信するステップと、
    前記補間値、前記第1のハプティック効果、前記第2のハプティック効果及び一又はそれ以上の前記追加ハプティック効果から前記動的ハプティック効果を決定するステップと、
    前記動的ハプティック効果を複数のアクチュエータに分配するステップと、を含むコンピュータ実装方法。
  2. 前記動的ハプティック効果を生成することは、
    第1のアクチュエータ値を受信するステップであって、前記第1のアクチュエータ値は、前記複数のアクチュエータの第1のアクチュエータに対応し、前記第1のアクチュエータ値は、前記第1のキーフレーム内に記憶される、ステップと、
    第2のアクチュエータ値を受信するステップであって、前記第2のアクチュエータ値は、前記複数のアクチュエータの第2のアクチュエータに対応し、前記第2のアクチュエータ値は、前記第2のキーフレーム内に記憶される、ステップと、
    一又はそれ以上の追加アクチュエータ値を受信するステップであって、各追加アクチュエータ値は、前記複数のアクチュエータの1つの追加アクチュエータに対応し、各追加アクチュエータ値は、一又はそれ以上の前記追加キーフレームの1つの追加キーフレーム内に記憶される、ステップと、をさらに含み、
    前記動的ハプティック効果を分配するステップは、
    補間されたアクチュエータ値を前記第1のアクチュエータ値前記第2のアクチュエータ値及び一又はそれ以上の前記追加アクチュエータ値から補間するステップと、
    前記補間されたアクチュエータ値に基づいて、前記動的ハプティック効果を、前記第1のアクチュエータ前記第2のアクチュエータ及び一又はそれ以上の前記追加アクチュエータに分配するステップと、をさらに含む請求項1に記載のコンピュータ実装方法。
  3. 動的ハプティック効果を生成するコンピュータ実装方法であって、
    第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するステップと、
    第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するステップと、
    第3の補間値及び第3のハプティック効果を含む第3のキーフレームを受信するステップと、
    第4の補間値及び第4のハプティック効果を含む第4のキーフレームを受信するステップと、
    前記第1の補間値と前記第2の補間値との間にある補間値を受信するステップと、
    前記補間値から前記動的ハプティック効果を決定するステップと、
    前記動的ハプティック効果を複数のアクチュエータに分配するステップと、を含み、
    前記動的ハプティック効果を分配するステップは、
    第1のアクチュエータ値を受信するステップであって、前記第1のアクチュエータ値は、前記複数のアクチュエータの第1のアクチュエータに対応し、前記第1のアクチュエータ値は、前記第1のキーフレーム及び前記第3のキーフレーム内に記憶される、ステップと、
    第2のアクチュエータ値を受信するステップであって、前記第2のアクチュエータ値は、前記複数のアクチュエータの第2のアクチュエータに対応し、前記第2のアクチュエータ値は、前記第2のキーフレーム及び前記第4のキーフレーム内に記憶される、ステップと、
    前記第1のアクチュエータ値を含む前記第1のキーフレーム及び前記第3のキーフレームをグループ化するステップと、
    前記第2のアクチュエータ値を含む前記第2のキーフレーム及び前記第4のキーフレームをグループ化するステップと、をさらに含み、
    前記補間値から前記動的ハプティック効果を決定するステップは、
    前記第1のハプティック効果及び前記第3のハプティック効果から前記第1のアクチュエータのための第1の動的ハプティック効果を補間するステップと、
    前記第2のハプティック効果及び前記第4のハプティック効果から前記第2のアクチュエータのための第2の動的ハプティック効果を補間するステップと、をさらに含むコンピュータ実装方法。
  4. 前記動的ハプティック効果を生成することは、
    一又はそれ以上の追加キーフレームを受信するステップであって、各追加キーフレームは、追加補間値及び追加ハプティック効果を含む、ステップと、
    キーフレームの第1のグループ又はキーフレームの第2のグループのいずれかの一又はそれ以上の追加キーフレームをグループ化するステップと、をさらに含み、
    前記補間値から前記動的ハプティック効果を決定するステップは、
    前記第1のグループ内の前記第1のハプティック効果、前記第3のハプティック効果及び前記追加ハプティック効果から前記第1のアクチュエータのために前記第1の動的ハプティック効果を補間するステップと、
    前記第2のグループ内の前記第2のハプティック効果、前記第4のハプティック効果及び前記追加ハプティック効果から前記第2のアクチュエータのために前記第2の動的ハプティック効果を補間するステップと、をさらに含む請求項3に記載のコンピュータ実装方法。
  5. 前記動的ハプティック効果を分配するステップは、
    一又はそれ以上の追加アクチュエータ値を受信するステップであって、一又はそれ以上の前記追加アクチュエータ値は、前記複数のアクチュエータの一又はそれ以上の追加アクチュエータに対応し、各追加アクチュエータ値は、一又はそれ以上の追加キーフレームの少なくとも1つの追加キーフレーム内に記憶される、ステップと、
    各追加アクチュエータ値に対して、前記追加アクチュエータ値を含む一又はそれ以上の追加キーフレームの少なくとも1つの追加キーフレームをグループ化するステップと、
    各追加アクチュエータ値に対して、追加のグループ内の一又はそれ以上の追加ハプティック効果から前記追加アクチュエータのための追加ハプティック効果を補間するステップと、をさらに含む請求項4に記載のコンピュータ実装方法。
  6. 動的ハプティック効果を生成するコンピュータ実装方法であって、
    第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するステップと、
    第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するステップと、
    前記第1の補間値と前記第2の補間値との間にある補間値を受信するステップと、
    前記補間値と、前記第1のハプティック効果と、前記第2のハプティック効果とから前記動的ハプティック効果を決定するステップと、
    前記動的ハプティック効果を複数のアクチュエータに分配するステップと、を含み、
    前記動的ハプティック効果を分配するステップは、
    前記複数のアクチュエータに前記動的ハプティック効果をどのように分配するかを示すアクチュエータ分配情報を受信するステップと、
    前記アクチュエータ分配情報に基づいて前記複数のアクチュエータに前記動的ハプティック効果を分配するステップと、をさらに含むコンピュータ実装方法。
  7. 前記動的ハプティック効果は、振動ハプティック効果であり、複数のパラメータを含む請求項1に記載のコンピュータ実装方法。
  8. 前記複数のパラメータは、持続期間パラメータ、大きさパラメータ、周期パラメータ及び周波数パラメータを含む請求項7に記載のコンピュータ実装方法。
  9. 動的ハプティック効果を生成するシステムであって、
    ハプティック効果生成モジュールを記憶するように構成されるメモリと、
    前記メモリに記憶される前記ハプティック効果生成モジュールを実行するように構成されるプロセッサと、
    一又はそれ以上の動的ハプティック効果を出力するように構成される複数のアクチュエータと、を備え、
    前記ハプティック効果生成モジュールは、第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、追加補間値及び追加ハプティック効果を含む一又はそれ以上の追加キーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、補間値を受信するように構成され、前記補間値は、前記第1の補間値と前記第2の補間値との間にあり、
    前記ハプティック効果生成モジュールは、さらに、前記補間値、前記第1のハプティック効果、前記第2のハプティック効果及び一又はそれ以上の前記追加ハプティック効果から前記動的ハプティック効果を決定するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記動的ハプティック効果を前記複数のアクチュエータに分配するように構成される、システム。
  10. 記ハプティック効果生成モジュールは、さらに、第1のアクチュエータ値を受信するように構成され、前記第1のアクチュエータ値は、前記複数のアクチュエータの第1のアクチュエータに対応し、前記第1のアクチュエータ値は、前記第1のキーフレーム内に記憶され、
    前記ハプティック効果生成モジュールは、さらに、第2のアクチュエータ値を受信するように構成され、前記第2のアクチュエータ値は、前記複数のアクチュエータの第2のアクチュエータに対応し、前記第2のアクチュエータ値は、前記第2のキーフレーム内に記憶され、
    前記ハプティック効果生成モジュールは、さらに、一又はそれ以上の追加アクチュエータ値を受信するに構成され、各追加アクチュエータ値は、前記複数のアクチュエータの1つの追加アクチュエータに対応し、各追加アクチュエータ値は、一又はそれ以上の前記追加キーフレームの1つの追加キーフレーム内に記憶され、
    前記ハプティック効果生成モジュールは、さらに、補間されたアクチュエータ値を前記第1のアクチュエータ値前記第2のアクチュエータ値及び一又はそれ以上の前記追加アクチュエータ値から補間するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記補間されたアクチュエータ値に基づいて、前記動的ハプティック効果を前記第1のアクチュエータ前記第2のアクチュエータ及び一又はそれ以上の前記追加アクチュエータに分配するように構成される、請求項9に記載のシステム。
  11. 動的ハプティック効果を生成するシステムであって、
    ハプティック効果生成モジュールを記憶するように構成されるメモリと、
    前記メモリに記憶される前記ハプティック効果生成モジュールを実行するように構成されるプロセッサと、
    一又はそれ以上の動的ハプティック効果を出力するように構成される複数のアクチュエータと、を備え、
    前記ハプティック効果生成モジュールは、第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第3の補間値及び第3のハプティック効果を含む第3のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第4の補間値及び第4のハプティック効果を含む第4のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、補間値を受信するように構成され、前記補間値は、前記第1の補間値と前記第2の補間値との間にあり、
    前記ハプティック効果生成モジュールは、さらに、前記動的ハプティック効果を前記複数のアクチュエータに分配するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第1のアクチュエータ値を受信するように構成され、前記第1のアクチュエータ値は、前記複数のアクチュエータの第1のアクチュエータに対応し、前記第1のアクチュエータ値は、前記第1のキーフレーム及び前記第3のキーフレーム内に記憶され、
    前記ハプティック効果生成モジュールは、さらに、第2のアクチュエータ値を受信するように構成され、前記第2のアクチュエータ値は、前記複数のアクチュエータの第2のアクチュエータに対応し、前記第2のアクチュエータ値は、前記第2のキーフレーム及び前記第4のキーフレーム内に記憶され、
    前記ハプティック効果生成モジュールは、さらに、前記第1のアクチュエータ値を含む前記第1のキーフレーム及び前記第3のキーフレームをグループ化するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記第2のアクチュエータ値を含む前記第2のキーフレーム及び前記第4のキーフレームをグループ化するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記補間値から前記動的ハプティック効果を決定するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記第1のハプティック効果及び前記第3のハプティック効果から前記第1のアクチュエータのための第1の動的ハプティック効果を補間するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記第2のハプティック効果及び前記第4のハプティック効果から前記第2のアクチュエータのための第2の動的ハプティック効果を補間するように構成される、システム。
  12. 動的ハプティック効果を生成するシステムであって、
    ハプティック効果生成モジュールを記憶するように構成されるメモリと、
    前記メモリに記憶される前記ハプティック効果生成モジュールを実行するように構成されるプロセッサと、
    一又はそれ以上の動的ハプティック効果を出力するように構成される複数のアクチュエータと、を備え、
    前記ハプティック効果生成モジュールは、第1の補間値及び第1のハプティック効果を含む第1のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、第2の補間値及び第2のハプティック効果を含む第2のキーフレームを受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、補間値を受信するように構成され、前記補間値は、前記第1の補間値と前記第2の補間値との間にあり、
    前記ハプティック効果生成モジュールは、さらに、前記補間値と、前記第1のハプティック効果と、前記第2のハプティック効果から前記動的ハプティック効果を決定するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記動的ハプティック効果を前記複数のアクチュエータに分配するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記複数のアクチュエータに前記動的ハプティック効果をどのように分配するかを示すアクチュエータ分配情報を受信するように構成され、
    前記ハプティック効果生成モジュールは、さらに、前記アクチュエータ分配情報に基づいて前記複数のアクチュエータに前記動的ハプティック効果を分配するように構成される、システム。
  13. 前記動的ハプティック効果は、振動ハプティック効果であり、持続期間パラメータ、大きさパラメータ、周期パラメータ及び周波数パラメータを含む、請求項9に記載のシステム。
  14. プロセッサにより実行されたときに、請求項1からのいずれか一項に記載の方法を実行させる命令を有するコンピュータ可読媒体。
JP2013249262A 2012-12-10 2013-12-02 強化された動的ハプティック効果 Active JP6258023B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/709,157 2012-12-10
US13/709,157 US9898084B2 (en) 2012-12-10 2012-12-10 Enhanced dynamic haptic effects

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017234056A Division JP6479148B2 (ja) 2012-12-10 2017-12-06 強化された動的ハプティック効果

Publications (2)

Publication Number Publication Date
JP2014115999A JP2014115999A (ja) 2014-06-26
JP6258023B2 true JP6258023B2 (ja) 2018-01-10

Family

ID=49552214

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2013249262A Active JP6258023B2 (ja) 2012-12-10 2013-12-02 強化された動的ハプティック効果
JP2017234056A Active JP6479148B2 (ja) 2012-12-10 2017-12-06 強化された動的ハプティック効果

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017234056A Active JP6479148B2 (ja) 2012-12-10 2017-12-06 強化された動的ハプティック効果

Country Status (5)

Country Link
US (3) US9898084B2 (ja)
EP (1) EP2741174A3 (ja)
JP (2) JP6258023B2 (ja)
KR (1) KR102207669B1 (ja)
CN (2) CN108803878A (ja)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8947216B2 (en) 2012-11-02 2015-02-03 Immersion Corporation Encoding dynamic haptic effects
US9898084B2 (en) * 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
US9645646B2 (en) * 2014-09-04 2017-05-09 Intel Corporation Three dimensional contextual feedback wristband device
KR101606791B1 (ko) * 2015-09-08 2016-03-28 박재성 주파수 변화에 따라 실시간 진동을 제공하는 진동 제공시스템 및 이것의 진동 제공방법
KR20180048629A (ko) * 2015-09-25 2018-05-10 임머숀 코퍼레이션 햅틱 효과 설계 시스템
KR102188157B1 (ko) * 2015-12-11 2020-12-07 코오롱인더스트리 주식회사 촉각자극 제공 장치 및 그 구동 방법
JP6383765B2 (ja) * 2016-08-25 2018-08-29 株式会社ファセテラピー 触覚コンテンツ生成装置、触覚コンテンツ生成方法および触覚コンテンツ利用機器
DK201670728A1 (en) * 2016-09-06 2018-03-19 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Feedback During Interaction with an Intensity-Sensitive Button
US10684689B2 (en) 2018-04-20 2020-06-16 Immersion Corporation Cross-platform dynamic haptic effect design tool for augmented or virtual reality environments

Family Cites Families (118)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0559708A1 (en) 1990-11-30 1993-09-15 Cambridge Animation Systems Limited Image synthesis and processing
JPH0816820A (ja) 1994-04-25 1996-01-19 Fujitsu Ltd 3次元アニメーション作成装置
US5774386A (en) 1995-09-08 1998-06-30 Eastman Kodak Company Method and apparatus for performing function evaluation using a cache
JP4131278B2 (ja) 1996-10-18 2008-08-13 ヤマハ株式会社 鍵盤楽器用力覚制御装置
US6108011A (en) 1996-10-28 2000-08-22 Pacific Data Images, Inc. Shape interpolation for computer-generated geometric models using independent shape parameters for parametric shape interpolation curves
US7091948B2 (en) 1997-04-25 2006-08-15 Immersion Corporation Design of force sensations for haptic feedback computer interfaces
US6337678B1 (en) * 1999-07-21 2002-01-08 Tactiva Incorporated Force feedback computer input and output device with coordinated haptic elements
US6449019B1 (en) 2000-04-07 2002-09-10 Avid Technology, Inc. Real-time key frame effects using tracking information
JP3949912B2 (ja) 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
AU2001294852A1 (en) 2000-09-28 2002-04-08 Immersion Corporation Directional tactile feedback for haptic feedback interface devices
US7623114B2 (en) 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
US7199805B1 (en) 2002-05-28 2007-04-03 Apple Computer, Inc. Method and apparatus for titling
JP2004310518A (ja) 2003-04-08 2004-11-04 Fuji Xerox Co Ltd 画像情報処理装置
KR20050054731A (ko) 2003-12-05 2005-06-10 한국전자통신연구원 햅틱 시뮬레이션 시스템 및 그 시스템에서의 실시간 촉감지원 방법
US9948885B2 (en) 2003-12-12 2018-04-17 Kurzweil Technologies, Inc. Virtual encounters
WO2005085981A1 (en) 2004-02-03 2005-09-15 Nokia Corporation Method and device for implementing vibration output commands in mobile terminal devices
JP2005332063A (ja) * 2004-05-18 2005-12-02 Sony Corp 触覚機能付き入力装置、情報入力方法及び電子機器
US7765333B2 (en) 2004-07-15 2010-07-27 Immersion Corporation System and method for ordering haptic effects
JP2006058973A (ja) 2004-08-17 2006-03-02 Sony Corp 触覚情報作成装置及び触覚情報作成方法
US7728823B2 (en) * 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
EP1805587A1 (en) 2004-09-24 2007-07-11 Apple Computer, Inc. Raw data track pad device and system
JP4617893B2 (ja) 2005-01-18 2011-01-26 ソニー株式会社 振動伝達構造、触覚機能付きの入出力装置及び電子機器
US7919945B2 (en) 2005-06-27 2011-04-05 Coactive Drive Corporation Synchronized vibration device for haptic feedback
US8700791B2 (en) 2005-10-19 2014-04-15 Immersion Corporation Synchronization of haptic effect data in a media transport stream
US9370704B2 (en) 2006-08-21 2016-06-21 Pillar Vision, Inc. Trajectory detection and feedback system for tennis
JP2008123429A (ja) 2006-11-15 2008-05-29 Sony Corp タッチパネルディスプレイ装置および電子機器並びに遊技機器
US8098234B2 (en) 2007-02-20 2012-01-17 Immersion Corporation Haptic feedback system with stored effects
JP2008257295A (ja) 2007-03-30 2008-10-23 Tokyo Institute Of Technology 触覚刺激提示方法
US8621348B2 (en) 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
CN101355746B (zh) 2007-07-27 2012-05-16 深圳富泰宏精密工业有限公司 无线通信装置
US8035535B2 (en) 2007-11-21 2011-10-11 Nokia Corporation Apparatus and method providing transformation for human touch force measurements
US7911328B2 (en) 2007-11-21 2011-03-22 The Guitammer Company Capture and remote reproduction of haptic events in synchronous association with the video and audio capture and reproduction of those events
GB2468811B (en) 2008-01-17 2012-12-19 Articulate Technologies Inc Methods and devices for intraoral tactile feedback
JP2009181261A (ja) 2008-01-30 2009-08-13 Panasonic Corp 双方向通信システム
KR100927009B1 (ko) 2008-02-04 2009-11-16 광주과학기술원 증강 현실에서의 햅틱 상호 작용 방법 및 그 시스템
US9513704B2 (en) 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
US20090303175A1 (en) 2008-06-05 2009-12-10 Nokia Corporation Haptic user interface
JP2010015514A (ja) 2008-07-07 2010-01-21 Sony Corp 入力装置、その制御方法及び電子機器
KR20100066036A (ko) 2008-12-09 2010-06-17 삼성전자주식회사 휴대 단말기 운용 방법 및 장치
KR101114603B1 (ko) 2008-12-12 2012-03-05 삼성전자주식회사 휴대용 단말기의 햅틱 장치
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US8077021B2 (en) 2009-03-03 2011-12-13 Empire Technology Development Llc Dynamic tactile interface
US10564721B2 (en) * 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
KR101628782B1 (ko) * 2009-03-20 2016-06-09 삼성전자주식회사 휴대용 단말기에서 복수의 진동자를 이용한 햅틱 기능 제공방법 및 장치
JP2010278727A (ja) 2009-05-28 2010-12-09 Kddi Corp 振動機能付き携帯端末
US9370459B2 (en) 2009-06-19 2016-06-21 Andrew Mahoney System and method for alerting visually impaired users of nearby objects
JP4633183B1 (ja) 2009-07-29 2011-02-23 京セラ株式会社 入力装置および入力装置の制御方法
JP5197521B2 (ja) 2009-07-29 2013-05-15 京セラ株式会社 入力装置
JP4942801B2 (ja) 2009-08-27 2012-05-30 京セラ株式会社 入力装置
US8451238B2 (en) 2009-09-02 2013-05-28 Amazon Technologies, Inc. Touch-screen user interface
US8619044B2 (en) 2009-09-30 2013-12-31 Blackberry Limited Electronic device including tactile touch-sensitive display and method of controlling same
JP5704428B2 (ja) * 2009-11-18 2015-04-22 株式会社リコー タッチパネル装置及びタッチパネル装置の制御方法
JP5635274B2 (ja) 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
JP5360499B2 (ja) 2010-02-01 2013-12-04 国立大学法人東北大学 力覚提示方法および力覚提示装置
CA2731708A1 (en) 2010-02-15 2011-08-15 Research In Motion Limited Electronic device including touch-sensitive display and actuator for providing tactile feedback
US9417695B2 (en) 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
WO2011127379A2 (en) 2010-04-09 2011-10-13 University Of Florida Research Foundation Inc. Interactive mixed reality system and uses thereof
US8736559B2 (en) 2010-04-23 2014-05-27 Blackberry Limited Portable electronic device and method of controlling same
US8451255B2 (en) 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
DE112010005736B4 (de) 2010-07-13 2020-03-26 Lg Electronics Inc. Mobiles Endgerät und Konfigurationsverfahren für einen Ruhebildschirm desselben
US8352643B2 (en) 2010-09-30 2013-01-08 Immersion Corporation Haptically enhanced interactivity with interactive content
US20120081337A1 (en) 2010-10-04 2012-04-05 Sony Ericsson Mobile Communications Ab Active Acoustic Multi-Touch and Swipe Detection for Electronic Devices
RU2596994C2 (ru) 2010-11-09 2016-09-10 Конинклейке Филипс Электроникс Н.В. Пользовательский интерфейс с тактильной обратной связью
JP5587759B2 (ja) 2010-12-24 2014-09-10 京セラ株式会社 触感呈示装置、当該装置に用いるプログラムおよび触感呈示方法
US8624857B2 (en) 2011-02-09 2014-01-07 Texas Instruments Incorporated Haptics effect controller architecture and instruction set
EP3306449B1 (en) * 2011-03-04 2022-03-09 Apple Inc. Linear vibrator providing localized and generalized haptic feedback
US9483085B2 (en) 2011-06-01 2016-11-01 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling same
KR20130007738A (ko) 2011-07-11 2013-01-21 삼성전자주식회사 키 입력장치
US9122311B2 (en) 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
US9462262B1 (en) 2011-08-29 2016-10-04 Amazon Technologies, Inc. Augmented reality environment with environmental condition control
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US10852093B2 (en) 2012-05-22 2020-12-01 Haptech, Inc. Methods and apparatuses for haptic systems
JP5831635B2 (ja) 2012-06-11 2015-12-09 富士通株式会社 駆動装置、電子機器、及び駆動制御プログラム
US8860563B2 (en) * 2012-06-14 2014-10-14 Immersion Corporation Haptic effect conversion system using granular synthesis
US9030428B2 (en) 2012-07-11 2015-05-12 Immersion Corporation Generating haptic effects for dynamic events
US8947216B2 (en) * 2012-11-02 2015-02-03 Immersion Corporation Encoding dynamic haptic effects
US9898084B2 (en) 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
FR2999741B1 (fr) 2012-12-17 2015-02-06 Centre Nat Rech Scient Systeme haptique pour faire interagir sans contact au moins une partie du corps d'un utilisateur avec un environnement virtuel
US9367136B2 (en) 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
US9908048B2 (en) 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
US9811854B2 (en) 2013-07-02 2017-11-07 John A. Lucido 3-D immersion technology in a virtual store
EP4083758A1 (en) 2013-07-05 2022-11-02 Rubin, Jacob A. Whole-body human-computer interface
US9630105B2 (en) 2013-09-30 2017-04-25 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
WO2015107386A1 (en) 2014-01-15 2015-07-23 Sony Corporation Haptic notification on wearables
US9551873B2 (en) 2014-05-30 2017-01-24 Sony Interactive Entertainment America Llc Head mounted device (HMD) system having interface with mobile computing device for rendering virtual reality content
EP3648072A1 (en) 2014-07-28 2020-05-06 CK Materials Lab Co., Ltd. A method for providing haptic information
US9645646B2 (en) 2014-09-04 2017-05-09 Intel Corporation Three dimensional contextual feedback wristband device
US9799177B2 (en) 2014-09-23 2017-10-24 Intel Corporation Apparatus and methods for haptic covert communication
US10166466B2 (en) 2014-12-11 2019-01-01 Elwha Llc Feedback for enhanced situational awareness
US9922518B2 (en) 2014-12-11 2018-03-20 Elwha Llc Notification of incoming projectiles
US9870718B2 (en) 2014-12-11 2018-01-16 Toyota Motor Engineering & Manufacturing North America, Inc. Imaging devices including spacing members and imaging devices including tactile feedback devices
US20160170508A1 (en) 2014-12-11 2016-06-16 Toyota Motor Engineering & Manufacturing North America, Inc. Tactile display devices
US10073516B2 (en) 2014-12-29 2018-09-11 Sony Interactive Entertainment Inc. Methods and systems for user interaction within virtual reality scene using head mounted display
US9746921B2 (en) 2014-12-31 2017-08-29 Sony Interactive Entertainment Inc. Signal generation and detector systems and methods for determining positions of fingers of a user
US9843744B2 (en) 2015-01-13 2017-12-12 Disney Enterprises, Inc. Audience interaction projection system
US10322203B2 (en) 2015-06-26 2019-06-18 Intel Corporation Air flow generation for scent output
WO2017053878A1 (en) 2015-09-25 2017-03-30 Oculus Vr, Llc Haptic surface with damping apparatus
US20170103574A1 (en) 2015-10-13 2017-04-13 Google Inc. System and method for providing continuity between real world movement and movement in a virtual/augmented reality experience
US20170131775A1 (en) 2015-11-10 2017-05-11 Castar, Inc. System and method of haptic feedback by referral of sensation
WO2017095951A1 (en) 2015-11-30 2017-06-08 Nike Innovate C.V. Apparel with ultrasonic position sensing and haptic feedback for activities
US10310804B2 (en) 2015-12-11 2019-06-04 Facebook Technologies, Llc Modifying haptic feedback provided to a user to account for changes in user perception of haptic feedback
US10324530B2 (en) 2015-12-14 2019-06-18 Facebook Technologies, Llc Haptic devices that simulate rigidity of virtual objects
US10096163B2 (en) 2015-12-22 2018-10-09 Intel Corporation Haptic augmented reality to reduce noxious stimuli
US10065124B2 (en) 2016-01-15 2018-09-04 Disney Enterprises, Inc. Interacting with a remote participant through control of the voice of a toy device
US9846971B2 (en) 2016-01-19 2017-12-19 Disney Enterprises, Inc. Systems and methods for augmenting an appearance of a hilt to simulate a bladed weapon
US11351472B2 (en) 2016-01-19 2022-06-07 Disney Enterprises, Inc. Systems and methods for using a gyroscope to change the resistance of moving a virtual weapon
CN106997241B (zh) 2016-01-22 2020-04-21 宏达国际电子股份有限公司 虚拟现实环境中与真实世界互动的方法与虚拟现实系统
US9933851B2 (en) 2016-02-22 2018-04-03 Disney Enterprises, Inc. Systems and methods for interacting with virtual objects using sensory feedback
US10555153B2 (en) 2016-03-01 2020-02-04 Disney Enterprises, Inc. Systems and methods for making non-smart objects smart for internet of things
US20170352185A1 (en) 2016-06-02 2017-12-07 Dennis Rommel BONILLA ACEVEDO System and method for facilitating a vehicle-related virtual reality and/or augmented reality presentation
US10155159B2 (en) 2016-08-18 2018-12-18 Activision Publishing, Inc. Tactile feedback systems and methods for augmented reality and virtual reality systems
US20180053351A1 (en) 2016-08-19 2018-02-22 Intel Corporation Augmented reality experience enhancement method and apparatus
US10779583B2 (en) 2016-09-20 2020-09-22 Facebook Technologies, Llc Actuated tendon pairs in a virtual reality device
US10372213B2 (en) 2016-09-20 2019-08-06 Facebook Technologies, Llc Composite ribbon in a virtual reality device
US10300372B2 (en) 2016-09-30 2019-05-28 Disney Enterprises, Inc. Virtual blaster
US10281982B2 (en) 2016-10-17 2019-05-07 Facebook Technologies, Llc Inflatable actuators in virtual reality
US10088902B2 (en) 2016-11-01 2018-10-02 Oculus Vr, Llc Fiducial rings in virtual reality
US20170102771A1 (en) 2016-12-12 2017-04-13 Leibs Technology Limited Wearable ultrasonic haptic feedback system

Also Published As

Publication number Publication date
US20140160034A1 (en) 2014-06-12
JP2014115999A (ja) 2014-06-26
EP2741174A3 (en) 2016-05-18
US20190272039A1 (en) 2019-09-05
CN103869969B (zh) 2018-06-29
US10359851B2 (en) 2019-07-23
CN103869969A (zh) 2014-06-18
CN108803878A (zh) 2018-11-13
JP6479148B2 (ja) 2019-03-06
EP2741174A2 (en) 2014-06-11
KR20140074833A (ko) 2014-06-18
JP2018037112A (ja) 2018-03-08
US20180046252A1 (en) 2018-02-15
US9898084B2 (en) 2018-02-20
KR102207669B1 (ko) 2021-01-25

Similar Documents

Publication Publication Date Title
JP6734325B2 (ja) ダイナミックハプティック効果のコード化
JP6479148B2 (ja) 強化された動的ハプティック効果
JP6226574B2 (ja) ハプティックフィードバックコントロールシステム
JP6342619B2 (ja) 動的イベントのためのハプティック効果の生成
JP2019204520A (ja) タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
US10796445B2 (en) Method and device for detecting planes and/or quadtrees for use as a virtual substrate
US20160246375A1 (en) Systems And Methods For User Interaction With A Curved Display
EP3652613B1 (en) Improved transmission of haptic input

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161011

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170719

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170725

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171004

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20171107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20171206

R150 Certificate of patent or registration of utility model

Ref document number: 6258023

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250