JP6411756B2 - 接触子に基づいたハプティックフィードバック生成 - Google Patents

接触子に基づいたハプティックフィードバック生成 Download PDF

Info

Publication number
JP6411756B2
JP6411756B2 JP2014049292A JP2014049292A JP6411756B2 JP 6411756 B2 JP6411756 B2 JP 6411756B2 JP 2014049292 A JP2014049292 A JP 2014049292A JP 2014049292 A JP2014049292 A JP 2014049292A JP 6411756 B2 JP6411756 B2 JP 6411756B2
Authority
JP
Japan
Prior art keywords
contact
haptic
haptic effect
type
feedback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2014049292A
Other languages
English (en)
Other versions
JP2014179088A (ja
Inventor
ヴィンセント レヴェスク
ヴィンセント レヴェスク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2014179088A publication Critical patent/JP2014179088A/ja
Application granted granted Critical
Publication of JP6411756B2 publication Critical patent/JP6411756B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1636Sensing arrangement for detection of a tap gesture on the housing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

一実施形態は、概して、ハプティックフィードバックシステム、特に接触子の特性に基づいたハプティックフィードバックシステムに関する。
電子デバイスの製造者はユーザにとって豊かなインターフェースを製造することに注力している。従来のデバイスは、ユーザにフィードバックを提供するために、視覚的及び聴覚的合図を用いている。一部のインターフェースデバイスにおいて、総括して「ハプティック(触覚)フィードバック」又は「ハプティック(触覚的)効果」として知られる、運動感覚フィードバック(作用力及び抵抗力フィードバック等)及び/又はタクタイル(触知的)フィードバック(振動、触感、及び熱等)もまた、ユーザに提供される。ハプティックフィードバックは、ユーザインターフェースを強化及び単純化するきっかけを提供し得る。具体的に、振動効果、すなわち振動ハプティック効果は、ユーザに特定のイベントを通知するために、電子デバイスのユーザへの合図を提供するのに有用であり得るか、又はシミュレート環境もしくは仮想環境内でより大きく感覚を集中させるために、現実的なフィードバックを提供し得る。
ハプティックフィードバックはまた、携帯電話、携帯情報端末(「PDA」)、スマートフォン、ポータブルゲーム機器および様々な他のポータブル電子機器などのポータブル電子機器に次第に組み込まれている。例えば、一部のポータブルゲームアプリケーションは、ハプティックフィードバックを提供するように構成される、より大きなスケールのゲームシステムと共に使用されるコントロールデバイス(例えばジョイスティックなど)と同じように振動できる。さらに、携帯電話およびPDAなどのデバイスは振動によりユーザに様々なアラートを提供できる。例えば、携帯電話は、着信している電話を振動によりユーザにアラートできる。同様に、PDAまたはスマートフォンは、予定したカレンダー項目をユーザにアラートまたは「to do」リストの項目もしくはスケジュール表についてのリマインダーをユーザに提供できる。
ますます、ポータブル機器は、タッチスクリーンのみのインターフェースを好んで物理的ボタンから離れていっている。この変化により、高い柔軟性、減少した部品コスト、および故障する傾向のある機械的ボタンに対する低い依存度が可能となり、製品設計の最新動向に沿う。タッチスクリーン入力デバイスを使用する場合、ボタンを押すことまたは他のユーザインターフェース作用などの機械的確認がハプティックを用いてシミュレートされ得る。
振動効果を生成するために、多くのデバイスがいくつかの種類のアクチュエータまたはハプティック出力デバイスを利用する。この目的のために使用されるアクチュエータには、偏心体がモータにより動かされる偏心回転体(「ERM」)、バネに取り付けられた本体が前後に駆動される線形共鳴アクチュエータ(「LRA」)などの電磁アクチュエータ、または圧電物質、電気活性高分子もしくは形状記憶合金などの「スマート材料」が含まれる。ハプティック出力デバイスはまた、静電気摩擦(「ESF」)デバイスまたは超音波表面摩擦(「USF」)デバイスなどのデバイス、あるいは超音波ハプティック変換器を備える音響放射圧を誘導するデバイスであってもよい。他のデバイスは、ハプティック基板およびフレキシブルまたは変形可能な表面、ならびに空気ジェットを使用した一吹きの空気などの突出したハプティック出力を提供するデバイスを使用する。これらのアクチュエータは強い大きさのハプティック出力を生成することができる。これらのアクチュエータはまた、タッチスクリーンデバイスのタッチセンサ式入力を作動する場合、ユーザにフィードバックを提供するために使用される。
一実施形態はハプティック効果を生成するシステムである。このシステムは、接触子/対象物によるインターフェース上の接触を検知する。次いでこのシステムは、接触子の1つまたは複数の特性を決定し、接触に応答してハプティック効果のタイプを生成する。ハプティック効果のタイプは1つまたは複数の特性に少なくとも基づく。
図1は、本発明の実施形態に係るハプティックイネーブルドシステムのブロック図である。 図2a〜dは、本発明の実施形態に係る接触子の特性に基づいて生成された例示的なハプティック効果の図である。 図3は、本発明の実施形態に係るハプティックフィードバック生成システムのブロック図である。 図4は、一実施形態に係るデバイスの入力領域と接触する対象物に応答してハプティック効果を生成する場合の図1のシステムの機能のフローチャートである。
一実施形態は、「接触子(コンタクタ、contactor)」(すなわち、インターフェースと接触する本体部分または対象物)により接触されるインターフェースを備えるシステムである。このシステムは、接触子の特性を決定し、その特性に基づいて変化し得るハプティック効果を生成する。したがって、このハプティック効果は、対象物/接触子がシステムと接触する場合はいつでも適応可能である。
図1は、本発明の一実施形態を実装し得るハプティックイネーブルド(ハプティック動作可能、haptically−enabled)モバイルデバイスまたはシステム10のブロック図である。システム10は、ハウジング15内に装着されたタッチセンサ式表面11または他のタイプのユーザインターフェースを含み、かつ機械的キー/ボタン13を含んでもよい。システム10に振動を生成するハプティックフィードバックシステムはシステム10内部にある。一実施形態において、振動は、タッチ表面11またはシステム10の任意の他の部分上で生成される。
ハプティックフィードバックシステムはプロセッサまたは制御装置12を含む。メモリ20およびアクチュエータ駆動回路16はプロセッサ12に接続され、その駆動回路16はアクチュエータ18に連結されている。プロセッサ12は任意のタイプの汎用目的のプロセッサであってもよく、あるいは、特定用途向け集積回路(「ASIC」)等、ハプティック効果を提供するように特定的に設計されたプロセッサであってもよい。プロセッサ12はシステム10全体を作動させる同じプロセッサであってもよく、または別個のプロセッサであってもよい。プロセッサ12は、何のハプティック効果が再生されるかを決定することができ、かつ、そうした効果が高レベルのパラメータに基づいて再生される順序を決定することができる。一般に、特定のハプティック効果を定義する高レベルのパラメータは、大きさ(強さ)、頻度(周波数)、および持続時間を含む。ストリーミングモーターコマンド等の低レベルパラメータもまた、特定のハプティック効果を決定するために用いられることができる。ハプティック効果は、そのハプティック効果が生成された場合にそれがこれらのパラメータの一部のバリエーションを含む場合、あるいはユーザのやり取りに基づいたこれらのパラメータのバリエーションを含む場合、動的であると想定してよい。
プロセッサ12はアクチュエータ駆動回路16に制御信号を出力し、この駆動回路16は電子構成要素および回路を備え、これらはアクチュエータ18に必要な電流および電圧(すなわち「モータ信号」)を供給するために使用されて、所望のハプティック効果を生じさせる。システム10は2つ以上のアクチュエータ18を備えてよく、各々のアクチュエータは別個の駆動回路16を備えてよく、それら全ては共通のプロセッサ12に連結される。メモリデバイス20は任意のタイプの保存デバイス、あるいはランダムアクセスメモリ(「RAM」)または読み出し専用メモリ(「ROM」)等のコンピュータ可読媒体であってもよい。メモリ20は、作動システム命令などのプロセッサ12によって実行される命令を保存する。命令の中でも、メモリ20は、プロセッサ12によって実行される場合に、以下により詳細に開示するように、接触子に基づいたハプティック効果を生成する命令であるハプティック効果生成モジュール22を含む。メモリ20はまたプロセッサ12内部に位置してよく、または、内部メモリおよび外部メモリの任意の組み合わせであってもよい。
タッチ表面11はタッチを認識し、また、表面上のタッチの位置および大きさも認識できる。タッチに対応するデータはプロセッサ12、またはシステム10内の別のプロセッサに送信され、プロセッサ12はタッチを解釈し、応答してハプティック効果信号を生成する。タッチ表面11は、容量検知、抵抗検知、表面音波検知、圧力検知、光学検知などを含む、任意の検知技術を使用してタッチを検知できる。タッチ表面11は、マルチタッチ接触を検知でき、同時に起こる複数のタッチを識別できる。タッチ表面11は、キー、ボタン、ダイアルなどとやり取りするユーザのための画像を生成し、表示するタッチスクリーンであってもよく、または最小の画像を有するもしくは画像を有さないタッチパッドであってもよい。
システム10は、携帯電話、携帯情報端末(「PDA」)、スマートフォン、コンピュータタブレット、ゲーム機などの携帯用デバイスであってもよく、またはユーザインターフェースを提供し、1つ以上のアクチュエータを含むハプティック効果システムを含む任意の他の種類のデバイスであってもよい。ユーザインターフェースは、タッチ高感度表面であってもよく、またはマウス、タッチパッド、ミニジョイスティック、スクロールホイール、トラックボール、ドアノブ、ゲームパッドまたはゲームコントローラなどの任意の他の種類のユーザインターフェースであってもよい。
アクチュエータ18は、偏心体がモータにより動かされる偏心回転体(Eccentric Rotating Mass)(「ERM」)、バネに取り付けられた本体が前後に駆動される線形共鳴アクチュエータ(Linear Resonant Actuator)(「LRA」)を含む、任意の種類のアクチュエータ、または圧電物質、電気活性高分子もしくは形状記憶合金などの「スマート材料」であってもよい。デバイス10は、振動ハプティックフィードバックを生成するために使用されるアクチュエータ18を例示しているが、ハプティック出力デバイスはまた、静電摩擦(「ESF」)、超音波表面摩擦(「USF」)を使用するデバイス、超音波ハプティック変換器を有する音響放射圧を含むデバイス、ハプティック基板およびフレキシブルもしくは変形可能な表面を使用するデバイス、空気ジェットを使用した一吹きの空気などの突出したハプティック出力を提供するデバイス、または非機械的もしくは非振動性デバイスの任意の種類であってもよい。
システム10はさらに1つ以上のセンサ28を含む。センサ28は、全体のデバイス加速度、ジャイロ情報、周囲情報または近接情報(例えば、インターフェース11に対する対象物の近接性)などのセンサデータおよびデバイスセンサ信号をプロセッサ12に提供する。デバイスセンサ信号は、加速度計もしくはジャイロスコープなどからの、デバイスにより有効にされる任意の種類のセンサ入力、またはマイクロフォン、光度計、温度計もしくは高度計などからの、任意の種類の周囲センサ信号、または皮膚もしくは体温、血圧(「BP」)、心拍モニタ(「HRM」)、脳波計(「EEG」)、もしくは電気皮膚反応(「GSR」)などの任意の種類のバイオモニタ、または離れて接続されたデバイスから受信される情報もしくは信号であってもよい。
上記のように、一実施形態において、システム10は、インターフェース11と接触する接触子または対象物のいくつかの特性を検出する。このプロセスは、センサ28により物理量を検知することおよびプロセッサ12による検知されたデータの解釈を含む。その特性を検知する1つの目的は接触子または接触子の態様を識別することである。
一実施形態において、デバイスの入力領域と接触する接触子/対象物の特性は、入力領域に対する対象物の衝突の音を分類することにより決定される。このアプローチは、ペンまたはタッチペンなどの受動的ツールを識別でき、それはまた、指の先端、指球、指関節、および爪などの指の異なる部分を識別できる。異なる物質が異なる音響学的特性を生じ、異なる共鳴周波数を有する。この実施形態の1つのコンポーネントは、光学、抵抗、および容量タッチスクリーンのうちの1つまたは複数を使用して対象物の位置を検出し、追跡する。この実施形態の第2のコンポーネントは、音響特性を使用して入力領域に対する対象物の衝突を聞き、セグメント化し、分類する。入力の分類が行われた後、それは入力領域からの最後の事象と対にされる。一実施形態は、対象物を識別するために表面音響伝達を使用する。
別の実施形態は、対象物を識別するために容量タッチ検知を使用する。電磁信号周波数掃引が対象物からの周波数の範囲をキャプチャするために使用される。結果として、実施形態は、一本の指、複数の指、または掌全体などのデバイスを保持する指の構造を決定できる。拡散した赤外線照射が、指の方向および手の形状などのタッチ寸法をキャプチャできる。
これらおよび他の実施形態は、デバイスの入力領域と接触する対象物を識別するために使用され、続いてユーザにハプティックフィードバックを提供する。ハプティックフィードバックは、デバイスの入力領域と接触する対象物の検知した特性に基づいて修正されてもよい。これは、一定のハプティック刺激を提供するか、または特定の事象の通知などの同じ目的の効果を生成する。以下の例は本発明の実施形態のいくつかの概念および特徴を示し、生成されたハプティック効果のタイプは接触子の特性に少なくとも部分的に基づく。
デバイスの入力領域は指球または指間接と接触でき、それらの両方は振動触覚フィードバックを生成する。しかしながら、指関節は指球より感受性が低くなり得るので、振動の強度は、図2aに示すように、その低い触覚感度を補償するために指関節について高くなってもよい。指関節についての波長はまた、平滑な波長を生成するように修正されてもよく、それによりフィードバックは、指関節においてネガティブに認識されることはない。なぜならいくつかの効果は、肉厚がある体の部分と対照的に骨ばった体の部分に適用されると不快であると知られているからである。
デバイスの入力領域は、指部分の代わりにペンシルまたはタッチペンと接触されてもよい。例えば、タブレットは、それに応じてフィードバックを適応するために触覚感度のその認識を使用できる。ペンシルまたはタッチペンは振動を減衰し得るので、より強いフィードバックを必要とする。他方で、他の振動パターンは、入力領域に対してタッチペンを不快に跳ね返らせてもよい。
さらに、接触子の特性により、ESFタイプのハプティック効果を感じることができず、減衰された振動を感じる、手袋をはめた手または指の検出が可能となる。一実施形態において、手袋は、可能な場合、接触子の音から、または容量タッチスクリーンへのタッチ入力を必要とせずに音もしくは振動による接触子の検出から検出されてもよい。この実施形態において、接触子の特性は手袋の特徴を含み、ハプティック効果はこの特性に基づいて選択されてもよい(例えば、振動に基づいたハプティック効果のみを選択し、大きさを増加させるので、振動は手袋を通して感じられる)。
ドアノブの形態の実施形態(すなわち、ドアノブが「インターフェース」である)が、例えば、ドアが緊急のためにのみ開かれなければならないことを示唆するために、ドアおよびその後の部屋の状態を示すようにハプティックフィードバックを生成してもよい。ドアノブは、ユーザの把持を検知でき、ドアノブで生成したハプティックフィードバック(例えば、振動)を適応できる。例えば、2つの指による緩い把持は、手全体による強い把持より弱いハプティック効果の力を必要としてもよい。あるいは、2つの指を使用する場合、フィードバックが開始してもよく、または手全体を使用する場合、フィードバックは辛うじて認識されてもよい。
本発明の実施形態は、ハプティックフィードバックを正規化でき、それにより同じ認識されるフィードバックが、使用される接触子に関わらず、ユーザにより受けられる。結果として、ハプティックフィードバックは、事象または特定の結果の通知などの同じ目的とする効果を生成する。
反対に、デバイスの入力領域と接触する対象物の検知した特性、または測定したパラメータはまた、適切で異なるハプティック効果を生成するためにアプリケーションのユーザインターフェースと併せて使用されてもよい。一例として、スマートフォンでのビデオゲームが、タップと指の爪または指関節とを識別してもよい。各対象物は、図2bに示すように、ユーザに対して異なるハプティックフィードバックを生成し、振動を生じる「ボタンを押す」シミュレーションのハプティック効果が、指の先端のタッチに応答して生成され、変形可能な表面に基づいたハプティック効果が指関節のタップに応答して生成される。より具体的な例において、指の爪を用いて、タッチスクリーンディスプレイ上に示された「バナナ」を薄く切ることは、指関節を用いて、タッチスクリーンディスプレイ上に示された「ココナッツ」を割る感覚と異なる感覚を感じる。なぜなら、2つの異なるタイプのハプティック効果が生成されるからである。したがって、ユーザに与えられる目的とする認識は、ユーザインターフェースにより生成される場合、各々の目的とする作用に関して異なる。
ハプティック効果はまた、対象物の正確な検出を確認するために使用されてもよい。一例として、指関節のタップが大きなハプティック効果を生成してもよく、一方で、指の爪のタップが連続した激しい振動を生成してもよい。したがって、入力の誤った解釈が、図2cに示すようにユーザに即座に明らかになり、ハプティック効果は、検出したタッチのタイプを示し、指関節のタップと間違えて指球のタップが検出された場合に気づくことを容易にする。別の例として、スライドするジェスチャーが、ESFを使用して異なるテクスチャ効果を生成してもよい。これは、適切または不適切に解釈される入力としてユーザにより即座に認識される。
デバイスの入力領域と接触する接触子/対象物のパラメータが測定され、解釈されて、フィードバックのための適切なモダリティを決定できる。一例として、フィードバック生成システムは、図2dに示すように、入力領域が指球またはタッチペンにより接触したかどうかに応じて、ESFと振動触覚フィードバックとの間でスイッチできる。入力領域が典型的なタッチペンにより接触された場合、ESFは使用されなくてもよい。なぜなら、ESFは、指、またはいくつかのタイプの専用のタッチペンもしくは無生物のみにより感じることができるからである。反対に、フィードバック生成システムは、タッチペンが振動触覚ハプティックフィードバックを感じることができないと決定する場合、視覚または聴覚フィードバックを使用できる。
図3は、本発明の実施形態に係るハプティックフィードバック生成システム300のブロック図である。一実施形態において、システム300の機能は図1のシステム10により実装される。ハプティックフィードバック生成システム300は、接触子検知コンポーネント310、解釈およびフィードバックコンポーネント320、ならびにハプティック出力コンポーネント330を含む。接触子検知コンポーネント310は、デバイスの入力領域または任意の他の領域と接触する接触子/対象物の特定の特性を検出できる。プロセッサは、接触子パラメータの物理量から送信されたデータを受信し、解釈する。実施形態は図3に示した一部または全てのコンポーネントを含んでもよい。
接触子検知コンポーネント310は、掃引周波数容量検知コンポーネント311を含む。容量検知は、単一周波数において信号を印加し、対象物の容量結合により引き起こされる帰還信号において任意の歪みを測定することにより対象物からの接触を検出する。掃引周波数容量検知は、周波数の範囲を走査し、結果を測定して容量プロファイルを得る。プロファイルの形状は、対象物と入力面との間の接触についての情報を提供し、それにより対象物を識別する。このプロファイルの形状は、手と機器を備えた表面との間の接触についての情報を提供できる。例えば、ドアノブは、単一の指のタッチ、2本の指のつまみ、円形の把持または完全な把持の間の相違を検出できる。スマートフォンは、単一の指のタッチ、2本の指のつまみまたは5本全ての指でのつまみの間の相違を検出できる。
接触子検知コンポーネント310は、聴覚検知コンポーネント312を含む。対象物と入力領域との間の接触により発せられる音は、マイクロフォンによりキャプチャされ、分析され得る。指球、指の先端、指関節、指の爪、およびペンの両端の間の相違が検出されてもよい。
接触子検知コンポーネント310は、振動検知コンポーネント313を含む。対象物と入力領域との間の接触により引き起こされる振動は、キャプチャされ、1つまたは複数の加速度計により分析される。
接触子検知コンポーネント310は、容量検知コンポーネント314を含む。容量センサは、指球と表面との間の接触の領域を決定できる。領域のサイズおよび形状の経時的な変化が指の姿勢を推定するために使用されてもよい。例えば、一端からゆっくり収縮する楕円領域により、指が平坦な向きから角度付けられた向きまで動いていることが示され得る。
接触子検知コンポーネント310は、指紋検知コンポーネント315を含む。指紋センサは、表面と接触する指球の部分を示すことができ、指の位置を推測するために使用され得る。例えば、指球の右側上の渦により、指球の左側が表面と接触していることを示すことができる。
ハプティックフィードバック生成システム300はまた、接触子の特性を解釈し、それらがハプティック出力に影響を与える方法を決定する、解釈およびフィードバックコンポーネント320を含む。解釈およびフィードバックコンポーネント320は、接触子の触覚特性(すなわち、対象物がデバイスの入力領域と接触する)に基づいて出力を修正する正規化コンポーネント321を含む。正規化コンポーネント321は、ハプティックフィードバックが均一であることを保証する。したがって、振動の強度は、一貫したハプティックフィードバックに戻すように接触子の異なる部分の触覚感度に基づいて修正され得る。例えば、振動の強度は、指−指球、指関節、爪などの異なる部分の触覚感度に基づいて修正されてもよい。同様に、感情的結果が、爪および指球についての刺激が両方、知覚の相違にもかかわらず、ポジティブとして認識されることを確実にするように考慮に入れられてもよい。ESFを使用する例において、指球の異なる部分の伝導性および乾燥度が、均一な応答を確実にするように考慮に入れられてもよい。
解釈およびフィードバックコンポーネント320は、ユーザインターフェースコンポーネント322を含む。ハプティックフィードバックの出力は、通常のユーザインターフェース操作と結びついている。ハプティックフィードバックは、ユーザインターフェースの接触子に応じた特性により変化することを必要とする。したがって、異なるユーザインターフェースの結果および状態は、それぞれの異なるハプティックフィードバックを導く。
解釈およびフィードバックコンポーネント320は、確認コンポーネント323を含む。検出された接触子は、異なるハプティック効果およびテクスチャに戻して反映され、誤った接触子検出に対する補正を容易にする。確認コンポーネント323は、検出誤差の影響を減少させ、現在の入力モードの改善された認識を提供し、それにより認知的負荷を減少させる。
解釈およびフィードバックコンポーネント320は、モダリティ選択コンポーネント324を含む。出力モダリティは、異なるコンテキストにおける接触子と好ましいモダリティとの間のマッピングに基づいて選択される。したがって、モダリティ選択コンポーネント324は、ハプティック認識の相違にかかわらず、全ての接触子に最適なフィードバックを提供する。
ハプティックフィードバック生成システム300はまた、ハプティック出力コンポーネント330を含む。ハプティック出力コンポーネント330(図1のアクチュエータ18など)のハプティックフィードバックは、限定されないが、振動アクチュエータ、ESFディスプレイ、電気触覚アレイ、および力フィードバックデバイスを含む。ハプティックフィードバックは、電子機器および関連するソフトウェア、例えば、デバイスの操作システムに対して内部または外部に存在し得るレンダリングエンジンを駆動する、1つまたは複数の物理的アクチュエータにより生成される。
図4は、一実施形態に係るデバイスの入力領域と接触する対象物に応答してハプティック効果を生成する場合の図1のシステム10の機能のフローチャートである。一実施形態において、図4のフローチャートの機能は、メモリまたは他のコンピュータ可読もしくは有形的表現媒体に保存されたソフトウェアにより実装され、プロセッサにより実行される。他の実施形態において、機能は、ハードウェアにより(例えば、特定用途向け集積回路(「ASIC」)、プログラマブルゲートアレイ(「PGA」)、フィールドプログラマブルゲートアレイ(「FPGA」)などの使用により)、またはハードウェアとソフトウェアの任意の組み合わせにより実施され得る。
402において、システム10は接触子によるデバイスとの接触を検知する。例えば、指またはタッチペンがタッチスクリーンと接触できる。
404において、システム10は接触子の1つまたは複数の特性を決定する。例えば、システムは、接触子が指球、指の爪もしくは指関節、またはタッチペン、ペンシル消しもしくはペンチップなどの無生物であるかどうかを決定できる。
406において、システムは接触に応答してハプティック効果のタイプを生成し、そのハプティック効果のタイプは1つまたは複数の特性に少なくとも基づく。ハプティック効果のタイプは、振動ハプティックデバイス、ESFデバイス、または変形可能なハプティックデバイスの間の選択などのハプティック出力デバイスの選択(すなわち、モダリティ)に基づいて他のハプティック効果と異なっていてもよい。さらに、ハプティック効果のタイプは、大きさ、周波数または持続時間パラメータなどのハプティック効果のパラメータを変化させることにより他のハプティック効果と異なっていてもよい。ハプティック効果が、接触子のタイプ/特性にかかわらず、ユーザに同じものを感じることを正規化されるように、パラメータは変化してもよい。
上記のように、タッチスクリーンと接触する場合、接触子の特性がハプティック効果を生成するために使用されてもよい。他の実施形態において、接触子の仮定される特性は、接触子が接触する前に使用されてもよい。ハプティック効果のタイプを生成する場合、現実的なハプティック効果のレンダリングが多くの場合、空間運動についての効果の進行を同期することにより行われる。例えば、機械的ボタンがその移動範囲内で動くと、運動感覚ハプティックが特定の力プロファイルを追跡してもよい。これは典型的に力の増加を含み、続いてボタンがトリガされると急速に低下する。同様の効果が振動触覚アクチュエータを用いて生成され得る。
他方で、タッチスクリーン上で、スクリーンに対して垂直に概念的に発生するシミュレートされたウィジェットの動作から生じるハプティック効果は、一般に、実際の移動の欠如に起因して一時的プロファイルに制限される。したがって、一実施形態において、図1のセンサ28は、デバイスのインターフェースと接触する前に接触子を検出するために使用され得る近接センサである。例えば、指球が表面に近づくにつれて、近位検知が空間偏向プロファイルを生成するために使用される。その効果は、タッチスクリーンに対する実際の影響が、偏向プロファイルの臨界時点において発生するように空間的に提示され得る。例えば、振動は、指がスクリーンに近づくにつれて徐々に増加し得、タッチスクリーンに対する影響が、ボタンが実際にトリガされた時点で発生し得る。
別の実施形態において、近接センサが、処理遅延を回避するために接触の前にハプティック出力デバイスをアクティブにするために使用される。例えば、ESFテクスチャが、指球がスクリーンと接触する前にアクティブにされてもよく、それにより、接触が発生するとすぐに、処理遅延を生じずに正確な効果が感じられる。この実施形態において、作動遅延ではなく、接触検出と出力のアクティブ化との間の処理遅延が計算され、これにより、ESFの場合、ほぼ即時になる。
別の実施形態において、システムは、近接センサにより決定される場合、接触事象の前の時間を使用して、接触入力の前に複雑な計算を実施する。例えば、接触される表面のモデルをロードするための時間が使用されてもよく、物理的シミュレーションを実施し、波形などのハプティック効果を作成する。
別の実施形態において、接触子がインターフェースと接触する前に接触子の特性が決定されるように、デフォルト接触子が決定される。上記で説明したように、近接センサは、次いで、ハプティック効果を決定するために接触子の特性と併せて使用されてもよい。接触子が、デフォルト接触子以外の何かであることがわかる場合、システムは対象物およびそれに応じた応答を適切に識別できる。例えば、第1のアクチュエータが、接触子の予測される接触に応答してアクティブにされてもよい。接触子が入力領域と接触する場合、第2のアクチュエータが、実際の接触子がデフォルトまたは仮定される接触子と異なる場合、実際の入力に応答してアクティブにされてもよい。
開示したように、接触子の特性は、接触子による接触に応答して生成するためにハプティック効果のタイプを決定するために使用される。そのタイプは、ハプティック効果が、接触子にかかわらず同様のものを認識されるように選択されてもよいか、または接触子の特性に応じた情報を提供するように選択されてもよい。
いくつかの実施形態を本明細書において具体的に示し、および/または記載している。しかしながら、開示された実施形態の修飾および変更は、上記の教示に含まれ、本発明の精神および意図した範囲から逸脱せずに添付の特許請求の範囲の範囲内であることは理解されるであろう。

Claims (10)

  1. デバイス(10)においてハプティック効果を生成する方法であって、
    接触子による前記デバイスとの接触を検知するステップと、
    前記接触子の1つまたは複数の特性を決定するステップと、
    前記接触に応答してハプティック効果のタイプを生成するステップであって、ハプティック効果のための複数のハプティック出力デバイスから、決定した前記特性との間のマッピングに基づいて1つのハプティック出力デバイス(18)を選択することによって生成され、前記ハプティック効果のタイプは少なくとも前記1つまたは複数の特性に基づく、ステップと、
    を含み、
    前記ハプティック効果のタイプは、前記接触子の1つまたは複数の特性に対して正規化され、ハプティックフィードバックが均一になるように前記接触子の1つまたは複数の特性に基づいて出力を修正する、方法。
  2. 前記ハプティック効果のタイプは、ハプティック効果のパラメータを決定することにより生成される、請求項1に記載の方法。
  3. 前記ハプティック効果は振動ハプティック効果であり、前記パラメータは大きさ、周波数または持続時間のうちの少なくとも1つを含む、請求項2に記載の方法。
  4. 前記複数のハプティック出力デバイスは、振動デバイス、静電摩擦デバイス、または変形可能な表面のうちの少なくとも1つを含む、請求項に記載の方法。
  5. 前記1つまたは複数の特性は、前記接触子が、指球、指の爪、指関節または無生物のうちの1つであることを示す、請求項に記載の方法。
  6. 前記ハプティック効果のタイプはさらに、少なくとも前記接触子の正確な検出の確認のために使用される、請求項1に記載の方法。
  7. 前記検知するステップは、前記デバイスに対する前記接触子の近接性を決定することを含み、前記検知するステップは接触の前に実施される、請求項1に記載の方法。
  8. 前記検知するステップは、前記デバイスのタッチ表面(11)からの信号を受信することを含む、請求項1に記載の方法。
  9. 保存された命令を有するコンピュータ読み取り可能媒体であって、プロセッサにより実行される場合、前記プロセッサに、請求項1〜のいずれか一項に記載の方法を実施させる、コンピュータ読み取り可能媒体。
  10. 接触子による接触を検知するインターフェース(11)と、
    前記接触子の1つまたは複数の特性を決定する接触子特性モジュール(310)と、
    接触に応答してハプティック効果のタイプを生成する前記インターフェースに接続されるハプティック出力デバイス(18)であって、前記ハプティック効果のタイプは少なくとも前記1つまたは複数の特性に基づく、ハプティック出力デバイス(18)と、
    プロセッサ(12)と、
    前記プロセッサ(12)に接続される請求項に記載のコンピュータ読み取り可能媒体と、
    を備えるシステム。
JP2014049292A 2013-03-14 2014-03-12 接触子に基づいたハプティックフィードバック生成 Expired - Fee Related JP6411756B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/803,103 US9436282B2 (en) 2013-03-14 2013-03-14 Contactor-based haptic feedback generation
US13/803,103 2013-03-14

Publications (2)

Publication Number Publication Date
JP2014179088A JP2014179088A (ja) 2014-09-25
JP6411756B2 true JP6411756B2 (ja) 2018-10-24

Family

ID=50287869

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014049292A Expired - Fee Related JP6411756B2 (ja) 2013-03-14 2014-03-12 接触子に基づいたハプティックフィードバック生成

Country Status (5)

Country Link
US (1) US9436282B2 (ja)
EP (1) EP2778847B1 (ja)
JP (1) JP6411756B2 (ja)
KR (1) KR20140113420A (ja)
CN (1) CN104049795B (ja)

Families Citing this family (79)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0905692D0 (en) * 2009-04-02 2009-05-20 Tno Touch sensitive device
WO2013059488A1 (en) * 2011-10-18 2013-04-25 Carnegie Mellon University Method and apparatus for classifying touch events on a touch sensitive surface
US9949890B2 (en) * 2013-03-15 2018-04-24 Sambhu Choudhury Garment with remote controlled vibration array
US10744060B2 (en) * 2013-03-15 2020-08-18 Sambhu Choudhury Garment with remote controlled vibration array
US10470971B2 (en) * 2013-03-15 2019-11-12 Sambhu Choudhury Garment with remote controlled vibration array
KR20140114766A (ko) 2013-03-19 2014-09-29 퀵소 코 터치 입력을 감지하기 위한 방법 및 장치
US9013452B2 (en) * 2013-03-25 2015-04-21 Qeexo, Co. Method and system for activating different interactive functions using different types of finger contacts
US9612689B2 (en) 2015-02-02 2017-04-04 Qeexo, Co. Method and apparatus for classifying a touch event on a touchscreen as related to one of multiple function generating interaction layers and activating a function in the selected interaction layer
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US20150242009A1 (en) * 2014-02-26 2015-08-27 Qeexo, Co. Using Capacitive Images for Touch Type Classification
KR101846256B1 (ko) * 2014-05-09 2018-05-18 삼성전자주식회사 필기감을 제공하는 촉각 피드백 장치 및 방법
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
US9665763B2 (en) * 2014-08-31 2017-05-30 Qualcomm Incorporated Finger/non-finger determination for biometric sensors
US9195879B1 (en) 2014-08-31 2015-11-24 Qualcomm Incorporated Air/object determination for biometric sensors
US9582705B2 (en) * 2014-08-31 2017-02-28 Qualcomm Incorporated Layered filtering for biometric sensors
KR102373337B1 (ko) 2014-09-02 2022-03-11 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
GB2530036A (en) 2014-09-09 2016-03-16 Ultrahaptics Ltd Method and apparatus for modulating haptic feedback
US9329715B2 (en) 2014-09-11 2016-05-03 Qeexo, Co. Method and apparatus for differentiating touch screen users based on touch event analysis
US11619983B2 (en) 2014-09-15 2023-04-04 Qeexo, Co. Method and apparatus for resolving touch screen ambiguities
US10606417B2 (en) 2014-09-24 2020-03-31 Qeexo, Co. Method for improving accuracy of touch screen event analysis by use of spatiotemporal touch patterns
US9791929B2 (en) * 2014-10-31 2017-10-17 Elwha Llc Tactile control system
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US9971406B2 (en) * 2014-12-05 2018-05-15 International Business Machines Corporation Visually enhanced tactile feedback
FR3030070B1 (fr) * 2014-12-15 2018-02-02 Dav Dispositif et procede de commande pour vehicule automobile
CN104598106A (zh) * 2014-12-31 2015-05-06 深圳市金立通信设备有限公司 一种终端
CA2976319C (en) 2015-02-20 2023-06-27 Ultrahaptics Ip Limited Algorithm improvements in a haptic system
KR20160120560A (ko) 2015-04-08 2016-10-18 현대자동차주식회사 사용자 입력 인식장치 및 방법
DE102015006605B3 (de) 2015-05-21 2016-09-22 Audi Ag Bedienvorrichtung und Verfahren zum Ansteuern von Funktionseinheiten eines Kraftfahrzeugs und Kraftfahrzeug
US10818162B2 (en) 2015-07-16 2020-10-27 Ultrahaptics Ip Ltd Calibration techniques in haptic systems
CN105183217B (zh) * 2015-08-20 2016-11-09 京东方科技集团股份有限公司 触控显示设备及触控显示方法
US10642404B2 (en) 2015-08-24 2020-05-05 Qeexo, Co. Touch sensitive device with multi-sensor stream synchronized data
WO2017043400A1 (ja) 2015-09-08 2017-03-16 ソニー株式会社 情報処理装置、方法およびコンピュータプログラム
DE102015012178A1 (de) 2015-09-16 2017-03-16 e.solutions GmbH Berührungsempfindliche Vorrichtung mit haptischer Rückmeldung
JP6100355B1 (ja) * 2015-12-15 2017-03-22 レノボ・シンガポール・プライベート・リミテッド キーボード及びその制御方法
CN105892746A (zh) * 2016-03-31 2016-08-24 联想(北京)有限公司 一种触控方法以及电子设备
US20170285774A1 (en) * 2016-04-01 2017-10-05 Kunjal Parikh Characterization and simulation of writing instruments
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
CN105997252A (zh) * 2016-06-20 2016-10-12 深圳市罗伯医疗科技有限公司 机器人在手术中反馈触摸力的方法和机器人
US10268275B2 (en) 2016-08-03 2019-04-23 Ultrahaptics Ip Ltd Three-dimensional perceptions in haptic systems
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
US10564724B1 (en) * 2016-09-20 2020-02-18 Apple Inc. Touch-based input device with haptic feedback
US10452145B2 (en) * 2016-11-14 2019-10-22 Immerson Corporation Systems and methods for haptically-enhanced smart home architectures
US11531395B2 (en) 2017-11-26 2022-12-20 Ultrahaptics Ip Ltd Haptic effects from focused acoustic fields
US10725549B2 (en) * 2018-03-29 2020-07-28 Cirrus Logic, Inc. Efficient detection of human machine interface interaction using a resonant phase sensing system
US10921159B1 (en) 2018-03-29 2021-02-16 Cirrus Logic, Inc. Use of reference sensor in resonant phase sensing system
US10908200B2 (en) 2018-03-29 2021-02-02 Cirrus Logic, Inc. Resonant phase sensing of resistive-inductive-capacitive sensors
US11092657B2 (en) 2018-03-29 2021-08-17 Cirrus Logic, Inc. Compensation of changes in a resonant phase sensing system including a resistive-inductive-capacitive sensor
US10642435B2 (en) 2018-03-29 2020-05-05 Cirrus Logic, Inc. False triggering prevention in a resonant phase sensing system
US11537242B2 (en) 2018-03-29 2022-12-27 Cirrus Logic, Inc. Q-factor enhancement in resonant phase sensing of resistive-inductive-capacitive sensors
KR20210002703A (ko) 2018-05-02 2021-01-08 울트라햅틱스 아이피 엘티디 개선된 음향 전송 효율을 위한 차단 플레이트 구조체
US20190384394A1 (en) * 2018-06-15 2019-12-19 Immersion Corporation Method and apparatus for providing resistive feedback
US11709550B2 (en) * 2018-06-19 2023-07-25 Sony Corporation Information processing apparatus, method for processing information, and program
US11009989B2 (en) 2018-08-21 2021-05-18 Qeexo, Co. Recognizing and rejecting unintentional touch events associated with a touch sensitive device
US10852831B2 (en) * 2018-11-26 2020-12-01 Zinitix Co., Ltd. User interface device driving chip for providing improved input feedback and electronic device using the same
CN109669612A (zh) * 2018-11-29 2019-04-23 惠州Tcl移动通信有限公司 移动终端控制方法、装置、移动终端及存储介质
US10948313B2 (en) 2019-02-26 2021-03-16 Cirrus Logic, Inc. Spread spectrum sensor scanning using resistive-inductive-capacitive sensors
US11536758B2 (en) 2019-02-26 2022-12-27 Cirrus Logic, Inc. Single-capacitor inductive sense systems
US11402946B2 (en) 2019-02-26 2022-08-02 Cirrus Logic, Inc. Multi-chip synchronization in sensor applications
US10935620B2 (en) 2019-02-26 2021-03-02 Cirrus Logic, Inc. On-chip resonance detection and transfer function mapping of resistive-inductive-capacitive sensors
JP7207017B2 (ja) * 2019-03-01 2023-01-18 株式会社デンソー 入力装置
US11842517B2 (en) 2019-04-12 2023-12-12 Ultrahaptics Ip Ltd Using iterative 3D-model fitting for domain adaptation of a hand-pose-estimation neural network
US10942603B2 (en) 2019-05-06 2021-03-09 Qeexo, Co. Managing activity states of an application processor in relation to touch or hover interactions with a touch sensitive device
US11231815B2 (en) 2019-06-28 2022-01-25 Qeexo, Co. Detecting object proximity using touch sensitive surface sensing and ultrasonic sensing
US11079874B2 (en) 2019-11-19 2021-08-03 Cirrus Logic, Inc. Virtual button characterization engine
US11715453B2 (en) 2019-12-25 2023-08-01 Ultraleap Limited Acoustic transducer structures
US11592423B2 (en) 2020-01-29 2023-02-28 Qeexo, Co. Adaptive ultrasonic sensing techniques and systems to mitigate interference
US11579030B2 (en) 2020-06-18 2023-02-14 Cirrus Logic, Inc. Baseline estimation for sensor system
US11816267B2 (en) 2020-06-23 2023-11-14 Ultraleap Limited Features of airborne ultrasonic fields
US11868540B2 (en) 2020-06-25 2024-01-09 Cirrus Logic Inc. Determination of resonant frequency and quality factor for a sensor system
US11835410B2 (en) 2020-06-25 2023-12-05 Cirrus Logic Inc. Determination of resonant frequency and quality factor for a sensor system
DE102020004363A1 (de) * 2020-07-20 2022-01-20 Daimler Ag Verfahren zum Erzeugen einer haptischen Rückmeldung
WO2022058738A1 (en) 2020-09-17 2022-03-24 Ultraleap Limited Ultrahapticons
US11619519B2 (en) 2021-02-08 2023-04-04 Cirrus Logic, Inc. Predictive sensor tracking optimization in multi-sensor sensing applications
US11821761B2 (en) 2021-03-29 2023-11-21 Cirrus Logic Inc. Maximizing dynamic range in resonant sensing
US11808669B2 (en) 2021-03-29 2023-11-07 Cirrus Logic Inc. Gain and mismatch calibration for a phase detector used in an inductive sensor
US11507199B2 (en) 2021-03-30 2022-11-22 Cirrus Logic, Inc. Pseudo-differential phase measurement and quality factor compensation
US11979115B2 (en) 2021-11-30 2024-05-07 Cirrus Logic Inc. Modulator feedforward compensation
US11854738B2 (en) 2021-12-02 2023-12-26 Cirrus Logic Inc. Slew control for variable load pulse-width modulation driver and load sensing
JP7444939B1 (ja) 2022-09-08 2024-03-06 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、及び制御方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003065192A1 (en) 2002-01-31 2003-08-07 Nokia Corporation Method, system and device for distinguishing pointing means
US7890863B2 (en) 2006-10-04 2011-02-15 Immersion Corporation Haptic effects with proximity sensing
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
TWI340338B (en) * 2007-05-15 2011-04-11 Htc Corp Method for identifying the type of input tools for a handheld device
KR101424259B1 (ko) * 2007-08-22 2014-07-31 삼성전자주식회사 휴대단말에서 입력 피드백 제공 방법 및 장치
US8098235B2 (en) * 2007-09-28 2012-01-17 Immersion Corporation Multi-touch device having dynamic haptic effects
TW200930015A (en) 2007-12-26 2009-07-01 Htc Corp A user interface of portable device and operating method thereof
US8525802B2 (en) * 2008-03-31 2013-09-03 Lg Electronics Inc. Portable terminal capable of sensing proximity touch and method for providing graphic user interface using the same
GB2462465B (en) * 2008-08-08 2013-02-13 Hiwave Technologies Uk Ltd Touch sensitive device
JP5309793B2 (ja) * 2008-08-27 2013-10-09 日本電気株式会社 タッチパネル振動方法およびタッチパネル装置
US20100156823A1 (en) * 2008-12-23 2010-06-24 Research In Motion Limited Electronic device including touch-sensitive display and method of controlling same to provide tactile feedback
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
GB0905692D0 (en) * 2009-04-02 2009-05-20 Tno Touch sensitive device
US8224392B2 (en) * 2009-04-29 2012-07-17 Lg Electronics Inc. Mobile terminal capable of recognizing fingernail touch and method of controlling the operation thereof
US8378798B2 (en) * 2009-07-24 2013-02-19 Research In Motion Limited Method and apparatus for a touch-sensitive display
CN102339123B (zh) * 2010-07-14 2014-10-29 Tcl集团股份有限公司 根据接触面积控制振动的方法
US20120032891A1 (en) * 2010-08-03 2012-02-09 Nima Parivar Device, Method, and Graphical User Interface with Enhanced Touch Targeting
EP2603844B1 (en) * 2010-08-12 2020-05-20 Google LLC Finger identification on a touchscreen
US8674961B2 (en) * 2011-01-31 2014-03-18 National Semiconductor Corporation Haptic interface for touch screen in mobile device or other device
US20120256848A1 (en) * 2011-04-08 2012-10-11 Research In Motion Limited Tactile feedback method and apparatus
WO2013036614A1 (en) * 2011-09-06 2013-03-14 Immersion Corporation Haptic output device and method of generating a haptic effect in a haptic output device
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US8493354B1 (en) * 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9063570B2 (en) * 2012-06-27 2015-06-23 Immersion Corporation Haptic feedback control system
US8743072B2 (en) * 2012-09-28 2014-06-03 Lg Electronics Inc. Display device and control method thereof
US9715300B2 (en) * 2013-03-04 2017-07-25 Microsoft Technology Licensing, Llc Touch screen interaction using dynamic haptic feedback

Also Published As

Publication number Publication date
KR20140113420A (ko) 2014-09-24
EP2778847B1 (en) 2017-05-03
EP2778847A3 (en) 2014-10-22
US9436282B2 (en) 2016-09-06
CN104049795A (zh) 2014-09-17
CN104049795B (zh) 2019-02-22
JP2014179088A (ja) 2014-09-25
US20140267065A1 (en) 2014-09-18
EP2778847A2 (en) 2014-09-17

Similar Documents

Publication Publication Date Title
JP6411756B2 (ja) 接触子に基づいたハプティックフィードバック生成
JP6546301B2 (ja) 動的な触覚効果を有するマルチタッチデバイス
JP6431126B2 (ja) モバイルデバイス上での共有されたフィードバックのための双方向性モデル
CN104679233B (zh) 用于生成摩擦和振动触感效果的系统和方法
US8031172B2 (en) Method and apparatus for wearable remote interface device
CN100587657C (zh) 用于基于触觉反馈和压力测量的触摸屏交互的设备和方法
US10379614B2 (en) Non-collocated haptic cues in immersive environments
KR20180041049A (ko) 상황 압력 감지 햅틱 응답
EP3096206A1 (en) Haptic effects based on predicted contact
US20120223880A1 (en) Method and apparatus for producing a dynamic haptic effect
JP2016081524A (ja) リジッド部品を有し、触覚を利用可能で変形可能な装置
WO2013104919A1 (en) Haptic feedback and pressure sensing
WO2018009788A1 (en) Multimodal haptic effects
JP2017174211A (ja) ペン型入力装置、及び、電子機器

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170926

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171219

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20180403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180801

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20180808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180904

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180927

R150 Certificate of patent or registration of utility model

Ref document number: 6411756

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees