JP6203637B2 - 触覚型フィードバックを備えたユーザインタフェース - Google Patents

触覚型フィードバックを備えたユーザインタフェース Download PDF

Info

Publication number
JP6203637B2
JP6203637B2 JP2013537241A JP2013537241A JP6203637B2 JP 6203637 B2 JP6203637 B2 JP 6203637B2 JP 2013537241 A JP2013537241 A JP 2013537241A JP 2013537241 A JP2013537241 A JP 2013537241A JP 6203637 B2 JP6203637 B2 JP 6203637B2
Authority
JP
Japan
Prior art keywords
user interface
interaction surface
directional
actuator
actuators
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013537241A
Other languages
English (en)
Other versions
JP2013541789A5 (ja
JP2013541789A (ja
Inventor
マーク トーマス ジョンソン
マーク トーマス ジョンソン
デ スライス バーテル マリヌス ファン
デ スライス バーテル マリヌス ファン
ディルク ブロッケン
ディルク ブロッケン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2013541789A publication Critical patent/JP2013541789A/ja
Publication of JP2013541789A5 publication Critical patent/JP2013541789A5/ja
Application granted granted Critical
Publication of JP6203637B2 publication Critical patent/JP6203637B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Description

本発明は、触覚型フィードバックを与えるためのアクチュエータを備えたユーザインタフェースに関する。更に、斯様なユーザインタフェースを有する装置、及び、触覚型フィードバックを与えるための方法に関する。
米国特許出願公開第2010/0231508号明細書は、触覚型フィードバックをユーザに与えるためのアクチュエータを有するデバイス(例えば携帯電話)を開示している。それ故、デバイスのディスプレイは、例えば、前記ディスプレイ上に示されるオブジェクトの現実のテクスチャに似ている触覚的外観により提供され得る。
この背景に基づいて、本発明の目的は、ユーザとデバイスとの間のインタラクションを更に向上させるための手段を提供することである。
この目的は、請求項1のユーザインタフェース、請求項2の方法及び請求項15の装置により達成される。好ましい実施形態は、従属請求項において開示される。
その第1の態様によれば、本発明は、ユーザインタフェース、即ち、人間とマシンとの間のインタラクションを伝達するデバイスに関する。例えば、ユーザインタフェースは、ユーザが装置に対してコマンド及び/若しくは情報を入力することを可能にしてもよく、又は、装置は、ユーザインタフェースを介して情報を出力してもよい。本発明のユーザインタフェースは、以下のコンポーネントを有する。
a)ユーザにより接触され得る表面であって、この表面を介して、ユーザとユーザインタフェースの間のインタラクションが生じる、表面。この理由のため、前記表面は、以下において"インタラクション表面"と呼ばれるだろう。インタラクション表面は、例えばユーザにより操作される機器の助けを借りて、任意の恣意的な手段において概して触れられてもよい。最も好ましくは、インタラクション表面は、ユーザの1又はそれ以上の指により接触されるのに適している。
b)触覚型フィードバックをユーザに提供するために前述のインタラクション表面において配置されるアクチュエータのアレイ。"アクチュエータ"という用語は、通常通り、例えば動作(例えばシフト、曲げ、縮小、拡大等)を介して及び/若しくは力を及ぼすことにより、要素、ユニット、又は、その環境と能動的及び機械的にインタラクトし得るデバイスを意味すべきである。本発明の文脈におけるアクチュエータは典型的に小さいだろう。例えば、インタラクション表面において、約10×10mmよりも小さいエリア、好ましくは、約1mmよりも小さいエリアを占有する。更に、"アレイ"という用語は、概して、要素の任意の規則的又は不規則な空間配列を意味する。本発明の文脈において、アレイは、典型的には、アクチュエータ(例えばマトリックス配列)の規則的な一又は二次元の配列を有するだろう。
c)接触しているユーザに対する指向性触覚型感覚を生成するように、連係した態様でアクチュエータ(の全て又は少なくともその部分)を起動させることが可能なコントローラ。コントローラは、例えば、専用の電子ハードウェア、関連ソフトウェアを有するデジタルデータ処理ハードウェア又はこれら双方の混合において実現されてもよい。
定義により、"指向性触覚型感覚"は、人が空間方向を導出し得る触覚型感覚である(複数の人に渡る平均化は、前記方向対象の定義を作ることができる)。(代表的な)人により感じられる方向は、通常、アクチュエータの幾つかの異方性の動作(例えば、前記方向における連係した動作)により生成されるだろう。日常生活において、"指向性触覚型感覚"は、典型的には、(例えば人が回転しているディスクに触れたときの)オブジェクトとそれに触れている人との間の相対的な動作により生成される。アクチュエータのアレイに触れているユーザに対して適当な位置に固定されたままであるアクチュエータのアレイは、例えば、タッチポイントの動作がユーザにとって(仮想の)オブジェクトの動作のように感じるように、ユーザとアレイとの間のタッチポイントをシフトさせることにより、指向性触覚型感覚を生成してもよい。
第2の態様によれば、本発明は、アクチュエータのアレイを備えたインタラクション表面に接触しているユーザに触覚型フィードバックを与える方法に関する。本方法は、指向性触覚型感覚を生成するように、前記アレイのアクチュエータの連係した起動を有する。
本方法は、一般的な形式において、前記の種類のユーザインタフェースで実行され得るステップを形成する。それ故、この方法の詳細に関するより多くの情報のために上記の説明が参照される。
前記のユーザインタフェース及び方法は、インタラクション表面におけるアクチュエータのアレイが指向性触覚型感覚を生成するのに用いられるという利点を有する。本発明の好ましい実施形態を参照してより詳細に後述されるように、斯様な指向性フィードバックは、ユーザがユーザインタフェースとインタラクトしたときにユーザに追加の情報を与えるために、及び/又は、より現実的な/自然なフィードバックをユーザに提供するために、有利に用いられ得る。
以下で述べられる本発明の好ましい実施形態は、前記のユーザインタフェース及び方法に適用可能である。
第1の好ましい実施形態によれば、インタラクション表面は、ユーザにより接触される少なくとも1つのタッチポイントの可能な動作及び/又は位置を決定するために適合される。この決定は、任意の適切な手段により(例えば機械プレスされているボタンの助けを借りて)、実現され得る。最も好ましくは、決定は、タッチスクリーン又はタッチパッドから知られている種々の原理及びテクノロジに従って機械的コンポーネントを移動させることなく行われる。これらの方法は、例えば、抵抗、容量性、音響又は光学測定を含み、これにより、タッチポイントの位置が決定され得る。
タッチポイント及び/又はその動作の決定が情報を入力するために用いられてもよい。例えば、タッチポイントの位置は、特定の文字、シンボル又は(キーボード上のような)コマンドに対応してもよい。あるいは、タッチポイントの動作は、(仮想)スライド制御、メニューにおけるスクロール動作等の、幾つかの表示された画像の対応する動作を開始するために用いられてもよい。
第1の好ましい実施形態の更なる開発によれば、少なくとも1つのタッチポイントの動作及び/又は位置に依存する領域内に配置されたアクチュエータだけが、指向性触覚型感覚を与えるために起動される。典型的に、アクチュエータの全体のアレイの全てのアクチュエータが、ユーザに対して触覚型フィードバックを与えるために必要とされる(及び可能である)というわけではない。ユーザにより現在接触されているものだけである。関連するアクチュエータのこのグループは、少なくとも1つのタッチポイントの位置に依存して決定され得る。現在のタッチポイントの可能な動作は、次に触れられるであろうインタラクション表面上の領域を予測するために用いられることができ、最も有利には、起動されたアクチュエータの領域を有するタッチポイントを追跡することを可能にする。
第1の好ましい実施形態の他の開発によれば、指向性触覚型感覚の方向は、少なくとも1つのタッチポイントの可能な動作及び/又は位置に依存する。タッチポイントの動作が例えばインタラクション表面上に表示された画像をシフトさせるために用いられたときに、指向性触覚型感覚は、現実のオブジェクトが適宜シフトされるときに生成するフリクションをシミュレートするようなものであり得る。
本発明の他の実施形態において、指向性触覚型感覚は、インタラクション表面上の所与の位置に指向される。所与の位置は、一定であってもよく、又は、オプションとして、ユーザインタフェース若しくは関連する装置の幾つかの内部状態に依存していてもよい。
例えば、前述の"所与の位置"は、インタラクション表面上の幾つかの(仮想の)キー又はコントロールノブの静止位置に対応してもよい。ユーザがこの位置の外側でインタラクション表面に触ったときには、指向性触覚型感覚は、キー又はコントロールノブまでユーザをガイドしてもよい。他の例では、指向性触覚型感覚は、所望の結果を実現するために、例えば音楽プレーヤ量を減少させるために、幾つかのコントロールノブ(仮想の)又はスライダがオン/オフされなければならないか又は移動されなければならない方向を示すために用いられてもよい。時間変化可能な"所与の位置"の例示的な場合は、例えば音楽プレーヤのボリューム制御、調光可能なランプの光強度などにおける、(仮想の)スライド制御の最後に設定された位置である。ユーザが盲目的にユーザインタフェースを操作するときには、ユーザガイダンスの述べられた手順は特に有用である。
本発明の他の実施形態において、指向性触覚型感覚は、幾つかの所与の中心に対して、例えば、インタラクション表面の中心に対して、又は、ユーザがインタラクション表面に接触するタッチポイントに対して、放射状に内方に又は放射状に外方に指向される。斯様な放射触覚型感覚は、特に、幾つかのオブジェクトの縮小又は拡大に関する動作を示すために用いられてもよく、(仮想の)平面外のインタラクションを提案するために用いられてもよい。
インタラクション表面は、好ましくは、画像、グラフィックス、テキスト等を動的に表すための幾つかの画像表示の上に配置されてもよい。表示は、入力動作等について視覚的フィードバックを与えるために、コントロールボタン、キー、スライダ、ホイール等を静的に又は動的に表示するために、ユーザに対して追加の視覚の情報を与えるために用いられてもよい。
前述の実施形態の更なる開発によれば、アクチュエータにより生成された指向性触覚型感覚は、ディスプレイ上に示される画像シーケンス及び/又は画像に相関する。画像が例えばインタラクション表面上の幾つかの位置にあるボタンを示す場合、触覚型感覚の方向は、この位置に向かって配向されてもよい。他の例では、画像シーケンスは、インタラクション表面に渡る幾つかの(仮想の)オブジェクトの動作を示してもよく、指向性触覚型感覚は、道が伝達するように現実のオブジェクトが移動する摩擦の感覚に対応してもよい。更に他の例において、指向性触覚型感覚は、優先プリセットに、又は、システムが現在の状況に最も関連すると勧める設定の方へ、ユーザをガイドすることができる。
ディスプレイを備えた実施形態の他の開発において、指向性触覚型感覚は、表示された画像の拡大又は縮小に相関される。この手法において、画像のズームイン又はズームアウトは、例えば、対応する現実的な(摩擦の)感覚により付随され得る。ユーザが例えば2以上の指の連係した動作により斯様なズームイン又はズームアウトを開始したときには、これらの指に対して触覚型感覚により伝えられる方向は、現実のオブジェクトが適宜広げられるか(ズームイン)又は圧縮された(ズームアウト)ときに発生する力に対応してもよい。
指向性触覚型感覚を生成するアクチュエータは、任意の適切なテクノロジにより実現されてもよい。最も好ましくは、アクチュエータは、構成変更が電界により誘発され得る電気活性材料を有してもよい。斯様な材料の特に重要な例は、電気活性ポリマ(EAP;electroactive polymer)、好ましくは外部の電界においてその幾何学的形状を変える誘電電気活性ポリマである。EAPの例は、文献(例えば、Bar-Cohen, Y.: "Electroactive polymers as artificial muscles: reality, potential and challenges", SPIE Press, 2004、Koo, I.M., et al.: "Development of Soft-Actuator-Based Wearable Tactile Display", IEEE Transactions on Robotics, 2008, 24(3): p. 549-558、Prahlad, H., et al.: "Programmable surface deformation: thickness-mode electroactive polymer actuators and their applications", in "Dielectric Elastomers as Electromechanical Transducers; Fundamentals, materials, devices, models and applications of an emerging electroactive polymer technology"、F. Carpi, et al., Editors. 2008, Elsevier. p. 227-238; US-2008 0289952 A;全ての文書は参照により本願に組み込まれる)において見つけられ得る。
また、指向性触覚型感覚は、オプションとして、アクチュエータの段階的な起動により生成されてもよい。段階的な起動は、それぞれのアクチュエータの動作のうちの少なくとも3つの度合い又は状態(即ち、オン/オフ状態だけではない)があり、これらの度合い/状態が指向性触覚型感覚を生成するために用いられることを必要とする。起動の度合いは、例えば一方向へ単調に変化(増減)してもよく、それ故、この方向をマークする。起動の度合いが例えばアクティベータが上昇する平面外の高さと相関する場合には、段階的な起動は、所与の方向において傾斜するインタラクション表面上に領域を生成するために用いられ得る。概して、起動の異なる度合いの使用は、指向性情報が静的な起動パターンによって表され得るという利点を有する。
本発明の他の実施例によれば、アクチュエータは、インタラクション表面に接触しているオブジェクトと前記インタラクション表面との間の摩擦を変える(調整する)ために起動されてもよい。アクチュエータの起動は、例えば、インタラクション表面に触れているオブジェクトの動作に対して追加の抵抗を生成してもよい。生成された摩擦が異方性である場合、これは、指向性触覚型感覚を伝達するために用いられ、例えば相対的な動作に対して最小の摩擦を介して一方向を区別する。抵抗又は摩擦は、例えば、インタラクション表面の平滑性を変えることにより生成又は調整されてもよい。
異方性の摩擦を生成するオプションの手段は、異なる方向において異なる表面粗さをもたらすインタラクション表面上のパターンの実現を有する。平行ラインのパターンは、例えば、直交における高い摩擦及び軸方向における低い摩擦を示してもよい。異方性の摩擦を生成する他のオプションの手段は、接触しているポイントで実現される、異なる粗さの2つのエリアの間の遷移を有してもよい。そして、移動している指は、その動作の方向に依存してより高いか又はより低い粗さ(及び生じる異なる摩擦)を体験するだろう。
更に、本発明は、上述した種類のユーザインタフェースを有する装置に関する。この装置は、特に、携帯電話、遠隔制御装置、ゲーム機、又は、ランプの色及び/若しくは強度が制御され得る光コントローラであってもよい。
本発明のこれらの及び他の態様は、以下で述べられる実施形態から明らかになり、これらの実施形態を参照して説明されるだろう。これらの実施形態は、添付の図面の補助によって例証として述べられるだろう。
本発明によるユーザインタフェースの模式的な横断面を示す。 特定の位置での指向性触覚型感覚の生成を示す。 所与の位置に向かって指向され、タッチポイントでの移動活性パターンによる指向性触覚型感覚の生成を示す。 アクチュエータの段階的な起動による指向性触覚型感覚の生成を示す。 摩擦のフィードバックによる指向性触覚型感覚の生成を示す。 2つのタッチポイントでの指向性触覚型感覚の生成を示す。 アクチュエータアレイ上の放射状内方の触覚型感覚を示す。 EAPアクチュエータの一次元アレイの上面図を示す。 EAPアクチュエータの二次元アレイの上面図を示す。
100の整数倍数により異なっている類似の参照番号は、図において、同一又は類似のコンポーネントを参照する。
ディスプレイベースのユーザインタフェース(UI)デバイス上の再構成可能なUIの主要な要求の1つは、インタラクション表面に渡って指を正しく正確にナビゲートする能力である。加えて、マルチフィンガー状のUIパラダイム(例えば、ズーム及び引き伸ばしの特徴)の導入は、正確なユーザインタラクションをますます挑戦的なものにする。
ユーザ研究から、多くの人々は、所与の触覚のフィードバックの欠如のため、タッチセンシティブUI要素又はタッチスクリーンを操作したときに、減少したレベルの"制御の感覚"のを有することが知られている。"制御の感覚"のこの欠如は、動作の間、より多くのユーザエラーをもたらすことを示した。更に、タッチスクリーンは、これらを見ることなく操作され得ない。これは、多くのユーザインタフェース(照明規制、モバイルメディアプレーヤ、TV遠隔制御装置など)が好ましくは盲目的に操作されるので、欠点である。
上記の考慮事項からみて、(指の)ガイド及び引き伸ばしの特徴を特徴とする触覚型ユーザインタフェースが提案される。触覚表面は、例えば、波のように表面(2D)に渡って広がる"小さい丘"の形で動的に調節可能な表面形状を生成するように構成され得る。伝播する波は、表面上の或る点に指をガイドするか、複数の指を表面に渡って伸張するか、又は代わりに、表面に渡る指の動作に"摩擦抵抗"を与えるために用いられる。指の位置から離れるように移動する2以上の伝播する波は、(例えば、階層メニュー又はフォルダ構造をナビゲートするときに、又は、ユーザインタフェースにおける特定のパラメータを制御しているスライダが微調整モードに切り替わるときに)エリア上に"落ちる"か若しくは"ズームインする"か又は1レベル深いところに進む感覚を生成するために用いられ得る。同様に、指に向かって移動する波は反対の効果を生成するために用いられ、上若しくは後方へ進むか又はズームアウトする感覚を生成する。
図1は、上記の一般的な原理に従って設計されたユーザインタフェース100の断面図を概略的に示している。ユーザインタフェース100は、特に画像ディスプレイ(例えば、LCD、(O)LEDディスプレイなど)であり得るか又は画像ディスプレイを有し得る担体又は基板110を有する。基板/ディスプレイ110は、その上部上に、(少なくとも)一方向(示された座標系によればx方向)において延在する個々アクチュエータ120a, ... 120k, ... 120zのアレイ120を担持する。アレイ120は、ユーザの指でユーザにより触れられ得るインタラクション表面Sを構成する。
アレイ120のアクチュエータは、特に、電気活性ポリマ(EAP)、好ましくは("人工筋肉"としても知られる)外部電界においてその幾何学的形状を変える誘電電気活性ポリマであり得るか又はこれを有し得る。これらのアクチュエータは、直接的な電気刺激により直立方向において構造化される多くのポリマ層からの表面モーフィングを可能にする。異なるアクチュエータセットアップは、上方への動作をもたらすようにこれを行うことが提案され(Koo, Jung et al., Development of soft-actuator-based wearable tactile display, IEEE Trans. Robotics, vol. 24, no. 3 (June 2008), pp. 549-558)、又はダウンロードされる(Prahlad, H., et al.: "Programmable surface deformation: thickness-mode electroactive polymer actuators and their applications", in "Dielectric Elastomers as Electromechanical Transducers; Fundamentals, materials, devices, models and applications of an emerging electroactive polymer technology", F. Carpi, et al., Editors. 2008, Elsevier. p. 227-238)。これは、パターン化された電極が表面のどの部分が"平面外に"移動するかを決定するので、作用されるべき形状の非常に大きな自由度を与える。これは、非常にフレキシブルな"触覚型"ディスプレイを構築することを可能にし、これは、表面アクチュエータの"平面外"動作を用いることにより"平面内"及び"平面外"の触覚の双方の作成を可能にする。また、これは、同じ表面層からの組み合わせられたタッチ操作及びセンシングを可能にする。典型的な誘電電気活性ポリマの幾つかの機能は、以下の通りである。
− 平面外の変位>0.5mm
− 1000Hzより高いスイッチング周波数
− 強い"ソリッドステート"ゴム層
− 典型的なアクチュエータ厚さ100ミクロン−2mm
− 組み合わせられたセンシング及び操作が可能
− 単純で安価なバルク材料(ポリマ、炭素粉末)からのroll2roll製造容易性
アクチュエータ120a, ... 120k, ... 120zは、コントローラ130により個々に起動され得る。電気的に起動されたときには、アレイ120のアクチュエータ120kは、z方向において平面外動作を作る。個々のアクチュエータの斯様な動作により、触覚型フィードバックは、インタラクション表面Sに接触しているユーザに与えられ得る。
図1に示すように、インタラクション表面S上の特定の位置における1又はそれ以上のアクチュエータ120kの起動は、例えば、最小値(MIN)から最大値(MAX)に及ぶ値Vの(仮想の)スケール上に幾つかの値v0を触覚的に示すために用いられ得る。示された値v0は、例えば、音楽プレーヤの現在設定された量に対応してもよい。
図2は、時間的な3つの連続点における前述の値v0の位置での隣接したアクチュエータを示している。3つのアクチュエータ120j,120k,120lは、反復的な態様で順々に起動する。この手法において動作のポイントをシフトさせることにより、指向性触覚型感覚は、くねられた矢により示される方向における実際のオブジェクトの動作に似ているアクチュエータに接触しているユーザ(図示省略)の皮膚において生成される。示された例において、指向性触覚型感覚は、低減された値Vの方向にポイントする一方で、アクティブなアクチュエータ120j,120k,120lの位置は、現在設定されている値v0の位置に対応する。
図2において示される動作方式は、様々な態様で変えられ得る。起動波の空間期間は、例えば、示された3つのアクチュエータより長い距離に渡って延在してもよく、又は、インタラクション表面Sにおける平面外高さは、1つよりも多いアクチュエータの同時動作により生成されてもよい。
図3は、ユーザインタフェース100の他の動作モードを示している。先の実施形態とは対照的に、このモードは、ユーザの指Fがインタラクション表面Sに接触しているタッチポイントPがコントローラ130により決定され得ることを必要とする。斯様な決定は、タッチスクリーンから知られた任意の技術により果たされ得る。更に、アレイ120のEAPアクチュエータは、これらに作用している圧力を検出することを可能にするセンシング機能を自身に備えてもよい。
図3のアプリケーションにおいて、タッチポイントPの領域内のアクチュエータだけが触覚型フィードバックに実際に寄与し得るので、これらだけが起動される。示された例において、これらのアクチュエータは、インタラクション表面S上の所与の位置に向かって(即ち、図1で述べたように設定された値v0の(仮想の)位置に)ポイントする指向性触覚型感覚を与えるために(例えば、図2において示される態様で)操作される。
図4は他の原理を示しており、この原理により、指向性触覚型感覚が(示されるような)タッチポイントP又はインタラクション表面Sにおける他のどこにでも伝達され得る。この実施形態において、アクチュエータの段階的な起動は、関与するアクチュエータのための(z方向における)動作/アクチュエータ高さが変化し、表面における重要な角度を含む表面形状を生成することを意味する。接触している要素Fとインタラクション表面Sとの間に相対的な動作がないときであっても、これは、傾斜から生じる表面接線力を介して、指向されたガイド力をもたらす。
図5は、(示されるような)タッチポイントにおいて又はインタラクション表面Sにおける他のどこででも指向性触覚型感覚を生成するための更に他の態様を示している。このアプローチにおいて、抵抗又は摩擦は、インタラクション表面Sに触れている指Fの動作に対して生成される。前記抵抗を異方性にすることにより、所望の方向がマークされ得る。示された例において、所望の方向(くねった矢)において見たときに、表面摩擦は、タッチポイントPにおいて高い/粗いものから低い/滑らかなものに変化する。それ故、"正しい"方向における移動は、後の動作が抵抗により付随されるので、"間違った"方向における移動よりも指Fに関してより容易になるだろう。
この文書において、図5の概略図において、"高い摩擦"が粗い表面により示されることが留意されるべきである。皮膚による摩擦が考慮されるときに、表面粗さと摩擦との間の斯様な関係(即ち、"より高い粗さは、より多くの摩擦を意味する")は、実際には、90ミクロン及びそれ以上の粗さに対して有効である。しかしながら、多くのより硬い工学材料及び小さい粗さ(<10ミクロン)に関して、その効果は、接触エリアの効果に起因して逆転する("より高い粗さは、より少ない摩擦を意味する")。それ故、アクチュエータのサイズ及び/又はこれらの起動パターンの特性サイズに依存して、摩擦の増大は、高い又は低い表面粗さを必要とするだろう。
更に、異方性の摩擦は、異なる方向において異なる表面粗さをもたらすインタラクション表面上の適切な(異方性の)3次元パターンにより代わりに実現されてもよい。ライン又は隆起のパターンは、例えば、ラインに対して垂直な方向がラインに対して平行な方向よりも高い粗さ(及び摩擦効果)を有するように、アクチュエータの対応する起動によりインタラクション表面上に生成されてもよい。
図6は、ユーザインタフェース100の更に他の動作モードを示している。ここでも、このモードは、2つの(又はそれ以上の)ユーザの指F1、F2のタッチポイントP1及びP2がコントローラ130により決定され得ることを必要とする。マルチフィンガー入力は、例えば、ディスプレイ110上に示された画像を伸張する又は圧縮することにより、前記画像を直感的にズームイン又はズームアウトするために用いられ得る。図6は、これに関して、"ズームイン"コマンドの特定の例を示しており、2つの指F1及びF2は、反対の方向に互いに離れるように移動する。指のタッチポイントP1、P2で生成された指向性触覚型感覚は、この場合において好ましくは、本当のオブジェクトが伸張されたときに伝える触覚に対応する。くねる矢により示されるように、この指向性触覚型感覚は、元のオブジェクトの同期動作をシミュレーションするために指の動作に対して平行に指向される。
図7は、ユーザインタフェース200の二次元のインタラクション表面S上への上面図を示している。指Fのタッチポイントに関して(又は表面S上に幾つかの他の中心に関して)内方に放射状に指向される指向性触覚型感覚が生成される。この手法において元の画像の縮小動作がシミュレーションされ得る。触覚型感覚の方向が逆転したときには、外方に放射状に指向される感覚が生成され、これは、元の画像の拡大をシミュレーションし得る。
上述した触覚型ユーザインタフェース100の基本的な機能性は、"小さい丘"の形の動的に調節可能な表面形状の生成であり、これは、波のように(2D)インタラクション表面に渡って広がる。本発明の一実施形態において、斯様な伝播する表面の形状は、図8に示すように電極の一次元のアレイ120を用いて生成されてもよい。アレイ120は、アレイ全体を覆うとともに、典型的には動作の間にグランド電位にセットされる、大きな上部電極TEを有する。前記上部電極の下に、コントローラ130に個々に接続される一連の底部電極BEが配置される。底部電極BEを正電位に設定することにより、対応するアクチュエータは、平面外上に動作を作るために起動され得る。このような態様において、例えば調光バー(又は、1―D色温度)機能性(調光バーが例えば所与の異なる長さになり得る)をもつ再構成可能なUIに対して必要とされるように、正又は負のx方向におけるインタラクション表面に渡って広がる波が生成され得る。好ましくは、底部電極BEは長尺形式を有し、これにより、調光バーに沿った波の位置がより正確に規定され得る。
本発明の他のよりフレキシブルな実施形態において、伝播する表面形状は、対応するユーザインタフェース200のインタラクション表面S上への上面図における図9に示すように電極の二次元アレイ220を用いて生成される。アレイ220は、コントローラ230に個々に接続されるとともに上部電極TEの下に配置される底部電極BEの複数の平行した列を有する。斯様であるアレイ220において、再構成可能な二次元の色相環機能性をもつ再構成可能なUIのために必要とされるように、全方向に表面に渡って広がる波が生成され得る。好ましくは、底部電極BEは(正方形、六角形、円などのように)シンメトリックな形状を有し、これにより、任意のランダムな方向における波の位置がより正確に規定され得る。
起動された表面形状(即ち触覚の平面外の高さを有する領域)は、指の予期される近傍に従って(例えば色/調光バーの端部で)インタラクション表面上に配置され得る。
本発明の他の実施形態において、起動する表面形状の位置は、指の予期された付近には配置されないが、指の実際の位置において動的に配置される。指の位置は用いられているタッチスクリーン技術により確立されてもよく、及び、形状の位置は適宜調整されてもよい。この実施形態は、触覚材料が比較的高い速度で変形し得ることを必要とする。
本発明の更なる好ましい実施形態において、起動された表面形状の位置は、指の測定された位置に配置されないが、指の動作の実際の位置及び検出された方向に従って動的に配置される。指の位置は、使用されているタッチスクリーン技術存在により、又は、(タッチセンサとしても用いられ得る)誘電アクチュエータから直接に確立され得る一方で、動作検出は、現在の指位置の前の時間期間における指の記録された位置に基づく動作方向アルゴリズムを実行する処理デバイスを用いて確立される。起動する表面形状の位置は、指の位置及び方向の両方に従って調整される。この実施形態は、この場合においては表面形状がどこで生成されるべきかについて推測的に明らかでないので、特にUIパラダイムが指の二次元の動作を必要とする状況において有用である。これは、複数の指がディスプレイ上のUI画像の一部を"伸張する"ためのガイダンス、例えば、前述したように、色空間のより詳細な部分に"ズームイン"するためのガイダンスを必要とする場合に、特に当てはまる。
本発明は、例えば以下のために適用され得る。
− エリア上でズームインするときに(例えばマルチタッチ)、"材料を伸張する"フィードバックを与える。これは、スクリーン上に表示されている画像の表示上でズームインし得るか、又は、(例えば、照明制御又はスライダのための色相環のような)ユーザインタフェース要素により制御されている特定のパラメータ上でズームインし得る。ユーザは、その者が幾つかの材料を実際に物理的に伸張していることを示唆する"平面内の"力フィードバックを体験するだろう。
− 将来のマルチ発光体照明システム用のディスプレイベースのユーザインタフェースデバイス上に再構成可能なユーザインタフェースを生成する。ここで、照明構成は拡張可能である。
− 調光バー及び色相環により光強度及び色をそれぞれ設定する。
− 例えば照明システムのための色選択のための色相環に対する代替手段として2D「調光バー」を生成する。
− (メイン)メニューからの特定要素又はアプリケーションの選択の間、フィードバックの伸張を提供する。これは、メニュー構造の中へ1レベル深く進むユーザに触覚を与える。
更に、本発明は、有利には、タッチスクリーン上のユーザインタフェース要素に、タッチパッドに、又は、他のタッチセンシティブ入力手法(例えばタッチホイール)に適用され得る。
最後に、本出願において、"有する"という用語が他の要素又はステップを除外するものではないこと、単数表記が複数を除外するものではないこと、及び、その単一のプロセッサ又は他のユニットが幾つかの手段の機能を充足してもよいことが指摘される。本発明は、各々及びあらゆる新規な特性及び特性の各々及びあらゆる組合せにある。更に、請求項中の参照符号は、これらの範囲を限定するものとして解釈されるべきではない。

Claims (9)

  1. 接触可能なインタラクション表面と、
    前記インタラクション表面に接触しているオブジェクトに対して触覚型フィードバックを与えるために前記インタラクション表面に配置されるアクチュエータのアレイと、
    前記オブジェクトを前記インタラクション表面上の所与の位置に向かってガイドする指向性触覚型感覚を与えるように連係した態様でアクチュエータを起動させるためのコントローラとを有し、
    前記アクチュエータは、前記オブジェクトと前記表面との間の摩擦を変えるように起動され
    前記指向性触覚型感覚が、異なる方向において異なる表面粗さをもたらす前記インタラクション表面上のパターンによって与えられる、
    ユーザインタフェース。
  2. 前記アクチュエータは、前記摩擦が前記所与の位置に近付くにつれて小さくなるように起動される、請求項1に記載のユーザインタフェース。
  3. 前記アクチュエータは、電気活性材料を有する、請求項1に記載のユーザインタフェース。
  4. アクチュエータのアレイを有するインタラクション表面に接触しているオブジェクトに対して触覚型フィードバックを与えるための方法であって、前記オブジェクトを前記インタラクション表面上の所与の位置に向かってガイドする指向性触覚型感覚を生成するためにアクチュエータの連係した起動を有し、
    前記アクチュエータは、前記オブジェクトと前記表面との間の摩擦を変えるように起動され
    前記指向性触覚型感覚が、異なる方向において異なる表面粗さをもたらす前記インタラクション表面上のパターンによって与えられる、
    方法。
  5. 前記指向性触覚型感覚は、中心に対して内方に又は外方に放射状に指向される、請求項1に記載のユーザインタフェース。
  6. 前記インタラクション表面は、画像ディスプレイの上に配置される、請求項1に記載のユーザインタフェース。
  7. 前記指向性触覚型感覚は、前記ディスプレイ上に示された画像シーケンス及び/又は画像に相関される、請求項6に記載のユーザインタフェース。
  8. 前記インタラクション表面の下に配置される画像ディスプレイを有し、
    前記指向性触覚型感覚は、表示された画像の拡大又は縮小に相関される、請求項1に記載のユーザインタフェース。
  9. 請求項1に記載のユーザインタフェースを有する、装置。
JP2013537241A 2010-11-09 2011-11-03 触覚型フィードバックを備えたユーザインタフェース Expired - Fee Related JP6203637B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP10190542.0 2010-11-09
EP10190542 2010-11-09
PCT/IB2011/054882 WO2012063165A1 (en) 2010-11-09 2011-11-03 User interface with haptic feedback

Publications (3)

Publication Number Publication Date
JP2013541789A JP2013541789A (ja) 2013-11-14
JP2013541789A5 JP2013541789A5 (ja) 2014-12-18
JP6203637B2 true JP6203637B2 (ja) 2017-09-27

Family

ID=44999839

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013537241A Expired - Fee Related JP6203637B2 (ja) 2010-11-09 2011-11-03 触覚型フィードバックを備えたユーザインタフェース

Country Status (8)

Country Link
US (1) US20130215079A1 (ja)
EP (1) EP2638450A1 (ja)
JP (1) JP6203637B2 (ja)
CN (1) CN103180802B (ja)
BR (1) BR112013011300A2 (ja)
RU (1) RU2596994C2 (ja)
TW (1) TW201229854A (ja)
WO (1) WO2012063165A1 (ja)

Families Citing this family (98)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
JP6024184B2 (ja) * 2012-04-27 2016-11-09 ソニー株式会社 システム、電子機器、およびプログラム
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
JP6182207B2 (ja) 2012-05-09 2017-08-16 アップル インコーポレイテッド ユーザインタフェースオブジェクトのアクティブ化状態を変更するためのフィードバックを提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
CN108287651B (zh) 2012-05-09 2021-04-13 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
JP6002836B2 (ja) 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
DE112013002409T5 (de) 2012-05-09 2015-02-26 Apple Inc. Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
US9703378B2 (en) * 2012-06-13 2017-07-11 Immersion Corporation Method and apparatus for representing user interface metaphors as physical changes on a shape-changing device
US9075438B2 (en) * 2012-07-18 2015-07-07 Htc Corporation Systems and related methods involving stylus tactile feel
EP2701357B1 (en) * 2012-08-20 2017-08-02 Alcatel Lucent A method for establishing an authorized communication between a physical object and a communication device
US9502193B2 (en) 2012-10-30 2016-11-22 Apple Inc. Low-travel key mechanisms using butterfly hinges
US9449772B2 (en) 2012-10-30 2016-09-20 Apple Inc. Low-travel key mechanisms using butterfly hinges
US9710069B2 (en) 2012-10-30 2017-07-18 Apple Inc. Flexible printed circuit having flex tails upon which keyboard keycaps are coupled
US8947216B2 (en) 2012-11-02 2015-02-03 Immersion Corporation Encoding dynamic haptic effects
US9898084B2 (en) 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
CN103869960B (zh) * 2012-12-18 2018-02-23 富泰华工业(深圳)有限公司 触感反馈系统及其提供触感反馈的方法
JP6097843B2 (ja) 2012-12-29 2017-03-15 アップル インコーポレイテッド コンテンツをスクロールするか選択するかを判定するためのデバイス、方法、及びグラフィカルユーザインタフェース
EP3467634B1 (en) 2012-12-29 2020-09-23 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
EP2939098B1 (en) 2012-12-29 2018-10-10 Apple Inc. Device, method, and graphical user interface for transitioning between touch input to display output relationships
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
EP2912542B1 (en) 2012-12-29 2022-07-13 Apple Inc. Device and method for forgoing generation of tactile output for a multi-contact gesture
JP6313339B2 (ja) 2013-02-06 2018-04-18 アップル インコーポレイテッド 動的に調整可能な外観及び機能を有する入力/出力デバイス
KR102094886B1 (ko) * 2013-02-28 2020-03-30 엘지전자 주식회사 택타일 피드백 및 비주얼 피드백을 선택적으로 출력하는 디스플레이 디바이스 및 그 제어 방법
US9395816B2 (en) 2013-02-28 2016-07-19 Lg Electronics Inc. Display device for selectively outputting tactile feedback and visual feedback and method for controlling the same
JP6231774B2 (ja) * 2013-05-23 2017-11-15 キヤノン株式会社 電子機器およびその制御方法
EP3005392B1 (en) 2013-05-27 2017-06-21 Apple Inc. Low travel switch assembly
JP5868903B2 (ja) * 2013-06-28 2016-02-24 京セラドキュメントソリューションズ株式会社 タッチパネル装置、画像形成装置
US9908310B2 (en) 2013-07-10 2018-03-06 Apple Inc. Electronic device with a reduced friction surface
WO2015047606A1 (en) 2013-09-30 2015-04-02 Apple Inc. Keycaps having reduced thickness
KR101787301B1 (ko) 2013-09-30 2017-10-18 애플 인크. 감소된 두께를 가지는 키 캡
US9411422B1 (en) * 2013-12-13 2016-08-09 Audible, Inc. User interaction with content markers
GB201322623D0 (en) * 2013-12-19 2014-02-05 Wild Jennifer A A user interface
EP3094516B1 (de) * 2014-01-15 2020-04-15 Volkswagen Aktiengesellschaft Verfahren und vorrichtung zur rückmeldung einer eingabe an einen anwender
CN111966210A (zh) 2014-03-31 2020-11-20 索尼公司 触觉再现设备、触觉再现系统和触觉再现方法
US20150316986A1 (en) * 2014-05-01 2015-11-05 Samsung Display Co., Ltd. Apparatus and method to realize dynamic haptic feedback on a surface
WO2016025890A1 (en) 2014-08-15 2016-02-18 Apple Inc. Fabric keyboard
US10082880B1 (en) 2014-08-28 2018-09-25 Apple Inc. System level features of a keyboard
US10134539B2 (en) 2014-09-30 2018-11-20 Apple Inc. Venting system and shield for keyboard
FR3026867A1 (fr) * 2014-10-02 2016-04-08 Dav Dispositif et procede de commande pour vehicule automobile
FR3026866B1 (fr) * 2014-10-02 2019-09-06 Dav Dispositif et procede de commande pour vehicule automobile
US20160162092A1 (en) * 2014-12-08 2016-06-09 Fujitsu Ten Limited Operation device
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10146310B2 (en) 2015-03-26 2018-12-04 Intel Corporation Haptic user interface control
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
EP3295467A1 (en) 2015-05-13 2018-03-21 Apple Inc. Keyboard for electronic device
WO2016183488A1 (en) 2015-05-13 2016-11-17 Apple Inc. Keyboard assemblies having reduced thicknesses and method of forming keyboard assemblies
CN206322622U (zh) 2015-05-13 2017-07-11 苹果公司 电子装置和键机构
CN206134573U (zh) 2015-05-13 2017-04-26 苹果公司 键、用于键盘的键和用于电子装置的输入结构
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9934915B2 (en) 2015-06-10 2018-04-03 Apple Inc. Reduced layer keyboard stack-up
FR3038748B1 (fr) * 2015-07-10 2019-06-07 Physio-Assist Interface utilisateur tactile destinee a un dispositif de stimulation de l'air tracheo-bronchique
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
JP6618734B2 (ja) * 2015-08-28 2019-12-11 株式会社デンソーテン 入力装置および表示装置
EP3144774A1 (en) * 2015-09-15 2017-03-22 Thomson Licensing Methods and apparatus of transmitting a rotation angle information to a set of actuators associated with a surface
US9971084B2 (en) 2015-09-28 2018-05-15 Apple Inc. Illumination structure for uniform illumination of keys
CN105487856A (zh) * 2015-11-23 2016-04-13 深圳Tcl数字技术有限公司 移动终端控制显示终端上触屏应用程序的方法及系统
KR102523312B1 (ko) 2016-07-01 2023-04-18 플렉스트로닉스 에이피, 엘엘씨 플렉서블 디스플레이들 상의 국부화된 햅틱 피드백
US10353485B1 (en) 2016-07-27 2019-07-16 Apple Inc. Multifunction input device with an embedded capacitive sensing layer
US10115544B2 (en) 2016-08-08 2018-10-30 Apple Inc. Singulated keyboard assemblies and methods for assembling a keyboard
US10755877B1 (en) 2016-08-29 2020-08-25 Apple Inc. Keyboard for an electronic device
US9916003B1 (en) * 2016-09-02 2018-03-13 Microsoft Technology Licensing, Llc 3D haptics for interactive computer systems
US11500538B2 (en) 2016-09-13 2022-11-15 Apple Inc. Keyless keyboard with force sensing and haptic feedback
US10552997B2 (en) 2016-12-22 2020-02-04 Here Global B.V. Data aware interface controls
US10388186B2 (en) * 2017-04-17 2019-08-20 Facebook, Inc. Cutaneous actuators with dampening layers and end effectors to increase perceptibility of haptic signals
FR3065548B1 (fr) * 2017-04-24 2022-02-04 Commissariat Energie Atomique Interface de stimulation tactile par retournement temporel offrant des sensations enrichies
FR3066959B1 (fr) * 2017-05-31 2020-11-06 Dav Procede de generation d'un retour sensitif pour une interface et interface associee
US10775850B2 (en) 2017-07-26 2020-09-15 Apple Inc. Computer with keyboard
US10712931B2 (en) * 2017-08-29 2020-07-14 Apple Inc. Systems for modifying finger sensations during finger press input events
US20210057632A1 (en) * 2018-01-12 2021-02-25 President And Fellows Of Harvard College Reconfigurable electrically controlled shape morphing dielectric elastomer device
WO2019173152A1 (en) 2018-03-05 2019-09-12 Exo Imaging, Inc. Thumb-dominant ultrasound imaging system
EP3620237A1 (en) * 2018-09-10 2020-03-11 Robert Bosch GmbH Haptic feedback actuator, touch screen comprising the same and method for producing a touch screen
FR3092415B1 (fr) * 2019-01-31 2021-03-05 Valeo Comfort & Driving Assistance Procédé de génération d’un retour sensitif pour une interface et interface associée
US10908693B2 (en) * 2019-02-20 2021-02-02 Wuhan Tianma Micro-Electronics Co., Ltd. Tactile presentation device
JP2022002129A (ja) * 2020-03-10 2022-01-06 株式会社村田製作所 触力覚情報提示システム
US11678582B2 (en) * 2020-04-01 2023-06-13 Nokia Technologies Oy Electroactive material-controlled smart surface
DE102020004363A1 (de) * 2020-07-20 2022-01-20 Daimler Ag Verfahren zum Erzeugen einer haptischen Rückmeldung

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3722993B2 (ja) * 1998-07-24 2005-11-30 大日本印刷株式会社 物体の毛並接触感シミュレーション装置
JP2000089895A (ja) * 1998-09-12 2000-03-31 Fuji Xerox Co Ltd 触力覚呈示装置
US7196688B2 (en) * 2000-05-24 2007-03-27 Immersion Corporation Haptic devices using electroactive polymers
JP4333019B2 (ja) * 2000-10-25 2009-09-16 ソニー株式会社 携帯電話機および制御方法
JP3888099B2 (ja) * 2001-08-17 2007-02-28 富士ゼロックス株式会社 タッチパネル装置
WO2003038800A1 (en) * 2001-11-01 2003-05-08 Immersion Corporation Method and apparatus for providing tactile sensations
JP2004310518A (ja) * 2003-04-08 2004-11-04 Fuji Xerox Co Ltd 画像情報処理装置
DE10340188A1 (de) * 2003-09-01 2005-04-07 Siemens Ag Bildschirm mit einer berührungsempfindlichen Bedienoberfläche zur Befehlseingabe
PT1665880E (pt) 2003-09-03 2013-02-04 Stanford Res Inst Int Transdutores de polímero electroactivo para deformação de superfícies
EP1846811A2 (en) * 2004-12-01 2007-10-24 Koninklijke Philips Electronics N.V. Image display that moves physical objects and causes tactile sensation
US8035620B2 (en) * 2005-01-14 2011-10-11 Koninklijke Philips Electronics N.V. Moving objects presented by a touch input display device
US20070145857A1 (en) * 2005-12-28 2007-06-28 Cranfill David B Electronic device with audio and haptic capability
JP4811206B2 (ja) * 2006-09-12 2011-11-09 トヨタ自動車株式会社 入力装置
EP2069893A1 (en) * 2006-09-27 2009-06-17 Nokia Corporation Tactile touch screen
KR20080048837A (ko) * 2006-11-29 2008-06-03 삼성전자주식회사 촉각 피드백을 출력하는 장치 및 방법
US8508486B2 (en) * 2007-10-01 2013-08-13 Immersion Corporation Directional haptic effects for a handheld device
US9829977B2 (en) * 2008-04-02 2017-11-28 Immersion Corporation Method and apparatus for providing multi-point haptic feedback texture systems
KR20090107365A (ko) * 2008-04-08 2009-10-13 엘지전자 주식회사 이동 단말기 및 그 메뉴 제어방법
US20090280860A1 (en) * 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
US20090303175A1 (en) * 2008-06-05 2009-12-10 Nokia Corporation Haptic user interface
EP3130983B1 (en) * 2008-07-15 2018-11-14 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US10007340B2 (en) * 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
US9746923B2 (en) * 2009-03-12 2017-08-29 Immersion Corporation Systems and methods for providing features in a friction display wherein a haptic effect is configured to vary the coefficient of friction
US20100236843A1 (en) * 2009-03-20 2010-09-23 Sony Ericsson Mobile Communications Ab Data input device

Also Published As

Publication number Publication date
CN103180802B (zh) 2018-11-09
RU2013126438A (ru) 2014-12-20
CN103180802A (zh) 2013-06-26
US20130215079A1 (en) 2013-08-22
WO2012063165A1 (en) 2012-05-18
EP2638450A1 (en) 2013-09-18
RU2596994C2 (ru) 2016-09-10
BR112013011300A2 (pt) 2019-09-24
JP2013541789A (ja) 2013-11-14
TW201229854A (en) 2012-07-16

Similar Documents

Publication Publication Date Title
JP6203637B2 (ja) 触覚型フィードバックを備えたユーザインタフェース
US9983676B2 (en) Simulation of tangible user interface interactions and gestures using array of haptic cells
JP6820652B2 (ja) 摩擦効果及び振動触覚効果を生成するシステム及び方法
US9972175B2 (en) Wearable electronic device for adjusting tension or compression exhibited by a stretch actuator
US8823674B2 (en) Interactivity model for shared feedback on mobile devices
US8963882B2 (en) Multi-touch device having dynamic haptic effects
US20150097786A1 (en) Display apparatus
KR20150079472A (ko) 마찰 증강된 제어 및 터치 제어 패널의 버튼을 마찰 증강된 제어로 변환하는 방법
JP2010086471A (ja) 操作感提供装置、および操作感フィードバック方法、並びにプログラム
Sahoo et al. Tablehop: An actuated fabric display using transparent electrodes
Stevenson et al. An inflatable hemispherical multi-touch display
Brucker Technology for Tactile Tangibles

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141030

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141030

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151222

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160204

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160614

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160913

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170131

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20170214

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170404

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170808

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170830

R150 Certificate of patent or registration of utility model

Ref document number: 6203637

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees