JP2013117951A - タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法 - Google Patents

タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法 Download PDF

Info

Publication number
JP2013117951A
JP2013117951A JP2012241448A JP2012241448A JP2013117951A JP 2013117951 A JP2013117951 A JP 2013117951A JP 2012241448 A JP2012241448 A JP 2012241448A JP 2012241448 A JP2012241448 A JP 2012241448A JP 2013117951 A JP2013117951 A JP 2013117951A
Authority
JP
Japan
Prior art keywords
touch
signal
contact
processor
pressure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012241448A
Other languages
English (en)
Other versions
JP6329723B2 (ja
Inventor
A Grant Danny
ダニー エイ. グラント、
Manuel Cruz-Hernandez Juan
ファン マヌエル クルス−ヘルナンデス、
Modarres Ali
アリ モダレス、
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2013117951A publication Critical patent/JP2013117951A/ja
Application granted granted Critical
Publication of JP6329723B2 publication Critical patent/JP6329723B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/36Accompaniment arrangements
    • G10H1/38Chord
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04105Pressure sensors for measuring the pressure or force exerted on the touch surface without providing the touch position
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/091Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith
    • G10H2220/096Graphical user interface [GUI] specifically adapted for electrophonic musical instruments, e.g. interactive musical displays, musical instrument icons or menus; Details of user interactions therewith using a touch screen
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/221Keyboards, i.e. configuration of several keys or key-like input devices relative to one another
    • G10H2220/241Keyboards, i.e. configuration of several keys or key-like input devices relative to one another on touchscreens, i.e. keys, frets, strings, tablature or staff displayed on a touchscreen display for note input purposes

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

【課題】手持ちデバイスがユーザを様々なイベントに喚起するために触覚効果を出力する。
【解決手段】タッチ感応入力デバイス上の第1のオブジェクトの第1の接触に応答してタッチ感応入力デバイスから第1のセンサー信号を受け取ることであって、第1のセンサー信号は第1の接触の第1の位置と第1の圧力を含むことと、第1の接触と実質的に同時にタッチ感応入力デバイス上の第2のオブジェクトの第2の接触に応答してタッチ感応入力デバイスから第2のセンサー信号を受け取ることであって、第2のセンサー信号は第2の接触の第2の位置と第2の接触の第2の圧力を含むことと、第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて信号を生成することであって、信号は触覚効果を引き起こすように構成されていることと、信号を出力することと、からなる。
【選択図】図3

Description

本開示は、全体的にタッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法に関する。
手持ちデバイス、特にタッチ感応表面(例えば、タッチスクリーン)を有する移動電話の人気の上昇と共に、伝統的に機械的ボタンによって提供されていた物理的な触覚の感覚は、それらの新しい世代のデバイスの分野にはもはや適用されない。代わりに、ユーザを様々なイベントに喚起するために触覚効果が手持ちデバイスによって出力されても良い。そのような触覚効果は、ボタンの押圧、入ってくる呼び、またはテキストメッセージを指し示すための、あるいはエラー状態を指し示すための、振動を含んでいても良い。
本発明の実施形態は、タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法を提供する。例えば、ここに開示された方法の一実施形態では、方法が、タッチ感応入力デバイス上の第1のオブジェクトの第1の接触に応答してタッチ感応入力デバイスから第1のセンサー信号を受け取ることであって、第1のセンサー信号は第1の接触の第1の位置と第1の圧力を含むことと、第1の接触と実質的に同時にタッチ感応入力デバイス上の第2のオブジェクトの第2の接触に応答してタッチ感応入力デバイスから第2のセンサー信号を受け取ることであって、第2のセンサー信号は第2の接触の第2の位置と第2の接触の第2の圧力を含むことと、第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて信号を生成することであって、信号は触覚効果を引き起こすように構成されていることと、信号を出力することと、からなる。別の実施形態では、コンピューター読み取り可能な媒体が、プロセッサがそのような方法を実行することを引き起こすためのプログラムコードからなる。
これらの描写的実施形態は、発明を制限または規定するためではなく、むしろその理解を助けるための例を提供するために言及される。描写的実施形態は、詳細な記載に説明され、それは発明の更なる記載を提供する。この発明の様々な実施形態によって供される利点は、この明細書を精査することによって更に理解され得る。
この明細書に組み込まれその一部を構成する付随する図面は、実施形態の1つ以上の例を描写し、例示的実施形態の記載と共に、実施形態の原理と実装を説明する役目を果たす。
図1は、本発明の実施形態によるマルチ圧力タッチ感応入力デバイスを示す。 図2は、本発明の実施形態によるマルチ圧力タッチ感応入力デバイスを描く。 図3は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス上の接触を検出しそれに応答する方法に向けられたフローチャートを描く。 図4は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。 図5は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス上の接触を検出しそれに応答する方法に向けられたフローチャートを描く。 図6Aは、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。 図6Bは、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。 図6Cは、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。 図7は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。 図8は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス上の接触を検出しそれに応答する方法に向けられたフローチャートを描く。 図9は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスの動作を描く。
例示的実施形態が、タッチ感応表面上のマルチ圧力相互作用のためのシステムと方法の文脈でここに記載される。当業者は、以下の記載が描写的なもののみであり、いかなるやり方でも限定的であることが意図されていないことが分かるであろう。その他の実施形態は、この開示の恩恵を受けた当業者にそれ自体が容易に示唆するであろう。付随する図面に描かれた例示的実施形態の実装への参照がここで詳細になされる。同じまたは同様の項目を参照するのに同じ参照符号が図面と以下の記載全体を通して使われる。
明確さへの関心から、ここに記載された実装の慣例的な特徴の全ては示され記載されはしない。当然ながら、そのような実際の実装の開発においては、アプリケーションおよびビジネス関連の制約との整合のような、開発者の特定のゴールを達成するために多数の実装に特定の決定がなされなければならず、それらの特定のゴールは一つの実装から別の実装で、また1人の開発者から別の開発者で変動することが、理解されるであろう。
マルチ圧力タッチ感応入力デバイスの描写的動作
図1を参照すると、図1は、本発明の実施形態によるマルチ圧力タッチ感応入力デバイス100を示す。デバイス100は、ウェブページの一部をユーザに表示する。この描写的実施形態では、ユーザはタッチ感応表面120上でのマルチタッチ、マルチ圧力入力を使ってページをナビゲートしても良い。例えば、もしユーザが2つの指で実質的に同時にタッチ感応表面120にタッチし、スクリーンの底部により近くに位置する指でもう一つの指よりも多くの圧力を印加すれば、デバイス100はディスプレイがウェブページをスクロールダウンすることを引き起こす。代替的に、ユーザは、デバイス100がウェブページをスクロールアップすることを引き起こすように、スクリーンの頂部により近くに位置する指でもう一つの指よりも多くの圧力を印加することができる。いくつかの実施形態では、スクロールのレートまたは速度は、2つ以上の圧力に少なくとも一部は基づいている。例えば、スクロールのレートは、2つの圧力の差の関数であっても良い。一実施形態では、スクロールのレートに対応する周波数または大きさで触覚効果が出力される。
ユーザが印加したマルチ圧力入力に基づいてウェブページをスクロールすることに加えて、デバイス100はまた、入力に応答して取られたアクションを指し示すために触覚効果を出力する。例えば、ウェブページをスクロールダウンする間、デバイス100は、デバイスの頂部からデバイス100の底部まで移動するように見える触覚効果を出力し、ユーザがウェブページをスクロールし続ける間繰り返し循環しても良い。あるいは、もしユーザがウェブページをスクロールアップしていれば、触覚効果はデバイス100の底部から始ってデバイス100の頂部に向かって移動するように見え、ユーザがウェブページをスクロールし続ける間繰り返し循環する。よって、ユーザはデバイス100と相互作用するようにマルチタッチ、マルチ圧力入力を提供して、入力に基づいた触覚フィードバックを受け取ることが可能である。
この描写的例は、読者をここに説明される全体的主題に紹介するために与えられている。発明はこの例に限定はされない。以下のセクションは、タッチ感応表面上でのマルチ圧力相互作用のためのデバイス、システムおよび方法の様々な追加の非限定的実施形態と例を記載する。
描写的マルチ圧力タッチ感応入力デバイス
図2を参照すると、図2は、本発明の実施形態によるマルチ圧力タッチ感応入力デバイス200を描く。図2に示された実施形態では、デバイス200は、ハウジング205、プロセッサ210、メモリー220、タッチ感応ディスプレイ230、アクチュエータ240、およびネットワークインターフェース250からなる。プロセッサ210とメモリー220は、ハウジング205内に配置されている。タッチ感応表面からなるかまたはそれと通信しているタッチ感応ディスプレイ230は、タッチ感応ディスプレイ230の少なくとも一部がデバイス200のユーザに露出されるように、部分的にハウジング205内に配置されている。いくつかの実施形態では、タッチ感応ディスプレイ230は、ハウジング205内に配置されていなくても良い。例えば、デバイス200は、別のハウジング内に配置されたタッチ感応ディスプレイ230に接続されるかまたはそうでなければそれと通信していても良い。
図2に示された実施形態では、タッチ感応ディスプレイ230は、プロセッサ210と通信しており、メモリー220とも通信しているプロセッサ210に信号を提供するように構成されている。メモリー220は、プロセッサ210による使用のために、プログラムコードまたはその他のデータあるいはその両方を格納し、プロセッサ210はメモリー220に格納されたプログラムコードを実行して、タッチ感応ディスプレイ230から信号を受け取る。プロセッサ210はまた、タッチ感応ディスプレイ230が画像を出力することを引き起こすために信号を出力するように構成されている。図2に示された実施形態では、プロセッサ210は、ネットワークインターフェース250と通信しており、その他のコンポーネンツまたはデバイスと通信するために、ネットワークインターフェース250から信号を受け取りネットワークインターフェース250に信号を出力するように構成されている。加えて、プロセッサ210は、アクチュエータ240およびアクチュエータ260と通信しており、アクチュエータ240またはアクチュエータ260あるいはその両方が1つ以上の触覚効果を出力することを引き起こすために信号を出力するように更に構成されている。更には、プロセッサ210は、スピーカー270と通信しており、スピーカー270がサウンドを出力することを引き起こすために信号を出力するように構成されている。様々な実施形態では、デバイス200は、より少ないかまたは追加のコンポーネンツまたはデバイスからなるかまたはそれらと通信していても良い。図2に示されたデバイス200のコンポーネンツおよびデバイス200と関連付けられ得るコンポーネンツの詳細な記載は下記される。
マルチ圧力タッチ感応入力デバイス200は、タッチ感応表面上の少なくとも2つの接触と関連付けられた圧力を検出することが可能なタッチ感応表面からなるかまたはそれと通信しているあらゆるデバイスであることができる。例えば、図2のデバイス200は、タッチ感応表面からなるタッチ感応ディスプレイ230を含む。いくつかの実施形態では、タッチ感応表面は、ディスプレイ230上にオーバーレイされていても良い。その他の実施形態では、デバイス200は、ディスプレイと別のタッチ感応表面からなるかまたはそれらと通信していても良い。
いくつかの実施形態では、1つ以上のタッチ感応表面が、デバイス200の1つ以上のサイド上にあっても良い。例えば、一実施形態では、タッチ感応表面がデバイス200の後方表面内に配置されるかまたはそれからなる。別の実施形態では、第1のタッチ感応表面がデバイス200の後方表面内に配置されるかまたはそれからなり、第2のタッチ感応表面がデバイス200のサイド表面内に配置されるかまたはそれからなる。更には、デバイス200がデバイス200の1つ以上のサイド上の少なくとも1つのタッチ感応表面からなる実施形態では、またはデバイス200が外部のタッチ感応表面と通信している実施形態では、ディスプレイ230はタッチ感応表面からなっていてもなっていなくても良い。いくつかの実施形態では、1つ以上のタッチ感応表面は、柔軟なタッチ感応表面を有していても良い。その他の実施形態では、1つ以上のタッチ感応表面は堅くても良い。様々な実施形態では、デバイス200は、柔軟なおよび堅いタッチ感応表面の両方からなっていても良い。
様々な実施形態では、デバイス200は、図2に示された実施形態よりも少ないかまたは追加のコンポーネンツからなっているかまたはそれらと通信していても良い。例えば、一実施形態では、デバイス200は、スピーカー270とは通信しておらず、アクチュエータ240からなっていない。別の実施形態では、デバイス200は、タッチ感応ディスプレイ230またはネットワークインターフェース250からなっていないが、タッチ感応表面からなり、外部のディスプレイと通信している。その他の実施形態では、デバイス200は、全くアクチュエータからなっていないかまたはそれと通信していなくても良い。よって、様々な実施形態では、マルチ圧力タッチ感応入力デバイス200は、ここに開示された様々な実施形態においてか当業者に明らかであろう変形においてのように、あらゆる数のコンポーネンツからなっているかまたはそれらと通信していても良い。
図2に示されたデバイス200のハウジング205は、デバイス200のコンポーネンツの少なくともいくつかについて保護を提供する。例えば、ハウジング205は、プロセッサ210とメモリー220を雨のような外来物から保護するプラスチック筐体であっても良い。いくつかの実施形態では、ハウジング205は、もしデバイス200がユーザによって落とされたら、ハウジング205中のコンポーネンツを損傷から保護する。ハウジング205は、プラスチック、ゴム、または金属を含むがそれらに限定はされないあらゆる好適な材料で作られることができる。様々な実施形態は、異なるタイプのハウジングまたは複数のハウジングからなっていても良い。例えば、いくつかの実施形態では、マルチ圧力タッチ感応入力デバイス200は、携帯電話、パーソナルデジタルアシスタント(PDA)、ラップトップ、タブレットコンピューター、デスクトップコンピューター、デジタル音楽プレーヤー、ゲーミングコンソール、ゲームパッド、医療機器等、であっても良い。その他の実施形態では、デバイス200は、例えば車のコンソールのような別のデバイス中に埋め込まれていても良い。
図2に示された実施形態では、タッチ感応ディスプレイ230は、ユーザがマルチ圧力タッチ感応入力デバイス200と相互作用するためのメカニズムを提供する。例えば、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230の上を浮遊している、タッチしている、または押している(それらの全てはこの開示では接触と呼ばれ得る)ユーザに応答して、ユーザの指の位置と圧力を検出する。いくつかの実施形態では、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230上の1つ以上の接触の位置、圧力またはその両方を決定する1つ以上のセンサーからなるか、またはそれらと接続されるか、またはそうでなければそれらと通信していても良い。例えば、一実施形態では、タッチ感応ディスプレイ230は、相互静電容量システムからなるかまたはそれと通信している。別の実施形態では、タッチ感応ディスプレイ230は、絶対静電容量システムからなるかまたはそれと通信している。いくつかの実施形態では、タッチ感応ディスプレイ230は、抵抗性パネル、静電容量性パネル、赤外線LED、光検出器、画像センサー、光学的カメラ、またはそれらの組み合わせからなるかまたはそれと通信していても良い。よって、タッチ感応ディスプレイ230は、例えば、抵抗性、静電容量性、赤外線、光学的、熱的、拡散性の信号、または音響パルス技術、またはそれらの組み合わせのような、タッチ感応表面120上の接触を決定するためのあらゆる好適な技術を組み込んでも良い。
図2に示された実施形態では、アクチュエータ240と260は、プロセッサ210と通信しており、1つ以上の触覚効果を提供するように構成されている。例えば、一実施形態では、プロセッサ210によってアクチュエータ240、アクチュエータ260またはその両方に作動信号が提供された時に、それぞれのアクチュエータ240、260は、作動信号に基づいた触覚効果を出力する。例えば、示された実施形態では、プロセッサ210は、アナログ駆動信号からなるアクチュエータ信号をアクチュエータ240に送信するように構成されている。しかし、プロセッサ210は、アクチュエータ260にコマンドを送信するように構成されており、ここでコマンドはアクチュエータ260が触覚効果を出力することを引き起こすための適切な駆動信号を生成するのに使われるパラメータを含む。その他の実施形態では、異なる信号と異なる信号タイプが、1つ以上のアクチュエータの各々に送られても良い。例えば、いくつかの実施形態では、プロセッサは、触覚効果を出力するようにアクチュエータを駆動するために低レベル駆動信号を送信しても良い。そのような駆動信号は、増幅器によって増幅されても良く、あるいは駆動されている特定のアクチュエータを収容するための好適なプロセッサまたは回路を使ってデジタルからアナログ信号にかまたはアナログからデジタル信号に変換されても良い。
アクチュエータ240または260のようなアクチュエータは、1つ以上の触覚効果を出力することが可能なあらゆるコンポーネントまたはコンポーネンツの集合体であることができる。例えば、アクチュエータは、偏心回転質量(ERM)アクチュエータ、線形共鳴アクチュエータ(LRA)、圧電アクチュエータ、ボイスコイルアクチュエータ、電気活性ポリマー(EAP)アクチュエータ、形状記憶合金、ページャー、DCモーター、ACモーター、可動磁石アクチュエータ、E−coreアクチュエータ、スマートゲル、静電アクチュエータ、電気触覚アクチュエータ、またはアクチュエータの機能を行うあらゆるその他のアクチュエータまたはコンポーネンツの集合体を含むがそれらに限定はされない、様々なタイプの1つであることができる。複数のアクチュエータまたは異なるサイズのアクチュエータが振動周波数のレンジを提供するのに使われても良く、それらは個別にかまたは同時に作動されても良い。様々な実施形態は、単一または複数のアクチュエータを含んでも良く、同じタイプかまたは異なるタイプのアクチュエータの組み合わせを有していても良い。
様々な実施形態では、1つ以上の触覚効果が、あらゆる数のやり方でかまたはやり方の組み合わせで作成されても良い。例えば、一実施形態では、1つ以上の振動が、偏心質量を回転することによってかまたは質量を線形に振動することによってのように、触覚効果を作成するのに使われても良い。いくつかのそのような実施形態では、触覚効果は、デバイス全体にかあるいは1つの表面かまたはデバイスの限定された部分だけに、振動を伝えるように構成されていても良い。別の実施形態では、2つ以上のコンポーネンツの間の摩擦かまたは少なくとも1つのコンポーネントと少なくとも1つの接触の間の摩擦が、コンポーネントの動きに抵抗を提供するためかまたはトルクを提供するためのように、可動コンポーネントにブレーキをかけることによってのように、触覚効果を作成するのに使われても良い。その他の実施形態では、1つ以上のコンポーネンツの変形が、触覚効果を作成するのに使われることができる。例えば、1つ以上の触覚効果が、表面の形状かまたは表面の摩擦の係数を変えるように出力されても良い。一実施形態では、表面の摩擦を変えるのに使われる静電気力を作り出すことによって1つ以上の触覚効果が作成される。その他の実施形態では、スマートゲルからなる1つ以上のエリアのような、透明な変形するエレメントのアレイが触覚効果を作成するのに使われても良い。
図2では、ネットワークインターフェース250は、プロセッサ210と通信しており、デバイス200からその他のコンポーネンツまたはその他のデバイスへの有線または無線通信を提供する。例えば、ネットワークインターフェース250は、デバイス200と無線スピーカーまたは無線作動デバイスの間に無線通信を提供しても良い。いくつかの実施形態では、ネットワークインターフェース250は、ユーザがユーザのそれぞれのデバイスにおいてお互いと相互作用することを許容するために、別のデバイス200のような、1つ以上のその他のデバイスに通信を提供しても良い。ネットワークインターフェース250は、マルチ圧力タッチ感応入力デバイス200が別のコンポーネントまたはデバイスと通信することを可能とするあらゆるコンポーネントまたはコンポーネンツの集合体であることができる。例えば、ネットワークインターフェース250は、PCIネットワークアダプター、USBネットワークアダプター、またはイーサネット(登録商標)アダプターからなっていても良い。ネットワークインターフェース250は、802.11a、g、bまたはn標準を含んだ無線イーサネット(登録商標)を使って通信しても良い。一実施形態では、ネットワークインターフェース250は、ブルーツース、CDMA、GSM(登録商標)、TDMA、FDMA、またはその他の無線技術を使って通信することができる。その他の実施形態では、ネットワークインターフェース250は、有線接続を通して通信しても良く、イーサネット(登録商標)、トークンリング、USB,FireWire 1394等のような1つ以上のネットワークと通信していても良い。しかも図2に示された実施形態がネットワークインターフェース250からなる一方で、その他の実施形態はネットワークインターフェース250からなっていなくても良い。
接触を検出しそれに応答する描写的方法
ここで図3を参照すると、図3は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス100上の接触を検出しそれに応答する方法300に向けられたフローチャートを描く。図3に示された方法は、図2に示されたデバイスに対して記載される。
方法300は、センサー信号が受け取られた時にブロック310で始まる。例えば、一実施形態では、プロセッサ210は、ユーザがタッチ感応ディスプレイ230に接触する時に、タッチ感応ディスプレイ230から信号を受け取り、信号は、タッチ感応ディスプレイ230上の接触のx、y位置および圧力のような、タッチ感応ディスプレイ230上の入力またはタッチ感応ディスプレイ230のステータスと関連付けられた情報を含む。その他の実施形態では、プロセッサ210は、複数のセンサー信号を受け取る。例えば、プロセッサ210は、タッチ感応ディスプレイ230上の第1の入力と関連付けられた情報を含んだ第1の信号と、タッチ感応ディスプレイ230上の第2の入力と関連付けられた情報を含んだ第2の信号と、タッチ感応ディスプレイ230上の第3の入力と関連付けられた情報を含んだ第3の信号を受け取っても良い。一実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上の接触のx、y位置を含む情報を含んだ第1の信号と、接触の圧力を含む情報を含んだ第2の信号を受け取る。別の実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上の2つの接触のx、y位置を含む情報を含んだ第1の信号と、2つの接触の圧力を含む情報を含んだ第2の信号を受け取る。プロセッサ210は、タッチ感応ディスプレイ230上の2つ以上の接触と関連付けられた情報を含む単一の信号を受け取っても良い。例えば、一実施形態では、プロセッサ210は、第1の接触のx、y位置および圧力と第2の接触のx、y位置および圧力を含む単一の信号を受け取る。
前述したとおり、一実施形態では、プロセッサ210は、タッチ感応ディスプレイ230から信号を受け取る。いくつかの実施形態では、デバイス200は、タッチ感応ディスプレイ230とは別の、あるいはその代わりの、タッチ感応表面からなっていても良い。そのような実施形態では、プロセッサ210はタッチ感応表面から、あるいはもし複数のタッチ感応表面が採用されていれば、複数のタッチ感応表面の1つ以上から、センサー信号を受け取っても良い。
いくつかの実施形態では、プロセッサ210は、ネットワークインターフェース250から1つ以上のセンサー信号を受け取っても良い。例えば、一実施形態では、ネットワークインターフェース250は、1つ以上のコンポーネンツまたはデバイス、またはその両方と通信しており、それらから情報を受け取る。この実施形態では、ネットワークインターフェース250は、その他のコンポーネンツまたはデバイス、またはその両方からの情報を含む1つ以上の信号をプロセッサ210に送る。例えば、ネットワークインターフェース250は、別のマルチ圧力タッチ感応入力デバイスから信号を受け取っても良く、信号は、その他のデバイスのタッチ感応ディスプレイ上の入力に関する情報を含んでいても良い。ネットワークインターフェース250は、その他のデバイスのディスプレイ上の入力に関する情報をプロセッサ210に送っても良い。別の実施形態では、ネットワークインターフェース250は、ネットワークインターフェース250と通信している無線タッチ感応表面から信号を受け取り、ネットワークインターフェース250はタッチ感応表面上の入力またはタッチ感応表面のステータスについての情報を含んだ1つ以上の信号をプロセッサ210に送る。
その他の実施形態では、ネットワークインターフェース250は、ネットワークインターフェース250と通信している1つ以上のコンポーネンツまたはデバイスから複数のセンサー信号を受け取っても良く、1つ以上の信号をプロセッサ210に送ることができる。例えば、一実施形態では、ネットワークインターフェース250は、無線タッチ感応表面および別のマルチ圧力タッチ感応入力デバイスと通信している。そのような実施形態では、ネットワークインターフェース250は、1つの信号を無線タッチ感応表面から、別の信号をマルチ圧力タッチ感応入力デバイスから、受け取っても良い。加えて、ネットワークインターフェース250は、無線タッチ感応表面からのまたは別のマルチ圧力タッチ感応入力デバイスからの、またはその両方の情報を含んだ1つ以上の信号をプロセッサ210に送っても良い。よって、プロセッサ210は、タッチ感応ディスプレイ230とネットワークインターフェース250の両方から1つ以上の信号を受け取っても良い。例えば、一実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上の入力についての情報を含んだタッチ感応ディスプレイ230からの第1の信号を受け取り、プロセッサ210は、ネットワークインターフェース250と通信している別のマルチ圧力タッチ感応入力デバイスのディスプレイ上の入力についての情報を含んだネットワークインターフェース250からの第2の信号を受け取る。
前述したとおり、一実施形態では、プロセッサ210は、ユーザがタッチ感応ディスプレイ230に接触する時に、信号を受け取る。そのような実施形態では、プロセッサ210は、入力がディスプレイ上でなされた時のみ、タッチ感応ディスプレイ230から信号を受け取っても良い。あるいは、プロセッサ210は、入力が最初タッチ感応ディスプレイ230上でなされた時と既存の入力への変更がなされた時に、タッチ感応ディスプレイ230から信号を受け取っても良い。例えば、プロセッサ210は、ユーザがタッチ感応ディスプレイ230に接触する時と、ユーザがタッチ感応ディスプレイ230に沿って接触を動かす毎に、1つ以上の信号を受け取っても良い。その他の実施形態では、プロセッサ210は、1つ以上の接触の持続時間全体についてタッチ感応ディスプレイ230から連続した信号を受け取っても良い。一実施形態では、プロセッサ210は、指定された時間間隔でタッチ感応ディスプレイ230から信号を受け取る。例えば、プロセッサ210は、0.1ms毎にのように、周期的にタッチ感応ディスプレイ230から信号を受け取っても良い。その他の実施形態では、プロセッサ210は、接触がタッチ感応ディスプレイ230上でなされたかどうかに拘わらず、タッチ感応ディスプレイ230からのステータス情報を含んだ信号を受け取る。例えば、一実施形態では、プロセッサ210は、接触がタッチ感応ディスプレイ230上でなされたかどうかに拘わらず、指定された時間間隔でタッチ感応ディスプレイ230から連続した信号を受け取るが、もし接触がタッチ感応ディスプレイ230上に存在すれば、信号は、接触の位置と圧力のような接触に関する情報を含んでいても良い。
前述した実施形態では、プロセッサ210が受け取る信号は、タッチ感応ディスプレイ230上の接触のx、y位置および圧力のような、タッチ感応ディスプレイ230上の入力またはタッチ感応ディスプレイ230のステータスに関連付けられた情報を含む。様々な実施形態では、プロセッサ210によって受け取られた信号は、デバイス200上の1つ以上の接触に関連する情報、デバイス200のコンポーネントに関連する情報、またはプロセッサ200が接触を決定するのに使うことができるその他のコンポーネンツまたはデバイスに関連する情報を、提供できる。例えば、一実施形態では、信号は、接触が起こったことを指し示す情報を含む。別の実施形態では、信号は、前回の測定から現行の測定までの接触の圧力の変化を含んでいても良い。同様に、信号は、前回の位置からの接触の位置の変化に関する情報を含んでいても良い。様々な実施形態では、信号は、位置データ、接触データ、相互作用データ、ジェスチャーデータ、持続時間データ、圧力データ、熱的データ、波形データ、静電容量性データ、赤外線データ、光検出データ、光学的データ、接触を決定するのに必要かまたは関係があるその他のデータ、を含むがそれらに限定はされないデータ、を含むことができる。
方法300を再度参照すると、一旦センサー信号が受け取られると、方法はブロック320に進む。ブロック320では、接触が決定される。前述した通り、一実施形態では、プロセッサ210は、一旦タッチ感応ディスプレイ230との接触がなされた時だけ信号を受け取る。よって、この実施形態では、ディスプレイ230は、センサー信号を受け取り、接触を決定し、信号をプロセッサ210に送る。一方、プロセッサ210は、一旦接触が決定された時だけディスプレイ230から信号を受け取るので、プロセッサ210は、接触を決定する必要はない。よって、いくつかの実施形態では、ディスプレイ230は、ブロック310で指定されたようにセンサー信号を受け取り、ブロック320で指定されたように接触を決定し、プロセッサは、ブロック330で指定されたように応答を決定する。
いくつかの実施形態では、プロセッサ210は、ブロック320で指定されたように接触が起こったかどうかを決定する。例えば、ディスプレイは、ブロック310で指定されたようにセンサー信号を受け取っても良く、ディスプレイは、もしディスプレイがプロセッサ210と通信していれば直接かまたはネットワークインターフェース250を通してのどちらかで、センサー信号と関連付けられた情報をプロセッサ210に送っても良く、それをプロセッサ210が受け取り、ブロック320で指定されたように接触が起こったかどうかを決定するのに使う。一実施形態では、プロセッサ210が受け取る情報は、接触が起こったことを指定する命令からなる。別の実施形態では、プロセッサ210が受け取る情報は、接触が起こったかどうかを指し示すものである。例えば、もしプロセッサ210がx座標、y座標および圧力を含んだ情報を受け取れば、プロセッサ210は、接触が起こったことを決定するのにこの情報を使うことが可能であっても良い。別の実施形態では、プロセッサ210は、圧力情報の変化に基づいて接触が起こったかどうかを決定するのにプロセッサ210が使う圧力情報を周期的な間隔で受け取る。その他の実施形態では、もしプロセッサ210が受け取る圧力情報が閾値圧力よりも少なければ、プロセッサ210は接触が起こらなかったことを決定しても良く、もし圧力が閾値圧力以上であれば、プロセッサ210は接触が起こったことを決定しても良い。
前述した通り、デバイス200との接触は、多数のやり方でなされることができる。例えば、接触は、単一の指、複数の指、または鉛筆のような1つ以上のオブジェクトによってタッチ感応ディスプレイ230となされることができる。一実施形態では、接触は、タッチ感応ディスプレイ230に物理的に接触することを含んでも良く、別の実施形態では、接触は、タッチ感応ディスプレイ230に物理的に接触することなくタッチ感応ディスプレイ230の上をオブジェクトで浮遊することを含んでも良い。よって、いくつかの実施形態では、プロセッサ210は、タッチ感応ディスプレイ230との物理的接触に基づいて接触を決定することができ、その他の実施形態では、プロセッサ210は、タッチ感応ディスプレイ230との近接かまたはタッチ感応ディスプレイ230の上を浮遊しているオブジェクトに基づいて接触を決定しても良い。
デバイス200は、接触が起こったかどうかを決定するため、または接触に関連する情報を得るために、様々な技術を使っても良い。例えば、タッチ感応ディスプレイ230上またはその近くの温度が、接触が起こったかどうかを決定するために測定されても良い。よって、タッチ感応ディスプレイ230に近づいている指が検出されても良く、デバイス200を取り巻く周囲温度と近づいている指の温度の差に少なくとも一部は基づいて決定される。一実施形態では、デバイス200は、タッチ感応ディスプレイ230に近づいているオブジェクトに基づいて接触を検出するのに使われる1つ以上の静電容量性センサーからなる。デバイス200は、タッチ感応ディスプレイ230上の接触が起こったかどうかを少なくとも一部は決定するためかまたは接触に関連する情報を得るために使われることができる、赤外線LED、光検出器、画像センサー、光学的カメラ、またはそれらの組み合わせ、を含むがそれらに限定はされないその他のコンポーネンツからなっていても良い。よって、デバイス200は、タッチ感応ディスプレイ230が、タッチ感応ディスプレイ230上の接触を決定するかまたはそれを決定する際にプロセッサ210を補助することを許容する、あらゆる好適な技術を使っても良い。
いくつかの実施形態では、デバイスは、ブロック320に示されたようにプロセッサ210が接触が起こったかどうかを決定するのに使うネットワークインターフェース250から情報を受け取っても良い。例えば、プロセッサ210は、別のデバイスと通信しているネットワークインターフェース250から情報を受け取っても良い。一実施形態では、別のデバイスと関連付けられたディスプレイが入力を受け取る時に別のデバイスがネットワークインターフェース250に情報を送っても良く、プロセッサ210は、別のデバイス上の入力に関連するネットワークインターフェース250からの情報を受け取っても良い。いくつかの実施形態では、プロセッサ210は、ネットワークインターフェースと通信している別のデバイスについてのネットワークインターフェース250からの周期的な情報を受け取っても良い。ネットワークインターフェース250が遠隔のタッチ感応表面と通信している一実施形態では、ネットワークインターフェース250は、タッチ感応表面から情報を受け取り、プロセッサ210に情報を送り、それをプロセッサ210が接触を決定するのに使う。もっと更なる実施形態では、別のマイクロプロセッサまたはコプロセッサのような別のコンポーネントが、接触を決定することとそのような情報をプロセッサ210に提供することに責任を負っていても良い。様々な実施形態では、メモリー220上に格納されプロセッサ210によって実行されたソフトウェアも、前述した様々な技術を実装することによってのように、接触が起こったかどうかを決定する際に使われても良い。
方法300を再度参照すると、320で一旦接触が決定されると、方法300はブロック330に進む。ブロック330では、応答が決定される。前述した通り、一実施形態では、プロセッサ210は、ユーザがタッチ感応ディスプレイ230に接触する時にタッチ感応ディスプレイ230から信号を受け取り、信号は、タッチ感応ディスプレイ230上の接触のx、y位置および圧力を含む。この実施形態では、もしユーザがデバイス200のタッチ感応ディスプレイ230上に表示されたウェブページを閲覧しているのであれば、かつもしプロセッサ210が、ユーザが2つの指で実質的に同時にタッチ感応ディスプレイ230にタッチしていることを決定して2つの接触が決定され、ユーザが他の指よりもスクリーンの底部により近く位置する指でより多くの圧力を印加していることが決定されれば、プロセッサ210は、応答が、ウェブページをスクロールダウンするようにタッチ感応ディスプレイ230を更新することと、ページがウェブページをスクロールダウンしていることを指し示す触覚効果を出力すること、であるべきであることを決定する。代替的に、この実施形態では、プロセッサ210は、もしプロセッサ210がタッチ感応ディスプレイ230上の2つの実質的に同時の接触を検出し、スクリーンの頂部により近く位置する接触の圧力がスクリーンの底部により近く位置する接触の圧力よりも大きければ、応答が、ウェブページをスクロールアップするようにタッチ感応ディスプレイ230を更新することと、ページがウェブページをスクロールアップしていることを指し示す触覚効果を出力すること、であるべきであることを決定しても良い。
いくつかの実施形態では、スクロールのレートまたは速度が、圧力に少なくとも一部は基づいている。例えば、スクロールレートは、2つの接触の間の圧力の差が増加するにつれて増加しても良い。一実施形態では、スクロールのレートに基づいて変動する周波数または大きさでデバイスを振動させることによってのような、スクロールのレートに対応する1つ以上の触覚効果が出力される。よって、いくつかの実施形態では、プロセッサ210が、もしあれば、ブロック330で指定されたように、応答を決定する。その他の実施形態では、タッチ感応ディスプレイ230が、もしあれば、応答を決定する。もっと更なる実施形態では、プロセッサ210、タッチ感応ディスプレイ230またはネットワークインターフェース250と通信している別のマイクロプロセッサまたはコプロセッサのような別のコンポーネントが、応答を決定することとそのような情報をプロセッサ210またはネットワークインターフェース250に提供することに責任を負っていても良い。様々な実施形態では、メモリー220上に格納されプロセッサ210によって実行されたソフトウェアも、接触が起こったかどうかを決定するのに使われても良い。
プロセッサ210、タッチ感応ディスプレイ230またはその他のコンポーネントは、応答を決定する際に、接触を決定するために受け取った情報のいずれかまたは全部を使っても良い。よって、実施形態では、デバイス200のコンポーネンツまたはデバイス200と通信しているコンポーネンツまたはデバイス200と通信している別のデバイスのコンポーネンツが、位置データ、接触データ、相互作用データ、ジェスチャーデータ、持続時間データ、圧力データ、熱的データ、波形データ、静電容量性データ、赤外線データ、光検出データ、光学的データ、応答を決定するのに必要かまたは関係があるその他のデータ、を含むがそれらに限定はされない様々なデータ、を使っても良い。例えば、一実施形態では、2つの接触についての圧力データが、応答を決定するためにプロセッサ210によって使われる。別の実施形態では、タッチ感応ディスプレイ230が、応答を決定するために、接触の圧力を閾値圧力に対して比較しても良い。その他の実施形態では、1つ以上の接触に関する情報が、デバイス200によってネットワークインターフェース250を通して、もしあれば応答を決定して応答に関する情報をデバイス200に送り返す別のデバイスに送られる。
プロセッサ210、タッチ感応ディスプレイ230またはその他のコンポーネントは、応答が必要であるかどうかと、もしそうであればどの応答であるべきかを決定するために、あらゆる数のやり方で受け取られた情報を使っても良い。例えば、一実施形態では、プロセッサ210は、タッチ感応ディスプレイ230と関連付けられた画像が動かされるべきであることを決定しても良い。別の実施形態では、タッチ感応ディスプレイ230が、タッチ感応ディスプレイ230上のオブジェクトの色が変更されるべきであることを決定しても良い。その他の実施形態では、プロセッサ210が、1つ以上のアクチュエータが1つ以上の触覚効果を出力する必要があることを決定しても良い。様々な追加の応答が以下で説明される。
いくつかの実施形態では、プロセッサ210、タッチ感応ディスプレイ230またはネットワークインターフェース250によって受け取られ得る持続時間データが、もしあれば、応答を決定するのに使われても良い。例えば、一実施形態では、プロセッサ210は、もし接触がタッチ感応ディスプレイ230に接触している時間の長さが閾値持続時間を超えれば、特定の応答を決定しても良い。その他の実施形態では、もし接触の持続時間が閾値持続時間より下であれば、応答が決定されても良い。プロセッサ210は、タッチ感応ディスプレイ230との2つ以上の接触の持続時間に基づいて、応答を決定しても良い。例えば、一実施形態では、もし第1の接触の持続時間が第2の接触の持続時間を超えれば、プロセッサ210が応答を決定しても良い。その他の実施形態では、もしタッチ感応ディスプレイ230との第1の接触の後の予め決められた時間内に第2の接触が起これば、応答が決定されても良い。例えば、一実施形態では、プロセッサ210が応答を決定するためには、第2の接触が第1の接触と実質的に同時でなければならない。
いくつかの実施形態では、プロセッサ210、タッチ感応ディスプレイ230またはネットワークインターフェース250によって受け取られ得る位置データが、もしあれば、応答を決定するのに使われても良い。接触の位置は、あらゆる数のやり方で決定されても良い。例えば、タッチ感応ディスプレイ230が、デカルトxおよびy座標または極座標を使ってアドレス可能であっても良い。よって、一実施形態では、もし第1の接触の位置が第2の接触の第2の位置のx座標よりも大きなx座標を有していれば、デバイス200は、第1の位置が第2の位置よりも大きいことを決定しても良い。別の実施形態では、もし第1の接触の位置が第2の接触の第2の位置のy座標よりも大きなy座標を有していれば、デバイス200は、第1の位置が第2の位置よりも大きいことを決定しても良い。更にその他の実施形態では、各接触のxおよびy座標に基づいた式が、もしあればデバイス200の応答を決定するのに使われても良い。例えば、一実施形態では、接触がタッチ感応ディスプレイ230上の指定された位置から特定のエリアまたは距離内であるかどうかを決定するために、式sqrt(x2+y2)が使われても良い。別の実施形態では、接触がタッチ感応ディスプレイ230上の指定された座標から長方形内であるかどうかを決定するために、式x+2yが使われても良い。一実施形態では、デバイス200は、タッチ感応ディスプレイ230をセクションに論理的に分割することによって接触の位置を決定しても良い。例えば、デバイス200は、長方形のタッチ感応ディスプレイ230を3行と3列に論理的に分割し、よって、以下により詳細に説明されるように、図4に示されたような9個の接触セルを作り出しても良い。
図4を再度参照すると、タッチ感応ディスプレイ230上のセクション「B」中の接触とセクション「F」中の実質的に同時の接触は、検出された接触に対する応答がタッチ感応ディスプレイ230上に表示されたページを北東方向にスクロールすることであることをデバイス200が決定することを引き起こしても良い。同様に、セクション「B」中の接触とセクション「D」中の接触は、検出された接触に対する応答がタッチ感応ディスプレイ230上に表示されたページを北西方向にスクロールすることであることをデバイス200が決定することを引き起こしても良い。一実施形態では、ページがタッチ感応ディスプレイ230上でスクロールされる速度は、1つ以上の接触の圧力かまたは複数の接触の間の圧力の差に基づいている。デバイス200は、1つ以上の触覚効果が、相互作用が検出されたこと、応答が起こっていること、またはページがスクロールしていることのような応答が完了されたことをユーザに喚起することであるべきであることを決定しても良い。一実施形態では、触覚効果は、ページがスクロールしている方向に依存して変動しても良い。
例えば、プロセッサ210は、タッチ感応ディスプレイ230との接触がなされる毎に触覚効果が出力されるべきであることを決定しても良い。よって、ユーザがセクション「B」と「F」に接触すると、プロセッサ210は、各接触に応答して触覚効果が出力されるべきであることを決定する。更に、一旦接触がスクロールジェスチャーのようなジェスチャーとして認識されると、プロセッサ210は、ジェスチャーと関連付けられた触覚効果を決定しても良い。
別の実施形態では、プロセッサ210は、検出された接触または接触のシーケンスに対する応答が、タッチ感応ディスプレイ230上に表示された画像を更新することと触覚効果を出力することであることを決定しても良い。例えば、応答は、タッチ感応ディスプレイ230上に表示された画像が動かされたことであっても良い。一実施形態では、応答は、タッチ感応ディスプレイ230上に表示された画像が回転されたことであっても良い。例えば、図4を再度参照すると、もしセクション「B」、「D」および「F」が実質的に同時に接触されそれから解放され、それからセクション「B」、「D」および「H」が予め決められた期間内に接触されれば、タッチ感応ディスプレイ230上に表示された画像が反時計回り方向に回転されても良い。同様に、もしセクション「B」、「D」および「F」が実質的に同時に接触されそれから解放され、それからセクション「B」、「H」および「F」が0.1msまたは0.25msまたは0.5msのような予め決められた期間内に接触されれば、タッチ感応ディスプレイ230上に表示された画像が時計回り方向に回転されても良い。いくつかの実施形態では、応答は、画像がタッチ感応ディスプレイ230上で時計回りまたは反時計回り方向に回転されていることを指し示すために少なくとも1つの触覚効果が出力されることであっても良い。例えば、一実施形態では、プロセッサ210は、回転の方向に伝わるように知覚され得るかまたは画像が更に回転されると強度または周波数が増加し得る振動のような、画像の回転と関連付けられた触覚効果を決定しても良い。代替的に、プロセッサ210は、回転の方向に基づいて周波数が変動する非方向性振動効果を同定しても良い。例えば、一実施形態では、振動の周波数は、もし画像が時計回り方向に回転されれば増加されるかまたはもし画像が反時計回り方向に回転されれば減少されても良い。更に、プロセッサは、その開始向きまで戻る画像の回転に応答して出力される、飛び跳ねまたは揺すりのような触覚効果を決定しても良い。
一実施形態では、応答は、タッチ感応ディスプレイ230上に表示されたグラフィックスがズームインまたはズームアウトされることであっても良い。例えば、図4を更に参照すると、もしセクション「A」、「C」、「G」および「I」が実質的に同時に接触されれば、タッチ感応ディスプレイ230上に表示されたグラフィックスがズームアウトされても良い。同様に、もしセクション「B」、「D」、「F」および「H」が実質的に同時に接触されれば、タッチ感応ディスプレイ230上に表示されたグラフィックスがズームインされても良い。いくつかの実施形態では、プロセッサ210は、応答が、1つ以上のサウンドが出力される必要があることであることを決定しても良く、必要な信号をスピーカー270に出力できる。その他の実施形態では、応答は、タッチ感応ディスプレイ230上に表示されたグラフィックスがズームアウトかまたはズームインされていることを指し示すために少なくとも1つの触覚効果が出力され得ることであっても良い。例えば、一実施形態では、プロセッサ210は、ズームがより大きければ強度または周波数が増加し得るかまたはズームレベルがより低ければ周波数または強度が減少し得る振動のような、画像のズームのレベルと関連付けられた触覚効果を決定しても良い。更に、プロセッサ210は、その開始向きまで戻る画像の回転に応答して出力される、飛び跳ねまたは揺すりのような触覚効果を決定しても良い。
その他の実施形態では、応答は、タッチ感応ディスプレイ230上の1つ以上の接触の位置の変化に基づいて決定されても良い。例えば、プロセッサ210は、北方向に変化する第1の接触の位置と東方向に変化する第2の接触の位置に基づいて応答を決定しても良い。別の実施形態では、プロセッサ210は、西方向に動いている第1の接触と東方向に動いている第2の接触の位置に基づいて応答を決定しても良い。その他の実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上で第1の接触の位置が第2の接触の位置の反対方向に動いているかどうかに基づいて応答を決定することができる。
いくつかの実施形態では、応答は、デバイス200との指定された相互作用に基づいて決定されても良い。相互作用は、1つ以上の接触に基づいたあらゆる数のアクションを含むことができる。例えば、一実施形態では、プロセッサ210は、相互作用が、タッチ感応ディスプレイ230上のグラフィックオブジェクトと対応する位置を有する第1の接触と、タッチ感応ディスプレイ230上のグラフィックオブジェクトと対応しない位置を有する第2の接触とを有するところの相互作用に基づいて、応答を決定しても良い。その他の実施形態では、相互作用は、タッチ感応ディスプレイ230上のグラフィックオブジェクトと対応する位置を有する2つの接触に基づいていても良い。様々な実施形態では、相互作用は、第1の接触の位置が第1のグラフィックオブジェクトと対応し、第2の接触の位置が第2のグラフィックオブジェクトと対応するところの、タッチ感応ディスプレイ230上の2つのグラフィックオブジェクトに基づいていても良い。
その他の実施形態では、プロセッサ210は、タッチ感応ディスプレイ230またはネットワークインターフェース250からプロセッサ210が受け取る様々なデータの組み合わせ、または位置の変化または相互作用のような1つ以上のファクターに基づいて、タッチ感応ディスプレイ230上の接触に対する応答を決定することができる。例えば、一実施形態では、応答は、タッチ感応ディスプレイ230上の1つ以上の接触の圧力と位置の両方に基づいて、プロセッサ210によって決定されることができる。別の実施形態では、プロセッサ210は、圧力及び相互作用に基づいて応答を決定することができる。例えば、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックの色が、グラフィックオブジェクトに対応する位置を有する第1の接触と、グラフィックオブジェクトに対応する位置を有しない第2の接触と、指定された圧力を有する第1の接触に基づいて、変更される必要があることを決定しても良い。その他の実施形態がここに記載されるが、更にその他の実施形態は当業者に明らかであろう。
図3に示された実施形態を再度参照すると、ブロック330で指定されたように一旦応答が決定されると、プロセッサ210は、ブロック340で指定されたように信号を生成する。例えば、前述した一実施形態では、プロセッサ210は、ユーザがタッチ感応ディスプレイ230に接触する時にタッチ感応ディスプレイ230から信号を受け取り、信号は、タッチ感応ディスプレイ230上の接触のx、y位置および圧力のような、タッチ感応ディスプレイ230上の入力またはタッチ感応ディスプレイ230のステータスと関連付けられた情報を含む。この実施形態では、もしユーザがデバイス200のタッチ感応ディスプレイ230上に表示されたウェブページを閲覧しているのであれば、かつもしプロセッサ210が、ユーザが2つの指(即ち、2つの接触)で実質的に同時にタッチ感応ディスプレイ230にタッチしており、他の指よりもスクリーンの底部により近く位置する指でより多くの圧力を印加していることを決定すれば、プロセッサ210は、応答が、ウェブページをスクロールダウンするようにタッチ感応ディスプレイ230を更新することと、ページがウェブページをスクロールダウンしていることを指し示す触覚効果を出力すること、であるべきであることを決定する。この実施形態では、プロセッサ210は、ウェブページをスクロールダウンすることをタッチ感応ディスプレイ230に引き起こすように構成された第1の信号を生成し、プロセッサ210は、ページがウェブページをスクロールダウンしていることを指し示す触覚効果を出力することをアクチュエータ240に引き起こすように構成された第2の信号を生成する。
いくつかの実施形態では、プロセッサ210は、応答を決定した後に、単一の信号を生成する。例えば、もしプロセッサ210が、タッチ感応ディスプレイ230が更新される必要があることを決定すれば、プロセッサ210は、表示信号を生成して信号をタッチ感応ディスプレイ230に送ることができ、それはタッチ感応ディスプレイ230と関連付けられたグラフィックスが更新されることを引き起こす。その他の実施形態では、プロセッサ210は、2つ、3つ、あるいはもっと多くの信号を生成する。例えば、一実施形態では、プロセッサ210は、図3に示された方法300のブロック330で決定された各応答について異なる信号を生成する。よって、もしタッチ感応ディスプレイ230が更新される必要があり、アクチュエータ240が第1の触覚効果を出力する必要があり、アクチュエータ260が第2の触覚効果を出力する必要があることが決定されれば、プロセッサ210は、タッチ感応ディスプレイ230が更新されることを引き起こすように構成された第1の信号と、アクチュエータ240が触覚効果を出力することを引き起こすように構成された第2の信号と、アクチュエータ260が触覚効果を出力することを引き起こすように構成された第3の信号を生成しても良い。その他の実施形態では、プロセッサ210は、タッチ感応ディスプレイ230、ネットワークインターフェース250、アクチュエータ240、アクチュエータ260、スピーカー270、デバイス200のその他のコンポーネンツ、デバイス200と通信しているその他のコンポーネンツまたはデバイス、またはそれらの組み合わせが、特定の機能を行うことを引き起こすように構成された1つ以上の信号を生成しても良い。
一実施形態では、生成された信号は、触覚効果を出力すること、画像を表示すること、サウンドを演奏すること、またはメッセージを遠隔デバイスに送信することのような、指定された機能を行うためのデバイスまたはコンポーネントについてのコマンドを含む。別の実施形態では、生成された信号は、応答または応答の何らかの側面を決定するためにコマンドを受け取っているデバイスまたはコンポーネントによって使われるパラメータを含む。パラメータは、例えば、大きさ、周波数、持続時間、またはアクチュエータが触覚効果を決定する、触覚効果を出力する、またはその両方のために使うことができるその他のパラメータ、と関連する様々なデータを含んでも良い。例えば、一実施形態では、プロセッサ210は、アクチュエータ240が触覚効果を出力することを引き起こすように構成された信号を生成する。そのような実施形態では、信号は、アクチュエータ240が出力する触覚効果の強度として使う圧力パラメータを含んでも良い。例えば、一実施形態によると、アクチュエータ240が受け取る圧力パラメータが大きければ大きいほど、出力される触覚効果がより強くなる。よって、信号は、アクチュエータ、ディスプレイ、ネットワークインターフェース、スピーカー、または特定の応答の側面を決定するためのデバイスのその他のコンポーネントかまたはデバイスと通信しているその他のコンポーネントによって処理されるように構成されたデータを含んでも良い。
図3を再度参照すると、ブロック340で指定されたように一旦信号が生成されると、方法300の次のステップは、ブロック350に示されたように信号を出力することである。例えば、前述した一実施形態では、プロセッサ210は、ウェブページをスクロールダウンすることをタッチ感応ディスプレイ230に引き起こすように構成された第1の信号を生成し、プロセッサ210は、ページがウェブページをスクロールダウンしていることを指し示す触覚効果を出力することをアクチュエータ240に引き起こすように構成された第2の信号を生成した。そのような実施形態では、プロセッサ210は、第1の信号をタッチ感応ディスプレイ230に出力し、第2の信号をアクチュエータ240に出力する。
様々な実施形態では、プロセッサ210は、1つ以上の生成された信号をあらゆる数のデバイスに出力しても良い。例えば、プロセッサ210は、一つの生成された信号をタッチ感応ディスプレイ230に、別の生成された信号をネットワークインターフェース250に、そして別の生成された信号をアクチュエータ260に、出力しても良い。その他の実施形態では、プロセッサ210は、単一の生成された信号を複数のコンポーネンツまたはデバイスに出力しても良い。例えば、一実施形態では、プロセッサ210は、一つの生成された信号をアクチュエータ240とアクチュエータ260の両方に出力する、別の実施形態では、プロセッサ210は、一つの生成された信号をアクチュエータ240と、アクチュエータ260と、ネットワークインターフェース250に出力する。もっと別の実施形態では、プロセッサ210は、一つの生成された信号をアクチュエータ240とアクチュエータ260の両方に出力し、第二の生成された信号をタッチ感応ディスプレイ230に出力する。
前述した通り、プロセッサ210は、1つ以上の信号をネットワークインターフェース250に出力しても良い。例えば、プロセッサ210は、デバイス200と通信している別のコンポーネントまたはデバイスにデータを送るようにネットワークインターフェース250に命令する信号をネットワークインターフェース250に出力しても良い。そのような実施形態では、ネットワークインターフェース250は、他のデバイスにデータを送っても良く、他のデバイスは他のデバイスと関連付けられたディスプレイを更新することのような機能を行っても良く、または他のデバイスは触覚効果を出力しても良い。よって、本発明の実施形態では、第2のデバイスが、第2のデバイスと通信している第1のデバイスとの相互作用に少なくとも一部は基づいて触覚効果を出力しても良い。その他の実施形態では、第2のデバイスは、例えば、第1のマルチ圧力タッチ感応入力デバイス200との相互作用に少なくとも一部は基づいて、第2のデバイスと関連付けられたディスプレイを更新すること、または第2のデバイスと関連付けられたスピーカーにサウンドを出力することのような、あらゆる数の機能を行っても良い。
様々な実施形態では、プロセッサ210が信号をコンポーネントに出力した後に、コンポーネントは、コンポーネントが信号を受け取ったことを指し示す確認をプロセッサ210に送っても良い。例えば、一実施形態では、アクチュエータ260は、触覚効果を出力するためのコマンドをプロセッサ210から受け取っても良い。一旦アクチュエータ260がコマンドを受け取ると、アクチュエータ260は、コマンドがアクチュエータ260によって受け取られたことの確認応答をプロセッサ210に送っても良い。別の実施形態では、プロセッサ210は、コンポーネントが命令を受け取っただけではなくコンポーネントが応答を行ったことを指し示す完了データを受け取っても良い。例えば、一実施形態では、アクチュエータ240は、プロセッサ210から様々なパラメータを受け取っても良い。それらのパラメータに基づいて、アクチュエータ240は、触覚効果を出力し、アクチュエータ240がパラメータを受け取って触覚効果を出力したことを指し示す完了データをプロセッサ210に送っても良い。
図3に示された方法300を実装し、図2に示されたデバイスに対して記載される、本発明の別の実施形態は、ペイント混合アプリケーションである。この実施形態では、ユーザは、第1の色を選択するために1つの指でタッチ感応ディスプレイ230に接触し、第2の色を選択するために第2の指でタッチ感応ディスプレイ230に接触する。この実施形態では、タッチ感応ディスプレイ230は、第2の色と混合された第1の色を表す第3の色を示す。例えば、もし第1の色が赤で第2の色が黄色であれば、タッチ感応ディスプレイ230上に示された第3の色はオレンジであっても良い。いくつかの実施形態では、第3の色の色合いが、第1または第2の指のどちらかの接触の圧力を増加するかまたは減少することによって変更されても良い。よって、第3の混合された色中に示された第1の色の量は、第1の接触の圧力の関数である。同様に、第3の混合された色中に示された第2の色の量は、第2の接触の圧力の関数である。よって、タッチ感応ディスプレイ230上に示された第3の混合された色は、第1の色、第1の圧力、第2の色、および第2の圧力の関数であり、それにより使われるべき新たな色を生成するための直感的なメカニズムを提供する。様々な実施形態では、1つ以上の触覚効果が、少なくとも1つの接触の印加された圧力に少なくとも一部は基づいて出力される。
図3に示された方法300を実装する彫刻アプリケーションの実施形態が、図2に示されたデバイスに対して以下に記載される。一実施形態では、粘土の1ピースがタッチ感応ディスプレイ230上に表示される。ユーザは、タッチ感応ディスプレイ230に接触することによって、粘土と相互作用して粘土を成形することができる。例えば、もしユーザが、各々が粘土上の異なる位置と対応している、3つの指でタッチ感応ディスプレイ230に接触すれば、タッチ感応ディスプレイ230は、各位置において変形をもった粘土を示すように更新される。ユーザは、どのように実際の粘土が操作され得るかと同様のやり方で、粘土を更に成形するためのマルチタッチ、マルチ圧力ジェスチャーを行うことがさらに可能であっても良い。よって、ユーザは、タッチ感応ディスプレイ230上で粘土を成形し形成することが可能である。いくつかの実施形態では、接触の変形のレートは、ユーザが各指で印加している圧力または動きの速度の関数であっても良い。様々な実施形態では、1つ以上の触覚効果が、接触の印加された圧力に少なくとも一部は基づいて出力される。
本発明の一実施形態は、図3に示された方法300を実装する質感ベースのアプリケーションに向けられている。この実施形態が、図2に示されたデバイスに対して記載される。この実施形態では、1つ以上の質感を表す画像が、タッチ感応ディスプレイ230上に表示される。ユーザは、1つ以上の指でタッチ感応ディスプレイに接触し、質感を表す画像に跨って1つ以上の指を引き摺ることができ、それに応答して、1つ以上の触覚効果が出力されても良い。例えば、一実施形態では、紙やすりの1ピースの画像が、タッチ感応ディスプレイ230上に表示される。この実施形態では、ユーザは、1つの指でタッチ感応ディスプレイ230に接触し、紙やすりの1ピースの画像が位置しているところのディスプレイ230の部分に沿って指を動かすことができる。それに応答して、触覚効果が紙やすりの1ピースに沿って指を実際に擦りつける感じをシミュレートするように、画像の質感を指し示す1つ以上の触覚効果が出力されても良い。いくつかの実施形態では、各接触の圧力に基づいた触覚効果が出力されても良い。よって、もしユーザが、タッチ感応ディスプレイ230上の接触の圧力を増加すれば、1つ以上の触覚効果の大きさも増加されても良く、またはタッチ感応表面の形状を変更することによってかまたはタッチ感応表面上の特徴を持ち上げることによってのように、ユーザの指とタッチ感応表面の間の摩擦が増加されても良い。従って、実施形態では、タッチ感応ディスプレイ230上に表示された1つ以上のオブジェクトの質感をシミュレートする1つ以上の触覚効果が、マルチタッチ、マルチ圧力接触またはジェスチャーに応答して出力されても良い。
更なる実施形態では、キーボードの画像が、タッチ感応ディスプレイ230上に表示される。ユーザは、キーボード上のキーに対応する位置においてタッチ感応ディスプレイ230に接触することによってデバイスと相互作用することができる。いくつかの実施形態では、ユーザは、キーボード上でタイプするために複数の指を使っても良い。この実施形態では、触覚効果が、1つ以上の接触の圧力に基づいて出力されても良い。例えば、一実施形態では、触覚効果の大きさは、ユーザがタッチ感応ディスプレイ230に接触する圧力の関数である。よって、より激しく(即ち、より多くの圧力で)ユーザがタッチ感応ディスプレイ230に接触すればするほど、触覚効果がより強くなる。
方法300のステップが特定の順序で示され記載されたが、本発明のその他の実施形態は、同じかまたは追加のステップからなっていても良く、あるいは図3に示されたステップを異なる順序かまたは平行して行っても良い。例えば、方法は、応答を決定する前に、複数のセンサー信号を受け取り、複数の接触を実質的に同時にかまたは順次に決定しても良い。
接触を検出しそれに応答する描写的方法
ここで図5を参照すると、図5は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイスにおいてアクチュエータ信号を出力する方法500に向けられたフローチャートを描く。図5の方法500の記載は、図2に示されたデバイス200と図6に示された例に対してなされる。
図6A−6Cは、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス200の動作を描く。本発明の実施形態は、ユーザが、マルチ接触マルチ圧力入力を使ってオブジェクトと相互作用することを許容しても良い。いくつかの実施形態では、オブジェクトは、ボタン、スクロールバー、ラジオボタン等のようなグラフィカルユーザオブジェクトであっても良い。いくつかの実施形態では、オブジェクトは、スクリーン上に表示されたあらゆるグラフィックオブジェクトまたは質感オブジェクトであっても良い。例えば、図6Aでは、グラフィックオブジェクトは水平板620を有するシーソー610であり、それはマルチ圧力タッチ感応入力デバイス200のタッチ感応ディスプレイ230上に表示されている。ユーザは、様々な位置において様々な圧力でタッチ感応ディスプレイ230に接触することによってシーソー610と相互作用する。
図5に示された方法500は、プロセッサ210が第1と第2のセンサー信号を受け取る時にブロック510で始まる。例えば、ユーザがデバイス200と相互作用するにつれて、プロセッサ210は、もしユーザがシーソー610の左側と関連付けられたタッチ感応ディスプレイ230上の位置に接触すれば、第1の接触と関連する第1の圧力のような、情報を提供される。加えて、ユーザがデバイス200と相互作用するにつれて、プロセッサ210は、もしユーザがシーソー610の右側と関連付けられたタッチ感応ディスプレイ230上の位置に接触すれば、第2の接触と関連する第2の圧力のような、情報を提供される。センサー信号を受け取った後で、方法500はブロック520に進む。
ブロック520では、プロセッサ210は、第1の接触の圧力が第2の接触の圧力よりも大きいかどうかを決定する。もし第1の接触の圧力が第2の接触の圧力よりも大きければ、方法500はブロック530に進み、そうでなければそれはブロック550に進む。
ブロック530では、プロセッサ210が第1のアクチュエータ信号を生成する。図6に示された実施形態では、第1のアクチュエータ信号は、第1の圧力が第2の圧力よりも大きいので板620の左側が下に動かされているのをシミュレートする触覚効果をアクチュエータ240が出力することを引き起こすように構成されている。生成された信号は、データ、命令、または図3に示された実施形態に対して上述したパラメータのいくつかまたは全てからなることができる。例えば、一実施形態では、生成された信号は、第1のアクチュエータがより大きな圧力に基づいて触覚効果の強度を決定するのに使うパラメータを含む。別の実施形態では、生成されたアクチュエータ信号は、シーソー610の左側上の接触とシーソー610の右側上の接触の間の圧力の差に基づいたパラメータを含んでいても良い。更にその他の実施形態では、生成されたアクチュエータ信号は、シーソー610の左側がどれ程地面に近いかに関連する情報を含んでいても良い。図6に示された実施形態では、プロセッサ210は、タッチ感応ディスプレイ230が図6Bに示されたようにディスプレイ上の画像を更新することを引き起こすように構成された別の信号を生成する。
一旦プロセッサ210がブロック530に示されたように第1のアクチュエータ信号を生成すると、プロセッサ210は、ブロック540に示されるように第1のアクチュエータ信号を出力する。例えば、図6に示された実施形態では、プロセッサ210は、アクチュエータ信号をアクチュエータ240に出力する。プロセッサ210からの信号を受け取ることに応答して、アクチュエータ240は、所望の触覚効果を出力する。図6に示された実施形態では、プロセッサ210は別の信号も出力し、それは図6Bに示されたようにディスプレイが更新されることを引き起こす。
ブロック550では、プロセッサ210は、第2のアクチュエータ信号を生成し、第2のアクチュエータ信号560をアクチュエータ260に出力する。この実施形態では、第2のアクチュエータ信号は、アクチュエータ260が所望の触覚効果を決定するのに使う大きさパラメータを含み、アクチュエータ260は触覚効果を出力する。例えば、図6に示された実施形態では、もし第1の圧力が第2の圧力よりも大きくなければ、プロセッサ210は、第1の圧力が第2の圧力よりも大きくないので板620の右側が下に動かされているのをシミュレートする触覚効果をアクチュエータ260が出力することを引き起こすように構成された第2のアクチュエータ信号を生成する。加えて、この実施形態では、プロセッサ210は、タッチ感応ディスプレイ230が図6Cに示されたようにディスプレイ上の画像を更新することを引き起こすように構成された別の信号を生成する。プロセッサ210が第2のアクチュエータ信号と別の信号を生成した後で、プロセッサ210は、第2のアクチュエータ信号をアクチュエータ260に出力し、別の信号をタッチ感応ディスプレイ230に出力する。それに応答して、アクチュエータ260は所望の触覚効果を出力し、ディスプレイは図6Cに示されたようにディスプレイを更新する。
よって、図6に示された実施形態では、板620の各側上の接触の圧力は、板620の各側に印加されている力と相関していても良い。もし圧力、即ちこの実施形態ではシミュレートされた力が、板620の一方側上で板620の他方側上よりも大きければ、タッチ感応ディスプレイ230は、より大きなシミュレートされた力の下にある側を優遇して板620が傾くことを指し示すように更新し、アクチュエータは、板620が対応する方向に傾いていることを指し示す触覚効果を出力する。一実施形態では、より大きなシミュレートされた力をもった側が傾く度合いは、接触の圧力の差に依存する。よって、シーソー610の板620は、圧力の差が図6Bにおいて程図6Cでは大きくないので、図6Bにおいて程多くは図6Cでは傾かない。更には、そのような実施形態では、圧力の差が図6Bにおいて程図6Cでは大きくないので、図6Bにおける触覚効果出力が図6Cにおける触覚効果出力よりも強くても良い。
図5に示された方法500を実装し、図2に示されたデバイスに対して記載される、本発明の別の実施形態は、スノーボードアプリケーションである。この実施形態では、ユーザは、2つの指でタッチ感応ディスプレイ230に接触することによってデバイス200と相互作用することができる。接触の圧力が、スノーボードを操縦するのに使われても良い。例えば、もしスノーボーダーが最初タッチ感応ディスプレイ230の中央に示されていれば、スクリーンの左側上のユーザの指がその接触圧力を増加する時に、スノーボーダーが左に動く。あるいは、もしスクリーンの右側上の接触の圧力が増加されるかまたはスクリーンの左側上の接触の圧力よりも大きければ、スノーボーダーが右に動いても良い。
いくつかの実施形態では、1つ以上の接触の圧力が、ターンするレートを決定するのに使われても良い。例えば、一実施形態では、接触の圧力の増加は、ターンの増加されたレートに結果としてなる。その他の実施形態では、1つ以上の接触の圧力が、方向とターンするレートの両方を決定するのに使われる。例えば、実施形態では、1つの接触の圧力がスノーボーダーの方向(即ち、左か右)を決定し、別の接触の圧力がターンするレートを決定する。この実施形態では、スノーボーダーの方向は、閾値圧力の関数であっても良い。よって、もしスノーボーダーの方向と関連付けられた接触の圧力が閾値圧力よりも大きければ、スノーボーダーは右に動いても良い。もしスノーボーダーの方向と関連付けられた接触の圧力が閾値圧力よりも小さければ、スノーボーダーは左に動いても良い。更には、この実施形態では、ターンするレートが圧力の関数であっても良い。よって、ターンするレートと関連付けられた接触の圧力の増加は、スノーボーダーのターンするレートの増加に結果としてなっても良い。同様に、ターンするレートと関連付けられた接触の圧力の減少は、スノーボーダーのターンするレートの減少に結果としてなっても良い。
実施形態では、1つ以上の触覚効果がまた、方向またはターンするレート、またはその両方をユーザに指し示すために、1つ以上の接触の圧力に少なくとも一部は基づいて出力されても良い。例えば、一実施形態では、スノーボーダーが左に動いていることを指し示す触覚効果が出力されても良く、スノーボーダーが右に動いていることを指し示す別の触覚効果が出力されても良い。例えば、振動がデバイスの右側上に出力されても良く、または振動がデバイスの左側上に出力され、スノーボーダーのターンのレートに対応するレートでデバイスの右側に動いても良い。別の実施形態では、振動の周波数または大きさを増加するかまたは減少することによってのように、スノーボーダーのターンするレートが増加していることを指し示す触覚効果が出力されても良く、スノーボーダーのターンするレートが減少していることを指し示す別の触覚効果が出力されても良い。
接触を検出しそれに応答する描写的方法
ここで図7を参照すると、図7は、本発明の実施形態に従った図2に示されたようなマルチ圧力タッチ感応入力デバイス200の動作を描く。図7に示された実施形態に対して、ユーザが仮想キーボード710をプレイするにつれて触覚フィードバックを提供するために、図5の方法が採用されても良い。図7に示された実施形態では、ピアノのキーがタッチ感応ディスプレイ230上に表示されている。キーボードの「C」音と対応するタッチ感応ディスプレイ230の位置をユーザがタッチするのに応答して、デバイス200は、オーディオ信号を生成してオーディオ信号をスピーカー270に送信することによって、「C」音と対応する周波数を有するサウンドを出力する。同様に、「C」、「E」および「G」音と対応するタッチ感応ディスプレイ230上の位置を実質的に同時にユーザがタッチするのに応答して、デバイス200は、異なるオーディオ信号を生成してそれをスピーカー270に送信することによって、「C−E−G」コードと対応する周波数を有するサウンドを出力する。
別の実施形態では、ユーザは、「C」、「E」および「G」音と対応するタッチ感応ディスプレイ230上の位置を一方の手でタッチしても良く、実質的に同時にユーザは、「D」、「F」および「A」音と対応するタッチ感応ディスプレイ230上の位置をもう一方の手でタッチしても良い。それに応答して、デバイス200は、「C−E−G」コードと対応する周波数を有するサウンドと「D−F−A」コードと対応する周波数を有するサウンドを出力しても良い。いくつかの実施形態では、デバイス200は、特定のコードかまたはコードの組み合わせ、またはその両方がユーザによって押されていることをユーザに喚起するために1つ以上の触覚効果を出力しても良い。例えば、どのコードがプレイされているかを指し示す1つ以上の触覚効果が出力されても良い。そのような実施形態では、もしユーザが「C−E−G」コードをプレイすれば1つの触覚効果が出力され、もしユーザが「D−F−A」コードをプレイすれば異なる触覚効果が出力される。よって、難聴のユーザまたはデバイス上のサウンドをミュートしたいユーザが、シミュレートされたピアノ710を演奏する練習をし、デバイス200によって出力された1つ以上の触覚効果に基づいてどのコードが演奏されているのか決定することができる。別の実施形態では、ユーザがシミュレートされたキーボード710上の様々な接触の圧力をそれぞれ増加または減少するにつれて、デバイス200によって出力された1つ以上の触覚効果の強度が増加または減少されても良い。よって、ユーザは、ユーザが演奏したい様々な音と対応するタッチ感応ディスプレイ230上の位置を押すことによってキーボードを演奏することをシミュレートすることができ、ユーザが押す 音または複数の音を指し示す触覚フィードバックを受け取ることができる。
一実施形態では、プロセッサ210は、与えられた曲についてユーザが正しい音を正しいタイミングでプレイしているかどうかを決定するソフトウェアを実行する。例えば、特定の曲については、「C」および「E」音が同時にプレイされる必要があっても良く、同時にプレイされた「D」、「F」および「A」音がそれに続く。もしユーザが誤って「C」および「E」音の代りに「C」および「F」音を押すと、デバイス200は、間違った音がプレイされたことをユーザに喚起する触覚効果を出力しても良い。同様に、もしユーザが正しく「C」および「E」音を同時にプレイし、「D」、「F」および「A」音を同時だが誤ったタイミングでプレイすれば、(即ち、音が速すぎるか遅すぎるようにプレイされる)、デバイス200は、それらのタイミングが間違っていたことをユーザに喚起する異なる触覚効果を出力しても良い。
別の実施形態では、第1のマルチ圧力タッチ感応入力デバイス200が第2のマルチ圧力タッチ感応入力デバイス200と通信している。この実施形態では、第1のデバイス200のタッチ感応ディスプレイ230は、第2のデバイス200のタッチ感応ディスプレイ230ど同じ情報を表示しても良い。例えば、両方のデバイスが、図7に示されたようなキーボードを表示しても良い。第1のデバイス200と相互作用しているユーザが曲の一部分を演奏することが想定され、第2のデバイス200と相互作用している別のユーザが曲の別の部分を演奏することが想定されるように、第1のデバイス200のプロセッサ210と第2のデバイス200のプロセッサ210は、各それぞれのデバイスのメモリー220上のソフトウェアを実行しても良い。一実施形態では、もし第1のユーザが誤って第1のデバイス200上の音をプレイすると、第1のデバイス200によって触覚効果が出力される。別の実施形態では、もし第1のユーザが誤って第1のデバイス200上の音をプレイすると、第1のデバイスは、触覚効果を出力するために第2のデバイスにコマンドまたは命令を送り、第2のデバイスが触覚効果を出力する。もっと別の実施形態では、もし第1のユーザが誤って第1のデバイス200上の音をプレイすると、第1のデバイス200は、第1のユーザがプレイした間違った音に関するデータを第2のデバイス200に送り、第2のデバイス200は、もしあれば触覚効果が、第2のデバイス200上かまたは第1のデバイス200上で、またはその両方で、出力される必要があるかどうかを決定する。
接触を検出しそれに応答する描写的方法
ここで図8を参照すると、図8は、本発明の実施形態に従ったマルチ圧力タッチ感応入力デバイス200においてアクチュエータ信号を出力する方法800に向けられたフローチャートを描く。図8の方法800の記載は、図2に示されたデバイス200と図9に示された例に対してなされる。
図8に示された方法は、グラフィックオブジェクトが表示された時に、ブロック810で始まる。例えば、図9では、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示される。グラフィックオブジェクトを表示した後で、方法800はブロック820に進む。
ブロック820では、第1の接触と第2の接触が受け取られる。例えば、図9に示された実施形態では、ユーザは、指でタッチ感応ディスプレイ230に接触することによってデバイス200と相互作用することができる。この実施形態では、ユーザがデバイス200と相互作用するにつれて、プロセッサ210は、タッチ感応ディスプレイ230上の第1の指からの第1の接触と関連付けられた、第1のx、y座標および第1の圧力のような情報を提供される。加えて、ユーザがデバイス200と相互作用するにつれて、プロセッサ210は、タッチ感応ディスプレイ230上の第2の指からの第2の接触と関連付けられた、第2のx、y座標および第2の圧力のような情報を提供される。いくつかの実施形態では、タッチ感応ディスプレイ上の第1の接触と第2の接触は、プロセッサ210が第1の接触と第2の接触の情報を受け取るために、実質的に同時に起こる必要があっても良い。
一旦第1の接触と第2の接触が受け取られれば、方法800はブロック830に進む。ブロック830では、第1の接触がグラフィックオブジェクトに対応する位置にあるかどうかについての決定がなされる。例えば、図9に示された実施形態では、もし第1の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応すれば、プロセッサ210は、第1の接触がグラフィックオブジェクト上の接触であることを決定する。しかしながら、この実施形態では、もし第1の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応しなければ、プロセッサ210は、第1の接触がグラフィックオブジェクト上ではないことを決定する。もし第1の接触がグラフィックオブジェクト上であれば、方法800はブロック840に進み、そうでなければ、それはブロック865に進む。
ブロック840では、第2の接触がグラフィックオブジェクトに対応する位置にあるかどうかについての決定がなされる。例えば、図9では、もし第2の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応すれば、プロセッサ210は、第2の接触がグラフィックオブジェクト上の接触であることを決定する。しかしながら、この実施形態では、もし第2の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応しなければ、プロセッサ210は、第2の接触がグラフィックオブジェクト上ではないことを決定する。もし第2の接触がグラフィックオブジェクト上であれば、方法800はブロック845に進み、そうでなければ、それはブロック855に進む。
ブロック845では、プロセッサ210が第1のアクチュエータ信号を生成する。例えば、図9では、もし第1の接触がグラフィックオブジェクト910上であり第2の接触もまたグラフィックオブジェクト910上であれば、プロセッサ210は、応答が、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズを拡大することであることを決定する。加えて、この実施形態では、プロセッサ210は、応答が、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが拡大されていることを指し示す触覚効果を出力することであることを決定する。この実施形態では、プロセッサ210は、増加する周波数または強度の振動のような、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが拡大されていることを指し示す触覚効果を出力することをアクチュエータ240に引き起こすように構成された第1のアクチュエータ信号を生成する。加えて、プロセッサ210は、飛び跳ねまたは揺すりのような、オブジェクト上の2つの接触を指し示すための触覚効果からまたなる第1のアクチュエータ信号を生成しても良い。加えて、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズを拡大することをタッチ感応ディスプレイ230に引き起こすように構成されたディスプレイ信号を生成する。
依然として図9を参照してブロック845を参照すると、一実施形態では、プロセッサ210は、もし第1の接触の圧力が閾値圧力よりも大きければ、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが拡大される必要があることを決定する。そうでなければ、この実施形態では、プロセッサ210は、応答が必要無いことを決定しても良い。別の実施形態では、プロセッサ210は、第2の接触の圧力が閾値圧力の下になるまでタッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが拡大される必要があることを決定する。
一旦ブロック845に示されたように第1のアクチュエータ信号が生成されると、プロセッサ210は、ブロック850に示されたように第1のアクチュエータ信号を出力する。例えば、図9に示された実施形態では、プロセッサ210は、生成された第1のアクチュエータ信号をアクチュエータ240に出力する。アクチュエータ240は、プロセッサ210から第1のアクチュエータ信号を受け取り、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが拡大されていることを指し示す触覚効果を出力する。加えて、図9に示された実施形態では、プロセッサ210は、生成されたディスプレイ信号をタッチ感応ディスプレイ230に出力し、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230上に示されたグラフィックオブジェクト910のサイズを更新する。
ブロック855では、プロセッサ210が第2のアクチュエータ信号を生成する。例えば、図9では、もし第1の接触がグラフィックオブジェクト910上であり第2の接触がグラフィックオブジェクト910上でなければ、プロセッサ210は、応答が、グラフィックオブジェクト910の色を変化させることであることを決定する。加えて、この実施形態では、プロセッサ210は、応答が、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色が変化していることを指し示す触覚効果を出力することであることを決定する。例えば、プロセッサ210は、色が変化する毎に飛び跳ねまたは揺すり効果が出力されるべきであることを決定しても良い。この実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色が変化していることを指し示す触覚効果を出力することをアクチュエータ260に引き起こすように構成された第2のアクチュエータ信号を生成する。加えて、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色を変化させることをタッチ感応ディスプレイ230に引き起こすように構成されたディスプレイ信号を生成する。
依然として図9を参照してブロック855を参照すると、一実施形態では、プロセッサ210は、もし第1の接触の圧力が閾値圧力よりも大きければ、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色が変化させられる必要があることを決定する。そうでなければ、この実施形態では、プロセッサ210は、応答が必要無いことを決定しても良い。別の実施形態では、プロセッサ210は、第2の接触の圧力が閾値圧力の下になるまでタッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色が変化させられる必要があることを決定する。例えば、グラフィックオブジェクト910の色は、第2の接触の圧力が閾値圧力の下になるまで、予め決められた時間間隔で黄から緑に更に青に変化しても良い。一実施形態では、グラフィックオブジェクト910の色は、圧力に基づいて変化する。例えば、グラフィックオブジェクト910の色は、第1の接触の圧力が増加するにつれて、赤から黄に更に緑に更に青に変化しても良い。
一旦ブロック855に示されたように第2のアクチュエータ信号が生成されると、プロセッサ210は、ブロック860に示されたように第2のアクチュエータ信号を出力する。例えば、図9に示された実施形態では、プロセッサ210は、生成された第2のアクチュエータ信号をアクチュエータ260に出力する。アクチュエータ260は、プロセッサ210から第2のアクチュエータ信号を受け取り、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の色が変化させられていることを指し示す触覚効果を出力する。加えて、図9に示された実施形態では、プロセッサ210は、生成されたディスプレイ信号をタッチ感応ディスプレイ230に出力し、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230上に示されたグラフィックオブジェクト910の色を更新する。
もし第1の接触がグラフィックオブジェクトに対応する位置にはなかったことがブロック830で決定されたならば、方法はブロック865に進む。ブロック865では、第2の接触がグラフィックオブジェクトに対応する位置にあるかどうかについての決定がなされる。例えば、図9では、もし第2の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応すれば、プロセッサ210は、第2の接触がグラフィックオブジェクト上の接触であることを決定する。しかしながら、この実施形態では、もし第2の接触の位置が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置に対応しなければ、プロセッサ210は、第2の接触がグラフィックオブジェクト上ではないことを決定する。もし第2の接触がグラフィックオブジェクト上であれば、方法800はブロック870に進み、そうでなければ、それはブロック880に進む。
ブロック870では、プロセッサ210が第3のアクチュエータ信号を生成する。例えば、図9では、もし第1の接触がグラフィックオブジェクト910上ではなく第2の接触がグラフィックオブジェクト910上であれば、プロセッサ210は、応答が、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置を動かすことであることを決定する。加えて、この実施形態では、プロセッサ210は、応答が、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の位置が変化していることを指し示す触覚効果を出力することであることを決定する。この実施形態では、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の位置が変化していることを指し示す触覚効果を出力することをアクチュエータ240に引き起こすように構成された第3のアクチュエータ信号を生成する。加えて、プロセッサ210は、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置を変化させることをタッチ感応ディスプレイ230に引き起こすように構成されたディスプレイ信号を生成する。
依然として図9を参照してブロック870を参照すると、一実施形態では、プロセッサ210は、もし第1の接触の圧力が閾値圧力よりも大きければ、応答は、グラフィックオブジェクト910を上向き方向に動かすことであることを決定する。もし第1の接触の圧力が閾値圧力より小さければ、応答は、グラフィックオブジェクト910を下向き方向に動かすことである。いくつかの実施形態では、もし第2の接触の圧力が閾値圧力よりも大きければ、応答は、グラフィックオブジェクトを左に動かすことである。もし第2の接触の圧力が閾値圧力より小さければ、応答は、グラフィックオブジェクト910を右に動かすことである。いくつかの実施形態では、応答は、第1の圧力と第2の圧力の両方に基づいて決定されても良い。例えば、一実施形態では、第1の圧力と第2の圧力に基づいてグラフィックオブジェクト910の位置を上向きと左の両方に動かすことであっても良い。別の実施形態では、グラフィックオブジェクト910の位置は、接触の位置の変化に基づいて変化させられても良い。よって、もし第1の接触の位置が上向き方向に動けば、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の位置もまた上向き方向に動かされても良い。一実施形態では、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910の位置および色またはサイズの両方が、第1の接触と第2の接触の両方の位置および圧力に基づいて変化させられても良い。
一旦ブロック870に示されたように第3のアクチュエータ信号が生成されると、プロセッサ210は、ブロック875に示されたように第3のアクチュエータ信号を出力する。例えば、上述したいくつかの実施形態では、プロセッサ210は、生成された第3のアクチュエータ信号をアクチュエータ240に出力する。アクチュエータ240は、プロセッサ210から第3のアクチュエータ信号を受け取り、グラフィックオブジェクト910がタッチ感応ディスプレイ230上に表示された位置が変化させられていることを指し示す触覚効果を出力する。加えて、図9に対して示された実施形態では、プロセッサ210は、生成されたディスプレイ信号をタッチ感応ディスプレイ230に出力し、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230上に示されたグラフィックオブジェクト910の位置を更新する。
ブロック880では、プロセッサ210が第4のアクチュエータ信号を生成する。例えば、図9では、もし第1の接触がグラフィックオブジェクト910上ではなく第2の接触がグラフィックオブジェクト910上でなければ、プロセッサ210は、応答が、グラフィックオブジェクト910のサイズを減少することであることを決定する。加えて、この実施形態では、プロセッサ210は、応答が、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが減少させられていることを指し示す触覚効果を出力することであることを決定する。この実施形態では、プロセッサ210は、減少する周波数または強度の振動のような、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが減少させられていることを指し示す触覚効果を出力することをアクチュエータ260に引き起こすように構成された第4のアクチュエータ信号を生成する。加えて、プロセッサ210は、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズを減少させることをタッチ感応ディスプレイ230に引き起こすように構成されたディスプレイ信号を生成する。
依然として図9を参照してブロック880を参照すると、一実施形態では、プロセッサ210は、もし第1の接触の位置の変化が右向き方向であり第2の接触の位置の変化が左向き方向であれば、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが減少させられる必要があることを決定する。別の実施形態では、プロセッサ210は、もし第1の接触の位置の変化が第2の接触の位置の変化の反対方向であり、第1と第2の接触がお互いにより近くに来るように第1と第2の接触の位置が変化していれば、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが減少させられる必要があることを決定する。一実施形態では、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズを減少させることに加えて、プロセッサは、第1の接触の圧力、第2の接触の圧力、またはその両方に基づいて、グラフィックオブジェクト910の色が変化させられる必要があるかまたはグラフィックオブジェクト910の位置が動かされる必要があるという応答を決定しても良い。
一旦ブロック880に示されたように第4のアクチュエータ信号が生成されると、プロセッサ210は、ブロック885に示されたように第4のアクチュエータ信号を出力する。例えば、図9に対して上述したいくつかの実施形態では、プロセッサ210は、生成された第4のアクチュエータ信号をアクチュエータ260に出力する。アクチュエータ260は、プロセッサ210から第4のアクチュエータ信号を受け取り、タッチ感応ディスプレイ230上に表示されたグラフィックオブジェクト910のサイズが減少させられていることを指し示す触覚効果を出力する。加えて、図9に示された実施形態では、プロセッサ210は、生成されたディスプレイ信号をタッチ感応ディスプレイ230に出力し、タッチ感応ディスプレイ230は、タッチ感応ディスプレイ230上に示されたグラフィックオブジェクト910のサイズを更新する。
図8に示された方法800を実装し、図2に示されたデバイスに対して記載される、本発明の別の実施形態は、ネットワーク化アプリケーションである。この実施形態では、2つのマルチ圧力タッチ感応入力デバイス200が、それぞれのネットワークインターフェース250を使ってお互いと通信している。例えば、一実施形態では、デバイス200はインターネット上でお互いと通信する。別の実施形態では、通信は無線ネットワーク上であっても良い。
様々な実施形態では、1つ以上の触覚効果が、1つのデバイス上の2つ以上の接触と別のデバイス上の2つ以上の接触に基づいて出力されても良い。例えば、2つのデバイス200がお互いと通信していても良く、1つのデバイス200のユーザが、第1の指でディスプレイ230上の第1の位置をタッチしても良く、第2の指でディスプレイ230上の第2の位置をタッチしても良い。同様に、第2のデバイス200のユーザが、第1の指でディスプレイ230上の第1の位置をタッチしても良く、第2の指でディスプレイ230上の第2の位置をタッチしても良い。一実施形態では、第1のデバイス上の第1の接触の位置が第2のデバイス上の第1の接触の位置と実質的に対応し、第1のデバイス上の第2の接触の位置が第2のデバイス上の第2の接触の位置と実質的に対応し、それから応答が起こっても良い。例えば、一実施形態では、応答は、ファイル、ウェブサイト、アプリケーション等へのアクセスがどちらか一方かまたは両方のユーザに許可されたということであっても良い。実施形態では、応答は、アクセスが許可されたことまたは各デバイス上の両方の接触の位置が実質的に同じ位置にあることを指し示す1つ以上の触覚効果を含んでいても良い。その他の実施形態では、もし接触のいずれかが実質的に同様の位置になければ少なくとも1つの接触がマッチしないことを指し示す1つ以上の触覚効果が、どちらかのデバイスか又は両方のデバイスに出力されても良い。
いくつかの実施形態では、1つ以上の触覚効果が、第1のデバイス上の接触の圧力と第2のデバイス上の接触の圧力に基づいて出力されても良く、ここで第1のデバイスと第2のデバイスはお互いと通信している。例えば、2つ以上のデバイスがお互いと通信しているレスリングアプリケーションでは、デバイスの1つのユーザは、1つの位置において第1の圧力でタッチ感応ディスプレイ230に接触しても良い。別のデバイスのユーザは、第1のデバイスのディスプレイ上の第1の位置に対応する第2の位置において第2の圧力でタッチ感応ディスプレイ230に接触しても良い。この実施形態では、1つ以上の触覚効果が、接触の圧力に基づいてどちらかのデバイスまたは両方のデバイス上に出力されても良い。例えば、一実施形態では、もし第1のデバイス上の第1の接触の圧力が第2のデバイス上の第2の接触の圧力よりも大きければ、第1のユーザが第2のユーザよりも強くパンチしていることを指し示す触覚効果が第2のデバイス上に出力されても良い。別の実施形態では、もし第2のデバイス上の第2の接触の圧力が第1のデバイス上の第1の接触の圧力よりも大きければ、第2のユーザが第1のユーザよりも強くプッシングまたはグラップリングしていることを指し示す触覚効果が第1のデバイス上に出力されても良く、第2のユーザが現在試合に勝っていることを指し示す別の触覚効果が第2のデバイス上に出力されても良い。
一実施形態では、1つ以上の触覚効果が、別のデバイスと通信しているデバイスに出力されても良い。例えば、タッチ感応移動電話のような第1のデバイスが、1つ以上のアクチュエータを有する装着可能なアームストラップのような第2のデバイスと通信していても良い。タッチ感応移動電話上の様々なマルチタッチ、マルチ圧力相互作用に応答して、電話は1つ以上の作動コマンドをアームストラップに送っても良い。実施形態では、アームストラップは、1つ以上の作動コマンドを受け取り、それに応答して、1つ以上の触覚効果を出力する。よって、実施形態では、1つ以上の触覚効果を出力するために触覚効果生成デバイスが使われても良い。触覚効果生成デバイスは、マルチタッチ、マルチ圧力接触を受け取るタッチ感応デバイスとは別であることができる。
一般
ここでの方法とシステムは、様々なマシーン上で実行されるソフトウェアの観点で記載されたが、方法とシステムはまた、特定に様々な方法を実行するための、フィールドプログラマブルゲートアレイ(FPGA)のような、特定に構成されたハードウェアとして実装されても良い。例えば、図1−2を再度参照すると、実施形態は、デジタル電子回路で、またはコンピューターハードウェア、ファームウェア、ソフトウェアで、またはそれらの組み合わせで、実装されることができる。一実施形態では、デバイスは、1つのプロセッサまたは複数のプロセッサからなっていても良い。プロセッサは、プロセッサに結合されたランダムアクセスメモリー(RAM)のような、コンピューター読み取り可能な媒体からなる。プロセッサは、画像を編集するための1つ以上のコンピュータープログラムを実行することのように、メモリー中に格納されたコンピューター実行可能なプログラム命令を実行する。そのようなプロセッサは、マイクロプロセッサ、デジタル信号プロセッサ(DSP),アプリケーション特定集積回路(ASIC)、フィールドプログラマブルゲートアレイ(FPGAs)およびステートマシーンからなっていても良い。そのようなプロセッサは、PLCsのようなプログラム可能な電子デバイス、プログラム可能な割り込みコントローラ(PICs)、プログラム可能な論理デバイス(PLDs)、プログラム可能なリードオンリーメモリー(PROMs)、電子的にプログラム可能なリードオンリーメモリー(EPROMsまたはEEPROMs)、またはその他の同様なデバイスから更になっていても良い。
そのようなプロセッサは、プロセッサによって実行された時に、ここにプロセッサによって行われるかまたは支援されるように記載されたステップをプロセッサが行うことを引き起こすことができる命令を格納し得る媒体、例えばコンピューター読み取り可能な媒体、からなっていても良く、またはそれと通信していても良い。コンピューター読み取り可能な媒体の実施形態は、ウェブサーバー中のプロセッサのようなプロセッサにコンピューター読み出し可能な命令を提供することが可能な電子的、光学的、磁気的またはその他の格納デバイスからなっていても良いが、それらに限定はされない。媒体のその他の例は、フロッピー(登録商標)ディスク、CD−ROM、磁気ディスク、メモリーチップ、ROM、RAM、ASIC、構成されたプロセッサ、全光学的媒体、全磁気的テープまたはその他の磁気的媒体、またはそれからコンピュータープロセッサが読み出すことができるあらゆるその他の媒体からなるが、それらに限定はされない。記載されたプロセッサと処理は、1つ以上の構造にあっても良く、1つ以上の構造を通して分散されていても良い。プロセッサは、ここに記載された方法(または方法の部分)の1つ以上を行うためのコードからなっていても良い。
発明のいくつかの実施形態の前述の記載は、描写と記載の目的のためだけに提示されており、網羅的であることや、開示されたその通りの形に発明を限定することは意図されていない。その多数の変形および適応が、発明の精神と範囲から逸脱することなく当業者には明らかであろう。
ここでの「一実施形態」または「実施形態」への言及は、実施形態との関係で記載された特定の特徴、構造、動作、またはその他の特性が、発明の少なくとも1つの実装に含まれていても良いことを意味する。発明は、そのように記載された特定の実施形態に制約はされない。明細書の様々な場所における「一実施形態では」または「実施形態では」という言回しの出現は、必ずしも同じ実施形態を指さない。「一実施形態」との関係でこの明細書に記載されたあらゆる特定の特徴、構造、動作、またはその他の特性は、あらゆるその他の実施形態に対して記載されたその他の特徴、構造、動作、またはその他の特性と組み合わされても良い。

Claims (22)

  1. タッチ感応入力デバイス上の第1のオブジェクトの第1の接触に応答してタッチ感応入力デバイスから第1のセンサー信号を受け取ることであって、第1のセンサー信号は第1の接触の第1の位置と第1の圧力を含むことと、
    第1の接触と実質的に同時にタッチ感応入力デバイス上の第2のオブジェクトの第2の接触に応答してタッチ感応入力デバイスから第2のセンサー信号を受け取ることであって、第2のセンサー信号は第2の接触の第2の位置と第2の接触の第2の圧力を含むことと、
    第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて信号を生成することであって、信号は触覚効果を引き起こすように構成されていることと、
    信号を出力することと、
    を含む方法。
  2. 信号は、アクチュエータが触覚効果を出力することを引き起こすように構成されたアクチュエータ信号を含む、請求項1の方法。
  3. 信号は、第1の圧力閾値に更に基づいている、請求項1の方法。
  4. 信号は、第2の圧力閾値に更に基づいている、請求項1の方法。
  5. 信号は、第1の圧力と第2の圧力の間の差に少なくとも一部は基づいている、請求項1の方法。
  6. 触覚効果は、振動、摩擦、触感、または変形の少なくとも1つを含む、請求項1の方法。
  7. 第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて第2のアクチュエータ信号を決定することと、
    第2のアクチュエータ信号を出力することと、
    を更に含む、請求項2の方法。
  8. アクチュエータ信号はアクチュエータに出力され、アクチュエータはタッチ感応入力デバイスに触覚効果を出力するように構成されている、請求項2の方法。
  9. アクチュエータは、圧電アクチュエータ、回転モーター、または線形共鳴アクチュエータを含む、請求項8の方法。
  10. アクチュエータは、複数のアクチュエータを含み、アクチュエータ信号を生成することは、複数のアクチュエータの少なくとも1つにアクチュエータ信号を生成することを含む、請求項8の方法。
  11. グラフィックオブジェクトの表示を引き起こすように構成された表示信号を出力することを更に含む、請求項8の方法。
  12. グラフィックオブジェクトは、グラフィカルユーザオブジェクトを含む、請求項11の方法。
  13. アクチュエータ信号は、第1の接触、第2の接触およびグラフィックオブジェクトの間の相互作用に更に基づいている、請求項11の方法。
  14. 相互作用は、第1のオブジェクトによるグラフィックオブジェクトとの接触と、第2のオブジェクトによるグラフィックオブジェクトとの接触無しを含む、請求項13の方法。
  15. 相互作用は、第1のオブジェクトによるグラフィックオブジェクトとの接触無しと、第2のオブジェクトによるグラフィックオブジェクトとの接触無しを含む、請求項13の方法。
  16. グラフィックオブジェクトは、第1のグラフィックオブジェクトと第2のグラフィックオブジェクトを含み、第1のオブジェクトが第1のグラフィックオブジェクトに接触し、第2のオブジェクトが第2のグラフィックオブジェクトに接触する時に、アクチュエータ信号がアクチュエータに出力される、請求項13の方法。
  17. 第1および第2の接触と関連付けられたジェスチャーを決定することを更に含む、請求項1の方法。
  18. ジェスチャーと関連付けられたサウンドを出力することを更に含む、請求項17の方法。
  19. ジェスチャーは、第1の圧力と第2の圧力に少なくとも一部は基づいている、請求項17の方法。
  20. 信号を出力することは、タッチ感応入力デバイスと通信している第2のデバイスに信号を送ることを含む、請求項1の方法。
  21. タッチ感応入力デバイスと、
    タッチ感応入力デバイスと通信しているプロセッサであって、プロセッサは、
    タッチ感応入力デバイス上の第1のオブジェクトの第1の接触に応答してタッチ感応入力デバイスから第1のセンサー信号を受け取り、第1のセンサー信号は第1の接触の第1の位置と第1の接触の第1の圧力を含み、
    第1の接触と実質的に同時にタッチ感応入力デバイス上の第2のオブジェクトの第2の接触に応答してタッチ感応入力デバイスから第2のセンサー信号を受け取り、第2のセンサー信号は第2の接触の第2の位置と第2の接触の第2の圧力を含み、
    第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて信号を生成し、信号は触覚効果を引き起こすように構成されており、
    信号を出力する、
    ように構成されているものと、
    を含むシステム。
  22. タッチ感応入力デバイス上の第1のオブジェクトの第1の接触に応答してタッチ感応入力デバイスから第1のセンサー信号を受け取るためのプログラムコードであって、第1のセンサー信号は第1の接触の第1の位置と第1の接触の第1の圧力を含むものと、
    第1の接触と実質的に同時にタッチ感応入力デバイス上の第2のオブジェクトの第2の接触に応答してタッチ感応入力デバイスから第2のセンサー信号を受け取るためのプログラムコードであって、第2のセンサー信号は第2の接触の第2の位置と第2の接触の第2の圧力を含むものと、
    第1のセンサー信号と第2のセンサー信号に少なくとも一部は基づいて信号を生成するためのプログラムコードあって、信号はアクチュエータが触覚効果を引き起こすように構成されているものと、
    信号を出力するためのプログラムコードと、
    を含むプログラムコードからなるコンピューター読み取り可能な媒体。
JP2012241448A 2011-11-07 2012-11-01 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法 Expired - Fee Related JP6329723B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/290,502 US9582178B2 (en) 2011-11-07 2011-11-07 Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US13/290,502 2011-11-07

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017157477A Division JP6553136B2 (ja) 2011-11-07 2017-08-17 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法

Publications (2)

Publication Number Publication Date
JP2013117951A true JP2013117951A (ja) 2013-06-13
JP6329723B2 JP6329723B2 (ja) 2018-05-23

Family

ID=47177787

Family Applications (3)

Application Number Title Priority Date Filing Date
JP2012241448A Expired - Fee Related JP6329723B2 (ja) 2011-11-07 2012-11-01 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
JP2017157477A Expired - Fee Related JP6553136B2 (ja) 2011-11-07 2017-08-17 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
JP2019124135A Withdrawn JP2019204520A (ja) 2011-11-07 2019-07-03 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2017157477A Expired - Fee Related JP6553136B2 (ja) 2011-11-07 2017-08-17 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
JP2019124135A Withdrawn JP2019204520A (ja) 2011-11-07 2019-07-03 タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法

Country Status (5)

Country Link
US (3) US9582178B2 (ja)
EP (2) EP2590067A3 (ja)
JP (3) JP6329723B2 (ja)
KR (1) KR102104463B1 (ja)
CN (2) CN107608518A (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015016210A1 (ja) * 2013-08-01 2015-02-05 株式会社ニコン 電子機器、および電子機器の制御プログラム
JP2015036977A (ja) * 2013-08-12 2015-02-23 イマージョン コーポレーションImmersion Corporation 触れていじるためのシステム及び方法
JP2015049850A (ja) * 2013-09-04 2015-03-16 レノボ・シンガポール・プライベート・リミテッド 携帯型情報処理装置、そのデータ処理方法、およびコンピュータが実行可能なプログラム
JP2016024826A (ja) * 2014-07-21 2016-02-08 イマージョン コーポレーションImmersion Corporation マルチタッチ型入力のための触覚効果を決定するためのシステム及び方法
JP2016540314A (ja) * 2013-12-13 2016-12-22 ダヴ 触覚フィードバックを備えた感応性コマンド表面でのアクチュエータの制御
JP2017500660A (ja) * 2013-12-19 2017-01-05 ダヴ 自動車両の少なくとも2つの機能を制御するためのマン/マシンインターフェース
JP2018503270A (ja) * 2015-11-25 2018-02-01 小米科技有限責任公司Xiaomi Inc. スクリーン保護方法及び装置
JP2020038681A (ja) * 2014-03-21 2020-03-12 イマージョン コーポレーションImmersion Corporation 力ベースのオブジェクト操作及び触覚的感覚のためのシステム及び方法

Families Citing this family (144)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SE533704C2 (sv) 2008-12-05 2010-12-07 Flatfrog Lab Ab Pekkänslig apparat och förfarande för drivning av densamma
US9132352B1 (en) 2010-06-24 2015-09-15 Gregory S. Rabin Interactive system and method for rendering an object
US8426716B2 (en) * 2011-01-07 2013-04-23 Apple Inc. Intelligent keyboard interface for virtual musical instrument
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US20130093719A1 (en) * 2011-10-17 2013-04-18 Sony Mobile Communications Japan, Inc. Information processing apparatus
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
WO2013154720A1 (en) 2012-04-13 2013-10-17 Tk Holdings Inc. Pressure sensor including a pressure sensitive material for use with control systems and methods of using the same
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
CN109298789B (zh) 2012-05-09 2021-12-31 苹果公司 用于针对激活状态提供反馈的设备、方法和图形用户界面
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
EP2847659B1 (en) 2012-05-09 2019-09-04 Apple Inc. Device, method, and graphical user interface for transitioning between display states in response to a gesture
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
CN107728906B (zh) 2012-05-09 2020-07-31 苹果公司 用于移动和放置用户界面对象的设备、方法和图形用户界面
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
EP3410287B1 (en) 2012-05-09 2022-08-17 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
JP6082458B2 (ja) 2012-05-09 2017-02-15 アップル インコーポレイテッド ユーザインタフェース内で実行される動作の触知フィードバックを提供するデバイス、方法、及びグラフィカルユーザインタフェース
US20130311881A1 (en) * 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US10168835B2 (en) 2012-05-23 2019-01-01 Flatfrog Laboratories Ab Spatial resolution in touch displays
JP6260622B2 (ja) 2012-09-17 2018-01-17 ティーケー ホールディングス インク.Tk Holdings Inc. 単一層力センサ
KR20140036846A (ko) * 2012-09-18 2014-03-26 삼성전자주식회사 국부적인 피드백을 제공하는 사용자 단말 장치 및 그 방법
WO2014105275A1 (en) * 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
AU2013368440B2 (en) 2012-12-29 2017-01-05 Apple Inc. Device, method, and graphical user interface for navigating user interface hierarchies
CN104903834B (zh) 2012-12-29 2019-07-05 苹果公司 用于在触摸输入到显示输出关系之间过渡的设备、方法和图形用户界面
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
KR102178845B1 (ko) 2013-01-29 2020-11-13 삼성전자주식회사 햅틱을 제어하는 휴대 단말 및 방법
US20140237408A1 (en) * 2013-02-15 2014-08-21 Flatfrog Laboratories Ab Interpretation of pressure based gesture
US9436282B2 (en) * 2013-03-14 2016-09-06 Immersion Corporation Contactor-based haptic feedback generation
US20140267113A1 (en) * 2013-03-15 2014-09-18 Tk Holdings, Inc. Human machine interfaces for pressure sensitive control in a distracted operating environment and method of using the same
US20140267114A1 (en) * 2013-03-15 2014-09-18 Tk Holdings, Inc. Adaptive human machine interfaces for pressure sensitive control in a distracted operating environment and method of using the same
WO2014146164A1 (en) * 2013-03-22 2014-09-25 Lifi Labs Inc Color selection
WO2014168567A1 (en) 2013-04-11 2014-10-16 Flatfrog Laboratories Ab Tomographic processing for touch detection
US9672553B2 (en) 2013-04-15 2017-06-06 Ebay Inc. Searchable texture index
WO2014190293A2 (en) * 2013-05-24 2014-11-27 New York University Haptic force-feedback for computing interfaces
JP6851197B2 (ja) 2013-05-30 2021-03-31 ティーケー ホールディングス インク.Tk Holdings Inc. 多次元トラックパッド
US9632581B2 (en) 2013-06-11 2017-04-25 Immersion Corporation Systems and methods for pressure-based haptic effects
WO2015005847A1 (en) 2013-07-12 2015-01-15 Flatfrog Laboratories Ab Partial detect mode
US9443401B2 (en) 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US9207764B2 (en) * 2013-09-18 2015-12-08 Immersion Corporation Orientation adjustable multi-channel haptic device
KR102201731B1 (ko) * 2013-09-26 2021-01-12 엘지전자 주식회사 택타일 피드백을 발생하는 디스플레이 디바이스 및 그 제어 방법
US9898087B2 (en) 2013-10-08 2018-02-20 Tk Holdings Inc. Force-based touch interface with integrated multi-sensory feedback
US10047912B2 (en) 2013-10-15 2018-08-14 LIFI Labs, Inc. Lighting assembly
US9223451B1 (en) 2013-10-25 2015-12-29 Google Inc. Active capacitive sensing on an HMD
US11455884B2 (en) 2014-09-02 2022-09-27 LIFI Labs, Inc. Lighting system
US9210779B2 (en) 2013-11-14 2015-12-08 LIFI Labs, Inc. Resettable lighting system and method
JP6351964B2 (ja) * 2013-12-11 2018-07-04 株式会社東海理化電機製作所 入力装置
FR3015381B1 (fr) * 2013-12-19 2016-01-29 Dav Dispositif de controle pour vehicule automobile et procede de commande
US10146376B2 (en) 2014-01-16 2018-12-04 Flatfrog Laboratories Ab Light coupling in TIR-based optical touch systems
WO2015108480A1 (en) 2014-01-16 2015-07-23 Flatfrog Laboratories Ab Improvements in tir-based optical touch systems of projection-type
US8941500B1 (en) 2014-01-23 2015-01-27 Google Inc. Somatosensory type notification alerts
JP2015170173A (ja) * 2014-03-07 2015-09-28 ソニー株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
JP6300604B2 (ja) * 2014-04-01 2018-03-28 キヤノン株式会社 触感制御装置、触感制御方法及びプログラム
US10032345B2 (en) * 2014-04-02 2018-07-24 Immersion Corporation Wearable device with flexibly mounted haptic output device
US10133351B2 (en) * 2014-05-21 2018-11-20 Apple Inc. Providing haptic output based on a determined orientation of an electronic device
CN106465499B (zh) 2014-05-22 2018-11-30 莱弗实验室公司 定向照明系统和方法
WO2015199602A1 (en) 2014-06-27 2015-12-30 Flatfrog Laboratories Ab Detection of surface contamination
US9203951B1 (en) * 2014-07-03 2015-12-01 International Business Machines Corporation Mobile telephone adapted for use with one hand
WO2016036436A1 (en) 2014-09-02 2016-03-10 Apple Inc. Stopwatch and timer user interfaces
US10466826B2 (en) 2014-10-08 2019-11-05 Joyson Safety Systems Acquisition Llc Systems and methods for illuminating a track pad system
CN105630365A (zh) * 2014-10-29 2016-06-01 深圳富泰宏精密工业有限公司 网页调整方法及系统
DE102015200036A1 (de) * 2015-01-05 2016-07-07 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung in einem Kraftfahrzeug zur Eingabe von Daten mit zwei Eingabearten und haptischer Rückkopplung
JP2016133913A (ja) * 2015-01-16 2016-07-25 ソニー株式会社 入力装置
WO2016122385A1 (en) 2015-01-28 2016-08-04 Flatfrog Laboratories Ab Dynamic touch quarantine frames
US10318074B2 (en) 2015-01-30 2019-06-11 Flatfrog Laboratories Ab Touch-sensing OLED display with tilted emitters
EP3256936A4 (en) 2015-02-09 2018-10-17 FlatFrog Laboratories AB Optical touch system comprising means for projecting and detecting light beams above and inside a transmissive panel
US10401546B2 (en) 2015-03-02 2019-09-03 Flatfrog Laboratories Ab Optical component for light coupling
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
JP6176284B2 (ja) * 2015-05-28 2017-08-09 コニカミノルタ株式会社 操作表示システム、操作表示装置および操作表示プログラム
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9830048B2 (en) * 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10248308B2 (en) * 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
KR101784420B1 (ko) 2015-10-20 2017-10-11 연세대학교 산학협력단 감압 센서를 구비한 터치 스크린을 이용한 사운드 모듈레이션 장치 및 그 방법
KR101749933B1 (ko) * 2015-11-12 2017-06-22 엘지전자 주식회사 이동 단말기 및 그 제어방법
WO2017099657A1 (en) 2015-12-09 2017-06-15 Flatfrog Laboratories Ab Improved stylus identification
CN108475116B (zh) * 2016-01-08 2021-06-22 富士通株式会社 电子设备、以及电子设备的驱动方法
US9898903B2 (en) * 2016-03-07 2018-02-20 Immersion Corporation Systems and methods for haptic surface elements
US10747337B2 (en) * 2016-04-26 2020-08-18 Bragi GmbH Mechanical detection of a touch movement using a sensor and a special surface pattern system and method
US10585480B1 (en) * 2016-05-10 2020-03-10 Apple Inc. Electronic device with an input device having a haptic engine
WO2018000382A1 (zh) * 2016-06-30 2018-01-04 华为技术有限公司 一种查看应用程序的图形用户界面、方法及终端
JP2018032075A (ja) * 2016-08-22 2018-03-01 キヤノン株式会社 表示制御装置およびその制御方法
KR102559407B1 (ko) * 2016-10-19 2023-07-26 삼성전자주식회사 영상을 표시하기 위한 전자 장치 및 컴퓨터 판독 가능한 기록 매체
CN107992259A (zh) * 2016-10-27 2018-05-04 中兴通讯股份有限公司 运动参数的确定方法及装置
US10440794B2 (en) 2016-11-02 2019-10-08 LIFI Labs, Inc. Lighting system and method
US10258825B2 (en) * 2016-11-03 2019-04-16 Ronald J. Meetin Information-presentation structure with separate impact-sensitive and color-change components
US10258860B2 (en) * 2016-11-03 2019-04-16 Ronald J. Meetin Information-presentation structure with compensation to increase size of color-changed print area
US10258859B2 (en) * 2016-11-03 2019-04-16 Ronald J. Meetin Information-presentation structure with visible record of color-changed print area at impact location
EP3545392A4 (en) 2016-11-24 2020-07-29 FlatFrog Laboratories AB AUTOMATIC TACTILE SIGNAL OPTIMIZATION
KR102344055B1 (ko) 2016-12-07 2021-12-28 플라트프로그 라보라토리즈 에이비 개선된 터치 장치
US10416768B2 (en) * 2016-12-28 2019-09-17 Immersion Corporation Unitary sensor and haptic actuator
WO2018136829A1 (en) * 2017-01-19 2018-07-26 Netherland Eric Electronic musical instrument with separate pitch and articulation control
US10963104B2 (en) 2017-02-06 2021-03-30 Flatfrog Laboratories Ab Optical coupling in touch-sensing systems
WO2018174786A1 (en) 2017-03-22 2018-09-27 Flatfrog Laboratories Pen differentiation for touch displays
EP3602259A4 (en) 2017-03-28 2021-01-20 FlatFrog Laboratories AB TOUCH DETECTION DEVICE AND ITS ASSEMBLY PROCESS
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
JP2018194924A (ja) * 2017-05-12 2018-12-06 アルプス電気株式会社 入力装置
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US20200086215A1 (en) * 2017-05-22 2020-03-19 Sony Corporation Information processing apparatus, information processing method, and program
US10725647B2 (en) * 2017-07-14 2020-07-28 Microsoft Technology Licensing, Llc Facilitating interaction with a computing device based on force of touch
US10768747B2 (en) 2017-08-31 2020-09-08 Apple Inc. Haptic realignment cues for touch-input displays
CN111052058B (zh) 2017-09-01 2023-10-20 平蛙实验室股份公司 改进的光学部件
US11054932B2 (en) 2017-09-06 2021-07-06 Apple Inc. Electronic device having a touch sensor, force sensor, and haptic actuator in an integrated module
US10768738B1 (en) 2017-09-27 2020-09-08 Apple Inc. Electronic device having a haptic actuator with magnetic augmentation
US11567610B2 (en) 2018-03-05 2023-01-31 Flatfrog Laboratories Ab Detection line broadening
US20190317655A1 (en) * 2018-04-12 2019-10-17 Capital One Services, Llc Systems and methods for assisting user interactions with displays
JP7098752B2 (ja) 2018-05-07 2022-07-11 アップル インコーポレイテッド ライブビデオフィード及び録画ビデオを閲覧するためのユーザインタフェース
GB2574589B (en) * 2018-06-06 2020-12-23 Cambridge Touch Tech Ltd Pressure sensing apparatus and method
US10936071B2 (en) 2018-08-30 2021-03-02 Apple Inc. Wearable electronic device with haptic rotatable input
US10966007B1 (en) 2018-09-25 2021-03-30 Apple Inc. Haptic output system
US10775894B2 (en) * 2018-11-02 2020-09-15 Immersion Corporation Systems and methods for providing customizable haptic playback
WO2020153890A1 (en) 2019-01-25 2020-07-30 Flatfrog Laboratories Ab A videoconferencing terminal and method of operating the same
JP7307811B2 (ja) * 2019-04-17 2023-07-12 アップル インコーポレイテッド アイテムを追跡及び発見するためのユーザインタフェース
CN114637418A (zh) 2019-04-28 2022-06-17 苹果公司 生成与对象相关联的触觉输出序列
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
KR102436985B1 (ko) 2019-05-31 2022-08-29 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
KR20210046256A (ko) 2019-10-18 2021-04-28 삼성전자주식회사 카메라 모듈을 포함하는 전자 장치 및 그 제조방법
US11422629B2 (en) 2019-12-30 2022-08-23 Joyson Safety Systems Acquisition Llc Systems and methods for intelligent waveform interruption
JP2023512682A (ja) 2020-02-10 2023-03-28 フラットフロッグ ラボラトリーズ アーベー 改良型タッチ検知装置
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11024135B1 (en) 2020-06-17 2021-06-01 Apple Inc. Portable electronic device having a haptic button assembly
US11778421B2 (en) 2020-09-25 2023-10-03 Apple Inc. User interfaces for tracking and finding items
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11644907B2 (en) * 2021-02-26 2023-05-09 Logitech Europe S.A. Systems, devices, and methods for physical surface tracking with a stylus device in an AR/VR environment

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008305174A (ja) * 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム
JP2010033455A (ja) * 2008-07-30 2010-02-12 Canon Inc 情報処理方法及び装置
US20100156818A1 (en) * 2008-12-23 2010-06-24 Apple Inc. Multi touch with multi haptics
JP2010541071A (ja) * 2007-09-28 2010-12-24 イマージョン コーポレーション 動的な触覚効果を有するマルチタッチデバイス
WO2011011552A1 (en) * 2009-07-22 2011-01-27 Immersion Corporation Interactive touch screen gaming metaphors with haptic feedback across platforms
US20110261021A1 (en) * 2010-04-23 2011-10-27 Immersion Corporation Transparent composite piezoelectric combined touch sensor and haptic actuator
EP2527966A2 (en) * 2010-01-22 2012-11-28 Korea Electronics Technology Institute Method for providing a user interface based on touch pressure, and electronic device using same

Family Cites Families (403)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3157853A (en) 1957-12-06 1964-11-17 Hirsch Joseph Tactile communication system
US2972140A (en) 1958-09-23 1961-02-14 Hirsch Joseph Apparatus and method for communication through the sense of touch
GB958325A (en) 1962-07-08 1964-05-21 Communications Patents Ltd Improvements in or relating to ground-based flight training or simulating apparatus
US3497668A (en) 1966-08-25 1970-02-24 Joseph Hirsch Tactile control system
US3517446A (en) 1967-04-19 1970-06-30 Singer General Precision Vehicle trainer controls and control loading
US3623064A (en) 1968-10-11 1971-11-23 Bell & Howell Co Paging receiver having cycling eccentric mass
US3903614A (en) 1970-03-27 1975-09-09 Singer Co Apparatus for simulating aircraft control loading
US3919691A (en) 1971-05-26 1975-11-11 Bell Telephone Labor Inc Tactile man-machine communication system
US3875488A (en) 1973-02-15 1975-04-01 Raytheon Co Inertially stabilized gimbal platform
US3902687A (en) 1973-06-25 1975-09-02 Robert E Hightower Aircraft indicator system
US3923166A (en) 1973-10-11 1975-12-02 Nasa Remote manipulator system
US3911416A (en) 1974-08-05 1975-10-07 Motorola Inc Silent call pager
US4000383A (en) 1975-06-20 1976-12-28 Amp Incorporated Rocker switch having slidable contact carriage biased by positive detent structure
US4160508A (en) 1977-08-19 1979-07-10 Nasa Controller arm for a remotely related slave arm
US4127752A (en) 1977-10-13 1978-11-28 Sheldahl, Inc. Tactile touch switch panel
US4262549A (en) 1978-05-10 1981-04-21 Schwellenbach Donald D Variable mechanical vibrator
US4311980A (en) 1978-10-12 1982-01-19 Fabrica Italiana Magneti Marelli, S.P.A. Device for pressure measurement using a resistor strain gauge
US4236325A (en) 1978-12-26 1980-12-02 The Singer Company Simulator control loading inertia compensator
US4221941A (en) 1979-01-08 1980-09-09 Gte Sylvania Wiring Devices Incorporated Rocker switch having improved contact-operating means
US4334280A (en) 1980-06-09 1982-06-08 Texas Instruments Incorporated System and method for providing an audible sound and a tactile feedback in an electronic data processing system
US4464117A (en) 1980-08-27 1984-08-07 Dr. Ing. Reiner Foerst Gmbh Driving simulator apparatus
NL8006091A (nl) 1980-11-07 1982-06-01 Fokker Bv Vluchtnabootser.
US4362408A (en) 1980-12-01 1982-12-07 Ncr Corporation Means for avoiding accidental actuation of a critical function key
US4333070A (en) 1981-02-06 1982-06-01 Barnes Robert W Motor vehicle fuel-waste indicator
US4599070A (en) 1981-07-29 1986-07-08 Control Interface Company Limited Aircraft simulator and simulated control system therefor
US4436188A (en) 1981-11-18 1984-03-13 Jones Cecil R Controlled motion apparatus
DE3382431D1 (de) 1982-01-22 1991-11-14 British Aerospace Steuerungsgeraet.
US4484191A (en) 1982-06-14 1984-11-20 Vavra George S Tactile signaling systems for aircraft
US4383154A (en) 1982-09-03 1983-05-10 Carlingswitch, Inc. Positive action rocker switch
US4560983A (en) 1982-09-17 1985-12-24 Ampex Corporation Dynamically interactive responsive control device and system
US4477043A (en) 1982-12-15 1984-10-16 The United States Of America As Represented By The Secretary Of The Air Force Biodynamic resistant control stick
GB2142711A (en) 1983-07-04 1985-01-23 Philips Electronic Associated Manually operable x-y signal generator
US4604016A (en) 1983-08-03 1986-08-05 Joyce Stephen A Multi-dimensional force-torque hand controller having force feedback
JPS60159500U (ja) 1984-03-31 1985-10-23 星野楽器株式会社 電子ドラムのパツド
US4581491A (en) 1984-05-04 1986-04-08 Research Corporation Wearable tactile sensory aid providing information on voice pitch and intonation patterns
US4603284A (en) 1984-06-05 1986-07-29 Unimation, Inc. Control system for manipulator apparatus with resolved compliant motion control
SE443057B (sv) 1984-08-09 1986-02-10 Tecator Ab Anordning och sett for registrering av en utmed en strecka gjord analog legesangivelse som en digital signal
US4794384A (en) 1984-09-27 1988-12-27 Xerox Corporation Optical translator device
US4935728A (en) 1985-01-02 1990-06-19 Altra Corporation Computer control
US4782327A (en) 1985-01-02 1988-11-01 Victor B. Kley Computer control
US4791416A (en) 1985-02-05 1988-12-13 Zenith Electronics Corporation Touch control system for controllable apparatus
JPH0537531Y2 (ja) 1985-06-11 1993-09-22
US5078152A (en) 1985-06-23 1992-01-07 Loredan Biomedical, Inc. Method for diagnosis and/or training of proprioceptor feedback capabilities in a muscle and joint system of a human patient
US4713007A (en) 1985-10-11 1987-12-15 Alban Eugene P Aircraft controls simulator
US5275174B1 (en) 1985-10-30 1998-08-04 Jonathan A Cook Repetitive strain injury assessment
NL8503096A (nl) 1985-11-11 1987-06-01 Fokker Bv Simulator van mechanische eigenschappen van een besturingssysteem.
US4891764A (en) 1985-12-06 1990-01-02 Tensor Development Inc. Program controlled force measurement and control system
US5103404A (en) 1985-12-06 1992-04-07 Tensor Development, Inc. Feedback for a manipulator
US4934694A (en) 1985-12-06 1990-06-19 Mcintosh James L Computer controlled exercise system
NL8600453A (nl) 1986-02-24 1987-09-16 Tieman F J Bv Op de tastzin werkende weergeefinrichting en werkwijze voor de vervaardiging daarvan.
JPH085018B2 (ja) 1986-02-26 1996-01-24 株式会社日立製作所 遠隔マニピユレ−シヨン方法及び装置
AT387100B (de) 1986-05-06 1988-11-25 Siemens Ag Oesterreich Taktiles punktschrift- bzw. bilddisplay
US4823106A (en) 1986-07-10 1989-04-18 Tapeswitch Corporation Of America Tape element and methods, for heating, pressure measurement and circuit fabrication
JPH048381Y2 (ja) 1986-07-10 1992-03-03
US4689449A (en) 1986-10-03 1987-08-25 Massachusetts Institute Of Technology Tremor suppressing hand controls
NL8602624A (nl) 1986-10-20 1988-05-16 Oce Nederland Bv Invoerinrichting met taktiele terugkoppeling.
US4795296A (en) 1986-11-17 1989-01-03 California Institute Of Technology Hand-held robot end effector controller having movement and force control
JPH0829509B2 (ja) 1986-12-12 1996-03-27 株式会社日立製作所 マニピユレ−タの制御装置
US4821030A (en) 1986-12-19 1989-04-11 Tektronix, Inc. Touchscreen feedback system
US4800721A (en) 1987-02-13 1989-01-31 Caterpillar Inc. Force feedback lever
US4794392A (en) 1987-02-20 1988-12-27 Motorola, Inc. Vibrator alert device for a communication receiver
US5986643A (en) 1987-03-24 1999-11-16 Sun Microsystems, Inc. Tactile feedback mechanism for a data processing system
US4839838A (en) 1987-03-30 1989-06-13 Labiche Mitchell Spatial input apparatus
GB2204131B (en) 1987-04-28 1991-04-17 Ibm Graphics input tablet
US4868549A (en) 1987-05-18 1989-09-19 International Business Machines Corporation Feedback mouse
US4840634A (en) 1987-06-10 1989-06-20 Clayton Foundation For Research Calibration controller for controlling electrically operated machines
US4823634A (en) 1987-11-03 1989-04-25 Culver Craig F Multifunction tactile manipulatable control
US4896554A (en) 1987-11-03 1990-01-30 Culver Craig F Multifunction tactile manipulatable control
US4906843A (en) 1987-12-31 1990-03-06 Marq Technolgies Combination mouse, optical scanner and digitizer puck
GB8801951D0 (en) 1988-01-29 1988-02-24 British Aerospace Control apparatus
US5038089A (en) 1988-03-23 1991-08-06 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Synchronized computational architecture for generalized bilateral control of robot arms
US4861269A (en) 1988-03-30 1989-08-29 Grumman Aerospace Corporation Sidestick flight control simulator
US4885565A (en) 1988-06-01 1989-12-05 General Motors Corporation Touchscreen CRT with tactile feedback
US4926879A (en) 1988-06-13 1990-05-22 Sevrain-Tech, Inc. Electro-tactile stimulator
NL8801653A (nl) 1988-06-29 1990-01-16 Stork Kwant Bv Besturingsstelsel.
US5116180A (en) 1988-07-18 1992-05-26 Spar Aerospace Limited Human-in-the-loop machine control loop
FR2638010B1 (fr) 1988-10-13 1991-01-18 Acroe Clavier retroactif modulaire et actionneur modulaire plat
US4930770A (en) 1988-12-01 1990-06-05 Baker Norman A Eccentrically loaded computerized positive/negative exercise machine
JPH02185278A (ja) 1989-01-12 1990-07-19 Taito Corp 光線銃射撃ゲーム装置
US5116051A (en) 1989-01-12 1992-05-26 Atari Games Corporation Strain gauge pressure-sensitive video game control
US5044956A (en) 1989-01-12 1991-09-03 Atari Games Corporation Control device such as a steering wheel for video vehicle simulator with realistic feedback forces
US4949119A (en) 1989-01-12 1990-08-14 Atari Games Corporation Gearshift for a vehicle simulator using computer controlled realistic real world forces
JPH0721710B2 (ja) 1989-01-25 1995-03-08 ヤマハ株式会社 パッド付電子鍵盤楽器
US5186695A (en) 1989-02-03 1993-02-16 Loredan Biomedical, Inc. Apparatus for controlled exercise and diagnosis of human performance
US5019761A (en) 1989-02-21 1991-05-28 Kraft Brett W Force feedback control for backhoe
GB8904955D0 (en) 1989-03-03 1989-04-12 Atomic Energy Authority Uk Multi-axis hand controller
US4983901A (en) 1989-04-21 1991-01-08 Allergan, Inc. Digital electronic foot control for medical apparatus and the like
US5076517A (en) 1989-08-14 1991-12-31 United Technologies Corporation Programmable, linear collective control system for a helicopter
US5004391A (en) 1989-08-21 1991-04-02 Rutgers University Portable dextrous force feedback master for robot telemanipulation
US5390296A (en) 1989-08-30 1995-02-14 Comshare Incorporated Method and apparatus for calculation with display data
US5121091A (en) 1989-09-08 1992-06-09 Matsushita Electric Industrial Co., Ltd. Panel switch
US5139261A (en) 1989-09-15 1992-08-18 Openiano Renato M Foot-actuated computer game controller serving as a joystick
US5182557A (en) 1989-09-20 1993-01-26 Semborg Recrob, Corp. Motorized joystick
US5065145A (en) 1989-10-06 1991-11-12 Summagraphics Corporation Method and apparatus for producing signals corresponding to the position of a cursor
US4961038A (en) 1989-10-16 1990-10-02 General Electric Company Torque estimator for switched reluctance machines
GB2239376A (en) 1989-12-18 1991-06-26 Ibm Touch sensitive display
US5107080A (en) 1989-12-01 1992-04-21 Massachusetts Institute Of Technology Multiple degree of freedom damped hand controls
JPH0724147Y2 (ja) 1989-12-28 1995-06-05 株式会社平和 パチンコ機の飛距離調整装置
US4983786A (en) 1990-01-17 1991-01-08 The University Of British Columbia XY velocity controller
US5022407A (en) 1990-01-24 1991-06-11 Topical Testing, Inc. Apparatus for automated tactile testing
US5184319A (en) 1990-02-02 1993-02-02 Kramer James F Force feedback and textures simulating interface device
US5631861A (en) 1990-02-02 1997-05-20 Virtual Technologies, Inc. Force feedback and texture simulating interface device
US5241308A (en) 1990-02-22 1993-08-31 Paragon Systems, Inc. Force sensitive touch panel
GB9004690D0 (en) 1990-03-02 1990-04-25 Black & Decker Inc Flange mounting arrangement
US5095303A (en) 1990-03-27 1992-03-10 Apple Computer, Inc. Six degree of freedom graphic object controller
US5035242A (en) 1990-04-16 1991-07-30 David Franklin Method and apparatus for sound responsive tactile stimulation of deaf individuals
JPH0685820B2 (ja) 1990-04-25 1994-11-02 株式会社エポック社 体感ゲーム機
US5022384A (en) 1990-05-14 1991-06-11 Capitol Systems Vibrating/massage chair
GB9014130D0 (en) 1990-06-25 1990-08-15 Hewlett Packard Co User interface
US5547382A (en) 1990-06-28 1996-08-20 Honda Giken Kogyo Kabushiki Kaisha Riding simulation system for motorcycles
US5197003A (en) 1990-08-01 1993-03-23 Atari Games Corporation Gearshift for a vehicle simulator having a solenoid for imposing a resistance force
US5165897A (en) 1990-08-10 1992-11-24 Tini Alloy Company Programmable tactile stimulator array system and method of operation
US5053585A (en) 1990-10-12 1991-10-01 Interlink Electronics, Incorporated Multipurpose keyboard using digitizer pad featuring spatial minimization of a pressure contact area and method of making same
US5193963A (en) 1990-10-31 1993-03-16 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Force reflecting hand controller
JP3219761B2 (ja) 1990-11-19 2001-10-15 ソニー株式会社 リモートコマンダー
NL194053C (nl) 1990-12-05 2001-05-03 Koninkl Philips Electronics Nv Inrichting met een rotatiesymmetrisch lichaam.
US5223776A (en) 1990-12-31 1993-06-29 Honeywell Inc. Six-degree virtual pivot controller
US5212473A (en) 1991-02-21 1993-05-18 Typeright Keyboard Corp. Membrane keyboard and method of using same
US5334027A (en) 1991-02-25 1994-08-02 Terry Wherlock Big game fish training and exercise device and method
US5354162A (en) 1991-02-26 1994-10-11 Rutgers University Actuator system for providing force feedback to portable master support
US5240417A (en) 1991-03-14 1993-08-31 Atari Games Corporation System and method for bicycle riding simulation
DE69212149D1 (de) 1991-03-21 1996-08-14 Atari Games Corp Fahrtsimulator mit überkreuzter netzwerkrückkoppelung
US5203563A (en) 1991-03-21 1993-04-20 Atari Games Corporation Shaker control device
US5341459A (en) 1991-05-09 1994-08-23 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Generalized compliant motion primitive
JPH06508222A (ja) 1991-05-23 1994-09-14 アタリ ゲームズ コーポレーション モジュール式表示シミュレーター
US5146566A (en) 1991-05-29 1992-09-08 Ibm Corporation Input/output system for computer user interface using magnetic levitation
US5351412A (en) 1991-06-11 1994-10-04 International Business Machines Corporation Micro positioning device
US5185561A (en) 1991-07-23 1993-02-09 Digital Equipment Corporation Torque motor as a tactile feedback device in a computer system
US5175459A (en) 1991-08-19 1992-12-29 Motorola, Inc. Low profile vibratory alerting device
US5186629A (en) 1991-08-22 1993-02-16 International Business Machines Corporation Virtual graphics display capable of presenting icons and windows to the blind computer user and method
US5235868A (en) 1991-10-02 1993-08-17 Culver Craig F Mechanism for generating control signals
US5220260A (en) 1991-10-24 1993-06-15 Lex Computer And Management Corporation Actuator having electronically controllable tactile responsiveness
US5889670A (en) 1991-10-24 1999-03-30 Immersion Corporation Method and apparatus for tactilely responsive user interface
US5271290A (en) 1991-10-29 1993-12-21 United Kingdom Atomic Energy Authority Actuator assembly
US5309140A (en) 1991-11-26 1994-05-03 The United States Of America As Represented By The Secretary Of The Navy Feedback system for remotely operated vehicles
US6597347B1 (en) 1991-11-26 2003-07-22 Itu Research Inc. Methods and apparatus for providing touch-sensitive input in multiple degrees of freedom
US5335557A (en) 1991-11-26 1994-08-09 Taizo Yasutake Touch sensitive input control device
US5402680A (en) 1991-12-10 1995-04-04 Canon Kabushiki Kaisha Velocity sensor and semiconductor exposing apparatus using such a sensor
US5471571A (en) 1991-12-27 1995-11-28 Xerox Corporation Method and apparatus for setting a graphical object's position and orientation with viscous dragging
JPH05192449A (ja) 1992-01-20 1993-08-03 Taito Corp ビデオ式銃撃戦ゲーム装置及びその装置を制御する方法
DE69318746T2 (de) 1992-02-18 1999-02-18 Ncr Int Inc Datenverarbeitungsgerät mit Rückmeldung der Benutzereingabe
DE4205875A1 (de) 1992-02-26 1993-09-02 Vdo Schindling Bedienvorrichtung
US6344791B1 (en) 1998-07-24 2002-02-05 Brad A. Armstrong Variable sensor with tactile feedback
US6347997B1 (en) 1997-10-01 2002-02-19 Brad A. Armstrong Analog controls housed with electronic displays
US5589828A (en) 1992-03-05 1996-12-31 Armstrong; Brad A. 6 Degrees of freedom controller with capability of tactile feedback
US5246316A (en) 1992-03-06 1993-09-21 Excellon Automation Work table orientation apparatus and method
EP0563477A1 (en) 1992-03-25 1993-10-06 Visage Inc. Touch screen sensing apparatus
JP3199130B2 (ja) 1992-03-31 2001-08-13 パイオニア株式会社 3次元座標入力装置
US5757358A (en) 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
US5302132A (en) 1992-04-01 1994-04-12 Corder Paul R Instructional system and method for improving communication skills
US5189355A (en) 1992-04-10 1993-02-23 Ampex Corporation Interactive rotary controller system with tactile feedback
JP2677315B2 (ja) 1992-04-27 1997-11-17 株式会社トミー 運転玩具
US5437607A (en) 1992-06-02 1995-08-01 Hwe, Inc. Vibrating massage apparatus
US5880411A (en) 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5313230A (en) 1992-07-24 1994-05-17 Apple Computer, Inc. Three degree of freedom graphic object controller
US5296871A (en) 1992-07-27 1994-03-22 Paley W Bradford Three-dimensional mouse with tactile feedback
US5402499A (en) 1992-08-07 1995-03-28 Lsi Logic Corporation Multimedia controller
AU658066B2 (en) 1992-09-10 1995-03-30 Deere & Company Neural network based control system
US6008800A (en) 1992-09-18 1999-12-28 Pryor; Timothy R. Man machine interfaces for entering data into a computer
US5283970A (en) 1992-09-25 1994-02-08 Strombecker Corporation Toy guns
US5264768A (en) 1992-10-06 1993-11-23 Honeywell, Inc. Active hand controller feedback loop
US5286203A (en) 1992-10-07 1994-02-15 Aai Microflite Simulation International Simulating horizontal stabilizer trimming in an aircraft
US5666473A (en) 1992-10-08 1997-09-09 Science & Technology Corporation & Unm Tactile computer aided sculpting device
JP2804937B2 (ja) 1992-10-15 1998-09-30 矢崎総業株式会社 システムスイッチ装置
US5790108A (en) 1992-10-23 1998-08-04 University Of British Columbia Controller
US5382768A (en) 1992-11-13 1995-01-17 Leviton Manufacturing Co., Inc. Rocker-type electrical switch
US5389865A (en) 1992-12-02 1995-02-14 Cybernet Systems Corporation Method and system for providing a tactile virtual reality and manipulator defining an interface device therefor
US5769640A (en) 1992-12-02 1998-06-23 Cybernet Systems Corporation Method and system for simulating medical procedures including virtual reality and control method and system for use therein
US6131097A (en) 1992-12-02 2000-10-10 Immersion Corporation Haptic authoring
US5629594A (en) 1992-12-02 1997-05-13 Cybernet Systems Corporation Force feedback system
FI92111C (fi) 1992-12-11 1994-09-26 Icl Personal Systems Oy Menetelmä ja järjestely kohdistimen siirtämiseksi tietokoneen näytöllä
US5355148A (en) 1993-01-14 1994-10-11 Ast Research, Inc. Fingerpoint mouse
US5451924A (en) 1993-01-14 1995-09-19 Massachusetts Institute Of Technology Apparatus for providing sensory substitution of force feedback
US5389849A (en) 1993-01-20 1995-02-14 Olympus Optical Co., Ltd. Tactility providing apparatus and manipulating device using the same
EP0607580A1 (en) 1993-01-21 1994-07-27 International Business Machines Corporation Tactile feedback mechanism for cursor control
US5785630A (en) 1993-02-02 1998-07-28 Tectrix Fitness Equipment, Inc. Interactive exercise apparatus
US5690582A (en) 1993-02-02 1997-11-25 Tectrix Fitness Equipment, Inc. Interactive exercise apparatus
US5390128A (en) 1993-04-12 1995-02-14 Cargill Detroit Corporation Robotic processing and inspection system
EP0626614B1 (en) 1993-05-26 1999-08-04 Agfa-Gevaert N.V. A red-sensitive silver halide photographic material
US5396266A (en) 1993-06-08 1995-03-07 Technical Research Associates, Inc. Kinesthetic feedback apparatus and method
US5405152A (en) 1993-06-08 1995-04-11 The Walt Disney Company Method and apparatus for an interactive video game with physical feedback
US5513100A (en) 1993-06-10 1996-04-30 The University Of British Columbia Velocity controller with force feedback stiffness control
US5466213A (en) 1993-07-06 1995-11-14 Massachusetts Institute Of Technology Interactive robotic therapist
US5436622A (en) 1993-07-06 1995-07-25 Motorola, Inc. Variable frequency vibratory alert method and structure
JP2856036B2 (ja) 1993-07-12 1999-02-10 株式会社セガ・エンタープライゼス スライド式振動機構を備えたゲーム機用ガンユニット及びゲーム装置
US5701140A (en) 1993-07-16 1997-12-23 Immersion Human Interface Corp. Method and apparatus for providing a cursor control interface with force feedback
US5721566A (en) 1995-01-18 1998-02-24 Immersion Human Interface Corp. Method and apparatus for providing damping force feedback
US5734373A (en) 1993-07-16 1998-03-31 Immersion Human Interface Corporation Method and apparatus for controlling force feedback interface systems utilizing a host computer
US5767839A (en) 1995-01-18 1998-06-16 Immersion Human Interface Corporation Method and apparatus for providing passive force feedback to human-computer interface systems
US5805140A (en) 1993-07-16 1998-09-08 Immersion Corporation High bandwidth force feedback interface using voice coils and flexures
US5731804A (en) 1995-01-18 1998-03-24 Immersion Human Interface Corp. Method and apparatus for providing high bandwidth, low noise mechanical I/O for computer systems
US5739811A (en) 1993-07-16 1998-04-14 Immersion Human Interface Corporation Method and apparatus for controlling human-computer interface systems providing force feedback
US5491477A (en) 1993-09-13 1996-02-13 Apple Computer, Inc. Anti-rotation mechanism for direct manipulation position input controller for computer
US5625576A (en) 1993-10-01 1997-04-29 Massachusetts Institute Of Technology Force reflecting haptic interface
DE69423313T2 (de) 1993-12-20 2000-07-13 Seiko Epson Corp Elektronische Hinweisanordnung
US5473235A (en) 1993-12-21 1995-12-05 Honeywell Inc. Moment cell counterbalance for active hand controller
US5461711A (en) 1993-12-22 1995-10-24 Interval Research Corporation Method and system for spatial accessing of time-based information
JPH07111663B2 (ja) 1993-12-28 1995-11-29 コナミ株式会社 操作用フットペダル
US5473344A (en) 1994-01-06 1995-12-05 Microsoft Corporation 3-D cursor positioning device
US5577981A (en) 1994-01-19 1996-11-26 Jarvik; Robert Virtual reality exercise machine and computer controlled video system
WO1995020787A1 (en) 1994-01-27 1995-08-03 Exos, Inc. Multimode feedback display technology
CA2140164A1 (en) 1994-01-27 1995-07-28 Kenneth R. Robertson System and method for computer cursor control
WO1995020788A1 (en) 1994-01-27 1995-08-03 Exos, Inc. Intelligent remote multimode sense and display system utilizing haptic information compression
US5514150A (en) 1994-03-03 1996-05-07 Lsi Logic Corporation Micromachined conveyor devices
US5564004A (en) 1994-04-13 1996-10-08 International Business Machines Corporation Method and system for facilitating the selection of icons
JP2665313B2 (ja) 1994-04-22 1997-10-22 国際電業株式会社 反力発生装置
US5570778A (en) 1994-04-26 1996-11-05 Leviton Manufacturing Co., Inc. Electrical rocker switch
US5836443A (en) 1994-04-26 1998-11-17 Leviton Manufacturing Co., Inc. Electrical rocker switch
US6004134A (en) 1994-05-19 1999-12-21 Exos, Inc. Interactive simulation including force feedback
US5521336A (en) 1994-05-23 1996-05-28 International Business Machines Corporation Simplified digital pad sensor
US5457479A (en) 1994-06-13 1995-10-10 Primax Electronics Ltd. Apparatus having dual modes for controlling cursor on display screen
FI96730C (fi) 1994-06-17 1996-08-12 Nokia Mobile Phones Ltd Matkapuhelin tärinähälyttimellä
US6160489A (en) 1994-06-23 2000-12-12 Motorola, Inc. Wireless communication device adapted to generate a plurality of distinctive tactile alert patterns
US5565887A (en) 1994-06-29 1996-10-15 Microsoft Corporation Method and apparatus for moving a cursor on a computer screen
US5623582A (en) 1994-07-14 1997-04-22 Immersion Human Interface Corporation Computer interface or control input device for laparoscopic surgical instrument and other elongated mechanical objects
US5575761A (en) 1994-07-27 1996-11-19 Hajianpour; Mohammed-Ali Massage device applying variable-frequency vibration in a variable pulse sequence
US5496174A (en) 1994-08-04 1996-03-05 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Method and device for producing a tactile display using an electrorheological fluid
US5530455A (en) 1994-08-10 1996-06-25 Mouse Systems Corporation Roller mouse for implementing scrolling in windows applications
US5684722A (en) 1994-09-21 1997-11-04 Thorner; Craig Apparatus and method for generating a control signal for a tactile sensation generator
US6422941B1 (en) 1994-09-21 2002-07-23 Craig Thorner Universal tactile feedback system for computer video games and simulations
US5642469A (en) 1994-11-03 1997-06-24 University Of Washington Direct-drive manipulator for pen-based force display
US5766016A (en) 1994-11-14 1998-06-16 Georgia Tech Research Corporation Surgical simulator and method for simulating surgical procedure
US5666138A (en) 1994-11-22 1997-09-09 Culver; Craig F. Interface control
JP3236180B2 (ja) 1994-12-05 2001-12-10 日本電気株式会社 座標指示装置
JPH08235159A (ja) 1994-12-06 1996-09-13 Matsushita Electric Ind Co Ltd 逆コサイン変換装置
US5591082A (en) 1995-01-05 1997-01-07 Thrustmaster, Inc. Side-mounted throttle and weapons controller for computer video games and flight simulation
DE69622101T2 (de) 1995-03-13 2003-02-13 Koninkl Philips Electronics Nv 3-d-eingang durch vertikale verschiebung von maus oder rollkugel
US5542672A (en) 1995-03-17 1996-08-06 Meredith; Chris Fishing rod and reel electronic game controller
US5882206A (en) 1995-03-29 1999-03-16 Gillio; Robert G. Virtual surgery system
DE69623903T2 (de) 1995-05-10 2003-05-15 Nintendo Co Ltd Betätigungsvorrichtung mit analogem steuerknüppel
US5736978A (en) 1995-05-26 1998-04-07 The United States Of America As Represented By The Secretary Of The Air Force Tactile graphics display
US5691898A (en) 1995-09-27 1997-11-25 Immersion Human Interface Corp. Safe and low cost computer peripherals with force feedback for consumer applications
US6166723A (en) 1995-11-17 2000-12-26 Immersion Corporation Mouse interface device providing force feedback
US5589854A (en) 1995-06-22 1996-12-31 Tsai; Ming-Chang Touching feedback device
US5724106A (en) 1995-07-17 1998-03-03 Gateway 2000, Inc. Hand held remote control device with trigger button
US5771037A (en) 1995-07-24 1998-06-23 Altra Computer display cursor controller
DE19528457C2 (de) 1995-08-03 2001-03-08 Mannesmann Vdo Ag Bedieneinrichtung
US5805165A (en) 1995-08-31 1998-09-08 Microsoft Corporation Method of selecting a displayed control item
JPH0982177A (ja) 1995-09-08 1997-03-28 Toyo Denso Co Ltd スイッチ
US5808601A (en) 1995-09-12 1998-09-15 International Business Machines Corporation Interactive object selection pointer method and apparatus
US5999168A (en) 1995-09-27 1999-12-07 Immersion Corporation Haptic accelerator for force feedback computer peripherals
US5959613A (en) 1995-12-01 1999-09-28 Immersion Corporation Method and apparatus for shaping force signals for a force feedback device
MX9704155A (es) 1995-10-09 1997-09-30 Nintendo Co Ltd Sistema procesador de imagenes tridimensionales.
JPH09167050A (ja) 1995-10-09 1997-06-24 Nintendo Co Ltd 操作装置およびそれを用いる画像処理システム
US5719561A (en) 1995-10-25 1998-02-17 Gilbert R. Gonzales Tactile communication device and method
US5754023A (en) 1995-10-26 1998-05-19 Cybernet Systems Corporation Gyro-stabilized platforms for force-feedback applications
US5896125A (en) 1995-11-06 1999-04-20 Niedzwiecki; Richard H. Configurable keyboard to personal computer video game controller adapter
US6473069B1 (en) 1995-11-13 2002-10-29 Cirque Corporation Apparatus and method for tactile feedback from input device
US5767457A (en) 1995-11-13 1998-06-16 Cirque Corporation Apparatus and method for audible feedback from input device
US5825308A (en) 1996-11-26 1998-10-20 Immersion Human Interface Corporation Force feedback interface having isotonic and isometric functionality
US6100874A (en) 1995-11-17 2000-08-08 Immersion Corporation Force feedback mouse interface
US5877748A (en) 1995-11-20 1999-03-02 Redlich; Sanford I. Computer control input interface system
US6061004A (en) 1995-11-26 2000-05-09 Immersion Corporation Providing force feedback using an interface device including an indexing function
EP0864145A4 (en) 1995-11-30 1998-12-16 Virtual Technologies Inc TACTILE FEEDBACK FOR HUMAN / MACHINE INTERFACE
US6028593A (en) 1995-12-01 2000-02-22 Immersion Corporation Method and apparatus for providing simulated physical interactions within computer generated environments
US6219032B1 (en) 1995-12-01 2001-04-17 Immersion Corporation Method for providing force feedback to a user of an interface device based on interactions of a controlled cursor with graphical elements in a graphical user interface
US5956484A (en) 1995-12-13 1999-09-21 Immersion Corporation Method and apparatus for providing force feedback over a computer network
US6147674A (en) 1995-12-01 2000-11-14 Immersion Corporation Method and apparatus for designing force sensations in force feedback computer applications
US6161126A (en) 1995-12-13 2000-12-12 Immersion Corporation Implementing force feedback over the World Wide Web and other computer networks
US6078308A (en) 1995-12-13 2000-06-20 Immersion Corporation Graphical click surfaces for force feedback applications to provide user selection using cursor interaction with a trigger position within a boundary of a graphical object
US6300936B1 (en) * 1997-11-14 2001-10-09 Immersion Corporation Force feedback system including multi-tasking graphical host environment and interface device
US5760764A (en) 1995-12-13 1998-06-02 Altra Computer display cursor controller with serial interface
US5914705A (en) 1996-02-09 1999-06-22 Lucent Technologies Inc. Apparatus and method for providing detent-like tactile feedback
SE519661C2 (sv) 1996-02-23 2003-03-25 Immersion Corp Pekdon och förfarande för markering av grafiska detaljer på en display med sensorisk återkoppling vid påträffande av nämnda detalj
US5642806A (en) 1996-03-07 1997-07-01 Eaton Corporation Rocker actuated switch assembly
DE19646226A1 (de) 1996-03-19 1998-05-14 Bayerische Motoren Werke Ag Bedienvorrichtung für menügesteuerte Funktionen eines Fahrzeugs
US6111577A (en) 1996-04-04 2000-08-29 Massachusetts Institute Of Technology Method and apparatus for determining forces to be applied to a user through a haptic interface
US5914708A (en) 1996-04-04 1999-06-22 Cirque Corporation Computer input stylus method and apparatus
US5823876A (en) 1996-05-03 1998-10-20 Unbehand; Erick Michael Steering wheel simulation assembly
US6374255B1 (en) 1996-05-21 2002-04-16 Immersion Corporation Haptic authoring
US5857986A (en) 1996-05-24 1999-01-12 Moriyasu; Hiro Interactive vibrator for multimedia
US5802353A (en) 1996-06-12 1998-09-01 General Electric Company Haptic computer modeling system
US5791992A (en) 1996-07-31 1998-08-11 International Business Machines Corporation Video game system with internet cartridge
US6125385A (en) 1996-08-01 2000-09-26 Immersion Corporation Force feedback implementation in web pages
US5943044A (en) 1996-08-05 1999-08-24 Interlink Electronics Force sensing semiconductive touchpad
US5821921A (en) 1996-08-09 1998-10-13 Osborn; John J. Cursor controller having cross-translating platforms with a cantilevered handle
US5990869A (en) 1996-08-20 1999-11-23 Alliance Technologies Corp. Force feedback mouse
US6024576A (en) 1996-09-06 2000-02-15 Immersion Corporation Hemispherical, high bandwidth mechanical interface for computer systems
US5694013A (en) 1996-09-06 1997-12-02 Ford Global Technologies, Inc. Force feedback haptic interface for a three-dimensional CAD surface
US6140987A (en) 1996-09-18 2000-10-31 Intellinet, Inc. User interface for home automation system
DE19638015A1 (de) 1996-09-18 1998-03-26 Mannesmann Vdo Ag Verfahren zur Erzeugung von haptischen Markierungen auf einer Eingabefläche und Anordnung zur Durchführung des Verfahrens
JPH114966A (ja) 1996-10-01 1999-01-12 Sony Computer Entateimento:Kk ゲーム機用操作装置及びゲーム装置
GB9622556D0 (en) 1996-10-30 1997-01-08 Philips Electronics Nv Cursor control with user feedback mechanism
US6636197B1 (en) 1996-11-26 2003-10-21 Immersion Corporation Haptic feedback effects for control, knobs and other interface devices
US6128006A (en) 1998-03-26 2000-10-03 Immersion Corporation Force feedback mouse wheel and other control wheels
US5912661A (en) 1997-01-14 1999-06-15 Microsoft Corp. Z-encoder mechanism
GB9701793D0 (en) 1997-01-29 1997-03-19 Gay Geoffrey N W Means for inputting characters or commands into a computer
JP3638071B2 (ja) 1997-01-31 2005-04-13 矢崎総業株式会社 システムスイッチ
US5808603A (en) 1997-02-06 1998-09-15 Chen; Mei Yun Computer input device
WO1998043825A1 (fr) 1997-04-02 1998-10-08 Aaron Ittah Titre de paiement sur tous types de reseaux electroniques et en particulier le reseau internet
US6118435A (en) 1997-04-10 2000-09-12 Idec Izumi Corporation Display unit with touch panel
US6020876A (en) 1997-04-14 2000-02-01 Immersion Corporation Force feedback interface with selective disturbance filter
US6005551A (en) 1997-04-25 1999-12-21 Microsoft Corporation Offline force effect rendering
DE19718979B4 (de) 1997-05-05 2007-11-08 Delphi Technologies, Inc., Troy Multifunktionstastschalter
US6339201B1 (en) 1997-05-30 2002-01-15 Leviton Manufacturing Co., Inc. Four function electrical rocker switch
JP3655438B2 (ja) 1997-07-17 2005-06-02 任天堂株式会社 ビデオゲームシステム
US5803243A (en) 1997-07-25 1998-09-08 General Motors Corporation Latching rocker switch
US6097964A (en) 1997-09-04 2000-08-01 Nokia Mobile Phones Limited Navigation key for a handset
US6067871A (en) 1997-09-12 2000-05-30 Eaton Corporation Variable resistance shift rail detent assembly and shift control method employing same
GB2329300B (en) 1997-09-16 2002-07-17 Nokia Mobile Phones Ltd Mobile telephone with handwritten data input
US6002184A (en) 1997-09-17 1999-12-14 Coactive Drive Corporation Actuator with opposing repulsive magnetic forces
US5887995A (en) 1997-09-23 1999-03-30 Compaq Computer Corporation Touchpad overlay with tactile response
US5917906A (en) 1997-10-01 1999-06-29 Ericsson Inc. Touch pad with tactile feature
US6088019A (en) 1998-06-23 2000-07-11 Immersion Corporation Low cost force feedback device with actuator for non-primary axis
US6243078B1 (en) 1998-06-23 2001-06-05 Immersion Corporation Pointing device with forced feedback button
US6219034B1 (en) 1998-02-23 2001-04-17 Kristofer E. Elbing Tactile computer interface
US6198206B1 (en) 1998-03-20 2001-03-06 Active Control Experts, Inc. Inertial/audio unit and construction
US5945772A (en) 1998-05-29 1999-08-31 Motorla, Inc. Damped resonant piezoelectric alerting device
US5977867A (en) 1998-05-29 1999-11-02 Nortel Networks Corporation Touch pad panel with tactile feedback
US6078126A (en) 1998-05-29 2000-06-20 Motorola, Inc. Resonant piezoelectric alerting device
US6369803B2 (en) 1998-06-12 2002-04-09 Nortel Networks Limited Active edge user interface
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6184868B1 (en) 1998-09-17 2001-02-06 Immersion Corp. Haptic feedback control devices
US6262717B1 (en) 1998-07-02 2001-07-17 Cirque Corporation Kiosk touch pad
US6243080B1 (en) 1998-07-14 2001-06-05 Ericsson Inc. Touch-sensitive panel with selector
US6292173B1 (en) 1998-09-11 2001-09-18 Stmicroelectronics S.R.L. Touchpad computer input system and method
US6373463B1 (en) 1998-10-14 2002-04-16 Honeywell International Inc. Cursor control system with tactile feedback
US6225976B1 (en) 1998-10-30 2001-05-01 Interlink Electronics, Inc. Remote computer input peripheral
US6218966B1 (en) 1998-11-05 2001-04-17 International Business Machines Corporation Tactile feedback keyboard
WO2000030026A1 (en) 1998-11-12 2000-05-25 Min Chul Shin Computer mouse
US6469695B1 (en) 1999-01-28 2002-10-22 Ncr Corporation Method and apparatus for touch screen touch ahead capability
US6781569B1 (en) 1999-06-11 2004-08-24 Immersion Corporation Hand controller
JP2000299575A (ja) 1999-04-12 2000-10-24 Sony Corp 入力装置
US6389302B1 (en) 1999-04-28 2002-05-14 Ericsson Inc. Methods and apparatus for causing wireless communication devices to vibrate via piezo-ceramic vibrators
US7151528B2 (en) 1999-06-22 2006-12-19 Cirque Corporation System for disposing a proximity sensitive touchpad behind a mobile phone keypad
US6130393A (en) 1999-06-24 2000-10-10 Defond Manufacturing Ltd. Electrical rocker switch
US6368016B1 (en) 1999-07-13 2002-04-09 Wacker Corporation Concrete finishing trowel having an electronically actuated steering assembly
US6337678B1 (en) 1999-07-21 2002-01-08 Tactiva Incorporated Force feedback computer input and output device with coordinated haptic elements
US6313117B1 (en) 1999-07-30 2001-11-06 Boehringer Ingelheim Pharmaceuticals, Inc. Succinate derivative compounds useful as cysteine protease inhibitors
JP2001076582A (ja) 1999-09-01 2001-03-23 Matsushita Electric Ind Co Ltd 電子機器
US6175090B1 (en) 1999-09-02 2001-01-16 Trw Inc. Rocker switch
AU1573301A (en) 1999-10-21 2001-04-30 Cirque Corporation Improved kiosk touchpad
US6388655B1 (en) 1999-11-08 2002-05-14 Wing-Keung Leung Method of touch control of an input device and such a device
FR2800966B1 (fr) 1999-11-10 2001-12-21 Jean Max Coudon Dispositif de stimulation tactile destine a etre utilise par une personne sourde
US6498601B1 (en) 1999-11-29 2002-12-24 Xerox Corporation Method and apparatus for selecting input modes on a palmtop computer
US6501463B1 (en) 1999-12-10 2002-12-31 Siemens Technology -To-Business Center Llc Electronic whiteboard system using a tactile foam sensor
US6414674B1 (en) 1999-12-17 2002-07-02 International Business Machines Corporation Data processing system and method including an I/O touch pad having dynamically alterable location indicators
US6535201B1 (en) 1999-12-17 2003-03-18 International Business Machines Corporation Method and system for three-dimensional topographical modeling
US6509892B1 (en) 1999-12-17 2003-01-21 International Business Machines Corporation Method, system and program for topographical interfacing
US6822635B2 (en) 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
US6445284B1 (en) 2000-05-10 2002-09-03 Juan Manuel Cruz-Hernandez Electro-mechanical transducer suitable for tactile display and article conveyance
EP2385518A3 (en) 2000-05-24 2012-02-15 Immersion Medical, Inc. Haptic devices using electroactive polymers
JP4420364B2 (ja) 2000-06-06 2010-02-24 Smk株式会社 タッチパネルの押圧感発生装置
JP3949912B2 (ja) 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6639582B1 (en) 2000-08-10 2003-10-28 International Business Machines Corporation System for combining haptic sensory-motor effects from two separate input devices into resultant sensory-motor effects and for feedback of such resultant effects between the input devices
JP3943876B2 (ja) 2000-08-11 2007-07-11 アルプス電気株式会社 入力装置及びこれを備えた電子機器
DE10046099A1 (de) 2000-09-18 2002-04-04 Siemens Ag Berührungssensitive Anzeige mit taktiler Rückkopplung
WO2002031807A1 (en) 2000-10-10 2002-04-18 Motorola Inc., A Corporation Of The State Of Delaware Data entry device
DE10061619A1 (de) 2000-12-11 2002-06-20 Bosch Gmbh Robert Bedienvorrichtung
US7463249B2 (en) 2001-01-18 2008-12-09 Illinois Tool Works Inc. Acoustic wave touch actuated switch with feedback
US6641480B2 (en) 2001-01-29 2003-11-04 Microsoft Corporation Force feedback mechanism for gamepad device
US6543487B2 (en) 2001-02-08 2003-04-08 Air Logistics Corporation Method of securing a curing composite substrate wrap to a structure
JP2002259059A (ja) 2001-03-05 2002-09-13 Sony Corp 入力装置
US6844873B2 (en) 2001-03-09 2005-01-18 Peter W. Johnson Reverse cantilever assembly for input devices
US6885876B2 (en) 2001-03-12 2005-04-26 Nokia Mobile Phones Ltd. Mobile phone featuring audio-modulated vibrotactile module
US6587091B2 (en) 2001-04-23 2003-07-01 Michael Lawrence Serpa Stabilized tactile output mechanism for computer interface devices
US6834373B2 (en) 2001-04-24 2004-12-21 International Business Machines Corporation System and method for non-visually presenting multi-part information pages using a combination of sonifications and tactile feedback
US6801191B2 (en) 2001-04-27 2004-10-05 Matsushita Electric Industrial Co., Ltd. Input device and inputting method with input device
US6636202B2 (en) 2001-04-27 2003-10-21 International Business Machines Corporation Interactive tactile display for computer screen
US6447069B1 (en) 2001-05-08 2002-09-10 Collins & Aikman Products Co. Quick connect/disconnect apparatus for removably securing armrests to vehicle seating assemblies
US6963762B2 (en) 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
GB0114458D0 (en) 2001-06-14 2001-08-08 Lucas Industries Ltd An in-vehicle display system
US6657617B2 (en) 2001-06-25 2003-12-02 International Business Machines Corporation Method, apparatus and computer program product for three dimensional text creation
US20030022701A1 (en) 2001-07-25 2003-01-30 Aloke Gupta Buttonless communication device with touchscreen display
US20030048260A1 (en) 2001-08-17 2003-03-13 Alec Matusis System and method for selecting actions based on the identification of user's fingers
CA2398798A1 (en) 2001-08-28 2003-02-28 Research In Motion Limited System and method for providing tactility for an lcd touchscreen
DE10144634A1 (de) 2001-09-11 2003-04-10 Trw Automotive Electron & Comp Bediensystem
JP3798287B2 (ja) 2001-10-10 2006-07-19 Smk株式会社 タッチパネル入力装置
KR101289110B1 (ko) 2001-11-01 2013-08-07 임머숀 코퍼레이션 촉각을 제공하기 위한 방법 및 장치
FI115861B (fi) 2001-11-12 2005-07-29 Myorigo Oy Menetelmä ja laite palautteen generoimiseksi
EP1449057A1 (en) 2001-11-16 2004-08-25 Myorigo OY Extended keyboard
US7009595B2 (en) 2002-01-03 2006-03-07 United States Of America Extended refreshable tactile graphic array for scanned tactile display
US20030128191A1 (en) 2002-01-07 2003-07-10 Strasser Eric M. Dynamically variable user operable input device
US8004496B2 (en) 2002-01-08 2011-08-23 Koninklijke Philips Electronics N.V. User interface for electronic devices for controlling the displaying of long sorted lists
JP2003288158A (ja) 2002-01-28 2003-10-10 Sony Corp タクタイル・フィードバック機能を持つ携帯型機器
US6976562B1 (en) 2003-08-28 2005-12-20 Bte Technologies, Inc. Method of calibrating a brake system for stationary equipment and apparatus using the same
JP4860625B2 (ja) * 2004-10-08 2012-01-25 イマージョン コーポレーション タッチ式入力装置におけるボタンおよびスクロール動作シミュレーション用の触覚フィードバック
US7474983B2 (en) * 2005-01-05 2009-01-06 Massachusetts Institute Of Technology Method for object identification and sensing in a bounded interaction space
US7812826B2 (en) * 2005-12-30 2010-10-12 Apple Inc. Portable electronic device with multi-touch input
JP2008242367A (ja) * 2007-03-29 2008-10-09 Fuji Xerox Co Ltd 表示制御装置、表示装置、表示システム及びプログラム
US20100127983A1 (en) * 2007-04-26 2010-05-27 Pourang Irani Pressure Augmented Mouse
US20090002328A1 (en) * 2007-06-26 2009-01-01 Immersion Corporation, A Delaware Corporation Method and apparatus for multi-touch tactile touch panel actuator mechanisms
US8138896B2 (en) 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
KR102056518B1 (ko) * 2008-07-15 2019-12-16 임머숀 코퍼레이션 물리 기반 촉각 메시징을 위한 시스템 및 방법
CA2731042A1 (en) 2008-07-23 2010-01-28 Research In Motion Limited Portable electronic device and method of controlling same
CA2680666A1 (en) * 2008-10-08 2010-04-08 Research In Motion Limited An electronic device having a state aware touchscreen
US8957865B2 (en) * 2009-01-05 2015-02-17 Apple Inc. Device, method, and graphical user interface for manipulating a user interface object
JP2010211509A (ja) 2009-03-10 2010-09-24 Ricoh Co Ltd 入力装置及び画像形成装置
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
US8253712B2 (en) * 2009-05-01 2012-08-28 Sony Ericsson Mobile Communications Ab Methods of operating electronic devices including touch sensitive interfaces using force/deflection sensing and related devices and computer program products
US20110014983A1 (en) * 2009-07-14 2011-01-20 Sony Computer Entertainment America Inc. Method and apparatus for multi-touch game commands
JP2011028524A (ja) * 2009-07-24 2011-02-10 Toshiba Corp 情報処理装置、プログラムおよびポインティング方法
US8378798B2 (en) 2009-07-24 2013-02-19 Research In Motion Limited Method and apparatus for a touch-sensitive display
JP2011048606A (ja) 2009-08-27 2011-03-10 Kyocera Corp 入力装置
US9489073B2 (en) 2009-12-21 2016-11-08 Promethean Limited Multi-point contacts with pressure data on an interactive surface
US8576171B2 (en) * 2010-08-13 2013-11-05 Immersion Corporation Systems and methods for providing haptic feedback to touch-sensitive input devices
US9030419B1 (en) * 2010-09-28 2015-05-12 Amazon Technologies, Inc. Touch and force user interface navigation
US20120081337A1 (en) * 2010-10-04 2012-04-05 Sony Ericsson Mobile Communications Ab Active Acoustic Multi-Touch and Swipe Detection for Electronic Devices
US20120126941A1 (en) * 2010-11-19 2012-05-24 Research In Motion Limited Pressure password for a touchscreen device
US9153031B2 (en) * 2011-06-22 2015-10-06 Microsoft Technology Licensing, Llc Modifying video regions using mobile device input
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US9129584B2 (en) * 2012-03-06 2015-09-08 Apple Inc. Method of playing chord inversions on a virtual instrument
US20150077345A1 (en) * 2013-09-16 2015-03-19 Microsoft Corporation Simultaneous Hover and Touch Interface

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008305174A (ja) * 2007-06-07 2008-12-18 Sony Corp 情報処理装置、情報処理方法、プログラム
JP2010541071A (ja) * 2007-09-28 2010-12-24 イマージョン コーポレーション 動的な触覚効果を有するマルチタッチデバイス
JP2010033455A (ja) * 2008-07-30 2010-02-12 Canon Inc 情報処理方法及び装置
US20100156818A1 (en) * 2008-12-23 2010-06-24 Apple Inc. Multi touch with multi haptics
WO2011011552A1 (en) * 2009-07-22 2011-01-27 Immersion Corporation Interactive touch screen gaming metaphors with haptic feedback across platforms
JP2013500517A (ja) * 2009-07-22 2013-01-07 イマージョン コーポレーション 複数のプラットフォームを越える触覚フィードバックを用いた対話式タッチスクリーンゲーミング比喩
EP2527966A2 (en) * 2010-01-22 2012-11-28 Korea Electronics Technology Institute Method for providing a user interface based on touch pressure, and electronic device using same
US20110261021A1 (en) * 2010-04-23 2011-10-27 Immersion Corporation Transparent composite piezoelectric combined touch sensor and haptic actuator
JP2011242386A (ja) * 2010-04-23 2011-12-01 Immersion Corp 接触センサと触覚アクチュエータとの透明複合圧電材結合体

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015016210A1 (ja) * 2013-08-01 2015-02-05 株式会社ニコン 電子機器、および電子機器の制御プログラム
JPWO2015016210A1 (ja) * 2013-08-01 2017-03-02 株式会社ニコン 電子機器、および電子機器の制御プログラム
JP2015036977A (ja) * 2013-08-12 2015-02-23 イマージョン コーポレーションImmersion Corporation 触れていじるためのシステム及び方法
US10037081B2 (en) 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
JP2015049850A (ja) * 2013-09-04 2015-03-16 レノボ・シンガポール・プライベート・リミテッド 携帯型情報処理装置、そのデータ処理方法、およびコンピュータが実行可能なプログラム
JP2016540314A (ja) * 2013-12-13 2016-12-22 ダヴ 触覚フィードバックを備えた感応性コマンド表面でのアクチュエータの制御
JP2017500660A (ja) * 2013-12-19 2017-01-05 ダヴ 自動車両の少なくとも2つの機能を制御するためのマン/マシンインターフェース
JP2020038681A (ja) * 2014-03-21 2020-03-12 イマージョン コーポレーションImmersion Corporation 力ベースのオブジェクト操作及び触覚的感覚のためのシステム及び方法
JP2016024826A (ja) * 2014-07-21 2016-02-08 イマージョン コーポレーションImmersion Corporation マルチタッチ型入力のための触覚効果を決定するためのシステム及び方法
JP2018503270A (ja) * 2015-11-25 2018-02-01 小米科技有限責任公司Xiaomi Inc. スクリーン保護方法及び装置
US10026293B2 (en) 2015-11-25 2018-07-17 Xiaomi Inc. Screen protection method and apparatus, and storage medium

Also Published As

Publication number Publication date
EP2590067A3 (en) 2015-05-20
US10152131B2 (en) 2018-12-11
CN103092406B (zh) 2017-10-24
JP2018010659A (ja) 2018-01-18
CN107608518A (zh) 2018-01-19
JP6329723B2 (ja) 2018-05-23
JP6553136B2 (ja) 2019-07-31
EP2590067A2 (en) 2013-05-08
US20170131776A1 (en) 2017-05-11
EP3441866A1 (en) 2019-02-13
US20190227629A1 (en) 2019-07-25
KR20130050251A (ko) 2013-05-15
KR102104463B1 (ko) 2020-04-24
US20130113715A1 (en) 2013-05-09
US10775895B2 (en) 2020-09-15
US9582178B2 (en) 2017-02-28
JP2019204520A (ja) 2019-11-28
CN103092406A (zh) 2013-05-08

Similar Documents

Publication Publication Date Title
JP6553136B2 (ja) タッチ感応表面上でのマルチ圧力相互作用のためのシステムと方法
JP6546301B2 (ja) 動的な触覚効果を有するマルチタッチデバイス
JP6392747B2 (ja) ディスプレイ装置
JP2019050003A (ja) 触覚セルのアレイを用いた有形のユーザ・インターフェース・インタラクション及びジェスチャのシミュレーション
KR101885740B1 (ko) 마찰 디스플레이에서 특징부를 제공하는 시스템 및 방법
JP2017224324A (ja) 摩擦ディスプレイシステム及び方法、並びに付加的な触覚効果
JP2017016643A (ja) 触覚フィードバックを伴う入力
KR20160043503A (ko) 강성 구성 요소를 가진 햅틱 가능한 변형 가능 장치
KR20150028734A (ko) 햅틱 효과를 생성하는 스펙트로그램의 시각 처리 시스템 및 방법
KR20150069545A (ko) 햅틱 디스플레이 파라미터들의 광학적 전송을 위한 시스템 및 방법
JP2012520523A (ja) 摩擦ディスプレイシステム及び方法、並びに付加的な触覚効果
CN103513767A (zh) 触觉反馈控制系统
US20180011538A1 (en) Multimodal haptic effects
KR20170118864A (ko) 곡면형 디스플레이와의 사용자 상호작용을 위한 시스템들 및 방법들

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150728

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160413

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160510

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20160809

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161011

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170221

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170519

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170817

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20171003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180202

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20180208

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180403

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180423

R150 Certificate of patent or registration of utility model

Ref document number: 6329723

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees