JP5337877B2 - 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法 - Google Patents

受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法 Download PDF

Info

Publication number
JP5337877B2
JP5337877B2 JP2011518850A JP2011518850A JP5337877B2 JP 5337877 B2 JP5337877 B2 JP 5337877B2 JP 2011518850 A JP2011518850 A JP 2011518850A JP 2011518850 A JP2011518850 A JP 2011518850A JP 5337877 B2 JP5337877 B2 JP 5337877B2
Authority
JP
Japan
Prior art keywords
interaction
virtual
mode
user interface
graphical user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011518850A
Other languages
English (en)
Other versions
JP2011528475A5 (ja
JP2011528475A (ja
Inventor
デイビッド バーンボーム、
クリストファー ジェイ. ウーリッヒ、
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=41119917&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP5337877(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2011528475A publication Critical patent/JP2011528475A/ja
Publication of JP2011528475A5 publication Critical patent/JP2011528475A5/ja
Application granted granted Critical
Publication of JP5337877B2 publication Critical patent/JP5337877B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M19/00Current supply arrangements for telephone systems
    • H04M19/02Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • H04M19/047Vibrating means for incoming calls
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/041012.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/21Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for social networking applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Environmental & Geological Engineering (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Position Input By Displaying (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、一般に、触覚フィードバックに関し、より詳細には、受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法に関する。
(関連出願の相互参照)
本特許出願は、2008年7月15日に提出され「Systems and Methods for Physics−Based Tactile Messaging」と題された米国仮特許出願第61/080,978号、2008年7月15日に提出され「Systems and Methods for Mapping Message Contents to Virtual Physical Properties for Vibrotactile Messaging」と題された米国仮特許出願第61/080,981号、2008年7月15日に提出され「Systems and Methods for Shifting Sensor Haptic Feedback Function Between Passive and Active Modes」と題された米国仮特許出願第61/080,985号、2008年7月15日に提出され「Systems and Methods for Gesture Indication of Message Recipients」と題された米国仮特許出願第61/080,987号、2009年1月29日に提出され「Systems and Methods for Pseudo−Telepresence in a Shared Space」と題された米国仮特許出願第61/148,312号、及び2009年5月26日に提出され「Systems and Methods for Transmitting Haptic Messages」と題された米国仮特許出願第61/181,280号への優先権を主張し、これらの全体は参照により本明細書に組み込まれる。
過去数年間にわたって、あらゆる種類のハンドヘルド装置の使用が飛躍的に増加してきている。こうした装置は、携帯型システム手帳、電話、音楽プレーヤ、及びゲームシステムとして使用される。多くの最新のハンドヘルド装置は、何らかの種類の触覚フィードバックを組み込んでいる。触覚技術の改良につれて、装置は、複数のモードの触覚フィードバックを組み込む場合がある。フィードバックのモード間を切り替え及び選択する方法が必要とされる。
本発明の実施形態は、触覚フィードバックの能動及び受動モード間を転換するシステム及び方法を提供する。例えば、一実施形態では、触覚フィードバックの能動及び受動モード間を転換する方法は、グラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号をセンサから受信するステップと、グラフィカルユーザインターフェースとの相互作用に関連付けられる第2の信号を受信するステップと、グラフィカルユーザインターフェースとの相互作用のモード及びグラフィカルユーザインターフェースとの相互作用に少なくとも部分的に基づいて触覚フィードバック効果を決定するステップと、触覚フィードバック効果を出力するように構成される触覚信号を生成するステップとを備える。別の実施形態では、コンピュータ可読媒体がこのような方法を実行するためのプログラムコードを備える。
こうした例示の実施形態は、本発明を限定又は定義するのではなく、その理解を容易にする例示を提供するために言及される。例示の実施形態は、詳細な説明において検討され、そこでは発明のさらなる説明が提供される。本発明の多様な実施形態によって提供される利点は、本明細書を吟味することでさらに理解され得る。
本発明のこれらの及び他の特徴、側面、及び利点は、添付の図面を参照して以下の詳細な説明を読めば、よりよく理解される。
本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換するシステムのブロック図である。 本発明の一実施形態によるメッセージコンテンツを振動触覚メッセージング用の仮想物理特性にマッピングするための方法の流れ図である。 本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する別の例示である。 本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する別の例示である。 本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換するさらに別の例示である。 本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する最後の例示である。 本発明の1実施形態によって表示され得る仮想オブジェクトの例示である。
本発明の実施形態は、受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法を提供する。
(受動及び能動モード間における触覚フィードバック機能の転換の例示)
本発明の例示の実施形態は、例えば、携帯電話等のメッセージング装置を備える。例示的な実施形態では、メッセージング装置は、Immersion社のVibeTonz(R)という振動触覚フィードバックシステムを搭載した「Samsung SGH−i710」移動式コンピュータを含む。別の実施形態では、メッセージング装置は、Immersion TouchSense(R)振動触覚フィードバックシステムとしても知られているImmersion社のTouchSense(R)テクノロジーシステムを含む。他のメッセージング装置及び触覚フィードバックシステムが利用されてもよい。
メッセージング装置は、ディスプレイ、ユーザインターフェース装置、メモリ、及びこうした要素と通信するプロセッサを備える。また、例示のメッセージング装置は、センサ及びアクチュエータも備える。これらは共にプロセッサと通信する。センサは、メッセージング装置とユーザとの相互作用を感知するように構成され、アクチュエータは、触覚効果を出力するように構成される。
例示の装置では、プロセッサは、メッセージング装置のグラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号を受信する。プロセッサは、例えば、メッセージング装置の筐体の中のジャイロスコープ又は加速度計等のセンサから第1の信号を受信してもよい。このようなセンサは、ユーザがメッセージング装置を移動させ又は傾けたのを検出するように構成されてもよい。次に、装置の特定の運動は、受動又は能動モードのような特定の相互作用のモードに関連付けられてもよい。例えば、相互作用の能動モードを使用するために、メッセージング装置は、既定の方向に傾けられ又は回転させられてもよい。相互作用の受動モードに切り替えるために、メッセージング装置は、反対方向に傾けられ又は回転させられてもよい。
次に、プロセッサは、グラフィカルユーザインターフェースとの相互作用に関連付けられるユーザインターフェース装置から第2の信号を受信する。プロセッサは、例えば、タッチスクリーン等のタッチセンサ式入力装置から第2の信号を受信してもよい。相互作用は、多様な形態を取り得る。例えば、ユーザは、グラフィカルユーザインターフェースに表示される仮想オブジェクトと相互作用するために、タッチスクリーンディスプレイをブラッシング(brush)し、フリックし、擦り、ドラッグし、又は接触してもよい。代替的に、相互作用のモードが選択された後、ユーザは、グラフィカルユーザインターフェースと相互作用するためにメッセージング装置を傾け、揺動させ、回転させ、又は移動させてもよい。相互作用の能動モードでは、グラフィカルユーザインターフェースで仮想オブジェクトをブラッシング又はフリックすることにより、グラフィカルユーザインターフェース内で仮想オブジェクトが移動させられてもよく、同時にプロセッサは仮想オブジェクトの重量をシミュレートする触覚信号を生成する。相互作用の受動モードでは、仮想オブジェクトに接触することにより、プロセッサがテクスチャ等の仮想オブジェクトの表面特徴をシミュレートする触覚信号を生成してもよい。表面のシミュレーションは、振動又は他の触覚フィードバック効果の形態を採用してもよい。
2つの信号を受信した後、プロセッサは、グラフィカルユーザインターフェースとの相互作用のモード及びグラフィカルユーザインターフェースとの相互作用に少なくとも部分的に基づいて触覚フィードバック効果を決定する。例示の実施形態では、第1の信号が相互作用の能動モードに関連付けられ、第2の信号がグラフィカルユーザインターフェースに表示されるオブジェクトとユーザとの相互作用に関連付けられる。ユーザとの相互作用は、グラフィカルユーザインターフェースで仮想オブジェクトを移動させることに関してもよい。次に、プロセッサは、グラフィカルユーザインターフェースにおいて仮想オブジェクトと別の表面との衝突に類似する触覚フィードバックを決定してもよい。代替的に、第1の信号が相互作用の受動モードに関連付けられ且つ第2の信号が仮想オブジェクトの上又は付近の擦り動作に関連付けられる場合、プロセッサは、仮想オブジェクトのテクスチャをシミュレートする触覚フィードバックを決定してもよい。最後に、プロセッサは、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成する。アクチュエータは、触覚信号を受信して、メッセージング装置を、例えば、揺動させ、急激に揺さぶり、又は振動させることによって触覚効果を生成する。
この例示は、本明細書で検討される一般的な主題を読者に紹介するために与えられる。本発明は、この例示に限定されない。以下の段落は、能動及び受動モード間で触覚フィードバック機能を転換する方法及びシステムの様々な追加の非限定的な実施形態及び例示を記載する。
(受動及び能動モード間における触覚フィードバック機能の転換)
本明細書に提示される発明の実施形態は、受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法を提供する。最新のハンドヘルド装置は、複数のフィードバックのモードを含む能力を有してもよい。こうしたモードは、運動を基礎にした「能動モード」又はテクスチャを基礎にした「受動モード」であってもよい。フィードバックのモードは、ディスプレイを介して視覚的に、スピーカを使用して聴覚的に、又はアクチュエータを使用して触覚的に出力されてもよい。本発明は、フィードバックの能動及び受動モード間で転換するシステム及び方法を提供する。
例えば、加速度計及びタッチスクリーンを有するメッセージング装置では、相互作用のデフォルトモードは、相互作用の能動モードを含んでもよい。このようなモードでは、メッセージング装置を傾けることは、グラフィカルユーザインターフェースに表示される仮想オブジェクトが転がり回って見えるようにする。仮想オブジェクトの運動に応じて、装置は、仮想オブジェクトと他の表面との間の摩擦及び衝撃を示す触覚フィードバックを生成してもよい。また、このような装置を使用して、ユーザは、ユーザインターフェース内で仮想オブジェクトを直接移動させるためにタッチスクリーンを利用してもよい。ユーザは、仮想オブジェクトをグラフィカルユーザインターフェース上で移動させるためにメッセージング装置を傾けてもよい。又は、ユーザは、グラフィカルユーザインターフェースに触れることで仮想オブジェクトを直接操作してもよい。グラフィカルユーザインターフェースでの仮想オブジェクトの移動は、仮想オブジェクトの摩擦プロファイルに基づいて1つ以上の触覚効果をアクチュエータに生成させる。
各仮想オブジェクトは、1つ以上のオブジェクトのサイズ、質量、形状、衝突挙動、及びテクスチャを定義する仮想物理パラメータを含む。また、仮想物理パラメータは、オブジェクトのテクスチャ及び摩擦プロファイルを含んでもよい。テクスチャプロファイルは、相互作用の受動モードにおけるユーザ相互作用へのオブジェクトの反応を定義するパラメータを含むデータストアである。テクスチャプロファイルは、仮想オブジェクトの表面特徴をさらに定義してもよい。摩擦プロファイルは、相互作用の能動モードにおけるユーザの操作への仮想オブジェクトの反応及び他の仮想オブジェクトとの相互作用を定義するパラメータを含むデータストアである。摩擦プロファイルは、例えば、仮想高さ、重量、密度等の他の特性をさらに定義してもよい。ユーザが仮想オブジェクトと相互作用し又は仮想オブジェクトがグラフィカルユーザインターフェースの他の特徴と相互作用すると、相互作用に応答する運動及び触覚フィードバックは、仮想オブジェクトの摩擦プロファイルに少なくとも部分的に基づくであろう。例えば、ボールは跳ねることによって相互作用に応答することを引き起こす摩擦プロファイルを有し得る一方で、別のボールは転がることによって応答してもよい。さらに、高密度の重いボールは、インターフェース内で表面への激しい衝突と共にゆっくりと移動してもよく、低密度の軽いボールは、柔軟な衝撃と共に素早く移動してもよい。仮想オブジェクトは、限定されないが、ボール、卵、管、カプセル又は箱を含む任意の数の形状の1つであってもよい。
仮想オブジェクトは、データの種類を表してもよい。例えば、仮想オブジェクトは、装置内のビデオファイルを表してもよい。さらに、仮想オブジェクト形状用に選択される形状は、仮想オブジェクトによって表されるデータの種類を考慮に入れてもよい。例えば、写真を表す仮想オブジェクトはカメラの形状を採用してもよい。一方で、ビデオファイルを表す仮想オブジェクトはコンパクトディスクの形状を採用してもよい。
仮想オブジェクトは、トークンを含んでもよい。トークンは、既定のパラメータを有する仮想オブジェクトの種類である。次に、ユーザは、トークンの特定のインスタンス化の追加のパラメータを定義してもよい。例えば、一実施形態では、トークンは、既定の摩擦及びテクスチャプロファイルを有する、ボールの形状の仮想オブジェクトを含んでもよい。次に、ユーザは、例えば、ボールのサイズ及び色彩等の追加の特徴を定義してもよい。
プロセッサは、相互作用の異なるモードに関連付けられる転換又は変更信号を受信して、相互作用の受動モードに切り替わってもよい。相互作用の受動モードでは、触覚効果は、摩擦プロファイルではなく仮想オブジェクトのテクスチャプロファイルに基づいてもよい。テクスチャプロファイルは、例えば、テクスチャ及び張力等の仮想オブジェクトの表面特徴を現すデータを含むデータストアである。ユーザが仮想オブジェクトに接触すると、装置は、オブジェクトの表面をシミュレートする触覚効果を生成してもよい。例えば、仮想オブジェクトは、急峻な激しい触覚パルスによって示される粗い表面を有し得る。一方で、柔らかい表面を有する仮想オブジェクトは、安定した穏やかな振動によって示され得る。
幾つかの実施形態では、ユーザインターフェースは、物理モデルを組み込むようにプログラムされる仮想メッセージ環境として表されてもよい。このような環境では、電子メッセージが仮想メッセージオブジェクトとして表示されてもよい。仮想メッセージオブジェクトは、電子メッセージを組み込むデータストアを含む仮想オブジェクトの形状である。仮想メッセージオブジェクトは、1つ以上のオブジェクトのサイズ、質量、形状、衝突挙動、及びテクスチャを定義する仮想物理パラメータを含む。また、仮想物理パラメータは、オブジェクトのテクスチャ及び摩擦プロファイルを含んでもよい。テクスチャプロファイルは、相互作用の受動モードにおけるユーザ相互作用へのオブジェクトの反応を定義するパラメータを含むデータストアである。テクスチャプロファイルは、仮想オブジェクトの表面特徴をさらに定義してもよい。摩擦プロファイルは、相互作用の能動モードにおけるユーザの操作への仮想オブジェクトの反応及び他の仮想オブジェクトとの相互作用を定義するパラメータを含むデータストアである。摩擦プロファイルは、例えば、仮想高さ、重量、密度等の他の特性をさらに定義してもよい。ユーザは、様々なメッセージング装置、及びタッチスクリーン、ジャイロスコープ、GPS、若しくは加速度計、又は運動を検出するように構成される他のセンサ等のセンサを介して仮想メッセージ環境及び仮想メッセージオブジェクトを操作することが出来る。
仮想メッセージオブジェクトは、トークンを含んでもよい。トークンは、既定のパラメータを有する仮想オブジェクトの種類である。次に、ユーザは、トークンの特定のインスタンス化の追加のパラメータを定義してもよい。例えば、一実施形態では、トークンは、既定の摩擦及びテクスチャプロファイルを有する、ボールの形状の仮想オブジェクトを含んでもよい。次に、ユーザは、トークンのインスタンス化によって含まれるテキスト、並びにボールのサイズ及び色彩等の追加の特徴を定義してもよい。
ユーザが装置と相互作用しているとき、センサは、ユーザの移動を検出して、プロセッサに移動を表す信号を送信する。次に、プロセッサは、ユーザの移動の変位及び大きさを表すベクトルを計算してもよい。次に、プロセッサは、ベクトルを仮想メッセージ環境内に含まれる仮想メッセージオブジェクトに作用する仮想的力に変換してもよい。メッセージが触覚的に使用可能な装置に送信される場合、触覚効果は、メッセージの成分として組み込まれてもよい。例えば、ユーザは、メッセージに柔らかいジェスチャを組み込んでもよい。受信者がメッセージを受信すると、この柔らかいジェスチャは、メッセージが緊急ではないことを示す柔らかい触角効果に変換されてもよい。逆に、ユーザは、激しいジェスチャをメッセージに組み込んでもよく、それは緊急のメッセージを示す激しい触覚力に変換されるであろう。他の仮想オブジェクトのように、仮想メッセージオブジェクトは、触覚効果を計算するために使用され得るテクスチャプロファイル及び摩擦プロファイルを共に有してもよい。
一実施形態では、ユーザがフィードバックのモード間を切り替えることを望む場合、ジェスチャ、位置、キー、又は他の制御が相互作用のモードに対する選択手段として割り当てられる。例えば、ユーザは、相互作用の能動及び受動モード間を切り替え、又は相互作用の別のモードに切り替えるために特定のジェスチャを使用することが出来る。ユーザインターフェースは、視覚表示、音響効果、及び/又は触覚フィードバックを介してモードの変更を示し/説明してもよい。例えば、ユーザが受動モードから能動モードに切り替える場合、装置は、振動等の触覚指示を提供すると同時に、ディスプレイを介して視覚的指示を提供してもよい。
別の実施形態では、装置は、相互作用のモード間を切り替えるためにタッチスクリーン上に表示され得るスイッチ又はボタンを備えてもよい。この実施形態では、例えば、ユーザはシフトキーを押してもよく、それは相互作用の能動モードを示す。このモードでの動作中、装置の移動は、ディスプレイの中の仮想オブジェクトを移動させ、転がせ、且つ互いと衝突させ得る。ユーザがシフトキーを開放すると、相互作用の受動モードが有効になる。このモードでは、仮想オブジェクトは、各仮想オブジェクトのテクスチャを表す振動フィードバックのような異なる変数を示してもよい。
受動モードの間、仮想オブジェクトは、スクリーン上の運動を継続してもよく、ユーザは、仮想オブジェクトと相互作用してもよい。しかし、ユーザは、仮想オブジェクト間の相互作用を指示することは出来ない。
(相互作用の受動及び能動モード間における触覚フィードバック機能を転換する例示のシステム)
次に、複数の図面を通じて同様の番号が同様の要素を示す図面を参照すると、図1は、本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換するシステムのブロック図である。図1を参照すると、システム100は、例えば、携帯電話、PDA(portable digital assistant)、携帯型メディアプレーヤ、又は携帯型ゲーム装置等のメッセージング装置102を備える。メッセージング装置102は、ネットワークインターフェース112、センサ114、ディスプレイ116、アクチュエータ118、及びスピーカ120と通信するプロセッサ110を備える。プロセッサ110は、ディスプレイ116に示される仮想環境を生成するように構成される。
プロセッサ110は、ネットワークインターフェース112と通信する。ネットワークインターフェース112は、例えば、赤外線、無線、Wi−Fi又はセルラネットワーク通信等の1つ以上の移動式通信方法を備えてもよい。他の変形では、ネットワークインターフェース112は、例えば、イーサネット(登録商標)等の有線ネットワークインターフェースを備える。メッセージング装置102は、例えば、セルラ電話ネットワーク及び/又はインターネット等のネットワークを介して他の装置(図示せず)とメッセージ又は仮想メッセージオブジェクトを交換するように構成され得る。装置間で交換されるメッセージの実施形態は、音声メッセージ、テキストメッセージ、データメッセージ、又は他の形態のデジタルメッセージを含んでもよい。
また、プロセッサ110は、1つ以上のセンサ114と通信する。センサ114は、位置センサ、回転速度センサ、画像センサ、圧力センサ、又は他の種類のセンサを備えてもよい。例えば、センサ114は、加速度計、ジャイロスコープ、GPSセンサ、又はタッチセンサ式入力装置(例えば、タッチスクリーン、タッチパッド)を含んでもよい。1つ以上のセンサ114は、例えば、加速度、傾き、慣性、又は位置の変化を検出するように構成されてもよい。例えば、メッセージング装置102は、メッセージング装置102の加速度を測定するように構成される加速度計を備えてもよい。別の例示として、メッセージング装置102は、位置センサ、回転速度センサ、画像センサ、圧力センサ、又は他の種類のセンサを備えてもよい。1つ以上のセンサ114は、センサ信号をプロセッサ110に送信するように構成されてもよい。
ユーザは、1つ以上のセンサ114によって検出される移動又はジェスチャを介してユーザインターフェースと相互作用してもよい。メッセージング装置102が傾けられ、揺動され、又は移動されると、1つ以上のセンサ114は、こうした運動を検出して、運動に少なくとも部分的に基づいてプロセッサ110に送信するためのセンサ信号を生成してもよい。プロセッサは、装置とユーザとの相互作用の方向及び大きさを表す方法及び大きさを持つベクトルを生成するためにこうした信号を使用してもよい。一実施形態では、加速度センサは、メッセージング装置102の傾き及び加速度を検出するように構成される。メッセージング装置102が傾けられると、加速度計は、メッセージング装置102の傾き及び/又は加速に少なくとも部分的に基づいてプロセッサに信号を送信するように構成され得る。次に、プロセッサ110は、相互作用の方向及び大きさを表すベクトルを生成するためにこうした信号を使用する。
センサ114から受信される信号は、グラフィカルユーザインターフェースとの相互作用のモードに関連付けられてもよい。例えば、加速度計によって検出される突き刺し動作が相互作用の能動モードに関連付けられてもよい。一方で、加速度計によって検出される円形又は回転動作が相互作用の受動モードに関連付けられてもよい。特定のジェスチャに相互作用のモードをマッピングすることによって、プロセッサ110は、迅速且つ効果的に相互作用のモードを切り替えることが可能であってもよい。
また、センサ114から受信される信号は、グラフィカルユーザインターフェースとの相互作用に関連付けられてもよい。例えば、ユーザは、最初にシフトキーを押し又は押し下げることによって相互作用のモードを選択してもよい。相互作用のモードが選択された後、メッセージング装置は、グラフィカルユーザインターフェースと相互作用するために、傾けられ、回転させられ、揺動させられ、又は移動させられてもよい。センサ114によって検出される装置のそれぞれの運動は、グラフィカルユーザインターフェースとの相互作用に関連付けられてもよい。ある相互作用のモードでは、装置を傾けることでグラフィカルユーザインターフェースの拡大又は縮小が行われてもよい。例えば、デジタル画像がディスプレイ116に示されてもよい。画像を操作するために、ユーザは、相互作用の能動モードを選択して、センサ114が運動を検出するように装置を傾けてもよい。次に、装置は、センサ114から受信されるデータに基づいてディスプレイ116に示される画像を操作してもよい。装置は、多くの異なる方法で画像を操作し得る。例えば、操作は、画像の拡大若しくは縮小、又は表示画像の回転を含み得る。
プロセッサ110は、相互作用のモードに関連付けられる信号及び/又は相互作用に関連付けられる他のソース(図1には示されない)からの信号を受信してもよい。例えば、メッセージング装置102は、スクロールホイール、ロッカスイッチ、又はジョイスティック(図1には示されない)を備えてもよい。また、メッセージング装置102は、シフトボタン等の1つ以上のボタンを備えてもよい(図1には示されない)。
また、図1に示される実施形態では、プロセッサ110は、ディスプレイ116とも通信する。プロセッサ110は、ディスプレイ116に示されるユーザインターフェースの図形表示を生成するように構成され得る。ディスプレイ116は、プロセッサ110から信号を送信及び受信するように構成される、例えば、タッチスクリーン等のタッチセンサ式入力装置を備えてもよい。
タッチスクリーンディスプレイ116から受信される信号は、グラフィカルユーザインターフェースとの相互作用のモードに関連付けられてもよい。1つの変形では、タッチスクリーン上のタップ等の既定のジェスチャは、相互作用の特定のモードに関連付けられてもよい。このような実施形態では、タッチスクリーン上の一度のタップが相互作用の能動モードに関連付けられてもよい。一方で、タッチスクリーン上の2度のタップが相互作用の受動モードに関連付けられてもよい。別の変形では、右上象限等のディスプレイ116の特定の領域においてタッチスクリーンによって検出されるジェスチャが、相互作用の1のモードに関連付けられてもよい。一方で、左下象限等のディスプレイ116の異なる領域においてタッチスクリーンによって検出されるジェスチャが、相互作用の第2のモードに関連付けられてもよい。相互作用のモード間を切り替えるために、ジェスチャ又はユーザアクションの様々な他の組み合わせが利用されてもよい。
図1に示される実施形態では、装置は、ディスプレイ116に示されるオブジェクトを直接ユーザに操作させることが出来る。ディスプレイ116がタッチスクリーンディスプレイを備える場合、相互作用の能動モードにおいて、ディスプレイ116上での2次元指ジェスチャは、ユーザインターフェース内で仮想オブジェクトを選択し、ドラッグし、フリックし、投げ、又は移動させてもよい。相互作用の受動モードでは、ディスプレイ116上での2次元指ジェスチャは、グラフィカルユーザインターフェース内の位置を変更せずに仮想オブジェクトに接触及び/又は感知してもよい。
プロセッサ110は、グラフィカルユーザインターフェースとの相互作用のモード及びグラフィカルユーザインターフェースとユーザとの相互作用に少なくとも部分的に基づいて触覚フィードバック効果を決定してもよい。相互作用の能動モードでは、プロセッサ110は、例えば、突き刺し又はフリック等のユーザ相互作用に基づいて衝撃又は衝突をシミュレートする触覚効果を決定してもよい。例えば、ディスプレイは、ユーザがフリックするボールを示してもよい。ユーザがボールの画像をフリックすると、プロセッサ110は、ユーザへの衝撃を表す触覚効果を決定してもよい。仮想ボールの特性を示す衝撃は、例えば、ボールの重量、密度、及び他の仮想オブジェクトとの相互作用の種類等の摩擦プロファイルに含まれる。プロセッサ110は、仮想ボールがディスプレイ116の側部と衝突する場合の衝突をさらに計算してもよい。相互作用の受動モードでは、プロセッサ110は、例えば、ブラッシング又は摩擦等の相互作用に基づいて粗い又は滑らかなテクスチャをシミュレートする触覚効果を決定してもよい。例えば、一実施形態では、ディスプレイ116は、粗い表面を表すデータを備えるテクスチャプロファイルを有するボールを示す。次に、ユーザがボールと相互作用すると、プロセッサ110は、一連の触覚的衝撃を表す触覚信号を計算して、ボールの粗い表面を示してもよい。
図1に示されるように、プロセッサ110は、1つ以上のアクチュエータ118とも通信する。アクチュエータ118は、プロセッサ110から信号を受信して、触覚効果を生成するように構成されてもよい。プロセッサ110が触覚効果を決定した後、プロセッサ110は、アクチュエータ118に触覚効果を出力させるように構成されるアクチュエータ118に触覚信号を送信してもよい。アクチュエータ118は、例えば、圧電アクチュエータ、電気モータ、電磁アクチュエータ、音声コイル、リニア共振アクチュエータ、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ(ERM)又はリニア共振アクチュエータ(LRA)であってもよい。
(相互作用の受動及び能動モード間における触覚フィードバック機能を転換する例示の方法)
図2は、相互作用のモード及びグラフィカルユーザインターフェースとユーザとの相互作用に少なくとも部分的に基づいて触覚効果を決定する方法の流れ図である。本発明の実施形態は様々な装置で利用され得るが、図2に示される工程は、図1に示される装置に関連して記載される。方法200において、プロセッサ110は、グラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号を受信する(202)。一実施形態では、信号は、相互作用のモードの変更を示す。他の実施形態では、信号は、相互作用のモードの変更がないことを示す。相互作用のモードに関連付けられる信号は、例えば、加速度計、ジャイロスコープ、GPSセンサ、マイクロホン、タッチセンサ式入力装置(例えば、タッチスクリーン、タッチパッド)、テクスチャスタイラス、画像センサ、又は何らかの他の種類のセンサ等のセンサ114によって生成されてもよい。又は、相互作用のモードは、ボタン又はスイッチを介して選択されてもよい。例えば、相互作用のモードは、メッセージング装置102を既定の方式で回転させ、シフトボタンを押し下げ、マイクロホンに息を吹き込み、又はタッチスクリーンディスプレイ116上でジェスチャを行うことによって選択されてもよい。一実施形態では、第1の信号は、プロセッサによって部分的に制御される。例えば、プロセッサは、入力を受信し、グラフィカルユーザインターフェースとの相互作用のモードを変化させる信号を計算して送信するためにこの入力を使用してもよい。別の実施形態では、第1の信号は、所定期間の後、デフォルト設定に戻るように制御される。例えば、装置は、相互作用の受動モードのデフォルト設定を有してもよく、相互作用のモードが5分以上有効に設定されている場合、プロセッサは、装置を元の受動モードに切り替えてもよい。
グラフィカルユーザインターフェースは、ユーザが相互作用し得る仮想オブジェクトを表示することが出来る。図示の実施形態では、グラフィカルユーザインターフェースは、1つ以上の相互作用のモードを備える。一例では、グラフィカルユーザインターフェースは、相互作用の能動モード及び相互作用の受動モードを備える。相互作用の能動モードでは、例えば、ユーザは、1つ以上の仮想オブジェクトと他の仮想オブジェクト及び/又は仮想環境との間の相互作用を指示してもよい。相互作用の受動モードでは、ユーザは、仮想環境と相互作用せずに又は仮想オブジェクトを仮想環境内の他のオブジェクトと相互作用させずにある仮想オブジェクトとだけ相互作用してもよい。
相互作用のモードが選択された後、プロセッサは、グラフィカルユーザインターフェースとの相互作用に関連付けられる第2の信号を受信する(204)。相互作用に関連付けられる信号は、タッチセンサ式入力装置(例えば、タッチスクリーン、タッチパッド)又は加速度計、ジャイロスコープ、GPSセンサ、マイクロホン、テクスチャスタイラス、又は画像センサ等の他の何らかの種類のセンサによって生成されてもよい。一例では、ユーザは、タッチスクリーンディスプレイ116を介して仮想オブジェクトに接触することによってユーザインターフェースと相互作用する。プロセッサ114は、ユーザによって行われるジェスチャ又は接触に関連付けられるタッチスクリーンディスプレイ116から信号を受信する。相互作用に関連付けられる信号は、例えば、位置、速度、圧力及び/又は種類等の相互作用の特性を有してもよい。例えば、タッチスクリーンディスプレイ116からの信号は、タッチスクリーンディスプレイ116との接触の位置、接触の速度及び/又は圧力、接触の持続期間、並びにタッチスクリーンディスプレイ116上で行われるジェスチャ又は動作の種類を含んでもよい。
第1の信号及び第2の信号は、実質的に同時に受信されてもよい。例えば、ユーザは、シフトキーを押し下げてもよく、実質的に同時にタッチスクリーン上でジェスチャを行ってもよい。このようなシナリオでは、プロセッサ110がユーザインターフェースとユーザとの相互作用に関連付けられる第2の信号を受信するのと実質的に同時に、プロセッサは、相互作用のモードに関連付けられる第1の信号を受信する。別の変形では、プロセッサ110は、第1の信号を受信後、例えば、0.5秒から数秒以上等の期間の後、第2の信号を受信する。例えば、ユーザは、既定の方式でメッセージング装置を移動させることによって相互作用のモードを選択してもよい。その後、ユーザは、メッセージング装置のタッチスクリーンディスプレイ116上でジェスチャを行うことによってユーザインターフェースと相互作用してもよい。装置は、ユーザ選択の相互作用のデフォルトモードを有してもよい。
プロセッサ110は、グラフィカルユーザインターフェースとの相互作用のモード及びグラフィカルユーザインターフェースとの相互作用に少なくとも部分的に基づいて触覚効果を決定する(206)。相互作用の受動モードでは、触覚効果は、グラフィカルユーザインターフェースのテクスチャプロファイル及び/又はグラフィカルユーザインターフェースに表示される仮想オブジェクトに基づいてもよい。相互作用の受動モードでは、ユーザが仮想オブジェクトを擦り又はブラッシングすると、プロセッサは、粗い又は滑らかなテクスチャをシミュレートする振動のような仮想オブジェクトのテクスチャをシミュレートする触覚効果を決定してもよい。相互作用の能動モードでは、触覚効果は、グラフィカルユーザインターフェース及び/又はグラフィカルユーザインターフェースに表示される仮想オブジェクトの摩擦プロファイルに基づいてもよい。相互作用の能動モードでは、ユーザが仮想オブジェクトを擦り又はブラッシングすると、仮想オブジェクトは、ユーザの動作に相関してディスプレイ上で移動してもよい。次に、仮想オブジェクトがディスプレイ内を移動すると、プロセッサは、仮想オブジェクトの移動をシミュレートする触覚効果を決定してもよい。例えば、プロセッサは、重いオブジェクトに対しては、長く低い音を生成し、又は軽量なオブジェクトをシミュレートするために穏やかな振動を生成してもよい。
次に、プロセッサ110は、アクチュエータ118に触覚効果を出力させるように構成される触覚信号を生成する(208)。最後に、プロセッサ110は、触覚効果を出力するように構成される1つ以上のアクチュエータ118に触覚信号を送信する(210)。触覚信号の受信後、アクチュエータ118は、触覚効果を出力する。触覚効果は、限定されないが、テクスチャを表すフィードバック、緊張を表すフィードバック、把持を表すフィードバック、フリックを表すフィードバック、打撃を表すフィードバック、発砲を表すフィードバック、ひび割れを表すフィードバック、移動を表すフィードバック、摩擦を表すフィードバック、又は1回若しくは複数の衝突を表すフィードバックを含む多くの異なる種類のフィードバックを含んでもよい。
例示の実施形態では、グラフィカルユーザインターフェースは、ハートの形状の仮想オブジェクトを表示する。次に、プロセッサ110は、相互作用の受動モードに関連付けられる信号を受信する。次に、プロセッサ110は、仮想ハートの摩擦又はブラッシングに関連付けられる信号を受信する。次に、受信信号及び仮想ハートのテクスチャプロファイルの両方に基づいて、プロセッサ110は、ユーザが仮想ハートと相互作用するときに出力されるハートの鼓動をシミュレートする触覚効果を決定してもよい。アクチュエータ118は、触覚信号を受信して、ハートの鼓動をシミュレートする触覚効果を生成する。
別の例示の実施形態では、グラフィカルユーザインターフェースは、ハートの形状の仮想オブジェクトを表示する。最初に、プロセッサ110は、相互作用の能動モードに関連付けられる信号を受信して、次に、仮想ハートとユーザとの相互作用に関連付けられる信号を受信する。この点で、プロセッサ110は、受信信号及び仮想ハートの摩擦プロファイルの両方に基づいて触覚効果を決定してもよい。計算される効果は、ユーザが画面上をドラッグするときのハートの重量をシミュレートしてもよい。アクチュエータ118は、触覚信号を受信して、ハートの重量をシミュレートする触覚効果を生成する。
別の例示の実施形態では、グラフィカルユーザインターフェースは、仮想メッセージング環境を表示する。仮想メッセージング環境において、Eメール、テキストメッセージ、インスタントメッセージ、又は他の種類のメッセージ等の電子メッセージは、仮想メッセージオブジェクトとして表示される。一実施形態では、仮想メッセージオブジェクトは、ボール、管、カプセル、箱、風船、ハート、又はグラフィカルユーザインターフェースが表示可能な任意の他の形状の1つを備える。図7は、粗い表面730を有するボールの形態の仮想メッセージオブジェクトを示すディスプレイ720を含むメッセージング装置710を示す。仮想メッセージオブジェクトは、例えば、サイズ、質量、形状、衝突、又はテクスチャ等の仮想オブジェクトの1つ以上の特徴を定義する仮想物理パラメータをさらに備える。仮想物理パラメータは、ユーザ又はプログラム自身によって修正されてもよい。この例示の実施形態では、プロセッサ110は、仮想メッセージング環境内の仮想メッセージオブジェクトとの相互作用に関連付けられる信号を受信する。次に、プロセッサ110は、仮想メッセージング環境内の仮想メッセージオブジェクトとの相互作用に関連付けられる信号を受信する。プロセッサ110は、仮想メッセージオブジェクトとの相互作用のモード及び仮想メッセージングオブジェクトとの相互作用に少なくとも部分的に基づいて触覚効果を決定してもよい。
例えば、一実施形態では、グラフィカルユーザインターフェースは、仮想メッセージング環境及び風船の形態の仮想メッセージオブジェクトを表示する。風船は、サイズ、形状、及び衝突挙動を定義する仮想物理パラメータを含む。次に、プロセッサは、相互作用の能動モードに関連付けられる信号を受信して、ユーザが風船を突き刺すことに関連付けられる信号をさらに受信してもよい。プロセッサは、相互作用のモード及び相互作用、この場合は相互作用の能動モード及び突き刺し相互作用に少なくとも部分的に基づいて触覚効果を計算するであろう。次に、プロセッサは、触覚効果を出力するように構成されるアクチュエータに計算された触覚信号を送信するであろう。触覚効果は、例えば、仮想風船の破裂を表す信号であってもよい。プロセッサは、仮想風船が破裂すると、仮想メッセージの送信のような仮想メッセージオブジェクトでのアクションをさらに実行してもよい。
(相互作用の受動及び能動モード間における触覚フィードバック機能の転換の例示)
図3は、本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する例示である。図3では、メッセージング装置302は、シフトボタン304及びタッチスクリーン306を備える。メッセージング装置302は、タッチスクリーン306上に示される仮想環境310のようなグラフィカルユーザインターフェースを生成する。
図3に示されるように、グラフィカルユーザインターフェース310は、ボールの形態の1個の仮想オブジェクト312を備える。他の実施形態では、グラフィカルユーザインターフェースは、0又は1個以上の仮想オブジェクトを含んでもよい。オブジェクトが表示されない場合、ディスプレイの背景は、それ自体の機能及びテクスチャプロファイルを有してもよい。仮想オブジェクトが表示される場合、各仮想オブジェクトは、仮想物理パラメータを備える。仮想物理パラメータは、例えば、サイズ、形状、質量、衝突挙動、又はテクスチャ等の仮想オブジェクトの1つ以上の特徴を含んでもよい。物理パラメータは、仮想オブジェクトのユーザ及び他の仮想オブジェクトとの相互作用を定義する摩擦及び/又はテクスチャプロファイルをさらに有してもよい。例えば、仮想ボールの摩擦プロファイルは、回転又は弾性プロファイルを含んでもよい。そして、仮想ボールのテクスチャフィードバックプロファイルは、やや粗い又は粘着性の表面を備えてもよい。プロセッサは、仮想オブジェクトの摩擦プロファイル及び/又はテクスチャプロファイルに少なくとも部分的に基づいて触覚効果を決定してもよい。
各仮想オブジェクトは、1つ以上の仮想物理パラメータを備えてもよい。仮想物理パラメータは、サイズ、質量、形状、衝突挙動、テクスチャ、又は視覚表示を含むことが出来る。幾つかのシナリオでは、仮想オブジェクトは、例えば、テキストメッセージ、ファイルメッセージ、又は音声メール等のメッセージを表す。仮想オブジェクトの仮想物理パラメータは、仮想オブジェクトが表すデータの種類に少なくとも部分的に基づいてもよい。一例では、仮想オブジェクトは、ショートテキストメッセージを表してもよく、弾性がなく砕けやすくもない軽くて薄い円筒状オブジェクトを含んでもよい。長いビデオファイルを表す仮想オブジェクトは、ひび割れする長くて重い楕円形オブジェクトを含んでもよい。
摩擦プロファイル及び/又はテクスチャプロファイルは、仮想オブジェクトの仮想物理パラメータに少なくとも部分的に基づいてもよい。例えば、卵形仮想メッセージオブジェクトの摩擦プロファイルは、仮想卵が仮想環境内で移動するときのひび割れ又は破壊動作を決定してもよい。このように、仮想卵オブジェクトが仮想環境内で移動して割れ又は壊れると、仮想卵のひび割れ又は破壊をシミュレートする触覚フィードバック効果が、ある相互作用のモードで生成されてもよい。別の相互作用のモードでは、卵は、テクスチャの特徴を有する振動として表される滑らかな感触に感じられてもよい。
仮想オブジェクトは、トークンを含んでもよい。トークンは、既定のパラメータを有する仮想オブジェクトの種類である。次に、ユーザは、トークンの特定のインスタンス化の追加のパラメータを定義してもよい。例えば、一実施形態では、トークンは、既定の摩擦及びテクスチャプロファイルを有するボールを含んでもよい。次に、ユーザは、例えば、ボールのサイズ及び色彩等の追加の特徴を定義してもよい。
ユーザインターフェース310との相互作用の前に、相互作用のモードが選択されてもよい。例えば、シフトボタン304がユーザインターフェースとの相互作用のモードを選択するために使用されてもよい。図3に示されるように、シフトボタン304は押し下げられていない。シフトボタン304が押し下げられていない場合、ユーザインターフェース310は、ユーザがデフォルトとして定義した相互作用のモードのままでいてもよい。シフトボタン304が有効化されると、ユーザインターフェース310は、異なる相互作用のモードに切り替わってもよい。シフトボタン304は、押し下げられると、相互作用のモードの変更を示す信号を生成してもよい。メッセージング装置302のプロセッサ(図3には示されない)は、シフトボタン304から低信号を受信して、相互作用の受動モードが意図されていることを決定してもよい。高信号がシフトボタン304から受信されると、プロセッサは、相互作用の能動モードが意図されていることを決定してもよい。他の変形では、相互作用のデフォルトモードは、相互作用の能動モード又は他の何らかの相互作用のモードを含んでもよい。他の実施形態では、プロセッサは、相互作用のモードを制御して、ユーザ定義期間の後、ユーザ定義のデフォルトに相互作用のモードを戻してもよい。
相互作用のモードが選択された後、ユーザは、タッチスクリーン306に接触することによって、ユーザインターフェース310及び/又は仮想オブジェクト312と相互作用してもよい。他の変形では、ユーザは、メッセージング装置を揺動させ、傾け、回転させ、又は移動させることによってユーザインターフェース310及び/又は仮想オブジェクト312と相互作用してもよい。例えば、一実施形態では、ディスプレイが仮想ボールを示してもよい。相互作用の能動モードでは、ユーザは、画面を傾けて、グラフィカルユーザインターフェース内で仮想ボールを転動させてもよい。装置は、仮想ボールがグラフィカルユーザインターフェースの境界に転がると触覚効果を出力してもよい。別の実施形態では、仮想ボールは、テキストメッセージ、Eメール、又は他の電子メッセージを表してもよい。メッセージを表す仮想ボールがグラフィカルユーザインターフェースの境界に転がる場合、装置は、仮想ボールがディスプレイから転がり落ちることによって、メッセージを送信することを可能にしてもよい。
図3に示されるように、ユーザインターフェース310は、相互作用の最初のモードであって、ユーザは、矢印320及び矢印322によって示される方向にタッチスクリーン306をブラッシングし又は擦っている。例えば受動モード等の相互作用の第1のモードでは、仮想オブジェクト312のブラッシング又は打撃は、触覚フィードバックを介して仮想オブジェクト312のテクスチャプロファイルをメッセージング装置302にシミュレート又は描写させてもよい。プロセッサが仮想オブジェクト312との相互作用に関連付けられる信号を受信した後、プロセッサは、例えば、仮想オブジェクト312の表面、構成、及び/又は素材をシミュレートする振動等の仮想オブジェクト312のテクスチャプロファイルをシミュレートする触覚効果を決定する。次に、プロセッサは、触覚効果を生成するアクチュエータ(図3には示されない)に触覚信号を送信する。
図4は、本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する別の例示である。図4では、メッセージング装置402は、シフトボタン404及びタッチスクリーン406を備える。メッセージング装置402は、タッチスクリーン406上に示される仮想環境410のようなグラフィカルユーザインターフェースを表示する。ボールとして示される仮想オブジェクト412が、仮想環境410の中に示される。
図4に示されるように、ユーザは、矢印424によって示される下向きの動作でシフトキー404を押し下げている。実質的に一緒に、又は実質的に同時に、ユーザは、矢印420及び矢印422で示される方向でタッチスクリーンに接触することによって、ユーザインターフェースに示される仮想オブジェクトを操作している。シフトボタンを押し下げることによって、ユーザは、図形オブジェクトとの相互作用の能動モードに装置を設定してもよい。相互作用の能動モードでは、図形オブジェクトは、「把持可能」になってもよい。このモードでは、装置は、オブジェクトと背景表面との間の摩擦を表す触覚フィードバックでタッチスクリーン上の指ジェスチャに応答してもよい。
相互作用の受動モードでは、加速度計から受信される信号は、把持される仮想オブジェクトに影響を与えなくてもよい。しかし、相互作用の能動モードでは、加速度計の信号は、ユーザインターフェース410内の他の仮想オブジェクト(図4には示されない)に影響を与えてもよい。今度は、指ジェスチャは、仮想オブジェクト412の摩擦プロファイルを有効化してもよい。例えば、ユーザがシフトボタンを押し下げてタッチスクリーン上でフリックジェスチャを行う場合、プロセッサは、ユーザインターフェース内で図形オブジェクトを移動させて仮想環境と仮想オブジェクトとの間の摩擦を表す触覚効果を生成することによって応答してもよい。この計算は、仮想オブジェクト及び仮想環境の摩擦プロファイルに部分的に基づく。
図3及び4に例示されたメッセージング装置は相互作用のモードの選択に関連付けられる信号をプロセッサに送信するためにシフトボタンを利用するが、他の方法及び/又は装置がこれを遂行するために使用されてもよい。一例として、前方にメッセージング装置を傾けることが相互作用の能動モードに関連付けられてもよく、後方にメッセージング装置を傾けることが相互作用の受動モードに関連付けられてもよい。別の例として、タッチスクリーン上のダブルクリックが相互作用の能動モードを選択してもよく、タッチスクリーン上のシングルクリックが相互作用の受動モードを選択してもよい。
図5は、本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する例示である。図5では、メッセージング装置502は、加速度計(図5には示されない)及びタッチスクリーン506を備える。メッセージング装置502は、タッチスクリーン506上に示される仮想環境510のようなグラフィカルユーザインターフェースを生成する。
図5に示されるように、ユーザは、矢印520で示される円形の動作でメッセージング装置502を回転又は移動させている。センサは、円形の動作を検出した後、プロセッサ(図5には示されない)に信号を送信する。プロセッサは、センサの信号を受信して、円形の動作が相互作用のモードの変更に関連付けられることを決定する。
装置を既定の方式で移動させた後、ユーザインターフェースは、相互作用の能動モードから受動モードへ、又は相互作用の受動モードから能動モードへと転換してもよい。ユーザインターフェースが相互作用のモードを転換した後、ユーザは、相互作用の新しいモードによってユーザインターフェースと相互作用してもよい。
図6は、本発明の1実施形態による受動及び能動モード間で触覚フィードバック機能を転換する例示である。図6では、メッセージング装置602は、加速度計(図6には示されない)及びタッチスクリーン606を備える。メッセージング装置602は、タッチスクリーン606上に示される仮想環境610のようなグラフィカルユーザインターフェースを生成する。
図6に示されるように、ユーザは、矢印620で示される円形の動作でメッセージング装置602を揺さぶり又は揺動させている。センサは、揺さぶり動作を検出した後、プロセッサ(図6には示されない)に信号を送信する。プロセッサは、センサの信号を受信して、揺さぶり動作が相互作用のモードの変更に関連付けられることを決定する。
装置を既定の方式で運動させた後、ユーザインターフェースは、相互作用の受動モードから能動モードへ、又は相互作用の能動モードから受動モードへと転換してもよい。相互作用のモードの切り替え後、ユーザは、相互作用の新しいモードによってグラフィカルユーザインターフェースと相互作用してもよい。例えば、一実施形態では、ユーザは、Eメールを打ち込んでいる間、相互作用の受動モードを選択してもよい。次に、Eメールの送信を希望して、ユーザは、装置を既定の方式で回転又は移動させて、装置を相互作用の能動モードに切り替えてもよい。このモードでは、Eメールはディスプレイ上に仮想ボールとして示されてもよい。次に、ユーザは、Eメールを送信するためにボールをフリックしてもよい。このアクションは、プロセッサが仮想ボールの重量を表す衝撃を生成する触覚信号を計算することを引き起こしてもよい。次に、仮想ボールがディスプレイ外に移動すると、装置はEメールを送信する。次に、ユーザは、装置を元の相互作用の受動モードに切り替えるために、別の既定の方式で装置を回転又は移動させてもよい。
本発明の実施形態は、デジタル電子回路で、又はコンピュータハードウェア、ファームウェア、ソフトウェア、又はこれらの組み合わせで実装され得る。一実施形態では、コンピュータは、1つ又は複数のプロセッサを備えてもよい。プロセッサは、例えば、プロセッサに結合されるRAM(random access memory)等のコンピュータ可読媒体を備える。プロセッサは、例えば、メッセージング用の1つ以上のコンピュータプログラムを実行するように、メモリに記憶されるコンピュータ実行可能プログラム命令を実行する。このようなプロセッサは、マイクロプロセッサ、DSP(digital signal processor)、ASIC(application−specific integrated circuit)、FPGA(field programmable gate array)、及び状態機械を備えてもよい。このようなプロセッサは、PLC、PIC(programmable interrupt controller)、PLD(programmable logic device)、PROM(programmable read−only memory)、EPROM又はEEPROM(electronically programmable read−only memory)、又は他の類似の装置等のプログラム可能電子装置をさらに備えてもよい。
このようなプロセッサは、プロセッサによって実行されるときに、プロセッサによって実行され又は支援される本明細書に記載のステップをプロセッサに実行させ得る命令を記憶し得る媒体、例えばコンピュータ可読媒体を備え又はそれと連通してもよい。コンピュータ可読媒体の実施形態は、限定されないが、電子、光学、磁気、又は他の記憶装置若しくはコンピュータ可読命令をウェブサーバ内のプロセッサ等のプロセッサに提供可能な伝送装置を備えてもよい。媒体の他の例は、限定されないが、フロッピー(登録商標)ディスク、CD−ROM、磁気ディスク、メモリチップ、ROM、RAM、ASIC、構成プロセッサ、全ての光学媒体、全ての磁気テープ若しくは他の磁気媒体、又はコンピュータプロセッサが読取り可能な任意の他の媒体を含む。また、様々な他の装置は、例えば、ルータ、プライベート若しくはパブリックネットワーク、又は他の伝送装置等のコンピュータ可読媒体を含んでもよい。記載されたプロセッサ及び処理は共に、1つ以上の構造内にあってもよく、及び/又は分散されてもよい。プロセッサは、本明細書に記載の1つ以上の方法(又は方法の一部)を実行するためのコードを備えてもよい。
(総説)
好ましい実施形態を含む本発明の実施形態の上記の説明は、例示及び説明目的で提示されているに過ぎず、網羅的であること又は本発明を記載された厳密な形態に限定することは意図されていない。本発明の精神及び範囲から逸脱することなく、それらの多くの変更及び適合が当業者には明らかであろう。

Claims (20)

  1. グラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号をセンサから受信するステップであって、前記グラフィカルユーザインターフェースが仮想メッセージング環境であり、前記相互作用のモードが前記仮想メッセージング環境内の仮想物理パラメータを有する仮想メッセージオブジェクトに関連付けられるステップと、
    前記グラフィカルユーザインターフェースとの相互作用に関連付けられる第2の信号を受信するステップであって、前記相互作用が前記仮想メッセージング環境内の前記仮想メッセージオブジェクトに関連付けられるステップと、
    前記仮想メッセージオブジェクトとの前記相互作用、前記グラフィカルユーザインターフェースとの相互作用の前記モード及び前記グラフィカルユーザインターフェースとの前記相互作用に少なくとも部分的に基づいて触覚果を決定するステップと、
    前記触覚果をアクチュエータに出力させるように構成される触覚信号を生成するステップと
    を備えることを特徴とする方法。
  2. 前記触覚効果を出力するように構成されるアクチュエータに前記触覚信号を送信するステップをさらに備えることを特徴とする、請求項1に記載の方法。
  3. 前記仮想メッセージオブジェクトが、トークンを含むことを特徴とする、請求項に記載の方法。
  4. 前記仮想メッセージオブジェクトが、データファイルを含むことを特徴とする、請求項に記載の方法。
  5. 前記仮想メッセージオブジェクトが、ボール、管、風船、カプセル、又は卵の1つを含むことを特徴とする、請求項に記載の方法。
  6. 前記仮想物理パラメータが、サイズ、質量、形状、衝突挙動、摩擦プロファイル又はテクスチャプロファイルの1つ以上を含むことを特徴とする、請求項に記載の方法。
  7. 相互作用の前記モードが、相互作用の受動モードを含むことを特徴とする、請求項1に記載の方法。
  8. 前記触覚果が、テクスチャを表すフィードバック、緊張を表すフィードバック、又は把持を表すフィードバックの1つ以上を含むことを特徴とする、請求項に記載の方法。
  9. 前記相互作用が、相互作用の能動モードを含むことを特徴とする、請求項1に記載の方法。
  10. 前記触覚効果が、フリックを表すフィードバック、打撃を表すフィードバック、発砲を表すフィードバック、ひび割れを表すフィードバック、摩擦を表すフィードバック、1回の衝突を表すフィードバック、複数の衝突を表すフィードバック、又は移動を表すフィードバックの1つ以上を含むことを特徴とする、請求項に記載の方法。
  11. 前記第1の信号が、相互作用の前記モードの変更を示すことを特徴とする、請求項1に記載の方法。
  12. 前記第1の信号が、所定期間の後、デフォルト設定に戻るように制御されることを特徴とする、請求項1に記載の方法。
  13. 前記センサが、接触、圧力、加速度、傾き、又は慣性を検出するように構成されることを特徴とする、請求項1に記載の方法。
  14. プログラムコードを備える一時的でないコンピュータ可読媒体であって、前記プログラムコードが、
    グラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号を受信するプログラムコードであって、前記グラフィカルユーザインターフェースが仮想メッセージング環境であり、前記相互作用のモードが前記仮想メッセージング環境内の仮想物理パラメータを有する仮想メッセージオブジェクトに関連付けられるプログラムコードと、
    前記グラフィカルユーザインターフェースとユーザとの相互作用に関連付けられる第2の信号を受信するプログラムコードであって、前記相互作用が前記仮想メッセージング環境内の前記仮想メッセージオブジェクトに関連付けられるプログラムコードと、
    前記仮想メッセージオブジェクトとの前記相互作用、前記グラフィカルユーザインターフェースとの相互作用の前記モード及び前記グラフィカルユーザインターフェースとの相互作用の種類に少なくとも部分的に基づいて触覚果を決定するプログラムコードと、
    前記触覚果を生成するように構成される触覚信号を生成するプログラムコードと
    を備えることを特徴とするコンピュータ可読媒体。
  15. ユーザとの相互作用を検出して第1の信号を生成することが可能なセンサと、
    ラフィカルユーザインターフェースとの相互作用のモードに関連付けられる第1の信号を受信し、前記グラフィカルユーザインターフェースが仮想メッセージング環境であり、前記相互作用のモードが前記仮想メッセージング環境内の仮想物理パラメータを有する仮想メッセージオブジェクトに関連付けられ、
    前記グラフィカルユーザインターフェースとの相互作用の種類に関連付けられる第2の信号を受信し、前記相互作用が前記仮想メッセージング環境内の前記仮想メッセージオブジェクトに関連付けられ、
    前記仮想メッセージオブジェクトとの前記相互作用、前記グラフィカルユーザインターフェースとの相互作用の前記モード及び前記グラフィカルユーザインターフェースとの相互作用の前記種類に少なくとも部分的に基づいて触覚果を決定し、且つ
    前記触覚果を生成するように構成される触覚信号を生成するプロセッサと、
    前記触覚信号を受信して前記触覚効果を生成するように構成されるアクチュエータと
    を備えることを特徴とするシステム。
  16. 前記グラフィカルユーザインターフェースの視覚表示を表示するように構成されるディスプレイをさらに備えることを特徴とする、請求項15に記載のシステム。
  17. 前記第2の信号が、タッチスクリーンによって生成されることを特徴とする、請求項15に記載のシステム。
  18. 前記第1の信号が、相互作用の前記モードの変更を示すことを特徴とする、請求項15に記載のシステム。
  19. 前記第1の信号が、スイッチによって制御されることを特徴とする、請求項18に記載のシステム。
  20. 前記センサが、圧力センサ、ジャイロスコープセンサ、加速度計、又はタッチセンサ式入力装置を含むことを特徴とする、請求項15に記載のシステム。
JP2011518850A 2008-07-15 2009-07-14 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法 Expired - Fee Related JP5337877B2 (ja)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US8098508P 2008-07-15 2008-07-15
US8097808P 2008-07-15 2008-07-15
US8098708P 2008-07-15 2008-07-15
US8098108P 2008-07-15 2008-07-15
US61/080,987 2008-07-15
US61/080,978 2008-07-15
US61/080,981 2008-07-15
US61/080,985 2008-07-15
US14831209P 2009-01-29 2009-01-29
US61/148,312 2009-01-29
US18128009P 2009-05-26 2009-05-26
US61/181,280 2009-05-26
PCT/US2009/050574 WO2010009152A1 (en) 2008-07-15 2009-07-14 Systems and methods for shifting haptic feedback function between passive and active modes

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2013162706A Division JP5599922B2 (ja) 2008-07-15 2013-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法

Publications (3)

Publication Number Publication Date
JP2011528475A JP2011528475A (ja) 2011-11-17
JP2011528475A5 JP2011528475A5 (ja) 2013-08-08
JP5337877B2 true JP5337877B2 (ja) 2013-11-06

Family

ID=41119917

Family Applications (20)

Application Number Title Priority Date Filing Date
JP2011518850A Expired - Fee Related JP5337877B2 (ja) 2008-07-15 2009-07-14 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2011518852A Expired - Fee Related JP5690726B2 (ja) 2008-07-15 2009-07-14 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2011518856A Expired - Fee Related JP5762285B2 (ja) 2008-07-15 2009-07-14 触覚メッセージ送信のためのシステム及び方法
JP2011518847A Expired - Fee Related JP5410520B2 (ja) 2008-07-15 2009-07-14 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2011518849A Expired - Fee Related JP5997898B2 (ja) 2008-07-15 2009-07-14 触覚メッセージを送信するためのシステム及び方法
JP2013162706A Expired - Fee Related JP5599922B2 (ja) 2008-07-15 2013-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013230455A Expired - Fee Related JP5642252B2 (ja) 2008-07-15 2013-11-06 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2014029131A Expired - Fee Related JP5899253B2 (ja) 2008-07-15 2014-02-19 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2014080346A Active JP5897631B2 (ja) 2008-07-15 2014-04-09 触覚メッセージを送信するためのシステム及び方法
JP2014087038A Expired - Fee Related JP6180360B2 (ja) 2008-07-15 2014-04-21 触覚メッセージ送信のためのシステム及び方法
JP2014164916A Expired - Fee Related JP6043763B2 (ja) 2008-07-15 2014-08-13 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2014219035A Expired - Fee Related JP5955369B2 (ja) 2008-07-15 2014-10-28 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2015116232A Expired - Fee Related JP6109877B2 (ja) 2008-07-15 2015-06-09 触覚メッセージ送信のためのシステム及び方法
JP2016039643A Expired - Fee Related JP6208791B2 (ja) 2008-07-15 2016-03-02 触覚メッセージを送信するためのシステム及び方法
JP2016154485A Expired - Fee Related JP6272960B2 (ja) 2008-07-15 2016-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2017097611A Expired - Fee Related JP6449934B2 (ja) 2008-07-15 2017-05-16 触覚メッセージ送信のためのシステム及び方法
JP2017171705A Expired - Fee Related JP6433556B2 (ja) 2008-07-15 2017-09-07 触覚メッセージを送信するためのシステム及び方法
JP2018000108A Active JP6548753B2 (ja) 2008-07-15 2018-01-04 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2018208902A Pending JP2019057302A (ja) 2008-07-15 2018-11-06 触覚メッセージを送信するためのシステム及び方法
JP2018229201A Pending JP2019071076A (ja) 2008-07-15 2018-12-06 触覚メッセージ送信のためのシステム及び方法

Family Applications After (19)

Application Number Title Priority Date Filing Date
JP2011518852A Expired - Fee Related JP5690726B2 (ja) 2008-07-15 2009-07-14 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2011518856A Expired - Fee Related JP5762285B2 (ja) 2008-07-15 2009-07-14 触覚メッセージ送信のためのシステム及び方法
JP2011518847A Expired - Fee Related JP5410520B2 (ja) 2008-07-15 2009-07-14 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2011518849A Expired - Fee Related JP5997898B2 (ja) 2008-07-15 2009-07-14 触覚メッセージを送信するためのシステム及び方法
JP2013162706A Expired - Fee Related JP5599922B2 (ja) 2008-07-15 2013-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013230455A Expired - Fee Related JP5642252B2 (ja) 2008-07-15 2013-11-06 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2014029131A Expired - Fee Related JP5899253B2 (ja) 2008-07-15 2014-02-19 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2014080346A Active JP5897631B2 (ja) 2008-07-15 2014-04-09 触覚メッセージを送信するためのシステム及び方法
JP2014087038A Expired - Fee Related JP6180360B2 (ja) 2008-07-15 2014-04-21 触覚メッセージ送信のためのシステム及び方法
JP2014164916A Expired - Fee Related JP6043763B2 (ja) 2008-07-15 2014-08-13 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2014219035A Expired - Fee Related JP5955369B2 (ja) 2008-07-15 2014-10-28 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2015116232A Expired - Fee Related JP6109877B2 (ja) 2008-07-15 2015-06-09 触覚メッセージ送信のためのシステム及び方法
JP2016039643A Expired - Fee Related JP6208791B2 (ja) 2008-07-15 2016-03-02 触覚メッセージを送信するためのシステム及び方法
JP2016154485A Expired - Fee Related JP6272960B2 (ja) 2008-07-15 2016-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2017097611A Expired - Fee Related JP6449934B2 (ja) 2008-07-15 2017-05-16 触覚メッセージ送信のためのシステム及び方法
JP2017171705A Expired - Fee Related JP6433556B2 (ja) 2008-07-15 2017-09-07 触覚メッセージを送信するためのシステム及び方法
JP2018000108A Active JP6548753B2 (ja) 2008-07-15 2018-01-04 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2018208902A Pending JP2019057302A (ja) 2008-07-15 2018-11-06 触覚メッセージを送信するためのシステム及び方法
JP2018229201A Pending JP2019071076A (ja) 2008-07-15 2018-12-06 触覚メッセージ送信のためのシステム及び方法

Country Status (6)

Country Link
US (20) US8638301B2 (ja)
EP (13) EP3206381A1 (ja)
JP (20) JP5337877B2 (ja)
KR (18) KR101522145B1 (ja)
CN (10) CN104111726B (ja)
WO (5) WO2010009152A1 (ja)

Families Citing this family (357)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU1328597A (en) * 1995-11-30 1997-06-19 Virtual Technologies, Inc. Tactile feedback man-machine interface device
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
BRPI0804355A2 (pt) * 2008-03-10 2009-11-03 Lg Electronics Inc terminal e método de controle do mesmo
US8594740B2 (en) 2008-06-11 2013-11-26 Pantech Co., Ltd. Mobile communication terminal and data input method
EP3206381A1 (en) * 2008-07-15 2017-08-16 Immersion Corporation Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging
USD618248S1 (en) * 2008-09-23 2010-06-22 Apple Inc. Graphical user interface for a display screen or portion thereof
US8004391B2 (en) * 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100146395A1 (en) * 2008-12-08 2010-06-10 Gustavo De Los Reyes Method and System for Exploiting Interactions Via A Virtual Environment
KR20100086161A (ko) * 2009-01-22 2010-07-30 주식회사 팬택 바람 인식을 통한 동작 제어 장치 및 방법
US8572493B2 (en) * 2009-01-29 2013-10-29 Rick Qureshi Mobile device messaging application
JP4706985B2 (ja) * 2009-03-04 2011-06-22 コニカミノルタビジネステクノロジーズ株式会社 コンテンツ表示装置
KR20170016521A (ko) * 2009-03-12 2017-02-13 임머숀 코퍼레이션 다수의 액츄에이터를 사용하여 텍스처를 실현하는 시스템 및 방법
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
US10007340B2 (en) 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
US9927873B2 (en) 2009-03-12 2018-03-27 Immersion Corporation Systems and methods for using textures in graphical user interface widgets
KR101593598B1 (ko) * 2009-04-03 2016-02-12 삼성전자주식회사 휴대단말에서 제스처를 이용한 기능 실행 방법
US8660246B1 (en) * 2009-04-06 2014-02-25 Wendell Brown Method and apparatus for content presentation in association with a telephone call
JP5639151B2 (ja) * 2009-04-15 2014-12-10 コーニンクレッカ フィリップス エヌ ヴェ 折り畳み式触覚ディスプレイ
US20100306825A1 (en) * 2009-05-27 2010-12-02 Lucid Ventures, Inc. System and method for facilitating user interaction with a simulated object associated with a physical location
US8009022B2 (en) * 2009-05-29 2011-08-30 Microsoft Corporation Systems and methods for immersive interaction with virtual objects
US8762886B2 (en) * 2009-07-30 2014-06-24 Lenovo (Singapore) Pte. Ltd. Emulating fundamental forces of physics on a virtual, touchable object
US20110029904A1 (en) * 2009-07-30 2011-02-03 Adam Miles Smith Behavior and Appearance of Touch-Optimized User Interface Elements for Controlling Computer Function
US20110029864A1 (en) * 2009-07-30 2011-02-03 Aaron Michael Stewart Touch-Optimized Approach for Controlling Computer Function Using Touch Sensitive Tiles
US8656314B2 (en) * 2009-07-30 2014-02-18 Lenovo (Singapore) Pte. Ltd. Finger touch gesture for joining and unjoining discrete touch objects
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
US20110084962A1 (en) * 2009-10-12 2011-04-14 Jong Hwan Kim Mobile terminal and image processing method therein
US9201584B2 (en) * 2009-11-06 2015-12-01 Bose Corporation Audio/visual device user interface with tactile feedback
US20110112821A1 (en) * 2009-11-11 2011-05-12 Andrea Basso Method and apparatus for multimodal content translation
US9621706B2 (en) * 2009-11-18 2017-04-11 Qualcomm Incorporated System and method of haptic communication at a portable computing device
US9046923B2 (en) * 2009-12-31 2015-06-02 Verizon Patent And Licensing Inc. Haptic/voice-over navigation assistance
US9436280B2 (en) * 2010-01-07 2016-09-06 Qualcomm Incorporated Simulation of three-dimensional touch sensation using haptics
JP5665322B2 (ja) * 2010-01-25 2015-02-04 京セラ株式会社 電子機器
CA2787831A1 (en) * 2010-01-28 2011-08-04 Liquor Monitor, Llc Dispensing monitor
US9333039B2 (en) 2010-02-09 2016-05-10 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
US8839150B2 (en) * 2010-02-10 2014-09-16 Apple Inc. Graphical objects that respond to touch or motion input
US8185596B2 (en) * 2010-02-22 2012-05-22 Samsung Electronics Co., Ltd. Location-based communication method and system
EP3336658B1 (en) * 2010-03-01 2020-07-22 BlackBerry Limited Method of providing tactile feedback and apparatus
US9361018B2 (en) * 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
US8570161B2 (en) 2010-03-16 2013-10-29 Immersion Corporation Systems and methods for haptic information preview
JP2011197777A (ja) * 2010-03-17 2011-10-06 Sony Corp 情報処理装置、情報処理方法およびプログラム
KR101640043B1 (ko) * 2010-04-14 2016-07-15 삼성전자주식회사 가상 세계 처리 장치 및 방법
CA2796451A1 (en) * 2010-04-16 2011-10-20 Nicholas J. Mastandrea Wearable motion sensing computing interface
US9791928B2 (en) 2010-04-26 2017-10-17 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9733705B2 (en) 2010-04-26 2017-08-15 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9715275B2 (en) 2010-04-26 2017-07-25 Nokia Technologies Oy Apparatus, method, computer program and user interface
JP2012003508A (ja) * 2010-06-16 2012-01-05 Toshiba Corp 情報処理装置、方法及びプログラム
US9132352B1 (en) 2010-06-24 2015-09-15 Gregory S. Rabin Interactive system and method for rendering an object
US20120001856A1 (en) * 2010-07-02 2012-01-05 Nokia Corporation Responding to tactile inputs
KR20120005124A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 휴대용 단말기에서 움직임에 따른 동작을 수행하기 위한 장치 및 방법
US8798534B2 (en) 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
US8988445B2 (en) * 2010-07-30 2015-03-24 The Trustees Of The University Of Pennsylvania Systems and methods for capturing and recreating the feel of surfaces
US8917249B1 (en) 2010-08-05 2014-12-23 Amazon Technologies, Inc. Reduction of touch-sensor interference from active display
US9329721B1 (en) * 2010-08-05 2016-05-03 Amazon Technologies, Inc. Reduction of touch-sensor interference from stable display
TWI492100B (zh) * 2010-08-25 2015-07-11 Fih Hong Kong Ltd 電子裝置及其解鎖方法
US20120054667A1 (en) * 2010-08-31 2012-03-01 Blackboard Inc. Separate and simultaneous control of windows in windowing systems
US10318002B2 (en) * 2010-09-15 2019-06-11 Inventus Engineering Gmbh Magnetorheological transmission device
KR101708821B1 (ko) * 2010-09-30 2017-02-21 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8564535B2 (en) * 2010-10-05 2013-10-22 Immersion Corporation Physical model based gesture recognition
US9483786B2 (en) 2011-10-13 2016-11-01 Gift Card Impressions, LLC Gift card ordering system and method
WO2012063123A2 (en) * 2010-11-09 2012-05-18 WOOW Inc. Limited Apparatus and method for physical interaction over a distance using a telecommunication device
US20130215079A1 (en) * 2010-11-09 2013-08-22 Koninklijke Philips Electronics N.V. User interface with haptic feedback
JP5479414B2 (ja) * 2010-11-24 2014-04-23 キヤノン株式会社 情報処理装置およびその制御方法
US11314344B2 (en) * 2010-12-03 2022-04-26 Razer (Asia-Pacific) Pte. Ltd. Haptic ecosystem
US9201467B2 (en) 2011-01-26 2015-12-01 Sony Corporation Portable terminal having user interface function, display method, and computer program
JP5654886B2 (ja) * 2011-01-26 2015-01-14 株式会社ソニー・コンピュータエンタテインメント 携帯端末、表示方法及びコンピュータプログラム
US9990856B2 (en) 2011-02-08 2018-06-05 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
JP5809079B2 (ja) * 2011-02-10 2015-11-10 京セラ株式会社 電子機器及び電子機器の制御方法
CN103262465B (zh) * 2011-02-24 2016-07-06 英派尔科技开发有限公司 使用移动设备进行的认证
EP2498250B1 (en) * 2011-03-07 2021-05-05 Accenture Global Services Limited Client and server system for natural language-based control of a digital network of devices
US8872854B1 (en) * 2011-03-24 2014-10-28 David A. Levitt Methods for real-time navigation and display of virtual worlds
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
US9448713B2 (en) * 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
JP2012242927A (ja) * 2011-05-17 2012-12-10 Seiko Epson Corp 移動端末装置、移動端末装置の制御方法、及び、プログラム
US8710967B2 (en) 2011-05-18 2014-04-29 Blackberry Limited Non-visual presentation of information on an electronic wireless device
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
US20130033366A1 (en) * 2011-08-01 2013-02-07 Mcdonough Colin Albright Method and system for providing haptic feedback of variable intensity
WO2013022021A1 (ja) * 2011-08-09 2013-02-14 株式会社ニコン 電子機器
US9762719B2 (en) 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
US9501150B2 (en) * 2011-10-01 2016-11-22 Oracle International Corporation Moving an object about a display frame by combining classical mechanics of motion
CN103842937A (zh) * 2011-10-04 2014-06-04 株式会社尼康 电子设备
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
KR102054370B1 (ko) * 2011-11-23 2019-12-12 삼성전자주식회사 햅틱 피드백 방법 및 장치, 기계로 읽을 수 있는 저장 매체 및 휴대용 통신 단말
CN102692997A (zh) * 2011-11-25 2012-09-26 北京十分科技有限公司 一种控制终端操作的方法
US20150205473A1 (en) * 2011-12-06 2015-07-23 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US8381102B1 (en) 2011-12-06 2013-02-19 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
US20130227411A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Sensation enhanced messaging
EP2795936B1 (en) * 2011-12-20 2019-06-26 Intel Corporation User-to-user communication enhancement with augmented reality
CN112446935B (zh) * 2011-12-20 2024-08-16 英特尔公司 存储内容和ar通信的本地传感器加强
KR101655876B1 (ko) * 2012-01-05 2016-09-09 삼성전자 주식회사 메시지 기반의 대화 기능 운용 방법 및 이를 지원하는 단말기
JP5777217B2 (ja) * 2012-01-26 2015-09-09 Kddi株式会社 押圧操作で動作モードが起動可能なユーザインタフェース装置、動作モード起動方法及びプログラム
US10430865B2 (en) 2012-01-30 2019-10-01 Gift Card Impressions, LLC Personalized webpage gifting system
KR20130088281A (ko) * 2012-01-31 2013-08-08 삼성전자주식회사 디스플레이장치, 업그레이드장치, 그 제어방법 및 디스플레이 시스템
US20130196293A1 (en) * 2012-01-31 2013-08-01 Michael C. Wood Phonic learning using a mobile computing device having motion sensing capabilities
US9083546B2 (en) * 2012-01-31 2015-07-14 Rajendra Padma Sadhu System and method for communicating health parameters of an occupant in an automobile and a dynamic operation of the automobile and home automation
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
EP3321780A1 (en) * 2012-02-15 2018-05-16 Immersion Corporation High definition haptic effects generation using primitives
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US20120223880A1 (en) * 2012-02-15 2012-09-06 Immersion Corporation Method and apparatus for producing a dynamic haptic effect
TWI626591B (zh) * 2012-03-01 2018-06-11 群邁通訊股份有限公司 應用程式切換系統及方法
US9702723B2 (en) * 2012-03-01 2017-07-11 Nokia Technologies Oy Method and apparatus for receiving user estimation of navigational instructions
CN102624981A (zh) * 2012-03-07 2012-08-01 华为终端有限公司 一种数据传输方法及装置
US20130254233A1 (en) * 2012-03-20 2013-09-26 Avaya Inc. System and method for context-sensitive address book
CN104932688A (zh) * 2012-03-29 2015-09-23 华为终端有限公司 一种桌面容器的切换控制方法及终端
CN102662576B (zh) * 2012-03-29 2015-04-29 华为终端有限公司 基于触摸的信息发送方法及装置
CN103389849B (zh) * 2012-05-07 2018-10-16 腾讯科技(北京)有限公司 一种基于移动终端的图像展示方法、系统和移动终端
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
CN104471521B (zh) 2012-05-09 2018-10-23 苹果公司 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
KR102273603B1 (ko) 2012-05-11 2021-07-05 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기, 기억 매체, 프로그램, 및 표시 방법
US8570296B2 (en) 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US20130311881A1 (en) * 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US9313290B2 (en) * 2012-05-17 2016-04-12 Ncr Corporation Data transfer between devices
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
WO2014006709A1 (ja) * 2012-07-04 2014-01-09 株式会社Hugg メッセージングシステムおよびメッセージ送信方法
US9030428B2 (en) * 2012-07-11 2015-05-12 Immersion Corporation Generating haptic effects for dynamic events
EP2688321B1 (en) * 2012-07-18 2015-06-24 BlackBerry Limited Method and apparatus for motion based ping during chat mode
US8914453B2 (en) * 2012-07-18 2014-12-16 Blackberry Limited Method and apparatus for motion based ping during chat mode
GB201215283D0 (en) * 2012-08-28 2012-10-10 Microsoft Corp Searching at a user device
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
CN106951169B (zh) * 2012-09-03 2021-05-18 联想(北京)有限公司 电子设备及其信息处理方法
CN103677242A (zh) * 2012-09-24 2014-03-26 联想(北京)有限公司 一种反馈模式确定的方法及电子设备
US8842969B2 (en) * 2012-09-28 2014-09-23 Intel Corporation Haptic playback of video
US9430991B2 (en) * 2012-10-02 2016-08-30 Futurewei Technologies, Inc. User interface display composition with device sensor/state based graphical effects
US20150212647A1 (en) 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US10168775B2 (en) * 2012-10-10 2019-01-01 Innovative Devices Inc. Wearable motion sensing computing interface
CN103777797B (zh) * 2012-10-23 2017-06-27 联想(北京)有限公司 一种信息处理的方法及电子设备
US9218075B2 (en) * 2012-11-01 2015-12-22 Immersion Corporation Haptically-enabled system with braking
KR20140068410A (ko) * 2012-11-28 2014-06-09 삼성전자주식회사 물리 엔진 기반의 사용자 인터페이스를 제공하는 방법 및 그 전자 장치
WO2014084374A1 (ja) * 2012-11-30 2014-06-05 日本電気株式会社 通信システム、通信方法、通信装置、プログラム、及び記録媒体
CN104838352B (zh) * 2012-12-07 2018-05-08 优特设备有限公司 在多表面装置中的动作初始化
US9046926B2 (en) * 2012-12-17 2015-06-02 International Business Machines Corporation System and method of dynamically generating a frequency pattern to realize the sense of touch in a computing device
CN103902081B (zh) * 2012-12-27 2018-04-27 联想(北京)有限公司 触感反馈的方法及电子设备
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
US9501201B2 (en) * 2013-02-18 2016-11-22 Ebay Inc. System and method of modifying a user experience based on physical environment
US9202352B2 (en) * 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
US9866924B2 (en) * 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US9547366B2 (en) * 2013-03-14 2017-01-17 Immersion Corporation Systems and methods for haptic and gesture-driven paper simulation
US9189098B2 (en) 2013-03-14 2015-11-17 Immersion Corporation Systems and methods for syncing haptic feedback calls
FR3003362B1 (fr) * 2013-03-14 2015-04-03 Univ Compiegne Tech Procede et systeme de communication tactile
US9041647B2 (en) * 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
JP2014194363A (ja) * 2013-03-28 2014-10-09 Fujitsu Ltd 誘導装置、誘導方法、及びプログラム
JP6354750B2 (ja) * 2013-04-01 2018-07-11 日本電気株式会社 コミュニティサービスシステム及びコミュニティサービス方法
CN103220424B (zh) * 2013-04-10 2016-03-02 广东欧珀移动通信有限公司 移动终端的信息发送方法及装置
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
EP2989525B1 (en) * 2013-04-26 2019-09-25 Immersion Corporation Simulation of tangible user interface interactions and gestures using array of haptic cells
WO2014190293A2 (en) * 2013-05-24 2014-11-27 New York University Haptic force-feedback for computing interfaces
US9454251B1 (en) 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
US9729730B2 (en) 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US20150043311A1 (en) * 2013-08-09 2015-02-12 Your Voice S.P.A. Execution of commands in an electronic device
US10037081B2 (en) 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
US10325457B2 (en) 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
US9443401B2 (en) 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US9652945B2 (en) 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
EP3049882A1 (en) * 2013-09-26 2016-08-03 Longsand Limited Device notifications
US9888333B2 (en) * 2013-11-11 2018-02-06 Google Technology Holdings LLC Three-dimensional audio rendering techniques
US9639158B2 (en) * 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects
KR102026731B1 (ko) * 2013-12-17 2019-09-30 엘지전자 주식회사 이동단말기 및 그 제어방법
US9374688B2 (en) * 2013-11-28 2016-06-21 Lg Electronics Inc. Mobile terminal and method for controlling the same
US9996973B2 (en) * 2013-11-30 2018-06-12 Empire Technology Development Llc Augmented reality objects based on biometric feedback
CN103713822B (zh) * 2013-12-27 2017-09-29 联想(北京)有限公司 一种信息处理方法及第一电子设备
CN103645833B (zh) * 2013-12-27 2017-06-27 联想(北京)有限公司 一种信息处理方法及电子设备
JP6664069B2 (ja) * 2013-12-31 2020-03-13 イマージョン コーポレーションImmersion Corporation 触覚コンテンツを伴う視点動画を記録及び再生するシステム並びに方法
JP6289100B2 (ja) * 2014-01-06 2018-03-07 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10437341B2 (en) * 2014-01-16 2019-10-08 Immersion Corporation Systems and methods for user generated content authoring
CN103885708A (zh) * 2014-02-28 2014-06-25 宇龙计算机通信科技(深圳)有限公司 触觉交互的方法及系统
CN104902064A (zh) * 2014-03-07 2015-09-09 宇龙计算机通信科技(深圳)有限公司 一种短消息显示系统、方法及终端
US10067566B2 (en) 2014-03-19 2018-09-04 Immersion Corporation Systems and methods for a shared haptic experience
WO2015143124A1 (en) * 2014-03-21 2015-09-24 Immersion Corporation Systems and methods for haptically-enabled curved devices
US9471144B2 (en) 2014-03-31 2016-10-18 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US10437447B1 (en) * 2014-03-31 2019-10-08 Amazon Technologies, Inc. Magnet based physical model user interface control
US9606710B1 (en) 2014-03-31 2017-03-28 Amazon Technologies, Inc. Configuring movement-based user interface control
US9104237B1 (en) * 2014-03-31 2015-08-11 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US20150331550A1 (en) * 2014-05-15 2015-11-19 Narvii Inc. Systems and methods implementing user interface objects
KR102125207B1 (ko) * 2014-05-31 2020-06-22 삼성전자 주식회사 전자 장치 및 애플리케이션 실행 방법
WO2016007426A1 (en) 2014-07-07 2016-01-14 Immersion Corporation Second screen haptics
US9600083B2 (en) * 2014-07-15 2017-03-21 Immersion Corporation Systems and methods to generate haptic feedback for skin-mediated interactions
WO2016009016A1 (en) 2014-07-17 2016-01-21 Koninklijke Philips N.V. Method of obtaining gesture zone definition data for a control system based on user input
USD763885S1 (en) * 2014-07-24 2016-08-16 Beijing Qihoo Technology Co. Ltd Display screen with a graphical user interface
AU2015306091B2 (en) * 2014-08-20 2021-04-01 Touchgram Pty Ltd A system and a method for sending a touch message
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
US10795567B2 (en) * 2014-08-22 2020-10-06 Zoho Corporation Private Limited Multimedia applications and user interfaces
DE202015006142U1 (de) 2014-09-02 2015-12-09 Apple Inc. Elektronische Touch-Kommunikation
WO2016036427A1 (en) * 2014-09-02 2016-03-10 Apple Inc. Electronic device with rotatable input mechanism
KR102096146B1 (ko) 2014-09-02 2020-04-28 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
CN105396289A (zh) * 2014-09-15 2016-03-16 掌赢信息科技(上海)有限公司 实时游戏和多媒体会话过程中实现特效的方法及装置
JP5848811B2 (ja) * 2014-10-01 2016-01-27 シャープ株式会社 送信機、受信機、およびプログラム
CN107850953B (zh) * 2014-11-05 2021-08-31 威尔乌集团 用于在虚拟现实环境中引导用户的感官反馈系统和方法
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
EP3226151A4 (en) * 2014-11-26 2018-07-04 Sony Corporation Information processing device, information processing method, and program
US9971406B2 (en) 2014-12-05 2018-05-15 International Business Machines Corporation Visually enhanced tactile feedback
US9658693B2 (en) * 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
GB2533572A (en) * 2014-12-22 2016-06-29 Nokia Technologies Oy Haptic output methods and devices
US9478109B2 (en) * 2014-12-29 2016-10-25 Immersion Corporation Virtual sensor in a virtual environment
CN115048007B (zh) * 2014-12-31 2024-05-07 创新先进技术有限公司 调整界面操作图标分布范围的装置、方法及触摸屏设备
KR20160088081A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 영상 촬영 기기의 햅틱 인터페이스 및 이의 제어 방법
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) * 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
JP6133344B2 (ja) * 2015-03-10 2017-05-24 株式会社コロプラ ヘッドマウントディスプレイへ表示するためのユーザインタフェース表示方法、及びプログラム
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9571624B2 (en) * 2015-03-24 2017-02-14 Intel IP Corporation Apparatus, system and method of terminating a docking session between a mobile device and a docking device
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
JP2018513455A (ja) 2015-04-21 2018-05-24 イマージョン コーポレーションImmersion Corporation エッチング入力の動的表現
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
JP5945621B2 (ja) * 2015-06-15 2016-07-05 Kddi株式会社 押圧操作で動作状態を切り替え可能なユーザインタフェース装置、動作状態切り替え方法及びプログラム
WO2016208099A1 (ja) * 2015-06-24 2016-12-29 パナソニックIpマネジメント株式会社 情報処理装置、情報処理装置に対する入力を制御する入力制御方法及び入力制御方法を情報処理装置に実行させるためのプログラム
US9473625B1 (en) * 2015-06-24 2016-10-18 Mast Mobile, Inc. Outgoing call management in a communication environment with unified communication interfaces
GB2540206B (en) * 2015-07-10 2018-02-07 Advanced Risc Mach Ltd Apparatus and method for executing instruction using range information associated with a pointer
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10007304B2 (en) * 2015-08-20 2018-06-26 Mediatek Inc. Portable device and related vibration detecting method
US10303345B2 (en) * 2015-08-28 2019-05-28 Google Llc Transferring notifications between devices
US10484512B2 (en) 2015-08-31 2019-11-19 Ayla Networks, Inc. Management of multi-radio gateway device using virtual gateway device
US10404832B2 (en) * 2015-08-31 2019-09-03 Ayla Networks, Inc. Management of gateway device using virtual gateway device
US10248207B2 (en) 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
US10752262B2 (en) * 2015-10-29 2020-08-25 Ford Global Technologies, Llc In-vehicle haptic output
US10587542B2 (en) 2015-11-13 2020-03-10 Sony Corporation Communication system and storage medium for transmitting physical expression information
USD809589S1 (en) * 2015-11-18 2018-02-06 Paypal, Inc. Portable user device
KR102481486B1 (ko) 2015-12-04 2022-12-27 삼성전자주식회사 오디오 제공 방법 및 그 장치
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US9679547B1 (en) * 2016-04-04 2017-06-13 Disney Enterprises, Inc. Augmented reality music composition
WO2017183821A1 (ko) * 2016-04-21 2017-10-26 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
KR101928550B1 (ko) 2016-04-21 2018-12-12 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
US9805514B1 (en) * 2016-04-21 2017-10-31 Microsoft Technology Licensing, Llc Dynamic haptic retargeting
EP3242187B1 (en) 2016-05-04 2018-11-21 Vestel Elektronik Sanayi ve Ticaret A.S. System and method for simulating a reaction force from a virtual object
US11112963B2 (en) 2016-05-18 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR20240023200A (ko) 2016-05-18 2024-02-20 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US9983675B2 (en) 2016-06-10 2018-05-29 Immersion Corporation Systems and methods for monitoring insulation integrity for electrostatic friction
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201670737A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10073525B2 (en) 2016-06-16 2018-09-11 Immersion Corporation Systems and methods for a low profile haptic actuator
US10401962B2 (en) 2016-06-21 2019-09-03 Immersion Corporation Haptically enabled overlay for a pressure sensitive surface
US10004991B2 (en) 2016-06-28 2018-06-26 Hothead Games Inc. Systems and methods for customized camera views in virtualized environments
TWI677816B (zh) * 2016-08-11 2019-11-21 國立臺灣師範大學 傳送虛擬物體的方法及電子系統
JP6401758B2 (ja) * 2016-08-25 2018-10-10 株式会社ファセテラピー 触質コンテンツ生成装置、触質コンテンツ生成方法および触質コンテンツ利用機器
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
US10884502B2 (en) 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
WO2018105266A1 (ja) * 2016-12-05 2018-06-14 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム
US20180188905A1 (en) * 2017-01-04 2018-07-05 Google Inc. Generating messaging streams with animated objects
CN107015639B (zh) * 2017-01-24 2020-02-04 瑞声科技(新加坡)有限公司 触觉反馈的动态范围控制方法、触觉反馈系统及电子终端
WO2018152778A1 (en) * 2017-02-24 2018-08-30 Immersion Corporation Virtual affective touch
USD868080S1 (en) * 2017-03-27 2019-11-26 Sony Corporation Display panel or screen with an animated graphical user interface
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US10845955B2 (en) 2017-05-15 2020-11-24 Apple Inc. Displaying a scrollable list of affordances associated with physical activities
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
JP6991754B2 (ja) * 2017-07-03 2022-01-13 株式会社ミツトヨ 端末装置およびプログラム
WO2019011396A1 (en) * 2017-07-10 2019-01-17 Telefonaktiebolaget Lm Ericsson (Publ) IMPROVED TRANSMISSION OF HAPTIC ENTRY
US10915174B1 (en) * 2017-07-20 2021-02-09 Apple Inc. Electronic devices with directional haptic output
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
US10455320B2 (en) 2017-08-02 2019-10-22 Body Beats, Llc System, method and apparatus for translating, converting and/or transforming audio energy into haptic and/or visual representation
US20190163271A1 (en) * 2017-11-27 2019-05-30 Immersion Corporation Systems and methods for providing haptic feedback according to tilt-based inputs
CN108109186B (zh) * 2017-11-30 2021-06-11 维沃移动通信有限公司 一种视频文件处理方法、装置及移动终端
US10818152B2 (en) * 2018-01-15 2020-10-27 Universal City Studios Llc Interactive systems and methods with feedback devices
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
JP1618150S (ja) * 2018-02-09 2018-11-19
DK180246B1 (en) 2018-03-12 2020-09-11 Apple Inc User interfaces for health monitoring
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10832537B2 (en) 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
EP3563937B1 (en) * 2018-05-02 2021-12-22 Goodix Technology (HK) Company Limited Haptic actuator controller
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11317833B2 (en) 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. DISPLAY OF USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
US11504201B2 (en) 2018-05-31 2022-11-22 Covidien Lp Haptic touch feedback surgical device for palpating tissue
US10649532B2 (en) * 2018-06-15 2020-05-12 Immersion Corporation Systems and methods for multi-rate control of haptic effects with sensor fusion
KR102175566B1 (ko) * 2018-07-19 2020-11-06 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
WO2020017813A1 (ko) * 2018-07-19 2020-01-23 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
WO2020028826A1 (en) * 2018-08-02 2020-02-06 Firefly Dimension, Inc. System and method for human interaction with virtual objects
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
KR20200025817A (ko) 2018-08-31 2020-03-10 (주)뉴빌리티 비언어 기반의 정보 전달 방법 및 장치
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
EP3650960A1 (fr) * 2018-11-07 2020-05-13 Tissot S.A. Procede de diffusion d'un message par une montre
KR20200052540A (ko) * 2018-11-07 2020-05-15 (주)리얼감 밀도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
USD912699S1 (en) * 2018-11-15 2021-03-09 Biosense Webster (Israel) Ltd. Display screen or portion thereof with icon
US10834543B2 (en) * 2018-11-26 2020-11-10 International Business Machines Corporation Creating a social group with mobile phone vibration
US20200192480A1 (en) * 2018-12-18 2020-06-18 Immersion Corporation Systems and methods for providing haptic effects based on a user's motion or environment
KR20210111821A (ko) * 2019-02-08 2021-09-13 애플 인크. 3 차원 콘텐츠 내에서의 객체 위치설정 및 이동
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US12035445B2 (en) 2019-03-29 2024-07-09 Cirrus Logic Inc. Resonant tracking of an electromagnetic load
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US11283337B2 (en) 2019-03-29 2022-03-22 Cirrus Logic, Inc. Methods and systems for improving transducer dynamics
US11234077B2 (en) 2019-06-01 2022-01-25 Apple Inc. User interfaces for managing audio exposure
US11228835B2 (en) 2019-06-01 2022-01-18 Apple Inc. User interfaces for managing audio exposure
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
US11209957B2 (en) 2019-06-01 2021-12-28 Apple Inc. User interfaces for cycle tracking
DK201970534A1 (en) 2019-06-01 2021-02-16 Apple Inc User interfaces for monitoring noise exposure levels
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
GB2604215B (en) 2019-06-21 2024-01-31 Cirrus Logic Int Semiconductor Ltd A method and apparatus for configuring a plurality of virtual buttons on a device
US10560563B1 (en) * 2019-06-25 2020-02-11 Bouton Sms Inc. Haptic device
US12002588B2 (en) 2019-07-17 2024-06-04 Apple Inc. Health event logging and coaching user interfaces
JP2021018546A (ja) * 2019-07-18 2021-02-15 トヨタ自動車株式会社 車両用コミュニケーション装置および車両用コミュニケーションシステム
CN110496392B (zh) * 2019-08-23 2020-12-01 腾讯科技(深圳)有限公司 虚拟对象的控制方法、装置、终端及存储介质
EP4004702A1 (en) 2019-09-09 2022-06-01 Apple Inc. Research study user interfaces
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
JP7490967B2 (ja) * 2020-01-27 2024-05-28 富士通株式会社 表示制御プログラム、表示制御方法、及び表示制御装置
WO2021183122A1 (en) 2020-03-11 2021-09-16 Google Llc Controlling haptic response to contact
WO2021183132A1 (en) 2020-03-12 2021-09-16 Google Llc Controlling haptic feedback based on proximity of contact to sensor
WO2021193421A1 (ja) * 2020-03-27 2021-09-30 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム及び情報処理システム
US11960651B2 (en) * 2020-03-30 2024-04-16 Snap Inc. Gesture-based shared AR session creation
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
US20210326594A1 (en) * 2020-04-17 2021-10-21 James Patrick COSTELLO Computer-generated supplemental content for video
DK181037B1 (en) 2020-06-02 2022-10-10 Apple Inc User interfaces for health applications
US11747857B2 (en) 2020-06-02 2023-09-05 Futurisks, LLC Wearable security device and charging band, system and method
US11698710B2 (en) 2020-08-31 2023-07-11 Apple Inc. User interfaces for logging user activities
WO2022054323A1 (ja) * 2020-09-09 2022-03-17 ソニーグループ株式会社 触覚提示装置、触覚提示システム、触覚提示制御方法及びプログラム
US11482002B1 (en) * 2020-10-16 2022-10-25 Splunk Inc. Codeless anchor detection for detectable features in an environment
EP4272059A1 (en) 2020-12-31 2023-11-08 Snap Inc. Electronic communication interface with haptic feedback response
US11989348B2 (en) 2020-12-31 2024-05-21 Snap Inc. Media content items with haptic feedback augmentations
US20220206584A1 (en) * 2020-12-31 2022-06-30 Snap Inc. Communication interface with haptic feedback response
CN116670635A (zh) 2020-12-31 2023-08-29 斯纳普公司 具有触觉反馈的实时视频通信界面
JP7340556B2 (ja) 2021-02-26 2023-09-07 任天堂株式会社 振動制御システム
US12050729B2 (en) * 2021-03-31 2024-07-30 Snap Inc. Real-time communication interface with haptic and audio feedback response
JP7503022B2 (ja) 2021-04-20 2024-06-19 Kddi株式会社 容器内の液体の動きを触覚としてユーザに伝達する携帯機器、プログラム及び方法
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
IL309800A (en) 2021-06-28 2024-02-01 Distal Reality LLC Haptic communication techniques
CN114296597A (zh) * 2021-12-01 2022-04-08 腾讯科技(深圳)有限公司 虚拟场景中的对象交互方法、装置、设备及存储介质
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths
WO2023108131A1 (en) * 2021-12-10 2023-06-15 Shaw Industries Group, Inc. Visceral surface covering simulator and method of use
WO2024034045A1 (ja) * 2022-08-10 2024-02-15 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム
WO2024112588A1 (en) * 2022-11-23 2024-05-30 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages
US20240171534A1 (en) 2022-11-23 2024-05-23 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages

Family Cites Families (220)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2001A (en) * 1841-03-12 Sawmill
CH593295A5 (ja) 1972-04-13 1977-11-30 Ciba Geigy Ag
JPS5410520A (en) 1977-06-27 1979-01-26 Seiji Kajimoto Method of making roof
JPS5690726A (en) 1979-12-20 1981-07-23 Aisin Warner Ltd Transfer device for four wheel drive
JPS5793426A (en) 1980-11-29 1982-06-10 Toshiba Corp Key input device
DE3333538C2 (de) * 1983-09-16 1987-02-05 Bandag Inc., Muscatine, Ia. Verfahren zum Herstellen von auf Oberflächen von Gegenständen haftenden Überzügen
US4873623A (en) * 1985-04-30 1989-10-10 Prometrix Corporation Process control interface with simultaneously displayed three level dynamic menu
JPH04249835A (ja) 1990-12-28 1992-09-04 Nec Corp 熱伝導冷却形マイクロ波管装置
JP3085481B2 (ja) * 1991-09-28 2000-09-11 株式会社ニコン 反射屈折縮小投影光学系、及び該光学系を備えた露光装置
JP2827612B2 (ja) 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
JPH05152054A (ja) 1991-11-29 1993-06-18 Tokyo Tekko Kk 除電装置用放電電極とその製造方法
JP2502914B2 (ja) 1992-07-31 1996-05-29 インターナショナル・ビジネス・マシーンズ・コーポレイション デ―タ転送方法及び装置
US6433771B1 (en) * 1992-12-02 2002-08-13 Cybernet Haptic Systems Corporation Haptic device attribute control
JPH06242886A (ja) 1993-02-10 1994-09-02 Canon Inc 電子メールシステム
US6903723B1 (en) * 1995-03-27 2005-06-07 Donald K. Forest Data entry method and apparatus
US5666499A (en) 1995-08-04 1997-09-09 Silicon Graphics, Inc. Clickaround tool-based graphical interface with two cursors
US5999168A (en) 1995-09-27 1999-12-07 Immersion Corporation Haptic accelerator for force feedback computer peripherals
US6374255B1 (en) * 1996-05-21 2002-04-16 Immersion Corporation Haptic authoring
JPH10240434A (ja) 1997-02-27 1998-09-11 Matsushita Electric Ind Co Ltd コマンドメニュー選択方法
JPH10254344A (ja) * 1997-03-14 1998-09-25 Atr Chinou Eizo Tsushin Kenkyusho:Kk 協調物体操作装置
JPH1115600A (ja) 1997-04-28 1999-01-22 Matsushita Electric Ind Co Ltd 一方の端末に作用する物理量も送信し受信画像を加工することのできる通信端末及びそれに供する送信端末並びに受信端末
US6522417B1 (en) * 1997-04-28 2003-02-18 Matsushita Electric Industrial Co., Ltd. Communication terminal device that processes received images and transmits physical quantities that affect the receiving communication terminal device
JPH10341253A (ja) 1997-06-05 1998-12-22 Rikuruuto:Kk 宛先及び発信者を特定しない電子メールを送受信する電子メールクライアント装置とサーバ装置、及びそれらを接続してなる電子メールシステム
JP3655438B2 (ja) 1997-07-17 2005-06-02 任天堂株式会社 ビデオゲームシステム
JP4149574B2 (ja) 1997-08-29 2008-09-10 ゼロックス コーポレイション ユーザインターフェースサポートデバイス、及び情報入力方法
US6211861B1 (en) * 1998-06-23 2001-04-03 Immersion Corporation Tactile mouse device
JP3216084B2 (ja) * 1998-01-19 2001-10-09 株式会社ネットワークコミュニティクリエイション チャット画面表示方法
TW404846B (en) * 1998-01-23 2000-09-11 Koninkl Philips Electronics Nv Multiperson tactual virtual environment
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
JPH11224152A (ja) * 1998-02-05 1999-08-17 Ricoh Co Ltd 遠隔会議支援システム
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6573883B1 (en) 1998-06-24 2003-06-03 Hewlett Packard Development Company, L.P. Method and apparatus for controlling a computing device with gestures
JP3449937B2 (ja) * 1999-01-14 2003-09-22 日本電信電話株式会社 パノラマ画像作成方法及びパノラマ画像を用いた周囲状況伝達方法並びにこれらの方法を記録した記録媒体
US20060279542A1 (en) * 1999-02-12 2006-12-14 Vega Vista, Inc. Cellular phones and mobile devices with motion driven control
JP4244784B2 (ja) * 1999-03-17 2009-03-25 富士ゼロックス株式会社 駆動力発生装置
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
JP2000325653A (ja) 1999-05-19 2000-11-28 Enix Corp 携帯型ビデオゲーム装置およびプログラムを格納した記録媒体
JP4233000B2 (ja) * 1999-07-05 2009-03-04 日本電信電話株式会社 仮想空間における風圧による力覚提示装置
US6496200B1 (en) * 1999-11-02 2002-12-17 Interval Research Corp. Flexible variation of haptic interface resolution
US6822635B2 (en) * 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
JP2001350570A (ja) * 2000-06-08 2001-12-21 Yazaki Corp 多機能スイッチ装置
US7159008B1 (en) 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
JP2002035431A (ja) * 2000-07-28 2002-02-05 Yokogawa Electric Corp 遠隔ゲーム機
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6639582B1 (en) * 2000-08-10 2003-10-28 International Business Machines Corporation System for combining haptic sensory-motor effects from two separate input devices into resultant sensory-motor effects and for feedback of such resultant effects between the input devices
JP2002123840A (ja) * 2000-10-17 2002-04-26 Nippon Telegr & Teleph Corp <Ntt> 臨場感型仮想現実提供処理方法および装置
JP2002140166A (ja) * 2000-11-02 2002-05-17 Kddi Corp タッチパネルディスプレイに触れた指に触感を与えるデバイス
US7128266B2 (en) 2003-11-13 2006-10-31 Metrologic Instruments. Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
WO2002056272A1 (en) 2000-12-27 2002-07-18 Nokia Corporation Portable vibrating device with adjustable amplitude
AU2002249960A1 (en) 2001-01-16 2002-07-30 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
JP2002334097A (ja) * 2001-02-09 2002-11-22 Seiko Epson Corp サービス提供システム、管理端末、移動体、サービス提供プログラム及びサービス提供方法
US7068294B2 (en) 2001-03-30 2006-06-27 Koninklijke Philips Electronics N.V. One-to-one direct communication
FI20010817A (fi) * 2001-04-20 2003-02-14 Nokia Corp Menetelmä informaation esittämiseksi elektroniikkalaitteen näytöllä ja elektroniikkalaite
US6963762B2 (en) 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
JP2002366852A (ja) * 2001-06-11 2002-12-20 Hiitoshinku:Kk 情報提供方法、情報処理システム、情報取得プログラム、及び情報記憶媒体
GB0117543D0 (en) 2001-07-18 2001-09-12 Hewlett Packard Co Document viewing device
JP2003051027A (ja) * 2001-08-03 2003-02-21 Namco Ltd ゲーム情報、情報記憶媒体、及びゲーム装置
JP2003078960A (ja) * 2001-09-03 2003-03-14 Ntt Power & Building Facilities Inc 携帯端末装置によるメールシステム
JP2003085590A (ja) * 2001-09-13 2003-03-20 Nippon Telegr & Teleph Corp <Ntt> 3次元情報操作方法およびその装置,3次元情報操作プログラムならびにそのプログラムの記録媒体
US7032188B2 (en) 2001-09-28 2006-04-18 Nokia Corporation Multilevel sorting and displaying of contextual objects
US20030063067A1 (en) * 2001-10-02 2003-04-03 Ping-Yang Chuang Real-time handwritten communication system
US7225115B2 (en) * 2001-10-04 2007-05-29 Novint Technologies, Inc. Coordinating haptics with visual images in a human-computer interface
US7623114B2 (en) * 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
NO315679B1 (no) 2001-10-19 2003-10-06 Dmates As Rik kommunikasjon over internett
FI115861B (fi) * 2001-11-12 2005-07-29 Myorigo Oy Menetelmä ja laite palautteen generoimiseksi
US8000724B1 (en) 2001-11-14 2011-08-16 Sprint Spectrum L.P. Method and system for subnet-based transmission of mobile station location
JP2003177864A (ja) 2001-12-13 2003-06-27 Fuji Photo Film Co Ltd 情報端末システム
JP2003188945A (ja) * 2001-12-13 2003-07-04 Samsung Yokohama Research Institute Co Ltd 携帯端末装置
JP2003188946A (ja) 2001-12-17 2003-07-04 Nec Corp 携帯電話端末及びその機能設定方法
JP3975480B2 (ja) * 2001-12-20 2007-09-12 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
US7002553B2 (en) 2001-12-27 2006-02-21 Mark Shkolnikov Active keyboard system for handheld electronic devices
US7347815B2 (en) * 2002-02-12 2008-03-25 Razz Serbanescu Method and apparatus for converting sense-perceived thoughts and actions into physical sensory stimulation
US7542773B2 (en) 2002-03-29 2009-06-02 At&T Intellectual Property I, L.P. Customized alerts for incoming data messages
US6904823B2 (en) * 2002-04-03 2005-06-14 Immersion Corporation Haptic shifting devices
US20030211888A1 (en) 2002-05-13 2003-11-13 Interactive Telegames, Llc Method and apparatus using insertably-removable auxiliary devices to play games over a communications link
US7456823B2 (en) * 2002-06-14 2008-11-25 Sony Corporation User interface apparatus and portable information apparatus
US11275405B2 (en) * 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
WO2004008411A1 (en) * 2002-07-11 2004-01-22 Nokia Corporation Method and device for automatically changing a digital content on a mobile device according to sensor data
JP3838173B2 (ja) 2002-07-31 2006-10-25 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP3937982B2 (ja) * 2002-08-29 2007-06-27 ソニー株式会社 入出力装置および入出力装置を有する電子機器
KR20040025398A (ko) 2002-09-19 2004-03-24 삼성전자주식회사 이동 통신 단말의 호착신 알림 방법
KR100459560B1 (ko) * 2002-10-22 2004-12-03 삼성전자주식회사 인디케이터 아이콘을 이용하여 수신된 단문메시지의종류를 식별하기 위한 서비스를 제공하는 무선통신기기 및이를 이용한 인디케이터 아이콘 표시방법
JP4117352B2 (ja) 2002-11-12 2008-07-16 株式会社ソニー・コンピュータエンタテインメント ファイル処理方法とこの方法を利用可能な装置
JP2004177992A (ja) 2002-11-22 2004-06-24 Panasonic Mobile Communications Co Ltd 風圧センサ付き携帯端末及び風圧センサ付き携帯端末により実行可能なプログラム
US8059088B2 (en) 2002-12-08 2011-11-15 Immersion Corporation Methods and systems for providing haptic messaging to handheld communication devices
US8803795B2 (en) 2002-12-08 2014-08-12 Immersion Corporation Haptic communication devices
US8830161B2 (en) 2002-12-08 2014-09-09 Immersion Corporation Methods and systems for providing a virtual touch haptic effect to handheld communication devices
GB0229572D0 (en) 2002-12-19 2003-01-22 Cognima Ltd Quality of service provisioning
US7339574B2 (en) * 2003-01-16 2008-03-04 Korean Advanced Institute Of Science And Technology Haptic mouse interface system for providing force and tactile feedbacks to user's fingers and arm
JP3639280B2 (ja) 2003-02-12 2005-04-20 任天堂株式会社 ゲームメッセージ表示方法およびゲームプログラム
JP2006518507A (ja) 2003-02-19 2006-08-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ポータブル装置間でのコンテンツアイテムのアドホック共有のためのシステムと、そのインタラクション方法
JP2004289577A (ja) * 2003-03-24 2004-10-14 Kyocera Corp 移動通信端末及び移動通信システム
AU2003244894A1 (en) * 2003-06-20 2005-01-04 Nokia Corporation Mobile device for mapping sms characters to e.g. sound, vibration, or graphical effects
JP2005020563A (ja) 2003-06-27 2005-01-20 Casio Comput Co Ltd 携帯端末及びプログラム
US20070168118A1 (en) 2003-06-27 2007-07-19 Dirk Lappe System for coordinating the routes of navigation devices
KR20050004382A (ko) 2003-07-02 2005-01-12 삼성전자주식회사 멀티 셔터 유닛을 구비한 스테퍼 설비
JP2005078310A (ja) * 2003-08-29 2005-03-24 Fuji Xerox Co Ltd 触覚呈示装置、触覚呈示方法、及びプログラム
GB0322489D0 (en) 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
JP4401728B2 (ja) 2003-09-30 2010-01-20 キヤノン株式会社 複合現実空間画像生成方法及び複合現実感システム
JP4124092B2 (ja) 2003-10-16 2008-07-23 沖電気工業株式会社 液晶表示装置の駆動回路
US7532196B2 (en) * 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
JP2007510234A (ja) 2003-10-31 2007-04-19 イオタ・ワイアレス・エルエルシー 携帯デバイス用同時データ入力
US7752544B2 (en) * 2003-11-17 2010-07-06 International Business Machines Corporation Method, system, and apparatus for remote interactions
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US7814419B2 (en) * 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
KR20050054731A (ko) 2003-12-05 2005-06-10 한국전자통신연구원 햅틱 시뮬레이션 시스템 및 그 시스템에서의 실시간 촉감지원 방법
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
US7982711B2 (en) * 2003-12-19 2011-07-19 Immersion Corporation Haptic profiling system and method
US7791588B2 (en) 2003-12-22 2010-09-07 Immersion Corporation System and method for mapping instructions associated with haptic feedback
GB0405004D0 (en) 2004-03-05 2004-04-07 Marconi Comm Ltd Improvements in or relating to a telecommunication network
JP4325449B2 (ja) 2004-03-19 2009-09-02 ソニー株式会社 表示制御装置,表示制御方法,記録媒体
US7176888B2 (en) 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
US7176886B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Spatial signatures
KR100853605B1 (ko) 2004-03-23 2008-08-22 후지쯔 가부시끼가이샤 핸드헬드 장치에서의 경사 및 평행 이동 운동 성분들의구별
US7571213B2 (en) * 2004-03-26 2009-08-04 Microsoft Corporation Interactive electronic bubble messaging
JP4046095B2 (ja) * 2004-03-26 2008-02-13 ソニー株式会社 触覚機能付き入力装置、情報入力方法及び電子機器
US20050219211A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for content management and control
US20050251850A1 (en) 2004-03-31 2005-11-10 Microsoft Corporation System and method for providing REA model based security
US20050219223A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for determining the context of a device
US20060061545A1 (en) * 2004-04-02 2006-03-23 Media Lab Europe Limited ( In Voluntary Liquidation). Motion-activated control with haptic feedback
KR100538351B1 (ko) * 2004-04-20 2005-12-21 광주과학기술원 햅틱 인터페이스의 안정화 방법 및 이를 적용한 햅틱시스템
US8095081B2 (en) 2004-04-29 2012-01-10 Sony Ericsson Mobile Communications Ab Device and method for hands-free push-to-talk functionality
JP4439351B2 (ja) 2004-07-28 2010-03-24 アルパイン株式会社 振動付与機能付きタッチパネル入力装置および操作入力に対する振動付与方法
JP2006047534A (ja) * 2004-08-03 2006-02-16 Alpine Electronics Inc 表示制御システム
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
EP1805585B1 (en) * 2004-10-08 2017-08-16 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
US7570254B2 (en) * 2004-11-09 2009-08-04 Takahiko Suzuki Haptic feedback controller, method of controlling the same, and method of transmitting messages that uses a haptic feedback controller
JP2006163579A (ja) 2004-12-03 2006-06-22 Sony Corp 情報処理システム、情報処理装置及び情報処理方法
KR100670821B1 (ko) * 2004-12-21 2007-01-19 한국전자통신연구원 사용자 인터페이스 설계 및 평가 시스템 및 손 상호 작용기반의 사용자 인터페이스 설계 및 평가 시스템
JP2006201912A (ja) 2005-01-19 2006-08-03 Nippon Telegr & Teleph Corp <Ntt> 3次元仮想オブジェクト情報提供サービス処理方法と3次元仮想オブジェクト提供システムおよびプログラム
GB0503253D0 (en) * 2005-02-17 2005-03-23 Univ Northumbria Newcastle User control of a hand-held device
KR20160150116A (ko) 2005-03-04 2016-12-28 애플 인크. 다기능 휴대용 장치
KR20060106010A (ko) * 2005-04-04 2006-10-12 한국과학기술원 커뮤니케이션을 위한 인터렉티브 테이블 세트
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
US8339363B2 (en) 2005-05-13 2012-12-25 Robert Bosch Gmbh Sensor-initiated exchange of information between devices
JP2006333355A (ja) 2005-05-30 2006-12-07 Toshiba Corp 携帯情報処理装置およびその操作方法
JP4507992B2 (ja) 2005-06-09 2010-07-21 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20060279476A1 (en) 2005-06-10 2006-12-14 Gemini Mobile Technologies, Inc. Systems and methods for conveying message composer's state information
US7685530B2 (en) * 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
US7779480B2 (en) 2005-06-30 2010-08-17 Microsoft Corporation Identifying dependencies of an application upon a given security context
US20070040810A1 (en) * 2005-08-18 2007-02-22 Eastman Kodak Company Touch controlled display device
US20070049301A1 (en) * 2005-08-30 2007-03-01 Motorola, Inc. Articulating emotional response to messages
US7734313B2 (en) * 2005-08-31 2010-06-08 Motorola, Inc. Wirelessly networked gaming system having true targeting capability
US7933632B2 (en) 2005-09-16 2011-04-26 Microsoft Corporation Tile space user interface for mobile devices
US8116740B2 (en) * 2005-09-21 2012-02-14 Nokia Corporation Mobile communication terminal and method
US7276886B2 (en) 2005-10-03 2007-10-02 Texas Instruments Incorporated Dual buck-boost converter with single inductor
US7636794B2 (en) 2005-10-31 2009-12-22 Microsoft Corporation Distributed sensing techniques for mobile devices
KR100671144B1 (ko) * 2005-11-23 2007-01-17 (주) 엘지텔레콤 이동통신단말기의 움직임을 이용한 문자입력장치 및 방법
US20070139366A1 (en) * 2005-12-21 2007-06-21 Dunko Gregory A Sharing information between devices
CN101341799B (zh) * 2005-12-22 2012-01-11 皇家飞利浦电子股份有限公司 用于控制光系统的用户接口和方法
US7525425B2 (en) 2006-01-20 2009-04-28 Perdiem Llc System and method for defining an event based on relationship between an object location and a user-defined zone
CN102169415A (zh) * 2005-12-30 2011-08-31 苹果公司 具有多重触摸输入的便携式电子设备
US7509588B2 (en) * 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
EP1806643B1 (en) * 2006-01-06 2014-10-08 Drnc Holdings, Inc. Method for entering commands and/or characters for a portable communication device equipped with a tilt sensor
JP2007188126A (ja) 2006-01-11 2007-07-26 Fujifilm Corp 画像明るさ算出装置および方法並びにプログラム
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
JP2007301270A (ja) 2006-05-15 2007-11-22 Sony Computer Entertainment Inc ゲーム制御プログラム、ゲーム制御方法、ゲーム装置
KR100775190B1 (ko) 2006-05-24 2007-11-12 엘지전자 주식회사 멀티미디어 합성 방법 및 이를 이용한 단말기
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
US8271902B1 (en) * 2006-07-20 2012-09-18 Adobe Systems Incorporated Communication of emotions with data
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
JP4986555B2 (ja) * 2006-09-13 2012-07-25 ソニーモバイルコミュニケーションズ株式会社 通信装置、処理実行方法および処理実行プログラム
US7468573B2 (en) * 2006-10-30 2008-12-23 Motorola, Inc. Method of providing tactile feedback
US8354997B2 (en) * 2006-10-31 2013-01-15 Navisense Touchless user interface for a mobile device
KR101345341B1 (ko) 2006-12-13 2013-12-27 삼성전자 주식회사 파일 전송을 위한 사용자 인터페이스를 제공하는 장치 및방법
FR2910160A1 (fr) 2006-12-13 2008-06-20 France Telecom Systeme de telecommunication tactile
US20080153520A1 (en) * 2006-12-21 2008-06-26 Yahoo! Inc. Targeted short messaging service advertisements
EP1936929A1 (en) 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
KR101364885B1 (ko) * 2007-02-21 2014-02-19 엘지전자 주식회사 아이콘을 이용한 메시지 수신 표시 방법 및 단말기
US8933891B2 (en) * 2007-03-02 2015-01-13 Lg Electronics Inc. Terminal and method of controlling terminal
WO2008121967A2 (en) * 2007-03-30 2008-10-09 Google Inc. Interactive media display across devices
CN101290553A (zh) 2007-04-17 2008-10-22 索尼(中国)有限公司 具有显示屏的电子设备
WO2008132540A1 (en) 2007-04-26 2008-11-06 Nokia Corporation Method and mobile terminal with user input based on movement of the terminal detected by a sensor
US7941000B2 (en) * 2007-05-11 2011-05-10 Koninklijke Philips Electronics N.V. Method for producing an image and system for producing an image
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9965132B2 (en) * 2007-06-08 2018-05-08 Apple Inc. Presenting text messages
JP2009003799A (ja) 2007-06-22 2009-01-08 Aplix Corp ポータブル機器およびポータブル機器における仮想空間の提供方法
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US8201108B2 (en) * 2007-10-01 2012-06-12 Vsee Lab, Llc Automatic communication notification and answering method in communication correspondance
US8631358B2 (en) 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
KR101430452B1 (ko) 2007-10-15 2014-08-14 엘지전자 주식회사 통신 기기 및 이것의 위치 정보 제공 방법
US20090140986A1 (en) * 2007-11-30 2009-06-04 Nokia Corporation Method, apparatus and computer program product for transferring files between devices via drag and drop
US7839269B2 (en) * 2007-12-12 2010-11-23 Immersion Corporation Method and apparatus for distributing haptic synchronous signals
CN101178615A (zh) 2007-12-12 2008-05-14 美新半导体(无锡)有限公司 姿态及运动感应系统及使用该系统的便携式电子设备
US9569086B2 (en) 2007-12-12 2017-02-14 Nokia Technologies Oy User interface having realistic physical effects
US9170649B2 (en) * 2007-12-28 2015-10-27 Nokia Technologies Oy Audio and tactile feedback based on visual environment
US8373549B2 (en) * 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
KR100952698B1 (ko) 2008-03-10 2010-04-13 한국표준과학연구원 촉감 피드백장치를 이용한 촉감전달방법 및 그 시스템
US8239769B2 (en) * 2008-04-22 2012-08-07 Verizon Patent And Licensing Inc. System and method for selling preference-based virtual objects
US20090280860A1 (en) * 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
JP5045559B2 (ja) * 2008-06-02 2012-10-10 富士通モバイルコミュニケーションズ株式会社 携帯端末
US20090309825A1 (en) * 2008-06-13 2009-12-17 Sony Ericsson Mobile Communications Ab User interface, method, and computer program for controlling apparatus, and apparatus
US8306576B2 (en) * 2008-06-27 2012-11-06 Lg Electronics Inc. Mobile terminal capable of providing haptic effect and method of controlling the mobile terminal
US8532637B2 (en) 2008-07-02 2013-09-10 T-Mobile Usa, Inc. System and method for interactive messaging
US20100214243A1 (en) 2008-07-15 2010-08-26 Immersion Corporation Systems and Methods For Interpreting Physical Interactions With A Graphical User Interface
EP3206381A1 (en) 2008-07-15 2017-08-16 Immersion Corporation Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging
US8274484B2 (en) 2008-07-18 2012-09-25 Microsoft Corporation Tracking input in a screen-reflective interface environment
US8362882B2 (en) * 2008-12-10 2013-01-29 Immersion Corporation Method and apparatus for providing Haptic feedback from Haptic textile
US8587601B1 (en) * 2009-01-05 2013-11-19 Dp Technologies, Inc. Sharing of three dimensional objects
JP5793426B2 (ja) 2009-01-29 2015-10-14 イマージョン コーポレーションImmersion Corporation グラフィカルユーザインターフェースとの物理的相互作用を解釈するためのシステムと方法
US8516396B2 (en) * 2009-01-30 2013-08-20 International Business Machines Corporation Object organization based on user interactions within a virtual environment
US8123614B2 (en) * 2010-04-13 2012-02-28 Kulas Charles J Gamepiece controller using a movable position-sensing display device including a movement currency mode of movement
US8266551B2 (en) * 2010-06-10 2012-09-11 Nokia Corporation Method and apparatus for binding user interface elements and granular reflective processing
EP3321780A1 (en) 2012-02-15 2018-05-16 Immersion Corporation High definition haptic effects generation using primitives
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9245428B2 (en) 2012-08-02 2016-01-26 Immersion Corporation Systems and methods for haptic remote control gaming
US9116546B2 (en) 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
US9330544B2 (en) 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US20140139451A1 (en) 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9836150B2 (en) 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
US20140198130A1 (en) 2013-01-15 2014-07-17 Immersion Corporation Augmented reality user interface with haptic feedback
US9880623B2 (en) 2013-01-24 2018-01-30 Immersion Corporation Friction modulation for three dimensional relief in a haptic device
US9041647B2 (en) 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US9645647B2 (en) 2015-05-13 2017-05-09 Immersion Corporation Systems and methods for haptic feedback for modular devices

Also Published As

Publication number Publication date
US20100013761A1 (en) 2010-01-21
JP6272960B2 (ja) 2018-01-31
JP2017004547A (ja) 2017-01-05
CN103970209B (zh) 2017-09-19
JP6043763B2 (ja) 2016-12-14
US10248203B2 (en) 2019-04-02
EP3236337A1 (en) 2017-10-25
KR20110031978A (ko) 2011-03-29
CN103970209A (zh) 2014-08-06
EP3130983A1 (en) 2017-02-15
JP5642252B2 (ja) 2014-12-17
US20150268727A1 (en) 2015-09-24
JP6433556B2 (ja) 2018-12-05
US9612662B2 (en) 2017-04-04
JP5690726B2 (ja) 2015-03-25
KR20170031800A (ko) 2017-03-21
JP6109877B2 (ja) 2017-04-05
KR20170129273A (ko) 2017-11-24
KR101300429B1 (ko) 2013-08-26
US8587417B2 (en) 2013-11-19
US9910496B2 (en) 2018-03-06
US8462125B2 (en) 2013-06-11
US20180348870A1 (en) 2018-12-06
JP2011528537A (ja) 2011-11-17
JP6449934B2 (ja) 2019-01-09
EP2329339A1 (en) 2011-06-08
KR101871646B1 (ko) 2018-06-26
EP3236337B1 (en) 2019-10-16
JP5410520B2 (ja) 2014-02-05
JP2018026142A (ja) 2018-02-15
US20140104162A1 (en) 2014-04-17
EP2723107A1 (en) 2014-04-23
KR20180051675A (ko) 2018-05-16
JP5899253B2 (ja) 2016-04-06
JP2014194785A (ja) 2014-10-09
KR101690469B1 (ko) 2016-12-27
KR101600226B1 (ko) 2016-03-11
EP3130983B1 (en) 2018-11-14
EP2741177A1 (en) 2014-06-11
WO2010009149A3 (en) 2010-04-01
EP3220616A1 (en) 2017-09-20
JP2015007998A (ja) 2015-01-15
CN102160366A (zh) 2011-08-17
CN104111726B (zh) 2017-05-24
JP2011528476A (ja) 2011-11-17
JP2018088260A (ja) 2018-06-07
CN102187647A (zh) 2011-09-14
JP2014002770A (ja) 2014-01-09
US20150199013A1 (en) 2015-07-16
KR101522145B1 (ko) 2015-05-20
US10198078B2 (en) 2019-02-05
KR102045165B1 (ko) 2019-11-14
KR20160031027A (ko) 2016-03-21
KR20110031979A (ko) 2011-03-29
US20100013653A1 (en) 2010-01-21
KR102056518B1 (ko) 2019-12-16
KR102045128B1 (ko) 2019-11-14
US20180004295A1 (en) 2018-01-04
KR101989763B1 (ko) 2019-06-14
JP2019057302A (ja) 2019-04-11
EP2741177B1 (en) 2019-06-26
JP2011528475A (ja) 2011-11-17
EP3480680A1 (en) 2019-05-08
CN102160366B (zh) 2014-05-14
JP6208791B2 (ja) 2017-10-04
WO2010009145A1 (en) 2010-01-21
JP2015057719A (ja) 2015-03-26
CN106990811A (zh) 2017-07-28
JP5599922B2 (ja) 2014-10-01
KR20140141658A (ko) 2014-12-10
KR102045170B1 (ko) 2019-11-14
JP2015212956A (ja) 2015-11-26
EP2313820A1 (en) 2011-04-27
EP3496376A1 (en) 2019-06-12
WO2010009152A1 (en) 2010-01-21
US20130201141A1 (en) 2013-08-08
EP2327201A2 (en) 2011-06-01
CN102099766A (zh) 2011-06-15
JP5762285B2 (ja) 2015-08-12
US9134803B2 (en) 2015-09-15
KR20160018829A (ko) 2016-02-17
KR20140027543A (ko) 2014-03-06
EP3206381A1 (en) 2017-08-16
KR101788995B1 (ko) 2017-10-20
CN107066035A (zh) 2017-08-18
KR101838425B1 (ko) 2018-03-13
EP2313820B1 (en) 2017-04-05
JP5955369B2 (ja) 2016-07-20
WO2010009157A1 (en) 2010-01-21
EP2329636A1 (en) 2011-06-08
US20100017759A1 (en) 2010-01-21
US20100017489A1 (en) 2010-01-21
JP2014067430A (ja) 2014-04-17
JP2017199378A (ja) 2017-11-02
EP2327201B1 (en) 2018-09-05
KR20160114738A (ko) 2016-10-05
KR20160120798A (ko) 2016-10-18
US20140091914A1 (en) 2014-04-03
US10416775B2 (en) 2019-09-17
CN102099767A (zh) 2011-06-15
CN104111726A (zh) 2014-10-22
WO2010009149A2 (en) 2010-01-21
JP2011528474A (ja) 2011-11-17
JP6548753B2 (ja) 2019-07-24
JP6180360B2 (ja) 2017-08-16
KR20180029101A (ko) 2018-03-19
US8866602B2 (en) 2014-10-21
US20170031445A1 (en) 2017-02-02
US9785238B2 (en) 2017-10-10
US20160109950A1 (en) 2016-04-21
CN104571336B (zh) 2019-10-15
KR101956999B1 (ko) 2019-03-11
US8638301B2 (en) 2014-01-28
CN104571336A (zh) 2015-04-29
KR20110052629A (ko) 2011-05-18
US9063571B2 (en) 2015-06-23
CN102187647B (zh) 2014-07-23
JP2014170560A (ja) 2014-09-18
KR20110036115A (ko) 2011-04-06
US20180260029A1 (en) 2018-09-13
CN102099766B (zh) 2015-01-14
KR20160018842A (ko) 2016-02-17
JP2016149135A (ja) 2016-08-18
KR20180071416A (ko) 2018-06-27
KR101661368B1 (ko) 2016-09-29
US20170168579A1 (en) 2017-06-15
EP2723107B1 (en) 2019-05-15
JP5897631B2 (ja) 2016-03-30
US9229532B1 (en) 2016-01-05
JP2011528477A (ja) 2011-11-17
WO2010009163A1 (en) 2010-01-21
US20100045619A1 (en) 2010-02-25
US20190121440A1 (en) 2019-04-25
US20150378437A1 (en) 2015-12-31
US10019061B2 (en) 2018-07-10
US20190179413A1 (en) 2019-06-13
EP3220616B1 (en) 2019-09-04
US9477309B2 (en) 2016-10-25
KR20180127533A (ko) 2018-11-28
US8976112B2 (en) 2015-03-10
US20150002280A1 (en) 2015-01-01
CN102100055A (zh) 2011-06-15
JP2014139797A (ja) 2014-07-31
JP5997898B2 (ja) 2016-09-28
KR101404367B1 (ko) 2014-06-20
US10203756B2 (en) 2019-02-12
JP2019071076A (ja) 2019-05-09
EP2329637A1 (en) 2011-06-08
KR20110036617A (ko) 2011-04-07

Similar Documents

Publication Publication Date Title
JP6272960B2 (ja) 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130620

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20130620

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20130704

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130709

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130805

R150 Certificate of patent or registration of utility model

Ref document number: 5337877

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees