JP2014139797A - 物理法則に基づく触覚メッセージングのためのシステム及び方法 - Google Patents

物理法則に基づく触覚メッセージングのためのシステム及び方法 Download PDF

Info

Publication number
JP2014139797A
JP2014139797A JP2014029131A JP2014029131A JP2014139797A JP 2014139797 A JP2014139797 A JP 2014139797A JP 2014029131 A JP2014029131 A JP 2014029131A JP 2014029131 A JP2014029131 A JP 2014029131A JP 2014139797 A JP2014139797 A JP 2014139797A
Authority
JP
Japan
Prior art keywords
virtual message
virtual
interaction
message object
environment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2014029131A
Other languages
English (en)
Other versions
JP5899253B2 (ja
Inventor
David Birnbaum
デイビッド バーンボーム、
j ullrich Christopher
クリストファー ジェイ. ウーリッヒ、
Danny Grant
ダニー グラント、
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=41119917&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2014139797(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Immersion Corp filed Critical Immersion Corp
Publication of JP2014139797A publication Critical patent/JP2014139797A/ja
Application granted granted Critical
Publication of JP5899253B2 publication Critical patent/JP5899253B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M19/00Current supply arrangements for telephone systems
    • H04M19/02Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • H04M19/047Vibrating means for incoming calls
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163Indexing scheme relating to constructional details of the computer
    • G06F2200/1637Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/041012.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/21Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for social networking applications

Abstract

【課題】物理法則に基づく触覚メッセージングにより、メッセージング装置のユーザに対して説得力のある相互作用を提供する。
【解決手段】メッセージング装置との物理的相互作用を感知するように構成されるセンサからセンサ信号を受信するステップ302と、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するステップであって、前記相互作用が、前記センサ信号及び1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づくステップ304と、前記相互作用に少なくとも部分的に基づいて触覚効果を決定するステップ306とを含む。さらに、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成するステップ308を有する。
【選択図】図3

Description

本発明は、一般に、メッセージングシステムに関し、より詳細には、物理法則に基づく触覚メッセージングのためのシステム及び方法に関する。
(関連出願の相互参照)
本特許出願は、2008年7月15日に提出され「Systems and Methods for Physics−Based Tactile Messaging」と題された米国仮特許出願第61/080,978号、2008年7月15日に提出され「Systems and Methods for Mapping Message Contents to Virtual Physical Properties for Vibrotactile Messaging」と題された米国仮特許出願第61/080,981号、2008年7月15日に提出され「Systems and Methods for Shifting Sensor Haptic Feedback Function Between Passive and Active Modes」と題された米国仮特許出願第61/080,985号、2008年7月15日に提出され「Systems and Methods for Gesture Indication of Message Recipients」と題された米国仮特許出願第61/080,987号、2009年1月29日に提出され「Systems and Methods for Pseudo−Telepresence in a Shared Space」と題された米国仮特許出願第61/148,312号、及び2009年5月26日に提出され「Systems and Methods for Transmitting Haptic Messages」と題された米国仮特許出願第61/181,280号への優先権を主張し、これらの全体は参照により本明細書に組み込まれる。
メッセージング装置における従来のメッセージングシステムは、メッセージのカテゴリ又は内容を決定する手掛かりを提供するために視覚又は聴覚フィードバックの両方又は一方に依存する場合がある。例えば、スマートホンは、電話呼出、音声メール、又はテキストメッセージを受信するとビープ音を出し及び/又は点滅する場合がある。また、基本的な触覚フィードバックが使用される場合があるが、メッセージに関するわずかな情報しかユーザに提供しない。例えば、単純な振動は、電話呼出の受信を伴うかもしれない。あるいは、例えば着信音等の音響効果に振動が伴う場合がある。タッチスクリーン及び仮想キーパッドを有するメッセージング装置において、複数のボタンを有する従来のキーパッドのルックアンドフィールのユーザ体験を模倣するために、単純な触覚効果が出力される場合がある。
このような標準的な視覚、聴覚、及び触覚フィードバックは、メッセージング装置のユーザに対して説得力のある相互作用を提供できない場合がある。従って、物理法則に基づく触覚メッセージングが必要とされている。
本発明の実施形態は、物理法則に基づく触覚メッセージングのためのシステム及び方法を提供する。例えば、一実施形態では、物理法則に基づく触覚メッセージングの方法は、メッセージング装置との物理的相互作用を感知するように構成されるセンサからセンサ信号を受信するステップと、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を検出するステップであって、相互作用がセンサ信号及び1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づくステップと、相互作用に少なくとも部分的に基づいて触覚効果を決定するステップと、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成するステップとを備える。別の実施形態では、コンピュータ可読媒体がこのような方法を実行するためのプログラムコードを備える。
こうした例示の実施形態は、本発明を限定又は定義するのではなく、その理解を容易にする例示を提供するために言及される。例示の実施形態は、詳細な説明において検討され、発明のさらなる説明がその中で提供される。本発明の多様な実施形態によって提供される利点は、本明細書を吟味することでさらに理解され得る。
本発明のこれらの及び他の特徴、側面、及び利点は、添付の図面を参照して以下の詳細な説明を読めば、よりよく理解される。
本発明の一実施形態による物理法則に基づく触覚メッセージングのためのシステムのブロック図である。 本発明の一実施形態による物理法則に基づく触覚メッセージングのためのシステムの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングのための方法の流れ図である。 本発明の一実施形態による物理法則に基づく触覚メッセージングのための方法の流れ図である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。 本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。
本発明の実施形態は、物理法則に基づく触覚メッセージングのためのシステム及び方法を提供する。
(物理法則に基づく触覚メッセージングの例示の実施形態)
本発明の一実施形態では、例えば移動式スマートホン等のメッセージング装置は、触覚効果を生成するように構成されるディスプレイ及びアクチュエータと連通するプロセッサを備える。実施形態では、メッセージング装置は、Immersion社のVibeTonz(R)という振動触覚フィードバックシステムを搭載した「Samsung SGH−i710」移動式スマートホンを含む。別の実施形態では、メッセージング装置は、Immersion TouchSense(R)振動触覚フィードバックシステムとしても知られているImmersion社のTouchSense(R)テクノロジーシステムを含む。他のメッセージング装置及び触覚フィードバックシステムが利用されてもよい。
実施形態では、スマートホンのディスプレイは、多次元キネティック受信箱、又は仮想メッセージ環境を表示する。仮想メッセージ環境は、仮想メッセージオブジェクトとして表されるメッセージを含む。仮想メッセージオブジェクトは、例えば、巻物(scroll)、カプセル、又はボール等、装置が表示することが可能な任意の形状を採用してもよい。仮想メッセージオブジェクトの各種類は、特定の種類のメッセージに対応してもよい。例えば、管又は円筒状の巻物の形状の仮想メッセージオブジェクトは、テキストメッセージ又はチャットの会話を表してもよい。例えば、親密性等の感情を伝えることを意図したショートメッセージは、ハートの形状の仮想メッセージオブジェクトとして表されてもよい。
仮想メッセージオブジェクトとしてメッセージを表すことによって、仮想メッセージオブジェクトの特性及び挙動は、中身について迅速且つ直感的にユーザに知らせ得る。各仮想メッセージオブジェクトの特性又は仮想物理パラメータは、サイズ、質量、形状、衝突挙動、テクスチャ、及び/又は視覚表示の1つ以上を含んでもよい。仮想メッセージオブジェクトの1つの例は、ファイルを含む卵又はカプセルを含んでもよい。このような仮想メッセージオブジェクトは、大きなサイズのパラメータ、円滑なテクスチャパラメータ、及び壊れやすく且つ砕けやすい衝突パラメータを有してもよい。物理的特性を有する情報を伝達する仮想メッセージオブジェクトの別の例は、ハートの鼓動である。ハートの仮想メッセージオブジェクト単独では静止していてもよい。しかし、テキストメッセージ又は他の情報を含む場合、それは、鼓動しているように見せるために視覚的にアニメーションさせられる。さらに、ハートの仮想オブジェクトが鼓動しているように感じるように、ハートが鼓動するアニメーションを模倣する触覚効果が再生されてもよく、それはメッセージを含むことを示す。仮想メッセージオブジェクトの挙動又は相互作用は、仮想物理パラメータに少なくとも部分的に基づく。
受信箱の2次元物理メタファによれば、仮想メッセージオブジェクトは、様々な方法で操作され得る。実施形態では、メッセージング装置は、例えば、接触、圧力、加速、傾き、慣性又は位置を検出するように構成されて、タッチスクリーン、加速度計又はジャイロスコープ等のメッセージング装置との物理相互作用を感知するように構成される1つ以上のセンサを含む。センサの起動後、プロセッサは、センサからセンサ信号を受信する。例えば、慣性センサは、スマートホンが揺さぶられるとプロセッサに信号を送信する。スマートホンを傾け又は移動させることによって、仮想メッセージオブジェクトは、センサ信号及び仮想メッセージオブジェクトの仮想物理パラメータによって仮想メッセージ環境と相互作用してもよい。例えば、装置を傾けると、あたかも重力が直接それに影響を及ぼすかのような仮想メッセージ環境におけるボールの運動が引き起こされてもよい。プロセッサは、少なくとも部分的にセンサ信号及び仮想メッセージオブジェクトの仮想物理パラメータに基づいて、仮想メッセージオブジェクトと仮想メッセージ環境との間のこの相互作用を決定してもよい。例えば、ボールが仮想メッセージ環境に存在する間に装置が傾けられると、センサによって測定される傾きの角度、及びボールの弾力性の非偏心(non−eccentric)の回転仮想物理パラメータに基づいて、プロセッサが、ボールが回転する速度を決定して、それが仮想メッセージ環境の境界に対して弾むことを決定してもよい。
相互作用の決定後、プロセッサは、相互作用に少なくとも部分的に基づいて触覚効果を決定する。実施形態では、プロセッサは、ボールの弾力的な仮想物理パラメータ及びジャイロスコープによって測定される傾きの強度に基づいて、環境に対して弾むボールをシミュレートする触覚効果を決定する。別の例示では、仮想メッセージ環境は、複数のボールの形状の複数の仮想メッセージオブジェクトを含む。ユーザが力強く装置を揺動させていることをセンサ信号が示す場合、プロセッサは、互いに及び仮想メッセージ環境の壁に対して弾む複数のボールをシミュレートするのに多数の短時間の高周波振動が適切であることを決定してもよい。
最後に、プロセッサは、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成する。メッセージング装置が傾けられ、揺動させられ、又は移動させられると、メッセージング装置は、仮想メッセージング環境における仮想オブジェクトに対して装置の運動の効果をシミュレートして、振動又は揺動してもよい。プロセッサは、次に、触覚効果を出力し得るアクチュエータに触覚信号を送信する。
(物理法則に基づく触覚メッセージング)
本明細書に提示された発明の実施形態は、物理法則に基づく触覚メッセージングのためのシステム及び方法を提供する。物理モデルを仮想メッセージ環境の中に組み込むことによって、実施形態は、直感的にユーザインターフェースを操作するためにユーザの日常の触覚体験及び運動感覚能力を利用することが出来る。従来のメッセージングシステムは、メッセージの内容についてほとんど又は全く直感的な触覚フィードバックを提供することがない。件名、草稿等を示す1次元の受信箱を有する従来のEメールメタファを使用するテキストメッセージングシステムは、視覚的及び認識的に集約的であり、中身の読み書きにユーザの高度の注意を要求する。しかしながら、物理法則に基づく触覚メッセージングは、物理メタファをモデル化する聴覚、視覚、及び触覚フィードバックを介して中身の非言語的コミュニケーションを容易にすることが出来る。
(物理法則に基づく触覚メッセージングのための例示のシステム)
次に、複数の図面を通じて同様の番号が同様の要素を示す図面を参照すると、図1は、本発明の一実施形態による物理法則に基づく触覚メッセージングのためのシステムのブロック図である。図1を参照すると、システム100は、例えば、携帯電話、PDA(portable digital assistant)、携帯型メディアプレーヤ、又は携帯型ゲーム装置等のメッセージング装置102を備える。メッセージング装置102は、プロセッサ110を備える。プロセッサ110は、センサ114、ネットワーク接続112、ディスプレイ116、アクチュエータ118、及びスピーカ120と連通する。プロセッサ110は、ディスプレイ116に示される仮想メッセージ環境を生成するように構成される。
プロセッサ110は、ネットワーク接続112と通信する。ネットワーク接続112は、例えば、赤外線、無線、Wi−Fi又はセルラネットワーク通信等の1つ以上の移動式通信を備えてもよい。他の変形では、ネットワーク接続112は、例えば、イーサネット(登録商標)等の有線ネットワーク接続を備える。メッセージング装置102は、例えば、セルラ電話ネットワーク又はインターネット等のネットワークを介して他の装置(図示せず)とメッセージ又は仮想メッセージオブジェクトを交換するように構成され得る。装置間で交換されるメッセージの実施形態は、音声メッセージ、テキストメッセージ、データメッセージ、又は他の形態のメッセージを含んでもよい。
プロセッサ110は、ネットワーク接続112を介して新しい仮想メッセージオブジェクトを含む新しい仮想メッセージオブジェクト信号を受信するように構成され得る。例えば、プロセッサ110は、別のスマートホン等の遠隔装置から新しい仮想メッセージオブジェクト信号を受信してもよい。1つの変形では、プロセッサ110は、新しい仮想メッセージオブジェクトを生成する。例えば、アラーム又はリマインダが、仮想メッセージ環境における仮想メッセージオブジェクトの到着を引き起こしてもよい。新しい仮想メッセージオブジェクトを受信すると、プロセッサ110は、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するように構成されてもよい。この相互作用は、1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づく。
また、プロセッサ110は、1つ以上のセンサ114と連通する。センサ114は、加速度計、ジャイロスコープ、GPSセンサ、タッチセンサ式入力装置(例えば、タッチスクリーン、タッチパッド)、又は何らかの他の種類のセンサを含んでもよい。1つ以上のセンサ114は、例えば、加速、傾き、慣性、又は位置の変化を検出するように構成されてもよい。例えば、メッセージング装置102は、メッセージング装置102の加速を測定するように構成される加速度計を備えてもよい。別の例示として、メッセージング装置102は、位置センサ、回転速度センサ、画像センサ、圧力センサ、又は他の種類のセンサを備えてもよい。1つ以上のセンサ114は、センサ信号をプロセッサ110に送信するように構成されてもよい。
ユーザは、1つ以上のセンサ114によって検出される運動又はジェスチャを介して仮想メッセージ環境における仮想メッセージオブジェクトと相互作用してもよい。メッセージング装置102が傾けられ、揺動され、又は移動されると、1つ以上のセンサ114は、こうした運動を検出して、運動に少なくとも部分的に基づいて、プロセッサ110に送信するためのセンサ信号を生成してもよい。一実施形態では、加速センサは、メッセージング装置102の傾き及び加速を検出するように構成される。メッセージング装置102が傾けられると、加速度計は、メッセージング装置102の傾き及び/又は加速に少なくとも部分的に基づいてプロセッサに信号を送信するように構成され得る。加速感知は、仮想メッセージ環境における重力をシミュレートするために使用されてもよい。センサ信号を受信すると、プロセッサ110は、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するように構成されてもよい。この相互作用は、センサ信号及び1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づく。
相互作用の決定後、プロセッサ110は、相互作用に少なくとも部分的に基づいて触覚効果を決定するように構成されてもよい。一実施形態では、仮想メッセージ環境は、カプセル又は卵を備える。メッセージング装置102が傾けられていることをセンサ114が検出すると、プロセッサ110は、仮想メッセージ環境の壁に対する卵のひび割れのような、卵と仮想メッセージ環境との相互作用を決定してもよい。この相互作用に基づいて、プロセッサ110は、例えば、仮想メッセージ環境の境界に対する卵のひび割れがシミュレートされる効果等の触覚効果を決定してもよい。
図1に示されるように、プロセッサ110は、ディスプレイ116とも連通する。プロセッサは、ディスプレイ116に示される仮想メッセージ環境の図形表示を生成するように構成され得る。ディスプレイ116に示される仮想メッセージ環境は、複数の仮想メッセージオブジェクトを備えてもよい。ディスプレイ116は、プロセッサ110から信号を送信及び受信するように構成される、例えば、タッチスクリーン等のタッチセンサ式入力装置を備えてもよい。仮想メッセージオブジェクトは、タッチスクリーンを介して直接操作されてもよい。例えば、タッチスクリーンディスプレイ上の2次元の指ジェスチャは、仮想メッセージ環境の中で仮想メッセージオブジェクトを選択し、接触し、感知し、ドラッグし、又は投げてもよい。
プロセッサ110は、1つ以上のアクチュエータ118とも連通する。アクチュエータ118は、例えば、アクチュエータ118に触覚効果を出力させるように構成される触覚信号等の信号をプロセッサ110から受信するように構成されてもよい。アクチュエータ118は、例えば、電気モータ、電磁アクチュエータ、音声コイル、リニア共振アクチュエータ、形状記憶合金、電気活性ポリマ、ソレノイド、偏心回転質量モータ(ERM)又はリニア共振アクチュエータ(LRA)であってもよい。
最後に、図示の実施形態では、プロセッサ110は、スピーカ120と連通する。プロセッサは、仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用に少なくとも部分的に基づいて音響効果を決定して、音響効果に少なくとも部分的に基いてスピーカに音声信号を送信するように構成されてもよい。音響効果は、仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用、及び/又は第1の仮想メッセージオブジェクトと1つ以上の他の仮想メッセージオブジェクトとの間の相互作用をシミュレートしてもよい。スピーカは、音声信号に少なくとも部分的に基づいて音響効果を生成するように構成され得る。触覚効果及び音響効果の出力は、調和されてもよい。一実施形態では、スピーカは、アクチュエータが触覚効果を生成するのと実質的に同時に音響効果を生成してもよい。
図2は、本発明の一実施形態による物理法則に基づく触覚メッセージングのためのシステムの例示である。システム200の要素は、図1に示されたシステムを参照して説明される。多様な他の実装が可能である。
図2に示されるように、システム200は、例えば、携帯電話、PDA(portable digital assistant)、携帯型メディアプレーヤ、又は携帯型ゲーム装置等のメッセージング装置102を備える。メッセージング装置102は、例えば、セルラ電話ネットワーク又はインターネット等のネットワークを介して、音声メール、テキストメッセージ、及び他のデータメッセージのような信号を送信及び受信するように構成され得る。メッセージング装置102は、無線及び/又は有線ネットワーク接続112を有してもよい。図2には装置102がハンドヘルドメッセージング装置として例示されるが、他の実施形態では、仮想メッセージオブジェクトを送信及び受信するために、例えば、ビデオゲームシステム及び/又はパーソナルコンピュータ等の他の装置が使用されてもよい。
図2に示されるように、メッセージング装置102は、ディスプレイ116を備える。ディスプレイ116に加えて、メッセージング装置102は、ボタン、タッチパッド、巻物ホイール、ロッカスイッチ、ジョイスティック、又は他の形状の入力(図示せず)を備えてもよい。ディスプレイ116は、例えば、タッチスクリーン等のタッチセンサ式入力装置を備えてもよい。
ディスプレイ116は、プロセッサ110から信号を受信して、仮想メッセージ環境204を生成するように構成される。仮想メッセージ環境204は、多次元受信箱の視覚表示を含んでもよい。仮想メッセージング環境204の中に、仮想メッセージオブジェクトとして1つ以上のメッセージが表示されてもよい。仮想メッセージオブジェクトの幾つかの例示は、矢印、ボール、カプセル、ハート、及び管を含む。図2に示されるように、仮想メッセージ環境204は、3つの仮想メッセージオブジェクト206a、206b、及び206cを含む。仮想メッセージ環境204の内側で、仮想メッセージオブジェクトは、自由に動き回り、弾んで、仮想メッセージ環境204の境界及び環境内の他の仮想メッセージオブジェクトと衝突してもよい。
各仮想メッセージオブジェクト206は、例えば、テキストメッセージ、写真、映像、音声メール、リマインダ、又は笑顔若しくは不快のような擬似感情メッセージ等のメッセージ及び/又はファイルを表してもよい。管又は巻き上げ式巻物206aの形状の仮想メッセージオブジェクトは、テキストメッセージを表してもよい。卵又はカプセル206cの形状の仮想メッセージオブジェクトは、例えば、映像ファイル、写真、又は歌曲等の添付ファイルを有するメッセージを表してもよい。別の実施形態では、仮想メッセージオブジェクトは、送信者が仮想包装紙に包むオブジェクトの形状を採用してもよい。このような実施形態では、送信者は、複数の異なる種類の仮想包装紙を有してもよく、又は独自の仮想包装紙を作成してもよい。
別の実施形態では、仮想メッセージオブジェクトは、ユーザ作成の刻印(stamp)の形態を採用してもよい。刻印は、アニメーション及び触覚効果を備えてもよい。例えば、仮想メッセージオブジェクトは、刻印の形状を採用してもよく、刻印は、送信者の画像を備えてもよい。刻印は、さらに、例えば、あたかも受信者にハイタッチをするかのようにユーザが手を上に伸ばすようなアニメーションを備えてもよい。刻印は、さらに、関連する触覚効果を備えてもよい。例えば、一実施形態では、送信者がハイタッチをするアニメーションを備える刻印が、ハイタッチの衝撃に近似する触覚効果をさらに備えてもよい。幾つかの実施形態では、ユーザは、任意の他のメッセージ無しで、刻印だけを送信してもよい。別の実施形態では、ユーザは、仮想メッセージオブジェクトと共に刻印を有してもよい。このような実施形態では、刻印は、送信者の仮想署名として機能してもよい。
また、仮想メッセージオブジェクトは、例えば、ジェスチャ、表情、又は感情等の多様な形態の非言語コミュニケーションを表してもよい。例えば、ボールとして示される仮想メッセージオブジェクト206bは、例えば、遊び心の指示等の非言語メッセージに対応してもよい。矢印としての仮想メッセージオブジェクトは、突き又は突き刺しジェスチャ(すなわち、注意を要請又は要求するため)を表してもよい。他の仮想メッセージオブジェクトは、ハート、バスケットボール、水風船、タイプライタ、又は他の形状の視覚表示を表してもよい。仮想メッセージオブジェクトが表すデータの種類は、仮想メッセージオブジェクトの形状の決定に含まれてもよい。幾つかの効果的な仮想メッセージオブジェクトは、タイプライタのキーの叩き音のような容易に識別可能な視覚及び/又は触覚特性及び/又は効果を有してもよい。このような仮想メッセージオブジェクトは、仕事上のメッセージ、テキストメッセージ、又は文書処理ファイルを表してもよい。別の実施形態では、仮想メッセージオブジェクトは、メッセージの緊急性を表してもよい。例えば、このような実施形態では、仮想メッセージオブジェクトは、説明点(explanation point)の形状又は緊急性を表す他の何らかの形状を採用してもよい。このようなメッセージオブジェクトは、さらに、メッセージの緊急性を表す強度の触覚効果を備えてもよい。
各仮想メッセージオブジェクトは、1つ以上の仮想物理パラメータを備えてもよい。例えば、サイズ、質量、形状、衝突挙動、テクスチャ、又は視覚表示等の幾つかの視覚的物理パラメータは、静的パラメータ、仮想メッセージオブジェクト自体の固有の特性であってもよい。例えば、緊急性、寿命、及び/又は態度等の他の仮想物理パラメータは、一過性又は一時的パラメータであってもよい。このような可変の仮想物理パラメータは、仮想メッセージオブジェクトがどのように送信又は受信されるかに関係付けられてもよい。
仮想メッセージオブジェクトの仮想物理パラメータは、ディスプレイ116及びアクチュエータ118を通じて、視覚的及び触覚的にモデル化され得る。仮想メッセージオブジェクトの仮想物理パラメータは、仮想メッセージオブジェクトの固有及び/又は一過性特性に基づいてもよい。仮想メッセージオブジェクトの固有特性は、オブジェクトのサイズ、質量、形状、密度、又はテクスチャを含んでもよい。例えば、緊急性、寿命、及び/又は態度等の仮想メッセージオブジェクトの一過性特性は、仮想メッセージオブジェクトの送信又は交換と関係付けられる情報に基づいてもよい。
メッセージの特定の種類又はクラスは、仮想メッセージオブジェクトの単一の種類として表されてもよい。例えば、全てのテキストメッセージは、巻物又は圧延管として、及び軽く、薄く、且つ弾力的であるように表されてもよい。代替的に、添付ファイルを有するメッセージは、大きく、重く、砕けやすく、且つ楕円形の卵として表されてもよい。個々の仮想物理パラメータは、メッセージのパラメータと対応してもよい。例えば、大きな卵は、大量のデータを含む添付ファイルを有するメッセージを表してもよく、一方で小さな卵は、少量のデータを含む添付ファイルを有するメッセージを表してもよい。
物理パラメータを有する仮想メッセージオブジェクトとしてメッセージを表すことによって、オブジェクトの種類及び中身に関する手掛かりが、外観又は触覚挙動から推定されてもよい。例えば、卵の殻で覆われた仮想メッセージオブジェクト等の薄い表面でモデル化されるオブジェクトは、仮想メッセージ環境の境界との衝突時に割れ又は壊れてもよい。代替的に、例えば、弾力性のボール又はピンポン球等の異なる表面又は衝突特性でモデル化されるオブジェクトは、仮想メッセージ環境の境界から継続的に反射してもよい。少なくとも部分的に1つ以上の仮想物理パラメータに基づく触覚効果を決定することによって、ユーザは、特定の触覚効果を特定の種類のメッセージと関係付けてもよい。例えば、卵が壊れることをシミュレートする触覚効果が生成されると、ユーザは、添付ファイルを有するメッセージを受信したことを推定してもよい。別の例示として、ハートの鼓動をシミュレートする触覚効果が生成されると、ユーザは、感情的な親密性を表すメッセージを受信したことを推定してもよい。このように、少なくとも部分的にメッセージの仮想物理特性に基づく触覚効果は、ユーザ体験の向上をもたらし得る。
プロセッサ110は、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用に少なくとも部分的に基づいて触覚効果を決定してもよい。この相互作用は、1つ以上のセンサ114から受信される信号、及び1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータの少なくとも1つに少なくとも部分的に基づく。一実施形態では、テニスボールの形状の仮想メッセージオブジェクトは、例えば、粗目の表面及び中空のゴム芯等の仮想物理特性を有してもよい。ユーザがタッチセンサ式入力ディスプレイ116を介してボールを擦ると、アクチュエータ118は、テニスボールの粗い表面をシミュレートする触覚効果を生成してもよい。ユーザがボールを突付く場合、アクチュエータ118は、テニスボールの中空のゴム芯をシミュレートするように構成される触覚効果を生成してもよい。
多次元環境をモデル化することによって、仮想メッセージオブジェクトは、仮想メッセージ環境204の中を自由に動き回って、互いと及び環境と潜在的に相互作用してもよい。例えば、仮想メッセージオブジェクトは、転げ回って、互いと及び仮想メッセージ環境204の境界と衝突してもよい。一実施形態では、装置102が傾けられると、仮想メッセージオブジェクト206bは、仮想メッセージ環境204の最上部から最下部へと転がってもよい。仮想メッセージオブジェクト206bが転がっている間、アクチュエータ118は、仮想メッセージオブジェクト206bのテクスチャをシミュレートする振動を生成してもよい。仮に仮想メッセージオブジェクト206bが仮想メッセージ環境204の最下部に対して跳ね返る場合、アクチュエータ118は、反発力又は衝突をシミュレートする触覚効果を生成してもよい。また、このような相互作用に基づく触覚効果は、スピーカ120によって生成される音響効果と調和されて、仮想メッセージ環境204の中で示される。
メッセージング装置102が新しい仮想メッセージオブジェクトと関連付けられた新しい仮想メッセージオブジェクト信号を受信すると、仮想メッセージオブジェクトは、仮想メッセージ環境の中に「到着」してもよい。次に、こうした仮想メッセージオブジェクトは、仮想メッセージ環境204及び/又は他の仮想メッセージオブジェクトと相互作用してもよい。プロセッサ110は、少なくとも部分的に新しい仮想メッセージオブジェクトの到着に基づいて触覚効果を決定してもよい。例えば、メッセージング装置102は、ボールの形状の仮想メッセージオブジェクトと関連付けられた仮想メッセージオブジェクト信号を受信することが出来る。仮想メッセージ環境204は、ボールが、環境の最上部から到着し、落下して、静止する前に、環境の最下部で跳ねることを示してもよい。プロセッサ110は、ボールと仮想メッセージ環境との相互作用に基づいて触覚効果を決定してもよい。
幾つかの実施形態では、プロセッサ110は、仮想メッセージオブジェクトとユーザの相互作用に関連付けられる触覚効果を決定してもよい。例えば、仮想メッセージオブジェクトは、独自の包装紙を備える小包の形状を採用してもよい。このようなメッセージ受信者は、仮想メッセージオブジェクトにアクセスするために仮想包装紙から小包の包装を解かなければならないかもしれない。受信者が仮想メッセージオブジェクトの包装を解くと、プロセッサ110は、包装紙の引裂きに近似する触覚信号をアクチュエータ118に送信してもよい。
(物理法則に基づく触覚メッセージングのための例示の方法)
図3は、本発明の一実施形態による物理法則に基づく触覚メッセージングのための方法の流れ図である。方法300において、プロセッサは、センサからセンサ信号を受信する(302)。センサは、例えば、加速度計、ジャイロスコープ、傾斜計、カメラ等の光学センサ、音声スペクトルセンサ、超音波送信機及びセンサ、赤外線若しくは他の近接センサ、GPSセンサ、又は方向若しくは動作を検出することが出来る別のセンサを備えてもよい。センサは、接触、圧力、加速、傾き、慣性、又は位置、又はメッセージング装置の何らかの他の特徴を検出するように構成されてもよい。センサ信号は、メッセージング装置が移動され、回転され、又は揺さぶられるときに生成されてもよい。代案として、センサ信号は、タッチスクリーンが接触されると生成されてもよい。メッセージング装置に接触し、移動させ、揺動し、又は回転させることによって、ユーザは、仮想メッセージ環境の中の仮想メッセージオブジェクトと相互作用してもよい。
次に、プロセッサは、1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定する。この相互作用は、センサ信号及び1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づく(304)。相互作用は、仮想メッセージ環境及び/又は1つの仮想メッセージオブジェクトと相互作用する別の仮想メッセージオブジェクトのモデル化された挙動を含んでもよい。
仮想メッセージオブジェクトの仮想物理パラメータは、仮想メッセージ環境の挙動、又は仮想メッセージオブジェクトが仮想メッセージ環境及び他の仮想メッセージオブジェクトとどのように相互作用するかを知らせることが出来る。例えば、小さなゴムボールの形状の仮想メッセージオブジェクトは、他のボール及び/又は環境に対して跳ね返ることによってそれらと相互作用してもよい。同じ仮想メッセージオブジェクトが、ビー球が蓋付き容器の中で転げ回るように、環境を転げ回ってもよい。別の例示では、円筒巻物の形状の仮想メッセージオブジェクトは、他のオブジェクト又は仮想メッセージ環境の境界と衝突するときに跳ねるのではなく、仮想メッセージ環境の中で滑ってもよい。卵の形状の仮想メッセージオブジェクトは、他のオブジェクト又は境界との突然の衝突時にひび割れ又は壊れてもよい。
相互作用の決定後、プロセッサは、少なくとも部分的に相互作用に基づいて触覚効果を決定する(306)。例えば、ユーザは、仮想メッセージ環境の中身を判読しようとしてメッセージング装置を揺さぶってもよい。仮想メッセージ環境が大きな砕けやすい卵のような単一の仮想メッセージオブジェクトを含む場合、プロセッサは、卵の破壊(例えば、単一の大きなひび割れ)をシミュレートする触覚効果を決定してもよい。別の例示として、運動弾性ボールを備える仮想メッセージオブジェクトが存在する場合、プロセッサは、環境及び互いと反射する運動ボールをシミュレートするのに多数の小さな短時間の振動が適切であると決定してもよい。触覚効果を仮想メッセージオブジェクトの仮想物理パラメータと関連付けることによって、ユーザは、所定の触覚効果を所定の種類のオブジェクトと相互に関連付けてもよい。例えば、アクチュエータがハートの鼓動をシミュレートする触覚効果を出力すると、ユーザは、メッセージング装置を見ることなく親密なメッセージ又は仮想メッセージオブジェクトを受信したことを即座に推測してもよい。
最後に、プロセッサは、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成する(308)。プロセッサは、触覚効果を出力するように構成される1つ以上のアクチュエータに触覚信号を送信するように構成される(310)。1つの変形では、プロセッサは、鈍い衝撃のような、壁にぶつかる矢印をシミュレートする触覚効果を決定して、アクチュエータに鈍い衝撃を出力させるように構成される触覚信号を生成する。触覚信号は、触覚効果を出力するアクチュエータに送信されてもよい。
図4は、本発明の一実施形態による物理法則に基づく触覚メッセージングのための方法の流れ図である。方法400では、プロセッサは、新しい仮想メッセージオブジェクトを含む新しい仮想メッセージオブジェクト信号を受信する(402)。仮想メッセージオブジェクトがある装置から別の装置に送信されると、新しい仮想メッセージオブジェクト信号が、受信者のメッセージング装置によって受信されてもよい。新しい仮想メッセージオブジェクト信号は、新しい仮想メッセージオブジェクトと関連付けられてもよい。一実施形態では、新しい仮想メッセージオブジェクト信号は、アラーム又はリマインダによって生成される。例えば、アラームは、矢印又は水風船の形状の仮想メッセージオブジェクトによって表されてもよい。アラームがトリガされ又は起動される時間になると、アラームを表す新しい仮想メッセージオブジェクトが仮想メッセージ環境の中に生成されてもよい。
次に、プロセッサは、新しい仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定する。この相互作用は、新しい仮想メッセージオブジェクトの仮想物理パラメータに少なくとも部分的に基づく(404)。新しい仮想メッセージオブジェクトは、受信されると、どのように送信されるかに少なくとも部分的に基づいて仮想メッセージ環境と相互作用してもよい。一例では、送信者は、迅速なジェスチャを使用して受信箱から仮想メッセージオブジェクトを送信してもよい。迅速なジェスチャは、仮想メッセージオブジェクトと関連付けられる仮想物理パラメータに変換される。新しい仮想メッセージオブジェクトが受信されると、仮想メッセージオブジェクトは、仮想メッセージ環境に到着して、挙動を行い又は送信ジェスチャの速度と関連付けられる仮想物理パラメータに少なくとも部分的に基づいて他のオブジェクト及び/又は環境と相互作用してもよい。
次に、プロセッサは、相互作用に少なくとも部分的に基づいて触覚効果を決定する(406)。一例では、中身のない仮想メッセージ環境が、緊急送信の大きな砕けやすい卵の形状の仮想メッセージオブジェクトを受信する。卵が仮想メッセージ環境の境界に衝突して壊れると判断すると、プロセッサは、卵の破壊をシミュレートする触覚効果を決定する。別の例として、様々な仮想メッセージオブジェクトで満たされている仮想メッセージ環境が、ゆっくりと送信された運動弾性ボールの形態の新しい仮想メッセージオブジェクトを受信する。静止する前の緩やかな弾みのような、環境内の新しいボールの挙動又は相互作用の決定後、プロセッサは、緩やかな弾みをシミュレートする触覚効果を決定する。
最後に、プロセッサは、アクチュエータに触覚効果を出力させるように構成される触覚信号を生成する(408)。1つの変形では、新しいテキストメッセージがメッセージング装置に受信されると、プロセッサは、仮想メッセージ環境と衝突する新しいテキストメッセージの効果をシミュレートする触覚信号を生成する。
(物理法則に基づく触覚メッセージングの例示的なシナリオ)
物理法則に基づく触覚メッセージングの一実施形態では、メッセージング装置のユーザインターフェース環境は、物理モデルを組み込む。ユーザインターフェース環境は、例えば、平坦なビー球容器、又はビリヤードテーブル等の2次元キネティック受信箱を表してもよい。仮想メッセージオブジェクトは、仮想メッセージ環境の2次元の中で、例えば、ビリヤード球が移動してビリヤードテーブルと衝突するが常にその表面に残っているというように、移動及び相互作用する。メッセージング装置が仮想メッセージオブジェクトに対して移動されると、加速度計によって感知される実際の重力が仮想メッセージオブジェクトに作用するように見えて、仮想メッセージオブジェクトがメッセージング装置から独立している錯覚を生み出してもよい。例えば、仮想メッセージオブジェクトが転がるときの摩擦振動のシミュレーション、又は仮想メッセージオブジェクトが仮想メッセージ環境の境界と衝突するときのパルスのシミュレーション等の触覚効果は、受信箱内の単なるデータではなく、メッセージ環境内の物理オブジェクトであるとの錯覚を生み出してもよい。
図5A、5B及び5Cは、本発明の一実施形態500による物理法則に基づく触覚メッセージングの例示である。図5A、5B及び5Cに示されるように、システムは、メッセージング装置502を備える。メッセージング装置502は、仮想メッセージ環境504を生成するように構成される。図5A、5B及び5Cに示されるように、仮想メッセージ環境504は、ボールの形状の仮想メッセージオブジェクト506を備える。他の変形では、仮想メッセージ環境504は、複数の類似の又は異なる仮想メッセージオブジェクト506を備えてもよい。
図5Aでは、メッセージング装置502及び仮想メッセージ環境504は、矢印520の方向によって示されるように、垂直方向に示される。仮想メッセージ環境504の中身の図形位置は、メッセージング装置の方向に対応してもよい。図5Aに示されるように、メッセージング装置は、垂直方向に示されて、仮想メッセージ環境の中身は、装置502の最下部に対応する仮想メッセージ環境504の最下部に静止して示される。
図5Bでは、メッセージング装置502が、時計方向又は右方に回転される。メッセージング装置502が移動又は回転されると、センサは、メッセージング装置502の移動に少なくとも部分的に基づいて、プロセッサに信号を送信してもよい。1つの変形では、例えば、加速度計等のセンサが、加速度の変更を報告する信号をプロセッサに送信する。別の変形では、例えば、ジャイロスコープセンサ等のセンサが、装置の回転速度を報告する信号をプロセッサに送信する。
例えば、仮想メッセージ環境における仮想メッセージオブジェクトの移動又は衝突等の相互作用は、センサ信号に少なくとも部分的に基づいてもよい。図5Bでは、仮想メッセージオブジェクト506は、仮想メッセージ環境504の右下の角に転がり又は移動している。例示では、仮想メッセージオブジェクト506は、あたかも重力がオブジェクト506に作用して仮想メッセージ環境504の最下部に向かってオブジェクト504を引っ張っているかのように、メッセージング装置502の回転に応じて仮想メッセージ環境内を移動している。また、相互作用は、仮想メッセージオブジェクト506の仮想物理パラメータに少なくとも部分的に基づいてもよい。図5Bで示されるように、仮想メッセージオブジェクト506は、丸いボールである。メッセージング装置が様々な角度で傾けられ又は回転させられると、丸いボール506は、同時に仮想メッセージ環境506内で転がってもよい。卵の形状の仮想メッセージオブジェクトは、転がるというよりは揺れる。また、管のような仮想メッセージオブジェクトは、仮想メッセージ環境の中で滑ってもよい。
仮想メッセージオブジェクト506が仮想メッセージ環境内で移動し又は転がると、プロセッサは、仮想メッセージオブジェクトと仮想メッセージ環境との相互作用に少なくとも部分的に基づく触覚効果を決定してもよい。例えば、仮想メッセージオブジェクト506が仮想メッセージ環境504の中を転がって移動している間、プロセッサは、仮想メッセージオブジェクト506のテクスチャをシミュレートする触覚効果を決定してもよい。仮想メッセージオブジェクト506の仮想物理パラメータ及びユーザによるメッセージング装置502の移動によっては、仮想メッセージオブジェクト506は、メッセージング装置502の移動に応じて仮想メッセージ環境504内で弾み、転がり、又は砕け散ってもよい。1つのシナリオでは、ユーザは、メッセージング装置502を力強く揺動してもよい。それに応じて、弾性ボールをモデル化する仮想メッセージオブジェクト506は、仮想メッセージ環境504の中で弾み且つ跳ね返ってもよい。同時に、跳ねるボールに類似する触覚効果が、環境504内で仮想メッセージオブジェクト506の移動と同時に起こってもよい。
図5Cでは、メッセージング装置502は、90度時計方向に回転させられて示される。仮想メッセージオブジェクト506は、環境504の右下の角から仮想メッセージ環境504の最下部の中央へと転がっている。仮想メッセージ環境504の最下部に到達すると、ボール506は、装置の左右への僅かな移動に少なくとも部分的に基づいて端から端へと転がり得る。
図6A、6B及び6Cは、本発明600の一実施形態による物理法則に基づく触覚メッセージングの例示である。図6A、6B及び6Cは、装置が時計回りの方向に回転させられるときの、メッセージング装置に表示される仮想メッセージ環境における3つの仮想メッセージオブジェクトの移動を例示する。メッセージング装置を移動又は揺動させることは、仮想メッセージオブジェクトがぶつかり及び/又は再配置されることを引き起こしてもよく、仮想メッセージ環境内の仮想メッセージオブジェクトの数、種類、及び/又は中身を示す触覚効果を生成してもよい。
図6A、6B及び6Cに示されるように、メッセージング装置602は、仮想メッセージ環境604を生成する。仮想メッセージ環境604は、3つの仮想メッセージオブジェクト606a、606b及び606cを含む。仮想メッセージオブジェクト606a、606b及び606cのそれぞれと仮想メッセージ環境604との間の相互作用又は挙動は、少なくとも部分的に個々の仮想物理パラメータに基づいてもよい。仮想メッセージオブジェクト606cの管は、衝突時に壊れる可能性が低く、転がるのではなく滑る傾向があってもよい。仮想メッセージオブジェクト606aの卵は、転がる代わりに揺れて、衝突時に壊れ又はひび割れる可能性が高くてもよい。仮想オブジェクト606bのボールは、視覚的には壊れずに、転がり弾む可能性があってもよい。
図6Aでは、メッセージング装置602は、矢印620の方向で示される垂直方向にユーザによって保持されて示される。3つの仮想メッセージオブジェクト606a、606b、及び606cは、順不同で、仮想メッセージ環境の最下部に静止する。物理法則に基づく触覚メッセージングのための方法を利用することによって、3つの仮想メッセージオブジェクト606a、606b、及び606cは、直感的な方式で装置602の移動に反応してもよい。図6A、6B及び6Cでは、メッセージング装置602が回転させられて、あたかも各仮想オブジェクトが重力等の物理的力に反応するメッセージング装置内の本物の物理オブジェクトであるかのように、仮想メッセージ環境内で現実的に移動する3つの仮想メッセージオブジェクト606a、606b、及び606cが示される。
図6Bでは、装置は、時計回りの方向で、右方に回転させられて示される。回転ジェスチャに応じて、仮想メッセージオブジェクト606a、606b、及び606cは、次に仮想メッセージ環境の最下部に対応する、仮想メッセージ環境の下方の角に移行して示される。各仮想メッセージオブジェクト606a、606b、及び606cの移動は、それらが実際に装置の内側にあれば重力がオブジェクトに及ぼし得る影響をモデル化してもよい。仮想メッセージオブジェクトが移動する間、メッセージング装置602は、仮想メッセージ環境におけるオブジェクトの移行に対応する1つ以上の触覚効果を生成してもよい。仮想メッセージオブジェクトがディスプレイ上で移行すると、触覚効果は、互いに対する及び仮想メッセージ環境での移動をシミュレートする。一例として、仮想メッセージ管606Cは、装置602が右方に回転させられると、その側部に倒れ掛かってもよい。アクチュエータは、仮想メッセージ環境604の側部にぶつかる管の鈍い衝撃を模倣するために、短く強い力又は振動を生成してもよい。
最後に、図6Cでは、メッセージング装置は、約180度回転させられて、又は上下逆さまで示される。仮想メッセージオブジェクト606a、606b、及び606cは、次に、仮想メッセージ環境の最も低い地点に対応する、装置の右下の角に静止する。仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用に対応する触覚効果は、メッセージング装置内の1つ以上のアクチュエータによって出力されてもよい。
図7は、本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。図7では、システム700は、仮想メッセージ環境704を表示しているメッセージング装置702を備える。単一の仮想メッセージオブジェクト706が仮想メッセージ環境704の最下部に位置する。幾つかの実施形態では、別のメッセージング装置(図示せず)が、仮想メッセージオブジェクトをメッセージング装置702に送信する。他の実施形態では、メッセージング装置702自体が仮想メッセージオブジェクトを生成してもよい。このような内部生成の仮想メッセージオブジェクトは、アラーム、警報、又はリマインダを含んでもよい。
図7に示されるように、新しい仮想メッセージオブジェクト706が、メッセージゲートウェイ708の最上部から仮想メッセージ環境704の最下部に向かって矢印720の方向に落下することによって仮想メッセージ環境に到着している。新しい仮想メッセージオブジェクト信号を受信すると、メッセージング装置702のプロセッサは、新しい仮想メッセージオブジェクト706と仮想メッセージ環境704との間の相互作用を決定してもよい。この相互作用は、新しい仮想メッセージオブジェクト706の仮想物理パラメータに少なくとも部分的に基づく。図7に示されるように、僅かな右の方向又は軌道に対応する仮想物理パラメータが、新しい仮想メッセージオブジェクトが矢印720の方向に落下するように案内してもよい。このような到着挙動は、送信側装置によって設定される一過性の仮想物理パラメータに少なくとも部分的に基づいてもよい。一実施形態では、仮想メッセージオブジェクト706を送信する装置は、ユーザがどのように送信側装置から仮想メッセージオブジェクト706を送信したかに少なくとも部分的に基づいて、仮想メッセージオブジェクトの速度及び軌道に対応する仮想物理パラメータを初期化していてもよい。例えば、ユーザが迅速な中心から外れたジェスチャ(off−center gesture)を使用して仮想メッセージオブジェクトを送信する場合に、こうした一過性特性が、仮想メッセージオブジェクトに関連付けられてもよい。このように、仮想メッセージオブジェクト706が受信されると、矢印720で示されるような仮想メッセージオブジェクトの初期の迅速且つ中心から外れた軌道が、仮想メッセージオブジェクト706の仮想物理パラメータに少なくとも部分的に基づいて決定されてもよい。
仮想メッセージオブジェクト706の速度及び軌道によっては、仮想メッセージオブジェクト706が、仮想メッセージ環境の壁に対して又は仮想メッセージ環境内の他の仮想メッセージオブジェクトに対して跳ね返り又は砕け散ることがもたらされてもよい。図7では、仮想メッセージ環境には中身がなく、新しい仮想メッセージボールの速度及び軌道によってボールが仮想メッセージ環境704の下方の壁から跳ね返って、次に仮想メッセージ環境704の最上部の壁に再度跳ね返ることがもたらされる。仮想メッセージ環境704が矢印722で示される方向で壁に対して跳ね返るボールを示すとき、メッセージング装置702は、新しい仮想メッセージオブジェクト706と仮想メッセージ環境704との間の相互作用に対応する触覚効果を生成してもよい。
1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用及びその中身に基づいて触覚効果を決定することによって、触覚効果は、仮想メッセージ環境の中身に関する非視覚的情報又は触覚的手掛かりを提供してもよい。仮想メッセージ環境の壁に対する反復的なボールの跳ね返りをシミュレートする触覚効果は、受信箱又は仮想メッセージ環境が比較的に中身が入っていないとユーザに思わせてもよい。逆に、複数の仮想メッセージオブジェクトの互いとの複数の衝突をシミュレートする触覚効果は、仮想メッセージ環境が比較的に満杯であることを示してもよい。一実施形態では、個々の仮想メッセージオブジェクトの挙動をシミュレートする触覚効果は、メッセージの中身に対する触覚的で非視覚的な手掛かりを与えてもよい。ハートの鼓動又は跳ねるボールをシミュレートする触覚効果は、陽気なメッセージが受信されたことを示してもよい。卵のひび割れをシミュレートする触覚効果は、添付ファイルを有するメッセージが受信されたことを示してもよい。
仮想メッセージオブジェクトとして表されるメッセージは、トークンメタファを実装してもよい。トークンメタファにおいて、トークンは、送信及び受信され、又は異なる実体間で売買及び交換されるように、物理的及び視覚的特性を含んでもよい。このようなトークンメタファによれば、仮想メッセージオブジェクトは、異なるメッセージング装置間で、交換され、又は送信及び受信されるように、物理的及び視覚的特性を含んでもよい。
図8A、8B及び8Cは、本発明の一実施形態による物理法則に基づく触覚メッセージングの例示である。図8Aは、互いと連通する2つのメッセージング装置802a及び802bを示す。第1のメッセージング装置802aは、仮想メッセージ環境404aを表示し、第2のメッセージング装置802bは、仮想メッセージ環境804bを表示している。図8A、8B及び8Cに示されるように、第1のメッセージング装置802aは、第2のメッセージング装置802bと通信している。メッセージング装置802a及び802bは、セルラ電話ネットワーク、Wi−Fiデータネットワーク、赤外線、又は他のネットワーク手段を介して通信してもよい。図8A、8B及び8Cではメッセージング装置802a及び802bが極めて接近して示されるが、メッセージング装置802a及び802bは、それらが接続するネットワークがまたがる任意の距離にわたって通信してもよい。
図8Aに示されるように、第1のメッセージング装置802aの仮想メッセージ環境804aは、単一の仮想メッセージオブジェクト806を含む。第2のメッセージング装置802bの仮想メッセージ環境804bには中身がない。図8Aに示されるように、ユーザは、タッチスクリーンを介して仮想メッセージオブジェクトに直接的に触ることによって第1の仮想メッセージ環境804aにある仮想メッセージオブジェクト806と接触する。仮想メッセージオブジェクト806に触ってボタンを押し下げることによって、ユーザは、仮想メッセージオブジェクト806を感知するのではなく、それを移動させることを意図していることを示してもよい。
図8Bでは、ユーザは、仮想メッセージ環境の最上部又は前方にある仮想メッセージ環境ゲートウェイに向かって、矢印820によって示される方向に指を動かしている。このようなジェスチャは、ユーザが仮想メッセージオブジェクト806を送信することを意図することを示してもよい。1つの変形では、ユーザは、タッチスクリーンを介して仮想メッセージオブジェクト806に接触して、仮想メッセージ環境ゲートウェイを介して仮想メッセージオブジェクトをフリックし、押し、又は引いてもよい。別の変形では、ユーザがメッセージング装置を傾けることによって、仮想オブジェクトがゲートウェイを介して落下することが引き起こされる。図8Bに示されるように、第1のメッセージング装置802aは仮想メッセージオブジェクト806を第2のメッセージング装置802bに送信しており、仮想メッセージオブジェクトはもはや第1の仮想メッセージ環境804aに存在しない。
仮想メッセージオブジェクト806は、例えば、セルラ電話ネットワーク等のネットワークを介して、第1のメッセージング装置から第2のメッセージング装置に送信される。仮想メッセージオブジェクトは、例えば、LAN(Local Area Network)、WAN(Wide Area Network)、又は他の適切なネットワーク等の他の音声及び/又はデータネットワーク上で送信されてもよい。
仮想メッセージオブジェクト806が送信されると、送信側メッセージング装置802aは、所定の特性を出発側仮想メッセージオブジェクト806と関連付けてもよい。一実施形態では、仮想メッセージがリモート装置に到着すると、どのような仮想メッセージオブジェクトが送信されるかに関連付けられる運動エネルギが維持される。例えば、メッセージの出発の速度又は緊急性が仮想メッセージオブジェクト806の1つの仮想物理パラメータとして関連付けられてもよい。ユーザがゲートウェイを介して不用意に仮想メッセージオブジェクト806をフリック又はドロップする場合、遅い又は僅かな出発速度が仮想メッセージオブジェクト806と関連付けられてもよい。例えば、迅速なフリック等によって、ユーザがゲートウェイを介して仮想メッセージオブジェクト806を緊急に送信する場合、速い出発速度パラメータが仮想メッセージオブジェクト806と関連付けられてもよい。仮想メッセージオブジェクトの緊急特性を保存することによって、仮想メッセージオブジェクトは、仮想メッセージオブジェクトの中身に関して受信者に追加の情報を提供してもよい。
図8Cでは、第2のメッセージング装置802bが第1のメッセージング装置802aから送信された仮想メッセージオブジェクト806を受信しており、仮想メッセージオブジェクト806は、第2の仮想メッセージ環境804bの下方の角に示される。第2のメッセージング装置802bのプロセッサ及び/又はネットワークインターフェースは、新しい仮想メッセージオブジェクト信号を受信するように構成されてもよい。送信されたメッセージのコピーが送信側装置の送信箱に存在する従来のメッセージングシステムとは異なり、第1のメッセージング装置802aの仮想メッセージ環境804aは、仮想メッセージオブジェクト806を送信した後に中身がない状態で示される。図8Cに示される実施形態では、ボールとして例示される仮想メッセージオブジェクト806は、仮想メッセージ環境804bの内部境界から跳ね返り、片方のユーザから投げられているボールの物理モデルを再現して、別のユーザの共有スペース又はプレイエリアに着地することによって第2のメッセージング装置802bに到着する。
新しい仮想メッセージオブジェクト信号は、送信者の装置のゲートウェイから出発した地点における仮想オブジェクト806の内部物理特性及び/又は状態に関連する情報を含んでもよい。新しい仮想メッセージオブジェクト806を受信すると、第2のメッセージング装置802bのプロセッサは、新しい仮想メッセージオブジェクト806と仮想メッセージ環境804bとの間の相互作用を決定してもよい。相互作用は、新しく受信された新しい仮想メッセージオブジェクト806の仮想物理パラメータに少なくとも部分的に基づく。例示として、第1のメッセージング装置802aのプロセッサは、仮想メッセージオブジェクトがどのような速度で送信されたか(すなわち、伝送又は出発速度)を決定して、この速度特性を仮想メッセージオブジェクト806と関連付けてもよい。仮想メッセージオブジェクト806が第2のメッセージング装置802bによって受信されると、仮想メッセージオブジェクト806は、仮想メッセージ環境804b内の仮想メッセージオブジェクト806の初期挙動を決定及びモデル化するために伝送速度を使用してもよい。第1の仮想メッセージ環境804aから緊急で送信された仮想メッセージオブジェクト806bは、第2の仮想メッセージ環境804bの中で激しく跳ねることによって到着してもよい。第1の仮想メッセージ環境804aから僅かに又は柔らかく送信された仮想メッセージオブジェクト806bは、第2の仮想メッセージ環境804bの中に柔らかく落下することによって到着してもよい。
メッセージング装置802bのプロセッサは、新しく受信された仮想メッセージオブジェクト806と仮想メッセージ環境804bとの間の相互作用に少なくとも部分的に基づいて触覚効果を決定することが出来る。図8Cでは、仮想メッセージオブジェクト806は、第1のメッセージング装置からのメッセージの出発速度と関連付けられる伝送速度の仮想物理パラメータを有してもよい。触覚効果は、この伝送速度に部分的に基づいて決定されてもよい。さらに、触覚効果は、例えば、オブジェクトのサイズ、質量、形状、衝突挙動、テクスチャ、又は視覚表示等の仮想メッセージオブジェクトの他の仮想物理パラメータ又は特徴に基づいてもよい。
仮想メッセージオブジェクト806はボールとして表されるが、仮想メッセージオブジェクトは、様々なパラメータを有する他の形状で表され得る。一実施形態では、水風船として表される仮想メッセージオブジェクトが、第1のメッセージング装置から第2のメッセージング装置に送信される。ユーザが仮想ゲートウェイを介して水風船を送信すると、水風船の出発速度がオブジェクトと関連付けられる。ネットワーク上での伝送の後、水風船は、第2のメッセージング装置に到着する。到着すると、第2のメッセージング装置は、水風船と第2のメッセージング装置の仮想メッセージ環境との間の相互作用を決定する。水風船と仮想メッセージ環境との間の相互作用は、例えば、質量及び/又は速度等の水風船の仮想物理パラメータに少なくとも部分的に基づく。実施形態では、受信側の環境は中身がなく、水風船は、到着すると、第2の仮想メッセージ環境のゲートウェイから素早く動いて、受信側の環境の壁にぶつかる。それは、仮想メッセージ環境の壁に対して視覚的に飛び散る仮想メッセージオブジェクトに対応する水はね又は水しぶき及び水しぶきの音響効果をシミュレートする触覚効果によってユーザに示される。
物理法則に基づく触覚メッセージングのためのシステム及び方法の実施形態は、現在のメッセージングシステムに対して様々な利点を提供し得る。物理法則に基づく触覚メッセージングのためのシステム及び方法は、ユーザの通常の触覚体験及びユーザインターフェースを操作する感覚運動技能を利用してもよい。ユーザの通常の体験及び物理的直感を利用することによって、物理法則に基づく触覚メッセージングのためのシステム及び方法は、新しいユーザインターフェースに対するユーザの学習曲線を少なくし、ユーザインターフェースの普及率を上げ、ユーザ満足度を上昇させてもよい。
物理法則に基づく触覚メッセージングの実施形態は、メッセージを交換するためのトークンメタファを利用してもよい。ある態様では、トークンは、物理特性の少なくとも一部を保持しながら、往復して渡され又は交換される。トークンメタファを使用して、仮想メッセージオブジェクトは、往復して送信され又は交換されて、例えば、物理的及び視覚的特性等の仮想物理パラメータの少なくとも一部を保持してもよい。
仮想メッセージオブジェクトとしてメッセージを表すことによって、仮想メッセージオブジェクトの特定の仮想物理パラメータが、それらが表すメッセージの種類及び/又は中身に関する情報を伝達してもよい。一実施形態では、メッセージの種類及び/又は形状は、仮想メッセージオブジェクトに対応する。テキストメッセージは、偏心テキスト管又は巻物として表されてもよい。添付ファイルを有するメッセージは、略偏心卵又はカプセルの形状の仮想メッセージオブジェクトとして表されてもよい。陽気さの非言語コミュニケーションを表すメッセージは、非偏心ボールとして表されてもよい。別の実施形態ではメッセージのサイズは、仮想メッセージオブジェクトのサイズ又は質量に対応する。大きな添付ファイルを有するメッセージは、大きな又は重い卵として表され得る。例えば、短いテキストメッセージ又は小さな添付ファイルを有するメッセージ等のメッセージは、小さな仮想メッセージオブジェクトとして表され得る。
仮想メッセージオブジェクトが他のオブジェクト及び/又は環境とどのように相互作用するかを決定し得る衝突挙動は、こうした仮想物理パラメータに少なくとも部分的に基づいてもよい。例えば、重い又はより大きな仮想メッセージオブジェクトは、大きいがめったに起こらない衝突を有してもよい。一方で、小さく、より軽いオブジェクトは、小さいが頻繁に起こる衝突を有してもよい。触覚効果は、仮想メッセージ環境と仮想メッセージオブジェクトとの間の相互作用に基づいてモデル化されてもよい。このように、物理法則に基づく触覚メッセージングによって生成される触覚効果は、受信箱及び/又は個々のメッセージの中身に関する情報をもたらしてもよい。
トークンが往復して送信されるとき、例えばトークンがどのように交換されるか等の表現意図の一部が維持されてもよい。このように、トークンメタファのもとで、仮想メッセージオブジェクトは、どのようにそれらが送信又は交換されたかに関連付けられる特性を保持してもよい。こうした一過性パラメータは、仮想メッセージ環境でオブジェクトの仮想メッセージオブジェクトの挙動をモデル化するために受信側装置によって使用されてもよい。一例として、仮想メッセージオブジェクトが送信側装置から送信されると、送信側装置は、伝送速度を仮想メッセージオブジェクトと関連付ける。仮想メッセージオブジェクトの受信に応じて、受信側装置は、伝送速度に少なくとも部分的に基づいて新しい仮想メッセージオブジェクトの衝突挙動をモデル化してもよい。
メッセージ又は仮想メッセージオブジェクトは、メッセージング装置で実行される様々なジェスチャを通じて操作されてもよい。例えば、加速度計及び/又はタッチスクリーン等のセンサは、こうしたジェスチャを検出して、ジェスチャを仮想オブジェクトに作用する仮想的な力に変換してもよい。例えば、加速感知は、仮想物理環境内の重力をシミュレートするために使用されてもよい。メッセージング装置が回転させられると、加速度計データは、ビー玉容器の側部が回転させられるように、仮想メッセージ環境が回転させられるのをシミュレートするために使用され得る。このような運動は、仮想オブジェクトが移動、転動、及び/又は衝突することを引き起こし得る。それらは、ユーザインターフェース環境内で図形で表示されて、実質的に同時に、アクチュエータに対応する触覚フィードバックを生成させ得る。触覚効果を介して、仮想メッセージオブジェクトの仮想質量が、触覚的に知覚されてもよい。それは、仮想メッセージオブジェクトが何を表すかに関する非視覚的情報を伝達する。このように、メッセージング装置を迅速な揺動又は軽い突きで移動させることによって、直感的で、予測可能な態様で仮想メッセージ環境の中身に関する情報が伝達されてもよい。
本発明の実施形態は、デジタル電子回路で、又はコンピュータハードウェア、ファームウェア、ソフトウェア、又はそれらの組み合わせで実装され得る。一実施形態では、コンピュータは、1つ又は複数のプロセッサを備えてもよい。プロセッサは、例えば、プロセッサに結合されるRAM(random access memory)等のコンピュータ可読媒体を備える。プロセッサは、例えば、メッセージング用の1つ以上のコンピュータプログラムを実行するように、メモリに記憶されるコンピュータ実行可能プログラム命令を実行する。このようなプロセッサは、マイクロプロセッサ、DSP(digital signal processor)、ASIC(application−specific integrated circuit)、FPGA(field programmable gate arrays)、及び状態機械を備えてもよい。このようなプロセッサは、PLC、PIC(programmable interrupt controller)、PLD(programmable logic device)、PROM(programmable read−only memory)、EPROM又はEEPROM(electronically programmable read−only memory)、又は他の類似の装置等のプログラム可能電子装置をさらに備えてもよい。
このようなプロセッサは、プロセッサによって実行されるときに、プロセッサによって実行され又は支援される本明細書に記載のステップをプロセッサに実行させ得る命令を記憶し得る媒体、例えばコンピュータ可読媒体を備え又はそれと連通してもよい。コンピュータ可読媒体の実施形態は、限定されないが、電子、光学、磁気、又は他の記憶装置若しくはコンピュータ可読命令をウェブサーバ内のプロセッサ等のプロセッサに提供可能な伝送装置を備えてもよい。媒体の他の例は、限定されないが、フロッピー(登録商標)ディスク、CD−ROM、磁気ディスク、メモリチップ、ROM、RAM、ASIC、構成プロセッサ、全ての光学媒体、全ての磁気テープ若しくは他の磁気媒体、又はコンピュータプロセッサが読取り可能な任意の他の媒体を含む。また、様々な他の装置は、例えば、ルータ、プライベート若しくはパブリックネットワーク、又は他の伝送装置等のコンピュータ読取り可能媒体を含んでもよい。記載されたプロセッサ及び処理は、1つ以上の構造内にあってもよく、1つ以上の構造にわたって分散されてもよい。プロセッサは、本明細書に記載の1つ以上の方法(又は方法の一部)を実行するためのコードを備えてもよい。
(総説)
好ましい実施形態を含む本発明の実施形態の上記の説明は、例示及び説明目的で提示されているに過ぎず、網羅的であること又は本発明を記載された厳密な形態に限定することは意図されていない。本発明の精神及び範囲から逸脱することなく、それらの多くの変更及び適合が当業者には明らかであろう。

Claims (29)

  1. メッセージング装置との物理的相互作用を感知するように構成されるセンサからセンサ信号を受信するステップと、
    1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するステップであって、前記相互作用が、前記センサ信号及び前記1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づくステップと、
    前記相互作用に少なくとも部分的に基づいて触覚効果を決定するステップと、
    アクチュエータに前記触覚効果を出力させるように構成される触覚信号を生成するステップと
    を備えることを特徴とする方法。
  2. 前記触覚効果を出力するように構成されるアクチュエータに前記触覚信号を送信するステップと、
    前記触覚効果を出力するステップと
    をさらに備えることを特徴とする、請求項1に記載の方法。
  3. 前記1つ以上の仮想メッセージオブジェクトと前記仮想メッセージ環境との間の前記相互作用が、衝突を含むことを特徴とする、請求項1に記載の方法。
  4. 前記センサが、接触、圧力、加速、傾き、慣性、又は位置を検出するように構成されることを特徴とする、請求項1に記載の方法。
  5. 前記センサが、加速度計、ジャイロスコープ、GPSセンサ、傾斜計、カメラ等の光学センサ、音声スペクトルセンサ、超音波送信機及びセンサ、赤外線若しくは他の近接センサ、又は方向若しくは動作を検出することが出来る別のセンサを備えることを特徴とする、請求項1に記載の方法。
  6. 前記仮想メッセージ環境が、受信箱を含むことを特徴とする、請求項1に記載の方法。
  7. 前記仮想物理パラメータが、サイズ、質量、形状、衝突挙動、テクスチャ、又は視覚表示を含むことを特徴とする、請求項1に記載の方法。
  8. 前記仮想メッセージオブジェクトが、ボール、管、又はカプセルの1つ以上を含むことを特徴とする、請求項1に記載の方法。
  9. 前記仮想メッセージオブジェクトが、テキストメッセージ、インスタントメッセージ、Eメール、又はデータファイルの1つ以上を含むことを特徴とする、請求項1に記載の方法。
  10. 前記データファイルが、ビデオファイル、オーディオファイル、画像ファイル、又はテキストファイルの1つ以上を含むことを特徴とする、請求項9に記載の方法。
  11. 新しい仮想メッセージオブジェクトを含む新しい仮想メッセージオブジェクト信号を受信するステップと、
    前記新しい仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するステップであって、前記相互作用が、前記新しい仮想メッセージオブジェクトの仮想物理パラメータに少なくとも部分的に基づくステップと、
    前記相互作用に少なくとも部分的に基づいて触覚効果を決定するステップと、
    アクチュエータに前記触覚効果を出力させるように構成される触覚信号を生成するステップと
    を備えることを特徴とする方法。
  12. 前記新しい仮想メッセージオブジェクト信号が、アラーム又はリマインダによって生成されることを特徴とする、請求項11に記載の方法。
  13. 前記新しい仮想メッセージオブジェクト信号が、リモート装置から受信されることを特徴とする、請求項11に記載の方法。
  14. プログラムコードを含むコンピュータ可読媒体であって、前記プログラムコードが、
    メッセージング装置との物理的相互作用を感知するように構成されるセンサからセンサ信号を受信するためのプログラムコードと、
    1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するためのプログラムコードであって、前記相互作用が、前記センサ信号及び前記1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づくプログラムコードと、
    前記相互作用に少なくとも部分的に基づいて触覚効果を決定するためのプログラムコードと、
    アクチュエータに前記触覚効果を出力させるように構成される触覚信号を生成するためのプログラムコードと
    を含むことを特徴とするコンピュータ可読媒体。
  15. プログラムコードを含むコンピュータ可読媒体であって、前記プログラムコードが、
    新しい仮想メッセージオブジェクトを含む新しい仮想メッセージオブジェクト信号を受信するためのプログラムコードと、
    前記新しい仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定するためのプログラムコードであって、前記相互作用が、前記センサ信号及び前記新しい仮想メッセージオブジェクトの仮想物理パラメータに少なくとも部分的に基づくプログラムコードと、
    前記相互作用に少なくとも部分的に基づいて触覚効果を決定するためのプログラムコードと、
    アクチュエータに前記触覚効果を出力させるように構成される触覚信号を生成するためのプログラムコードと
    を含むことを特徴とするコンピュータ可読媒体。
  16. メッセージング装置との物理的相互作用を感知するように構成されるセンサからセンサ信号を受信し、
    1つ以上の仮想メッセージオブジェクトと仮想メッセージ環境との間の相互作用を決定し、前記相互作用が、前記センサ信号及び前記1つ以上の仮想メッセージオブジェクトの少なくとも1つの仮想物理パラメータに少なくとも部分的に基づき、
    前記相互作用に少なくとも部分的に基づいて触覚効果を決定し、且つ
    アクチュエータに前記触覚効果を出力させるように構成される触覚信号を生成する
    ように構成されるプロセッサを備えることを特徴とするシステム。
  17. 前記プロセッサと通信するセンサをさらに備えることを特徴とする、請求項16に記載のシステム。
  18. 前記センサが、接触、圧力、加速、傾き、慣性、又は位置を検出するように構成されることを特徴とする、請求項17に記載のシステム。
  19. 前記センサが、加速度計、ジャイロスコープ、又はGPSセンサを備えることを特徴とする、請求項17に記載のシステム。
  20. 触覚信号を受信して、前記触覚信号に少なくとも部分的に基づいて触覚効果を生成するように構成されるアクチュエータをさらに備えることを特徴とする、請求項16に記載のシステム。
  21. 前記メッセージング装置が、前記仮想メッセージ環境を示すように構成されるディスプレイをさらに備えることを特徴とする、請求項16に記載のシステム。
  22. 前記ディスプレイが、タッチスクリーンを備えることを特徴とする、請求項21に記載のシステム。
  23. 前記メッセージング装置が、前記触覚効果と調和させられる音響効果を生成するように構成されるスピーカをさらに備えることを特徴とする、請求項16に記載のシステム。
  24. 前記1つ以上の仮想メッセージオブジェクトと前記仮想メッセージ環境との間の前記相互作用が、衝突を含むことを特徴とする、請求項16に記載のシステム。
  25. 前記仮想メッセージ環境が、受信箱を含むことを特徴とする、請求項16に記載のシステム。
  26. 前記仮想物理パラメータが、サイズ、質量、形状、衝突挙動、テクスチャ、又は視覚表示を含むことを特徴とする、請求項16に記載のシステム。
  27. 前記仮想メッセージオブジェクトが、ボール、管、又はカプセルの1つ以上を含むことを特徴とする、請求項16に記載のシステム。
  28. 前記仮想メッセージオブジェクトが、テキストメッセージ、インスタントメッセージ、Eメール、又はデータファイルの1つ以上を含むことを特徴とする、請求項16に記載のシステム。
  29. 前記データファイルが、ビデオファイル、オーディオファイル、画像ファイル、又はテキストファイルの1つ以上を含むことを特徴とする、請求項28に記載のシステム。
JP2014029131A 2008-07-15 2014-02-19 物理法則に基づく触覚メッセージングのためのシステム及び方法 Expired - Fee Related JP5899253B2 (ja)

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
US8098708P 2008-07-15 2008-07-15
US8098508P 2008-07-15 2008-07-15
US8098108P 2008-07-15 2008-07-15
US8097808P 2008-07-15 2008-07-15
US61/080,978 2008-07-15
US61/080,987 2008-07-15
US61/080,981 2008-07-15
US61/080,985 2008-07-15
US14831209P 2009-01-29 2009-01-29
US61/148,312 2009-01-29
US18128009P 2009-05-26 2009-05-26
US61/181,280 2009-05-26

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2011518852A Division JP5690726B2 (ja) 2008-07-15 2009-07-14 物理法則に基づく触覚メッセージングのためのシステム及び方法

Publications (2)

Publication Number Publication Date
JP2014139797A true JP2014139797A (ja) 2014-07-31
JP5899253B2 JP5899253B2 (ja) 2016-04-06

Family

ID=41119917

Family Applications (20)

Application Number Title Priority Date Filing Date
JP2011518849A Expired - Fee Related JP5997898B2 (ja) 2008-07-15 2009-07-14 触覚メッセージを送信するためのシステム及び方法
JP2011518856A Expired - Fee Related JP5762285B2 (ja) 2008-07-15 2009-07-14 触覚メッセージ送信のためのシステム及び方法
JP2011518852A Expired - Fee Related JP5690726B2 (ja) 2008-07-15 2009-07-14 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2011518847A Expired - Fee Related JP5410520B2 (ja) 2008-07-15 2009-07-14 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2011518850A Expired - Fee Related JP5337877B2 (ja) 2008-07-15 2009-07-14 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013162706A Expired - Fee Related JP5599922B2 (ja) 2008-07-15 2013-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013230455A Expired - Fee Related JP5642252B2 (ja) 2008-07-15 2013-11-06 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2014029131A Expired - Fee Related JP5899253B2 (ja) 2008-07-15 2014-02-19 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2014080346A Active JP5897631B2 (ja) 2008-07-15 2014-04-09 触覚メッセージを送信するためのシステム及び方法
JP2014087038A Expired - Fee Related JP6180360B2 (ja) 2008-07-15 2014-04-21 触覚メッセージ送信のためのシステム及び方法
JP2014164916A Expired - Fee Related JP6043763B2 (ja) 2008-07-15 2014-08-13 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2014219035A Expired - Fee Related JP5955369B2 (ja) 2008-07-15 2014-10-28 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2015116232A Expired - Fee Related JP6109877B2 (ja) 2008-07-15 2015-06-09 触覚メッセージ送信のためのシステム及び方法
JP2016039643A Expired - Fee Related JP6208791B2 (ja) 2008-07-15 2016-03-02 触覚メッセージを送信するためのシステム及び方法
JP2016154485A Expired - Fee Related JP6272960B2 (ja) 2008-07-15 2016-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2017097611A Expired - Fee Related JP6449934B2 (ja) 2008-07-15 2017-05-16 触覚メッセージ送信のためのシステム及び方法
JP2017171705A Expired - Fee Related JP6433556B2 (ja) 2008-07-15 2017-09-07 触覚メッセージを送信するためのシステム及び方法
JP2018000108A Active JP6548753B2 (ja) 2008-07-15 2018-01-04 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2018208902A Pending JP2019057302A (ja) 2008-07-15 2018-11-06 触覚メッセージを送信するためのシステム及び方法
JP2018229201A Pending JP2019071076A (ja) 2008-07-15 2018-12-06 触覚メッセージ送信のためのシステム及び方法

Family Applications Before (7)

Application Number Title Priority Date Filing Date
JP2011518849A Expired - Fee Related JP5997898B2 (ja) 2008-07-15 2009-07-14 触覚メッセージを送信するためのシステム及び方法
JP2011518856A Expired - Fee Related JP5762285B2 (ja) 2008-07-15 2009-07-14 触覚メッセージ送信のためのシステム及び方法
JP2011518852A Expired - Fee Related JP5690726B2 (ja) 2008-07-15 2009-07-14 物理法則に基づく触覚メッセージングのためのシステム及び方法
JP2011518847A Expired - Fee Related JP5410520B2 (ja) 2008-07-15 2009-07-14 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2011518850A Expired - Fee Related JP5337877B2 (ja) 2008-07-15 2009-07-14 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013162706A Expired - Fee Related JP5599922B2 (ja) 2008-07-15 2013-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2013230455A Expired - Fee Related JP5642252B2 (ja) 2008-07-15 2013-11-06 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法

Family Applications After (12)

Application Number Title Priority Date Filing Date
JP2014080346A Active JP5897631B2 (ja) 2008-07-15 2014-04-09 触覚メッセージを送信するためのシステム及び方法
JP2014087038A Expired - Fee Related JP6180360B2 (ja) 2008-07-15 2014-04-21 触覚メッセージ送信のためのシステム及び方法
JP2014164916A Expired - Fee Related JP6043763B2 (ja) 2008-07-15 2014-08-13 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2014219035A Expired - Fee Related JP5955369B2 (ja) 2008-07-15 2014-10-28 振動触覚メッセージングのためにメッセージコンテンツを仮想物理特性にマッピングするシステム及び方法
JP2015116232A Expired - Fee Related JP6109877B2 (ja) 2008-07-15 2015-06-09 触覚メッセージ送信のためのシステム及び方法
JP2016039643A Expired - Fee Related JP6208791B2 (ja) 2008-07-15 2016-03-02 触覚メッセージを送信するためのシステム及び方法
JP2016154485A Expired - Fee Related JP6272960B2 (ja) 2008-07-15 2016-08-05 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2017097611A Expired - Fee Related JP6449934B2 (ja) 2008-07-15 2017-05-16 触覚メッセージ送信のためのシステム及び方法
JP2017171705A Expired - Fee Related JP6433556B2 (ja) 2008-07-15 2017-09-07 触覚メッセージを送信するためのシステム及び方法
JP2018000108A Active JP6548753B2 (ja) 2008-07-15 2018-01-04 受動及び能動モード間で触覚フィードバック機能を転換するシステム及び方法
JP2018208902A Pending JP2019057302A (ja) 2008-07-15 2018-11-06 触覚メッセージを送信するためのシステム及び方法
JP2018229201A Pending JP2019071076A (ja) 2008-07-15 2018-12-06 触覚メッセージ送信のためのシステム及び方法

Country Status (6)

Country Link
US (20) US10019061B2 (ja)
EP (13) EP2327201B1 (ja)
JP (20) JP5997898B2 (ja)
KR (18) KR101956999B1 (ja)
CN (10) CN102160366B (ja)
WO (5) WO2010009149A2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10203756B2 (en) 2008-07-15 2019-02-12 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US10362430B2 (en) 2015-12-04 2019-07-23 Samsung Electronics Co., Ltd Audio providing method and device therefor

Families Citing this family (338)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000501033A (ja) * 1995-11-30 2000-02-02 ヴァーチャル テクノロジーズ インコーポレイテッド 触覚をフィードバックする人間/機械インターフェース
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
BRPI0804355A2 (pt) * 2008-03-10 2009-11-03 Lg Electronics Inc terminal e método de controle do mesmo
US8594740B2 (en) 2008-06-11 2013-11-26 Pantech Co., Ltd. Mobile communication terminal and data input method
USD618248S1 (en) * 2008-09-23 2010-06-22 Apple Inc. Graphical user interface for a display screen or portion thereof
US8004391B2 (en) 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US20100146395A1 (en) * 2008-12-08 2010-06-10 Gustavo De Los Reyes Method and System for Exploiting Interactions Via A Virtual Environment
KR20100086161A (ko) * 2009-01-22 2010-07-30 주식회사 팬택 바람 인식을 통한 동작 제어 장치 및 방법
US8572493B2 (en) * 2009-01-29 2013-10-29 Rick Qureshi Mobile device messaging application
JP4706985B2 (ja) * 2009-03-04 2011-06-22 コニカミノルタビジネステクノロジーズ株式会社 コンテンツ表示装置
US9927873B2 (en) 2009-03-12 2018-03-27 Immersion Corporation Systems and methods for using textures in graphical user interface widgets
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
US10007340B2 (en) 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
CN102362246B (zh) * 2009-03-12 2016-05-04 意美森公司 用于使用多个致动器实现纹理的系统和方法
KR101593598B1 (ko) * 2009-04-03 2016-02-12 삼성전자주식회사 휴대단말에서 제스처를 이용한 기능 실행 방법
WO2010119397A2 (en) * 2009-04-15 2010-10-21 Koninklijke Philips Electronics N.V. A foldable tactile display
US8009022B2 (en) * 2009-05-29 2011-08-30 Microsoft Corporation Systems and methods for immersive interaction with virtual objects
US20110029864A1 (en) * 2009-07-30 2011-02-03 Aaron Michael Stewart Touch-Optimized Approach for Controlling Computer Function Using Touch Sensitive Tiles
US20110029904A1 (en) * 2009-07-30 2011-02-03 Adam Miles Smith Behavior and Appearance of Touch-Optimized User Interface Elements for Controlling Computer Function
US8762886B2 (en) * 2009-07-30 2014-06-24 Lenovo (Singapore) Pte. Ltd. Emulating fundamental forces of physics on a virtual, touchable object
US8656314B2 (en) * 2009-07-30 2014-02-18 Lenovo (Singapore) Pte. Ltd. Finger touch gesture for joining and unjoining discrete touch objects
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
US20110084962A1 (en) * 2009-10-12 2011-04-14 Jong Hwan Kim Mobile terminal and image processing method therein
US9201584B2 (en) * 2009-11-06 2015-12-01 Bose Corporation Audio/visual device user interface with tactile feedback
US20110112821A1 (en) * 2009-11-11 2011-05-12 Andrea Basso Method and apparatus for multimodal content translation
US9621706B2 (en) * 2009-11-18 2017-04-11 Qualcomm Incorporated System and method of haptic communication at a portable computing device
US9046923B2 (en) * 2009-12-31 2015-06-02 Verizon Patent And Licensing Inc. Haptic/voice-over navigation assistance
US9436280B2 (en) * 2010-01-07 2016-09-06 Qualcomm Incorporated Simulation of three-dimensional touch sensation using haptics
JP5665322B2 (ja) * 2010-01-25 2015-02-04 京セラ株式会社 電子機器
CA2787831A1 (en) * 2010-01-28 2011-08-04 Liquor Monitor, Llc Dispensing monitor
WO2011100220A1 (en) 2010-02-09 2011-08-18 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
US8839150B2 (en) * 2010-02-10 2014-09-16 Apple Inc. Graphical objects that respond to touch or motion input
US8185596B2 (en) 2010-02-22 2012-05-22 Samsung Electronics Co., Ltd. Location-based communication method and system
EP3336658B1 (en) * 2010-03-01 2020-07-22 BlackBerry Limited Method of providing tactile feedback and apparatus
US9361018B2 (en) 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
JP5859512B2 (ja) * 2010-03-16 2016-02-10 イマージョン コーポレーションImmersion Corporation 触覚情報プリビューのためのシステムと方法
JP2011197777A (ja) * 2010-03-17 2011-10-06 Sony Corp 情報処理装置、情報処理方法およびプログラム
KR101640043B1 (ko) * 2010-04-14 2016-07-15 삼성전자주식회사 가상 세계 처리 장치 및 방법
US9110505B2 (en) * 2010-04-16 2015-08-18 Innovative Devices Inc. Wearable motion sensing computing interface
US9791928B2 (en) 2010-04-26 2017-10-17 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9715275B2 (en) 2010-04-26 2017-07-25 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9733705B2 (en) 2010-04-26 2017-08-15 Nokia Technologies Oy Apparatus, method, computer program and user interface
JP2012003508A (ja) * 2010-06-16 2012-01-05 Toshiba Corp 情報処理装置、方法及びプログラム
US9132352B1 (en) 2010-06-24 2015-09-15 Gregory S. Rabin Interactive system and method for rendering an object
US20120001856A1 (en) * 2010-07-02 2012-01-05 Nokia Corporation Responding to tactile inputs
KR20120005124A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 휴대용 단말기에서 움직임에 따른 동작을 수행하기 위한 장치 및 방법
US8798534B2 (en) * 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
US8988445B2 (en) * 2010-07-30 2015-03-24 The Trustees Of The University Of Pennsylvania Systems and methods for capturing and recreating the feel of surfaces
US8917249B1 (en) 2010-08-05 2014-12-23 Amazon Technologies, Inc. Reduction of touch-sensor interference from active display
US9329721B1 (en) * 2010-08-05 2016-05-03 Amazon Technologies, Inc. Reduction of touch-sensor interference from stable display
TWI492100B (zh) * 2010-08-25 2015-07-11 Fih Hong Kong Ltd 電子裝置及其解鎖方法
US20120054667A1 (en) * 2010-08-31 2012-03-01 Blackboard Inc. Separate and simultaneous control of windows in windowing systems
US10318002B2 (en) * 2010-09-15 2019-06-11 Inventus Engineering Gmbh Magnetorheological transmission device
KR101708821B1 (ko) * 2010-09-30 2017-02-21 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8564535B2 (en) 2010-10-05 2013-10-22 Immersion Corporation Physical model based gesture recognition
US9483786B2 (en) 2011-10-13 2016-11-01 Gift Card Impressions, LLC Gift card ordering system and method
WO2012063123A2 (en) * 2010-11-09 2012-05-18 WOOW Inc. Limited Apparatus and method for physical interaction over a distance using a telecommunication device
JP6203637B2 (ja) * 2010-11-09 2017-09-27 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 触覚型フィードバックを備えたユーザインタフェース
JP5479414B2 (ja) * 2010-11-24 2014-04-23 キヤノン株式会社 情報処理装置およびその制御方法
US11314344B2 (en) * 2010-12-03 2022-04-26 Razer (Asia-Pacific) Pte. Ltd. Haptic ecosystem
US9201467B2 (en) 2011-01-26 2015-12-01 Sony Corporation Portable terminal having user interface function, display method, and computer program
JP5654886B2 (ja) * 2011-01-26 2015-01-14 株式会社ソニー・コンピュータエンタテインメント 携帯端末、表示方法及びコンピュータプログラム
US9990856B2 (en) 2011-02-08 2018-06-05 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
US9542000B2 (en) * 2011-02-10 2017-01-10 Kyocera Corporation Electronic device and control method for electronic device
WO2012115651A1 (en) * 2011-02-24 2012-08-30 Empire Technology Development Llc Authentication using mobile devices
EP2498250B1 (en) * 2011-03-07 2021-05-05 Accenture Global Services Limited Client and server system for natural language-based control of a digital network of devices
US8872854B1 (en) * 2011-03-24 2014-10-28 David A. Levitt Methods for real-time navigation and display of virtual worlds
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
US9448713B2 (en) * 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
JP2012242927A (ja) * 2011-05-17 2012-12-10 Seiko Epson Corp 移動端末装置、移動端末装置の制御方法、及び、プログラム
US8710967B2 (en) 2011-05-18 2014-04-29 Blackberry Limited Non-visual presentation of information on an electronic wireless device
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
US20130033366A1 (en) * 2011-08-01 2013-02-07 Mcdonough Colin Albright Method and system for providing haptic feedback of variable intensity
WO2013022021A1 (ja) * 2011-08-09 2013-02-14 株式会社ニコン 電子機器
US9762719B2 (en) 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
US9501150B2 (en) 2011-10-01 2016-11-22 Oracle International Corporation Moving an object about a display frame by combining classical mechanics of motion
WO2013051662A1 (ja) 2011-10-04 2013-04-11 株式会社ニコン 電子機器
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
KR102054370B1 (ko) * 2011-11-23 2019-12-12 삼성전자주식회사 햅틱 피드백 방법 및 장치, 기계로 읽을 수 있는 저장 매체 및 휴대용 통신 단말
CN102692997A (zh) * 2011-11-25 2012-09-26 北京十分科技有限公司 一种控制终端操作的方法
US8381102B1 (en) 2011-12-06 2013-02-19 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US20150205473A1 (en) * 2011-12-06 2015-07-23 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US20130227411A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Sensation enhanced messaging
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
EP2795936B1 (en) * 2011-12-20 2019-06-26 Intel Corporation User-to-user communication enhancement with augmented reality
WO2013095400A1 (en) * 2011-12-20 2013-06-27 Intel Corporation Local sensor augmentation of stored content and ar communication
KR101655876B1 (ko) * 2012-01-05 2016-09-09 삼성전자 주식회사 메시지 기반의 대화 기능 운용 방법 및 이를 지원하는 단말기
JP5777217B2 (ja) * 2012-01-26 2015-09-09 Kddi株式会社 押圧操作で動作モードが起動可能なユーザインタフェース装置、動作モード起動方法及びプログラム
US10430865B2 (en) 2012-01-30 2019-10-01 Gift Card Impressions, LLC Personalized webpage gifting system
US20130196293A1 (en) * 2012-01-31 2013-08-01 Michael C. Wood Phonic learning using a mobile computing device having motion sensing capabilities
KR20130088281A (ko) * 2012-01-31 2013-08-08 삼성전자주식회사 디스플레이장치, 업그레이드장치, 그 제어방법 및 디스플레이 시스템
US9083546B2 (en) 2012-01-31 2015-07-14 Rajendra Padma Sadhu System and method for communicating health parameters of an occupant in an automobile and a dynamic operation of the automobile and home automation
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
US20120223880A1 (en) * 2012-02-15 2012-09-06 Immersion Corporation Method and apparatus for producing a dynamic haptic effect
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
JP6541292B2 (ja) * 2012-02-15 2019-07-10 イマージョン コーポレーションImmersion Corporation プリミティブを用いた高解像度ハプティック効果生成
US9702723B2 (en) * 2012-03-01 2017-07-11 Nokia Technologies Oy Method and apparatus for receiving user estimation of navigational instructions
TWI626591B (zh) * 2012-03-01 2018-06-11 群邁通訊股份有限公司 應用程式切換系統及方法
CN102624981A (zh) * 2012-03-07 2012-08-01 华为终端有限公司 一种数据传输方法及装置
US20130254233A1 (en) * 2012-03-20 2013-09-26 Avaya Inc. System and method for context-sensitive address book
CN102662576B (zh) * 2012-03-29 2015-04-29 华为终端有限公司 基于触摸的信息发送方法及装置
CN102662578B (zh) * 2012-03-29 2015-06-17 华为终端有限公司 一种桌面容器的切换控制方法及终端
CN103389849B (zh) * 2012-05-07 2018-10-16 腾讯科技(北京)有限公司 一种基于移动终端的图像展示方法、系统和移动终端
CN108241465B (zh) 2012-05-09 2021-03-09 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的方法和装置
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169877A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting user interface objects
EP2847657B1 (en) 2012-05-09 2016-08-10 Apple Inc. Device, method, and graphical user interface for displaying additional information in response to a user contact
AU2013259614B2 (en) 2012-05-09 2016-08-25 Apple Inc. Device, method, and graphical user interface for providing feedback for changing activation states of a user interface object
WO2013169882A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving and dropping a user interface object
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
KR102413059B1 (ko) * 2012-05-11 2022-06-23 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기, 기억 매체, 프로그램, 및 표시 방법
US20130311881A1 (en) * 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US8570296B2 (en) 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US9313290B2 (en) * 2012-05-17 2016-04-12 Ncr Corporation Data transfer between devices
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
JPWO2014006709A1 (ja) * 2012-07-04 2016-06-02 株式会社Hugg メッセージングシステムおよびメッセージ送信方法
US9030428B2 (en) * 2012-07-11 2015-05-12 Immersion Corporation Generating haptic effects for dynamic events
EP2688321B1 (en) * 2012-07-18 2015-06-24 BlackBerry Limited Method and apparatus for motion based ping during chat mode
US8914453B2 (en) * 2012-07-18 2014-12-16 Blackberry Limited Method and apparatus for motion based ping during chat mode
GB201215283D0 (en) * 2012-08-28 2012-10-10 Microsoft Corp Searching at a user device
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
CN106951169B (zh) * 2012-09-03 2021-05-18 联想(北京)有限公司 电子设备及其信息处理方法
CN103677242A (zh) * 2012-09-24 2014-03-26 联想(北京)有限公司 一种反馈模式确定的方法及电子设备
US8842969B2 (en) * 2012-09-28 2014-09-23 Intel Corporation Haptic playback of video
US9430991B2 (en) 2012-10-02 2016-08-30 Futurewei Technologies, Inc. User interface display composition with device sensor/state based graphical effects
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US20150212647A1 (en) 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
US10168775B2 (en) * 2012-10-10 2019-01-01 Innovative Devices Inc. Wearable motion sensing computing interface
CN103777797B (zh) * 2012-10-23 2017-06-27 联想(北京)有限公司 一种信息处理的方法及电子设备
KR20140068410A (ko) * 2012-11-28 2014-06-09 삼성전자주식회사 물리 엔진 기반의 사용자 인터페이스를 제공하는 방법 및 그 전자 장치
WO2014084374A1 (ja) * 2012-11-30 2014-06-05 日本電気株式会社 通信システム、通信方法、通信装置、プログラム、及び記録媒体
WO2014088470A2 (en) * 2012-12-07 2014-06-12 Yota Devices Ipr Limited Haptic message
US9046926B2 (en) 2012-12-17 2015-06-02 International Business Machines Corporation System and method of dynamically generating a frequency pattern to realize the sense of touch in a computing device
CN103902081B (zh) * 2012-12-27 2018-04-27 联想(北京)有限公司 触感反馈的方法及电子设备
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
AU2013368445B8 (en) 2012-12-29 2017-02-09 Apple Inc. Device, method, and graphical user interface for determining whether to scroll or select contents
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
US9501201B2 (en) * 2013-02-18 2016-11-22 Ebay Inc. System and method of modifying a user experience based on physical environment
US9202352B2 (en) 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
US9547366B2 (en) * 2013-03-14 2017-01-17 Immersion Corporation Systems and methods for haptic and gesture-driven paper simulation
US9866924B2 (en) * 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
FR3003362B1 (fr) * 2013-03-14 2015-04-03 Univ Compiegne Tech Procede et systeme de communication tactile
US9189098B2 (en) 2013-03-14 2015-11-17 Immersion Corporation Systems and methods for syncing haptic feedback calls
US9041647B2 (en) * 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
JP2014194363A (ja) * 2013-03-28 2014-10-09 Fujitsu Ltd 誘導装置、誘導方法、及びプログラム
JP6354750B2 (ja) * 2013-04-01 2018-07-11 日本電気株式会社 コミュニティサービスシステム及びコミュニティサービス方法
CN103220424B (zh) * 2013-04-10 2016-03-02 广东欧珀移动通信有限公司 移动终端的信息发送方法及装置
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9405369B2 (en) * 2013-04-26 2016-08-02 Immersion Corporation, Inc. Simulation of tangible user interface interactions and gestures using array of haptic cells
WO2014190293A2 (en) * 2013-05-24 2014-11-27 New York University Haptic force-feedback for computing interfaces
US9454251B1 (en) 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
US9729730B2 (en) 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US20150043311A1 (en) * 2013-08-09 2015-02-12 Your Voice S.P.A. Execution of commands in an electronic device
US10037081B2 (en) 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
JP6428623B2 (ja) * 2013-08-29 2018-11-28 ソニー株式会社 リストバンド型情報処理装置、情報処理システム、情報処理方法及びプログラム
US9443401B2 (en) 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9652945B2 (en) 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
WO2015043642A1 (en) * 2013-09-26 2015-04-02 Longsand Limited Device notifications
US9888333B2 (en) * 2013-11-11 2018-02-06 Google Technology Holdings LLC Three-dimensional audio rendering techniques
US9639158B2 (en) 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects
US9374688B2 (en) * 2013-11-28 2016-06-21 Lg Electronics Inc. Mobile terminal and method for controlling the same
KR102026731B1 (ko) * 2013-12-17 2019-09-30 엘지전자 주식회사 이동단말기 및 그 제어방법
WO2015080773A1 (en) * 2013-11-30 2015-06-04 Empire Technology Development Llc Augmented reality objects based on biometric feedback
CN103713822B (zh) * 2013-12-27 2017-09-29 联想(北京)有限公司 一种信息处理方法及第一电子设备
CN103645833B (zh) * 2013-12-27 2017-06-27 联想(北京)有限公司 一种信息处理方法及电子设备
JP6664069B2 (ja) * 2013-12-31 2020-03-13 イマージョン コーポレーションImmersion Corporation 触覚コンテンツを伴う視点動画を記録及び再生するシステム並びに方法
JP6289100B2 (ja) * 2014-01-06 2018-03-07 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10437341B2 (en) * 2014-01-16 2019-10-08 Immersion Corporation Systems and methods for user generated content authoring
CN103885708A (zh) * 2014-02-28 2014-06-25 宇龙计算机通信科技(深圳)有限公司 触觉交互的方法及系统
CN104902064A (zh) * 2014-03-07 2015-09-09 宇龙计算机通信科技(深圳)有限公司 一种短消息显示系统、方法及终端
US10067566B2 (en) 2014-03-19 2018-09-04 Immersion Corporation Systems and methods for a shared haptic experience
WO2015143124A1 (en) * 2014-03-21 2015-09-24 Immersion Corporation Systems and methods for haptically-enabled curved devices
US9471144B2 (en) 2014-03-31 2016-10-18 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US9104237B1 (en) * 2014-03-31 2015-08-11 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US10437447B1 (en) * 2014-03-31 2019-10-08 Amazon Technologies, Inc. Magnet based physical model user interface control
US9606710B1 (en) 2014-03-31 2017-03-28 Amazon Technologies, Inc. Configuring movement-based user interface control
US20150332534A1 (en) * 2014-05-15 2015-11-19 Narvii Inc. Systems and methods implementing user interface objects
KR102125207B1 (ko) 2014-05-31 2020-06-22 삼성전자 주식회사 전자 장치 및 애플리케이션 실행 방법
WO2016007426A1 (en) 2014-07-07 2016-01-14 Immersion Corporation Second screen haptics
US11163367B2 (en) 2014-07-17 2021-11-02 Signify Holding B.V. Method of obtaining gesture zone definition data for a control system based on user input
USD763885S1 (en) * 2014-07-24 2016-08-16 Beijing Qihoo Technology Co. Ltd Display screen with a graphical user interface
AU2015306091B2 (en) * 2014-08-20 2021-04-01 Touchgram Pty Ltd A system and a method for sending a touch message
US9690381B2 (en) * 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
US10795567B2 (en) * 2014-08-22 2020-10-06 Zoho Corporation Private Limited Multimedia applications and user interfaces
DE202015006142U1 (de) 2014-09-02 2015-12-09 Apple Inc. Elektronische Touch-Kommunikation
WO2016036427A1 (en) * 2014-09-02 2016-03-10 Apple Inc. Electronic device with rotatable input mechanism
EP3964931A1 (en) 2014-09-02 2022-03-09 Apple Inc. Semantic framework for variable haptic output
CN105396289A (zh) * 2014-09-15 2016-03-16 掌赢信息科技(上海)有限公司 实时游戏和多媒体会话过程中实现特效的方法及装置
JP5848811B2 (ja) * 2014-10-01 2016-01-27 シャープ株式会社 送信機、受信機、およびプログラム
KR20170081225A (ko) * 2014-11-05 2017-07-11 밸브 코포레이션 가상 현실 환경에서 사용자를 안내하기 위한 감각 피드백 시스템 및 방법
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US20170228363A1 (en) * 2014-11-26 2017-08-10 Sony Corporation Information processing device, method of information processing, and program
US9971406B2 (en) * 2014-12-05 2018-05-15 International Business Machines Corporation Visually enhanced tactile feedback
US9658693B2 (en) * 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
GB2533572A (en) * 2014-12-22 2016-06-29 Nokia Technologies Oy Haptic output methods and devices
US9478109B2 (en) * 2014-12-29 2016-10-25 Immersion Corporation Virtual sensor in a virtual environment
CN115048007A (zh) * 2014-12-31 2022-09-13 创新先进技术有限公司 调整界面操作图标分布范围的装置、方法及触摸屏设备
KR20160088081A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 영상 촬영 기기의 햅틱 인터페이스 및 이의 제어 방법
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) * 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
JP6133344B2 (ja) * 2015-03-10 2017-05-24 株式会社コロプラ ヘッドマウントディスプレイへ表示するためのユーザインタフェース表示方法、及びプログラム
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9571624B2 (en) * 2015-03-24 2017-02-14 Intel IP Corporation Apparatus, system and method of terminating a docking session between a mobile device and a docking device
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US9952669B2 (en) 2015-04-21 2018-04-24 Immersion Corporation Dynamic rendering of etching input
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
JP5945621B2 (ja) * 2015-06-15 2016-07-05 Kddi株式会社 押圧操作で動作状態を切り替え可能なユーザインタフェース装置、動作状態切り替え方法及びプログラム
WO2016208099A1 (ja) * 2015-06-24 2016-12-29 パナソニックIpマネジメント株式会社 情報処理装置、情報処理装置に対する入力を制御する入力制御方法及び入力制御方法を情報処理装置に実行させるためのプログラム
US9661131B2 (en) * 2015-06-24 2017-05-23 Mast Mobile, Inc. Billing policy management for multi-number phones
GB2540206B (en) * 2015-07-10 2018-02-07 Advanced Risc Mach Ltd Apparatus and method for executing instruction using range information associated with a pointer
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10007304B2 (en) 2015-08-20 2018-06-26 Mediatek Inc. Portable device and related vibration detecting method
US10303345B2 (en) * 2015-08-28 2019-05-28 Google Llc Transferring notifications between devices
US10484512B2 (en) 2015-08-31 2019-11-19 Ayla Networks, Inc. Management of multi-radio gateway device using virtual gateway device
US10404832B2 (en) * 2015-08-31 2019-09-03 Ayla Networks, Inc. Management of gateway device using virtual gateway device
US10248207B2 (en) 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
DE112015006884T5 (de) * 2015-10-29 2018-05-30 Ford Global Technologies, Llc Fahrzeugeigene haptische Ausgabe
US10587542B2 (en) 2015-11-13 2020-03-10 Sony Corporation Communication system and storage medium for transmitting physical expression information
US10009847B2 (en) * 2015-11-18 2018-06-26 Paypal, Inc. System configurations based on tilt detection
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US9679547B1 (en) * 2016-04-04 2017-06-13 Disney Enterprises, Inc. Augmented reality music composition
KR101928550B1 (ko) 2016-04-21 2018-12-12 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
WO2017183821A1 (ko) * 2016-04-21 2017-10-26 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
US9805514B1 (en) * 2016-04-21 2017-10-31 Microsoft Technology Licensing, Llc Dynamic haptic retargeting
EP3242187B1 (en) 2016-05-04 2018-11-21 Vestel Elektronik Sanayi ve Ticaret A.S. System and method for simulating a reaction force from a virtual object
BR112018073693A2 (pt) 2016-05-18 2019-02-26 Apple Inc dispositivos, métodos, e interfaces gráficas de usuário para mensagens
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
US9983675B2 (en) 2016-06-10 2018-05-29 Immersion Corporation Systems and methods for monitoring insulation integrity for electrostatic friction
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK180122B1 (en) 2016-06-12 2020-05-19 Apple Inc. Devices, methods and graphical user interfaces for providing haptic feedback
US10073525B2 (en) 2016-06-16 2018-09-11 Immersion Corporation Systems and methods for a low profile haptic actuator
US10401962B2 (en) 2016-06-21 2019-09-03 Immersion Corporation Haptically enabled overlay for a pressure sensitive surface
US10004991B2 (en) 2016-06-28 2018-06-26 Hothead Games Inc. Systems and methods for customized camera views in virtualized environments
TWI677816B (zh) * 2016-08-11 2019-11-21 國立臺灣師範大學 傳送虛擬物體的方法及電子系統
JP6401758B2 (ja) * 2016-08-25 2018-10-10 株式会社ファセテラピー 触質コンテンツ生成装置、触質コンテンツ生成方法および触質コンテンツ利用機器
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
US10884502B2 (en) 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
EP3550438A4 (en) * 2016-12-05 2019-11-20 Sony Corporation INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, PROGRAM, AND INFORMATION PROCESSING SYSTEM
US20180188905A1 (en) * 2017-01-04 2018-07-05 Google Inc. Generating messaging streams with animated objects
CN107015639B (zh) * 2017-01-24 2020-02-04 瑞声科技(新加坡)有限公司 触觉反馈的动态范围控制方法、触觉反馈系统及电子终端
WO2018152778A1 (en) * 2017-02-24 2018-08-30 Immersion Corporation Virtual affective touch
USD868080S1 (en) * 2017-03-27 2019-11-26 Sony Corporation Display panel or screen with an animated graphical user interface
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US10845955B2 (en) 2017-05-15 2020-11-24 Apple Inc. Displaying a scrollable list of affordances associated with physical activities
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
JP6991754B2 (ja) * 2017-07-03 2022-01-13 株式会社ミツトヨ 端末装置およびプログラム
US11379042B2 (en) 2017-07-10 2022-07-05 Telefonaktiebolaget Lm Ericsson (Publ) Transmission of haptic input
US10915174B1 (en) * 2017-07-20 2021-02-09 Apple Inc. Electronic devices with directional haptic output
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
US10455320B2 (en) 2017-08-02 2019-10-22 Body Beats, Llc System, method and apparatus for translating, converting and/or transforming audio energy into haptic and/or visual representation
US20190163271A1 (en) * 2017-11-27 2019-05-30 Immersion Corporation Systems and methods for providing haptic feedback according to tilt-based inputs
CN108109186B (zh) * 2017-11-30 2021-06-11 维沃移动通信有限公司 一种视频文件处理方法、装置及移动终端
US10818152B2 (en) * 2018-01-15 2020-10-27 Universal City Studios Llc Interactive systems and methods with feedback devices
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
JP1618150S (ja) * 2018-02-09 2018-11-19
DK179980B1 (en) * 2018-03-12 2019-11-27 Apple Inc. USER INTERFACES FOR HEALTH MONITORING
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10832537B2 (en) 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
EP3563937B1 (en) * 2018-05-02 2021-12-22 Goodix Technology (HK) Company Limited Haptic actuator controller
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11317833B2 (en) 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. DISPLAY OF USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
US11504201B2 (en) 2018-05-31 2022-11-22 Covidien Lp Haptic touch feedback surgical device for palpating tissue
US10649532B2 (en) * 2018-06-15 2020-05-12 Immersion Corporation Systems and methods for multi-rate control of haptic effects with sensor fusion
WO2020017813A1 (ko) * 2018-07-19 2020-01-23 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
KR102175566B1 (ko) * 2018-07-19 2020-11-06 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
CN112805660A (zh) * 2018-08-02 2021-05-14 萤火维度有限公司 用于人与虚拟对象交互的系统和方法
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
KR20200025817A (ko) 2018-08-31 2020-03-10 (주)뉴빌리티 비언어 기반의 정보 전달 방법 및 장치
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
EP3650960A1 (fr) * 2018-11-07 2020-05-13 Tissot S.A. Procede de diffusion d'un message par une montre
KR20200052540A (ko) * 2018-11-07 2020-05-15 (주)리얼감 밀도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
USD912699S1 (en) * 2018-11-15 2021-03-09 Biosense Webster (Israel) Ltd. Display screen or portion thereof with icon
US10834543B2 (en) * 2018-11-26 2020-11-10 International Business Machines Corporation Creating a social group with mobile phone vibration
US20200192480A1 (en) * 2018-12-18 2020-06-18 Immersion Corporation Systems and methods for providing haptic effects based on a user's motion or environment
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US11283337B2 (en) 2019-03-29 2022-03-22 Cirrus Logic, Inc. Methods and systems for improving transducer dynamics
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US11234077B2 (en) 2019-06-01 2022-01-25 Apple Inc. User interfaces for managing audio exposure
DK201970534A1 (en) 2019-06-01 2021-02-16 Apple Inc User interfaces for monitoring noise exposure levels
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
US11228835B2 (en) 2019-06-01 2022-01-18 Apple Inc. User interfaces for managing audio exposure
US11209957B2 (en) 2019-06-01 2021-12-28 Apple Inc. User interfaces for cycle tracking
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
US10976825B2 (en) * 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
WO2020254788A1 (en) 2019-06-21 2020-12-24 Cirrus Logic International Semiconductor Limited A method and apparatus for configuring a plurality of virtual buttons on a device
US10560563B1 (en) * 2019-06-25 2020-02-11 Bouton Sms Inc. Haptic device
JP2021018546A (ja) * 2019-07-18 2021-02-15 トヨタ自動車株式会社 車両用コミュニケーション装置および車両用コミュニケーションシステム
CN110496392B (zh) * 2019-08-23 2020-12-01 腾讯科技(深圳)有限公司 虚拟对象的控制方法、装置、终端及存储介质
CN114706505A (zh) 2019-09-09 2022-07-05 苹果公司 调查研究用户界面
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
JP2021117766A (ja) * 2020-01-27 2021-08-10 富士通株式会社 表示制御プログラム、表示制御方法、及び表示制御装置
EP4100813A1 (en) 2020-03-12 2022-12-14 Google LLC Controlling haptic feedback based on proximity of contact to sensor
WO2021193421A1 (ja) * 2020-03-27 2021-09-30 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム及び情報処理システム
US11960651B2 (en) * 2020-03-30 2024-04-16 Snap Inc. Gesture-based shared AR session creation
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
US20210326594A1 (en) * 2020-04-17 2021-10-21 James Patrick COSTELLO Computer-generated supplemental content for video
US11747857B2 (en) 2020-06-02 2023-09-05 Futurisks, LLC Wearable security device and charging band, system and method
DK181037B1 (en) 2020-06-02 2022-10-10 Apple Inc User interfaces for health applications
US11698710B2 (en) 2020-08-31 2023-07-11 Apple Inc. User interfaces for logging user activities
EP4202608A4 (en) * 2020-09-09 2024-01-17 Sony Group Corp TOUCH PRESENTATION DEVICE, TOUCH PRESENTATION SYSTEM, TOUCH PRESENTATION CONTROL METHOD, AND PROGRAM
US11482002B1 (en) * 2020-10-16 2022-10-25 Splunk Inc. Codeless anchor detection for detectable features in an environment
EP4272062A1 (en) * 2020-12-31 2023-11-08 Snap Inc. Communication interface with haptic feedback response
US20220317773A1 (en) * 2021-03-31 2022-10-06 Snap Inc. Real-time communication interface with haptic and audio feedback response
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
CN114296597A (zh) * 2021-12-01 2022-04-08 腾讯科技(深圳)有限公司 虚拟场景中的对象交互方法、装置、设备及存储介质
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths
WO2023108131A1 (en) * 2021-12-10 2023-06-15 Shaw Industries Group, Inc. Visceral surface covering simulator and method of use
WO2024034045A1 (ja) * 2022-08-10 2024-02-15 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1133229A (ja) * 1997-07-17 1999-02-09 Nintendo Co Ltd ビデオゲームシステム
US20040058718A1 (en) * 2002-09-19 2004-03-25 Samsung Electronics Co., Ltd. Method for giving notice of an incoming call in a mobile communication terminal
JP2004164242A (ja) * 2002-11-12 2004-06-10 Sony Computer Entertainment Inc ファイル処理方法とこの方法を利用可能な装置
JP2004521424A (ja) * 2001-03-30 2004-07-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 1対1の直接通信
GB2416962A (en) * 2004-08-05 2006-02-08 Vodafone Plc Haptic communication in mobile telecommunications networks
US20060061545A1 (en) * 2004-04-02 2006-03-23 Media Lab Europe Limited ( In Voluntary Liquidation). Motion-activated control with haptic feedback
US20070049301A1 (en) * 2005-08-30 2007-03-01 Motorola, Inc. Articulating emotional response to messages
US20070139366A1 (en) * 2005-12-21 2007-06-21 Dunko Gregory A Sharing information between devices
JP2007531158A (ja) * 2004-03-31 2007-11-01 モトローラ・インコーポレイテッド コンテンツの管理及び制御の方法及び装置
JP2008546360A (ja) * 2005-06-10 2008-12-18 ジェミナイ モバイル テクノロジーズ,インコーポレーテッド メッセージ作成者の状態情報伝達システム及び方法
JP2009217805A (ja) * 2008-03-10 2009-09-24 Korea Research Inst Of Standards & Science 触感フィードバック装置を用いた触感伝達方法、及びそのシステム
JP2011528476A (ja) * 2008-07-15 2011-11-17 イマージョン コーポレイション 物理法則に基づく触覚メッセージングのためのシステム及び方法

Family Cites Families (208)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2001A (en) * 1841-03-12 Sawmill
CH593295A5 (ja) 1972-04-13 1977-11-30 Ciba Geigy Ag
JPS5410520A (en) 1977-06-27 1979-01-26 Seiji Kajimoto Method of making roof
JPS5690726A (en) 1979-12-20 1981-07-23 Aisin Warner Ltd Transfer device for four wheel drive
JPS5793426A (en) 1980-11-29 1982-06-10 Toshiba Corp Key input device
DE3333538A1 (de) * 1983-09-16 1985-03-28 Bandag Inc., Muscatine, Ia. Verfahren zum herstellen von ueberzuegen insbesondere fuer die runderneuerung und reparatur von kraftfahrzeugreifen
US4873623A (en) * 1985-04-30 1989-10-10 Prometrix Corporation Process control interface with simultaneously displayed three level dynamic menu
JPH04249835A (ja) 1990-12-28 1992-09-04 Nec Corp 熱伝導冷却形マイクロ波管装置
JP3085481B2 (ja) * 1991-09-28 2000-09-11 株式会社ニコン 反射屈折縮小投影光学系、及び該光学系を備えた露光装置
JP2827612B2 (ja) * 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
JPH05152054A (ja) 1991-11-29 1993-06-18 Tokyo Tekko Kk 除電装置用放電電極とその製造方法
JP2502914B2 (ja) 1992-07-31 1996-05-29 インターナショナル・ビジネス・マシーンズ・コーポレイション デ―タ転送方法及び装置
US6433771B1 (en) * 1992-12-02 2002-08-13 Cybernet Haptic Systems Corporation Haptic device attribute control
JPH06242886A (ja) 1993-02-10 1994-09-02 Canon Inc 電子メールシステム
US6903723B1 (en) 1995-03-27 2005-06-07 Donald K. Forest Data entry method and apparatus
US5666499A (en) 1995-08-04 1997-09-09 Silicon Graphics, Inc. Clickaround tool-based graphical interface with two cursors
US5999168A (en) * 1995-09-27 1999-12-07 Immersion Corporation Haptic accelerator for force feedback computer peripherals
US6374255B1 (en) * 1996-05-21 2002-04-16 Immersion Corporation Haptic authoring
JPH10240434A (ja) 1997-02-27 1998-09-11 Matsushita Electric Ind Co Ltd コマンドメニュー選択方法
JPH10254344A (ja) * 1997-03-14 1998-09-25 Atr Chinou Eizo Tsushin Kenkyusho:Kk 協調物体操作装置
JPH1115600A (ja) 1997-04-28 1999-01-22 Matsushita Electric Ind Co Ltd 一方の端末に作用する物理量も送信し受信画像を加工することのできる通信端末及びそれに供する送信端末並びに受信端末
US6522417B1 (en) * 1997-04-28 2003-02-18 Matsushita Electric Industrial Co., Ltd. Communication terminal device that processes received images and transmits physical quantities that affect the receiving communication terminal device
JPH10341253A (ja) 1997-06-05 1998-12-22 Rikuruuto:Kk 宛先及び発信者を特定しない電子メールを送受信する電子メールクライアント装置とサーバ装置、及びそれらを接続してなる電子メールシステム
JP4149574B2 (ja) 1997-08-29 2008-09-10 ゼロックス コーポレイション ユーザインターフェースサポートデバイス、及び情報入力方法
US6211861B1 (en) * 1998-06-23 2001-04-03 Immersion Corporation Tactile mouse device
JP3216084B2 (ja) * 1998-01-19 2001-10-09 株式会社ネットワークコミュニティクリエイション チャット画面表示方法
TW404846B (en) * 1998-01-23 2000-09-11 Koninkl Philips Electronics Nv Multiperson tactual virtual environment
US7844914B2 (en) * 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
JPH11224152A (ja) * 1998-02-05 1999-08-17 Ricoh Co Ltd 遠隔会議支援システム
US6429846B2 (en) * 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6573883B1 (en) * 1998-06-24 2003-06-03 Hewlett Packard Development Company, L.P. Method and apparatus for controlling a computing device with gestures
JP3449937B2 (ja) * 1999-01-14 2003-09-22 日本電信電話株式会社 パノラマ画像作成方法及びパノラマ画像を用いた周囲状況伝達方法並びにこれらの方法を記録した記録媒体
US20060279542A1 (en) * 1999-02-12 2006-12-14 Vega Vista, Inc. Cellular phones and mobile devices with motion driven control
JP4244784B2 (ja) * 1999-03-17 2009-03-25 富士ゼロックス株式会社 駆動力発生装置
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
JP2000325653A (ja) 1999-05-19 2000-11-28 Enix Corp 携帯型ビデオゲーム装置およびプログラムを格納した記録媒体
JP4233000B2 (ja) * 1999-07-05 2009-03-04 日本電信電話株式会社 仮想空間における風圧による力覚提示装置
US6496200B1 (en) * 1999-11-02 2002-12-17 Interval Research Corp. Flexible variation of haptic interface resolution
US6822635B2 (en) * 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
JP2001350570A (ja) 2000-06-08 2001-12-21 Yazaki Corp 多機能スイッチ装置
US7159008B1 (en) 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
JP2002035431A (ja) * 2000-07-28 2002-02-05 Yokogawa Electric Corp 遠隔ゲーム機
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6639582B1 (en) * 2000-08-10 2003-10-28 International Business Machines Corporation System for combining haptic sensory-motor effects from two separate input devices into resultant sensory-motor effects and for feedback of such resultant effects between the input devices
JP2002123840A (ja) * 2000-10-17 2002-04-26 Nippon Telegr & Teleph Corp <Ntt> 臨場感型仮想現実提供処理方法および装置
JP2002140166A (ja) * 2000-11-02 2002-05-17 Kddi Corp タッチパネルディスプレイに触れた指に触感を与えるデバイス
US7128266B2 (en) 2003-11-13 2006-10-31 Metrologic Instruments. Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
WO2002056272A1 (en) 2000-12-27 2002-07-18 Nokia Corporation Portable vibrating device with adjustable amplitude
WO2002057885A2 (en) * 2001-01-16 2002-07-25 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
JP2002334097A (ja) * 2001-02-09 2002-11-22 Seiko Epson Corp サービス提供システム、管理端末、移動体、サービス提供プログラム及びサービス提供方法
FI20010817A (fi) * 2001-04-20 2003-02-14 Nokia Corp Menetelmä informaation esittämiseksi elektroniikkalaitteen näytöllä ja elektroniikkalaite
US6963762B2 (en) * 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
JP2002366852A (ja) * 2001-06-11 2002-12-20 Hiitoshinku:Kk 情報提供方法、情報処理システム、情報取得プログラム、及び情報記憶媒体
GB0117543D0 (en) 2001-07-18 2001-09-12 Hewlett Packard Co Document viewing device
JP2003051027A (ja) * 2001-08-03 2003-02-21 Namco Ltd ゲーム情報、情報記憶媒体、及びゲーム装置
JP2003078960A (ja) * 2001-09-03 2003-03-14 Ntt Power & Building Facilities Inc 携帯端末装置によるメールシステム
JP2003085590A (ja) 2001-09-13 2003-03-20 Nippon Telegr & Teleph Corp <Ntt> 3次元情報操作方法およびその装置,3次元情報操作プログラムならびにそのプログラムの記録媒体
US7032188B2 (en) * 2001-09-28 2006-04-18 Nokia Corporation Multilevel sorting and displaying of contextual objects
US20030063067A1 (en) 2001-10-02 2003-04-03 Ping-Yang Chuang Real-time handwritten communication system
US7225115B2 (en) * 2001-10-04 2007-05-29 Novint Technologies, Inc. Coordinating haptics with visual images in a human-computer interface
US7623114B2 (en) * 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
NO315679B1 (no) 2001-10-19 2003-10-06 Dmates As Rik kommunikasjon over internett
FI115861B (fi) 2001-11-12 2005-07-29 Myorigo Oy Menetelmä ja laite palautteen generoimiseksi
US8000724B1 (en) 2001-11-14 2011-08-16 Sprint Spectrum L.P. Method and system for subnet-based transmission of mobile station location
JP2003177864A (ja) 2001-12-13 2003-06-27 Fuji Photo Film Co Ltd 情報端末システム
JP2003188945A (ja) 2001-12-13 2003-07-04 Samsung Yokohama Research Institute Co Ltd 携帯端末装置
JP2003188946A (ja) 2001-12-17 2003-07-04 Nec Corp 携帯電話端末及びその機能設定方法
JP3975480B2 (ja) * 2001-12-20 2007-09-12 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
US7002553B2 (en) 2001-12-27 2006-02-21 Mark Shkolnikov Active keyboard system for handheld electronic devices
US7347815B2 (en) * 2002-02-12 2008-03-25 Razz Serbanescu Method and apparatus for converting sense-perceived thoughts and actions into physical sensory stimulation
US7542773B2 (en) 2002-03-29 2009-06-02 At&T Intellectual Property I, L.P. Customized alerts for incoming data messages
US6904823B2 (en) * 2002-04-03 2005-06-14 Immersion Corporation Haptic shifting devices
US20030211888A1 (en) * 2002-05-13 2003-11-13 Interactive Telegames, Llc Method and apparatus using insertably-removable auxiliary devices to play games over a communications link
US7456823B2 (en) 2002-06-14 2008-11-25 Sony Corporation User interface apparatus and portable information apparatus
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
AU2002345285A1 (en) * 2002-07-11 2004-02-02 Nokia Corporation Method and device for automatically changing a digital content on a mobile device according to sensor data
JP3838173B2 (ja) 2002-07-31 2006-10-25 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP3937982B2 (ja) * 2002-08-29 2007-06-27 ソニー株式会社 入出力装置および入出力装置を有する電子機器
KR100459560B1 (ko) * 2002-10-22 2004-12-03 삼성전자주식회사 인디케이터 아이콘을 이용하여 수신된 단문메시지의종류를 식별하기 위한 서비스를 제공하는 무선통신기기 및이를 이용한 인디케이터 아이콘 표시방법
JP2004177992A (ja) 2002-11-22 2004-06-24 Panasonic Mobile Communications Co Ltd 風圧センサ付き携帯端末及び風圧センサ付き携帯端末により実行可能なプログラム
US8059088B2 (en) 2002-12-08 2011-11-15 Immersion Corporation Methods and systems for providing haptic messaging to handheld communication devices
AU2003297716A1 (en) 2002-12-08 2004-06-30 Immersion Corporation Methods and systems for providing haptic messaging to handheld communication devices
US8830161B2 (en) * 2002-12-08 2014-09-09 Immersion Corporation Methods and systems for providing a virtual touch haptic effect to handheld communication devices
GB0229572D0 (en) 2002-12-19 2003-01-22 Cognima Ltd Quality of service provisioning
US7339574B2 (en) * 2003-01-16 2008-03-04 Korean Advanced Institute Of Science And Technology Haptic mouse interface system for providing force and tactile feedbacks to user's fingers and arm
JP3639280B2 (ja) 2003-02-12 2005-04-20 任天堂株式会社 ゲームメッセージ表示方法およびゲームプログラム
EP1597895A2 (en) 2003-02-19 2005-11-23 Koninklijke Philips Electronics N.V. System for ad hoc sharing of content items between portable devices and interaction methods therefor
JP2004289577A (ja) * 2003-03-24 2004-10-14 Kyocera Corp 移動通信端末及び移動通信システム
AU2003244894A1 (en) * 2003-06-20 2005-01-04 Nokia Corporation Mobile device for mapping sms characters to e.g. sound, vibration, or graphical effects
US20070168118A1 (en) 2003-06-27 2007-07-19 Dirk Lappe System for coordinating the routes of navigation devices
JP2005020563A (ja) 2003-06-27 2005-01-20 Casio Comput Co Ltd 携帯端末及びプログラム
KR20050004382A (ko) 2003-07-02 2005-01-12 삼성전자주식회사 멀티 셔터 유닛을 구비한 스테퍼 설비
JP2005078310A (ja) * 2003-08-29 2005-03-24 Fuji Xerox Co Ltd 触覚呈示装置、触覚呈示方法、及びプログラム
GB0322489D0 (en) * 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
JP4401728B2 (ja) 2003-09-30 2010-01-20 キヤノン株式会社 複合現実空間画像生成方法及び複合現実感システム
JP4124092B2 (ja) 2003-10-16 2008-07-23 沖電気工業株式会社 液晶表示装置の駆動回路
US7532196B2 (en) * 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
CA2531524A1 (en) * 2003-10-31 2005-05-12 Iota Wireless Llc Concurrent data entry for a portable device
US7752544B2 (en) * 2003-11-17 2010-07-06 International Business Machines Corporation Method, system, and apparatus for remote interactions
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US7814419B2 (en) * 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
KR20050054731A (ko) 2003-12-05 2005-06-10 한국전자통신연구원 햅틱 시뮬레이션 시스템 및 그 시스템에서의 실시간 촉감지원 방법
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
US7982711B2 (en) * 2003-12-19 2011-07-19 Immersion Corporation Haptic profiling system and method
US7791588B2 (en) 2003-12-22 2010-09-07 Immersion Corporation System and method for mapping instructions associated with haptic feedback
GB0405004D0 (en) 2004-03-05 2004-04-07 Marconi Comm Ltd Improvements in or relating to a telecommunication network
JP4325449B2 (ja) 2004-03-19 2009-09-02 ソニー株式会社 表示制御装置,表示制御方法,記録媒体
US7176886B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Spatial signatures
US7176888B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
EP1728142B1 (en) 2004-03-23 2010-08-04 Fujitsu Ltd. Distinguishing tilt and translation motion components in handheld devices
US7571213B2 (en) * 2004-03-26 2009-08-04 Microsoft Corporation Interactive electronic bubble messaging
JP4046095B2 (ja) * 2004-03-26 2008-02-13 ソニー株式会社 触覚機能付き入力装置、情報入力方法及び電子機器
US20050251850A1 (en) 2004-03-31 2005-11-10 Microsoft Corporation System and method for providing REA model based security
US20050219223A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for determining the context of a device
KR100538351B1 (ko) * 2004-04-20 2005-12-21 광주과학기술원 햅틱 인터페이스의 안정화 방법 및 이를 적용한 햅틱시스템
US8095081B2 (en) 2004-04-29 2012-01-10 Sony Ericsson Mobile Communications Ab Device and method for hands-free push-to-talk functionality
JP4439351B2 (ja) 2004-07-28 2010-03-24 アルパイン株式会社 振動付与機能付きタッチパネル入力装置および操作入力に対する振動付与方法
JP2006047534A (ja) * 2004-08-03 2006-02-16 Alpine Electronics Inc 表示制御システム
US8264465B2 (en) * 2004-10-08 2012-09-11 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
US7570254B2 (en) * 2004-11-09 2009-08-04 Takahiko Suzuki Haptic feedback controller, method of controlling the same, and method of transmitting messages that uses a haptic feedback controller
JP2006163579A (ja) 2004-12-03 2006-06-22 Sony Corp 情報処理システム、情報処理装置及び情報処理方法
KR100670821B1 (ko) * 2004-12-21 2007-01-19 한국전자통신연구원 사용자 인터페이스 설계 및 평가 시스템 및 손 상호 작용기반의 사용자 인터페이스 설계 및 평가 시스템
JP2006201912A (ja) 2005-01-19 2006-08-03 Nippon Telegr & Teleph Corp <Ntt> 3次元仮想オブジェクト情報提供サービス処理方法と3次元仮想オブジェクト提供システムおよびプログラム
GB0503253D0 (en) * 2005-02-17 2005-03-23 Univ Northumbria Newcastle User control of a hand-held device
KR102358378B1 (ko) 2005-03-04 2022-02-08 애플 인크. 다기능 휴대용 장치
KR20060106010A (ko) 2005-04-04 2006-10-12 한국과학기술원 커뮤니케이션을 위한 인터렉티브 테이블 세트
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
US8339363B2 (en) 2005-05-13 2012-12-25 Robert Bosch Gmbh Sensor-initiated exchange of information between devices
JP2006333355A (ja) 2005-05-30 2006-12-07 Toshiba Corp 携帯情報処理装置およびその操作方法
JP4507992B2 (ja) 2005-06-09 2010-07-21 ソニー株式会社 情報処理装置および方法、並びにプログラム
US7685530B2 (en) * 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
US7779480B2 (en) 2005-06-30 2010-08-17 Microsoft Corporation Identifying dependencies of an application upon a given security context
US20070040810A1 (en) 2005-08-18 2007-02-22 Eastman Kodak Company Touch controlled display device
US7734313B2 (en) * 2005-08-31 2010-06-08 Motorola, Inc. Wirelessly networked gaming system having true targeting capability
US7933632B2 (en) 2005-09-16 2011-04-26 Microsoft Corporation Tile space user interface for mobile devices
US8116740B2 (en) * 2005-09-21 2012-02-14 Nokia Corporation Mobile communication terminal and method
US7276886B2 (en) 2005-10-03 2007-10-02 Texas Instruments Incorporated Dual buck-boost converter with single inductor
US7636794B2 (en) 2005-10-31 2009-12-22 Microsoft Corporation Distributed sensing techniques for mobile devices
KR100671144B1 (ko) * 2005-11-23 2007-01-17 (주) 엘지텔레콤 이동통신단말기의 움직임을 이용한 문자입력장치 및 방법
JP5128489B2 (ja) * 2005-12-22 2013-01-23 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 照明システムの制御のためのユーザインターフェース及び方法
US7525425B2 (en) 2006-01-20 2009-04-28 Perdiem Llc System and method for defining an event based on relationship between an object location and a user-defined zone
AU2006332488A1 (en) * 2005-12-30 2007-07-12 Apple Inc. Portable electronic device with multi-touch input
US7509588B2 (en) 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
DK1806643T3 (da) * 2006-01-06 2014-12-08 Drnc Holdings Inc Fremgangsmåde til at indføre kommandoer og/eller tegn til en bærbar kommunikationsindretning, der er udstyret med en inklinationssensor
JP2007188126A (ja) 2006-01-11 2007-07-26 Fujifilm Corp 画像明るさ算出装置および方法並びにプログラム
US8587526B2 (en) * 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
JP2007301270A (ja) 2006-05-15 2007-11-22 Sony Computer Entertainment Inc ゲーム制御プログラム、ゲーム制御方法、ゲーム装置
KR100775190B1 (ko) 2006-05-24 2007-11-12 엘지전자 주식회사 멀티미디어 합성 방법 및 이를 이용한 단말기
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
US8271902B1 (en) * 2006-07-20 2012-09-18 Adobe Systems Incorporated Communication of emotions with data
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
JP4986555B2 (ja) * 2006-09-13 2012-07-25 ソニーモバイルコミュニケーションズ株式会社 通信装置、処理実行方法および処理実行プログラム
US7468573B2 (en) * 2006-10-30 2008-12-23 Motorola, Inc. Method of providing tactile feedback
US8354997B2 (en) * 2006-10-31 2013-01-15 Navisense Touchless user interface for a mobile device
KR101345341B1 (ko) 2006-12-13 2013-12-27 삼성전자 주식회사 파일 전송을 위한 사용자 인터페이스를 제공하는 장치 및방법
FR2910160A1 (fr) 2006-12-13 2008-06-20 France Telecom Systeme de telecommunication tactile
US20080153520A1 (en) 2006-12-21 2008-06-26 Yahoo! Inc. Targeted short messaging service advertisements
EP1936929A1 (en) 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
KR101364885B1 (ko) * 2007-02-21 2014-02-19 엘지전자 주식회사 아이콘을 이용한 메시지 수신 표시 방법 및 단말기
US8933891B2 (en) * 2007-03-02 2015-01-13 Lg Electronics Inc. Terminal and method of controlling terminal
US9009589B2 (en) 2007-03-30 2015-04-14 Google Inc. Conversion of portable program modules for constrained displays
CN101290553A (zh) 2007-04-17 2008-10-22 索尼(中国)有限公司 具有显示屏的电子设备
WO2008132540A1 (en) 2007-04-26 2008-11-06 Nokia Corporation Method and mobile terminal with user input based on movement of the terminal detected by a sensor
US7941000B2 (en) * 2007-05-11 2011-05-10 Koninklijke Philips Electronics N.V. Method for producing an image and system for producing an image
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9965132B2 (en) * 2007-06-08 2018-05-08 Apple Inc. Presenting text messages
JP2009003799A (ja) 2007-06-22 2009-01-08 Aplix Corp ポータブル機器およびポータブル機器における仮想空間の提供方法
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US8201108B2 (en) * 2007-10-01 2012-06-12 Vsee Lab, Llc Automatic communication notification and answering method in communication correspondance
US8631358B2 (en) * 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
KR101430452B1 (ko) 2007-10-15 2014-08-14 엘지전자 주식회사 통신 기기 및 이것의 위치 정보 제공 방법
US20090140986A1 (en) 2007-11-30 2009-06-04 Nokia Corporation Method, apparatus and computer program product for transferring files between devices via drag and drop
US9569086B2 (en) 2007-12-12 2017-02-14 Nokia Technologies Oy User interface having realistic physical effects
CN101178615A (zh) 2007-12-12 2008-05-14 美新半导体(无锡)有限公司 姿态及运动感应系统及使用该系统的便携式电子设备
US7839269B2 (en) * 2007-12-12 2010-11-23 Immersion Corporation Method and apparatus for distributing haptic synchronous signals
US9170649B2 (en) 2007-12-28 2015-10-27 Nokia Technologies Oy Audio and tactile feedback based on visual environment
US8138896B2 (en) * 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
US8239769B2 (en) * 2008-04-22 2012-08-07 Verizon Patent And Licensing Inc. System and method for selling preference-based virtual objects
US20090280860A1 (en) * 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
JP5045559B2 (ja) * 2008-06-02 2012-10-10 富士通モバイルコミュニケーションズ株式会社 携帯端末
US20090309825A1 (en) * 2008-06-13 2009-12-17 Sony Ericsson Mobile Communications Ab User interface, method, and computer program for controlling apparatus, and apparatus
US8306576B2 (en) * 2008-06-27 2012-11-06 Lg Electronics Inc. Mobile terminal capable of providing haptic effect and method of controlling the mobile terminal
US8532637B2 (en) 2008-07-02 2013-09-10 T-Mobile Usa, Inc. System and method for interactive messaging
US20100214243A1 (en) 2008-07-15 2010-08-26 Immersion Corporation Systems and Methods For Interpreting Physical Interactions With A Graphical User Interface
US8274484B2 (en) * 2008-07-18 2012-09-25 Microsoft Corporation Tracking input in a screen-reflective interface environment
US8362882B2 (en) * 2008-12-10 2013-01-29 Immersion Corporation Method and apparatus for providing Haptic feedback from Haptic textile
US8587601B1 (en) * 2009-01-05 2013-11-19 Dp Technologies, Inc. Sharing of three dimensional objects
KR101766370B1 (ko) 2009-01-29 2017-08-08 임머숀 코퍼레이션 그래픽 사용자 인터페이스와의 물리적 상호작용을 해석하는 시스템 및 방법
US8516396B2 (en) * 2009-01-30 2013-08-20 International Business Machines Corporation Object organization based on user interactions within a virtual environment
US8123614B2 (en) * 2010-04-13 2012-02-28 Kulas Charles J Gamepiece controller using a movable position-sensing display device including a movement currency mode of movement
US8266551B2 (en) * 2010-06-10 2012-09-11 Nokia Corporation Method and apparatus for binding user interface elements and granular reflective processing
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
JP6541292B2 (ja) 2012-02-15 2019-07-10 イマージョン コーポレーションImmersion Corporation プリミティブを用いた高解像度ハプティック効果生成
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9245428B2 (en) 2012-08-02 2016-01-26 Immersion Corporation Systems and methods for haptic remote control gaming
US9116546B2 (en) 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
US9330544B2 (en) 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US20140139451A1 (en) 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9836150B2 (en) 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
US20140198130A1 (en) 2013-01-15 2014-07-17 Immersion Corporation Augmented reality user interface with haptic feedback
US9880623B2 (en) 2013-01-24 2018-01-30 Immersion Corporation Friction modulation for three dimensional relief in a haptic device
US9041647B2 (en) 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US9645647B2 (en) 2015-05-13 2017-05-09 Immersion Corporation Systems and methods for haptic feedback for modular devices

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1133229A (ja) * 1997-07-17 1999-02-09 Nintendo Co Ltd ビデオゲームシステム
JP2004521424A (ja) * 2001-03-30 2004-07-15 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 1対1の直接通信
US20040058718A1 (en) * 2002-09-19 2004-03-25 Samsung Electronics Co., Ltd. Method for giving notice of an incoming call in a mobile communication terminal
JP2004164242A (ja) * 2002-11-12 2004-06-10 Sony Computer Entertainment Inc ファイル処理方法とこの方法を利用可能な装置
JP2007531158A (ja) * 2004-03-31 2007-11-01 モトローラ・インコーポレイテッド コンテンツの管理及び制御の方法及び装置
US20060061545A1 (en) * 2004-04-02 2006-03-23 Media Lab Europe Limited ( In Voluntary Liquidation). Motion-activated control with haptic feedback
GB2416962A (en) * 2004-08-05 2006-02-08 Vodafone Plc Haptic communication in mobile telecommunications networks
JP2008546360A (ja) * 2005-06-10 2008-12-18 ジェミナイ モバイル テクノロジーズ,インコーポレーテッド メッセージ作成者の状態情報伝達システム及び方法
US20070049301A1 (en) * 2005-08-30 2007-03-01 Motorola, Inc. Articulating emotional response to messages
US20070139366A1 (en) * 2005-12-21 2007-06-21 Dunko Gregory A Sharing information between devices
JP2009217805A (ja) * 2008-03-10 2009-09-24 Korea Research Inst Of Standards & Science 触感フィードバック装置を用いた触感伝達方法、及びそのシステム
JP2011528476A (ja) * 2008-07-15 2011-11-17 イマージョン コーポレイション 物理法則に基づく触覚メッセージングのためのシステム及び方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10203756B2 (en) 2008-07-15 2019-02-12 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US10416775B2 (en) 2008-07-15 2019-09-17 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US10362430B2 (en) 2015-12-04 2019-07-23 Samsung Electronics Co., Ltd Audio providing method and device therefor

Also Published As

Publication number Publication date
KR20110052629A (ko) 2011-05-18
JP6208791B2 (ja) 2017-10-04
JP5410520B2 (ja) 2014-02-05
US20160109950A1 (en) 2016-04-21
US20170031445A1 (en) 2017-02-02
KR101788995B1 (ko) 2017-10-20
KR20160031027A (ko) 2016-03-21
JP6449934B2 (ja) 2019-01-09
US8866602B2 (en) 2014-10-21
US9229532B1 (en) 2016-01-05
JP2011528476A (ja) 2011-11-17
KR20160120798A (ko) 2016-10-18
WO2010009163A1 (en) 2010-01-21
KR101522145B1 (ko) 2015-05-20
US20130201141A1 (en) 2013-08-08
KR101956999B1 (ko) 2019-03-11
US8638301B2 (en) 2014-01-28
JP2014067430A (ja) 2014-04-17
KR20110031978A (ko) 2011-03-29
CN104111726A (zh) 2014-10-22
US10416775B2 (en) 2019-09-17
US10248203B2 (en) 2019-04-02
KR20180071416A (ko) 2018-06-27
US20150199013A1 (en) 2015-07-16
JP5599922B2 (ja) 2014-10-01
US20100045619A1 (en) 2010-02-25
CN102100055A (zh) 2011-06-15
JP2017004547A (ja) 2017-01-05
US9063571B2 (en) 2015-06-23
EP3496376A1 (en) 2019-06-12
JP5642252B2 (ja) 2014-12-17
KR20180127533A (ko) 2018-11-28
CN102099766B (zh) 2015-01-14
JP2014002770A (ja) 2014-01-09
KR101838425B1 (ko) 2018-03-13
JP2011528537A (ja) 2011-11-17
US20180260029A1 (en) 2018-09-13
JP5897631B2 (ja) 2016-03-30
KR102045170B1 (ko) 2019-11-14
JP2011528475A (ja) 2011-11-17
US9785238B2 (en) 2017-10-10
KR101690469B1 (ko) 2016-12-27
JP2014194785A (ja) 2014-10-09
CN102099767A (zh) 2011-06-15
KR20110036617A (ko) 2011-04-07
CN104571336A (zh) 2015-04-29
EP3220616B1 (en) 2019-09-04
JP2019071076A (ja) 2019-05-09
CN102187647A (zh) 2011-09-14
WO2010009145A1 (en) 2010-01-21
EP2329637A1 (en) 2011-06-08
JP2011528477A (ja) 2011-11-17
US9910496B2 (en) 2018-03-06
CN102187647B (zh) 2014-07-23
US20190121440A1 (en) 2019-04-25
JP2015057719A (ja) 2015-03-26
CN104111726B (zh) 2017-05-24
US8976112B2 (en) 2015-03-10
EP3130983A1 (en) 2017-02-15
US8587417B2 (en) 2013-11-19
CN106990811A (zh) 2017-07-28
JP2016149135A (ja) 2016-08-18
CN103970209A (zh) 2014-08-06
JP2018088260A (ja) 2018-06-07
US9477309B2 (en) 2016-10-25
KR20160114738A (ko) 2016-10-05
KR102045128B1 (ko) 2019-11-14
KR20140141658A (ko) 2014-12-10
US10203756B2 (en) 2019-02-12
US9612662B2 (en) 2017-04-04
US10198078B2 (en) 2019-02-05
JP6180360B2 (ja) 2017-08-16
US20170168579A1 (en) 2017-06-15
US20150002280A1 (en) 2015-01-01
CN107066035A (zh) 2017-08-18
JP6433556B2 (ja) 2018-12-05
KR101404367B1 (ko) 2014-06-20
US20180348870A1 (en) 2018-12-06
US20100013761A1 (en) 2010-01-21
JP5762285B2 (ja) 2015-08-12
KR20170129273A (ko) 2017-11-24
JP6109877B2 (ja) 2017-04-05
EP3236337B1 (en) 2019-10-16
JP2014170560A (ja) 2014-09-18
CN103970209B (zh) 2017-09-19
JP2019057302A (ja) 2019-04-11
CN102160366B (zh) 2014-05-14
JP5899253B2 (ja) 2016-04-06
JP2017199378A (ja) 2017-11-02
KR20140027543A (ko) 2014-03-06
US20190179413A1 (en) 2019-06-13
EP2313820B1 (en) 2017-04-05
KR102056518B1 (ko) 2019-12-16
US20150378437A1 (en) 2015-12-31
WO2010009149A2 (en) 2010-01-21
US20100017759A1 (en) 2010-01-21
US20150268727A1 (en) 2015-09-24
EP2723107B1 (en) 2019-05-15
EP2741177A1 (en) 2014-06-11
JP5997898B2 (ja) 2016-09-28
EP2741177B1 (en) 2019-06-26
KR20160018829A (ko) 2016-02-17
CN102160366A (zh) 2011-08-17
JP6548753B2 (ja) 2019-07-24
US8462125B2 (en) 2013-06-11
EP3480680A1 (en) 2019-05-08
US20140091914A1 (en) 2014-04-03
JP5955369B2 (ja) 2016-07-20
WO2010009157A1 (en) 2010-01-21
KR102045165B1 (ko) 2019-11-14
JP5337877B2 (ja) 2013-11-06
KR20110036115A (ko) 2011-04-06
EP2327201B1 (en) 2018-09-05
KR20180051675A (ko) 2018-05-16
KR20180029101A (ko) 2018-03-19
KR20160018842A (ko) 2016-02-17
US20180004295A1 (en) 2018-01-04
KR101300429B1 (ko) 2013-08-26
KR101989763B1 (ko) 2019-06-14
KR101600226B1 (ko) 2016-03-11
JP2018026142A (ja) 2018-02-15
JP5690726B2 (ja) 2015-03-25
KR20170031800A (ko) 2017-03-21
CN102099766A (zh) 2011-06-15
EP2723107A1 (en) 2014-04-23
WO2010009152A1 (en) 2010-01-21
EP3220616A1 (en) 2017-09-20
EP3236337A1 (en) 2017-10-25
WO2010009149A3 (en) 2010-04-01
US10019061B2 (en) 2018-07-10
JP6043763B2 (ja) 2016-12-14
US9134803B2 (en) 2015-09-15
KR20110031979A (ko) 2011-03-29
JP2015007998A (ja) 2015-01-15
JP6272960B2 (ja) 2018-01-31
JP2015212956A (ja) 2015-11-26
EP2329636A1 (en) 2011-06-08
KR101871646B1 (ko) 2018-06-26
US20100013653A1 (en) 2010-01-21
US20100017489A1 (en) 2010-01-21
US20140104162A1 (en) 2014-04-17
CN104571336B (zh) 2019-10-15
EP2327201A2 (en) 2011-06-01
EP2329339A1 (en) 2011-06-08
KR101661368B1 (ko) 2016-09-29
EP2313820A1 (en) 2011-04-27
JP2011528474A (ja) 2011-11-17
EP3130983B1 (en) 2018-11-14
EP3206381A1 (en) 2017-08-16

Similar Documents

Publication Publication Date Title
JP5899253B2 (ja) 物理法則に基づく触覚メッセージングのためのシステム及び方法

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150617

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150630

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20150925

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20151102

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20151127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160209

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160307

R150 Certificate of patent or registration of utility model

Ref document number: 5899253

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees