KR101522145B1 - 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체 - Google Patents

메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체 Download PDF

Info

Publication number
KR101522145B1
KR101522145B1 KR1020147002738A KR20147002738A KR101522145B1 KR 101522145 B1 KR101522145 B1 KR 101522145B1 KR 1020147002738 A KR1020147002738 A KR 1020147002738A KR 20147002738 A KR20147002738 A KR 20147002738A KR 101522145 B1 KR101522145 B1 KR 101522145B1
Authority
KR
South Korea
Prior art keywords
sensor
virtual
gesture
virtual message
virtual physical
Prior art date
Application number
KR1020147002738A
Other languages
English (en)
Other versions
KR20140027543A (ko
Inventor
데이비드 번바움
크리스토퍼 제이. 울리치
대니 그랜트
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=41119917&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR101522145(B1) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20140027543A publication Critical patent/KR20140027543A/ko
Application granted granted Critical
Publication of KR101522145B1 publication Critical patent/KR101522145B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72427—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for supporting games or graphical animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M19/00—Current supply arrangements for telephone systems
    • H04M19/02—Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04—Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • H04M19/047—Vibrating means for incoming calls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2200/00—Indexing scheme relating to G06F1/04 - G06F1/32
    • G06F2200/16—Indexing scheme relating to G06F1/16 - G06F1/18
    • G06F2200/163—Indexing scheme relating to constructional details of the computer
    • G06F2200/1637—Sensing arrangement for detection of housing movement or orientation, e.g. for controlling scrolling or cursor movement on the display of an handheld computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/21—Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for social networking applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Environmental & Geological Engineering (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Position Input By Displaying (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법이 게시된다. 예를 들어, 게시된 한 방법은 메시징 디바이스와의 상호동작을 검출하도록 구성되는 센서로부터 센서 신호를 수신하는 단계, 이 센서 신호에 적어도 부분적으로 기초하여 가상 메시지 객체의 가상 물리적 속성을 결정하는 단계, 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정하는 단계, 및 작동기로 하여금 이 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성하는 단계를 포함한다.

Description

메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체{SYSTEMS AND METHODS FOR MAPPING MESSAGE CONTENTS TO VIRTUAL PHYSICAL PROPERTIES FOR VIBROTACTILE MESSAGING}
[관련 출원들에 대한 상호참조]
본 특허 출원은, 2008년 7월 15일 출원된 발명의 명칭이 "물리 기반 촉각 메시징을 위한 시스템 및 방법(Systems and Methods for Physics-Based Tactile Messaging)"인 미국 특허 가출원 번호 61/080,978; 2008년 7월 15일 출원된 발명의 명칭이 "메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법(Systems and Methods for Mapping Message Contents to Virtual Physical Properties for Vibrotactile Messaging)"인 미국 특허 가출원 번호 61/080,981; 2008년 7월 15일 출원된 발명의 명칭이 "수동 및 능동 모드 간에 센서 햅틱 피드백 기능을 시프트하기 위한 시스템 및 방법(Systems and Methods for Shifting Sensor Haptic Feedback Function Between Passive and Active Modes)"인 미국 특허 가출원 번호 61/080,985; 2008년 7월 15일 출원된 발명의 명칭이 "메시지 수신자의 제스처 표시를 위한 시스템 및 방법(Systems and Methods for Gesture Indication of Message Recipients)"인 미국 특허 가출원 번호 61/080,987; 2009년 1월 29일 출원된 발명의 명칭이 "공유 공간에서 의사-원격 현장감을 위한 시스템 및 방법(Systems and Methods for Pseudo-Telepresence in a Shared Space)"인 미국 특허 가출원 번호 61/148,312; 및 2009년 5월 26일 출원된 발명의 명칭이 "햅틱 메시지를 송신하기 위한 시스템 및 방법(Systems and Methods for Transmitting Haptic Messages)"인 미국 특허 가출원 번호 61/181,280에 대해 우선권을 주장하고, 이들 모두는 전체가 참조로 본 명세서에 통합된다.
본 발명은 일반적으로 메시징에 관한 것으로, 보다 구체적으로는 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법에 관한 것이다.
메시징 시스템에서의 종래의 촉각 피드백은, 상이한 유형의 메시지들을 특정 진동들과 연관시킬 수 있는, 메시지 수신자의 메시징 디바이스 상의 설정들에 의해 결정된다. 이 진동들은 포괄적일 수 있거나 및/또는 메시징 디바이스에 포함되는 사전포장된 진동 효과 라이브러리에 기초할 수 있다. 이러한 진동들은 사용자에 의해 만들어진 것이 아니고, 따라서 메시지의 송신자 또는 수신자에 대해 개인적인 것으로 고려되지 않을 수 있다. 더욱이, 이러한 진동들은 메시지 콘텐츠의 속성들에 의해 생성되지 않는다.
따라서, 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법이 필요하다.
본 발명의 실시예들은 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법을 제공한다. 예를 들어, 일 실시예에서, 물리 기반 촉각 메시징을 위한 방법은 메시징 디바이스와의 상호동작을 감지하도록 구성되는 센서로부터 센서 신호를 수신하는 단계, 이 센서 신호에 적어도 부분적으로 기초하여 가상 메시지 객체의 가상 물리적 파라미터를 결정하는 단계, 이 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정하는 단계, 및 작동기로 하여금 이 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성하는 단계를 포함한다. 다른 실시예에서, 컴퓨터 판독가능한 매체는 이러한 방법을 실행하기 위한 프로그램 코드를 포함한다.
이러한 예시적인 실시예들은 발명을 제한하거나 정의하고자 하는 것이 아니고, 다만 발명의 이해를 돕기 위한 예들을 제공하기 위해 설명된다. 예시적인 실시예들이 발명을 실시하기 위한 구체적인 내용에서 설명되고, 본 발명의 추가적인 설명이 여기에 제공된다. 본 발명의 다양한 실시예들에 의해 제공되는 장점들을 본 명세서를 검토하여 더 이해할 수 있다.
본 발명의 여러 특징, 양태, 및 이점들은, 첨부되는 도면들을 참고하여 이하의 발명을 실시하기 위한 구체적인 내용을 살펴볼 때 더욱 쉽게 이해된다.
도 1은 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템의 블록도.
도 2는 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템을 도시한 도면.
도 3은 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템을 도시한 도면.
도 4는 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 방법의 흐름도.
도 5는 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 방법의 흐름도.
도 6은 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템을 도시한 도면.
도 7은 본 발명의 일 실시예에 따른 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템을 도시한 도면.
본 발명의 실시예들은, 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들에 맵핑하기 위한 시스템 및 방법을 제공한다.
진동촉각 메시징의 예시적인 실시예
본 발명의 예시적인 일 실시예에서, 모바일 폰과 같은 메시징 디바이스는 센서 및 작동기(actuator)와 통신하는 프로세서를 포함한다. 작동기는 햅틱 효과를 생성하도록 구성된다. 이러한 예시적인 실시예에서, 메시징 디바이스는 Immersion Corporation의 VibeTonz® 진동촉각 피드백 시스템이 장착된 삼성 SGH-i710 모바일 컴퓨터를 포함한다. 다른 실시예에서, 메시징 디바이스는 Immersion TouchSense® 진동촉각 피드백 시스템으로도 알려진 Immersion Corporations TouchSense® Technology 시스템을 포함한다. 그외의 메시징 디바이스들 및 햅틱 피드백 시스템들이 이용될 수 있다.
메시징 디바이스는 가상 메시지 객체들로 표현되는 메시지들을 생성하고, 그것들을 그외의 메시징 디바이스들과 교환할 수 있다. 공(ball), 튜브, 또는 알(egg) 형태의 가상 메시지 객체들은 비언어 메시지(예컨대, 웃음(smile)), 텍스트 메시지, 또는 파일 첨부물을 갖는 메시지와 같은 다양한 유형의 메시지를 나타낼 수 있다. 이들의 모양 및 외형에 더하여, 가상 메시지 객체들은 크기, 질량(mass), 충돌 거동 및/또는 질감과 같은 그외의 속성들 또는 가상 물리적 파라미터들을 가질 수 있다.
신규 가상 메시지 객체가 생성되는 경우, 사용자는 터치 스크린 또는 디바이스 자체 상의 제스처들(gestures)을 통해 객체의 하나 이상의 가상 물리적 파라미터를 정의할 수 있다. 프로세서는 센서 신호 형태의 이러한 제스처들을 수신하고, 이 센서 신호에 적어도 부분적으로 기초하여 신규 가상 메시지 객체의 가상 물리적 파라미터를 결정할 수 있다. 예를 들어, 사용자는 신규 가상 메시지 공을 생성할 수 있다. 다음으로, 사용자는 메시징 디바이스를 흔들어 신규 가상 메시지 공의 탄성을 정의할 수 있다. 가속도계 또는 자이로스코프와 같은 센서가 이 흔듦을 가속, 경사, 관성, 또는 위치의 변화로 검출하고, 센서 신호를 송신한다. 프로세서는 센서 신호를 수신하고, 실제 고무공을 모방하는 탄성 표면 또는 행동과 같은 신규 가상 메시지 객체의 가상 물리적 파라미터를 결정한다.
센서 신호에 적어도 부분적으로 기초하여 신규 가상 메시지 객체의 가상 물리적 파라미터를 결정한 후에, 프로세서는 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정한다. 빠른 잽 움직임(jabbing motion)에 기초하여, 프로세서는 신규 가상 메시지 객체가 부서지기 쉽거나, 깨지기 쉽다고 결정할 수 있다. 부서지기 쉽거나 깨지기 쉬운 가상 물리적 파라미터에 기초한 햅틱 효과는, 알 깨기 또는 창문 부수기를 모방하는 진동을 포함할 수 있다. 가상 메시지 객체가 작고 탄성적인 것으로 정의되면, 대응하는 햅틱 효과는 벽에 대해 튕기는 고무공을 모방할 수 있다. 프로세서는 가상 물리적 속성들 중 하나, 일부 또는 전부를 가상 메시지 객체와 연관되는 햅틱 효과들로 맵핑하거나 바꿀 수 있다.
마지막으로, 프로세서는 작동기로 하여금 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성한다. 다음으로, 햅틱 신호는 햅틱 효과를 생성하는 작동기로 출력된다. 예를 들어, 가상 메시지 객체가 터치 스크린을 통해 접촉되면, 메시징 디바이스가 진동하거나 흔들려, 가상 메시지 객체를 터치하거나 느끼는 효과를 시뮬레이션할 수 있다. 햅틱 피드백을 생성함으로써, 메시징 디바이스는 가상 메시지와 연관된 하나 이상의 가상 물리적 파라미터를 전달할 수 있다.
이러한 예시적인 예는 사용자에게 본 명세서에서 설명되는 일반 대상물을 소개하도록 주어진다. 본 발명은 이 예에 한정되지 않는다. 다음의 내용들은, 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 방법 및 시스템의 다양한 추가적인 실시예들 및 예들을 설명한다.
메시지 콘텐츠를 가상 물리적 속성들로 맵핑하기
본 명세서에서 설명되는 본 발명의 실시예들은 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법을 제공한다. 메시지 콘텐츠를 맵핑하기 위한 애플리케이션은 센서 데이터를 입력으로 받아들이고, 센서 데이터로부터 특징을 추출하며, 이 특징을 가상 물리적 파라미터로 맵핑하고, 가상 물리적 파라미터에 기초하여 햅틱 효과를 합성할 수 있다. 메시지 콘텐츠를 가상 물리적 속성들로 맵핑하는 것은, 물리적 메타포어(metaphor)를 모델링하는 청각, 시각, 및 햅틱 피드백을 통한 비언어 통신을 용이하게 할 수 있다.
가상 메시지 객체들 및 가상 물리적 속성들
물리적 메타포어에서, 가상 객체들은 실제, 물리적 객체들처럼 행동할 수 있다. 각각의 가상 객체의 속성들 또는 가상 물리적 파라미터들은 각각의 가상 메시지 객체가 어떻게 행동하는지를 알려준다. 따라서, 메시징 시스템의 물리적 메타포어에서, 텍스트 메시지들, 음성 메일, 또는 파일 첨부물들과 같은 메시지들이 가상 물리적 파라미터들을 갖는 가상 메시지 객체들로 표현된다. 이러한 가상 메시지 객체들은 다차원 메시지 수신함, 또는 가상 메시지 환경을 채울 수 있다. 가상 메시지 환경 내부에서, 가상 메시지 객체들은 서로 상호동작할 수 있고, 실제의 물리적 객체들처럼 행동할 수 있다.
각각의 가상 메시지 객체는 텍스트 메시지, 그림 메시지, 비디오 메시지, 음성 메일, 리마인더, 또는 웃는 얼굴 또는 찡그린 얼굴과 같은 비언어 메시지와 같은 개별적인 메시지를 나타낼 수 있다. 예를 들어, 튜브 또는 말린 두루마리(rolled-up scroll) 형태의 가상 메시지 객체가 텍스트 메시지를 나타낼 수 있다. 알 또는 캡슐 형태의 가상 메시지 객체는 비디오, 그림, 또는 음악 파일과 같은 첨부물을 갖는 메시지를 나타낼 수 있다. 가상 메시지 객체들은 또한 제스처들, 얼굴 표정들, 또는 감정들과 같은 다양한 비언어 의사소통 형태를 나타낼 수 있다. 가상 메시지 공은 유희(playfulness)의 표시와 같은 비언어 메시지에 대응할 수 있다. 또는, 가상 메시지 화살표는 찌르기(poke) 또는 잽(jabbing) 제스처(즉, 주의를 요청 또는 요구하기 위함)를 나타낼 수 있다. 일부의 효과적인 가상 메시지 객체들은 쉽게 식별가능한 시각 및/또는 햅틱 속성들 및/또는 효과들을 가질 수 있다. 이러한 속성들은 사용자가 디바이스를 물리적으로 보지 않고도 직관적으로 메시지의 콘텐츠를 이해하도록 도움을 준다. 예를 들어, 타자기 형태의 가상 메시지 객체의 키를 치는 소리는 직장으로부터의 메시지 또는 워드 프로세싱 파일을 나타낼 수 있다.
가상 메시지 환경 내부에서, 가상 메시지 객체들은 예컨대 튕기거나, 구르거나, 심지어 부서지면서 서로 및 환경과 상호동작할 수 있다. 가상 메시지 객체들의 행동, 또는 그것들이 상호동작하는 방식은 각각의 가상 메시지 객체의 속성들 또는 가상 물리적 파라미터들에 적어도 부분적으로 기초한다. 크기, 질량, 모양, 충돌 거동, 질감, 또는 시각 표현과 같은 일부의 가상 물리적 파라미터들은 상대적으로 정적인 파라미터들, 또는 가상 메시지 객체 자체의 고유한 속성들이다. 긴급, 수명 및/또는 태도와 같은 그외의 가상 물리적 파라미터들은 일시적이거나 임시의 파라미터들이 될 수 있다. 이러한 가변적인 가상 물리적 파라미터들은 가상 메시지 객체가 한 디바이스에서 다른 디바이스로 어떻게 송수신 되는지와 연관될 수 있다. 가상 메시지 객체의 가상 물리적 파라미터들은 메시지 자체의 속성들에 적어도 부분적으로 기초할 수 있다. 예를 들어, 메시지 첨부물의 파일 크기, 텍스트 메시지의 길이, 그림 첨부물의 영역 또는 해상도, 노래 첨부물의 길이, 또는 비디오 첨부물의 길이는 가상 메시지 객체의 크기 또는 질량을 결정하는데 사용될 수 있다.
일부의 실시예들에서, 가상 물리적 파라미터들은 사용자가 메시징 디바이스와 상호동작하는 경우 발생하는 센서 신호들에 기초하여 결정된다. 예를 들어, 사용자는 디바이스를 움직이거나 디바이스와 상호동작하여 신규 가상 메시지 객체를 생성 및/또는 정의할 수 있다. 일 실시예에서, 사용자는 마이크로폰을 입으로 불어 신규 가상 메시지 풍선을 부풀게 한다. 가상 메시지 풍선의 가상 물리적 크기는 사용자가 마이크로폰을 입으로 부는 시간의 길이에 직접 연관될 수 있다. 또 다른 실시예에서, 화상 전화기(picture phone)를 갖는 사용자는 사진을 촬영함으로써 신규 가상 메시지 객체를 정의할 수 있다. 예를 들어, 농구공을 사진 촬영 후, 사진의 속성들로부터 추출되는 또는 이 속성들에 적어도 부분적으로 기초하는, 크기, 질감, 또는 외형과 같은 속성들이 메시징 디바이스에 할당된다.
가상 메시지 환경은 또한 그 콘텐츠에 대한 토큰 메타포어를 실행할 수 있다. 토큰 메타포어에서, 가상 객체들이 디바이스들 사이에서 앞뒤로 전달되어, 실제 물리적 객체의 교환을 모방한다. 가상 메시지 객체와 같은 토큰은 한 메시징 디바이스로부터 다른 메시징 디바이스로 전달될 수 있다. 하나의 메시징 디바이스가 가상 메시지 객체를 다른 메시징 디바이스로 송신하는 경우, 가상 메시지 객체는 마치 그것이 물리적으로 수신 메시징 디바이스로 전달되는 것처럼 송신 메시징 디바이스로부터 사라진다.
메시징 디바이스가 신규 가상 메시지 객체를 수신하는 경우, 메시징 디바이스는 햅틱 효과와 같은 효과들을 출력하여, 신규 가상 메시지 객체가 수신되었고 가상 메시지 환경 내에 있다는 것을 나타낼 수 있다. 예를 들어, 가상 메시지 공이 수신되는 경우, 사운드 및 햅틱 효과들은 튕기는 공을 모방하도록 실시되어, 신규 가상 메시지 공이 수신되었다는 것을 사용자에게 나타낼 수 있다.
가상 메시지 객체들과 연관된 청각, 시각, 및/또는 햅틱 효과들은 가상 메시지 객체의 하나 이상의 가상 메시지 속성들에 적어도 부분적으로 기초하여 결정될 수 있다. 얇고, 알 껍질(egg-shelled)의 가상 메시지 객체는 가상 메시지 환경과의 충돌로 깨지거나 부서질 수 있다. 대안으로, 장난감 공 또는 탁구공이 가상 메시지 환경의 경계들에서 계속하여 튕길 수 있다. 거품 형태의 가상 메시지 객체는 거품이 터지는 것을 나타내는 짧고, 날카로운 햅틱 효과와 연관될 수 있다.
메시지 콘텐츠를 가상 물리적 속성들로 맵핑하기 위한 예시적인 시스템들
몇몇의 도면들에 걸쳐 유사한 참조번호들이 유사한 요소들을 나타내는, 도면들을 이제 참조하면, 도 1은 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템의 블록도이다. 도 1에 도시된 바와 같이, 시스템(100)은 모바일 폰, 휴대용 디지털 보조기(portable digital assistant; PDA), 휴대용 매체 재생기, 또는 휴대용 게임 디바이스와 같은 메시징 디바이스(102)를 포함한다. 메시징 디바이스(102)는 프로세서(110)를 포함한다. 프로세서(110)는 네트워크 접속(112), 센서(114), 디스플레이(116), 작동기(118), 및 스피커(120)와 통신한다. 메시징 디바이스(102)는 디스플레이(116) 상에서 프로세서(110)에 의해 생성되는 가상 메시지 환경을 보여줄 수 있다.
프로세서(110)는 네트워크 접속(112)과 통신한다. 네트워크 접속(112)은 적외선, 무선, Wi-Fi, 또는 셀룰러 네트워크 통신과 같은 하나 이상의 모바일 통신 방법을 포함할 수 있다. 그외의 변형 예에서, 네트워크 접속(112)은 이더넷 접속 또는 모뎀과 같은 유선 네트워크 접속을 포함한다. 메시징 디바이스(102)는 셀룰러 네트워크 또는 인터넷과 같은 네트워크들을 통해 음성 메시지들, 텍스트 메시지들, 데이터 메시지들, 또는 가상 메시지 객체들을 그외의 메시징 디바이스들(도시되지 않음)과 교환하도록 구성될 수 있다.
프로세서(110)는 또한 하나 이상의 센서(114)와 통신한다. 센서(114)는 가속도계, 자이로스코프, GPS 센서, 터치 감지 입력 디바이스(예컨대, 터치 스크린, 터치 패드), 질감 스타일러스, 이미징 센서, 또는 일부의 그외의 유형의 센서를 포함할 수 있다. 하나 이상의 센서(114)는 가속, 경사, 관성, 또는 위치의 변화들을 검출하도록 구성될 수 있다. 예를 들어, 메시징 디바이스(102)는 메시징 디바이스(102)의 가속을 측정하도록 구성되는 가속도계를 포함할 수 있다. 또는, 메시징 디바이스(102)는 위치 센서, 회전 속도 센서, 광 센서, 압력 센서, 질감 센서, 카메라, 마이크로폰, 또는 그외의 유형의 센서를 포함할 수 있다. 도시된 실시예에서, 하나 이상의 센서(114)는 센서 신호를 프로세서(110)로 송신하도록 구성된다. 프로세서(110)는 하나 이상의 센서(114)로부터 센서 신호를 수신하도록 구성될 수 있다.
본 발명의 일부의 실시예들에서, 사용자들은 움직임 또는 제스처와 같은 상호동작들을 통해 가상 메시지 객체의 가상 물리적 파라미터들을 기록한다. 이러한 물리적 상호동작들은 하나 이상의 센서(114)에 의해 검출된다. 메시징 디바이스(102)가 기울거나, 흔들리거나, 또는 그렇지 않은 경우 움직임에 따라, 하나 이상의 센서(114)가 이 움직임들을 검출할 수 있고, 메시징 디바이스(102)의 움직임에 적어도 부분적으로 기초하여 센서 신호를 생성할 수 있다. 일 실시예에서, 가속도계 센서는 메시징 디바이스(102)의 경사 및 가속을 검출하도록 구성된다. 메시징 디바이스(102)가 기울어짐에 따라, 가속도계는 메시징 디바이스(102)의 기울어짐 및/또는 가속에 적어도 부분적으로 기초하여 신호들을 프로세서로 전송하도록 구성될 수 있다. 다른 실시예에서, 디스플레이(116)는 제스처들 또는 위치 입력들을 검출하도록 구성되는 터치 스크린을 포함한다. 손가락이 터치 스크린 디스플레이(116) 상에 위치하거나 드래그됨에 따라, 터치 스크린은 손가락의 움직임에 적어도 부분적으로 기초하여 신호를 프로세서(110)로 전송하도록 구성된다.
센서 신호를 수신하면, 프로세서(110)는 센서 신호에 적어도 부분적으로 기초하여 가상 메시지 객체의 가상 물리적 파라미터를 결정하도록 구성될 수 있다. 가상 물리적 파라미터들은 컬러, 질감, 또는 속도와 같은 센서 신호들로부터 추출되는 특징들에 기초하여 결정될 수 있다. 가상 물리적 파라미터를 결정한 후에, 프로세서(110)는 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정하도록 구성될 수 있다. 햅틱 효과는, 진동 또는 강하고 불규칙한 충격을 통해 거친 질감의 가상 메시지를 시뮬레이션할 수 있다.
일 실시예에서, 사용자는 메뉴로부터 신규 가상 메시지 알을 선택한다. 다음으로, 사용자는 메시징 디바이스(102)를 큰 원 또는 타원으로 움직여, 가상 메시지 알의 크기를 나타낼 수 있다. 메시징 디바이스(102)의 큰 움직임에 기초하여 가상 메시지 알의 큰 크기를 결정한 후에, 프로세서(110)는 예컨대 많은 진동을 통해 큰 알이 깨지는 것을 시뮬레이션하는 햅틱 효과를 결정할 수 있다.
도 1에 도시된 바와 같이, 프로세서(110)는 디스플레이(116)와 통신한다. 프로세서(110)는 디스플레이(116) 상에 도시된 가상 메시지 환경의 그래픽 표현을 생성하도록 구성될 수 있다. 디스플레이(116)는 프로세서(110)와 신호들을 송수신하도록 구성되는 터치 스크린과 같은 터치 감지 입력 디바이스를 포함할 수 있다. 디스플레이(116) 상에 도시된 가상 메시지 객체들은 터치 스크린을 통해 직접 조작될 수 있다. 예를 들어, 터치 스크린 디스플레이 상의 2차원 손가락 제스처는 가상 메시지 환경 내의 가상 메시지 객체를 선택하거나, 터치하거나, 느끼거나, 드래그하거나, 던질 수 있다.
프로세서(110)는 또한 하나 이상의 작동기(118)와 통신한다. 프로세서(110)는 햅틱 효과와 연관된 햅틱 신호를 하나 이상의 작동기(118)로 송신할 수 있다. 작동기들(118)은 햅틱 효과들과 연관된 햅틱 신호들을 수신한 다음, 햅틱 효과들을 출력한다. 작동기(118)는, 예를 들어, 전기 모터, 전자기 작동기, 음성 코일, 선형 공진 작동기, 압전(piezoelectric) 작동기, 형상 기억 합금, 전자 활성 중합체, 솔레노이드, 이심 회전 질량 모터(eccentric rotating mass motor; ERM) 또는 선형 공진 작동기(linear resonant actuator; LRA)가 될 수 있다.
마지막으로, 도시된 실시예에서, 프로세서(110)는 스피커(120)와 통신한다. 프로세서(110)는, 가상 메시지 객체 및 가상 메시지 환경 간의 상호동작에 적어도 부분적으로 기초하여 사운드 효과를 결정하고, 사운드 효과에 적어도 부분적으로 기초하여 오디오 신호를 스피커로 송신하도록 구성될 수 있다. 스피커(120)는 프로세서(110)에 의해 생성되는 오디오 신호에 적어도 부분적으로 기초하여 사운드 효과를 생성하도록 구성될 수 있다. 사운드 효과 및 햅틱 효과의 출력은 햅틱 효과와 동시에 생성되거나 조정될(coordinated) 수 있다. 일 실시예에서, 스피커는 작동기가 햅틱 효과를 생성하는 것과 실질적으로 동시에 사운드 효과를 생성할 수 있다.
프로세서(110)에 의해 생성되는 사운드 효과들은 가상 메시지 객체 및 가상 메시지 환경 간의 상호동작 및/또는 제1 가상 메시지 객체 및 하나 이상의 그외의 가상 메시지 객체 간의 상호동작을 시뮬레이션할 수 있다. 사운드 효과들의 예들은 벽에 대해 튕기는 공, 쿵 하는 소리로(thud) 벽을 치는 화살, 또는 알 깨기를 포함한다. 예를 들어, 메시징 디바이스(102)는, 다른 메시징 디바이스로부터 물풍선 형태의 가상 메시지 객체를 수신할 수 있다. 가상 메시지 객체가 도달하면, 벽에 대해 철벅하는(splashing) 물풍선의 사운드 효과가 철벅하는 충돌을 시뮬레이션하는 진동과 동시에 생성될 수 있다.
도 2는 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템의 도면이다. 시스템(200)의 엘리먼트들은 도 1에 도시된 시스템을 참조하여 설명된다. 다양한 그외의 구현들이 가능하다.
도 2에 도시된 바와 같이, 시스템(200)은 모바일 폰, PDA, 휴대용 매체 재생기, 또는 휴대용 게임 디바이스와 같은 메시징 디바이스(102)를 포함한다. 메시징 디바이스(102)는 셀룰러 폰 네트워크 또는 인터넷과 같은 네트워크를 통해 음성 메일, 텍스트 메시지, 및 그외의 데이터 메시지와 같은 신호들을 송수신하도록 구성될 수 있다. 메시징 디바이스(102)는 무선 및/또는 유선 네트워크 접속(112)을 포함할 수 있다. 디바이스(102)가 도 2에서 핸드헬드 메시징 디바이스로 도시되어 있지만, 그외의 실시예들은, 비디오 게임 시스템, 비디오 게임 컨트롤러, 개인용 매체 재생기, 개인용 디지털 보조기, 및/또는 개인용 컴퓨터와 같은 그외의 디바이스들을 이용하여 가상 메시지 객체들을 송수신할 수 있다.
도 2에 도시된 바와 같이, 메시징 디바이스(102)는 디스플레이(116), 버튼들(122a, 122b, 122c, 122d) 및 트랙 볼(124)을 포함한다. 버튼들(122a, 122b, 122c, 122d), 및 트랙 볼(124)에 더하여, 메시징 디바이스(102)는 방향 패드, 터치패드, 스크롤 휠, 로커(rocker) 스위치, 조이스틱, 또는 그외의 유형의 입력(도 2에 도시되지 않음)을 포함할 수 있다.
모바일 디바이스(102)의 디스플레이(116)는 터치 스크린과 같은 터치 감지 입력 디바이스를 포함할 수 있다. 디스플레이(116)는 프로세서(110)로부터 신호들을 수신하고, 수신함, 브라우저, 게임 환경, 가상 메시지 환경과 같은 그래픽 환경을 생성하도록 구성될 수 있다. 디스플레이(116)는 또한 가상 메시지 작성 환경(250)을 생성하도록 구성될 수 있다. 가상 메시지 작성 환경(250)은 작성하거나 생성할 가상 메시지 객체의 유형을 선택하기 위한 메뉴(252)를 포함할 수 있다. 도 2에 도시된 바와 같이, 메뉴(252)는 신규 가상 메시지 공(254a), 신규 가상 메시지 튜브(254b), 또는 신규 가상 메시지 알(254c)을 작성하기 위한 옵션들을 포함한다. 메뉴(252)는 하트 또는 물풍선(도 2에 도시되지 않음)과 같은 그외의 유형의 가상 메시지 객체들을 포함할 수 있다.
가상 메시지 작성 환경(250)은 작성 지표(256)를 포함할 수 있다. 작성 지표(256)는, 메시징 디바이스(102)가 작성 또는 기록 모드에 있다는 것을 사용자에게 경고할 수 있다. 도 2에 도시된 바와 같이, 작성 지표(256)는 가상 메시지 작성 환경(250)의 맨 위의, 메뉴(252) 위에 위치하는 경고 바를 포함한다. 가상 메시지 작성 환경은 센서가 가상 메시지 객체와 연관되는 정보를 기록하고 있거나 또는 캡쳐하고 있는 경우 작성 지표(256)를 디스플레이하도록 구성될 수 있다. 일 예시에서, 기록 버튼(122c)이 눌러지거나 활성화되는 경우, 기록 모드로 진입되고 작성 지표(256)가 나타난다. 기록 모드가 멈추는 경우, 작성 지표(256)가 희미해지거나 사라질 수 있다.
메시징 디바이스(102)가 기록 모드에 있는 경우, 하나 이상의 센서(114)는, 가상 물리적 파라미터와 연관되는 제스처와 같은 정보를 기록하거나 또는 캡쳐할 수 있다. 일부의 제스처들은 터치 스크린에 의해 수신되는 2차원 제스처들을 포함한다. 2차원 제스처들의 예들은 위치결정(즉, 위치 입력) 또는 그리기를 포함한다. 그외의 제스처들은 가속도계, 자이로스코프, 또는 일부의 그외의 센서에 의해 측정되는 3차원 제스처들을 포함할 수 있다. 3차원 제스처들은 회전, 가볍게 치기(flicking), 잽, 또는 그렇지 않은 경우 메시징 디바이스(102) 전체를 움직이는 것을 포함할 수 있다. 하나 이상의 센서(114)는 또한 예컨대, 압력 센서 상의 압력을 감지하거나, 카메라로 사진을 촬영하거나, 마이크로폰으로 소리를 기록함으로써 그외의 비언어 정보를 기록할 수 있다.
가상 메시지 작성 환경(250)은 또한 신규 가상 메시지 객체 파이프(258)를 포함할 수 있다. 하나 이상의 신규 가상 메시지 객체들이 생성되는 경우, 그것들은 마치 그것들이 신규 가상 메시지 객체 파이프(258)로부터 나와 가상 메시지 작성 환경(250)으로 들어가는 것처럼 나타날 수 있다. 신규 가상 메시지 객체 파이프(258)는 가상 메시지 객체의 토큰 메타포어를 강화할 수 있다. 예를 들어, 신규 가상 메시지 객체가 생성되고, 신규 가상 메시지 객체 파이프(258)로부터 나오는 경우, 메시징 디바이스(102)의 사용자는, 신규 가상 메시지 객체가 상이한 메시징 디바이스들 간에서 앞뒤로 통과될 수 있는 물리적 토큰을 표현하고 있다고 직관적으로 추론할 수 있다.
도 3은 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들에 맵핑하기 위한 시스템의 도면이다. 도 3에 도시된 바와 같이, 시스템(300)은 터치 스크린 디스플레이(316), 질감 센서(314), 및 트랙볼(324)을 포함하는 메시징 디바이스(302)를 포함한다.
터치 스크린 디스플레이(316)는 가상 메시지 작성 환경(350)을 보여주고 있다. 도 3에 도시된 바와 같이, 가상 메시지 작성 환경(350)은 신규 가상 메시지 객체의 유형을 선택하기 위한 메뉴(352)를 포함한다. 메뉴(352)에서, 사용자는 신규 가상 메시지 공(354a), 신규 가상 메시지 튜브(354b), 또는 신규 가상 메시지 알(354c)을 선택할 수 있다. 메뉴(352)가 3개의 유형의 가상 메시지 객체들을 도시하고 있지만, 그외의 유형의 가상 메시지 객체들이 선택될 수 있다(도 3에 도시되지 않음). 가상 메시지 작성 환경(350)은 또한 신규 가상 메시지 파이프(358)를 포함한다. 신규 가상 메시지 공(354a)이 선택되는 경우, 신규 가상 메시지 공(360)은 신규 가상 메시지 파이프(358)를 나오고 있는 것으로 도시될 수 있다.
신규 가상 메시지 공(360)과 같은 신규 가상 메시지 객체의 생성 중에, 가상 메시지 작성 환경(350)은 슬라이더 바(362)를 디스플레이할 수 있다. 사용자는 슬라이더 바(362)를 조정하여 신규 가상 메시지 객체의 하나 이상의 가상 물리적 속성들을 변경할 수 있다. 도 3에서, 슬라이더 바(362)는 가상 메시지 객체(360)의 질감을 조정하는데 사용되고 있다. 슬라이더 바의 한쪽 단부에, 바위들의 더미로 도시된 아이콘(364a)이 신규 가상 메시지 객체(360)에 지정될 수 있는 한가지 질감을 나타낸다. 슬라이더 바(362)의 중간에, 굵은 모래 더미로 도시된 제2 아이콘(364b)이 가상 메시지 객체(360)로 지정될 수 있는 제2 질감을 나타낸다. 슬라이더 바의 다른 단부에, 미세한 모래 더미로 도시된 아이콘(364c)이 가상 메시지 객체(360)로 지정될 수 있는 제3 질감을 나타낸다.
슬라이더 바(362)는 터치 스크린(316)을 통해, 트랙 볼(324)을 통해, 또는 일부의 그외의 수단을 통해 조작되거나 사용될 수 있다. 대안으로, 아이콘들(364a, 364b, 364c) 중 하나가 터치 스크린(316)을 통해 사용될 수 있다. 슬라이더 바(362)가 사용됨에 따라, 터치 감지 센서는 신호를 메시징 디바이스(302)의 프로세서로 송신한다. 프로세서는 센서 신호를 수신하고, 슬라이더 바 입력과 연관되는 센서 신호에 적어도 부분적으로 기초하여 가상 메시지 객체의 가상 물리적 속성을 결정할 수 있다.
메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 예시적인 방법들
도 4는 본 발명의 일 실시에에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 방법의 흐름도이다. 방법(400)에서, 프로세서는 센서로부터 센서 신호를 수신한다(402). 프로세서는 가속도계, 자이로스코프, GPS센서, 터치 감지 입력 디바이스(예컨대, 터치 스크린, 터치패드), 질감 스타일러스, 압력 센서, 이미징 센서, 마이크로폰, 또는 일부의 그외의 유형의 센서와 같은 하나 이상의 센서와 통신할 수 있다. 사용자는 메뉴로부터 물풍선 유형을 선택하고, 기록 모드에 진입하며, 메시징 디바이스를 아래로 기울여 물풍선을 채움으로써, 물풍선과 같은 신규 가상 메시지 객체를 생성할 수 있다. 가속도계 또는 자이로스코프가 경사의 변화를 감지할 수 있거나, 터치 스크린이 그 표면 상에서 움직이는 물체를 검출할 수 있거나, 또는 마이크로폰이 사운드를 검출할 수 있다. 이러한 제스처들 또는 액션들을 검출한 후에, 센서 신호는 메시징 디바이스의 프로세서로 송신될 수 있다.
다음으로, 프로세서는 센서 신호에 적어도 부분적으로 기초하여 가상 메시지 객체의 가상 물리적 파라미터를 결정한다(404). 센서로부터 센서 신호를 수신한 후에, 프로세서는 센서 신호로부터 제스처 및/또는 환경 특징들을 추출할 수 있다. 제스처 특징은 디바이스의 움직임, 또는 디바이스 상의 움직임에 관한 정보를 포함할 수 있다. 환경 특징은 디바이스의 주위 또는 상태에 관한 정보를 포함할 수 있다. 제스처 및/또는 환경 추출 알고리즘들은 센서로부터 수신된 데이터에 적용될 수 있다. 그림 안의 객체의 모양 또는 컬러와 같은 환경 특징들은 센서 신호로부터 추출될 수 있다. 대안으로, 메시징 디바이스가 움직인 방향, 또는 터치 스크린 상의 캐릭터 입력이 센서 신호로부터 추출될 수 있다. 특정한 가속, 방향(orientation), 또는 주기성이 토큰의 생성을 트리거하도록 임계값이 설정될 수 있다. 예를 들어, 디바이스가 짧은 거리만을 움직이면, 프로세서는, 움직임이 의도하지 않은 것이거나, 토큰의 생성을 트리거하도록 의도하지 않은 것이라고 결정할 수 있다. 디바이스가 긴 거리를 움직이면, 프로세서는, 움직임이 토큰의 생성을 트리거하도록 의도된 것이라고 결정할 수 있다.
프로세서는 센서 신호로부터 추출된 제스처 및/또는 환경 특징들을 가상 물리적 파라미터로 맵핑함으로써 신규 가상 메시지 객체의 가상 물리적 파라미터를 결정할 수 있다. 예를 들어, 미리 결정된 제스처 및/또는 환경 특징들의 집합은 대응하는 가상 물리적 파라미터와 함께 데이터 저장소에 기억될 수 있다. 제스처 및/또는 환경 특징들이 추출되는 경우, 데이터 저장소가 검색되고, 적절한 가상 물리적 파라미터가 결정된다. 결정은, 터치 스크린 접촉의 속도, 움직임의 속도, 움직임의 크기, 움직임의 주기, 또는 움직임의 반복과 같은 제스처의 역학(dynamics)에 적어도 부분적으로 기초할 수 있다.
일 예로, 사용자는 부드럽고, 반복적인 움직임을 통해 하트 또는 풍선과 같은 복수의 신규 가상 메시지 객체를 생성할 수 있다. 각각의 사이클, 또는 반복적인 제스처로, 프로세서는, 복수의 풍선이 가상 메시지 작성 환경을 채우는 것이 잠재적으로 이루어지는 신규 가상 메시지 객체를 생성할 수 있다. 추가적인 예에서, 사용자는 터치 스크린 디스플레이를 통해 각각의 풍선을 사용하거나 또는 터치할 수 있다. 터치 스크린 상에서 풍선을 천천히 위 또는 아래로 드래그함으로써, 프로세서는 풍선의 가상 물리적 무게를 결정할 수 있다. 풍선이 천천히 위로 드래그되면, 프로세서는 풍선이 가볍고 가상 메시지 환경에서 여기저기를 떠다닌다고 결정할 수 있다. 대안으로, 풍선이 빠르게 디스플레이의 바닥으로 드래그되면, 프로세서는 풍선이 밀도가 높고 및/또는 무겁고, 가상 메시지 환경의 바닥으로 가라앉는다고 결정할 수 있다.
가상 메시지 객체들의 가상 물리적 파라미터들은 그외의 요인들에 적어도 부분적으로 기초할 수 있다. 비디오 파일 또는 이미지 파일과 같은 파일은 가상 메시지 캡슐과 같은 가상 메시지 객체와 연관될 수 있다. 프로세서는 파일로부터 메타데이터를 추출하고, 이 메타데이터를 사용하여 가상 물리적 파라미터를 결정할 수 있다. 일 예에서, 사용자는 신규 가상 메시지 캡슐을 생성한다. 다음으로, 사용자는 파일들의 목록을 스크롤하고, 특정 파일을 선택하여 그것을 가상 메시지 캡슐 상으로 드래그함으로써 가상 메시지 캡슐에 부착시킨다. 프로세서는, 가상 메시지 객체로 드래그된 특정한 파일의 크기에 적어도 부분적으로 기초하여 가상 메시지 캡슐의 크기를 결정할 수 있다. 다른 예로, 프로세서는 캡슐과 연관된 파일 유형에 기초하여 가상 메시지 캡슐의 질감 또는 컬러를 결정할 수 있다.
가상 물리적 파라미터를 결정한 후에, 프로세서는 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정한다(406). 예를 들어, 사용자는 신규 가상 메시지 공을 생성하고, 디바이스를 밀쳐 신규 가상 메시지 공에 대한 탄성 충돌 거동을 정의할 수 있다. 프로세서는, 가상 메시지 공이 생성되었을 때 이를 정의하는데 사용되는 제스처를 모방하는, 가상 메시지 환경에 대해 튕기는 가상 메시지 공을 시뮬레이션하는 햅틱 효과를 결정할 수 있다.
가상 메시지 환경이 큰, 깨지기 쉬운 알과 같은 하나의 가상 메시지 객체를 포함하면, 프로세서는 알 깨기(예컨대, 하나의 큰 깨짐)를 시뮬레이션하는 햅틱 효과를 결정할 수 있다. 다른 예로, 운동하는 튕기는 공들을 포함하는 다수의 가상 메시지 객체들이 있는 경우, 프로세서는 매우 많은 작고, 빠른 진동들이 환경 및 서로에 대해 튕기는 운동하는 공들을 시뮬레이션하는데 적절하다고 결정할 수 있다. 햅틱 효과들을 가상 메시지 객체들의 가상 물리적 파라미터들과 연관시킴으로써, 사용자는 특정한 햅틱 효과들을 객체들의 특정한 유형들과 상관시킬 수 있다. 예를 들어, 작동기가 심장 박동을 시뮬레이션하는 햅틱 효과를 출력하는 경우, 사용자는 메시징 디바이스를 보지 않고도 자신이 개인적인 메시지, 또는 가상 메시지 객체를 수신하였다고 즉각적으로 추측할 수 있다.
프로세서는 작동기로 하여금 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성한다(408). 마지막으로, 프로세서는, 햅틱 효과를 출력하도록 구성되는 하나 이상의 작동기로 햅틱 신호를 송신한다(410). 일 변형 예에서, 프로세서는 쿵 치는 것과 같은 벽을 치는 화살을 시뮬레이션하는 햅틱 효과를 결정하고, 작동기로 하여금 이 쿵 치는 것을 출력하도록 구성되는 햅틱 신호를 생성한다. 다음으로, 햅틱 신호는 작동기로 송신되고, 작동기가 햅틱 효과를 출력한다.
도 5는 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 방법의 흐름도이다. 방법(500)에서, 신규 가상 메시지 객체가 생성된다(502). 신규 가상 메시지 객체들은 가상 메시지 작성 환경 내에 생성될 수 있다. 가상 메시지 작성 환경은 다차원 수신함, 또는 가상 메시지 환경의 물리적 모델을 유보할 수 있다. 물리적 모델을 유보함으로써, 센서 신호들은, 센서 신호를 가상 메시지 환경 내부의 기존 가상 메시지 객체와의 상호동작과 연관시키기 보다는, 신규 가상 메시지 객체의 가상 물리적 파라미터와 연관될 수 있다.
신규 가상 메시지 객체는 메뉴로부터 옵션을 선택함으로써 생성될 수 있다. 가상 메시지 작성 환경은, 몇몇의 유형의 기존 가상 메시지 객체들 중 하나를 선택하기 위한 스크롤 메뉴 및/또는 가상 메시지 객체의 신규 유형을 생성하기 위한 옵션을 디스플레이할 수 있다. 도 5에 도시된 바와 같이, 신규 가상 메시지 공(504a), 신규 가상 메시지 튜브(504b), 또는 신규 가상 메시지 캡슐(504c)이 생성될 수 있다. 그외의 유형의 가상 메시지 객체들이 그외의 실시예들에서 생성될 수 있다. 예를 들어, 신규 가상 메시지 객체는 하트, 화살표, 물풍선, 또는 농구공을 포함할 수 있다. 가상 메시지 객체의 각각의 유형은 이와 연관되는 특정한 가상 메시지 속성들을 가질 수 있다. 예를 들어, 가상 메시지 농구공은 실제 농구공을 시뮬레이션하는 가상 물리적 질감을 가질 수 있다.
일부의 예들에서, 사용자는 미리 정의된 가상 메시지 객체 유형들의 목록으로부터 가상 메시지 객체를 선택한다. 미리 정의된 가상 메시지 객체 유형을 사용함으로써, 사용자는 하나 이상의 가상 물리적 파라미터로 맵핑되거나 바뀔 수 있는 신규 가상 메시지 객체의 구체적 양태들을 빠르고 명확하게 정의할 수 있다. 그외의 예들에서, 사용자는 스크래치를 통해 신규 유형의 가상 메시지 객체를 작성할 수 있다. 사용자는 터치 스크린, 가속도계, 자이로스코프, GPS 센서, 또는 일부의 그외의 유형의 센서로부터의 신호들에 적어도 부분적으로 기초하여 가상 메시지 객체를 구체적, 개별화된 가상 물리적 파라미터들로 정의할 수 있다.
신규 가상 메시지 공이 생성된 후에(504a), 가상 메시지 공의 특징이 기록된다(506a). 특징들은 메시징 디바이스의 하나 이상의 센서에 의해 기록될 수 있다. 컬러 특징이 광 센서로부터 기록될 수 있거나, 질감 특징이 질감 스타일러스 센서로부터 기록될 수 있거나, 또는 제스처가 가속도계로부터 기록될 수 있다.
단계(504b)에서, 신규 가상 메시지 튜브가 생성된다. 튜브, 또는 두루마리 형태의 신규 메시지 객체는 텍스트 메시지를 나타낼 수 있다. 따라서, 신규 가상 메시지 튜브가 생성되면(504b), 텍스트 메시지가 입력될 수 있다(506b). 사용자는 메시징 디바이스에 부착된 키패드를 통해, 터치 스크린 디스플레이 상에 보여지는 가상 키보드를 통해, 또는 일부의 그외의 수단을 통해 텍스트를 입력할 수 있다.
단계(504c)에서, 가상 메시지 캡슐이 생성된다. 캡슐 또는 알 형태의 가상 메시지 객체는 파일 첨부물을 갖는 메시지를 나타낼 수 있다. 따라서, 신규 가상 메시지 캡슐이 생성되면(504c), 첨부할(또는, 캡슐 내에 포함할) 파일이 선택된다(506c). 가상 메시지 캡슐은 비디오 파일, 사운드 파일, 또는 이미지 파일과 같은 파일 첨부물을 갖는 메시지를 포함할 수 있다. 사용자는 파일들의 목록을 스크롤하거나 가상 메시지 캡슐 상으로 파일을 드래그함으로써 파일 첨부물을 선택할 수 있다. 한가지 대안으로, 사용자는 사진을 찍고 파일 캡슐에 포함할 사진을 선택할 수 있다.
신규 가상 메시지 객체에 관한 정보가 기록되거나(506a), 입력되거나(506b), 선택된(506c) 후에, 신규 가상 메시지 객체의 가상 물리적 파라미터가 결정된다(508). 가상 물리적 파라미터는 센서로부터 수신되는 정보에 적어도 부분적으로 기초하여 결정될 수 있다. 센서가 가상 메시지 공(506a)의 특징을 기록하는 경우, 가상 물리적 파라미터는 센서에 의해 기록되는 정보에 적어도 부분적으로 기초하여 결정될 수 있다. 예를 들어, 사용자는 메시징 디바이스를 기울이거나 이에 대해 제스처를 취하여 신규 가상 메시지 객체의 크기와 연관되는 특징을 기록할 수 있다. 다음으로, 신규 가상 메시지 객체의 가상 물리적 크기가 제스처 또는 움직임의 크기에 대응할 수 있고, 메시징 디바이스의 작은 움직임이 작은 가상 메시지 객체를 생산할 수 있는 한편, 메시징 디바이스의 큰 움직임 또는 제스처가 큰 가상 메시지 객체를 생산할 수 있다.
신규 가상 메시지 튜브가 생성되는 경우(506b), (라인들의 수 또는 단어들의 수와 같은) 텍스트 메시지의 길이는, 적어도 부분적으로, 튜브의 크기 또는 길이와 같은 신규 가상 메시지 튜브의 하나 이상의 가상 물리적 파라미터를 결정할 수 있다. 가상 메시지 튜브의 크기 또는 길이에 기초한 햅틱 효과가 결정될 수 있다. 따라서, 햅팁 감각들은 가상 메시지 튜브에 대한 정보를 전할 수 있다.
신규 가상 메시지 캡슐(504c)의 경우, 선택된 파일(506c)의 크기가 신규 가상 메시지 객체의 가상 질량을 결정할 수 있다. 햅틱 효과가 가상 메시지 객체의 가상 질량에 적어도 부분적으로 기초할 수 있기 때문에, 이 가상 메시지 객체를 위해 특별히 디자인된 햅틱 효과가 생성될 수 있다. 발생한 햅틱 감각들은 파일 캡슐이 포함하는 데이터량, 또는 데이터 유형과 같은 파일 캡슐에 관한 정보를 전할 수 있다.
작동기로 하여금 신규 가상 메시지 객체의 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 출력하도록 하기 위한 햅틱 신호가 생성된다(510). 마지막으로, 햅틱 신호는 햅틱 효과를 출력하도록 구성되는 작동기로 송신된다(512). 햅틱 효과는 가상 메시지 객체 및 가상 메시지 환경 간의 상호동작에 적어도 부분적으로 기초할 수 있다. 가상 메시지 객체의 행동은 가상 메시지 객체의 가상 물리적 파라미터에 적어도 부분적으로 기초할 수 있다. 알 껍질 가상 메시지 객체는 가상 메시지 환경과 충돌하여 깨지거나 부서질 수 있다. 대안으로, 가상 메시지 화살표는 하나의 울리는 쿵 치는 것과 함께 도달할 수 있다. 가상 메시지 거품은 거품 터지기와 같은 짧고, 뾰족한 햅틱 효과와 연관될 수 있다.
신규 가상 메시지 객체가 큰 공이면, 작동기로 하여금 가상 메시지 환경에서 여기저기를 튕기거나 구르는 큰 공을 모방하는 햅틱 효과를 출력하도록 하는 햅틱 신호가 생성될 수 있다. 신규 가상 메시지 객체가 작은 캡슐이면, 햅틱 신호는 작동기로 하여금 가상 메시지 환경 내에서 작은 캡슐 부서짐을 모방하는 햅틱 효과를 출력하도록 하는 햅틱 신호가 생성될 수 있다.
햅틱 효과들은 가상 메시지 객체들과 연관될 수 있다. 햅틱 효과들은 가상 메시지 객체가 메시징 디바이스들 간에서 교환될 때 보존될 수 있다. 예를 들어, 프로세서는 가상 메시지 캡슐을 특정한 햅틱 효과들과 연관시킬 수 있다. 캡슐이 하나의 모바일 디바이스에서 다른 디바이스로 보내지는 경우, 햅틱 데이터는 또한 수신하는 디바이스로 보내진다. 이 햅틱 데이터는 수신하는 디바이스에 햅틱 피드백을 생성하는데 사용될 수 있다.
도 6은 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들에 맵핑하기 위한 시스템의 도면이다. 도 6에 도시된 바와 같이, 시스템(600)은 메시징 디바이스(602)를 포함한다. 메시징 디바이스(602)는 가상 메시지 작성 환경(650)을 디스플레이한다. 메시징 디바이스(602)는 하나 이상의 프로세서(들)(도 6에 도시되지 않음)를 포함한다.
추가적으로, 메시징 디바이스(602)는 하나 이상의 센서(도 6에 도시되지 않음)를 포함할 수 있다. 가속도계와 같은 센서는 메시징 디바이스의 가속, 경사, 관성 또는 위치의 변화들을 검출하도록 구성될 수 있다. 그외의 예들로, 메시징 디바이스는 공기 압력 센서, 위치 센서, 회전 속도 센서, 이미지 센서, 압력 센서, 또는 일부의 그외의 유형의 센서를 포함할 수 있다. 센서(들)는 센서 신호를 프로세서로 송신하도록 구성된다.
일 변형 예에서, 가속 감지는 가상 메시지 객체를 생성하는 것과 연관되는 제스처 또는 움직임을 캡쳐하는데 사용될 수 있다. 다른 변형 예에서, 터치 스크린과 같은 터치 감지 입력 디바이스는 신규 가상 메시지 객체와 연관된 그림을 캡쳐하는데 사용된다. 자이로스코프 센서는 메시징 디바이스의 x 및 y 평면들에서의 방향의 변화들을 검출할 수 있다. 도 6에 도시된 바와 같이, 모바일 디바이스(602)는 화살표(610)에 따른 방향으로 움직인다. 프로세서는, 도 6에 도시된 제스처로부터 생성되는 가상 메시지 객체가 크고, 둥글며, 가상 메시지 환경 주위를 쉽게 굴러다닌다고 결정할 수 있다. 대응하는 햅틱 효과는 부드럽고, 잔잔한 진동이 될 수 있다.
도 7은 본 발명의 일 실시예에 따라 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들에 맵핑하기 위한 시스템의 도면이다. 도 7에 도시된 바와 같이, 시스템(700)은 메시징 디바이스(702)를 포함한다. 메시징 디바이스는 가상 메시지 작성 환경(750)을 디스플레이한다. 메시징 디바이스(702)는 하나 이상의 프로세서(도 7에 도시되지 않음) 및 하나 이상의 센서(도 7에 도시되지 않음)를 포함할 수 있다.
도 7에 도시된 바와 같이, 사용자는 화살표(710)의 방향에 의해 표시되는 짧은 수평 움직임들로 메시징 디바이스를 움직이거나 흔든다. 도 7에 도시된 각각의 움직임 또는 제스처로부터 추출된 센서 데이터는 특정한 가상 물리적 속성들을 갖는 신규 가상 메시지 객체를 생성하는데 사용될 수 있다. 프로세서는 도 7에 도시된 제스처로부터 생성되는 가상 메시지 객체가 작고, 거친 객체일 수 있다고 결정할 수 있다. 대응하는 햅틱 효과는 빠른 덜컥하는 움직임(jolt)의 연속이 될 수 있다.
각각의 햅틱 효과는 가상 메시지 객체와 연관되고 보존될 수 있다. 예를 들어, 햅틱 효과는 가상 메시지 객체의 프로파일에 포함될 수 있다. 이러한 방법으로 가상 메시지 객체를 수신하는 메시징 디바이스는 또한 가상 메시지 객체와 연관되는 햅틱 효과에 대응하는 신호를 수신한다. 이러한 방식으로, 사용자들은 비언어 햅틱 메시지들을 통해 통신할 수 있다.
본 발명의 실시예들은 디지털 전자 회로, 또는 컴퓨터 하드웨어, 펌웨어, 소프트웨어, 또는 이들의 조합으로 구현될 수 있다. 일 실시예에서, 컴퓨터는 하나의 프로세서 또는 프로세서들을 포함할 수 있다. 프로세서는 프로세서에 결합되는 RAM(random access memory)와 같은 컴퓨터 판독가능한 매체를 포함한다. 프로세서는, 메시징을 위한 하나 이상의 컴퓨터 프로그램을 실행하는 것과 같이, 메모리에 기억된 컴퓨터 실행가능한 프로그램 명령어들을 실행한다. 이러한 프로세서들은 마이크로프로세서, DSP(digital signal processor), ASIC(application-specific integrated circuit), FPGA(field programmable gate arrays), 상태 머신(state machine)을 포함할 수 있다. 이러한 프로세서들은 PLC, PIC(programmable interrupt controller), PLD(programmable logic devices), PROM(programmable read-only memory), 전자적으로 프로그램가능한 리드 온니 메모리(electronically programmable read-only memory; EPROM 또는 EEPROM), 또는 기타 유사 디바이스들과 같은 프로그램가능한 전자 디바이스들을 더 포함할 수 있다.
이러한 프로세서들은 매체, 예컨대 프로세서에 의해 실행되는 경우 프로세서로 하여금 본 명세서에서 프로세서에 의해 실행되거나 보조되는 단계들을 수행하도록 할 수 있는 명령어들을 저장할 수 있는 컴퓨터 판독가능 매체를 포함하거나 이 매체와 통신할 수 있다. 컴퓨터 판독가능 매체의 실시예들은 이하에 한정되지 않지만, 전자, 광, 자기, 또는 기타 저장소 또는 웹 서버 내의 프로세서와 같은 프로세서에 컴퓨터 판독가능 명령어들을 제공할 수 있는 송신 디바이스를 포함할 수 있다. 매체의 다른 예들은 이하에 한정되지 않지만, 플로피 디스크, CD-ROM, 자기 디스크, 메모리 칩, ROM, RAM, ASIC, 구성(configured) 프로세서, 모든 광 매체, 모든 자기 테이프 또는 기타 자기 매체, 또는 컴퓨터 프로세서가 판독할 수 있는 임의의 기타 매체를 포함한다. 또한, 라우터, 개인 또는 공공 네트워크, 또는 기타 송신 디바이스와 같은 다양한 기타 디바이스들이 컴퓨터 판독가능 매체를 포함할 수 있다. 설명된 프로세서 및 프로세싱은 하나 이상의 구조로 될 수 있고, 하나 이상의 구조를 통해 분산될 수 있다. 프로세서는 본 명세서에서 설명되는 하나 이상의 방법(또는 방법의 일부)을 수행하기 위한 코드를 포함할 수 있다.
일반
본 발명의 바람직한 실시예들을 포함하는 실시예들의 위의 설명은 예시 및 설명을 위해서만 제공된 것이지 모두 망라하거나 발명의 게시된 특정 형태로 한정하기 위한 것이 아니다. 당업자라면 본 발명의 사상 및 범위를 벗어나지 않는 한도 내에서 이의 다양한 수정 및 각색이 가능하다는 것을 알 수 있다.

Claims (21)

  1. 프로세서에 의해 수행되는 방법으로서,
    제1 메시징 디바이스와의 상호동작을 감지하도록 구성되는 센서로부터 센서 신호를 수신하는 단계;
    상기 센서 신호에 적어도 부분적으로 기초하여 제1 가상 물리적 파라미터를 결정하는 단계;
    상기 제1 가상 물리적 파라미터와 연관된 제1 신호를, 제2 메시징 디바이스에 송신하는 단계;
    상기 제2 메시징 디바이스로부터 제2 가상 물리적 파라미터와 연관된 제2 신호를 수신하는 단계;
    상기 제2 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과(haptic effect)를 결정하는 단계; 및
    작동기(actuator)로 하여금 상기 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성하는 단계
    를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 센서는 기동(air movement), 접촉, 압력, 가속, 경사, 관성 또는 위치를 검출하도록 구성되는, 방법.
  3. 제1항에 있어서,
    상기 센서는 가속도계, 자이로스코프, 터치 감지 입력 디바이스, 카메라, 또는 GPS 센서를 포함하는, 방법.
  4. 제1항에 있어서,
    상기 센서 신호는 그림(picture) 안의 객체의 모양 또는 컬러와 연관되는, 방법.
  5. 제1항에 있어서,
    상기 센서 신호는 제스처와 연관되는, 방법.
  6. 제5항에 있어서,
    상기 제스처는 손가락 위치 또는 손가락 제스처를 포함하는 2차원 제스처인, 방법.
  7. 제5항에 있어서,
    상기 제스처는 디바이스 제스처 또는 디바이스 방향(orientation)을 포함하는 3차원 제스처인, 방법.
  8. 시스템으로서,
    제1 메시징 디바이스와의 상호동작을 감지하도록 구성되는 센서; 및
    상기 센서에 연결되는 프로세서를 포함하고,
    상기 프로세서는,
    상기 센서로부터 센서 신호를 수신하고;
    상기 센서 신호에 적어도 부분적으로 기초하여 제1 가상 물리적 파라미터를 결정하며;
    상기 제1 가상 물리적 파라미터와 연관된 제1 신호를 제2 메시징 디바이스에 송신하며;
    상기 제2 메시징 디바이스로부터 제2 가상 물리적 파라미터와 연관된 제2 신호를 수신하며;
    상기 제2 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정하고;
    작동기로 하여금 상기 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성하도록 구성되는, 시스템.
  9. 제8항에 있어서,
    상기 센서는 기동, 접촉, 압력, 가속, 경사, 관성 또는 위치를 검출하도록 구성되는, 시스템.
  10. 제8항에 있어서,
    상기 센서는 가속도계, 자이로스코프, 터치 감지 입력 디바이스, 카메라, 또는 GPS 센서를 포함하는, 시스템.
  11. 제8항에 있어서,
    상기 센서 신호는 그림(picture) 안의 객체의 모양 또는 컬러와 연관되는, 시스템.
  12. 제8항에 있어서,
    상기 센서 신호는 제스처와 연관되는, 시스템.
  13. 제12항에 있어서,
    상기 제스처는 손가락 위치 또는 손가락 제스처를 포함하는 2차원 제스처인, 시스템.
  14. 제12항에 있어서,
    상기 제스처는 디바이스 제스처 또는 디바이스 방향을 포함하는 3차원 제스처인, 시스템.
  15. 프로그램 코드를 포함하는 비일시적인 컴퓨터 판독가능 매체로서,
    상기 프로그램 코드는, 프로세서에 의해 실행될 경우, 상기 프로세서로 하여금,
    제1 메시징 디바이스와의 상호동작을 감지하도록 구성되는 센서로부터 센서 신호를 수신하고;
    상기 센서 신호에 적어도 부분적으로 기초하여 제1 가상 물리적 파라미터를 결정하고;
    상기 제1 가상 물리적 파라미터와 연관된 제1 신호를, 제2 메시징 디바이스에 송신하고;
    상기 제2 메시징 디바이스로부터 제2 가상 물리적 파라미터와 연관된 제2 신호를 수신하고;
    상기 제2 가상 물리적 파라미터에 적어도 부분적으로 기초하여 햅틱 효과를 결정하고;
    작동기로 하여금 상기 햅틱 효과를 출력하도록 구성되는 햅틱 신호를 생성하도록 구성되는,
    비일시적인 컴퓨터 판독가능 매체.
  16. 제15항에 있어서,
    상기 센서는 기동, 접촉, 압력, 가속, 경사, 관성 또는 위치를 검출하도록 구성되는, 비일시적인 컴퓨터 판독가능 매체.
  17. 제15항에 있어서,
    상기 센서는 가속도계, 자이로스코프, 터치 감지 입력 디바이스, 카메라, 또는 GPS 센서를 포함하는, 비일시적인 컴퓨터 판독가능 매체.
  18. 제15항에 있어서,
    상기 센서 신호는 그림(picture) 안의 객체의 모양 또는 컬러와 연관되는, 비일시적인 컴퓨터 판독가능 매체.
  19. 제15항에 있어서,
    상기 센서 신호는 제스처와 연관되는, 비일시적인 컴퓨터 판독가능 매체.
  20. 제19항에 있어서,
    상기 제스처는 손가락 위치 또는 손가락 제스처를 포함하는 2차원 제스처인, 비일시적인 컴퓨터 판독가능 매체.
  21. 제19항에 있어서,
    상기 제스처는 디바이스 제스처 또는 디바이스 방향을 포함하는 3차원 제스처인, 비일시적인 컴퓨터 판독가능 매체.
KR1020147002738A 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체 KR101522145B1 (ko)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US8098508P 2008-07-15 2008-07-15
US8098708P 2008-07-15 2008-07-15
US8097808P 2008-07-15 2008-07-15
US8098108P 2008-07-15 2008-07-15
US61/080,978 2008-07-15
US61/080,981 2008-07-15
US61/080,987 2008-07-15
US61/080,985 2008-07-15
US14831209P 2009-01-29 2009-01-29
US61/148,312 2009-01-29
US18128009P 2009-05-26 2009-05-26
US61/181,280 2009-05-26
PCT/US2009/050564 WO2010009145A1 (en) 2008-07-15 2009-07-14 Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020117003489A Division KR101404367B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020147028879A Division KR101600226B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체

Publications (2)

Publication Number Publication Date
KR20140027543A KR20140027543A (ko) 2014-03-06
KR101522145B1 true KR101522145B1 (ko) 2015-05-20

Family

ID=41119917

Family Applications (18)

Application Number Title Priority Date Filing Date
KR1020147002738A KR101522145B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체
KR1020117003437A KR20110052629A (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187013053A KR102045165B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167026279A KR101838425B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020117003511A KR101661368B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020177032718A KR101871646B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187017394A KR101989763B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020167002561A KR101956999B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020177006891A KR102045128B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167027748A KR102056518B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187006662A KR20180029101A (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020147028879A KR101600226B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체
KR1020117003432A KR101300429B1 (ko) 2008-07-15 2009-07-14 수동 및 능동 모드 간의 햅틱 피드백 기능을 시프트하기 위한 시스템 및 방법
KR1020117003491A KR20110036617A (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020117003489A KR101404367B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법
KR1020167005201A KR101690469B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체
KR1020187033607A KR102045170B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167002451A KR101788995B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법

Family Applications After (17)

Application Number Title Priority Date Filing Date
KR1020117003437A KR20110052629A (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187013053A KR102045165B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167026279A KR101838425B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020117003511A KR101661368B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020177032718A KR101871646B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187017394A KR101989763B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020167002561A KR101956999B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020177006891A KR102045128B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167027748A KR102056518B1 (ko) 2008-07-15 2009-07-14 물리 기반 촉각 메시징을 위한 시스템 및 방법
KR1020187006662A KR20180029101A (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법
KR1020147028879A KR101600226B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체
KR1020117003432A KR101300429B1 (ko) 2008-07-15 2009-07-14 수동 및 능동 모드 간의 햅틱 피드백 기능을 시프트하기 위한 시스템 및 방법
KR1020117003491A KR20110036617A (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020117003489A KR101404367B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법
KR1020167005201A KR101690469B1 (ko) 2008-07-15 2009-07-14 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법, 및 비일시적인 컴퓨터 판독가능 매체
KR1020187033607A KR102045170B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지들을 송신하기 위한 시스템 및 방법
KR1020167002451A KR101788995B1 (ko) 2008-07-15 2009-07-14 햅틱 메시지 송신을 위한 시스템 및 방법

Country Status (6)

Country Link
US (20) US8638301B2 (ko)
EP (13) EP3206381A1 (ko)
JP (20) JP5337877B2 (ko)
KR (18) KR101522145B1 (ko)
CN (10) CN104111726B (ko)
WO (5) WO2010009152A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10203756B2 (en) 2008-07-15 2019-02-12 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes

Families Citing this family (356)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU1328597A (en) * 1995-11-30 1997-06-19 Virtual Technologies, Inc. Tactile feedback man-machine interface device
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
BRPI0804355A2 (pt) * 2008-03-10 2009-11-03 Lg Electronics Inc terminal e método de controle do mesmo
US8594740B2 (en) 2008-06-11 2013-11-26 Pantech Co., Ltd. Mobile communication terminal and data input method
USD618248S1 (en) * 2008-09-23 2010-06-22 Apple Inc. Graphical user interface for a display screen or portion thereof
US8004391B2 (en) * 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100146395A1 (en) * 2008-12-08 2010-06-10 Gustavo De Los Reyes Method and System for Exploiting Interactions Via A Virtual Environment
KR20100086161A (ko) * 2009-01-22 2010-07-30 주식회사 팬택 바람 인식을 통한 동작 제어 장치 및 방법
US8572493B2 (en) * 2009-01-29 2013-10-29 Rick Qureshi Mobile device messaging application
JP4706985B2 (ja) * 2009-03-04 2011-06-22 コニカミノルタビジネステクノロジーズ株式会社 コンテンツ表示装置
KR20170016521A (ko) * 2009-03-12 2017-02-13 임머숀 코퍼레이션 다수의 액츄에이터를 사용하여 텍스처를 실현하는 시스템 및 방법
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
US10007340B2 (en) 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
US9927873B2 (en) 2009-03-12 2018-03-27 Immersion Corporation Systems and methods for using textures in graphical user interface widgets
KR101593598B1 (ko) * 2009-04-03 2016-02-12 삼성전자주식회사 휴대단말에서 제스처를 이용한 기능 실행 방법
US8660246B1 (en) * 2009-04-06 2014-02-25 Wendell Brown Method and apparatus for content presentation in association with a telephone call
JP5639151B2 (ja) * 2009-04-15 2014-12-10 コーニンクレッカ フィリップス エヌ ヴェ 折り畳み式触覚ディスプレイ
US20100306825A1 (en) * 2009-05-27 2010-12-02 Lucid Ventures, Inc. System and method for facilitating user interaction with a simulated object associated with a physical location
US8009022B2 (en) * 2009-05-29 2011-08-30 Microsoft Corporation Systems and methods for immersive interaction with virtual objects
US8762886B2 (en) * 2009-07-30 2014-06-24 Lenovo (Singapore) Pte. Ltd. Emulating fundamental forces of physics on a virtual, touchable object
US20110029904A1 (en) * 2009-07-30 2011-02-03 Adam Miles Smith Behavior and Appearance of Touch-Optimized User Interface Elements for Controlling Computer Function
US20110029864A1 (en) * 2009-07-30 2011-02-03 Aaron Michael Stewart Touch-Optimized Approach for Controlling Computer Function Using Touch Sensitive Tiles
US8656314B2 (en) * 2009-07-30 2014-02-18 Lenovo (Singapore) Pte. Ltd. Finger touch gesture for joining and unjoining discrete touch objects
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
US20110084962A1 (en) * 2009-10-12 2011-04-14 Jong Hwan Kim Mobile terminal and image processing method therein
US9201584B2 (en) * 2009-11-06 2015-12-01 Bose Corporation Audio/visual device user interface with tactile feedback
US20110112821A1 (en) * 2009-11-11 2011-05-12 Andrea Basso Method and apparatus for multimodal content translation
US9621706B2 (en) * 2009-11-18 2017-04-11 Qualcomm Incorporated System and method of haptic communication at a portable computing device
US9046923B2 (en) * 2009-12-31 2015-06-02 Verizon Patent And Licensing Inc. Haptic/voice-over navigation assistance
US9436280B2 (en) * 2010-01-07 2016-09-06 Qualcomm Incorporated Simulation of three-dimensional touch sensation using haptics
JP5665322B2 (ja) * 2010-01-25 2015-02-04 京セラ株式会社 電子機器
CA2787831A1 (en) * 2010-01-28 2011-08-04 Liquor Monitor, Llc Dispensing monitor
US9333039B2 (en) 2010-02-09 2016-05-10 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
US8839150B2 (en) * 2010-02-10 2014-09-16 Apple Inc. Graphical objects that respond to touch or motion input
US8185596B2 (en) * 2010-02-22 2012-05-22 Samsung Electronics Co., Ltd. Location-based communication method and system
EP3336658B1 (en) * 2010-03-01 2020-07-22 BlackBerry Limited Method of providing tactile feedback and apparatus
US9361018B2 (en) * 2010-03-01 2016-06-07 Blackberry Limited Method of providing tactile feedback and apparatus
US8570161B2 (en) 2010-03-16 2013-10-29 Immersion Corporation Systems and methods for haptic information preview
JP2011197777A (ja) * 2010-03-17 2011-10-06 Sony Corp 情報処理装置、情報処理方法およびプログラム
KR101640043B1 (ko) * 2010-04-14 2016-07-15 삼성전자주식회사 가상 세계 처리 장치 및 방법
CA2796451A1 (en) * 2010-04-16 2011-10-20 Nicholas J. Mastandrea Wearable motion sensing computing interface
US9791928B2 (en) 2010-04-26 2017-10-17 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9733705B2 (en) 2010-04-26 2017-08-15 Nokia Technologies Oy Apparatus, method, computer program and user interface
US9715275B2 (en) 2010-04-26 2017-07-25 Nokia Technologies Oy Apparatus, method, computer program and user interface
JP2012003508A (ja) * 2010-06-16 2012-01-05 Toshiba Corp 情報処理装置、方法及びプログラム
US9132352B1 (en) 2010-06-24 2015-09-15 Gregory S. Rabin Interactive system and method for rendering an object
US20120001856A1 (en) * 2010-07-02 2012-01-05 Nokia Corporation Responding to tactile inputs
KR20120005124A (ko) * 2010-07-08 2012-01-16 삼성전자주식회사 휴대용 단말기에서 움직임에 따른 동작을 수행하기 위한 장치 및 방법
US8798534B2 (en) 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
US8988445B2 (en) * 2010-07-30 2015-03-24 The Trustees Of The University Of Pennsylvania Systems and methods for capturing and recreating the feel of surfaces
US8917249B1 (en) 2010-08-05 2014-12-23 Amazon Technologies, Inc. Reduction of touch-sensor interference from active display
US9329721B1 (en) * 2010-08-05 2016-05-03 Amazon Technologies, Inc. Reduction of touch-sensor interference from stable display
TWI492100B (zh) * 2010-08-25 2015-07-11 Fih Hong Kong Ltd 電子裝置及其解鎖方法
US20120054667A1 (en) * 2010-08-31 2012-03-01 Blackboard Inc. Separate and simultaneous control of windows in windowing systems
US10318002B2 (en) * 2010-09-15 2019-06-11 Inventus Engineering Gmbh Magnetorheological transmission device
KR101708821B1 (ko) * 2010-09-30 2017-02-21 엘지전자 주식회사 이동 단말기 및 그 제어 방법
US8564535B2 (en) * 2010-10-05 2013-10-22 Immersion Corporation Physical model based gesture recognition
US9483786B2 (en) 2011-10-13 2016-11-01 Gift Card Impressions, LLC Gift card ordering system and method
WO2012063123A2 (en) * 2010-11-09 2012-05-18 WOOW Inc. Limited Apparatus and method for physical interaction over a distance using a telecommunication device
US20130215079A1 (en) * 2010-11-09 2013-08-22 Koninklijke Philips Electronics N.V. User interface with haptic feedback
JP5479414B2 (ja) * 2010-11-24 2014-04-23 キヤノン株式会社 情報処理装置およびその制御方法
US11314344B2 (en) * 2010-12-03 2022-04-26 Razer (Asia-Pacific) Pte. Ltd. Haptic ecosystem
US9201467B2 (en) 2011-01-26 2015-12-01 Sony Corporation Portable terminal having user interface function, display method, and computer program
JP5654886B2 (ja) * 2011-01-26 2015-01-14 株式会社ソニー・コンピュータエンタテインメント 携帯端末、表示方法及びコンピュータプログラム
US9990856B2 (en) 2011-02-08 2018-06-05 The Trustees Of The University Of Pennsylvania Systems and methods for providing vibration feedback in robotic systems
JP5809079B2 (ja) * 2011-02-10 2015-11-10 京セラ株式会社 電子機器及び電子機器の制御方法
CN103262465B (zh) * 2011-02-24 2016-07-06 英派尔科技开发有限公司 使用移动设备进行的认证
EP2498250B1 (en) * 2011-03-07 2021-05-05 Accenture Global Services Limited Client and server system for natural language-based control of a digital network of devices
US8872854B1 (en) * 2011-03-24 2014-10-28 David A. Levitt Methods for real-time navigation and display of virtual worlds
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
US9448713B2 (en) * 2011-04-22 2016-09-20 Immersion Corporation Electro-vibrotactile display
JP2012242927A (ja) * 2011-05-17 2012-12-10 Seiko Epson Corp 移動端末装置、移動端末装置の制御方法、及び、プログラム
US8710967B2 (en) 2011-05-18 2014-04-29 Blackberry Limited Non-visual presentation of information on an electronic wireless device
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
US20130033366A1 (en) * 2011-08-01 2013-02-07 Mcdonough Colin Albright Method and system for providing haptic feedback of variable intensity
WO2013022021A1 (ja) * 2011-08-09 2013-02-14 株式会社ニコン 電子機器
US9762719B2 (en) 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
US9501150B2 (en) * 2011-10-01 2016-11-22 Oracle International Corporation Moving an object about a display frame by combining classical mechanics of motion
CN103842937A (zh) * 2011-10-04 2014-06-04 株式会社尼康 电子设备
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
KR102054370B1 (ko) * 2011-11-23 2019-12-12 삼성전자주식회사 햅틱 피드백 방법 및 장치, 기계로 읽을 수 있는 저장 매체 및 휴대용 통신 단말
CN102692997A (zh) * 2011-11-25 2012-09-26 北京十分科技有限公司 一种控制终端操作的方法
US20150205473A1 (en) * 2011-12-06 2015-07-23 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US8381102B1 (en) 2011-12-06 2013-02-19 Google Inc. Systems and methods for visually scrolling through a stack of items displayed on a device
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
US20130227411A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Sensation enhanced messaging
EP2795936B1 (en) * 2011-12-20 2019-06-26 Intel Corporation User-to-user communication enhancement with augmented reality
CN112446935B (zh) * 2011-12-20 2024-08-16 英特尔公司 存储内容和ar通信的本地传感器加强
KR101655876B1 (ko) * 2012-01-05 2016-09-09 삼성전자 주식회사 메시지 기반의 대화 기능 운용 방법 및 이를 지원하는 단말기
JP5777217B2 (ja) * 2012-01-26 2015-09-09 Kddi株式会社 押圧操作で動作モードが起動可能なユーザインタフェース装置、動作モード起動方法及びプログラム
US10430865B2 (en) 2012-01-30 2019-10-01 Gift Card Impressions, LLC Personalized webpage gifting system
KR20130088281A (ko) * 2012-01-31 2013-08-08 삼성전자주식회사 디스플레이장치, 업그레이드장치, 그 제어방법 및 디스플레이 시스템
US20130196293A1 (en) * 2012-01-31 2013-08-01 Michael C. Wood Phonic learning using a mobile computing device having motion sensing capabilities
US9083546B2 (en) * 2012-01-31 2015-07-14 Rajendra Padma Sadhu System and method for communicating health parameters of an occupant in an automobile and a dynamic operation of the automobile and home automation
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
EP3321780A1 (en) * 2012-02-15 2018-05-16 Immersion Corporation High definition haptic effects generation using primitives
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US20120223880A1 (en) * 2012-02-15 2012-09-06 Immersion Corporation Method and apparatus for producing a dynamic haptic effect
TWI626591B (zh) * 2012-03-01 2018-06-11 群邁通訊股份有限公司 應用程式切換系統及方法
US9702723B2 (en) * 2012-03-01 2017-07-11 Nokia Technologies Oy Method and apparatus for receiving user estimation of navigational instructions
CN102624981A (zh) * 2012-03-07 2012-08-01 华为终端有限公司 一种数据传输方法及装置
US20130254233A1 (en) * 2012-03-20 2013-09-26 Avaya Inc. System and method for context-sensitive address book
CN104932688A (zh) * 2012-03-29 2015-09-23 华为终端有限公司 一种桌面容器的切换控制方法及终端
CN102662576B (zh) * 2012-03-29 2015-04-29 华为终端有限公司 基于触摸的信息发送方法及装置
CN103389849B (zh) * 2012-05-07 2018-10-16 腾讯科技（北京）有限公司 一种基于移动终端的图像展示方法、系统和移动终端
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
EP3096218B1 (en) 2012-05-09 2018-12-26 Apple Inc. Device, method, and graphical user interface for selecting user interface objects
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP3185116B1 (en) 2012-05-09 2019-09-11 Apple Inc. Device, method and graphical user interface for providing tactile feedback for operations performed in a user interface
JP2015519656A (ja) 2012-05-09 2015-07-09 アップル インコーポレイテッド ユーザインタフェースオブジェクトを移動し、ドロップするためのデバイス、方法及びグラフィカルユーザインタフェース
CN104471521B (zh) 2012-05-09 2018-10-23 苹果公司 用于针对改变用户界面对象的激活状态来提供反馈的设备、方法和图形用户界面
CN104487928B (zh) 2012-05-09 2018-07-06 苹果公司 用于响应于手势而在显示状态之间进行过渡的设备、方法和图形用户界面
KR102273603B1 (ko) 2012-05-11 2021-07-05 가부시키가이샤 한도오따이 에네루기 켄큐쇼 전자 기기, 기억 매체, 프로그램, 및 표시 방법
US8570296B2 (en) 2012-05-16 2013-10-29 Immersion Corporation System and method for display of multiple data channels on a single haptic display
US20130311881A1 (en) * 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US9313290B2 (en) * 2012-05-17 2016-04-12 Ncr Corporation Data transfer between devices
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
WO2014006709A1 (ja) * 2012-07-04 2014-01-09 株式会社Ｈｕｇｇ メッセージングシステムおよびメッセージ送信方法
US9030428B2 (en) * 2012-07-11 2015-05-12 Immersion Corporation Generating haptic effects for dynamic events
EP2688321B1 (en) * 2012-07-18 2015-06-24 BlackBerry Limited Method and apparatus for motion based ping during chat mode
US8914453B2 (en) * 2012-07-18 2014-12-16 Blackberry Limited Method and apparatus for motion based ping during chat mode
GB201215283D0 (en) * 2012-08-28 2012-10-10 Microsoft Corp Searching at a user device
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
CN106951169B (zh) * 2012-09-03 2021-05-18 联想(北京)有限公司 电子设备及其信息处理方法
CN103677242A (zh) * 2012-09-24 2014-03-26 联想(北京)有限公司 一种反馈模式确定的方法及电子设备
US8842969B2 (en) * 2012-09-28 2014-09-23 Intel Corporation Haptic playback of video
US9430991B2 (en) * 2012-10-02 2016-08-30 Futurewei Technologies, Inc. User interface display composition with device sensor/state based graphical effects
US20150212647A1 (en) 2012-10-10 2015-07-30 Samsung Electronics Co., Ltd. Head mounted display apparatus and method for displaying a content
KR102063952B1 (ko) * 2012-10-10 2020-01-08 삼성전자주식회사 멀티 디스플레이 장치 및 멀티 디스플레이 방법
US10168775B2 (en) * 2012-10-10 2019-01-01 Innovative Devices Inc. Wearable motion sensing computing interface
CN103777797B (zh) * 2012-10-23 2017-06-27 联想(北京)有限公司 一种信息处理的方法及电子设备
US9218075B2 (en) * 2012-11-01 2015-12-22 Immersion Corporation Haptically-enabled system with braking
KR20140068410A (ko) * 2012-11-28 2014-06-09 삼성전자주식회사 물리 엔진 기반의 사용자 인터페이스를 제공하는 방법 및 그 전자 장치
WO2014084374A1 (ja) * 2012-11-30 2014-06-05 日本電気株式会社 通信システム、通信方法、通信装置、プログラム、及び記録媒体
CN104838352B (zh) * 2012-12-07 2018-05-08 优特设备有限公司 在多表面装置中的动作初始化
US9046926B2 (en) * 2012-12-17 2015-06-02 International Business Machines Corporation System and method of dynamically generating a frequency pattern to realize the sense of touch in a computing device
CN103902081B (zh) * 2012-12-27 2018-04-27 联想(北京)有限公司 触感反馈的方法及电子设备
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
CN105144057B (zh) 2012-12-29 2019-05-17 苹果公司 用于根据具有模拟三维特征的控制图标的外观变化来移动光标的设备、方法和图形用户界面
AU2013368441B2 (en) 2012-12-29 2016-04-14 Apple Inc. Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
CN107831991B (zh) 2012-12-29 2020-11-27 苹果公司 用于确定是滚动还是选择内容的设备、方法和图形用户界面
US9501201B2 (en) * 2013-02-18 2016-11-22 Ebay Inc. System and method of modifying a user experience based on physical environment
US9202352B2 (en) * 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
US9866924B2 (en) * 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US9547366B2 (en) * 2013-03-14 2017-01-17 Immersion Corporation Systems and methods for haptic and gesture-driven paper simulation
US9189098B2 (en) 2013-03-14 2015-11-17 Immersion Corporation Systems and methods for syncing haptic feedback calls
FR3003362B1 (fr) * 2013-03-14 2015-04-03 Univ Compiegne Tech Procede et systeme de communication tactile
US9041647B2 (en) * 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US20140267142A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Extending interactive inputs via sensor fusion
JP2014194363A (ja) * 2013-03-28 2014-10-09 Fujitsu Ltd 誘導装置、誘導方法、及びプログラム
JP6354750B2 (ja) * 2013-04-01 2018-07-11 日本電気株式会社 コミュニティサービスシステム及びコミュニティサービス方法
CN103220424B (zh) * 2013-04-10 2016-03-02 广东欧珀移动通信有限公司 移动终端的信息发送方法及装置
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
EP2989525B1 (en) * 2013-04-26 2019-09-25 Immersion Corporation Simulation of tangible user interface interactions and gestures using array of haptic cells
WO2014190293A2 (en) * 2013-05-24 2014-11-27 New York University Haptic force-feedback for computing interfaces
US9454251B1 (en) 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
US9729730B2 (en) 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US20150043311A1 (en) * 2013-08-09 2015-02-12 Your Voice S.P.A. Execution of commands in an electronic device
US10037081B2 (en) 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
US10325457B2 (en) 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
US9443401B2 (en) 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US9652945B2 (en) 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
EP3049882A1 (en) * 2013-09-26 2016-08-03 Longsand Limited Device notifications
US9888333B2 (en) * 2013-11-11 2018-02-06 Google Technology Holdings LLC Three-dimensional audio rendering techniques
US9639158B2 (en) * 2013-11-26 2017-05-02 Immersion Corporation Systems and methods for generating friction and vibrotactile effects
KR102026731B1 (ko) * 2013-12-17 2019-09-30 엘지전자 주식회사 이동단말기 및 그 제어방법
US9374688B2 (en) * 2013-11-28 2016-06-21 Lg Electronics Inc. Mobile terminal and method for controlling the same
US9996973B2 (en) * 2013-11-30 2018-06-12 Empire Technology Development Llc Augmented reality objects based on biometric feedback
CN103713822B (zh) * 2013-12-27 2017-09-29 联想(北京)有限公司 一种信息处理方法及第一电子设备
CN103645833B (zh) * 2013-12-27 2017-06-27 联想(北京)有限公司 一种信息处理方法及电子设备
JP6664069B2 (ja) * 2013-12-31 2020-03-13 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 触覚コンテンツを伴う視点動画を記録及び再生するシステム並びに方法
JP6289100B2 (ja) * 2014-01-06 2018-03-07 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10437341B2 (en) * 2014-01-16 2019-10-08 Immersion Corporation Systems and methods for user generated content authoring
CN103885708A (zh) * 2014-02-28 2014-06-25 宇龙计算机通信科技(深圳)有限公司 触觉交互的方法及系统
CN104902064A (zh) * 2014-03-07 2015-09-09 宇龙计算机通信科技(深圳)有限公司 一种短消息显示系统、方法及终端
US10067566B2 (en) 2014-03-19 2018-09-04 Immersion Corporation Systems and methods for a shared haptic experience
WO2015143124A1 (en) * 2014-03-21 2015-09-24 Immersion Corporation Systems and methods for haptically-enabled curved devices
US9471144B2 (en) 2014-03-31 2016-10-18 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US10437447B1 (en) * 2014-03-31 2019-10-08 Amazon Technologies, Inc. Magnet based physical model user interface control
US9606710B1 (en) 2014-03-31 2017-03-28 Amazon Technologies, Inc. Configuring movement-based user interface control
US9104237B1 (en) * 2014-03-31 2015-08-11 Gift Card Impressions, LLC System and method for digital delivery of reveal videos for online gifting
US20150331550A1 (en) * 2014-05-15 2015-11-19 Narvii Inc. Systems and methods implementing user interface objects
KR102125207B1 (ko) * 2014-05-31 2020-06-22 삼성전자 주식회사 전자 장치 및 애플리케이션 실행 방법
WO2016007426A1 (en) 2014-07-07 2016-01-14 Immersion Corporation Second screen haptics
US9600083B2 (en) * 2014-07-15 2017-03-21 Immersion Corporation Systems and methods to generate haptic feedback for skin-mediated interactions
WO2016009016A1 (en) 2014-07-17 2016-01-21 Koninklijke Philips N.V. Method of obtaining gesture zone definition data for a control system based on user input
USD763885S1 (en) * 2014-07-24 2016-08-16 Beijing Qihoo Technology Co. Ltd Display screen with a graphical user interface
AU2015306091B2 (en) * 2014-08-20 2021-04-01 Touchgram Pty Ltd A system and a method for sending a touch message
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
US10795567B2 (en) * 2014-08-22 2020-10-06 Zoho Corporation Private Limited Multimedia applications and user interfaces
DE202015006142U1 (de) 2014-09-02 2015-12-09 Apple Inc. Elektronische Touch-Kommunikation
WO2016036427A1 (en) * 2014-09-02 2016-03-10 Apple Inc. Electronic device with rotatable input mechanism
KR102096146B1 (ko) 2014-09-02 2020-04-28 애플 인크. 가변 햅틱 출력을 위한 시맨틱 프레임워크
CN105396289A (zh) * 2014-09-15 2016-03-16 掌赢信息科技（上海）有限公司 实时游戏和多媒体会话过程中实现特效的方法及装置
JP5848811B2 (ja) * 2014-10-01 2016-01-27 シャープ株式会社 送信機、受信機、およびプログラム
CN107850953B (zh) * 2014-11-05 2021-08-31 威尔乌集团 用于在虚拟现实环境中引导用户的感官反馈系统和方法
US9535550B2 (en) 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
EP3226151A4 (en) * 2014-11-26 2018-07-04 Sony Corporation Information processing device, information processing method, and program
US9971406B2 (en) 2014-12-05 2018-05-15 International Business Machines Corporation Visually enhanced tactile feedback
US9658693B2 (en) * 2014-12-19 2017-05-23 Immersion Corporation Systems and methods for haptically-enabled interactions with objects
GB2533572A (en) * 2014-12-22 2016-06-29 Nokia Technologies Oy Haptic output methods and devices
US9478109B2 (en) * 2014-12-29 2016-10-25 Immersion Corporation Virtual sensor in a virtual environment
CN115048007B (zh) * 2014-12-31 2024-05-07 创新先进技术有限公司 调整界面操作图标分布范围的装置、方法及触摸屏设备
KR20160088081A (ko) * 2015-01-15 2016-07-25 삼성전자주식회사 영상 촬영 기기의 햅틱 인터페이스 및 이의 제어 방법
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US9645732B2 (en) * 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
JP6133344B2 (ja) * 2015-03-10 2017-05-24 株式会社コロプラ ヘッドマウントディスプレイへ表示するためのユーザインタフェース表示方法、及びプログラム
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US9571624B2 (en) * 2015-03-24 2017-02-14 Intel IP Corporation Apparatus, system and method of terminating a docking session between a mobile device and a docking device
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
JP2018513455A (ja) 2015-04-21 2018-05-24 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ エッチング入力の動的表現
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
JP5945621B2 (ja) * 2015-06-15 2016-07-05 Kddi株式会社 押圧操作で動作状態を切り替え可能なユーザインタフェース装置、動作状態切り替え方法及びプログラム
WO2016208099A1 (ja) * 2015-06-24 2016-12-29 パナソニックＩｐマネジメント株式会社 情報処理装置、情報処理装置に対する入力を制御する入力制御方法及び入力制御方法を情報処理装置に実行させるためのプログラム
US9473625B1 (en) * 2015-06-24 2016-10-18 Mast Mobile, Inc. Outgoing call management in a communication environment with unified communication interfaces
GB2540206B (en) * 2015-07-10 2018-02-07 Advanced Risc Mach Ltd Apparatus and method for executing instruction using range information associated with a pointer
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US10007304B2 (en) * 2015-08-20 2018-06-26 Mediatek Inc. Portable device and related vibration detecting method
US10303345B2 (en) * 2015-08-28 2019-05-28 Google Llc Transferring notifications between devices
US10484512B2 (en) 2015-08-31 2019-11-19 Ayla Networks, Inc. Management of multi-radio gateway device using virtual gateway device
US10404832B2 (en) * 2015-08-31 2019-09-03 Ayla Networks, Inc. Management of gateway device using virtual gateway device
US10248207B2 (en) 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
US10752262B2 (en) * 2015-10-29 2020-08-25 Ford Global Technologies, Llc In-vehicle haptic output
US10587542B2 (en) 2015-11-13 2020-03-10 Sony Corporation Communication system and storage medium for transmitting physical expression information
USD809589S1 (en) * 2015-11-18 2018-02-06 Paypal, Inc. Portable user device
KR102481486B1 (ko) 2015-12-04 2022-12-27 삼성전자주식회사 오디오 제공 방법 및 그 장치
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US9679547B1 (en) * 2016-04-04 2017-06-13 Disney Enterprises, Inc. Augmented reality music composition
WO2017183821A1 (ko) * 2016-04-21 2017-10-26 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
KR101928550B1 (ko) 2016-04-21 2018-12-12 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
US9805514B1 (en) * 2016-04-21 2017-10-31 Microsoft Technology Licensing, Llc Dynamic haptic retargeting
EP3242187B1 (en) 2016-05-04 2018-11-21 Vestel Elektronik Sanayi ve Ticaret A.S. System and method for simulating a reaction force from a virtual object
US11112963B2 (en) 2016-05-18 2021-09-07 Apple Inc. Devices, methods, and graphical user interfaces for messaging
KR20240023200A (ko) 2016-05-18 2024-02-20 애플 인크. 그래픽 메시징 사용자 인터페이스 내의 확인응답 옵션들의 적용
US9983675B2 (en) 2016-06-10 2018-05-29 Immersion Corporation Systems and methods for monitoring insulation integrity for electrostatic friction
DK179823B1 (en) 2016-06-12 2019-07-12 Apple Inc. DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK
DK201670737A1 (en) 2016-06-12 2018-01-22 Apple Inc Devices, Methods, and Graphical User Interfaces for Providing Haptic Feedback
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10073525B2 (en) 2016-06-16 2018-09-11 Immersion Corporation Systems and methods for a low profile haptic actuator
US10401962B2 (en) 2016-06-21 2019-09-03 Immersion Corporation Haptically enabled overlay for a pressure sensitive surface
US10004991B2 (en) 2016-06-28 2018-06-26 Hothead Games Inc. Systems and methods for customized camera views in virtualized environments
TWI677816B (zh) * 2016-08-11 2019-11-21 國立臺灣師範大學 傳送虛擬物體的方法及電子系統
JP6401758B2 (ja) * 2016-08-25 2018-10-10 株式会社ファセテラピー 触質コンテンツ生成装置、触質コンテンツ生成方法および触質コンテンツ利用機器
DK201670720A1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
DK179278B1 (en) 2016-09-06 2018-03-26 Apple Inc Devices, methods and graphical user interfaces for haptic mixing
US10884502B2 (en) 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
WO2018105266A1 (ja) * 2016-12-05 2018-06-14 ソニー株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム
US20180188905A1 (en) * 2017-01-04 2018-07-05 Google Inc. Generating messaging streams with animated objects
CN107015639B (zh) * 2017-01-24 2020-02-04 瑞声科技(新加坡)有限公司 触觉反馈的动态范围控制方法、触觉反馈系统及电子终端
WO2018152778A1 (en) * 2017-02-24 2018-08-30 Immersion Corporation Virtual affective touch
USD868080S1 (en) * 2017-03-27 2019-11-26 Sony Corporation Display panel or screen with an animated graphical user interface
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US10845955B2 (en) 2017-05-15 2020-11-24 Apple Inc. Displaying a scrollable list of affordances associated with physical activities
DK201770372A1 (en) 2017-05-16 2019-01-08 Apple Inc. TACTILE FEEDBACK FOR LOCKED DEVICE USER INTERFACES
JP6991754B2 (ja) * 2017-07-03 2022-01-13 株式会社ミツトヨ 端末装置およびプログラム
WO2019011396A1 (en) * 2017-07-10 2019-01-17 Telefonaktiebolaget Lm Ericsson (Publ) IMPROVED TRANSMISSION OF HAPTIC ENTRY
US10915174B1 (en) * 2017-07-20 2021-02-09 Apple Inc. Electronic devices with directional haptic output
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
US10455320B2 (en) 2017-08-02 2019-10-22 Body Beats, Llc System, method and apparatus for translating, converting and/or transforming audio energy into haptic and/or visual representation
US20190163271A1 (en) * 2017-11-27 2019-05-30 Immersion Corporation Systems and methods for providing haptic feedback according to tilt-based inputs
CN108109186B (zh) * 2017-11-30 2021-06-11 维沃移动通信有限公司 一种视频文件处理方法、装置及移动终端
US10818152B2 (en) * 2018-01-15 2020-10-27 Universal City Studios Llc Interactive systems and methods with feedback devices
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
JP1618150S (ko) * 2018-02-09 2018-11-19
DK180246B1 (en) 2018-03-12 2020-09-11 Apple Inc User interfaces for health monitoring
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10832537B2 (en) 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
EP3563937B1 (en) * 2018-05-02 2021-12-22 Goodix Technology (HK) Company Limited Haptic actuator controller
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11317833B2 (en) 2018-05-07 2022-05-03 Apple Inc. Displaying user interfaces associated with physical activities
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. DISPLAY OF USER INTERFACES ASSOCIATED WITH PHYSICAL ACTIVITIES
US11504201B2 (en) 2018-05-31 2022-11-22 Covidien Lp Haptic touch feedback surgical device for palpating tissue
US10649532B2 (en) * 2018-06-15 2020-05-12 Immersion Corporation Systems and methods for multi-rate control of haptic effects with sensor fusion
KR102175566B1 (ko) * 2018-07-19 2020-11-06 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
WO2020017813A1 (ko) * 2018-07-19 2020-01-23 주식회사 어플라이 사용자 장치 간 통신을 통하여 사용자의 심장박동을 모사하는 장치 및 방법
WO2020028826A1 (en) * 2018-08-02 2020-02-06 Firefly Dimension, Inc. System and method for human interaction with virtual objects
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
KR20200025817A (ko) 2018-08-31 2020-03-10 (주)뉴빌리티 비언어 기반의 정보 전달 방법 및 장치
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
EP3650960A1 (fr) * 2018-11-07 2020-05-13 Tissot S.A. Procede de diffusion d'un message par une montre
KR20200052540A (ko) * 2018-11-07 2020-05-15 (주)리얼감 밀도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
USD912699S1 (en) * 2018-11-15 2021-03-09 Biosense Webster (Israel) Ltd. Display screen or portion thereof with icon
US10834543B2 (en) * 2018-11-26 2020-11-10 International Business Machines Corporation Creating a social group with mobile phone vibration
US20200192480A1 (en) * 2018-12-18 2020-06-18 Immersion Corporation Systems and methods for providing haptic effects based on a user's motion or environment
KR20210111821A (ko) * 2019-02-08 2021-09-13 애플 인크. 3 차원 콘텐츠 내에서의 객체 위치설정 및 이동
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US12035445B2 (en) 2019-03-29 2024-07-09 Cirrus Logic Inc. Resonant tracking of an electromagnetic load
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US11283337B2 (en) 2019-03-29 2022-03-22 Cirrus Logic, Inc. Methods and systems for improving transducer dynamics
US11234077B2 (en) 2019-06-01 2022-01-25 Apple Inc. User interfaces for managing audio exposure
US11228835B2 (en) 2019-06-01 2022-01-18 Apple Inc. User interfaces for managing audio exposure
US11152100B2 (en) 2019-06-01 2021-10-19 Apple Inc. Health application user interfaces
US11209957B2 (en) 2019-06-01 2021-12-28 Apple Inc. User interfaces for cycle tracking
DK201970534A1 (en) 2019-06-01 2021-02-16 Apple Inc User interfaces for monitoring noise exposure levels
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
GB2604215B (en) 2019-06-21 2024-01-31 Cirrus Logic Int Semiconductor Ltd A method and apparatus for configuring a plurality of virtual buttons on a device
US10560563B1 (en) * 2019-06-25 2020-02-11 Bouton Sms Inc. Haptic device
US12002588B2 (en) 2019-07-17 2024-06-04 Apple Inc. Health event logging and coaching user interfaces
JP2021018546A (ja) * 2019-07-18 2021-02-15 トヨタ自動車株式会社 車両用コミュニケーション装置および車両用コミュニケーションシステム
CN110496392B (zh) * 2019-08-23 2020-12-01 腾讯科技（深圳）有限公司 虚拟对象的控制方法、装置、终端及存储介质
EP4004702A1 (en) 2019-09-09 2022-06-01 Apple Inc. Research study user interfaces
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
JP7490967B2 (ja) * 2020-01-27 2024-05-28 富士通株式会社 表示制御プログラム、表示制御方法、及び表示制御装置
WO2021183122A1 (en) 2020-03-11 2021-09-16 Google Llc Controlling haptic response to contact
WO2021183132A1 (en) 2020-03-12 2021-09-16 Google Llc Controlling haptic feedback based on proximity of contact to sensor
WO2021193421A1 (ja) * 2020-03-27 2021-09-30 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム及び情報処理システム
US11960651B2 (en) * 2020-03-30 2024-04-16 Snap Inc. Gesture-based shared AR session creation
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
US20210326594A1 (en) * 2020-04-17 2021-10-21 James Patrick COSTELLO Computer-generated supplemental content for video
DK181037B1 (en) 2020-06-02 2022-10-10 Apple Inc User interfaces for health applications
US11747857B2 (en) 2020-06-02 2023-09-05 Futurisks, LLC Wearable security device and charging band, system and method
US11698710B2 (en) 2020-08-31 2023-07-11 Apple Inc. User interfaces for logging user activities
WO2022054323A1 (ja) * 2020-09-09 2022-03-17 ソニーグループ株式会社 触覚提示装置、触覚提示システム、触覚提示制御方法及びプログラム
US11482002B1 (en) * 2020-10-16 2022-10-25 Splunk Inc. Codeless anchor detection for detectable features in an environment
EP4272059A1 (en) 2020-12-31 2023-11-08 Snap Inc. Electronic communication interface with haptic feedback response
US11989348B2 (en) 2020-12-31 2024-05-21 Snap Inc. Media content items with haptic feedback augmentations
US20220206584A1 (en) * 2020-12-31 2022-06-30 Snap Inc. Communication interface with haptic feedback response
CN116670635A (zh) 2020-12-31 2023-08-29 斯纳普公司 具有触觉反馈的实时视频通信界面
JP7340556B2 (ja) 2021-02-26 2023-09-07 任天堂株式会社 振動制御システム
US12050729B2 (en) * 2021-03-31 2024-07-30 Snap Inc. Real-time communication interface with haptic and audio feedback response
JP7503022B2 (ja) 2021-04-20 2024-06-19 Kddi株式会社 容器内の液体の動きを触覚としてユーザに伝達する携帯機器、プログラム及び方法
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
IL309800A (en) 2021-06-28 2024-02-01 Distal Reality LLC Haptic communication techniques
CN114296597A (zh) * 2021-12-01 2022-04-08 腾讯科技（深圳）有限公司 虚拟场景中的对象交互方法、装置、设备及存储介质
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths
WO2023108131A1 (en) * 2021-12-10 2023-06-15 Shaw Industries Group, Inc. Visceral surface covering simulator and method of use
WO2024034045A1 (ja) * 2022-08-10 2024-02-15 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム
WO2024112588A1 (en) * 2022-11-23 2024-05-30 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages
US20240171534A1 (en) 2022-11-23 2024-05-23 Music Makes Us Feels, Llc Multimedia messaging apparatuses and methods for sending multimedia messages

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0140118A1 (de) * 1983-09-16 1985-05-08 Bandag, Incorporated Verfahren zum Herstellen von Überzügen insbesondere für die Runderneuerung und Reparatur von Kraftfahrzeugen
JP2003078960A (ja) * 2001-09-03 2003-03-14 Ntt Power & Building Facilities Inc 携帯端末装置によるメールシステム

Family Cites Families (218)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2001A (en) * 1841-03-12 Sawmill
CH593295A5 (ko) 1972-04-13 1977-11-30 Ciba Geigy Ag
JPS5410520A (en) 1977-06-27 1979-01-26 Seiji Kajimoto Method of making roof
JPS5690726A (en) 1979-12-20 1981-07-23 Aisin Warner Ltd Transfer device for four wheel drive
JPS5793426A (en) 1980-11-29 1982-06-10 Toshiba Corp Key input device
US4873623A (en) * 1985-04-30 1989-10-10 Prometrix Corporation Process control interface with simultaneously displayed three level dynamic menu
JPH04249835A (ja) 1990-12-28 1992-09-04 Nec Corp 熱伝導冷却形マイクロ波管装置
JP3085481B2 (ja) * 1991-09-28 2000-09-11 株式会社ニコン 反射屈折縮小投影光学系、及び該光学系を備えた露光装置
JP2827612B2 (ja) 1991-10-07 1998-11-25 富士通株式会社 タッチパネル装置およびタッチパネル装置におけるオブジェクトの表示方法。
JPH05152054A (ja) 1991-11-29 1993-06-18 Tokyo Tekko Kk 除電装置用放電電極とその製造方法
JP2502914B2 (ja) 1992-07-31 1996-05-29 インターナショナル・ビジネス・マシーンズ・コーポレイション デ―タ転送方法及び装置
US6433771B1 (en) * 1992-12-02 2002-08-13 Cybernet Haptic Systems Corporation Haptic device attribute control
JPH06242886A (ja) 1993-02-10 1994-09-02 Canon Inc 電子メールシステム
US6903723B1 (en) * 1995-03-27 2005-06-07 Donald K. Forest Data entry method and apparatus
US5666499A (en) 1995-08-04 1997-09-09 Silicon Graphics, Inc. Clickaround tool-based graphical interface with two cursors
US5999168A (en) 1995-09-27 1999-12-07 Immersion Corporation Haptic accelerator for force feedback computer peripherals
US6374255B1 (en) * 1996-05-21 2002-04-16 Immersion Corporation Haptic authoring
JPH10240434A (ja) 1997-02-27 1998-09-11 Matsushita Electric Ind Co Ltd コマンドメニュー選択方法
JPH10254344A (ja) * 1997-03-14 1998-09-25 Atr Chinou Eizo Tsushin Kenkyusho:Kk 協調物体操作装置
JPH1115600A (ja) 1997-04-28 1999-01-22 Matsushita Electric Ind Co Ltd 一方の端末に作用する物理量も送信し受信画像を加工することのできる通信端末及びそれに供する送信端末並びに受信端末
US6522417B1 (en) * 1997-04-28 2003-02-18 Matsushita Electric Industrial Co., Ltd. Communication terminal device that processes received images and transmits physical quantities that affect the receiving communication terminal device
JPH10341253A (ja) 1997-06-05 1998-12-22 Rikuruuto:Kk 宛先及び発信者を特定しない電子メールを送受信する電子メールクライアント装置とサーバ装置、及びそれらを接続してなる電子メールシステム
JP3655438B2 (ja) 1997-07-17 2005-06-02 任天堂株式会社 ビデオゲームシステム
JP4149574B2 (ja) 1997-08-29 2008-09-10 ゼロックス コーポレイション ユーザインターフェースサポートデバイス、及び情報入力方法
US6211861B1 (en) * 1998-06-23 2001-04-03 Immersion Corporation Tactile mouse device
JP3216084B2 (ja) * 1998-01-19 2001-10-09 株式会社ネットワークコミュニティクリエイション チャット画面表示方法
TW404846B (en) * 1998-01-23 2000-09-11 Koninkl Philips Electronics Nv Multiperson tactual virtual environment
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
JPH11224152A (ja) * 1998-02-05 1999-08-17 Ricoh Co Ltd 遠隔会議支援システム
US6429846B2 (en) 1998-06-23 2002-08-06 Immersion Corporation Haptic feedback for touchpads and other touch controls
US6573883B1 (en) 1998-06-24 2003-06-03 Hewlett Packard Development Company, L.P. Method and apparatus for controlling a computing device with gestures
JP3449937B2 (ja) * 1999-01-14 2003-09-22 日本電信電話株式会社 パノラマ画像作成方法及びパノラマ画像を用いた周囲状況伝達方法並びにこれらの方法を記録した記録媒体
US20060279542A1 (en) * 1999-02-12 2006-12-14 Vega Vista, Inc. Cellular phones and mobile devices with motion driven control
JP4244784B2 (ja) * 1999-03-17 2009-03-25 富士ゼロックス株式会社 駆動力発生装置
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
JP2000325653A (ja) 1999-05-19 2000-11-28 Enix Corp 携帯型ビデオゲーム装置およびプログラムを格納した記録媒体
JP4233000B2 (ja) * 1999-07-05 2009-03-04 日本電信電話株式会社 仮想空間における風圧による力覚提示装置
US6496200B1 (en) * 1999-11-02 2002-12-17 Interval Research Corp. Flexible variation of haptic interface resolution
US6822635B2 (en) * 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
JP2001350570A (ja) * 2000-06-08 2001-12-21 Yazaki Corp 多機能スイッチ装置
US7159008B1 (en) 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
JP2002035431A (ja) * 2000-07-28 2002-02-05 Yokogawa Electric Corp 遠隔ゲーム機
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US6639582B1 (en) * 2000-08-10 2003-10-28 International Business Machines Corporation System for combining haptic sensory-motor effects from two separate input devices into resultant sensory-motor effects and for feedback of such resultant effects between the input devices
JP2002123840A (ja) * 2000-10-17 2002-04-26 Nippon Telegr & Teleph Corp <Ntt> 臨場感型仮想現実提供処理方法および装置
JP2002140166A (ja) * 2000-11-02 2002-05-17 Kddi Corp タッチパネルディスプレイに触れた指に触感を与えるデバイス
US7128266B2 (en) 2003-11-13 2006-10-31 Metrologic Instruments. Inc. Hand-supportable digital imaging-based bar code symbol reader supporting narrow-area and wide-area modes of illumination and image capture
WO2002056272A1 (en) 2000-12-27 2002-07-18 Nokia Corporation Portable vibrating device with adjustable amplitude
AU2002249960A1 (en) 2001-01-16 2002-07-30 Immersion Corporation Controlling haptic feedback for enhancing navigation in a graphical environment
JP2002334097A (ja) * 2001-02-09 2002-11-22 Seiko Epson Corp サービス提供システム、管理端末、移動体、サービス提供プログラム及びサービス提供方法
US7068294B2 (en) 2001-03-30 2006-06-27 Koninklijke Philips Electronics N.V. One-to-one direct communication
FI20010817A (fi) * 2001-04-20 2003-02-14 Nokia Corp Menetelmä informaation esittämiseksi elektroniikkalaitteen näytöllä ja elektroniikkalaite
US6963762B2 (en) 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
JP2002366852A (ja) * 2001-06-11 2002-12-20 Hiitoshinku:Kk 情報提供方法、情報処理システム、情報取得プログラム、及び情報記憶媒体
GB0117543D0 (en) 2001-07-18 2001-09-12 Hewlett Packard Co Document viewing device
JP2003051027A (ja) * 2001-08-03 2003-02-21 Namco Ltd ゲーム情報、情報記憶媒体、及びゲーム装置
JP2003085590A (ja) * 2001-09-13 2003-03-20 Nippon Telegr & Teleph Corp <Ntt> ３次元情報操作方法およびその装置，３次元情報操作プログラムならびにそのプログラムの記録媒体
US7032188B2 (en) 2001-09-28 2006-04-18 Nokia Corporation Multilevel sorting and displaying of contextual objects
US20030063067A1 (en) * 2001-10-02 2003-04-03 Ping-Yang Chuang Real-time handwritten communication system
US7225115B2 (en) * 2001-10-04 2007-05-29 Novint Technologies, Inc. Coordinating haptics with visual images in a human-computer interface
US7623114B2 (en) * 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
NO315679B1 (no) 2001-10-19 2003-10-06 Dmates As Rik kommunikasjon over internett
FI115861B (fi) * 2001-11-12 2005-07-29 Myorigo Oy Menetelmä ja laite palautteen generoimiseksi
US8000724B1 (en) 2001-11-14 2011-08-16 Sprint Spectrum L.P. Method and system for subnet-based transmission of mobile station location
JP2003177864A (ja) 2001-12-13 2003-06-27 Fuji Photo Film Co Ltd 情報端末システム
JP2003188945A (ja) * 2001-12-13 2003-07-04 Samsung Yokohama Research Institute Co Ltd 携帯端末装置
JP2003188946A (ja) 2001-12-17 2003-07-04 Nec Corp 携帯電話端末及びその機能設定方法
JP3975480B2 (ja) * 2001-12-20 2007-09-12 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
US7002553B2 (en) 2001-12-27 2006-02-21 Mark Shkolnikov Active keyboard system for handheld electronic devices
US7347815B2 (en) * 2002-02-12 2008-03-25 Razz Serbanescu Method and apparatus for converting sense-perceived thoughts and actions into physical sensory stimulation
US7542773B2 (en) 2002-03-29 2009-06-02 At&T Intellectual Property I, L.P. Customized alerts for incoming data messages
US6904823B2 (en) * 2002-04-03 2005-06-14 Immersion Corporation Haptic shifting devices
US20030211888A1 (en) 2002-05-13 2003-11-13 Interactive Telegames, Llc Method and apparatus using insertably-removable auxiliary devices to play games over a communications link
US7456823B2 (en) * 2002-06-14 2008-11-25 Sony Corporation User interface apparatus and portable information apparatus
US11275405B2 (en) * 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
WO2004008411A1 (en) * 2002-07-11 2004-01-22 Nokia Corporation Method and device for automatically changing a digital content on a mobile device according to sensor data
JP3838173B2 (ja) 2002-07-31 2006-10-25 ソニー株式会社 情報処理装置および方法、記録媒体、並びにプログラム
JP3937982B2 (ja) * 2002-08-29 2007-06-27 ソニー株式会社 入出力装置および入出力装置を有する電子機器
KR20040025398A (ko) 2002-09-19 2004-03-24 삼성전자주식회사 이동 통신 단말의 호착신 알림 방법
KR100459560B1 (ko) * 2002-10-22 2004-12-03 삼성전자주식회사 인디케이터 아이콘을 이용하여 수신된 단문메시지의종류를 식별하기 위한 서비스를 제공하는 무선통신기기 및이를 이용한 인디케이터 아이콘 표시방법
JP4117352B2 (ja) 2002-11-12 2008-07-16 株式会社ソニー・コンピュータエンタテインメント ファイル処理方法とこの方法を利用可能な装置
JP2004177992A (ja) 2002-11-22 2004-06-24 Panasonic Mobile Communications Co Ltd 風圧センサ付き携帯端末及び風圧センサ付き携帯端末により実行可能なプログラム
US8059088B2 (en) 2002-12-08 2011-11-15 Immersion Corporation Methods and systems for providing haptic messaging to handheld communication devices
US8803795B2 (en) 2002-12-08 2014-08-12 Immersion Corporation Haptic communication devices
US8830161B2 (en) 2002-12-08 2014-09-09 Immersion Corporation Methods and systems for providing a virtual touch haptic effect to handheld communication devices
GB0229572D0 (en) 2002-12-19 2003-01-22 Cognima Ltd Quality of service provisioning
US7339574B2 (en) * 2003-01-16 2008-03-04 Korean Advanced Institute Of Science And Technology Haptic mouse interface system for providing force and tactile feedbacks to user's fingers and arm
JP3639280B2 (ja) 2003-02-12 2005-04-20 任天堂株式会社 ゲームメッセージ表示方法およびゲームプログラム
JP2006518507A (ja) 2003-02-19 2006-08-10 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ ポータブル装置間でのコンテンツアイテムのアドホック共有のためのシステムと、そのインタラクション方法
JP2004289577A (ja) * 2003-03-24 2004-10-14 Kyocera Corp 移動通信端末及び移動通信システム
AU2003244894A1 (en) * 2003-06-20 2005-01-04 Nokia Corporation Mobile device for mapping sms characters to e.g. sound, vibration, or graphical effects
JP2005020563A (ja) 2003-06-27 2005-01-20 Casio Comput Co Ltd 携帯端末及びプログラム
US20070168118A1 (en) 2003-06-27 2007-07-19 Dirk Lappe System for coordinating the routes of navigation devices
KR20050004382A (ko) 2003-07-02 2005-01-12 삼성전자주식회사 멀티 셔터 유닛을 구비한 스테퍼 설비
JP2005078310A (ja) * 2003-08-29 2005-03-24 Fuji Xerox Co Ltd 触覚呈示装置、触覚呈示方法、及びプログラム
GB0322489D0 (en) 2003-09-25 2003-10-29 British Telecomm Haptics transmission systems
JP4401728B2 (ja) 2003-09-30 2010-01-20 キヤノン株式会社 複合現実空間画像生成方法及び複合現実感システム
JP4124092B2 (ja) 2003-10-16 2008-07-23 沖電気工業株式会社 液晶表示装置の駆動回路
US7532196B2 (en) * 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
JP2007510234A (ja) 2003-10-31 2007-04-19 イオタ・ワイアレス・エルエルシー 携帯デバイス用同時データ入力
US7752544B2 (en) * 2003-11-17 2010-07-06 International Business Machines Corporation Method, system, and apparatus for remote interactions
JP3953024B2 (ja) * 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US7814419B2 (en) * 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
KR20050054731A (ko) 2003-12-05 2005-06-10 한국전자통신연구원 햅틱 시뮬레이션 시스템 및 그 시스템에서의 실시간 촉감지원 방법
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
US7982711B2 (en) * 2003-12-19 2011-07-19 Immersion Corporation Haptic profiling system and method
US7791588B2 (en) 2003-12-22 2010-09-07 Immersion Corporation System and method for mapping instructions associated with haptic feedback
GB0405004D0 (en) 2004-03-05 2004-04-07 Marconi Comm Ltd Improvements in or relating to a telecommunication network
JP4325449B2 (ja) 2004-03-19 2009-09-02 ソニー株式会社 表示制御装置，表示制御方法，記録媒体
US7176888B2 (en) 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
US7176886B2 (en) * 2004-03-23 2007-02-13 Fujitsu Limited Spatial signatures
KR100853605B1 (ko) 2004-03-23 2008-08-22 후지쯔 가부시끼가이샤 핸드헬드 장치에서의 경사 및 평행 이동 운동 성분들의구별
US7571213B2 (en) * 2004-03-26 2009-08-04 Microsoft Corporation Interactive electronic bubble messaging
JP4046095B2 (ja) * 2004-03-26 2008-02-13 ソニー株式会社 触覚機能付き入力装置、情報入力方法及び電子機器
US20050219211A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for content management and control
US20050251850A1 (en) 2004-03-31 2005-11-10 Microsoft Corporation System and method for providing REA model based security
US20050219223A1 (en) * 2004-03-31 2005-10-06 Kotzin Michael D Method and apparatus for determining the context of a device
US20060061545A1 (en) * 2004-04-02 2006-03-23 Media Lab Europe Limited ( In Voluntary Liquidation). Motion-activated control with haptic feedback
KR100538351B1 (ko) * 2004-04-20 2005-12-21 광주과학기술원 햅틱 인터페이스의 안정화 방법 및 이를 적용한 햅틱시스템
US8095081B2 (en) 2004-04-29 2012-01-10 Sony Ericsson Mobile Communications Ab Device and method for hands-free push-to-talk functionality
JP4439351B2 (ja) 2004-07-28 2010-03-24 アルパイン株式会社 振動付与機能付きタッチパネル入力装置および操作入力に対する振動付与方法
JP2006047534A (ja) * 2004-08-03 2006-02-16 Alpine Electronics Inc 表示制御システム
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
EP1805585B1 (en) * 2004-10-08 2017-08-16 Immersion Corporation Haptic feedback for button and scrolling action simulation in touch input devices
US7570254B2 (en) * 2004-11-09 2009-08-04 Takahiko Suzuki Haptic feedback controller, method of controlling the same, and method of transmitting messages that uses a haptic feedback controller
JP2006163579A (ja) 2004-12-03 2006-06-22 Sony Corp 情報処理システム、情報処理装置及び情報処理方法
KR100670821B1 (ko) * 2004-12-21 2007-01-19 한국전자통신연구원 사용자 인터페이스 설계 및 평가 시스템 및 손 상호 작용기반의 사용자 인터페이스 설계 및 평가 시스템
JP2006201912A (ja) 2005-01-19 2006-08-03 Nippon Telegr & Teleph Corp <Ntt> ３次元仮想オブジェクト情報提供サービス処理方法と３次元仮想オブジェクト提供システムおよびプログラム
GB0503253D0 (en) * 2005-02-17 2005-03-23 Univ Northumbria Newcastle User control of a hand-held device
KR20160150116A (ko) 2005-03-04 2016-12-28 애플 인크. 다기능 휴대용 장치
KR20060106010A (ko) * 2005-04-04 2006-10-12 한국과학기술원 커뮤니케이션을 위한 인터렉티브 테이블 세트
US20060241864A1 (en) 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
US8339363B2 (en) 2005-05-13 2012-12-25 Robert Bosch Gmbh Sensor-initiated exchange of information between devices
JP2006333355A (ja) 2005-05-30 2006-12-07 Toshiba Corp 携帯情報処理装置およびその操作方法
JP4507992B2 (ja) 2005-06-09 2010-07-21 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20060279476A1 (en) 2005-06-10 2006-12-14 Gemini Mobile Technologies, Inc. Systems and methods for conveying message composer's state information
US7685530B2 (en) * 2005-06-10 2010-03-23 T-Mobile Usa, Inc. Preferred contact group centric interface
US7779480B2 (en) 2005-06-30 2010-08-17 Microsoft Corporation Identifying dependencies of an application upon a given security context
US20070040810A1 (en) * 2005-08-18 2007-02-22 Eastman Kodak Company Touch controlled display device
US20070049301A1 (en) * 2005-08-30 2007-03-01 Motorola, Inc. Articulating emotional response to messages
US7734313B2 (en) * 2005-08-31 2010-06-08 Motorola, Inc. Wirelessly networked gaming system having true targeting capability
US7933632B2 (en) 2005-09-16 2011-04-26 Microsoft Corporation Tile space user interface for mobile devices
US8116740B2 (en) * 2005-09-21 2012-02-14 Nokia Corporation Mobile communication terminal and method
US7276886B2 (en) 2005-10-03 2007-10-02 Texas Instruments Incorporated Dual buck-boost converter with single inductor
US7636794B2 (en) 2005-10-31 2009-12-22 Microsoft Corporation Distributed sensing techniques for mobile devices
KR100671144B1 (ko) * 2005-11-23 2007-01-17 (주) 엘지텔레콤 이동통신단말기의 움직임을 이용한 문자입력장치 및 방법
US20070139366A1 (en) * 2005-12-21 2007-06-21 Dunko Gregory A Sharing information between devices
CN101341799B (zh) * 2005-12-22 2012-01-11 皇家飞利浦电子股份有限公司 用于控制光系统的用户接口和方法
US7525425B2 (en) 2006-01-20 2009-04-28 Perdiem Llc System and method for defining an event based on relationship between an object location and a user-defined zone
CN102169415A (zh) * 2005-12-30 2011-08-31 苹果公司 具有多重触摸输入的便携式电子设备
US7509588B2 (en) * 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
EP1806643B1 (en) * 2006-01-06 2014-10-08 Drnc Holdings, Inc. Method for entering commands and/or characters for a portable communication device equipped with a tilt sensor
JP2007188126A (ja) 2006-01-11 2007-07-26 Fujifilm Corp 画像明るさ算出装置および方法並びにプログラム
US8587526B2 (en) 2006-04-12 2013-11-19 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
JP2007301270A (ja) 2006-05-15 2007-11-22 Sony Computer Entertainment Inc ゲーム制御プログラム、ゲーム制御方法、ゲーム装置
KR100775190B1 (ko) 2006-05-24 2007-11-12 엘지전자 주식회사 멀티미디어 합성 방법 및 이를 이용한 단말기
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
US8271902B1 (en) * 2006-07-20 2012-09-18 Adobe Systems Incorporated Communication of emotions with data
JP2008033739A (ja) 2006-07-31 2008-02-14 Sony Corp 力覚フィードバックおよび圧力測定に基づくタッチスクリーンインターラクション方法および装置
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
JP4986555B2 (ja) * 2006-09-13 2012-07-25 ソニーモバイルコミュニケーションズ株式会社 通信装置、処理実行方法および処理実行プログラム
US7468573B2 (en) * 2006-10-30 2008-12-23 Motorola, Inc. Method of providing tactile feedback
US8354997B2 (en) * 2006-10-31 2013-01-15 Navisense Touchless user interface for a mobile device
KR101345341B1 (ko) 2006-12-13 2013-12-27 삼성전자 주식회사 파일 전송을 위한 사용자 인터페이스를 제공하는 장치 및방법
FR2910160A1 (fr) 2006-12-13 2008-06-20 France Telecom Systeme de telecommunication tactile
US20080153520A1 (en) * 2006-12-21 2008-06-26 Yahoo! Inc. Targeted short messaging service advertisements
EP1936929A1 (en) 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
US7877707B2 (en) 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
KR101364885B1 (ko) * 2007-02-21 2014-02-19 엘지전자 주식회사 아이콘을 이용한 메시지 수신 표시 방법 및 단말기
US8933891B2 (en) * 2007-03-02 2015-01-13 Lg Electronics Inc. Terminal and method of controlling terminal
WO2008121967A2 (en) * 2007-03-30 2008-10-09 Google Inc. Interactive media display across devices
CN101290553A (zh) 2007-04-17 2008-10-22 索尼（中国）有限公司 具有显示屏的电子设备
WO2008132540A1 (en) 2007-04-26 2008-11-06 Nokia Corporation Method and mobile terminal with user input based on movement of the terminal detected by a sensor
US7941000B2 (en) * 2007-05-11 2011-05-10 Koninklijke Philips Electronics N.V. Method for producing an image and system for producing an image
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9965132B2 (en) * 2007-06-08 2018-05-08 Apple Inc. Presenting text messages
JP2009003799A (ja) 2007-06-22 2009-01-08 Aplix Corp ポータブル機器およびポータブル機器における仮想空間の提供方法
US7788032B2 (en) * 2007-09-14 2010-08-31 Palm, Inc. Targeting location through haptic feedback signals
US8201108B2 (en) * 2007-10-01 2012-06-12 Vsee Lab, Llc Automatic communication notification and answering method in communication correspondance
US8631358B2 (en) 2007-10-10 2014-01-14 Apple Inc. Variable device graphical user interface
KR101430452B1 (ko) 2007-10-15 2014-08-14 엘지전자 주식회사 통신 기기 및 이것의 위치 정보 제공 방법
US20090140986A1 (en) * 2007-11-30 2009-06-04 Nokia Corporation Method, apparatus and computer program product for transferring files between devices via drag and drop
US7839269B2 (en) * 2007-12-12 2010-11-23 Immersion Corporation Method and apparatus for distributing haptic synchronous signals
CN101178615A (zh) 2007-12-12 2008-05-14 美新半导体（无锡）有限公司 姿态及运动感应系统及使用该系统的便携式电子设备
US9569086B2 (en) 2007-12-12 2017-02-14 Nokia Technologies Oy User interface having realistic physical effects
US9170649B2 (en) * 2007-12-28 2015-10-27 Nokia Technologies Oy Audio and tactile feedback based on visual environment
US8373549B2 (en) * 2007-12-31 2013-02-12 Apple Inc. Tactile feedback in an electronic device
KR100952698B1 (ko) 2008-03-10 2010-04-13 한국표준과학연구원 촉감 피드백장치를 이용한 촉감전달방법 및 그 시스템
US8239769B2 (en) * 2008-04-22 2012-08-07 Verizon Patent And Licensing Inc. System and method for selling preference-based virtual objects
US20090280860A1 (en) * 2008-05-12 2009-11-12 Sony Ericsson Mobile Communications Ab Mobile phone with directional force feedback and method
JP5045559B2 (ja) * 2008-06-02 2012-10-10 富士通モバイルコミュニケーションズ株式会社 携帯端末
US20090309825A1 (en) * 2008-06-13 2009-12-17 Sony Ericsson Mobile Communications Ab User interface, method, and computer program for controlling apparatus, and apparatus
US8306576B2 (en) * 2008-06-27 2012-11-06 Lg Electronics Inc. Mobile terminal capable of providing haptic effect and method of controlling the mobile terminal
US8532637B2 (en) 2008-07-02 2013-09-10 T-Mobile Usa, Inc. System and method for interactive messaging
US20100214243A1 (en) 2008-07-15 2010-08-26 Immersion Corporation Systems and Methods For Interpreting Physical Interactions With A Graphical User Interface
EP3206381A1 (en) 2008-07-15 2017-08-16 Immersion Corporation Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging
US8274484B2 (en) 2008-07-18 2012-09-25 Microsoft Corporation Tracking input in a screen-reflective interface environment
US8362882B2 (en) * 2008-12-10 2013-01-29 Immersion Corporation Method and apparatus for providing Haptic feedback from Haptic textile
US8587601B1 (en) * 2009-01-05 2013-11-19 Dp Technologies, Inc. Sharing of three dimensional objects
JP5793426B2 (ja) 2009-01-29 2015-10-14 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ グラフィカルユーザインターフェースとの物理的相互作用を解釈するためのシステムと方法
US8516396B2 (en) * 2009-01-30 2013-08-20 International Business Machines Corporation Object organization based on user interactions within a virtual environment
US8123614B2 (en) * 2010-04-13 2012-02-28 Kulas Charles J Gamepiece controller using a movable position-sensing display device including a movement currency mode of movement
US8266551B2 (en) * 2010-06-10 2012-09-11 Nokia Corporation Method and apparatus for binding user interface elements and granular reflective processing
EP3321780A1 (en) 2012-02-15 2018-05-16 Immersion Corporation High definition haptic effects generation using primitives
US8493354B1 (en) 2012-08-23 2013-07-23 Immersion Corporation Interactivity model for shared feedback on mobile devices
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US9245428B2 (en) 2012-08-02 2016-01-26 Immersion Corporation Systems and methods for haptic remote control gaming
US9116546B2 (en) 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
US9330544B2 (en) 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US20140139451A1 (en) 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9836150B2 (en) 2012-11-20 2017-12-05 Immersion Corporation System and method for feedforward and feedback with haptic effects
US20140198130A1 (en) 2013-01-15 2014-07-17 Immersion Corporation Augmented reality user interface with haptic feedback
US9880623B2 (en) 2013-01-24 2018-01-30 Immersion Corporation Friction modulation for three dimensional relief in a haptic device
US9041647B2 (en) 2013-03-15 2015-05-26 Immersion Corporation User interface device provided with surface haptic sensations
US9645647B2 (en) 2015-05-13 2017-05-09 Immersion Corporation Systems and methods for haptic feedback for modular devices

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0140118A1 (de) * 1983-09-16 1985-05-08 Bandag, Incorporated Verfahren zum Herstellen von Überzügen insbesondere für die Runderneuerung und Reparatur von Kraftfahrzeugen
JP2003078960A (ja) * 2001-09-03 2003-03-14 Ntt Power & Building Facilities Inc 携帯端末装置によるメールシステム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10203756B2 (en) 2008-07-15 2019-02-12 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes
US10416775B2 (en) 2008-07-15 2019-09-17 Immersion Corporation Systems and methods for shifting haptic feedback function between passive and active modes

Also Published As

Publication number Publication date
US20100013761A1 (en) 2010-01-21
JP6272960B2 (ja) 2018-01-31
JP2017004547A (ja) 2017-01-05
CN103970209B (zh) 2017-09-19
JP6043763B2 (ja) 2016-12-14
US10248203B2 (en) 2019-04-02
EP3236337A1 (en) 2017-10-25
KR20110031978A (ko) 2011-03-29
CN103970209A (zh) 2014-08-06
EP3130983A1 (en) 2017-02-15
JP5642252B2 (ja) 2014-12-17
US20150268727A1 (en) 2015-09-24
JP6433556B2 (ja) 2018-12-05
US9612662B2 (en) 2017-04-04
JP5690726B2 (ja) 2015-03-25
KR20170031800A (ko) 2017-03-21
JP6109877B2 (ja) 2017-04-05
KR20170129273A (ko) 2017-11-24
KR101300429B1 (ko) 2013-08-26
US8587417B2 (en) 2013-11-19
US9910496B2 (en) 2018-03-06
US8462125B2 (en) 2013-06-11
US20180348870A1 (en) 2018-12-06
JP2011528537A (ja) 2011-11-17
JP6449934B2 (ja) 2019-01-09
EP2329339A1 (en) 2011-06-08
KR101871646B1 (ko) 2018-06-26
EP3236337B1 (en) 2019-10-16
JP5410520B2 (ja) 2014-02-05
JP2018026142A (ja) 2018-02-15
US20140104162A1 (en) 2014-04-17
EP2723107A1 (en) 2014-04-23
KR20180051675A (ko) 2018-05-16
JP5899253B2 (ja) 2016-04-06
JP2014194785A (ja) 2014-10-09
KR101690469B1 (ko) 2016-12-27
KR101600226B1 (ko) 2016-03-11
EP3130983B1 (en) 2018-11-14
EP2741177A1 (en) 2014-06-11
WO2010009149A3 (en) 2010-04-01
EP3220616A1 (en) 2017-09-20
JP2015007998A (ja) 2015-01-15
CN102160366A (zh) 2011-08-17
CN104111726B (zh) 2017-05-24
JP2011528476A (ja) 2011-11-17
JP2018088260A (ja) 2018-06-07
CN102187647A (zh) 2011-09-14
JP2014002770A (ja) 2014-01-09
US20150199013A1 (en) 2015-07-16
US10198078B2 (en) 2019-02-05
KR102045165B1 (ko) 2019-11-14
KR20160031027A (ko) 2016-03-21
KR20110031979A (ko) 2011-03-29
US20100013653A1 (en) 2010-01-21
KR102056518B1 (ko) 2019-12-16
KR102045128B1 (ko) 2019-11-14
US20180004295A1 (en) 2018-01-04
KR101989763B1 (ko) 2019-06-14
JP2019057302A (ja) 2019-04-11
EP2741177B1 (en) 2019-06-26
JP2011528475A (ja) 2011-11-17
EP3480680A1 (en) 2019-05-08
CN102160366B (zh) 2014-05-14
JP6208791B2 (ja) 2017-10-04
WO2010009145A1 (en) 2010-01-21
JP2015057719A (ja) 2015-03-26
CN106990811A (zh) 2017-07-28
JP5599922B2 (ja) 2014-10-01
KR20140141658A (ko) 2014-12-10
KR102045170B1 (ko) 2019-11-14
JP2015212956A (ja) 2015-11-26
EP2313820A1 (en) 2011-04-27
EP3496376A1 (en) 2019-06-12
WO2010009152A1 (en) 2010-01-21
US20130201141A1 (en) 2013-08-08
EP2327201A2 (en) 2011-06-01
CN102099766A (zh) 2011-06-15
JP5762285B2 (ja) 2015-08-12
US9134803B2 (en) 2015-09-15
KR20160018829A (ko) 2016-02-17
KR20140027543A (ko) 2014-03-06
JP5337877B2 (ja) 2013-11-06
EP3206381A1 (en) 2017-08-16
KR101788995B1 (ko) 2017-10-20
CN107066035A (zh) 2017-08-18
KR101838425B1 (ko) 2018-03-13
EP2313820B1 (en) 2017-04-05
JP5955369B2 (ja) 2016-07-20
WO2010009157A1 (en) 2010-01-21
EP2329636A1 (en) 2011-06-08
US20100017759A1 (en) 2010-01-21
US20100017489A1 (en) 2010-01-21
JP2014067430A (ja) 2014-04-17
JP2017199378A (ja) 2017-11-02
EP2327201B1 (en) 2018-09-05
KR20160114738A (ko) 2016-10-05
KR20160120798A (ko) 2016-10-18
US20140091914A1 (en) 2014-04-03
US10416775B2 (en) 2019-09-17
CN102099767A (zh) 2011-06-15
CN104111726A (zh) 2014-10-22
WO2010009149A2 (en) 2010-01-21
JP2011528474A (ja) 2011-11-17
JP6548753B2 (ja) 2019-07-24
JP6180360B2 (ja) 2017-08-16
KR20180029101A (ko) 2018-03-19
US8866602B2 (en) 2014-10-21
US20170031445A1 (en) 2017-02-02
US9785238B2 (en) 2017-10-10
US20160109950A1 (en) 2016-04-21
CN104571336B (zh) 2019-10-15
KR101956999B1 (ko) 2019-03-11
US8638301B2 (en) 2014-01-28
CN104571336A (zh) 2015-04-29
KR20110052629A (ko) 2011-05-18
US9063571B2 (en) 2015-06-23
CN102187647B (zh) 2014-07-23
JP2014170560A (ja) 2014-09-18
KR20110036115A (ko) 2011-04-06
US20180260029A1 (en) 2018-09-13
CN102099766B (zh) 2015-01-14
KR20160018842A (ko) 2016-02-17
JP2016149135A (ja) 2016-08-18
KR20180071416A (ko) 2018-06-27
KR101661368B1 (ko) 2016-09-29
US20170168579A1 (en) 2017-06-15
EP2723107B1 (en) 2019-05-15
JP5897631B2 (ja) 2016-03-30
US9229532B1 (en) 2016-01-05
JP2011528477A (ja) 2011-11-17
WO2010009163A1 (en) 2010-01-21
US20100045619A1 (en) 2010-02-25
US20190121440A1 (en) 2019-04-25
US20150378437A1 (en) 2015-12-31
US10019061B2 (en) 2018-07-10
US20190179413A1 (en) 2019-06-13
EP3220616B1 (en) 2019-09-04
US9477309B2 (en) 2016-10-25
KR20180127533A (ko) 2018-11-28
US8976112B2 (en) 2015-03-10
US20150002280A1 (en) 2015-01-01
CN102100055A (zh) 2011-06-15
JP2014139797A (ja) 2014-07-31
JP5997898B2 (ja) 2016-09-28
KR101404367B1 (ko) 2014-06-20
US10203756B2 (en) 2019-02-12
JP2019071076A (ja) 2019-05-09
EP2329637A1 (en) 2011-06-08
KR20110036617A (ko) 2011-04-07

Similar Documents

Publication Publication Date Title
US10198078B2 (en) Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
A107 Divisional application of patent
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180430

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190426

Year of fee payment: 5