KR20140026261A - 컨텍스트 의존적 햅틱 확인 시스템 - Google Patents

컨텍스트 의존적 햅틱 확인 시스템 Download PDF

Info

Publication number
KR20140026261A
KR20140026261A KR1020130095845A KR20130095845A KR20140026261A KR 20140026261 A KR20140026261 A KR 20140026261A KR 1020130095845 A KR1020130095845 A KR 1020130095845A KR 20130095845 A KR20130095845 A KR 20130095845A KR 20140026261 A KR20140026261 A KR 20140026261A
Authority
KR
South Korea
Prior art keywords
haptic
user interface
interface element
parameters
confirmation
Prior art date
Application number
KR1020130095845A
Other languages
English (en)
Other versions
KR102255100B1 (ko
Inventor
데이비드 번바움
크리스토퍼 제이. 울리히
마르쿠스 아우렐리우스 보스사
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=48900765&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20140026261(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20140026261A publication Critical patent/KR20140026261A/ko
Application granted granted Critical
Publication of KR102255100B1 publication Critical patent/KR102255100B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/014—Force feedback applied to GUI

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

사용자 인터페이스 요소와의 사용자 상호작용에 응답하여 확인 햅틱 효과를 생성하는 햅틱 확인 시스템이 제공되고, 여기서 확인 햅틱 효과는 컨텍스트 메타데이터에 기초하고 있다. 컨텍스트 메타데이터는 하나 이상의 햅틱 파라미터에 매핑된다. 하나 이상의 햅틱 파라미터에 기초하여 햅틱 신호가 발생된다. 햅틱 신호는 햅틱 신호를 수신하도록 구성되어 있는 액추에이터로 송신된다. 액추에이터는 확인 햅틱 효과를 발생하기 위해 햅틱 신호를 이용한다.

Description

컨텍스트 의존적 햅틱 확인 시스템{CONTEXT-DEPENDENT HAPTIC CONFIRMATION SYSTEM}
일 실시예는 일반적으로 디바이스에 관한 것이며, 보다 상세하게는, 햅틱 효과를 생성하는 디바이스에 관한 것이다.
햅틱은 힘, 진동 및 움직임 등의 햅틱 피드백 효과(즉, "햅틱 효과")를 사용자에게 가함으로써 사용자의 촉감(sense of touch)을 이용하는 촉각 및 힘 피드백 기술이다. 모바일 디바이스, 터치스크린 디바이스 및 개인용 컴퓨터 등의 디바이스는, 디바이스와의 사용자 상호작용에 응답하여, 사용자가 디바이스와 성공적으로 상호작용했다는 확인으로서 확인 햅틱 효과를 발생하도록 구성되어 있을 수 있다. 예를 들어, 사용자가, 예를 들어, 버튼, 터치스크린, 레버, 조이스틱, 휠(wheel), 또는 어떤 다른 컨트롤을 사용하여 디바이스와 상호작용할 때, 햅틱 신호가 발생될 수 있고, 여기서 햅틱 신호는 디바이스로 하여금 적절한 확인 햅틱 효과를 생성하게 한다. 사용자는 확인 햅틱 효과를 경험할 수 있고, 디바이스와의 성공적인 상호작용을 인식할 수 있게 된다.
일 실시예는 확인 햅틱 효과를 생성하는 햅틱 확인 시스템이다. 이 시스템은 사용자 인터페이스 요소의 사용자 상호작용과 연관되어 있는 컨텍스트 메타데이터를 수신한다. 이 시스템은 또한 수신된 컨텍스트 메타데이터를 하나 이상의 햅틱 파라미터에 매핑한다. 이 시스템은 또한 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 햅틱 신호를 발생한다. 이 시스템은 또한 확인 햅틱 효과를 발생하기 위해 햅틱 신호를 액추에이터에 송신한다.
추가의 실시예, 상세, 장점 및 수정이, 첨부 도면과 관련하여 기술되어 있는 바람직한 실시예의 이하의 상세한 설명으로부터 명백하게 될 것이다.
도 1은 본 발명의 일 실시예에 따른, 햅틱 확인 시스템의 블록도.
도 2는 본 발명의 일 실시예에 따른, 컨텍스트 메타데이터의 하나 이상의 햅틱 파라미터에의 매핑을 나타낸 도면.
도 3은 본 발명의 일 실시예에 따른, 햅틱 파라미터 슬라이더 사용자 인터페이스를 나타낸 도면.
도 4는 본 발명의 일 실시예에 따른, 햅틱 확인 모듈의 기능의 흐름도.
일 실시예는, 터치스크린 또는 키보드 내에 디스플레이되는 버튼 등의, 디바이스의 사용자 인터페이스 요소와의 상호작용에 응답하여 확인 햅틱 효과를 생성할 수 있는 햅틱 확인 시스템이고, 여기서 확인 햅틱 효과는 사용자 인터페이스 요소의 상호작용과 연관되어 있는 컨텍스트 메타데이터 또는 어떤 다른 메타데이터에 기초하여 커스터마이즈될 수 있다. 이러한 컨텍스트 메타데이터는 사용자 인터페이스 요소의 크기 또는 형상 등의 사용자 인터페이스 요소의 하나 이상의 물리적 특성을 나타내는 데이터를 포함할 수 있다. 컨텍스트 메타데이터는 또한 사용자 인터페이스 요소의 기능을 나타내는 데이터를 포함할 수 있다.
예를 들어, 컨텍스트 메타데이터는 사용자 인터페이스 요소가 이메일 메시지 또는 문자 메시지의 생성을 개시하는지를 나타내는 데이터를 포함할 수 있다. 컨텍스트 메타데이터는 또한 사용자 인터페이스 요소와의 상호작용의 이력을 나타내는 데이터를 포함할 수 있다. 예를 들어, 컨텍스트 메타데이터는 사용자가 사용자 인터페이스 요소 상에서 타이핑하거나(사용자 인터페이스 요소가 키보드 등의 물리적 요소인 경우) 사용자 인터페이스 요소를 터치하는(사용자 인터페이스 요소가 버튼 등의 디바이스의 터치스크린 내에 디스플레이될 수 있는 가상 요소인 경우) 속도를 나타내는 데이터를 포함할 수 있다. 컨텍스트 메타데이터는 또한 사용자에 의해 사용자 인터페이스 요소에 가해지는 터치에 의해 생성되는 검출된 힘 등의 센서 입력 데이터를 포함할 수 있다. 확인 햅틱 효과의 커스터마이즈는 크기, 지속기간, 주파수 및 파형(이들로 제한되지 않음) 등의 하나 이상의 햅틱 파라미터의 수정일 수 있다. 이와 같이, 햅틱 확인 시스템은 단일 사용자 인터페이스 요소에 대한 다수의 가능한 확인 햅틱 이벤트를 발생할 수 있고, 여기서 각각의 확인 햅틱 이벤트는 컨텍스트 메타데이터에 기초하여 개별적으로 커스터마이즈된다.
도 1은 본 발명의 일 실시예에 따른, 햅틱 확인 시스템(10)의 블록도를 나타낸 것이다. 일 실시예에서, 시스템(10)은 디바이스의 일부이고, 시스템(10)은 디바이스에 햅틱 확인 기능을 제공한다. 단일 시스템으로서 도시하였지만, 시스템(10)의 기능은 분산 시스템으로서 구현될 수 있다. 시스템(10)은 정보를 전달하는 버스(12) 또는 다른 통신 메커니즘, 및 버스(12)에 결합되어 정보를 처리하는 프로세서(22)를 포함한다. 프로세서(22)는 임의의 유형의 범용 또는 특수 목적용 프로세서일 수 있다. 시스템(10)은 프로세서(22)에 의해 실행될 명령어 및 정보를 저장하는 메모리(14)를 추가로 포함한다. 메모리(14)는 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 자기 또는 광 디스크 등의 정적 저장 장치, 또는 임의의 다른 유형의 컴퓨터 판독가능 매체의 임의의 조합으로 이루어져 있을 수 있다.
컴퓨터 판독가능 매체는 프로세서(22)에 의해 액세스될 수 있는 임의의 이용가능한 매체일 수 있고, 휘발성 및 비휘발성 매체, 이동식 및 비이동식 매체, 통신 매체, 및 저장 매체 모두를 포함할 수 있다. 통신 매체는 반송파 또는 기타 전송 메커니즘 등의 변조된 데이터 신호 내의 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터를 포함할 수 있고, 당 기술 분야에 공지된 임의의 다른 형태의 정보 전달 매체를 포함할 수 있다. 저장 매체는 RAM, 플래시 메모리, ROM, EPROM(erasable programmable read-only memory), EEPROM(electrically erasable programmable read-only memory), 레지스터, 하드 디스크, 이동식 디스크, CD-ROM(compact disk read-only memory), 또는 당 기술 분야에 공지된 임의의 다른 형태의 저장 매체를 포함할 수 있다.
일 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈을 저장한다. 이 모듈은, 일 실시예에서, 시스템(10)은 물론 모바일 디바이스의 나머지에 대한 운영 체제 기능을 제공하는 운영 체제(15)를 포함한다. 이 모듈은, 이하에서 더 상세히 개시되는 바와 같이, 확인 햅틱 효과를 생성하는 햅틱 확인 모듈(16)을 추가로 포함한다. 특정의 실시예에서, 햅틱 확인 모듈(16)은 복수의 모듈을 포함할 수 있고, 여기서 각각의 개별 모듈은 확인 햅틱 효과를 생성하는 특정의 개별 기능을 제공한다. 시스템(10)은 통상적으로 Immersion Corporation의 Integrator Haptic Development Platform 등의 부가의 기능을 포함시키기 위해 하나 이상의 부가의 응용 프로그램 모듈(18)을 포함할 것이다.
시스템(10)은, 원격 소스로/로부터 데이터를 전송 및/또는 수신하는 실시예에서, 적외선, 무선(radio), Wi-Fi, 또는 셀룰러 네트워크 통신 등의 모바일 무선 네트워크 통신을 제공하기 위해 네트워크 인터페이스 카드 등의 통신 디바이스(20)를 추가로 포함한다. 다른 실시예에서, 통신 디바이스(20)는 이더넷 연결 또는 모뎀 등의 유선 네트워크 연결을 제공한다.
프로세서(22)는 또한, 버스(12)를 통해, 그래픽 표현 또는 사용자 인터페이스를 사용자에게 디스플레이하는 LCD(Liquid Crystal Display) 등의 디스플레이(24)에 결합되어 있다. 디스플레이(24)는 프로세서(22)로/로부터 신호를 송신 및 수신하도록 구성되어 있는 터치스크린 등의 터치 감응 입력 디바이스일 수 있고, 멀티 터치 터치스크린일 수 있다. 프로세서(22)는 또한 사용자가 시스템(10)과 상호작용할 수 있게 해주는 키보드 또는 커서 컨트롤(28)(마우스 또는 스타일러스 등)에 결합되어 있을 수 있다.
일 실시예에서, 시스템(10)은 액추에이터(26)를 추가로 포함한다. 프로세서(22)는 발생된 햅틱 효과와 연관되어 있는 햅틱 신호를 액추에이터(26)에 전송할 수 있고, 액추에이터(26)는 차례로 진동촉각 햅틱 효과 등의 햅틱 효과를 출력한다. 액추에이터(26)는 액추에이터 구동 회로를 포함한다. 액추에이터(26)는, 예를 들어, 전기 모터, 전자기 액추에이터, 보이스 코일, 형상 기억 합금, 전기 활성 중합체(electro-active polymer), 솔레노이드, ERM(eccentric rotating mass motor), LRA(linear resonant actuator), 압전 액추에이터, 고대역폭 액추에이터, EAP(electro-active polymer) 액추에이터, 정전 마찰 디스플레이, 또는 초음파 진동 발생기일 수 있다. 대안의 실시예에서, 시스템(10)은, 액추에이터(26)에 부가하여, 하나 이상의 부가의 액추에이터(도 1에 예시되지 않음)를 포함할 수 있다. 다른 실시예에서, 시스템(10)으로부터 분리된 디바이스는 햅틱 효과를 발생하는 액추에이터를 포함하고, 시스템(10)은 발생된 햅틱 효과 신호를 통신 디바이스(20)를 통해 그 디바이스로 송신한다.
일 실시예에서, 시스템(10)은 센서(30)를 추가로 포함한다. 센서(30)는 가속도, 바이오 신호, 거리, 흐름, 힘/압력/변형/굴곡, 습도, 선형 위치, 배향/기울기, 무선 주파수, 회전 위치, 회전 속도, 스위치의 조작, 온도, 진동, 및 가시광 세기(이들로 제한되지 않음) 등의 한 형태의 에너지 또는 기타 물리적 특성을 검출하도록 구성되어 있을 수 있다. 센서(30)는 또한 검출된 에너지 또는 기타 물리적 특성을 가상 센서 정보를 표현하는 전기 신호 또는 임의의 신호로 변환하도록 구성되어 있을 수 있다. 센서(30)는 가속도계, 심전도계, 뇌파도, 근전계, 전기안구도, 전기구개도, 전기 피부 반응 센서, 용량성 센서, 홀 효과 센서, 적외선 센서, 초음파 센서, 압력 센서, 광섬유 센서, 굴곡 센서(또는 굽힘 센서), 힘 감응 저항기, 로드 셀, LuSense CPS2 155, 소형 압력 변환기, 압전 센서, 변형 게이지, 습도계, 선형 위치 터치 센서, 선형 전위차계(또는 슬라이더), 선형 가변 차동 변압기, 가속도계, 나침반, 경사계, 자기 태그[또는 RFID(radio frequency identification) tag], 회전식 인코더, 회전식 전위차계, 자이로스코프, 온-오프 스위치, 온도 센서(열전쌍, 저항 온도 검출기, 써미스터, 및 온도 변환 집적 회로 등), 마이크, 광도계, 고도계, 온도계, 바이오 모니터, 또는 광 의존 저항기(이들로 제한되지 않음) 등의 임의의 디바이스일 수 있다.
도 2는 본 발명의 일 실시예에 따른, 컨텍스트 메타데이터의 하나 이상의 햅틱 파라미터에의 매핑을 나타낸 것이다. 앞서 기술한 바와 같이, 디바이스는 사용자 인터페이스 요소를 포함할 수 있고, 여기서 사용자 인터페이스 요소는 사용자와 상호작용할 수 있는 디바이스의 물리적 또는 가상 요소일 수 있다. 물리적 사용자 인터페이스 요소의 예는 키보드 또는 커서 컨트롤(마우스 등)이다. 가상 사용자 인터페이스 요소의 예는 버튼, 슬라이더, 스크롤러, 스위치, 체크박스 및 라디오 박스 등의 터치스크린 내에 디스플레이되는 아이콘이다. 또한 앞서 기술한 바와 같이, 사용자는 사용자 인터페이스 요소와 상호작용할 수 있고, 사용자 인터페이스 요소와의 상호작용은 사용자 인터페이스 요소의 물리적 조작을 포함할 수 있다. 사용자 인터페이스 요소의 물리적 조작의 예는 사용자 인터페이스 요소를 터치하는 것(키보드를 터치하는 것 또는 버튼 또는 어떤 다른 유형의 사용자 인터페이스 요소가 디스플레이되는 터치스크린을 터치하는 것 등)이다.
사용자 인터페이스 요소와의 상호작용은 하나 이상의 유형의 컨텍스트 메타데이터[도 2에서 컨텍스트 메타데이터(210)로서 예시되어 있음]를 생성하는 것을 포함할 수 있고, 여기서 컨텍스트 메타데이터는 사용자 인터페이스 요소와의 상호작용의 컨텍스트와 연관되어 있는 임의의 데이터일 수 있다. 컨텍스트 메타데이터는 사용자 인터페이스 요소와의 상호작용에 응답하여 확인 햅틱 효과를 발생하는 데 사용될 수 있다. 이하에서 더 상세히 기술되는 바와 같이, 확인 햅틱 효과는, 사용자 인터페이스 요소와의 상호작용을 확인해주기 위해, 사용자 인터페이스 요소와의 사용자 상호작용에 응답하여 발생될 수 있는 힘, 진동 및 움직임 등의 햅틱 피드백 효과일 수 있다.
컨텍스트 메타데이터의 예는 사용자 인터페이스 요소의 하나 이상의 물리적 특성[도 2에서 물리적 특성(211)으로서 예시되어 있음]을 나타내는 데이터이다. 하나 이상의 물리적 특성은 사용자 인터페이스 요소의 크기 또는 형상을 포함할 수 있고, 여기서 사용자 인터페이스 요소의 크기는 하나 이상의 크기 파라미터를 포함할 수 있으며, 사용자 인터페이스 요소의 형상은 하나 이상의 형상 파라미터를 포함할 수 있다. 예를 들어, 하나 이상의 물리적 특성은 디바이스의 터치스크린 내에 디스플레이되는 버튼의 크기(즉, 버튼의 하나 이상의 크기 파라미터)를 포함할 수 있다. 이 예에서, 확인 햅틱 효과는 버튼의 하나 이상의 크기 파라미터에 기초하여 발생될 수 있다. 따라서, 작은 버튼은 사용자에게 큰 버튼과 상이하게(예컨대, "보다 가볍게") 느껴질 수 있다. 다른 예에서, 하나 이상의 물리적 특성은 버튼의 형상(즉, 버튼의 하나 이상의 형상 파라미터)을 포함할 수 있다. 다른 예에서, 하나 이상의 물리적 특성은 버튼의 크기 및 형상 둘 다(즉, 버튼의 하나 이상의 크기 파라미터 및 버튼의 하나 이상의 형상 파라미터)를 포함할 수 있다. 따라서, 사용자와 상호작용하는 버튼(또는 기타 사용자 인터페이스 요소)의 크기 및 형상은 발생되는 확인 햅틱 효과를 결정하는 데 사용될 수 있다.
컨텍스트 메타데이터의 다른 예는 사용자 인터페이스 요소의 기능[도 2에서 기능(212)으로서 예시되어 있음]을 나타내는 데이터이다. 기능은 사용자 인터페이스 요소 또는 사용자 인터페이스 요소와의 상호작용과 연관되어 있는 기능일 수 있다. 예를 들어, 기능은 사용자 인터페이스 요소 내에서 문자 또는 단어를 입력하는 것일 수 있다. 다른 예로서, 기능은 사용자 인터페이스 요소와의 상호작용 시에 사용자 인터페이스 요소에 의해 개시될 수 있는 문자 메시지 또는 이메일 메시지를 생성하는 것일 수 있다. 따라서, 사용자 인터페이스 요소의 기능은 발생되는 확인 햅틱 효과를 결정하는 데 사용될 수 있다. 예를 들어, 터치스크린 내에 디스플레이되는 필드 내에 문자를 입력하는 것은 필드 내에 단어가 입력될 때 발생되는 확인 햅틱 효과와 상이한 확인 햅틱 효과를 발생할 수 있다. 다른 예로서, 문자 메시지를 생성하기 위해 터치스크린 내에 디스플레이되는 버튼을 누르는 것은 확인 햅틱 효과가 발생되게 할 수 있다. 그렇지만, 이메일 메시지를 생성하기 위해 터치스크린 내에 디스플레이되는 버튼을 동일하게 누르는 것은 상이한 확인 햅틱 효과가 발생되게 할 수 있다.
컨텍스트 메타데이터의 다른 예는 사용자 인터페이스 요소의 이력[도 2에서 이력(213)으로서 예시되어 있음]을 나타내는 데이터이다. 이력은 사용자 인터페이스 요소와의 하나 이상의 이전의 상호작용과 연관되어 있는 이력일 수 있다. 예를 들어, 사용자 인터페이스 요소(키보드 또는 터치스크린 내에 디스플레이되는 버튼 등)의 이력은 타이핑 속도(즉, 사용자가 키보드 상에서 타이핑하거나 터치스크린 내에 디스플레이되는 버튼을 터치하는 속도)일 수 있다. 예로서, 느린 타이핑 속도에서 바람직하게 느껴지는 확인 햅틱 효과는 빠른 타이핑 속도에서는 바람직하지 않게 느껴질 수 있다. 이렇게 되는 한가지 이유는 확인 햅틱 효과를 발생하는 액추에이터가 특정의 속도로 연속적인 확인 햅틱 효과를 발생할 수 없을지도 모르기 때문일 수 있는데, 왜냐하면 각각의 확인 햅틱 효과의 지속기간이 각각의 키스트로크 사이의 지속기간보다 더 길 수 있기 때문이다. 이 때문에, 확인 햅틱 효과가 서로 섞일 수 있고, "둔한(mushy)" 햅틱 경험을 발생한다. 이렇게 되는 다른 이유는 초기 확인 햅틱 효과의 크기가 나중에 발생되는 하나 이상의 보다 약한 확인 햅틱 효과를 압도할 정도로 강할 수 있기 때문일 수 있다. 따라서, 복수의 확인 햅틱 효과가 서로 섞이거나 다른 바람직하지 않은 결과를 야기하는 것을 피하기 위해 확인 햅틱 효과의 크기, 지속기간 또는 기타 파라미터를 자동으로 스케일링하는 데 타이핑 속도가 사용될 수 있다. 사용자 인터페이스 요소와의 복수의 상호작용 후에 타이핑 속도가 결정될 수 있다. 따라서, 확인 햅틱 효과의 수정은 타이핑 속도의 변화가 식별되자마자(즉, 복수의 상호작용 후에) 일어날 수 있다.
컨텍스트 메타데이터의 다른 예는 센서 입력 데이터[도 2에서 센서 입력 데이터(214)로서 예시되어 있음]이다. 앞서 기술한 바와 같이, 센서는 사용자 인터페이스 요소와의 상호작용과 연관되어 있는 센서 입력 데이터를 생성할 수 있다. 예를 들어, 센서는 사용자가 사용자 인터페이스 요소(키보드 또는 터치스크린 내에 디스플레이되는 버튼 등)를 터치하는 것에 의해 생성되는 압력과 연관되어 있는 센서 입력 데이터를 발생할 수 있다. 압력에 기초하여, 대응하는 확인 햅틱 효과가 발생될 수 있다. 예를 들어, 압력이 증가될 때(즉, 사용자가 사용자 인터페이스 요소를 보다 강하게 터치할 때), 확인 햅틱 효과의 크기가 증가(또는 감소)할 수 있다. 다른 예로서, 센서는 사용자가 신체적 활동(걷거나 뛰는 것 등)에 관여하고 있다는 것을 나타낼 수 있는 디바이스의 가속도와 연관되어 있는 입력 데이터를 발생할 수 있다. 또 다른 예로서, 센서는 사용자의 환경에 의해 생성되는 소리와 연관되어 있는 입력 데이터를 발생할 수 있다. 소리에 기초하여, 사용자의 환경이 시끄러운 것으로 그리고 확인 햅틱 효과의 크기(또는 진폭 또는 세기)가 증가되어야만 하는 것으로 판정될 수 있다. 다른 예로서, 센서는 정지 영상, 비디오 또는 사운드 등의 데이터를 처리하는 것으로부터 생성되는 정보 또는 신호로 표현되는 입력 데이터를 발생할 수 있다. 예를 들어, 사용자 인터페이스 내에 디스플레이되는 가상 경주용 자동차인 사용자 인터페이스 요소는, 자동차의 가상 속도, 자동차가 카메라 관찰 각도에 얼마나 가까운지, 또는 자동차의 크기에 기초하여, 확인 햅틱 효과가 수정되게 할 수 있다.
컨텍스트 메타데이터는 또한 임의의 다른 종류의 컨텍스트 메타데이터[도 2에서 기타 컨텍스트 메타데이터(215)로서 예시되어 있음]일 수 있다. 이것은 사용자 인터페이스 요소와의 상호작용과 연관되어 있는 임의의 종류의 데이터일 수 있다. 특정의 실시예에서, 메모리 또는 다른 컴퓨터 판독가능 또는 유형의 매체에 저장되어 있고 프로세서에 의해 실행되는 소프트웨어는 상기한 유형들의 컨텍스트 메타데이터 중 하나 이상을 발생할 수 있다. 게다가, 메모리 또는 다른 컴퓨터 판독가능 또는 유형의 매체에 저장되어 있고 프로세서에 의해 실행되는 소프트웨어는 컨텍스트 메타데이터를 수신하고 해석할 수 있다. 이러한 소프트웨어는 컨텍스트 메타데이터(그에 부가하여, 특정의 실시예에서, 수신된 다른 입력 데이터)를 하나 이상의 햅틱 파라미터에 매핑할 수 있다[이 매핑은 도 2에서 매핑(220)으로서 예시되어 있음]. 이러한 매핑에 대해서는 이하에서 더 상세히 추가로 기술한다.
이 실시예에 따르면, 적절한 확인 햅틱 효과를 발생하기 위해, 확인 햅틱 효과가 사용자 인터페이스 요소와의 사용자 상호작용을 확인해줄 수 있는 경우, 하나 이상의 햅틱 파라미터가 생성될 수 있다[하나 이상의 햅틱 파라미터가 도 2에서 햅틱 파라미터(230)로서 예시되어 있음]. 앞서 기술한 바와 같이, 확인 햅틱 효과는, 사용자 인터페이스 요소와의 상호작용을 확인해주기 위해, 사용자 인터페이스 요소와의 사용자 상호작용에 응답하여 발생될 수 있는 힘, 진동 및 움직임 등의 햅틱 피드백 효과이다. 특정의 실시예에서, 확인 햅틱 효과는 정적 햅틱 효과이다. 또한, 특정의 실시예에서, 확인 햅틱 효과는 햅틱 효과의 라이브러리에 저장되고 그로부터 선택될 수 있다. 특정의 실시예에서, 햅틱 효과의 라이브러리는 메모리에 저장될 수 있다. 햅틱 파라미터는 크기, 주파수, 지속기간, 진폭(즉, 강도), 파형, 또는 임의의 다른 종류의 정량화가능한 햅틱 파라미터 등의 햅틱 효과 품질의 양이다. 이 실시예에 따르면, 확인 햅틱 효과는, 적어도 부분적으로, 하나 이상의 햅틱 파라미터에 의해 정의될 수 있고, 여기서 하나 이상의 햅틱 파라미터는 확인 햅틱 효과의 특성을 정의할 수 있다. 하나 이상의 햅틱 파라미터에 대해서는 이하에서 더 상세히 추가로 기술한다.
하나 이상의 햅틱 파라미터를 생성하기 위해, 앞서 기술한 바와 같이, 입력 데이터가 하나 이상의 햅틱 파라미터에 매핑될 수 있다. 보다 구체적으로는, 입력 데이터에 적어도 부분적으로 기초하여 하나 이상의 햅틱 파라미터가 발생될 수 있다. 매핑의 일부로서, 컨텍스트 메타데이터가 하나 이상의 햅틱 파라미터에 매핑될 수 있다[도 2에서 컨텍스트 메타데이터 매핑(221)으로서 나타내어져 있음]. 보다 구체적으로는, 하나 이상의 햅틱 파라미터 각각은 컨텍스트 메타데이터에 적어도 부분적으로 기초할 수 있는 값을 포함할 수 있다. 예를 들어, 컨텍스트 메타데이터(사용자 인터페이스 요소의 크기 등)가 특정의 값을 가지는 경우, 역시 특정의 값을 갖는 하나 이상의 햅틱 파라미터가 발생될 수 있다. 이와 같이, 컨텍스트 메타데이터는, 적어도 부분적으로, 하나 이상의 햅틱 파라미터를 정의할 수 있다.
특정의 실시예에서, 컨텍스트 메타데이터 매핑은 확인 햅틱 효과가 발생되기 전에 수행되는 유일한 매핑이다. 그렇지만, 대안의 실시예에서, 컨텍스트 메타데이터 매핑이 다른 매핑과 결합될 수 있다. 예를 들어, 특정의 실시예에서, 컨텍스트 메타데이터 매핑에 부가하여, 사용자는 커스터마이즈된 매핑을 수행할 수 있다[도 2에서 사용자 커스터마이즈 매핑(222)로서 나타내어져 있음]. 커스터마이즈된 매핑의 일부로서, 사용자에 의해 정의된 하나 이상의 멀티플라이어(multiplier)에 기초하여 하나 이상의 햅틱 파라미터가 수정될 수 있다. 보다 구체적으로는, 사용자에 의해 정의된 하나 이상의 멀티플라이어에 기초하여 하나 이상의 햅틱 파라미터에 대한 값이 수정될 수 있다. 사용자에 의해 정의된 하나 이상의 멀티플라이어는 슬라이더 사용자 인터페이스의 일부인 하나 이상의 슬라이더에 기초할 수 있다. 슬라이더 사용자 인터페이스에 대해서는 도 3과 관련하여 이하에서 더 상세히 기술한다. 하나 이상의 햅틱 파라미터를 수정함으로써, 확인 햅틱 효과는 하나 이상의 멀티플라이어에 기초하여 수정될 수 있다. 특정의 실시예에서, 모든 사용자 인터페이스 요소에 대해 하나 이상의 멀티플라이어가 전역적으로 정의될 수 있다. 다른 실시예에서, 특정의 사용자 인터페이스 요소 또는 특정의 복수의 사용자 인터페이스 요소에 대해 하나 이상의 멀티플라이어가 로컬적으로 정의될 수 있다. 특정의 실시예에서, 컨텍스트 메타데이터 매핑 이후에 사용자 커스터마이즈 매핑이 수행된다. 대안의 실시예에서, 컨텍스트 메타데이터 매핑 이전에 사용자 커스터마이즈 매핑이 수행된다. 특정의 실시예에서, 하나 이상의 멀티플라이어가 모든 사용자 인터페이스 요소에 일관성있게 적용된다. 대안의 실시예에서, 각각의 사용자 인터페이스 요소와 연관되어 있는 컨텍스트 메타데이터에 기초하여, 하나 이상의 멀티플라이어가 사용자 인터페이스 요소에 적용된다. 예를 들어, 멀티플라이어가 낮은 값인 경우, 작은 버튼과 큰 버튼 사이의 햅틱 파라미터(크기 등)의 차가 감소될 수 있다. 그렇지만, 멀티플라이어가 높은 값인 경우, 작은 버튼과 큰 버튼 사이의 햅틱 파라미터의 차가 증가될 수 있다.
특정의 실시예에서, 컨텍스트 메타데이터 매핑 및 사용자 커스터마이즈 매핑에 부가하여, 하나 이상의 기타 매핑이 수행된다[도 2에서 기타 매핑(223)으로서 나타내어져 있음]. 예를 들어, 테마 매핑이 수행될 수 있고, 여기서 테마 매핑은 정의된 테마에 기초하여 하나 이상의 햅틱 파라미터를 수정하는 것을 포함하고, 여기서 테마는 하나 이상의 햅틱 효과 및 하나 이상의 햅틱 효과를 발생하기 위한 하나 이상의 햅틱 파라미터의 하나 이상의 사용자 인터페이스 요소에의 매핑을 포함하는 설치가능한 패키지이다. 다른 예로서, 동적 매핑이 수행될 수 있고, 여기서 복수의 사용자 인터페이스 요소 상호작용으로부터의 데이터(컨텍스트 메타데이터 등)가 하나 이상의 햅틱 파라미터에 매핑될 수 있다. 하나 이상의 기타 매핑은 또한 임의의 다른 유형의 매핑일 수 있고, 여기서 데이터는 하나 이상의 햅틱 파라미터에 매핑된다.
앞서 기술한 바와 같이, 하나 이상의 매핑에 기초하여 하나 이상의 햅틱 파라미터가 생성될 수 있다[하나 이상의 햅틱 파라미터가 도 2에서 햅틱 파라미터(230)로서 예시되어 있음]. 또한 앞서 기술한 바와 같이, 햅틱 파라미터는 햅틱 효과 품질의 양이다. 햅틱 파라미터는 햅틱 파라미터와 연관되어 있는 값을 가질 수 있다. 햅틱 파라미터의 예는 크기 햅틱 파라미터[도 2에서 크기(231)로서 나타내어져 있음]이고, 여기서 크기 햅틱 파라미터는 확인 햅틱 효과의 크기 값을 정의한다. 햅틱 파라미터의 다른 예는 주파수 햅틱 파라미터[도 2에서 주파수(232)로서 나타내어져 있음]이고, 여기서 주파수 햅틱 파라미터는 확인 햅틱 효과의 주파수 값을 정의한다. 햅틱 파라미터의 또 다른 예는 지속기간 햅틱 파라미터[도 2에서 지속기간(233)으로서 나타내어져 있음]이고, 여기서 지속기간 햅틱 파라미터는 확인 햅틱 효과의 지속기간 값을 정의한다. 햅틱 파라미터의 또 다른 예는 파형 햅틱 파라미터[도 2에서 파형(234)으로서 나타내어져 있음]이고, 여기서 파형 햅틱 파라미터는 확인 햅틱 효과의 파형 값을 정의한다. 햅틱 파라미터의 기타 예는 확인 햅틱 효과의 정량화가능한 값을 정의하는 임의의 다른 유형의 정량화가능한 햅틱 파라미터를 포함한다.
특정의 실시예에서, 메모리 또는 다른 컴퓨터 판독가능 또는 유형의 매체에 저장되어 있고 프로세서에 의해 실행되는 소프트웨어는 하나 이상의 햅틱 파라미터를 해석하고 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 하나 이상의 햅틱 신호를 발생할 수 있다. 특정의 실시예에서, 하나 이상의 햅틱 파라미터는 햅틱 신호의 하나 이상의 특성을 정의한다. 예를 들어, 크기 햅틱 파라미터는 햅틱 신호의 크기를 정의할 수 있다. 다른 예로서, 주파수 햅틱 파라미터는 햅틱 신호의 주파수를 정의할 수 있다. 또 다른 예로서, 파형 햅틱 파라미터는 햅틱 신호의 파형을 정의할 수 있다. 또 다른 예로서, 지속기간 햅틱 파라미터는 햅틱 신호의 지속기간을 정의할 수 있다.
게다가, 메모리 또는 다른 컴퓨터 판독가능 또는 유형의 매체에 저장되어 있고 프로세서에 의해 실행되는 소프트웨어는 하나 이상의 햅틱 신호를 하나 이상의 액추에이터에 송신할 수 있다. 하나 이상의 액추에이터의 각각의 액추에이터에서, 액추에이터는 하나 이상의 햅틱 신호 중 적어도 하나의 햅틱 신호를 수신하고 적어도 하나의 햅틱 신호에 기초하여 하나 이상의 확인 햅틱 효과를 출력할 수 있다. 이와 같이, 적어도 하나의 햅틱 신호는 하나 이상의 확인 햅틱 효과의 하나 이상의 특성을 정의할 수 있다. 복수의 액추에이터를 포함하는 특정의 실시예에서, 액추에이터는 하나 이상의 햅틱 신호를 공유할 수 있다. 예를 들어, 제1 세트의 사용자 인터페이스 요소와 연관되어 있는 하나 이상의 햅틱 신호 중 일부가 제1 액추에이터로 송신될 수 있고, 제2 세트의 사용자 인터페이스 요소와 연관되어 있는 하나 이상의 햅틱 신호 중 다른 햅틱 신호가 제2 액추에이터로 송신될 수 있다. 복수의 액추에이터를 포함하는 특정의 실시예에서, 어떤 액추에이터는 기계적 액추에이터이고, 다른 액추에이터는 비기계적 액추에이터이다.
도 3은 본 발명의 일 실시예에 따른, 햅틱 파라미터 슬라이더 사용자 인터페이스를 나타낸 것이다. 보다 구체적으로는, 도 3은 햅틱 파라미터 슬라이더 사용자 인터페이스(310)를 디스플레이하는 디바이스(300)를 나타낸 것이다. 특정의 실시예에서, 디바이스(300)는 터치스크린을 포함하고, 여기서 햅틱 파라미터 슬라이더 사용자 인터페이스(310)는 터치스크린 내에 디스플레이된다. 앞서 기술한 바와 같이, 컨텍스트 메타데이터 매핑에 부가하여, 사용자는 커스터마이즈된 매핑을 수행할 수 있다. 커스터마이즈된 매핑의 일부로서, 사용자에 의해 정의된 하나 이상의 멀티플라이어에 기초하여 하나 이상의 햅틱 파라미터가 수정될 수 있다. 특정의 실시예에서, 하나 이상의 멀티플라이어는 슬라이더 사용자 인터페이스(310)의 하나 이상의 슬라이더에 의해 정의될 수 있다. 이와 같이, 슬라이더 사용자 인터페이스(310)는 하나 이상의 햅틱 파라미터를 수정하는 데 사용되는 하나 이상의 멀티플라이어를 제어할 수 있다.
도 3에 예시된 실시예에서, 슬라이더 사용자 인터페이스(310)는 단일 슬라이더인 슬라이더(320)를 포함한다. 그렇지만, 이것은 예시적인 실시예에 불과하고, 다른 실시예에서, 슬라이더 사용자 인터페이스(310)는 복수의 슬라이더를 포함할 수 있다. 슬라이더(320)는 햅틱 파라미터를 수정하는 데 사용되는 멀티플라이어와 연관되어 있을 수 있다. 예를 들어, 슬라이더(320)는 크기 햅틱 파라미터를 수정하는 데 사용되는 크기 멀티플라이어와 연관되어 있을 수 있다. 다른 예로서, 슬라이더(320)는 주파수 햅틱 파라미터를 수정하는 데 사용되는 주파수 멀티플라이어와 연관되어 있을 수 있다. 또 다른 예로서, 슬라이더(320)는 파형 햅틱 파라미터를 수정하는 데 사용되는 파형 멀티플라이어와 연관되어 있을 수 있다. 또 다른 예로서, 슬라이더(320)는 지속기간 햅틱 파라미터를 수정하는 데 사용되는 지속기간 멀티플라이어와 연관되어 있을 수 있다. 슬라이더 사용자 인터페이스(310)가 복수의 슬라이더를 포함하는 실시예에서, 각각의 슬라이더(320)는 특정의 햅틱 파라미터를 수정하는 데 사용되는 특정의 멀티플라이어와 연관되어 있을 수 있다. 이와 같이, 슬라이더(320)는 햅틱 파라미터를 수정하는 데 사용되는 멀티플라이어를 제어할 수 있다.
예시된 실시예에 따르면, 슬라이더(320)는 슬라이더 컨트롤(330)을 포함한다. 슬라이더 컨트롤(330)은 사용자가 슬라이더(320)와 연관되어 있는 멀티플라이어를 제어할 수 있게 해주는 노출된 사용자 인터페이스 요소이다. 슬라이더 컨트롤(330)을 슬라이더(320)의 좌측 또는 우측으로 움직임으로써, 사용자는 슬라이더(320)와 연관되어 있는 멀티플라이어를 제어할 수 있고, 이와 같이, 슬라이더(320)와 연관되어 있는 햅틱 파라미터를 제어할 수 있다. 예를 들어, 슬라이더(320)가 크기 햅틱 파라미터를 수정하는 데 사용되는 크기 멀티플라이어와 연관되어 있는 실시예에서, 사용자는 크기 햅틱 파라미터의 값을 증가 또는 감소시킬 수 있고, 이와 같이, 슬라이더 컨트롤(330)을 움직임으로써 사용자 인터페이스 요소와 연관되어 있는 확인 햅틱 효과를 증가 또는 감소시킬 수 있다.
특정의 실시예에서, 슬라이더(320)는 모든 사용자 인터페이스 요소의 햅틱 파라미터를 수정하는 데 사용되는 멀티플라이어를 전역적으로 제어할 수 있다. 다른 실시예에서, 슬라이더(320)는 특정의 사용자 인터페이스 요소 또는 특정의 복수의 사용자 인터페이스 요소에 대한 햅틱 파라미터를 수정하는 데 사용되는 멀티플라이어를 로컬적으로 제어할 수 있다. 특정의 실시예에서, 슬라이더(320)는 모든 사용자 인터페이스 요소에 멀티플라이어를 일관성있게 적용한다. 대안의 실시예에서, 슬라이더(320)는 각각의 사용자 인터페이스 요소와 연관되어 있는 컨텍스트 메타데이터에 기초하여, 멀티플라이어를 사용자 인터페이스 요소에 적용한다. 예를 들어, 슬라이더 컨트롤(330)이 낮은 값으로 설정되는 경우, 작은 사용자 인터페이스 요소와 큰 사용자 인터페이스 요소 사이의 햅틱 파라미터(크기 등)의 차가 감소될 수 있다. 그렇지만, 슬라이더 컨트롤(330)이 높은 값으로 설정되는 경우, 작은 사용자 인터페이스 요소와 큰 사용자 인터페이스 요소 사이의 햅틱 파라미터의 차가 증가될 수 있다. 슬라이더(320)의 기능이 다이얼, 휠, 스피너, 버튼, 라디오 버튼, 스크롤러, 스위치 또는 체크박스(이들로 제한되지 않음)를 비롯한, 슬라이더 이외의 사용자 인터페이스 요소에 복제될 수 있다. 슬라이더(320)의 기능이 또한 물리적 버튼, 로커 스위치, 물리적 슬라이더 및 "소프트키"(터치될 때, 어떤 소프트웨어 기능을 활성화시키는 하드웨어 표면 상의 영역)(이들로 제한되지 않음)를 비롯한 하드웨어 사용자 인터페이스 요소에 복제될 수 있다.
도 4는 본 발명의 일 실시예에 따른, 햅틱 확인 모듈[도 1의 햅틱 확인 모듈(16) 등]의 기능의 흐름도를 나타낸 것이다. 일 실시예에서, 도 4의 기능은 메모리 또는 다른 컴퓨터 판독가능 또는 유형의 매체에 저장되고 프로세서에 의해 실행되는 소프트웨어에 의해 구현된다. 다른 실시예에서, 기능이 하드웨어에 의해[예컨대, ASIC(application specific integrated circuit), PGA(programmable gate array), FPGA(field programmable gate array) 등의 사용을 통해] 또는 하드웨어와 소프트웨어의 임의의 조합에 의해 수행될 수 있다. 게다가, 대안의 실시예에서, 기능이 아날로그 구성요소를 사용하는 하드웨어에 의해 수행될 수 있다.
흐름이 시작되고 410으로 진행한다. 410에서, 사용자 인터페이스 요소의 사용자 상호작용과 연관되어 있는 컨텍스트 메타데이터가 수신된다. 앞서 기술한 바와 같이, 사용자 인터페이스 요소는 사용자와 상호작용할 수 있는 디바이스의 물리적 또는 가상 요소일 수 있다. 물리적 사용자 인터페이스 요소의 예는 키보드 또는 커서 컨트롤(마우스 등)이다. 가상 사용자 인터페이스 요소의 예는 버튼, 슬라이더, 스크롤러, 스위치, 체크박스 및 라디오 박스 등의 터치스크린 내에 디스플레이되는 아이콘이다. 사용자 인터페이스 요소와의 상호작용은 사용자 인터페이스 요소의 물리적 조작을 포함할 수 있다. 사용자 인터페이스 요소의 물리적 조작의 예는 사용자 인터페이스 요소를 터치하는 것(키보드를 터치하는 것 또는 버튼 또는 어떤 다른 유형의 사용자 인터페이스 요소가 디스플레이되는 터치스크린을 터치하는 것 등)이다. 컨텍스트 메타데이터는 사용자 인터페이스 요소와의 상호작용의 컨텍스트와 연관되어 있는 임의의 데이터일 수 있다. 컨텍스트 메타데이터는 사용자 인터페이스 요소의 하나 이상의 물리적 특성을 나타내는 데이터를 포함할 수 있다. 하나 이상의 물리적 특성은 사용자 인터페이스 요소의 크기를 포함할 수 있고, 여기서 사용자 인터페이스 요소의 크기는 하나 이상의 크기 파라미터를 포함할 수 있다. 하나 이상의 물리적 특성은 사용자 인터페이스 요소의 형상을 포함할 수 있고, 여기서 사용자 인터페이스 요소의 형상은 하나 이상의 형상 파라미터를 포함할 수 있다. 컨텍스트 메타데이터는 다른 대안으로서 사용자 인터페이스 요소의 기능을 나타내는 데이터를 포함할 수 있다. 기능은 사용자 인터페이스 요소 또는 사용자 인터페이스 요소와의 상호작용과 연관되어 있는 기능을 포함할 수 있다. 컨텍스트 메타데이터는 다른 대안으로서 사용자 인터페이스 요소의 이력을 나타내는 데이터를 포함할 수 있다. 이력은 사용자 인터페이스 요소와의 하나 이상의 이전의 상호작용과 연관되어 있는 이력을 포함할 수 있다. 컨텍스트 메타데이터는 다른 대안으로서 센서 입력 데이터를 포함할 수 있다. 센서 입력 데이터는 사용자 인터페이스 요소와의 상호작용과 연관되어 있는 센서 입력 데이터를 포함할 수 있다. 컨텍스트 메타데이터는 다른 대안으로서 다른 유형의 컨텍스트 메타데이터를 포함할 수 있다. 흐름이 420으로 진행한다.
420에서, 수신된 컨텍스트 데이터는 하나 이상의 햅틱 파라미터에 매핑된다. 햅틱 파라미터는 햅틱 효과 품질의 양일 수 있다. 햅틱 파라미터의 예는 크기 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 진폭(즉, 강도) 햅틱 파라미터, 및 파형 햅틱 파라미터를 포함할 수 있다. 하나 이상의 햅틱 파라미터는, 적어도 부분적으로, 확인 햅틱 효과를 정의할 수 있다. 확인 햅틱 효과는, 사용자 인터페이스 요소와의 상호작용을 확인해주기 위해, 사용자 인터페이스 요소와의 사용자 상호작용에 응답하여 발생될 수 있는 힘, 진동 및 움직임 등의 햅틱 피드백 효과일 수 있다. 특정의 실시예에서, 매핑의 결과로서, 하나 이상의 햅틱 파라미터 각각은 수신된 컨텍스트 메타데이터에 적어도 부분적으로 기초한 값을 포함할 수 있다. 흐름이 430으로 진행한다.
430에서, 하나 이상의 햅틱 파라미터가 사용자 입력에 기초하여 수정된다. 사용자 입력은 사용자에 의해 정의되는 하나 이상의 멀티플라이어를 포함할 수 있다. 하나 이상의 햅틱 파라미터 각각에 대해 포함된 각각의 값은 사용자에 의해 정의된 하나 이상의 멀티플라이어에 기초할 수 있다. 하나 이상의 햅틱 파라미터를 수정함으로써, 확인 햅틱 효과는 하나 이상의 멀티플라이어에 기초하여 수정될 수 있다. 특정의 실시예에서, 모든 사용자 인터페이스 요소에 대해 하나 이상의 멀티플라이어가 전역적으로 정의될 수 있다. 다른 실시예에서, 특정의 사용자 인터페이스 요소 또는 특정의 복수의 사용자 인터페이스 요소에 대해 하나 이상의 멀티플라이어가 로컬적으로 정의될 수 있다. 특정의 실시예에서, 컨텍스트 메타데이터 매핑 이후에 사용자 커스터마이즈 매핑이 수행된다. 대안의 실시예에서, 컨텍스트 메타데이터 매핑 이전에 사용자 커스터마이즈 매핑이 수행된다. 사용자에 의해 정의된 하나 이상의 멀티플라이어는 슬라이더 사용자 인터페이스의 일부인 하나 이상의 슬라이더에 기초할 수 있다. 다른 실시예에서, 사용자에 의해 정의된 하나 이상의 멀티플라이어는 다이얼, 휠, 스피너, 버튼, 라디오 버튼, 스크롤러, 스위치 또는 체크박스(이들로 제한되지 않음)를 비롯한, 슬라이더 이외의 사용자 인터페이스 요소에 기초할 수 있다. 다른 실시예에서, 사용자에 의해 정의된 하나 이상의 멀티플라이어는 물리적 버튼, 로커 스위치, 물리적 슬라이더 및 "소프트키"(이들로 제한되지 않음)를 비롯한 하드웨어 사용자 인터페이스 요소에 기초할 수 있다. 특정의 실시예에서, 430에서 수행되는 하나 이상의 햅틱 파라미터의 수정이 생략되어 있다. 흐름이 440으로 진행한다.
440에서, 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 햅틱 신호가 발생된다. 특정의 실시예에서, 하나 이상의 햅틱 파라미터는 햅틱 신호의 하나 이상의 특성을 정의한다. 흐름이 450으로 진행한다.
450에서, 확인 햅틱 효과를 발생하기 위해 햅틱 신호가 액추에이터로 송신된다. 확인 햅틱 효과는, 사용자 인터페이스 요소와의 상호작용을 확인해주기 위해, 사용자 인터페이스 요소와의 사용자 상호작용에 응답하여 발생될 수 있는 햅틱 피드백 효과일 수 있다. 특정의 실시예에서, 액추에이터는 햅틱 신호를 수신하고 햅틱 신호에 기초하여 확인 햅틱 효과를 출력할 수 있다. 특정의 실시예에서, 햅틱 신호는 확인 햅틱 효과의 하나 이상의 특성을 정의한다. 이어서, 흐름이 종료한다.
사용자 인터페이스 요소와의 차후의 사용자 상호작용를 포함하는 특정의 실시예에서, 사용자 인터페이스 요소와의 차후의 사용자 상호작용과 연관되어 있는 부가의(즉, "기타") 컨텍스트 메타데이터가 수신될 수 있다. 다른 컨텍스트 메타데이터가 새로운 세트의(즉, "다른") 하나 이상의 햅틱 파라미터에 매핑될 수 있다. 다른 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 다른 햅틱 신호가 발생될 수 있다. 다른 확인 햅틱 효과를 발생하기 위해 다른 햅틱 신호가 액추에이터로 송신될 수 있고, 여기서 다른 확인 햅틱 효과는 액추에이터에 의해 이전에 발생된 확인 햅틱 효과와 상이하다.
이와 같이, 사용자 인터페이스 요소와의 사용자 상호작용과 연관되어 있는 컨텍스트 메타데이터에 기초하여 하나 이상의 확인 햅틱 효과를 발생하는 햅틱 확인 시스템이 제공된다. 이와 같이, 사용자 인터페이스 요소에 대한 확인 햅틱 효과가 일반적으로 요소마다 하나의 확인 유형인 공지된 햅틱 시스템과 달리, 본 발명의 실시예는 컨텍스트 메타데이터에 기초하여 단일 사용자 인터페이스 요소에 대한 다수의 가능한 확인 햅틱 이벤트를 제공할 수 있다.
이 명세서 전체에 걸쳐 기술된 본 발명의 특징, 구조 또는 특성이 하나 이상의 실시예에서 임의의 적당한 방식으로 결합될 수 있다. 예를 들어, 이 명세서 전체에 걸쳐 "일 실시예", "일부 실시예", "특정의 실시예", "특정의 실시예들" 또는 다른 유사한 표현의 사용은 실시예와 관련하여 기술된 특정의 특징, 구조 또는 특성이 본 발명의 적어도 하나의 실시예에 포함될 수 있다는 사실을 말한다. 이와 같이, 이 명세서 전체에 걸쳐 나오는 "일 실시예", "일부 실시예", "특정의 실시예", "특정의 실시예들" 또는 다른 유사한 표현은 모두가 동일한 그룹의 실시예를 말할 필요는 없으며, 기술된 특징, 구조 또는 특성이 하나 이상의 실시예에서 임의의 적당한 방식으로 결합될 수 있다.
기술 분야의 당업자라면 이상에서 논의된 본 발명이 상이한 순서의 단게들로 및/또는 개시되어 있는 것과 상이한 구성으로 되어 있는 요소들로 실시될 수 있다는 것을 잘 알 것이다. 따라서, 본 발명이 이들 바람직한 실시예에 기초하여 기술되어 있지만, 본 발명의 사상 및 범위 내에 있으면서 특정의 수정, 변형 및 대안의 구성이 자명할 것임이 기술 분야의 당업자에게는 명백할 것이다. 따라서, 본 발명의 범위를 결정하기 위해, 첨부된 특허청구범위를 참조해야만 한다.

Claims (15)

  1. 확인 햅틱 효과를 발생하는 컴퓨터 구현 방법으로서,
    사용자 인터페이스 요소의 사용자 상호작용과 연관되어 있는 컨텍스트 메타데이터를 수신하는 단계;
    상기 수신된 컨텍스트 메타데이터를 하나 이상의 햅틱 파라미터에 매핑하는 단계;
    상기 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 햅틱 신호를 발생하는 단계; 및
    상기 확인 햅틱 효과를 발생하기 위해 상기 햅틱 신호를 액추에이터에 송신하는 단계를 포함하는 컴퓨터 구현 방법.
  2. 제1항에 있어서, 상기 하나 이상의 햅틱 파라미터를 사용자 입력에 기초하여 수정하는 단계를 추가로 포함하는 컴퓨터 구현 방법.
  3. 제2항에 있어서, 상기 사용자 입력은 사용자에 의해 정의되는 하나 이상의 멀티플라이어를 포함하고;
    상기 하나 이상의 햅틱 파라미터 각각에 대해 포함된 각각의 값은 상기 하나 이상의 멀티플라이어에 기초하는 것인 컴퓨터 구현 방법.
  4. 제3항에 있어서, 모든 사용자 인터페이스 요소에 대해 상기 하나 이상의 멀티플라이어가 전역적으로 정의되는 것인 컴퓨터 구현 방법.
  5. 제3항에 있어서, 특정의 사용자 인터페이스 요소 또는 특정의 복수의 사용자 인터페이스 요소에 대해 상기 하나 이상의 멀티플라이어가 로컬적으로 정의되는 것인 컴퓨터 구현 방법.
  6. 제1항에 있어서, 상기 컨텍스트 메타데이터가 상기 사용자 인터페이스 요소의 하나 이상의 물리적 특성을 나타내는 데이터, 상기 사용자 인터페이스 요소의 기능을 나타내는 데이터, 상기 사용자 인터페이스 요소의 이력을 나타내는 데이터, 또는 센서 입력 데이터 중 적어도 하나를 포함하는 것인 컴퓨터 구현 방법.
  7. 제1항에 있어서, 상기 하나 이상의 햅틱 파라미터가 크기 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 진폭 햅틱 파라미터, 또는 파형 햅틱 파라미터 중 적어도 하나를 포함하는 것인 컴퓨터 구현 방법.
  8. 제1항에 있어서, 상기 사용자 인터페이스 요소가 디바이스의 물리적 요소 또는 디바이스의 가상 요소 중 적어도 하나를 포함하는 것인 컴퓨터 구현 방법.
  9. 제1항에 있어서, 상기 사용자 인터페이스 요소의 차후의 사용자 상호작용과 연관되어 있는 다른 컨텍스트 메타데이터를 수신하는 단계;
    상기 다른 컨텍스트 메타데이터를 하나 이상의 다른 햅틱 파라미터에 매핑하는 단계;
    상기 하나 이상의 다른 햅틱 파라미터에 적어도 부분적으로 기초하여 다른 햅틱 신호를 발생하는 단계; 및
    다른 확인 햅틱 효과를 발생하기 위해 상기 다른 햅틱 신호를 상기 액추에이터에 송신하는 단계를 추가로 포함하고, 상기 다른 확인 햅틱 효과는 상기 확인 햅틱 효과와 상이한 것인 컴퓨터 구현 방법.
  10. 햅틱 확인 모듈을 저장하도록 구성되어 있는 메모리;
    상기 메모리 상에 저장되어 있는 상기 햅틱 확인 모듈을 실행하도록 구성되어 있는 프로세서; 및
    하나 이상의 확인 햅틱 효과를 출력하도록 구성되어 있는 액추에이터를 포함하고,
    상기 햅틱 확인 모듈은 사용자 인터페이스 요소의 사용자 상호작용과 연관되어 있는 컨텍스트 메타데이터를 수신하도록 구성되어 있고;
    상기 햅틱 확인 모듈은 또한 상기 수신된 컨텍스트 메타데이터를 하나 이상의 햅틱 파라미터에 매핑하도록 구성되어 있으며;
    상기 햅틱 확인 모듈은 또한 상기 하나 이상의 햅틱 파라미터에 적어도 부분적으로 기초하여 햅틱 신호를 발생하도록 구성되어 있고;
    상기 햅틱 확인 모듈은 또한 상기 확인 햅틱 효과를 발생하기 위해 상기 햅틱 신호를 액추에이터에 송신하도록 구성되어 있는 것인 햅틱 확인 시스템.
  11. 제10항에 있어서, 상기 햅틱 확인 모듈은 또한 상기 하나 이상의 햅틱 파라미터를 사용자 입력에 기초하여 수정하도록 구성되어 있는 것인 햅틱 확인 시스템.
  12. 제10항에 있어서, 상기 컨텍스트 메타데이터가 상기 사용자 인터페이스 요소의 하나 이상의 물리적 특성을 나타내는 데이터, 상기 사용자 인터페이스 요소의 기능을 나타내는 데이터, 상기 사용자 인터페이스 요소의 이력을 나타내는 데이터, 또는 센서 입력 데이터 중 적어도 하나를 포함하는 것인 햅틱 확인 시스템.
  13. 제10항에 있어서, 상기 하나 이상의 햅틱 파라미터가 크기 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 진폭 햅틱 파라미터, 또는 파형 햅틱 파라미터 중 적어도 하나를 포함하는 것인 햅틱 확인 시스템.
  14. 제10항에 있어서, 상기 사용자 인터페이스 요소가 키보드 또는 디바이스의 터치스크린 상에 디스플레이되는 버튼 중 적어도 하나를 포함하는 것인 햅틱 확인 시스템.
  15. 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 제1항 내지 제9항 중 어느 한 항에 따른 방법을 구현하게 하는 명령어를 저장하고 있는 컴퓨터 판독가능 매체.
KR1020130095845A 2012-08-24 2013-08-13 컨텍스트 의존적 햅틱 확인 시스템 KR102255100B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/593,626 US8896524B2 (en) 2012-08-24 2012-08-24 Context-dependent haptic confirmation system
US13/593,626 2012-08-24

Publications (2)

Publication Number Publication Date
KR20140026261A true KR20140026261A (ko) 2014-03-05
KR102255100B1 KR102255100B1 (ko) 2021-05-24

Family

ID=48900765

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130095845A KR102255100B1 (ko) 2012-08-24 2013-08-13 컨텍스트 의존적 햅틱 확인 시스템

Country Status (5)

Country Link
US (1) US8896524B2 (ko)
EP (1) EP2701037B1 (ko)
JP (2) JP6317082B2 (ko)
KR (1) KR102255100B1 (ko)
CN (2) CN103631373B (ko)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2495486A (en) * 2011-10-07 2013-04-17 Hiwave Technologies Uk Ltd Contextual haptic feedback in response to touch input
US9063570B2 (en) 2012-06-27 2015-06-23 Immersion Corporation Haptic feedback control system
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
CN103777797B (zh) * 2012-10-23 2017-06-27 联想(北京)有限公司 一种信息处理的方法及电子设备
USD750114S1 (en) 2012-12-05 2016-02-23 Ivoclar Vivadent Ag Display screen or a portion thereof having an animated graphical user interface
US9202351B2 (en) 2013-03-11 2015-12-01 Immersion Corporation Systems and methods for haptics in vibrating environments and devices
US9202352B2 (en) 2013-03-11 2015-12-01 Immersion Corporation Automatic haptic effect adjustment system
US20140267076A1 (en) * 2013-03-15 2014-09-18 Immersion Corporation Systems and Methods for Parameter Modification of Haptic Effects
US9939900B2 (en) 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9711014B2 (en) 2013-09-06 2017-07-18 Immersion Corporation Systems and methods for generating haptic effects associated with transitions in audio signals
US9652945B2 (en) * 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
WO2015169351A1 (en) * 2014-05-07 2015-11-12 Kone Corporation Haptic feedback system and respective method for elevators
US11023655B2 (en) * 2014-06-11 2021-06-01 Microsoft Technology Licensing, Llc Accessibility detection of content properties through tactile interactions
US9690381B2 (en) 2014-08-21 2017-06-27 Immersion Corporation Systems and methods for shape input and output for a haptically-enabled deformable surface
CN115756154A (zh) * 2014-09-02 2023-03-07 苹果公司 用于可变触觉输出的语义框架
US10185396B2 (en) 2014-11-12 2019-01-22 Immersion Corporation Haptic trigger modification system
US9535550B2 (en) * 2014-11-25 2017-01-03 Immersion Corporation Systems and methods for deformation-based haptic effects
US10372212B2 (en) * 2015-05-29 2019-08-06 Google Llc Techniques for simulated physical interaction between users via their mobile computing devices
US10282052B2 (en) 2015-10-15 2019-05-07 At&T Intellectual Property I, L.P. Apparatus and method for presenting information associated with icons on a display screen
EP3173905B1 (en) * 2015-11-24 2019-06-19 Polar Electro Oy Enhancing controlling of haptic output
US10200332B2 (en) 2015-12-14 2019-02-05 Immersion Corporation Delivery of haptics to select recipients of a message
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US9990815B2 (en) * 2016-02-18 2018-06-05 Immersion Corporation Wearable haptic effects with permissions settings
CN107305432B (zh) * 2016-04-25 2021-06-29 西安中兴新软件有限责任公司 一种终端及在终端上实现触觉反馈的方法、装置
CN107463246A (zh) * 2016-06-03 2017-12-12 联想(北京)有限公司 一种信息处理方法及电子设备
JP2018022438A (ja) * 2016-08-05 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
US10296091B2 (en) * 2016-10-13 2019-05-21 Immersion Corporation Contextual pressure sensing haptic responses
EP3316076A1 (en) * 2016-10-25 2018-05-02 Thomson Licensing Activity compensated haptic interface
US10744053B2 (en) 2016-12-07 2020-08-18 Stryker Corporation Haptic systems and methods for a user interface of a patient support apparatus
US10449101B2 (en) 2016-12-29 2019-10-22 Stryker Corporation Patient support apparatus and methods for supplying feedback to a user
US10075251B2 (en) * 2017-02-08 2018-09-11 Immersion Corporation Haptic broadcast with select haptic metadata based on haptic playback capability
US11337872B2 (en) 2017-06-27 2022-05-24 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
US11810667B2 (en) 2017-06-27 2023-11-07 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
US11096850B2 (en) 2017-06-27 2021-08-24 Stryker Corporation Patient support apparatus control systems
US11202729B2 (en) 2017-06-27 2021-12-21 Stryker Corporation Patient support apparatus user interfaces
US11484451B1 (en) 2017-06-27 2022-11-01 Stryker Corporation Patient support apparatus user interfaces
US11382812B2 (en) 2017-06-27 2022-07-12 Stryker Corporation Patient support systems and methods for assisting caregivers with patient care
US10811136B2 (en) 2017-06-27 2020-10-20 Stryker Corporation Access systems for use with patient support apparatuses
US10980687B2 (en) * 2017-07-19 2021-04-20 Stryker Corporation Techniques for generating auditory and haptic output with a vibrational panel of a patient support apparatus
US10503261B2 (en) * 2017-12-15 2019-12-10 Google Llc Multi-point feedback control for touchpads
JP2019159781A (ja) * 2018-03-13 2019-09-19 株式会社デンソー 触覚呈示制御装置
GB2578454A (en) * 2018-10-28 2020-05-13 Cambridge Mechatronics Ltd Haptic feedback generation
US11086431B2 (en) * 2019-01-30 2021-08-10 Samsung Display Co., Ltd. Display device and method for providing haptic feedback by display device
EP4117170A4 (en) * 2021-05-20 2023-09-20 Honor Device Co., Ltd. METHOD AND DEVICE FOR ADJUSTING THE VIBRATION WAVEFORM OF A LINEAR MOTOR
US11645871B1 (en) 2021-11-18 2023-05-09 International Business Machines Corporation Engagement based contextual feedback for devices

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050134561A1 (en) * 2003-12-22 2005-06-23 Tierling Kollin M. System and method for mapping instructions associated with haptic feedback
US20090167508A1 (en) * 2007-12-31 2009-07-02 Apple Inc. Tactile feedback in an electronic device
JP2011154559A (ja) * 2010-01-27 2011-08-11 Kyocera Corp 触感呈示装置および触感呈示方法

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100368508B1 (ko) * 1994-09-07 2005-10-25 코닌클리케 필립스 일렉트로닉스 엔.브이. 사용자-프로그래밍가능한촉각피드백을갖고있는가상작업공간과상호작용하는정보처리시스템
JP3879355B2 (ja) * 2000-02-24 2007-02-14 株式会社デンソー 携帯型無線電話装置
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
US7127679B2 (en) * 2001-06-29 2006-10-24 Softrek, Inc. Method for generating and navigating a plurality of menus using a database and a menu template
JP2005332063A (ja) * 2004-05-18 2005-12-02 Sony Corp 触覚機能付き入力装置、情報入力方法及び電子機器
JPWO2005125159A1 (ja) * 2004-06-22 2008-04-17 松下電器産業株式会社 情報端末
DE102006029506B4 (de) 2005-10-28 2018-10-11 Volkswagen Ag Eingabevorrichtung
CN101331443A (zh) * 2005-12-09 2008-12-24 索尼爱立信移动通讯股份有限公司 用于控制电子内容的触觉输入设备
CN101042794A (zh) * 2006-03-20 2007-09-26 深圳迈瑞生物医疗电子股份有限公司 按键识别/响应系统及其按键识别/响应方法
US7952498B2 (en) 2007-06-29 2011-05-31 Verizon Patent And Licensing Inc. Haptic computer interface
US20090079690A1 (en) * 2007-09-21 2009-03-26 Sony Computer Entertainment America Inc. Method and apparatus for enhancing entertainment software through haptic insertion
US9513704B2 (en) * 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
EP2321019B1 (en) 2008-08-11 2019-04-10 Immersion Corporation A haptic enabled gaming peripheral for a musical game
US8749495B2 (en) 2008-09-24 2014-06-10 Immersion Corporation Multiple actuation handheld device
JP2011090575A (ja) * 2009-10-23 2011-05-06 Ricoh Co Ltd 情報表示装置、情報表示方法、プログラム
US8279052B2 (en) 2009-11-04 2012-10-02 Immersion Corporation Systems and methods for haptic confirmation of commands
WO2011077687A1 (ja) * 2009-12-21 2011-06-30 京セラ株式会社 触感呈示装置および触感呈示装置の制御方法
JP5513974B2 (ja) * 2010-05-11 2014-06-04 日本放送協会 仮想力覚提示装置及び仮想力覚提示プログラム
US8836643B2 (en) * 2010-06-10 2014-09-16 Qualcomm Incorporated Auto-morphing adaptive user interface device and methods
US8576171B2 (en) 2010-08-13 2013-11-05 Immersion Corporation Systems and methods for providing haptic feedback to touch-sensitive input devices
JP5452418B2 (ja) * 2010-08-23 2014-03-26 京セラ株式会社 触感呈示装置
US20120113008A1 (en) 2010-11-08 2012-05-10 Ville Makinen On-screen keyboard with haptic effects
WO2012105158A1 (ja) * 2011-02-04 2012-08-09 パナソニック株式会社 電子機器

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050134561A1 (en) * 2003-12-22 2005-06-23 Tierling Kollin M. System and method for mapping instructions associated with haptic feedback
US20090167508A1 (en) * 2007-12-31 2009-07-02 Apple Inc. Tactile feedback in an electronic device
JP2011154559A (ja) * 2010-01-27 2011-08-11 Kyocera Corp 触感呈示装置および触感呈示方法

Also Published As

Publication number Publication date
JP6598915B2 (ja) 2019-10-30
EP2701037B1 (en) 2023-11-01
CN110187775A (zh) 2019-08-30
EP2701037A2 (en) 2014-02-26
US8896524B2 (en) 2014-11-25
CN103631373A (zh) 2014-03-12
US20140055358A1 (en) 2014-02-27
KR102255100B1 (ko) 2021-05-24
EP2701037A3 (en) 2016-04-13
JP2018125021A (ja) 2018-08-09
CN103631373B (zh) 2019-06-28
JP2014044722A (ja) 2014-03-13
JP6317082B2 (ja) 2018-04-25

Similar Documents

Publication Publication Date Title
JP6598915B2 (ja) コンテキスト依存ハプティック確認システム
US9958944B2 (en) Encoding dynamic haptic effects
US9983676B2 (en) Simulation of tangible user interface interactions and gestures using array of haptic cells
CN104881175B (zh) 具有动态触觉效应的多触摸装置
EP2629178B1 (en) High definition haptic effects generation using primitives
JP6325216B2 (ja) センサ入力を触覚的に表すためのシステム
KR102104463B1 (ko) 터치 감지 표면들에서의 다중 압력 상호 작용을 위한 시스템들 및 방법들
TWI591518B (zh) 前後關係觸覺反饋
RU2429521C2 (ru) Индикатор для помощи пользователю в предсказании изменения скорости прокрутки
WO2018152778A1 (en) Virtual affective touch
KR20170118864A (ko) 곡면형 디스플레이와의 사용자 상호작용을 위한 시스템들 및 방법들
EP2649505B1 (en) User interface
CN110446998B (zh) 用于渲染触觉反馈的多速率处理设备

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant