KR20140057160A - 동적 햅틱 효과의 인코딩 - Google Patents

동적 햅틱 효과의 인코딩 Download PDF

Info

Publication number
KR20140057160A
KR20140057160A KR1020130128528A KR20130128528A KR20140057160A KR 20140057160 A KR20140057160 A KR 20140057160A KR 1020130128528 A KR1020130128528 A KR 1020130128528A KR 20130128528 A KR20130128528 A KR 20130128528A KR 20140057160 A KR20140057160 A KR 20140057160A
Authority
KR
South Korea
Prior art keywords
haptic effect
haptic
key frame
value
dynamic
Prior art date
Application number
KR1020130128528A
Other languages
English (en)
Other versions
KR102161541B1 (ko
Inventor
코스타 헨리 다
펭 티안 안
크리스토퍼 제이. 울리히
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20140057160A publication Critical patent/KR20140057160A/ko
Application granted granted Critical
Publication of KR102161541B1 publication Critical patent/KR102161541B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems

Abstract

하나 이상의 동적 햅틱 효과를 인코딩하는 시스템이 제공된다. 시스템은 동적 햅틱 효과를 복수의 키 프레임들을 포함하는 것으로 정의하며, 각각의 키 프레임은 보간자 값 및 대응하는 햅틱 효과를 포함한다. 보간자 값은 보간이 발생하는 곳을 지정하는 값이다. 시스템은 햅틱 효과 파일을 생성하고, 동적 햅틱 효과를 햅틱 효과 파일 내에 저장한다.

Description

동적 햅틱 효과의 인코딩{ENCODING DYNAMIC HAPTIC EFFECTS}
일 실시예는 일반적으로 햅틱 효과에 관한 것으로, 특히 동적 햅틱 효과를 인코딩하는 것에 관한 것이다.
전자 장치 제조사들은 사용자들을 위해 풍부한 인터페이스를 만들기 위해 노력하고 있다. 종래의 장치들은 시각 및 청각 큐(cue)들을 이용하여 사용자에게 피드백을 제공한다. 일부 인터페이스 장치들에서는, 일반적으로 총괄하여 "햅틱 피드백" 또는 "햅틱 효과"로 잘 알려져 있는 신체 감각 피드백(예를 들어, 활동력 및 저항력 피드백) 및/또는 촉각 피드백(예를 들어, 진동, 감촉, 및 열) 또한 사용자에게 제공된다. 햅틱 피드백은 사용자 인터페이스를 향상시키고 단순화시키는 큐를 제공할 수 있다. 구체적으로, 사용자에게 특정 이벤트를 알리거나, 시뮬레이션 또는 가상 환경 내에서 더 큰 감각 몰입을 발생시키기 위한 현실 피드백을 제공하기 위한 큐를 전자 장치의 사용자에게 제공함에 있어, 진동 효과, 또는 진동 촉각 햅틱 효과가 유용할 수 있다.
햅틱 피드백은 또한 셀룰러폰, PDA(personal digital assistants), 스마트폰, 및 휴대형 게임 장치와 같은 "핸드헬드 장치" 또는 "휴대형 장치"로 불리는 휴대형 전자 장치에 점점 통합되고 있다. 예를 들어, 일부 휴대형 게임 응용 프로그램들은 햅틱 피드백을 제공하도록 구성되는 대규모 게임 시스템과 함께 사용되는 제어 장치(예를 들어, 조이스틱 등)와 유사한 방식으로 진동할 수 있다. 부가적으로, 셀룰러 폰 및 스마트폰과 같은 장치는 사용자에게 진동으로 다양한 알림을 제공할 수 있다. 예를 들어, 셀룰러 폰은 사용자에게 진동으로 착신 전화 통화를 알릴 수 있다. 마찬가지로, 스마트폰은 사용자에게 예정된 달력 항목을 알리거나, 사용자에게 "해야 할 일" 목록 항목 또는 달력 약속에 대한 리마인더를 제공할 수 있다. 게다가, 햅틱 효과는 비디오 게임에서 튀어오르는 공의 느낌과 같은 "현실 세계" 동적 이벤트를 시뮬레이션하는데 이용될 수 있다.
일 실시예는 햅틱 신호를 인코딩하는 시스템이다. 시스템은 하나 이상의 키 프레임을 수신한다. 각각의 키 프레임은 보간자 값 및 햅틱 효과를 갖는다. 시스템은 또한 하나 이상의 키 프레임들을 사용하여 햅틱 효과 신호를 생성한다. 시스템은 또한 햅틱 효과 신호를 햅틱 효과 파일 내에 저장한다.
다른 실시예는 동적 햅틱 효과를 인코딩하는 시스템이다. 시스템은 동적 햅틱 효과를 하나 이상의 키 프레임들을 포함하는 것으로 정의한다. 각각의 키 프레임은 보간자 값 및 대응하는 햅틱 효과를 포함하며, 보간자 값은 대응하는 햅틱 효과에서 보간이 발생하는 곳을 지정하는 값이다. 시스템은 또한 햅틱 효과 파일을 생성한다. 시스템은 또한 동적 햅틱 효과를 햅틱 효과 파일 내에 저장한다.
추가 실시예, 세부 사항, 장점, 및 수정은 첨부 도면과 함께 설명되는 이하의 바람직한 실시예의 상세한 설명으로부터 명백할 것이다.
도 1은 본 발명의 일 실시예에 따른 시스템의 블록도를 나타낸다.
도 2는 본 발명의 일 실시예에 따른 예시적 동적 햅틱 효과 정의를 나타낸다.
도 3은 본 발명의 일 실시예에 따른 예시적 키 프레임 정의를 나타낸다.
도 4는 본 발명의 일 실시예에 따른 예시적 베이시스(basis) 햅틱 효과 저장 블록을 나타낸다.
도 5는 본 발명의 일 실시예에 따른 예시적 프레임 리스트 블록을 나타낸다.
도 6은 본 발명의 일 실시예에 따른 햅틱 인코딩 모듈의 기능의 흐름도를 나타낸다.
도 7은 본 발명의 다른 실시예에 따른 햅틱 인코딩 모듈의 기능의 흐름도를 나타낸다.
후술되는 바와 같이, "동적 햅틱 효과"는 햅틱 효과가 하나 이상의 입력 파라미터에 응답할 때 시간에 따라 전개되는 햅틱 효과를 지칭한다. 동적 햅틱 효과는 주어진 입력 신호의 상태의 변경을 표시하기 위해 햅틱 장치 상에 표시되는 햅틱 또는 진동 촉각 효과이다. 입력 신호는 위치, 가속도, 압력, 방향, 또는 근접과 같은 햅틱 피드백을 갖는 장치 상의 센서들에 의해 캡처되는 신호, 또는 다른 장치에 의해 캡처되고 햅틱 장치에 송신되어 햅틱 효과의 생성에 영향을 주는 신호일 수 있다.
동적 효과 신호는 임의의 타입의 신호일 수 있지만, 반드시 복합되어야 하는 것은 아니다. 예를 들어, 동적 효과 신호는 시간에 따라 변경되거나 또는 입력 파라미터를 효과 신호의 변경 성질 상에 매핑하는 매핑 스키마에 따라 실시간으로 반응하고 있는 위상, 주파수, 또는 진폭과 같은 어떤 성질을 갖는 단순한 사인파일 수 있다. 입력 파라미터는 장치에 의해 제공될 수 있는 임의의 타입의 입력일 수 있고, 전형적으로 장치 센서 신호와 같은 임의의 타입의 신호일 수 있다. 장치 센서 신호는 임의의 수단에 의해 생성될 수 있고, 전형적으로 사용자 제스처를 장치에 의해 캡처함으로써 생성될 수 있다. 동적 효과는 제스처 인터페이스에 매우 유용할 수 있지만, 제스처 또는 센서의 사용은 반드시 동적 신호를 생성하기 위해 요구되는 것은 아니다.
제스처를 직접 포함하지 않는 일반적인 한 시나리오는 애니메이션 위젯(animated widget)의 동적 햅틱 거동을 정의하는 것이다. 예를 들어, 사용자가 리스트를 스크롤할 때, 그것은 일반적으로 가장 직관적으로 느낄 제스처의 햅틱화가 아니라, 제스처에 반응하는 위젯의 움직임이다. 스크롤 리스트 예에서, 리스트를 부드럽게 슬라이딩하는 것은 스크롤링의 속도에 따라 변경되는 동적 햅틱 피드백을 생성할 수 있지만, 스크롤 바를 플링잉(flinging)하는 것은 제스처가 종료된 후에도 동적 햅틱을 생성할 수 있다. 이는 위젯이 일부 물리적 성질들을 갖고, 사용자에게 위젯의 속도 또는 위젯이 움직이고 있는지 여부와 같은 위젯의 상태에 관한 정보를 제공하는 착각을 일으킨다.
제스처는 의미 또는 사용자 의도를 전달하는 신체의 임의의 움직임이다. 더 복잡한 제스처를 형성하기 위해 간단한 제스처가 결합될 수 있다는 점이 인식될 것이다. 예를 들어, 손가락이 터치 감응면과 접촉하는 것은 "핑거 온(finger on)" 제스처로 지칭될 수 있는 한편, 터치 감응면으로부터 손가락을 떼는 것은 별도의 "핑거 오프(finger off)" 제스처로 지칭될 수 있다. "핑거 온"과 "핑거 오프" 제스처 사이의 시간이 비교적 짧으면, 결합된 제스처는 "태핑(tapping)"으로 지칭될 수 있고; "핑거 온"과 "핑거 오프" 제스처 사이의 시간이 비교적 길면, 결합된 제스처는 "긴 태핑"으로 지칭될 수 있고; "핑거 온"과 "핑거 오프" 제스처의 2차원 (x,y) 위치들 사이의 거리가 비교적 크면, 결합된 제스처는 "스와이핑(swiping)"으로 지칭될 수 있으며; "핑거 온"과 "핑거 오프" 제스처의 2차원 (x,y) 위치들 사이의 거리가 비교적 작으면, 결합된 제스처는 "스미어링(smearing)", "스머징(smudging)" 또는 "플리킹(flicking)"으로 지칭될 수 있다. 간단하거나 복잡한 임의의 수의 2차원 또는 3차원 제스처는 임의의 방식으로 결합되어 장치에 다수의 손가락 접촉들, 손바닥 또는 주먹 접촉, 또는 근접을 포함하지만, 이들에 제한되지 않는 임의의 수의 다른 제스처를 형성할 수 있다. 제스처는 가속도계, 자이로스코프, 또는 다른 움직임 센서를 갖는 장치에 의해 인식되는 임의의 형태의 손 동작이고, 전자 신호로 변환될 수 있다. 그러한 전자 신호는 가상 주사위를 흔드는 것과 같은 동적 효과를 활성화할 수 있으며, 여기서 센서는 동적 효과를 생성하는 사용자 의도를 캡처한다.
일 실시예는 하나 이상의 동적 햅틱 효과를 디스크, 메모리, 또는 임의의 컴퓨터 판독가능 저장 매체 상에 인코딩할 수 있는 시스템이다. 동적 햅틱 효과의 한 타입은 제1 보간자 값과 제2 보간자 값 사이의 값인 동적 값에 기초하여 제1 햅틱 효과 및 제2 햅틱 효과를 보간함으로써 생성될 수 있는 햅틱 효과이다. 제1 보간자 값 또는 제2 보간자 값과 동일한 동적 값은 "제1 보간자 값과 제2 보간자 값 사이에" 있는 것으로 간주된다. 더 구체적으로, 동적 햅틱 효과의 각각의 파라미터에 대한 값은 보간 함수를 사용하여, 제1 햅틱 효과의 파라미터 값을 제2 햅틱 효과의 파라미터 값과 보간함으로써 계산된다. 동적 햅틱 효과의 각각의 파라미터 값의 보간은 동적 값이 제1 보간자 값과 제2 보간자 값 사이에 있는 것에 기초할 수 있다. 동적 햅틱 효과는 2012년 7월 11일자로 출원되고, 발명의 명칭이 "GENERATING HAPTIC EFFECTS FOR DYNAMIC EVENTS"인 미국 특허 출원 일련번호 제13/546,351호에 더 설명되어 있다(그 내용은 본 명세서에 원용됨). 동적 햅틱 효과는 햅틱 효과 신호를 사용하여 인코딩될 수 있으며, 햅틱 효과 신호는 동적 햅틱 효과의 표현이다. 햅틱 효과 신호는 디스크, 메모리, 또는 임의의 컴퓨터 판독가능 저장 매체 상에서 지속될 수 있다.
실시예에 따르면, 시스템은 각각의 동적 햅틱 효과를 하나 이상의 키 프레임들로서 정의할 수 있으며, 각각의 키 프레임은 햅틱 효과, 및 대응하는 값을 포함할 수 있다. 따라서, 시스템은 하나 이상의 동적 햅틱 효과 정의들을 생성할 수 있다. 시스템은 하나 이상의 동적 햅틱 효과 정의들을 햅틱 효과 파일 내에 저장할 수 있다. 시스템은 또한 햅틱 효과 파일로부터 하나 이상의 동적 햅틱 효과 정의들을 회수할 수 있다. 시스템은 또한 동적 값을 수신할 수 있고, 수신된 동적 값에 기초하여, 하나 이상의 동적 햅틱 효과 정의들을 해석하여, 하나 이상의 동적 햅틱 효과들을 생성한다.
다른 실시예에 따르면, 시스템은 하나 이상의 키 프레임들을 수신할 수 있으며, 각각의 키 프레임은 햅틱 효과 및 값을 포함할 수 있다. 시스템은 하나 이상의 키 프레임들을 사용하여 햅틱 효과 신호를 생성할 수 있다. 시스템은 또한 햅틱 효과 신호를 햅틱 효과 파일 내에 저장할 수 있다. 시스템은 또한 햅틱 효과 파일로부터 햅틱 효과 신호를 회수할 수 있다. 시스템은 또한 햅틱 효과 신호에 따라 구동 신호를 햅틱 출력 장치에 인가할 수 있다. 시스템은 또한 햅틱 출력 장치를 사용하여 구동 신호를 생성할 수 있다. 본 실시예에서, 하나 이상의 키 프레임들은 햅틱 효과 신호에 의해 생성되는 동적 햅틱 효과의 하나 이상의 입력 파라미터들을 포함할 수 있다.
도 1은 본 발명의 일 실시예에 따른 시스템(10)의 블록도를 나타낸다. 일 실시예에서, 시스템(10)은 장치의 일부이고, 시스템(10)은 장치에 햅틱 인코딩 기능을 제공한다. 단일 시스템으로 도시될지라도, 시스템(10)의 기능은 분산 시스템으로 구현될 수 있다. 시스템(10)은 정보를 전달하는 버스(12) 또는 다른 통신 메커니즘, 및 버스(12)에 결합되어 정보를 처리하는 프로세서(22)를 포함한다. 프로세서(22)는 임의의 타입의 일반 또는 특수 목적 프로세서일 수 있다. 시스템(10)은 프로세서(22)에 의해 실행되는 명령어 및 정보를 저장하는 메모리(14)를 더 포함한다. 메모리(14)는 RAM(random access memory), ROM(read only memory), 자기 또는 광 디스크와 같은 정적 저장 장치, 또는 임의의 다른 타입의 컴퓨터 판독가능 매체의 임의의 조합으로 구성될 수 있다.
컴퓨터 판독가능 매체는 프로세서(22)에 의해 액세스될 수 있는 임의의 이용가능 매체일 수 있고 휘발성 및 비휘발성 매체 둘 다, 착탈식 및 비착탈식 매체, 통신 매체, 및 저장 매체를 포함할 수 있다. 통신 매체는 반송파 또는 다른 전송 메커니즘과 같은 피변조 데이터 신호 내에 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터를 포함시킬 수 있고, 본 기술분야에 공지된 임의의 다른 형태의 정보 전달 매체를 포함할 수 있다. 저장 매체는 RAM, 플래시 메모리, ROM, EPROM(erasable programmable read-only memory), EEPROM(electrically erasable programmable read-only memory), 레지스터, 하드 디스크, 착탈식 디스크, CD-ROM(compact disk read-only memory), 또는 본 기술분야에 공지된 임의의 다른 형태의 저장 매체를 포함할 수 있다.
일 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈들을 저장한다. 모듈들은 시스템(10)뿐만 아니라, 일 실시예에서 나머지 이동 장치에 운영 체제 기능을 제공하는 운영 체제(15)를 포함한다. 모듈들은 아래에 더 상세히 개시되는 바와 같이, 동적 햅틱 효과를 인코딩하는 햅틱 인코딩 모듈(16)을 더 포함한다. 소정의 실시예들에서, 햅틱 인코딩 모듈(16)은 복수의 모듈들을 포함할 수 있으며, 각각의 개별 모듈은 동적 햅틱 효과를 인코딩하는 특정 개별 기능을 제공한다. 시스템(10)은 일반적으로 이머전 코포레이션(Immersion Corporation)에 의한 인테그레이터TM 응용 프로그램과 같은 부가 기능을 포함하기 위해 하나 이상의 부가 응용 프로그램 모듈들(18)을 포함할 것이다.
시스템(10)은 원격 소스로부터 데이터를 송신 및/또는 수신하는 실시예들에서, 적외선, 라디오, Wi-Fi, 또는 셀룰러 네트워크 통신과 같은 이동 무선 네트워크 통신을 제공하기 위해 네트워크 인터페이스 카드와 같은 통신 장치(20)를 더 포함한다. 다른 실시예들에서, 통신 장치(20)는 이더넷 연결 또는 모뎀과 같은 유선 네트워크 연결을 제공한다.
프로세서(22)는 또한 그래픽 표현 또는 사용자 인터페이스를 사용자에게 디스플레이하기 위해 LCD(Liquid Crystal Display)와 같은 디스플레이(24)에 버스(12)를 통해 결합된다. 디스플레이(24)는 프로세서(22)로부터 신호들을 송신 및 수신하도록 구성되는 터치스크린과 같은 터치 감응 입력 장치일 수 있고, 멀티터치 터치스크린일 수 있다. 프로세서(22)는 또한 사용자로 하여금 시스템(10)과 상호작용하게 하는 키보드 또는 커서 컨트롤(28), 예를 들어 마우스 또는 스타일러스에 결합될 수 있다.
시스템(10)은 일 실시예에서, 액추에이터(26)를 더 포함한다. 프로세서(22)는 생성된 햅틱 효과와 연관되는 햅틱 신호를 액추에이터(26)에 송신할 수 있으며, 액추에이터는 차례로 진동 촉각 햅틱 효과와 같은 햅틱 효과를 출력한다. 액추에이터(26)는 액추에이터 구동 회로를 포함한다. 액추에이터(26)는 예를 들어 전기 모터, 전자기 액추에이터, 보이스 코일, 형상 기억 합금, 전기 활성 폴리머, 솔레노이드, ERM(eccentric rotating mass motor), LRA(linear resonant actuator), 압전 액추에이터, 고대역폭 액추에이터, EAP(electroactive polymer) 액추에이터, 정전 마찰 디스플레이, 또는 초음파 진동 발생기일 수 있다. 대체 실시예들에서, 시스템(10)은 액추에이터(26)에 더하여 하나 이상의 부가 액추에이터들(도 1에 도시되지 않음)을 포함할 수 있다. 다른 실시예들에서, 시스템(10)으로부터의 분리 장치는 햅틱 효과를 생성하는 액추에이터를 포함하고, 시스템(10)은 생성된 햅틱 효과 신호들을 통신 장치(20)를 통해 그 장치에 송신한다. 액추에이터(26)는 햅틱 출력 장치의 일례이고, 햅틱 출력 장치는 구동 신호에 대응하여 진동 촉각 햅틱 효과와 같은 햅틱 효과를 출력하도록 구성되는 장치이다.
시스템(10)은 또한 데이터베이스(30)에 동작적으로 결합될 수 있으며, 데이터베이스(30)는 모듈들(16 및 18)에 의해 사용되는 데이터를 저장하도록 구성될 수 있다. 데이터베이스(30)는 동작 데이터베이스, 분석 데이터베이스, 데이터 웨어하우스, 분산 데이터베이스, 최종 사용자 데이터베이스, 외부 데이터베이스, 내비게이션 데이터베이스, 인-메모리 데이터베이스, 문서 지향형 데이터베이스, 실시간 데이터베이스, 관계형 데이터베이스, 객체 지향형 데이터베이스, 또는 본 기술분야에 공지된 임의의 다른 데이터베이스일 수 있다.
도 2는 본 발명의 일 실시예에 따른 예시적 동적 햅틱 효과 정의(200)를 나타낸다. 일 실시예에 따르면, 동적 햅틱 효과는 하나 이상의 키 프레임들을 포함하도록 정의될 수 있다. 키 프레임은 동적 햅틱 효과를 정의하기 위해 사용될 수 있는 베이시스 햅틱 효과의 표현이다. 또한 일 실시예에 따르면, 햅틱 효과 신호는 하나 이상의 키 프레임들을 사용하여 생성될 수 있으며, 햅틱 효과 신호는 하나 이상의 키 프레임들을 저장할 수 있는 신호이다. 하나 이상의 키 프레임들을 사용하여 햅틱 효과 신호를 생성함으로써, 하나 이상의 키 프레임들이 생성되고, 그 후에 햅틱 효과 신호 내에 저장된다. 햅틱 효과 신호는 햅틱 효과 파일 내에 저장되고, 햅틱 효과 파일로부터 회수될 수 있다.
키 프레임은 베이시스 햅틱 효과 정의를 포함할 수 있다. 베이시스 햅틱 효과는 햅틱 효과의 특성들(더 구체적으로, 햅틱 효과에 의해 생성되는 신체 감각 피드백 및/또는 촉각 피드백의 특성들)을 정의하는 하나 이상의 파라미터들을 포함할 수 있는 햅틱 효과이며, 햅틱 효과는 예를 들어 진동 햅틱 효과일 수 있다. 하나 이상의 파라미터들의 예들은 크기 파라미터, 주파수 파라미터, 및 지속 시간 파라미터를 포함할 수 있다. 베이시스 햅틱 효과의 예들은 "맥스위프(MagSweep) 햅틱 효과", 및 "주기적 햅틱 효과"를 포함할 수 있다. 맥스위프 햅틱 효과는 신체 감각 피드백 및/또는 촉각 피드백(예를 들어, 진동)을 생성하는 햅틱 효과이다. 주기적 햅틱 효과는 반복 신체 감각 피드백 및/또는 촉각 피드백(예를 들어, 진동 패턴)을 생성하는 햅틱 효과이다. 반복 패턴의 일례는 사인파, 직사각형, 삼각형, 소투스-업(sawtooth-up) 및 소투스-다운과 같은 소정의 형상들의 반복 펄스들을 포함한다.
키 프레임은 보간자 값을 포함할 수 있다. 보간자 값은 현재 보간이 발생하고 있는 곳을 지정하는 값이다. 일 실시예에서, 보간자 값은 최소값에서 최대값까지의 정수값일 수 있다. 일례로서, 보간자 값은 0에서 10,000까지일 수 있다. 그러나, 이것은 단지 일례이고, 보간자 값은 임의의 최소값에서 임의의 최대값까지의 임의의 값일 수 있다. 예를 들어, 다른 실시예들에서, 보간자 값은 고정점 또는 부동 소수점 수치 값일 수 있다. 보간자 값은 하나 이상의 비트로 저장될 수 있다.
키 프레임은 선택적으로 반복 간격 값을 포함할 수도 있다. 반복 간격 값은 베이시스 햅틱 효과가 연속적으로 재생될 때 베이시스 햅틱 효과의 2개의 연속적 인스턴스들(instances) 사이에 시간 기간을 표시하는 값이다. 일 실시예에서, 반복 간격은 베이시스 햅틱 효과의 2개의 연속적 인스턴스들 사이의 몇 밀리초를 나타낼 수 있다.
예시된 실시예에서, 동적 햅틱 효과 정의(200)는 4개의 키 프레임들, 즉 키 프레임들(210, 220, 230, 및 240)을 포함한다. 그러나, 이것은 단지 예시적 실시예이고, 대체 실시예들에서, 동적 햅틱 효과 정의는 임의의 수의 키 프레임들을 포함할 수 있다. 키 프레임(210)은 "Periodic1"의 베이시스 햅틱 효과 참조, "0"의 보간자 값, 및 "10 ms"의 반복 간격 값을 포함한다. 베이시스 햅틱 효과 참조 "Periodic1"은 베이시스 햅틱 효과(260)를 지칭하며, 베이시스 햅틱 효과(260)는 또한 동적 햅틱 효과 정의(200) 내에 포함된다. 따라서, 키 프레임(210)은 베이시스 햅틱 효과(260)를 "0"의 보간자 값에 대한 베이시스 햅틱 효과로서 정의한다. 키 프레임(210)은 베이시스 햅틱 효과(260)가 연속적으로 재생될 때, 베이시스 햅틱 효과(260)의 각각의 연속적 인스턴스 사이에 10 ms의 시간 기간이 있는 것을 또한 표시한다. 마찬가지로, 키 프레임(220)은 "Periodic3"의 베이시스 햅틱 효과 참조, "10"의 보간자 값, 및 "15 ms"의 반복 간격 값을 포함한다. 베이시스 햅틱 효과 참조 "Periodic3"는 베이시스 햅틱 효과(270)를 지칭하며, 베이시스 햅틱 효과(270)는 또한 동적 햅틱 효과 정의(200) 내에 포함된다. 따라서, 키 프레임(220)은 베이시스 햅틱 효과(270)를 "10"의 보간자 값에 대한 베이시스 햅틱 효과로서 정의한다. 키 프레임(220)은 베이시스 햅틱 효과(270)가 연속적으로 재생될 때, 베이시스 햅틱 효과(270)의 각각의 연속적 인스턴스 사이에 15 ms의 시간 기간이 있는 것을 또한 표시한다.
마찬가지로, 키 프레임(230)은 "Periodic1"의 베이시스 햅틱 효과 참조, "20"의 보간자 값, 및 "5 ms"의 반복 간격 값을 포함한다. 전술된 바와 같이, 베이시스 햅틱 효과 참조 "Periodic1"은 베이시스 햅틱 효과(260)를 지칭하며, 베이시스 햅틱 효과(260)는 또한 동적 햅틱 효과 정의(200) 내에 포함된다. 따라서, 키 프레임(230)은 베이시스 햅틱 효과(260)를 "20"의 보간자 값에 대한 베이시스 햅틱 효과로서 정의한다. 이것은 베이시스 햅틱 효과가 하나보다 많은 보간자 값에 대한 베이시스 햅틱 효과로서 정의될 수 있는 것을 나타낸다. 키 프레임(230)은 베이시스 햅틱 효과(260)가 연속적으로 재생될 때, 베이시스 햅틱 효과(260)의 각각의 연속적 인스턴스 사이에 5 ms의 시간 기간이 있는 것을 또한 표시한다. 마찬가지로, 키 프레임(240)은 "Periodic2"의 베이시스 햅틱 효과 참조, "30"의 보간자 값, 및 "20 ms"의 반복 간격 값을 포함한다. 베이시스 햅틱 효과 참조 "Periodic2"는 베이시스 햅틱 효과(280)를 지칭하며, 베이시스 햅틱 효과(280)는 또한 동적 햅틱 효과 정의(200) 내에 포함된다. 따라서, 키 프레임(240)은 베이시스 햅틱 효과(280)를 "30"의 보간자 값에 대한 베이시스 햅틱 효과로서 정의한다. 키 프레임(240)은 베이시스 햅틱 효과(280)가 연속적으로 재생될 때, 베이시스 햅틱 효과(280)의 각각의 연속적 인스턴스 사이에 20 ms의 시간 기간이 있는 것을 또한 표시한다.
일 실시예에 따르면, 동적 햅틱 효과는 동적 햅틱 효과의 종료의 표시를 또한 포함하기 위해 정의될 수 있다. 동적 햅틱 효과의 종료의 표시는 동적 햅틱 효과가 임의의 부가 키 프레임들을 포함하지 않는 것을 표시한다. 더 상세히 후술되는 바와 같이, 동적 햅틱 효과 정의를 해석하는 장치는 동적 햅틱 효과 정의의 내용을 순차적으로 해석하도록 구성될 수 있다. 따라서, 이런 표시는 장치에 동적 햅틱 효과 정의의 종료를 표시할 수 있다. 일 실시예에서, 동적 햅틱 효과의 종료의 표시는 부가 키 프레임으로 간주될 수 있다. 예시된 실시예에서, 동적 햅틱 효과 정의(200)는 동적 햅틱 효과 정의(200)의 종료를 표시하는 동적 햅틱 효과 정의(250)의 종료를 포함한다.
도 3은 본 발명의 일 실시예에 따른 예시적 키 프레임 정의(300)를 나타낸다. 전술된 바와 같이, 동적 햅틱 효과 정의는 하나 이상의 키 프레임들을 포함한다. 실시예에 따르면, 키 프레임 정의는 하나 이상의 성질들을 포함할 수 있다. 하나 이상의 성질들의 각각의 성질은 값을 포함할 수 있다.
키 프레임 정의는 타입 성질을 포함할 수 있다. 일 실시예에서, 타입 성질은 키 프레임 정의의 제1 성질이다. 타입 성질은 키 프레임이 동적 햅틱 효과 정의에 대한 베이시스 햅틱 효과를 포함하는 키 프레임인지 또는 동적 햅틱 효과 정의의 종료를 표시하는 키 프레임인지를 표시할 수 있다. 예시된 실시예에서, 키 프레임 정의(300)는 키 프레임 정의(300)에 의해 정의되는 키 프레임의 타입을 표시하는 타입 성질(310)을 포함한다.
키 프레임 정의는 베이시스 햅틱 효과 성질을 포함할 수도 있다. 베이시스 햅틱 효과 성질은 키 프레임의 베이시스 햅틱 효과에 대한 참조를 저장할 수 있다. 예시된 실시예에서, 키 프레임 정의(300)는 키 프레임 정의(300)에 의해 정의되는 키 프레임의 베이시스 햅틱 효과에 대한 참조를 포함하는 베이시스 햅틱 효과 성질(320)(도 3에 "효과 명칭"으로 식별됨)을 포함한다.
키 프레임 정의는 보간자 성질을 포함할 수도 있다. 보간자 성질은 보간자 값을 저장할 수 있으며, 보간자 값은 현재 보간이 발생하고 있는 곳을 지정한다. 일 실시예에서, 보간자 값은 최소값에서 최대값까지의 정수값일 수 있다. 일례로서, 보간자 값은 0에서 10,000까지일 수 있다. 보간자 값은 하나 이상의 비트로 저장될 수 있다. 예시된 실시예에서, 키 프레임 정의(300)는 키 프레임 정의(300)에 의해 정의되는 키 프레임에 대한 보간자 값을 포함하는 보간자 성질(330)을 포함한다.
키 프레임 정의는 선택적으로 반복 간격 성질(도 3에 도시되지 않음)을 포함할 수도 있다. 반복 간격 성질은 베이시스 햅틱 효과가 연속적으로 재생될 때 키 프레임의 베이시스 햅틱 효과의 2개의 연속적 인스턴스들 사이에 시간 기간을 표시하는 반복 간격 값을 저장할 수 있다. 일 실시예에서, 반복 간격은 키 프레임의 베이시스 햅틱 효과의 2개의 연속적 인스턴스들 사이의 몇 밀리초를 나타낼 수 있다.
일 실시예에서, 햅틱 효과 파일은 하나 이상의 동적 햅틱 효과를 저장하도록 구성되는 컴퓨터 파일이며, 햅틱 효과 파일은 디스크, 메모리, 또는 임의의 컴퓨터 판독가능 저장 매체 상에서 지속될 수 있다. 실시예에 따르면, 햅틱 효과 파일은 베이시스 햅틱 효과 저장 블록 및 프레임 리스트 블록을 사용하여 하나 이상의 동적 햅틱 효과 정의들을 저장할 수 있다. 동적 햅틱 효과가 참조할 수 있는 하나 이상의 베이시스 햅틱 효과를 저장하기 위해 베이시스 햅틱 효과 저장 블록이 사용될 수 있다. 동적 햅틱 효과 정의에 대응하는 하나 이상의 키 프레임 정의들을 저장하기 위해 프레임 리스트 블록이 사용될 수 있다. 베이시스 햅틱 효과 저장 블록 및 프레임 리스트 블록이 이제 더 상세히 설명된다.
도 4는 본 발명의 일 실시예에 따른 예시적 베이시스 햅틱 효과 저장 블록(400)을 나타낸다. 전술된 바와 같이, 동적 햅틱 효과 정의는 하나 이상의 베이시스 햅틱 효과를 포함할 수 있으며, 적어도 하나의 저장된 베이시스 햅틱 효과는 동적 햅틱 정의의 적어도 하나의 키 프레임에 의해 참조된다. 일 실시예에서, 하나 이상의 베이시스 햅틱 효과는 베이시스 햅틱 효과 저장 블록(400)과 같은 베이시스 햅틱 효과 저장 블록 내에 저장될 수 있으며, 베이시스 햅틱 효과 저장 블록은 동적 햅틱 효과 정의 내에 저장된다.
실시예에 따르면, 하나 이상의 베이시스 햅틱 효과는 메시지 스트림으로서 베이시스 햅틱 효과 저장 블록(400) 내에 저장될 수 있다. 예시적 메시징 포맷은 "코드네임 z2" 프로토콜 메시징 포맷이다. 예시된 실시예에서, 베이시스 햅틱 효과는 선택적으로 SetPeriodicModifier 메시지가 선행되는 SetPeriodic 메시지에 의해 정의된다. 따라서, 베이시스 햅틱 효과가 연관 엔벨로프(associated envelope)를 가질 때, SetPeriodicModifier 메시지는 블록에서 SetPeriodic 메시지 전에 나타날 수 있다. 그렇지 않으면, SetPeriodic 메시지만이 블록에 나타날 수 있다. 따라서, 실시예에 따르면, 베이시스 햅틱 효과는 베이시스 햅틱 효과 저장 블록(예를 들어, 도 4의 베이시스 햅틱 효과 저장 블록(400))에 저장된 바와 같이, (a) 단일 SetPeriodic 메시지(디폴트 엔벨로프를 가정함)의 8 바이트의 메모리; 또는 (b) 제1 SetPeriodicModifier 메시지에 이어지는 후속 SetPeriodic 메시지의 16 바이트 메모리를 차지할 수 있다.
실시예에 따르면, 베이시스 햅틱 효과 저장 블록(예를 들어, 도 4의 베이시스 햅틱 효과 저장 블록(400))은 하나 이상의 베이시스 햅틱 효과 정의들을 포함할 수 있으며, 각각의 베이시스 햅틱 효과 정의는 베이시스 햅틱 효과에 대응한다. 하나 이상의 베이시스 햅틱 효과 정의들은 베이시스 햅틱 효과 저장 블록 내에서 순차적일 수 있고, 인덱스와 각각 연관될 수 있다.
예시된 실시예에서, 베이시스 햅틱 효과 저장 블록(400)은 5개의 베이시스 햅틱 효과: Effect0, Effect1, Effect2, Effect3, 및 Effect4를 포함한다. Effect0는 베이시스 햅틱 효과 저장 블록(400)에 배치되는 제1 베이시스 햅틱 효과이고, Effect1은 베이시스 햅틱 효과 저장 블록(400)에 배치되는 제2 베이시스 햅틱 효과이고, Effect2는 베이시스 햅틱 효과 저장 블록(400)에 배치되는 제3 베이시스 햅틱 효과이고, Effect3는 베이시스 햅틱 효과 저장 블록(400)에 배치되는 제4 베이시스 햅틱 효과이며, Effect4는 베이시스 햅틱 효과 저장 블록(400)에 배치되는 제5 베이시스 햅틱 효과이다. 5개의 베이시스 햅틱 효과(즉, Effect0, Effect1, Effect2, Effect3, 및 Effect4) 각각은 단일 SetPeriodic 메시지 또는 SetPeriodicModifier 메시지 및 SetPeriodic 메시지의 조합을 포함하는 베이시스 햅틱 정의를 포함한다.
도 5는 본 발명의 일 실시예에 따른 예시적 프레임 리스트 블록(500)을 나타낸다. 전술된 바와 같이, 동적 햅틱 효과 정의는 하나 이상의 키 프레임들을 포함할 수 있으며, 각각의 키 프레임은 베이시스 햅틱 효과를 참조할 수 있다. 일 실시예에서, 하나 이상의 키 프레임들은 프레임 리스트 블록(500)과 같은 프레임 리스트 블록 내에 저장될 수 있으며, 프레임 리스트 블록은 동적 햅틱 효과 정의 내에 저장된다.
실시예에 따르면, 프레임 리스트 블록(500)과 같은 프레임 리스트 블록은 제1 키 프레임 정의에 대한 타입 성질을 포함한다. 타입 성질에 따라, 프레임 리스트 블록은 베이시스 햅틱 효과 성질, 보간자 성질, 반복 간격 성질, 또는 그 조합과 같은 제1 키 프레임 정의와 연관되는 하나 이상의 성질들을 더 포함한다. 프레임 리스트 블록은 제2 키 프레임 정의에 대한 타입 성질을 더 포함하며, 타입 성질은 제1 키 프레임 정의의 종료를 표시한다. 타입 성질에 따라, 프레임 리스트 블록은 베이시스 햅틱 효과 성질, 보간자 성질, 반복 간격 성질, 또는 그 조합과 같은 제2 키 프레임 정의와 연관되는 하나 이상의 성질들을 더 포함한다. 이것은 프레임 리스트 블록의 각각의 키 프레임 정의마다 계속된다. 프레임 리스트 블록은 동적 햅틱 효과의 종료를 표시하는 타입 성질을 더 포함한다. 실시예에 따르면, 프레임 리스트 블록의 키 프레임 정의들은 순차적 순서로 되어 있다. 다시 말하면, 프레임 리스트 블록의 이벤트들은 그것들이 프레임 리스트 블록 내에 배치되는 순서대로 처리된다.
실시예에 따르면, 프레임 리스트 블록의 하나 이상의 성질들은 선택적으로 데이터 바이트가 후속되는 단일 헤더 바이트를 사용하여 인코딩될 수 있다. 프레임 리스트 블록의 하나 이상의 성질들의 예시적 인코딩 방식은 다음과 같다:
Figure pat00001
실시예에 따르면, 키 프레임 타입 성질 및 동적 햅틱 효과 타입 성질의 종료는 키 프레임 정의의 타입 성질에 대응하고, EffectNameAsOffSetU8 성질은 키 프레임 정의의 베이시스 햅틱 효과 성질에 대응하고, InterpolantU16 성질은 키 프레임 정의의 보간자 성질에 대응하며, RepeatGapU16 성질은 키 프레임 정의의 반복 간격 성질에 대응한다.
예시된 실시예에서, 프레임 리스트 블록(500)은 키 프레임 정의들(510, 520, 및 530)을 포함한다. 키 프레임 정의들(510 및 520)은 각각 베이시스 햅틱 효과 키 프레임에 대한 정의이다. 키 프레임 정의(530)는 프레임 리스트 블록 내에 저장되는 동적 햅틱 효과의 종료의 표시이다. 프레임 리스트 블록(500)의 좌측 열은 키 프레임 정의들(510, 520, 및 530) 각각에 대한 메모리에서 발견되는 바이트 스트림을 표시한다. 프레임 리스트 블록의 우측 열은 키 프레임 정의들(510, 520, 및 530) 각각에 대한 각각의 성질의 의미를 표시한다.
예시된 실시예에 따르면, 키 프레임 정의(510)는 키 프레임 정의(510)의 시작을 표시하는 키 프레임 타입 성질(도 5에 도시된 바와 같은 "KeyFrame Event")을 포함한다. 키 프레임 정의(510)는 키 프레임 정의(510)를 위한 베이시스 햅틱 효과에 대한 참조를 저장하는 베이시스 햅틱 효과 성질(도 5에 도시된 바와 같은 "EffectNameAsOffSetU8")을 더 포함하며, 베이시스 햅틱 효과 성질은 헤더 바이트 및 오프셋 바이트를 포함한다. 키 프레임 정의(510)는 현재 보간이 발생하고 있는 곳을 지정하는 보간자 값을 저장하는 보간자 성질(도 5에 도시된 바와 같은 "InterpolantU16")을 더 포함하며, 보간자 성질은 헤더 바이트, MSB(most significant bit), 및 LSB(least significant bit)를 포함한다. 키 프레임 정의(510)는 키 프레임의 베이시스 햅틱 효과의 2개의 연속적 인스턴스들 사이에 시간 기간을 표시하는 반복 간격 값을 저장하는 반복 간격 성질(도 5에 도시된 바와 같은 "RepeatGapU16")을 더 포함하며, 반복 간격 성질은 헤더 바이트, MSB, 및 LSB를 포함한다.
게다가, 키 프레임 정의(520)는 또한 키 프레임 정의(520)의 시작을 표시하는 키 프레임 타입 성질(도 5에 도시된 바와 같은 "KeyFrame Event")을 포함한다. 키 프레임 정의(520)는 키 프레임 정의(520)의 베이시스 햅틱 효과에 대한 참조를 저장하는 베이시스 햅틱 효과 성질(도 5에 도시된 바와 같은 "EffectNameAsOffSetU16")을 더 포함하며, 베이시스 햅틱 효과 성질은 헤더 바이트, 베이시스 햅틱 효과 정의 MSB, 및 베이시스 햅틱 효과 정의 LSB를 포함한다. 키 프레임 정의(520)는 현재 보간이 발생하고 있는 곳을 지정하는 보간자 값을 저장하는 보간자 성질(도 5에 도시된 바와 같은 "InterpolantU16")을 더 포함하며, 보간자 성질은 헤더 바이트, MSB, 및 LSB를 포함한다. 도 5에 도시된 바와 같이, 키 프레임 정의(510)와 대조적으로, 키 프레임 정의(520)는 반복 간격 성질을 포함하지 않는다. 최종적으로, 키 프레임 정의(530)는 동적 햅틱 효과 정의의 종료를 표시하는 동적 햅틱 효과 타입 성질(도 5에 도시된 바와 같은 "EndofDynamicHapticEffect")의 종료를 포함한다.
일 실시예에 따르면, 동적 햅틱 효과 정의(예를 들어, 도 2의 동적 햅틱 효과 정의(200))는 햅틱 효과 파일 내에 저장될 수 있다. 전술된 바와 같이, 햅틱 효과 파일은 하나 이상의 동적 햅틱 효과를 저장하도록 구성되는 컴퓨터 파일이다. 동적 햅틱 효과 정의는 햅틱 효과 파일 내에 저장될 수 있고, 햅틱 효과 파일은 디스크 또는 메모리와 같은 컴퓨터 판독가능 매체 내에서 지속될 수 있다. 동적 햅틱 효과 정의는 그 후에 햅틱 효과로부터 회수되어 해석될 수 있다. 동적 햅틱 효과 정의의 해석에 기초하여, 동적 햅틱 효과는 제1 보간자 값과 제2 보간자 값 사이의 값인 동적 값에 기초하여 제1 햅틱 효과 및 제2 햅틱 효과를 보간함으로써 생성될 수 있다. 더 구체적으로, 동적 햅틱 효과의 각각의 파라미터에 대한 값은 보간 함수를 사용하여, 제1 햅틱 효과의 파라미터 값을 제2 햅틱 효과의 파라미터 값과 보간함으로써 계산될 수 있다. 동적 햅틱 효과의 각각의 파라미터 값의 보간은 동적 값이 제1 보간자 값과 제2 보간자 값 사이에 있는 것에 기초할 수 있다. 예를 들어, 제1 보간자 값이 "0"이고 제2 보간자 값이 "100"인 경우, "50"의 동적 값은 "0"의 제1 보간자 값과 연관되는 제1 햅틱 효과가 "100"의 제2 보간자 값과 연관되는 제2 햅틱 효과와 보간되게 하여 동적 햅틱 효과를 생성할 수 있다. 제1 햅틱 효과의 각각의 파라미터 값은 보간 함수에 기초하여 제2 값의 파라미터 값과 보간될 수 있어서, 동적 햅틱 효과의 파라미터 값들은 제1 햅틱 효과의 파라미터 값들 및 제2 햅틱 효과의 파라미터 값들 둘 다에 기초한다. 동적 햅틱 효과를 생성하는 것에 관한 부가 세부 사항들은 2012년 7월 11일자로 출원되고, 발명의 명칭이 "GENERATING HAPTIC EFFECTS FOR DYNAMIC EVENTS"인 미국 특허 출원 일련번호 제13/546,351호에 더 설명되어 있다.
또한 일 실시예에 따르면, 동적 햅틱 효과 정의(예를 들어, 도 2의 동적 햅틱 효과 정의(200))는 햅틱 효과 신호를 생성하는데 사용될 수 있으며, 햅틱 효과 신호는 햅틱 효과 파일 내에 저장될 수 있다. 햅틱 효과 신호는 그 후에 햅틱 효과 파일로부터 회수될 수 있다. 게다가, 구동 신호는 햅틱 효과 신호에 따라 햅틱 출력 장치에 인가될 수 있다. 구동 신호는 또한 햅틱 출력 장치를 사용하여 생성될 수 있다.
햅틱 효과 파일은 많은 상이한 포맷들 중 하나를 가질 수 있다. 소정의 실시예들에서, 햅틱 효과 파일은 XML(extensible markup language) 포맷을 가질 수 있다. 소정의 다른 실시예들에서, 햅틱 효과 파일은 이진 포맷을 가질 수 있다.
XML 포맷을 갖는 햅틱 효과 파일의 일례는 IVS(Immersion Vibration Source) 햅틱 효과 파일이다. 동적 햅틱 효과 정의를 포함하는 예시적 IVS 햅틱 효과 파일은 아래에 제공된다:
<interpolated-effect name="interpolated-effect-name">
<key-frame interpolant="0" effect="basis-effect-0-name" repeat-gap="0" />
<key-frame interpolant="0.5" effect="basis-effect-1-name" repeat-gap="15" />
<key-frame interpolant="1" effect="basis-effect-2-name" />
</interpolated-effect>
상기 제공된 예시적 IVS 햅틱 효과 파일에서, 제1 태그, <interpolated-effect name>은 IVS 햅틱 효과 파일 내에 저장되고 있는 동적 햅틱 효과의 명칭을 식별한다. 예시적 IVS 햅틱 효과 파일 내의 다음 3개의 태그들은 일련의 키 프레임 태그들이며, 각각의 키 프레임 태그는 동적 햅틱 효과의 키 프레임을 나타낸다. 각각의 키 프레임 태그는 2개의 파라미터들, 즉 키 프레임 보간자 파라미터 및 효과 파라미터를 포함할 수 있다. 키 프레임 보간자 파라미터는 키 프레임에 대한 보간자 값을 나타낸다. 효과 파라미터는 키 프레임에 대한 베이시스 햅틱 효과의 명칭을 나타낸다. 게다가, 각각의 키 프레임 태그는 선택적으로 제3 파라미터, 반복 간격 파라미터를 포함할 수 있다. 반복 간격 파라미터는 키 프레임에 대한 반복 간격을 나타낸다. 키 프레임 태그가 반복 간격 파라미터를 포함하지 않으면, 키 프레임은 반복 간격을 포함하지 않으며, 이는 키 프레임의 베이시스 햅틱 효과가 반복되지 않는 것을 의미한다. 예시적 IVS 햅틱 효과 파일에서, 제1 키 프레임 태그는 "0"의 값을 갖는 키 프레임 보간자 파라미터, "basis-effect-0-name"의 값을 갖는 효과 파라미터, 및 "0"의 값을 갖는 반복 간격 파라미터를 포함한다. 제2 키 프레임 태그는 "0.5"의 값을 갖는 키 프레임 보간자 파라미터, "basis-effect-1-name"의 값을 갖는 효과 파라미터, 및 "15"의 값을 갖는 반복 간격 파라미터를 포함한다. 제3 키 프레임 태그는 "1"의 값을 갖는 키 프레임 보간자 파라미터, 및 "basis-effect-2-name"의 값을 갖는 효과 파라미터를 포함하고, 반복 간격 파라미터를 포함하지 않는다. 후속 태그, "</interpolated-effect>"는 IVS 햅틱 효과 파일 내에 저장되고 있는 동적 햅틱 효과의 종료를 식별한다.
일 실시예에 따르면, 장치는 상기 제공된 예시적 IVS 햅틱 효과 파일과 같은 IVS 햅틱 효과 파일을 판독하고, IVS 햅틱 효과 파일 내에 저장되는 동적 햅틱 효과 정의를 해석하며, IVS 햅틱 효과 파일 내에 저장되는 값들을 사용하여 동적 햅틱 효과를 생성할 수 있다. 예를 들어, 장치는 보간자 값을 런타임 시에 제공할 수 있고, 장치는 IVS 햅틱 효과 파일 내에 저장되는 동적 햅틱 효과 정의를 해석할 수 있으며, 어느 키 프레임들 사이에 보간자 값이 놓여 있는지를 판단할 수 있다. 그 다음, 장치는 2개의 키 프레임들의 베이시스 햅틱 효과 간을 보간하여 동적 햅틱 효과를 생성할 수 있다.
이진 포맷을 갖는 햅틱 효과 파일의 다른 예는 IVT(Immersion Vibration Target) 햅틱 효과 파일이다. 동적 햅틱 효과 정의를 포함하는 예시적 IVT 햅틱 효과 파일은 아래에 제공된다.
0xC1, // KeyFrame 0에 대한 KeyFrame 이벤트
0xE0, // EffectIndexU8 이벤트 성질
0, // 사용 베이시스 효과 0
0xE6, // InterpolantU8 이벤트 성질
0, // KeyFrame 0에 대한 보간자 값.
0xE2, // TimeOffsetMs16 이벤트 성질. 주목: 이것은 선택적임
50, // KeyFrame 0, LSB에 대한 반복 간격
0, // KeyFrame 0, MSB에 대한 반복 간격
0xC1, // KeyFrame 1에 대한 KeyFrame 이벤트
0xE0, // EffectIndexU8 이벤트 성질
1, // 사용 베이시스 효과 1
0xE6, // InterpolantU8 이벤트 성질
100, // KeyFrame 1에 대한 보간자 값.
0xE2, // TimeOffsetMs16 이벤트 성질. 주목: 이것은 선택적임
150, // KeyFrame 1, LSB에 대한 반복 간격
0, // KeyFrame 1, MSB에 대한 반복 간격
0xCF // LERP 효과에 대한 종료 이벤트
상기 제공된 예시적 IVT 햅틱 효과 파일은 2개의 키 프레임 정의들을 포함하며, 각각의 키 프레임 정의는 16진수 "0xC1"에 의해 식별된다. 일 실시예에 따르면, "0xCy"와 같은 16진 값은 "y"가 임의의 0이 아닌 16진 숫자인 경우, IVT 햅틱 효과 파일 내에 저장되고 있는 키 프레임의 시작을 식별할 수 있다. 게다가, 실시예에 따르면, 16진 값 "0xCy"가 IVT 햅틱 효과 파일 내의 첫번째 16진 값이면, 16진 값은 IVT 햅틱 효과 파일 내에 저장되고 있는 동적 햅틱 효과의 시작을 표시할 수도 있으며, 동적 햅틱 효과는 하나 이상의 키 프레임들을 포함한다. 상기 제공된 예시적 IVT 햅틱 효과 파일에서, "0xC1"의 제1 인스턴스는 저장된 동적 햅틱 효과의 시작을 표시하고, 또한 제1 키 프레임, "KeyFrame 1"의 시작을 저장된 동적 햅틱 효과 내에 표시한다. 또한 예시적 IVT 햅틱 효과 파일에서, "0xC1"의 제2 인스턴스는 제2 키 프레임, "KeyFrame 2"의 시작을 저장된 동적 햅틱 효과 내에 표시한다.
각각의 키 프레임마다, 예시적 IVT 햅틱 효과 파일은 키 프레임을 정의하는 데이터를 더 포함한다. 예를 들어, 일 실시예에 따르면, 예시적 IVT 햅틱 효과 파일은 키 프레임의 베이시스 햅틱 효과 성질을 식별하는 "0xE0" 또는 "0xE1"과 같은 16진 값, 및 베이시스 햅틱 효과 성질에 대한 값을 더 포함한다. 예시적 IVT 햅틱 효과 파일에서, 제1 키 프레임에 대해, "0xE0"의 인스턴스는 제1 키 프레임의 베이시스 햅틱 효과 성질을 식별하고, "0"의 값은 제1 키 프레임의 베이시스 햅틱 효과 성질에 대한 제1 베이시스 햅틱 효과를 식별한다. 마찬가지로, 제2 키 프레임에 대해, "0xE0"의 인스턴스는 제2 키 프레임에 대한 베이시스 햅틱 효과 성질을 식별하고, "1"의 값은 제2 키 프레임의 베이시스 햅틱 효과 성질에 대한 제2 베이시스 햅틱 효과를 식별한다.
키 프레임을 정의하는 데이터의 일부로서, 실시예에 따르면, 예시적 IVT 햅틱 효과 파일은 키 프레임에 대한 보간자 성질을 식별하는 "0xE6"와 같은 16진 값, 및 보간자 성질에 대한 값을 더 포함한다. 예시적 IVT 햅틱 효과 파일에서, 제1 키 프레임에 대해, "0xE6"의 인스턴스는 제1 키 프레임에 대한 보간자 성질을 식별하고, "0"의 값은 제1 키 프레임의 보간자 성질에 대한 보간자 값을 식별한다. 마찬가지로, 제2 키 프레임에 대해, "0xE6"의 인스턴스는 제2 키 프레임에 대한 보간자 성질을 식별하고, "100"의 값은 제2 키 프레임의 보간자 성질에 대한 보간자 값을 식별한다.
키 프레임을 정의하는 데이터의 일부로서, 실시예에 따르면, 예시적 IVT 햅틱 효과 파일은 키 프레임에 대한 반복 간격 성질을 식별하는 "0xE2"와 같은 16진 값, 및 반복 간격 성질에 대한 하나 이상의 값들을 선택적으로 더 포함한다. 예시적 IVT 햅틱 효과 파일에서, 제1 키 프레임에 대해, "0xE2"의 인스턴스는 제1 키 프레임에 대한 반복 간격 성질을 식별하고, "50"의 값은 제1 키 프레임의 반복 간격 성질에 대한 "LSB" 반복 간격 값을 식별하며, "0"의 값은 제1 키 프레임의 반복 간격 성질에 대한 "MSB" 반복 간격 값을 식별한다. 마찬가지로, 제2 키 프레임에 대해, "0xE2"의 인스턴스는 제2 키 프레임에 대한 반복 간격 성질을 식별하고, "150"의 값은 제2 키 프레임의 반복 간격 성질에 대한 LSB 반복 간격 값을 식별하며, "0"의 값은 제2 키 프레임의 반복 간격 성질에 대한 MSB 반복 간격 값을 식별한다.
예시적 IVT 햅틱 효과 파일은 IVT 햅틱 효과 파일 내에 저장되고 있는 동적 햅틱 효과의 종료를 식별하는 "0xCF"와 같은 16진 값을 더 포함한다. 예시적 IVT 햅틱 효과 파일에서, "0XCF"의 인스턴스는 저장된 동적 햅틱 효과의 종료를 식별한다.
일 실시예에 따르면, 장치는 상기 제공된 예시적 IVT 햅틱 효과 파일과 같은 IVT 햅틱 효과 파일을 판독하고, IVT 햅틱 효과 파일 내에 저장되는 동적 햅틱 효과 정의를 해석하며, IVT 햅틱 효과 파일 내에 저장되는 값들을 이용하여 동적 햅틱 효과를 생성할 수 있다. 예를 들어, 장치는 보간자 값을 런타임 시에 제공할 수 있고, 장치는 IVT 햅틱 효과 파일 내에 저장되는 동적 햅틱 효과 정의를 해석할 수 있으며, 어느 키 프레임들 사이에 보간자 값이 놓여 있는지를 판단할 수 있다. 그 다음, 장치는 2개의 키 프레임들의 베이시스 햅틱 효과 간을 보간하여 동적 햅틱 효과를 생성할 수 있다.
일 실시예에서, IVT 햅틱 효과 파일은 동적 햅틱 효과의 정의들에 더하여, 베이시스 햅틱 효과와 같은 다른 햅틱 효과의 정의들을 포함할 수 있다. 예를 들어, IVT 햅틱 효과 파일은 맥스위프 햅틱 효과 정의들, 주기적 햅틱 효과 정의들, 또는 "파형 햅틱 효과" 정의와 같은 다른 타입의 베이시스 햅틱 효과 정의들을 포함할 수 있다. "파형 햅틱 효과"는 더 정확하게 제어된 피드백을 유발시키는 특정 신호에 기초하여 피드백을 생성하는 햅틱 효과이다. 실시예에 따르면, 베이시스 햅틱 효과의 시작과 비교해서, 16진 값은 동적 햅틱 효과의 시작을 식별할 수 있다. 따라서, 장치가 IVT 햅틱 효과 파일을 판독할 때, 장치는 동적 햅틱 효과 정의를 베이시스 햅틱 효과 정의와 구별할 수 있다.
예시적 실시예에서, "0xF1", "0xF2", 또는 "0xFF"와 같은 16진 값은 "타임라인 햅틱 효과"의 시작을 식별할 수 있다. "타임라인 햅틱 효과"는 시간에 따라 스케쥴링되는 하나 이상의 베이시스 햅틱 효과를 포함할 수 있다. 게다가, "0x20", "0x30", "0x40", 및 "0x50"과 같은 16진 값은 예를 들어 맥스위프 햅틱 효과, 주기적 햅틱 효과, 또는 파형 햅틱 효과와 같은 베이시스 햅틱 효과의 시작을 식별할 수 있다. 그리고 또한, 전술된 바와 같이, "y"가 임의의 0이 아닌 16진 숫자인 "0xCy"와 같은 16진 값은, 동적 햅틱 효과의 시작을 식별할 수 있다. 따라서, 장치가 IVT 햅틱 효과 파일을 판독할 때, 장치는 IVT 햅틱 효과 파일 내에 저장되는 16진 값을 판독하고, 정의된 햅틱 효과가 동적 햅틱 효과, 또는 일부 다른 햅틱 효과인지를 판단할 수 있다. 정의된 햅틱 효과가 동적 햅틱 효과, 또는 일부 다른 햅틱 효과인지를 판단하는 예시적 의사코드(pseudocode)는 아래에 제공된다.
if (0xF0 == (*p & 0xF0)) {
// We have a Timeline effect
} else if (0xC0 == (*p & 0xC0)) {
// We have a Dynamic effect
} else if (0 == (*p & 0x0F)) {
// We have a Basis effect
}
그러나, 이 예시적 의사코드는 단지 상술한 기능을 구현할 수 있는 코드의 일례이고, 기능을 구현하는 코드는 다른 포맷들이며, 여전히 본 발명의 범위 내에 있을 수 있다. 게다가, 햅틱 효과 파일의 2개의 예시적 포맷들(즉, IVS 햅틱 효과 파일, 및 IVT 햅틱 효과 파일)이 설명되었을지라도, 햅틱 효과 파일은 상이한 포맷이며, 여전히 본 발명의 범위 내에 있을 수 있다.
도 6은 본 발명의 일 실시예에 따른 햅틱 인코딩 모듈(예를 들어, 도 1의 햅틱 인코딩 모듈(16))의 기능의 흐름도를 나타낸다. 일 실시예에서, 도 6의 기능 뿐만 아니라, 도 7의 기능은 메모리 또는 다른 컴퓨터 판독가능 또는 유형 매체에 저장되는 소프트웨어에 의해 각각 구현되고, 프로세서에 의해 실행된다. 다른 실시예들에서, 각각의 기능은 하드웨어에 의해(예를 들어, ASIC(application specific integrated circuit), PGA(programmable gate array), FPGA(field programmable gate array) 등의 사용을 통해), 또는 하드웨어 및 소프트웨어의 임의의 조합에 의해 수행될 수 있다. 더욱이, 대체 실시예들에서, 각각의 기능은 아날로그 구성요소들을 사용하여 하드웨어에 의해 수행될 수 있다.
흐름이 시작되어 단계 610으로 진행한다. 단계 610에서, 동적 햅틱 효과는 제1 키 프레임 및 제2 키 프레임을 포함하는 것으로 정의된다. 제1 키 프레임은 제1 보간자 값 및 대응하는 제1 햅틱 효과를 포함한다. 제2 키 프레임은 제2 보간자 값 및 대응하는 제2 햅틱 효과를 포함한다. 제1 보간자 값은 대응하는 제1 햅틱 효과에서 보간이 발생하는 곳을 지정하는 값일 수 있고, 제2 보간자 값은 대응하는 제2 햅틱 효과에서 보간이 발생하는 곳을 지정하는 값일 수 있다. 제1 키 프레임 및 제2 키 프레임은 반복 간격 값을 각각 포함할 수 있다. 제1 햅틱 효과 및 제2 햅틱 효과는 각각 진동 햅틱 효과일 수 있고, 각각 복수의 파라미터들을 포함할 수 있다. 복수의 파라미터들은 크기 파라미터, 주파수 파라미터, 및 지속 시간 파라미터를 포함할 수 있다. 동적 햅틱 효과의 종료의 표시를 포함하기 위해 동적 햅틱 효과가 추가로 정의될 수 있다. 햅틱 효과 저장 블록을 포함하기 위해 동적 햅틱 효과가 추가로 정의될 수 있으며, 제1 햅틱 효과 및 제2 햅틱 효과는 햅틱 효과 저장 블록 내에 저장될 수 있다. 동적 햅틱 효과는 부가 키 프레임들을 포함할 수 있다. 예시된 실시예에서, 동적 햅틱 효과는 2개의 키 프레임들을 포함하는 것으로 정의될 수 있으며, 각각의 키 프레임은 햅틱 효과를 포함한다. 그러나, 이것은 단지 예시적 실시예이고, 대체 실시예들에서, 동적 햅틱 효과는 3개 이상의 키 프레임들을 포함하는 것으로 정의될 수 있으며, 각각의 키 프레임은 햅틱 효과를 포함한다. 흐름은 단계 620으로 진행한다.
단계 620에서, 햅틱 효과 파일이 생성된다. 햅틱 효과 파일의 포맷은 이진 포맷일 수 있다. 대안적으로, 햅틱 효과 파일의 포맷은 XML 포맷일 수 있다. 흐름은 단계 630으로 진행한다.
단계 630에서, 동적 햅틱 효과는 햅틱 효과 파일 내에 저장된다. 동적 햅틱 효과는 하나 이상의 다른 햅틱 효과와 함께 햅틱 효과 파일 내에 저장될 수 있다. 다른 햅틱 효과 중 적어도 하나는 다른 동적 햅틱 효과일 수 있다. 흐름은 단계 640으로 진행한다.
단계 640에서, 동적 햅틱 효과는 햅틱 효과 파일로부터 회수된다. 장치는 햅틱 효과 파일을 판독하고 동적 햅틱 효과를 회수할 수 있다. 햅틱 효과 파일이 하나 이상의 다른 햅틱 효과를 포함하는 경우, 장치는 동적 햅틱 효과 내에 포함되는 값에 기초하여 동적 햅틱 효과를 식별할 수 있다. 흐름은 단계 650으로 진행한다.
단계 650에서, 동적 햅틱 효과가 해석된다. 장치는 동적 햅틱 효과 내에 포함되는 제1 키 프레임 및 제2 키 프레임을 순차적으로 판독함으로써 동적 햅틱 효과를 해석할 수 있다. 동적 햅틱 효과가 부가 키 프레임들을 포함하는 경우, 장치는 부가 키 프레임들을 순차적으로 판독함으로써 동적 햅틱 효과를 더 해석할 수 있다. 장치는 동적 값을 수신하고 수신된 동적 값에 기초하여 동적 햅틱 효과 내에 저장되는 2개의 베이시스 햅틱 효과를 선택함으로써 동적 햅틱 효과를 더 해석할 수 있다. 장치는 수신된 동적 값이, 동적 햅틱 효과 내에 저장되는 2개의 보간자 값들 내에 속한다는 사실에 기초하여 동적 햅틱 효과 내에 저장되는 2개의 베이시스 햅틱 효과를 더 선택할 수 있으며, 2개의 보간자 값들은 2개의 베이시스 햅틱 효과에 대응한다. 흐름은 단계 660으로 진행한다.
단계 660에서, 동적 햅틱 효과가 생성된다. 동적 햅틱 효과는 2개의 선택 베이시스 햅틱 효과에 기초하여 생성될 수 있다. 더 구체적으로, 동적 햅틱 효과는 수신된 동적 값에 기초하여 2개의 선택 베이시스 햅틱 효과를 보간함으로써 생성될 수 있다. 소정의 실시예들에서, 동적 햅틱 효과의 각각의 파라미터에 대한 값은 보간 함수를 사용하여, 제1 선택 베이시스 햅틱 효과의 파라미터의 값을 제2 선택 베이시스 햅틱 효과의 파라미터의 값과 보간함으로써 계산될 수 있다. 동적 햅틱 효과의 각각의 파라미터 값의 보간은 수신된 동적 값이, 제1 선택 베이시스 햅틱 효과에 대응하는 제1 보간자 값과 제2 선택 베이시스 햅틱 효과에 대응하는 제2 보간자 값 사이에 있는 것에 기초할 수 있다. 예시된 실시예에서, 동적 햅틱 효과는 2개의 베이시스 햅틱 효과를 보간함으로써 생성될 수 있다. 그러한 보간은 선형 보간일 수 있다. 그러나, 이것은 단지 예시적 실시예이고, 대체 실시예들에서, 동적 햅틱 효과는 3개 이상의 베이시스 햅틱 효과를 보간함으로써 생성될 수 있다. 그러한 보간은 스플라인(spline) 보간일 수 있고, 스플라인 보간은 보간 함수가 스플라인으로 칭해지는 특수 타입의 구간적 다항식인 보간의 형태이며, 보간 함수는 2개 이상의 키 프레임들을 사용하여 보간자 값을 동적 햅틱 효과에 매핑할 수 있는 함수이다. 동적 햅틱 효과는 액추에이터에 의해 더 생성될 수 있다. 그 다음, 흐름이 종료된다.
도 7은 본 발명의 다른 실시예에 따른 햅틱 인코딩 모듈의 기능의 흐름도를 나타낸다. 흐름이 시작되어 단계 710으로 진행한다. 단계 710에서, 제1 키 프레임이 수신되며, 제1 키 프레임은 제1 보간자 값 및 제1 햅틱 효과를 갖는다. 제1 보간자 값은 제1 햅틱 효과에서 보간이 발생하는 곳을 지정하는 값일 수 있다. 제1 키 프레임은 반복 간격 값을 포함할 수 있다. 제1 햅틱 효과는 진동 햅틱 효과일 수 있고, 복수의 파라미터들을 포함할 수 있다. 복수의 파라미터들은 크기 파라미터, 주파수 파라미터, 및 지속 시간 파라미터를 포함할 수 있다. 흐름은 단계 720으로 진행한다.
단계 720에서, 제2 키 프레임이 수신되며, 제2 키 프레임은 제2 보간자 값 및 제2 햅틱 효과를 갖는다. 제2 보간자 값은 제2 햅틱 효과에서 보간이 발생하는 곳을 지정하는 값일 수 있다. 제2 키 프레임은 반복 간격 값을 포함할 수 있다. 제2 햅틱 효과는 진동 햅틱 효과일 수 있고, 복수의 파라미터들을 포함할 수 있다. 복수의 파라미터들은 크기 파라미터, 주파수 파라미터, 및 지속 시간 파라미터를 포함할 수 있다. 흐름은 단계 730으로 진행한다.
단계 730에서, 햅틱 효과 신호는 제1 키 프레임 및 제2 키 프레임을 사용하여 생성된다. 햅틱 효과 신호는 햅틱 효과 신호의 종료의 표시를 더 포함할 수 있다. 햅틱 효과 신호는 햅틱 효과 저장 블록을 더 포함할 수 있으며, 제1 햅틱 효과 및 제2 햅틱 효과는 햅틱 효과 저장 블록 내에 저장될 수 있다. 햅틱 효과 신호는 부가 키 프레임들을 더 포함할 수 있다. 예시된 실시예에서, 햅틱 효과 신호는 2개의 키 프레임들을 이용하여 생성될 수 있으며, 각각의 키 프레임은 햅틱 효과를 포함한다. 그러나, 이것은 단지 예시적 실시예이고, 대체 실시예들에서, 햅틱 효과는 3개 이상의 키 프레임들을 이용하여 생성될 수 있으며, 각각의 키 프레임은 햅틱 효과를 포함한다. 흐름은 단계 740으로 진행한다.
단계 740에서, 햅틱 효과 신호는 햅틱 효과 파일 내에 저장된다. 햅틱 효과 파일의 포맷은 이진 포맷일 수 있다. 또는, 햅틱 효과 파일의 포맷은 XML 포맷일 수 있다. 햅틱 효과 신호는 하나 이상의 다른 햅틱 효과 신호들과 함께 햅틱 효과 파일 내에 저장될 수 있다. 다른 햅틱 효과 신호들 중 적어도 하나는 2개 이상의 키 프레임들을 포함할 수 있다. 흐름은 단계 750으로 진행한다.
단계 750에서, 햅틱 효과 신호는 햅틱 효과 파일로부터 회수된다. 장치는 햅틱 효과 파일을 판독하고 햅틱 효과 신호를 회수할 수 있다. 햅틱 효과 파일이 하나 이상의 다른 햅틱 효과 신호들을 포함하는 경우, 장치는 햅틱 효과 신호 내에 포함되는 값에 기초하여 햅틱 효과 신호를 식별할 수 있다. 흐름은 단계 760으로 진행한다.
단계 760에서, 구동 신호는 햅틱 효과 신호에 따라 햅틱 출력 장치에 인가된다. 이것은 햅틱 출력 장치가 햅틱 효과 신호와 일치하는 동적 햅틱 효과를 생성하게 할 수 있다. 흐름은 단계 770으로 진행한다.
단계 770에서, 구동 신호는 햅틱 출력 장치를 사용하여 생성된다. 그 다음, 흐름이 종료된다.
따라서, 일 실시예에서, 하나 이상의 동적 햅틱 효과를 디스크, 메모리, 또는 임의의 컴퓨터 판독가능 저장 매체 상에 저장할 수 있는 시스템이 제공될 수 있다. 시스템은 추가로 하나 이상의 동적 햅틱 효과를 회수하고 하나 이상의 동적 햅틱 효과를 출력할 수 있다. 동적 햅틱 효과는 복수의 햅틱 효과에 기초할 수 있다. 따라서, 시스템은 소수의 햅틱 효과에 관한 정보를 저장할 수 있으며, 게다가 시스템은 소수의 햅틱 효과에 기초하여 수백 또는 수천의 동적 햅틱 효과를 출력할 수 있다. 이것은 저장 공간을 절약하고, 동적 햅틱 효과를 저장 및 회수하기 위한 메커니즘을 더 효율적으로 해 준다. 게다가, 하나 이상의 동적 햅틱 효과를 저장하는 햅틱 효과 파일의 포맷은 유연할 수 있어서, 햅틱 효과 설계자는 소수의 파일 포맷들에 제한되지 않는다. 이것은 동적 햅틱 효과를 생성할 시에 효과 설계자에게 더 많은 유연성을 준다.
본 명세서에 걸쳐 설명되는 본 발명의 특징들, 구조들, 또는 특성들은 하나 이상의 실시예들에서 임의의 적절한 방식으로 결합될 수 있다. 예를 들어, 본 명세서에 걸쳐 "일 실시예", "일부 실시예들", "소정의 실시예", "소정의 실시예들", 또는 다른 유사한 언어의 사용은 실시예와 관련하여 설명되는 특별한 특징, 구조, 또는 특성이 본 발명의 적어도 일 실시예에 포함될 수 있다는 사실을 지칭한다. 따라서, 본 명세서에 걸쳐 구문들 "일 실시예", "일부 실시예들", "소정의 실시예", "소정의 실시예들", 또는 다른 유사한 언어의 기재들은 반드시 동일한 그룹의 실시예들을 모두 지칭하는 것은 아니고, 설명된 특징들, 구조들, 또는 특성들은 하나 이상의 실시예들에서 임의의 적절한 방식으로 조합될 수 있다.
당업자는 상기 논의된 바와 같은 본 발명이 상이한 순서의 단계들, 및/또는 개시된 것들과 상이한 구성들의 요소들을 이용하여 실시될 수 있다는 점을 쉽게 이해할 것이다. 그러므로, 본 발명이 이 바람직한 실시예들에 기초하여 설명되었을지라도, 소정의 수정들, 변형들, 및 대체 구성들이 본 발명의 사상 및 범위 내에 유지되면서 명확하게 된다는 것이 당업자들에게 명확할 것이다. 그러므로, 본 발명의 경계 및 한계를 결정하기 위해, 첨부된 청구범위가 참조되어야 한다.

Claims (15)

  1. 햅틱 효과 신호를 인코딩하는 방법으로서,
    제1 보간자 값 및 제1 햅틱 효과를 갖는 제1 키 프레임을 수신하는 단계;
    제2 보간자 값 및 제2 햅틱 효과를 갖는 제2 키 프레임을 수신하는 단계;
    상기 제1 키 프레임 및 상기 제2 키 프레임을 이용하여 상기 햅틱 효과 신호를 생성하는 단계; 및
    상기 햅틱 효과 신호를 햅틱 효과 파일 내에 저장하는 단계
    를 포함하는, 방법.
  2. 제1항에 있어서,
    상기 햅틱 효과 파일로부터 상기 햅틱 효과 신호를 회수하는 단계; 및
    상기 햅틱 효과 신호에 따라 구동 신호를 햅틱 출력 장치에 인가하는 단계를 더 포함하는, 방법.
  3. 제2항에 있어서, 상기 햅틱 출력 장치를 이용하여 상기 구동 신호를 발생시키는 단계를 더 포함하는, 방법.
  4. 제3항에 있어서, 상기 제1 햅틱 효과 및 상기 제2 햅틱 효과 각각은 진동 햅틱 효과이고 복수의 파라미터들을 각각 포함하는, 방법.
  5. 제4항에 있어서, 상기 복수의 파라미터들은 크기 파라미터, 주파수 파라미터, 및 지속 시간 파라미터를 포함하는, 방법.
  6. 제1항에 있어서, 상기 제1 키 프레임 및 상기 제2 키 프레임은 반복 간격 값을 각각 포함하는, 방법.
  7. 제1항에 있어서, 상기 햅틱 효과 신호는 상기 햅틱 효과 신호의 종료의 표시를 더 포함하는, 방법.
  8. 제1항에 있어서, 상기 햅틱 효과 신호는 햅틱 효과 저장 블록을 더 포함하고,
    상기 제1 햅틱 효과 및 상기 제2 햅틱 효과는 상기 햅틱 효과 저장 블록 내에 저장되는, 방법.
  9. 제1항에 있어서, 상기 햅틱 효과 파일의 포맷은 이진 포맷; 또는 확장가능한 마크업 언어 포맷 중 적어도 하나인, 방법.
  10. 햅틱 효과 신호를 인코딩하는 시스템으로서,
    햅틱 인코딩 모듈을 저장하도록 구성되는 메모리; 및
    상기 메모리 상에 저장되는 상기 햅틱 인코딩 모듈을 실행하도록 구성되는 프로세서를 포함하며;
    상기 햅틱 인코딩 모듈은 제1 보간자 값 및 제1 햅틱 효과를 갖는 제1 키 프레임을 수신하도록 구성되고;
    상기 햅틱 인코딩 모듈은 또한 제2 보간자 값 및 제2 햅틱 효과를 갖는 제2 키 프레임을 수신하도록 구성되고;
    상기 햅틱 인코딩 모듈은 또한 상기 제1 키 프레임 및 상기 제2 키 프레임을 이용하여 상기 햅틱 효과 신호를 생성하도록 구성되며;
    상기 햅틱 인코딩 모듈은 또한 상기 햅틱 효과 신호를 햅틱 효과 파일 내에 저장하도록 구성되는, 시스템.
  11. 제10항에 있어서,
    하나 이상의 동적 햅틱 효과를 출력하도록 구성되는 햅틱 출력 장치를 더 포함하며;
    상기 햅틱 인코딩 모듈은 상기 햅틱 효과 파일로부터 상기 햅틱 효과 신호를 회수하도록 구성되고;
    상기 햅틱 인코딩 모듈은 상기 햅틱 효과 신호에 따라 구동 신호를 상기 햅틱 출력 장치에 인가하도록 구성되는, 시스템.
  12. 제10항에 있어서, 상기 제1 키 프레임 및 상기 제2 키 프레임은 반복 간격 값을 각각 포함하는, 시스템.
  13. 제10항에 있어서, 상기 햅틱 효과 신호는 상기 햅틱 효과 신호의 종료의 표시를 더 포함하는, 시스템.
  14. 제10항에 있어서,
    상기 햅틱 효과 신호는 베이시스(basis) 햅틱 효과 저장 블록을 더 포함하고,
    상기 제1 햅틱 효과 및 상기 제2 햅틱 효과는 상기 베이시스 햅틱 효과 저장 블록 내에 저장되는, 시스템.
  15. 프로세서에 의해 실행될 때, 상기 프로세서가 제1항 내지 제9항 중 어느 한 항에 따른 방법을 구현하게 하는 명령어들을 저장한, 컴퓨터 판독가능 저장 매체.
KR1020130128528A 2012-11-02 2013-10-28 동적 햅틱 효과의 인코딩 KR102161541B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/667,003 US8947216B2 (en) 2012-11-02 2012-11-02 Encoding dynamic haptic effects
US13/667,003 2012-11-02

Publications (2)

Publication Number Publication Date
KR20140057160A true KR20140057160A (ko) 2014-05-12
KR102161541B1 KR102161541B1 (ko) 2020-10-05

Family

ID=49162024

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130128528A KR102161541B1 (ko) 2012-11-02 2013-10-28 동적 햅틱 효과의 인코딩

Country Status (5)

Country Link
US (4) US8947216B2 (ko)
EP (2) EP2728443A3 (ko)
JP (2) JP6359820B2 (ko)
KR (1) KR102161541B1 (ko)
CN (2) CN103809960B (ko)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7765333B2 (en) 2004-07-15 2010-07-27 Immersion Corporation System and method for ordering haptic effects
US9898084B2 (en) * 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
JP6351964B2 (ja) * 2013-12-11 2018-07-04 株式会社東海理化電機製作所 入力装置
EP3099030A1 (en) * 2015-05-26 2016-11-30 Thomson Licensing Method and device for encoding/decoding a packet comprising data representative of a haptic effect
WO2017024001A1 (en) * 2015-08-05 2017-02-09 Dolby Laboratories Licensing Corporation Low bit rate parametric encoding and transport of haptic-tactile signals
JP2018531442A (ja) * 2015-09-22 2018-10-25 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 圧力ベースのハプティクス
US9947187B2 (en) 2016-01-07 2018-04-17 International Business Machines Corporation Haptic notification system with rules for notification that can be altered to increase effectiveness
US10732714B2 (en) 2017-05-08 2020-08-04 Cirrus Logic, Inc. Integrated haptic system
US11259121B2 (en) 2017-07-21 2022-02-22 Cirrus Logic, Inc. Surface speaker
CN107566847B (zh) * 2017-09-18 2020-02-14 浙江大学 一种将触感数据编码为视频流进行保存和传输的方法
US10620704B2 (en) 2018-01-19 2020-04-14 Cirrus Logic, Inc. Haptic output systems
US10455339B2 (en) 2018-01-19 2019-10-22 Cirrus Logic, Inc. Always-on detection systems
US11139767B2 (en) 2018-03-22 2021-10-05 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10795443B2 (en) 2018-03-23 2020-10-06 Cirrus Logic, Inc. Methods and apparatus for driving a transducer
US10667051B2 (en) 2018-03-26 2020-05-26 Cirrus Logic, Inc. Methods and apparatus for limiting the excursion of a transducer
US10820100B2 (en) 2018-03-26 2020-10-27 Cirrus Logic, Inc. Methods and apparatus for limiting the excursion of a transducer
US10832537B2 (en) * 2018-04-04 2020-11-10 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US10684689B2 (en) 2018-04-20 2020-06-16 Immersion Corporation Cross-platform dynamic haptic effect design tool for augmented or virtual reality environments
US10572017B2 (en) * 2018-04-20 2020-02-25 Immersion Corporation Systems and methods for providing dynamic haptic playback for an augmented or virtual reality environments
US11069206B2 (en) 2018-05-04 2021-07-20 Cirrus Logic, Inc. Methods and apparatus for outputting a haptic signal to a haptic transducer
US11269415B2 (en) 2018-08-14 2022-03-08 Cirrus Logic, Inc. Haptic output systems
EP3629128A1 (en) * 2018-09-25 2020-04-01 Vestel Elektronik Sanayi ve Ticaret A.S. User device and method for generating haptic feedback in a user device
GB201817495D0 (en) 2018-10-26 2018-12-12 Cirrus Logic Int Semiconductor Ltd A force sensing system and method
CN109947244B (zh) * 2019-03-12 2022-11-04 上海天马微电子有限公司 一种显示装置及触觉反馈方法、装置和设备
US10726683B1 (en) 2019-03-29 2020-07-28 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using a two-tone stimulus
US10828672B2 (en) 2019-03-29 2020-11-10 Cirrus Logic, Inc. Driver circuitry
US20200313529A1 (en) 2019-03-29 2020-10-01 Cirrus Logic International Semiconductor Ltd. Methods and systems for estimating transducer parameters
US11509292B2 (en) 2019-03-29 2022-11-22 Cirrus Logic, Inc. Identifying mechanical impedance of an electromagnetic load using least-mean-squares filter
US10992297B2 (en) 2019-03-29 2021-04-27 Cirrus Logic, Inc. Device comprising force sensors
US10955955B2 (en) 2019-03-29 2021-03-23 Cirrus Logic, Inc. Controller for use in a device comprising force sensors
US11644370B2 (en) 2019-03-29 2023-05-09 Cirrus Logic, Inc. Force sensing with an electromagnetic load
US10976825B2 (en) 2019-06-07 2021-04-13 Cirrus Logic, Inc. Methods and apparatuses for controlling operation of a vibrational output system and/or operation of an input sensor system
US11150733B2 (en) 2019-06-07 2021-10-19 Cirrus Logic, Inc. Methods and apparatuses for providing a haptic output signal to a haptic actuator
KR20220024091A (ko) 2019-06-21 2022-03-03 시러스 로직 인터내셔널 세미컨덕터 리미티드 디바이스 상에 복수의 가상 버튼을 구성하기 위한 방법 및 장치
US11408787B2 (en) 2019-10-15 2022-08-09 Cirrus Logic, Inc. Control methods for a force sensor system
US10984638B1 (en) * 2019-10-17 2021-04-20 Immersion Corporation Systems, devices, and methods for encoding haptic tracks
US11380175B2 (en) 2019-10-24 2022-07-05 Cirrus Logic, Inc. Reproducibility of haptic waveform
US11545951B2 (en) 2019-12-06 2023-01-03 Cirrus Logic, Inc. Methods and systems for detecting and managing amplifier instability
US11662821B2 (en) 2020-04-16 2023-05-30 Cirrus Logic, Inc. In-situ monitoring, calibration, and testing of a haptic actuator
US11933822B2 (en) 2021-06-16 2024-03-19 Cirrus Logic Inc. Methods and systems for in-system estimation of actuator parameters
US11765499B2 (en) 2021-06-22 2023-09-19 Cirrus Logic Inc. Methods and systems for managing mixed mode electromechanical actuator drive
US11908310B2 (en) 2021-06-22 2024-02-20 Cirrus Logic Inc. Methods and systems for detecting and managing unexpected spectral content in an amplifier system
US11552649B1 (en) 2021-12-03 2023-01-10 Cirrus Logic, Inc. Analog-to-digital converter-embedded fixed-phase variable gain amplifier stages for dual monitoring paths

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020163498A1 (en) * 1997-04-25 2002-11-07 Chang Dean C. Design of force sensations for haptic feedback computer interfaces
KR20070035077A (ko) * 2004-07-15 2007-03-29 임머숀 코퍼레이션 햅틱 이펙트를 오더링하기 위한 시스템 및 방법

Family Cites Families (120)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU9015891A (en) * 1990-11-30 1992-06-25 Cambridge Animation Systems Limited Animation
JPH0816820A (ja) * 1994-04-25 1996-01-19 Fujitsu Ltd ３次元アニメーション作成装置
US5774386A (en) * 1995-09-08 1998-06-30 Eastman Kodak Company Method and apparatus for performing function evaluation using a cache
JP4131278B2 (ja) 1996-10-18 2008-08-13 ヤマハ株式会社 鍵盤楽器用力覚制御装置
US6108011A (en) * 1996-10-28 2000-08-22 Pacific Data Images, Inc. Shape interpolation for computer-generated geometric models using independent shape parameters for parametric shape interpolation curves
US6337678B1 (en) 1999-07-21 2002-01-08 Tactiva Incorporated Force feedback computer input and output device with coordinated haptic elements
US6449019B1 (en) * 2000-04-07 2002-09-10 Avid Technology, Inc. Real-time key frame effects using tracking information
JP3949912B2 (ja) * 2000-08-08 2007-07-25 株式会社エヌ・ティ・ティ・ドコモ 携帯型電子機器、電子機器、振動発生器、振動による報知方法および報知制御方法
AU2001294852A1 (en) 2000-09-28 2002-04-08 Immersion Corporation Directional tactile feedback for haptic feedback interface devices
US7623114B2 (en) 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
US7199805B1 (en) * 2002-05-28 2007-04-03 Apple Computer, Inc. Method and apparatus for titling
JP2004310518A (ja) * 2003-04-08 2004-11-04 Fuji Xerox Co Ltd 画像情報処理装置
KR20050054731A (ko) 2003-12-05 2005-06-10 한국전자통신연구원 햅틱 시뮬레이션 시스템 및 그 시스템에서의 실시간 촉감지원 방법
US9948885B2 (en) 2003-12-12 2018-04-17 Kurzweil Technologies, Inc. Virtual encounters
US7742036B2 (en) * 2003-12-22 2010-06-22 Immersion Corporation System and method for controlling haptic devices having multiple operational modes
CN1914583A (zh) * 2004-02-03 2007-02-14 诺基亚公司 用于在移动终端设备中实现振动输出命令的方法和设备
JP2005332063A (ja) 2004-05-18 2005-12-02 Sony Corp 触覚機能付き入力装置、情報入力方法及び電子機器
JP2006058973A (ja) * 2004-08-17 2006-03-02 Sony Corp 触覚情報作成装置及び触覚情報作成方法
JP2008515052A (ja) 2004-09-24 2008-05-08 アップル インコーポレイテッド 生データ・トラック・パッド・デバイスおよびシステム
US7728823B2 (en) 2004-09-24 2010-06-01 Apple Inc. System and method for processing raw data of track pad device
JP4617893B2 (ja) * 2005-01-18 2011-01-26 ソニー株式会社 振動伝達構造、触覚機能付きの入出力装置及び電子機器
JP5275025B2 (ja) * 2005-06-27 2013-08-28 コアクティヴ・ドライヴ・コーポレイション 触覚フィードバック用の同期式振動装置
US8700791B2 (en) * 2005-10-19 2014-04-15 Immersion Corporation Synchronization of haptic effect data in a media transport stream
JP4795091B2 (ja) * 2006-04-21 2011-10-19 キヤノン株式会社 情報処理方法および装置
US9370704B2 (en) 2006-08-21 2016-06-21 Pillar Vision, Inc. Trajectory detection and feedback system for tennis
JP2008123429A (ja) * 2006-11-15 2008-05-29 Sony Corp タッチパネルディスプレイ装置および電子機器並びに遊技機器
US8098234B2 (en) * 2007-02-20 2012-01-17 Immersion Corporation Haptic feedback system with stored effects
JP2008257295A (ja) * 2007-03-30 2008-10-23 Tokyo Institute Of Technology 触覚刺激提示方法
US8621348B2 (en) * 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
CN101355746B (zh) * 2007-07-27 2012-05-16 深圳富泰宏精密工业有限公司 无线通信装置
US8035535B2 (en) * 2007-11-21 2011-10-11 Nokia Corporation Apparatus and method providing transformation for human touch force measurements
US7911328B2 (en) * 2007-11-21 2011-03-22 The Guitammer Company Capture and remote reproduction of haptic events in synchronous association with the video and audio capture and reproduction of those events
US8138896B2 (en) * 2007-12-31 2012-03-20 Apple Inc. Tactile feedback in an electronic device
US8740622B2 (en) 2008-01-17 2014-06-03 Articulate Technologies, Inc. Methods and devices for intraoral tactile feedback
JP2009181261A (ja) 2008-01-30 2009-08-13 Panasonic Corp 双方向通信システム
KR100927009B1 (ko) * 2008-02-04 2009-11-16 광주과학기술원 증강 현실에서의 햅틱 상호 작용 방법 및 그 시스템
US9513704B2 (en) 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
US20090303175A1 (en) * 2008-06-05 2009-12-10 Nokia Corporation Haptic user interface
JP2010015514A (ja) 2008-07-07 2010-01-21 Sony Corp 入力装置、その制御方法及び電子機器
SE533704C2 (sv) * 2008-12-05 2010-12-07 Flatfrog Lab Ab Pekkänslig apparat och förfarande för drivning av densamma
KR20100066036A (ko) * 2008-12-09 2010-06-17 삼성전자주식회사 휴대 단말기 운용 방법 및 장치
KR101114603B1 (ko) * 2008-12-12 2012-03-05 삼성전자주식회사 휴대용 단말기의 햅틱 장치
US8686952B2 (en) 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
US8077021B2 (en) * 2009-03-03 2011-12-13 Empire Technology Development Llc Dynamic tactile interface
US10564721B2 (en) 2009-03-12 2020-02-18 Immersion Corporation Systems and methods for using multiple actuators to realize textures
CN102362246B (zh) * 2009-03-12 2016-05-04 意美森公司 用于使用多个致动器实现纹理的系统和方法
KR101628782B1 (ko) 2009-03-20 2016-06-09 삼성전자주식회사 휴대용 단말기에서 복수의 진동자를 이용한 햅틱 기능 제공방법 및 장치
JP2010278727A (ja) 2009-05-28 2010-12-09 Kddi Corp 振動機能付き携帯端末
US9370459B2 (en) 2009-06-19 2016-06-21 Andrew Mahoney System and method for alerting visually impaired users of nearby objects
JP5197521B2 (ja) * 2009-07-29 2013-05-15 京セラ株式会社 入力装置
JP4633183B1 (ja) * 2009-07-29 2011-02-23 京セラ株式会社 入力装置および入力装置の制御方法
JP4942801B2 (ja) * 2009-08-27 2012-05-30 京セラ株式会社 入力装置
US8451238B2 (en) * 2009-09-02 2013-05-28 Amazon Technologies, Inc. Touch-screen user interface
US8619044B2 (en) * 2009-09-30 2013-12-31 Blackberry Limited Electronic device including tactile touch-sensitive display and method of controlling same
JP5704428B2 (ja) 2009-11-18 2015-04-22 株式会社リコー タッチパネル装置及びタッチパネル装置の制御方法
JP5635274B2 (ja) * 2010-01-27 2014-12-03 京セラ株式会社 触感呈示装置および触感呈示方法
JP5360499B2 (ja) 2010-02-01 2013-12-04 国立大学法人東北大学 力覚提示方法および力覚提示装置
CA2731708A1 (en) * 2010-02-15 2011-08-15 Research In Motion Limited Electronic device including touch-sensitive display and actuator for providing tactile feedback
US9417695B2 (en) * 2010-04-08 2016-08-16 Blackberry Limited Tactile feedback method and apparatus
US9251721B2 (en) 2010-04-09 2016-02-02 University Of Florida Research Foundation, Inc. Interactive mixed reality system and uses thereof
US8736559B2 (en) * 2010-04-23 2014-05-27 Blackberry Limited Portable electronic device and method of controlling same
US8451255B2 (en) * 2010-05-14 2013-05-28 Arnett Ryan Weber Method of providing tactile feedback and electronic device
WO2012008628A1 (ko) * 2010-07-13 2012-01-19 엘지전자 주식회사 이동단말기 및 그 대기화면 구성방법
US8352643B2 (en) * 2010-09-30 2013-01-08 Immersion Corporation Haptically enhanced interactivity with interactive content
US20120081337A1 (en) 2010-10-04 2012-04-05 Sony Ericsson Mobile Communications Ab Active Acoustic Multi-Touch and Swipe Detection for Electronic Devices
EP2638450A1 (en) 2010-11-09 2013-09-18 Koninklijke Philips Electronics N.V. User interface with haptic feedback
JP5587759B2 (ja) * 2010-12-24 2014-09-10 京セラ株式会社 触感呈示装置、当該装置に用いるプログラムおよび触感呈示方法
US8624857B2 (en) 2011-02-09 2014-01-07 Texas Instruments Incorporated Haptics effect controller architecture and instruction set
US9483085B2 (en) * 2011-06-01 2016-11-01 Blackberry Limited Portable electronic device including touch-sensitive display and method of controlling same
KR20130007738A (ko) * 2011-07-11 2013-01-21 삼성전자주식회사 키 입력장치
US9122311B2 (en) * 2011-08-24 2015-09-01 Apple Inc. Visual feedback for tactile and non-tactile user interfaces
US9462262B1 (en) 2011-08-29 2016-10-04 Amazon Technologies, Inc. Augmented reality environment with environmental condition control
US8947126B2 (en) 2011-10-10 2015-02-03 Infineon Technologies Austria Ag System, drivers for switches and methods for synchronizing measurements of analog-to-digital converters
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
US10852093B2 (en) 2012-05-22 2020-12-01 Haptech, Inc. Methods and apparatuses for haptic systems
JP5831635B2 (ja) * 2012-06-11 2015-12-09 富士通株式会社 駆動装置、電子機器、及び駆動制御プログラム
US8860563B2 (en) 2012-06-14 2014-10-14 Immersion Corporation Haptic effect conversion system using granular synthesis
US9030428B2 (en) 2012-07-11 2015-05-12 Immersion Corporation Generating haptic effects for dynamic events
US9898084B2 (en) 2012-12-10 2018-02-20 Immersion Corporation Enhanced dynamic haptic effects
FR2999741B1 (fr) 2012-12-17 2015-02-06 Centre Nat Rech Scient Systeme haptique pour faire interagir sans contact au moins une partie du corps d'un utilisateur avec un environnement virtuel
US9367136B2 (en) 2013-04-12 2016-06-14 Microsoft Technology Licensing, Llc Holographic object feedback
US9908048B2 (en) 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display
US9811854B2 (en) 2013-07-02 2017-11-07 John A. Lucido 3-D immersion technology in a virtual store
EP4083758A1 (en) 2013-07-05 2022-11-02 Rubin, Jacob A. Whole-body human-computer interface
US9630105B2 (en) 2013-09-30 2017-04-25 Sony Interactive Entertainment Inc. Camera based safety mechanisms for users of head mounted displays
WO2015107386A1 (en) 2014-01-15 2015-07-23 Sony Corporation Haptic notification on wearables
US9551873B2 (en) 2014-05-30 2017-01-24 Sony Interactive Entertainment America Llc Head mounted device (HMD) system having interface with mobile computing device for rendering virtual reality content
CN111998027B (zh) 2014-07-28 2022-05-27 Ck高新材料有限公司 触觉信息提供方法
US9645646B2 (en) 2014-09-04 2017-05-09 Intel Corporation Three dimensional contextual feedback wristband device
US9799177B2 (en) 2014-09-23 2017-10-24 Intel Corporation Apparatus and methods for haptic covert communication
US20160170508A1 (en) 2014-12-11 2016-06-16 Toyota Motor Engineering & Manufacturing North America, Inc. Tactile display devices
US9870718B2 (en) 2014-12-11 2018-01-16 Toyota Motor Engineering & Manufacturing North America, Inc. Imaging devices including spacing members and imaging devices including tactile feedback devices
US9922518B2 (en) 2014-12-11 2018-03-20 Elwha Llc Notification of incoming projectiles
US10166466B2 (en) 2014-12-11 2019-01-01 Elwha Llc Feedback for enhanced situational awareness
US10073516B2 (en) 2014-12-29 2018-09-11 Sony Interactive Entertainment Inc. Methods and systems for user interaction within virtual reality scene using head mounted display
US9746921B2 (en) 2014-12-31 2017-08-29 Sony Interactive Entertainment Inc. Signal generation and detector systems and methods for determining positions of fingers of a user
US9843744B2 (en) 2015-01-13 2017-12-12 Disney Enterprises, Inc. Audience interaction projection system
US10322203B2 (en) 2015-06-26 2019-06-18 Intel Corporation Air flow generation for scent output
US9851799B2 (en) 2015-09-25 2017-12-26 Oculus Vr, Llc Haptic surface with damping apparatus
US20170103574A1 (en) 2015-10-13 2017-04-13 Google Inc. System and method for providing continuity between real world movement and movement in a virtual/augmented reality experience
US20170131775A1 (en) 2015-11-10 2017-05-11 Castar, Inc. System and method of haptic feedback by referral of sensation
WO2017095951A1 (en) 2015-11-30 2017-06-08 Nike Innovate C.V. Apparel with ultrasonic position sensing and haptic feedback for activities
US10310804B2 (en) 2015-12-11 2019-06-04 Facebook Technologies, Llc Modifying haptic feedback provided to a user to account for changes in user perception of haptic feedback
US10324530B2 (en) 2015-12-14 2019-06-18 Facebook Technologies, Llc Haptic devices that simulate rigidity of virtual objects
US10096163B2 (en) 2015-12-22 2018-10-09 Intel Corporation Haptic augmented reality to reduce noxious stimuli
US10065124B2 (en) 2016-01-15 2018-09-04 Disney Enterprises, Inc. Interacting with a remote participant through control of the voice of a toy device
US9846971B2 (en) 2016-01-19 2017-12-19 Disney Enterprises, Inc. Systems and methods for augmenting an appearance of a hilt to simulate a bladed weapon
US11351472B2 (en) 2016-01-19 2022-06-07 Disney Enterprises, Inc. Systems and methods for using a gyroscope to change the resistance of moving a virtual weapon
TWI688879B (zh) 2016-01-22 2020-03-21 宏達國際電子股份有限公司 虛擬實境環境中與真實世界互動的方法、系統與記錄媒體
US9933851B2 (en) 2016-02-22 2018-04-03 Disney Enterprises, Inc. Systems and methods for interacting with virtual objects using sensory feedback
US10555153B2 (en) 2016-03-01 2020-02-04 Disney Enterprises, Inc. Systems and methods for making non-smart objects smart for internet of things
US20170352185A1 (en) 2016-06-02 2017-12-07 Dennis Rommel BONILLA ACEVEDO System and method for facilitating a vehicle-related virtual reality and/or augmented reality presentation
US10155159B2 (en) 2016-08-18 2018-12-18 Activision Publishing, Inc. Tactile feedback systems and methods for augmented reality and virtual reality systems
US20180053351A1 (en) 2016-08-19 2018-02-22 Intel Corporation Augmented reality experience enhancement method and apparatus
US10372213B2 (en) 2016-09-20 2019-08-06 Facebook Technologies, Llc Composite ribbon in a virtual reality device
US10779583B2 (en) 2016-09-20 2020-09-22 Facebook Technologies, Llc Actuated tendon pairs in a virtual reality device
US10300372B2 (en) 2016-09-30 2019-05-28 Disney Enterprises, Inc. Virtual blaster
US10281982B2 (en) 2016-10-17 2019-05-07 Facebook Technologies, Llc Inflatable actuators in virtual reality
US10088902B2 (en) 2016-11-01 2018-10-02 Oculus Vr, Llc Fiducial rings in virtual reality
US20170102771A1 (en) 2016-12-12 2017-04-13 Leibs Technology Limited Wearable ultrasonic haptic feedback system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020163498A1 (en) * 1997-04-25 2002-11-07 Chang Dean C. Design of force sensations for haptic feedback computer interfaces
KR20070035077A (ko) * 2004-07-15 2007-03-29 임머숀 코퍼레이션 햅틱 이펙트를 오더링하기 위한 시스템 및 방법

Also Published As

Publication number Publication date
EP3495924A1 (en) 2019-06-12
KR102161541B1 (ko) 2020-10-05
JP2018163691A (ja) 2018-10-18
US9396630B2 (en) 2016-07-19
EP2728443A2 (en) 2014-05-07
EP2728443A3 (en) 2016-06-08
CN103809960A (zh) 2014-05-21
US20140125467A1 (en) 2014-05-08
US20160320845A1 (en) 2016-11-03
US20180267610A1 (en) 2018-09-20
EP3495924B1 (en) 2023-06-07
US10248212B2 (en) 2019-04-02
JP6734325B2 (ja) 2020-08-05
US8947216B2 (en) 2015-02-03
CN108803869A (zh) 2018-11-13
JP6359820B2 (ja) 2018-07-18
CN103809960B (zh) 2018-05-25
JP2014093091A (ja) 2014-05-19
US9958944B2 (en) 2018-05-01
US20150102918A1 (en) 2015-04-16

Similar Documents

Publication Publication Date Title
JP6734325B2 (ja) ダイナミックハプティック効果のコード化
JP6598915B2 (ja) コンテキスト依存ハプティック確認システム
JP6479148B2 (ja) 強化された動的ハプティック効果
JP6226574B2 (ja) ハプティックフィードバックコントロールシステム
EP2674835B1 (en) Haptic effect conversion system using granular synthesis
JP2020013585A (ja) 回転可能入力機構を用いたユーザインタフェース
CN107924249A (zh) 用于内容导航和操纵的设备、方法以及图形用户界面
US20240045703A1 (en) Devices, Methods, and Graphical User Interfaces for Seamless Transition of User Interface Behaviors

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant