KR20190050754A - 햅틱 테마 프레임워크 - Google Patents

햅틱 테마 프레임워크 Download PDF

Info

Publication number
KR20190050754A
KR20190050754A KR1020190051555A KR20190051555A KR20190050754A KR 20190050754 A KR20190050754 A KR 20190050754A KR 1020190051555 A KR1020190051555 A KR 1020190051555A KR 20190051555 A KR20190051555 A KR 20190051555A KR 20190050754 A KR20190050754 A KR 20190050754A
Authority
KR
South Korea
Prior art keywords
haptic
theme
haptic theme
mapping
effect
Prior art date
Application number
KR1020190051555A
Other languages
English (en)
Inventor
에릭 제르베
로버트 헤우벨
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20190050754A publication Critical patent/KR20190050754A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B06—GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS IN GENERAL
    • B06B—METHODS OR APPARATUS FOR GENERATING OR TRANSMITTING MECHANICAL VIBRATIONS OF INFRASONIC, SONIC, OR ULTRASONIC FREQUENCY, e.g. FOR PERFORMING MECHANICAL WORK IN GENERAL
    • B06B1/00—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency
    • B06B1/02—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy
    • B06B1/06—Methods or apparatus for generating mechanical vibrations of infrasonic, sonic, or ultrasonic frequency making use of electrical energy operating with piezoelectric effect or with electrostriction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/30—Creation or generation of source code
    • G06F8/38—Creation or generation of source code for implementing user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • H—ELECTRICITY
    • H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02N—ELECTRIC MACHINES NOT OTHERWISE PROVIDED FOR
    • H02N2/00—Electric machines in general using piezoelectric effect, electrostriction or magnetostriction
    • H02N2/02—Electric machines in general using piezoelectric effect, electrostriction or magnetostriction producing linear motion, e.g. actuators; Linear positioners ; Linear motors

Abstract

햅틱 테마를 생성할 수 있는 햅틱 테마 시스템이 제공되며, 햅틱 테마는 하나 이상의 햅틱 효과, 및 장치의 하나 이상의 사용자 인터페이스("UI") 이벤트에 대한 상기 하나 이상의 햅틱 효과의 매핑을 포함하는 설치가능한 패키지이다. 상기 햅틱 테마는 상기 장치에 설치될 수 있으며, 상기 장치는 이후 실시간으로 햅틱 테마를 동적으로 로드하고 재생할 수 있다. 상기 햅틱 테마 시스템은 사용자 인터페이스 내에서 하나 이상의 햅틱 테마를 디스플레이할 수 있다. 선택을 수신하면, 상기 햅틱 테마 시스템은 상기 매핑 내에서 수신한 사용자 인터페이스 이벤트에 매핑된 햅틱 효과를 기반으로 햅틱 피드백을 발생시킬 수 있다.

Description

햅틱 테마 프레임워크{HAPTIC THEME FRAMEWORK}
일 실시예는 일반적으로 장치에 관한 것으로, 특히, 장치의 햅틱 효과에 관한 것이다.
햅틱은 사용자에게 힘, 진동, 및 움직임과 같은 햅틱 피드백 효과(haptic feedback effects)(즉, 햅틱 효과)를 가함으로써 사용자의 터치 감각을 활용하는 촉각과 힘의 피드백 기술이다. 모바일 장치, 터치 스크린 장치 및 개인용 컴퓨터와 같은 장치는 햅틱 효과를 발생하도록 구성될 수 있다. 일반적으로, 이러한 장치들의 OEM(Original equipment manufacturer)들은 장치의 운영 체제("OS") 내에 햅틱 효과를 발생할 수 있는 임베디드 하드웨어(이를 테면, 액추에이터)에 대한 호출을 프로그래밍한다. 이러한 호출은 특정 이벤트에 대한 응답으로 어느 햅틱 효과를 재생할지를 지정한다. 예를 들어, 사용자가, 예를 들면, 버튼, 터치 스크린, 레버, 조이스틱, 휠, 또는 어떤 다른 컨트롤(control)을 사용하여 장치와 상호작용할 때, 컨트롤의 위치 정보가 장치의 OS에 송신될 수 있고, 그러면 재생 명령이 컨트롤의 회로를 통해 임베디드 하드웨어에 송신될 수 있다. 그러면 임베디드 하드웨어는 적절한 햅틱 효과를 발생한다. 임베디드 하드웨어에 대한 호출은 일반적으로 OS 차원에서 프로그래밍되기 때문에, 전형적으로 비-OEM 당사자는 단지 이미 정의되어있는 햅틱 효과를 활용할 수 있을 뿐이다.
일 실시예는 프로세서에 의해 실행될 때, 그 프로세서가 햅틱 테마를 생성하도록 하는 명령어가 저장되어 있는 컴퓨터 판독가능 매체에 관련된다. 상기 명령어는 하나 이상의 햅틱 효과를 생성하는 것, 매핑 언어를 사용하여 상기 하나 이상의 햅틱 효과를 하나 이상의 사용자 인터페이스 이벤트에 매핑시키는 매핑을 생성하는 것, 및 상기 매핑과 상기 하나 이상의 햅틱 효과를 상기 햅틱 테마 내에 패키징하는 것을 포함한다.
다른 실시예, 상세 내용, 이점, 및 변형은 첨부의 도면과 함께 기술되는 다음과 같은 바람직한 실시예의 상세한 설명으로부터 명백해질 것이다.
도 1은 본 발명의 일 실시예에 따른 장치의 사시도를 예시한다.
도 2는 본 발명의 일 실시예에 따른 햅틱 테마 시스템의 블록도를 예시한다.
도 3은 본 발명의 실시예에 따른 하나 이상의 햅틱 테마를 포함하는 장치의 블록도를 예시한다.
도 4는 본 발명의 실시예에 따른 햅틱 테마의 예를 도시한다.
도 5는 본 발명의 실시예에 따라 애그리게이터를 기반으로 하나 이상의 햅틱 테마를 디스플레이하는 사용자 인터페이스의 예를 예시한다.
도 6은 본 발명의 실시예에 따라 햅틱 테마 모듈의 기능의 흐름도를 예시한다.
도 7은 본 발명의 실시예에 따라 햅틱 테마, 또는 햅틱 테마 컴포넌트를 다른 장치에 전달하는 장치의 블록도를 예시한다.
도 8은 본 발명의 실시예에 따른 햅틱 테마 모듈의 기능의 다른 흐름도를 예시한다.
도 9는 하나 이상의 물리적 특성을 분석하고 캡처하며 하나 이상의 물리적 특성을 장치 내 햅틱 테마 컴포넌트로 변환하는 장치의 블록도를 예시한다.
도 10은 본 발명의 실시예에 따른 햅틱 테마 모듈의 기능의 또 다른 흐름도를 도시한다.
일 실시예는 햅틱 테마를 생성할 수 있는 햅틱 테마 시스템으로, 여기서 햅틱 테마는 하나 이상의 햅틱 효과, 및 그 하나 이상의 햅틱 효과와 장치의 하나 이상의 사용자 인터페이스("UI") 이벤트의 매핑을 포함하는 설치가능한 패키지(installable package)이다. 햅틱 테마는 장치에 설치될 수 있으며, 그러면 장치는 햅틱 테마를 동적으로 로드하고 실시간으로 재생시킬 수 있다. 또한, 장치는 하나 이상의 햅틱 테마, 또는 하나 이상의 햅틱 테마 컴포넌트를 다른 장치에 전달할 수 있으며, 여기서 햅틱 테마 컴포넌트는 햅틱 테마의 적어도 일부분이다. 부가적으로, 장치는 하나 이상의 물리적 특성을 분석 및 캡처할 수 있으며 하나 이상의 물리적 특성을 장치 내 햅틱 테마 컴포넌트로서 적용할 수 있다.
도 1은 본 발명의 일 실시예에 따른 장치(50)의 사시도를 예시한다. 도 1에 예시된 바와 같이, 장치(50)는 모바일 폰(mobile phone)이다. 그러나, 다른 실시예에서, 장치(50)는 개인 휴대정보 단말기("PDA"), 휴대용 미디어 플레이어, 휴대용 게이밍 장치, 모바일 폰, 스마트폰, 태블릿 개인용 컴퓨터, 또는 기타 유사한 장치와 같은 모든 형태의 장치일 수 있다. 장치(50)는 사용자가 장치(50)에서 실행하는 소프트웨어 애플리케이션과 인터페이스하도록 하는 UI(60)를 포함한다. 장치(50)는 아래에서 더 상세히 기술되는 바와 같이 장치(50)에 하나 이상의 햅틱 테마를 생성할 수 있는 햅틱 테마 시스템(도시되지 않음)을 더 포함한다.
앞에서 기술한 바와 같이, 햅틱 테마는 하나 이상의 햅틱 효과 및 그 하나 이상의 햅틱 효과와 장치(50)의 하나 이상의 UI 이벤트의 매핑을 포함하는 소프트웨어 패키징 구조이다. 일 실시예에서, 햅틱 테마는 장치, 이를 테면, 장치(50)에 설치될 수 있는 설치가능한 패키지이다. 다른 실시예에서, 햅틱 테마는 장치, 이를 테면, 장치(50)의 OS와 통합되어 있는 패키지이다. 앞에서도 설명한 바와 같이, 햅틱 효과는 힘, 진동, 및 움직임과 같은 햅틱 피드백 효과이며, UI 이벤트는 장치(50)의 사용자와 장치(50)의 UI(60) 간의 상호작용으로, 이를 테면, 사용자가 스크린 또는 장치(50)의 버튼을 터치하는 것, UI(60)가 사용자에게 진행률 표시줄(progress bar)을 표시하는 것, 그리고 장치(50)가 인입 메시지를 수신하고 사용자에게 디스플레이되는 알림(alert)을 UI(60) 내에서 생성하는 것이다. 일 실시예에서, 햅틱 테마 시스템은 또한 장치(50)가 하나 이상의 햅틱 테마, 또는 하나 이상의 햅틱 테마 컴포넌트를 다른 장치에 전달하게 할 수 있다. 앞에서도 설명한 바와 같이, 햅틱 테마 컴포넌트는 햅틱 효과, 그 햅틱 효과와 UI 이벤트의 매핑, 또는 이들의 조합과 같은 햅틱 테마의 적어도 일부분이다. 다른 실시예에서, 또한 햅틱 테마 시스템은 장치(50)가 하나 이상의 물리적 특성을 분석하고 캡처하게 하고 하나 이상의 물리적 특성을 햅틱 테마 컴포넌트로 변환하게 할 수 있다. 일 실시예에서, 하나 이상의 물리적 특성은 개체의 하나 이상의 물리적 특성을 포함할 수 있다. 이러한 개체의 예로는 각기 고유한 물리적 특성을 포함하고, 만졌을 때 각기 고유의 촉각 햅틱 효과를 생성하는 목재 표면, 돌 표면, 금속 표면, 그리고 직물 표면을 포함한다. 또 다른 실시예에서, 하나 이상의 물리적 특성은 장치에 의해 생성되는 작용(action)의 하나 이상의 물리적 특성을 포함할 수 있다. 작용의 예는 전화, 이를 테면, 회전식 전화(rotary telephone)가 울릴 때, 이 전화의 진동이다. 전화에 의해 발생된 진동은 고유한 물리적 성질을 포함하며, 또한 고유한 힘 햅틱 효과를 발생한다.
도 2는 본 발명의 일 실시예에 따른 햅틱 테마 시스템(10)의 블록도를 예시한다. 일 실시예에서, 시스템(10)은 도 1의 모바일 장치(50)의 일부이며, 시스템(10)은 햅틱 테마 기능을 제공한다. 단일 시스템으로 도시되어 있지만, 시스템(10)의 기능은 분산형 시스템으로 구현될 수 있다. 시스템(10)은 정보를 전달하기 위한 버스(12) 또는 다른 통신 메커니즘, 및 정보 처리를 위해 버스(12)에 연결된 프로세서(22)를 포함한다. 프로세서(22)는 모든 형태의 범용 또는 특수 목적의 프로세서일 수 있다. 시스템(10)은 프로세서(22)에 의해 실행되는 정보 및 명령어를 저장하는 메모리(14)를 더 포함한다. 메모리(14)는 랜덤 액세스 메모리("RAM"), 판독 전용 메모리("ROM"), 자기 또는 광 디스크와 같은 정적 스토리지, 또는 어떤 다른 형태의 컴퓨터 판독가능 매체의 어떤 조합으로 구성될 수 있다.
컴퓨터 판독가능 매체는 프로세서(22)가 액세스할 수 있는 이용가능한 모든 매체일 수 있으며, 휘발성 및 비휘발성 매체, 이동식 및 고정식 매체, 통신 매체, 및 저장 매체를 포함할 수 있다. 통신 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈, 또는 변조된 데이터 신호, 이를 테면, 반송파 또는 다른 전송 메커니즘의 다른 데이터를 포함할 수 있으며, 본 기술 분야에서 공지된 어떤 다른 형태의 정보 전달 매체를 포함할 수 있다. 저장 매체는 RAM, 플래시 메모리, ROM, 소거가능 및 프로그램가능 판독 전용 메모리 ("EPROM"), 전기 소거가능 프로그램가능 판독 전용 메모리("EEPROM"), 레지스터, 하드 디스크, 이동식 디스크, 콤팩트 디스크 판독 전용 메모리("CD-ROM"), 또는 본 기술 분야에서 공지된 어떤 다른 형태의 저장 매체를 포함할 수 있다.
일 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈을 저장한다. 모듈은 일 실시예에서 시스템(10) 뿐만 아니라 장치(50)의 그 밖의 것들에게 운영 체제 기능을 제공하는 운영 체제(15)를 포함한다. 아래에서 더욱 상세히 기술하는 바와 같이, 모듈은 하나 이상의 햅틱 테마를 생성하고, 하나 이상의 햅틱 테마, 또는 하나 이상의 햅틱 테마 컴포넌트를 전달하며, 그리고 하나 이상의 물리적 특성을 분석 및 캡처하고, 하나 이상의 물리적 특성을 햅틱 테마 컴포넌트로 변환하는 프레임워크를 제공하는 햅틱 테마 모듈(16)을 더 포함한다. 시스템(10)은 전형적으로 하나 이상의 햅틱 효과를 생성하는 애플리케이션과 같은 부가 기능을 포함하는 하나 이상의 부가 애플리케이션 모듈(18)을 포함할 것이다.
원격 소스로부터 데이터를 전송 및/또는 수신하는 실시예들에서, 시스템(10)은 네트워크 인터페이스 카드와 같이 모바일 무선 네트워크 통신, 이를 테면, 적외선, 라디오, 와이파이(Wi-Fi), 또는 셀룰러 네트워크 통신을 제공하는 통신 장치(20)를 더 포함한다. 다른 실시예에서, 통신 장치(20)는 이더넷 접속 또는 모뎀과 같은 유선 네트워크 접속을 제공한다.
프로세서(22)는 또한 버스(12)를 통해 사용자에게 그래픽 표현이나 사용자 인터페이스를 디스플레이하기 위한 액정 디스플레이("LCD")와 같은 디스플레이(24)에 연결된다. 디스플레이(24)는 터치 스크린과 같이 신호를 송신하고 프로세서(22)로부터 수신하도록 구성된 터치-감지 입력 장치일 수 있으며, 또한 멀티-터치 터치 스크린일 수 있다.
시스템(10)은 하나 이상의 액추에이터(26)를 더 포함한다. 프로세서(22)는 햅틱 효과와 연관된 햅틱 신호를 액추에이터(26)에 전송할 수 있고, 액추에이터(26)는 이후 햅틱 효과를 출력한다. 액추에이터(26)는, 예를 들어, 전기 모터, 전자기 액추에이터, 보이스 코일, 압전 액추에이터, 형상 기억 합금, 전기 활성 폴리머, 솔레노이드, ERM 모터(eccentric rotating mass motor) 또는 선형 공진 액추에이터(linear resonant actuator: "LRA")일 수 있다.
시스템(10)은 하나 이상의 센서(28)를 더 포함한다. 센서(28)는 가속도계, 자이로스코프, 위성 위치확인 시스템("GPS") 센서, 터치-감지 입력 장치(예컨대, 터치 스크린, 터치 패드), 텍스처 스타일러스, 이미징 센서, 또는 어떤 다른 유형의 센서를 포함할 수 있다. 센서(28)는 하나 이상의 물리적 특성과 같은 하나 이상의 자극을 검출하도록 구성될 수 있다. 물리적 특성의 예는 가속도, 경사, 관성, 압력, 또는 위치의 변동을 포함할 수 있다. 센서(28)는 또한 위치 센서, 회전 속도 센서, 광 센서, 압력 센서, 텍스처 센서, 카메라, 마이크로폰, 또는 다른 유형의 센서를 포함할 수 있다.
일 실시예에서, 햅틱 테마 모듈(이를 테면, 도 2의 햅틱 테마 모듈(16))에 의해 제공된 햅틱 테마 프레임워크는 햅틱 효과와 장치의 OS로부터의 UI 이벤트의 매핑을 연결해제할 수 있으며, 또한 햅틱 테마의 개발자가 햅틱 효과와 UI 이벤트 간의 맞춤형 매핑을 제공하도록 허용할 수 있으며, 여기서 햅틱 테마는 맞춤형 매핑을 장치의 OS에 전달할 수 있다. 그 결과 장치의 사용자는 예를 들어, 햅틱 테마를 다운로드하여 햅틱 테마를 획득하고, 그 햅틱 테마를 장치에 설치할 수 있다. 이 햅틱 테마 프레임워크를 통해, 햅틱 효과는 장치에서 플러그 인 또는 장치로부터 플러그 아웃될 수 있고, 상이한 UI 이벤트에 매핑될 수 있다. 사용자는 원하는대로 많은 수의 햅틱 테마를 장치에 설치할 수 있으며, 이 경우 각각의 햅틱 테마는 햅틱 효과와 UI 이벤트의 별개의 매핑을 포함할 수 있고, 사용자는 장치가 하나 이상의 UI 이벤트에 응답하여 햅틱 효과를 발생시키기 위해 장치의 어느 햅틱 테마가 적용되는 지를 선택할 수 있다. 따라서, 실시예에 따르면, 햅틱 테마 프레임워크는 햅틱 테마를 생성하고, 장치에 햅틱 테마를 설치하고, 장치 내에서 햅틱 테마를 활용하는 표준 프로세스를 제공할 수 있다.
실시예에 따르면, 매핑 언어는 햅틱 효과와 UI 이벤트의 매핑을 기술하는데 사용되며, 이 매핑은 파일에 저장된다. 다시 말해서, 매핑 언어는 매핑 파일을 생성하는데 사용된다. 매핑 언어는 매핑을 기술하는데 사용되는 메타 언어이며, 햅틱 테마 내에서 활용될 수 있는 매핑 파일을 적절히 생성하는 데 사용될 수 있다. 더 상세히 설명되는 바와 같이, 매핑 파일은 하나 이상의 효과 파일과 결합될 수 있으며, 효과 파일은 햅틱 테마를 형성하기 위해 Immersion Corp.에서 구입가능한 Motiv Studio와 같은 햅틱 효과 디자인 툴을 사용하여 설계된 햅틱 효과의 출력 형태이다. 일 실시예에서, 매핑 언어는 확장가능 마크업 언어(Extensible Markup Language ("XML")) 스키마이며, 매핑 파일은 XML 파일이다. 실시예에 따르면, 도 3과 관련하여 더 상세히 설명되는 바와 같이, 매핑 파일은 매핑에 기반한 햅틱 테마를 구축하는데 사용된다.
도 3은 본 발명의 실시예에 따라서 하나 이상의 햅틱 테마를 포함하는 장치(300)의 블록도를 예시한다. 앞에서 기술한 바와 같이, 햅틱 테마는 하나 이상의 햅틱 효과 및 그 하나 이상의 햅틱 효과와 하나 이상의 UI 이벤트의 매핑을 담고 있는 패키징 구조이다. 실시예에 따르면, 각각의 햅틱 효과는 햅틱 효과 파일(즉, 효과 파일) 내에 포함될 수 있으며, 앞에서 설명된 바와 같이 매핑은 매핑 파일 내에 포함될 수 있다. 따라서, 도 3에 예시된 바와 같이, 장치(300)는 도 3에서 햅틱 테마 1 ... 햅틱 테마 n으로 식별되는 n개의 햅틱 테마를 포함하며, 여기서 n은 각각의 실시예에 따라 임의의 수일 수 있다. 추가로 설명하자면, 햅틱 테마 1은 햅틱 테마(310)로도 식별되고, 햅틱 테마 n은 햅틱 테마(320)로도 식별된다.
실시예에 따르면, 햅틱 테마, 이를 테면, 햅틱 테마(310)는 하나 이상의 효과 파일 및 매핑 파일을 포함한다. 따라서, 도 3에 예시된 바와 같이, 햅틱 테마 1은 도 3에서 효과 파일 1 ... 효과 파일 n으로 식별된 n개의 효과 파일을 포함하며, 여기서 n은 각각의 실시예에 따라 임의의 숫자일 수 있다. 추가로 설명하자면, 햅틱 테마(310)의 효과 파일 1은 효과 파일(311)이라고도 식별되며, 햅틱 테마(310)의 효과 파일 n은 효과 파일(312)이라고도 식별된다. 앞에서 기술한 바와 같이, 효과 파일(311)은 햅틱 효과 디자인 툴의 출력 형식이며, 하나의 햅틱 효과를 포함한다. 실시예에 따르면, 햅틱 효과는 Motiv Studio와 같은 햅틱 효과 디자인 툴을 사용하여 설계될 수 있으며, 이후 효과 파일(311)과 같은 효과 파일로 익스포트(export)될 수 있다. 일 실시예에서, 효과 파일(311)은 Immersion TouchSense ("IVT") 파일이다. 효과 파일(311)은 또한 햅틱 테마의 한 컴포넌트, 또는 햅틱 테마 컴포넌트로서 식별될 수 있다. 실시예에 따르면, 효과 파일(311)에 관한 앞의 설명은 효과 파일(312)을 포함하여 햅틱 테마(310)의 각 효과 파일에 적용된다.
더욱이, 햅틱 테마(310)는 또한 매핑 파일(313)을 포함한다. 앞에서 기술한 바와 같이, 매핑 파일(313)은 매핑 언어를 사용하여 생성되며, 하나 이상의 햅틱 효과와 하나 이상의 UI 이벤트의 매핑을 담고 있는 파일이다. 실시예에 따르면, 매핑 파일(313)은 장치(300)의 일부분인 알고 있는 모든 UI 이벤트들과 (효과 파일(311) 및 효과 파일(312)을 비롯한) 다수의 효과 파일에 대해 정의된 햅틱 효과들의 매핑을 포함하고 있다. 따라서, 매핑 파일(313)의 매핑은 각각의 효과 파일의 각각의 햅틱 효과를 장치(300)의 UI 이벤트에 매핑시킨다. 일 실시예에서, 매핑 파일(313)을 생성하는데 사용된 매핑 언어는 XML 스키마이며, 매핑 파일(313)은 XML 파일이다. 매핑 파일(313)은 햅틱 테마의 컴포넌트, 또는 햅틱 테마 컴포넌트라고도 식별될 수 있다.
아래는 매핑을 생성하는데 사용된 매핑 언어의 일예이다.
Figure pat00001
Figure pat00002
전술한 예에서, 복합형 UIEvent는 다음과 같은 UI 이벤트들을 규정한다: LONG_PRESS, VIRTUAL_KEY, SAFE_MODE_DISABLED, SAFE_MODE_ENABLED, BUTTON_CLICK, BUTTON_PRESS, LISTVIEW_CLICK, 및 LISTVIEW_PRESS. 복합형 Effect는 효과 파일 내에 저장된 햅틱 효과를 규정한다. 복합형 Mapping은 Action 및 StartEffect 복합형을 사용하여 UI 이벤트를 햅틱 효과에 매핑시킨다. 당업자는, 전술한 예는 매핑의 일예일 뿐이며, 매핑은 상이한 형식을 가질 수 있거나, 또는 상이한 실질적인 내용을 포함할 수 있으며, 여전히 본 발명의 범주 내에 속한다는 것을 인식할 것이다.
아래는 햅틱 테마의 컴포넌트(즉, 햅틱 테마 컴포넌트)인 매핑 파일의 예이다.
Figure pat00003
상기 예에서, 테마 "MyNiftyPrettyTheme"가 규정된다. "MyNiftyPrettyTheme" 테마 내에는 두 개의 햅틱 효과, 즉 "myclickEffect" 및 "myHDEffect"가 규정된다. "myclickEffect" 햅틱 효과는 UI 이벤트인 "BUTTON_PRESS"에 매핑되며, "myHDEffect" 햅틱 효과는 UI 이벤트인 "BUTTON_CLICK"에 매핑된다. 당업자는, 전술한 예는 매핑 파일의 예일뿐이며, 매핑 파일은 상이한 포맷을 가질 수 있거나, 또는 상이한 실질적인 내용을 포함할 수 있으며, 여전히 본 발명의 범주 내에 속한다는 것을 인식할 것이다.
더욱이, 햅틱 테마(310)는 또한 햅틱 테마(310) 및 장치(300)의 OS 사이에 통신 프로토콜을 제공하는 소프트웨어 레이어(도시되지 않음)를 포함한다. 실시예에 따르면, 이로써 햅틱 테마(310)는 소스 코드를 사용하여 장치(300)의 OS와 통신하여 어떤 UI 이벤트에 대해 어떤 햅틱 효과가 정의되어 있는지를 나타내게 된다. 따라서, 햅틱 테마(310)는 장치(300) 내에 설치될 수 있는 독립적인 테마(self-contained theme)이다. 햅틱 테마, 이를 테면, 햅틱 테마(310)는 아래에서 도 4와 관련하여 더 상세히 설명된다.
실시예에 따르면, 햅틱 테마(310)의 전술한 설명은 햅틱 테마(320)를 비롯하하여, 장치(300)의 각각의 햅틱 테마에 적용된다. 따라서, 햅틱 테마(310)의 효과 파일(311)의 전술한 설명도 역시 햅틱 테마(320)의 효과 파일(321)에 적용되며, 햅틱 테마(310)의 매핑 파일(313)의 전술한 설명도 역시 햅틱 테마(320)의 매핑 파일(323)에 적용된다.
도 3의 예시된 실시예에 따르면, 장치(300)는 애그리게이터(330)를 더 포함한다. 실시예에 따르면, (햅틱 테마(310) 및 햅틱 테마(320)를 비롯한) 장치(300)의 각각의 햅틱 테마는 자신을 이용가능한 햅틱 테마로서 애그리게이터(330)에 광고할 수 있다. 애그리게이터(330)는 장치(300)의 각각의 햅틱 테마의 광고에 응답할 수 있다. 일 실시예에서, 애그리게이터(330)는 햅틱 테마를 질의하고 그 햅틱 테마의 매핑 파일 및 하나 이상의 효과 파일을 선택함으로써 햅틱 테마의 광고에 응답할 수 있다. 햅틱 테마를 질의함으로써, 애그리게이터(330)는 장치(300) 내에서 활성 햅틱 테마로서 선택될 햅틱 테마를 제공할 수 있다. 실시예에 따르면, 애그리게이터(330)는 추가로 장치의 모든 햅틱 테마를 질의하고, 이들을 수집(aggregate)할 수 있다. 도 3의 예시된 실시예에서, 애그리게이터(330)는 (햅틱 테마(310) 및 햅틱 테마(320)를 비롯한) 장치(300)의 모든 햅틱 테마를 수집할 수 있다. 장치(300)의 모든 햅틱 테마를 수집함으로써 애그리게이터(330)는 장치(300)의 사용자가 선택할 수 있는 햅틱 테마를 활성 테마로서 제공할 수 있다. 또한, 실시예에 따르면, 애그리게이터(330)는 장치(300)의 모든 햅틱 테마를 동적으로 수집할 수 있다. "동적으로 수집" 이라는 것은 하나 이상의 햅틱 테마가 장치(300)에 추가 또는 그로부터 삭제되는 경우, 애그리게이터(330)가 자신의 질의와 햅틱 테마들의 수집을 동적으로 업데이트하여, 애그리게이터(330)가 항상 장치(300)의 현재 햅틱 테마를 제공할 수 있도록 하는 것을 의미한다.
도 3의 예시된 실시예에 따르면, 장치(300)는 테마 해석기(340)를 더 포함한다. 실시예에 따르면, 테마 해석기(340)는 동적으로 햅틱 테마를 로드하고 그 햅틱 테마를 실시간으로 사용하여 햅틱 피드백을 생성한다. 보다 상세히 말해서, 테마 해석기(340)는 활성 테마로서 선택된 햅틱 테마의 매핑 파일 및 하나 이상의 효과 파일을 질의하고, 매핑 파일로부터 매핑을 그리고 하나 이상의 효과 파일로부터 하나 이상의 햅틱 효과를 검색하고, 매핑 및 하나 이상의 햅틱 테마를 메모리 또는 다른 형태의 데이터 구조체에 저장하여, 매핑 및 하나 이상의 햅틱 테마가 실시간으로 액세스될 수 있도록 한다.
예시된 실시예에서, 테마 해석기(340)는 (햅틱 테마(310) 및 햅틱 테마(320)를 비롯한) 장치(300)의 햅틱 테마들 중에서 선택된 햅틱 테마를 나타내는 로드된 테마(341)를 활성 테마로서 포함한다. 또한 도 3에는 앞에서 규정된 바와 같이 UI 이벤트를 나타내는 UI 이벤트(342), 및 햅틱 효과를 기반으로 생성된 햅틱 피드백을 나타내는 햅틱 피드백(343)이 예시되어 있다. 실시예에 따르면, UI 이벤트(342)가 테마 해석기(340)에 전달될 때, 테마 해석기(340)는 메모리, 또는 다른 데이터 구조체에 저장된 로드된 테마(341)에 액세스하고, UI 이벤트(342)에 매핑된 햅틱 효과를 검색한다. 테마 해석기(340)는 메모리, 또는 다른 데이터 구조체에 저장되어 있는 매핑을 근거로 하여 UI 이벤트(342)에 매핑된 햅틱 효과를 검색한다. 테마 해석기(340)는 검색된 햅틱 효과를 기반으로 햅틱 피드백(343)을 생성하고, 햅틱 피드백(343)을 출력한다.
도 4는 본 발명의 실시예에 따른 햅틱 테마(400)의 예를 예시한다. 보다 상세히 말해서, 도 4는 햅틱 효과 개발자의 관점에서 햅틱 효과 설계 툴 내에 디스플레이되어 있는 햅틱 테마(400)를 예시한다. 일 실시예에서, 햅틱 테마(400)는 도 3에 예시된 햅틱 테마(즉, 햅틱 테마(310) 및 햅틱 테마(320))와 유사하다. 실시예에 따르면, 햅틱 테마(400)는 파일(410, 420, 430, 및 440)을 포함하여 다수의 파일을 포함한다.
파일(410 및 420)은 햅틱 테마(400)의 소프트웨어 레이어의 일부인 예시적인 소프트웨어 레이어 파일들이며, 여기서 소프트웨어 레이어 파일(410)은 소프트웨어 레이어 파일(420)의 확장이다. 앞에서 기술된 바와 같이, 소프트웨어 레이어는 햅틱 테마(400)와 장치의 OS 사이에 통신 프로토콜을 제공한다. 도 4의 예시된 실시예에서, 소프트웨어 레이어 파일(410)의 일부가 햅틱 효과 디자인 툴의 윈도우(450) 내에서 디스플레이된다. 당업자가 쉽게 인식하는 바와 같이, 이것은 단지 소프트웨어 레이어 파일(410)의 예시적인 부분에 불과하며, 그 소프트웨어 레이어 파일(410)은 다른 대안의 실시예에서 다른 내용을 포함할 수 있다.
파일(430)은 햅틱 테마(400)의 예시적인 효과 파일이다. 앞에서 기술한 바와 같이, 효과 파일은 햅틱 효과 디자인 툴을 사용하여 설계된 햅틱 효과의 출력 형태이다. 따라서, 실시예에 따르면, 효과 파일(430)은 UI 이벤트에 매핑될 수 있는 햅틱 효과를 포함한다. 실시예에 따르면, 효과 파일(430)은 실질적으로 햅틱 테마(400) 내에 패키징된다.
파일(440)은 햅틱 테마(400)의 예시적인 매핑 파일이다. 앞에서 기술한 바와 같이, 매핑 파일은 하나 이상의 UI 이벤트에 대한 하나 이상의 햅틱 효과의 매핑을 담고 있는 파일이다. 따라서, 실시예에 따르면, 매핑 파일(440)은 효과 파일(430)에 저장되어 있는 햅틱 효과와 UI 이벤트의 매핑을 포함한다. 실시예에 따르면, 매핑 파일(440)은 실질적으로 햅틱 테마(400) 내에 패키징된다. 도 4의 예시된 실시예에서, 매핑 파일(440)의 일부가 햅틱 효과 디자인 툴의 윈도우(460) 내에 디스플레이된다. 당업자가 쉽게 인식하는 바와 같이, 이것은 단지 매핑 파일(460)의 예시적인 부분에 불과하며, 그 매핑 파일(460)은 다른 대안의 실시예에서 다른 내용을 포함할 수 있다.
도 5는 본 발명의 실시예에 따라 애그리게이터를 기반으로 하여 하나 이상의 햅틱 테마를 디스플레이하는 사용자 인터페이스(500)의 예를 도시한다. 실시예에 따르면, 사용자 인터페이스(500)는 이용가능한 햅틱 테마(즉, 햅틱 테마(510, 520, 530, 540, 550, 및 560))의 목록을 디스플레이하며, 여기서 각 햅틱 테마는 자신의 햅틱 효과들, 및 햅틱 효과들과 UI 이벤트들의 자신의 매핑을 담고 있다. 실시예에 따르면, 도 3과 관련하여 앞에서 기술한 바와 같이, 애그리게이터는 이용가능한 햅틱 테마들의 목록을 디스플레이하는데 활용될 수 있다. 일 실시예에서, 햅틱 테마(510, 520, 530, 540, 550, 및 560)는 도 3에 예시된 햅틱 테마(즉, 햅틱 테마(310) 및 햅틱 테마(320)), 및 일 실시예에서, 도 4에 예시된 햅틱 테마(즉, 햅틱 테마(400))와 유사하다. 사용자는 사용자 인터페이스(500)를 사용하여 햅틱 테마(510, 520, 530, 540, 550, 및 560) 중 하나를 활성 햅틱 테마로서 선택할 수 있다. 일단 사용자가 햅틱 테마(510, 520, 530, 540, 550, 및 560) 중 하나를 활성 햅틱 테마로서 선택하면, 도 3과 관련하여 앞에서 기술한 바와 같이, 활성 햅틱 테마는 UI 이벤트에 응답하여 햅틱 효과와 UI 이벤트의 매핑을 기반으로 햅틱 피드백을 생성하는데 사용된다.
따라서, 본 발명의 일 실시예에서, 햅틱 테마 시스템은 사용자 인터페이스 내에서 하나 이상의 햅틱 테마를 디스플레이할 수 있으며, 여기서 각각의 햅틱 테마는 하나 이상의 햅틱 효과와 매핑 언어를 사용하여 하나 이상의 햅틱 효과를 하나 이상의 UI 이벤트에 매핑시키는 매핑을 포함한다. 그런 다음, 햅틱 테마 시스템은 햅틱 테마의 선택을 수신할 수 있는데, 여기서 햅틱 테마는 사용자 인터페이스에 디스플레이된 하나 이상의 햅틱 테마들 중 하나이다. 선택을 수신하면, 선택된 햅틱 테마는 햅틱 피드백을 생성하는 데 활용할 수 있다. 보다 상세히 말해서, 햅틱 테마 시스템은 UI 이벤트를 수신하고 햅틱 테마의 매핑 내에서 그 UI 이벤트에 매핑된 햅틱 효과를 기반으로 햅틱 피드백을 발생시킬 수 있다.
도 6은 본 발명의 실시예에 따른 햅틱 테마 모듈의 기능의 흐름도를 예시한다. 일 실시예에서, 도 6의 흐름도의 기능, 및 도 8 및 도 10의 흐름도의 기능은 메모리 또는 다른 컴퓨터 판독가능한 매체 또는 유형의 매체에 저장된 소프트웨어에 의해 구현되고, 프로세서에 의해 실행된다. 다른 실시예에서, 각 기능은 (예컨대, 주문형 집적회로("ASIC"), 프로그램가능 게이트 어레이 ("PGA"), 현장 프로그램가능 게이트 어레이("FPGA") 등을 사용하여) 하드웨어, 또는 하드웨어와 소프트웨어의 임의의 조합에 의해 수행될 수 있다.
(610)에서, 하나 이상의 햅틱 효과가 생성된다. 일 실시예에서, 하나 이상의 햅틱 효과는 햅틱 효과 디자인 툴에 의해 생성될 수 있다. 또한, 일 실시예에서, 각 햅틱 효과는 효과 파일 내에 저장된다. 일 실시예에 따르면, 효과 파일은 IVT 파일일 수 있다.
(620)에서, 매핑 언어를 사용하여 하나 이상의 햅틱 효과를 하나 이상의 UI 이벤트에 매핑시키는 매핑이 생성된다. 일 실시예에서, 장치에 대한 하나 이상의 UI 이벤트가 알려져 있으며, 하나 이상의 햅틱 효과들 중 햅틱 효과는 각 UI 이벤트에 매핑될 수 있어서, 장치 내에서 UI 이벤트가 발생할 때, 해당하는 햅틱 효과가 트리거되도록 한다. 일 실시예에서, 매핑은 매핑 언어를 사용하여 생성된다. 또한, 일 실시예에서, 매핑은 매핑 파일 내에 저장된다. 일 실시예에 따르면, 매핑 파일은 XML 파일일 수 있고, 여기서 매핑 언어는 XML 스키마이다.
(630)에서, 매핑 및 하나 이상의 햅틱 효과는 햅틱 테마 내에 패키징된다. 실시예에 따르면, 햅틱 테마는 하나 이상의 햅틱 효과 및 하나 이상의 햅틱 효과와 하나 이상의 UI 이벤트의 매핑을 담고 있는 패키징 구조이다. 일 실시예에 따르면, 햅틱 테마는 장치에 설치될 수 있는 설치가능한 패키지일 수 있다. 다른 실시예에 따르면, 햅틱 테마는 장치의 OS와 통합된 패키지일 수 있다. 일 실시예에서, 햅틱 테마는 또한 햅틱 테마와 그 햅틱 테마가 설치된 장치의 OS 사이에 통신 프로토콜을 제공하는 소프트웨어 레이어를 포함할 수 있다.
(640)에서, 하나 이상의 햅틱 테마가 동적으로 수집된다. 실시예에 따르면, 하나 이상의 햅틱 테마는 장치에 설치된 햅틱 테마일 수 있다. 일 실시예에서, 하나 이상의 햅틱 테마는 생성된 햅틱 테마를 포함한다. 일 실시예에서, 하나 이상의 햅틱 테마를 동적으로 수집하는 것은 장치의 사용자 인터페이스 내에 하나 이상의 햅틱 테마를 제시하는 것을 포함할 수 있다. 본 실시예에서, 사용자는 사용자 인터페이스 내에서 장치의 활성 햅틱 테마로서 제시된 하나 이상의 햅틱 테마 중에서 하나의 햅틱 테마를 선택할 수 있다. 하나 이상의 햅틱 테마는 동적으로 수집되기 때문에, 하나 이상의 햅틱 테마가 장치에 추가되거나 그 장치로부터 삭제되는 경우, 장치의 사용자 인터페이스 내에서 장치에 설치된 현재의 햅틱 테마들이 디스플레이되도록 하나 이상의 햅틱 테마들의 수집은 동적으로 업데이트될 수 있다.
(650)에서, 햅틱 테마가 동적으로 로드되며, 동적으로 로드된 햅틱 테마는 실시간으로 사용되어 햅틱 피드백을 발생시킨다. 실시예에 따르면, 동적으로 로드된 햅틱 테마는 UI 이벤트를 수신한다. 그리고 나서 동적으로 로드된 햅틱 테마는 동적으로 로드된 햅틱 테마의 매핑을 기반으로 UI 이벤트에 매핑된 햅틱 효과를 식별한다. 그 다음 동적으로 로드된 햅틱 테마는 식별된 햅틱 효과를 기반으로 햅틱 피드백을 발생시킨다. 동적으로 로드된 햅틱 테마는 매핑을 기반으로 이러한 모든 동작을 실시간으로 수행할 수 있다.
도 7은 본 발명의 실시예에 따라서 다른 장치(710)에 햅틱 테마 또는 햅틱 테마 컴포넌트를 전달하는 장치(700)의 블록도를 예시한다. 장치(700)는 또한 도 7에서 장치 1로서 식별되며, 장치(710)는 또한 도 7에서 장치 n으로서 식별된다. 도 7의 예시된 실시예는 두 개의 장치를 포함하지만, 대안의 실시예에서는 n개의 장치가 존재할 수 있으며, 여기서 n은 임의의 수이다. 일 실시예에서, 장치(700 및 710)는 도 3의 장치(300)와 유사하다.
도 7에 예시된 바와 같이, 장치(700) 및 장치(710)는 모두 도 7에서 햅틱 테마 1... 햅틱 테마 n으로서 식별된 n개의 햅틱 테마를 포함하며, 여기서 n은 각각의 실시예에 따라 임의의 개수일 수 있다. 추가로 설명하면, 장치(700)의 햅틱 테마 1은 또한 햅틱 테마(720)로 식별되고, 장치(700)의 햅틱 테마 n은 또한 햅틱 테마(730)로 식별되며, 장치(710)의 햅틱 테마 1은 또한 햅틱 테마(740)로 식별되며, 장치(710)의 햅틱 테마 n은 또한 햅틱 테마(750)로 식별된다.
실시예에 따르면, 장치(700)는 햅틱 테마 컴포넌트의 복사본을 장치(710)에 전송함으로써 장치(710)와 햅틱 테마 컴포넌트를 공유할 수 있다. 앞에서 기술한 바와 같이, 햅틱 테마 컴포넌트는 햅틱 테마의 적어도 일부분이다. 일 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과이다. 다른 실시예에서, 햅틱 테마 컴포넌트는 매핑이다. 다른 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과 및 매핑의 조합이다. 따라서, 일 실시예에서, 햅틱 테마가 햅틱 테마(720)인 경우, 햅틱 테마 컴포넌트는 효과 파일(721), 효과 파일(722), 매핑 파일(733), 또는 이들의 어떤 조합일 수 있다.
일 실시예에서, 장치(700)는 햅틱 테마 컴포넌트를 전송하라는 요청을 청취할 수 있다. 실시예에 따르면, 장치(700)는 그 요청을 통신 프로토콜(760)을 통해 청취할 수 있다. 통신 프로토콜(760)은 데이터를 한 장치에서 다른 장치로 전송하도록 하는 당업자에게 공지된 어떤 통신 프로토콜일 수 있다. 몇 가지 예시적인 통신 프로토콜은 블루투스 프로토콜, 이더넷 프로토콜, 광섬유 프로토콜, 근거리 네트워크("LAN") 프로토콜, 무선 LAN 프로토콜, 범용 직렬 버스("UBS") 프로토콜, 또는 다른 유선 전송 프로토콜 또는 무선 전송 프로토콜을 포함한다. 실시예에 따르면, 장치(700)는 통신 프로토콜(760)을 통해 햅틱 테마 컴포넌트를 전송하라는 요청을 수신할 수 있다. 일 실시예에서, 장치(700)는 장치(710)로부터 요청을 수신할 수 있다.
일단 장치(700)가 햅틱 테마 컴포넌트를 전송하라는 요청을 수신하면, 장치(700)는 장치(700)의 적절한 햅틱 테마 내에서 햅틱 테마 컴포넌트를 식별하고, 햅틱 테마 컴포넌트의 복사본을 생성할 수 있다. 예를 들면, 장치(710)가 장치(700)에게 햅틱 테마(720)의 효과 파일(721)을 전송하라고 요청하는 경우, 장치(700)는 효과 파일(721)을 식별하고, 효과 파일(721)의 복사본을 생성할 수 있다. 장치(700)는 후속적으로 통신 프로토콜(760)을 통해 효과 파일(721)의 복사본을 장치(710)에 전송할 수 있다.
일 실시예에서, 일단 장치(710)가 햅틱 테마 컴포넌트의 복사본을 수신하면, 장치(710)는 새로운 햅틱 테마를 생성하고 새로 생성된 햅틱 테마 내에 햅틱 테마 컴포넌트의 복사본을 저장할 수 있다. 전술한 예에서, 장치(710)가 효과 파일(721)의 복사본을 수신할 때, 장치(710)는 장치(710) 내에서 새로운 햅틱 테마를 생성하고, 새로 생성된 햅틱 테마 내에 효과 파일(721)의 복사본을 저장하고, 새로 생성된 햅틱 테마에 대한 매핑 파일을 생성하고, 효과 파일(721)의 복사본 내에 저장된 햅틱 효과를 UI 이벤트에 매핑시킬 수 있다. 일 실시예에서, 효과 파일(721)의 복사본 내에 저장된 햅틱 효과는 효과 파일(721) 내에 저장된 햅틱 효과가 매핑 파일(723) 내에서 매핑되었던 동일 UI 이벤트에 매핑될 수 있다.
다른 실시예에서, 일단 장치(710)가 햅틱 테마 컴포넌트의 복사본을 수신하면, 장치(710)는 기존의 햅틱 테마 내에 햅틱 테마 컴포넌트의 복사본을 저장할 수 있다. 전술한 예에서 장치(710)가 효과 파일(721)의 복사본을 수신할 때, 장치(710)는, 예를 들면, 장치(710) 내에 있는 기존의 햅틱 테마인 햅틱 테마(740) 내에 효과 파일(721)의 복사본을 저장할 수 있다. 실시예에 따르면, 일단 효과 파일(721)의 복사본이 햅틱 테마(740) 내에 저장되면, 매핑 파일(743)은 효과 파일(721)의 복사본에 저장된 햅틱 효과를 UI 이벤트에 매핑시키도록 업데이트될 수 있다. 일 실시예에서, 효과 파일(721)의 복사본에 저장된 햅틱 효과는 효과 파일(721)에 저장된 원래 햅틱 효과가 매핑되었던 동일 UI 이벤트에 매핑될 수 있다.
일 실시예에서, 장치(710)는 장치(700)가 햅틱 컴포넌트가 아닌 전체 햅틱 테마를 전달하라고 요청할 수 있다. 본 실시예에서, 장치(700)는 장치(700)의 햅틱 테마를 식별하고, 모든 효과 파일들 및 햅틱 테마의 매핑 파일을 포함하는 햅틱 테마의 복사본을 생성할 수 있다. 예를 들어, 장치(710)가 장치(700)에게 햅틱 테마(720)를 전달하라고 요청하면, 장치(700)는 햅틱 테마(720)를 식별하고 햅틱 테마(720)의 복사본을 생성할 수 있다. 장치(700)는 후속적으로 통신 프로토콜(760)을 통해 햅틱 테마(720)의 복사본을 장치(710)에 전송할 수 있다.
장치(700)가 햅틱 테마의 복사본을 장치(710)에 전송하는 일 실시예에서, 장치(710)는 장치(710) 내에서 햅틱 테마의 복사본을 새로운 햅틱 테마로 저장할 수 있다. 전술한 예에서, 장치(710)는 장치(710) 내에서 새로운 햅틱 테마로서 햅틱 테마(720)의 복사본을 저장할 수 있으며(도 7에서는 도시되지 않음), 여기서 새로운 햅틱 테마는 장치(700)의 원본 햅틱 테마(즉, 햅틱 테마(720))의 모든 효과 파일 및 매핑 파일을 포함한다. 장치(700)가 햅틱 테마의 복사본을 장치(710)에 전송하는 대안의 실시예에서, 장치(710)는 기존의 햅틱 테마 내에 햅틱 테마의 복사본을 저장할 수 있다. 본 실시예에서, 장치(710)는 장치(710) 내의 기존의 햅틱 테마의 모든 효과 파일 및 매핑 파일을 오버라이트(overwrite)할 수 있으며 이들을 햅틱 테마의 복사본의 효과 파일 및 매핑 파일로 대체할 수 있다. 전술한 예에서, 장치(710)는 예를 들면, 효과 파일(741 및 742) 및 매핑 파일(743)을 오버라이트하고, 이들을 효과 파일(721 및 722), 및 매핑 파일(723)로 대체함으로써, 햅틱 테마(740) 내에 햅틱 테마(720)의 복사본을 저장할 수 있다.
도 8은 본 발명의 실시예에 따른 햅틱 테마 모듈의 기능의 다른 흐름도를 예시한다. 일 실시예에서, 도 8에 도시된 흐름의 시작에서, 도 6에 예시된 흐름이 수행되었으며, 적어도 하나의 햅틱 테마가 생성되었다. (810)에서, 햅틱 테마 컴포넌트를 전달하라는 요청이 통신 프로토콜을 통해 청취된다. 일 실시예에서, 햅틱 테마 컴포넌트는 햅틱 테마의 적어도 일부분을 포함한다. (820)에서, 햅틱 테마 컴포넌트를 전달하라는 요청은 통신 프로토콜을 통해 수신된다. (830)에서, 햅틱 테마 컴포넌트의 복사본이 생성된다. (840)에서, 햅틱 테마 컴포넌트의 복사본이 통신 프로토콜을 통해 전송된다. 일 실시예에서, 통신 프로토콜은 블루투스 프로토콜, 이더넷 프로토콜, 광섬유 프로토콜, LAN 프로토콜, 무선 LAN 프로토콜, 및 UBS 프로토콜 중 하나이다.
일 실시예에서, 햅틱 테마 컴포넌트를 전달하라는 요청이 장치로부터 수신되고, 햅틱 테마 컴포넌트의 복사본이 장치에 전송된다. 일 실시예에서, 햅틱 테마 컴포넌트의 복사본이 장치에 전송되는 경우, 장치는 새로운 햅틱 테마를 생성하고 새로 생성된 햅틱 테마 내에 햅틱 테마 컴포넌트의 복사본을 저장한다. 다른 실시예에서, 햅틱 테마 컴포넌트의 복사본이 장치에 전송되는 경우, 장치는 장치의 기존의 햅틱 테마 내에 햅틱 테마 컴포넌트의 복사본을 저장한다.
일 실시예에서, 장치로부터 수신한 요청은 햅틱 테마를 전달하라는 요청이며, 햅틱 테마는 장치에 전송된다. 일 실시예에서, 햅틱 테마의 복사본이 장치에 전송되는 경우, 장치는 햅틱 테마의 복사본을 새로운 햅틱 테마로서 저장한다. 다른 실시예에서, 햅틱 테마의 복사본이 장치에 전송되는 경우, 장치는 햅틱 테마의 복사본을 장치의 기존의 햅틱 테마로서 저장한다.
도 9는 하나 이상의 물리적 특성을 분석 및 캡처하고 하나 이상의 물리적 특성을 장치(900) 내 햅틱 테마 컴포넌트로 변환하는 장치(900)의 블록도를 예시한다. 장치(900)는 또한 도 9에서 장치 1로서 식별된다. 일 실시예에서, 장치(900)는 도 3의 장치(300)와 유사하다.
도 9에 예시된 바와 같이, 장치(900)는 도 9에서 햅틱 테마 1 ... 햅틱 테마 n으로서 식별된 n개의 햅틱 테마를 포함하며, 여기서 n은 각각의 실시예에 따라 임의의 수일 수 있다. 추가로 설명하자면, 장치(900)의 햅틱 테마 1은 또한 햅틱 테마(920)로 식별되며, 장치(900)의 햅틱 테마 n은 또한 햅틱 테마(930)로 식별된다.
도 9는 또한 장치/표면(910)을 포함한다. 일 실시예에서, 장치/표면(910)은 하나 이상의 물리적 특성을 포함하는 작용을 발생시킬 수 있는 장치이다. 이러한 장치의 예는 전화기 또는 모바일 폰을 포함하며, 이러한 장치에서 하나 이상의 물리적 특성은 장치/표면(910)에 의해 발생되는 진동이라는 하나 이상의 물리적 특성을 포함할 수 있다. 일 실시예에서, 장치/표면(910)은 도 3의 장치(300)와 유사한 장치이다. 다른 실시예에서, 장치/표면(910)은 하나 이상의 물리적 특성을 포함하는 표면이다. 이러한 표면의 예로는 목재 표면, 화강암 표면, 금속 표면, 및 직물 표면을 포함하며, 이 표면에서 물리적 특성은 질감, 표면적, 마찰, 또는 다른 유형의 물리적 특성을 포함할 수 있다.
일 실시예에서, 장치(900)는 장치/표면(910)의 하나 이상의 물리적 특성을 캡처할 수 있다. 다른 실시예에서, 장치(900)는 장치/표면(910)에 의해 발생된 작용의 하나 이상의 물리적 특성을 캡처할 수 있다. 실시예에 따르면, 장치(900)는 하나 이상의 물리적 특성과 같은 자극을 검출 및 캡처하도록 구성된 하나 이상의 센서를 포함한다. 일 실시예에서, 하나 이상의 센서는 가속도계이다. 당업자에게 이해되는 바와 같이, 가속도계는 가속의 변화와 같은 하나 이상의 물리적 특성을 검출 및 캡처하도록 구성될 수 있다. 일 실시예에서, 장치(900)는 장치/표면(910)의 하나 이상의 물리적 특성, 또는 감지 프로토콜(940)을 통하여 장치/표면(910)에 의해 발생된 작용의 하나 이상의 물리적 특성을 캡처할 수 있다. 일 실시예에서, 감지 프로토콜(940)은 가속도계 기반의 프로토콜일 수 있다. 다른 실시예에서, 감지 프로토콜(940)은 당업자에게 공지된 다른 형태의 감지 프로토콜일 수 있다.
실시예에 따르면, 장치(900)는 캡처한 하나 이상의 물리적 특성을 분석할 수 있다. 하나 이상의 물리적 특성의 분석은 하나 이상의 물리적 특성에 기반한 하나 이상의 햅틱 파라미터의 생성을 포함할 수 있다. 당업자에 의해 쉽게 인식되는 바와 같이, 햅틱 파라미터는 압력, 빈도, 지속기간, 및 진폭(즉, 세기)과 같은 햅틱 효과 품질의 양이다. 햅틱 효과는 하나 이상의 햅틱 파라미터로 구성될 수 있다.
실시예에 따르면, 장치(900)는 하나 이상의 물리적 특성을 분석함으로써 생성된 하나 이상의 햅틱 파라미터를 햅틱 테마 컴포넌트로 변환할 수 있다. 앞에서 기술한 바와 같이, 햅틱 테마 컴포넌트는 햅틱 테마의 적어도 일부분이다. 일 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과이다. 다른 실시예에서, 햅틱 테마 컴포넌트는 매핑이다. 또 다른 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과 및 매핑의 조합이다. 따라서, 일 실시예에서, 햅틱 테마가 햅틱 테마(920)인 경우, 햅틱 테마 컴포넌트는 효과 파일(921), 효과 파일(922), 매핑 파일(933), 또는 이들의 어떤 조합이 될 수 있다. 실시예에 따르면, 변환은 하나 이상의 햅틱 파라미터를 기반으로 햅틱 효과를 생성하는 것을 포함할 수 있다. 일 실시예에서, 변환은 햅틱 효과를 UI 이벤트에 매핑시키는 매핑을 생성하는 것을 더 포함할 수 있다.
도 10은 본 발명의 실시예에 따른 햅틱 테마 모듈의 기능의 또 다른 흐름도를 예시한다. 일 실시예에서, 도 10에 예시된 흐름의 시작에서, 도 6에서 예시된 흐름이 수행되었으며, 적어도 하나의 햅틱 테마가 생성되었다. (1010)에서, 하나 이상의 물리적 특성이 감지 프로토콜을 통해 캡처된다. 일 실시예에서, 하나 이상의 물리적 특성은 개체의 하나 이상의 물리적 특성을 포함한다. 이러한 개체의 예는 목재 표면, 돌 표면, 금속 표면, 또는 직물 표면을 포함한다. 다른 실시예에서, 하나 이상의 물리적 특성은 장치에 의해 발생된 작용의 하나 이상의 물리적 특성을 포함할 수 있다. 이러한 작용의 예는 장치의 진동이다. 일 실시예에서, 감지 프로토콜은 가속도계 기반의 프로토콜이다.
(1020)에서, 하나 이상의 물리적 특성이 분석되고 하나 이상의 물리적 특성을 기반으로 하나 이상의 햅틱 파라미터가 생성된다. 일 실시예에서, 하나 이상의 햅틱 파라미터를 생성하기 위해 하나 이상의 물리적 특성의 햅틱 품질이 분석된다. 따라서, 하나 이상의 햅틱 파라미터는 하나 이상의 물리적 특성의 햅틱 품질을 나타낸다.
(1030)에서, 하나 이상의 햅틱 파라미터는 햅틱 테마 컴포넌트로 변환된다. 일 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과이다. 다른 실시예에서, 햅틱 테마 컴포넌트는 매핑이다. 또 다른 실시예에서, 햅틱 테마 컴포넌트는 햅틱 효과 및 매핑의 조합이다. 일 실시예에서, 변환은 하나 이상의 햅틱 파라미터를 기반으로 햅틱 효과를 생성하는 것을 포함할 수 있다. 또 다른 실시예에서, 변환은 햅틱 효과를 UI 이벤트에 매핑시키는 매핑을 생성하는 것을 더 포함할 수 있다.
(1040)에서, 햅틱 테마 컴포넌트가 저장된다. 일 실시예에서, 햅틱 테마 컴포넌트는 새로 생성된 햅틱 테마 내에 저장된다. 다른 실시예에서, 햅틱 테마 컴포넌트는 기존의 햅틱 테마 내에 저장된다.
따라서, 실시예에 따르면, 햅틱 테마 시스템은 일련의 맞춤-정의된 (custom-defined) 햅틱 효과를 햅틱 테마 내에 캡슐화할 수 있고, 각각의 햅틱 효과는 UI 이벤트에 매핑될 수 있다. 그런 다음 햅틱 테마는 장치에 임포트(import), 익스포트(export), 또는 설치될 수 있고, 그럼으로써 사용자가 하나 이상의 UI 이벤트를 기반으로 장치에 의해 발생될 수 있는 일련의 햅틱 효과들을 커스터마이즈하는 것을 허용할 수 있다. 이것은 장치가 발매되고 사용자에게 판매된 이후에라도 OEM 업체 이외의 햅틱 효과 개발자뿐만 아니라, 장치 사용자가 장치에 대한 햅틱 효과를 개발하고 커스터마이즈하도록 허용할 수 있다.
본 명세서 전체에서 기술된 본 발명의 특징, 구조, 또는 특성은 하나 이상의 실시예에 적합한 어떤 방식으로 조합할 수 있다. 예를 들어, "일 실시예", "일부 실시예들", "특정 실시예", "특정 실시예들", 또는 다른 유사한 언어의 사용은 명세서 전체에서 실시예와 관련하여 기술된 특정한 특징, 구조, 또는 특성이 본 발명의 적어도 하나의 실시예에 포함될 수 있다는 사실을 말하는 것이다. 그러므로, 본 명세서에 걸친 "일 실시예", "일부 실시예들", "특정 실시예", "특정 실시예들", 또는 다른 유사한 언어의 출현은 모두 반드시 실시예들의 동일한 그룹을 지칭하는 것이 아니며, 기술된 특징, 구조, 또는 특성은 하나 이상의 실시예에서 임의의 적합한 방식으로 조합될 수 있다.
당업자라면 전술한 본 발명은 다른 순서의 단계에 따라 및/또는 기술된 바와 상이한 구성의 요소들을 이용하여 실시될 수 있다는 것을 용이하게 이해할 것이다. 그러므로, 본 발명이 이러한 바람직한 실시예를 기반으로 기술되었지만, 당업자에게는 여전히 본 발명의 정신과 범주 내에 있으면서도 특정한 변형, 변경 및 대안의 구성이 자명하다는 사실이 명백할 것이다. 따라서, 본 발명의 경계와 범위를 결정하기 위하여, 첨부의 청구범위를 참조하여야 한다.

Claims (1)

  1. 프로세서에 의해 실행될 때, 상기 프로세서가 햅틱 테마를 생성하도록 하는 명령어들이 저장되어 있는 컴퓨터 판독가능 매체로서, 상기 명령어들은,
    하나 이상의 햅틱 효과를 생성하는 것;
    매핑 언어를 사용하여 상기 하나 이상의 햅틱 효과를 하나 이상의 사용자 인터페이스 이벤트에 매핑시키는 매핑을 생성하는 것; 및
    상기 매핑 및 상기 하나 이상의 햅틱 효과를 상기 햅틱 테마 내에 패키징하는 것
    을 포함하는 컴퓨터 판독가능 매체.
KR1020190051555A 2011-06-20 2019-05-02 햅틱 테마 프레임워크 KR20190050754A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/164,182 US10191546B2 (en) 2011-06-20 2011-06-20 Haptic theme framework
US13/164,182 2011-06-20

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020120065147A Division KR101976728B1 (ko) 2011-06-20 2012-06-18 햅틱 테마 프레임워크

Publications (1)

Publication Number Publication Date
KR20190050754A true KR20190050754A (ko) 2019-05-13

Family

ID=46146681

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020120065147A KR101976728B1 (ko) 2011-06-20 2012-06-18 햅틱 테마 프레임워크
KR1020190051555A KR20190050754A (ko) 2011-06-20 2019-05-02 햅틱 테마 프레임워크

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020120065147A KR101976728B1 (ko) 2011-06-20 2012-06-18 햅틱 테마 프레임워크

Country Status (5)

Country Link
US (2) US10191546B2 (ko)
EP (2) EP2538304B1 (ko)
JP (3) JP6072441B2 (ko)
KR (2) KR101976728B1 (ko)
CN (2) CN102841680B (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160139671A1 (en) * 2013-01-15 2016-05-19 Samsung Electronics Co., Ltd. Method for providing haptic effect in electronic device, machine-readable storage medium, and electronic device
KR102035305B1 (ko) * 2013-01-15 2019-11-18 삼성전자주식회사 휴대 단말에서 햅틱 효과를 제공하는 방법 및 기계로 읽을 수 있는 저장 매체 및 휴대 단말
US9098984B2 (en) * 2013-03-14 2015-08-04 Immersion Corporation Haptic effects broadcasting during a group event
JP6667987B2 (ja) 2013-09-06 2020-03-18 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 触覚フィードバックを提供するための制御トラックを変換する方法及び装置
US9965034B2 (en) * 2013-12-30 2018-05-08 Immersion Corporation Systems and methods for a haptically-enabled projected user interface
KR20150110356A (ko) * 2014-03-21 2015-10-02 임머숀 코퍼레이션 센서의 데이터를 햅틱 효과들로 변환하는 시스템들 및 방법들
JP2016045848A (ja) 2014-08-26 2016-04-04 任天堂株式会社 情報処理装置、情報処理システム、情報処理プログラム及び情報処理方法
JP6357387B2 (ja) 2014-08-26 2018-07-11 任天堂株式会社 情報処理装置、情報処理システム、情報処理プログラム及び情報処理方法
JP6441612B2 (ja) * 2014-08-26 2018-12-19 任天堂株式会社 情報処理装置、情報処理システム、情報処理プログラム及び情報処理方法
US9880627B2 (en) * 2015-12-15 2018-01-30 Immersion Corporation Automated haptic setting generation
CN107291434A (zh) * 2016-04-05 2017-10-24 希姆通信息技术（上海）有限公司 电子设备及变更其主题界面的方法
DK201670720A1 (en) * 2016-09-06 2018-03-26 Apple Inc Devices, Methods, and Graphical User Interfaces for Generating Tactile Outputs
US10976820B2 (en) * 2018-07-12 2021-04-13 Microsoft Technology Licensing, Llc Natural interactions with virtual objects and data through touch
JP2020046714A (ja) * 2018-09-14 2020-03-26 コニカミノルタ株式会社 表示装置および表示装置の制御プログラム
WO2020059758A1 (ja) * 2018-09-20 2020-03-26 日本電産株式会社 コンテンツ再生装置、触覚振動発生方法、コンピュータプログラム、触覚振動データ配信システム、及び触覚振動提供装置
CN110244838A (zh) * 2019-05-09 2019-09-17 瑞声科技(新加坡)有限公司 一种马达驱动信号的生成方法、电子设备及存储介质
CN112596837A (zh) * 2020-12-24 2021-04-02 瑞声新能源发展(常州)有限公司科教城分公司 移动终端主题的更换方法、装置及可读存储介质

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6028593A (en) * 1995-12-01 2000-02-22 Immersion Corporation Method and apparatus for providing simulated physical interactions within computer generated environments
US6411276B1 (en) * 1996-11-13 2002-06-25 Immersion Corporation Hybrid control of haptic feedback for host computer and interface device
US5905492A (en) * 1996-12-06 1999-05-18 Microsoft Corporation Dynamically updating themes for an operating system shell
US6448977B1 (en) * 1997-11-14 2002-09-10 Immersion Corporation Textures and other spatial sensations for a relative haptic interface device
US6424356B2 (en) 1999-05-05 2002-07-23 Immersion Corporation Command of force sensations in a forceback system using force effect suites
US7050955B1 (en) * 1999-10-01 2006-05-23 Immersion Corporation System, method and data structure for simulated interaction with graphical objects
EP1334427A2 (en) * 2000-04-19 2003-08-13 Koninklijke Philips Electronics N.V. Method and apparatus for adapting a graphical user interface
US6831970B1 (en) * 2000-09-21 2004-12-14 International Business Machines Corporation Method and system for remote activation of a telephone profile
US7093198B1 (en) * 2001-08-16 2006-08-15 Nokia Corporation Skins for mobile communication devices
CN102609088B (zh) * 2001-11-01 2015-12-16 意美森公司 用于提供触感的方法和系统
US7610352B2 (en) * 2002-09-09 2009-10-27 Meca Communications, Inc. Sharing skins
DE10245354A1 (de) * 2002-09-27 2004-04-08 Philips Intellectual Property & Standards Gmbh Fernsteuerung
EP1416359A1 (en) * 2002-10-31 2004-05-06 Sony International (Europe) GmbH Method for operating a haptic interface unit
AU2003296334A1 (en) * 2002-12-08 2004-06-30 Immersion Corporation Haptic communication devices
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
WO2005085981A1 (en) * 2004-02-03 2005-09-15 Nokia Corporation Method and device for implementing vibration output commands in mobile terminal devices
US7765333B2 (en) * 2004-07-15 2010-07-27 Immersion Corporation System and method for ordering haptic effects
KR100641907B1 (ko) * 2004-08-09 2006-11-02 금호전기주식회사 냉음극형광램프용 조명장치
US8352853B2 (en) * 2005-06-30 2013-01-08 Motorola Mobility Llc Composer circuit and method for encoding device independent multi-modal content
JP4302698B2 (ja) 2006-02-10 2009-07-29 ソフトバンクモバイル株式会社 情報通信端末
US20070283273A1 (en) * 2005-10-24 2007-12-06 Woods Michael E System, Method, and Computer Program Product for Internet Tool
US8000825B2 (en) * 2006-04-13 2011-08-16 Immersion Corporation System and method for automatically producing haptic events from a digital audio file
JP4280759B2 (ja) 2006-07-27 2009-06-17 キヤノン株式会社 情報処理装置およびユーザインタフェース制御方法
KR20060131829A (ko) * 2006-08-02 2006-12-20 노키아 코포레이션 모바일 단말 기기들에서 진동 출력 명령을 구현하는 방법및 장치
US20080092057A1 (en) * 2006-10-05 2008-04-17 Instrinsyc Software International, Inc Framework for creation of user interfaces for electronic devices
EP1936929A1 (en) * 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
US20080163282A1 (en) * 2006-12-29 2008-07-03 Nokia Corporation Apparatus and system for multimedia meditation
EP2040445B1 (en) * 2007-01-26 2010-12-01 Research In Motion Limited System and method for previewing themes
KR100860412B1 (ko) 2007-02-02 2008-09-26 한국전자통신연구원 촉각체험 서비스 방법 및 그 시스템
KR100835297B1 (ko) * 2007-03-02 2008-06-05 광주과학기술원 촉감 정보 표현을 위한 노드 구조 및 이를 이용한 촉감정보 전송 방법과 시스템
US7801569B1 (en) * 2007-03-22 2010-09-21 At&T Intellectual Property I, L.P. Mobile communications device with distinctive vibration modes
US8621348B2 (en) * 2007-05-25 2013-12-31 Immersion Corporation Customizing haptic effects on an end user device
US8031172B2 (en) * 2007-10-12 2011-10-04 Immersion Corporation Method and apparatus for wearable remote interface device
JP2009140105A (ja) * 2007-12-04 2009-06-25 Nippon Hoso Kyokai <Nhk> 触覚提示装置及び触覚提示方法
US8515397B2 (en) * 2007-12-24 2013-08-20 Qualcomm Incorporation Time and location based theme of mobile telephones
US7486273B1 (en) * 2008-02-12 2009-02-03 Novint Technologies, Inc. Communications in a system comprising a computer and a haptic interface device
US20090313550A1 (en) * 2008-06-17 2009-12-17 Microsoft Corporation Theme Based Content Interaction
EP2313820B1 (en) * 2008-07-15 2017-04-05 Immersion Corporation Systems and methods for physics-based tactile messaging
CN101408822B (zh) * 2008-11-13 2012-01-11 宇龙计算机通信科技(深圳)有限公司 一种解锁方法、系统及内置解锁系统的移动终端
US8004391B2 (en) * 2008-11-19 2011-08-23 Immersion Corporation Method and apparatus for generating mood-based haptic feedback
US8686952B2 (en) * 2008-12-23 2014-04-01 Apple Inc. Multi touch with multi haptics
CN101770283B (zh) * 2009-01-05 2012-10-10 联想(北京)有限公司 一种对触控操作生成反馈特效的方法和计算机
US8378979B2 (en) * 2009-01-27 2013-02-19 Amazon Technologies, Inc. Electronic device with haptic feedback
US10007340B2 (en) * 2009-03-12 2018-06-26 Immersion Corporation Systems and methods for interfaces featuring surface-based haptic effects
CN101534348A (zh) * 2009-04-16 2009-09-16 中兴通讯股份有限公司 一种切换主题模式的方法及移动终端
US20110010433A1 (en) * 2009-07-10 2011-01-13 Microsoft Corporation Targeted presentation and delivery of themes
US9317116B2 (en) 2009-09-09 2016-04-19 Immersion Corporation Systems and methods for haptically-enhanced text interfaces
JP5623054B2 (ja) 2009-10-08 2014-11-12 京セラ株式会社 入力装置
US8902050B2 (en) * 2009-10-29 2014-12-02 Immersion Corporation Systems and methods for haptic augmentation of voice-to-text conversion
KR101640043B1 (ko) * 2010-04-14 2016-07-15 삼성전자주식회사 가상 세계 처리 장치 및 방법
US10996774B2 (en) * 2010-04-30 2021-05-04 Nokia Technologies Oy Method and apparatus for providing interoperability between devices
US8332752B2 (en) * 2010-06-18 2012-12-11 Microsoft Corporation Techniques to dynamically modify themes based on messaging
US8824704B2 (en) * 2011-03-14 2014-09-02 Nokia Corporation Surface texture recording with microphone
WO2012135373A2 (en) * 2011-04-01 2012-10-04 Analog Devices, Inc. A dedicated user interface controller for feedback responses
KR101678455B1 (ko) * 2015-10-14 2016-11-23 한국과학기술연구원 질감인지공간을 이용한 햅틱 속성 적용 장치 및 방법

Also Published As

Publication number Publication date
CN102841680B (zh) 2017-08-08
US10191546B2 (en) 2019-01-29
EP2538304A1 (en) 2012-12-26
JP2017059263A (ja) 2017-03-23
JP6291023B2 (ja) 2018-03-14
CN107450728A (zh) 2017-12-08
JP6072441B2 (ja) 2017-02-01
EP3093735A1 (en) 2016-11-16
JP2013004104A (ja) 2013-01-07
EP2538304B1 (en) 2016-07-06
US20190146587A1 (en) 2019-05-16
JP2018085148A (ja) 2018-05-31
KR20120140207A (ko) 2012-12-28
KR101976728B1 (ko) 2019-05-10
US20120319938A1 (en) 2012-12-20
CN102841680A (zh) 2012-12-26

Similar Documents

Publication Publication Date Title
KR20190050754A (ko) 햅틱 테마 프레임워크
WO2019149218A1 (zh) 查看历史使用文件的方法、装置及终端
RU2674434C2 (ru) Фото- и/или видеоанимация на основе метаданных
KR102481065B1 (ko) 애플리케이션 기능 구현 방법 및 전자 디바이스
US20130227409A1 (en) Integrating sensation functionalities into social networking services and applications
CN108874496B (zh) 应用管理方法、装置、终端、服务器及存储介质
JP2016212922A (ja) 感覚強化メッセージング
AU2011358860A1 (en) Operating method of terminal based on multiple inputs and portable terminal supporting the same
CN110362762B (zh) 内容数据展示方法、装置、电子设备及存储介质
CN101960485A (zh) 多情境图形处理
CN108959361B (zh) 表单管理的方法和装置
CN110532764A (zh) 一种权限处理的方法、移动终端及可读存储介质
CN113018868B (zh) 云游戏登录方法、装置和系统
CN112865956A (zh) 证书更新方法、装置、终端设备和服务器
JP2022521720A (ja) ミニプログラム作成方法、装置、端末及びプログラム
CN110995842A (zh) 业务数据下载方法、装置、设备及存储介质
CN106682189B (zh) 文件名显示方法及装置
CN112181442B (zh) 卸载页面显示方法、装置、终端、服务器及存储介质
CN116594616A (zh) 一种组件配置方法、装置及计算机可读存储介质
CA2945505C (en) Electronic device and method of searching data records
CN110390065B (zh) 网页获取方法、装置及系统
CN112148499A (zh) 数据上报方法、装置、计算机设备及介质
CN112087366B (zh) 账号管理方法、装置和即时通信系统
CN114153487A (zh) 数据配置方法、装置、终端及存储介质
CN115509408A (zh) 展示页面的显示方法、装置、设备及存储介质

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application