KR20150028733A - 자동 원격 감지 및 햅틱 변환 시스템 - Google Patents

자동 원격 감지 및 햅틱 변환 시스템 Download PDF

Info

Publication number
KR20150028733A
KR20150028733A KR20140116720A KR20140116720A KR20150028733A KR 20150028733 A KR20150028733 A KR 20150028733A KR 20140116720 A KR20140116720 A KR 20140116720A KR 20140116720 A KR20140116720 A KR 20140116720A KR 20150028733 A KR20150028733 A KR 20150028733A
Authority
KR
South Korea
Prior art keywords
haptic
input
signals
parameter
automatic
Prior art date
Application number
KR20140116720A
Other languages
English (en)
Inventor
아마야 벡바 웨들
데니 그랜트
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20150028733A publication Critical patent/KR20150028733A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환하는 시스템이 제공되어 있다. 이 시스템은 입력을 거의 실시간으로 감지한다. 이 시스템은 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환한다. 이 시스템은 하나 이상의 햅틱 신호들에 기초하여 하나 이상의 햅틱 효과들을 발생시킨다.

Description

자동 원격 감지 및 햅틱 변환 시스템{AUTOMATIC REMOTE SENSING AND HAPTIC CONVERSION SYSTEM}
하나의 실시예는 일반적으로 디바이스에 관한 것이며, 보다 상세하게는, 햅틱 효과들을 생성하는 디바이스에 관한 것이다.
햅틱은 힘, 진동 및 움직임과 같은 햅틱 피드백 효과들(즉, "햅틱 효과들")을 사용자에게 가함으로써 사용자의 촉감(sense of touch)을 이용하는 촉각 및 힘 피드백 기술이다. 모바일 디바이스, 터치스크린 디바이스, 및 개인용 컴퓨터와 같은 디바이스들이 햅틱 효과들을 발생시키도록 구성될 수 있다. 일반적으로, 햅틱 효과들을 발생시킬 수 있는 내장된 하드웨어(액추에이터 등)에 대한 호출이 디바이스의 운영 체제(OS) 내에 프로그램되어 있을 수 있다. 이들 호출은 어느 햅틱 효과를 재생할지를 명시한다. 예를 들어, 사용자가, 예를 들어, 버튼, 터치스크린, 레버, 조이스틱, 휘일, 또는 어떤 다른 컨트롤을 사용하여 디바이스와 상호작용할 때, 디바이스의 OS는 제어 회로를 통해 내장된 하드웨어로 재생 명령을 송신할 수 있다. 내장된 하드웨어는 이어서 적절한 햅틱 효과를 생성한다.
햅틱 효과들이 다른 콘텐츠 내에 포함되도록, 디바이스들이 오디오와 같은 다른 콘텐츠의 출력과 함께 햅틱 효과들의 출력을 조정하도록 구성되어 있을 수 있다. 예를 들어, 게임 상황에서, 게임이 개발될 때, 오디오 효과 개발자는 게임과 연관되어 있고 기관총 사격, 폭발, 또는 자동차 충돌과 같은 게임 내에서 일어나는 행위를 표현하는 오디오 효과들을 개발할 수 있다. 다른 상황에서, 오디오 입력 또는 다른 유형들의 실세계 입력이 마이크 또는 다른 유형의 센서에 의해 포착될 수 있다. 햅틱 효과 개발자는 그 후에 디바이스에 대한 햅틱 효과를 제작할 수 있고, 디바이스는 다른 콘텐츠와 함께 햅틱 효과를 출력하도록 구성되어 있을 수 있다. 그렇지만, 이러한 프로세스는 일반적으로 순간적이지 않은데, 그 이유는 그 프로세스가 햅틱 효과 개발자가 오디오 입력 또는 다른 입력을 분석하고 오디오 입력 또는 다른 입력과 함께 조정될 수 있는 적절한 햅틱 효과를 제작할 기간을 필요로 하기 때문이다.
하나의 실시예는 입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환할 수 있는 시스템이다. 이 시스템은 입력을 거의 실시간으로 감지할 수 있다. 이 시스템은 또한 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환할 수 있다. 이 시스템은 또한 하나 이상의 햅틱 신호들에 기초하여 하나 이상의 햅틱 효과들을 발생시킬 수 있다.
추가의 실시예, 상세, 장점 및 수정이, 첨부 도면과 관련하여 기술되어 있는 바람직한 실시예의 이하의 상세한 설명으로부터 명백하게 될 것이다.
도 1은 본 발명의 하나의 실시예에 따른 시스템의 블록도.
도 2는 본 발명의 일 실시예에 따른, 입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환하는 시스템의 블록도.
도 3은 본 발명의 하나의 실시예에 따른, 자동 햅틱 변환 모듈의 기능의 흐름도.
하나의 실시예는 마이크 또는 카메라, 또는 마이크들 또는 카메라들의 어레이와 같은 센서에 의해 원격 위치에서 감지되어 햅틱 디바이스로 무선으로 전송될 수 있는 오디오 신호와 같은 입력으로부터 변환된 햅틱 피드백을 전달하는 햅틱 디바이스를 포함할 수 있는 시스템이다. 햅틱 피드백이, 거의 실시간으로 입력에 기초하여 발생되어 전송되는 햅틱 효과들을 전달하도록 프로그램될 수 있는 액추에이터 또는 한 세트의 액추에이터들과 같은 햅틱 출력 디바이스 또는 한 세트의 햅틱 출력 디바이스들에 의해, 햅틱 디바이스 내로 출력될 수 있다. 보다 구체적으로는, 이 시스템은 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 변환할 수 있고, 이 시스템은 또한 하나 이상의 햅틱 효과들을 발생시키기 위해 하나 이상의 햅틱 신호들을 햅틱 출력 디바이스(들)로 송신할 수 있다. 하나의 실시예에서, 센서는 입력의 특정의 주파수 대역들, 특징들, 또는 다른 특성들만을 필터링 제거하여 햅틱 디바이스로 전달하도록 구성되어 있을 수 있다. 게다가, 이 실시예에 따르면, 햅틱 디바이스 내의 햅틱 출력 디바이스(들)은 입력의 상이한 주파수 대역들, 특징들, 또는 다른 특성들을 추출하도록 조정될 수 있어, 사용자의 주의를 조절하는 방식으로 햅틱 피드백을 제어 및/또는 향상시킬 수 있다. 이와 같이, 사용자는 원격 위치에서 감지되는 입력의 특정의 주파수 대역들, 특징들, 또는 다른 특성들을 강조하는 햅틱 피드백을 경험할 수 있다. 일 실시예에서, 햅틱 디바이스는 웨어러블 햅틱 디바이스일 수 있다.
당업자라면 잘 알 것인 바와 같이, 통신 및 컴퓨팅에서의 "거의 실시간"은 자동화된 데이터 처리 또는 네트워크 전송에 의해 유입되는 시간 지연을 말한다. 이와 같이, 입력이 시스템에 의해 거의 실시간으로 감지되는 실시예에서, 입력이 원격 소스에 의해 발생될 때, 입력을 감지하는 것과 연관되어 있는 임의의 시간 지연이 더 걸려, 입력이 감지된다. 게다가, 시스템이 감지된 입력에 기초하여 거의 실시간으로 하나 이상의 햅틱 효과들을 발생시키는 실시예에서, 시스템은, 감지된 입력이 시스템에 의해 수신될 때, 감지된 입력을 하나 이상의 햅틱 신호들로 변환하는 것과 연관되어 있는 임의의 시간 지연이 더 걸려, 감지된 입력을 하나 이상의 햅틱 효과들을 발생시키는 데 사용되는 하나 이상의 햅틱 신호들로 변환할 수 있다. 특정의 실시예에서, 어떤 시간 지연도 없을 수 있고, 따라서, 이 실시예들에서는, "거의 실시간"이 "실시간"과 똑같을 수 있다.
이러한 시스템은 본 발명의 특정의 실시예들에 따른 몇가지 응용 분야들을 가질 수 있다. 예를 들어, 이 시스템이 특정의 청각 신호들, 비디오 신호들, 또는 다른 유형의 감지된 입력과 같은 특정의 입력의 스텔스 원격 모니터링(stealth remote monitoring)을 거의 실시간으로 가능하게 할 수 있는 군사 시나리오에서 이 시스템이 이용될 수 있고, 여기서 이 시스템은 햅틱 출력을 사용하여 원격 위치에서의 특정의 이벤트들에 관한 모니터링된 입력을 전달할 수 있고, 햅틱 출력이 완전히 무음 방식으로 전달될 수 있다. 햅틱 출력이 또한 "경보" 용량(alert capacity)에서 서비스에 대한 충분한 설명 정보를 전달할 수 있다. 보다 구체적으로는, 햅틱 출력은 사람 음성 이벤트들, 차량 활동 또는 사격과 같은 일어나고 있는 특정의 종류들의 활동을 개인에게 알려줄 수 있다.
다른 예로서, 이 시스템이 과학자들이 구별되는 오디오 신호, 비디오 신호, 또는 다른 유형의 감지된 입력과 같은 독특한 입력을 가지는 생물학적 또는 지질학적 이벤트들의 원격 모니터링을 할 수 있게 할 수 있는 과학적 시나리오에서 이 시스템이 이용될 수 있다. 예를 들어, 이 시스템은 조류학자가 전송되어 햅틱 출력으로 변환되고 웨어러블 햅틱 디바이스와 같은 햅틱 디바이스 상에서 재생될 수 있는 구별되는 새 소리가 있는지 모니터링하기 위해 원격 마이크를 사용할 수 있게 할 수 있다. 이와 같이, 조류학자는 특정의 종의 새가 둥지 위치로 돌아왔다는 것 또는 특정의 때에 특정의 거동의 어떤 다른 인스턴스를 통보받을 수 있다.
또 다른 예로서, 이 시스템은 "몰입적" 또는 엔터테인먼트 시나리오에서 이용될 수 있고, 이 경우 이 시스템은 청각적 정보와 같은 실시간 정보가 시청자에게 전달되어 하나 이상의 햅틱 효과들로 변환될 수 있게 할 수 있다. 예를 들어, 모토크로스 경주에서, 시청자는 레이서가 그 이벤트에서 경험하고 있는 것을 거의 실시간으로 느낄 수 있다.
도 1은 본 발명의 하나의 실시예에 따른 시스템(10)의 블록도를 나타낸 것이다. 하나의 실시예에서, 시스템(10)은 모바일 디바이스의 일부이고, 시스템(10)은 모바일 디바이스에 자동 햅틱 변환 기능을 제공한다. 다른 실시예에서, 시스템(10)은 웨어러블 디바이스의 일부이고, 시스템(10)은 웨어러블 디바이스에 자동 햅틱 변환 기능을 제공한다. 웨어러블 디바이스들의 예들은 손목 밴드, 헤드 밴드, 안경, 반지, 발목 밴드, 의복에 통합되어 있는 어레이, 또는 사용자가 신체에 착용할 수 있거나 소지될 수 있는 임의의 다른 유형의 디바이스를 포함한다. 어떤 웨어러블 디바이스들은 "햅틱적으로 인에이블"될 수 있고, 이는 그 디바이스들이 햅틱 효과들을 발생시키는 메커니즘을 포함한다는 것을 의미한다. 다른 실시예에서, 시스템(10)은 디바이스(예컨대, 모바일 디바이스 또는 웨어러블 디바이스)와 분리되어 있고, 디바이스에 자동 햅틱 변환 기능을 원격적으로 제공한다. 비록 단일의 시스템으로서 도시되어 있지만, 시스템(10)의 기능이 분산 시스템으로서 구현될 수 있다. 시스템(10)은 정보를 전달하는 버스(12) 또는 다른 통신 메커니즘, 및 버스(12)에 결합되어 있는, 정보를 처리하는 프로세서(22)를 포함하고 있다. 프로세서(22)는 임의의 유형의 범용 또는 전용 프로세서일 수 있다. 시스템(10)은 정보 및 프로세서(22)에 의해 실행될 명령어들을 저장하는 메모리(14)를 추가로 포함하고 있다. 메모리(14)는 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 자기 또는 광 디스크와 같은 정적 저장 장치, 또는 임의의 다른 유형의 컴퓨터 판독가능 매체의 임의의 조합으로 이루어져 있을 수 있다.
컴퓨터 판독가능 매체는 프로세서(22)에 의해 액세스될 수 있는 임의의 이용가능한 매체일 수 있고, 휘발성 및 비휘발성 매체, 이동식 및 비이동식 매체, 통신 매체, 및 저장 매체 모두를 포함할 수 있다. 통신 매체는 반송파 또는 기타 전송 메커니즘과 같은 피변조 데이터 신호 내의 컴퓨터 판독가능 명령어들, 데이터 구조들, 프로그램 모듈들 또는 기타 데이터를 포함할 수 있고, 기술 분야에 공지된 임의의 다른 형태의 정보 전달 매체를 포함할 수 있다. 저장 매체는 RAM, 플래시 메모리, ROM, EPROM(erasable programmable read-only memory), EEPROM(electrically erasable programmable read-only memory), 레지스터, 하드 디스크, 이동식 디스크, CD-ROM(compact disk read-only memory), 또는 기술 분야에 공지된 임의의 다른 형태의 저장 매체를 포함할 수 있다.
하나의 실시예에서, 메모리(14)는 프로세서(22)에 의해 실행될 때 기능을 제공하는 소프트웨어 모듈들을 저장한다. 이 모듈들은, 하나의 실시예에서, 시스템(10)은 물론 모바일 디바이스의 나머지에 운영 체제 기능을 제공하는 운영 체제(15)를 포함하고 있다. 이 모듈들은, 이하에 더 상세히 개시되어 있는 바와 같이, 입력을 하나 이상의 햅틱 효과들로 자동으로 변환하는 자동 햅틱 변환 모듈(16)을 추가로 포함하고 있다. 특정의 실시예들에서, 자동 햅틱 변환 모듈(16)은 복수의 모듈을 포함할 수 있고, 여기서 각각의 모듈은 입력을 하나 이상의 햅틱 효과들로 자동으로 변환하는 특정의 개별 기능을 제공한다. 시스템(10)은 통상적으로 Immersion Corporation의 IntegratorTM 소프트웨어와 같은 부가의 기능을 포함시키기 위해 하나 이상의 부가의 응용 프로그램 모듈들(18)을 포함할 것이다.
시스템(10)은, 원격 소스들로 데이터를 전송 및/또는 그들로부터 데이터를 수신하는 실시예들에서, 적외선, 무선, Wi-Fi, 또는 셀룰러 네트워크 통신과 같은 모바일 무선 네트워크 통신을 제공하기 위해 네트워크 인터페이스 카드와 같은 통신 디바이스(20)를 추가로 포함한다. 다른 실시예들에서, 통신 디바이스(20)는 이더넷 연결 또는 모뎀과 같은 유선 네트워크 연결을 제공한다.
프로세서(22)는 또한, 버스(12)를 통해, 그래픽 표현 또는 사용자 인터페이스를 사용자에게 디스플레이하는 LCD(Liquid Crystal Display)와 같은 디스플레이(24)에 결합되어 있다. 디스플레이(24)는 프로세서(22)로 신호들을 송신하고 그로부터 신호들을 수신하도록 구성되어 있는 터치스크린과 같은 터치 감응 입력 디바이스일 수 있고, 멀티-터치 터치스크린일 수 있다.
하나의 실시예에서, 시스템(10)은 액추에이터(26)를 추가로 포함하고 있다. 프로세서(22)는 발생된 햅틱 효과와 연관되어 있는 햅틱 신호를 액추에이터(26)로 전송할 수 있고, 액추에이터(26)는 차례로 진동촉각 햅틱 효과들, 정전 마찰 햅틱 효과들, 또는 변형 햅틱 효과들과 같은 햅틱 효과들을 출력한다. 액추에이터(26)는 액추에이터 구동 회로를 포함하고 있다. 액추에이터(26)는, 예를 들어, 전기 모터, 전자기 액추에이터, 보이스 코일, 형상 기억 합금, 전기 활성 중합체(electro-active polymer), 솔레노이드, ERM(eccentric rotating mass motor), LRA(linear resonant actuator), 압전 액추에이터, 고대역폭 액추에이터, EAP(electro-active polymer) 액추에이터, 정전 마찰 디스플레이, 또는 초음파 진동 발생기일 수 있다. 대안의 실시예에서, 시스템(10)은, 액추에이터(26)에 부가하여, 하나 이상의 부가의 액추에이터들(도 1에 예시되지 않음)을 포함할 수 있다. 액추에이터(26)는 햅틱 출력 디바이스의 한 예이고, 여기서 햅틱 출력 디바이스는, 구동 신호에 응답하여, 진동촉각 햅틱 효과들, 정전 마찰 햅틱 효과들, 또는 변형 햅틱 효과들과 같은 햅틱 효과들을 출력하도록 구성되어 있는 디바이스이다. 대안의 실시예들에서, 액추에이터(26)는 어떤 다른 유형의 햅틱 출력 디바이스로 대체될 수 있다. 게다가, 다른 대안의 실시예들에서, 시스템(10)은 액추에이터(26)를 포함하지 않을 수 있고, 시스템(10)과 별개의 디바이스가 햅틱 효과들을 발생시키는 액추에이터 또는 다른 햅틱 출력 디바이스를 포함하고 있으며, 시스템(10)은 발생된 햅틱 신호들을 통신 디바이스(20)를 통해 그 디바이스로 송신한다.
하나의 실시예에서, 시스템(10)은 스피커(28)를 추가로 포함하고 있다. 프로세서(22)는 오디오 신호를 스피커(28)로 전송할 수 있고, 스피커(28)는 차례로 오디오 효과들을 출력한다. 스피커(28)는, 예를 들어, 다이나믹 스피커, 일렉트로다이나믹 스피커, 압전 스피커, 자기 변형 스피커, 정전기 스피커, 리본 및 평면 자기 스피커, 굽힘파 스피커, 평판 스피커, 헤일 에어 모션 트랜스듀서(heil air motion transducer), 플라즈마 아크 스피커, 및 디지털 스피커일 수 있다. 대안의 실시예들에서, 시스템(10)은, 스피커(28)에 부가하여, 하나 이상의 부가의 스피커들(도 1에 예시되지 않음)을 포함할 수 있다. 게다가, 다른 대안의 실시예들에서, 시스템(10)은 스피커(28)를 포함하지 않을 수 있고, 시스템(10)과 별개의 디바이스가 오디오 효과들을 출력하는 스피커를 포함하고 있으며, 시스템(10)은 오디오 신호들을 통신 디바이스(20)를 통해 그 디바이스로 송신한다.
하나의 실시예에서, 시스템(10)은 센서(30)를 추가로 포함하고 있다. 센서(30)는 사운드, 움직임, 가속도, 바이오 신호, 거리, 흐름, 힘/압력/변형/굴곡, 습도, 선형 위치, 배향/기울기, 무선 주파수, 회전 위치, 회전 속도, 스위치의 조작, 온도, 진동, 또는 가시광 세기(이들로 제한되지 않음)와 같은 한 형태의 에너지 또는 다른 물리적 특성을 검출하도록 구성되어 있을 수 있다. 센서(30)는 또한 검출된 에너지 또는 다른 물리적 특성을 가상 센서 정보를 표현하는 전기 신호 또는 임의의 신호로 변환하도록 구성되어 있을 수 있다. 센서(30)는 가속도계, 심전도계, 뇌파도계, 근전계, 전기안구도계, 전기구개도계, 전기 피부 반응 센서, 용량성 센서, 홀 효과 센서, 적외선 센서, 초음파 센서, 압력 센서, 광섬유 센서, 굴곡 센서(또는 굽힘 센서), 힘 감응 저항기, 로드 셀, LuSense CPS2 155, 소형 압력 변환기, 압전 센서, 변형 게이지, 습도계, 선형 위치 터치 센서, 선형 전위차계(또는 슬라이더), 선형 가변 차동 변압기, 나침반, 경사계, 자기 태그(또는 RFID(radio frequency identification tag)), 회전식 인코더, 회전식 전위차계, 자이로스코프, 온-오프 스위치, 온도 센서(온도계, 열전쌍, 저항 온도 검출기, 써미스터, 또는 온도 변환 집적 회로 등), 마이크, 광도계, 고도계, 바이오 모니터, 카메라, 또는 광 의존 저항기(이들로 제한되지 않음)와 같은 임의의 디바이스일 수 있다. 대안의 실시예들에서, 시스템(10)은, 센서(30)에 부가하여, 하나 이상의 부가의 센서들(도 1에 예시되지 않음)을 포함할 수 있다. 이 실시예들 중 일부 실시예들에서, 센서(30) 및 하나 이상의 부가의 센서들은 센서 어레이, 또는 어떤 다른 유형의 센서들의 집합체의 일부일 수 있다. 게다가, 다른 대안의 실시예들에서, 시스템(10)은 센서(30)를 포함하지 않을 수 있고, 시스템(10)과 별개의 디바이스가 한 형태의 에너지, 또는 다른 물리적 특성을 검출하고 검출된 에너지 또는 다른 물리적 특성을 가상 센서 정보를 표현하는 전기 신호 또는 다른 유형의 신호로 변환하는는 센서를 포함한다. 그 디바이스는 이어서 변환된 신호를 통신 디바이스(20)를 통해 시스템(10)으로 송신할 수 있다.
도 2는 본 발명의 일 실시예에 따른, 입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환하는 시스템(200)의 블록도를 나타낸 것이다. 이 실시예에 따르면, 시스템(200)은 원격 감지 디바이스(210) 및 햅틱 디바이스(220)를 포함하고 있다. 원격 감지 디바이스(210)는 연결(230)을 통해 햅틱 디바이스(220)에 결합되어 동작할 수 있다. 특정의 실시예들에서, 연결(230)은 무선 네트워크 연결을 나타낸다. 다른 대안의 실시예들에서, 연결(230)은 유선 네트워크 연결을 나타낸다. 게다가, 대안의 실시예들에서, 시스템(200)은 (도 2에 예시되어 있지 않은) 원격 감지 디바이스(210) 이외의 하나 이상의 부가의 원격 감지 디바이스들 및/또는 햅틱 디바이스(220) 이외의 하나 이상의 부가의 햅틱 디바이스들을 포함할 수 있다. 어떤 실시예들에서, 연결(230)이 생략될 수 있고, 감지 디바이스(210) 및 햅틱 디바이스(220)가 시스템(200)의 단일의 디바이스 내에 하우징되어 있을 수 있으며, 이 경우에 감지 디바이스(210)와 햅틱 디바이스(220)는 정보를 주고 받기 위해 버스 또는 다른 통신 메커니즘에 의해 결합되어 동작할 수 있다. 게다가, 어떤 실시예들에서, 햅틱 디바이스(220)는 웨어러블 햅틱 디바이스일 수 있다.
이 실시예에 따르면, 원격 감지 디바이스(210)는 센서(211)를 포함한다. 센서(211)는 입력을 거의 실시간으로 감지하도록 구성되어 있다. 보다 구체적으로는, 센서(211)는 원격 감지 디바이스(210)에 근접하여 발생되는 입력을 검출하고 검출된 입력을 신호로 거의 실시간으로 변환하도록 구성되어 있다. 대안의 실시예에서, 입력의 감지가 실시간 또는 거의 실시간일 필요는 없다. 그 대신에, 이 대안의 실시예에서, 입력이 (도 2에 예시되어 있지 않은) 하나 이상의 버퍼들에 버퍼링될 수 있다. 특정의 실시예들에서, 입력은 오디오 데이터를 포함하는 오디오 신호 또는 다른 유형의 오디오 입력일 수 있다. 다른 대안의 실시예들에서, 입력은 비디오 데이터를 포함하는 비디오 신호 또는 다른 유형의 비디오 입력일 수 있다. 또 다른 대안의 실시예들에서, 입력은 가속도 데이터를 포함하는 가속도 신호 또는 다른 유형의 가속도 입력일 수 있다. 또 다른 대안의 실시예들에서, 입력은 배향 데이터를 포함하는 배향 신호, 주변광 데이터를 포함하는 주변광 신호, 또는 센서에 의해 감지될 수 있는 다른 유형의 신호일 수 있다. 특정의 실시예들에서, 센서(211)는 도 1의 센서(30)와 똑같을 수 있다.
입력이 오디오 신호인 실시예들에서, 센서(211)는 마이크, 또는 오디오 신호를 감지하도록 구성되어 있는 어떤 다른 유형의 디바이스일 수 있다. 입력이 비디오 신호인 실시예들에서, 센서(211)는 카메라, 또는 비디오 신호를 감지하도록 구성되어 있는 어떤 다른 유형의 디바이스일 수 있다. 입력이 가속도 신호인 실시예들에서, 센서(211)는 가속도계, 또는 가속도 신호를 감지하도록 구성되어 있는 어떤 다른 유형의 디바이스일 수 있다. 입력이 움직임 신호인 실시예들에서, 센서(211)는 만보계(pedometer), 또는 움직임 신호를 감지하도록 구성되어 있는 어떤 다른 유형의 디바이스일 수 있다. 입력이 온도 신호인 실시예들에서, 센서(211)는 온도 센서, 또는 온도 신호를 감지하도록 구성되어 있는 어떤 다른 유형의 디바이스일 수 있다. 게다가, 특정의 실시예들에서, 원격 감지 디바이스(210)는, 센서(211) 이외에, 하나 이상의 부가의 센서들(도 2에 예시되지 않음)을 포함할 수 있다. 이 실시예들 중 일부 실시예들에서, 센서(211) 및 하나 이상의 부가의 센서들은 (마이크 어레이와 같은) 센서 어레이의 일부일 수 있다.
이 실시예에 따르면, 원격 감지 디바이스(210)는 선택적으로 필터(212)를 포함한다. 필터(212)는 감지된 입력을 필터링하도록 구성되어 있다. 보다 구체적으로는, 필터(212)는 감지된 입력의 특정의 주파수 대역들, 특징들, 또는 다른 특성들을 필터링 제거하도록 구성되어 있다. 예를 들어, 감지된 입력이 오디오 신호 또는 다른 유형의 오디오 입력인 경우, 필터(212)는 배경음을 나타내는 감지된 입력의 특성들을 필터링 제거할 수 있고, 따라서 감지된 입력의 남아 있는 특성들만이 음성 또는 어떤 다른 유형의 소리를 나타낸다. 대안의 예로서, 음성이 항상 검출되는 시나리오에서, 필터(212)는 음성을 나타내는 감지된 입력의 특성들을 필터링 제거할 수 있고, 따라서 감지된 입력의 남아 있는 특성들만이 배경음을 나타낸다. 또 다른 예로서, 감지된 입력이 다른 유형의 입력인 경우, 필터(212)는 작은 크기의 이벤트들을 제거하기 위해 감지된 입력의 특성들을 필터링 제거할 수 있고, 따라서 감지된 입력의 남아 있는 특성들만이 환경 변화들, 주파수 천이들 등과 같은 상당한 크기의 이벤트들을 나타낸다. 특정의 실시예들에서, 필터(212)는 고역 통과 필터일 수 있다. 게다가, 대안의 실시예들에서, 필터(212)가 원격 감지 디바이스(210)로부터 생략될 수 있고, 대응하는 필터링이 생략될 수 있다.
이 실시예에 따르면, 원격 감지 디바이스(210)는 송신기(213)를 추가로 포함한다. 송신기(213)는 감지된 입력을 연결(230)을 사용하여 햅틱 디바이스(220)로 전송하도록 구성되어 있다. 연결(230)이 무선 연결인 실시예들에서, 송신기(213)는 감지된 입력을 햅틱 디바이스(220)로 무선 연결을 사용하여 무선으로 전송하도록 구성되어 있는 무선 송신기일 수 있다. 연결(230)이 유선 연결인 대안의 실시예들에서, 송신기(213)는 감지된 입력을 햅틱 디바이스(220)로 유선 연결을 사용하여 전송하도록 구성되어 있는 유선 송신기일 수 있다. 대안의 실시예들에서, 송신기(213)가 원격 감지 디바이스(210)로부터 생략될 수 있고, 대응하는 전송이 생략될 수 있다.
이 실시예에 따르면, 햅틱 디바이스(220)는 수신기(221)를 포함하고 있다. 수신기(221)는 원격 감지 디바이스(210)로부터 연결(230)을 사용하여 전송되는 감지된 입력을 수신하도록 구성되어 있다. 연결(230)이 무선 연결인 실시예들에서, 수신기(221)는 감지된 입력을 원격 감지 디바이스(210)로부터 무선 연결을 사용하여 무선으로 수신하도록 구성되어 있는 무선 수신기일 수 있다. 연결(230)이 유선 연결인 대안의 실시예들에서, 수신기(221)는 감지된 입력을 원격 감지 디바이스(210)로부터 유선 연결을 사용하여 수신하도록 구성되어 있는 유선 수신기일 수 있다. 대안의 실시예들에서, 수신기(221)가 햅틱 디바이스(210)로부터 생략될 수 있고, 대응하는 수신이 생략될 수 있다.
이 실시예에 따르면, 햅틱 디바이스(220)는 제어기(222)를 추가로 포함하고 있다. 제어기(222)는 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환하도록 구성되어 있다. 보다 구체적으로는, 제어기(222)는 감지된 입력을 수신기(221)로부터 수신하고 수신된 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환하도록 구성되어 있다. 특정의 실시예들에서, 이것은 감지된 입력이, 감지된 입력을 메모리 또는 어떤 다른 유형의 저장 장치에 저장하는 일 없이, 하나 이상의 햅틱 신호들로 직접 변환된다는 것을 의미한다. 대안의 실시예에서, 수신된 감지된 입력을 하나 이상의 햅틱 신호들로 변환하는 것이 실시간 또는 거의 실시간일 필요는 없으며, 감지된 입력을 메모리 또는 어떤 다른 유형의 저장 장치에 저장하는 것을 수반할 수 있다.
제어기(222)는 당업자에게 공지되어 있는, 감지된 입력을 하나 이상의 햅틱 신호들로 변환하는 임의의 햅틱 변환 알고리즘을 사용할 수 있다. 예시적인 햅틱 변환 알고리즘들이 이하의 특허들 또는 특허 출원들(이들 모두는 참조 문헌으로서 그 전체가 본 명세서에 포함됨)에 기술되어 있다: 미국 특허 제7,979,146호; 미국 특허 제8,000,825호; 미국 특허 제8,378,964호; 미국 특허 출원 공개 제2011/0202155호; 미국 특허 출원 공개 제2011/0215913호; 미국 특허 출원 공개 제2012/0206246호; 미국 특허 출원 공개 제2012/0206247호; 미국 특허 출원 제13/439,241호; 미국 특허 출원 제13/661,140호; 미국 특허 출원 제13/743,540호; 미국 특허 출원 제13/767,129호; 미국 특허 출원 제13/785,166호; 미국 특허 출원 제13/788,487호; 미국 특허 출원 제13/803,778호; 및 미국 특허 출원 제13/799,059호.
어떤 실시예들에서, 제어기(222)는 또한 감지된 입력의 하나 이상의 주파수 대역들, 특징들, 또는 특성들을 식별 및/또는 추출할 수 있다. 특성들의 예들은 진폭, 주파수, 지속기간, 포락선, 밀도, 크기, 및 강도를 포함할 수 있다. 특성은 수치를 포함할 수 있고, 이 경우 수치는 감지된 입력의 특성을 정의할 수 있다. 제어기(222)는 또한 하나 이상의 식별된 특성들에 기초하여 하나 이상의 햅틱 신호들을 수정할 수 있다. 보다 구체적으로는, 제어기(222)는 하나 이상의 햅틱 신호들의 하나 이상의 햅틱 파라미터들을 하나 이상의 식별된 특성들과 일치하도록 수정할 수 있다. 이 실시예에 따르면, 햅틱 신호는 하나 이상의 햅틱 파라미터를 포함할 수 있고, 여기서 햅틱 파라미터는 햅틱 효과를 발생시키기 위해 사용되는 햅틱 신호를 정의할 수 있는 파라미터이고, 따라서 또한 발생될 햅틱 효과를 정의할 수 있다. 보다 구체적으로는, 햅틱 파라미터는 크기, 주파수, 지속기간, 진폭, 강도, 포락선, 밀도, 또는 임의의 다른 종류의 정량화가능한 햅틱 파라미터와 같은 햅틱 효과 품질의 양이다. 이 실시예에 따르면, 햅틱 효과는, 적어도 부분적으로, 햅틱 신호의 하나 이상의 햅틱 파라미터들에 의해 정의될 수 있고, 여기서 하나 이상의 햅틱 파라미터들은 햅틱 효과의 특성들을 정의할 수 있다. 햅틱 파라미터는 수치를 포함할 수 있고, 여기서 수치는 햅틱 신호의 특성을 정의할 수 있으며, 따라서 또한 햅틱 신호에 의해 발생되는 햅틱 효과의 특성을 정의할 수 있다. 햅틱 파라미터들의 예들은 진폭 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 포락선 햅틱 파라미터, 밀도 햅틱 파라미터, 크기 햅틱 파라미터, 및 강도 햅틱 파라미터를 포함할 수 있다.
예로서, 제어기(222)는 오디오 신호 또는 다른 유형의 오디오 입력 내에서 하나 이상의 특정의 주파수 대역들을 식별 및/또는 추출할 수 있다. 제어기(222)는 이어서, 햅틱 신호가 오디오 신호 또는 다른 유형의 오디오 입력 내의 식별된 주파수 대역들과 똑같거나 유사한 하나 이상의 특정의 주파수 대역들을 포함하도록, 발생된 햅틱 신호의 하나 이상의 햅틱 파라미터들을 수정할 수 있다. 이하에서 더 상세히 기술되는 바와 같이, 수정된 햅틱 신호는 이어서 하나 이상의 구별되는 햅틱 효과들을 발생시키는 데 사용될 수 있고, 여기서 구별되는 햅틱 효과들은 오디오 신호/입력을 식별해줄 수 있다.
다른 예로서, 제어기(222)는 오디오 입력으로부터 시간 및/또는 주파수 서명을 식별 및/또는 추출할 수 있다. 제어기(222)는 이어서, 햅틱 신호가 오디오 입력 내의 식별된 시간 및/또는 주파수 서명과 똑같거나 유사한 시간 및/또는 주파수 서명을 포함하도록, 발생된 햅틱 신호의 하나 이상의 햅틱 파라미터들을 수정할 수 있다. 이하에서 더 상세히 기술되는 바와 같이, 수정된 햅틱 신호는 이어서 하나 이상의 구별되는 햅틱 효과들을 발생시키는 데 사용될 수 있고, 여기서 구별되는 햅틱 효과들은 오디오 입력을 식별해줄 수 있다. 하나의 특정의 예에서, 오디오 입력은 한 유형의 새 소리일 수 있고, 새 소리 내의 시간 및/또는 주파수 서명은 새 소리의 유형을 일의적으로 식별해줄 수 있다. 이와 같이, 수정된 햅틱 신호는 수정된 햅틱 신호의 대응하는 시간 및/또는 주파수 서명에 기초하여 새 소리의 유형을 식별해주는 햅틱 효과를 발생시키는 데 사용될 수 있다. 다른 특정의 예에서, 오디오 입력은 (사람 음성 및 차량 소음과 같은) 사람 활동 및 비사람 활동을 포함할 수 있고, 오디오 입력 내의 식별된 특성들은 비사람 활동과 구별되는 사람 활동을 일의적으로 식별해줄 수 있다. 이와 같이, 수정된 햅틱 신호는 사람 활동을 식별해주는 제1 햅틱 효과, 및 비사람 활동을 식별해주는 제2 햅틱 효과를 발생시키는 데 사용될 수 있다. 제1 햅틱 효과 및 제2 햅틱 효과 둘 다를 경험하는 개인은 제1 햅틱 효과가 사람 활동을 식별해주고 제2 햅틱 효과가 비사람 활동을 식별해준다는 것을 알 수 있다.
게다가, 대안의 실시예에서, 감지된 입력을 하나 이상의 햅틱 신호들로 자동으로 변환하기 보다는, 제어기(222)는, 감지된 입력의 하나 이상의 식별된 특성들에 기초하여, 제어기(222) 내에 저장되어 있는 하나 이상의 햅틱 신호들을 선택할 수 있다. 보다 구체적으로는, 제어기(222)는 감지된 입력의 하나 이상의 식별된 특성들과 똑같거나 가장 유사한 하나 이상의 햅틱 파라미터들을 포함하는 하나 이상의 햅틱 신호들을 선택할 수 있다. 하나 이상의 햅틱 신호들은 라이브러리 내에 저장될 수 있고, 여기서 라이브러리는 제어기(222) 내에 저장되어 있다.
예시된 실시예에 따르면, 제어기(222)는 프로세서(223), 메모리(224) 및 자동 햅틱 변환 모듈(225)을 포함할 수 있다. 프로세서(223)는 임의의 유형의 범용 또는 전용 프로세서일 수 있다. 특정의 실시예들에서, 프로세서(223)는 도 1의 프로세서(22)와 똑같을 수 있다. 메모리(224)는 정보 및 프로세서(223)에 의해 실행될 명령어들을 저장하도록 구성되어 있다. 메모리(224)는 RAM, ROM, 자기 또는 광 디스크와 같은 정적 저장 장치, 또는 임의의 다른 유형의 컴퓨터 판독가능 매체의 임의의 조합으로 이루어져 있을 수 있다. 특정의 실시예들에서, 메모리(224)는 도 1의 메모리(14)와 똑같을 수 있다. 자동 햅틱 변환 모듈(225)은 입력을 하나 이상의 햅틱 효과들로 자동으로 변환하는 상기한 기능을 수행하도록 구성되어 있을 수 있다. 특정의 실시예에서, 자동 햅틱 변환 모듈(225)은 복수의 모듈을 포함할 수 있고, 여기서 각각의 모듈은 입력을 하나 이상의 햅틱 효과들로 자동으로 변환하는 상기한 기능의 특정의 개별 부분을 제공한다. 게다가, 특정의 실시예들에서, 자동 햅틱 변환 모듈(225)은 도 1의 자동 햅틱 변환 모듈(16)과 똑같다.
또한, 이 실시예에 따르면, 햅틱 디바이스(220)는 햅틱 출력 디바이스(226)를 추가로 포함하고 있다. 제어기(222)는 하나 이상의 햅틱 신호들을 햅틱 출력 디바이스(226)로 송신하도록 구성되어 있다. 차례로, 햅틱 출력 디바이스(226)는, 제어기(222)에 의해 송신된 하나 이상의 햅틱 신호들에 응답하여, 진동촉각 햅틱 효과들, 정전 마찰 햅틱 효과들, 또는 변형 햅틱 효과들과 같은 하나 이상의 햅틱 효과들을 출력하도록 구성되어 있다. 특정의 실시예들에서, 햅틱 출력 디바이스(226)는 도 1의 액추에이터(26)와 똑같다.
도 3은 본 발명의 하나의 실시예에 따른, (도 1의 자동 햅틱 변환 모듈(16) 및 도 2의 자동 햅틱 변환 모듈(225)과 같은) 자동 햅틱 변환 모듈의 기능의 흐름도를 나타낸 것이다. 하나의 실시예에서, 도 3의 기능은 메모리 또는 다른 컴퓨터 판독가능 또는 유형의(tangible) 매체에 저장되고 프로세서에 의해 실행되는 소프트웨어에 의해 구현된다. 다른 실시예들에서, 기능이 하드웨어에 의해(예컨대, ASIC(application specific integrated circuit), PGA(programmable gate array), FPGA(field programmable gate array) 등의 사용을 통해) 또는 하드웨어와 소프트웨어의 임의의 조합에 의해 수행될 수 있다.
흐름이 시작되고 310으로 진행한다. 310에서, 입력이 감지된다. 특정의 실시예들에서, 입력이 거의 실시간으로 감지될 수 있다. 게다가, 특정의 실시예들에서, 입력은 오디오 데이터를 포함할 수 있다. 다른 실시예들에서, 입력은 비디오 데이터를 포함할 수 있다. 다른 실시예들에서, 입력은 가속도 데이터를 포함할 수 있다. 다른 실시예들에서, 입력은 다른 유형의 데이터를 포함할 수 있다. 흐름이 이어서 320으로 진행한다.
320에서, 감지된 입력이 필터링된다. 특정의 실시예들에서, 320이 생략될 수 있다. 흐름이 이어서 330으로 진행한다.
330에서, 감지된 입력이 제어기로 전송된다. 어떤 실시예들에서, 감지된 입력이 제어기로 무선으로 전송될 수 있다. 특정의 실시예들에서, 330이 생략될 수 있다. 흐름이 이어서 340으로 진행한다.
340에서, 감지된 입력의 하나 이상의 특성들이 식별된다. 특정의 실시예들에서, 감지된 입력의 하나 이상의 특성들은 진폭, 주파수, 지속기간, 포락선, 밀도, 크기, 또는 강도 중 적어도 하나를 포함할 수 있다. 특정의 실시예들에서, 340이 생략될 수 있다. 흐름이 이어서 350으로 진행한다.
350에서, 감지된 입력이 하나 이상의 햅틱 신호들로 자동으로 변환된다. 감지된 입력이 햅틱 변환 알고리즘을 사용하여 하나 이상의 햅틱 신호들로 자동으로 변환될 수 있다. 특정의 실시예들에서, 감지된 입력이 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환될 수 있다. 흐름이 이어서 360으로 진행한다.
360에서, 하나 이상의 햅틱 신호들이 감지된 입력의 하나 이상의 식별된 특성들에 기초하여 수정된다. 특정의 실시예들에서, 하나 이상의 햅틱 신호들의 하나 이상의 햅틱 파라미터들이 감지된 입력의 하나 이상의 식별된 특성들과 일치하도록 수정될 수 있다. 이 실시예들 중 일부 실시예들에서, 하나 이상의 햅틱 파라미터들은 진폭 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 포락선 햅틱 파라미터, 밀도 햅틱 파라미터, 크기 햅틱 파라미터, 또는 강도 햅틱 파라미터 중 적어도 하나를 포함할 수 있다. 특정의 실시예들에서, 360이 생략될 수 있다. 흐름이 이어서 370으로 진행한다.
370에서, 하나 이상의 햅틱 효과들이 하나 이상의 햅틱 신호들에 기초하여 발생된다. 특정의 실시예들에서, 하나 이상의 햅틱 효과들을 발생시키기 위해 하나 이상의 햅틱 신호들이 하나 이상의 햅틱 출력 디바이스들로 송신될 수 있다. 이 실시예들 중 일부 실시예들에서, 하나 이상의 햅틱 출력 디바이스들 중 적어도 하나는 액추에이터(actuator)이다. 게다가, 특정의 실시예들에서, 웨어러블 햅틱 디바이스는 하나 이상의 햅틱 신호들에 기초하여 하나 이상의 햅틱 효과들을 발생시킬 수 있다. 이어서, 흐름이 종료한다.
이와 같이, 일 실시예에 따르면, 오디오 신호들과 같은 감지된 입력을 햅틱 효과들로 자동으로 변환하는 시스템이 제공되고, 여기서 입력의 감지 및 자동 변환이 거의 실시간으로 수행된다. 이와 같이, 이 시스템은 오디오 신호들과 같은 다른 입력으로부터 햅틱 콘텐츠(haptic content)를 자동으로 발생시킬 수 있다. 이와 같이, 이 시스템은 햅틱 콘텐츠를 생성하는 것을 상당히 더 쉽게 만들 수 있다.
본 명세서 전체에 걸쳐 기술된 본 발명의 특징들, 구조들 또는 특성들이 하나 이상의 실시예들에서 임의의 적당한 방식으로 결합될 수 있다. 예를 들어, 본 명세서 전체에 걸쳐 "하나의 실시예", "어떤 실시예들", "특정의 실시예", "특정의 실시예들" 또는 다른 유사한 표현의 사용은 그 실시예와 관련하여 기술된 특정의 특징, 구조 또는 특성이 본 발명의 적어도 하나의 실시예에 포함될 수 있다는 사실을 말한다. 이와 같이, 본 명세서 전체에 걸쳐 나오는 "하나의 실시예", "어떤 실시예들", "특정의 실시예", "특정의 실시예들" 또는 다른 유사한 표현은 모두가 꼭 동일한 그룹의 실시예들을 말할 필요는 없으며, 기술된 특징들, 구조들 또는 특성들이 하나 이상의 실시예들에서 임의의 적당한 방식으로 결합될 수 있다.
당업자라면 이상에서 논의된 본 발명이, 단계들을 상이한 순서로 하여 그리고/또는 요소들을 개시되어 있는 것과 상이한 구성들로 하여, 실시될 수 있다는 것을 잘 알 것이다. 따라서, 본 발명이 이들 바람직한 실시예에 기초하여 기술되어 있지만, 본 발명의 사상 및 범위 내에 있으면서 특정의 수정들, 변형들 및 대안의 구성들이 자명할 것임이 당업자에게는 명백할 것이다. 따라서, 본 발명의 범위를 결정하기 위해서는, 첨부된 청구항들을 참조해야만 한다.

Claims (15)

  1. 입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환하는 컴퓨터 구현 방법으로서,
    상기 입력을 거의 실시간으로 감지하는 단계;
    상기 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환하는 단계; 및
    상기 하나 이상의 햅틱 신호들에 기초하여 상기 하나 이상의 햅틱 효과들을 발생시키는 단계를 포함하는 컴퓨터 구현 방법.
  2. 제1항에 있어서, 상기 감지된 입력의 하나 이상의 특성들을 식별하는 단계; 및
    상기 하나 이상의 식별된 특성들에 기초하여 상기 하나 이상의 햅틱 신호들을 수정하는 단계를 더 포함하는 컴퓨터 구현 방법.
  3. 제2항에 있어서, 상기 하나 이상의 햅틱 신호들을 수정하는 단계는 상기 하나 이상의 햅틱 신호들의 하나 이상의 햅틱 파라미터들을 상기 하나 이상의 식별된 특성들과 일치하도록 수정하는 단계를 더 포함하는 컴퓨터 구현 방법.
  4. 제3항에 있어서, 상기 감지된 입력의 상기 하나 이상의 특성들은 진폭, 주파수, 지속기간, 포락선, 밀도, 크기, 또는 강도 중 적어도 하나를 포함하고;
    상기 하나 이상의 햅틱 신호들의 상기 하나 이상의 햅틱 파라미터들은 진폭 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 포락선 햅틱 파라미터, 밀도 햅틱 파라미터, 크기 햅틱 파라미터, 또는 강도 햅틱 파라미터 중 적어도 하나를 포함하는 것인 컴퓨터 구현 방법.
  5. 제1항에 있어서, 상기 감지된 입력을 필터링하는 단계를 더 포함하는 컴퓨터 구현 방법.
  6. 제1항에 있어서, 상기 감지된 입력을 상기 자동 변환을 수행하도록 구성되어 있는 제어기로 무선으로 전송하는 단계를 더 포함하는 컴퓨터 구현 방법.
  7. 제1항에 있어서, 상기 하나 이상의 햅틱 효과들을 발생시키는 단계는 웨어러블 햅틱 디바이스에 의해 수행되는 컴퓨터 구현 방법.
  8. 제1항에 있어서, 상기 하나 이상의 햅틱 효과들을 발생시키는 단계는 상기 하나 이상의 햅틱 효과들을 발생시키기 위해 상기 하나 이상의 햅틱 신호들을 하나 이상의 햅틱 출력 디바이스들로 송신하는 단계를 더 포함하는 컴퓨터 구현 방법.
  9. 제8항에 있어서, 상기 하나 이상의 햅틱 출력 디바이스들 중 적어도 하나의 햅틱 출력 디바이스는 액추에이터(actuator)를 포함하는 컴퓨터 구현 방법.
  10. 제1항에 있어서, 상기 입력은 오디오 데이터, 비디오 데이터, 또는 가속도 데이터 중 적어도 하나를 포함하는 컴퓨터 구현 방법.
  11. 입력을 하나 이상의 햅틱 효과들로 거의 실시간으로 자동으로 변환하는 시스템으로서,
    자동 햅틱 변환 모듈을 저장하도록 구성되어 있는 메모리; 및
    상기 메모리 상에 저장되어 있는 상기 자동 햅틱 변환 모듈을 실행하도록 구성되어 있는 프로세서를 포함하고;
    상기 자동 햅틱 변환 모듈은 상기 입력을 거의 실시간으로 감지하도록 구성되어 있고;
    상기 자동 햅틱 변환 모듈은 또한 상기 감지된 입력을 하나 이상의 햅틱 신호들로 거의 실시간으로 자동으로 변환하도록 구성되어 있으며;
    상기 자동 햅틱 변환 모듈은 또한 상기 하나 이상의 햅틱 신호들에 기초하여 상기 하나 이상의 햅틱 효과들을 발생시키도록 구성되어 있는 시스템.
  12. 제11항에 있어서, 상기 자동 햅틱 변환 모듈은 또한 상기 감지된 입력의 하나 이상의 특성들을 식별하도록 구성되어 있고;
    상기 자동 햅틱 변환 모듈은 또한 상기 하나 이상의 식별된 특성들에 기초하여 상기 하나 이상의 햅틱 신호들을 수정하도록 구성되어 있는 시스템.
  13. 제12항에 있어서, 상기 자동 햅틱 변환 모듈은 또한 상기 하나 이상의 햅틱 신호들의 하나 이상의 햅틱 파라미터들을 상기 하나 이상의 식별된 특성들과 일치하도록 수정하도록 구성되어 있는 시스템.
  14. 제13항에 있어서, 상기 감지된 입력의 상기 하나 이상의 특성들은 진폭, 주파수, 지속기간, 포락선, 밀도, 크기, 또는 강도 중 적어도 하나를 포함하고;
    상기 하나 이상의 햅틱 신호들의 상기 하나 이상의 햅틱 파라미터들은 진폭 햅틱 파라미터, 주파수 햅틱 파라미터, 지속기간 햅틱 파라미터, 포락선 햅틱 파라미터, 밀도 햅틱 파라미터, 크기 햅틱 파라미터, 또는 강도 햅틱 파라미터 중 적어도 하나를 포함하는 것인 시스템.
  15. 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 제1항 내지 제10항 중 어느 한 항에 따른 방법을 구현하게 하는 명령어들을 저장하고 있는 컴퓨터 판독가능 매체.
KR20140116720A 2013-09-06 2014-09-03 자동 원격 감지 및 햅틱 변환 시스템 KR20150028733A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/019,606 US9443401B2 (en) 2013-09-06 2013-09-06 Automatic remote sensing and haptic conversion system
US14/019,606 2013-09-06

Publications (1)

Publication Number Publication Date
KR20150028733A true KR20150028733A (ko) 2015-03-16

Family

ID=51357695

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20140116720A KR20150028733A (ko) 2013-09-06 2014-09-03 자동 원격 감지 및 햅틱 변환 시스템

Country Status (5)

Country Link
US (3) US9443401B2 (ko)
EP (2) EP3379385A3 (ko)
JP (2) JP6494222B2 (ko)
KR (1) KR20150028733A (ko)
CN (1) CN104423586A (ko)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8717152B2 (en) 2011-02-11 2014-05-06 Immersion Corporation Sound to haptic effect conversion system using waveform
US9715276B2 (en) 2012-04-04 2017-07-25 Immersion Corporation Sound to haptic effect conversion system using multiple actuators
US9368005B2 (en) 2012-08-31 2016-06-14 Immersion Corporation Sound to haptic effect conversion system using mapping
KR101427993B1 (ko) * 2012-12-17 2014-08-08 포항공과대학교 산학협력단 오디오 신호의 햅틱 신호 변환 방법 및 이를 수행하는 장치
US9997032B2 (en) 2013-04-09 2018-06-12 Immersion Corporation Offline haptic conversion system
US9519346B2 (en) 2013-05-17 2016-12-13 Immersion Corporation Low-frequency effects haptic conversion system
US9514620B2 (en) 2013-09-06 2016-12-06 Immersion Corporation Spatialized haptic feedback based on dynamically scaled values
US9443401B2 (en) * 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US10079650B2 (en) 2015-12-04 2018-09-18 Infineon Technologies Ag Robust high speed sensor interface for remote sensors
US9881467B2 (en) * 2016-02-22 2018-01-30 Immersion Corporation Haptic effects conflict avoidance
US10514763B2 (en) * 2016-04-07 2019-12-24 Sony Corporation System, terminal apparatus, method, and recording medium
US10297120B2 (en) * 2016-12-13 2019-05-21 Disney Enterprises, Inc. Haptic effect generation system
US20180288364A1 (en) * 2017-03-30 2018-10-04 Zen-Me Labs Oy Method and system for sensory environment replication
US10334360B2 (en) * 2017-06-12 2019-06-25 Revolabs, Inc Method for accurately calculating the direction of arrival of sound at a microphone array
US10503261B2 (en) * 2017-12-15 2019-12-10 Google Llc Multi-point feedback control for touchpads
US11353967B2 (en) 2018-05-31 2022-06-07 Arkh Litho Holdings, LLC Interacting with a virtual environment using a pointing controller
EP3928187A1 (en) 2019-02-18 2021-12-29 Arkh Litho Holdings, LLC Interacting with a smart device using a pointing controller
US10754428B1 (en) * 2019-02-25 2020-08-25 Facebook Technologies, Llc Systems, methods, and devices for audio-tactile mapping
EP4034974A4 (en) 2019-09-24 2024-01-03 Arkh, Inc. SMART RING
EP4046001A1 (en) * 2019-10-14 2022-08-24 Lofelt GmbH Systems and methods for authoring an audio signal and for transforming the authored audio signal into a haptic data file
US11755111B2 (en) 2020-03-16 2023-09-12 Arkh, Inc. Spatially aware computing hub and environment
USD1009861S1 (en) 2020-09-25 2024-01-02 Arkh, Inc. Smart ring
CN114351613A (zh) * 2022-01-07 2022-04-15 北京工业大学 一种智慧公路交通线性诱导装置

Family Cites Families (136)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4270226A (en) * 1976-07-22 1981-05-26 Morton Weintraub Remote control system
JPS54155080A (en) * 1978-05-27 1979-12-06 Citizen Watch Co Ltd Pace generator
US5035242A (en) 1990-04-16 1991-07-30 David Franklin Method and apparatus for sound responsive tactile stimulation of deaf individuals
JPH07245793A (ja) * 1994-03-03 1995-09-19 Bodeisonitsuku Kk 簡易装着型体感振動装置
US5684722A (en) * 1994-09-21 1997-11-04 Thorner; Craig Apparatus and method for generating a control signal for a tactile sensation generator
JP3034433B2 (ja) * 1994-10-31 2000-04-17 核燃料サイクル開発機構 構造物の熱設計方法およびその設計に最適な数値計算装置
JPH0951303A (ja) * 1995-08-08 1997-02-18 Kokusai Electric Co Ltd カード型無線受信機
US5892447A (en) * 1996-12-06 1999-04-06 Wilkinson; Milton E. Portable cellular alert system
US6611599B2 (en) * 1997-09-29 2003-08-26 Hewlett-Packard Development Company, L.P. Watermarking of digital object
US6384814B1 (en) * 1998-02-16 2002-05-07 Canon Kabushiki Kaisha Input pen
US6693626B1 (en) * 1999-12-07 2004-02-17 Immersion Corporation Haptic feedback using a keyboard device
US6822635B2 (en) * 2000-01-19 2004-11-23 Immersion Corporation Haptic interface for laptop computers and other portable devices
US7159008B1 (en) * 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
WO2002037067A1 (fr) * 2000-11-06 2002-05-10 Nsk Ltd. Dispositif et procede diagnostiquant des anomalies pour une installation mecanique
JP3958944B2 (ja) * 2001-07-17 2007-08-15 アルプス電気株式会社 多機能入力装置
US7094164B2 (en) * 2001-09-12 2006-08-22 Pillar Vision Corporation Trajectory detection and feedback system
US6703550B2 (en) * 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
US6783495B2 (en) * 2002-03-19 2004-08-31 Fuji Photo Film Co., Ltd. Ultrasonic diagnosing apparatus
US7308314B2 (en) * 2002-06-06 2007-12-11 Advanced Medical Electronics Method and apparatus for sensory substitution, vision prosthesis, or low-vision enhancement utilizing thermal sensing
AU2003293449A1 (en) * 2002-12-08 2004-06-30 Immersion Corporation Methods and systems for providing a virtual touch haptic effect to handheld communication devices
US7779166B2 (en) * 2002-12-08 2010-08-17 Immersion Corporation Using haptic effects to enhance information content in communications
US8059088B2 (en) * 2002-12-08 2011-11-15 Immersion Corporation Methods and systems for providing haptic messaging to handheld communication devices
US8830161B2 (en) * 2002-12-08 2014-09-09 Immersion Corporation Methods and systems for providing a virtual touch haptic effect to handheld communication devices
US20040127198A1 (en) * 2002-12-30 2004-07-01 Roskind James A. Automatically changing a mobile device configuration based on environmental condition
US20050228207A1 (en) * 2003-02-12 2005-10-13 Vincent Ardizzone Magneto-cymatic therapeutic oscillating wand
US6950028B2 (en) * 2003-04-25 2005-09-27 Stephen Eliot Zweig Electronic time-temperature indicator
EP1533678A1 (en) * 2003-11-24 2005-05-25 Sony International (Europe) GmbH Physical feedback channel for entertaining or gaming environments
US20090312817A1 (en) 2003-11-26 2009-12-17 Wicab, Inc. Systems and methods for altering brain and body functions and for treating conditions and diseases of the same
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
US7791588B2 (en) * 2003-12-22 2010-09-07 Immersion Corporation System and method for mapping instructions associated with haptic feedback
US7283120B2 (en) * 2004-01-16 2007-10-16 Immersion Corporation Method and apparatus for providing haptic feedback having a position-based component and a predetermined time-based component
JP4046095B2 (ja) * 2004-03-26 2008-02-13 ソニー株式会社 触覚機能付き入力装置、情報入力方法及び電子機器
US20070300142A1 (en) * 2005-04-01 2007-12-27 King Martin T Contextual dynamic advertising based upon captured rendered text
US7307820B2 (en) * 2004-06-21 2007-12-11 Siemens Energy & Automation, Inc. Systems, methods, and device for arc fault detection
US20060017691A1 (en) * 2004-07-23 2006-01-26 Juan Manuel Cruz-Hernandez System and method for controlling audio output associated with haptic effects
US20110191674A1 (en) * 2004-08-06 2011-08-04 Sensable Technologies, Inc. Virtual musical interface in a haptic virtual environment
JP2006154213A (ja) * 2004-11-29 2006-06-15 Ntt Advanced Technology Corp 声の響きの評価方法および評価装置
KR100590576B1 (ko) * 2004-12-28 2006-11-23 삼성전자주식회사 영상의 촉각 제공 장치 및 방법
DE102005011358A1 (de) 2005-03-04 2006-09-07 Jens Dipl.-Ing. Hansen Verfahren und Anordnung zum sensitiven Erfassen von Schallereignissen sowie deren Verwendung
CA2605239A1 (en) * 2005-05-02 2006-11-09 University Of Virginia Patent Foundation Systems, devices, and methods for interpreting movement
US20070016425A1 (en) 2005-07-12 2007-01-18 Koren Ward Device for providing perception of the physical environment
US7938009B2 (en) * 2006-02-03 2011-05-10 Immersion Corporation Haptic device testing
CN104063056B (zh) * 2006-04-06 2018-04-20 意美森公司 用于增强的触觉效果的系统和方法
US8378964B2 (en) 2006-04-13 2013-02-19 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US7979146B2 (en) 2006-04-13 2011-07-12 Immersion Corporation System and method for automatically producing haptic events from a digital audio signal
US8000825B2 (en) * 2006-04-13 2011-08-16 Immersion Corporation System and method for automatically producing haptic events from a digital audio file
US8174512B2 (en) * 2006-06-02 2012-05-08 Immersion Corporation Hybrid haptic device utilizing mechanical and programmable haptic effects
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7890863B2 (en) * 2006-10-04 2011-02-15 Immersion Corporation Haptic effects with proximity sensing
JP4367663B2 (ja) * 2007-04-10 2009-11-18 ソニー株式会社 画像処理装置、画像処理方法、プログラム
JP4467601B2 (ja) * 2007-05-08 2010-05-26 ソニー株式会社 ビート強調装置、音声出力装置、電子機器、およびビート出力方法
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
WO2008146616A1 (ja) * 2007-05-25 2008-12-04 Nec Corporation 画像音響区間群対応付け装置と方法およびプログラム
US8683378B2 (en) * 2007-09-04 2014-03-25 Apple Inc. Scrolling techniques for user interfaces
US8098235B2 (en) * 2007-09-28 2012-01-17 Immersion Corporation Multi-touch device having dynamic haptic effects
US9019087B2 (en) * 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
US8325144B1 (en) * 2007-10-17 2012-12-04 Immersion Corporation Digital envelope modulator for haptic feedback devices
US9513704B2 (en) * 2008-03-12 2016-12-06 Immersion Corporation Haptically enabled user interface
US9733704B2 (en) * 2008-06-12 2017-08-15 Immersion Corporation User interface impact actuator
KR101556522B1 (ko) * 2008-06-27 2015-10-01 엘지전자 주식회사 촉각 효과를 제공하는 휴대 단말기 및 그 제어방법
KR101474963B1 (ko) * 2008-07-01 2014-12-19 엘지전자 주식회사 휴대 단말기 및 그 제어방법
EP2741177B1 (en) * 2008-07-15 2019-06-26 Immersion Corporation Systems and Methods for Transmitting Haptic Messages
US8380561B1 (en) * 2008-07-30 2013-02-19 Immersion Corporation Method and apparatus for scoring haptic devices
US7969287B2 (en) * 2008-08-18 2011-06-28 Visteon Global Technologies, Inc. Haptic effect control system
US9400555B2 (en) * 2008-10-10 2016-07-26 Internet Services, Llc System and method for synchronization of haptic data and media data
US8884884B2 (en) * 2008-11-12 2014-11-11 Immersion Corporation Haptic effect generation with an eccentric rotating mass actuator
US8551002B2 (en) * 2008-12-12 2013-10-08 Immersion Corporation Spatial array of sensors mounted on a tool
US8216212B2 (en) * 2009-01-15 2012-07-10 Immersion Corporation Providing haptic feedback to the handle of a tool
US8652046B2 (en) * 2009-01-15 2014-02-18 Immersion Corporation Palpation algorithms for computer-augmented hand tools
US8698736B2 (en) * 2009-03-24 2014-04-15 Immersion Corporation Handheld computer interface with haptic feedback
WO2010141893A2 (en) * 2009-06-05 2010-12-09 Advanced Brain Monitoring, Inc. Systems and methods for controlling position
US10401961B2 (en) * 2009-06-09 2019-09-03 Immersion Corporation Method and apparatus for generating haptic effects using actuators
US8730182B2 (en) * 2009-07-30 2014-05-20 Immersion Corporation Systems and methods for piezo-based haptic feedback
US10156480B2 (en) * 2009-09-03 2018-12-18 Rosemount Inc. Thermowell vibration frequency diagnostic
US9317116B2 (en) * 2009-09-09 2016-04-19 Immersion Corporation Systems and methods for haptically-enhanced text interfaces
GB2474047B (en) * 2009-10-02 2014-12-17 New Transducers Ltd Touch sensitive device
US8610549B2 (en) * 2009-10-16 2013-12-17 Immersion Corporation Systems and methods for providing haptic feedback at multiple resonance frequencies
US8902050B2 (en) * 2009-10-29 2014-12-02 Immersion Corporation Systems and methods for haptic augmentation of voice-to-text conversion
US8392342B2 (en) * 2009-11-18 2013-03-05 Empire Technology Development Llc Method and apparatus for predicting movement of a tool in each of four dimensions and generating feedback during surgical events using a 4D virtual real-time space
US20120194418A1 (en) * 2010-02-28 2012-08-02 Osterhout Group, Inc. Ar glasses with user action control and event input based control of eyepiece application
US9128281B2 (en) * 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
JP2011188342A (ja) * 2010-03-10 2011-09-22 Sony Corp 情報処理装置、情報処理方法及びプログラム
JP2011209906A (ja) * 2010-03-29 2011-10-20 Shin Etsu Polymer Co Ltd 入力部材およびそれを備える電子機器
WO2011133860A2 (en) * 2010-04-23 2011-10-27 Immersion Corporation Systems and methods for providing haptic effects
KR101108145B1 (ko) * 2010-05-07 2012-02-06 광주과학기술원 고해상도 타일드 디스플레이를 지원하는 햅틱기반 네트워크 가상환경 구현 장치 및 방법
US9367150B2 (en) * 2010-05-20 2016-06-14 Nokia Technologies Oy Apparatus and associated methods
US20120327006A1 (en) * 2010-05-21 2012-12-27 Disney Enterprises, Inc. Using tactile feedback to provide spatial awareness
CN102971689B (zh) * 2010-06-28 2015-10-07 诺基亚公司 触觉表面压缩
JP2012027855A (ja) * 2010-07-27 2012-02-09 Kyocera Corp 触感呈示装置及び触感呈示装置の制御方法
US9448626B2 (en) 2011-02-11 2016-09-20 Immersion Corporation Sound to haptic effect conversion system using amplitude value
US8717152B2 (en) * 2011-02-11 2014-05-06 Immersion Corporation Sound to haptic effect conversion system using waveform
WO2012125596A2 (en) * 2011-03-12 2012-09-20 Parshionikar Uday Multipurpose controller for electronic devices, facial expressions management and drowsiness detection
US10039672B2 (en) * 2011-03-23 2018-08-07 Ali Mohammad Aghamohammadi Vibro-electro tactile ultrasound hearing device
US8717151B2 (en) * 2011-05-13 2014-05-06 Qualcomm Incorporated Devices and methods for presenting information to a user on a tactile output surface of a mobile device
US9083821B2 (en) 2011-06-03 2015-07-14 Apple Inc. Converting audio to haptic feedback in an electronic device
US8832804B1 (en) * 2011-08-05 2014-09-09 Google Inc. Password pre-verification in client-server applications
US9582178B2 (en) * 2011-11-07 2017-02-28 Immersion Corporation Systems and methods for multi-pressure interaction on touch-sensitive surfaces
US20130227411A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Sensation enhanced messaging
US8749690B2 (en) * 2011-12-13 2014-06-10 Facebook, Inc. In-context content capture
US8711118B2 (en) 2012-02-15 2014-04-29 Immersion Corporation Interactivity model for shared feedback on mobile devices
JP6541292B2 (ja) 2012-02-15 2019-07-10 イマージョン コーポレーションImmersion Corporation プリミティブを用いた高解像度ハプティック効果生成
US9715276B2 (en) * 2012-04-04 2017-07-25 Immersion Corporation Sound to haptic effect conversion system using multiple actuators
US8874345B2 (en) * 2012-04-04 2014-10-28 General Electric Company Method and system for identifying an erroneous speed of a vehicle
US9891709B2 (en) * 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US20130311881A1 (en) * 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US8860563B2 (en) 2012-06-14 2014-10-14 Immersion Corporation Haptic effect conversion system using granular synthesis
US9245428B2 (en) * 2012-08-02 2016-01-26 Immersion Corporation Systems and methods for haptic remote control gaming
US9386616B2 (en) * 2012-08-14 2016-07-05 Lg Electronics Inc. Device and method for performing inter-device communication
US9116546B2 (en) * 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
US9368005B2 (en) 2012-08-31 2016-06-14 Immersion Corporation Sound to haptic effect conversion system using mapping
US9342882B2 (en) * 2012-09-06 2016-05-17 Siemens Medical Solutions Usa, Inc. Methods and systems for determining the concentration of a contrast agent
US9092059B2 (en) 2012-10-26 2015-07-28 Immersion Corporation Stream-independent sound to haptic effect conversion system
US20140139451A1 (en) * 2012-11-20 2014-05-22 Vincent Levesque Systems and Methods For Providing Mode or State Awareness With Programmable Surface Texture
US9330544B2 (en) * 2012-11-20 2016-05-03 Immersion Corporation System and method for simulated physical interactions with haptic effects
US9128523B2 (en) * 2012-12-20 2015-09-08 Amazon Technologies, Inc. Dynamically generating haptic effects from audio data
US9261960B2 (en) 2013-01-24 2016-02-16 Immersion Corporation Haptic sensation recording and playback
US9760278B2 (en) * 2013-03-01 2017-09-12 Altaba INC. Finger expressions for touch screens
US8754757B1 (en) 2013-03-05 2014-06-17 Immersion Corporation Automatic fitting of haptic effects
US9833697B2 (en) * 2013-03-11 2017-12-05 Immersion Corporation Haptic sensations as a function of eye gaze
US9202351B2 (en) * 2013-03-11 2015-12-01 Immersion Corporation Systems and methods for haptics in vibrating environments and devices
US9866924B2 (en) * 2013-03-14 2018-01-09 Immersion Corporation Systems and methods for enhanced television interaction
US9189098B2 (en) * 2013-03-14 2015-11-17 Immersion Corporation Systems and methods for syncing haptic feedback calls
US9092954B2 (en) * 2013-03-15 2015-07-28 Immersion Corporation Wearable haptic device
US20140267076A1 (en) * 2013-03-15 2014-09-18 Immersion Corporation Systems and Methods for Parameter Modification of Haptic Effects
KR101666393B1 (ko) * 2013-03-27 2016-10-14 한국전자통신연구원 음향효과를 이용한 촉각효과 재생 장치 및 방법
JP6469963B2 (ja) * 2013-04-22 2019-02-13 イマージョン コーポレーションImmersion Corporation 触覚対応トリガーを有するゲーミング装置
CN109582150A (zh) * 2013-04-26 2019-04-05 意美森公司 利用触觉单元阵列模拟有形用户界面交互和手势
US9524030B2 (en) * 2013-04-26 2016-12-20 Immersion Corporation Haptic feedback for interactions with foldable-bendable displays
US9519346B2 (en) * 2013-05-17 2016-12-13 Immersion Corporation Low-frequency effects haptic conversion system
EP3144780A1 (en) * 2013-06-11 2017-03-22 Immersion Corporation Systems and methods for pressure-based haptic effects
US9729730B2 (en) * 2013-07-02 2017-08-08 Immersion Corporation Systems and methods for perceptual normalization of haptic effects
US10037081B2 (en) * 2013-08-12 2018-07-31 Immersion Corporation Systems and methods for haptic fiddling
US9443401B2 (en) * 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US10599218B2 (en) 2013-09-06 2020-03-24 Immersion Corporation Haptic conversion system using frequency shifting
US9898085B2 (en) 2013-09-06 2018-02-20 Immersion Corporation Haptic conversion system using segmenting and combining
US20150177840A1 (en) * 2013-12-19 2015-06-25 Nokia Corporation Apparatus and associated methods for user input

Also Published As

Publication number Publication date
US9910495B2 (en) 2018-03-06
US20180129291A1 (en) 2018-05-10
US10416774B2 (en) 2019-09-17
US9443401B2 (en) 2016-09-13
US20150070144A1 (en) 2015-03-12
EP3379385A3 (en) 2019-01-02
CN104423586A (zh) 2015-03-18
EP2846220A1 (en) 2015-03-11
JP2015053056A (ja) 2015-03-19
JP2019083074A (ja) 2019-05-30
US20160342212A1 (en) 2016-11-24
JP6494222B2 (ja) 2019-04-03
EP3379385A2 (en) 2018-09-26

Similar Documents

Publication Publication Date Title
US10416774B2 (en) Automatic remote sensing and haptic conversion system
JP6739571B2 (ja) 周波数シフトを用いたハプティック変換システム
JP6526284B2 (ja) 自動ハプティック効果調整システム
US10748390B2 (en) Dynamic haptic generation based on detected video events
US20180210552A1 (en) Haptic conversion system using segmenting and combining
EP2937863B1 (en) Automatic tuning of haptic effects
EP2846330B1 (en) Haptic warping system that transforms a haptic signal into a collection of vibrotactile haptic effect patterns
EP3208690A1 (en) Haptic effects conflict avoidance
US10748391B2 (en) Haptic signal conversion system
JP2019050558A (ja) 非オーディオデータを用いたヘッドホン上でのハプティックのレンダリング
US20200192480A1 (en) Systems and methods for providing haptic effects based on a user's motion or environment
CN115633120B (zh) 一种交互方法和设备