KR20140113492A - 강화된 텔레비전 상호작용을 위한 시스템 및 방법 - Google Patents

강화된 텔레비전 상호작용을 위한 시스템 및 방법 Download PDF

Info

Publication number
KR20140113492A
KR20140113492A KR1020140030063A KR20140030063A KR20140113492A KR 20140113492 A KR20140113492 A KR 20140113492A KR 1020140030063 A KR1020140030063 A KR 1020140030063A KR 20140030063 A KR20140030063 A KR 20140030063A KR 20140113492 A KR20140113492 A KR 20140113492A
Authority
KR
South Korea
Prior art keywords
haptic
signal
user
information
television
Prior art date
Application number
KR1020140030063A
Other languages
English (en)
Inventor
대니 그랜트
파멜라 피멘텔
에릭 제르베
빈센트 레베스크
아론 카펠루스
미나 장
다니엘 파커
데이비드 번바움
리 지앙
스티븐 랭크
Original Assignee
임머숀 코퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 임머숀 코퍼레이션 filed Critical 임머숀 코퍼레이션
Publication of KR20140113492A publication Critical patent/KR20140113492A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8186—Monomedia components thereof involving executable data, e.g. software specially adapted to be executed by a peripheral of the client device, e.g. by a reprogrammable remote control
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00—Tactile signalling systems, e.g. personal calling systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Neurosurgery (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

강화된 텔레비전 상호작용을 위한 시스템들 및 방법들이 개시된다. 예를 들어, 하나의 개시된 방법은 통지 정보를 수신하는 단계 - 통지 정보는 텔레비전 장치에 의해 디스플레이되는 비디오 콘텐츠와 연관되는 이벤트를 표시함 - ; 통지 정보와 연관되는 햅틱 효과를 결정하는 단계; 햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 단계 - 햅틱 신호는 햅틱 출력 장치가 햅틱 효과를 출력하게 하도록 구성됨 - 를 포함한다.

Description

강화된 텔레비전 상호작용을 위한 시스템 및 방법{SYSTEMS AND METHODS FOR ENHANCED TELEVISION INTERACTION}
본 개시는 일반적으로 햅틱 피드백에 관한 것으로, 특히 강화된 텔레비전 상호작용을 위한 시스템 및 방법에 관한 것이다.
종래의 텔레비전들은 사용자들이 방송, 케이블, 또는 위성 프로그래밍, 사전 녹화된 쇼들 및 영화들과 같은 다양한 콘텐츠 특징들을 시청하고, 비디오 게임들을 플레이하는 것을 허용한다. 그러한 콘텐츠는 텔레비전에 제공되고 하나 이상의 시청자들 또는 참가자들에게 디스플레이된다. 종종, 그러한 프로그래밍은 광고들 또는 비상 방송 메시지들과 같은, 시청자가 시청하기를 원하는 프로그래밍과 연관되거나 프로그래밍을 대체하는 다른 콘텐츠를 포함하며, 이는 사용자가 텔레비전 또는 다른 디스플레이 장치에 초점을 잃게 할 수 있다. 또는, 사용자가 특정 프로그램을 즐기는 동안, 프로그램 내에 완전히 빠지지 않을 수 있다.
본 개시에 따른 실시예들은 강화된 텔레비전 상호작용을 위한 시스템들 및 방법들을 제공한다. 예를 들어, 개시된 일 실시예는 통지 정보를 수신하는 단계 - 통지 정보는 텔레비전 장치에 의해 디스플레이되는 비디오 콘텐츠와 연관되는 이벤트를 표시함 - ; 통지 정보와 연관되는 햅틱 효과를 결정하는 단계; 및 햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 단계 - 햅틱 신호는 햅틱 출력 장치가 햅틱 효과를 출력하게 하도록 구성됨 - 를 갖는 방법을 포함한다. 다른 실시예에서, 컴퓨터 판독가능 매체는 프로세서가 그러한 방법을 수행하게 하는 프로그램 코드를 포함한다.
이러한 예시적 실시예들은 본 발명을 제한하거나 정의하기 위해 언급되는 것이 아니라, 본 발명의 이해를 돕기 위한 예들을 제공하기 위해 언급되어 있다. 예시적 실시예들은 상세한 설명에 논의되고 있으며, 이는 본 발명에 대한 추가 설명을 제공한다. 본 발명의 다양한 실시예들에 의해 제공되는 장점들은 본 명세서를 검토함으로써 추가로 이해될 수 있다.
본 명세서에 포함되어 명세서의 일부를 구성하는 첨부 도면들은 예시적 실시예들의 설명과 함께 실시예들 중 하나 이상의 예들을 예시하고, 실시예들의 원리들 및 구현들을 설명하는 역할을 한다.
도 1a-도 1c는 실시예들에 따른 강화된 텔레비전 상호작용을 위한 시스템들을 도시한다.
도 2는 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 장치를 도시한다.
도 3은 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 텔레비전 장치를 도시한다.
도 4a-도 4d 및 도 5는 실시예들에 따른 강화된 텔레비전 상호작용을 위한 시스템들을 도시한다.
도 6-도 8은 실시예들에 따른 강화된 텔레비전 상호작용을 위한 방법들을 도시한다.
예시적 실시예들은 강화된 텔레비전 상호작용을 위한 시스템들 및 방법들의 맥락에서 본 명세서에 설명된다. 당업자들은 이하의 설명이 단지 예시적이고 임의의 방법으로 제한하도록 의도되지 않는 것을 인식할 것이다. 다른 실시예들은 그것들 자체를 본 개시의 이점을 갖는 그러한 숙련된 사람들에게 쉽게 제안할 것이다. 첨부 도면들에 예시된 바와 같이 예시적 실시예들의 구현들에 대한 참조가 이제 상세히 이루어질 것이다. 도면들 및 이하의 설명 도처에 동일 또는 유사한 항목들을 참조하기 위해 동일한 참조 표시가 사용될 것이다.
명료성을 위해, 본 명세서에 설명되는 구현들의 통상적 특징들 모두가 도시되고 설명되는 것은 아니다. 물론, 임의의 그러한 실제 구현의 개발에서, 응용 및 사업 관련 제약들의 준수와 같이, 개발자 고유의 목표들을 달성하기 위해 다수의 구현 고유의 결정들이 이루어져야 한다는 점, 및 이러한 고유의 목표들이 한 구현으로부터 다른 구현으로 그리고 한 개발자로부터 다른 개발자로 변화될 것이라는 점이 이해될 것이다.
강화된 텔레비전 상호작용을 위한 예시적 시스템들
이제 도 1a를 참조하면, 도 1a는 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 예시적 시스템을 도시한다. 도 1a는 "스마트" 텔레비전(110) 및 핸드헬드 태블릿 컴퓨팅 장치(120)를 도시한다. 사용자는 텔레비전(110)의 프로그램을 시청하고 있고 채널들을 변경하고, 음량을 변경하고, 프로그램 정보를 갖고, 콘텐츠를 (예컨대 디지털 비디오 레코더 상에) 녹화하고 재생하는 등과 같은 텔레비전을 제어하는 리모트 컨트롤러로서 태블릿 장치(120)를 사용한다. 시청할 텔레비전 프로그램을 찾은 후에, 사용자는 채널을 변경하고 프로그램을 시청하기 시작한다. 잠시 후에, 텔레비전 프로그램은 광고들에 의해 중단되고 사용자는 자신의 관심을 자신의 태블릿 컴퓨터로 변경하며, 그녀는 인터넷을 검색하기 시작한다. 동시에, 스마트 텔레비전(110)은 텔레비전 채널을 통해 수신되는 콘텐츠의 스트림을 감시해 왔고 광고 중단이 발생한 것을 결정하고, 광고가 개시된 것을 표시하는 햅틱 효과를 생성하여 사용자의 장치에 송신한다. 이때에, 사용자는 음료를 움켜쥐고 빠른 이메일을 입력하기 위해 자신의 태블릿을 주방으로 가지고 간다.
스마트 텔레비전(110)이 텔레비전 채널을 계속해서 감시하므로, 그것은 광고가 종료할 때마다 햅틱 효과들이 출력되게 하기 위해 신호들을 사용자의 장치에 송신한다. 몇 분 후에, 텔레비전은 사용자가 시청하고 있는 프로그램이 재개하는 것을 결정한다. 스마트 텔레비전은 햅틱 신호를 사용자의 태블릿에 다시 송신하며, 이는 텔레비전 프로그램이 재개하려는 것을 표시하기 위해 태블릿이 강한 햅틱 효과를 사용자에게 출력하게 하며, 어느 시간에, 사용자는 자신의 이메일을 나중에 완료하는 저장으로 돌아가고 텔레비전을 계속해서 시청하는 것으로 돌아간다.
다소 나중에, 사용자는 자신이 DVR(digital video recorder) 상에 이전에 녹화한 프로그램의 시청을 선택한다. 그녀는 프로그램을 선택하고 그것의 재생을 시작하기 위해 자신의 태블릿을 사용한다. 잠시후에, 녹화는 녹화된 프로그램의 방영 동안 방송되는 광고들을 재생하기 시작한다. 사용자는 광고들을 빨리 감기 위해 빨리 감기 기능을 자신의 태블릿 상에서 선택한다. 그녀가 빨리 감을 때, 텔레비전은 DVR로부터 콘텐츠 스트리밍을 감시하고, 각각의 광고가 종료할 때, 스마트 TV는 광고가 완료된 것을 표시하기 위해 낮은 강도 햅틱 효과를 출력하도록 햅틱 메시지를 태블릿에 송신한다. 또는, 도 1b에 도시된 바와 같이, 일부 경우들에서 DVR(또는 둘 다)는 햅틱 신호들을 태블릿에 제공하기 위해 콘텐츠를 감시할 수 있다. 따라서, 사용자가 다수의 광고들을 빨리 감을 때, 그녀는 각각의 광고가 끝난 후에 햅틱 효과들을 느낀다. 스마트 텔레비전은 마지막 광고가 종료되고 텔레비전 프로그램이 재개하는 것을 결정할 때, 스마트 텔레비전은 높은 강도 햅틱 신호를 태블릿에 송신하며, 이는 텔레비전 프로그램이 재개하는 것을 표시하는 햅틱 효과를 출력한다. 그 다음, 사용자는 재생을 정상 속도로 되돌리 놓기 위해 "플레이" 기능을 누르고 텔레비전 프로그램의 시청을 재개한다. 이러한 실시예들은 사용자가 그녀 자신의 텔레비전 경험을 완전히 제어하는 것을 허용하지만, 그녀가 다른 업무들 간의 자신의 관심을 나누는 것을 허용하기 위해 유익한 촉각 큐들을 제공한다. 그러한 기능성은 매우 다양한 상황에 유용할 수 있고 부가 이벤트들은 그러한 콘텐츠의 사용자의 즐거움을 높이기 위해 검출되고 사용될 수 있다.
이제 도 1c를 참조하면, 상이한 사용자들이 동일한 텔레비전을 모두 시청하는 것에 의해 다수의 장치들이 사용되고 있는 다른 예시적 실시예가 도시된다. 장치들(120) 각각은 텔레비전과 통신들을 설정하고 광고 시간이 종료되고 있는 것을 표시하기 위해 상기 논의된 햅틱 효과들과 같은 정보를 텔레비전으로부터 수신할 수 있다. 그러나, 도 1c에 도시된 시스템에서, 4개의 장치(120a-d)가 텔레비전과 상호작용하고 있지만, 1개의 장치(120b)만이 텔레비전을 제어할 수 있다. 따라서, 장치(120b)의 사용자는 미세한 정보를 장치들(120a, c, d)을 갖는 소극적 시청자들에게 간단히 제공하는 대신에, 사용자 동작을 유발하는 특정 이벤트들을 강조하기 위해서와 같이, 텔레비전으로부터 부가, 또는 더 강한 효과들을 수신할 수 있다.
이러한 예시적 예들은 리더를 본 명세서에 논의되는 일반적 발명 대상에 도입하기 위해 제공되고 본 개시는 이러한 예들에 제한되지 않는다. 이하의 부분들은 강화된 텔레비전 상호작용을 위한 시스템들 및 방법들의 다양한 부가 비제한 실시예들 및 예들을 설명한다.
이제 도 2를 참조하면, 도 2는 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 시스템을 도시한다. 도 2에 도시된 실시예에서, 시스템(200)은 하우징(210), 프로세서(220), 메모리(230), 터치 감지 디스플레이(250), 햅틱 출력 장치(240), 통신 인터페이스(260), 스피커(270), 및 센서(290)를 포함한다. 게다가, 시스템(200)은 햅틱 출력 장치(280)와 통신하며, 햅틱 출력 장치는 일부 실시예들에 선택적으로 결합되거나 포함될 수 있다. 프로세서(220)는 메모리(230)와 통신하고, 이러한 실시예에서, 프로세서(220) 및 메모리(230) 둘 다는 하우징(210) 내에 배치된다. 터치 감지 표면을 포함하거나 터치 감지 표면과 통신하는 터치 감지 디스플레이(250)는 터치 감지 디스플레이(250)의 적어도 일부가 시스템(200)의 사용자에게 노출되도록 하우징(210) 내에 부분적으로 배치된다. 일부 실시예들에서, 터치 감지 디스플레이(250)는 하우징(210) 내에 배치되지 않을 수 있다. 예를 들어, 시스템(200)은 분리 하우징 내에 배치되는 터치 감지 디스플레이(250)에 연결되거나 그렇지 않으면 터치 감지 디스플레이와 통신할 수 있다. 일부 실시예들에서, 하우징(210)은 서로 슬라이딩가능하게 결합되거나, 서로 피봇가능하게 결합되거나 서로 해제가능하게 결합될 수 있는 2개의 하우징을 포함할 수 있다. 또 다른 실시예들에서, 시스템(200)은 디스플레이를 포함하거나 디스플레이와 통신할 수 있고 마우스, 키보드, 버튼들, 노브들, 슬라이더 컨트롤들, 스위치들, 휠들, 롤러들, 조이스틱들, 다른 조작체, 또는 그것의 조합과 같은 다른 사용자 입력 장치들을 포함하거나 다른 사용자 입력 장치들과 통신할 수 있다.
일부 실시예들에서, 하나 이상의 터치 감지 표면들은 시스템(200)의 하나 이상의 측면들 상에 포함되거나 하나 이상의 측면들 내에 배치될 수 있다. 예를 들어, 일 실시예에서, 터치 감지 표면은 시스템(200)의 후면 표면 내에 배치되거나 후면 표면을 포함한다. 다른 실시예에서, 제1 터치 감지 표면은 시스템(200)의 후면 표면 내에 배치되거나 후면 표면을 포함하고 제2 터치 감지 표면은 시스템(200)의 측면 표면 내에 배치되거나 측면 표면을 포함한다. 일부 실시예들에서, 시스템은 크램쉘(clamshell) 배열 또는 슬라이딩가능 배열에서와 같이, 2개 이상의 하우징 구성요소들을 포함할 수 있다. 예를 들어, 일 실시예는 터치 감지 디스플레이가 크램쉘의 부분들 각각에 배치된 상태에서 크램쉘 구성을 갖는 시스템을 포함한다. 더욱이, 시스템(200)이 시스템(200)의 하나 이상의 측면들 상에 적어도 하나의 터치 감지 표면를 포함하는 실시예들에서 또는 시스템(200)이 외부 터치 감지 표면과 통신하는 실시예들에서, 디스플레이(250)는 터치 감지 표면을 포함할 수 있거나 포함하지 않을 수 있다. 일부 실시예들에서, 하나 이상의 터치 감지 표면들은 가요성 터치 감지 표면을 가질 수 있다. 다른 실시예들에서, 하나 이상의 터치 감지 표면들은 강성일 수 있다. 다양한 실시예들에서, 시스템(200)은 가요성 및 강성 터치 감지 표면들 둘 다를 포함할 수 있다.
도 2에 도시된 실시예에서, 터치 감지 디스플레이(250)는 프로세서(220)와 통신하고, 신호들을 프로세서(220) 또는 메모리(230)에 제공하고 프로세서(220) 또는 메모리(230)로부터 신호들을 수신하도록 구성된다. 메모리(230)는 프로세서(220)에 의한 사용을 위해, 프로그램 코드 또는 데이터, 또는 둘 다를 저장하도록 구성되며, 프로세서는 메모리(230)에 저장되는 프로그램 코드를 실행하고 신호들을 터치 감지 디스플레이(250)에 송신하고 터치 감지 디스플레이로부터 신호들을 수신하도록 구성된다. 도 2에 도시된 실시예에서, 프로세서(220)는 또한 통신 인터페이스(260)와 통신하고, 하나 이상의 원격 컴퓨터들 또는 서버들과 같은 다른 구성요소들 또는 장치들과 통신하기 위해 통신 인터페이스(260)로부터 신호들을 수신하고 신호들을 통신 인터페이스(260)에 출력하도록 구성된다.
게다가, 게다가, 프로세서(220)는 햅틱 출력 장치(240) 및 햅틱 출력 장치(280)와 통신하고, 햅틱 출력 장치(240) 또는 햅틱 출력 장치(280), 또는 둘 다가 하나 이상의 햅틱 효과들을 출력하게 하기 위해 신호들을 출력하도록 더 구성된다. 더욱이, 프로세서(220)는 스피커(270)와 통신하고 스피커(270)가 사운드들을 출력하게 하기 위해 신호들을 출력하도록 구성된다. 다양한 실시예들에서, 시스템(200)은 더 적거나 부가적 구성요소들 또는 장치들을 포함하거나 이들과 통신할 수 있다. 예를 들어, 마우스 또는 키보드, 또는 둘 다와 같은 다른 사용자 입력 장치들, 또는 부가 터치 감지 장치는 시스템(200) 내에 포함되거나 시스템(200)과 통신할 수 있다. 다른 예로서, 시스템(200)은 하나 이상의 가속도계들, 자이로스코프들, 디지털 콤파스들, 및/또는 다른 센서들을 포함하며/하거나 이들과 통신할 수 있다.
도 2에 도시된 시스템(200)의 하우징(210)은 시스템(200)의 구성요소들의 적어도 일부에 보호를 제공한다. 예를 들어, 하우징(210)은 비와 같은 이물질들(foreign articles)로부터 프로세서(220) 및 메모리(230)를 보호하는 플라스틱 케이싱일 수 있다. 일부 실시예들에서, 하우징(210)은 시스템(200)이 사용자에 의해 투하되면 손상으로부터 하우징(210) 내의 구성요소들을 보호한다. 하우징(210)은 플라스틱들, 고무들, 또는 금속들을 포함하지만 이들에 제한되지 않는 임의의 적절한 재료로 제조될 수 있다. 다양한 실시예들은 상이한 타입들의 하우징들 또는 복수의 하우징들을 포함할 수 있다. 예를 들어, 일부 실시예들에서, 시스템(200)은 휴대용 장치, 핸드헬드 장치, 토이(toy), 게임 콘솔, 핸드헬드 비디오 게임 시스템, 게임패드, 게임 컨트롤러, 데스크톱 컴퓨터, 전자책 리더, 휴대용 다기능 장치 예컨대 휴대 전화, 스마트폰, PDA(personal digital assistant), 랩톱, 태블릿 컴퓨터, 디지털 뮤직 플레이어 등일 수 있다. 다른 실시예들에서, 시스템(200)은 손목 시계, 다른 보석류, 글러브 등과 같은 다른 장치에 내장될 수 있다. 따라서, 실시예들에서, 시스템(200)은 착용가능하다.
도 2에 도시된 실시예에서, 햅틱 출력 장치들(240 및 280)은 프로세서(220)와 통신하고 하나 이상의 햅틱 효과들을 제공하도록 구성된다. 예를 들어, 일 실시예에서, 작동 신호가 프로세서(220)에 의해, 햅틱 출력 장치(240), 햅틱 출력 장치(280), 또는 둘 다에 제공될 때, 각각의 햅틱 출력 장치(들)(240, 280)는 작동 신호에 기초하여 햅틱 효과를 출력한다. 예를 들어, 도시된 실시예에서, 프로세서(220)는 아날로그 구동 신호를 포함하는 햅틱 출력 신호를 햅틱 출력 장치(240)에 송신하도록 구성된다. 일부 실시예들에서, 프로세서(220)는 하이 레벨 커맨드를 햅틱 출력 장치(280)에 송신하도록 구성되며, 커맨드는 햅틱 출력 장치(280)가 햅틱 효과를 출력하게 하기 위해 적절한 구동 신호를 생성하도록 사용될 커맨드 식별자 및 제로 이상의 파라미터들을 포함한다. 다른 실시예들에서, 상이한 신호들 및 상이한 신호 타입들은 하나 이상의 햅틱 출력 장치들 각각에 송신될 수 있다. 예를 들어, 일부 실시예들에서, 프로세서는 햅틱 효과를 출력하기 위해 햅틱 출력 장치를 구동하는 로우 레벨 구동 신호들을 송신할 수 있다. 그러한 구동 신호는 증폭기에 의해 증폭될 수 있거나 또는 구동되는 특정 햅틱 출력 장치를 수용하기 위해 적절한 프로세서들 또는 회로를 사용하여 디지털로부터 아날로그 신호로, 또는 아날로그로부터 디지털 신호로 변환될 수 있다.
진동 효과들을 생성하기 위해, 많은 장치들은 어떤 타입의 액추에이터 또는 햅틱 출력 장치를 이용한다. 이러한 목적에 사용되는 공지된 햅틱 출력 장치들은 편심 질량이 모터에 의해 이동되는 편심 회전 질량(ERM)과 같은 전자기 액추에이터, 스플링에 부착되는 질량체가 앞뒤로 구동되는 선형 공진 액추에이터(LRA), 또는 압전, 전기 활성 폴리머들 또는 형상 기억 합금들과 같은 "스마트 재료"를 포함한다. 햅틱 출력 장치들 또한 정전 마찰(ESF), 초음파 표면 마찰(USF)을 사용하는 것들, 또는 음향 방사 압력을 초음파 햅틱 변환기에 의해 유도하는 것들, 또는 햅틱 기판 및 가요성 또는 변형가능 표면을 사용하는 것들, 또는 공기 분사를 사용하여 훅 부는 입김과 같은 예상된 햅틱 출력을 제공하는 것들 등과 같은 다른 장치들을 광범위하게 포함한다.
다른 실시예들에서, 하나 이상의 구성요소들의 변형은 햅틱 효과를 생성하기 위해 사용될 수 있다. 예를 들어, 하나 이상의 햅틱 효과들은 표면의 형상 또는 표면의 마찰 계수를 변경하기 위해 출력될 수 있다. 하나의 실시예에서, 하나 이상의 햅틱 효과들은 표면 상의 마찰을 변경하기 위해 사용되는 정전기력들 및/또는 초음파력들(ultrasonic forces)을 야기함으로써 생성된다. 다른 실시예들에서, 투명 변형 요소들의 어레이는 스마트겔을 포함하는 하나 이상의 영역들과 같이, 햅틱 효과를 생성하기 위해 사용될 수 있다. 햅틱 출력 장치들은 또한 정전 마찰(ESF), 초음파 표면 마찰(USF)을 사용하는 것들, 또는 음향 방사 압력을 초음파 햅틱 변환기에 의해 유도하는 것들, 또는 햅틱 기판 및 가요성 또는 변형가능 표면을 사용하는 것들, 또는 공기 분사를 사용하여 훅 부는 입김과 같은 예상된 햅틱 출력을 제공하는 것들 등과 같은 비기계 또는 비진동 장치들을 광범위하게 포함한다. 마찰 또는 변형 효과들을 생성할 수 있는 햅틱 출력 장치들(240, 280)을 포함하는 일부 실시예들에서, 햅틱 출력 장치들(240 또는 280)은 사용자에 의해 터치되도록 구성되는 터치 감지 표면에 마찰 또는 변형 효과들이 적용될 수 있도록 터치 감지 디스플레이 상에 중첩되거나 그렇지 않으면 터치 감지 디스플레이(250)에 결합될 수 있다. 일부 실시예들에서, 시스템의 다른 부분들은 그러한 힘들을, 예컨대 사용자에 의해 접촉될 수 있는 하우징의 부분들 또는 시스템에 결합되는 개별 터치 분리 입력 장치에 제공할 수 있다. 2011년 4월 22일자로 출원되고, 발명의 명칭이 "Systems and Methods for Providing Haptic Effects"이며, 전체가 이로써 참조문헌으로 포함되어 있는 공동 계류중의 미국 특허 출원 제13/092,484호는 하나 이상의 햅틱 효과들이 생성될 수 있는 방법들을 설명하고 다양한 햅틱 출력 장치들을 설명한다.
아래의 표 1에 열거된 합성 예들의 방법을 포함하지만, 이에 제한되지 않는 임의의 타입의 입력 합성 방법은 하나 이상의 햅틱 효과 신호들로부터 상호작용 파라미터를 생성하기 위해 사용될 수 있다는 점이 인식될 것이다.
합성 방법 설명
추가 합성 전형적으로 변화하는 진폭들의 입력들을 결합
감산 합성 복소 신호들 또는 다수의 신호 입력들의 필터링
주파수 변조 합성 반송파 신호를 하나 이상의 연산자들에 의해 변조
샘플링 기록된 입력들을 수정에 종속된 입력 소스들로 사용
복합 합성 최종 "새로운" 입력을 설정하기 위해 인공 및 샘플링된 입력들을 사용
위상 왜곡 재생 동안 웨이브테이블들에 저장되는 파형들의 속도를 변경
웨이브쉐이핑 수정된 결과를 생성하기 위해 신호의 의도적 왜곡
재합성 재생 전에 디지털 샘플링된 입력들의 수정
그래뉼러 합성 수개의 작은 입력 세그먼트들을 새로운 입력으로 결합
선형 예측 코딩 음성 합성에 사용되는 바와 같은 유사한 기술
직접 디지털 합성 생성된 파형들의 컴퓨터 수정
웨이브 시퀀싱 새로운 입력을 생성하기 위해 수개의 작은 세그먼트들의 선형 조합
벡터 합성 임의의 수의 상이한 입력 소스들 사이의 페이딩을 위한 기술
물리적 모델링 가상 모션의 물리적 특성들의 수학 방정식들
표 1 - 합성 방법들
도 2에서, 통신 인터페이스(260)는 프로세서(220)와 통신하고 유선 또는 무선 통신들을 시스템(200)으로부터 다른 구성요소들 또는 다른 장치들로 제공한다. 예를 들어, 통신 인터페이스(260)는 시스템(200)과 통신 네트워크 사이에 무선 통신들을 제공할 수 있다. 일부 실시예들에서, 통신 인터페이스(260)는 통신들을 다른 시스템(200)과 같은 하나 이상의 장치들 및/또는 텔레비전, DVR, 또는 다른 오디오 시각 구성요소와 같은 하나 이상의 다른 장치들에 제공할 수 있다. 통신 인터페이스(260)는 시스템(200)이 다른 구성요소, 장치, 또는 네트워크와 통신할 수 있게 하는 임의의 구성요소 또는 구성요소들의 집합일 수 있다. 예를 들어, 통신 인터페이스(260)는 PCI 통신 어댑터, USB 네트워크 어댑터, 또는 이더넷 어댑터를 포함할 수 있다. 통신 인터페이스(260)는 802.11 a, g, b, 또는 n 표준들을 포함하는 무선 인터넷을 사용하여 통신할 수 있다. 일 실시예에서, 통신 인터페이스(260)는 무선 주파수(RF), 블루투스, CDMA, TDMA, FDMA, GSM, Wi-Fi, 위성, 또는 다른 셀룰러 또는 무선 기술을 사용하여 통신할 수 있다. 다른 실시예들에서, 통신 인터페이스(260)는 유선 연결을 통해 통신할 수 있고 이더넷, 토큰 링, USB, 파이어와이어 1394, 광섬유 등과 같은 하나 이상의 네트워크들과 통신할 수 있다. 일부 실시예들에서, 시스템(200)은 단일 통신 인터페이스(260)를 포함한다. 다른 실시예들에서, 시스템(200)은 2개, 3개, 4개, 또는 그 이상의 통신 인터페이스들을 포함한다.
도 2에 도시된 실시예는 또한 센서(290)를 포함하지만, 일부 실시예들은 센서들 또는 복수의 센서들을 포함하지 않을 수 있다. 부가적으로, 센서(290)는 컴퓨팅 시스템의 다른 구성요소들과 동일한 구성요소에 또는 분리 구성요소에 수용될 수 있다. 예를 들어, 일부 실시예들에서, 프로세서, 메모리, 및 센서는 사용자 장치(200)에 모두 포함된다. 다른 한편, 일부 실시예들에서, 센서는 메모리 및/또는 프로세서를 수용하는 다른 구성요소로부터 분리하는 구성요소에 배치된다. 예를 들어, 웨어러블 센서는 유선 또는 무선 연결을 통해 프로세서 및 메모리 또는 사용자 장치 또는 웨어러블 장치와 통신할 수 있다. 센서(290)는 환경 인자를 감지하도록 구성되며, 환경 인자는 주변 조건 또는 센서에 인가된 힘 중 적어도 하나를 나타낼 수 있다. 센서(290)는 임의의 수 또는 타입의 감지 구성요소들을 포함할 수 있다. 일 예로서, 센서(290)는 가속도계 또는 자이로스코프를 포함할 수 있다. 센서들 및 환경 인자들의 예들의 비제한 리스트는 아래에 제공된다:
센서 감지된 환경 인자
가속도계 1, 2, 또는 3 방향의 힘
고도계 고도
온도계 주변 온도; 사용자 체온
심박동수 모니터 장치 사용자의 심박동수
피부 저항 모니터 장치 사용자의 피부 저항
산소 센서 장치 사용자의 산소 사용
오디오 센서 / 마이크로폰 장치 사용자에 의해 생성되는 주변 오디오 및/또는 오디오
포토센서 주변 광
IR/포토센서 사용자 눈 움직임, 위치, 체온
습도계 상대 습도
속도계 속도
보수계/주행 기록계 주행된 거리
크로노미터 시각, 날짜
표 2: 예시적 센서들 및 인자들
환경 인자들은 상기 언급된 환경 인자들 또는 주변 조건을 나타내는 임의의 다른 양 또는 사용자 장치(200)에 인가되거나 지향되는 힘 중 어느 하나를 포함할 수 있다. 부가적으로, 환경 인자들은 센서 데이터로부터 직접 평가될 수 있거나 다른 환경 인자들을 유도하기 위해 장치에 의해 처리될 수 있다. 예를 들어, 가속도 데이터는 장치 배향, 속도 및/또는 모션의 패턴을 결정하기 위해 사용될 수 있다. 추가 예로서, 심박동수, 피부 저항, 및 다른 인자들과 같은 생리학적 데이터는 장치 사용자의 생리학적 상태(예를 들어, 잠들지 않음, 스트레스를 받음, 잠이 듬, REM 수면 등)를 결정하기 위해 사용될 수 있다.
이제 도 3을 참조하면, 도 3은 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 시스템을 도시한다. 도 3에 도시된 실시예에서, 텔레비전은 장치(200)로부터 커맨드들을 수신하고 통지 신호들을 장치(200)에 송신하기 위해서와 같이, 통신 인터페이스(340)를 사용하여 장치(200)와 통신하도록 구성된다. 도 3의 시스템은 도 2에 도시된 실시예에 따른 장치(200) 및 텔레비전(310)을 포함한다. 이러한 실시예에서, 텔레비전은 프로세서(320), 메모리(330), 통신 인터페이스(340), 스피커(350), 및 디스플레이 스크린(360)을 포함한다. 일부 실시예들에서, 텔레비전(310)은 하나 이상의 햅틱 출력 장치들을 포함하거나, 하나 이상의 햅틱 출력 장치들과 통신할 수도 있다. 프로세서(320)는 메모리(330)에 저장되는 소프트웨어를 실행하고, 통신 인터페이스(340)로부터 콘텐츠를 수신하고, 콘텐츠를 디코딩하며 디스플레이 신호들를 디스플레이(360)에 송신하고 오디오 신호들을 스피커(350)에 송신하도록 구성된다. 게다가, 프로세서(320)는 콘텐츠와 연관되는 하나 이상의 이벤트들을 식별하기 위해 콘텐츠를 감시하도록 그리고 통지들을 생성하고 통지 신호들을 통신 인터페이스(340)를 사용하여 송신하도록 구성된다.
통신 인터페이스(340)는 텔레비전 수신기, HDMI 수신기, 네트워크 연결(예를 들어 이더넷, 802.11)과 같은 적어도 하나의 통신 장치, 또는 핸드헬드 장치(200)에 관해 상기 논의된 것들과 같은 다른 통신 인터페이스들을 포함한다. 일부 실시예들에서, 통신 인터페이스(340)는 복수의 통신 장치들을 포함할 수 있다. 예를 들어, 일 실시예에서, 통신 인터페이스는 HDMI 인터페이스 및 802.11 인터페이스를 포함한다. 그러한 일 실시예에서, 텔레비전(310)은 HDMI 인터페이스로부터 콘텐츠를 수신하고 802.11 인터페이스를 사용하여 통지 신호들을, 예컨대 장치(200)에 송신하도록 구성된다. 다른 실시예들은 장치(200) 또는 블루투스, 적외선, 또는 다른 무선 통신 인터페이스들과 같은 다른 장치들에 연결하거나 통지 신호들을 송신하는 다른 적절한 통신 인터페이스들을 이용할 수 있다.
도 3은 텔레비전을 포함하는 실시예를 도시하지만, 일부 실시예들에서, 시스템은 DVR, DVD 플레이어, 셋톱 박스, 컴퓨터, 또는 스트리밍 콘텐츠를 수신하고 본 개시에 따른 하나 이상의 방법들의 일부 또는 전부를 수행할 수 있는 다른 장치와 같은 상이한 장치를 포함할 수 있다. 일부 그러한 실시예들에서, 텔레비전은 스마트 텔레비전이 아닐 수 있거나, 본 개시에 따른 방법들을 적절히 수행하도록 구성되지 않을 수 있다. 일부 실시예들에서, 텔레비전(310)은 사용자 장치(200)에 포함될 수 있다. 예를 들어, 일 실시예에서, 장치(200)는 텔레비전 방송들 또는 다른 스트리밍 콘텐츠를, 예컨대 인터넷으로부터 수신하도록 구성될 수 있다.
이제 도 4a를 참조하면, 도 4a는 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 시스템을 도시한다. 도 4a에 도시된 실시예에서, 스마트 텔레비전(310)은 블루투스 연결을 통해 사용자 장치(200)와 통신하며, 사용자 장치는 이러한 실시예에서 태블릿 컴퓨터이지만, 상기 논의된 바와 같이, 그것은 스마트폰, 랩톱 컴퓨터 등과 같은 임의의 다른 적절한 사용자 장치일 수 있다. 콘텐츠를 사용자에게 디스플레이하는 동안, 텔레비전(310)은 수신된 콘텐츠 스트림을 감시하고 광고가 플레이되고 있는 것을 검출한다. 이러한 실시예에서, 콘텐츠는 콘텐츠가 광고인 것 및 광고가 카리브해로의 휴가 패키지인 것을 표시하는 메타데이터를 포함한다. 스마트 텔레비전은 현재 시청자가 휴가 관련 주제들을 지난 주에 검색하고 있었던 것을 결정한다. 그 다음, 스마트 텔레비전은 광고와 연관되는 통지 신호를 사용자 장치(200)에 송신한다. 이러한 실시예에서, 통지 신호는 햅틱 신호를 포함하지만, 일부 실시예들에서, 통지 신호는 햅틱 효과 및 카리브해 휴가에 관한 광고가 스크린 상에 제공되는 것을 표시하는 디스플레이 둘 다를 야기하기 위해 햅틱 신호 및 비디오 신호를 포함한다. 사용자가 디스플레이된 정보를 탭핑하거나 클릭하면, 텔레비전은 사용자가 광고를 듣는 것을 허용하기 위해 광고의 소리를 줄이지 않는다. 일부 실시예들에서, 통지 신호는 햅틱 효과 및 디스플레이된 광고와 연관되는 웹사이트로의 링크를 포함할 수 있다 . 따라서, 사용자가 디스플레이된 정보를 탭핑하거나 클릭하면, 텔레비전은 광고의 소리를 줄이지 않고, 사용자의 장치는 링크와 연관되는 웹사이트를 검색한다.
도 4b는 본 개시에 따른 강화된 텔레비전 상호작용을 위한 시스템의 다른 실시예를 도시한다. 이러한 실시예에서, 사용자는 스마트 텔레비전(310)의 텔레비전 프로그램을 시청하고 있는 동안 자신의 태블릿 컴퓨터와 상호작용하고 있다. 텔레비전이 스트리밍 콘텐츠를 수신하고 있는 동안, 시청되고 있는 텔레비전 프로그램에 관한 정보를 결정하고 또한 사용자의 친구들 중 한명이 또한 소셜 네트워킹 웹사이트 상의 친구에 의해 제공되는 정보에 기초하여 프로그램을 시청하고 있는 것을 검출한다. 스마트 텔레비전(310)은 햅틱 효과를 야기하고 사용자의 친구가 또한 동일한 텔레비전 프로그램을 시청하고 있다는 메시지를 제공하기 위해 통지 신호를 생성하여 사용자의 장치(200)에 송신한다. 이러한 시나리오에서, 사용자는 텔레비전에 집중할 수 있고, 따라서 스마트 텔레비전은 사용자의 태블릿 장치(200) 상에 디스플레이되는 이차 정보에 사용자의 관심을 쏠리게 하기 위해 통지 신호를 송신한다. 그 다음, 사용자는 자신의 친구가 동일한 텔레비전 쇼를 시청하고 있고 친구에게 메시지를 송신하는 옵션 또는 그녀가 또한 텔레비전 프로그램을 시청하고 있는 것을 표시하는 그녀의 상태를 소셜 네트워킹 웹사이트 상에 갱신하는 옵션을 제시받는 것을 인지할 수 있다. 따라서, 스마트 텔레비전(310)은 친구들이 실시간으로 메시지를 보내는 것을 허용하기 위해, 또는 간단히 그들이 사람을 만나는 다음 시간에 프로그램을 논의하기 위해 사용자를 텔레비전 프로그램에 둘 다 관련시키지만, 또한 동시에 시청하고 있을 수도 있는 사용자의 친구들에 관련시킬 수 있다. 다른 타입들의 이차 정보는 또한 웹 페이지들로의 링크들, 제품 페이지들, 비디오 클립들, 등장인물 또는 배역 정보, 다시 보기 정보, 또는 텔레비전(310) 상에 디스플레이된 콘텐츠와 연관되는 다른 정보와 같은 통지 신호에 제공될 수 있다. 그러한 이차 정보는 콘텐츠 자체 내에 내장될 수 있거나, 스마트 텔레비전, 또는 다른 장치에 의해 식별되고, 하나 이상의 통지 신호들에 제공될 수 있다.
도 4c는 본 개시에 따른 강화된 텔레비전 상호작용을 위한 시스템의 추가 예시적 실시예를 도시한다. 도 4c에 도시된 실시예에서, 스마트 텔레비전은 텔레비전 방송과 같은 스트리밍 콘텐츠를 수신하고 디스플레이한다. 방송 동안, 프로그램 세그먼트들은 광고들의 기간들에 의해 분리할 수 있다. 일부 경우들에서, 사용자는 나중에 재생을 위해 그러한 텔레비전 프로그램을 녹화할 수 있다. 재생 동안, 사용자는 텔레비전 프로그램과 함께 녹화된 하나 이상의 광고들을 빨리 감기를 원할 수 있다. 사용자가 광고들을 빨리 감기 시작할 때, 스마트 텔레비전(또는 일부 경우들에서 DVR 또는 다른 장비)은 광고가 종료할 때 또는 텔레비전 프로그래밍이 재개할 때를 검출하기 위해 그것이 감겨지는 동안 콘텐츠를 감시할 수 있다.
도 4c에 도시된 실시예에서, 각각의 광고가 종료할 때, 스마트 텔레비전은 통지 신호를 생성하여 사용자의 장치에 송신한다. 스마트 텔레비전은 광고 뒤에 다른 광고 또는 텔레비전 프로그래밍이 계속되는지에 기초하여 통지 신호의 특성들을 결정한다. 한 광고가 끝나고 있고 한 광고 뒤에 다른 광고가 계속되는 경우들에서, 스마트 텔레비전은 낮은 강도 햅틱 신호들을 갖는 통지 신호들을 생성하여 송신할 수 있다. 그러나, 광고 뒤에 텔레비전 프로그램의 재개가 계속되는 경우에, 스마트 텔레비전은 높은 강도 햅틱 효과와 같은 별개 햅틱 효과, 또는 증가하는 강도의 다수의 반복 효과들을 구비한 햅틱 효과를 갖는 통지 신호를 생성하여 송신할 수 있다.
도 4c에 도시된 실시예에서, 스마트 텔레비전은 콘텐츠가 스트리밍될 때 통지 신호를 실시간으로 결정하지만, 일부 실시예들에서, 통지 신호들은 텔레비전 프로그램이 DVR(또는 다른 적절한 녹화 장치)에 녹화될 때 결정될 수 있고 녹화된 텔레비전 프로그램 내에 내장되거나 녹화된 텔레비전 프로그램과 연관될 수 있다. 따라서, 프로그램이 나중에 재생될 때, 이전에 생성된 통지 신호들은 간단히 사용자의 장치에 출력될 수 있다. 일부 실시예들에서, 통지 신호들은 프로그램이 예컨대 디지털 비디오 레코더 장치에 의해 녹화된 후에 프로그램에 적용될 수 있다. 일 실시예에서, DVR은 각각의 광고 사이 뿐만 아니라 광고들과 텔레비전 프로그램 사이의 경계들을 식별하기 위해 녹화된 쇼를 처리할 수 있다. 게다가, DVR은 사용자와 특정 관련이 있는 광고들을 식별하고 상이한 통지 신호들을 그러한 광고들에 적용하며, 따라서 맞춤형 통지 경험을 사용자에게 제공할 수 있다.
본 명세서 도처에서 "통지 신호들"에 대한 참조가 이루어진다. 어떤 특정 기능 또는 의도도 수식어 "통지"로 돌려지지 않아야 한다. 그 대신에, "통지 신호"는 본 명세서에 언급되는 다른 타입들의 신호들과 구별하는 편리한 라벨이다. "통지 신호"라는 용어는 광범위하게 판독되고 예를 들어 콘텐츠, 또는 콘텐츠의 부분들 내에 이벤트들 또는 다른 발생들과 관련되는 정보, 또는 콘텐츠와 관련되거나 연관되는 정보를 전달하는 임의의 신호를 포함하도록 의도된다. 게다가, "통지 신호들"은 임의의 특정 타입의 이벤트 또는 발생에 의해 촉발되는 신호들일 필요는 없다. 오히려, "통지 신호들"은 오디오 또는 비디오 정보와 대조적으로, 햅틱 정보를 갖는 콘텐츠의 일부에 간단히 상응할 수 있다.
상기 논의된 일부 실시예들에서, 사용자의 집중을 사용자 장치(200)로부터 텔레비전(310)으로, 또는 텔레비전(310)으로부터 장치로 변경하기 위해서와 같이, 텔레비전(310) 또는 장치(200) 상에 디스플레이되는 콘텐츠와 연관되는 부가 이차 정보를 제공하기 위해 사용자의 관심에 영향을 미치도록 통지 신호들이 생성되어 사용자 장치(200)에 송신될 수 있다. 그러나, 일부 실시예들은 텔레비전 상에 디스플레이되는 콘텐츠를 증대시키도록 의도된 효과들을 제공할 수 있다. 예를 들어, 일부 실시예들에서, 텔레비전(또는 다른 장치)은 더 실감적인 경험을 제공하기 위해 신호들을 생성하여 사용자의 장치(200)에 송신할 수 있다.
이제 도 4d를 참조하면, 도 4d는 본 개시에 따른 강화된 텔레비전 상호작용을 위한 예시적 시스템을 도시한다. 도 4d에 도시된 실시예에서, 시청자는 텔레비전(310)의 영화를 시청하고 있다. 영화가 플레이될 때, 상이한 주제들 및 분위기들을 갖는 다양한 장면들이 플레이된다. 증대된 시청 경험을 제공하기 위해, 스트리밍 콘텐츠는 영화 내의 상이한 장면들 또는 이벤트들과 연관되는 그것 내에 내장된 햅틱 정보를 갖는다. 영화가 스트리밍 콘텐츠로서 수신될 때, 내장된 햅틱 정보가 식별되고 추출된다. 그 다음, 햅틱 정보의 일부 또는 전부를 포함하는 통지 신호는 햅틱 효과를 야기하기 위해 생성되어 장치(200)에 송신된다. 도 4d에서 알 수 있는 바와 같이, 영화 내의 긴장감 넘치는 장면은 연관된 햅틱 신호를 가질 수 있으며, 이 햅틱 신호는 부가 긴장을 장면에 추가하기 위해 햅틱 효과를 제공하도록 사용자의 장치(200)에 송신될 수 있다. 나중에, 상당히 놀라운 이벤트를 갖는 장면으로 전이되면, 텔레비전은 이벤트와 연관되는 햅틱 정보를 수신하고 통지 신호를 생성하여 사용자의 장치에 송신할 수 있다. 그러한 통지 신호는 높은 강도 햅틱 효과가 장면 내의 놀라운 감각을 증폭하게 할 수 있다. 그리고, 나중에 영화에서 추적 장면 동안, 텔레비전은 영화와 연관되는 추가 햅틱 정보를 수신할 수 있다. 예를 들어, 추적 장면의 부분들과 연관되는 햅틱 효과들은 장애물 또는 적의 갑작스런 출현, 캐즘(chasm)을 통한 슬로 모션 점프, 또는 다른 이벤트와 같은 추적 장면 동안 발생하는 이벤트들과 일치하도록 텔레비전이 하나 이상의 통지 신호들을 생성하여 사용자의 장치에 송신하게 할 수 있다. 따라서, 도 4d에 도시된 실시예는 영화의 시각 및 오디오 부분들을 촉각 또는 햅틱 감각들로 보완함으로써 증대된 시청 경험을 제공할 수 있다.
본 명세서에 논의되는 다수의 실시예들은 콘텐츠를 보고 사용자 장치와 상호작용하는 단일 사용자의 맥락에서 논의되었다. 그러나, 본 개시는 단일 사용자 또는 단일 사용자 장치에 제한되지 않는다. 오히려, 실시예들은 다수의 사용자들 또는 다수의 사용자 장치들(200)을 포함할 수 있고, 다수의 디스플레이 장치들(310)을 더 포함할 수 있다. 일부 그러한 실시예들에서, 사용자들에게는 상이한 통지 신호들이 제공될 수 있다. 예를 들어, 사용자들은 자신들이 수신하는 효과들의 타입들에 관한 다른 선호도들을 가질 수 있거나, 적용된 효과들에 대한 다른 강도 레벨들을 지정할 수 있다. 게다가, 일부 실시예들에서, 디스플레이 스크린에 대한 사용자의 위치는 통지 신호들의 타입들 또는 콘텐츠에 영향을 미칠 수 있다. 예를 들어, 디스플레이(310)의 좌측 측면에 위치되는 사용자들은 스크린의 우측 측면 상에 위치되는 사용자들과 다른 효과들, 또는 다른 강도들을 수신할 수 있다. 일 실시예에서, 스크린의 좌측 측면 상에 위치되는 사용자들은 스크린의 좌측 측면에 발생하는 이벤트들과 연관되는 더 큰 강도 효과들, 및 스크린의 우측 측면 상에 발생하는 이벤트들과 연관되는 더 작은 강도 효과들을 수신할 수 있다. 유사하게, 스크린에서 더 멀리 위치되는 사용자들은 스크린에 더 가까이 있는 사용자들보다 더 낮은 강도 효과들을 수신할 수 있다. 일부 실시예들에서, 사용자들은 사용자 선호도들 또는 나이, 성별, 교육 수준, 수입 등과 같은 사용자에 관한 프로파일 정보에 기초하여 스크린 상에 콘텐츠와 연관되는 상이한 이차 정보를 수신할 수 있다. 일부 실시예들에서, 사용자들은 다른 이차 정보를 분리 디스플레이 스크린 상에서, 예컨대 그들의 각각의 사용자 장치 상에서 또는 웨어러블 장치에서 볼 수 있고, 따라서 상이한 햅틱 효과들은 각각의 특정 사용자에 대한 이차 정보와 상응하기 위해 제공될 수 있다.
이제 도 5를 참조하면, 도 5는 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 장치를 도시한다. 도 5에서 알 수 있는 바와 같이, 사용자는 그들의 집중에 기초하여 텔레비전을 다양한 자세들로 시청할 수 있다. 상기 언급된 바와 같이, 텔레비전은 그들의 집중을 텔레비전으로부터 사용자의 장치로, 또는 반대로 시프트시키기 위해 사용자에게 신호를 보내도록 통지 신호들을 송신할 수 있다. 사용자 장치(200)가 텔레비전(310) 장치를 포함하는 실시예들에서, 사용자의 집중은 스트리밍 콘텐츠를 디스플레이하는 디스플레이 윈도우가 사용자 인터페이스 내의 전경 또는 배경에 있는지에 기초하여 결정될 수 있다. 본 개시에 따른 실시예들은 사용자의 자세 또는 장치의 위치에 기초하여 사용자의 집중에 관한 부가 정보를 획득할 수 있다. 일부 실시예들에서, 사용자 장치(200)는 장치의 위치 또는 배향, 또는 장치를 유지하기 위해 사용되는 접촉 또는 그립의 타입을 감지할 수 있는 하나 이상의 센서들을 포함할 수 있다. 하나의 그러한 실시예에서, 장치는 장치의 배향 또는 장치가 장치 상의 사용자의 집중을 추정할 수 있는 장치를 사용자가 보고 있는지를 감지할 수 있는 가속도계 또는 카메라와 같은 센서를 포함할 수 있다.
도 5에서 알 수 있는 바와 같이, 사용자가 텔레비전을 시청하고 있을 때, 사용자는 느긋한 자세를 가질 수 있으며, 그녀는 의자 또는 소파에 등을 기대고 있고 장치의 스크린이 아래쪽으로 또는 수평과 수직 사이의 실질적인 중간의 각도로 기울어지도록 자신의 장치를 유지하고 있을 수 있어, 사용자가 장치에 집중하지 않는 것을 표시한다. 그러한 실시예에서, 텔레비전은 사용자의 예상(probable) 집중을 텔레비전 상에 표시하는 정보를 장치로부터 수신할 수 있으며, 이는 텔레비전이, 사용자 장치에 사용자의 관심을 쏠리게 하도록 구성되는 이벤트들과 연관되는 통지 신호들을 생성하게 할 수 있다. 대조적으로, 사용자의 자세 또는 장치의 배향은 사용자가 장치에 집중할 것 같은 것을 표시하면, 텔레비전은 텔레비전에 사용자의 집중을 쏠리게 하도록 의도되는 통지 신호들을 생성하는 경향이 있을 수 있다.
일부 실시예들에서, 장치는 스크린 상의 더 큰 영역들의 경우 그것의 사용자 인터페이스를 더 적은 커맨드들을 갖는 더 간단한 사용자 인터페이스로 재구성할 수도 있다. 예를 들어, 일 실시예에서, 사용자의 장치는 텔레비전에 대한 리모트 컨트롤로 동작하도록 구성된다. 하나의 그러한 실시예에서, 장치는 사용자가 장치에 집중하지 않을 것 같은 것, 또는 장치에 단지 부분적으로 집중하는 것을 결정할 때, 사용자 인터페이스는 감소된 제어 세트(예를 들어 사용자 인터페이스(510))를 디스플레이하는 것으로 변경할 수 있어, 사용자는 장치를 정밀 조사하거나 특정 동작을 유발하는 미세 움직임들을 사용할 필요가 없다. 그러나, 사용자가 자세 또는 그립을 변경하면, 사용자 인터페이스는 사용자 인터페이스(530)에서 알 수 있는 바와 같이, 다수의 제어들 또는 더 복잡한 사용자 인터페이스 능력들을 제공하는 것으로 변경할 수 있다. 예를 들어, 사용자가 장치를 두 손으로 수평 배향에서 유지하고 있으면, 장치는 사용자가 장치에 매우 집중하는 것을 결정할 수 있고 부가 선택권들 또는 그래픽 키보드 또는 사용자 입력을 수락하는 숫자 패드를 제공하는 것과 같이, 더 상세한 사용자 인터페이스를 제공할 수 있다.
실시예들은 사용자의 검출된 자세에 기초하여 사용자 인터페이스의 재배열을 제공할 수 있지만, 일부 실시예들에서, 사용자 인터페이스는 장치의 사용자의 사용 패턴에 기초한다. 예를 들어, 사용자가 채널 31을 자주 시청하면, 사용자 인터페이스는 채널을 채널 31로 빠르게 변경하기 위해 버튼을 포함할 수 있다. 또는 일부 실시예들에서, 사용자가 음소거 버튼과 같은 특정 특징들을 드물게 사용하거나 결코 사용하지 않거나, 또는 텔레비전에 대한 입력 소스를 드물게 변경하면, 그러한 버튼들은 크기가 감소되거나, 사용자 인터페이스의 이차 스크린으로 이동될 수 있어, 가장 자주 사용된 제어들은 일차 사용자 인터페이스 스크린 상에 둘 다 제공되고 그들이 쉽게 식별가능하고 사용가능하도록 크기가 부여된다. 일부 실시예들에서, 사용자와 연관되는 특정 선호도들은 장치에 의해 저장될 수 있다. 예를 들어, 사용자가 하나 이상의 텔레비전 프로그램들을 자주 시청하면, 그 정보는 사용자가 새로운 위치에 도달하면 장치가 지역 텔레비전 채널들을 결정하고 제어들을 사용자에게 제공하여 사용자가 새로운 채널 배열을 습득할 필요 없이, 사용자의 좋아하는 쇼들을 빠르게 검색하는 것을 허용할 수 있도록 장치 상에 저장될 수 있다. 일부 실시예들에서, 장치는 사용자의 좋아하는 쇼들의 지역 플레이타임에 관한 정보를 제공하는 안내 제어의 디스플레이를 제공할 수 있으며, 따라서 사용자가 상이한 프로그래밍 스케줄을 습득하고 수용하는 것을 허용한다.
사용자 인터페이스의 시각적 외관을 수정하는 것에 더하여, 또는 수정하는 대신에, 일부 실시예들은 사용자 인터페이스와 연관되는 햅틱 효과들을 수정할 수 있다. 예를 들어, 햅틱 효과들은 버튼들과 같은 특정 사용자 인터페이스 요소들에, 예컨대 자주 사용된 버튼들에 추가될 수 있으며, 이는 사용자가 그것을 보는 것 없이 사용자 인터페이스를 사용하는 것, 또는 드물게 사용된 인터페이스 요소를 사용하기 전에 사용자를 경고하는 것을 허용할 수 있다. 일 실시예에서, 자주 사용된 버튼들 또는 인터페이스 요소들은 더 강한 효과들을 갖는 햅틱 효과들과 연관될 수 있는 한편, 드물게 사용된 버튼들은 약하거나 연관되지 않은 햅틱 효과들을 가질 수 있다.
일부 실시예들에서, 사용자 인터페이스는 특정 업무들을 수행하는 사용자의 바람직한 방법들을 수용하기 위해 조정될 수도 있다. 예를 들어, 일 실시예에서, 사용자는 보이스 커맨드들을 장치에 자주 발행할 수 있다. 따라서, 장치는 그러한 보이스 커맨트들을 전통적인 입력 제어들과 통합할 수 있다. 예를 들어, 사용자는 장치 상의 키보드를 사용하는 것을 싫어하고 시청할 원하는 프로그램의 명칭을 말하고 채널 변경 버튼을 누룰 수 있다. 그 다음, 장치는 사용자가 프로그램을 시청하기를 원하는 것을 표시하기 위해 사용자의 입력을 해석하고 그 다음 장치에 전원을 공급하고(아직 없는 경우) 채널을 원하는 프로그램으로 변경하기 위해 커맨드들을 텔레비전 또는 다른 장치에 발행할 수 있다.
사용자 인터페이스가 사용자 선호도 정보를 전개하고 통합하는 것을 허용함으로써, 사용자는 상이한 위치들 또는 디스플레이 장치들에 적응하는 곤란을 겪지 않을 수 있다. 예를 들어, 사용자는 채널을 조사하고 정보를 상이한 위치들에 안내할 필요가 없거나(예를 들어 사용자가 빈번한 여행자이면), 상이한 장치들에 대한 상이한 리모트 컨트롤들 또는 제어 인터페이스들을 습득할 필요가 있을 수 있다.
이제 도 6을 참조하면, 도 6은 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 방법을 도시한다. 도 6은 도 2에 도시된 장치(200)에 의해 실행되는 소프트웨어 애플리케이션에 관해 설명되지만; 본 명세서에 개시되는 방법들은 도 2에 도시된 장치만에 의한 실행에 제한되는 것이 아니라, 오히려 임의의 적절한 전자 시스템에 의해 실행될 수 있다.
도 6에 도시된 실시예는 프로세서(200)가 통지 정보를 수신할 때 블록(602)에서 시작한다. 도 6에 도시된 실시예에서, 통지 정보는 텔레비전 장치(310)에 의해 디스플레이되는 비디오 콘텐츠와 연관되는 이벤트를 표시하고 장치(200)에 의해 출력될 햅틱 효과의 표시를 포함한다. 예를 들어, 일 실시예에서, 통지 신호는 사전 설치된 햅틱 효과의 식별자를 사용자의 장치 상에 포함하는 신호와 같은 하이 레벨 신호를 포함한다. 식별자를 수신하면, 사용자 장치는 사전 설치된 햅틱 효과를 식별하고 상응하는 햅틱 효과를 생성할 수 있다. 일부 실시예들에서, 통지 신호는 지속기간, 크기, 주파수, 햅틱 효과의 특성들을 설명하는 포락선, 자유도, 방향, 사용될 특정 햅틱 출력 장치, 효과 타입(예를 들어 진동, 변형, 마찰 등), 또는 하나 이상의 햅틱 효과들과 연관되는 다른 파라미터와 같은 부가 파라미터들을 포함할 수 있다. 일부 실시예들에서, 통지 신호는 생성될 햅틱 효과를 설명하는 수학 함수의 파형 또는 파라미터들과 같은 낮은 레벨 햅틱 정보를 포함할 수 있다. 프로세서(200)가 통지 신호를 수신한 후에, 방법은 블록(604)으로 진행한다.
블록(604)에서, 프로세서는 통지 정보와 연관되는 햅틱 효과를 결정한다. 예를 들어, 일 실시예에서, 프로세서(220)는 사전 설치된 햅틱 효과의 식별자를 포함하는 통지를 수신한다. 프로세서는 통지로부터 식별자를 추출하고 식별자와 연관되는 햅틱 효과 정보에 액세스한다. 예를 들어, 햅틱 효과 정보는 장치 내의 컴퓨터 판독가능 매체에, 예컨대 플래시 메모리 장치 상에 저장될 수 있다. 일부 실시예들에서, 식별자는 햅틱 효과 정보가 발견되고 검색될 수 있는 위치를 원격 장치 상에 표시하는 URL(uniform resource locator)을 포함할 수 있다.
추가 실시예들은 햅틱 효과를 생성하는데 사용되는 식별자 및 햅틱 효과 정보 둘 다를 포함할 수 있다. 하나의 그러한 실시예에서, 그러한 통지는 햅틱 효과를 생성하는 것 및 나중의 재사용을 위해 햅틱 효과를 장치 상에 일시적으로 또는 영구적으로 설치하는 것 둘 다에 사용될 수 있다. 예를 들어, 텔레비전 시리즈는 스마트 텔레비전에 의해 사용자의 장치로 설치될 수 있는 그것과 연관된 하나 이상의 햅틱 효과들을 가질 수 있고, 효과들, 또는 효과들의 라이브러리가 사용자의 장치 상에 설치된 후에, 텔레비전은 햅틱 효과 정보를 재송신하는 대신에 식별자에 의한 효과들을 나중에 참조할 수 있다. 일부 실시예들에서, 햅틱 식별자는 장치 상에 설치되지 않은 햅틱 효과를 표시하면, 장치는 식별자와 연관되는 햅틱 효과 정보를 요청하는 신호를 텔레비전에 송신할 수 있으며, 이는 텔레비전이, 햅틱 효과 정보를 제공하거나 또는 햅틱 효과 정보, 또는 햅틱 효과 정보의 라이브러리가 검색되고 설치될 수 있는 URL을 제공하게 할 수 있다. 예를 들어, 특정 텔레비전 시리즈를 즐기는 사용자는 그녀가 쇼를 시리즈로 시청하는 처음에 자신의 장치 상에 설치되는 시리즈의 햅틱 라이브러리를 가질 수 있다. 햅틱 효과가 결정된 후에, 방법은 블록(606)으로 진행한다.
블록(606)에서, 프로세서(220)는 햅틱 신호를 생성하여 햅틱 출력 장치(240)와 같은 햅틱 출력 장치에 송신하며, 햅틱 신호는 햅틱 출력 장치가 햅틱 효과를 출력하게 하도록 구성된다. 예를 들어, 통지 신호와 연관되는 햅틱 효과 정보를 검색한 후에, 프로세서는 주파수, 지속기간, 크기 등과 같은 햅틱 정보로부터의 파라미터들에 기초하여 햅틱 신호를 생성할 수 있다. 일부 실시예들에서, 프로세서(220)는 프로세서(220)가 원하는 햅틱 효과를 출력하는 것을 단지 식별할 필요가 있도록 햅틱 출력 장치 내에 이미 설치된 햅틱 효과를 식별하는 햅틱 신호를 생성할 수 있다. 햅틱 신호를 생성한 후에, 프로세서(220)는 햅틱 출력 장치가 햅틱 효과를 출력하게 하기 위해 신호를 햅틱 출력 장치에 송신한다. 프로세서(220)가 햅틱 신호를 송신한 후에, 방법은 끝나거나, 그것은 통지 신호가 다수의 햅틱 효과들과 연관되는 정보를 포함하는 경우에서와 같이, 추가 통지 신호들을 수신하거나, 부가 햅틱 효과들을 결정하는 블록들(602 또는 604) 중 어느 하나로 복귀할 수 있다.
이제 도 7을 참조하면, 도 7은 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 방법을 도시한다. 도 7은 도 3에 도시된 텔레비전(310)에 의해 실행되는 소프트웨어 애플리케이션에 관해 설명되지만; 본 명세서에 개시되는 방법들은 도 3에 도시된 텔레비전(310)만에 의한 실행에 제한되는 것이 아니라, 오히려 임의의 적절한 전자 시스템에 의해 실행될 수 있다.
도 7의 방법은 텔레비전(310)이 텔레비전에 의해 수신되는 콘텐츠 스트림을 감시할 때 블록(702)에서 시작하며 콘텐츠 스트림은 텔레비전 장치에 의해 디스플레이될 비디오 및 오디오 데이터를 포함한다. 예를 들어, 일 실시예에서, 텔레비전(310)은 햅틱 정보 또는 콘텐츠 스트림과 연관되는 다른 메타데이터를 식별하기 위해 콘텐츠 스트림과 연관되는 데이터를 분석함으로써 멀티미디어 콘텐츠를 포함하는 디지털 콘텐츠 스트림을 수신하도록 구성된다. 일부 실시예들에서, 콘텐츠 스트림은 텔레비전 프로그램, 영화, 광고, 또는 다른 오디오, 시각, 또는 콘텐츠 제공자로부터의 송신 전에 그것과 연관되는 부가 정보를 가진 멀티미디어 콘텐츠를 포함한다. 예를 들어, 콘텐츠 스트림과 연관되는 정보는 로켓 발사 또는 폭발과 같은 특정 이벤트의 존재, 또는 추적 장면과 같은 이벤트들의 시퀀스를 표시할 수 있다. 그러한 실시예에서, 텔레비전(310)은 정보 자체 또는 그러한 콘텐츠의 존재를 표시하는 표시기에 대한 것과 같이, 그러한 정보에 대한 콘텐츠 스트림을 감시하도록 구성될 수 있다. 일부 실시예들에서, 콘텐츠 스트림은 원래 햅틱 정보에 의해 생성되었으며, 그 경우에, 텔레비전(310)은 그러한 햅틱 정보의 존재를 표시하는 표시자에 대한 콘텐츠 스트림을 감시할 수 있거나, 햅틱 정보에 대해 간단히 감시할 수 있다.
일부 실시예들에서, 콘텐츠는 임의의 햅틱 정보를 포함하지 않을 수 있다. 하나의 그러한 실시예에서, 텔레비전(310)은 특정 이벤트들을 표시할 수 있는 오디오 또는 비디오 특성에 대한 콘텐츠 스트림을 감시할 수 있다. 예를 들어, 텔레비전(310)은 달리는 엔진들, 삐걱거리는 바닥판들, 끼익하는 타이어들, 긴장감 넘치는 음악, 외침 또는 고함, 싸움, 속삭임, 또는 콘텐츠 내에 발생하는 하나 이상의 이벤트들을 표시할 수 있는 다른 오디오 특성들과 같은 특정 오디오 이벤트들을 식별하기 위해 하나 이상의 오디오 인식 구성요소들을 포함할 수 있다. 일부 실시예들에서, 텔레비전(310)은 콘텐츠 스트림 내에서 스피치를 식별하고, 인식하며, 분석하기 위해 콘텐츠 스트림을 감시하도록 구성될 수 있다. 일부 실시예들에서, 텔레비전(310)은 비행기들, 기차들, 자동차들, 보트들, 해변들, 폭발들, 화재들 등과 같은 특정 비디오 정보를 인식하거나, 비디오 콘텐츠 내에 자주 나타나는 사람의 인식을 습득하거나, 유명 배우들의 인식을 허용하는 정보를 갖도록 구성될 수 있으며, 이는 텔레비전이 주인공들을 콘텐츠 내에서 인식하는 것을 허용할 수 있다. 콘텐츠 스트림을 감시하는 동안, 방법은 블록(704)으로 진행한다.
블록(704)에서, 텔레비전(310)은 이벤트를 콘텐츠 스트림 내에 검출한다. 예를 들어, 콘텐츠 스트림을 감시하는 동안, 일 실시예에서, 텔레비전은 콘텐츠 스트림과 연관되는 특정 정보를 식별함으로써 이벤트를 검출할 수 있다. 예를 들어, 상기 논의된 바와 같이, 콘텐츠 스트림과 연관되는 정보는 폭발 또는 자동차 사고와 같은 이벤트의 발생을 표시할 수 있다. 일부 실시예들에서, 이벤트는 비디오의 단일 프레임 또는 1초 또는 2초의 기간에 걸쳐서와 같이, 매우 짧은 시간 기간 동안 발생할 수 있는 한편, 일부 실시예들에서, 이벤트는 상당한 양의 시간 또는 선박 상의 장면 또는 비행기 내의 장면과 같은 콘텐츠 스트림 내의 전체 장면(또는 장면들)에 걸칠 수 있으며, 여기서 달리는 엔진과 같은 이벤트가 검출될 수 있다. 일부 실시예들에서, 텔레비전(310)은 광고가 텔레비전 프로그램을 중단한 것 또는 콘텐츠 스트림이 광고와 연관되는 특색있는 제품을 포함하는 것을 검출할 수 있다. 예를 들어, 일 실시예에서, 콘텐츠 스트림은 콘텐츠 스트림 내의 특정 장면과 연관되는 광고를 표시하는 연관된 정보를 가질 수 있고, 텔레비전(310)은 광고 이벤트가 발생한 것을 검출할 수 있다.
일부 실시예들에서, 텔레비전(310)은 인식된 오디오 또는 비디오에 기초하여 이벤트를 검출하도록 구성될 수 있다. 상기 논의된 바와 같이, 텔레비전(310)은 특정 사운드들 또는 이미지들과 같은 특정 오디오 또는 비디오 정보를 식별하도록 구성될 수 있다. 게다가, 일부 실시예들에서, 텔레비전(310)은 특정 오디오 정보와 특정 비디오 정보 사이의 관련성에 기초하여 이벤트들을 인식할 수 있다. 예를 들어, 텔레비전이 삐걱거리는 바닥판 및 인체 실루엣을 갖는 어두운 장면을 검출하면, 텔레비전은 무서운 장면이 발생하고 있는 것을 결정할 수 있다. 다른 실시예에서, 텔레비전이 파도 충돌의 사운드를 검출하고 해변의 비디오를 검출하면, 텔레비전은 편안한 장면이 발생하고 있는 것을 결정할 수 있다. 이벤트를 검출한 후에, 방법은 블록(706)으로 진행한다.
블록(706)에서, 텔레비전(310)은 통지 신호를 생성하여 사용자 장치(200)에 송신한다. 예를 들어, 일 실시예에서, 텔레비전(310)은 햅틱 신호를 포함하는 통지 신호를 생성한다. 햅틱 신호는 이러한 실시예에서, 출력될 햅틱 효과의 식별 및 출력될 효과의 크기 및 지속기간을 포함한다. 그러나, 일부 실시예들에서, 햅틱 신호는 출력될 효과를 설명하는 파형 정보, 또는 마찰 또는 변형 효과가 적용될 영역을 장치 상에 표시하는 공간 정보 뿐만 아니라, 적용될 마찰 또는 변형 효과의 촉각 특성들에 관한 정보를 포함할 수 있다. 일부 실시예들에서, 복수의 햅틱 효과들은 통지 신호 내에 통합될 수 있거나, 통지 신호는 나중의 액세스를 위해 장치(200) 상에 저장될 하나 이상의 햅틱 효과들을 송신할 수 있다. 예를 들어, 상기 논의된 바와 같이, 텔레비전 시리즈는 그것과 연관되는 특정 햅틱 효과 세트를 가질 수 있다. 텔레비전(310)은 텔레비전 프로그램의 에피소드가 시작하고 있는 것을 검출하면, 텔레비전(310)은 장치가 그것의 메모리 내에 저장된 텔레비전 프로그램과 연관되는 햅틱 효과 라이브러리를 갖는지에 관한 정보를 요청하는 통지 신호를 생성하여 장치에 송신할 수 있다. 장치가 부정적으로 응답하면, 텔레비전(310)은 햅틱 효과 세트의 일부 또는 전부를 포함하는 통지 신호를 생성하여 송신할 수 있거나, 그것은 햅틱 효과 라이브러리가 액세스되거나 검색될 수 있는 위치의 URL을 포함할 수 있다.
일부 실시예들에서, 통지 신호는 텔레비전에 의해 디스플레이되는 콘텐츠를 보완하거나 증대시키는 정보를 포함할 수 있다. 예를 들어, 일 실시예에서, 텔레비전은 사람이 어두운 집을 지나는 것과 연관되는 장치에 미세한 진동을 제공하고 그 다음 악당이 출입구에 나타날 때 급격한 충격(jolting) 효과를 제공함으로써와 같이, 장면의 긴장감을 증대시키도록 구성되는 햅틱 효과를 포함하는 통지 신호를 생성하여 송신할 수 있다. 일부 실시예들에서, 통지 신호는 자동차 엔진 또는 거친 물결을 통과하는 보트와 같은 콘텐츠 스트림 내의 주변 조건과 연관되는 햅틱 효과를 생성하도록 구성되는 햅틱 신호를 포함할 수 있다.
일부 실시예들에서, 생성된 통지 신호는 출력될 햅틱 효과의 URL, 또는 디스플레이될 광고의 URL을 포함할 수 있다. 예를 들어, 상기 논의된 바와 같이, 텔레비전(310)은 광고와 연관되거나 콘텐츠 스트림 내에 도시된 제품과 연관되는 이벤트를 검출할 수 있다. 그러한 이벤트를 검출한 후에, 텔레비전(310)은 광고 정보를 포함하는 통지 신호를 생성하여 송신할 수 있다. 예를 들어, 일 실시예에서, 통지 신호는 제품의 웹사이트에 대한 URL을 포함할 수 있거나, 통지 신호는 사용자의 장치 상에 디스플레이될 광고 또는 쿠폰을 포함할 수 있다. 일부 실시예들에서, 통지 신호는 사용자의 장치 상에 디스플레이될 광고에 사용자의 관심을 쏠리게 하도록 구성되는 햅틱 효과를 포함할 수 있다. 통지 신호를 생성하여 송신하는 후에(또는 동안), 방법은 블록(702)으로 복귀할 수 있고 텔레비전은 콘텐츠 스트림을 계속해서 감시할 수 있다.
도 7의 방법은 텔레비전(310)이 콘텐츠 스트림을 감시하는 것에 관해 설명되었지만, 콘텐츠 스트림에 액세스할 수 있는 임의의 다른 적절한 장치는 방법을 수행할 수 있다. 예를 들어, 케이블 회사로부터의 셋톱 박스, DVD 플레이어, 콘텐츠 제공자(예를 들어 Netflix™)로부터 콘텐츠를 스트리밍하는 장치 등이다. 그러한 장치들은 텔레비전(310)에 더하여, 또는 텔레비전 대신에 그러한 방법을 수행할 수 있다.
이제 도 8을 참조하면, 도 8은 일 실시예에 따른 강화된 텔레비전 상호작용을 위한 방법을 도시한다. 도 8은 도 2에 도시된 장치(200)에 의해 실행되는 소프트웨어 애플리케이션에 관해 설명되지만; 본 명세서에 개시되는 방법들은 도 3에 도시된 장치(200)만에 의한 실행에 제한되는 것이 아니라, 오히려 임의의 적절한 전자 시스템에 의해 실행될 수 있다.
도 8의 방법은 장치가 사용자 선호도를 결정하는 블록(802)에서 시작한다. 일부 실시예들에서, 사용자는 하나 이상의 디스플레이된 사용자 인터페이스들 상에 제어들의 배열을 구성함으로써, 또는 상이한 사용자들과 연관되는 하나 이상의 프로파일들을 생성함으로써와 같이, 사용자 선호도들을 직접 제공가능할 수 있다. 게다가, 사용자는 사용자가 텔레비전 또는 영화를 시청하고 있는 경우, 또는 사용자가 장치(200)에 집중하거나 장치(200)에 집중하지 않거나 장치(200)를 유지하지 않는 경우와 같이, 상이한 맥락들과 관련되는 사용자 선호도 정보를 제공가능할 수 있다. 예를 들어, 일 실시예에서, 장치는 사용자가 시청하고 있는 프로그램에 관한 상세 정보를 보는 것 및 채널 및 음량 제어들, 또는 비디오 재생 제어들(예를 들어 플레이, 일시 정지, 되감기 등)와 같은 이용가능한 기본 제어들을 갖는 것을 사용자가 선호하는 것을 결정한다. 그러한 일 실시예는 도 5에서 알 수 있다. 그러나, 사용자 선호도 정보는 장치 상의 사용자의 집중과 관련되는 정보를 포함할 수도 있다. 예를 들어, 도 5에 관해 상기 논의된 바와 같이, 사용자는 사용자가 텔레비전(310)의 콘텐츠를 시청하는 것에 집중할 때, 장치가 큰 제어들을 갖는 최소 제어 세트를 단지 디스플레이해야 하는 것을 선호할 수 있다. 도 5에서 알 수 있는 바와 같이, 단지 작은 기본 제어 세트는 사용자가 텔레비전(310)을 시청하고 있는 동안 기대고 있을 때 또는 사용자가 텔레비전(310)을 시청하고 있고 장치(200)와 물리적으로 접촉하고 있지 않는 동안 디스플레이된다.
일부 실시예들에서, 장치(200)는 사용자가 텔레비전의 비디오 소스를 드물게 변경하고 분리 오디오/시각 수신기 장치와 연관되는 음량 제어들을 단지 사용하는 것을 결정할 수 있다. 하나의 그러한 실시예에서, 장치(200)는 비디오 소스 선택기 제어가 일차 인터페이스 스크린 상에 디스플레이되어야 하는 것이 아니라, 이차(또는 삼차, 또는 다른) 제어 세트를 제공하기 위해 사용자가 일차 스크린을 스와이핑하면 이용가능한 선택권들의 메뉴를 통해 단지 이용가능해야 하는 것을 결정할 수 있다. 게다가, 장치는 커맨드들을 텔레비전(310)에 개시하는 제어들을 선택하지만, 텔레비전(310)에 대한 음향 제어들을 디스플레이하지 않는 동안 커맨드들을 A/V 수신기에 음량 제어들을 단지 선택할 수 있다. 일부 실시예들에서, 장치는 사용자가 장치를 자신의 오른손으로 유지하는 것을 선호하고 따라서 제어들이 오른손 그립을 장치 상에 수용하도록 배열되어야 하는 것을 결정할 수 있다.
일부 실시예들에서, 장치는 장치에 관한 감지된 정보에 기초하여 사용자 선호도를 결정할 수 있다. 예를 들어, 일부 실시예들에서, 장치(200)는 장치의 배향 또는 움직임, 장치가 잡혀지고 있는지의 여부를 감지할 수 있는 하나 이상의 센서들(290)을 포함할 수 있다. 그러한 센서 정보는 적용가능 사용자 선호도를 결정하기 위해 사용될 수 있다. 예를 들어, 장치는 그것이 센서 정보에 기초하여 사용자에 의해 잡혀지고 있지 않는 것을 결정하면, 장치는 제1 사용자 선호도 세트를 결정할 수 있다. 장치는 나중에 장치가 잡혀지고 있는 것을 표시하는 센서 신호를 수신하면, 장치는 제2 사용자 선호도 세트가 적용가능한 것을 결정할 수 있다. 추가 사용자 선호도 세트들은 도 5에서 알 수 있는 바와 같이 사용자가 장치에 집중하는 것을 표시하는 배향과 같은 다른 감지된 정보에 기초하여 결정될 수 있다. 사용자의 선호도들을 결정한 후에, 방법은 블록(804)으로 진행한다.
블록(804)에서, 장치(200)는 사용자 인터페이스를 디스플레이한다. 예를 들어, 사용자의 선호도들을 결정한 후에, 장치는 사용자의 선호도에 상응하도록 결정되는 위치에 특정 크기들을 갖는 제어들을 디스플레이한다. 도 5에 도시된 실시예에서, 2개의 상이한 디스플레이된 사용자 인터페이스가 제공된다. 제1 인터페이스(510)는 사용자가 장치와 접촉하지 않는 것, 또는 사용자가 장치에 집중하지 않는 것을 표시하는 방법으로 장치를 유지하는 것과 연관되는 결정된 사용자 선호도에 상응한다. 장치는 사용자 인터페이스 구성이 사용자의 선호도들에 기초하여 변했다는 오디오 효과 또는 햅틱 효과와 같은 비시각 정보를 디스플레이할 수도 있다. 예를 들어, 사용자가 장치에 집중하는 것을 정지하고, 텔레비전 프로그램을 시청하는 것을 완화하면, 장치는 사용자의 선호도들에 따른 디스플레이된 인터페이스를 재구성할 수 있고 변경된 인터페이스를 사용자에게 통지하기 위해 오디오 또는 햅틱 효과를 제공할 수 있다. 사용자 인터페이스를 디스플레이한 후에, 방법은 블록(806)으로 진행한다.
블록(806)에서, 장치(806)는 장치 또는 사용자 인터페이스의 사용 패턴을 결정한다. 예를 들어, 장치는 장치 상에 디스플레이되는 하나 이상의 제어들의 사용자의 사용을 감시할 수 있다. 예를 들어, 사용자가 특정 제어를 자주 사용하면, 장치는 제어와 연관되는 가중 스코어를 증가시킬 수 있다. 또는, 사용자가 특정 프로그램들을 자주 시청하거나 특정 음향 설정들을 적용하면, 장치는 그러한 사용 패턴들과 연관되는 정보를 저장할 수 있다. 일 실시예들에서, 장치는 웹 브라우징 애플리케이션 또는 배우들, 줄거리 요약들, 또는 다시 보기들에 관한 정보를 제공하는 애플리케이션과 같은, 사용자가 텔레비전의 콘텐츠를 시청하고 있는 동안 사용하는 다른 애플리케이션들을 감시할 수 있다. 일부 실시예들에서, 장치는 사용 패턴들을 결정하기 위해 감지된 정보를 감시할 수 있다. 예를 들어, 일 실시예에서, 장치는 사용자가 장치 또는 텔레비전에 집중하고 있는지를 습득하기 위해 사용자가 텔레비전 상에 디스플레이되는 콘텐츠를 시청하는 동안 장치의 배향을 감시할 수 있다. 사용 패턴을 결정한 후에, 방법은 블록(808)으로 진행한다.
블록(808)에서, 장치는 사용자 인터페이스를 수정한다. 예를 들어, 일 실시예에서, 장치(200)는 제어들을 사용자 인터페이스 내에서 추가하거나 제거함으로써 사용자 인터페이스를 수정한다. 일 실시예에서, 장치(200)는 다양한 쇼들 또는 영화들의 배역들에 관한 상세 정보를 검색하기 위해 사용자가 장치(200) 상에 설치된 애플리케이션에 자주 액세스하는 것을 결정한다. 장치(200)는 사용자가 애플리케이션에 빠르게 액세스하는 것을 허용하는 제어를 포함하기 위해 사용자 인터페이스를 수정한다. 일 실시예에서, 장치(200)는 사용자가 통상 콘텐츠를 시청할 때 음량을 특정 세팅에 설정하는 것을 결정하며, 따라서 장치(200)는 음량을 원하는 레벨로 조정하기 위해 사용되는 음향 제어의 치수를 조절한다. 예를 들어, 현재 음량이 사용자의 전형적인 원하는 레벨 아래이면, 사용자 인터페이스는 사용자가 음량을 전형적인 레벨로 쉽게 증가시키는 것을 허용하는 "볼륨 업" 제어의 크기를 증가시키기 위해 수정될 수 있다. 상기 논의된 바와 같이, 일부 실시예들에서, 장치(200)는 대체 사용자 인터페이스를 디스플레이함으로써 또는 인터페이스 요소들과 연관되는 햅틱 효과들을 수정하거나 변경함으로써 사용자 인터페이스를 수정할 수 있다. 예를 들어, 도 5에 관해 상기 논의된 바와 같이, 장치는 장치 상의 사용자의 검출된 집중에 따라 상이한 사용자 인터페이스를 디스플레이할 수 있다. 사용자가 장치에 집중하면, 장치(200)는 제1 사용자 인터페이스(예를 들어 인터페이스(520))를 디스플레이할 수 있는 한편, 사용자가 장치에 집중하지 않으면, 장치(200)는 제2 사용자 인터페이스(예를 들어 인터페이스(510))를 디스플레이할 수 있다. 일부 실시예들에서, 장치는 사용자가 장치에 집중하는 것을 장치가 결정하면 햅틱 효과들의 강도를 감소시키는 한편, 사용자가 장치에 집중하지 않으면 햅틱 효과들의 강도를 증가시킬 수 있다. 또는, 일부 실시예들에서, 장치는 시각 큐들에 대한 요구 없이 그러한 버튼들 또는 요소들을 위치시킬 시에 사용자를 원조하기 위해 사용자가 장치에 집중하지 않으면 마찰 효과들을 특정 버튼들 또는 인터페이스 요소들에 적용할 수 있다. 게다가, 일부 실시예들에서, 사용자는 종종 최대 "빨리 감기" 속도에 도달하기 위해 "빨리 감기" 버튼을 3회 누룰 수 있다. 일 실시예에서, 장치는 최대 속도에 도달하기 위해 사용자가 빨리 감기 버튼을 한 번 누르는 것을 단지 필요로 하도록 사용자가 인터페이스를 수정하지만, 최대 속도가 사용되고 있는 것을 표시하기 위해 3개의 햅틱 효과를 제공할 수 있다. 사용자 인터페이스를 수정한 후에, 방법은 사용자가 사용자 선호도 정보를 변경하는 경우와 같이, 블록(802)으로 복귀할 수 있거나, 방법은 수정된 사용자 인터페이스를 디스플레이하기 위해 블록(804)으로 복귀할 수 있다.
본 명세서의 방법들 및 시스템들은 다양한 기계들 상에 실행되는 소프트웨어에 관하여 설명되지만, 방법들 및 시스템들은 다양한 방법들을 특별히 실행하는 필드 프로그램가능 게이트 어레이(FPGA)와 같은 특별히 구성된 하드웨어로 구현될 수도 있다. 예를 들어, 실시예들은 디지털 전자 회로로, 또는 컴퓨터 하드웨어, 펌웨어, 소프트웨어, 또는 그것의 조합으로 구현될 수 있다. 일 실시예에서, 장치는 프로세서 또는 프로세서들을 포함할 수 있다. 프로세서는 프로세서에 결합되는 랜덤 액세스 메모리(RAM)와 같은 컴퓨터 판독가능 매체를 포함한다. 프로세서는 이미지를 편집하는 하나 이상의 컴퓨터 프로그램들을 실행하는 것과 같이, 메모리에 저장되는 컴퓨터 실행가능 프로그램 명령어들을 실행한다. 그러한 프로세서들은 마이크로프로세서, DSP(digital signal processor), ASIC(application-specific integrated circuit), 필드 프로그램가능 게이트 어레이들(FPGAs), 및 상태 기계들을 포함할 수 있다. 그러한 프로세서들은 PLC들, PIC들(programmable interrupt controllers), PLD들(programmable logic devices), PROM들(programmable read-only memories), 전기적으로 프로그램가능한 판독 전용 메모리들(EPROM들 또는 EEPROM들), 또는 다른 유사한 장치들과 같은 프로그램가능 전자 장치들을 더 포함할 수 있다.
그러한 프로세서들은 프로세서에 의해 실행될 때, 프로세서에 의해 수행되거나, 지원되는 바와 같이 프로세서가 본 명세서에 설명되는 단계들을 수행하게 할 수 있는 명령어들을 저장할 수 있는 매체, 예를 들어 컴퓨터 판독가능 매체를 포함할 수 있거나, 이 매체와 통신할 수 있다. 컴퓨터 판독가능 매체의 실시예들은 웹 서버 내의 프로세서와 같은 프로세서에 컴퓨터 판독가능 명령어들을 제공할 수 있는 전자, 광, 자기, 또는 다른 저장 장치를 포함할 수 있지만, 이들에 제한되지 않는다. 매체의 다른 예들은 플로피 디스크, CD-ROM, 자기 디스크, 메모리 칩, ROM, RAM, ASIC, 구성된 프로세서, 모든 광 매체, 모든 자기 테이프 또는 다른 자기 매체, 또는 컴퓨터 프로세서가 판독할 수 있는 임의의 다른 매체를 포함하지만, 이들에 제한되지 않는다. 설명되는 프로세서, 및 프로세싱은 하나 이상의 구조들에 있을 수 있고, 하나 이상의 구조들을 통해 분산될 수 있다. 프로세서는 본 명세서에 설명되는 방법들(또는 방법들의 일부들) 중 하나 이상을 수행하는 코드를 포함할 수 있다.
본 발명의 일부 실시예들의 이전 설명은 예시 및 설명의 목적을 위해서만 제공되었고 소모적이거나 본 발명을 개시된 정확한 형태들에 제한하도록 의도되지 않는다. 그것의 다수의 수정들 및 개조들은 본 발명의 사상 및 범위로부터 벗어나는 것 없이 당업자들에게 분명할 것이다.
본 명세서에서 "일 실시예" 또는 "하나의 실시예"에 대한 참조는 실시예와 관련하여 설명되는 특정 특징, 구조, 동작, 또는 다른 특성이 본 발명의 적어도 하나의 구현에 포함될 수 있는 것을 의미한다. 본 발명은 그러한 것으로 설명되는 특정 실시예들에 제한되지 않는다. 본 명세서의 다양한 곳들에서 "일 실시예에서" 또는 "하나의 실시예에서"라는 구의 출현은 반드시 동일한 실시예를 지칭하는 것은 아니다. "일 실시예"에 관하여 본 명세서에 설명되는 임의의 특정 특징, 구조, 동작, 또는 다른 특성은 임의의 다른 실시예에 관하여 설명되는 다른 특징들, 구조들, 동작들, 또는 다른 특성들과 결합될 수 있다.

Claims (28)

  1. 통지 정보를 수신하는 단계 - 상기 통지 정보는 텔레비전 장치에 의해 디스플레이되는 비디오 콘텐츠와 연관되는 이벤트를 표시함 - ;
    상기 통지 정보와 연관되는 햅틱 효과를 결정하는 단계; 및
    햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 단계 - 상기 햅틱 신호는 상기 햅틱 출력 장치가 상기 햅틱 효과를 출력하게 하도록 구성됨 -
    를 포함하는, 방법.
  2. 제1항에 있어서,
    이차 정보를 수신하는 단계 - 상기 이차 정보는 상기 비디오 콘텐츠와 연관됨 - ; 및
    비디오 신호를 생성하여 이차 디스플레이 장치에 송신하는 단계를 더 포함하는, 방법.
  3. 제2항에 있어서,
    상기 이차 정보를 감시하는 단계;
    상기 이차 정보와 연관되는 이벤트를 검출하는 단계; 및
    제2 햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 단계 - 상기 제2 햅틱 신호는 상기 햅틱 출력 장치가 상기 햅틱 효과를 출력하게 하도록 구성됨 - 를 더 포함하는, 방법.
  4. 제1항에 있어서,
    출력 신호를 생성하는 단계; 및
    상기 출력 신호를 원격 장치에 송신하는 단계를 더 포함하는, 방법.
  5. 제4항에 있어서, 입력 장치로부터 입력을 수신하는 단계를 더 포함하고, 상기 입력은 사용자의 감지된 생리학적 조건를 포함하며 제어 신호는 상기 감지된 생리학적 조건에 기초하는, 방법.
  6. 제4항에 있어서, 제어 신호는 상기 비디오 콘텐츠와 연관되는 정보 및 소셜 네트워킹 계정으로부터의 정보에 기초하는, 방법.
  7. 제1항에 있어서, 상기 통지 정보는 소셜 네트워킹 사이트 및 상기 비디오 콘텐츠의 사용자의 상태와 연관되는 정보를 포함하는, 방법.
  8. 제1항에 있어서, 신호를 생성하여 스피커에 송신하는 단계 - 오디오 신호는 상기 통지 정보에 기초함 - 를 더 포함하는, 방법.
  9. 장치에 의해 수신되는 콘텐츠 스트림을 감시하는 단계 - 상기 콘텐츠 스트림은 텔레비전 장치에 의해 디스플레이될 비디오 및 오디오 데이터를 포함함 - ;
    상기 콘텐츠 스트림 내에서 이벤트를 검출하는 단계; 및
    상기 이벤트와 연관되는 통지 신호를 생성하여 이차 장치에 송신하는 단계
    를 포함하는, 방법.
  10. 제9항에 있어서, 상기 통지 신호를 복수의 이차 장치들에 송신하는 단계를 더 포함하는, 방법.
  11. 제9항에 있어서, 상기 이차 장치는 제1 이차 장치이고, 제2 통지 신호를 생성하여 제2 이차 장치에 송신하는 단계를 더 포함하는, 방법.
  12. 제9항에 있어서, 이차 정보를 상기 이차 장치에 송신하는 단계 - 상기 이차 정보는 상기 콘텐츠 스트림과 연관되고 상기 이차 장치에 의해 시각적으로 디스플레이되도록 구성됨 - 를 더 포함하는, 방법.
  13. 제9항에 있어서, 상기 이차 장치는 스마트폰 또는 리모트 컨트롤을 포함하는, 방법.
  14. 제9항에 있어서, 상기 통지 신호는 햅틱 효과 또는 오디오 효과를 포함하는, 방법.
  15. 프로세서가 방법을 실행하게 하는 프로그램 코드를 포함하는 컴퓨터 판독가능 매체로서, 상기 프로그램 코드는,
    통지 정보를 수신하는 프로그램 코드 - 상기 통지 정보는 텔레비전 장치에 의해 디스플레이되는 비디오 콘텐츠와 연관되는 이벤트를 표시함 - ;
    상기 통지 정보와 연관되는 햅틱 효과를 결정하는 프로그램 코드;
    햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 프로그램 코드 - 상기 햅틱 신호는 상기 햅틱 출력 장치가 상기 햅틱 효과를 출력하게 하도록 구성됨 -
    를 포함하는, 컴퓨터 판독가능 매체.
  16. 제15항에 있어서,
    이차 정보를 수신하는 프로그램 코드 - 상기 이차 정보는 상기 비디오 콘텐츠와 연관됨 - ; 및
    비디오 신호를 생성하여 이차 디스플레이 장치에 송신하는 프로그램 코드를 더 포함하는, 컴퓨터 판독가능 매체.
  17. 제16항에 있어서,
    상기 이차 정보를 감시하는 프로그램 코드;
    상기 이차 정보와 연관되는 이벤트를 검출하는 프로그램 코드; 및
    제2 햅틱 신호를 생성하여 햅틱 출력 장치에 송신하는 프로그램 코드 - 상기 제2 햅틱 신호는 상기 햅틱 출력 장치가 상기 햅틱 효과를 출력하게 하도록 구성됨 - 를 더 포함하는, 컴퓨터 판독가능 매체.
  18. 제15항에 있어서,
    출력 신호를 생성하는 프로그램 코드; 및
    상기 출력 신호를 원격 장치에 송신하는 프로그램 코드를 더 포함하는, 컴퓨터 판독가능 매체.
  19. 제18항에 있어서, 입력 장치로부터 입력을 수신하는 프로그램 코드를 더 포함하고, 상기 입력은 사용자의 감지된 생리학적 조건를 포함하며 제어 신호는 상기 감지된 생리학적 조건에 기초하는, 컴퓨터 판독가능 매체.
  20. 제18항에 있어서, 제어 신호는 상기 비디오 콘텐츠와 연관되는 정보 및 소셜 네트워킹 계정으로부터의 정보에 기초하는, 컴퓨터 판독가능 매체.
  21. 제15항에 있어서, 상기 통지 정보는 소셜 네트워킹 사이트 및 상기 비디오 콘텐츠의 사용자의 상태와 연관되는 정보를 포함하는, 컴퓨터 판독가능 매체.
  22. 제15항에 있어서, 신호를 생성하여 스피커에 송신하는 프로그램 코드 - 오디오 신호는 상기 통지 정보에 기초함 - 를 더 포함하는, 컴퓨터 판독가능 매체.
  23. 프로세서가 방법을 실행하게 하는 프로그램 코드를 포함하는 컴퓨터 판독가능 매체로서, 상기 프로그램 코드는,
    장치에 의해 수신되는 콘텐츠 스트림을 감시하는 프로그램 코드 - 상기 콘텐츠 스트림은 텔레비전 장치에 의해 디스플레이될 비디오 및 오디오 데이터를 포함함 - ;
    상기 콘텐츠 스트림 내에서 이벤트를 검출하는 프로그램 코드; 및
    상기 이벤트와 연관되는 통지 신호를 생성하여 이차 장치에 송신하는 프로그램 코드
    를 포함하는, 컴퓨터 판독가능 매체.
  24. 제23항에 있어서, 상기 통지 신호를 복수의 이차 장치들에 송신하는 프로그램 코드를 더 포함하는, 컴퓨터 판독가능 매체.
  25. 제23항에 있어서, 상기 이차 장치는 제1 이차 장치이고, 제2 통지 신호를 생성하여 제2 이차 장치에 송신하는 프로그램 코드를 더 포함하는, 컴퓨터 판독가능 매체.
  26. 제23항에 있어서, 이차 정보를 상기 이차 장치에 송신하는 프로그램 코드 - 상기 이차 정보는 상기 콘텐츠 스트림과 연관되고 상기 이차 장치에 의해 시각적으로 디스플레이되도록 구성됨 - 를 더 포함하는, 컴퓨터 판독가능 매체.
  27. 제23항에 있어서, 상기 이차 장치는 스마트폰 또는 리모트 컨트롤을 포함하는, 컴퓨터 판독가능 매체.
  28. 제23항에 있어서, 상기 통지 신호는 햅틱 효과 또는 오디오 효과를 포함하는, 컴퓨터 판독가능 매체.
KR1020140030063A 2013-03-14 2014-03-14 강화된 텔레비전 상호작용을 위한 시스템 및 방법 KR20140113492A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/827,850 2013-03-14
US13/827,850 US9866924B2 (en) 2013-03-14 2013-03-14 Systems and methods for enhanced television interaction

Publications (1)

Publication Number Publication Date
KR20140113492A true KR20140113492A (ko) 2014-09-24

Family

ID=50287946

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140030063A KR20140113492A (ko) 2013-03-14 2014-03-14 강화된 텔레비전 상호작용을 위한 시스템 및 방법

Country Status (5)

Country Link
US (2) US9866924B2 (ko)
EP (1) EP2779672A3 (ko)
JP (2) JP6538305B2 (ko)
KR (1) KR20140113492A (ko)
CN (2) CN104053065B (ko)

Families Citing this family (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8984431B2 (en) 2009-03-16 2015-03-17 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US9609395B2 (en) 2012-03-26 2017-03-28 Max Abecassis Second screen subtitles function
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US9992491B2 (en) * 2013-03-15 2018-06-05 Immersion Corporation Method and apparatus for encoding and decoding haptic information in multi-media files
US10168766B2 (en) 2013-04-17 2019-01-01 Nokia Technologies Oy Method and apparatus for a textural representation of a guidance
US10027606B2 (en) 2013-04-17 2018-07-17 Nokia Technologies Oy Method and apparatus for determining a notification representation indicative of a cognitive load
US10359835B2 (en) 2013-04-17 2019-07-23 Nokia Technologies Oy Method and apparatus for causing display of notification content
US9274603B2 (en) 2013-05-24 2016-03-01 Immersion Corporation Method and apparatus to provide haptic feedback based on media content and one or more external parameters
US9576445B2 (en) 2013-09-06 2017-02-21 Immersion Corp. Systems and methods for generating haptic effects associated with an envelope in audio signals
US9652945B2 (en) * 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9619980B2 (en) 2013-09-06 2017-04-11 Immersion Corporation Systems and methods for generating haptic effects associated with audio signals
US9443401B2 (en) * 2013-09-06 2016-09-13 Immersion Corporation Automatic remote sensing and haptic conversion system
US20150121306A1 (en) * 2013-10-30 2015-04-30 United Video Properties, Inc. Methods and systems for customizing functions of media guidance applications
US20150208032A1 (en) * 2014-01-17 2015-07-23 James Albert Gavney, Jr. Content data capture, display and manipulation system
US9661254B2 (en) * 2014-05-16 2017-05-23 Shadowbox Media, Inc. Video viewing system with video fragment location
US10085061B2 (en) * 2014-05-30 2018-09-25 Rovi Guides, Inc. Methods and systems for presenting customized options on a second device
WO2015183366A1 (en) 2014-05-30 2015-12-03 Apple, Inc. Continuity
US10139907B2 (en) 2014-06-16 2018-11-27 Immersion Corporation Systems and methods for foley-style haptic content creation
KR20170030510A (ko) * 2014-07-07 2017-03-17 임머숀 코퍼레이션 제2 스크린 햅틱
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
CN110072131A (zh) 2014-09-02 2019-07-30 苹果公司 音乐用户界面
US20160150294A1 (en) * 2014-11-20 2016-05-26 Adobe Systems Incorporated Video Content Metadata for Enhanced Video Experiences
CN105681853B (zh) * 2014-11-20 2019-04-26 中国移动通信集团公司 一种电视业务的控制方法、装置、机顶盒及服务平台
US9996156B2 (en) 2014-12-23 2018-06-12 Immersion Corporation Feedback reduction for a user input element associated with a haptic output device
US10216277B2 (en) * 2015-02-25 2019-02-26 Immersion Corporation Modifying haptic effects for slow motion
US9619034B2 (en) 2015-02-25 2017-04-11 Immersion Corporation Overlaying of haptic effects
KR20160139934A (ko) * 2015-05-29 2016-12-07 삼성전자주식회사 원격 제어 장치, 그의 진동 피드백 제공 방법 및 디스플레이 시스템
EP3112987A1 (en) * 2015-06-29 2017-01-04 Thomson Licensing Method and schemes for perceptually driven encoding of haptic effects
US9743154B2 (en) * 2015-09-09 2017-08-22 Sorenson Media, Inc Dynamic video advertisement replacement
US9847000B2 (en) 2015-10-29 2017-12-19 Immersion Corporation Ambient triggered notifications for rendering haptic effects
CN105536249B (zh) * 2016-02-18 2023-09-01 高创(苏州)电子有限公司 游戏系统
US9990815B2 (en) * 2016-02-18 2018-06-05 Immersion Corporation Wearable haptic effects with permissions settings
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
CN106060621A (zh) * 2016-07-12 2016-10-26 苏州本控电子科技有限公司 一种新型遥控器
US10916123B2 (en) * 2016-08-23 2021-02-09 Sony Corporation Control system, control apparatus, and control method
US10166465B2 (en) 2017-01-20 2019-01-01 Essential Products, Inc. Contextual user interface based on video game playback
US20180213290A1 (en) * 2017-01-20 2018-07-26 Essential Products, Inc. Contextual user interface based on media playback
US10359993B2 (en) 2017-01-20 2019-07-23 Essential Products, Inc. Contextual user interface based on environment
US20180232051A1 (en) * 2017-02-16 2018-08-16 Immersion Corporation Automatic localized haptics generation system
US10594812B2 (en) * 2017-03-10 2020-03-17 Sony Interactive Entertainment LLC Post-engagement metadata generation
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10928980B2 (en) 2017-05-12 2021-02-23 Apple Inc. User interfaces for playing and managing audio items
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
WO2018221013A1 (ja) * 2017-05-31 2018-12-06 シャープ株式会社 電子機器、プログラム、制御装置および制御方法
US10572016B2 (en) 2018-03-06 2020-02-25 Microsoft Technology Licensing, Llc Spatialized haptic device force feedback
US10809889B2 (en) * 2018-03-06 2020-10-20 Sony Corporation Live interactive event indication based on notification profile for display device
CN110493616B (zh) * 2018-05-15 2021-08-06 中国移动通信有限公司研究院 一种音频信号处理方法、装置、介质和设备
US11169668B2 (en) * 2018-05-16 2021-11-09 Google Llc Selecting an input mode for a virtual assistant
US20200012347A1 (en) * 2018-07-09 2020-01-09 Immersion Corporation Systems and Methods for Providing Automatic Haptic Generation for Video Content
US11483611B2 (en) * 2018-11-19 2022-10-25 Roku, Inc. Non-television experience triggers
CA3131489A1 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
KR20240049648A (ko) 2019-05-31 2024-04-16 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US10951951B2 (en) * 2019-07-30 2021-03-16 Sony Interactive Entertainment Inc. Haptics metadata in a spectating stream
WO2021088891A1 (zh) * 2019-11-04 2021-05-14 青岛海信激光显示股份有限公司 显示系统及显示方法
CN110806708A (zh) * 2019-11-07 2020-02-18 深圳创维－Rgb电子有限公司 智能家居控制方法、系统及计算机可读存储介质
JP7377093B2 (ja) * 2019-12-16 2023-11-09 日本放送協会 プログラム、情報処理装置、及び情報処理方法
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11523190B1 (en) 2021-12-17 2022-12-06 Google Llc Generating notifications that provide context for predicted content interruptions

Family Cites Families (282)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB630819A (ko) 1946-09-07
US3623046A (en) 1965-10-05 1971-11-23 Lynch Corp Transducer system
US3490059A (en) 1966-06-06 1970-01-13 Martin Marietta Corp Three axis mounting and torque sensing apparatus
US3875488A (en) 1973-02-15 1975-04-01 Raytheon Co Inertially stabilized gimbal platform
US4125800A (en) 1975-09-02 1978-11-14 Contraves Gorez Corporation Power controller with a modular power output
GB1563200A (en) 1975-10-16 1980-03-19 Keystone Int Position-detecting systems
US4050265A (en) 1976-08-03 1977-09-27 The United States Of America As Represented By The Secretary Of The Navy Force-displacement controller knob
US4148014A (en) 1977-04-06 1979-04-03 Texas Instruments Incorporated System with joystick to control velocity vector of a display cursor
US4311980A (en) 1978-10-12 1982-01-19 Fabrica Italiana Magneti Marelli, S.P.A. Device for pressure measurement using a resistor strain gauge
GB2063474B (en) 1979-10-24 1984-06-06 Olympus Optical Co Coeliac cavity ultrasonic diagnosis apparatus
DE3007311C2 (de) 1980-02-27 1985-11-28 Dr. Johannes Heidenhain Gmbh, 8225 Traunreut Digitales lichtelektrisches Längen- oder Winkelmeßsystem
US4400790A (en) 1981-01-06 1983-08-23 E-Systems, Inc. Transversal correlator
US4546347A (en) 1981-05-18 1985-10-08 Mouse Systems Corporation Detector for electro-optical mouse
US4443952A (en) 1981-11-09 1984-04-24 The Bendix Corporation Gyroscopic apparatus
DE3382431D1 (de) 1982-01-22 1991-11-14 British Aerospace Steuerungsgeraet.
US4937685A (en) 1983-12-02 1990-06-26 Lex Computer And Management Corporation Method of display presentation for video editing
US4678908A (en) 1983-07-25 1987-07-07 Bei Electronics, Inc. Zero reference generating method and apparatus for optical encoders
JPS6029833A (ja) 1983-07-28 1985-02-15 Canon Inc 画像表示装置
US4639884A (en) 1984-03-05 1987-01-27 Berkeley Process Control, Inc. Method and apparatus for measuring velocity and position in servo systems
US4680466A (en) 1984-04-20 1987-07-14 Yokogawa Hokushin Electric Corporation Displacement transducer which simultaneously extracts signals via sequential switching
US4799055A (en) 1984-04-26 1989-01-17 Symbolics Inc. Optical Mouse
FR2564586A1 (fr) 1984-05-18 1985-11-22 Honda Motor Co Ltd Appareil optique de detection de couple
GB8413955D0 (en) 1984-05-31 1984-07-04 Pa Consulting Services Displacement measuring apparatus
IT1175678B (it) 1984-08-31 1987-07-15 Mangnaghi Oleodinamica Spa Gruppo servoattuatore ridondante particolarmente per l'azionamento di organi di controllo di volo in velivoli
JPS6163861A (ja) 1984-09-04 1986-04-02 Sharp Corp 複写プロセスタイミング制御方式
US4794384A (en) 1984-09-27 1988-12-27 Xerox Corporation Optical translator device
US4712101A (en) 1984-12-04 1987-12-08 Cheetah Control, Inc. Control mechanism for electronic apparatus
US4728954A (en) 1984-12-20 1988-03-01 Deere & Company Ground velocity sensor with drop-out detection
US4935728A (en) 1985-01-02 1990-06-19 Altra Corporation Computer control
US4811608A (en) 1985-12-18 1989-03-14 Spatial Systems Pty Limited Force and torque converter
US5591924A (en) 1985-12-18 1997-01-07 Spacetec Imc Corporation Force and torque converter
US5195179A (en) 1986-01-29 1993-03-16 Hitachi, Ltd. Coordinate input apparatus
JPS62201325A (ja) 1986-02-07 1987-09-05 Fujitsu Ltd 赤外線検知器
US5155423A (en) 1986-02-18 1992-10-13 Robotics Research Corporation Industrial robot with servo
US4724715A (en) 1986-04-30 1988-02-16 Culver Craig F Control mechanism for computer keyboard and the like
US4823106A (en) 1986-07-10 1989-04-18 Tapeswitch Corporation Of America Tape element and methods, for heating, pressure measurement and circuit fabrication
US4803413A (en) 1986-07-15 1989-02-07 Honeywell Inc. Magnetic isolating and pointing gimbal apparatus
US4692726A (en) 1986-07-25 1987-09-08 Motorola, Inc. Multiple resonator dielectric filter
US4695266A (en) 1986-09-17 1987-09-22 Hui Hsu W Steerable electric toy car
SE464855B (sv) 1986-09-29 1991-06-24 Asea Ab Foerfarande vid en industrirobot foer kalibrering av en sensor
CA1299362C (en) 1986-12-10 1992-04-28 Gregory James Mcdonald Coordinate measuring system
US4819195A (en) 1987-01-20 1989-04-04 The Warner & Swasey Company Method for calibrating a coordinate measuring machine and the like and system therefor
US4851771A (en) 1987-02-24 1989-07-25 Kabushiki Kaisha Yaskawa Denki Seisakusho Magnetic encoder for detection of incremental and absolute value displacement
IT1214292B (it) 1987-05-05 1990-01-10 Garda Impianti Srl Apparecchiatura per la misura e/o il controllo della posizione edella orientazione di punti o zone caratteristiche di strutture, in particolare di scocche di autoveicoli.
US4840634A (en) 1987-06-10 1989-06-20 Clayton Foundation For Research Calibration controller for controlling electrically operated machines
JPS6488716A (en) 1987-09-30 1989-04-03 Komatsu Mfg Co Ltd Automatic driving device for traveling vehicle
US4906843A (en) 1987-12-31 1990-03-06 Marq Technolgies Combination mouse, optical scanner and digitizer puck
SE461548B (sv) 1988-02-18 1990-02-26 Johansson Ab C E Foerfarande och anordning foer bestaemning av och korrigering foer laegesfel vid maetning av en punkts laege eller vid positionering till en punkt med ett bestaemt laege
US5006703A (en) 1988-02-22 1991-04-09 Victor Company Of Japan, Ltd. Reflective optical rotary encoder disc
US4914976A (en) 1988-04-13 1990-04-10 Honeywell Inc. Five and six degree of freedom hand controllers
US4825157A (en) 1988-05-16 1989-04-25 Mikan Peter J Hall-effect controller
JP2664205B2 (ja) 1988-06-10 1997-10-15 株式会社日立製作所 マニピュレータ制御システム
JPH0719512Y2 (ja) 1988-06-15 1995-05-10 株式会社セガ・エンタープライゼス 模擬操縦ゲーム装置
JP2574873B2 (ja) 1988-08-24 1997-01-22 株式会社日立製作所 位置あるいは速度検出装置
US4962448A (en) 1988-09-30 1990-10-09 Demaio Joseph Virtual pivot handcontroller
US5068529A (en) 1988-12-22 1991-11-26 Nikon Corporation Absolute position detection encoder
US5116051A (en) 1989-01-12 1992-05-26 Atari Games Corporation Strain gauge pressure-sensitive video game control
JPH0721710B2 (ja) 1989-01-25 1995-03-08 ヤマハ株式会社 パッド付電子鍵盤楽器
US5195920A (en) 1989-02-16 1993-03-23 Collier Harry B Radio controlled model vehicle having coordinated sound effects system
US4964837B1 (en) 1989-02-16 1993-09-14 B. Collier Harry Radio controlled model vehicle having coordinated sound effects system
GB8906287D0 (en) 1989-03-18 1989-05-04 Renishaw Plc Probe calibration
US4965446A (en) 1989-04-20 1990-10-23 Ivac Corporation Optical interrupter system with vibration compensation
US4935725A (en) 1989-07-18 1990-06-19 British Columbia Telephone Co. Security device
US5390296A (en) 1989-08-30 1995-02-14 Comshare Incorporated Method and apparatus for calculation with display data
US5139261A (en) 1989-09-15 1992-08-18 Openiano Renato M Foot-actuated computer game controller serving as a joystick
US5182557A (en) 1989-09-20 1993-01-26 Semborg Recrob, Corp. Motorized joystick
US5065145A (en) 1989-10-06 1991-11-12 Summagraphics Corporation Method and apparatus for producing signals corresponding to the position of a cursor
GB8923066D0 (en) 1989-10-13 1989-11-29 Cheetah Marketing Ltd A movable electronic device for playing computer games
US5452615A (en) 1989-10-25 1995-09-26 Spacetec Imc Corporation Force and torque converter
US5209131A (en) 1989-11-03 1993-05-11 Rank Taylor Hobson Metrology
US5107080A (en) 1989-12-01 1992-04-21 Massachusetts Institute Of Technology Multiple degree of freedom damped hand controls
JPH03251378A (ja) 1990-02-28 1991-11-08 Fanuc Ltd ロボットのキャリブレーション方式
US5113179A (en) 1990-03-16 1992-05-12 Advanced Gravis Computer Technology Ltd. Switch joystick
US5095303A (en) 1990-03-27 1992-03-10 Apple Computer, Inc. Six degree of freedom graphic object controller
US5062830A (en) 1990-04-04 1991-11-05 Derata Corporation Dry disposable nozzle assembly for medical jet injector
US5138154A (en) 1990-04-04 1992-08-11 Gyration Inc. Shaft angle encoder with rotating off-axis interference pattern
US5247648A (en) 1990-04-12 1993-09-21 Sun Microsystems, Inc. Maintaining data coherency between a central cache, an I/O cache and a memory
US5202961A (en) 1990-06-08 1993-04-13 Apple Computer, Inc. Sequential information controller
US5079845A (en) 1990-08-31 1992-01-14 Futurity Technologies, Inc. Dual readout analog/digital magnetic compass
US5086197A (en) 1990-09-17 1992-02-04 Liou Kwang Wan Optical encoding method and device
JPH04142424A (ja) 1990-10-03 1992-05-15 Canon Inc 移動体の位置検出装置
US5132927A (en) 1990-10-09 1992-07-21 Tandem Computers Incorporated System for cache space allocation using selective addressing
WO1992007350A1 (en) 1990-10-15 1992-04-30 National Biomedical Research Foundation Three-dimensional cursor control device
US5024626A (en) 1991-02-01 1991-06-18 Jack Robbins Sound producing remote control toy vehicle
US5204600A (en) 1991-02-06 1993-04-20 Hewlett-Packard Company Mechanical detent simulating system
US5098437A (en) 1991-02-13 1992-03-24 Pfizer Hospital Products Group, Inc. Acetabular cup positioning insert
US5841423A (en) 1991-02-15 1998-11-24 Carroll, Jr.; George L. Multifunction space bar for video screen graphics cursor control
US5254919A (en) 1991-03-22 1993-10-19 Eastman Kodak Company Encoder system using linear array sensor for high resolution
US5459495A (en) 1992-05-14 1995-10-17 In Focus Systems, Inc. Gray level addressing for LCDs
EP0509337B1 (en) 1991-04-05 1996-10-30 Logitech Inc Track ball mounted on keyboard
US5329289A (en) 1991-04-26 1994-07-12 Sharp Kabushiki Kaisha Data processor with rotatable display
US5341459A (en) 1991-05-09 1994-08-23 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Generalized compliant motion primitive
JPH06508222A (ja) 1991-05-23 1994-09-14 アタリ　ゲームズ　コーポレーション モジュール式表示シミュレーター
US5168268A (en) 1991-06-05 1992-12-01 Apple Computer, Inc. Optically transmissive armature for cursor control device
US5235868A (en) 1991-10-02 1993-08-17 Culver Craig F Mechanism for generating control signals
US5216337A (en) 1991-10-28 1993-06-01 Orton Kevin R Radio controlled speed controller with audible feedback signal
US5230623A (en) 1991-12-10 1993-07-27 Radionics, Inc. Operating pointer with interactive computergraphics
US5402680A (en) 1991-12-10 1995-04-04 Canon Kabushiki Kaisha Velocity sensor and semiconductor exposing apparatus using such a sensor
US6400996B1 (en) * 1999-02-01 2002-06-04 Steven M. Hoffberg Adaptive pattern recognition based control system and method
GB9201214D0 (en) 1992-01-21 1992-03-11 Mcmahon Michael J Surgical retractors
CA2062147C (en) 1992-03-02 1995-07-25 Kenji Hara Multi-axial joy stick device
US5246316A (en) 1992-03-06 1993-09-21 Excellon Automation Work table orientation apparatus and method
US5457793A (en) 1992-03-30 1995-10-10 International Business Machines Corporation Software cache management of a shared electronic store in a supplex
JP3199130B2 (ja) 1992-03-31 2001-08-13 パイオニア株式会社 ３次元座標入力装置
US5734108A (en) 1992-04-10 1998-03-31 Walker; Dana A. System for sensing shaft displacement and strain
US5284330A (en) 1992-06-18 1994-02-08 Lord Corporation Magnetorheological fluid devices
US5317336A (en) 1992-06-23 1994-05-31 Hall Kenneth J Mouse yoke assembly for interfacing with a computer
JP3227206B2 (ja) 1992-06-30 2001-11-12 キヤノン株式会社 光学式エンコーダ
US5245320A (en) 1992-07-09 1993-09-14 Thrustmaster, Inc. Multiport game card with configurable address
US5280276A (en) 1992-07-10 1994-01-18 Quickshot (Bvi) Ltd. Combination mouse/trackball input device
US5313230A (en) 1992-07-24 1994-05-17 Apple Computer, Inc. Three degree of freedom graphic object controller
US5402499A (en) 1992-08-07 1995-03-28 Lsi Logic Corporation Multimedia controller
US5428748A (en) 1992-09-24 1995-06-27 National Semiconductor Corporation Method and apparatus for automatically configuring a computer peripheral
US5397323A (en) 1992-10-30 1995-03-14 International Business Machines Corporation Remote center-of-motion robot for surgery
FI92111C (fi) 1992-12-11 1994-09-26 Icl Personal Systems Oy Menetelmä ja järjestely kohdistimen siirtämiseksi tietokoneen näytöllä
US5550563A (en) 1992-12-23 1996-08-27 Taligent, Inc. Interaction framework system
US5474082A (en) 1993-01-06 1995-12-12 Junker; Andrew Brain-body actuated system
US5526022A (en) 1993-01-06 1996-06-11 Virtual I/O, Inc. Sourceless orientation sensor
US5550562A (en) 1993-01-12 1996-08-27 Fujitsu Limited Data processing device that enables mouse-operated application programs to be operated from an operation pad, and an operation pad for use with the same
US5374942A (en) 1993-02-05 1994-12-20 Gilligan; Federico G. Mouse and method for concurrent cursor position and scrolling control
US5313229A (en) 1993-02-05 1994-05-17 Gilligan Federico G Mouse and method for concurrent cursor position and scrolling control
US5402582A (en) 1993-02-23 1995-04-04 Faro Technologies Inc. Three dimensional coordinate measuring apparatus
US5390128A (en) 1993-04-12 1995-02-14 Cargill Detroit Corporation Robotic processing and inspection system
US5524195A (en) 1993-05-24 1996-06-04 Sun Microsystems, Inc. Graphical user interface for interactive television with an animated agent
US5351692A (en) 1993-06-09 1994-10-04 Capistrano Labs Inc. Laparoscopic ultrasonic probe
WO1995002801A1 (en) 1993-07-16 1995-01-26 Immersion Human Interface Three-dimensional mechanical mouse
US5724264A (en) 1993-07-16 1998-03-03 Immersion Human Interface Corp. Method and apparatus for tracking the position and orientation of a stylus and for digitizing a 3-D object
US5491477A (en) 1993-09-13 1996-02-13 Apple Computer, Inc. Anti-rotation mechanism for direct manipulation position input controller for computer
US5436640A (en) 1993-10-29 1995-07-25 Thrustmaster, Inc. Video game and simulator joystick controller with geared potentiometer actuation
US5384460A (en) 1993-11-03 1995-01-24 Silitek Corporation Encoder with a light emitting editing wheel
US5936613A (en) 1993-11-05 1999-08-10 Intertactile Technologies Corporation Rotary circuit control devices with changeable graphics
US5841428A (en) 1993-11-05 1998-11-24 Intertactile Technologies Corporation Rotary circuit control devices with changeable graphics
DE69423313T2 (de) 1993-12-20 2000-07-13 Seiko Epson Corp Elektronische Hinweisanordnung
JPH07111663B2 (ja) 1993-12-28 1995-11-29 コナミ株式会社 操作用フットペダル
US5473344A (en) 1994-01-06 1995-12-05 Microsoft Corporation 3-D cursor positioning device
US5436542A (en) 1994-01-28 1995-07-25 Surgix, Inc. Telescopic camera mount with remotely controlled positioning
JPH07234628A (ja) 1994-02-21 1995-09-05 Sega Enterp Ltd 模擬ステアリング装置
US5514150A (en) 1994-03-03 1996-05-07 Lsi Logic Corporation Micromachined conveyor devices
US5481914A (en) 1994-03-28 1996-01-09 The Charles Stark Draper Laboratory, Inc. Electronics for coriolis force and other sensors
US5623642A (en) 1994-04-06 1997-04-22 M ak Technologies, Inc. Method for simulating newtonian interactions over a computer network
FR2718357B1 (fr) 1994-04-06 1997-10-03 Defarges Alain Moreau Perfectionnements apportés à un dispositif d'injection par jet sans aiguille.
US5457479A (en) 1994-06-13 1995-10-10 Primax Electronics Ltd. Apparatus having dual modes for controlling cursor on display screen
US5652603A (en) 1994-06-16 1997-07-29 Abrams; Daniel Lawrence 3-D computer input device
US5915129A (en) 1994-06-27 1999-06-22 Microsoft Corporation Method and system for storing uncompressed data in a memory cache that is destined for a compressed file system
US5623582A (en) 1994-07-14 1997-04-22 Immersion Human Interface Corporation Computer interface or control input device for laparoscopic surgical instrument and other elongated mechanical objects
US5530455A (en) 1994-08-10 1996-06-25 Mouse Systems Corporation Roller mouse for implementing scrolling in windows applications
US5627531A (en) 1994-09-30 1997-05-06 Ohmeda Inc. Multi-function menu selection device
US5570111A (en) 1994-10-03 1996-10-29 International Business Machines Corporation Graphical user interface cursor positioning device having a negative inertia transfer function
US5666138A (en) 1994-11-22 1997-09-09 Culver; Craig F. Interface control
WO1996016397A1 (en) 1994-11-23 1996-05-30 Immersion Human Interface Corporation Method and apparatus for providing mechanical i/o for computer systems interfaced with elongated flexible objects
JP2695623B2 (ja) 1994-11-25 1998-01-14 株式会社ミツトヨ 光学式エンコーダ
US5599302A (en) 1995-01-09 1997-02-04 Medi-Ject Corporation Medical injection system and method, gas spring thereof and launching device using gas spring
WO1996024398A1 (en) 1995-02-06 1996-08-15 Weston Medical Limited Needle-less injector
US5592401A (en) 1995-02-28 1997-01-07 Virtual Technologies, Inc. Accurate, rapid, reliable position sensing using multiple sensing technologies
CH690463A5 (fr) 1995-03-01 2000-09-15 Portescap Codeur optique incrémental.
US5749577A (en) 1995-03-15 1998-05-12 Sega Enterprises, Ltd. Perpheral input device with six-axis capability
US5755620A (en) 1995-04-03 1998-05-26 Kabushiki Kaisha Sega Enterprises Game system and data processing method thereof
US5699275A (en) 1995-04-12 1997-12-16 Highwaymaster Communications, Inc. System and method for remote patching of operating code located in a mobile unit
US5825305A (en) 1995-05-04 1998-10-20 Mcdonnell Douglas Corporation Cargo loading alignment device
JP4290762B2 (ja) 1995-05-10 2009-07-08 任天堂株式会社 アナログジョイスティックを用いる画像処理システム
US5680141A (en) 1995-05-31 1997-10-21 The United States Of America As Represented By The Secretary Of The Army Temperature calibration system for a ferroelectric phase shifting array antenna
US5724106A (en) 1995-07-17 1998-03-03 Gateway 2000, Inc. Hand held remote control device with trigger button
US5771037A (en) 1995-07-24 1998-06-23 Altra Computer display cursor controller
US5638421A (en) 1995-07-25 1997-06-10 Ora Electronics, Inc. Apparatus and method for incoming call detection and alarm circuitry for cellular telephones
US5628686A (en) 1995-07-31 1997-05-13 Microsoft Corporation Apparatus and method for bidirectional data communication in a game port
US5694153A (en) 1995-07-31 1997-12-02 Microsoft Corporation Input device for providing multi-dimensional position coordinate signals to a computer
US5635897A (en) 1995-08-22 1997-06-03 Kuo; Shih-Chun Mobile phone alarm
US5611731A (en) 1995-09-08 1997-03-18 Thrustmaster, Inc. Video pinball machine controller having an optical accelerometer for detecting slide and tilt
JP3438755B2 (ja) 1995-09-25 2003-08-18 ソニー株式会社 調整操作装置
US5877748A (en) 1995-11-20 1999-03-02 Redlich; Sanford I. Computer control input interface system
US6183364B1 (en) 1995-12-21 2001-02-06 Karen I. Trovato Simulated environment using procedural animation in a simulated city
US5831593A (en) 1996-01-16 1998-11-03 International Business Machines Corporation Low-power standby mode for a remote sensing device
US5818426A (en) 1996-02-01 1998-10-06 Aztech New Media Corporation Peripheral-computer interfacing system and method
CN1171401C (zh) 1996-02-29 2004-10-13 松下电器产业株式会社 能灵活选定输出模式的无线寻呼机
US6017273A (en) 1996-03-26 2000-01-25 Pacific Digital Peripherals, Inc. Joystick game adapter card for a personal computer
US6078311A (en) 1996-03-26 2000-06-20 Pacific Digital Peripherals, Inc. Joystick game adapter card for a personal computer
US5722071A (en) 1996-03-27 1998-02-24 Sony Corporation Portable receiver including transducer for notifying user of messages received in a remote mobile communications device
US5740083A (en) 1996-04-01 1998-04-14 Ford Motor Company Delta time measurement circuit for determining parameter derivatives of a rotational velocity sensor signal
US6259433B1 (en) 1996-05-14 2001-07-10 Norman H. Meyers Digital optical joystick with mechanically magnified resolution
US5795228A (en) 1996-07-03 1998-08-18 Ridefilm Corporation Interactive computer-based entertainment system
US5828295A (en) 1996-09-04 1998-10-27 Motorola, Inc. Mode tracking transducer driver for a non-linear transducer
ATE214300T1 (de) 1996-10-02 2002-03-15 Graupner Gmbh & Co Kg Vorrichtung zur beeinflussung des fahrverhaltens von ferngesteuerten modellfahrzeugen
US5889506A (en) 1996-10-25 1999-03-30 Matsushita Electric Industrial Co., Ltd. Video user's environment
JPH10132612A (ja) 1996-10-28 1998-05-22 Mitsutoyo Corp 光学式変位検出装置
US5917486A (en) 1996-11-04 1999-06-29 Prolexia Reading Education Software Corporation System and method for client program control of a computer display cursor
US6104379A (en) 1996-12-11 2000-08-15 Virtual Technologies, Inc. Forearm-supported exoskeleton hand-tracking device
TW359054B (en) 1996-12-20 1999-05-21 Sony Corp Method and apparatus for automatic sending of e-mail and automatic sending control program supplying medium
US5954689A (en) 1996-12-20 1999-09-21 Novo Nordisk A/S Jet injector
US5912661A (en) 1997-01-14 1999-06-15 Microsoft Corp. Z-encoder mechanism
US5986638A (en) 1997-02-04 1999-11-16 Mag Technology Co., Ltd. Apparatus and method for synchronously selecting icons in flywheel controlled color computer monitor
US5808603A (en) 1997-02-06 1998-09-15 Chen; Mei Yun Computer input device
US5808568A (en) 1997-02-27 1998-09-15 Primax Electronics, Ltd. Finger operated module for generating encoding signals
IT1291830B1 (it) 1997-04-17 1999-01-21 Logitron Srl Encoder e pulser ottico
US6005551A (en) 1997-04-25 1999-12-21 Microsoft Corporation Offline force effect rendering
US6097964A (en) 1997-09-04 2000-08-01 Nokia Mobile Phones Limited Navigation key for a handset
US6097499A (en) 1997-11-14 2000-08-01 Lexmark International, Inc. Methods and apparatus for isochronous printing with minimal buffering
JPH11187439A (ja) 1997-12-22 1999-07-09 Sony Corp 携帯情報端末装置、画面表示方法、記録媒体およびマイクロコンピュータ装置
DE19757385C2 (de) 1997-12-22 2000-03-09 Clemente Spehr Werbeblockerkennungseinrichtung
US6280327B1 (en) 1998-06-05 2001-08-28 Arista Interactive Llc Wireless game control units
US6295608B1 (en) 1998-02-17 2001-09-25 Microsoft Corporation Optimized allocation of data elements among cache lines
US6349301B1 (en) 1998-02-24 2002-02-19 Microsoft Corporation Virtual environment bystander updating in client server architecture
US5844673A (en) 1998-04-17 1998-12-01 Cambridge Technology, Inc. Axial led position detector for determining the angular position of a rotatable element
GB2347199A (en) 1999-02-22 2000-08-30 Haptic Technologies Inc A hand controller for cursor movement
US6546390B1 (en) 1999-06-11 2003-04-08 Abuzz Technologies, Inc. Method and apparatus for evaluating relevancy of messages to users
US7072888B1 (en) 1999-06-16 2006-07-04 Triogo, Inc. Process for improving search engine efficiency using feedback
EP1063239A1 (fr) 1999-06-25 2000-12-27 Societe De Conseils De Recherches Et D'applications Scientifiques (S.C.R.A.S.) Nouveaux composés possédant un lanthanide et un ligand tridentate, leur procédé de préparation et leur application notamment comme catalyseurs de polymérisation
US6293798B1 (en) 1999-11-10 2001-09-25 Skyline Products System and method for an RC controller and software
US6300038B1 (en) 1999-11-19 2001-10-09 Kodak Polychrome Graphics Llc Articles having imagable coatings
US20010018354A1 (en) 1999-12-29 2001-08-30 Pigni Oscar Marcelo Cellular phone system with personalized message recorder reproducer unit
WO2001067297A1 (en) 2000-03-07 2001-09-13 Tzunami Inc. System and method for computer searching
CA2406000A1 (en) 2000-04-12 2001-10-25 Thomas D. Laing Interactive video device and method of use
US7159008B1 (en) * 2000-06-30 2007-01-02 Immersion Corporation Chat interface with haptic feedback functionality
US6537221B2 (en) 2000-12-07 2003-03-25 Koninklijke Philips Electronics, N.V. Strain rate analysis in ultrasonic diagnostic images
EP1412040A1 (en) * 2001-05-11 2004-04-28 Koninklijke Philips Electronics N.V. An enabled device and a method of operating a set of devices
US6963762B2 (en) * 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
DE10129583A1 (de) 2001-06-20 2003-01-09 Disetronic Licensing Ag Vorrichtung und Verfahren zu Injektion
US7093201B2 (en) 2001-09-06 2006-08-15 Danger, Inc. Loop menu navigation apparatus and method
US7623114B2 (en) 2001-10-09 2009-11-24 Immersion Corporation Haptic feedback sensations based on audio output from computer devices
US6703550B2 (en) * 2001-10-10 2004-03-09 Immersion Corporation Sound data output and manipulation using haptic feedback
US20030112269A1 (en) 2001-12-17 2003-06-19 International Business Machines Corporation Configurable graphical element for monitoring dynamic properties of a resource coupled to a computing environment
US7739601B1 (en) 2002-01-23 2010-06-15 Microsoft Corporation Media authoring and presentation
WO2003096669A2 (en) * 2002-05-10 2003-11-20 Reisman Richard R Method and apparatus for browsing using multiple coordinated device
JP2004164618A (ja) 2002-10-14 2004-06-10 Oce Technol Bv 携帯端末における選択メカニズム
US20040193393A1 (en) 2003-03-28 2004-09-30 Keane John F. Reconfigurable logic for simulating stochastic discrete events
CN1543096A (zh) 2003-04-30 2004-11-03 ���µ�����ҵ��ʽ���� 自动检测电视广告的装置及其方法
GB2418475B (en) 2003-06-09 2007-10-24 Immersion Corp Interactive gaming systems with haptic feedback
US20060066569A1 (en) 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
US8064752B1 (en) 2003-12-09 2011-11-22 Apple Inc. Video encoding
US8296070B2 (en) 2004-02-20 2012-10-23 The Mathworks, Inc. Method and apparatus for improved simulation of chemical and biochemical reactions
JP2005260322A (ja) * 2004-03-09 2005-09-22 Faith Inc コンテンツ補足情報提供システム、携帯情報端末、サーバ
JP2005286966A (ja) 2004-03-31 2005-10-13 Hitachi Ltd 情報処理装置及び情報処理システム
EP1582965A1 (en) * 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
US8115091B2 (en) * 2004-07-16 2012-02-14 Motorola Mobility, Inc. Method and device for controlling vibrational and light effects using instrument definitions in an audio file format
US20080098331A1 (en) 2005-09-16 2008-04-24 Gregory Novick Portable Multifunction Device with Soft Keyboards
US7920694B2 (en) * 2006-02-03 2011-04-05 Immersion Corporation Generation of consistent haptic effects
US7882442B2 (en) 2007-01-05 2011-02-01 Eastman Kodak Company Multi-frame display system with perspective based image arrangement
CN101335911B (zh) * 2007-06-26 2012-08-15 华为技术有限公司 消息处理的方法、用户终端和服务器
US8095646B2 (en) * 2007-08-16 2012-01-10 Sony Computer Entertainment Inc. Content ancillary to sensory work playback
US7987478B2 (en) 2007-08-28 2011-07-26 Sony Ericsson Mobile Communications Ab Methods, devices, and computer program products for providing unobtrusive video advertising content
US9619143B2 (en) * 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US20090079690A1 (en) * 2007-09-21 2009-03-26 Sony Computer Entertainment America Inc. Method and apparatus for enhancing entertainment software through haptic insertion
US9019087B2 (en) * 2007-10-16 2015-04-28 Immersion Corporation Synchronization of haptic effect data in a media stream
US8875212B2 (en) 2008-04-15 2014-10-28 Shlomo Selim Rakib Systems and methods for remote control of interactive video
KR100914418B1 (ko) * 2007-12-17 2009-08-31 한국전자통신연구원 실감형 멀티미디어 재생 시스템 및 방법
JP4613974B2 (ja) * 2008-03-28 2011-01-19 ソニー株式会社 通信機器および通信システム
KR101517769B1 (ko) * 2008-04-24 2015-05-06 삼성전자주식회사 미디어 컨텐츠 재생장치에서 방송 컨텐츠의 추천 방법과 그장치
US8645993B2 (en) * 2008-05-07 2014-02-04 Qualcomm Incorporated Methods and apparatuses for directing recipients of video content items to interesting video content items
US9246613B2 (en) 2008-05-20 2016-01-26 Verizon Patent And Licensing Inc. Method and apparatus for providing online social networking for television viewing
EP2723107B1 (en) * 2008-07-15 2019-05-15 Immersion Corporation Systems and methods for transmitting haptic messages
US20110125788A1 (en) 2008-07-16 2011-05-26 Electronics And Telecommunications Research Institute Method and apparatus for representing sensory effects and computer readable recording medium storing sensory device capability metadata
AU2009303298B2 (en) * 2008-10-10 2013-05-23 Internet Services, Llc Haptic output device for use with haptic encoded media
US20100153995A1 (en) * 2008-12-12 2010-06-17 At&T Intellectual Property I, L.P. Resuming a selected viewing channel
CN101458560B (zh) * 2008-12-25 2011-06-29 南京壹进制信息技术有限公司 一种计算机智能节能方法
JP5658235B2 (ja) 2009-05-07 2015-01-21 イマージョン コーポレーションＩｍｍｅｒｓｉｏｎ Ｃｏｒｐｏｒａｔｉｏｎ 触覚フィードバックによる形状変化ディスプレイの形成方法及び装置
WO2011011552A1 (en) * 2009-07-22 2011-01-27 Immersion Corporation Interactive touch screen gaming metaphors with haptic feedback across platforms
US20110099017A1 (en) 2009-10-26 2011-04-28 Ure Michael J System and method for interactive communication with a media device user such as a television viewer
US8902050B2 (en) * 2009-10-29 2014-12-02 Immersion Corporation Systems and methods for haptic augmentation of voice-to-text conversion
US20110153768A1 (en) 2009-12-23 2011-06-23 International Business Machines Corporation E-meeting presentation relevance alerts
JP5634736B2 (ja) * 2010-04-16 2014-12-03 エヌ・ティ・ティ・コミュニケーションズ株式会社 番組評価情報提供装置、番組評価情報提供方法、及びプログラム
JP5043156B2 (ja) * 2010-06-16 2012-10-10 京セラ株式会社 携帯型テレビ視聴装置
US8798534B2 (en) * 2010-07-09 2014-08-05 Digimarc Corporation Mobile devices and methods employing haptics
EP2429183A1 (en) 2010-09-08 2012-03-14 Nagravision S.A. Remote control with sensor
KR101719653B1 (ko) * 2010-09-16 2017-03-24 엘지전자 주식회사 이동 단말기, 전자 시스템 및 이를 이용한 데이터 송수신 방법
US8776121B2 (en) 2010-11-03 2014-07-08 Google Inc. Social aspects of media guides
US9058728B2 (en) * 2010-11-05 2015-06-16 Georgia Tech Research Corporation Haptic systems, devices, and methods using transmission of pressure through a flexible medium
US8694375B2 (en) 2011-09-30 2014-04-08 Microsoft Corporation Determining whether to display message to user in application based on user message viewing history
CN102523493A (zh) 2011-12-09 2012-06-27 深圳Tcl新技术有限公司 电视节目心情评分的方法及系统
US10013857B2 (en) * 2011-12-21 2018-07-03 Qualcomm Incorporated Using haptic technologies to provide enhanced media experiences
JP6269480B2 (ja) * 2012-04-06 2018-01-31 株式会社ニコン データ処理装置、及びデータ処理プログラム
US20130311881A1 (en) 2012-05-16 2013-11-21 Immersion Corporation Systems and Methods for Haptically Enabled Metadata
US9891709B2 (en) * 2012-05-16 2018-02-13 Immersion Corporation Systems and methods for content- and context specific haptic effects using predefined haptic effects
US8861858B2 (en) * 2012-06-01 2014-10-14 Blackberry Limited Methods and devices for providing companion services to video
KR101427993B1 (ko) * 2012-12-17 2014-08-08 포항공과대학교 산학협력단 오디오 신호의 햅틱 신호 변환 방법 및 이를 수행하는 장치
CN103893971B (zh) * 2012-12-25 2015-05-27 腾讯科技（深圳）有限公司 一种游戏音效的制作方法和客户端
US10775888B2 (en) * 2013-02-15 2020-09-15 Facebook, Inc. Method and system for integrating haptic feedback into portable electronic devices
US20170025153A1 (en) * 2013-03-05 2017-01-26 Wevideo, Inc. Theme-based effects multimedia editor
US8984568B2 (en) * 2013-03-13 2015-03-17 Echostar Technologies L.L.C. Enhanced experience from standard program content
US9285905B1 (en) * 2013-03-14 2016-03-15 Amazon Technologies, Inc. Actuator coupled device chassis
US9652945B2 (en) * 2013-09-06 2017-05-16 Immersion Corporation Method and system for providing haptic effects based on information complementary to multimedia content
US9147328B2 (en) * 2013-11-04 2015-09-29 Disney Enterprises, Inc. Creating tactile content with sound
KR20160089374A (ko) * 2013-11-25 2016-07-27 톰슨 라이센싱 햅틱 계수를 재생하기 위해 자동회귀 모델, 신호 및 디바이스를 이용하여 햅틱 계수를 생성하는 방법
US9588588B2 (en) * 2014-09-22 2017-03-07 Disney Enterprises, Inc. Customized haptic effects

Also Published As

Publication number Publication date
JP2019175494A (ja) 2019-10-10
US20180124475A1 (en) 2018-05-03
JP6538305B2 (ja) 2019-07-03
JP2014194768A (ja) 2014-10-09
US20140267911A1 (en) 2014-09-18
EP2779672A2 (en) 2014-09-17
EP2779672A3 (en) 2014-11-12
US9866924B2 (en) 2018-01-09
CN104053065A (zh) 2014-09-17
CN110401860A (zh) 2019-11-01
CN104053065B (zh) 2019-08-02

Similar Documents

Publication Publication Date Title
US20180124475A1 (en) Systems and Methods for Enhanced Television Interaction
JP7422176B2 (ja) Ｔｖユーザ対話のためのインテリジェント自動アシスタント
US10320501B2 (en) Haptic broadcast with select haptic metadata based on haptic playback capability
US10241580B2 (en) Overlaying of haptic effects
US9900498B2 (en) Glass-type terminal and method for controlling the same
US20200341551A1 (en) Systems and methods for providing customizable haptic playback
KR102364487B1 (ko) 멀티미디어 콘텐츠와 상호보완적인 정보에 기초하여 햅틱 효과를 제공하는 방법 및 시스템
US9304621B1 (en) Communication via pressure input
US20160246378A1 (en) Systems and methods for providing context-sensitive haptic notification frameworks
CN109120981A (zh) 信息列表展示方法、装置及存储介质
JP2016126773A (ja) 視線追跡に基づく触覚効果を生成するシステム及び方法
CN109416562B (zh) 用于虚拟现实的装置、方法和计算机可读介质
KR20150085801A (ko) 사용자에 의해 생성되는 콘텐츠 저작을 위한 시스템 및 방법
KR20150005574A (ko) 수동으로 감지된 시청자 반응에 기초하여 미디어 프로그램의 프리젠팅의 제어
JP2013528855A (ja) 触覚効果を与えるシステム及び方法
WO2013144670A1 (en) Optimizing selection of a media object type in which to present content to a user of a device
KR20160065670A (ko) 컨텐트를 제공하는 방법 및 디바이스
US10386635B2 (en) Electronic device and method for controlling the same
US20240066399A1 (en) Smooth switchover of computer game control

Legal Events

Date Code Title Description
A201 Request for examination
WITB Written withdrawal of application