KR20140051450A - 멀티미디어 클립들을 캡처하기 위한 제스처 사용 - Google Patents

멀티미디어 클립들을 캡처하기 위한 제스처 사용 Download PDF

Info

Publication number
KR20140051450A
KR20140051450A KR1020147007572A KR20147007572A KR20140051450A KR 20140051450 A KR20140051450 A KR 20140051450A KR 1020147007572 A KR1020147007572 A KR 1020147007572A KR 20147007572 A KR20147007572 A KR 20147007572A KR 20140051450 A KR20140051450 A KR 20140051450A
Authority
KR
South Korea
Prior art keywords
clip
medium
rti
mobile device
storing instructions
Prior art date
Application number
KR1020147007572A
Other languages
English (en)
Inventor
웬롱 리
다용 딩
시아오펭 통
양조우 두
펭 왕
Original Assignee
인텔 코오퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코오퍼레이션 filed Critical 인텔 코오퍼레이션
Publication of KR20140051450A publication Critical patent/KR20140051450A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/418—External card to be used in combination with the client device, e.g. for conditional access
    • H04N21/4183—External card to be used in combination with the client device, e.g. for conditional access providing its own processing capabilities, e.g. external module for video decoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/632—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing using a connection between clients on a wide area network, e.g. setting up a peer-to-peer communication via Internet for retrieving video segments from the hard-disk of other client devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Graphics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

제스처 명령에 응답하여, 현재 시청되고 있는 비디오가 텔레비전 송신으로부터 적어도 하나의 디코딩된 프레임을 추출함으로써 식별될 수 있다. 프레임은 이미지 검색을 요청하기 위한 및 검색 결과들을 수신하기 위한 별개의 모바일 디바이스에게 송신될 수 있다. 검색 결과들은 더 많은 정보를 획득하는데 사용될 수 있다. 사용자의 소셜 네트워킹 친구들은 클립에 관한 더 많은 정보를 얻기 위해 또한 연락될 수 있다.

Description

멀티미디어 클립들을 캡처하기 위한 제스처 사용{USING GESTURES TO CAPTURE MULTIMEDIA CLIPS}
본 발명은 일반적으로 브로드캐스트 및 스트리밍 텔레비전, 영화 및 대화형 게임을 포함하여 비디오에 관한 것이다.
텔레비전은 아날로그 또는 디지털 신호들의 무선 주파수 송신들을 이용하여 텔레비전 프로그램들을 브로드캐스팅함으로써 배포될 수 있다. 게다가 텔레비전 프로그램들은 케이블 및 위성 시스템들을 통해 배포될 수 있다. 끝으로, 텔레비전은 스트리밍을 이용하여 인터넷을 통해 배포될 수 있다. 여기서 이용되는 바로는, 용어 "텔레비전 송신(television transmission)"은 텔레비전 배포의 모든 이러한 양상들을 포함한다. 여기서 이용되는 바로는, "텔레비전(television)"은 광고물들을 수반한 또는 이것이 없는 프로그램 콘텐츠의 배포를 의미하고 종래 텔레비전 프로그램들뿐만 아니라 비디오 게임들의 배포도 포함한다.
사용자들이 어떤 프로그램들을 시청하고 있는 지를 결정하기 위한 시스템들이 알려져 있다. 예를 들어, IntoNow 서비스는, 셀 폰 상에서, 시청되고 있는 텔레비전 프로그램들로부터 오디오 신호들을 기록하고, 이런 신호들을 분석하고, 해당 정보를 이용하여 시청자들이 어떤 프로그램들을 시청하고 있는 지를 결정한다. 오디오 분석이 가진 한가지 문제점은 오디오 분석이 주위 잡음으로 인한 열화에 종속된다는 것이다. 물론, 시청 환경에서의 주위 잡음은 흔한 것이고, 따라서 오디오 기반 시스템들은 상당한 제한을 받게 된다.
도 1은 본 발명의 일 실시예의 상위 수준 아키텍처 묘사이다.
도 2는 본 발명의 일 실시예에 따른 셋톱박스의 블록도이다.
도 3은 본 발명의 일 실시예에 따른 멀티미디어 그래버에 대한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 모바일 그래버에 대한 흐름도이다.
도 5는 본 발명의 일 실시예에 따라 이미지 검색을 수행하기 위한 클라우드 기반 시스템에 대한 흐름도이다.
도 6은 일 실시예에 따라 테이블을 유지하기 위한 시퀀스에 대한 흐름도이다.
몇몇 실시예들에 따라, 비디오 프레임 또는 클립(clip), 메타데이터 또는 오디오의 제한된 지속시간을 갖는 전자적 표현과 같은 멀티미디어 클립은 하나 이상의 시청자들에 의해 현재 시청되고 있는 활성 튜닝된 텔레비전 송신으로부터 잡아채어질(grab) 수 있다. 검색용으로 현재 재생되는 멀티미디어 클립을 선택하기 위해 핸드 제스처(hand gesture)가 인식될 수 있다. 이 멀티미디어 클립은 이후 일 실시예에서 모바일 디바이스에게 송신될 수 있다. 모바일 디바이스는 이후 검색을 위해 이 정보를 서버에게 송신할 수 있다. 예를 들면, 이미지 검색은 비디오에서 배우가 누구인지를 결정하는데 궁극적으로 사용될 수 있다. 일단 콘텐츠가 식별되면, 시청자에게 다양한 기타 서비스들을 제공하는 것이 가능하다. 이러한 서비스들은 추가의 집중적 광고 콘텐츠, SNS, 및 프로그램 시청 제안들을 포함하여, 추가 콘텐츠의 제공을 포함할 수 있다.
도 1을 참조하면, 텔레비전 스크린 또는 모니터와 같은 디스플레이 스크린(20)은 프로세서 기반 시스템(14)에 결합될 수 있고, 다음으로 디지털 영화 또는 비디오 게임을 포함하는 텔레비전 송신(12)과 같은 비디오 소스에 결합될 수 있다. 이 소스는 아날로그 또는 디지털 신호들의 무선 주파수 브로드캐스팅, 케이블 배포, 또는 위성 배포를 포함하여, 인터넷을 통해 또는 공중파들을 통해 배포될 수 있거나, 또는 DVD 플레이어와 같은 기억 디바이스로부터 기원할 수 있다. 프로세서 기반 시스템(14)은 비디오 플레이어(예로, 텔레비전 수신기)와는 별개의 독립형 디바이스일 수 있거나, 비디오 플레이어 내에 통합될 수 있다. 이것은, 예를 들어 종래 셋톱박스의 구성요소들을 포함할 수 있고, 몇몇 실시예들에서 수신된 텔레비전 송신들을 디코딩하는 것을 담당할 수 있다.
일 실시예에서, 프로세서 기반 시스템(14)은 수신기(일 실시예에서 시스템(14)의 일부일 수 있음)에 의해 현재 튜닝되는 디코딩된 텔레비전 송신으로부터의 비디오 프레임 또는 클립(즉, 프레임들의 시리즈), 메타데이터 또는 사운드의 전자적 표현을 잡아채는 멀티미디어 그래버(multimedia grabber)(16)를 포함한다. 프로세서 기반 시스템(14)은 잡아채어진 멀티미디어가 외부 제어 디바이스(24)에게 송신되는 것을 허용하는 유선 또는 무선 인터페이스(18)를 또한 포함할 수 있다. 이 송신은, 텔레비전 수신기들 및 셋톱박스들에서 널리 이용 가능한 USB 접속과 같은 유선 접속 상에서, 또는 무선 주파수 신호들을 이용하는 것 및 광 신호들을 이용하는 것을 포함하는 임의의 가용 무선 송신 매체 상에서 이뤄질 수 있다. 메타데이터는 콘텐츠 자체에 대한 메타데이터(예로, 등급 정보, 줄거리, 감독명, 발표 연도)일 수 있다.
일 실시예에서, 비디오 클립들의 디코딩되지 않은 또는 미가공 전자적 표현이 제어 디바이스(24)에게 전송(transfer)될 수 있다. 비디오 클립들은 제어 디바이스(24)에서 국소적으로 또는 예를 들어 서버(30)에서 원격으로 디코딩될 수 있다.
또한 핸드 제스처들과 같은 사용자 제스처 명령들을 검출하기 위해 시청자의 이미지들을 캡처하기 위한 비디오 카메라(17)가 시스템(14) 및/또는 디스플레이(20)에 결합될 수 있다. 제스처 명령은 컴퓨터 입력으로서, 이미지 분석을 통한, 인식된 임의의 움직임이다.
제어 디바이스(24)는, 몇몇 예들만 언급하면, 셀룰러 전화, 랩톱 컴퓨터, 태블릿 컴퓨터, 모바일 인터넷 디바이스, 또는 텔레비전 수신기용의 리모트 컨트롤을 포함하는 모바일 디바이스일 수 있다. 디바이스(24)는 또한 데스크톱 컴퓨터 또는 엔터테인먼트 시스템과 같이 비 이동성일 수 있다. 디바이스(24) 및 시스템(14)은 일 실시예에서 무선 홈 네트워크의 일부일 수 있다. 일반적으로, 디바이스(24)는 자신의 별개의 디스플레이를 가져서 이것이 텔레비젼 디스플레이 스크린과 독립적으로 정보를 디스플레이할 수 있도록 한다. 디바이스(24)가 자신의 디스플레이를 포함하지 않는 실시예들에서, 디스플레이는 예를 들어 PIP 디스플레이에 의해 텔레비전 디스플레이상에 겹쳐질(overlaid) 수 있다.
일 실시예에서, 제어 디바이스(24)는 클라우드(28)와 통신할 수 있다. 디바이스(24)가 셀룰러 전화인 경우에, 예를 들어 이것은 궁극적으로는 인터넷을 통해 전달되는 셀룰러 전화 신호들(26)에 의해 클라우드와 통신할 수 있다. 다른 경우들에서, 디바이스(24)는 인터넷으로의 통신망 접속들과 같은 고정 배선 접속들을 통해 통신할 수 있다. 또 다른 예로서, 디바이스(24)는 텔레비전 전송 매체를 통해 통신할 수 있다. 예를 들어, 케이블 시스템인 경우에, 디바이스(24)는 케이블 시스템을 통하여 케이블 헤드엔드 또는 서버(11)에게 신호들을 제공할 수 있다. 물론, 몇몇 실시예들에서, 이것은 가용 송신 대역폭의 일부를 소모할 수 있다. 몇몇 실시예들에서, 디바이스(24)는 모바일 디바이스가 아닐 수 있고, 심지어 프로세서 기반 시스템(14)의 일부일 수 있다.
도 2을 참조하면, 프로세서 기반 시스템(14)의 일 실시예가 묘사되지만, 많은 다른 아키텍처들이 마찬가지로 이용될 수 있다. 도 2에 묘사된 아키텍처는 인텔사로부터 구득 가능한 CE4100 플랫폼에 대응한다. 이것은 시스템 상호접속(system interconnect)(25)에 결합되는 중앙 처리 유닛(24)을 포함한다. 시스템 상호접속은 NAND 컨트롤러(26), 멀티포맷 하드웨어 디코더(28), 디스플레이 프로세서(30), 그래픽 프로세서(32), 및 비디오 디스플레이 컨트롤러(34)에 결합된다. 디코더(28) 및 프로세서들(30, 32)은 일 실시예에서, 컨트롤러(22)에 결합될 수 있다.
시스템 상호접속은 전송 프로세서(36), 보안 프로세서(38), 및 듀얼 오디오 DSP(digital signal processor; 40)에 결합될 수 있다. DSP(40)는 들어오는 비디오 송신을 디코딩하는 것을 담당할 수 있다. 일반적 입/출력(I/O) 모듈(42)은 예를 들어 WiFi 어댑터(18a)와 같은 무선 어댑터에 결합될 수 있다. 이는 몇몇 실시예들에서 모듈이 무선 제어 디바이스(24)(도 1)에게 신호들을 보내는 것을 허용할 수 있다. 오디오 및 비디오 입/출력 디바이스(44)가 또한 시스템 상호접속(25)에 결합된다. 이는 비디오 출력을 디코딩하는 것을 제공할 수 있고, 몇몇 실시예들에서 비디오 프레임들 또는 클립을 출력하는데 사용될 수 있다.
몇몇 실시예들에서, 프로세서 기반 시스템(14)은 특정 기준들의 만족시에 멀티미디어 클립들을 출력하도록 프로그래밍될 수 있다. 하나의 그러한 기준은 사용자 핸드 제스처의 검출이다. 사용자 핸드 제스처들은 카메라(17)(도 1)에 의해 기록될 수 있고, 디스플레이들(예를 들어, 평평한 손), 사용자 선호들(예를 들어, 엄지 위로) 또는 비선호들(예를 들어, 엄지 밑으로)을 스위칭하기 위한 명령들과 같은 사용자 입력들을 인식하기 위해 비디오 분석을 이용하여 분석될 수 있다. 이 비디오 분석은 시스템(14), 제어 디바이스(24)를 포함하여, 텔레비전에 의해(도 1), 서버(30)(도 1), 헤드엔드(11)(도 1)에서, 또는 텔레비전 및 제어 디바이스(24)(도 1)에서와 같은 이것들의 임의의 조합에 의해 수행될 수 있다. 사용자의 선호 또는 비선호 리스트는 마찬가지로 그런 디바이스들 중 임의의 것에 저장될 수 있다.
도 3을 참조하면, 시퀀스는 프로세서 기반 시스템(14) 내에 구현될 수 있다. 다시금, 시퀀스는 펌웨어, 하드웨어, 및/또는 소프트웨어로 구현될 수 있다. 소프트웨어 또는 펌웨어 실시예들에서, 이것은 비일시적 컴퓨터 판독 가능 매체에 의해 구현될 수 있다. 예를 들어, 시퀀스를 구현하기 위한 명령어들은 시스템(14) 상의 기억 장치(70)(도 1)에 저장될 수 있다.
처음에, 마름모 72에서의 검사는 그래버 특징이 활성화되었는지를 결정한다. 그래버 디바이스(16)(도 1)는 시스템(14)(또는 몇몇 다른 디바이스)이 일 실시예에서 사용자 핸드 제스처를 검출할 때 멀티미디어 클립을 제어 디바이스(24)(도 1)에게 보내기 위해 활성화된다. 핸드 제스처는 비디오 카메라(17)에 의해 기록될 수 있다. 전자적 비디오 분석이 멀티미디어 클립이 캡처되고 제어 디바이스(24)에게 보내져야 한다는 것을 표시하는 핸드 제스처를 검출하는데 사용될 수 있다. 일단 전송되면, 전송된 비디오 클립은 제어 디바이스(24)의 디스플레이 상에 나타날 수 있다. 그러면, 멀티미디어 클립은 잡아채어지고, 블록 78에서 제어 디바이스(24)에게 송신된다.
도 4는 제어 디바이스(24)(도 1)의 실시예를 위한 시퀀스를 보여준다. 시퀀스는 소프트웨어, 하드웨어, 및/또는 펌웨어로 구현될 수 있다. 소프트웨어 또는 펌웨어 기반 실시예들에서, 시퀀스는 광학적, 자성, 또는 반도체 기억장치와 같은 하나 이상의 비일시적 컴퓨터 판독가능 매체에 저장된 컴퓨터 실행 가능 명령어들에 의해 구현될 수 있다. 예를 들어, 소프트웨어 또는 펌웨어 시퀀스는 제어 디바이스(24) 상의 기억 장치(50)(도 1)에 저장될 수 있다.
제어 디바이스(24)가 모바일 디바이스인 실시예가 도 1에 묘사되었지만, 비 모바일 실시예들이 또한 상정된다. 예를 들어, 제어 디바이스(24)는 시스템(14) 내에 통합될 수 있다.
제어 디바이스(24)가, 마름모 56에서 검출된 것처럼, 시스템(14)으로부터 멀티미디어 클립을 수신할 때, 몇몇 실시예들에서, 제어 디바이스(24)는 분석을 위해 클라우드(28)에게 주석된 멀티미디어 클립을 보낼 수 있다(블록 58). 이후 디바이스(24)는 지금 디바이스(24) 상에 디스플레이되는 캡처된 클립(블록 57)에 주석을 달 때에 사용자를 지원하기 위한 사용자 인터페이스를 디스플레이할 수 있다.
몇몇 실시예들에서, 블록 57에 표시된 것처럼, 사용자는 클립의 분석에 집중하기 위한 주석들을 달 수 있다. 주석은 또한 소셜 네트워킹 도구들을 통해 클립을 가진 주석으로서 배포하기 위한 클립에 대한 질문들을 포함할 수 있다. 예를 들어, 텍스트 블록이 제어 디바이스(24) 상의 전송된 비디오 클립을 통해 자동적으로 디스플레이될 수 있다. 사용자는 이후 인터넷 또는 데이터베이스 검색들을 위한 키워드들로서 이용될 수 있는 텍스트를 삽입할 수 있다. 또한, 사용자는 검색 집중을 제공하기 위한 특별히 묘사된 대상들을 선택할 수 있다. 예를 들어, 두 사람이 클립에 나타나면, 그들 중 하나가 표시될 수 있다. 이후, 텍스트 상자에서, 사용자는 "이 여배우가 누구인가?"를 입력할 수 있다. 검색은 표시된 사람을 식별하는 것에 이후 집중된다.
클립에서의 사람은 마우스 커서 또는 터치스크린을 이용하여 선택될 수 있다. 또한, 스크린에서의 사용자의 손가락 지적(finger pointing)에 대한 비디오 분석이 사용자의 집중을 식별하는데 사용될 수 있다. 유사하게, 눈 응시 검출이 동일 방식으로 사용될 수 있다.
물론, 멀티미디어 클립은 다른 실시예들에서 이미지 검색 및/또는 분석을 위해 임의의 서버에게 네트워크를 통해 보내질 수 있다. 멀티미디어 클립은, 또 다른 예로서, 이미지, 텍스트 또는 오디오 분석을 위해 헤드엔드(11)에게 또한 보내질 수 있다.
오디오의 전자적 표현이 캡처되면, 캡처된 오디오는 예를 들어 제어 디바이스(24), 시스템(14), 또는 클라우드(28)에서 텍스트로 변환될 수 있다. 이후 텍스트는 텔레비전 프로그램을 식별하기 위해 검색될 수 있다.
유사하게, 메타데이터는 프로그램을 식별하려는 텍스트 검색에 사용하기 위한 정보를 식별하기 위해 분석될 수 있다. 몇몇 실시예들에서, 오디오, 메타데이터, 비디오 프레임들 또는 클립들 중 하나보다 많은 것이 키워드 인터넷 또는 데이터베이스 검색들을 위한 입력으로서 이용될 수 있다.
전송된 비디오 클립은 또한 소셜 네트워킹 도구들을 이용하여 친구들에게 배포될 수 있다. 이런 친구들은 또한 비디오 클립에 관한 입력, 예를 들어, "이 여배우가 누구인가?"와 같은 주석들로서 클립에 수반되는 질문들에 대한 대답을 제공할 수 있다.
분석 엔진은 이후 시청되고 있는 텔레비전 송신을 식별하기 위해 또는 예로서 장면 또는 배우/여배우 식별 또는 프로그램 식별을 포함하는 클립에 관한 기타 정보를 획득하기 위해 멀티미디어 검색을 수행할 수 있다. 이 검색은 단순한 인터넷 또는 데이터베이스 검색일 수 있거나 또는 더 집중적인 검색일 수 있다.
예를 들어, 블록 58에서의 송신은 현재 시간 또는 비디오 캡처 및 제어 디바이스(24)의 로케이션을 포함할 수 있다. 이 정보는 어떤 프로그램들이 특정 시간들에서 및 특정 로케이션들에서 브로드캐스팅되거나 송신되는지에 관한 정보를 이용하여 검색을 집중시키는데 사용될 수 있다. 예를 들어, 상이한 시간들에서 상이한 로케이션들에서 이용할 수 있는 텔레비전 프로그램들을 상관(correlate)시키는 데이터베이스가 웹 사이트 상에 제공될 수 있고, 이 데이터베이스는 프로그램을 식별하기 위해 캡처된 프레임과 일치하는 이미지를 찾기 위해 이미지 검색될 수 있다.
프로그램의 식별은 시각적 또는 이미지 검색 도구를 이용하여 행해질 수 있다. 이미지 프레임 또는 클립은 이미지 검색 데이터베이스 내의 기존 프레임들 또는 클립들과 매칭된다. 몇몇의 경우에, 매칭들의 시리즈가 검색에서 식별될 수 있고, 그와 같은 경우에 이런 매칭들은 제어 디바이스(24)에게 되돌려 보내질 수 있다. 마름모 60에서의 검사가 검색 결과들이 제어 디바이스(24)에 의해 수신된 것을 결정할 때, 블록 62에 표시된 것처럼, 검색 결과들은 사용자에 대해 디스플레이될 수 있다. 제어 디바이스(24)는 이후 시청되고 있는 정확한 프로그램과 같은 사용자가 원한 정보에 부합하는 검색 결과들 중 하나에 대한 사용자 선택을 수신한다. 이후, 마름모 64에 표시된 것처럼 일단 사용자 선택이 수신되었다면, 선택된 검색 결과는 블록 66에 표시된 것처럼 이후 클라우드에게 포워딩될 수 있다. 이는 텔레비전 프로그램 식별 또는 기타 질문이 시청자를 위한 또는 제3 자를 위한 기타 서비스들을 제공하는데 사용되도록 허용한다.
도 5를 참조하면, 클라우드(28)(도 1) 또는 기타 검색 엔티티의 동작이 묘사된 시퀀스에 의해 표시된다. 시퀀스는 소프트웨어, 펌웨어, 및/또는 하드웨어로 구현될 수 있다. 소프트웨어 및 펌웨어 기반 실시예들에서, 이는 비일시적 컴퓨터 실행 명령어들에 의해 구현될 수 있다. 예를 들어, 컴퓨터 실행 명령어들은 도 1에 도시된, 서버(30)와 결합되는 기억 장치(80)에 저장될 수 있다.
클라우드를 이용한 실시예가 설명되기는 하였지만, 물론 동일 시퀀스가 임의의 적절한 네트워크 상에서 결합된 임의의 서버에 의해, 제어 디바이스(24) 자체에 의해, 프로세서 기반 디바이스(14)에 의해, 또는 다른 실시예들에서 헤드엔드(11)에 의해 구현될 수 있다.
초기에, 도 5의 마름모 82에서의 검사는 멀티미디어 클립이 수신되었는지를 결정한다. 만약 그렇다면, 블록 84에 표시된 것처럼, 멀티미디어가 비디오 프레임 또는 클립인 경우에, 시각적 검색이 수행된다. 오디오 클립인 경우에, 오디오는 텍스트로 변환되고 검색될 수 있다. 멀티미디어 세그먼트가 메타데이터이면, 메타데이터는 검색 가능한 콘텐츠를 위해 파싱(parse)될 수 있다. 이후, 블록 86에서, 검색 결과들은 예를 들어 제어 디바이스(24)에게 되돌려 송신된다. 제어 디바이스(24)는 검색 결과들 중 어느 것이 가장 관련성 있는지에 관한 사용자 입력 또는 선택을 수신할 수 있다. 시스템은 사용자로부터의 선택을 대기하고, 마름모 88에서 결정된 것처럼, 선택이 수신될 때, 시청되고 있는 텔레비전 프로그램에 기초하여 작업이 실행될 수 있다(블록 90).
예를 들어, 작업은 정보를 소셜 네트워킹 목적을 위해 친구들의 미리 선택된 그룹에게 제공하는 것일 수 있다. 예를 들어, 페이스북 상의 사용자의 친구들에게 사용자가 현재 시간에 어떤 프로그램을 시청하고 있는 지를 나타내는 메시지가 자동적으로 보내질 수 있다. 이런 친구들은 이후 예를 들어 제어 디바이스(24)를 이용하여 텔레비전 프로그램에 관해 얘기하기 위해 시청자와 페이스북 상에서 상호 작용할 수 있다.
다른 예들로서, 작업은 시청자들에 관한 인구 통계학적 정보를 분석하고 상이한 시간들에서 상이한 사용자들에 의해 시청되고 있는 프로그램들에 관한 정보를 헤드엔드들 또는 광고자들에게 제공하는 것일 수 있다. 여전히 다른 대안들은 특정 프로그램들을 시청하는 시청자들에게 초점이 맞춰진 콘텐츠를 제공하는 것을 포함한다. 예를 들어, 시청자들은 다음으로 나오는 비슷한 프로그램들에 관한 정보를 제공받을 수 있다. 시청자들은 자신이 현재 시청하고 있는 것에 초점이 맞추어진 광고 정보를 제공받을 수 있다. 예를 들어, 진행중인 텔레비전 프로그램이 특정 자동차를 강조하면, 자동차 제조사는 현재 프로그램에 보여지고 있는 차량에 관한 더 많은 정보를 시청자들에게 제공하기 위해 추가 광고를 제공할 수 있다. 이 정보는, 몇몇 경우에 텔레비전 스크린 상에 겹쳐져서 디스플레이될 수 있지만, 유리하게는 예를 들어 제어 디바이스(24)와 연관된 별개의 디스플레이 상에 디스플레이될 수 있다. 브로드캐스팅이 대화형 게임인 경우에, 게임 진행에 관한 정보가 사용자의 소셜 네트워킹 그룹에게 송신될 수 있다. 유사하게, 광고가 이용될 수 있고 인구 통계 정보가 동일 방식으로 수집될 수 있다.
몇몇 실시예들에서, 복수의 사용자가 동일 텔레비전 프로그램을 시청하고 있을 수 있다. 몇몇 집들에서는, 많은 텔레비전들이 이용 가능할 수 있다. 그러므로, 많은 상이한 사용자들이 동시에 여기 기술된 서비스들을 이용하기 원할 수 있다. 이 목적을 위해, 프로세서 기반 시스템(14)은 제어 디바이스들(24)에 대한 식별자들, 텔레비전 식별자 및 프로그램 정보를 식별하는 테이블을 유지할 수 있다. 이것은, 프로세서 기반 시스템(14)이, 이런 실시예에서, 모든 텔레비전들이 프로세서 기반 시스템(14) 중에서의 자신들의 신호 다운스트림을 수신하는 상이한 텔레비전들에 간단히 적응함에 의해서, 사용자들이 방마다 움직이면서도 계속해서 여기 기술된 서비스들을 수신하도록 허용할 수 있다.
몇몇 실시예들에서, 테이블은 프로세서 기반 시스템(14)에 저장될 수 있거나, 헤드엔드(11)에 업로드될 수 있거나, 또는 아마도 심지어 제어 디바이스(24)를 통하여 클라우드(28)에게 업로드될 수 있다.
그러므로, 도 6을 참조하면, 몇몇 실시예들에서, 시퀀스(92)는 제어 디바이스들(24)(도 1), 텔레비젼 디스플레이 스크린들(20)(도 1), 및 선택되는 채널들을 상관시키는 테이블을 유지하는데 사용될 수 있다. 이후 많은 다른 사용자들은 동일 텔레비전 상에서, 또는 예를 들어 홈 엔터테인먼트 네트워크에서 동일 프로세서 기반 시스템(14)을 통하여 모두 접속된 적어도 둘 이상의 텔레비전들 상에서 시스템을 사용할 수 있다. 시퀀스는 하드웨어, 소프트웨어 및/또는 펌웨어로 구현될 수 있다. 소프트웨어 및 펌웨어 실시예들에서, 시퀀스는 자성, 반도체, 또는 광 기억 장치와 같은, 적어도 하나의 비일시적 컴퓨터 판독 가능 매체 상에 저장된 컴퓨터 판독가능 명령어들을 이용하여 구현될 수 있다. 일 실시예에서, 기억 장치(50)가 사용될 수 있다(도 1).
초기에, 블록 94에 표시된 것처럼, 시스템은 명령들을 시스템(14)에게 제공하는 각각의 제어 디바이스들을 위한 식별자를 수신하고 저장한다. 이후, 블록 96에 표시된 것처럼, 시스템(14)을 통하여 결합된 여러 텔레비전들이 식별되고 로깅(log)된다. 마침내, 제어 디바이스들, 채널들, 및 텔레비전 수신기들을 상관시키는 테이블이 셋업된다(블록 100). 이는 동일한 제어 디바이스에 연결된 다수의 텔레비전이 매끄러운 방식으로 사용되도록 허용하여 시청자들이 방마다 움직이면서 여기 기술된 서비스들을 계속 수신하도록 할 수 있다. 게다가 많은 시청자들이 동일 텔레비전을 볼 수 있고, 각각은 여기 기술된 서비스들을 독립적으로 수신할 수 있다.
본 명세서 전체를 통해 “일 실시예” 또는 “실시예”라는 언급은, 실시예와 연계하여 설명된 특정한 특징, 구조 또는 특성이 본 발명 내에 포함되는 적어도 하나의 구현에 포함된다는 것을 의미한다. 따라서, “일 실시예” 또는 “실시예에서”라는 구문이 나온다고 해서 반드시 동일한 실시예를 가리키는 것은 아니다. 더구나, 특정 특징들, 구조들, 또는 특성들은 예시된 특정 실시예와는 다른 적절한 형태들로 실시될 수 있으며, 모든 그러한 형태들은 본 출원의 청구범위 내에 포함되는 것이다.
본 발명이 제한된 수의 실시예와 관련하여 설명되었지만, 이 분야의 기술자들은 실시예들로부터의 많은 변경들 및 변형들을 알 것이다. 첨부된 청구항들은 본 발명의 진정한 사상 및 범위 내에 속하는 모든 그러한 변경들 및 변형들을 포괄하는 것을 의도한다.

Claims (30)

  1. 사용자 제스처를 검출하는 단계,
    상기 제스처를 검출한 것에 응답하여, 멀티미디어 클립을 자동적으로 캡처하는 단계, 및
    상기 클립에 관한 더 많은 정보를 획득하기 위해 상기 클립을 이용하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    비디오 프레임 또는 클립, 오디오 또는 메타데이터를 나타내는 전자적 클립을 캡처하는 단계
    를 포함하는 방법.
  3. 제1항에 있어서,
    상기 클립을 모바일 디바이스에게 자동적으로 전송하는 단계
    를 포함하는 방법.
  4. 제3항에 있어서,
    상기 클립에 관계된 검색 결과들을 상기 모바일 디바이스에게 제공하는 단계
    를 포함하는 방법.
  5. 제3항에 있어서,
    상기 검색을 수행하기 위해 상기 클립을 원격 서버에게 보내는 단계
    를 포함하는 방법.
  6. 제1항에 있어서,
    복수의 모바일 디바이스를 추적하고, 각각의 상기 디바이스들로부터의 요청들을 수신하고, 각각의 디바이스에게 응답들을 제공하는 단계
    를 포함하는 방법.
  7. 제6항에 있어서,
    모바일 디바이스들, 텔레비전들 및 모바일 디바이스들로부터의 요청들을 상관시키는 테이블을 유지하는 단계
    를 포함하는 방법.
  8. 제1항에 있어서,
    소셜 네트워킹 도구를 이용하여 상기 클립을 자동적으로 배포하는 단계
    를 포함하는 방법.
  9. 제1항에 있어서, 디코딩된 텔레비전 클립을 자동적으로 캡처하는 단계
    를 포함하는 방법.
  10. 제9항에 있어서,
    상기 클립을 모바일 디바이스에게 자동적으로 전송하고, 상기 클립을 상기 모바일 디바이스 상에 디스플레이하고, 사용자가 상기 모바일 디바이스 상에서 상기 클립에 주석을 달 수 있게 하는 단계
    를 포함하는 방법.
  11. 적어도 하나의 비일시적 컴퓨터 판독 가능 매체로서,
    컴퓨터로 하여금,
    사용자 제스처 명령을 검출하고,
    상기 명령의 검출에 응답하여, 텔레비전 프로그램으로부터 전자적 디코딩된 신호를 캡처하고,
    상기 텔레비전 프로그램의 식별을 용이하게 하기 위해 상기 신호를 이용하여 검색을 개시하게 할 수 있는 명령어들을 저장하는 매체.
  12. 제11항에 있어서, 비디오 프레임 또는 클립, 오디오 또는 메타데이터의 형태로 전자적 디코딩된 신호를 캡처하기 위한 명령어들을 더 저장하는 매체.
  13. 제11항에 있어서, 상기 신호를 모바일 디바이스에게 전송하기 위한 명령어들을 더 저장하는 매체.
  14. 제13항에 있어서, 상기 모바일 디바이스에게 검색 결과들을 제공하기 위한 명령어들을 더 저장하는 매체.
  15. 제13항에 있어서, 상기 검색을 수행하기 위해 상기 신호를 원격 서버에게 보내기 위한 명령어들을 더 저장하는 매체.
  16. 제11항에 있어서, 소셜 네트워킹 도구를 이용하여 상기 식별을 배포하기 위한 명령어들을 더 저장하는 매체.
  17. 제11항에 있어서, 상기 클립을 모바일 디바이스 상에 디스플레이하기 위한 명령어들을 더 저장하는 매체.
  18. 제17항에 있어서, 상기 사용자가 상기 클립에 주석을 달 수 있게 하기 위한 명령어들을 더 저장하는 매체.
  19. 제18항에 있어서, 상기 모바일 디바이스 상에서 상기 클립의 디스플레이 위에 놓이는 텍스트 입력 상자를 자동적으로 겹치게(overlay) 하기 위한 명령어들을 더 저장하는 매체.
  20. 제19항에 있어서, 사용자가 상기 클립에 묘사된 항목을 선택할 수 있게 하기 위한 명령어들을 더 저장하는 매체.
  21. 제11항에 있어서, 하나의 디바이스로부터 또 다른 디바이스로 디스플레이를 바꾸라는 제스처 명령을 캡처하기 위한 명령어들을 더 저장하는 매체.
  22. 제11항에 있어서, 제스처 명령들을 현재 디스플레이된 콘텐츠와 연관시키기 위한 명령어들을 더 저장하는 매체.
  23. 제22항에 있어서, 상기 사용자가 현재 디스플레이된 콘텐츠를 좋아하는지를 표시하는 제스처 명령들을 인식하기 위한 명령어들을 더 저장하는 매체.
  24. 핸드 제스처들을 검출하고, 핸드 제스처의 검출에 응답하여 비디오로부터 전자적 신호를 자동적으로 캡처하고, 모바일 디바이스 상에 디스플레이하기 위해 상기 신호를 송신하기 위한 프로세서, 및
    상기 프로세서에 결합된 기억 장치
    를 포함하는 장치.
  25. 제24항에 있어서, 상기 장치는 텔레비전 수신기인 장치.
  26. 제24항에 있어서, 상기 장치는 텔레비전 수신 시스템이 비디오 프레임 또는 클립, 오디오 또는 메타데이터의 형태로 전자적 디코딩된 신호를 캡처하도록 신호하는 장치.
  27. 제24항에 있어서, 상기 장치는 텔레비전 시스템으로부터 상기 신호를 수신하고 데이터베이스에서 또는 인터넷 상에서 키워드 검색을 수행하도록 상기 신호를 원격 디바이스에게 송신하는 장치.
  28. 제27항에 있어서, 상기 장치는 소셜 네트워킹 도구를 통해 상기 클립을 자동적으로 배포하는 장치.
  29. 제28항에 있어서, 상기 장치는 셋톱박스인 장치.
  30. 제24항에 있어서, 상기 장치는 텔레비전 및/또는 모바일 디바이스를 포함하는 장치.
KR1020147007572A 2011-09-12 2011-09-12 멀티미디어 클립들을 캡처하기 위한 제스처 사용 KR20140051450A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2011/001548 WO2013037082A1 (en) 2011-09-12 2011-09-12 Using gestures to capture multimedia clips

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020157036216A Division KR20160003336A (ko) 2011-09-12 2011-09-12 멀티미디어 클립들을 캡처하기 위한 제스처 사용

Publications (1)

Publication Number Publication Date
KR20140051450A true KR20140051450A (ko) 2014-04-30

Family

ID=47882506

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020147007572A KR20140051450A (ko) 2011-09-12 2011-09-12 멀티미디어 클립들을 캡처하기 위한 제스처 사용
KR1020157036216A KR20160003336A (ko) 2011-09-12 2011-09-12 멀티미디어 클립들을 캡처하기 위한 제스처 사용

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020157036216A KR20160003336A (ko) 2011-09-12 2011-09-12 멀티미디어 클립들을 캡처하기 위한 제스처 사용

Country Status (6)

Country Link
US (1) US20130276029A1 (ko)
EP (1) EP2756670A4 (ko)
JP (1) JP5906515B2 (ko)
KR (2) KR20140051450A (ko)
CN (1) CN103828379A (ko)
WO (1) WO2013037082A1 (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10735792B2 (en) 2012-09-19 2020-08-04 Google Llc Using OCR to detect currently playing television programs
US9832413B2 (en) 2012-09-19 2017-11-28 Google Inc. Automated channel detection with one-way control of a channel source
US9866899B2 (en) 2012-09-19 2018-01-09 Google Llc Two way control of a set top box
US9788055B2 (en) * 2012-09-19 2017-10-10 Google Inc. Identification and presentation of internet-accessible content associated with currently playing television programs
US10820293B2 (en) * 2013-10-10 2020-10-27 Aura Home, Inc. Digital picture frame with improved display of community photographs
US20200089702A1 (en) 2013-10-10 2020-03-19 Pushd, Inc. Digital picture frames and methods of photo sharing
US11669562B2 (en) 2013-10-10 2023-06-06 Aura Home, Inc. Method of clustering photos for digital picture frames with split screen display
US10824666B2 (en) * 2013-10-10 2020-11-03 Aura Home, Inc. Automated routing and display of community photographs in digital picture frames
CN103686353B (zh) * 2013-12-05 2017-08-25 惠州Tcl移动通信有限公司 一种云端多媒体信息抓捕的方法以及移动终端
DE102014004675A1 (de) * 2014-03-31 2015-10-01 Audi Ag Gestenbewertungssystem, Verfahren zur Gestenbewertung und Fahrzeug
KR20160044954A (ko) * 2014-10-16 2016-04-26 삼성전자주식회사 정보 제공 방법 및 이를 구현하는 전자 장치
CN106155459B (zh) * 2015-04-01 2019-06-14 北京智谷睿拓技术服务有限公司 交互方法、交互装置及用户设备
DE112016007020T5 (de) * 2016-06-28 2019-03-21 Intel Corporation Video mit eingebetteter geste
US11991469B2 (en) 2020-06-30 2024-05-21 Snap Inc. Skeletal tracking for real-time virtual effects

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6191773B1 (en) 1995-04-28 2001-02-20 Matsushita Electric Industrial Co., Ltd. Interface apparatus
JPH09247564A (ja) * 1996-03-12 1997-09-19 Hitachi Ltd テレビジョン受像機
JP2004213570A (ja) * 2003-01-08 2004-07-29 Sony Corp 情報提供方法
JP2005115607A (ja) * 2003-10-07 2005-04-28 Matsushita Electric Ind Co Ltd 映像検索装置
JP4711928B2 (ja) * 2005-10-27 2011-06-29 日本電信電話株式会社 コミュニケーション支援システムおよびプログラム
JP2008252841A (ja) * 2007-03-30 2008-10-16 Matsushita Electric Ind Co Ltd コンテンツ再生システム、コンテンツ再生装置、サーバおよびトピック情報更新方法
EP2188711A4 (en) * 2007-09-14 2012-08-22 Auditude Inc RESTORING PROGRAM INFORMATION FOR CLIPS FROM ONLINE USED BROADCASTING PROGRAMS
US8977958B2 (en) * 2007-11-20 2015-03-10 Microsoft Technology Licensing, Llc Community-based software application help system
US20090172546A1 (en) * 2007-12-31 2009-07-02 Motorola, Inc. Search-based dynamic voice activation
GB2459705B (en) * 2008-05-01 2010-05-12 Sony Computer Entertainment Inc Media reproducing device, audio visual entertainment system and method
US20090288120A1 (en) * 2008-05-15 2009-11-19 Motorola, Inc. System and Method for Creating Media Bookmarks from Secondary Device
US9246613B2 (en) * 2008-05-20 2016-01-26 Verizon Patent And Licensing Inc. Method and apparatus for providing online social networking for television viewing
US9077857B2 (en) * 2008-09-12 2015-07-07 At&T Intellectual Property I, L.P. Graphical electronic programming guide
CN101437124A (zh) * 2008-12-17 2009-05-20 三星电子（中国）研发中心 面向电视控制的动态手势识别信号处理方法
US8799806B2 (en) * 2008-12-31 2014-08-05 Verizon Patent And Licensing Inc. Tabbed content view on a touch-screen device
WO2010087796A1 (en) 2009-01-30 2010-08-05 Thomson Licensing Method for controlling and requesting information from displaying multimedia
US20100302357A1 (en) * 2009-05-26 2010-12-02 Che-Hao Hsu Gesture-based remote control system
US8428368B2 (en) * 2009-07-31 2013-04-23 Echostar Technologies L.L.C. Systems and methods for hand gesture control of an electronic device
US9207765B2 (en) * 2009-12-31 2015-12-08 Microsoft Technology Licensing, Llc Recognizing interactive media input
FI20105105A0 (fi) * 2010-02-04 2010-02-04 Axel Technologies Medialaitteen käyttöliittymä
US9304592B2 (en) * 2010-11-12 2016-04-05 At&T Intellectual Property I, L.P. Electronic device control based on gestures
CN102012919B (zh) * 2010-11-26 2013-08-07 深圳市同洲电子股份有限公司 电视截屏图像关联搜索方法、装置及数字电视终端
US20120311624A1 (en) * 2011-06-03 2012-12-06 Rawllin International Inc. Generating, editing, and sharing movie quotes

Also Published As

Publication number Publication date
KR20160003336A (ko) 2016-01-08
CN103828379A (zh) 2014-05-28
WO2013037082A1 (en) 2013-03-21
EP2756670A1 (en) 2014-07-23
US20130276029A1 (en) 2013-10-17
JP5906515B2 (ja) 2016-04-20
JP2014530515A (ja) 2014-11-17
EP2756670A4 (en) 2015-05-27
WO2013037082A8 (en) 2014-03-06

Similar Documents

Publication Publication Date Title
JP5906515B2 (ja) ジェスチャーを用いてマルチメディアクリップを取り込むこと
US20240160648A1 (en) Systems and methods for automatic program recommendations based on user interactions
US9800927B2 (en) Smart media selection based on viewer user presence
JP5395813B2 (ja) コンテンツおよびメタデータの消費技法
KR20200015582A (ko) 다수의 음성-동작 사용자 디바이스들에 대한 볼륨-기반 응답을 생성하기 위한 시스템들 및 방법들
KR101764257B1 (ko) 제품들을 식별하기 위해 멀티미디어 검색을 사용하는 방법, 장치 및 컴퓨터 판독가능 매체
US20140282668A1 (en) Viewer behavior tracking using pattern matching and character recognition
TWI527442B (zh) 資訊萃取方法及設備以及其電腦可讀取的媒體
US20220150293A1 (en) Determining Location Within Video Content for Presentation to a User
US9866913B1 (en) Binary TV
KR101615930B1 (ko) 시청자들이 텔레비전에서 무엇을 시청하고 있는지 식별하기 위한 멀티미디어 검색 사용
US10306303B2 (en) Tailored audio content delivery
JP2014530390A (ja) マルチメディア探索を用いて製品を識別すること

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
A107 Divisional application of patent