KR101999389B1 - 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시 - Google Patents

현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시 Download PDF

Info

Publication number
KR101999389B1
KR101999389B1 KR1020157010122A KR20157010122A KR101999389B1 KR 101999389 B1 KR101999389 B1 KR 101999389B1 KR 1020157010122 A KR1020157010122 A KR 1020157010122A KR 20157010122 A KR20157010122 A KR 20157010122A KR 101999389 B1 KR101999389 B1 KR 101999389B1
Authority
KR
South Korea
Prior art keywords
search
client device
implementations
text
program
Prior art date
Application number
KR1020157010122A
Other languages
English (en)
Other versions
KR20150060801A (ko
Inventor
마이클 버릴리
나단 엘. 샌드랜드
Original Assignee
구글 엘엘씨
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US13/623,043 external-priority patent/US10735792B2/en
Application filed by 구글 엘엘씨 filed Critical 구글 엘엘씨
Publication of KR20150060801A publication Critical patent/KR20150060801A/ko
Application granted granted Critical
Publication of KR101999389B1 publication Critical patent/KR101999389B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • G06F17/271—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/205—Parsing
    • G06F40/211—Syntactic parsing, e.g. based on context-free grammar [CFG] or unification grammars
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782—Web browsing, e.g. WebTV
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

다양한 구현들의 특징들은, 상호작용형 텔레비젼 세트의 기술들의 일부로서, 텔레비젼 또는 디스플레이 상에서 동시에 재생되고 있는 특정한 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 실시간으로 식별 및 제시하도록 인에이블되도록 이용된다. 몇몇 구현들에서, 특정한 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 식별하는 프로세스는, 주 셋탑 박스와 보조 셋탑 박스 및/또는 텔레비젼 통합 디바이스 사이의 통신을 감소시켜, 하나 또는 그 초과의 제공자 특정 API들에 대한 필요성을 감소시키도록 인에이블된다. 예를 들어, 본 개시의 일 양상은, 미디어 프로그램으로부터 디스플레이 데이터를 캡쳐함으로써 미디어 프로그램을 식별하는 단계, 및 디스플레이 데이터가 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로 디스플레이 데이터로부터 텍스트를 추출하는 단계의 컴퓨터-구현된 방법이고, 추출된 텍스트는 미디어 프로그램과 연관된다.

Description

현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시{IDENTIFICATION AND PRESENTATION OF INTERNET-ACCESSIBLE CONTENT ASSOCIATED WITH CURRENTLY PLAYING TELEVISION PROGRAMS}
개시된 구현들은, 텔레비젼 프로그램들을 재생하는 것과 연관된 인터넷-액세스가능 컨텐츠를 수집 및 제시하도록 구성되는 시스템들, 방법들 및 디바이스들에 관한 것이다.
상호작용형 텔레비젼 기술들은 일반적으로, 케이블 및 위성 텔레비젼 제공자들에 의해 제공된 텔레비젼 신호들에 인터넷-액세스가능 기능, 컨텐츠 및/또는 서비스들을 오버레이로서 추가하는 것을 가능하게 한다. 예를 들어, 상호작용형 텔레비젼 기술들의 목적들 중 하나는, 소비자가 현재 시청하고 있는 특정한 텔레비젼 프로그램에 매칭되는 인터넷-액세스가능 기능, 컨텐츠 및/또는 서비스들을 개별적인 소비자에게 전달하는 것이다. 이를 위해, 상호작용형 텔레비젼 기술들은 종종, 매칭되는 기능, 컨텐츠 및/또는 서비스들을 전달하기 위해, 각각의 소비자가 무엇을 시청하고 있는지를 결정할 필요가 있다.
이전에 개발된 시스템들 및 방법들에 따르면, 보조 셋탑 박스와 같은 제 2 디바이스가 케이블 또는 위성 텔레비젼 제공자에 의해 제공된 주 셋탑 박스와 함께 동작하도록 구성된다. 소비자가 무엇을 시청하고 있는지를 결정하기 위해, 보조 셋탑 박스는, 소비자에 의해 선택된 현재 재생되고 있는 텔레비젼 프로그램에 대한 정보(예를 들어, 제목, 배우들 또는 배역들의 이름들, 전자 프로그램 안내 정보 등)를 요청하는 문의를 주 셋탑 박스에 전송한다. 이러한 문의를 전송하거나 또는 그렇지 않으면 주 셋탑 박스와 통신하기 위해, 보조 셋탑 박스는 통상적으로, 보조 셋탑 박스가 다양한 케이블 및 위성 텔레비젼 제공자들로부터의 광범위한 주 셋탑 박스들과 페어링되게 하는 하나 또는 그 초과의 제공자-특정 애플리케이션 프로그램 인터페이스들(API들)을 포함한다. 각각의 API의 개발은, 주 셋탑 박스를 소비자들에게 제공하는 각각의 케이블 또는 위성 텔레비젼 제공자의 입력 및 협력을 요구한다. 다양한 제공자들에 의해 API들을 개발하는 것은 비효율적인 경향이 있고, 이러한 기술들을 광범위한 제공자-특정 플랫폼들에 걸쳐 스케일링하는 것을 방해한다.
첨부된 청구항들의 범위 내의 시스템들, 방법들 및 디바이스들의 다양한 구현들 각각은 몇몇 양상들을 갖고, 이들 중 어떠한 것도 본 명세서에 설명된 속성들만을 담당하지는 않는다. 첨부된 청구항들의 범위를 제한함이 없이, 몇몇 중요한 특징들이 설명된다. 본 개시를 고려한 후, 그리고 특히 "상세한 설명"으로 명명된 섹션을 고려한 후, 텔레비젼 또는 디스플레이 상에서 동시에 재생되고 있는 특정한 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 실시간으로 식별 및 제시하는 것을 가능하게 하기 위해 다양한 구현들의 특징들이 어떻게 이용되는지를 이해할 것이다.
본 개시의 일 양상은, 미디어 프로그램을 수신하도록 구성된 전자 디바이스에서 미디어 프로그램과 연관된 컨텐츠를 식별 및 제시하는 컴퓨터-구현된 방법을 포함하고, 전자 디바이스는 프로세서 및 메모리를 포함한다. 몇몇 구현들에서, 방법은, 미디어 프로그램과 연관된 디스플레이 데이터를 캡쳐하는 단계; 디스플레이 데이터로부터 텍스트를 추출하는 단계 ―추출된 텍스트는 미디어 프로그램과 연관됨―; 추출된 텍스트로부터 검색어들을 생성하는 단계; 연관된 컨텐츠를 식별하기 위해, 생성된 검색어들 중 적어도 일부에 기초하여 인터넷 검색을 수행하는 단계; 및 검색의 결과들을 디스플레이하는 단계를 포함한다.
몇몇 구현들에서, 방법은, 디스플레이 데이터가 미디어 프로그램에 대한 정보를 포함하는 텍스트 오버레이를 포함하는지 여부를 결정하기 위해 디스플레이 데이터를 평가하는 단계를 더 포함하고, 텍스트는, 디스플레이 데이터가 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로 디스플레이 데이터로부터 추출된다.
몇몇 구현들에서, 디스플레이 데이터를 캡쳐하는 단계는, 미디어 프로그램을 디스플레이하도록 구성된 디스플레이 디바이스로부터 스크린 캡쳐를 수행하는 단계를 포함한다. 몇몇 구현들에서, 디스플레이 데이터를 캡쳐하는 단계는 전자 디바이스에 의해 디스플레이 디바이스에 송신된 데이터를 디코딩하는 단계를 포함한다.
몇몇 구현들에서, 방법은, 재생되는 브로드캐스트 미디어 프로그램의 식별을 확인하기 위해, 추출된 텍스트를 전자 프로그램 안내 데이터와 비교하는 단계를 더 포함한다.
몇몇 구현들에서, 방법은, 텍스트 오버레이의 디스플레이를 개시하기 위한 코드를 셋탑 박스에 송신하는 단계; 및 디스플레이 데이터를 캡쳐하는 것에 대한 응답으로 텍스트 오버레이의 디스플레이를 종료하기 위한 코드를 셋탑 박스에 송신하는 단계를 더 포함한다. 몇몇 구현들에서, 코드는 적외선 코드이다.
몇몇 구현들에서, 방법은, 셋탑 박스로 향하는 송신을 검출하는 단계; 송신이, 일반적으로 셋탑 박스로 하여금 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함하는지를 결정하는 단계를 더 포함하고, 디스플레이 데이터를 캡쳐하는 것은, 송신이, 일반적으로 셋탑 박스로 하여금 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함한다고 결정하는 것에 대한 응답으로 발생한다. 몇몇 구현들에서, 코드는 적외선 코드이다.
몇몇 구현들에서, 디스플레이 데이터로부터 텍스트를 추출하는 단계는, 캡쳐된 디스플레이 데이터에 광학 문자 인식 프로세스를 적용하는 단계를 포함한다. 몇몇 구현들에서, 검색어들을 생성하는 단계는, 추출된 텍스트에서 명사 구(phrase)들을 식별하는 단계; 및 임계 수의 명사 구들을 검색어들로 선택하는 단계를 포함한다.
몇몇 구현들에서, 명사 구들을 식별하는 단계는, 하나 또는 그 초과의 설명적 구들을 생성하기 위해, 추출된 텍스트로부터 프로그램을 나타내는 데이터를 제거하는 단계; 및 하나 또는 그 초과의 명사 구들을 생성하기 위해, 하나 또는 그 초과의 설명적 구들로부터 적어도 하나의 동사를 제거하는 단계를 포함한다.
몇몇 구현들에서, 명사 구들을 식별하는 단계는, 하나 또는 그 초과의 설명적 구들의 세그먼트들을, 텔레비젼 쇼들, 영화들, 스포츠 이벤트들의 알려진 이름들 및 알려진 적절한 이름들과 비교하는 단계를 포함한다.
몇몇 구현들에서, 방법은, 오타들을 체크하고 정정하는 것; 텔레비젼 쇼들, 영화들, 스포츠 이벤트들의 알려진 이름들 및 알려진 적절한 이름들에 대해 상호 참조하는 것; 및 이전의 검색 데이터에 대해 상호 참조하는 것 중 적어도 하나에 의해, 선택된 임계 수의 검색어들 각각을 개선하는 단계를 더 포함한다.
몇몇 구현들에서, 인터넷 검색을 수행하는 단계는 임계 수의 명사 구들 각각에 대한 각각의 인터넷 검색을 수행하는 단계를 포함하고, 개별적인 각각의 인터넷 검색은 대응하는 검색 결과들을 생성한다.
몇몇 구현들에서, 방법은, 검색 결과들을 스코어링하는 단계; 및 스코어링에 기초하여 검색 결과들 중 적어도 일부를 디스플레이하는 단계를 더 포함한다. 몇몇 구현들에서, 스코어링하는 단계는, 검색 결과들을 카테고리화하는 단계; 위치 데이터, 검색 이력 및 사용자 선호도들 중 적어도 하나에 기초하여 문의 스코어를 할당하는 단계; 명사 구들이 추출된 텍스트에서 등장하는 순서에 기초하여 검색어들로서 선택된 임계 수의 명사 구들 각각에 근접도 스코어를 할당하는 단계; 및 각각의 관련도 스코어를 생성하기 위해, 각각의 문의 스코어에, 대응하는 근접도 스코어를 곱하는 단계를 포함한다. 몇몇 구현들에서, 검색의 결과들은 적어도 각각의 관련도 스코어에 기초하여 디스플레이된다.
본 개시의 다른 양상은, 전자 디바이스들, 컴퓨팅 시스템들 및 비일시적 컴퓨터 저장 매체들을 포함하고, 이들 각각은 앞서 설명된 방법들의 하나 또는 그 초과의 단계들을 실행하기 위한 명령들을 갖는다.
본 개시의 또 다른 양상은 미디어 프로그램을 식별하는 컴퓨터-구현된 방법을 포함한다. 몇몇 구현들에서, 방법은, 미디어 프로그램을 수신하도록 구성되는 전자 디바이스에서, 미디어 프로그램으로부터 디스플레이 데이터를 캡쳐하는 단계; 디스플레이 데이터가, 미디어 프로그램에 대한 정보를 포함하는 텍스트 오버레이를 포함하는지 여부를 결정하기 위해 디스플레이 데이터를 평가하는 단계; 및 디스플레이 데이터가 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로 텍스트 오버레이로부터 텍스트를 추출하는 단계를 포함하고, 추출된 텍스트는 미디어 프로그램과 연관된다.
몇몇 구현들에서, 디스플레이 데이터를 캡쳐하는 단계는 미디어 프로그램을 디스플레이하도록 구성된 디스플레이 디바이스로부터 스크린 캡쳐를 수행하는 단계를 포함한다.
몇몇 구현들에서, 디스플레이 데이터를 캡쳐하는 단계는 전자 디바이스에 의해 디스플레이 디바이스에 송신된 데이터를 디코딩하는 단계를 포함한다.
몇몇 구현들에서, 방법은, 재생되는 브로드캐스트 미디어 프로그램의 식별을 확인하기 위해, 추출된 텍스트를 전자 프로그램 안내 데이터와 비교하는 단계를 더 포함한다.
몇몇 구현들에서, 방법은, 텍스트 오버레이의 디스플레이를 개시하기 위한 코드를 셋탑 박스에 송신하는 단계; 및 디스플레이 데이터를 캡쳐하는 것에 대한 응답으로 텍스트 오버레이의 디스플레이를 종료하기 위한 코드를 셋탑 박스에 송신하는 단계를 더 포함한다.
몇몇 구현들에서, 코드는 적외선 코드이다.
몇몇 구현들에서, 방법은, 셋탑 박스로 향하는 송신을 검출하는 단계; 및 송신이, 일반적으로 셋탑 박스로 하여금 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함하는지를 결정하는 단계를 더 포함한다. 디스플레이 데이터를 캡쳐하는 것은, 송신이, 일반적으로 셋탑 박스로 하여금 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함한다고 결정하는 것에 대한 응답으로 발생한다.
몇몇 구현들에서, 코드는 적외선 코드이다.
본 개시의 또 다른 양상은 전자 디바이스들, 컴퓨팅 시스템들, 및 비일시적 컴퓨터 저장 매체들을 포함하고, 이들 각각은 앞서 설명된 방법들의 하나 또는 그 초과의 단계들을 실행하기 위한 명령들을 갖는다.
본 개시가 더 상세히 이해될 수 있도록, 다양한 구현들의 특징들을 참조하여 더 특정한 설명이 행해질 수 있고, 이들 중 일부는 첨부된 도면들에서 예시된다. 그러나, 첨부된 도면들은 본 개시의 더 관련된 특징들을 단지 예시하는 것이며, 따라서 이러한 설명은 다른 효과적인 특징들을 허용할 수 있기 때문에 제한적인 것으로 고려되지 않는다.
도 1a는, 클라이언트-서버 환경의 구현에 대한 도면이다.
도 1b는, 텔레비젼 상의 예시적인 개략적 스크린 디스플레이를 포함하는 클라이언트-서버 환경의 일부에 대한 도면이다.
도 2는, 보조 셋탑 박스 및/또는 텔레비젼-통합 디바이스로서 동작가능한 클라이언트 디바이스의 예시적인 구현에 대한 도면이다.
도 3은, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법의 구현에 대한 흐름도 표현이다.
도 4는, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법의 구현에 대한 흐름도 표현이다.
도 5는, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법의 구현에 대한 흐름도 표현이다.
도 6은, 클라이언트-서버 환경의 구현에 대한 도면이다.
도 7a는, 몇몇 구현들에 따른 텔레비젼 디스플레이의 예시적인 스크린샷에 대한 개략도이다.
도 7b는, 몇몇 구현들에 따른 텔레비젼 디스플레이 및 제 2 스크린 클라이언트 디바이스(즉, 태블릿)의 예시적인 스크린샷들에 대한 개략도이다.
도 8은, 몇몇 구현들에 따른, 보조 셋탑 박스, 텔레비젼-통합 디바이스 및/또는 제 2 스크린 클라이언트 디바이스 중 적어도 하나로서 동작가능한 클라이언트 디바이스의 예시적인 구현에 대한 도면이다.
도 9는, 현재 재생되고 있는 텔레비젼 프로그램과 연관된 인터넷-액세스가능 컨텐츠를 식별 및 제시하는 방법의 구현에 대한 흐름도 표현이다.
도 10은, 현재 재생되고 있는 텔레비젼 프로그램과 연관된 인터넷-액세스가능 컨텐츠를 식별 및 제시하는 방법의 구현에 대한 흐름도 표현이다.
통상적인 관행에 따르면, 도면들에서 예시되는 다양한 특징들은 실척대로 도시되지 않을 수 있다. 따라서, 다양한 특징부들의 치수들은 명확화를 위해 임의로 확대 또는 감소될 수 있다. 또한, 도면들은, 주어진 시스템, 방법 또는 디바이스의 컴포넌트들 전부를 도시하지는 않을 수 있는데, 이는, 간략화를 위해, 알려진 방법들, 컴포넌트들 및 회로들이 포괄적으로 상세히 설명되지는 않기 때문이다. 마지막으로, 명세서 및 도면들 전반에 걸쳐 동일한 특징부들을 나타내기 위해 동일한 참조 부호들이 이용된다.
본 명세서에서 설명되는 다양한 구현들은, 상호작용형 텔레비젼 세트의 기술들의 일부로서, 텔레비젼 또는 디스플레이 상에서 동시에 재생되고 있는 특정한 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 실시간으로 식별 및 제시하도록 인에이블되는 시스템들, 방법들 및/또는 디바이스들을 포함한다. 몇몇 구현들에서, 연관된 컨텐츠를 식별하는 프로세스는, 주 셋탑 박스와 보조 셋탑 박스 및/또는 텔레비젼-통합 디바이스 사이의 통신을 감소시키도록 인에이블되어, 하나 또는 그 초과의 제공자 특정 API들에 대한 필요성을 감소시킨다. 예를 들어, 본 개시의 일 양상은, 미디어 프로그램과 연관된 디스플레이 데이터를 캡쳐함으로써 미디어 프로그램과 연관된 컨텐츠를 식별 및 제시하는 단계, 디스플레이 데이터가 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로, 디스플레이 데이터로부터 텍스트를 추출하는 단계 ―추출된 텍스트는 미디어 프로그램과 연관됨―, 추출된 텍스트 중 적어도 일부에 기초하여 인터넷 검색을 수행하는 단계, 및 검색 결과들을 디스플레이하는 단계의 방법이다.
첨부된 도면들에 도시되는 예시적인 구현들의 철저한 이해를 제공하기 위해 다수의 세부사항들이 설명된다. 그러나, 본 발명은 이러한 특정 세부사항들없이도 실시될 수 있다. 예시적인 구현들의 더 관련된 양상들을 불필요하게 모호하게 하지 않도록, 주지의 방법들, 절차들, 컴포넌트들 및 회로들은 포괄적으로 상세히 설명되지 않았다.
도 1a는, 클라이언트-서버 환경(100)의 구현에 대한 도면이다. 어떠한 특정 특징들이 예시되지만, 본 개시로부터 당업자들은, 간략화를 위해 그리고 본 명세서에 개시된 구현들의 더 관련된 양상들을 모호하게 하지 않기 위해 다양한 다른 특징들이 예시되지 않았음을 인식할 것이다. 이를 위해, 클라이언트-서버 환경(100)은 셋탑 박스(103), 텔레비젼(TV)(110), 클라이언트 디바이스(102)(예를 들어, 보조 셋탑 박스), 제 2 스크린 클라이언트 디바이스(120)(예를 들어, 랩탑, 태블릿 컴퓨터, 스마트폰 등), 원격 제어 디바이스(112), 통신 네트워크(104), 미디어 서버(130), 브로드캐스트 시스템(140) 및 컨텐츠 제공자(150)를 포함한다. 제 2 스크린 클라이언트 디바이스(120), 클라이언트 디바이스(102), 미디어 서버(130), 브로드캐스트 시스템(140) 및 컨텐츠 제공자(150)는 서로 및/또는 다른 디바이스들 및 시스템들과 정보를 교환하기 위해 통신 네트워크(104)에 접속될 수 있다. 클라이언트-서버 환경(100)은 본 개시의 더 관련된 특징들을 논의하기 위해 제공되는 단지 예이다. 본 개시로부터 당업자들은, 임의의 수의 이러한 디바이스들 및/또는 시스템들이 클라이언트-서버 환경에 제공될 수 있고, 특정한 디바이스들은 완전히 존재하지 않을 수도 있음을 인식할 것이다.
몇몇 구현들에서, 미디어 서버(130)는 단일 서버 시스템으로서 구현되는 한편, 다른 구현들에서는 다수의 서버들의 분산형 시스템으로 구현된다. 오직 설명의 편의를 위해, 미디어 서버(130)는 단일 서버 시스템 상에서 구현되는 것으로 아래에서 설명된다. 유사하게, 몇몇 구현들에서, 브로드캐스트 시스템(140)은 단일 서버 시스템으로 구현되지만, 다른 구현들에서는 다수의 서버들의 분산형 시스템으로 구현된다. 오직 설명의 편의를 위해, 브로드캐스트 시스템(140)은 단일 서버 시스템 상에서 구현되는 것으로 아래에서 설명된다. 유사하게, 몇몇 구현들에서, 컨텐츠 제공자(150)는 단일 서버 시스템으로 구현되지만, 다른 구현들에서는 다수의 서버들의 분산형 시스템으로 구현된다. 오직 설명의 편의를 위해, 컨텐츠 제공자(150)는 단일 서버 시스템 상에서 구현되는 것으로 아래에서 설명된다. 아울러, 브로드캐스트 시스템(140) 및 컨텐츠 제공자(150)의 기능은 단일 서버 시스템으로 결합될 수 있다. 추가적으로 및/또는 대안적으로, 간략화를 위해 오직 하나의 브로드캐스트 시스템 및 오직 하나의 컨텐츠 제공자만이 도 1a에 도시되지만, 본 개시로부터 당업자들은, 클라이언트-서버 환경의 구현에서 각각에 대해 더 많거나 더 적은 것들이 존재할 수 있음을 인식할 것이다.
몇몇 구현들에서, 제 2 스크린 클라이언트 디바이스(120)(예를 들어, 태블릿 컴퓨터 또는 랩탑 등), 셋탑 박스(103), TV(110), 클라이언트 디바이스(102) 및 원격 제어부(112)는 예를 들어, 가정 또는 상업적 세팅 내에서 결합하여 제공된다. 셋탑 박스(103)는 브로드캐스트 시스템(140) 등으로부터의 미디어 컨텐츠를 포함하는 신호들을 수신 및 디코딩하도록 구성된다. 동작시에, 셋탑 박스(103)는 브로드캐스트 시스템(140) 등으로부터 수신되는 신호를 디코딩하고, 오디오 및 비디오 컨텐츠를 디스플레이를 위해 TV(110)에 제공한다. 예시적인 예에서 TV가 이용되었지만, 본 개시로부터 당업자들은, 컴퓨터들, 랩탑 컴퓨터들, 태블릿 컴퓨터들, 스마트-폰들 등을 포함하는 임의의 수의 디스플레이 디바이스들이 비디오 스트림을 디스플레이하고 연관된 오디오 스트림을 재생하기 위해 이용될 수 있음을 인식할 것이다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 셋탑 박스(103) 및 TV(110)의 기능들은 단일 디바이스로 결합된다.
동작시에, 원격 제어부(112)는, 셋탑 박스(103), TV(110) 및 클라이언트 디바이스(102) 중 하나 또는 그 초과의 동작을 제어하기 위해 이용될 수 있다. 하나의 동작 모드에서, 클라이언트 디바이스(102)는, 프로그램 정보 오버레이가 언제 제공되는지(즉, 디스플레이(118) 상에 나타나는지)를 결정하기 위해 TV(110)의 디스플레이(118)를 모니터링한다. 다른 동작 모드에서, 클라이언트 디바이스(102)는 프로그램 정보 오버레이를 디스플레이하도록 셋탑 박스(103)를 프롬프트하기 위해 원격 제어 디바이스(112)의 기능을 에뮬레이트한다. 그리고 또 다른 동작 모드에서, 클라이언트 디바이스(102)는, 셋탑 박스(103)로 향하는 원격 제어부(112)로부터의 IR 송신들을 수신한다. 그 다음, 차례로 클라이언트 디바이스(103)는 통신 네트워크(104)를 통해 미디어 모니터링 서버(130), 브로드캐스트 시스템(140) 및 컨텐츠 제공자(150) 중 임의의 것과 통신할 수 있다. 특정 사용자가 무엇을 시청하고 있는지와 관련된 실시간 프로그램 정보를 클라이언트 디바이스(102)가 어떻게 포착하는지와 관련된 더 특정한 세부사항들은 도 3 내지 도 5를 참조하여 아래에서 설명된다.
몇몇 구현들에서, 셋탑 박스(103)는, 통신 네트워크(104)에 접속할 수 있고, 비디오 스트림들(160)을 수신할 수 있고, 비디오 스트림들(160)로부터 정보를 추출할 수 있고, TV(110)(또는 다른 디스플레이 디바이스)를 이용한 디스플레이를 위해 비디오 스트림들(160)을 제시할 수 있는 임의의 컴퓨터 디바이스이다. 몇몇 구현들에서, 셋탑 박스(103)는 케이블 TV 및/또는 위성 TV, 디지털 비디오 레코더(DVR), 디지털 미디어 수신기, TV 튜너, 컴퓨터, 및/또는 TV 신호들을 출력하는 임의의 다른 디바이스를 위한 수신기로서 구성된다. 몇몇 구현들에서, TV(110)는, 인터넷에 접속가능하지 않고, 오버 디 에어(over the air) 브로드캐스트들 또는 위성 또는 케이블 접속을 통해 수신된 디지털 및/또는 아날로그 TV 컨텐츠를 디스플레이하는 종래의 TV 디스플레이이다.
유사하게, 몇몇 구현들에서, 클라이언트 디바이스(102)는 통신 네트워크(104) 및 TV(110)에 접속할 수 있는 임의의 컴퓨터 디바이스이다. 도 5를 참조하여 아래에서 설명되는 바와 같이, 몇몇 구현들에서, 클라이언트 디바이스(102)는 원격 제어 디바이스(112)로부터 셋탑 박스(103)로 향하는 적외선(IR) 송신들을 수신할 수 있다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 클라이언트 디바이스(102)는 클라이언트 디바이스(120)와 유선 및/또는 무선 통신할 수 있다. 몇몇 구현들에서, 클라이언트 디바이스(102)는 하나 또는 그 초과의 프로세서들(121), 비휘발성 메모리(122), 예를 들어, 하드 디스크 드라이브, 및 로컬 데이터베이스(123)를 포함한다. 몇몇 구현들에서, 메모리(122)는 애플리케이션 명령들(122a) 및 연관된 데이터(122b)를 포함한다. 아래에서 더 상세히 논의되는 바와 같이, 프로세서(121)는 미디어 모니터링 서버(130)로부터 수신된 명령들의 세트에 따라 하나 또는 그 초과의 애플리케이션들을 실행한다. 클라이언트 디바이스(102)는 또한 키보드, 마우스 및/또는 트랙-패드(미도시)와 같은 입력 디바이스들을 가질 수 있다. 몇몇 구현들에서, 클라이언트 디바이스(102)는 터치 스크린 디스플레이, 디지털 카메라 및/또는 기능을 추가하기 위한 임의의 수의 보조 디바이스들을 포함한다.
통상적인 텔레비젼들에서와 같이, TV(110)는 디스플레이(118) 및 스피커들(미도시)을 포함한다. 추가적으로 및/또는 대안적으로, TV(110)는, 예를 들어, 컴퓨터, 태블릿 디바이스, 모바일 전화, 프로젝터 또는 다른 타입의 비디오 디스플레이 시스템과 같은, 사용자에게 비디오 컨텐츠를 제시하기 위한 다른 타입의 디스플레이 디바이스로 교체될 수 있다. 디스플레이 디바이스는 무선 또는 유선 접속을 통해 셋탑 박스(103)에 커플링될 수 있다.
본 명세서에서 사용되는 바와 같이, TV 신호는, TV 채널 또는 프로그램에 대응하는 오디오 및/또는 비디오 성분들을 포함하는, 전기, 광학 또는 다른 타입의 데이터 송신 매체이다. 몇몇 구현들에서, TV 신호는 지상 오버-디-에어 TV 브로드캐스트 신호 또는 케이블-시스템 또는 위성 시스템 상에서 분배/브로드캐스트되는 부호이다. 몇몇 구현들에서, TV 신호는 네트워크 접속을 통한 데이터로서 송신된다. 예를 들어, 셋탑 박스(103)는 인터넷 접속으로부터 비디오 스트림들(160)을 수신할 수 있다. TV 신호의 오디오 및 비디오 성분들은 때때로 오디오 신호들 및 비디오 신호들로 본 명세서에서 지칭된다. 몇몇 구현들에서, TV 신호는, TV(110) 상에서 디스플레이되고 있는 TV 채널에 대응한다.
도 1b는, TV(110) 상의 예시적인 개략적 스크린 디스플레이(즉, 스크린샷)을 포함하는 클라이언트-서버 환경(100)의 일부에 대한 도면이다. 또한, TV(110)는 디스플레이(118)를 포함하고, 디스플레이 상에서 미디어 프로그램의 비디오가 디스플레이된다. 추가로, 비디오가 디스플레이되고 있는 동안, 셋탑 박스(103)는, 채널 및 제목 정보를 포함하는 텍스트 오버레이(119)를 제공할 수 있다. 예를 들어, 텍스트 오버레이(119)는 통상적으로, 미디어 프로그램이 제시되고 있는 채널 뿐만 아니라 미디어 프로그램의 제목을 포함한다. 텍스트 오버레이(119)는 또한 종종 배우들, 배역들 및/또는 사용자 판독가능 텍스트로서 제시되는 미디어 프로그램의 시놉시스에 대한 정보를 포함한다.
도 1a를 추가로 참조하면, 제 2 스크린 클라이언트 디바이스(120)는, 통신 네트워크(104)에 접속할 수 있는 임의의 컴퓨터 디바이스, 예를 들어, 컴퓨터, 랩탑 컴퓨터, 태블릿 디바이스, 넷북, 인터넷 키오스크, 개인 휴대 정보 단말, 모바일 폰, 게이밍 디바이스, 또는 미디어 서버(130)와 통신할 수 있는 임의의 다른 디바이스일 수 있다.
통신 네트워크(104)는, 유선 및 무선 로컬 영역 네트워크(LAN) 및/또는 광역 네트워크(WAN), 예를 들어, 인트라넷, 인터넷의 일부를 포함하는 익스트라넷, 또는 무선 캐리어에 의해 제공되는 무선 네트워크의 임의의 조합일 수 있다. 통신 네트워크(104)가 제 2 스크린 클라이언트 디바이스(120) 및 미디어 모니터링 서버(130) 사이에서 통신 능력을 제공하는 것으로 충분하다. 몇몇 구현들에서, 통신 네트워크(104)는 TCP/IP(Transmission Control Protocol/Internet Protocol)를 이용하여 정보를 전송하기 위해 HTTP(HyperText Transport Protocol)를 이용한다. HTTP는, 클라이언트 디바이스(102)가 통신 네트워크(104)를 통해 이용가능한 다양한 자원들에 액세스하도록 허용한다. 그러나, 본 명세서에서 설명되는 다양한 구현들은 임의의 특정한 프로토콜의 이용에 제한되지 않는다.
몇몇 구현들에서, 미디어 모니터링 서버(130)는, 미디어 모니터링 서버(130)와 통신 네트워크(104) 사이의 통신을 용이하게 하는 프론트 엔드 서버(134)를 포함한다. 프론트 엔드 서버(134)는 클라이언트 디바이스(102)로부터 컨텐츠 정보를 수신한다. 아래에서 더 상세히 설명되는 바와 같이, 몇몇 구현들에서, 컨텐츠 정보는 프로그램 제목, 배우 이름들, 배역 이름들, 플롯 요약들 등과 같은 프로그램 정보를 포함한다. 몇몇 구현들에서, 프론트 엔드 서버(134)는 명령들의 세트를 클라이언트 디바이스(102)에 전송하도록 구성된다. 몇몇 구현들에서, 프론트 엔드 서버(134)는 컨텐츠 파일들, 및/또는 컨텐츠 파일들과 연관된 메타데이터 및/또는 컨텐츠 파일들로의 링크들을 전송하도록 구성된다. 용어 "컨텐츠 파일"은, 비디오 파일, 이미지 파일, 음악 파일, 웹 페이지, 이메일 메시지, SMS 메시지, 컨텐츠 피드(feed), 광고, 쿠폰, 플레이리스트 또는 XML 문서를 포함하는(그러나, 이에 제한되는 것은 아님) 임의의 포맷의 임의의 문서 또는 컨텐츠를 포함한다. 몇몇 구현들에서 프론트 엔드 서버(134)는 하나 또는 그 초과의 비디오 스트림들(160)을 전송 또는 수신하도록 구성된다. 몇몇 구현들에서, 프론트 엔드 서버(134)는 통신 네트워크(104)를 통해 브로드캐스트 시스템(140) 및/또는 컨텐츠 제공자(150)로부터 직접 컨텐츠를 수신하도록 구성된다.
몇몇 구현들에서, 미디어 모니터링 서버(130)는 컨텐츠 데이터베이스(133)를 포함한다. 몇몇 구현들에서, 컨텐츠 데이터베이스(136)는 다양한 미디어 컨텐츠와 연관되는 광고들, 비디오들, 이미지들, 음악, 웹 페이지들, 이메일 메시지들, SMS 메시지들, 컨텐츠 피드들, 광고들, 쿠폰들, 플레이리스트들, XML 문서들 및 시청률 또는 이들의 임의의 조합을 포함한다. 몇몇 구현들에서, 컨텐츠 데이터베이스(136)는 다양한 미디어 컨텐츠와 연관되는 광고들, 비디오들, 이미지들, 음악, 웹 페이지들, 이메일 메시지들, SMS 메시지들, 컨텐츠 피드들, 광고들, 쿠폰들, 플레이리스트들, XML 문서들 및 시청률로의 링크들을 포함한다. 몇몇 구현들에서, 컨텐츠 데이터베이스(133)는 분산형 데이터베이스이다.
몇몇 구현들에서, 브로드캐스트 시스템(140)은 TV 프로그램들과 같은 미디어 컨텐츠를 포함한다. 몇몇 구현들에서, 브로드캐스트 시스템(140)은 또한, TV 프로그램들 중 하나 또는 그 초과와 연관된 메타데이터, 및 애플리케이션 프로그램 인터페이스 명령들을 포함한다. 몇몇 구현들에서, 애플리케이션 프로그램 인터페이스 명령들은, 특정한 TV 프로그램을 연관된 메타데이터와 링크시키기 위해 그리고/또는 TV 프로그램 및 연관된 메타데이터(142)를 외부 데이터 및/또는 서비스들, 예를 들어, 소셜 네트워킹 애플리케이션에 링크시키기 위해, 클라이언트 디바이스에 제공될 수 있는 그리고/또는 클라이언트-서버 모델 등 하에서 브로드캐스트 시스템(140)에 의해 실행될 수 있는 명령들을 포함한다. 유사하게, 몇몇 구현들에서, 컨텐츠 제공자(150)는 추가적으로 및/또는 대안적으로, TV 프로그램들과 같은 미디어 컨텐츠 뿐만 아니라 TV 프로그램들 중 하나 또는 그 초과와 연관된 메타데이터를 포함한다.
도 2는, 도 1a를 참조하여 앞서 논의되고, 보조 셋탑 박스 및/또는 텔레비젼-통합 디바이스로서 동작가능할 수 있는 클라이언트 디바이스(102)의 예시적인 구현에 대한 도면이다. 어떠한 특정 특징들이 예시되지만, 본 개시로부터 당업자들은, 간략화를 위해 그리고 본 명세서에 개시된 구현들의 더 관련된 양상들을 모호하게 하지 않기 위해 다양한 다른 특징들이 예시되지 않았음을 인식할 것이다. 이를 위해, 클라이언트 디바이스(102)는 하나 또는 그 초과의 프로세싱 유닛들(CPU들)(402), 하나 또는 그 초과의 네트워크 또는 다른 통신 인터페이스들(408), 메모리(406), TV 튜너(432), 비디오 I/O(430), 및 이러한 컴포넌트들 및 다양한 다른 컴포넌트들을 상호접속시키기 위한 하나 또는 그 초과의 통신 버스들(404)을 포함한다. 통신 버스들(404)은 선택적으로, 시스템 컴포넌트들 사이의 통신들을 상호접속시키고 제어하는 회로(때때로 칩셋으로 지칭됨)를 포함한다. 클라이언트 디바이스(102)는 또한, 디스플레이 디바이스(413) 및 키보드 및/또는 마우스(또는 다른 포인팅 디바이스)(414) 및/또는 원격 제어부 (등)을 포함하는 사용자 인터페이스(412)를 포함할 수 있다. 메모리(406)는 DRAM, SRAM, DDR RAM 또는 다른 랜덤 액세스 솔리드 스테이트 메모리 디바이스들과 같은 고속 랜덤 액세스 메모리를 포함하고; 하나 또는 그 초과의 자기 디스크 저장 디바이스들, 광 디스크 저장 디바이스들, 플래쉬 메모리 디바이스들 또는 다른 비휘발성 솔리드 스테이트 저장 디바이스들과 같은 비휘발성 메모리를 포함할 수 있다. 메모리(406))는 선택적으로, CPU(들)(402)로부터 원격 위치되는 하나 또는 그 초과의 저장 디바이스들을 포함할 수 있다. 메모리(406)), 또는 대안적으로 메모리(406) 내의 비휘발성 메모리 디바이스(들)는 비일시적 컴퓨터 판독가능 저장 매체를 포함한다. 몇몇 구현들에서, 메모리(406) 또는 메모리(406)의 컴퓨터 판독가능 저장 매체는, 운영 시스템(416), 네트워크 통신 모듈(418), OCR 모듈(426) 및 데이터 모듈(420)을 포함하는, 하기 프로그램들, 모듈들 및 데이터 구조들 또는 이들의 서브세트를 저장한다.
운영 시스템(416)은, 다양한 기본 시스템 서비스들을 조작하고 하드웨어 의존 작업들을 수행하기 위한 절차들을 포함한다.
네트워크 통신 모듈(418)은, 하나 또는 그 초과의 통신 네트워크 인터페이스들(404)(유선 또는 무선) 및 하나 또는 그 초과의 통신 네트워크들, 예를 들어, 인터넷, 다른 광역 네트워크들, 로컬 영역 네트워크들, 대도시 영역 네트워크들 등을 통해 다른 디바이스들과의 통신을 용이하게 한다.
몇몇 구현들에서, OCR 모듈(426)은, 클라이언트 디바이스(102)가 스크린샷들(예를 들어, TV(110)로부터의 이미지들)을 프로세싱하여, 주 셋탑 박스(103)에 의해 제공된 프로그램 정보 오버레이에 포함된 프로그램 정보를 획득하는 것을 가능하게 한다. 이를 위해, OCR 모듈(426)은 OCR 명령들(324) 및 메타데이터(325)를 포함한다.
몇몇 구현들에서, 데이터 모듈(420)은 프로그램 정보의 OCR 데이터(161) 및 로컬 데이터베이스(123)를 포함한다. 몇몇 구현들에서, 프로그램 정보는 브로드캐스트 시스템 및/또는 컨텐츠 제공자로부터 수신된다. 몇몇 구현들에서, OCR 데이터(161)는 텍스트 세그먼트들(161-1), 이미지들(161-2) 및 사용자 ID 정보(161-3)를 포함한다.
상기 식별된 엘리먼트들 각각은 이전에 언급된 메모리 디바이스들 중 하나 또는 그 초과에 저장될 수 있고, 모듈들 또는 프로그램들 각각은, 앞서 설명된 기능을 수행하기 위한 명령들의 세트에 대응한다. 명령들의 세트는, 하나 또는 그 초과의 프로세서들(예를 들어, CPU들(402))에 의해 실행될 수 있다. 앞서 식별된 모듈들 또는 프로그램들(즉, 명령들의 세트들)은 별개의 소프트웨어 프로그램들, 절차들 또는 모듈들로 구현될 필요가 없고, 따라서, 이러한 모듈들의 다양한 서브세트들이 다양한 구현들에서 결합되거나 그렇지 않으면 재배열될 수 있다. 몇몇 구현들에서, 메모리(406)는 앞서 식별된 모듈들 및 데이터 구조들의 서브세트를 저장한다. 게다가, 메모리(406)는 앞서 설명되지 않은 추가적인 모듈들 및 데이터 구조들을 저장할 수 있다.
도 3은, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법(300)의 구현에 대한 흐름도 표현이다. 몇몇 구현들에서, 방법은, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 것을 가능하게 하기 위해, 보조 셋탑 박스 및/또는 텔레비젼 통합 모듈과 같은 디바이스에 의해 수행된다. 예를 들어, 도 1a를 참조하면, 몇몇 구현들에서, 방법(300)은 클라이언트 디바이스(102)(예를 들어, 보조 셋탑 박스)에 의해 수행된다. 앞서 언급된 바와 같이, 사용자가, 예를 들어, 하나 또는 그 초과의 채널 선택 옵션들을 이용함으로써 또는 "INFO" 버튼을 누름으로써 채널을 변경하거나 프로그램 정보를 요청하는 경우, 주 셋탑 박스는, 현재의 채널, 재생되고 있는 프로그램의 제목, 프로그램에 대한 정보와 같은 프로그램 정보를 포함하는 오버레이를 디스플레이한다. 따라서, 방법은, 주 셋탑 박스에 의해 제공되는 디스플레이 출력을 모니터링함으로써 주 셋탑 박스가 오버레이를 제공하는 인스턴스들을 식별하는 단계, 및 원하는 정보에 대한 오버레이를 파싱하는 단계를 포함한다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 방법은, 사용자 상호작용에 의해 프롬프트됨(즉, 사용자가 버튼을 누름)이 없이 언제 채널 식별자들이 디스플레이되는지를 검출하는 단계를 포함한다.
이를 위해, 방법은, 디스플레이되고 있는 것의 이미지를 포착하기 위해, 주 셋탑 박스 등을 통해 소비자에 의해 선택된 텔레비젼 프로그램을 디스플레이하고 있는 디스플레이 디바이스로부터 스크린 또는 디스플레이 데이터 캡쳐를 수행하는 단계(301)를 포함한다. 몇몇 구현들에서, 스크린 캡쳐 데이터는 주 셋탑 박스에 의해 제공된 비디오 신호로부터 획득된다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 스크린 캡쳐 데이터는 셋탑 박스 및/또는 셋탑 박스의 운영 시스템에 포함된 디스플레이(즉, 비디오) 카드로부터 획득된다. 추가적으로 및/또는 대안적으로, 스크린 캡쳐 데이터는, 주 셋탑 박스, 보조 셋탑 박스, TV 및 제 2 스크린 디바이스 중 적어도 하나 상에서 실행되는 TV 앱(app)으로부터 획득된다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 보조 셋탑 박스 (등)은, 텔레비젼 등의 디스플레이의 이미지를 캡쳐하도록 동작가능한 카메라를 포함한다. 방법은, 주 셋탑 박스에 의해 오버레이가 디스플레이되고 있다는 표시자들을 이미지가 포함하는지 여부를 식별하기 위해 이미지를 분석하는 단계(302)를 포함한다. 예를 들어, 몇몇 구현들에서, 표시자들은, 오버레이의 색, 가시적인 경우 오버레이가 통상적으로 커버하는 디스플레이 영역의 백분율, 오버레이와 텍스트의 배열, 프로그램을 디스플레이하고 있을 가능성이 있는 디스플레이의 부분과 오버레이를 디스플레이하고 있을 가능성이 있는 디스플레이의 다른 부분 사이의 콘트라스트를 포함한다.
방법은, 표시자들 중 하나 또는 그 초과가 이미지 분석에 의해 표시된 대로 존재하는지를 결정하는 단계(303)를 포함한다. 특정한 스크린 캡쳐에 대해 어떠한 표시자들도 존재하지 않으면 (303으로부터 "아니로" 경로), 방법은, 다른 스크린샷 등을 캡쳐하기 전에 의사-랜덤 양의 시간 또는 미리 설정된 지연 시간을 대기하는 단계(304)를 포함한다. 한편, 적어도 하나의 표시자가 존재하거나 다른 임계 수의 표시자들이 존재하면 (303으로부터 "예" 경로), 방법은, 디스플레이된 정보를 식별 및 추출하기 위해 이미지에 광학 문자 인식 기술을 적용하는 단계(305)를 포함한다. 제목 및/또는 프로그램 정보를 추출한 다음, 방법은, 정보의 유효성을 보장하기 위해, 추출된 정보를 로컬 및/또는 원격 데이터베이스와 상호 참조하는 단계(306)를 포함한다. 예를 들어, 도 1a를 추가로 참조하면, 클라이언트 디바이스(102)는 추출된 디스플레이 정보의 유효성을 체크하기 위해, 미디어 서버(130)와 통신할 수 있다. 더 구체적으로, 클라이언트 디바이스(102)는 추출된 정보의 전부 또는 일부를 미디어 서버(130)에 송신할 수 있다. 그 다음, 차례로, 미디어 서버(130)는, 추출된 데이터가 정확한 것을 보장하기 위해 그리고/또는 추출된 데이터가 부정확하지만 데이터베이스 정보에 매칭될 수 있는 경우 클라이언트 디바이스(102)에 정정된 정보를 제공하기 위해, 추출된 정보를 컨텐츠 데이터베이스(예를 들어, 도 1의 컨텐츠 데이터베이스(133))에 대해 체크할 수 있다.
도 4는, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법(400)의 구현에 대한 흐름도 표현이다. 몇몇 구현들에서, 방법은, 부분적으로는, 주 셋탑 박스와 연관된 원격 제어 디바이스의 동작을 에뮬레이팅함으로써, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 것을 가능하게 하기 위해, 보조 셋탑 박스 및/또는 텔레비젼 통합 모듈과 같은 디바이스에 의해 수행된다. 이를 위해, 방법은, 프로그램 정보 오버레이의 디스플레이를 개시하기 위해 주 셋탑 박스에 제 1 적외선(IR) 코드 (등)을 송신하는 단계(401)를 포함한다. 예를 들어, 도 1a를 추가로 참조하면, 클라이언트 디바이스(102) 및 클라이언트 디바이스(120) 중 하나가 셋탑 박스(103)에 IR 코드를 송신할 수 있다.
그 다음, 방법은, 프로그램 정보 오버레이를 포함하는 스크린샷(즉, 이미지)을 포착하기 위해 스크린 캡쳐를 수행하는 단계(402)를 포함한다. 스크린샷을 포착한 다음, 방법은, 재생되는 텔레비젼 프로그램 상에서 프로그램 정보 오버레이의 제거를 개시하기 위해, 주 셋탑 박스에 제 2 IR 코드 (등)을 송신하는 단계(403)를 포함한다. 방법은, 오버레이에 제시된 프로그램 정보를 획득하기 위해 이미지 또는 스크린샷을 분석하는 단계(404)를 포함한다. 제목 및/또는 프로그램 정보를 추출한 다음, 방법은, 정보의 유효성을 보장하기 위해, 추출된 정보를 로컬 및/또는 원격 데이터베이스(133)와 상호 참조하는 단계(406)를 포함한다.
도 5는, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 방법(500)의 구현에 대한 흐름도 표현이다. 몇몇 구현들에서, 방법은, 주 셋탑 박스와 연관된 원격 제어 디바이스로부터의 IR 송신을 검출함으로써, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 것을 가능하게 하기 위해, 보조 셋탑 박스 및/또는 텔레비젼 통합 모듈과 같은 디바이스에 의해 수행된다. 예를 들어, 도 1a를 추가로 참조하면, 클라이언트 디바이스(102)는 원격 제어 디바이스(120)로부터 주 셋탑 박스(103)으로 향하는 IR 송신들을 검출할 수 있다.
이를 위해, 방법은, 주 셋탑 박스와 연관된 원격 제어 디바이스로부터 IR 송신 또는 등가물을 검출하는 단계(501)를 포함한다. 그 다음, 방법은, IR 송신에 의해 표현되는 커맨드를 식별하기 위해 정보를 파싱하는 단계(502)를 포함한다. 커맨드를 식별한 다음, 방법은, 식별된 커맨드가, 주 셋탑 박스로 하여금 디스플레이 디바이스에 제공된 비디오 스트림에서 프로그램 정보 오버레이를 제공하게 하는지 여부를 결정하는 단계를 포함한다. 검출된 커맨드가, 주 셋탑 박스로 하여금 프로그램 정보 오버레이를 제공하게 할 가능성이 없으면(503으로부터 "아니오" 경로), 방법은, 다른 IR 송신을 검출하기 위해 다시 순환(circling back)하는 단계를 포함한다. 한편, 검출된 커맨드가, 주 셋탑 박스로 하여금 프로그램 정보 오버레이를 제공하게 할 가능성이 있으면(503으로부터의 "예" 경로), 방법은, 디스플레이되고 있는 것의 이미지를 포착하기 위해, 주 셋탑 박스 등을 통해 소비자에 의해 선택된 텔레비젼 프로그램을 디스플레이하고 있는 디스플레이 디바이스로부터 스크린 또는 디스플레이 데이터 캡쳐를 수행하는 단계(504)를 포함한다. 방법은, 오버레이에 제시된 프로그램 정보를 획득하기 위해 이미지 또는 스크린샷을 분석하는 단계(505)를 포함한다. 그리고, 방법은, 정보의 유효성을 보장하기 위해, 추출된 정보를 로컬 및/또는 원격 데이터베이스와 상호 참조하는 단계(506)를 포함한다.
도 6은, 클라이언트-서버 환경(600)의 구현에 대한 도면이다. 도 6에 도시된 클라이언트-서버 환경(600)은 도 1a에 도시된 클라이언트-서버 환경(100)과 유사하고 그로부터 적응된다. 각각에 대해 공통적인 엘리먼트들은 공통의 참조 부호들을 포함하고, 간략화를 위해 여기서는 오직 도 1a와 도 6 사이의 차이들만이 설명된다. 아울러, 어떠한 특정 특징들이 예시되지만, 본 개시로부터 당업자들은, 간략화를 위해 그리고 본 명세서에 개시된 예시적인 구현들의 더 관련된 양상들을 모호하게 하지 않기 위해 다양한 다른 특징들이 예시되지 않았음을 인식할 것이다.
이를 위해, 도 6을 참조하면, 클라이언트-서버 환경(600)은 추가적으로 검색 서버 시스템(170), 및 다수의 제 3자의 컨텐츠 서버 시스템들(180-1, ..., 180-N)을 포함한다. 몇몇 구현들에서, 검색 서버 시스템(170)은 단일 시스템으로 구현되지만, 다른 구현들에서는 다수의 서버들 및 시스템들의 분산형 시스템으로 구현된다. 오직 설명의 편의를 위해, 검색 서버 시스템(170)은 단일 서버 시스템 상에서 구현되는 것으로 아래에서 설명된다. 유사하게, 몇몇 구현들에서, 제 3자의 컨텐츠 서버 시스템들(180-1,..., 180-N)은 단일 서버 시스템으로 구현되지만, 다른 구현들에서는 제 3자의 컨텐츠 서버 시스템들(180-1,..., 180-N) 각각이 다수의 서버들의 분산형 시스템으로 구현된다. 오직 설명의 편의를 위해, 제 3자의 컨텐츠 서버 시스템들(180-1,..., 180-N) 각각은 각각의 단일 서버 시스템 상에서 구현되는 것으로 아래에서 설명된다.
몇몇 구현들에서, 도 9를 참조하여 아래에서 더 상세히 설명되는 바와 같이, 클라이언트 디바이스(102)(예를 들어, 보조 셋탑 박스, 텔레비젼 통합 디바이스 등)는 추가로, 텔레비젼(110) 상에 제시되는 미디어 프로그램과 연관된 디스플레이 데이터를 캡쳐함으로써 미디어 프로그램과 연관된 인터넷-액세스가능 컨텐츠를 식별 및 제시하도록 구성된다. 몇몇 구현들에서, 클라이언트 디바이스(102)는, 주 셋탑 박스(103)로부터 디스플레이 신호를 수신하고 디스플레이 신호를 텔레비젼 등에 전달하도록 구성된다. 결과적으로, 이러한 구현들에서, 디스플레이 데이터를 캡쳐하는 것은, 주 셋탑 박스(103)에 의해 제공된 디스플레이 신호를 프로세싱하는 것을 포함한다. 그 다음, 클라이언트 디바이스(102)는, 디스플레이 데이터가 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로 캡쳐된 디스플레이 데이터로부터 텍스트를 추출하고, 추출된 텍스트는 미디어 프로그램과 연관된다.
후속적으로, 클라이언트 디바이스(102)는, 검색 서버 시스템(170)에 검색 문의를 제출함으로써, 추출된 텍스트 중 적어도 일부에 기초하여 인터넷 검색을 수행한다. 그 다음, 검색 서버 시스템(170)은, 제 3자의 컨텐츠 서버 시스템들(180-1,..., 180-N) 중 하나 또는 그 초과에 저장된 정보 및/또는 정보에 대한 액세스를 결과들의 세트로서 클라이언트 디바이스(102)에 제공함으로써, 수신된 검색 문의에 대해 응답한다. 클라이언트 디바이스(102)는 텔레비젼(110) 및 클라이언트 디바이스(120)(즉, 태블릿 컴퓨터와 같은 제 2 스크린 디바이스) 중 적어도 하나 상에 검색 결과들 중 적어도 일부를 디스플레이하도록 동작한다.
도 7a는, 몇몇 구현들에 따른, 정보 박스(710)를 디스플레이하도록 동작하고 있는 텔레비젼(110)의 텔레비젼 디스플레이(118)의 예시적인 스크린샷에 대한 개략도이다. 텔레비젼이 도시되지만, 본 개시로부터 당업자들은, 본 명세서에서 개시된 시스템들 및 방법들이 임의의 미디어 제시 디바이스와 결합하여 이용될 수 있음을 인식할 것이다. 동작시에, 도 6 및 도 7a를 참조하면, 몇몇 구현들에서, 클라이언트 디바이스(102)는 주 셋탑 박스(103)에 의해 제공된 디스플레이 신호에 부가하여 디스플레이 명령들 및 디스플레이 데이터(즉, 디스플레이 신호)를 텔레비젼(110)에 제공한다. 디스플레이 명령들은 텔레비젼(110)으로 하여금, 디스플레이 데이터에 의해 제공된 정보 박스(710)를, 스크린(118) 상에 제시되는 재생되는 텔레비젼 프로그램(720)의 적어도 일부를 방해하는 시각적 오버레이로서 디스플레이하게 한다. 주 셋탑 박스(103)에 의해 제공되는 디스플레이 신호는, 재생되는 텔레비젼 프로그램(720)을 제시하기 위한 데이터를 포함한다. 몇몇 구현들에서, 클라이언트 디바이스(102)에 의해 제공된 디스플레이 데이터는, 예를 들어, 정보 박스(710)의 상대적 크기, 형상 및 색을 포함하는, 정보 박스(710)의 광학적 속성들을 포함한다. 몇몇 구현들에서, 디스플레이 데이터는 또한, 앞서 간략하게 설명된 프로세스에 의해 획득된 재생되는 텔레비젼 프로그램(720)과 연관된 검색 결과들을 포함한다. 예를 들어, 도 7a에 도시된 바와 같이, 정보 박스(710)는, 제 1 검색어와 연관된 검색 결과들(710-1) 및 제 1 수의 선택가능한 하이퍼링크들(711-1)의 제 1 표시자를 포함한다. 더 일반적으로, 정보 박스(710)는, N번째 검색어와 연관된 검색 결과들(710-N) 및 제 N번째 수의 선택가능한 하이퍼링크들(711-N)의 제 N 표시자까지를 포함하는 다수의 검색 결과 표시자들을 포함한다. 몇몇 구현들에서, 검색 결과들의 각각의 표시자는, 일반적 인터넷 검색, 연관된 뉴스 항목들에 대한 타겟된 검색, 연관된 이미지들에 대한 타겟된 검색, 연관된 인터넷-액세스가능 미디어 컨텐츠(예를 들어, 비디오들, 음악 등)에 대한 타겟된 검색 및 연관된 소셜 미디어 컨텐츠에 대한 타겟된 검색으로부터의 검색 결과들 중 적어도 하나와 연관된다.
도 7b는, 몇몇 구현들에 따른 텔레비젼 디스플레이(118) 및 제 2 스크린 클라이언트 디바이스(120)의 예시적인 스크린샷들에 대한 개략도이다. 도 7a에 도시된 예와는 반대로, 재생되는 텔레비젼 프로그램(720)과 연관된 검색 결과들을 제공하는 정보 박스(730)가 제 2 스크린 클라이언트 디바이스(120)의 스크린(125) 상에 디스플레이된다. 동작시에, 도 6 및 도 7b 둘 모두를 참조하면, 몇몇 구현들에서, 클라이언트 디바이스(102)는 디스플레이 명령들 및 디스플레이 데이터(즉, 디스플레이 신호)를 제 2 스크린 클라이언트 디바이스(120)에 제공한다. 디스플레이 명령들은 제 2 스크린 클라이언트 디바이스(120)로 하여금, 디스플레이 데이터에 의해 제공된 정보 박스(730)를, 스크린(125)의 적어도 일부를 방해하는 시각적 오버레이로서 디스플레이하게 한다. 몇몇 구현들에서, 디스플레이 데이터는, 예를 들어, 정보 박스(730)의 상대적 크기, 형상 및 색을 포함하는, 정보 박스(730)의 광학적 속성들을 포함한다. 몇몇 구현들에서, 정보 박스(730)는, 다른 애플리케이션(또는 프로그램) 윈도우(750)와 결합되어 제시되고 그리고/또는 디스플레이 스크린의 다른 부분은, 윈도우 등을 포함하지 않는 다른 디스플레이 영역(740)을 포함한다. 몇몇 구현들에서, 디스플레이 데이터는 또한, 앞서 간략하게 설명된 프로세스에 의해 획득된 재생되는 텔레비젼 프로그램(720)과 연관된 검색 결과들을 포함한다. 예를 들어, 도 7b에 도시된 바와 같이, 정보 박스(730)는, 제 1 검색어와 연관된 검색 결과들(730-1) 및 제 1 수의 선택가능한 하이퍼링크들(731-1)의 제 1 표시자를 포함한다. 더 일반적으로, 정보 박스(730)는, N번째 검색어와 연관된 검색 결과들(730-N) 및 제 N번째 수의 선택가능한 하이퍼링크들(731-N)의 제 N 표시자까지를 포함하는 다수의 검색 결과 표시자들을 포함한다. 앞서 언급된 바와 같이, 몇몇 구현들에서, 검색 결과들의 각각의 표시자는, 일반적 인터넷 검색, 연관된 뉴스 항목들에 대한 타겟된 검색, 연관된 이미지들에 대한 타겟된 검색, 연관된 인터넷-액세스가능 미디어 컨텐츠(예를 들어, 비디오들, 음악 등)에 대한 타겟된 검색 및 연관된 소셜 미디어 컨텐츠에 대한 타겟된 검색으로부터의 검색 결과들 중 적어도 하나와 연관된다.
도 8은, 몇몇 구현들에 따른, 보조 셋탑 박스, 텔레비젼-통합 디바이스 및/또는 제 2 스크린 클라이언트 디바이스 중 적어도 하나로서 동작가능한 클라이언트 디바이스(102-1)의 예시적인 구현에 대한 도면이다. 도 8에 도시된 클라이언트 디바이스(102-1)는 도 2에 도시된 클라이언트 디바이스(102)과 유사하고 그로부터 적응된다. 각각에 대해 공통적인 엘리먼트들은 공통의 참조 부호들을 포함하고, 간략화를 위해 여기서는 오직 도 2와 도 8 사이의 차이들만이 설명된다. 아울러, 어떠한 특정 특징들이 예시되지만, 본 개시로부터 당업자들은, 간략화를 위해 그리고 본 명세서에 개시된 예시적인 구현들의 더 관련된 양상들을 모호하게 하지 않기 위해 다양한 다른 특징들이 예시되지 않았음을 인식할 것이다.
이를 위해, 도 8을 참조하면, 몇몇 구현들에서, 클라이언트 디바이스(102-1)의 메모리(406)는 추가적으로, 텍스트 평가 모듈(810), 연관된 컨텐츠 검색 모듈(820) 및 디스플레이 모듈(830)을 포함한다. 추가적으로, 메모리(406)에 포함된 데이터 모듈(420)은, 텍스트 평가 결과들(841), 서버 제공된 연관된 컨텐츠 휴리스틱스(heuristics) 캐시(842), 검색 결과 캐시(843) 및 디스플레이 데이터 캐시(844)를 더 포함한다.
앞서 설명된 바와 같이, 몇몇 구현들에서, OCR 모듈(426)은, 클라이언트 디바이스(102-1)가 스크린샷들(예를 들어, TV(110)로부터의 이미지들)을 프로세싱하여, 주 셋탑 박스(103)에 의해 제공된 프로그램 정보 오버레이에 포함된 프로그램 정보를 획득하는 것을 가능하게 한다. 이를 위해, OCR 모듈(426)은 OCR 명령들(324) 및 메타데이터(325)를 포함한다.
몇몇 구현들에서, 텍스트 평가 모듈(810)은 클라이언트 디바이스(102-1)로 하여금, OCR 모듈(426)에 의해 획득된 프로그램 정보로부터 텔레비젼 프로그램과 관련된 용어들을 식별하게 한다. 이를 위해, 텍스트 평가 모듈(810)은 텍스트 평가 명령들(811) 및 연관된 메타데이터(812)를 포함한다. 텍스트 평가 명령들(811)은 도 10을 참조하여 아래에서 더 상세히 설명된다. 몇몇 구현들에서, 텍스트 평가 명령들(811)의 실행 결과들은, 텍스트 평가 결과들(841)로서 데이터 평가 모듈(420)에 저장되는 데이터를 초래한다. 몇몇 구현들에서, 텍스트 평가 메타데이터(812)와는 별개인 텍스트 평가 결과들(841)은, 사용자에 의해 빈번하게 선택되는 텔레비젼 프로그램들과 연관된 하나 또는 그 초과의 텍스트 스트링들을 포함한다. 몇몇 구현들에서, 도 9를 참조하여 아래에서 설명되는 바와 같이, 텍스트 스트링들은, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842) 및 검색 결과 캐시(843)에 저장되는 데이터 중 적어도 하나를 이용하여 개선된다. 몇몇 구현들에서, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842)는, 하나 또는 그 초과의 텔레비젼 프로그램들과 연관된 검색 서버 시스템(170) 및/또는 미디어 서버(130)에 의해 제공되는 휴리스틱스를 포함한다. 몇몇 구현들에서, 휴리스틱스는, 다수의 다른 사용자들에 의해 그리고/또는 컨텐츠 제공자들에 의해 제출된 이전의 검색들로부터 수집되는 데이터를 포함하고, 사용자가, 텔레비젼 또는 디스플레이 상에서 동시에 재생되는 특정 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 더 효율적으로 발견하게 한다. 몇몇 구현들에서, 검색 결과 캐시(843)는, 클라이언트 디바이스(102-1)로부터 제출된 이전의 검색 문의들로부터의 데이터를 포함한다. 몇몇 구현들에서, 이전의 검색 문의들로부터의 데이터는, 예를 들어, 특정 검색 문의로부터의 검색 결과들에서 제공되는 하이퍼링크들을 따르는 관점에서, 클라이언트 디바이스(102-1)와 연관된 하나 또는 그 초과의 사용자들로부터 어느 문의들이 가장 큰 관심을 받았는지에 기초하여 정렬된다.
몇몇 구현들에서, 연관된 컨텐츠 검색 모듈(820)은 클라이언트 디바이스(102-1)가, 텔레비젼 또는 디스플레이 상에서 동시에 재생되고 있는 특정 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들에 대한 검색들을 수행하게 한다. 검색을 수행하기 위해, 연관된 컨텐츠 검색 모듈(820)은, 텍스트 평가 모듈(810)에 의해 식별된 하나 또는 그 초과의 관련 용어들로부터 하나 또는 그 초과의 검색 문의들을 생성하고, 하나 또는 그 초과의 검색 문의들은 검색 서버 시스템(예를 들어, 검색 서버 시스템(170))에 송신된다. 이를 위해, 연관된 컨텐츠 검색 모듈(820)은 연관된 컨텐츠 검색 명령들(821) 및 대응하는 메타데이터(822)를 포함한다. 몇몇 구현들에서, 도 9를 참조하여 아래에서 설명되는 바와 같이, 하나 또는 그 초과의 검색 문의들은, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842) 및 검색 결과 캐시(843)에 저장된 데이터 중 적어도 하나를 이용하여 개선된다.
몇몇 구현들에서, 디스플레이 모듈(830)은 디스플레이 명령들 및 디스플레이 데이터를 텔레비젼 등에 제공하도록 동작한다. 이를 위해, 디스플레이 모듈(830)은 디스플레이 명령들(831) 및 대응하는 메타데이터(832)를 포함한다. 몇몇 구현들에서, 디스플레이 명령들(831) 및 메타데이터(832)는, 검색 결과들, 사용자 선호도들, 및 디스플레이를 텔레비젼 및 제 2 스크린 디바이스 중 적어도 하나 상에 향하게 하는 명령들을 디스플레이하기 위해 이용되는 정보 박스의 상대적 크기, 형상 및 색을 포함한다. 아울러, 몇몇 구현들에서, 디스플레이 데이터 캐시(844)는 클라이언트 디바이스(102-1)에 의해 빈번하게 다운로드되는 이미지들 및 다른 데이터를 저장하기 위해 이용된다.
도 9는, 현재 재생되고 있는 텔레비젼 프로그램과 연관된 인터넷-액세스가능 컨텐츠를 식별 및 제시하는 방법(900)의 구현에 대한 흐름도 표현이다. 몇몇 구현들에서, 방법(900)은, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 것을 가능하게 하기 위해, 보조 셋탑 박스 및/또는 텔레비젼 통합 모듈과 같은 디바이스에 의해 수행된다. 예를 들어, 도 6 및 도 8을 참조하면, 몇몇 구현들에서, 방법(900)은 클라이언트 디바이스(102-1)(예를 들어, 보조 셋탑 박스)에 의해 수행된다. 간략하게, 방법(900)은, 현재 재생되고 있는 텔레비젼 프로그램과 연관된 컨텐츠 검색에 대한 요청을 수신하는 단계, 프로그램 데이터를 디스플레이하도록 주 셋탑 박스에 시그널링하는 단계, 디스플레이되는 프로그램 데이터로부터 텍스트를 추출하는 단계, 추출된 텍스트 중 적어도 일부에 기초하여 인터넷 검색을 수행하는 단계, 및 검색 결과들을 디스플레이하는 단계를 포함한다.
이를 위해, 방법(900)은 연관된 컨텐츠로부터 요청의 사용자 입력을 나타내는 사용자 입력 데이터를 수신하는 단계(901)를 포함한다. 예를 들어, 도 6을 계속 참조하면, 클라이언트 디바이스(102-1)는 원격 제어부(112) 및/또는 제 2 스크린 디바이스(120)를 동작시키는 사용자로부터 연관된 컨텐츠 검색에 대한 요청을 수신한다. 몇몇 구현들에 따라, 사용자는 제 2 스크린 디바이스(120) 상에서 디스플레이되는 애플리케이션 인터페이스 상의 또는 원격 제어부(112) 상의 "INFO" 버튼 (등)을 선택하거나 누른다. 그 다음, 원격 제어부(112) 또는 제 2 스크린 디바이스(120)는, 사용자 입력을 수신하는 것에 대한 응답으로, 연관된 컨텐츠 검색에 대한 요청을 나타내는 데이터 신호를 클라이언트 디바이스(102-1)에 송신한다.
그 다음, 방법(900)은 프로그램 정보 오버레이의 디스플레이를 개시하기 위해, 주 셋탑 박스에 제 1 적외선(IR) 코드 (등)을 송신하는 단계(902)를 포함한다. 예를 들어, 도 6을 추가로 참조하면, 클라이언트 디바이스들(102-1) 및 클라이언트 디바이스(120) 중 하나는 주 셋탑 박스(103)에 IR 코드를 송신할 수 있다. 그 다음, 방법(900)은 프로그램 정보 오버레이를 포함하는 스크린샷(즉, 이미지 데이터)을 포착하기 위해 스크린 캡쳐를 수행하는 단계(903)를 포함한다. 그 다음, 방법은 선택적으로, 재생되는 텔레비젼 프로그램 상에서 프로그램 정보 오버레이의 제거를 개시하기 위해, 주 셋탑 박스에 제 2 IR 코드 (등)을 송신하는 단계(904)를 포함한다. 몇몇 구현들에서, 제 2 IR 코드 (등)은 송신되지 않고, 주 셋탑 박스가 주 셋탑 박스의 구성에 기초하여 오버레이를 제거하도록 동작될 때까지 오버레이가 온-스크린으로 유지되도록 허용된다. 방법(900)은, 오버레이에 제시된 프로그램 정보 텍스트를 획득하기 위해, 캡쳐된 스크린 샷에 대해 광학 문자 인식을 수행하는 단계(905)를 포함한다. 프로그램 정보 텍스트를 추출한 다음, 방법(900)은, 프로그램 정보 텍스트로부터 유도된 관련 검색어들로 하나 또는 그 초과의 검색 문의들을 생성하기 위해 프로그램 정보 텍스트를 분석하는 단계(906)를 포함한다. 하나 또는 그 초과의 관련 검색 문의들을 초래하는 텍스트 분석 방법의 구현예는 도 10을 참조하여 아래에서 설명된다.
방법(900)은 선택적으로, 검색 휴리스틱스 및/또는 사용자 선호도들을 이용하여 검색 문의들을 개선하는 단계를 포함한다. 예를 들어, 앞서 설명된 바와 같이, 도 6 및 도 8을 추가로 참조하면, 몇몇 구현들에서, 방법(900)은, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842) 및 검색 결과 캐시(843)에 저장된 데이터 중 적어도 일부를 이용하여 하나 또는 그 초과의 검색 문의들을 개선하는 단계를 포함한다. 몇몇 구현들에서, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842)는, 하나 또는 그 초과의 텔레비젼 프로그램들과 연관된 검색 서버 시스템 및/또는 미디어 서버에 의해 제공되는 휴리스틱스를 포함한다. 몇몇 구현들에서, 휴리스틱스는, 다수의 다른 사용자들에 의해 그리고/또는 컨텐츠 제공자들에 의해 제출된 이전의 검색들로부터 수집되는 데이터를 포함하고, 사용자들이, 텔레비젼 또는 디스플레이 상에서 동시에 재생되는 특정 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 더 효율적으로 발견하게 한다. 몇몇 구현들에서, 검색 결과 캐시는, 클라이언트 디바이스로부터 제출된 이전의 검색 문의들로부터의 데이터를 포함한다. 몇몇 구현들에서, 이전의 검색 문의들로부터의 데이터는, 예를 들어, 특정 검색 문의로부터의 검색 결과들에서 제공되는 하이퍼링크들을 따르는 관점에서, 클라이언트 디바이스와 연관된 하나 또는 그 초과의 사용자들로부터 어느 문의들이 가장 큰 관심을 받았는지에 기초하여 정렬된다.
방법(900)은, 텔레비젼 또는 디스플레이 상에서 동시에 재생되는 특정 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들에 대해, 하나 또는 그 초과의 검색 문의들 또는 개선된 하나 또는 그 초과의 검색 문의들로 검색을 수행하는 단계(908)를 포함한다. 더 관련된 검색 결과들이, 디스플레이된 검색 결과들의 최상부에 또는 그 근처에 제시되도록, 검색 결과들이 어떻게 정렬, 스코어링 및 제시될 수 있는지에 관한 예가 도 10을 참조하여 더 특정한 세부사항들로 설명된다. 방법(900)은, 텔레비젼 및/또는 제 2 스크린 클라이언트 디바이스 상에 검색 결과들을 디스플레이하는 단계(909)를 포함한다.
도 10은, 현재 재생되고 있는 텔레비젼 프로그램과 연관된 인터넷-액세스가능 컨텐츠를 식별 및 제시하는 방법(1000)의 구현에 대한 흐름도 표현이다. 상세하게는, 방법(1000)은, 하나 또는 그 초과의 관련 검색 문의들을 초래하는 텍스트 분석의 방법에 대한 예시적인 구현이다. 몇몇 구현들에서, 방법(1000)은, 소비자가 현재 무엇을 시청하고 있는지를 결정하는 것을 가능하게 하기 위해, 보조 셋탑 박스 및/또는 텔레비젼 통합 모듈과 같은 디바이스에 의해 수행된다. 예를 들어, 도 6 및 도 8을 참조하면, 몇몇 구현들에서, 방법(1000)은 클라이언트 디바이스(102-1)(예를 들어, 보조 셋탑 박스)에 의해 수행된다. 간략하게, 방법(1000)은, 현재 재생되는 텔레비젼 프로그램과 연관된 관련 검색 용어들을 식별하기 위해 디스플레이 프로그램 데이터에 포함된 텍스트를 파싱한다.
이를 위해, 방법(1000)은, 캡쳐된 스크린샷에 OCR 프로세스를 적용함으로써 획득되는 프로그램 정보 텍스트에서 하나 또는 그 초과의 설명적 구들을 식별하는 단계(1001)를 포함한다. 몇몇 구현들에서, 하나 또는 그 초과의 설명적 구들은, 프로그램 정보 텍스트로부터 프로그램을 나타내는 데이터를 추출함으로써 식별된다. 몇몇 구현들에서, 프로그램을 나타내는 데이터는, 예를 들어, 쇼 시간, 쇼 지속기간, 방송국 또는 채널 명칭, 삽입된 참조들, 표준 문안 데이터 등과 같은, 텔레비젼 프로그램의 쇼(즉, 방송)과 연관된 정보를 포함한다. 예를 들어, 프로그램 정보 텍스트 "The Price Is Right 10:00 AM - 11:00 AM TV-G Contestants bid for prizes then compete for fabulous showcases"를 이용하면, 방법(1000)의 수행은, 시간 구로서 "10:00 AM - 11:00 AM"을 그리고 공통 구로서 "TV-G"를 추출한다. 그리고, 식별된 설명적 구들은 "The Price Is Right" 및 "Contestants bid for prizes then compete for fabulous showcases"를 포함할 것이다.
방법(1000)은, 식별된 설명적 구들로부터 명사 구들을 식별하는 단계(1002)를 포함한다. 몇몇 구현들에서, 식별된 명사 구들을 식별하는 프로세스는, 식별된 설명적 구들의 세그먼트들을, 텔레비젼 쇼들, 영화들, 스포츠 이벤트들의 알려진 이름들 뿐만 아니라 알려진 배우들 및 여배우들(즉, 알려진 적절한 이름들)과 비교하는 단계를 포함한다. 추가적으로 및/또는 대안적으로, 몇몇 구현들에서, 자연 언어 프로세싱 툴키트(toolkit)가 명사 구들을 식별하기 위해 이용된다. 상기 예를 계속하여, 방법(1000)의 계속된 수행은 "The Price Is Right", "contestants", "prizes" 및 "fabulous showcases"를 명사 구들로서 식별한다.
방법(1000)은, 임계 수의 식별된 명사 구들을 검색을 위한 키워드 구들로서 식별하는 단계(1003)를 포함한다. 예를 들어, 몇몇 구현들에서, 처음 m개(예를 들어, m=5)의 명사 구들이 검색을 위한 키워드 구들로서 식별된다. 선택적으로, 방법(1000)은, 더 정밀하고 그리고/또는 정확한 검색을 가능하게 하기 위해 키워드 구들을 개선하는 단계(1004)를 포함한다. 예를 들어, 몇몇 구현들에서, 키워드 구들은, OCR 프로세스에 의해 도입될 수 있는 오타들에 대해 체크된다. 다른 예에서는, 몇몇 구현들에서, 키워드들은 텔레비젼 쇼들, 영화들, 스포츠 이벤트들 뿐만 아니라 알려진 배우들 및 여배우들의 알려진 이름들에 대해 상호 참조된다. 또 다른 예에서는, 몇몇 구현들에서, 그리고 도 6 및 도 8을 참조하면, 키워드 구들은 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842) 및 검색 결과 캐시(843)에 저장된 데이터 중 적어도 하나에 대해 상호 참조된다. 몇몇 구현들에서, 서버 제공된 연관된 컨텐츠 휴리스틱스 캐시(842)는, 하나 또는 그 초과의 텔레비젼 프로그램들과 연관된 검색 서버 시스템 및/또는 미디어 서버에 의해 제공되는 휴리스틱스를 포함한다. 몇몇 구현들에서, 휴리스틱스는, 다수의 다른 사용자들에 의해 그리고/또는 컨텐츠 제공자들에 의해 제출된 이전의 검색들로부터 수집되는 데이터를 포함하고, 사용자들이, 텔레비젼 또는 디스플레이 상에서 동시에 재생되는 특정 텔레비젼 프로그램과 연관된 인터넷-액세스가능 및/또는 인터넷-기반 기능, 컨텐츠 및/또는 서비스들을 더 효율적으로 발견하게 한다. 몇몇 구현들에서, 검색 결과 캐시는, 클라이언트 디바이스로부터 제출된 이전의 검색 문의들로부터의 데이터를 포함한다. 몇몇 구현들에서, 이전의 검색 문의들로부터의 데이터는, 예를 들어, 특정 검색 문의로부터의 검색 결과들에서 제공되는 하이퍼링크들을 따르는 관점에서, 클라이언트 디바이스와 연관된 하나 또는 그 초과의 사용자들로부터 어느 문의들이 가장 큰 관심을 받았는지에 기초하여 정렬된다.
방법(1000)은, 각각에 대한 검색 결과들을 획득하기 위해, 개선된 키워드 어구들을 이용하여 인터넷 검색을 수행하는 단계(1005)를 포함한다. 방법(1000)은, 각각의 키워드 구에 대한 검색 결과들을 카테고리화하는 단계(1006)를 포함한다. 예를 들어, 몇몇 구현들에서, 각각의 키워드 구에 대한 검색 결과들은, 특정 검색 결과에 따라 웹 페이지, 뉴스 스토리, 이미지 및/또는 소셜 미디어 서비스 링크로 카테고리화된다. 후속적으로, 방법(1000)은, 각각의 카테고리 및/또는 키워드 구에 대한 최상위 X 검색 결과들에 문의 랭크 또는 스코어를 할당하는 단계(1007)를 포함한다. 몇몇 구현들에서, 문의 랭크 또는 스코어는 사용자 위치 데이터, 검색 이력 및 선호도들 중 적어도 하나를 통합한다. 그 다음, 방법(1000)은, 키워드 구들이 프로그램 정보 텍스트에서 등장하는 순서에 기초하여 각각의 키워드 구에 근접도 스코어를 할당하는 단계(1008)를 포함한다. 그 다음, 방법(1000)은, 특정 키워드 스코어와 연관된 각각의 검색 결과에 대한 관련도 스코어를 생성하기 위해, 각각의 문의 스코어에, 대응하는 근접도 스코어를 곱하는 단계(1009)를 포함한다. 방법(1000)은, 적어도 관련도 스코어들에 기초하여 검색 결과들을 정렬하고, 적어도 관련도 스코어들에 기초하여 검색 결과들을 디스플레이하는 단계(1010)를 포함한다. 몇몇 구현들에서, 검색 결과들은 카테고리들 및 관련도 스코어들의 결합에 기초하여 제시된다. 몇몇 구현들에서, 검색 결과들은 키워드 구들 및 관련도 스코어들의 결합에 기초하여 제시된다. 몇몇 구현들에서, 검색 결과들은 키워드 구들, 카테고리들 및 관련도 스코어들의 결합에 기초하여 제시된다.
다양한 엘리먼트들을 설명하기 위해 용어들 "제 1", "제 2" 등이 본 명세서에서 이용될 수 있지만, 이러한 엘리먼트들은 이러한 용어들로 제한되지 않아야 함을 또한 이해할 것이다. 이러한 용어들은 하나의 엘리먼트를 다른 엘리먼트로부터 구별하기 위해서만 이용된다. 예를 들어, 제 1 접촉은 제 2 접촉으로 지칭될 수 있고, 유사하게 제 2 접촉은 제 1 접촉으로 지칭될 수 있는데, 이것은, "제 1 접촉"의 모든 발생들이 일관되게 재명명되고 제 2 접촉의 모든 발생들이 일관되게 재명명되는 한, 설명의 의미를 변경한다. 제 1 접촉 및 제 2 접촉은 모두 접촉들이지만, 이들은 동일한 접촉이 아니다.
본 명세서에서 이용되는 용어는 오직 특정한 구현들을 설명하기 위한 목적이고, 청구항들의 제한으로 의도되지 않는다. 구현들의 설명 및 첨부된 청구항들에서 이용되는 바와 같이, 단수형 형태들은, 문맥에서 명시적으로 달리 표시하지 않으면 복수형 형태들을 또한 포함하는 것으로 의도된다. 본 명세서에서 이용되는 용어 "및/또는"은 연관된 나열된 항목들 중 하나 또는 그 초과의 임의의 그리고 모든 가능한 조합들을 지칭하고 포함함이 또한 이해될 것이다. 본 명세서에서 사용되는 경우, 용어들 "포함하다" 및/또는 "포함하는"은, 언급된 특징들, 정수들, 단계들, 동작들, 엘리먼트들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 또는 그 초과의 다른 특징들, 정수들, 단계들, 동작들, 엘리먼트들, 컴포넌트들, 및/또는 그들의 그룹들의 존재 또는 부가를 배제하지 않음이 추가로 이해될 것이다.
본 명세서에서 이용되는 경우, 용어 "만약(if)"은, 맥락에 따라, 언급된 선행 조건이 참(true)인 "경우(when)" 또는 "때(upon)" 또는 "결정에 대한 응답으로" 또는 "결정에 따라" 또는 "검출에 대한 응답으로"를 의미하도록 해석될 수도 있다. 유사하게, 어구 "[언급된 선행 조건이 참인 것이] 결정되면" 또는 "만약 [언급된 선행 조건이 참]이면" 또는 "[언급된 선행 조건이 참인] 경우"는, 맥락에 따라, 언급된 선행 조건이 참인 "것으로 결정한 때" 또는 "것을 결정하는 것에 대한 응답으로" 또는 "결정에 따라" 또는 "것을 검출할 때" 또는 "것을 검출하는 것에 대한 응답으로"를 의미하도록 해석될 수 있다.
설명의 목적으로, 전술된 설명은 특정한 구현들을 참조하여 설명되었다. 그러나, 상기 예시적인 논의들은, 총망라하는 것, 또는 구현들을 개시된 정확한 형태들로 제한하는 것으로 의도되지 않는다. 상기 교시들의 관점에서 많은 변형들 및 변화들이 가능하다. 구현들은, 본 발명의 원리들 및 본 발명의 실시 애플리케이션들을 최상으로 설명하기 위해 선택 및 설명되었으며, 그에 따라, 고려되는 특정한 이용에 적합하도록 다양한 변형들로 본 발명 및 다양한 구현들을 당업자들이 최상으로 활용할 수 있게 한다.

Claims (28)

  1. 컴퓨터-구현된 방법으로서,
    프로세서 및 메모리를 포함하는 전자 디바이스에서, 자동으로 그리고 전자 디바이스에서 사용자 상호작용없이,
    제 1 클라이언트 디바이스 상에 디스플레이하기 위해, 상기 제 1 클라이언트 디바이스로 미디어 프로그램을 스트리밍하는 단계;
    상기 제 1 클라이언트 디바이스 상에 디스플레이되는 상기 미디어 프로그램과 연관된 컨텐츠 검색 요청을 수신하는 단계 ― 상기 컨텐츠 검색 요청은 상기 제 1 클라이언트 디바이스에 통신적으로 커플링되는 제 2 클라이언트 디바이스로부터 수신됨 ―;
    상기 제 1 클라이언트 디바이스 상에 디스플레이되는 상기 미디어 프로그램과 연관된 스크린 디스플레이 데이터를 캡쳐함으로써 상기 제 1 클라이언트 디바이스 상에 디스플레이되고 있는 것의 이미지를 획득하는 단계;
    상기 컨텐츠 검색 요청에 대한 응답으로,
    상기 제 1 클라이언트 디바이스 상에 디스플레이되고 있는 것의 이미지를 획득하는 단계 이후:
    상기 미디어 프로그램에 대한 정보를 포함하는 프로그램 정보 오버레이의 하나 또는 그 초과의 미리 정의된 표시자들에 대해 상기 획득된 이미지를 분석하는 단계 ― 상기 프로그램 정보 오버레이는 상기 미디어 프로그램과 상이함 ―;
    분석에 대한 응답으로, 상기 하나 또는 그 초과의 미리 정의된 표시자들이 상기 획득된 이미지 내에 존재하는지 여부를 결정하는 단계; 및
    상기 획득된 이미지가 상기 하나 또는 그 초과의 미리 정의된 표시자들을 포함한다고 결정하는 것에 대한 응답으로, 상기 획득된 이미지 내의 상기 프로그램 정보 오버레이 상에 디스플레이되는 텍스트를 추출하는 단계 ― 상기 추출된 텍스트는 상기 미디어 프로그램과 연관됨 ―;
    상기 추출된 텍스트로부터 검색어들을 생성하는 단계;
    상기 미디어 프로그램과 연관된 컨텐츠를 식별하기 위해, 생성된 검색어들 중 적어도 일부에 기초하여 인터넷 검색을 수행하는 단계; 및
    상기 제 1 클라이언트 디바이스 상에서 상기 미디어 프로그램이 디스플레이되는 경우, 상기 제 2 클라이언트 디바이스 상에서의 동시의 디스플레이를 위해 상기 제 2 클라이언트 디바이스에 상기 인터넷 검색의 결과들을 송신하는 단계
    를 포함하는, 컴퓨터-구현된 방법.
  2. 제 1 항에 있어서,
    디스플레이 데이터가 상기 미디어 프로그램에 대한 정보를 포함하는 텍스트 오버레이를 포함하는지 여부를 결정하기 위해 상기 디스플레이 데이터를 평가하는 단계를 더 포함하고, 텍스트는, 상기 디스플레이 데이터가 상기 텍스트 오버레이를 포함한다고 결정하는 것에 대한 응답으로 상기 디스플레이 데이터로부터 추출되는, 컴퓨터-구현된 방법.
  3. 제 1 항에 있어서,
    상기 디스플레이 데이터를 캡쳐하는 것은, 상기 미디어 프로그램을 디스플레이하도록 구성되는 디스플레이 디바이스로부터 스크린 캡쳐를 수행하는 것을 포함하는, 컴퓨터-구현된 방법.
  4. 제 1 항에 있어서,
    상기 디스플레이 데이터를 캡쳐하는 것은, 상기 전자 디바이스에 의해 디스플레이 디바이스에 스트리밍되는 미디어 프로그램 데이터를 디코딩하는 것을 포함하는, 컴퓨터-구현된 방법.
  5. 제 1 항에 있어서,
    재생되는 브로드캐스트 미디어 프로그램의 식별을 확인하기 위해, 상기 추출된 텍스트를 전자 프로그램 안내 데이터와 비교하는 단계를 더 포함하는, 컴퓨터-구현된 방법.
  6. 제 1 항에 있어서,
    텍스트 오버레이의 디스플레이를 개시하기 위한 코드를 셋탑 박스에 송신하는 단계; 및
    상기 디스플레이 데이터를 캡쳐하는 것에 대한 응답으로 상기 텍스트 오버레이의 디스플레이를 종료하기 위한 코드를 상기 셋탑 박스에 송신하는 단계를 더 포함하는, 컴퓨터-구현된 방법.
  7. 제 6 항에 있어서,
    상기 코드는 적외선 코드인, 컴퓨터-구현된 방법.
  8. 제 1 항에 있어서,
    셋탑 박스로 향하는 송신을 검출하는 단계;
    상기 송신이, 일반적으로 상기 셋탑 박스로 하여금 상기 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함하는지를 결정하는 단계를 더 포함하고,
    상기 디스플레이 데이터를 캡쳐하는 것은, 상기 송신이, 일반적으로 상기 셋탑 박스로 하여금 상기 디스플레이 데이터에서 텍스트 오버레이를 제공하게 하는 코드를 포함한다고 결정하는 것에 대한 응답으로 발생하는, 컴퓨터-구현된 방법.
  9. 제 8 항에 있어서,
    상기 코드는 적외선 코드인, 컴퓨터-구현된 방법.
  10. 제 1 항에 있어서,
    상기 디스플레이 데이터로부터 텍스트를 추출하는 것은, 캡쳐된 디스플레이 데이터에 광학 문자 인식 프로세스를 적용하는 것을 포함하는, 컴퓨터-구현된 방법.
  11. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
    상기 검색어들을 생성하는 단계는, 추출된 텍스트에서 명사 구(phrase)들을 식별하는 단계; 및
    임계 수의 상기 명사 구들을 검색어들로 선택하는 단계를 포함하는, 컴퓨터-구현된 방법.
  12. 제 11 항에 있어서,
    상기 명사 구들을 식별하는 단계는,
    하나 또는 그 초과의 설명적 구들을 생성하기 위해, 상기 추출된 텍스트로부터 프로그램을 나타내는 데이터를 제거하는 단계; 및
    상기 하나 또는 그 초과의 명사 구들을 생성하기 위해, 상기 하나 또는 그 초과의 설명적 구들로부터 적어도 하나의 동사를 제거하는 단계를 포함하는, 컴퓨터-구현된 방법.
  13. 제 12 항에 있어서,
    상기 명사 구들을 식별하는 단계는, 상기 하나 또는 그 초과의 설명적 구들의 세그먼트들을, 텔레비젼 쇼들, 영화들, 스포츠 이벤트들, 배우들 및 배역(character)들의 알려진 이름들과 비교하는 단계를 포함하는, 컴퓨터-구현된 방법.
  14. 제 11 항에 있어서,
    오타들을 체크하고 정정하는 것;
    텔레비젼 쇼들, 영화들, 스포츠 이벤트들, 배우들 및 배역들의 알려진 이름들에 대해 상호 참조하는 것; 및
    이전의 검색 데이터에 대해 상호 참조하는 것
    중 적어도 하나에 의해, 선택된 임계 수의 검색어들 각각을 개선하는 단계를 더 포함하는, 컴퓨터-구현된 방법.
  15. 제 11 항에 있어서,
    상기 인터넷 검색을 수행하는 단계는 상기 임계 수의 명사 구들 각각에 대한 각각의 인터넷 검색을 수행하는 단계를 포함하고, 개별적인 각각의 인터넷 검색은 대응하는 검색 결과들을 생성하는, 컴퓨터-구현된 방법.
  16. 제 15 항에 있어서,
    상기 검색 결과들을 스코어링하는 단계; 및
    스코어링에 기초하여 상기 검색 결과들 중 적어도 일부를 디스플레이하는 단계를 더 포함하는, 컴퓨터-구현된 방법.
  17. 제 16 항에 있어서,
    상기 스코어링하는 단계는,
    상기 검색 결과들을 카테고리화하는 단계;
    위치 데이터, 검색 이력 및 사용자 선호도들 중 적어도 하나에 기초하여 문의(query) 스코어를 할당하는 단계;
    상기 명사 구들이 상기 추출된 텍스트에서 등장하는 순서에 기초하여 검색어들로서 선택된 상기 임계 수의 명사 구들 각각에 근접도 스코어를 할당하는 단계; 및
    각각의 관련도 스코어를 생성하기 위해, 각각의 문의 스코어에, 대응하는 근접도 스코어를 곱하는 단계를 포함하는, 컴퓨터-구현된 방법.
  18. 제 17 항에 있어서,
    상기 검색의 결과들은 적어도 상기 각각의 관련도 스코어들에 기초하여 디스플레이되는, 컴퓨터-구현된 방법.
  19. 하나 또는 그 초과의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서,
    상기 하나 또는 그 초과의 프로그램들은 명령들을 포함하고, 상기 명령들은 컴퓨팅 디바이스에 의해 실행되는 경우 상기 디바이스로 하여금, 자동으로 그리고 상기 컴퓨팅 디바이스에서 사용자 상호작용없이,
    제 1 클라이언트 디바이스 상에 디스플레이하기 위해, 상기 제 1 클라이언트 디바이스로 미디어 프로그램을 스트리밍하게 하고;
    제 1 클라이언트 디바이스 상에 디스플레이되는 미디어 프로그램과 연관된 컨텐츠 검색 요청을 수신하게 하고 ― 상기 컨텐츠 검색 요청은 상기 제 1 클라이언트 디바이스에 통신적으로 커플링되는 제 2 클라이언트 디바이스로부터 수신됨 ―;
    상기 미디어 프로그램과 연관되고 셋탑 박스에 의해 제공되는 스크린 디스플레이 데이터를 캡쳐함으로써 상기 제 1 클라이언트 디바이스 상에 디스플레이되고 있는 것의 이미지를 획득하게 하고;
    상기 컨텐츠 검색 요청에 대한 응답으로:
    상기 제 1 클라이언트 디바이스 상에 디스플레이되고 있는 것의 이미지를 획득하는 것 이후:
    상기 미디어 프로그램에 대한 정보를 포함하는 프로그램 정보 오버레이의 하나 또는 그 초과의 미리 정의된 표시자들에 대해 상기 획득된 이미지를 분석하게 하고 ― 상기 프로그램 정보 오버레이는 상기 미디어 프로그램과 상이함 ―;
    분석에 대한 응답으로, 상기 하나 또는 그 초과의 미리 정의된 표시자들이 상기 획득된 이미지 내에 존재하는지 여부를 결정하게 하고; 그리고
    상기 획득된 이미지가 상기 하나 또는 그 초과의 미리 정의된 표시자들을 포함한다고 결정하는 것에 대한 응답으로, 상기 획득된 이미지 내의 상기 프로그램 정보 오버레이 상에 디스플레이되는 텍스트를 추출하게 하고 ― 상기 추출된 텍스트는 상기 미디어 프로그램과 연관됨 ―;
    상기 추출된 텍스트로부터 검색어들을 생성하게 하고;
    상기 미디어 프로그램과 연관된 컨텐츠를 식별하기 위해, 생성된 검색어들 중 적어도 일부에 기초하여 인터넷 검색을 수행하게 하고; 그리고
    상기 제 1 클라이언트 디바이스 상에서 상기 미디어 프로그램이 디스플레이되는 경우, 상기 제 2 클라이언트 디바이스 상에서의 동시 디스플레이를 위해 상기 제 2 클라이언트 디바이스에 상기 인터넷 검색의 결과들을 송신하게 하는, 비일시적 컴퓨터 판독가능 저장 매체.
  20. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
    상기 인터넷 검색은, 상기 전자 디바이스가, 복수의 사용자들 및 컨텐츠 제공자들의 이전의 검색들의 휴리스틱(heuristic) 데이터에 따라, 하나 또는 그 초과의 제 3자의 컨텐츠 서버들 상에 저장된 정보를 제공하도록 구성되는 검색 서버에, 상기 생성된 검색어들 중 적어도 일부에 기초한 검색 문의를 제출하는 경우 수행되는, 컴퓨터-구현된 방법.
  21. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
    상기 인터넷 검색은, 일반적 인터넷 검색, 연관된 뉴스 항목들에 대한 타겟팅된 검색, 연관된 이미지들에 대한 타겟팅된 검색, 연관된 인터넷-액세스가능 미디어 컨텐츠에 대한 타겟팅된 검색 및 연관된 소셜 미디어 컨텐츠에 대한 타겟팅된 검색으로 이루어진 그룹으로부터 선택되는, 컴퓨터-구현된 방법.
  22. 제 1 항 내지 제 10 항 중 어느 한 항에 있어서,
    상기 획득된 이미지로부터 텍스트를 추출하기 위해 상기 이미지를 분석하는 단계는,
    상기 획득된 이미지와 연관된 상기 캡쳐된 스크린 디스플레이 데이터로부터 프로그램 정보 오버레이의 표시자를 식별하는 단계; 및
    상기 프로그램 정보 오버레이의 식별자를 식별한 후, 상기 프로그램 정보 오버레이 상에 디스플레이되는 텍스트를 추출하는 단계를 더 포함하는, 컴퓨터-구현된 방법.
  23. 하나 또는 그 초과의 프로그램들을 저장하는 메모리 및 프로세서를 포함하는 전자 디바이스로서,
    상기 하나 또는 그 초과의 프로그램들은 명령들을 포함하고, 상기 명령들은 컴퓨팅 디바이스에 의해 실행되는 경우 상기 디바이스로 하여금, 자동으로 그리고 사용자 상호작용없이, 제 1 항 내지 제 10 항 중 어느 한 항의 방법을 구현하게 하는,
    전자 디바이스.
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
KR1020157010122A 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시 KR101999389B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US13/623,043 2012-09-19
US13/623,043 US10735792B2 (en) 2012-09-19 2012-09-19 Using OCR to detect currently playing television programs
US13/831,166 US9788055B2 (en) 2012-09-19 2013-03-14 Identification and presentation of internet-accessible content associated with currently playing television programs
US13/831,166 2013-03-14
PCT/US2013/060697 WO2014047335A2 (en) 2012-09-19 2013-09-19 Identification and presentation of internet-accessible content associated with currently playing television programs

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020197019490A Division KR102086721B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시

Publications (2)

Publication Number Publication Date
KR20150060801A KR20150060801A (ko) 2015-06-03
KR101999389B1 true KR101999389B1 (ko) 2019-07-11

Family

ID=49474682

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020197019490A KR102086721B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시
KR1020207006321A KR102212355B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시
KR1020157010122A KR101999389B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020197019490A KR102086721B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시
KR1020207006321A KR102212355B1 (ko) 2012-09-19 2013-09-19 현재 재생되는 텔레비젼 프로그램들과 연관된 인터넷-액세스가능 컨텐츠의 식별 및 제시

Country Status (5)

Country Link
US (5) US9788055B2 (ko)
EP (1) EP2898700A2 (ko)
KR (3) KR102086721B1 (ko)
CN (2) CN104769957B (ko)
WO (1) WO2014047335A2 (ko)

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9866899B2 (en) 2012-09-19 2018-01-09 Google Llc Two way control of a set top box
US9788055B2 (en) * 2012-09-19 2017-10-10 Google Inc. Identification and presentation of internet-accessible content associated with currently playing television programs
US20150319510A1 (en) * 2014-04-30 2015-11-05 General Instrument Corporation Interactive viewing experiences by detecting on-screen text
US9924215B2 (en) * 2014-01-09 2018-03-20 Hsni, Llc Digital media content management system and method
CN104023251B (zh) * 2014-06-13 2015-08-19 腾讯科技（深圳）有限公司 基于视频的互动方法和系统
KR20160044954A (ko) * 2014-10-16 2016-04-26 삼성전자주식회사 정보 제공 방법 및 이를 구현하는 전자 장치
US10572491B2 (en) 2014-11-19 2020-02-25 Google Llc Methods, systems, and media for presenting related media content items
KR102499124B1 (ko) 2016-01-21 2023-02-15 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
WO2017146454A1 (ko) * 2016-02-26 2017-08-31 삼성전자 주식회사 컨텐트를 인식하는 방법 및 장치
KR102561711B1 (ko) * 2016-02-26 2023-08-01 삼성전자주식회사 컨텐트를 인식하는 방법 및 장치
US10945026B2 (en) * 2016-06-24 2021-03-09 Lg Electronics Inc. Display device
US10356340B2 (en) * 2016-09-02 2019-07-16 Recruit Media, Inc. Video rendering with teleprompter overlay
US10606851B1 (en) * 2018-09-10 2020-03-31 Palantir Technologies Inc. Intelligent compute request scoring and routing
KR102494591B1 (ko) 2018-09-18 2023-02-03 삼성전자주식회사 전자 장치, 그 제어 방법 및 전자 시스템
US11120007B2 (en) 2018-11-26 2021-09-14 Palantir Technologies Inc. Module expiration management
US10409641B1 (en) 2018-11-26 2019-09-10 Palantir Technologies Inc. Module assignment management
US11620342B2 (en) * 2019-03-28 2023-04-04 Verizon Patent And Licensing Inc. Relevance-based search and discovery for media content delivery
CN110110044B (zh) * 2019-04-11 2020-05-05 广州探迹科技有限公司 一种企业信息组合筛选的方法
JP2022543864A (ja) 2019-08-05 2022-10-14 ホップラ リミテッド メディア再生機器にコンテンツを提供するための方法およびシステム
KR20210033837A (ko) 2019-09-19 2021-03-29 삼성전자주식회사 전자 장치 및 이의 제어 방법
US20210133262A1 (en) * 2019-10-31 2021-05-06 The Goodyear Tire & Rubber Company Tire purchase method
CN112784137A (zh) * 2019-11-04 2021-05-11 海信视像科技股份有限公司 显示设备、显示方法及计算设备
CN111343693B (zh) * 2020-02-28 2022-03-18 青岛信芯微电子科技股份有限公司 一种数据处理方法及设备
CN112348104B (zh) * 2020-11-17 2023-08-18 百度在线网络技术（北京）有限公司 仿冒程序的识别方法、装置、设备及存储介质
KR102647917B1 (ko) * 2021-07-05 2024-03-15 이재호 빅데이터와 인공지능을 활용한 도서 및 디지털 콘텐츠에 관한 정보 및 판매 서비스 제공 시스템 및 그 방법

Family Cites Families (94)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HU195598B (en) 1986-04-22 1988-05-30 Ipari Mueszergyar Auxiliary rotor of permanent magnet for asynchronous motors
US7134131B1 (en) 1992-12-09 2006-11-07 Sedna Patent Services, Llc Digital broadcast program billing
US5355162A (en) 1993-07-13 1994-10-11 Pacific Ray Video Limited Multi-standard cable television system
US6658662B1 (en) 1997-06-30 2003-12-02 Sun Microsystems, Inc. Retrieving information from a broadcast signal
US6104334A (en) * 1997-12-31 2000-08-15 Eremote, Inc. Portable internet-enabled controller and information browser for consumer devices
US6742183B1 (en) 1998-05-15 2004-05-25 United Video Properties, Inc. Systems and methods for advertising television networks, channels, and programs
US6597374B1 (en) * 1998-11-12 2003-07-22 Microsoft Corporation Activity based remote control unit
US6690392B1 (en) * 1999-07-15 2004-02-10 Gateway, Inc. Method system software and signal for automatic generation of macro commands
US7113230B1 (en) 2000-03-17 2006-09-26 Matsushita Electric Industrial Co., Ltd. Method and apparatus for deriving a channel map for a digital television receiver
US6748375B1 (en) * 2000-09-07 2004-06-08 Microsoft Corporation System and method for content retrieval
US6823084B2 (en) * 2000-09-22 2004-11-23 Sri International Method and apparatus for portably recognizing text in an image sequence of scene imagery
US7031553B2 (en) 2000-09-22 2006-04-18 Sri International Method and apparatus for recognizing text in an image sequence of scene imagery
US7269580B2 (en) * 2000-10-03 2007-09-11 Celcorp, Inc. Application integration system and method using intelligent agents for integrating information access over extended networks
ES2431604T3 (es) * 2000-10-11 2013-11-27 United Video Properties, Inc. Sistemas y métodos para complementar multimedia a la carta
KR20020050490A (ko) 2000-12-21 2002-06-27 구자홍 통합 리모콘 정보 제공 시스템 및 그 운용방법
US6741981B2 (en) * 2001-03-02 2004-05-25 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration (Nasa) System, method and apparatus for conducting a phrase search
US6903767B2 (en) * 2001-04-05 2005-06-07 Hewlett-Packard Development Company, L.P. Method and apparatus for initiating data capture in a digital camera by text recognition
US8006268B2 (en) * 2002-05-21 2011-08-23 Microsoft Corporation Interest messaging entertainment system
AU2003270386A1 (en) 2002-09-06 2004-03-29 Rytec Corporation Signal intensity range transformation apparatus and method
AU2003279992A1 (en) * 2002-10-21 2004-05-13 Ebay Inc. Listing recommendation in a network-based commerce system
JP4112968B2 (ja) * 2002-12-26 2008-07-02 富士通株式会社 ビデオテキスト処理装置
US20050177847A1 (en) * 2003-03-07 2005-08-11 Richard Konig Determining channel associated with video stream
KR20040082035A (ko) 2003-03-17 2004-09-24 엘지전자 주식회사 모든 채널의 신호 세기 디스플레이 방법
BRPI0410034A (pt) * 2003-05-05 2006-04-25 Thomson Licensing sistema e método para comunicação com um dispositivo de exibição através de uma rede
KR20040101655A (ko) 2003-05-26 2004-12-03 삼성전자주식회사 다중 픽쳐 인 가이드 정보 표시 방법 및 그 장치
US8180275B2 (en) 2003-07-24 2012-05-15 Sirius Xm Radio Inc. Computer based multi-channel radio system and user interface
US20070186228A1 (en) * 2004-02-18 2007-08-09 Nielsen Media Research, Inc. Methods and apparatus to determine audience viewing of video-on-demand programs
US8612208B2 (en) * 2004-04-07 2013-12-17 Oracle Otc Subsidiary Llc Ontology for use with a system, method, and computer readable medium for retrieving information and response to a query
US20050251823A1 (en) * 2004-05-05 2005-11-10 Nokia Corporation Coordinated cross media service
US7302426B2 (en) * 2004-06-29 2007-11-27 Xerox Corporation Expanding a partially-correct list of category elements using an indexed document collection
JP4577085B2 (ja) * 2005-05-17 2010-11-10 ソニー株式会社 映像処理装置、映像処理方法
US20070073704A1 (en) * 2005-09-23 2007-03-29 Bowden Jeffrey L Information service that gathers information from multiple information sources, processes the information, and distributes the information to multiple users and user communities through an information-service interface
ATE524784T1 (de) 2005-09-30 2011-09-15 Irobot Corp Begleitroboter für persönliche interaktion
US7664317B1 (en) * 2006-03-23 2010-02-16 Verizon Patent And Licensing Inc. Video analysis
US20070255115A1 (en) * 2006-04-27 2007-11-01 Anglin Richard L Jr Remote diagnostic & treatment system
US8019162B2 (en) * 2006-06-20 2011-09-13 The Nielsen Company (Us), Llc Methods and apparatus for detecting on-screen media sources
KR100821760B1 (ko) 2006-07-28 2008-04-11 엘지전자 주식회사 수신신호감도를 이용한 채널 진단 및 채널 편집 시스템 및방법
CN101496404A (zh) * 2006-07-31 2009-07-29 株式会社爱可信 电子设备、显示系统、显示方法以及程序
US8077263B2 (en) * 2006-10-23 2011-12-13 Sony Corporation Decoding multiple remote control code sets
US7689613B2 (en) * 2006-10-23 2010-03-30 Sony Corporation OCR input to search engine
US7814524B2 (en) * 2007-02-14 2010-10-12 Sony Corporation Capture of configuration and service provider data via OCR
US8296808B2 (en) 2006-10-23 2012-10-23 Sony Corporation Metadata from image recognition
US20080098433A1 (en) * 2006-10-23 2008-04-24 Hardacker Robert L User managed internet links from TV
KR100836197B1 (ko) 2006-12-14 2008-06-09 삼성전자주식회사 동영상 자막 검출 장치 및 그 방법
US8763038B2 (en) * 2009-01-26 2014-06-24 Sony Corporation Capture of stylized TV table data via OCR
US8861898B2 (en) * 2007-03-16 2014-10-14 Sony Corporation Content image search
US8438589B2 (en) * 2007-03-28 2013-05-07 Sony Corporation Obtaining metadata program information during channel changes
US20080273114A1 (en) * 2007-05-04 2008-11-06 Hardacker Robert L STB channel reader
US20080279453A1 (en) * 2007-05-08 2008-11-13 Candelore Brant L OCR enabled hand-held device
US20090009532A1 (en) * 2007-07-02 2009-01-08 Sharp Laboratories Of America, Inc. Video content identification using ocr
US20090077065A1 (en) * 2007-09-13 2009-03-19 Samsung Electronics Co., Ltd. Method and system for information searching based on user interest awareness
CN101388142B (zh) 2007-09-14 2011-01-19 深圳创维数字技术股份有限公司 一种遥控器指令的识别方法、识别装置及家用电器
WO2009036435A1 (en) * 2007-09-14 2009-03-19 Auditude.Com, Inc. Restoring program information for clips of broadcast programs shared online
US8645983B2 (en) * 2007-09-20 2014-02-04 Sony Corporation System and method for audible channel announce
CN101500101A (zh) 2008-02-03 2009-08-05 深圳Tcl新技术有限公司 自动移除不可用频道的方法及装置
EP2250749A2 (en) * 2008-02-05 2010-11-17 StratosAudio, Inc. Systems, methods, and devices for scanning broadcasts
US7991801B2 (en) * 2008-06-10 2011-08-02 International Business Machines Corporation Real-time dynamic and synchronized captioning system and method for use in the streaming of multimedia data
CN101309353A (zh) 2008-06-27 2008-11-19 中国网络通信集团公司 机顶盒
US8347408B2 (en) * 2008-06-30 2013-01-01 Cisco Technology, Inc. Matching of unknown video content to protected video content
US7782861B2 (en) 2008-07-08 2010-08-24 Harris Corporation Configuration and alignment tool for computer network radio equipment
US8321885B2 (en) 2008-07-29 2012-11-27 Pino Jr Angelo J In-home system monitoring method and system
US20100037149A1 (en) * 2008-08-05 2010-02-11 Google Inc. Annotating Media Content Items
US8035656B2 (en) * 2008-11-17 2011-10-11 Sony Corporation TV screen text capture
US9336528B2 (en) * 2008-12-16 2016-05-10 Jeffrey Beaton System and method for overlay advertising and purchasing utilizing on-line video or streaming media
US8553783B2 (en) * 2008-12-29 2013-10-08 Stmicroelectronics Asia Pacific Pte Ltd. Apparatus and method of motion detection for temporal mosquito noise reduction in video sequences
DE202010018601U1 (de) * 2009-02-18 2018-04-30 Google LLC (n.d.Ges.d. Staates Delaware) Automatisches Erfassen von Informationen, wie etwa Erfassen von Informationen unter Verwendung einer dokumentenerkennenden Vorrichtung
US8139162B2 (en) * 2009-03-03 2012-03-20 Sony Corporation Rapid television channel scan using frequency plans to identify channels
KR101644789B1 (ko) * 2009-04-10 2016-08-04 삼성전자주식회사 방송 프로그램 연관 정보 제공 장치 및 방법
US8533223B2 (en) * 2009-05-12 2013-09-10 Comcast Interactive Media, LLC. Disambiguation and tagging of entities
US20100293162A1 (en) * 2009-05-15 2010-11-18 Global Patent Solutions Automated Keyword Generation Method for Searching a Database
US8374646B2 (en) * 2009-10-05 2013-02-12 Sony Corporation Mobile device visual input system and methods
US8875038B2 (en) * 2010-01-19 2014-10-28 Collarity, Inc. Anchoring for content synchronization
US9264785B2 (en) 2010-04-01 2016-02-16 Sony Computer Entertainment Inc. Media fingerprinting for content determination and retrieval
US9185458B2 (en) * 2010-04-02 2015-11-10 Yahoo! Inc. Signal-driven interactive television
US9015139B2 (en) * 2010-05-14 2015-04-21 Rovi Guides, Inc. Systems and methods for performing a search based on a media content snapshot image
US9215420B2 (en) * 2010-06-01 2015-12-15 Comcast Cable Communications, Llc Ranking search results
US9047516B2 (en) * 2010-06-18 2015-06-02 Verizon Patent And Licensing Inc. Content fingerprinting
TWI439123B (zh) * 2010-09-23 2014-05-21 Hon Hai Prec Ind Co Ltd 機上盒及其搜索字元之方法
US8762852B2 (en) 2010-11-04 2014-06-24 Digimarc Corporation Smartphone-based methods and systems
US9317595B2 (en) * 2010-12-06 2016-04-19 Yahoo! Inc. Fast title/summary extraction from long descriptions
KR20120063886A (ko) 2010-12-08 2012-06-18 삼성전자주식회사 영상처리장치, 사용자 단말장치 및 그 영상처리방법, 제어방법
US20110289532A1 (en) 2011-08-08 2011-11-24 Lei Yu System and method for interactive second screen
KR101995425B1 (ko) 2011-08-21 2019-07-02 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
KR20160003336A (ko) * 2011-09-12 2016-01-08 인텔 코포레이션 멀티미디어 클립들을 캡처하기 위한 제스처 사용
US9113202B1 (en) * 2011-09-21 2015-08-18 Google Inc. Inverted client-side fingerprinting and matching
US20130101002A1 (en) 2011-10-24 2013-04-25 Robotex, Inc. Method of displaying a digital signal
US9424255B2 (en) * 2011-11-04 2016-08-23 Microsoft Technology Licensing, Llc Server-assisted object recognition and tracking for mobile devices
US8832764B2 (en) 2011-11-10 2014-09-09 Verizon Patent And Licensing Inc. Block troubleshooting
CN102547442A (zh) * 2011-12-26 2012-07-04 四川长虹电器股份有限公司 一种基于UPnP的电视节目分享方法
WO2013103581A1 (en) * 2012-01-06 2013-07-11 Thomson Licensing Method and system for synchronising social messages with a content timeline
US9866899B2 (en) 2012-09-19 2018-01-09 Google Llc Two way control of a set top box
US9788055B2 (en) * 2012-09-19 2017-10-10 Google Inc. Identification and presentation of internet-accessible content associated with currently playing television programs
US9832413B2 (en) 2012-09-19 2017-11-28 Google Inc. Automated channel detection with one-way control of a channel source
CN104219548B (zh) 2014-09-12 2018-06-05 四川长虹电器股份有限公司 控制智能机顶盒切换频道的方法和切换频道系统

Also Published As

Publication number Publication date
US11140443B2 (en) 2021-10-05
CN104769957A (zh) 2015-07-08
EP2898700A2 (en) 2015-07-29
US20190182543A1 (en) 2019-06-13
US20220030305A1 (en) 2022-01-27
US9788055B2 (en) 2017-10-10
US10701440B2 (en) 2020-06-30
US11917242B2 (en) 2024-02-27
KR102212355B1 (ko) 2021-02-03
KR102086721B1 (ko) 2020-03-09
US10237612B2 (en) 2019-03-19
US20140082647A1 (en) 2014-03-20
US20200329275A1 (en) 2020-10-15
CN104769957B (zh) 2019-01-25
KR20200026325A (ko) 2020-03-10
KR20190083676A (ko) 2019-07-12
US20180035162A1 (en) 2018-02-01
WO2014047335A2 (en) 2014-03-27
WO2014047335A3 (en) 2014-05-22
CN110072152B (zh) 2020-11-03
CN110072152A (zh) 2019-07-30
KR20150060801A (ko) 2015-06-03

Similar Documents

Publication Publication Date Title
US11917242B2 (en) Identification and presentation of content associated with currently playing television programs
US11272248B2 (en) Methods for identifying video segments and displaying contextually targeted content on a connected television
US10271098B2 (en) Methods for identifying video segments and displaying contextually targeted content on a connected television
US9961404B2 (en) Media fingerprinting for content determination and retrieval
KR102091414B1 (ko) 방송되는 미디어 관련 전자 메시징 향상
EP2541963A2 (en) Method for identifying video segments and displaying contextually targeted content on a connected television
KR20160104661A (ko) 온-디맨드 미디어 컨텐츠에 대응하는 보충적인 정보를 제시하기 위한 방법들, 시스템들 및 매체들

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent