KR102528922B1 - 비디오에 내장된 메타데이터를 배신하기 위한 시스템 - Google Patents

비디오에 내장된 메타데이터를 배신하기 위한 시스템 Download PDF

Info

Publication number
KR102528922B1
KR102528922B1 KR1020177021748A KR20177021748A KR102528922B1 KR 102528922 B1 KR102528922 B1 KR 102528922B1 KR 1020177021748 A KR1020177021748 A KR 1020177021748A KR 20177021748 A KR20177021748 A KR 20177021748A KR 102528922 B1 KR102528922 B1 KR 102528922B1
Authority
KR
South Korea
Prior art keywords
content
metadata
watermark
video frame
embedded
Prior art date
Application number
KR1020177021748A
Other languages
English (en)
Other versions
KR20170128223A (ko
Inventor
마크 아이어
폴 하티
Original Assignee
소니그룹주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니그룹주식회사 filed Critical 소니그룹주식회사
Publication of KR20170128223A publication Critical patent/KR20170128223A/ko
Application granted granted Critical
Publication of KR102528922B1 publication Critical patent/KR102528922B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/68Systems specially adapted for using specific information, e.g. geographical or meteorological information
    • H04H60/73Systems specially adapted for using specific information, e.g. geographical or meteorological information using meta-information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835Generation of protective data, e.g. certificates
    • H04N21/8358Generation of protective data, e.g. certificates involving watermark
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/50Aspects of broadcast communication characterised by the use of watermarks

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Systems (AREA)

Abstract

메타데이터를 추출하기 위한 방법, 비일시적인 컴퓨터 판독 가능 저장 매체 및 수신 장치와, 메타데이터를 제공하기 위한 정보 제공 장치. 메타데이터를 추출하기 위한 방법은 수신 장치의 회로에 의해 내장된 메타데이터를 포함하는 콘텐츠를 처리하는 단계를 포함한다. 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장된다. 회로는 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 기초하여 비디오 프레임으로부터 워터마크의 심벌 값들을 결정한다. 휘도 값들 중 적어도 하나는 16 미만이다.

Description

비디오에 내장된 메타데이터를 배신하기 위한 시스템
관련 출원들에 대한 상호 참조
본 출원은 2015년 3월 19일에 출원된 미국 가출원 제62/135,246호 및 2015년 6월 16일자로 출원된 미국 특허 출원 제14/741,168호에 기초하고 이들로부터 우선권의 이익을 주장하며, 이들의 전체 내용은 본 명세서에 참고로 포함된다.
본 명세서에 설명된 실시예들은, 일반적으로 메타데이터를 추출하기 위한 방법, 비일시적인 컴퓨터 판독가능 저장 매체, 및 수신 장치; 및 메타데이터를 제공하기 위한 방법, 비일시적인 컴퓨터 판독가능 저장 매체, 및 정보 제공 장치에 관한 것이다.
디지털 텔레비전 시스템 내에 메타데이터를 배신(distribution)하기 위한 효과적인 방법을 구현하는 것은 현대의 전자 엔터테인먼트 시스템의 설계자 및 제조업자에게 중요한 고려 사항이다. 그렇지만, 이러한 시스템을 효과적으로 구현하는 것은 시스템 설계자에게 상당한 어려움을 불러일으킬 수 있다. 예를 들어, 증가된 시스템 기능성 및 성능에 대한 강화된 요구는 더 많은 능력을 필요로 하고 부가적인 하드웨어 및 소프트웨어 리소스를 필요로 할 수 있다. 첨단 시스템에서 메타데이터의 효과적인 전달에 대한 장애는, 동작 비효율, 수익 기회 상실, 및 기능성 저하로 인해 대응하는 경제적으로 해로운 결과를 초래할 수 있다.
게다가, 다양한 첨단 동작을 수행하기 위한 향상된 시스템 능력은 최종 사용자에게 부가적인 이점을 제공할 수 있지만, 다양한 시스템 컴포넌트의 제어 및 관리에 대한 요구가 증가할 수 있다. 예를 들어, 동기화된 텔레비전 위젯 기능성을 효과적으로 지원하는 향상된 전자 시스템은 이 기능성을 지원하는 데이터 스트림의 유연한 전달(carriage)을 제공하는 방법으로부터 이익을 얻을 수 있다.
시스템 리소스에 대한 늘어나는 요구 및 실질적으로 증가하는 데이터 크기로 인해, 디지털 텔레비전 시스템을 통한 데이터 배신을 구현하고 이용하기 위한 새로운 기술을 개발하는 것이 관련 전자 기술에 대한 관심사임은 명백하다. 따라서, 전술한 모든 이유로, 디지털 텔레비전 시스템을 통한 데이터 배신을 구현하고 이용하기 위한 효과적인 시스템을 개발하는 것은 현대의 전자 엔터테인먼트 시스템의 설계자, 제조업자 및 사용자에게 여전히 중요한 고려대상으로 남아 있다.
본 개시내용의 실시예들은 비디오 데이터의 일부에 메타데이터를 내장하는(embedding) 것에 관한 것이다.
본 개시내용의 실시예에 따르면, 메타데이터를 추출하기 위한 수신 장치의 방법이 제공된다. 상기 방법은 수신 장치의 회로에 의해, 내장된 메타데이터를 포함하는 콘텐츠를 처리하는 단계를 포함하며, 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장된다. 비디오 프레임에 내장된 워터마크의 심벌 값들은 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분에서의 픽셀들의 휘도 값들에 기초하여 회로에 의해 결정된다. 또한, 휘도 값들 중 적어도 하나는 16 미만이다.
또한, 본 개시내용의 실시예에 따르면, 컴퓨터에 의해 실행될 때, 컴퓨터로 하여금 메타데이터를 추출하기 위한 수신 장치의 방법을 수행하게 하는 프로그램을 저장하고 있는 비일시적인 컴퓨터 판독 가능 매체가 제공된다. 상기 방법은 내장된 메타데이터를 포함하는 콘텐츠를 처리하는 단계를 포함하며, 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장된다. 비디오 프레임에 내장된 워터마크의 심벌 값들은 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 기초하여 결정된다. 또한, 휘도 값들 중 적어도 하나는 16 미만이다.
또한, 본 개시내용의 실시예에 따르면, 내장된 메타데이터를 포함하는 콘텐츠를 처리하도록 구성된 회로를 포함하는 수신 장치가 제공되며, 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장된다. 회로는 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 기초하여 비디오 프레임에 내장된 워터마크의 심벌 값들을 결정된다. 또한, 휘도 값들 중 적어도 하나는 16 미만이다.
또한, 본 개시내용의 실시예에 따르면, 수신 장치에 제공될 콘텐츠를 수신하거나 검색하도록 구성된 회로를 포함하는 정보 제공 장치가 제공된다. 회로는 콘텐츠의 비디오 프레임에 메타데이터를 내장하며, 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장된다. 또한, 회로는 수신 장치에 콘텐츠를 제공한다. 워터마크의 심벌 값들은 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 의해 표현된다. 또한, 휘도 값들 중 적어도 하나는 16 미만이다.
본 개시내용과 본 개시내용의 다수의 부수적인 이점에 대한 보다 완전한 이해는 이하의 상세한 설명을 첨부 도면들과 관련하여 고려하여 참조할 때 더 잘 이해되기 때문에 용이하게 획득될 것이다:
도 1a는 본 개시내용의 일 실시예에 따른 전자 시스템의 블록도이다.
도 1b는 본 개시내용의 일 실시예에 따른, 도 1a의 텔레비전으로부터의 디스플레이의 도면이다.
도 2는 본 개시내용에 따른, 도 1a의 콘텐츠 소스의 일 실시예에 대한 블록도이다.
도 3은 본 개시내용에 따른, 도 2의 소스 메모리의 일 실시예에 대한 블록도이다.
도 4는 본 개시내용에 따른, 도 3의 메타데이터의 일 실시예에 대한 블록도이다.
도 5는 본 개시내용에 따른, 도 1a로부터의 텔레비전의 일 실시예에 대한 블록도이다.
도 6은 본 개시내용에 따른, 도 5로부터의 TV 메모리의 일 실시예에 대한 블록도이다.
도 7a 및 도 7b는 본 개시내용의 2개의 상이한 실시예에 따른, 비디오 데이터에 내장된 메타데이터의 도면들이다.
도 8a-8e는 본 개시내용의 일 실시예에 따른, 메타데이터를 배신 및/또는 추출하기 위한 방법 단계들의 흐름도들이다.
도 9는 휘도 인코딩의 예를 도시한다.
도 10은 예시적인 정보 제공 장치의 일례를 도시한다.
도 11은 예시적인 컴퓨터이다.
본 개시내용은 많은 상이한 형태의 실시예를 허용하지만, 도면 및 본 명세서에서는 세부적인 특정 실시예로 설명이 이루어질 것이며, 이러한 실시예의 본 개시내용은 원리의 예로서 간주되어야 하며, 본 개시내용을 도시되고 설명된 특정 실시예로 제한하기 위한 것은 아님을 이해해야 한다. 이하의 설명에서, 동일한 참조 도면부호들은 도면들의 여러 관점에서 동일, 유사 또는 대응하는 부분들을 설명하기 위해 사용된다.
본 명세서에서 사용되는 용어 "하나"("a" 또는 "an")는 하나 또는 하나보다 많은 것으로 정의된다. 본 명세서에서 사용될 때, "복수"라는 용어는 둘 또는 둘보다 많은 것으로 정의된다. 본 명세서에서 사용되는 "다른"이라는 용어는 적어도 두 번째 혹은 그 이상으로서 정의된다. 본 명세서에서 사용되는 용어 "포함하는(including)" 및/또는 "갖는(having)"은 포함하는(comprising)(즉, 개방어(open language))으로 정의된다. 본 명세서에서 사용되는 "결합된"이라는 용어는 반드시 직접적일 필요는 없고 반드시 기계적일 필요는 없지만 접속되는 것으로 정의된다. 본 명세서에서 사용되는 "프로그램" 또는 "컴퓨터 프로그램"이라는 용어 또는 유사한 용어는 컴퓨터 시스템 상에서 실행을 위해 설계된 명령어들의 시퀀스로서 정의된다. "프로그램" 또는 "컴퓨터 프로그램"은, 서브루틴, 프로그램 모듈, 스크립트, 함수, 프로시저, 오브젝트 메소드, 오브젝트 구현예, 실행가능 애플리케이션, 애플릿, 서브릿, 소스 코드, 오브젝트 코드, 공유 라이브러리/동적 로드 라이브러리, 및/또는 컴퓨터 시스템 상에서의 실행을 위해 설계된 명령어들의 기타 시퀀스를 포함할 수 있다.
본 명세서에서 사용되는 "프로그램"이라는 용어는 또한 제2 맥락에서도 사용될 수 있다(상기 정의는 제1 맥락에 대한 것임). 제2 맥락에서, 이 용어는 "텔레비전 프로그램"의 의미로 사용된다. 이러한 맥락에서, 이 용어는, 전자 프로그램 가이드(electronic program guide)(EPG)에서 단일 텔레비전 프로그램으로서 해석되고 보고되는 것들과 같은 오디오/비디오 콘텐츠의 임의의 코히런트 시퀀스 - 이 콘텐츠가 영화든, 스포츠 이벤트(sporting event)든, 여러 편의 시리즈 중 한편이든, 뉴스 방송 등인지에 관계없음 - 를 의미하는 것으로 사용될 수 있다. 이 용어는 또한, EPG에서 프로그램으로서 보고될 수 없는 광고 부분(commercial spots) 및 다른 프로그램-유사 콘텐츠(program-like content)를 포함하는 것으로 해석될 수 있다.
본 문서 전반에 걸쳐 언급되는 "일 실시예", "특정 실시예", "실시예", "구현예", "일례" 또는 유사한 용어는 그 실시예와 관련하여 기술된 특정한 피처, 구조 또는 특성이 본 개시내용의 적어도 하나의 실시예에 포함된다는 것을 의미한다. 따라서, 이러한 문구의 출현 또는 본 명세서 전반에 걸친 다양한 위치에서의 출현은 반드시 모두 동일한 실시예를 지칭하는 것은 아니다. 또한, 특정한 피처들, 구조들, 또는 특성들은 하나 이상의 실시예에서 제한 없이 임의의 적절한 방식으로 조합될 수 있다.
본 명세서에서 사용되는 바와 같은 "또는"이라는 용어는 포괄적이거나 또는 임의의 하나 또는 임의의 조합을 의미하는 것으로 해석되어야 한다. 따라서, "A, B 또는 C"는 "A; B; C; A 및 B; A 및 C; B 및 C; A, B 및 C 중 어느 하나"를 의미한다. 이러한 정의에 대한 예외는 요소들, 기능들, 단계들 또는 액트들의 조합이 일부 방식에서 본래 상호 배타적일 때에만 발생할 것이다.
본 개시내용의 실시예는 비디오 데이터에 메타데이터를 내장하는 것에 관한 것이다. 메타데이터는 비디오 데이터에 워터마크로서 내장된다. 본 개시내용이 비디오 프레임의 라인 1에 내장된 워터마크를 사용하여 주로 설명되었지만, 워터마크는 다른 라인 또는 프레임의 다른 미리 결정된 부분에 내장될 수 있다.
본 개시내용은 비디오 데이터에 내장된 메타데이터를 배신하기 위한 시스템 및 방법으로서 본 명세서에서 기술되며, 메타데이터를 비디오 데이터에 내장하는 콘텐츠 소스를 포함한다. 콘텐츠 소스는 압축된 비디오 데이터를 포함하는 배신 멀티플렉스(distribution multiplex)를 생성하기 위해 비디오 데이터를 메타데이터와 함께 인코딩한다. 디코더는 배신 멀티플렉스를 수신 및 압축 해제하여, 메타데이터가 내장되어 있는 비디오 데이터를 재생한다. 텔레비전 또는 다른 시청 디바이스는 그런 다음 비디오 데이터로부터 메타데이터를 검출하고 추출한다.
텔레비전 또는 다른 디바이스는 메타데이터를 처리하여, 예를 들어 시청 디바이스가 현재 시청중인 채널을 식별하고 채널 변경을 인식하게 하고; 틈새 광고(interstitials)와 같은 짧은 콘텐츠를 포함하는, 시청중인 콘텐츠를 식별하게 하고; 콘텐츠에 관한 부가 정보(예를 들어, 원격 서버의 URL)에 액세스하기 위한 위치를 발견하게 하고; 이상적으로는 샘플 또는 액세스 단위 정확도의 레벨로 렌더링되는 콘텐츠 내의 시간적 위치를 식별하게 하고; 그리고/또는 실시간으로 시간에 민감한 이벤트 트리거를 수신하게 하는 정보를 수신한다.
이제 도 1a를 참조하면, 본 개시내용의 하나의 실시예에 따른, 전자 시스템(110)의 블록도가 도시된다. 도 1a의 실시예에서, 전자 시스템(110)은 콘텐츠 소스(114), 셋톱 박스(118), 인터페이스(126), 텔레비전(122), 선택적인 네트워크(134) 및 선택적인 서버(130)를 포함할 수 있지만, 이들로 제한되지 않는다. 대안적인 실시예에서, 전자 시스템(110)은 도 1a의 실시예와 관련하여 논의된 그들의 컴포넌트들 및 구성들 중 일부에 부가하여 또는 그 대신에 컴포넌트들 및 구성들을 사용하여 구현될 수 있다. 예를 들어, 임의의 수의 텔레비전(122)은 유사하게 전자 시스템(110)에 배치될 수 있다. 게다가, 네트워크(134) 및 서버(130)는 본 개시내용의 모든 실시예에 포함되지 않을 수도 있다.
도 1a의 실시예에서, 콘텐츠 소스(114)는 텔레비전(122)에 의한 재생을 위해, 비디오 데이터 및 오디오 데이터를 포함하는 콘텐츠 데이터를 준비 및 배신하는 하나 이상의 전자 디바이스 또는 다른 엔티티로서 구현될 수 있다. 도 1a의 실시예에서, 콘텐츠 소스(114)는 임의의 적절한 엔티티로서 구현될 수 있다. 예를 들어, 콘텐츠 소스(114)는 텔레비전 방송 시설, 케이블 텔레비전 배신 시설, 위성 텔레비전 배신 시설, 또는 인터넷 서버 엔티티를 포함할 수 있다. 콘텐츠 소스(114)의 구현 및 이용에 관한 부가적인 상세는 도 2 내지 도 4와 관련하여 이하에서 더 논의된다.
도 1a의 실시예에서, 콘텐츠 소스(114)는 콘텐츠 데이터를 포함하는 인코딩된 배신 멀티플렉스를 압축된 포맷으로 생성한 다음, 배신 멀티플렉스를 배신 네트워크를 통해 경로(116)(예를 들어, 지상파 텔레비전 방송 채널, 케이블 TV 네트워크, 위성 방송 채널, 등)을 경유해 디코더 디바이스에 배신한다. 도 1a의 실시예에서, 디코더 디바이스는 셋톱 박스(118)에 구현된다. 그렇지만, 다른 실시예에서, 디코더 디바이스는 텔레비전(122)의 외부에 있거나 텔레비전에 통합된 임의의 적절한 엔티티로서 구현될 수 있다. 특정 실시예에서, 부가적인 디바이스 또는 엔티티는 콘텐츠 소스(114)와 셋톱 박스(118) 사이에 개재되어 있을 수 있다. 이러한 엔티티의 예들은 방송 네트워크 제휴업체 및 서비스 제공자(예를 들어, 위성 또는 케이블 헤드-엔드)를 포함할 수 있지만, 이들로 제한되지 않는다.
도 1a의 실시예에서, 셋톱 박스(118)는 인코딩된 배신 멀티플렉스를 디코딩하여, 적절한 인터페이스(126)를 통해 텔레비전(122)에 제공되는 압축 해제된 A/V 데이터(비디오 데이터 및 오디오 데이터)를 생성한다. 도 1a의 실시예에서, 인터페이스(126)는 임의의 효과적인 방식으로 구현될 수 있다. 예를 들어, 인터페이스(126)는 압축 해제된 비디오 데이터 및 오디오 데이터, 및/또는 제어/타이밍 신호를 텔레비전(122)에 전달하기 위해 고속 병렬 인터페이스를 제공하는 HDMI(High Definition Multimedia Interface) 표준에 따라 구현될 수 있다. 그 후, 텔레비전(122)은 시스템 사용자에 의한 이용을 위해 비디오 데이터 및 오디오 데이터를 응답하여 수신하고 재생할 수 있다. 텔레비전(122)의 구현 및 이용에 관한 부가적인 상세는 도 5 및 도 6과 관련하여 이하에서 더 논의된다.
도 1a의 실시예에서, 전자 시스템(110)은 메인 콘텐츠 데이터와 관련된 부가적인 서비스를 지원한다. 부가적인 서비스는 사용자의 대화식 경험을 제공하기 위한 선언적 객체들(Declarative Objects)(DO들)(애플리케이션들이라고도 함)을 포함한다. DO들 및 기타 부가적인 서비스들은 ATSC 후보 표준 - Interactive Services Standard A/105:2014 (S13-2-389r7, Rev. 7 - 24 April 2014) - 에 기술되어 있고, 그 내용은 전체가 참고로 본 명세서에 포함된다.
DO들은 임의의 원하는 타입의 정보를 제공하기 위해 텔레비전(122) 상에 표시되는 개별 영역들을 포함할 수 있다. DO들에 관한 부가적인 상세는 도 1b와 관련하여 이하에서 추가로 제공된다. 도 1a의 실시예에서, 전자 시스템(110)은 텔레비전(122) 상에 현재 표시되고 있는 메인 콘텐츠 데이터와 관련(동기화)되어 있는 정보를 제공하는 동기화된 DO들을 유리하게 지원한다. 동기화된 DO들(예를 들어, 트리거된 선언적 객체들(triggered declarative objects)(TDO들))을 성공적으로 지원하기 위해, 전자 시스템(110)은 또한 특정 타입의 메타데이터(예를 들어, 트리거들, TDO 파라미터 테이블(TPT) 등)를 텔레비전(122)에 제공한다.
TDO는, 콘텐츠 제공자, 콘텐츠 생성자, 또는 다른 서비스 제공자 타입들에 의해 생성된 다운로드 가능한 소프트웨어 객체이며, 이것은 선언적 콘텐츠(예를 들어, 텍스트, 그래픽, 설명적인 마크업(descriptive markup), 스크립트, 및/또는 오디오)를 포함하고, 그들의 기능은 그것이 수반하는 콘텐츠에 소정의 방식으로 구속된다. TDO의 실시예는 ATSC 후보 표준 A/105:2014에 기술되어 있다. 하지만, TDO는, ATSC 후보 표준에 기술된 구조로 한정되지 않는데, 왜냐하면 TDO의 일부로서 거기에 정의된 많은 특성은 트리거에 위치될 수 있거나, 또는 그 반대일 수 있거나, 또는 특정 TDO의 트리거링 및 기능에 따라 전혀 존재하지 않을 수 있기 때문이다.
TDO는 일반적으로, 운영 체제 플랫폼 상에서 실행하는 자바 애플릿 또는 애플리케이션과 같은 "실행 가능한(executable)" 콘텐츠와 구별되도록 "선언적" 콘텐츠로서 간주된다. TDO는 보통 선언적 객체인 것으로 간주되지만, TDO 재생기(예를 들어, DO 엔진)는 객체-지향형 프로그래밍 언어(예를 들어, JavaScript)인 스크립팅 언어를 지원한다. 본 명세서에 도시된 예들에서, TDO들은, TDO가 필요할 때 이용 가능하도록, 그들이 실행될 시간보다 앞서 콘텐츠 또는 서비스 제공자로부터, 예를 들어 서버(130)를 통해 수신된다. 더욱이, 명시적인 트리거 신호는 필요하지 않을 수 있으며, TDO는 셀프 트리거링(self-triggering)되거나, 또는 트리거 신호의 수신 이외의 소정 액션에 의해 트리거링될 수 있다. 다양한 표준 단체들은, TDO를 위한 콘텐츠 및 메타데이터에 대한 연관된 거동(behavior)들, 외관(appearance)들, 트리거 액션들, 및 전송 방법들을 정의할 수 있다. 부가적으로, 오디오/비디오에 관한 TDO 거동들의 타이밍 정확도에 관한 요건은, 표준 단체들에 의해 정의될 수 있다.
일 실시예에서, 트리거는 세 부분을 포함하는 것으로 간주될 수 있는데, 두 부분은 필수이고 세 번째 부분은 선택적이다: <domain name part>/ <directory path> [? <parameters>]. <domain name part>은 등록된 인터넷 도메인 이름을 지칭한다. <directory path>는 식별된 도메인 이름에 대한 권한을 소유한 엔티티의 제어 및 관리하에 있는 디렉토리 경로를 식별하는 임의의 문자열이다. TDO 모델에서 <domain name part>과 <directory path>의 조합은 연관된 콘텐츠에 상호작용성(interactivity)을 부가하기 위해 수신기에 의해 처리될 수 있는 TPT를 고유하게 식별해야 한다. 직접 실행 모델에서, <domain name part>과 <directory path>의 조합은 착수될 DO를 고유하게 식별해야 한다. 트리거의 <parameters> 부분은 옵션이다. 트리거가 존재할 때, 트리거와 연관된 하나 이상의 파라미터를 전달할 수 있다. 예시적인 트리거는 xbc.tv/e12이다.
트리거는 데이터 객체이고, 이것은 이미 다운로드된 객체 또는 다운로드될 객체에 대한 파일명 또는 식별자를 사용함으로써 특정 TDO 인스턴스를 참조하는 콘텐츠(예를 들어, 텔레비전 프로그램)의 특정 아이템 또는 세그먼트에 선택적으로 결부(bound)된 것이다. 특정 TDO들은 특정 콘텐츠와 결합하는 경우에만 의미가 있을 것이다. 일례는, 게임 쇼 또는 콘테스트에 투표하는 것과 같은 시청자 응답 데이터를 수집하는 TDO이다.
TPT는 콘텐츠 세그먼트의 TDO에 관한 메타데이터를 포함하고, TDO에 대한 하나 이상의 이벤트를 정의한다. TDO의 이벤트는 재생되고 있는 콘텐츠의 현재 타이밍에 기초하거나, 또는 하나 이상의 트리거에 포함된 하나 이상의 이벤트에 대한 참조에 의해, 트리거링될 수 있다. 예를 들어, 트리거와 연관된 하나 이상의 파라미터는 TPT에서 텔레비전(122)에 제공될 수 있다.
트리거는 TDO가 특정 액션을 수행하기 위해 적당한 시간임을 지시하지만, 일련의 타이밍된 액션들은 트리거 없이, 예를 들어 TPT를 사용함으로써 플레이 아웃될 수 있다. TPT 또는 개별 활성화 메시지 테이블(Activation Messages Table)(AMT)은 옵션으로 "미디어 시간"과 관련된 다양한 대화형 이벤트에 타이밍 정보를 제공한다. 대화형 콘텐츠의 각각의 아이템은, 그것의 플레이 아웃을 위한 타임라인을 가지며; 이런 타임라인 상의 한 시점(instant of time)을 미디어 시간이라 부른다. 예를 들어, 30분 프로그램은, 프로그램의 시작으로부터 미디어 시간 10분, 41초, 및 2 프레임에서, 또는 미디어 시간 10:41+02에서 대화형 이벤트를 가질 수 있다. TPT는 시간 10:41+02에서 발생할 이벤트의 상세를 지시하는 엔트리를 포함할 수 있다. 일단 수신 장치(20)가 프로그램의 시작에 관한 현재의 타이밍을 결정하면, 그것은 모든 후속 이벤트들을 플레이 아웃하기 위해 TPT 및 옵션의 AMT를 사용할 수 있다.
텔레비전(122)은 콘텐츠 소스(114) 또는 서버(130)를 포함하지만 이에 제한되지 않는 임의의 적절한 소스로부터 메타데이터를 획득할 수 있다. 도 1a의 실시예에서, 텔레비전(122)은 인터넷을 포함하지만 이것으로 제한되지 않는 임의의 효과적인 네트워크(134)를 통해 서버(130)와 통신할 수 있다. 메타데이터의 생성, 배신 및 이용에 관한 부가적인 상세는 도 4, 도 7 및 도 8과 관련하여 이하에서 더 논의된다.
본 개시내용은 일반적으로, 메타데이터가 텔레비전(122)과 같은 수신 디바이스에 의해 신속하고 용이하게 복구될 수 있도록 메타데이터를 비디오 신호에 내장하는 것을 수반한다. 특정 실시예에서, 콘텐츠 소스(114)는, 메타데이터가 배신 체인을 통해 이동하고, (케이블, 위성 또는 IPTV 서비스 제공자로부터) 압축된 인터페이스를 통해 소비자의 가정으로 들어오고, 셋톱 박스(118)에서 압축 해제된 후, 압축 해제된 포맷으로 텔레비전(122)으로 이동하도록, 배신된 비디오 신호 내에 메타데이터를 삽입하며, 여기서 텔레비전(122)은 동기화된 DO들과 같은 부가적인 서비스를 지원하기 위해 내장된 메타데이터를 검색하고 이용한다. 전술한 기술은 서비스 제공자 또는 다른 엔티티가, 텔레비전(122)에 향상된 기능성을 제공하는데 요구되는 메타데이터에 대한 소비자의 액세스를 의도적으로 또는 무의식적으로 차단하는 것을 회피할 수 있다.
특정의 케이블, 위성 및 IPTV 엔티티는 통상적으로 HDMI 압축 해제된 비디오 인터페이스 또는 기타 적절한 수단을 통해 디지털 텔레비전과 인터페이스되는 셋톱 박스를 시스템 사용자에게 제공한다. 콘텐츠 소유자가 콘텐츠 데이터에 메타데이터(예를 들어, URL, 애플릿 등)를 포함시키고자 하는 경우, 그리고 그 메타데이터가 콘텐츠 데이터와 함께 별도의 디지털 스트림으로서(또는 압축된 비트 스트림 내의 메타데이터로서) 이동하는 경우, 메타데이터는 셋톱 박스(118)에서 차단될 것이다.
통상적으로, 셋톱 박스(114)는 배신 멀티플렉스에서 보조 데이터 스트림을 통과시키지 않는데, 그 이유는 셋톱 박스가 오디오 데이터 및 비디오 데이터만을 디코딩한 다음에, 압축 해제된 비디오 데이터 및 오디오 데이터만을 텔레비전으로 전달하기 때문이다. 따라서, 보조 데이터 스트림은 텔레비전에서 이용 가능하지 않다. 더욱이, 서비스 제공자(셋톱 박스를 공급하는 자)가 임의의 보조 데이터에 대한 액세스를 제공하는 것이 그 비즈니스 모델에 경쟁력이 있다고 인식하면, 이러한 액세스를 제공하여 소비자 전자 산업을 지원하지 않을 수 있다.
비디오 데이터 내에 메타데이터를 내장함으로써, 메타데이터는 압축/압축 해제를 견디며 텔레비전(122)에 그대로 도달할 수 있다. 또한, 본 개시내용의 실시예들에서, 메타데이터는 가시성을 처리하는 방식으로 워터마크로서 내장된다. 환언하면, 본 개시내용은 시청자에 대한 가시성을 감소시키는 방식으로 (별도의 보조 데이터 스트림으로서가 아니라 비디오 이미지 내에 인코딩된) 비디오 신호 내에 메타데이터를 유리하게 내장한다. 따라서, 본 개시내용은 위에서 논의된 아키텍처 로드블록을 성공적으로 극복할 뿐만 아니라, 시청자에 대한 가능한 주의 산만을 피하기 위해 내장된 워터마크의 가시성을 제한한다. 도 1a에 도시된 전자 시스템(110)의 구현 및 이용은 도 1b-8과 관련하여 아래에서 더 논의된다.
이제 도 1b를 참조하면, 본 개시내용의 일 실시예에 따른, 도 1a의 텔레비전(122)으로부터의 디스플레이(138)의 도면이 도시되어 있다. 도 1b의 실시예는 예시의 목적으로 제시되어 있고, 대안의 실시예에서, 디스플레이(138)는 도 1b의 실시예와 관련하여 논의된 이러한 컴포넌트들 및 구성들 중 일부에 부가하여 또는 그 대신에 컴포넌트들 및 구성들을 사용하여 구현될 수 있다.
도 1b의 실시예에서, 디스플레이(138)는 전형적으로 콘텐츠 소스(114)(도 1a)에 의해 제공된 비디오 데이터를 표시하는 메인 스크린 영역을 포함한다. 도 1b의 실시예에서, 디스플레이(138)는 또한 임의의 원하는 타입의 부가 정보를 제공하기 위해 디스플레이(138) 상에 표시되는 별도의 영역에 상주하는 DO(144)를 포함한다. 다양한 상이한 실시예들에서, DO(144)는 임의의 원하는 형상 및 크기로 구현될 수 있고, 적절한 위치에 표시될 수 있다. 또한, 임의의 원하는 수의 상이한 DO들은 동등하게 고려되며, 임의의 주어진 시간에 디스플레이 상의 다수의 DO의 가능성을 포함한다.
도 1b의 실시예에서, 디스플레이(138)는 디스플레이(138) 상에 현재 표시되고 있는 비디오 데이터와 관련되는(동기화되는) 정보를 제공하는 기능을 하는 동기화된 DO들을 지원한다. 예를 들어, DO(144)는 텔레비전 프로그램 도중에 경제 뉴스 또는 투자 토픽에 관한 시청자에게 특히 관련된 금융 정보(예컨대, 시청자의 투자 포트폴리오)를 표시하는 데 이용될 수 있다. 다른 예에서, DO(144)은 텔레비전으로 방송된 자동차 경주 도중에 특정의 경주용 자동차 운전자, 경주용 자동차, 또는 일반 자동차 경주에 관한 관련 정보 또는 통계를 표시하는 데 이용될 수 있다. 동기화된 DO들(144)의 구현 및 이용에 관한 부가적인 상세는 도 2-8과 관련하여 이하에서 더 논의된다.
이제 도 2를 참조하면, 본 개시내용에 따른, 도 1a의 콘텐츠 소스(114)의 일 실시예에 대한 블록도가 도시된다. 도 2의 실시예에서, 콘텐츠 소스(114)는 중앙 처리 유닛(CPU)(212), 소스 메모리(220), 및 입/출력 인터페이스들(I/O 인터페이스들)(224)을 포함할 수 있지만, 이들로 제한되지 않는다. 대안의 실시예에서, 콘텐츠 소스(114)는 도 2의 실시예와 관련하여 논의된 이러한 컴포넌트들 및 구성들에 부가하여 또는 그 대신에 컴포넌트들 및 구성들을 사용하여 구현될 수 있다. 게다가, 콘텐츠 소스(114)는 임의의 다른 원하는 타입의 전자 디바이스 또는 엔티티로서 대안적으로 구현될 수 있다.
도 2의 실시예에서, CPU(212)는, 콘텐츠 소스(114)의 동작을 제어하고 관리하기 위해 소프트웨어 명령어를 바람직하게 실행하는 임의의 적절하고 호환 가능한 마이크로프로세서 디바이스(들)를 포함하도록 구현될 수 있다. 도 2의 실시예에서, 소스 메모리(220)는 판독 전용 메모리(read-only memory)(ROM), 랜덤 액세스 메모리(random-access memory)(RAM), 및 다양한 타입의 비휘발성 메모리(예를 들어, 플로피 디스크 또는 하드 디스크)를 포함하지만 이들에 제한되지 않는 원하는 저장 디바이스들의 임의의 조합을 포함하도록 구현될 수 있다. 소스 메모리(220)의 콘텐츠 및 기능성은 도 3 및 도 4와 관련하여 이하에서 더 논의된다.
도 2의 실시예에서, I/O 인터페이스들(224)은 콘텐츠 소스(114)에 대한 임의의 요구된 타입의 정보를 수신 및/또는 송신하기 위해 하나 이상의 입력 및/또는 출력 인터페이스를 포함할 수 있다. 예를 들어, 도 2의 실시예에서, 콘텐츠 소스(114)는 전자 시스템(110)(도 1a) 내의 다른 엔티티와 통신하기 위해 I/O 인터페이스들(224)을 이용할 수 있다. 또한, 시스템 사용자는 임의의 적절하고 효과적인 기술을 이용하여 콘텐츠 소스(114)와 통신하기 위해 I/O 인터페이스들(224)을 이용할 수 있다. 콘텐츠 소스(114)에 관한 부가적인 상세는 도 3 및 도 4와 관련하여 이하에서 더 논의된다.
이제 도 3을 참조하면, 본 개시내용에 따른, 도 2의 소스 메모리(220)의 일 실시예에 대한 블록도가 도시되어 있다. 도 3의 실시예에서, 소스 메모리(220)는 하나 이상의 소스 애플리케이션(312), 비디오 데이터(316), 오디오 데이터(318), 인코더(320), 메타데이터(322), 메타데이터 관리자(324) 및 기타 정보(328)를 포함하지만, 이들에 제한되지 않는다. 대안의 실시예에서, 소스 메모리(220)는 도 3의 실시예와 관련하여 논의된 이러한 컴포넌트들에 부가하여 또는 그 대신에 컴포넌트들을 포함할 수 있다.
도 3의 실시예에서, 소스 애플리케이션(들)(312)은 콘텐츠 소스(114)에 대한 다양한 기능 및 동작을 수행하기 위해 CPU(212)(도 2)에 의해 바람직하게 실행되는 프로그램 명령어를 포함할 수 있다. 소스 애플리케이션(들)(312)의 특정의 특성 및 기능성은 대응하는 콘텐츠 소스(114)의 특정의 타입 및 특정의 기능성과 같은 인자들에 따라 바람직하게 변한다. 도 3의 실시예에서, 비디오 데이터(316)는 텔레비전(122)(도 1a) 상에 표시를 위한 또는 그 내에서 처리를 위한 임의의 적절한 정보 또는 데이터를 포함할 수 있다. 유사하게, 오디오 데이터(318)는 텔레비전(122)(도 1a)에 의한 재생을 위한 임의의 적절한 정보 또는 데이터를 포함할 수 있다.
도 3의 실시예에서, 인코더(320)는 비디오 데이터(316) 및 오디오 데이터(318)를 텔레비전(122)에 배신하기 위한 압축된 배신 멀티플렉스로 변환하도록 구성된다. 도 3의 실시예에서, 메타데이터 관리자(324)는, 본 개시내용에 따라, 메타데이터(322)를 생성하고 메타데이터(322)를 비디오 데이터(316)의 필수 부분으로서 내장하기 위한 다양한 기능을 조정하고 관리한다. 기타 정보(328)는 콘텐츠 소스(114)에 의한 이용을 위한 임의의 부가 정보를 포함할 수 있다.
도 3의 실시예에 있어서, 본 개시내용은 주로 소프트웨어로서 구현되는 것으로 개시되고 논의된다. 그러나, 대안의 실시예에서, 본 개시내용의 기능들 중 일부 또는 전부는, 본 명세서에서 논의되는 소프트웨어 모듈들의 이러한 기능들과 동등한 다양한 기능들을 수행하기 위해 구성되는 적절한 전자 하드웨어 회로들에 의해 수행될 수 있다. 메타데이터 관리자(324) 및 메타데이터(322)의 기능성에 관한 부가적인 상세는 도 4, 도 7 및 도 8과 관련하여 이하에서 더 논의된다.
이제 도 4를 참조하면, 본 개시내용의 일 실시예에 따른, 도 3의 메타데이터(322)의 블록도가 도시되어 있다. 도 4의 실시예에서, 메타데이터(322)는 트리거 데이터(412), DO 콘텐츠(416), 동기화(sync) 데이터(418), 콘텐츠 ID(identification) 데이터(420), 포인터 데이터(422), 및 기타 정보(424)를 포함할 수 있지만, 이들로 제한되지 않는다. 대안의 실시예에서, 메타데이터(322)는 도 4의 실시예와 관련하여 논의된 이러한 컴포넌트들 및 기능성들에 부가하여 또는 그 대신에 다양한 컴포넌트 및 기능성들을 사용하여 구현될 수 있다.
도 4의 실시예에서, 트리거 데이터(412)는 DO(144)(도 1b)와 관련된 프로세스들을 제어하기 위한 임의의 타입의 정보를 포함할 수 있다. 예를 들어, 트리거 데이터(412)는 시각적 외관 및 거동과 관련하여 DO(144)를 정의하는 데이터, DO에 의해 제시된 정보(예를 들어, 판독 값들), DO 그래픽 상태들(예를 들어, 컬러들, 레벨들, 또는 설정들), 및 최적의 DO 위치, 형상, 크기, 및 디스플레이 시간을 포함할 수 있지만, 이들로 제한되지 않는다. 특정 실시예에서, 트리거 데이터(412)는 위에 언급한 바와 같이, ATSC 후보 표준 A/105:2014에 정의된 바와 같이, 대화형 서비스를 지원하는 다양한 타이밍 관련 시그널링 기능을 수행하는 하나 이상의 트리거를 포함한다.
도 4의 실시예에서, DO 콘텐츠(416)는 DO(144)에 표시하기 위한 임의의 콘텐츠 데이터를 포함할 수 있다. 특정 실시예에서, DO 콘텐츠(416)는 메타데이터(322) 이외의 소스 또는 엔티티로부터 대안적으로 획득될 수 있다. 도 4의 실시예에서, 동기화(sync) 데이터(418)는 메타데이터(322)가 비디오 데이터(316)에 내장되어 있는 동안 텔레비전(122)이 메타데이터(322)를 검출할 수 있게 허용하기 위한 임의의 적절한 수단을 포함할 수 있다. 특정 실시예에서, sync 데이터(418)는 비디오 데이터(316) 내의 메타데이터(322)의 특정 위치를 나타내는 미리 정의된 식별 패턴을 포함할 수 있다.
도 4의 실시예에서, 메타데이터(322)는 비디오의 휘도(밝기) 값의 사용에 의해 비디오 내에 인코딩될 수 있다. 예를 들어, 하나의 비디오 라인 상에서, 미리 결정된 수(예를 들어, 8)의 픽셀들의 각각의 세트는 하나의 "심벌"로 인코딩될 수 있으며, 여기서 각 픽셀의 휘도 값은 4개의 값들(예를 들어, 0-3) 중 하나로 설정된다. 이 경우, 각 심벌은 2비트의 정보를 운반한다. 다른 실시예에서, 픽셀들의 각각의 세트는 2개의 레벨 중 하나(예를 들어, 0 또는 1)로 설정될 수 있다. 그 경우, 각각의 심벌은 1 비트의 정보를 운반한다.
일 실시예에서, 미리 결정된 수(예를 들어, 8 또는 16)의 심벌들은, 비디오 프레임이 마킹되어 있는지를 나타내는데 사용되는 미리 결정된 런-인 패턴(run-in pattern)을 정의하는데 사용된다. 예를 들어, 각각의 픽셀이 4개의 값 중 하나로 설정되는 실시예에서, 처음 8개의 심벌은 고정된 패턴 [3, 3, 0, 0, 2, 1, 3, 0]으로 설정되어, 비디오가 워터마크를 포함하고 있는지를 검출기가 빠르게 식별하게 할 수 있다. 각각의 심벌이 1비트에 대응할 때, 고정된 패턴은 [1, 1, 1, 1, 0, 0, 0, 0, 1, 0, 0, 1, 0, 1, 1, 0]일 수 있고, 심벌들의 수는 (예를 들어, 16으로) 증가된다. 또한, 상이한 런-인 패턴들은, 1.0 버전의 구현이 버전 1.0 런-인 패턴을 포함하지 않는 임의의 데이터를 폐기한다고 보장함으로써 역 호환성이 달성될 수 있도록 상이한 프로토콜 버전들에 대해 사용될 수 있다.
도 4의 실시예에서, 콘텐츠 ID 데이터(420)는 주어진 대응하는 프로그램의 특정 콘텐츠를 식별하기 위한 임의의 적절한 정보를 포함할 수 있다. 일 실시예에서, 콘텐츠 ID 데이터(420)는 식별자로서 국제 표준 시청각 번호(International Standard Audio-Visual Number)(ISAN)를 포함할 수 있다. 다른 실시예에서, 콘텐츠 ID 데이터(420)는 엔터테인먼트 산업 데이터 레지스트리(Entertainment Industry Data Registry)(EIDR) 코드 및/또는 미디어 시간을 포함할 수 있다. 예를 들어, 콘텐츠 ID 데이터(420)는 12바이트 EIDR 코드 및 2바이트 미디어 시간을 운반하도록 설계된 콘텐츠 ID 메시지를 포함할 수 있다. 콘텐츠 ID 메시지의 예시적인 비트스트림 신택스는 다음과 같다:
Figure 112017074921511-pct00001
table_id - 값 0x01로 설정한다. 뒤따르는 데이터를 content_id_message()로서 식별한다.
table_length - 뒤따르는 바이트 수를 CRC의 끝에 표시한다. 이 경우, 값은 18이다.
EIDR - 이 콘텐츠 아이템에 대한 엔터테인먼트 산업 데이터 레지스트리(EIDR) 코드의 값을 운반하도록 의도된 96비트 값.
media_time - 콘텐츠 내의 미디어 시간을 초 단위로 표현하는 16비트 수이며, 여기서 값 0은 콘텐츠 아이템의 제1 초(first second)를 나타낸다.
CRC _32 - 전체 메시지에 대한 32비트 CRC 체크섬(CRC_32 필드 자체까지는 포함하지 않음). 예시적인 생성 다항식은 1 + x + x2 + x4 + x5 + x7 + x8 + x10 + x11 + x12 + x16 + x22 + x23 + x26이다.
일 실시예에서, 콘텐츠 ID 메시지는 상업 자료에 대한 Ad-ID 필드를 추가로 또는 대안적으로 포함할 수 있다. Ad-ID 필드는 콘텐츠와 연관된 Ad-ID 코드를 표현하는 96비트 필드이다.
도 4의 실시예에서, 포인터 데이터(422)는 텔레비전(122)이 동기화된 DO들(144)을 생성하는데 사용하기 위한 부가 정보(예를 들어, DO 콘텐츠 또는 트리거 데이터)를 찾아내어 획득하는데 이용하는 임의의 타입의 요구된 정보를 포함할 수 있다. 예를 들어, 포인터 데이터(422)는 현재 표시된 비디오 데이터(316)에 관한 추가 정보가 발견될 수 있는 인터넷 위치를 식별하는 URL을 포함할 수 있지만, 이로 제한되지 않는다. URL은 광고되고 있는 제품에 관한 추가 정보를 제공하는 서버(130)(도 1a) 상의 웹 사이트 또는 다른 곳, 에피소드(episode) 또는 시리즈의 홈 페이지의 URL, 시청자가 프로그램에 관한 서비스 또는 투표를 위해 등록할 수 있는 웹 사이트 등을 표현할 수 있다.
도 4의 실시예에서, 기타 정보(424)는 텔레비전(122)에 의한 이용을 위한 임의의 부가 정보를 포함할 수 있다. 예를 들어, 특정 실시예에서, 기타 정보(424)는 하나 이상의 스크립트 또는 실행가능 프로그램을 포함할 수 있다. 일 실시예에서, 기타 정보(424)는 프레임 카운트 메시지를 포함한다. 프레임 카운트 메시지의 목적은 콘텐츠 ID 메시지의 media_time 필드에 주어진 타이밍에 미세 입도(finer granularity)를 제공하고 콘텐츠의 원래 프레임 레이트(워터마크 적용 당시)를 나타내는 것이다. 프레임 카운트 메시지의 예시적인 비트 스트림 신택스는 다음과 같다:
Figure 112017074921511-pct00002
table_id - 값 0x02로 설정한다. 뒤따르는 데이터를 frame_count_message()로서 식별한다.
table_length - 뒤따라는 바이트 수를 나타낸다. 이 경우, 값은 6으로 설정된다.
original_frame_rate - 워터마크가 적용될 때의 원래 콘텐츠의 프레임 레이트(초당 프레임 수)를 나타내는 8비트 부호 없는 정수. 이 값은 애니메이트된 콘텐츠의 경우 24로 설정되고 다른 콘텐츠 타입의 경우 30으로 설정된다.
frame - media_time에 의해 식별되는 1초 기간 내의 프레임 번호를 나타내는 8비트 부호 없는 정수. 카운트는 0 기반이다.
CRC _32 - 전체 메시지에 대한 32 비트 CRC 체크섬(CRC_32 필드 자체까지는 포함하지 않음). 예시적인 생성 다항식은 1 + x + x2 + x4 + x5 + x7 + x8 + x10 + x11 + x12 + x16 + x22 + x23 + x26이다.
메타데이터(322)의 생성, 배신 및 이용에 관한 부가적인 상세는 도 7 및 도 8과 관련하여 이하에서 더 논의된다.
이제 도 5를 참조하면, 본 개시내용에 따른, 도 1a의 텔레비전(TV)(122)의 일 실시예에 대한 블록도가 도시되어 있다. 도 5의 실시예에서, TV(122)는 중앙 처리 유닛(CPU)(512), 디스플레이(138), TV 메모리(520), 및 입/출력 인터페이스들(I/O 인터페이스들)(524)을 포함할 수 있지만, 이들로 제한되지 않는다. 대안의 실시예에서, TV(122)는 도 5의 실시예와 관련하여 논의된 그러한 컴포넌트들 및 구성들에 부가하여 또는 그 대신에 컴포넌트들 및 구성들을 사용하여 구현될 수 있다. 게다가, TV(122)는 임의의 다른 원하는 타입의 전자 디바이스 또는 엔티티로서 대안적으로 구현될 수 있다.
도 5의 실시예에서, CPU(512)는 TV(122)의 동작을 제어하고 관리하기 위해 소프트웨어 명령어를 바람직하게 실행하는 임의의 적절하고 호환 가능한 마이크로프로세서 디바이스(들)를 포함하도록 구현될 수 있다. 도 5의 디스플레이(138)는 다양한 정보를 디바이스 사용자에게 표시하기 위한 적절한 스크린을 갖는 액정 디스플레이 디바이스를 포함하는 임의의 효과적인 타입의 디스플레이 기술을 포함할 수 있다. 도 5의 실시예에서, TV 메모리(520)는 판독 전용 메모리(ROM), 랜덤 액세스 메모리(RAM), 및 다양한 타입의 비휘발성 메모리(예를 들어, 플로피 디스크 또는 하드 디스크)를 포함하지만 이들로 제한되지 않는 원하는 저장 디바이스들의 임의의 조합을 포함하도록 구현될 수 있다. TV 메모리(520)의 콘텐츠 및 기능성은 도 6과 관련하여 이하에서 더 논의된다.
도 5의 실시예에서, I/O 인터페이스들(524)은 TV(122)에 대한 임의의 요구된 타입의 정보를 수신 및/또는 송신하기 위해 하나 이상의 입력 및/또는 출력 인터페이스를 포함할 수 있다. 예를 들어, 도 5의 실시예에서, TV(122)는 전자 시스템(110)(도 1a) 내의 다른 엔티티와 통신하기 위해 I/O 인터페이스들(524)을 이용할 수 있다. 또한, 시스템 사용자는 임의의 적절하고 효과적인 기술을 이용하여 TV(122)와 통신하기 위해 I/O 인터페이스들(524)을 이용할 수 있다. TV(122)에 관한 부가적인 상세는 도 6-8과 관련하여 이하에서 더 논의된다.
이제 도 6을 참조하면, 본 개시내용에 따른, 도 5의 TV 메모리(520)의 일 실시예에 대한 블록도가 도시되어 있다. 도 6의 실시예에서, TV 메모리(520)는 하나 이상의 TV 애플리케이션(612), 비디오 데이터(316), 오디오 데이터(318), 검출 모듈(620), 추출 모듈(622), 메타데이터 모듈(624), 메타데이터(322), 및 기타 정보(628)를 포함하지만 이들로 제한되지 않는다. 대안의 실시예에서, TV 메모리(520)는 도 6의 실시예와 관련하여 논의된 그러한 컴포넌트들에 부가하여 또는 그 대신에 컴포넌트들을 포함할 수 있다.
도 6의 실시예에서, TV 애플리케이션(들)(612)은 TV(122)에 대한 다양한 기능 및 동작을 수행하기 위해 CPU(512)(도 5)에 의해 바람직하게 실행되는 프로그램 명령어를 포함할 수 있다. TV 애플리케이션(들)(612)의 특정의 특성 및 기능성은 대응하는 TV(122)의 특정의 타입 및 특정의 기능성과 같은 인자들에 따라 바람직하게 변한다. 도 6의 실시예에서, 비디오 데이터(316)는 텔레비전(122)(도 1a) 상에 표시하기 위한 임의의 적절한 정보 또는 데이터를 포함할 수 있다. 유사하게, 오디오 데이터(318)는 텔레비전(122)(도 1a)에 의한 재생을 위한 임의의 적절한 정보 또는 데이터를 포함할 수 있다.
도 6의 실시예에서, 검출 모듈(620)은, 앞서 논의된 바와 같이, 비디오 데이터(316)에 내장된 메타데이터(322)를 검출하고 찾아내기 위해 TV(122)에 의해 이용될 수 있다. 도 6의 실시예에서, 추출 모듈(622)은 검출된 메타데이터(322)를 비디오 데이터(316)로부터 제거하기 위해 TV(122)에 의해 이용될 수 있다. 도 6의 실시예에서, 메타데이터 모듈(624)은 본 개시내용에 따른, 동기화된 DO들(144)(도 1b) 또는 다른 TV 애플리케이션들을 효과적으로 지원하기 위해 추출된 메타데이터(322)를 처리하기 위한 다양한 기능을 조정 및 관리한다. 기타 정보(628)는 TV(122)에 의한 이용을 위한 임의의 부가 정보를 포함할 수 있다.
도 6의 실시예에서, 본 개시내용은 주로 소프트웨어로서 구현되는 것으로 개시되고 논의되어 있다. 그러나, 대안의 실시예에서, 본 개시내용의 기능들 중 일부 또는 전부는, 본 명세서에서 논의되는 소프트웨어 모듈들의 기능들과 동등한 다양한 기능을 수행하기 위해 구성된 적절한 전자 하드웨어 회로들에 의해 수행될 수 있다. 메타데이터 모듈(624) 및 메타데이터(322)의 기능성에 관한 부가적인 세부 사항은 도 7 및 8과 관련하여 이하에서 더 논의된다.
본 개시내용의 실시예들은 비디오 프레임의 휘도 값들을 사용하여 메타데이터(322)를 워터마크로서 내장한다. 휘도 값들은 [16, 235] 범위 내에서 바인딩된다. ITU-R 권고 BT.709에 정의된 바와 같이(그 전체 내용은 참고로 본 명세서에 포함됨), 휘도 값 16은 흑색에 대응하고, 휘도 값 235는 백색에 대응한다. 하나의 워터마크 데이터 심벌은 M 개의 픽셀(M은 전형적으로 6, 8 또는 16임)로 인코딩된다. 각각의 심벌은 하나 이상의 데이터 비트를 인코딩한다. 심벌당 1비트 인코딩이 사용될 때, 각각의 픽셀은, 심벌 값들이 0 또는 100% 중 어느 하나가 될 수 있고 50% 휘도의 임계치가 '1' 비트를 '0' 비트와 구별하는데 사용되도록 2가지 가능한 값 중 하나를 가질 수 있다. 심벌당 2비트 코딩이 사용될 때, 각각의 픽셀은, 심벌 값들이 0, 33.33%, 66.67% 또는 100% 휘도일 수 있고 16.67%, 50% 및 83.33%의 임계치들이 사용될 수 있도록 4가지 가능한 값 중 하나를 갖는다. 대안적으로, 가시성을 감소시키기 위해 더 낮은 휘도 값들이 사용될 수 있다. 과도한 압축 또는 비디오 트랜스코딩에 대한 강건성(robustness) 대 가시성 간의 트레이드오프(tradeoff)는 휘도 범위들 및 값들의 선택에 의해 이루어질 수 있다.
심벌당 2-비트 코딩의 일례가 도 9에 도시되어 있다. 워터마크 데이터를 표현하는 심벌들은 4개의 상이한 등 간격의 휘도 값 - 16, 89, 162 및 235(십진수) - 을 사용한다. 디코딩을 위한 임계치들은 도 9에 도시되어 있다. 휘도가 42 이하이면 심벌 값 0이 검출되고, 휘도가 43 내지 127 범위에 있으면 값 1이 검출되고, 휘도가 128 내지 212 범위에 있으면 값 2가 검출되고, 휘도가 213 이상이면 값 3이 검출된다. 대부분의 경우 텔레비전은 비디오의 맨 위 또는 맨 아래의 몇 개의 라인을 표시하지 않지만, 이러한 휘도 인코딩 방식을 사용하면 생기는 문제는 워터마크에 의해 점유된 비디오 프레임의 일부가 TV(122) 상에 표시되는 경우 내장된 워터마크가 시청자에게 보일 수 있다는 것이다.
워터마크의 가시성을 감소시키기 위해, 본 개시내용의 실시예는, (1) 워터마크의 데이터 용량을 감소시키는 단계; (2) "흑색" 아래의 휘도 값을 사용하는 단계; 및 (3) 워터마크가 변화하는 레이트(예를 들어, 프레임당이 아닌 초당 1회)를 감소시키는 단계를 포함하는 상이한 방법들 중 하나 또는 그 조합을 사용한다.
특정 실시예에서, 메타데이터는 비디오 데이터의 라인 1에 내장된다. 라인 1에서의 비디오는 N 개의 인코딩된 픽셀(HD 또는 UHD 콘텐츠의 경우, 일반적으로 1280, 1920 또는 3840)로 구성된다. 전술한 바와 같이, 하나의 워터마크 데이터 심벌은 M 개의 픽셀(M은 전형적으로 6, 8 또는 16임)로 인코딩된다. 또한, 일 실시예에서, 동일한 메타데이터는 인코딩 또는 재-인코딩에서 도입될 수 있는 에러들에 기인한 더 양호한 강건성을 위해 라인 2에 또한 내장된다. 비디오 인코딩의 특성으로 인해, 라인 1 상의 메타데이터의 무결성은, 라인 2 상에서 동일한 데이터가 반복되면, 향상되는 것으로 발견되었다.
내장된 메타데이터의 가시성을 감소시키기 위해, 일 실시예에서, 워터마크의 데이터 용량은 감소될 수 있다. 예를 들어, 라인당 수평 픽셀 수가 1920이고 심벌당 픽셀 수가 8이고 심벌당 인코딩된 비트 수가 2일 때, 60바이트의 데이터는 라인당 인코딩될 수 있다. 그러나, 심벌당 2비트를 인코딩하기 위해서는, 더 넓은 범위의 휘도 값들이 사용되어야 한다. 워터마크의 가시성을 감소시키기 위해, 워터마크의 데이터 용량은 심벌 값을 식별하는데 요구되는 최대 휘도 값이, 예를 들어 값 235로부터 감소되도록 감소될 수 있다. 예를 들어, 16, 89, 162 및 235 대신에 휘도 값들 16 및 89는 심볼당 인코딩된 비트 수가 1로 감소될 때 워터마크를 인코딩하는데 사용될 수 있으며, 결과적으로 30바이트의 데이터가 라인당 인코딩된다.
일 실시예에서, 흑색 아래의 휘도 값을 사용하는 것은 워터마크의 가시성을 감소시킨다. 비디오 표준은, 8비트로 인코딩할 때 휘도 값의 범위를 16(흑색)에서 235(백색)까지로 지정한다. 0의 휘도 값(또는 16 미만의 임의의 다른 값)은 트랜스코딩을 견딜 수 있다. 16 대신에 0의 최소 휘도 값을 사용하는 것은 워터마크를 인코딩하는데 필요한 최대 휘도 값에서의 감소를 허용하고 강건성을 향상시킨다. 예를 들어, 심벌당 1비트 인코딩의 경우, 16에서 89까지의 범위는 강건성의 손실 없이 0에서 73까지로 감소될 수 있다. 일 실시예에서, 휘도 범위는 심벌당 1비트 인코딩에 대해 0 내지 42로 설정된다. 휘도 값 42는 거의 인지할 수 없는 어두운 회색의 레벨이다. 그러나, 특정 실시예에서는 범위가 16 미만의 값에서 시작하는 임의의 휘도 값 범위가 설정될 수 있다. 특정 실시예에서, 235 초과의 휘도 값은 휘도 값의 범위를 더 높은 값으로 인코딩 또는 시프트하는 데 사용되는 휘도 값의 범위를 증가시키는 데 사용될 수 있다.
일 실시예에서, 워터마크가 프레임마다 변화하는 레이트는 비디오 데이터(316)에 내장된 워터마크의 가시성을 감소시키기 위해 감소된다. 예를 들어, 동일한 워터마크는 프레임당 한번 변화하는 대신에, 미리 결정된 수의 프레임에 또는 변화되기 전의 미리 결정된 시간량(예를 들어, 1초) 동안 내장될 수 있다. 이는 데이터가 송신되는 레이트를 감소시키지만, 변화의 레이트를 감소시키는 것은 워터마크가 디스플레이의 가시 영역 내에 있을 때 자주 변화하는 픽셀 휘도 값으로 인해 발생할 수 있는 시청자에 대한 가능한 주의 산만을 감소시킨다.
1개의 심벌을 표현하는 수평 픽셀 수는 수평 해상도에 따라 변한다. 일 실시예에서, 3840 수평 해상도를 위한 심벌당 16개의 픽셀은 4K에서 2K로의 다운-해상도 동안 비디오 워터마크가 보존될 수 있도록 하는데 이용된다.
이제 도 7a 및 7b를 참조하면, 비디오 데이터(316)에 내장된 메타데이터(322)의 도면들이 본 개시내용의 두 개의 상이한 실시예에 따라 도시되어 있다. 도 7a 및 도 7b는 TV(122)(도 1a)로부터의 디스플레이(138)의 정면도를 제시하고 있다. 도 7a 및 도 7b의 실시예는 예시를 위해 제시되어 있고, 대안의 실시예에서, 메타데이터(322)는 도 7a 및 도 7b의 실시예와 관련하여 논의된 그러한 기술들 및 구성들 중 일부에 부가하여 또는 그 대신에 기술들 및 구성들을 사용하여 내장될 수 있다. 예를 들어, 메타데이터(322)는 일부 실시예에서 디스플레이의 최하부에 배치될 수 있다.
도 7a의 실시예에서, 디스플레이(138)는 전형적으로 콘텐츠 소스(114)(도 1a)에 의해 제공된 비디오 데이터(316)를 표시하는 메인 스크린 영역을 포함한다. 도 7a의 실시예에서, 디스플레이(138) 상의 표시된 비디오 데이터(316)는 또한 디스플레이(138)의 눈에 띄지 않는 영역(unobtrusive area)에 위치하는 내장된 메타데이터(322)를 포함한다. 다양한 상이한 실시예에서, 메타데이터(322)는 임의의 원하는 형상 또는 크기로 구현될 수 있으며, 디스플레이(138) 상의 임의의 적절한 위치(들)에 표시될 수 있다. 예시를 위해, 도 7a에서의 메타데이터(322)의 위치는 얇은 크로스 해치 라인(thin cross-hatched line)으로 표시되어 있다. 그러나, 임의의 효과적인 구성 또는 위치는 메타데이터(322)를 구현하기 위해 동등하게 고려된다.
도 7a의 실시예에서, 메타데이터(322)는 요구된 정보(도 4 참조)를 임의의 효과적인 방식으로 표현하도록 인코딩될 수 있다. 예를 들어, 특정 실시예에서, 메타데이터(322)는 비디오 신호의 수직 블랭킹 구간(vertical blanking interval)(VBI)의 영역 내에 또는 그 부근에 위치한 디지털 비디오 정보의 하나 이상의 수평 라인으로서 포매팅될 수 있다. 디지털 텔레비전 신호가 종종 주사선당 1280 내지 1920개의 수평 픽셀들로 인코딩되기 때문에, 메타데이터(322)에 대한 도 7a의 VBI 구성은 상당한 양의 디지털 정보를 TV(122)에 제공할 수 있다.
본 개시내용은 따라서, 활성 비디오의 일부(어쩌면 시청자에게 보임)가 메타데이터(322)를 전달하는데 사용되도록, 비디오 데이터(316)에서 메타데이터(322)를 위장하는 방법을 지원한다. 게다가, 본 개시내용은 비디오 압축 및 압축 해제를 견디기 위해 비디오 메타데이터(322)에 대한 인코딩 포맷을 표준화하는 것을 포함한다. 본 개시내용은, 메타데이터(322)가 과도한 CPU 오버헤드 없이 표준화된 방식으로 복원(TV(122)에 의해 검출, 추출 및 처리]될 수 있도록 메타데이터(322)를 비디오 이미지에 내장하는 것을 추가로 지원한다. 메타데이터(322)의 구현 및 이용에 대해서는 도 8a-8c와 관련하여 이하에서 더 논의된다.
도 7b의 실시예에서, 디스플레이(138)는 전형적으로 콘텐츠 소스(114)(도 1a)에 의해 제공되는 비디오 데이터(316)를 표시하는 메인 스크린 영역을 포함한다. 도 7b의 실시예에서, 디스플레이(138) 상의 표시된 비디오 데이터(316)는 또한 바람직하게 디스플레이(138)의 눈에 띄지 않는 영역에 위치하는 내장된 메타데이터(322)를 포함한다. 다양한 상이한 실시예에서, 메타데이터(322)는 임의의 원하는 형상 또는 크기로 구현될 수 있고, 디스플레이(138) 상의 임의의 적절한 위치(들)에 표시될 수 있다. 예시의 목적으로, 도 7b에서의 메타데이터(322)의 위치는 작은 크로스 해치 직사각형으로 표시되어 있다. 그러나, 임의의 효과적인 구성 또는 위치는 메타데이터(322)를 구현하기 위해 동등하게 고려된다.
도 7b의 실시예에서, 메타데이터(322)는 임의의 요구된 정보(도 4 참조)를 임의의 효과적인 방식으로 표현하도록 인코딩될 수 있다. 예를 들어, 특정 실시예에서, 메타데이터(322)는 종래의 또는 향상된 바코드 기술을 이용하여 포매팅될 수 있다. 환언하면, 메타데이터(322)는 표시된 비디오 데이터(316)의 코너에 또는 가장자리(edge)에 내장되는 비디오 2차원 바코드로서 효과적으로 포매팅될 수 있다. 게다가, 메타데이터(322)의 바코드 또는 다른 포매팅은 "버그(bug)"로 알려진 작은 그래픽 로고 아이콘의 일부로서 표시될 수 있다. 또한, 다양한 상이한 실시예들에서, 메타데이터(322)는 임의의 효과적인 기술을 이용함으로써 인코딩되거나 표시될 수 있다. 메타데이터(322)의 이러한 인코딩은 상당한 양의 정보를 표현할 수 있고, 꽤 작고 및 조밀할 수 있는데, 그 이유는 TV(122)가 비디오 메모리 내의 비디오 데이터(316)를 처리하는 것에 의해 메타데이터(322)가 판독될 것이기 때문이다. 인쇄된 바코드가 레이저 스캐너에 의해 판독되도록 최적화되어 있는 경우, 메타데이터(322)용으로 사용되는 비디오 바코드의 타입은 (픽셀 휘도 또는 색차 샘플로서) TV(122)에 의해 직접 처리되는 디지털 비디오 신호에 내장된다.
특정 실시예에서, 비디오 압축에서의 양자화 에러는 어쩌면 비디오 바코드를 없애버릴 수 있다(따라서, 빠르게 움직이는, 압축하기 어려운 비디오 시퀀스 내에서 발생하는 바코드는 살아남지 못할 수 있다). 그렇지만, 바코드가 얼마의 시간(몇 초) 동안 스크린 상에 남아 있는 경우, 그 문제는 완화된다. 최종 바코드 이미지는 높은 콘트라스트(백색 배경 상의 흑색 라인)로 표시될 필요가 없을 수 있는데, 그 이유는 TV(122)가 필터링 메커니즘을 통해 정보를 추출할 수 있을 것이기 때문이다. 바코드는 따라서, (신뢰성 있는 추출을 위해 충분한 콘트라스트가 존재하는 한) 다양한 회색 음영으로 인코딩될 수 있다. 예를 들어, 전술한 바와 같이, 바코드는 심벌당 1비트 인코딩 및/또는 감소된 변화 레이트를 사용하여 16 미만의 휘도 값을 사용하여 표시될 수 있다.
전술한 바와 같이, 메타데이터(322)는 그래픽 로고 아이콘("버그")과 관련하여 자막 또는 경계로서 표시될 수 있거나, 이미지의 맨 가장자리들 중 하나 이상의 가장자리에 위치될 수 있다(왜냐하면 이들이 보통 표시되기 전에 크로핑되고(cropped) 어느 경우든지 덜 눈에 띄기 때문임). 메타데이터(322)의 비트들은, 그들의 위치의 패턴을 TV(122)가 사전에 알고 있는 경우, 비디오 프레임의 영역에 걸쳐 공간적으로 확산되어 있을 수 있다. 심지어 적은 양의 메타데이터(322) - 예를 들어, 도 4의 콘텐츠 ID 데이터(420) 또는 포인터 데이터(422) - 라도 사용자 경험을 향상시키는 데 아주 도움이 될 수 있는데, 그 이유는, 메타데이터(322) 또는 콘텐츠 데이터를 포함하지만 이들로 제한되지 않는 부가적인 요구된 정보를 획득하기 위해, 이 정보가 웹 서버(130)(도 1a 참조)와의 상호작용을 통해 확장될 수 있기 때문이다.
이제 도 8a-8c를 참조하면, 본 개시내용의 일 실시예에 따른, 비디오 데이터(316)에 내장된 메타데이터(322)를 배신하는 방법 단계들의 흐름도가 도시되어 있다. 도 8의 예는 예시를 위해 제시되어 있고, 대안의 실시예에서, 본 개시내용은 도 8의 실시예와 관련하여 논의된 그러한 단계들 및 시퀀스들 중 일부 이외의 단계들 및 시퀀스들을 이용할 수 있다.
도 8a의 실시예에서, 단계 812에서, 콘텐츠 소스(114) 또는 다른 적절한 엔티티는 비디오 데이터(316) 및 오디오 데이터(318)를 통상적으로 포함하는 A/V 콘텐츠 데이터를 초기에 생성한다. 단계 814에서, 콘텐츠 소스(114) 또는 다른 적절한 엔티티는 그 후 하나 이상의 동기화된 DO(144)를 표시하는 것과 같은, 텔레비전 디바이스(122) 상의 다양한 첨단 대화형 피처들을 지원하기 위해 메타데이터(322)를 생성한다. 단계 816에서, 콘텐츠 소스(114) 또는 다른 적절한 엔티티는 메타데이터(322)를 비디오 데이터(316)에 삽입한다.
콘텐츠 소스(114)에서의 삽입의 예는 도 10에 도시되어 있다. 도 10은, 예를 들어 콘텐츠 소스(114)에 의해 이용되는 예시적인 정보 제공 장치의 기본 도면이다. 일반적으로 말해서, 단일의 콘텐츠 제공자는 하나 이상의 전송 스트림에 걸쳐 다수의 프로그램(예를 들어, 프로그램 A 및 B)을 제공할 수 있다. 예를 들어, 프로그램 A에 대한 오디오, 비디오, 및 자막 데이터는 인코더(1006A)에 제공되고, 반면에 프로그램 B에 대한 오디오, 비디오, 및 자막 데이터는 인코더(1006B)에 제공된다. 전송 스트림 멀티플렉서(1008)는, 인코더들(1006A, 1006B)로부터 출력을 수신하고, 지상파, 케이블, 인공위성 방송과 같은 물리적 채널 매체를 통해 배신될 수 있는 출력을 제공한다. 통신 인터페이스(1010)(예를 들어, 방송 송신기)는 전송 스트림 멀티플렉서로부터의 출력을, 물리적 채널 매체를 통해 배신한다.
정보 제공 장치(1000)는 메타데이터 생성기(1002) 및 메타데이터 삽입기(1004)를 더 포함한다. 메타데이터 생성기(1002)는 프로그램 A의 비디오 부분에 내장될 메타데이터를 생성한다.
메타데이터 삽입기(1004)는 생성된 메타데이터를 프로그램 A의 비디오 부분에 내장한다. 특정 실시예들에서, 메타데이터 삽입기(1004)는, 생성된 메타데이터를, 활성 비디오의 하나 이상의 라인(예를 들어, 라인 1, 및 선택적으로는 라인 2)에서의 휘도 값들 내에 인코딩한다. 메타데이터 삽입기(1002)는, 각각의 메타데이터를, 비디오의 상이한 프레임에 또는 하나 이상의 라인 각각에 인코딩한다. 전술한 바와 같이, 메타데이터는 미리 결정된 수의 프레임들 동안 반복될 수 있다.
메타데이터 삽입기(1004)는, 인코딩 또는 재-인코딩에서 도입될 수 있는 에러에 기인하여, 더 양호한 강건성을 위해 생성된 메타데이터의 인코딩을 라인 2에서 선택적으로 반복한다. 비디오 인코딩의 특성으로 인해, 라인 1 상의 메타데이터의 무결성은, 라인 2 상에서 동일한 데이터가 반복되는 경우 향상되는 것으로 발견되었다.
단계 818에서, 콘텐츠 소스(114) 또는 다른 적절한 엔티티는 단계 820에서 압축된 배신 멀티플렉스를 생성하기 위해 오디오 데이터(318) 및 비디오 데이터(316)(내장된 메타데이터(322)를 포함함)를 압축한다. 도 8a의 프로세스는 그 후 연결 문자 "A"를 통해 도 8b의 단계 822로 진행한다.
도 8b의 단계 822에서, 셋톱 박스(118) 또는 다른 적절한 엔티티(예를 들어, 텔레비전)는 콘텐츠 소스(114)에 의해 배신된 배신 멀티플렉스를 수신하고 디멀티플렉싱하여, 압축된 오디오 데이터 및 비디오 데이터를 생성한다. 단계 824에서, 셋톱 박스(118) 또는 다른 적절한 엔티티의 디코더 디바이스는 그 후 압축된 오디오 데이터 및 비디오 데이터를 압축 해제하여, 압축 해제된 오디오 데이터(318) 및 압축 해제된 비디오 데이터(316)(내장된 메타데이터(322)를 포함함)를 생성한다. 단계 826에서, 셋톱 박스(118) 또는 다른 적절한 엔티티는 텔레비전(122)의 디스플레이(138)로 전달하기 위해 오디오 데이터(318) 및 비디오 데이터(316)를 포매팅한다. 도 8b의 프로세스는 그 후 연결 문자 "B"를 통해 도 8c의 단계 828로 진행한다.
도 8c의 단계 828에서, 텔레비전(122) 또는 다른 적절한 엔티티는 압축 해제된 오디오 데이터(318) 및 압축 해제된 비디오 데이터(316)(내장된 메타데이터(322)를 포함함)를 수신하거나 추가로 처리한다. 예를 들어, 텔레비전(122)은 비디오 프레임의 미리 결정된 부분 또는 부분들(예를 들어, 라인 1 및/또는 라인 2) 내의 픽셀들의 휘도 값을 결정한다. 단계 830에서, 텔레비전(122)의 검출 모듈(620)은 비디오 데이터(316)를 스캔하여, 임의의 효과적인 기술을 이용함으로써(예를 들어, 런-인 패턴의 존재를 검출함으로써) 내장된 메타데이터(322)를 검출한다. 일 실시예에서, 비디오 프레임의 미리 결정된 부분에 인코딩된 첫 번째 16개의 심벌(예를 들어, 각각의 심벌이 8개의 픽셀로 표현되고 런-인 패턴이 16개의 심벌로 구성될 때 비디오 프레임의 제1 라인의 첫 번째 128개의 픽셀)은 메타데이터(322)가 비디오 프레임에 내장되었는지를 결정하기 위해 분석된다. 예를 들어, 도 8d의 단계 836에서, 텔레비전(122)은 가능한 런-인 패턴에 대응하는 제1의 미리 결정된 복수의 픽셀(예컨대, 첫 번째 128 픽셀)의 각각의 서브세트(예를 들어, 8개 픽셀의 서브세트)의 휘도 값들을 평균화한다. 심벌 값들은 그 후 단계 838에서 평균 휘도 값들 및 미리 결정된 임계 디코딩 값에 기초하여 결정된다. 예를 들어, 8개의 픽셀이 심벌을 구성할 때, 텔레비전(122)은 심벌을 구성하는 8개의 픽셀에서의 휘도 값을 평균화하고, 휘도 임계 디코딩 값들에 기초하여 심벌이 "1"인지 "0"인지를 결정한다. 예를 들어, 심벌당 1비트 코딩의 경우, 텔레비전(122)은 검출된 평균 휘도가 인코딩 범위의 미리 결정된 백분율(예를 들어, 50%) 이하일 때, 심벌이 "0"이라고 결정하고, 검출된 평균 휘도가 인코딩 범위의 미리 결정된 백분율보다 클 때 "1"이라고 결정한다. 단계 840에서, 텔레비전(122)은 심벌들의 도출된 데이터 값들이 미리 결정된 런-인 패턴(예를 들어, [1, 1, 1, 1, 0, 0, 0, 0, 1, 0, 0, 1, 0, 1, 1, 0])과 일치하는지에 기초하여 메타데이터(322)가 비디오 프레임에 포함되는지를 결정한다. 일치가 검출되면, 텔레비전(122)은 단계 842에서 메타데이터 추출을 진행한다. 일치가 검출되지 않으면, 텔레비전(122)은 다음 비디오 프레임을 대기한다.
단계 832에서, 텔레비전(122)의 추출 모듈(622)은 비디오 데이터(316)로부터 위치 지정된 메타데이터(322)를 추출한다. 일 실시예에서, 텔레비전(122)은 도 8e에 도시된 바와 같이, 콘텐츠의 비디오 프레임의 일부(예를 들어, 제1 라인)의 픽셀들에서의 휘도 값에 기초하여 내장된 메타데이터를 표현하는 워터마크의 심벌 값을 결정한다. 단계 846에서, 텔레비전(122)은 비디오 프레임의 제2의 미리 결정된 복수의 픽셀(예를 들어, 메타데이터(322)에 대응하고 런-인 패턴에 대응하는 픽셀들을 뒤따르는 라인 1 내의 나머지 픽셀들)의 각각의 서브세트의 휘도 값들을 평균화한다. 단계 848에서, 텔레비전(122)은 평균화된 휘도 값 및 미리 결정된 임계 디코딩 값에 기초하여 비디오 프레임에 인코딩된 메타데이터(322)에 대응하는 복수의 심벌의 데이터 값을 도출한다. 예를 들어, 전술한 바와 같이, 8개의 픽셀이 심벌을 구성할 때, 텔레비전(122)은 심벌을 구성하는 8개의 픽셀에서의 휘도 값을 평균화하고 휘도 임계 디코딩 값에 기초하여 심벌이 "1"인지 "0"인지를 결정한다. 예를 들어, 심벌당 1비트 코딩의 경우, 텔레비전(122)은 검출된 평균 휘도가 인코딩 범위의 미리 결정된 백분율(예를 들어, 50%) 이하일 때, 심벌이 "0"이라고 결정하고 검출된 평균 휘도가 인코딩 범위의 미리 결정된 백분율보다 클 때 "1"이라고 결정한다.
마지막으로, 단계 834에서, 메타데이터 모듈(624)은 추출된 메타데이터(322)를 처리하여 텔레비전(122)의 디스플레이(138) 상에 하나 이상의 동기화된 DO(144)를 표시하는 것과 같은 적절한 첨단 피처들을 성공적으로 지원한다. 도 8c 프로세스는 그 후 종료될 수 있다.
일 실시예에서, 텔레비전(122)은 콘텐츠가 더 이상 마킹되지 않음(예를 들어, 워터마크가 더 이상 검출되지 않음)을 검출함으로써, 또는 마킹된 콘텐츠의 프레임(예를 들어, 워터마크)에서 EIDR 값이 변경되었음을 검출함으로써 채널 변화(또는 콘텐츠의 변화)를 인식할 수 있다. 일 실시예에서, 콘텐츠 ID는 콘텐츠 ID 메시지 내의 EIDR 값에 의해 직접 식별된다. 다른 실시예에서, 원격 서버의 URL 또는 콘텐츠에 관한 임의의 다른 정보는 워터마크로서 내장된 메타데이터로서 제공된다. 다른 실시예에서, 2개의 데이터 요소는 미디어 시간을 식별하기 위해 내장된 메타데이터에 포함되고, 프레임들에서의 미디어 시간이 프레임 카운트 메시지에 지정되는 동안 타이밍 정확도가 프레임 레벨이 되도록 콘텐츠 ID 메시지에 전체 초의 미디어 시간이 지정된다. 또한, 내장된 메타데이터는 시간에 민감한 이벤트 트리거를 실시간으로 제공하는데 사용될 수 있다.
소정의 대안적인 실시예에서, 메타데이터(322)는 유사하게 생성되고 배신 경로를 따른 임의의 지점에서 임의의 다른 적절한 엔티티에 의해 비디오 데이터(316)에 삽입될 수 있다. 이들 대안의 실시예들 중 일부에서, 메타데이터(322)는 비디오 데이터(316)를 완전히 압축 해제하지 않고 삽입될 수 있다. 예를 들어, (임의의 메타데이터(322)가 없는) 압축된 비디오 데이터(316)의 개별 매크로 블록은 이미 내장된 메타데이터(322)를 포함하는 대응하는 압축된 매크로 블록에 의해 대체될 수 있다. 전술한 모든 이유로, 본 개시내용은 따라서, 비디오 데이터에 내장된 메타데이터를 배신하기 위한 개선된 시스템 및 방법을 제공한다.
도 11은 콘텐츠 소스(114), 셋톱 박스(118), 텔레비전(122), 및/또는 서버(130)의 기능들 중 하나 이상과 같은 전술한 기능들 중 하나 또는 그 조합을 수행하도록 구성된 컴퓨터(1100)의 하드웨어 구성의 일례를 도시하는 블록도이다.
도 11에 도시된 바와 같이, 컴퓨터(1100)는 하나 이상의 버스(1108)를 통해 서로 상호접속되는, 중앙 처리 유닛(CPU)(1102), 판독 전용 메모리(ROM)(1104), 및 랜덤 액세스 메모리(RAM)(1106)를 포함한다. 하나 이상의 버스(1108)는 또한 입력-출력 인터페이스(1110)와 추가로 접속된다. 입력-출력 인터페이스(1110)는 키보드, 마우스, 마이크로폰, 원격 제어기 등에 의해 형성된 입력부(1112)와 접속된다. 입력-출력 인터페이스(1110)는 오디오 인터페이스, 비디오 인터페이스, 디스플레이, 스피커 등에 의해 형성된 출력부(1114); 하드 디스크, 비휘발성 메모리 등에 의해 형성된 기록부(1116); 네트워크 인터페이스, 모뎀, USB 인터페이스, FireWire 인터페이스 등에 의해 형성된 통신부(1118); 및 자기 디스크, 광 디스크, 자기 광 디스크, 반도체 메모리 등과 같은 이동식 매체(1122)를 구동하기 위한 드라이브(1120)와 또한 접속된다.
일 실시예에 따르면, CPU(1102)는 기록부(1116)에 저장된 프로그램을 입력-출력 인터페이스(1110) 및 버스(1108)를 통해 RAM(1106)에 로드한 다음, 콘텐츠 소스(114), 셋톱 박스(118), 텔레비전(122) 및/또는 서버(130) 중 하나 또는 그 조합의 기능성을 제공하도록 구성된 프로그램을 실행한다.
본 개시내용은 특정 실시예를 참조하여 위에서 설명되었다. 본 개시내용에 비추어 다른 실시예들이 본 기술분야의 통상의 기술가에게 명백할 것이다. 예를 들어, 본 개시내용은 상기 실시예에서 설명된 것들과 다른 구성 및 기술을 사용하여 쉽게 구현될 수 있다. 또한, 본 개시내용은 전술한 것들과는 다른 시스템과 함께 효과적으로 사용될 수 있다. 그러므로, 논의된 실시예들에 대한 이들 및 다른 변형들은 본 개시내용에 포함되도록 의도되고, 본 개시내용은 첨부된 청구항에 의해서만 한정된다.
상술한 다양한 프로세스들은, 흐름도로서 도시된 시퀀스로 연대기적으로 처리될 필요는 없고; 단계들은 또한, 병렬적으로 또는 개별적으로(예를 들어, 병렬화되어 또는 객체-지향적 방식으로) 처리되는 것들을 포함할 수 있다.
또한, 프로그램들은 단일의 컴퓨터에 의해 또는 복수의 컴퓨터에 의해 분산 방식으로 처리될 수 있다. 프로그램들은 또한, 실행을 위해 원격 컴퓨터 또는 컴퓨터들에 전송될 수 있다.
또한, 본 명세서에서, "시스템"이라는 용어는, 복수의 컴포넌트 요소들(장치들, 모듈(부품)들 등)의 집합체를 의미한다. 모든 컴포넌트 요소는 단일의 인클로저(enclosure)에 수용될 수 있거나, 또는 수용되지 않을 수 있다. 따라서, 개별 인클로저에 각각 수용되고 네트워크를 통해 접속되는 복수의 장치는, 네트워크로서 간주되고, 단일의 인클로저에 수용된 복수의 모듈에 의해 형성된 단일의 장치는 또한 시스템으로서 간주된다.
또한, 본 기술은 실시될 때 상술한 실시예들에 한정되지 않고, 본 기술의 사상 및 범위 내에 포함되는 한, 본 기술의 다양한 수정, 변형, 및 대안들이 만들어질 수 있다는 것을 이해해야 한다.
예를 들어, 본 기술은 클라우드 컴퓨팅용으로 구조화될 수 있고, 이로써 단일의 기능이 네트워크를 통해 복수의 장치 간에 공유되고 협력하여 처리된다.
또한, 상술한 흐름도들을 참조하여 설명된 단계들 각각은, 단일의 장치에 의해서 실행될 수 있을 뿐만 아니라, 공유 방식으로 복수의 장치들에 의해서도 실행될 수 있다.
또한, 하나의 단계가 복수의 프로세스를 포함한다면, 이 단계에 포함되는 이들 프로세스는, 단일의 장치에 의해서 수행될 수 있을 뿐만 아니라, 공유 방식으로 복수의 장치에 의해서도 수행될 수 있다.
본 개시내용의 다수의 수정 및 변형은, 상기 교시에 비추어 가능하다. 따라서, 첨부된 청구항들의 범위 내에서, 본 실시예들은 본 명세서에 구체적으로 설명된 것과 다르게 실시될 수 있다는 것을 이해해야 한다.
상기의 개시내용은 또한 하기에 언급되는 실시예들을 포함한다.
(1) 메타데이터를 추출하기 위한 수신 장치의 방법으로서, 상기 방법은, 수신 장치의 회로에 의해, 내장된 메타데이터를 포함하는 콘텐츠를 처리하는 단계 - 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장됨 - ; 및 회로에 의해, 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 기초하여 비디오 프레임에 내장된 워터마크의 심벌 값들을 결정하는 단계 - 휘도 값들 중 적어도 하나는 16 미만임 - 를 포함한다.
(2) 피처 (1)의 방법에서, 동일한 워터마크는 콘텐츠의 복수의 연속적인 비디오 프레임에 내장된다.
(3) 피처 (1) 또는 (2)의 방법은, 콘텐츠의 비디오 프레임의 제2 부분의 픽셀들에서의 휘도 값들에 기초하여 미리 결정된 고정된 패턴의 심벌 값들을 검출하는 단계를 더 포함하고, 상기 결정하는 단계는 미리 결정된 고정된 패턴이 메타데이터를 추출하기 위해 검출될 때 메타데이터를 결정한다.
(4) 피처 (1) 내지 (3) 중 어느 한 피처에 따른 방법에서, 상기 결정하는 단계는, 심벌 값들 중 하나를 구성하는 픽셀들의 각각의 서브세트에 대해, 휘도 값들을 평균화하는 단계; 및 평균화된 휘도 값들에 기초하여 심벌 값들을 결정하는 단계를 더 포함한다.
(5) 피처 (1) 내지 (4) 중 어느 한 피처에 따른 방법에서, 메타데이터는 콘텐츠와 연관된 콘텐츠 식별자를 포함한다.
(6) 피처 (1) 내지 (5) 중 어느 한 피처에 따른 방법에서, 메타데이터는 수신 장치의 회로에게 콘텐츠와 동기화하여 실행되는 애플리케이션에 대한 미리 결정된 프로세스를 수행하도록 신호하는 트리거를 포함한다.
(7) 피처 (1) 내지 (6) 중 어느 한 피처에 따른 방법에서, 워터마크는 콘텐츠의 비디오 프레임의 적어도 라인 1에서의 휘도 값들 내에서 인코딩된다.
(8) 피처 (1) 내지 (7) 중 어느 한 피처에 따른 방법에서, 동일한 워터마크는 콘텐츠의 비디오 프레임의 라인들 1 및 2에서의 휘도 값들 내에서 인코딩된다.
(9) 컴퓨터에 의해 실행될 때, 컴퓨터로 하여금 피처 (1) 내지 (8) 중 어느 한 피처에 따른 방법을 수행하게 하는 프로그램을 저장하는 비일시적인 컴퓨터 판독 가능 저장 매체.
(10) 수신 장치는, 내장된 메타데이터를 포함하는 콘텐츠를 처리하고 - 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장됨 - ; 메타데이터를 추출하기 위해 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 기초하여 비디오 프레임에 내장된 워터마크의 심벌 값들을 결정하도록 구성된 회로를 포함하고, 휘도 값들 중 적어도 하나는 16 미만이다.
(11) 피처 (10)에 따른 수신 장치에서, 동일한 워터마크는 콘텐츠의 복수의 연속적인 비디오 프레임에 내장된다.
(12) 피처 (10) 또는 (11)에 따른 수신 장치에서, 상기 회로는, 콘텐츠의 비디오 프레임의 제2 부분의 픽셀들에서의 휘도 값들에 기초하여 미리 결정된 고정된 패턴의 심벌 값들을 검출하고; 미리 결정된 고정된 패턴이 메타데이터를 추출하기 위해 검출될 때 심벌 값들을 결정하도록 추가로 구성된다.
(13) 피처 (10) 내지 (12) 중 어느 한 피처에 따른 수신 장치에서, 상기 회로는 심벌 값들 중 하나를 구성하는 픽셀들의 각각의 서브세트에 대해, 휘도 값들을 평균화하고; 평균화된 휘도 값들에 기초하여 심벌 값들을 결정하도록 추가로 구성된다.
(14) 피처 (10) 내지 (13) 중 어느 한 피처에 따른 수신 장치에서, 메타데이터는 콘텐츠와 연관된 콘텐츠 식별자를 포함한다.
(15) 피처 (10) 내지 (14) 중 어느 한 피처에 따른 수신 장치에서, 메타데이터는 회로에게 콘텐츠와 동기화하여 실행되는 애플리케이션에 대한 미리 결정된 프로세스를 수행하도록 신호하는 트리거를 포함한다.
(16) 피처 (10) 내지 (15) 중 어느 한 피처에 따른 수신 장치에서, 워터마크는 콘텐츠의 비디오 프레임의 적어도 라인 1에서의 휘도 값들 내에서 인코딩된다.
(17) 피처 (10) 내지 (15) 중 어느 한 피처에 따른 수신 장치에서, 동일한 워터마크는 콘텐츠의 비디오 프레임의 라인들 1 및 2에서의 휘도 값들 내에서 인코딩된다.
(18) 정보 제공 장치는, 수신 장치에 제공될 콘텐츠를 수신하거나 검색하고, 콘텐츠의 비디오 프레임에 메타데이터를 내장하고 - 메타데이터는 콘텐츠의 비디오 프레임의 제1 부분에 워터마크로서 내장됨 - , 콘텐츠를 수신 장치에 제공하도록 구성된 회로를 포함하고, 워터마크의 심벌 값들은 콘텐츠의 비디오 프레임의 제1 부분의 픽셀들에서의 휘도 값들에 의해 표현되고, 휘도 값들 중 적어도 하나는 16 미만이다.
(19) 피처 (18)에 따른 정보 제공 장치에서, 동일한 워터마크는 콘텐츠의 복수의 연속적인 비디오 프레임에 내장된다.
(20) 피처 (18) 또는 (19)에 따른 정보 제공 장치에서, 상기 회로는, 콘텐츠의 비디오 프레임의 제2 부분의 픽셀들에서의 휘도 값들을 사용하여 미리 결정된 고정된 패턴의 심벌 값들을 내장하도록 추가로 구성되고, 미리 결정된 고정된 패턴은 수신 장치에 의해 비디오 프레임 내의 워터마크의 존재를 검출하는 데 사용된다.
(21) 피처 (18) 내지 (20) 중 어느 한 피처에 따른 정보 제공 장치에서, 심벌 값들 각각은 각각의 심벌 값을 구성하는 픽셀들의 서브세트에서의 휘도 값들에 의해 표현되고, 수신 장치는 픽셀들의 서브세트에서의 휘도 값들의 평균들에 기초하여 심벌 값들을 결정한다.
(22) 피처 (18) 내지 (21) 중 어느 한 피처에 따른 정보 제공 장치에서, 메타데이터는 콘텐츠와 연관된 콘텐츠 식별자를 포함한다.
(23) 피처 (18) 내지 (22) 중 어느 한 피처에 따른 정보 제공 장치에서, 메타데이터는 수신 장치의 회로에게 콘텐츠와 동기화하여 실행되는 애플리케이션에 대한 미리 결정된 프로세스를 수행하도록 신호하는 트리거를 포함한다.
(24) 피처 (18) 내지 (23) 중 어느 한 피처에 따른 정보 제공 장치에서, 워터마크는 콘텐츠의 비디오 프레임의 적어도 라인 1에서의 휘도 값들 내에서 인코딩된다.
(25) 피처 (18) 내지 (24) 중 어느 한 피처에 따른 정보 제공 장치에서, 동일한 워터마크는 콘텐츠의 비디오 프레임의 라인들 1 및 2에서의 휘도 값들 내에서 인코딩된다.

Claims (19)

  1. 메타데이터를 추출하기 위한 수신 장치의 방법으로서,
    상기 수신 장치의 회로에 의해, 내장된 상기 메타데이터를 포함하는 콘텐츠를 처리하는 단계 - 상기 메타데이터는 상기 콘텐츠의 비디오 프레임에 워터마크로서 내장됨 -; 및
    상기 회로에 의해, 상기 콘텐츠의 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 그리고 미리 결정된 휘도 값 임계치들에 기초하여 상기 비디오 프레임에 내장된 상기 워터마크의 심벌 값들을 검출하는 단계
    를 포함하고,
    상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 휘도 값들 중 적어도 하나는 흑색에 대응하는 값 미만이고, 상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 최대 휘도 값은 백색에 대응하는 값 미만이고,
    상기 워터마크는 적어도 상기 비디오 프레임의 모든 라인 1에 내장되는, 방법.
  2. 제1항에 있어서, 동일한 워터마크가 상기 콘텐츠의 복수의 연속적인 비디오 프레임에 내장되는 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 콘텐츠의 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 미리 결정된 고정된 패턴의 심벌 값들을 검출하는 단계를 더 포함하고,
    상기 검출하는 단계는, 상기 메타데이터를 추출하기 위해 상기 미리 결정된 고정된 패턴이 검출될 때 상기 심벌 값들을 검출하는 방법.
  4. 제1항 또는 제2항에 있어서, 상기 검출하는 단계는,
    상기 심벌 값들 중 하나를 구성하는 상기 픽셀들의 각각의 서브세트에 대해, 상기 휘도 값들을 평균화하는 단계; 및
    상기 평균화된 휘도 값들에 기초하여 상기 심벌 값들을 검출하는 단계
    를 더 포함하는 방법.
  5. 제1항 또는 제2항에 있어서, 상기 메타데이터는 상기 콘텐츠와 연관된 콘텐츠 식별자를 포함하는 방법.
  6. 제1항 또는 제2항에 있어서, 상기 메타데이터는, 상기 콘텐츠와 동기화하여 실행되는 애플리케이션에 대한 미리 결정된 프로세스를 수행하도록 상기 수신 장치의 회로에 신호하는 제어 정보를 포함하는 방법.
  7. 제1항 또는 제2항에 있어서, 동일한 워터마크가 상기 콘텐츠의 비디오 프레임의 라인 1 및 라인 2 중 적어도 하나의 휘도 값들 내에서 완전하게 인코딩되고, 상기 워터마크는 상기 비디오 프레임의 임의의 다른 라인들에서는 인코딩되지 않는 방법.
  8. 컴퓨터에 의해 실행될 때, 상기 컴퓨터로 하여금 메타데이터를 추출하기 위한 수신 장치의 방법을 수행하게 하는 프로그램을 저장하는 비일시적인 컴퓨터 판독 가능 저장 매체로서,
    상기 방법은,
    내장된 상기 메타데이터를 포함하는 콘텐츠를 처리하는 단계 - 상기 메타데이터는 상기 콘텐츠의 비디오 프레임에 워터마크로서 내장됨 -; 및
    상기 콘텐츠의 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 그리고 미리 결정된 휘도 값 임계치들에 기초하여 상기 비디오 프레임에 내장된 상기 워터마크의 심벌 값들을 검출하는 단계
    를 포함하고,
    상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 휘도 값들 중 적어도 하나는 흑색에 대응하는 값 미만이고, 상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 최대 휘도 값은 백색에 대응하는 값 미만이고,
    상기 워터마크는 적어도 상기 비디오 프레임의 모든 라인 1에 내장되는, 비일시적인 컴퓨터 판독 가능 저장 매체.
  9. 수신 장치로서,
    메모리; 및
    처리 유닛
    을 포함하고,
    상기 처리 유닛은, 상기 메모리로부터 로딩된 명령어들에 따라,
    내장된 메타데이터를 포함하는 콘텐츠를 처리하고 - 상기 메타데이터는 상기 콘텐츠의 비디오 프레임에 워터마크로서 내장됨 -;
    상기 콘텐츠의 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 그리고 미리 결정된 휘도 값 임계치들에 기초하여 상기 비디오 프레임에 내장된 상기 워터마크의 심벌 값들을 검출하고,
    상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 휘도 값들 중 적어도 하나는 흑색에 대응하는 값 미만이고, 상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 최대 휘도 값은 백색에 대응하는 값 미만이고,
    상기 워터마크는 적어도 상기 비디오 프레임의 모든 라인 1에 내장되는, 수신 장치.
  10. 제9항에 있어서, 동일한 워터마크가 상기 콘텐츠의 복수의 연속적인 비디오 프레임에 내장되는 수신 장치.
  11. 제9항 또는 제10항에 있어서, 상기 처리 유닛은,
    상기 콘텐츠의 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 미리 결정된 고정된 패턴의 심벌 값들을 검출하고;
    상기 메타데이터를 추출하기 위해 상기 미리 결정된 고정된 패턴이 검출될 때 상기 심벌 값들을 검출하는 수신 장치.
  12. 제9항 또는 제10항에 있어서, 상기 처리 유닛은,
    상기 심벌 값들 중 하나를 구성하는 상기 픽셀들의 각각의 서브세트에 대해, 상기 휘도 값들을 평균화하고;
    상기 평균화된 휘도 값들에 기초하여 상기 심벌 값들을 검출하는 수신 장치.
  13. 제9항 또는 제10항에 있어서, 상기 메타데이터는 상기 콘텐츠와 연관된 콘텐츠 식별자를 포함하는 수신 장치.
  14. 제9항 또는 제10항에 있어서, 상기 메타데이터는, 상기 콘텐츠와 동기화하여 실행되는 애플리케이션에 대한 미리 결정된 프로세스를 수행하도록 상기 처리 유닛에 신호하는 제어 정보를 포함하는 수신 장치.
  15. 제9항 또는 제10항에 있어서, 동일한 워터마크가 상기 콘텐츠의 비디오 프레임의 라인 1 및 라인 2 중 적어도 하나의 휘도 값들 내에서 완전하게 인코딩되고, 상기 워터마크는 상기 비디오 프레임의 임의의 다른 라인들에서는 인코딩되지 않는 수신 장치.
  16. 정보 제공 장치로서,
    메모리; 및
    처리 유닛
    을 포함하고,
    상기 처리 유닛은, 상기 메모리로부터 로딩된 명령어들에 따라,
    수신 장치에 제공될 콘텐츠를 수신하거나 검색하고,
    상기 콘텐츠의 비디오 프레임에 메타데이터를 내장하고 - 상기 메타데이터는 상기 콘텐츠의 비디오 프레임에 워터마크로서 내장됨 -,
    상기 콘텐츠를 상기 수신 장치에 제공하고,
    상기 메타데이터는, 상기 콘텐츠의 상기 비디오 프레임의 픽셀들에서의 휘도 값들에 기초하여 그리고 미리 결정된 휘도 값 임계치들에 기초하여 상기 수신 장치에 의해 추출되고,
    상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 휘도 값들 중 적어도 하나는 흑색에 대응하는 값 미만이고, 상기 워터마크의 심벌 값들에 대응하는 상기 비디오 프레임의 픽셀들에서의 최대 휘도 값은 백색에 대응하는 값 미만이고,
    상기 워터마크는 적어도 상기 비디오 프레임의 모든 라인 1에 내장되는, 정보 제공 장치.
  17. 제16항에 있어서, 동일한 워터마크가 상기 콘텐츠의 복수의 연속적인 비디오 프레임에 내장되는 정보 제공 장치.
  18. 제9항 또는 제10항에 있어서, 상기 수신 장치는 텔레비전인, 수신 장치.
  19. 삭제
KR1020177021748A 2015-03-19 2016-03-02 비디오에 내장된 메타데이터를 배신하기 위한 시스템 KR102528922B1 (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201562135246P 2015-03-19 2015-03-19
US62/135,246 2015-03-19
US14/741,168 US9912986B2 (en) 2015-03-19 2015-06-16 System for distributing metadata embedded in video
US14/741,168 2015-06-16
PCT/US2016/020461 WO2016148919A1 (en) 2015-03-19 2016-03-02 System for distributing metadata embedded in video

Publications (2)

Publication Number Publication Date
KR20170128223A KR20170128223A (ko) 2017-11-22
KR102528922B1 true KR102528922B1 (ko) 2023-05-08

Family

ID=56919284

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177021748A KR102528922B1 (ko) 2015-03-19 2016-03-02 비디오에 내장된 메타데이터를 배신하기 위한 시스템

Country Status (6)

Country Link
US (4) US9912986B2 (ko)
EP (1) EP3272114A4 (ko)
KR (1) KR102528922B1 (ko)
CA (1) CA2978310A1 (ko)
MX (1) MX368826B (ko)
WO (1) WO2016148919A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11599915B1 (en) * 2011-10-25 2023-03-07 Auddia Inc. Apparatus, system, and method for audio based browser cookies
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US10237334B2 (en) * 2013-01-07 2019-03-19 Akamai Technologies, Inc. Connected-media end user experience using an overlay network
US9756401B2 (en) * 2015-04-07 2017-09-05 Sony Corporation Processing and providing an image in which a plurality of symbols are encoded
US11202050B2 (en) * 2016-10-14 2021-12-14 Lg Electronics Inc. Data processing method and device for adaptive image playing
CA3071560C (en) * 2017-08-10 2024-01-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
CN108449627B (zh) * 2018-03-16 2021-08-10 北京视觉世界科技有限公司 视频处理、视频来源的识别方法、装置、设备和介质
US10355865B1 (en) * 2018-05-24 2019-07-16 DeepTruth, LLC Systems and techniques for certification of trusted media data
US11683180B1 (en) * 2018-05-24 2023-06-20 Swear Inc. Protecting digital media with nested hashing techniques
US11917240B2 (en) * 2018-08-14 2024-02-27 Inscape Data, Inc. Dynamic content serving using automated content recognition (ACR) and digital media watermarks
US10757291B2 (en) * 2018-11-12 2020-08-25 International Business Machines Corporation Embedding procedures on digital images as metadata
US10779044B1 (en) 2019-03-14 2020-09-15 The Nielsen Company (Us), Llc Viewer authentication
US11734784B2 (en) * 2019-11-14 2023-08-22 Sony Interactive Entertainment Inc. Metadata watermarking for ‘nested spectating’
CN111741329B (zh) * 2020-07-01 2021-09-28 腾讯科技(深圳)有限公司 一种视频处理方法、装置、设备及存储介质
US20220345790A1 (en) * 2021-04-22 2022-10-27 Cisco Technology, Inc. In-band metadata for authenticity and role-based access in enterprise video streaming services
US11695988B2 (en) * 2021-07-15 2023-07-04 Disney Enterprises, Inc. Content stream having encoded metadata for video enhancement
US11979645B1 (en) * 2022-11-01 2024-05-07 GumGum, Inc. Dynamic code integration within network-delivered media

Family Cites Families (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0901282B1 (en) * 1997-09-03 2006-06-28 Hitachi, Ltd. Method for recording and reproducing electronic watermark information
US7334247B1 (en) * 1999-03-29 2008-02-19 The Directv Group, Inc. Method and apparatus for watermarking received television content
AU3689301A (en) 2000-02-09 2001-08-20 Apriva Inc Communication systems, components, and methods operative with programmable wireless devices
CA2501331A1 (en) * 2002-10-02 2004-04-15 Nielsen Media Research, Inc. Methods and apparatus to present survey information
TW555101U (en) 2002-11-25 2003-09-21 Onetouch Technologies Co Ltd Layout improvement of resistive lines of touch panel
US7812887B2 (en) * 2005-05-19 2010-10-12 Nokia Corporation Methods and apparatus for signaling offsets and changes in digital broadcast networks
US8385590B1 (en) * 2008-11-05 2013-02-26 Adobe Systems Incorporated Video watermarking with temporal patterns
US8705933B2 (en) 2009-09-25 2014-04-22 Sony Corporation Video bookmarking
US9277183B2 (en) * 2009-10-13 2016-03-01 Sony Corporation System and method for distributing auxiliary data embedded in video data
WO2011103075A1 (en) 2010-02-22 2011-08-25 Dolby Laboratories Licensing Corporation Video delivery and control by overwriting video data
US8941779B2 (en) 2012-03-21 2015-01-27 Sony Corporation Non-closed caption data transport in standard caption service
US8760498B2 (en) 2011-03-14 2014-06-24 Sony Corporation Disparity data transport in standard caption service
US8839338B2 (en) 2012-03-28 2014-09-16 Sony Corporation Service usage reporting data transport
US8817072B2 (en) 2010-03-12 2014-08-26 Sony Corporation Disparity data transport and signaling
US20110247028A1 (en) 2010-04-01 2011-10-06 Mark Eyer Receiver and System Using an Electronic Questionnaire for Advanced Broadcast Services
US9723360B2 (en) 2010-04-01 2017-08-01 Saturn Licensing Llc Interests and demographics profile for advanced broadcast services
US9706158B2 (en) 2010-04-01 2017-07-11 Saturn Licensing Llc Receiver and method for reporting the usage of advanced television services
US20110302599A1 (en) 2010-06-07 2011-12-08 Mark Kenneth Eyer TV-Centric Actions in Triggered Declarative Objects
US8863171B2 (en) 2010-06-14 2014-10-14 Sony Corporation Announcement of program synchronized triggered declarative objects
US8655854B2 (en) * 2010-07-27 2014-02-18 Avid Technology, Inc. Hierarchical multimedia program composition
US8893210B2 (en) 2010-08-20 2014-11-18 Sony Corporation Server load balancing for interactive television
US8898723B2 (en) 2010-08-20 2014-11-25 Sony Corporation Virtual channel declarative script binding
US8875169B2 (en) 2010-08-27 2014-10-28 Sony Corporation Transmission and reception apparatus, methods, and systems for filtering content
US8909694B2 (en) 2010-08-27 2014-12-09 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
JP5765558B2 (ja) 2010-08-27 2015-08-19 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
RU2598591C2 (ru) 2010-08-30 2016-09-27 Сони Корпорейшн Приемное устройство, способ приема и программа
US8892636B2 (en) 2010-08-30 2014-11-18 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US10511887B2 (en) 2010-08-30 2019-12-17 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8595783B2 (en) 2010-08-30 2013-11-26 Sony Corporation Receiving device, receiving method, program, and broadcasting system
US9179188B2 (en) 2010-08-30 2015-11-03 Sony Corporation Transmission apparatus and method, reception apparatus and method, and transmission and reception system
US20120050619A1 (en) 2010-08-30 2012-03-01 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, program, and broadcasting system
US8918801B2 (en) 2010-08-30 2014-12-23 Sony Corporation Transmission apparatus, transmission method, reception apparatus, reception method, program, and broadcasting system
JP5757075B2 (ja) 2010-09-15 2015-07-29 ソニー株式会社 送信装置、送信方法、受信装置、受信方法、プログラム、および放送システム
US9986270B2 (en) 2010-09-21 2018-05-29 Saturn Licensing Llc Reception and transmission of trigger information for application program control
JP5703664B2 (ja) 2010-09-30 2015-04-22 ソニー株式会社 受信装置、受信方法、送信装置、送信方法、プログラム、および放送システム
US8842974B2 (en) 2010-10-01 2014-09-23 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program, and content delivery system
US9078031B2 (en) 2010-10-01 2015-07-07 Sony Corporation Reception apparatus, reception method, and program
US8908103B2 (en) 2010-10-01 2014-12-09 Sony Corporation Content supplying apparatus, content supplying method, content reproduction apparatus, content reproduction method, program and content viewing system
US8872888B2 (en) 2010-10-01 2014-10-28 Sony Corporation Content transmission apparatus, content transmission method, content reproduction apparatus, content reproduction method, program and content delivery system
US9179198B2 (en) 2010-10-01 2015-11-03 Sony Corporation Receiving apparatus, receiving method, and program
JP6210684B2 (ja) 2010-10-01 2017-10-11 サターン ライセンシング エルエルシーSaturn Licensing LLC 情報処理装置、情報処理方法、及びプログラム
JP5760438B2 (ja) * 2010-12-28 2015-08-12 富士通株式会社 電子透かし埋め込み装置、電子透かし埋め込み方法及び電子透かし埋め込み用コンピュータプログラムならびに電子透かし検出装置
US20120185888A1 (en) 2011-01-19 2012-07-19 Sony Corporation Schema for interests and demographics profile for advanced broadcast services
JP5793871B2 (ja) 2011-01-25 2015-10-14 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5783402B2 (ja) 2011-01-25 2015-09-24 ソニー株式会社 受信装置、受信方法、供給装置、供給方法、プログラム、および放送システム
JP5668512B2 (ja) 2011-02-15 2015-02-12 ソニー株式会社 情報処理装置、及び、情報処理方法
TWI574565B (zh) 2011-03-31 2017-03-11 Sony Corp A transmitting apparatus, a transmitting method, a receiving apparatus, a receiving method, a computer-readable medium, and a broadcasting system
US8886009B2 (en) 2011-04-26 2014-11-11 Sony Corporation Creation of video bookmarks via scripted interactivity in advanced digital television
TWI545955B (zh) 2011-04-28 2016-08-11 Sony Corp Signal receiving apparatus and method, a signal transmission apparatus and method, and program
US9554175B2 (en) 2011-07-20 2017-01-24 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for trigger compaction
US8917358B2 (en) 2011-07-27 2014-12-23 Sony Corporation Reception apparatus, terminal apparatus, control method, program, and communication system
US10491966B2 (en) 2011-08-04 2019-11-26 Saturn Licensing Llc Reception apparatus, method, computer program, and information providing apparatus for providing an alert service
WO2013021824A1 (ja) 2011-08-05 2013-02-14 ソニー株式会社 受信装置、受信方法、プログラム、及び情報処理システム
HUE062523T2 (hu) 2011-08-24 2023-11-28 Saturn Licensing Llc Vevõberendezés, vételi eljárás, program és információ feldolgozó rendszer
US20130055313A1 (en) 2011-08-31 2013-02-28 Sony Corporation Method, computer program, reception apparatus, and information providing apparatus for accessing content from a plurality of content sources
TWI528749B (zh) 2011-09-06 2016-04-01 Sony Corp A signal receiving device, a signal receiving method, an information processing program and an information processing system
US9451292B2 (en) * 2011-09-15 2016-09-20 Dolby Laboratories Licensing Corporation Method and system for backward compatible, extended dynamic range encoding of video
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system
JP5901956B2 (ja) 2011-12-16 2016-04-13 株式会社コガネイ 直線往復動装置
US9113230B2 (en) 2011-12-21 2015-08-18 Sony Corporation Method, computer program, and reception apparatus for delivery of supplemental content
US8930988B2 (en) 2011-12-21 2015-01-06 Sony Corporation Reception apparatus, reception method, program, and information processing system
CA2859008C (en) 2012-01-24 2022-04-26 Sony Corporation Receiver, reception method, program and information processing system
JP6276593B2 (ja) 2012-02-07 2018-02-07 サターン ライセンシング エルエルシーSaturn Licensing LLC 受信装置、受信方法、及びプログラム
US9936231B2 (en) 2012-03-21 2018-04-03 Saturn Licensing Llc Trigger compaction
US20130282870A1 (en) 2012-04-18 2013-10-24 Sony Corporation Reception apparatus, reception method, transmission apparatus, transmission method, and program
EP2862350A4 (en) 2012-06-19 2015-11-18 Sony Corp EXPANSIONS OF A TRIGGER PARAMETER PANEL FOR INTERACTIVE TELEVISION
US9456245B2 (en) 2012-07-05 2016-09-27 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method for controlling applications
CN104272724B (zh) 2012-07-12 2018-07-03 索尼公司 用于高级电视服务的参数化服务描述符
WO2014014252A1 (en) * 2012-07-16 2014-01-23 Lg Electronics Inc. Method and apparatus for processing digital service signals
US9432744B2 (en) 2012-07-31 2016-08-30 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US9154840B2 (en) 2012-07-31 2015-10-06 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
US9883247B2 (en) 2012-08-13 2018-01-30 Saturn Licensing Llc Reception apparatus, reception method, transmission apparatus, and transmission method
WO2014028255A1 (en) 2012-08-15 2014-02-20 Sony Corporation Broadband delivery of personalization information for advanced tv services
US20140074855A1 (en) * 2012-09-13 2014-03-13 Verance Corporation Multimedia content tags
US9264648B2 (en) 2012-10-09 2016-02-16 Sony Corporation Receiving device, receiving method, transmitting device, and transmitting method
US10002206B2 (en) 2012-10-26 2018-06-19 Saturn Licensing Llc Information processing device and information processing method
US9253518B2 (en) 2012-11-09 2016-02-02 Sony Corporation On-demand access to scheduled content
US9769503B2 (en) 2012-11-14 2017-09-19 Saturn Licensing Llc Information processor, information processing method and program
US9936256B2 (en) 2012-11-28 2018-04-03 Saturn Licensing Llc Receiver, reception method, transmitter and transmission method
US9148676B2 (en) 2012-12-04 2015-09-29 Sony Corporation Broadcast transition channel
US8914832B2 (en) 2012-12-14 2014-12-16 Sony Corporation Information processing apparatus, information processing method, and program
US9942601B2 (en) 2013-01-24 2018-04-10 Saturn Licensing Llc Storing non-real time content
US10257564B2 (en) 2013-01-24 2019-04-09 Saturn Licensing Llc Distributed non-real-time content
US20140229580A1 (en) 2013-02-12 2014-08-14 Sony Corporation Information processing device, information processing method, and information processing system
US9300896B2 (en) 2013-06-03 2016-03-29 Sony Corporation Method, computer-readable storage medium, reception apparatus, and information providing apparatus for identifying available channels and/or services
US9980014B2 (en) 2013-06-28 2018-05-22 Saturn Licensing Llc Methods, information providing system, and reception apparatus for protecting content
US9137566B2 (en) 2013-06-28 2015-09-15 Sony Corporation Distribution system, reception apparatus, and methods for transitioning to new services
US9038095B2 (en) 2013-07-03 2015-05-19 Sony Corporation Methods, information providing system, and reception apparatus for distribution of at least one content version
US8884800B1 (en) 2013-07-31 2014-11-11 Sony Corporation Method and apparatus for performing analog-to-digital conversion on multiple input signals
US20150358507A1 (en) * 2014-06-04 2015-12-10 Sony Corporation Timing recovery for embedded metadata

Also Published As

Publication number Publication date
US20220239978A1 (en) 2022-07-28
MX2017011632A (es) 2017-11-02
US20180176640A1 (en) 2018-06-21
US11218765B2 (en) 2022-01-04
US10547899B2 (en) 2020-01-28
US11683559B2 (en) 2023-06-20
US20200045368A1 (en) 2020-02-06
KR20170128223A (ko) 2017-11-22
US20160277793A1 (en) 2016-09-22
MX368826B (es) 2019-10-18
WO2016148919A1 (en) 2016-09-22
US9912986B2 (en) 2018-03-06
CA2978310A1 (en) 2016-09-22
EP3272114A4 (en) 2018-08-01
EP3272114A1 (en) 2018-01-24

Similar Documents

Publication Publication Date Title
US11683559B2 (en) System for distributing metadata embedded in video
US11146864B2 (en) Processing and providing an image in which a plurality of symbols are encoded
US9277183B2 (en) System and method for distributing auxiliary data embedded in video data
US8941779B2 (en) Non-closed caption data transport in standard caption service
US20150358507A1 (en) Timing recovery for embedded metadata
KR20140125766A (ko) 영상 표시 장치 및 그 동작 방법
KR20130127423A (ko) 멀티미디어 애플리케이션을 위한 pip 방법
KR20150120963A (ko) 영상 표시 장치 및 그 동작 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right