KR20160137954A - 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 - Google Patents

방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 Download PDF

Info

Publication number
KR20160137954A
KR20160137954A KR1020167020611A KR20167020611A KR20160137954A KR 20160137954 A KR20160137954 A KR 20160137954A KR 1020167020611 A KR1020167020611 A KR 1020167020611A KR 20167020611 A KR20167020611 A KR 20167020611A KR 20160137954 A KR20160137954 A KR 20160137954A
Authority
KR
South Korea
Prior art keywords
information
service
audio
content
watermark
Prior art date
Application number
KR1020167020611A
Other languages
English (en)
Other versions
KR101805538B1 (ko
Inventor
양승률
곽민성
문경수
고우석
홍성룡
권우석
이장원
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Publication of KR20160137954A publication Critical patent/KR20160137954A/ko
Application granted granted Critical
Publication of KR101805538B1 publication Critical patent/KR101805538B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233—Processing of audio elementary streams
    • H04N21/2335—Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H04N21/23892—Multiplex stream processing, e.g. multiplex stream encrypting involving embedding information at multiplex stream level, e.g. embedding a watermark at packet level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2665—Gathering content from different sources, e.g. Internet and satellite
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8352—Generation of protective data, e.g. certificates involving content or source identification data, e.g. Unique Material Identifier [UMID]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 방송 신호를 전송하는 방법을 제안한다. 본 발명에 따른 방송 신호를 전송하는 방법은, 지상파 방송망과 인터넷 망을 사용하는 차세대 하이브리드 방송을 지원하는 환경에서 차세대 방송 서비스를 지원할 수 있는 시스템을 제안한다. 또한, 차세대 하이브리드 방송을 지원하는 환경에서, 지상파 방송망과 인터넷 망을 모두 아우를 수 있는 효율적인 시그널링 방안을 제안한다.

Description

방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법{BROADCAST SIGNAL TRANSMISSION DEVICE, BROADCAST SIGNAL RECEPTION DEVICE, BROADCAST SIGNAL TRANSMISSION METHOD, AND BROADCAST SIGNAL RECEPTION METHOD}
본 발명은 방송 신호 송신 장치, 방송 신호 수신 장치, 및 방송 신호 송수신 방법에 관한 것이다.
아날로그 방송 신호 송신이 종료됨에 따라, 디지털 방송 신호를 송수신하기 위한 다양한 기술이 개발되고 있다. 디지털 방송 신호는 아날로그 방송 신호에 비해 더 많은 양의 비디오/오디오 데이터를 포함할 수 있고, 비디오/오디오 데이터뿐만 아니라 다양한 종류의 부가 데이터를 더 포함할 수 있다.
즉, 디지털 방송 시스템은 HD(High Definition) 이미지, 멀티채널(multi channel, 다채널) 오디오, 및 다양한 부가 서비스를 제공할 수 있다. 그러나, 디지털 방송을 위해서는, 많은 양의 데이터 전송에 대한 데이터 전송 효율, 송수신 네트워크의 견고성(robustness), 및 모바일 수신 장치를 고려한 네트워크 유연성(flexibility)이 향상되어야 한다.
본 발명의 목적에 따라, 여기에 포함되고 대략적으로 기재된 바와 같이, 본 발명은 지상파 방송망과 인터넷 망을 사용하는 차세대 하이브리드 방송을 지원하는 환경에서 차세대 방송 서비스를 효과적으로 지원할 수 있는 시스템 및 관련된 시그널링 방안을 제안한다.
본 발명은 지상파 방송망과 인터넷 망을 사용하는 차세대 하이브리드 방송을 지원하는 환경에서 차세대 방송 서비스를 효과적으로 지원할 수 있다. 또한 본 발명은 비디오 WM, 오디오 WM 를 효율적으로 활용하기 위한 구조 및 방안을 제안한다.
본 발명에 대해 더욱 이해하기 위해 포함되며 본 출원에 포함되고 그 일부를 구성하는 첨부된 도면은 본 발명의 원리를 설명하는 상세한 설명과 함께 본 발명의 실시예를 나타낸다.
도 1 은 본 발명의 일 실시예에 따른 프로토콜 스택을 도시한 도면이다.
도 2 는 본 발명의 일 실시예에 따른 서비스 디스커버리 과정을 도시한 도면이다.
도 3 은 본 발명의 일 실시예에 따른 LLS (Low Level Signaling) 테이블 및 SLT (Service List Table)를 도시한 도면이다.
도 4 는 본 발명의 일 실시예에 따른, ROUTE 로 전달되는 USBD 및 S-TSID 를 도시한 도면이다.
도 5 는 본 발명의 일 실시예에 따른, MMT 로 전달되는 USBD 를 도시한 도면이다.
도 6 은 본 발명의 일 실시예에 따른 링크 레이어(Link Layer) 동작을 도시한 도면이다.
도 7 은 본 발명의 일 실시예에 따른 LMT (Link Mapping Table) 를 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.
도 9는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 10은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 11는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 12는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 13은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 14은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 15은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 16은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
도 17은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 18는 본 발명의 실시예에 따라 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 흐름도이다.
도 19은 발명의 실시예에 따라 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 개념도이다.
도 20은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 21은 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 22 는 본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들을 예시한 도면이다.
도 23 는 본 발명의 일 실시예에 따른 타임 스탬프 타입 필드의 각 값들의 의미를 도시한 도면이다.
도 24 은 본 발명의 일 실시예에 따른 URL 프로토콜 타입 필드의 각 값들의 의미를 도시한 도면이다.
도 25 은 본 발명의 일 실시예에 따른 URL 프로토콜 타입 필드의 처리과정을 순서도로 도시한 도면이다.
도 26 은 본 발명의 일 실시예에 따른 이벤트 필드의 각 값들의 의미를 도시한 도면이다.
도 27 은 본 발명의 일 실시예에 따른 데스티네이션 타입 필드의 각 값들의 의미를 도시한 도면이다.
도 28 은 본 발명의 실시예 #1 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 29 은 본 발명의 실시예 #1 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
도 30 는 본 발명의 실시예 #2 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 31 은 본 발명의 실시예 #2 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
도 32 는 본 발명의 실시예 #3 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 33 는 본 발명의 실시예 #4 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 34 는 본 발명의 실시예 #4 에서, 첫번째 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 35 는 본 발명의 실시예 #4 에서, 두번째 WM 에 삽입될 데이터 구조를 도시한 도면이다.
도 36 은 본 발명의 실시예 #4 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
도 37 는 본 발명의 또 다른 실시예에 따른 워터마크 기반의 영상 표시 장치의 구조를 도시한 도면이다.
도 38 은 핑거프린팅 방식에 있어서, 본 발명의 일 실시예에 따른 데이터 구조를 도시한 도면이다.
도 39 은 핑거프린팅 방식에 있어서, 본 발명의 일 실시예에 따른 데이터 구조를 처리하는 순서도를 도시한 도면이다.
도 40 은 본 발명의 또 다른 실시예에 따른 워터마크 페이로드의 구조를 도시한 도면이다.
도 41 는 본 발명의 일 실시예에 따른, 서비스/컨텐츠 정보를 이용한 워터마크 페이로드 구조의 변형을 도시한 도면이다.
도 42 은 본 발명의 일 실시예에 따른, NSC 필드를 이용한 워터마크 페이로드 구조의 변형을 도시한 도면이다.
도 43 는 본 발명의 일 실시예에 따른, 비디오-오디오 워터마크 간의 링킹(linking) 을 위한 워터마크 페이로드 구조를 도시한 도면이다.
도 44 는 본 발명의 일 실시예에 따른, 링크된 비디오-오디오 워터마크를 이용한 동작을 도시한 도면이다.
도 45 은 본 발명의 일 실시예에 따른 방송 컨텐트 처리 방법을 도시한 도면이다.
도 46 는 본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치를 도시한 도면이다.
발명의 실시를 위한 최선의 형태
본 발명의 바람직한 실시예에 대해 구체적으로 설명하며, 그 예는 첨부된 도면에 나타낸다. 첨부된 도면을 참조한 아래의 상세한 설명은 본 발명의 실시예에 따라 구현될 수 있는 실시예만을 나타내기보다는 본 발명의 바람직한 실시예를 설명하기 위한 것이다. 다음의 상세한 설명은 본 발명에 대한 철저한 이해를 제공하기 위해 세부 사항을 포함한다. 그러나 본 발명이 이러한 세부 사항 없이 실행될 수 있다는 것은 당업자에게 자명하다.
본 발명에서 사용되는 대부분의 용어는 해당 분야에서 널리 사용되는 일반적인 것들에서 선택되지만, 일부 용어는 출원인에 의해 임의로 선택되며 그 의미는 필요에 따라 다음 설명에서 자세히 서술한다. 따라서 본 발명은 용어의 단순한 명칭이나 의미가 아닌 용어의 의도된 의미에 근거하여 이해되어야 한다.
본 발명은 차세대 방송 서비스에 대한 방송 신호 송신 및 수신 장치 및 방법을 제공한다. 본 발명의 일 실시예에 따른 차세대 방송 서비스는 지상파 방송 서비스, 모바일 방송 서비스, UHDTV 서비스 등을 포함한다. 본 발명은 일 실시예에 따라 비-MIMO (non-Multiple Input Multiple Output) 또는 MIMO 방식을 통해 차세대 방송 서비스에 대한 방송 신호를 처리할 수 있다. 본 발명의 일 실시예에 따른 비-MIMO 방식은 MISO (Multiple Input Single Output) 방식, SISO (Single Input Single Output) 방식 등을 포함할 수 있다.
도 1 은 본 발명의 일 실시예에 따른 프로토콜 스택을 도시한 도면이다.
서비스는 복수개의 레이어를 거쳐 수신기로 전달될 수 있다. 먼저 송신측에서는 서비스 데이터를 생성할 수 있다. 송신측의 딜리버리 레이어에서는 서비스 데이터에 전송을 위한 처리를 수행하고, 피지컬 레이어에서는 이를 방송 신호로 인코딩하여 방송망 또는 브로드밴드를 통해 전송할 수 있다.
여기서 서비스 데이터들은 ISO BMFF (base media file format) 에 따른 포맷으로 생성될 수 있다. ISO BMFF 미디어 파일은 방송망/브로드밴드 딜리버리, 미디어 인캡슐레이션(media encapsulation) 및/또는 동기화 포맷(synchronization format) 으로 사용될 수 있다. 여기서 서비스 데이터는 서비스와 관련된 모든 데이터로서, 리니어 서비스를 이루는 서비스 컴포넌트들, 그에 대한 시그널링 정보, NRT (Non Real Time) 데이터, 기타 파일들 등을 포함하는 개념일 수 있다.
딜리버리 레이어에 대해 설명한다. 딜리버리 레이어는 서비스 데이터에 대한 전송 기능을 제공할 수 있다. 서비스 데이터는 방송망및/또는 브로드밴드를 통해 전달될 수 있다.
방송망을 통한 서비스 딜리버리(broadcast service delivery)에 있어 두가지 방법이 있을 수 있다.
첫번째 방법은 MMT (MPEG Media Transport) 에 근거하여, 서비스 데이터들을 MPU (Media Processing Units) 들로 처리하고, 이를 MMTP (MMT protocol) 를 이용하여 전송하는 것일 수 있다. 이 경우, MMTP 를 통해 전달되는 서비스 데이터에는, 리니어 서비스를 위한 서비스 컴포넌트들 및/또는 그에 대한 서비스 시그널링 정보 등이 있을 수 있다.
두번째 방법은 MPEG DASH 에 근거하여, 서비스 데이터들을 DASH 세그먼트들로 처리하고, 이를 ROUTE (Real time Object delivery over Unidirectional Transport) 를 이용하여 전송하는 것일 수 있다. 이 경우, ROUTE 프로토콜을 통해 전달되는 서비스 데이터에는, 리니어 서비스를 위한 서비스 컴포넌트들, 그에 대한 서비스 시그널링 정보 및/또는 NRT 데이터 등이 있을 수 있다. 즉, NRT 데이터 및 파일 등의 논 타임드(non timed) 데이터는 ROUTE 를 통해서 전달될 수 있다.
MMTP 또는 ROUTE 프로토콜에 따라 처리된 데이터는 UDP / IP 레이어를 거쳐 IP 패킷들로 처리될 수 있다. 방송망을 통한 서비스 데이터 전달에 있어서, SLT (Service List Table) 역시 UDP / IP 레이어를 거쳐 방송망을 통해 전달될 수 있다. SLT 는 LLS (Low Level Signaling) 테이블에 포함되어 전달될 수 있는데, SLT, LLS 테이블에 대해서는 후술한다.
IP 패킷들은 링크 레이어에서 링크 레이어 패킷들로 처리될 수 있다. 링크 레이어는 상위 레이어에서 전달되는 다양한 포맷의 데이터를, 링크 레이어 패킷으로 인캡슐레이션한 후, 피지컬 레이어에 전달할 수 있다. 링크 레이어에 대해서는 후술한다.
하이브리드 서비스 딜리버리(hybrid service delivery) 에 있어서는, 적어도 하나 이상의 서비스 엘레멘트가 브로드밴드 패쓰(path) 를 통해 전달될 수 있다. 하이브리드 서비스 딜리버리의 경우, 브로드밴드로 전달되는 데이터에는, DASH 포맷의 서비스 컴포넌트들, 그에 대한 서비스 시그널링 정보 및/또는 NRT 데이터 등이 있을 수 있다. 이 데이터들은 HTTP/TCP/IP 를 거쳐 처리되고, 브로드밴드 전송을 위한 링크 레이어를 거쳐, 브로드밴드 전송을 위한 피지컬 레이어로 전달될 수 있다.
피지컬 레이어는 딜리버리 레이어(상위 레이어 및/또는 링크 레이어)로부터 전달받은 데이터를 처리하여, 방송망 또는 브로드밴드를 통하여 전송할 수 있다. 피지컬 레이어에 대한 자세한 사항은 후술한다.
서비스에 대해 설명한다. 서비스는 전체적으로 사용자에게 보여주는 서비스 컴포넌트의 컬렉션일 수 있고, 컴포넌트는 여러 미디어 타입의 것일 수 있고, 서비스는 연속적이거나 간헐적일 수 있으며, 서비스는 실시간이거나 비실시간일 수 있고, 실시간 서비스는 TV 프로그램의 시퀀스로 구성될 수 있다.
서비스는 여러 타입을 가질 수 있다. 첫 번째로 서비스는 앱 기반 인헨스먼트를 가질 수 있는 리니어 오디오/비디오 또는 오디오만의 서비스일 수 있다. 두 번째로 서비스는 다운로드된 어플리케이션에 의해 그 재생/구성 등이 제어되는 앱 기반 서비스일 수 있다. 세 번째로 서비스는 ESG (Electronic Service Guide) 를 제공하는 ESG 서비스일 수 있다. 네 번째로 긴급 경보 정보를 제공하는 EA (Emergency Alert) 서비스일 수 있다.
앱 기반 인헨스먼트가 없는 리니어 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 (1) 하나 이상의 ROUTE 세션 또는 (2) 하나 이상의 MMTP 세션에 의해 전달될 수 있다.
앱 기반 인헨스먼트가 있는 리니어 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 (1) 하나 이상의 ROUTE 세션 및 (2) 0개 이상의 MMTP 세션에 의해 전달될 수 있다. 이 경우 앱 기반 인핸스먼트에 사용되는 데이터는 NRT 데이터 또는 기타 파일 등의 형태로 ROUTE 세션을 통해 전달될 수 있다. 본 발명의 일 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트(스트리밍 미디어 컴포넌트)들이 두 프로토콜을 동시에 사용해 전달되는 것이 허용되지 않을 수 있다.
앱 기반 서비스가 방송망을 통해 전달되는 경우, 서비스 컴포넌트는 하나 이상의 ROUTE 세션에 의해 전달될 수 있다. 이 경우, 앱 기반 서비스에 사용되는 서비스 데이터는 NRT 데이터 또는 기타 파일 등의 형태로 ROUTE 세션을 통해 전달될 수 있다.
또한, 이러한 서비스의 일부 서비스 컴포넌트 또는 일부 NRT 데이터, 파일 등은 브로드밴드를 통해 전달될 수 있다(하이브리드 서비스 딜리버리).
즉, 본 발명의 일 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 MMT 프로토콜을 통해 전달될 수 있다. 본 발명의 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 ROUTE 프로토콜을 통해 전달될 수 있다. 본 발명의 또 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트 및 NRT 데이터(NRT 서비스 컴포넌트)들은 ROUTE 프로토콜을 통해 전달될 수 있다. 본 발명의 또 다른 실시예에서, 하나의 서비스의 리니어 서비스 컴포넌트들은 MMT 프로토콜을 통해 전달되고, NRT 데이터(NRT 서비스 컴포넌트)들은 ROUTE 프로토콜을 통해 전달될 수 있다. 전술한 실시예들에서, 서비스의 일부 서비스 컴포넌트 또는 일부 NRT 데이터들은 브로드밴드를 통해 전달될 수 있다. 여기서 앱 기반 서비스 내지 앱 기반 인핸스먼트에 관한 데이터들은 NRT 데이터 형태로, ROUTE 에 따른 방송망을 통해 전달되거나 브로드밴드를 통해 전달될 수 있다. NRT 데이터는 로컬리 캐쉬드 데이터(Locally cashed data) 등으로 불릴 수도 있다.
각각의 ROUTE 세션은 서비스를 구성하는 컨텐츠 컴포넌트를 전체적으로 또는 부분적으로 전달하는 하나 이상의 LCT 세션을 포함한다. 스트리밍 서비스 딜리버리에서, LCT 세션은 오디오, 비디오, 또는 클로즈드 캡션 스트림과 같은 사용자 서비스의 개별 컴포넌트를 전달할 수 있다. 스트리밍 미디어는 DASH 세그먼트로 포맷된다.
각각의 MMTP 세션은 MMT 시그널링 메시지 또는 전체 또는 일부 컨텐츠 컴포넌트를 전달하는 하나 이상의 MMTP 패킷 플로우를 포함한다. MMTP 패킷 플로우는 MMT 시그널링 메시지 또는 MPU 로 포맷된 컴포넌트를 전달할 수 있다.
NRT 사용자 서비스 또는 시스템 메타데이터의 딜리버리를 위해, LCT 세션은 파일 기반의 컨텐츠 아이템을 전달한다. 이들 컨텐츠 파일은 NRT 서비스의 연속적 (타임드) 또는 이산적 (논 타임드) 미디어 컴포넌트, 또는 서비스 시그널링이나 ESG 프레그먼트와 같은 메타데이터로 구성될 수 있다. 서비스 시그널링이나 ESG 프레그먼트와 같은 시스템 메타데이터의 딜리버리 또한 MMTP의 시그널링 메시지 모드를 통해 이루어질 수 있다.
수신기에서는 튜너가 주파수들을 스캐닝하다가, 특정 주파수에서 방송 시그널을 감지할 수 있다. 수신기는 SLT 를 추출해 이를 처리하는 모듈로 보낼 수 있다. SLT 파서는 SLT 를 파싱하고 데이터를 획득해 채널 맵에 저장할 수 있다. 수신기는 SLT 의 부트스트랩 정보를 획득하고 ROUTE 또는 MMT 클라이언트에 전달해줄 수 있다. 수신기는 이를 통해 SLS 를 획득할 수 있고, 저장할 수 있다. USBD 등이 획득될 수 있고, 이는 시그널링 파서에 의해 파싱될 수 있다.
도 2 는 본 발명의 일 실시예에 따른 서비스 디스커버리 과정을 도시한 도면이다.
피지컬 레이어의 방송 신호 프레임이 전달하는 브로드캐스트 스트림은 LLS (Low Level Signaling) 을 운반할 수 있다. LLS 데이터는 웰 노운(well known) IP 어드레스/포트 로 전달되는 IP 패킷의 페이로드를 통해서 운반될 수 있다. 이 LLS 는 그 타입에 따라 SLT 를 포함할 수 있다. LLS 데이터는 LLS 테이블의 형태로 포맷될 수 있다. LLS 데이터를 운반하는 매 UDP/IP 패킷의 첫번째 바이트는 LLS 테이블의 시작일 수 있다. 도시된 실시예와 달리 LLS 데이터를 전달하는 IP 스트림은, 다른 서비스 데이터들과 함께 같은 PLP 로 전달될 수도 있다.
SLT 는 빠른 채널 스캔을 통하여 수신기가 서비스 리스트를 생성할 수 있게 하고, SLS 를 로케이팅(locating) 하기 위한 액세스 정보를 제공한다. SLT 는 부트스트랩 정보를 포함하는데, 이 부트스트랩 정보는 수신기가 각각의 서비스에 대한 SLS (Service Layer Signaling) 을 획득할 수 있도록 한다. SLS, 즉 서비스 시그널링 정보가 ROUTE 를 통해 전달되는 경우, 부트스트랩 정보는 SLS 를 운반하는 LCT 채널 내지 그 LCT 채널을 포함하는 ROUTE 세션의 데스티네이션 IP 어드레스 및 데스티네이션 포트 정보를 포함할 수 있다. SLS 가 MMT 를 통해 전달되는 경우, 부트스트랩 정보는 SLS 를 운반하는 MMTP 세션의 데스티네이션 IP 어드레스 및 데스티네이션 포트 정보를 포함할 수 있다.
도시된 실시예에서, SLT 가 기술하는 서비스 #1 의 SLS 는 ROUTE 를 통해 전달되고, SLT 는 해당 SLS 가 전달되는 LCT 채널을 포함하는 ROUTE 세션에 대한 부트스트랩 정보(sIP1, dIP1, dPort1) 를 포함할 수 있다. SLT 가 기술하는 서비스 #2 의 SLS 는 MMT 를 통해 전달되고, SLT 는 해당 SLS 가 전달되는 MMTP 패킷 플로우를 포함하는 MMTP 세션에 대한 부트스트랩 정보(sIP2, dIP2, dPort2) 를 포함할 수 있다.
SLS 는 해당 서비스에 대한 특성을 기술하는 시그널링 정보로서, 해당 서비스 및 해당 서비스의 서비스 컴포넌트를 획득하기 위한 정보를 제공하거나, 해당 서비스를 유의미하게 재생하기 위한 수신기 캐패빌리티 정보 등을 포함할 수 있다. 각 서비스에 대해 별개의 서비스 시그널링을 가지면 수신기는 브로드캐스트 스트림 내에서 전달되는 전체 SLS을 파싱할 필요 없이 원하는 서비스에 대한 적절한 SLS를 획득하면 된다.
SLS 가 ROUTE 프로토콜을 통해 전달되는 경우, SLS 는 SLT 가 지시하는 ROUTE 세션의 특정(dedicated) LCT 채널을 통해 전달될 수 있다. 실시예에 따라 이 LCT 채널은 tsi = 0 로 식별되는 LCT 채널일 수 있다. 이 경우 SLS 는 USBD/USD (User Service Bundle Description / User Service Description), S-TSID (Service-based Transport Session Instance Description) 및/또는 MPD (Media Presentation Description) 를 포함할 수 있다.
여기서 USBD 내지 USD 는 SLS 프래그먼트 중 하나로서, 서비스의 구체적 기술적 정보들을 기술하는 시그널링 허브로서 역할할 수 있다. USBD 는 서비스 식별 정보, 디바이스 캐패빌리티 정보 등을 포함할 수 있다. USBD 는 다른 SLS 프래그먼트(S-TSID, MPD 등) 에의 레퍼런스 정보(URI 레퍼런스)를 포함할 수 있다. 즉, USBD/USD 는 S-TSID 와 MPD 를 각각 레퍼런싱할 수 있다. 또한 USBD 는 수신기가 전송 모드(방송망/브로드밴드)를 결정할 수 있게 해주는 메타데이터 정보를 더 포함할 수 있다. USBD/USD 의 구체적 내용들에 대해서는 후술한다.
S-TSID 는 SLS 프래그먼트 중 하나로서, 해당 서비스의 서비스 컴포넌트를 운반하는 전송 세션에 대한 전체적인 세션 디스크립션 정보를 제공할 수 있다. S-TSID 는 해당 서비스의 서비스 컴포넌트가 전달되는 ROUTE 세션 및/또는 그 ROUTE 세션들의 LCT 채널에 대한 전송 세션 디스크립션 정보를 제공할 수 있다. S-TSID 는 하나의 서비스와 관련된 서비스 컴포넌트들의 컴포넌트 획득(acquisition) 정보를 제공할 수 있다. S-TSID 는, MPD 의 DASH 레프리젠테이션(Representation) 과 해당 서비스 컴포넌트의 tsi 간의 매핑을 제공할 수 있다. S-TSID 의 컴포넌트 획득 정보는 tsi, 관련 DASH 레프리젠테이션의 식별자의 형태로 제공될 수 있으며, 실시예에 따라 PLP ID 를 포함하거나 포함하지 않을 수 있다. 컴포넌트 획득 정보를 통해 수신기는 한 서비스의 오디오/비디오 컴포넌트들을 수집하고 DASH 미디어 세그먼트들의 버퍼링, 디코딩 등을 수행할 수 있다. S-TSID 는 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다. S-TSID 의 구체적 내용들에 대해서는 후술한다.
MPD 는 SLS 프래그먼트 중 하나로서, 해당 서비스의 DASH 미디어 프리젠테이션에 관한 디스크립션을 제공할 수 있다. MPD 는 미디어 세그먼트들에 대한 리소스 식별자(resource identifier) 를 제공하고, 식별된 리소스들에 대한 미디어 프리젠테이션 내에서의 컨텍스트 정보를 제공할 수 있다. MPD 는 방송망을 통해 전달되는 DASH 레프리젠테이션(서비스 컴포넌트)를 기술하고, 또한 브로드밴드를 통해 전달되는 추가적인 DASH 레프리젠테이션을 기술할 수 있다(하이브리드 딜리버리). MPD 는 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다.
SLS 가 MMT 프로토콜을 통해 전달되는 경우, SLS 는 SLT 가 지시하는 MMTP 세션의 특정(dedicated) MMTP 패킷 플로우을 통해 전달될 수 있다. 실시예에 따라 SLS 를 전달하는 MMTP 패킷들의 packet_id 는 00 의 값을 가질 수 있다. 이 경우 SLS 는 USBD/USD 및/또는 MMT Package (MP) 테이블을 포함할 수 있다.
여기서 USBD 는 SLS 프래그먼트의 하나로서, ROUTE 에서의 그것과 같이 서비스의 구체적 기술적 정보들을 기술할 수 있다. 여기서의 USBD 역시 다른 SLS 프래그먼트에의 레퍼런스 정보(URI 레퍼런스)를 포함할 수 있다. MMT 의 USBD 는 MMT 시그널링의 MP 테이블을 레퍼런싱할 수 있다. 실시예에 따라 MMT 의 USBD 는 S-TSID 및/또는 MPD 에의 레퍼런스 정보 또한 포함할 수 있다. 여기서의 S-TSID 는 ROUTE 프로토콜을 통해 전달되는 NRT 데이터를 위함일 수 있다. MMT 프로토콜을 통해 리니어 서비스 컴포넌트가 전달되는 경우에도 NRT 데이터는 ROUTE 프로토콜을 통해 전달될 수 있기 때문이다. MPD 는 하이브리드 서비스 딜리버리에 있어서, 브로드밴드로 전달되는 서비스 컴포넌트를 위함일 수 있다. MMT 의 USBD 의 구체적 내용들에 대해서는 후술한다.
MP 테이블은 MPU 컴포넌트들을 위한 MMT 의 시그널링 메시지로서, 해당 서비스의 서비스 컴포넌트를 운반하는 MMTP 세션에 대한 전체적인 세션 디스크립션 정보를 제공할 수 있다. 또한 MP 테이블은 이 MMTP 세션을 통해 전달되는 에셋(Asset) 에 대한 디스크립션을 포함할 수 있다. MP 테이블은 MPU 컴포넌트들을 위한 스트리밍 시그널링 정보로서, 하나의 서비스에 해당하는 에셋들의 리스트와 이 컴포넌트들의 로케이션 정보(컴포넌트 획득 정보)를 제공할 수 있다. MP 테이블의 구체적인 내용은 MMT 에서 정의된 형태이거나, 변형이 이루어진 형태일 수 있다. 여기서 Asset 이란, 멀티미디어 데이터 엔티티로서, 하나의 유니크 ID 로 연합되고 하나의 멀티미디어 프리젠테이션을 생성하는데 사용되는 데이터 엔티티를 의미할 수 있다. Asset 은 하나의 서비스를 구성하는 서비스 컴포넌트에 해당할 수 있다. MP 테이블을 이용하여 원하는 서비스에 해당하는 스트리밍 서비스 컴포넌트(MPU) 에 접근할 수 있다. MP 테이블은 전술한 바와 같이 USBD 에 의해 레퍼런싱될 수 있다.
기타 다른 MMT 시그널링 메시지가 정의될 수 있다. 이러한 MMT 시그널링 메시지들에 의해 MMTP 세션 내지 서비스에 관련된 추가적인 정보들이 기술될 수 있다.
ROUTE 세션은 소스 IP 어드레스, 데스티네이션 IP 어드레스, 데스티네이션 포트 넘버에 의해 식별된다. LCT 세션은 페어런트 ROUTE 세션의 범위 내에서 유일한 TSI (transport session identifier)에 의해 식별된다. MMTP 세션은 데스티네이션 IP 어드레스 및 데스티네이션 포트 넘버에 의해 식별된다. MMTP 패킷 플로우는 페어런트 MMTP 세션의 범위 내에서 유일한 packet_id에 의해 식별된다.
ROUTE 의 경우 S-TSID, USBD/USD, MPD 또는 이 들을 전달하는 LCT 세션을 서비스 시그널링 채널이라 부를 수도 있다. MMTP 의 경우, USBD/UD, MMT 시그널링 메시지들 또는 이들을 전달하는 패킷 플로우를 서비스 시그널링 채널이라 부를 수도 있다.
도시된 실시예와는 달리, 하나의 ROUTE 또는 MMTP 세션은 복수개의 PLP 를 통해 전달될 수 있다. 즉, 하나의 서비스는 하나 이상의 PLP 를 통해 전달될 수도 있다. 도시된 것과 달리 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 서로 다른 ROUTE 세션들을 통해 전달될 수도 있다. 또한, 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 서로 다른 MMTP 세션들을 통해 전달될 수도 있다. 실시예에 따라 하나의 서비스를 구성하는 컴포넌트들이 ROUTE 세션과 MMTP 세션에 나뉘어 전달될 수도 있다. 도시되지 않았으나, 하나의 서비스를 구성하는 컴포넌트가 브로드밴드를 통해 전달(하이브리드 딜리버리)되는 경우도 있을 수 있다.
도 3 은 본 발명의 일 실시예에 따른 LLS (Low Level Signaling) 테이블 및 SLT (Service List Table)를 도시한 도면이다.
도시된 LLS 테이블의 일 실시예(t3010) 은, LLS_table_id 필드, provider_id 필드, LLS_table_version 필드 및/또는 LLS_table_id 필드에 따른 정보들을 포함할 수 있다.
LLS_table_id 필드는 해당 LLS 테이블의 타입을 식별하고, provider_id 필드는 해당 LLS 테이블에 의해 시그널링되는 서비스들과 관련된 서비스 프로바이더를 식별할 수 있다. 여기서 서비스 프로바이더는 해당 브로드캐스트 스트림의 전부 또는 일부를 사용하는 브로드캐스터로서, provider_id 필드는 해당 브로드캐스트 스트림을 사용중인 복수의 브로드캐스터들 중 하나를 식별할 수 있다. LLS_table_version 필드는 해당 LLS 테이블의 버전 정보를 제공할 수 있다.
LLS_table_id 필드의 값에 따라, 해당 LLS 테이블은 전술한 SLT, 컨텐트 어드바이저리 레이팅(Content advisory rating) 에 관련된 정보를 포함하는 RRT(Rating Region Table), 시스템 타임과 관련된 정보를 제공하는 SystemTime 정보, 긴급 경보와 관련된 정보를 제공하는 CAP (Common Alert Protocol) 메시지 중 하나를 포함할 수 있다. 실시예에 따라 이들 외에 다른 정보가 LLS 테이블에 포함될 수도 있다.
도시된 SLT 의 일 실시예(t3020) 는, @bsid 속성, @sltCapabilities 속성, sltInetUrl 엘레멘트 및/또는 Service 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@bsid 속성은 브로드캐스트 스트림의 식별자일 수 있다. @sltCapabilities 속성은 해당 SLT 가 기술하는 모든 서비스들을 디코딩하고 유의미하게 재생하는데 요구되는 캐패빌리티 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 해당 SLT 의 서비스들을 위한 ESG 내지 서비스 시그널링 정보를 브로드밴드를 통해 얻기 위해 사용되는 베이스 URL 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 @urlType 속성을 더 포함할 수 있는데, 이는 해당 URL 을 통해 얻을 수 있는 데이터의 타입을 지시할 수 있다.
Service 엘레멘트는 해당 SLT 가 기술하는 서비스들에 대한 정보를 포함하는 엘레멘트일 수 있으며, 각각의 서비스들에 대해 Service 엘레멘트가 존재할 수 있다. Service 엘레멘트는 @serviceId 속성, @sltSvcSeqNum 속성, @protected 속성, @majorChannelNo 속성, @minorChannelNo 속성, @serviceCategory 속성, @shortServiceName 속성, @hidden 속성, @broadbandAccessRequired 속성, @svcCapabilities 속성, BroadcastSvcSignaling 엘레멘트 및/또는 svcInetUrl 엘레멘트를 포함할 수 있다.
@serviceId 속성은 해당 서비스의 식별자이고, @sltSvcSeqNum 속성은 해당 서비스에 대한 SLT 정보의 시퀀스 넘버를 나타낼 수 있다. @protected 속성은 해당 서비스의 유의미한 재생을 위해 필요한 적어도 하나의 서비스 컴포넌트가 보호(protected)되고 있는지 여부를 지시할 수 있다. @majorChannelNo 속성과 @minorChannelNo 속성은 각각 해당 서비스의 메이저 채널 넘버와 마이너 채널 넘버를 지시할 수 있다.
@serviceCategory 속성은 해당 서비스의 카테고리를 지시할 수 있다. 서비스의 카테고리로는 리니어 A/V 서비스, 리니어 오디오 서비스, 앱 기반 서비스, ESG 서비스, EAS 서비스 등이 있을 수 있다. @shortServiceName 속성은 해당 서비스의 짧은 이름(Short name)을 제공할 수 있다. @hidden 속성은 해당 서비스가 테스팅 또는 독점적(proprietary) 사용을 위한 서비스인지 여부를 지시할 수 있다. @broadbandAccessRequired 속성은 해당 서비스의 유의미한 재생을 위하여 브로드밴드 억세스가 필요한지 여부를 지시할 수 있다. @svcCapabilities 속성은 해당 서비스의 디코딩과 유의미한 재생을 위하여 필요한 캐패빌리티 정보를 제공할 수 있다.
BroadcastSvcSignaling 엘레멘트는 해당 서비스의 브로드캐스트 시그널링에 관련된 정보들을 제공할 수 있다. 이 엘레멘트는 해당 서비스의 방송망을 통한 시그널링에 대하여, 로케이션, 프로토콜, 어드레스 등의 정보를 제공할 수 있다. 자세한 사항은 후술한다.
svcInetUrl 엘레멘트는 해당 서비스를 위한 시그널링 정보를 브로드밴드를 통해 액세스하기 위한 URL 정보를 제공할 수 있다. sltInetUrl 엘레멘트는 @urlType 속성을 더 포함할 수 있는데, 이는 해당 URL 을 통해 얻을 수 있는 데이터의 타입을 지시할 수 있다.
전술한 BroadcastSvcSignaling 엘레멘트는 @slsProtocol 속성, @slsMajorProtocolVersion 속성, @slsMinorProtocolVersion 속성, @slsPlpId 속성, @slsDestinationIpAddress 속성, @slsDestinationUdpPort 속성 및/또는 @slsSourceIpAddress 속성을 포함할 수 있다.
@slsProtocol 속성은 해당 서비스의 SLS 를 전달하는데 사용되는 프로토콜을 지시할 수 있다(ROUTE, MMT 등). @slsMajorProtocolVersion 속성 및 @slsMinorProtocolVersion 속성은 각각 해당 서비스의 SLS 를 전달하는데 사용되는 프로토콜의 메이저 버전 넘버 및 마이너 버전 넘버를 지시할 수 있다.
@slsPlpId 속성은 해당 서비스의 SLS 를 전달하는 PLP 를 식별하는 PLP 식별자를 제공할 수 있다. 실시예에 따라 이 필드는 생략될 수 있으며, SLS 가 전달되는 PLP 정보는 후술할 LMT 내의 정보와, SLT 의 부트스트랩 정보를 조합하여 확인될 수도 있다.
@slsDestinationIpAddress 속성, @slsDestinationUdpPort 속성 및 @slsSourceIpAddress 속성은 각각 해당 서비스의 SLS 를 전달하는 전송 패킷의 데스티네이션 IP 어드레스, 데스티네이션 UDP 포트 및 소스 IP 어드레스 를 지시할 수 있다. 이들은 SLS 가 전달되는 전송세션(ROUTE 세션 또는 MMTP 세션)을 식별할 수 있다. 이들은 부트스트랩 정보에 포함될 수 있다.
도 4 는 본 발명의 일 실시예에 따른, ROUTE 로 전달되는 USBD 및 S-TSID 를 도시한 도면이다.
도시된 USBD 의 일 실시예(t4010) 은, bundleDescription 루트 엘레멘트를 가질 수 있다. bundleDescription 루트 엘레멘트는 userServiceDescription 엘레멘트를 가질 수 있다. userServiceDescription 엘레멘트는 하나의 서비스에 대한 인스턴스일 수 있다.
userServiceDescription 엘레멘트는 @globalServiceID 속성, @serviceId 속성, @serviceStatus 속성, @fullMPDUri 속성, @sTSIDUri 속성, name 엘레멘트, serviceLanguage 엘레멘트, capabilityCode 엘레멘트 및/또는 deliveryMethod 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@globalServiceID 속성은 해당 서비스의 글로벌하게 유니크한(globally unique) 식별자로서, ESG 데이터와 링크되는데 사용될 수 있다(Service@globalServiceID). @serviceId 속성은 SLT 의 해당 서비스 엔트리와 대응되는 레퍼런스로서, SLT 의 서비스 ID 정보와 동일할 수 있다. @serviceStatus 속성은 해당 서비스의 상태를 지시할 수 있다. 이 필드는 해당 서비스가 액티브인지 인액티브(inactive) 상태인지 여부를 지시할 수 있다.
@fullMPDUri 속성은 해당 서비스의 MPD 프래그먼트를 레퍼런싱할 수 있다. MPD 는 전술한 바와 같이 방송망 또는 브로드밴드를 통해 전달되는 서비스 컴포넌트에 대한 재생 디스크립션을 제공할 수 있다. @sTSIDUri 속성은 해당 서비스의 S-TSID 프래그먼트를 레퍼런싱할 수 있다. S-TSID 는 전술한 바와 같이 해당 서비스를 운반하는 전송 세션에의 액세스와 관련된 파라미터들을 제공할 수 있다.
name 엘레멘트는 해당 서비스의 이름을 제공할 수 있다. 이 엘레멘트는 @lang 속성을 더 포함할 수 있는데, 이 필드는 name 엘레멘트가 제공하는 이름의 언어를 지시할 수 있다. serviceLanguage 엘레멘트는 해당 서비스의 이용 가능한(available) 언어들을 지시할 수 있다. 즉, 이 엘레멘트는 해당 서비스가 제공될 수 있는 언어들을 나열할 수 있다.
capabilityCode 엘레멘트는 해당 서비스를 유의미하게 재생하기 위해 필요한 수신기 측의 캐패빌리티 또는 캐패빌리티 그룹 정보를 지시할 수 있다. 이 정보들은 서비스 아나운스먼트(announccement) 에서 제공되는 캐패빌리티 정보 포맷과 호환될 수 있다.
deliveryMethod 엘레멘트는 해당 서비스의 방송망 또는 브로드밴드를 통해 액세스되는 컨텐츠들에 대하여, 전송 관련 정보들을 제공할 수 있다. deliveryMethod 엘레멘트는 broadcastAppService 엘레멘트 및/또는 unicastAppService 엘레멘트를 포함할 수 있다. 이 엘레멘트들은 각각 basePattern 엘레멘트를 하위 엘레멘트로 가질 수 있다.
broadcastAppService 엘레멘트는 방송망을 통해 전달되는 DASH 레프리젠테이션에 대한 전송 관련 정보를 포함할 수 있다. 이 DASH 레프리젠테이션들은 해당 서비스 미디어 프리젠테이션의 모든 피리오드(Period)에 걸친 미디어 컴포넌트들을 포함할 수 있다.
이 엘레멘트의 basePattern 엘레멘트는 수신기가 세그먼트 URL 과 매칭하는데 사용되는 캐릭터 패턴을 나타낼 수 있다. 이는 DASH 클라이언트가 해당 레프리젠테이션의 세그먼트들을 요청하는데 사용될 수 있다. 매칭된다는 것은 해당 미디어 세그먼트가 방송망을 통해 전달된다는 것을 암시할 수 있다.
unicastAppService 엘레멘트는 브로드밴드를 통해 전달되는 DASH 레프리젠테이션에 대한 전송 관련 정보를 포함할 수 있다. 이 DASH 레프리젠테이션들은 해당 서비스 미디어 프리젠테이션의 모든 피리오드(Period)에 걸친 미디어 컴포넌트들을 포함할 수 있다.
이 엘레멘트의 basePattern 엘레멘트는 수신기가 세그먼트 URL 과 매칭하는데 사용되는 캐릭터 패턴을 나타낼 수 있다. 이는 DASH 클라이언트가 해당 레프리젠테이션의 세그먼트들을 요청하는데 사용될 수 있다. 매칭된다는 것은 해당 미디어 세그먼트가 브로드밴드를 통해 전달된다는 것을 암시할 수 있다.
도시된 S-TSID 의 일 실시예(t4020) 은, S-TSID 루트 엘레멘트를 가질 수 있다. S-TSID 루트 엘레멘트는 @serviceId 속성 및/또는 RS 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@serviceId 속성은 해당 서비스의 식별자로서, USBD/USD 의 해당 서비스를 레퍼런싱할 수 있다. RS 엘레멘트는 해당 서비스의 서비스 컴포넌트들이 전달되는 ROUTE 세션들에 대한 정보를 기술할 수 있다. 이러한 ROUTE 세션의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. RS 엘레멘트는 @bsid 속성, @sIpAddr 속성, @dIpAddr 속성, @dport 속성, @PLPID 속성 및/또는 LS 엘레멘트를 더 포함할 수 있다.
@bsid 속성은 해당 서비스의 서비스 컴포넌트들이 전달되는 브로드캐스트 스트림의 식별자일 수 있다. 이 필드가 생략된 경우, 디폴트 브로드캐스트 스트림은 해당 서비스의 SLS 를 전달하는 PLP 를 포함하는 브로드캐스트 스트림일 수 있다. 이 필드의 값은 SLT 의 @bsid 속성과 같은 값일 수 있다.
@sIpAddr 속성, @dIpAddr 속성 및 @dport 속성은 각각 해당 ROUTE 세션의 소스 IP 어드레스, 데스티네이션 IP 어드레스 및 데스티네이션 UDP 포트를 나타낼 수 있다. 이 필드들이 생략되는 경우, 디폴트 값들은 해당 SLS 를 전달하는, 즉 해당 S-TSID 를 전달하고 있는 현재의, ROUTE 세션의 소스 IP 어드레스, 데스티네이션 IP 어드레스 및 데스티네이션 UDP 포트값들일 수 있다. 현재 ROUTE 세션이 아닌, 해당 서비스의 서비스 컴포넌트들을 전달하는 다른 ROUTE 세션에 대해서는, 본 필드들이 생략되지 않을 수 있다.
@PLPID 속성은 해당 ROUTE 세션의 PLP ID 정보를 나타낼 수 있다. 이 필드가 생략되는 경우, 디폴트 값은 해당 S-TSID 가 전달되고 있는 현재 PLP 의 PLP ID 값일 수 있다. 실시예에 따라 이 필드는 생략되고, 해당 ROUTE 세션의 PLP ID 정보는 후술할 LMT 내의 정보와, RS 엘레멘트의 IP 어드레스 / UDP 포트 정보들을 조합하여 확인될 수도 있다.
LS 엘레멘트는 해당 서비스의 서비스 컴포넌트들이 전달되는 LCT 채널들에 대한 정보를 기술할 수 있다. 이러한 LCT 채널의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. LS 엘레멘트는 @tsi 속성, @PLPID 속성, @bw 속성, @startTime 속성, @endTime 속성, SrcFlow 엘레멘트 및/또는 RepairFlow 엘레멘트를 포함할 수 있다.
@tsi 속성은 해당 LCT 채널의 tsi 정보를 나타낼 수 있다. 이를 통해 해당 서비스의 서비스 컴포넌트가 전달되는 LCT 채널들이 식별될 수 있다. @PLPID 속성은 해당 LCT 채널의 PLP ID 정보를 나타낼 수 있다. 실시예에 따라 이 필드는 생략될 수 있다. @bw 속성은 해당 LCT 채널의 최대 대역폭를 나타낼 수 있다. @startTime 속성은 해당 LCT 세션의 스타트 타임을 지시하고, @endTime 속성은 해당 LCT 채널의 엔드 타임을 지시할 수 있다.
SrcFlow 엘레멘트는 ROUTE 의 소스 플로우에 대해 기술할 수 있다. ROUTE 의 소스 프로토콜은 딜리버리 오브젝트를 전송하기 위해 사용되며, 한 ROUTE 세션 내에서 적어도 하나 이상의 소스 플로우를 설정(establish)할 수 있다. 이 소스 플로우들은 관련된 오브젝트들을 오브젝트 플로우로서 전달할 수 있다.
RepairFlow 엘레멘트는 ROUTE 의 리페어 플로우에 대해 기술할 수 있다. 소스 프로토콜에 따라 전달되는 딜리버리 오브젝트들은 FEC (Forward Error Correction) 에 따라 보호될 수 있는데, 리페어 프로토콜은 이러한 FEC 프로텍션을 가능케 하는 FEC 프레임워크(framework)를 정의할 수 있다.
도 5 는 본 발명의 일 실시예에 따른, MMT 로 전달되는 USBD 를 도시한 도면이다.
도시된 USBD 의 일 실시예는, bundleDescription 루트 엘레멘트를 가질 수 있다. bundleDescription 루트 엘레멘트는 userServiceDescription 엘레멘트를 가질 수 있다. userServiceDescription 엘레멘트는 하나의 서비스에 대한 인스턴스일 수 있다.
userServiceDescription 엘레멘트는 @globalServiceID 속성, @serviceId 속성, Name 엘레멘트, serviceLanguage 엘레멘트, contentAdvisoryRating 엘레멘트, Channel 엘레멘트, mpuComponent 엘레멘트, routeComponent 엘레멘트, broadbandComponent 엘레멘트 및/또는 ComponentInfo 엘레멘트를 포함할 수 있다. 각 필드들은 도시된 Use 컬럼의 값에 따라 생략되거나, 복수개 존재할 수 있다.
@globalServiceID 속성, @serviceId 속성, Name 엘레멘트 및/또는 serviceLanguage 엘레멘트는 전술한 ROUTE 로 전달되는 USBD 의 해당 필드들과 같을 수 있다. contentAdvisoryRating 엘레멘트는 해당 서비스의 컨텐트 어드바이저리(advisory) 레이팅을 나타낼 수 있다. 이 정보들은 서비스 아나운스먼트(announccement) 에서 제공되는 컨텐트 어드바이저리 레이팅 정보 포맷과 호환될 수 있다. Channel 엘레멘트는 해당 서비스와 관련된 정보들을 포함할 수 있다. 이 엘레멘트의 자세한 내용에 대해서는 후술한다.
mpuComponent 엘레멘트는 해당 서비스의 MPU 로서 전달되는 서비스 컴포넌트들에 대한 디스크립션을 제공할 수 있다. 이 엘레멘트는 @mmtPackageId 속성 및/또는 @nextMmtPackageId 속성을 더 포함할 수 있다. @mmtPackageId 속성은 해당 서비스의 MPU 로서 전달되는 서비스 컴포넌트들의 MMT 패키지(Package) 를 레퍼런싱할 수 있다. @nextMmtPackageId 속성은 시간상 @mmtPackageId 속성이 레퍼런싱하는 MMT 패키지 다음으로 사용될 MMT 패키지를 레퍼런싱할 수 있다. 이 엘레멘트의 정보들을 통해 MP 테이블이 레퍼런싱될 수 있다.
routeComponent 엘레멘트는 ROUTE 로 전달되는 해당 서비스의 서비스 컴포넌트들에 대한 디스크립션을 포함할 수 있다. 리니어 서비스 컴포넌트들이 MMT 프로토콜로 전달되는 경우라 하더라도, NRT 데이터들은 전술한 바와 같이 ROUTE 프로토콜에 따라 전달될 수 있다. 이 엘레멘트는 이러한 NRT 데이터들에 대한 정보들을 기술할 수 있다. 이 엘레멘트의 자세한 내용에 대해서는 후술한다.
broadbandComponent 엘레멘트는 브로드밴드로 전달되는 해당 서비스의 서비스 컴포넌트들에 대한 디스크립션을 포함할 수 있다. 하이브리드 서비스 딜리버리에 있어서, 한 서비스의 일부 서비스 컴포넌트 또는 기타 파일들은 브로드밴드를 통해 전달될 수 있다. 이 엘레멘트는 이러한 데이터들에 대한 정보들을 기술할 수 있다. 이 엘레멘트는 @fullMPDUri 속성을 더 포함할 수 있다. 이 속성은 브로드밴드로 전달되는 서비스 컴포넌트들에 대해 기술하는 MPD 를 레퍼런싱할 수 있다. 하이브리드 서비스 딜리버리 이외에도, 터널 내의 주행 등으로 인해 방송 신호가 약화되는 경우에 있어, 방송망-브로드밴드 간의 핸드오프(handoff) 를 지원하기 위해 본 엘레멘트가 필요할 수 있다. 방송 신호가 약해지는 경우, 브로드밴드를 통해 서비스 컴포넌트를 획득하다가, 다시 방송 신호가 강해지면 방송망을 통해 서비스 컴포넌트를 획득하여 서비스의 연속성이 보장될 수 있다.
ComponentInfo 엘레멘트는 해당 서비스의 서비스 컴포넌트들에 대한 정보를 포함할 수 있다. 서비스의 서비스 컴포넌트들의 개수에 따라, 이 엘레멘트는 복수개 존재할 수 있다. 이 엘레멘트는 각 서비스 컴포넌트의 타입, 롤(role), 이름, 식별자, 프로텍션 여부 등의 정보들을 기술할 수 있다. 이 엘레멘트의 자세한 정보에 대해서는 후술한다.
전술한 Channel 엘레멘트는 @serviceGenre 속성, @serviceIcon 속성 및/또는 ServiceDescription 엘레멘트를 더 포함할 수 있다. @serviceGenre 속성은 해당 서비스의 장르를 지시하고, @serviceIcon 속성은 해당 서비스를 대표하는 아이콘(icon) 의 URL 정보를 포함할 수 있다. ServiceDescription 엘레멘트는 해당 서비스의 서비스 디스크립션을 제공하는데, 이 엘레멘트는 @serviceDescrText 속성 및/또는 @serviceDescrLang 속성을 더 포함할 수 있다. 이 속성들은 각각 해당 서비스 디스크립션의 텍스트 및 그 텍스트에 사용되는 언어를 지시할 수 있다.
전술한 routeComponent 엘레멘트는 @sTSIDUri 속성, @sTSIDDestinationIpAddress 속성, @sTSIDDestinationUdpPort 속성, @sTSIDSourceIpAddress 속성, @sTSIDMajorProtocolVersion 속성 및/또는 @sTSIDMinorProtocolVersion 속성을 더 포함할 수 있다.
@sTSIDUri 속성은 S-TSID 프래그먼트를 레퍼런싱할 수 있다. 이 필드는 전술한 ROUTE 로 전달되는USBD 의 해당 필드와 같을 수 있다. 이 S-TSID 는 ROUTE 로 전달되는 서비스 컴포넌트들에 대한 액세스 관련 정보를 제공할 수 있다. 이 S-TSID 는 MMT 프로토콜에 따라 리니어 서비스 컴포넌트들이 전달되는 상황에서, ROUTE 프로토콜에 따라 전달되는 NRT 데이터들을 위해 존재할 수 있다.
@sTSIDDestinationIpAddress 속성, @sTSIDDestinationUdpPort 속성 및 @sTSIDSourceIpAddress 속성은 각각 전술한 S-TSID 를 운반하는 전송 패킷의 데스티네이션 IP 어드레스, 데스티네이션 UDP 포트, 소스 IP 어드레스를 나타낼 수 있다. 즉, 이 필드들은 전술한 S-TSID 를 운반하는 전송 세션(MMTP 세션 또는 ROUTE 세션)을 식별할 수 있다.
@sTSIDMajorProtocolVersion 속성 및 @sTSIDMinorProtocolVersion 속성은 전술한 S-TSID 를 전달하는데 사용되는 전송 프로토콜의 메이저 버전 넘버 및 마이너 버전 넘버를 지시할 수 있다.
전술한 ComponentInfo 엘레멘트는 @componentType 속성, @componentRole 속성, @componentProtectedFlag 속성, @componentId 속성 및/또는 @componentName 속성을 더 포함할 수 있다.
@componentType 속성은 해당 컴포넌트의 타입을 지시할 수 있다. 예를 들어 이 속성은 해당 컴포넌트가 오디오, 비디오, 클로즈드캡션 컴포넌트인지를 지시할 수 있다. @componentRole 속성은 해당 컴포넌트의 롤(역할)을 지시할 수 있다. 예를 들어 이 속성은 해당 컴포넌트가 오디오 컴포넌트인 경우 메인 오디오, 뮤직, 코멘터리 등인지를 지시할 수 있다. 해당 컴포넌트가 비디오 컴포넌트인 경우 프라이머리 비디오인지 등을 지시할 수 있다. 해당 컴포넌트가 클로즈드 캡션 컴포넌트인 경우 노말 캡션인지 이지리더(easy reader) 타입인지 등을 지시할 수 있다.
@componentProtectedFlag 속성은 해당 서비스 컴포넌트가 프로텍티드되었는지, 예를 들어 암호화되었는지를 지시할 수 있다. @componentId 속성은 해당 서비스 컴포넌트의 식별자를 나타낼 수 있다. 이 속성의 값은 이 서비스 컴포넌트에 해당하는 MP 테이블의 asset_id (에셋 ID) 와 같은 값일 수 있다. @componentName 속성은 해당 서비스 컴포넌트의 이름을 나타낼 수 있다.
도 6 은 본 발명의 일 실시예에 따른 링크 레이어(Link Layer) 동작을 도시한 도면이다.
링크 레이어는 피지컬 레이어와 네트워크 레이어 사이의 레이어일 수 있다. 송신 측에서는 네트워크 레이어에서 피지컬 레이어로 데이터를 전송하고, 수신 측에서는 피지컬 레이어에서 네트워크 레이어로 데이터를 전송할 수 있다(t6010). 링크 레이어의 목적은 피지컬 레이어에 의한 처리를 위해 모든 입력 패킷 타입을 하나의 포맷으로 압축(abstracting)하는 것, 아직 정의되지 않은 입력 패킷 타입에 대한 유연성(flexibility) 및 추후 확장 가능성을 보장하는 것일 수 있다. 또한 링크 레이어는 입력 패킷의 헤더의 불필요한 정보를 압축하는 옵션을 제공함으로써, 입력 데이터가 효율적으로 전송될 수 있도록 할 수 있다. 링크 레이어의 오버헤드 리덕션, 인캡슐레이션 등의 동작은 링크 레이어 프로토콜이라 불리고, 해당 프로토콜을 이용하여 생성된 패킷은 링크 레이어 패킷이라 불릴 수 있다. 링크 레이어는 패킷 인캡슐레이션(packet encapsulation), 오버헤드 리덕션(Overhead Reduction) 및/또는 시그널링 전송(Signaling Transmission) 등의 기능을 수행할 수 있다.
송신측 기준으로, 링크 레이어(ALP)는 입력 패킷에 대하여 오버헤드 리덕션 과정을 수행한 후 이들을 링크 레이어 패킷으로 인캡슐레이션할 수 있다. 또한 실시예에 따라 링크 레이어는 오버헤드 리덕션 과정을 수행하지 아니하고, 링크 레이어 패킷으로 인캡슐레이션할 수도 있다. 링크 레이어 프로토콜의 사용으로 인해 피지컬 레이어 상에서 데이터의 전송에 대한 오버헤드가 크게 감소할 수 있으며, 본 발명에 따른 링크 레이어 프로토콜은 IP 오버헤드 리덕션 및/또는 MPEG-2 TS 오버헤드 리덕션을 제공할 수 있다.
도시된, IP 패킷이 입력패킷으로 입력되는 경우에 있어서(t6010), 링크 레이어는 IP 헤더 압축, 어댑테이션 및/또는 인캡슐레이션 과정을 차례로 수행할 수 있다. 실시예에 따라 일부 과정은 생략될 수 있다. 먼저, RoHC 모듈이 IP 패킷 헤더 압축을 수행하여 불필요한 오버헤드를 줄이고, 어댑테이션 과정을 통해 컨텍스트 정보가 추출되고 대역 외로 전송될 수 있다. IP 헤더 압축과 어댑테이션 과정을 통칭하여 IP 헤더 압축이라 부를 수도 있다. 이 후 인캡슐레이션 과정을 통해 IP 패킷들이 링크 레이어 패킷들로 인캡슐레이션될 수 있다.
MPEG 2 TS 패킷이 입력패킷으로 입력되는 경우에 있어서, 링크 레이어는 TS 패킷에 대한 오버헤드 리덕션 및/또는 인캡슐레이션 과정을 차례로 수행할 수 있다. 실시예에 따라 일부 과정은 생략될 수 있다. 오버헤드 리덕션에 있어, 링크 레이어는 싱크 바이트 제거, 널 패킷 삭제 및/또는 공통(common) 헤더 제거 (압축)을 제공할 수 있다. 싱크 바이트 제거를 통해 TS 패킷당 1 바이트의 오버헤드 리덕션이 제공될 수 있다. 수신측에서 재삽입될 수 있는 방식으로 널 패킷 삭제가 수행될 수 있다. 또한 연속된 헤더들 간의 공통되는 정보들이 수신측에서 복구될 수 있는 방식으로 삭제(압축)될 수 있다. 각 오버헤드 리덕션 과정 중 일부는 생략될 수 있다. 이 후 인캡슐레이션 과정을 통해 TS 패킷들이 링크 레이어 패킷들로 인캡슐레이션될 수 있다. TS 패킷의 인캡슐레이션에 대한 링크 레이어 패킷 구조는 다른 타입의 패킷들과는 다를 수 있다.
먼저 IP 헤더 압축(IP Header Compression) 에 대해서 설명한다.
IP 패킷은 고정된 헤더 포맷을 가지고 있으나, 통신 환경에서 필요한 일부 정보는 브로드캐스트 환경에서 불필요할 수 있다. 링크 레이어 프로토콜은 IP 패킷의 헤더를 압축함으로써 브로드캐스트 오버헤드를 줄이는 메커니즘을 제공할 수 있다.
IP 헤더 압축은 헤더 컴프레서/디컴프레서 및/또는 어댑테이션 모듈을 포함할 수 있다. IP 헤더 컴프레서(RoHC 컴프레서)는 RoHC 방식에 기초하여 각 IP 패킷 헤더의 크기를 감소시킬 수 있다. 이 후 어댑테이션 모듈은 컨텍스트 정보를 추출하고 각 패킷 스트림으로부터 시그널링 정보를 생성할 수 있다. 수신기는 해당 패킷 스트림에 관련된 시그널링 정보를 파싱하고 컨텍스트 정보를 그 패킷 스트림에 붙일(attach) 수 있다. RoHC 디컴프레서는 패킷 헤더를 복구하여 원래의 IP 패킷을 재구성할 수 있다.
이하, 어댑테이션(Adaptation) 에 대해서 설명한다.
단방향 링크를 통한 전송의 경우, 수신기가 컨텍스트의 정보를 갖고 있지 않으면, 디컴프레서는 완전한 컨텍스트를 수신할 때까지 수신된 패킷 헤더를 복구할 수 없다. 이는 채널 변경 지연 및 턴 온 딜레이 (turn-on delay)를 초래할 수 있다. 따라서 어댑테이션 기능을 통해, 컴프레서/디컴프레서 간의 컨피규레이션 파라미터와 컨텍스트 정보가 대역 외로 전송될 수 있다.
압축된 IP 패킷들로부터 컨텍스트 정보가 추출되는데, 어댑테이션 모드에 따라 다양한 방법이 사용될 수 있다.
모드 #1 은 압축된 패킷 스트림에 대해 어떠한 동작도 수행하지 않는 모드로서, 어댑테이션 모듈이 버퍼로서 동작하는 모드일 수 있다.
모드 #2 는 압축된 패킷 스트림 중, IR 패킷을 검출하여 컨텍스트 정보(스태틱 체인)을 추출하는 모드일 수 있다. 추출후 IR 패킷은 IR-DYN 패킷으로 전환되고, IR-DYN 패킷은 원래의 IR 패킷을 대체하여 패킷 스트림 내에서 같은 순서로 전송될 수 있다.
모드 #3 (t6020) 는 압축된 패킷 스트림 중, IR 및 IR-DYN 패킷을 검출하고 컨텍스트 정보를 추출하는 모드일 수 있다. IR 패킷으로부터 스태틱 체인 및 다이나믹 체인이, IR-DYN 패킷으로부터 다이나믹 체인이 추출될 수 있다. 추출후 IR 및 IR-DYN 패킷은 일반 압축 패킷으로 전환될 수 있다. 전환된 패킷은 원래의 IR 및 IR-DYN 패킷을 대체하여 패킷 스트림 내에서 같은 순서로 전송될 수 있다.
각 모드에서, 컨텍스트 정보가 추출되고 남은 패킷들은, 압축된 IP 패킷을 위한 링크 레이어 패킷 구조에 따라 인캡슐레이션 되어 전송될 수 있다. 컨텍스트 정보들은, 링크 레이어 시그널링으로서, 시그널링 정보를 위한 링크 레이어 패킷 구조에 따라 인캡슐레이션 되어 전송될 수 있다.
추출된 컨텍스트 정보는 RDT (RoHC-U Description Table) 에 포함되어 RoHC 패킷 플로우와 별도로 전송될 수 있다. 컨텍스트 정보는 다른 시그널링 정보와 함께 특정(specific) 피지컬 데이터 경로를 통해 전송될 수 있다. 특정 피지컬 데이터 경로란, 실시예에 따라, 일반적인 PLP 중 하나를 의미할 수도 있고, LLS (Low Level Signaling) 이 전달되는 PLP 를 의미할 수도 있고, 지정된(dedicated) PLP 일 수도 있고, L1 시그널링 패쓰(path)를 의미할 수도 있다. 여기서 RDT 는 컨텍스트 정보(스태틱 체인 및/또는 다이나믹 체인) 및/또는 헤더 컴프레션과 관련된 정보를 포함하는 시그널링 정보일 수 있다.
수신기는 패킷 스트림을 획득하기 앞서, 최초 PLP 를 선택해 SLT, RDT 등의 시그널링 정보를 먼저 획득할 수 있다. 시그널링 정보가 획득되면, 해당 패킷 스트림을 운반하는 PLP 가 선택될 수 있다. 어댑테이션 모듈은 컨텍스트 정보를 파싱하고 이를 압축된 패킷들과 합칠 수 있다. 이를 통해 패킷 스트림이 복구될 수 있고, 이는 RoHC 디컴프레서로 전달될 수 있다. 이후 디컴프레션이 시작될 수 있다.
이하, 패킷 인캡슐레이션에 대해서 설명한다.
링크 레이어 프로토콜은 IP 패킷, TS 패킷 등의 모든 타입의 인풋 패킷들을 링크 레이어 패킷으로인캡슐레이션할 수 있다. 이를 통해 피지컬 레이어는 네트워크 레이어의 프로토콜 타입과는 독립적으로 하나의 패킷 포맷만 처리하면 된다(여기서 네트워크 레이어 패킷의 일종으로 MPEG-2 TS 패킷을 고려). 각 네트워크 레이어 패킷 또는 입력 패킷은 제네릭 링크 레이어 패킷의 페이로드로 변형된다.
패킷 인캡슐레이션 과정에서 분할(segmentation) 이 활용될 수 있다. 네트워크 레이어 패킷이 지나치게 커서 피지컬 레이어에서 처리하지 못하는 경우, 네트워크 레이어 패킷은 두 개 이상의 세그먼트들로 나누어질 수 있다. 링크 레이어 패킷 헤더는 송신 측에서 분할을 실행하고 수신 측에서 재결합을 실행하기 위한 필드들을 포함할 수 있다. 각 세그먼트들은 원래 위치와 같은 순서로 링크 레이어 패킷으로 인캡슐레이션될 수 있다.
패킷 인캡슐레이션 과정에서 연쇄(concatenation) 또한 활용될 수 있다. 링크 레이어 패킷의 페이로드가 여러 네트워크 레이어 패킷을 포함할 정도로 네트워크 레이어 패킷이 충분히 작은 경우, 연쇄가 수행될 수 있다. 링크 레이어 패킷 헤더는 연쇄를 실행하기 위한 필드들을 포함할 수 있다. 연쇄의 경우 각 입력 패킷들은 원래의 입력 순서와 같은 순서로 링크 레이어 패킷의 페이로드로 인캡슐레이션될 수 있다.
링크 레이어 패킷은 헤더와 페이로드를 포함할 수 있고, 헤더는 베이스 헤더, 추가(additional) 헤더 및/또는 옵셔널 헤더가 포함될 수 있다. 추가 헤더는 연쇄나 분할 등의 상황에 따라 더 추가될 수 있는데, 추가헤더에는 상황에 맞춘 필요한 필드들이 포함될 수 있다. 또한 추가적인 정보의 전달을 위해 옵셔널 헤더가 더 추가될 수도 있다. 각각의 헤더 구조는 기 정의되어 있을 수 있다. 전술한 바와 같이 입력 패킷이 TS 패킷인 경우에는, 다른 패킷들과는 다른 링크 레이어 헤더 구조가 사용될 수 있다.
이하, 링크 레이어 시그널링에 대해서 설명한다.
링크 레이어 시그널링은 IP 레이어보다 하위 레벨에서 동작할 수 있다. 수신측에서는 LLS, SLT, SLS 등의 IP 레벨 시그널링보다, 링크 레이어 시그널링을 더 빠르게 획득할 수 있다. 따라서 링크 레이어 시그널링은 세션 설정(establishment) 이전에 획득될 수 있다.
링크 레이어 시그널링에는 인터널 링크 레이어 시그널링과 익스터널 링크 레이어 시그널링이 있을 수 있다. 인터널 링크 레이어 시그널링은 링크 레이어에서 생성된 시그널링 정보일 수 있다. 전술한 RDT 나 후술할 LMT 등이 여기에 해당할 수 있다. 익스터널 링크 레이어 시그널링은 외부 모듈 또는 외부 프로토콜, 상위 레이어로부터 전달받은 시그널링 정보일 수 있다. 링크 레이어는 링크 레이어 시그널링을 링크 레이어 패킷으로 인캡슐레이션하여 전달할 수 있다. 링크 레이어 시그널링을 위한 링크 레이어 패킷 구조(헤더 구조)가 정의될 수 있는데, 이 구조에 따라 링크 레이어 시그널링 정보가 인캡슐레이션될 수 있다.
도 7 은 본 발명의 일 실시예에 따른 LMT (Link Mapping Table) 를 도시한 도면이다.
LMT 는 PLP 로 운반되는 상위 레이어 세션들의 리스트를 제공할 수 있다. 또한 LMT 는 상위 레이어 세션들을 전달하는 링크 레이어 패킷들을 프로세싱하기 위한 추가적인 정보들을 제공할 수 있다.
LMT 를 통해 한 PLP 를 통해 어떠한 IP 스트림들, 어떠한 전송 세션들이 전송되고 있는지에 대한정보가 획득될 수 있다. 반대로 특정 전송 세션이 어느 PLP 로 전달되는지에 대한 정보를 획득할 수 있다.
실시예에 따라 전술한 SLT, SLS 등에서의 PLP 식별자 정보가 활용되어, SLT, SLS 가 지시하는 특정전송 세션이 어느 PLP 로 전송되고 있는지에 대한 정보가 확인될 수 있다.
다른 실시예에 따라 전술한 SLT, SLS 등에서의 PLP 식별자 정보는 생략되고, SLT, SLS 가 지시하는 특정 전송 세션에 대한 PLP 정보는 LMT 내의 정보를 참조함으로써 확인될 수 있다. 이 경우 수신기는 LMT 와 다른 IP 레벨 시그널링 정보들을 조합하여, 알고자 하는 PLP 를 식별할 수 있다. 이 실시예에 있어서도 SLT, SLS 등에서의 PLP 정보는 생략되지 않고, SLT, SLS 등에 남아있을 수 있다.
도시된 실시예에 따른 LMT 는, signaling_type 필드, PLP_ID 필드, num_session 필드 및/또는 각각의 세션들에 대한 정보들을 포함할 수 있다. 도시된 실시예의 LMT 는 하나의 PLP 에 대해서, 그 PLP 로 전송되는 IP 스트림들을 기술하고 있지만, 실시예에 따라 LMT 에 PLP 루프가 추가되어, 복수개의 PLP 에 대한 정보가 기술될 수도 있다.
signaling_type 필드는 해당 테이블에 의해 전달되는 시그널링 정보의 타입을 지시할 수 있다. LMT 에 대한 signaling_type 필드의 값은 0x01로 설정될 수 있다. PLP_ID 필드는 해당 LMT 에 해당하는 PLP 를 식별할 수 있다. num_session 필드는 PLP_ID 필드에 의해 식별되는 PLP 로 전달되는 상위 레이어 세션들의 개수를 나타낼 수 있다.
num_session 필드가 나타내는 개수에 따라, 각각의 세션들에 대한 정보들이 포함될 수 있다. 이정보에는 src_IP_add 필드, dst_IP_add 필드, src_UDP_port 필드, dst_UDP_port 필드, SID_flag 필드, compressed_flag 필드, SID 필드 및/또는 context_id 필드가 있을 수 있다.
src_IP_add 필드, dst_IP_add 필드, src_UDP_port 필드 및 dst_UDP_port 필드는 PLP_ID 필드에 의해 식별되는 PLP 로 전달되는 상위 레이어 세션들 중, 해당 전송 세션에 대한 소스 IP 어드레스, 데스티네이션 IP 어드레스, 소스 UDP 포트, 데스티네이션 UDP 포트를 나타낼 수 있다.
SID_flag 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷이 그 옵셔널 헤더에 SID 필드를 갖는지 여부를 지시할 수 있다. 상위 레이어 세션을 전달하는 링크 레이어 패킷은 그 옵셔널 헤더에 SID 필드를 가질 수 있고, 그 SID 필드 값은 후술할 LMT 내의 SID 필드와 동일할 수 있다.
compressed_flag 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷의 데이터들에 헤더 컴프레션이 적용되었는지 여부를 지시할 수 있다. 또한 본 필드의 값에 따라 후술할 context_id 필드의 존부가 결정될 수 있다. SID 필드는 해당 전송 세션을 전달하는 링크 레이어 패킷들에 대한 SID (sub stream ID) 를 지시할 수 있다.
context_id 필드는 RDT 내의 CID(context id) 에 대한 레퍼런스를 제공할 수 있다. RDT 의 CID 정보는 해당되는 압축 IP 패킷 스트림에 대한 컨텍스트 ID 를 나타낼 수 있다. RDT 는 해당 압축 IP 패킷 스트림에 대한 컨텍스트 정보들을 제공할 수 있다. 본 필드를 통해 RDT 와 LMT 가 연관될 수 있다.
전술한, 본 발명의 시그널링 정보/테이블의 실시예들에 있어서, 각각의 필드, 엘레멘트, 속성들은 생략되거나 다른 필드로 대체될 수 있으며, 실시예에 따라 추가적인 필드, 엘레멘트, 속성들이 추가될 수도 있다.
본 발명의 일 실시예에서, 한 서비스의 서비스 컴포넌트들이 복수개의 ROUTE 세션을 통해 전달될 수 있다. 이 경우, SLT 의 부트스트랩 정보를 통하여 SLS 가 획득될 수 있다. 이 SLS 의 USBD 를 통해 S-TSID 와 MPD 가 레퍼런싱될 수 있다. S-TSID 는 SLS 가 전달되고 있는 ROUTE 세션 뿐 아니라, 서비스 컴포넌트들이 전달되고 있는 다른 ROUTE 세션에 대한 전송 세션 디스크립션 정보 또한 기술할 수 있다. 이를 통해 복수개의 ROUTE 세션을 통해 전달되는 서비스 컴포넌트들이 모두 수집될 수 있다. 이러한 사항은 한 서비스의 서비스 컴포넌트들이 복수개의 MMTP 세션을 통해 전달되는 경우에도 유사하게 적용될 수 있다. 참고로, 하나의 서비스 컴포넌트는 복수개의 서비스에 의해 동시에 사용될 수도 있다.
본 발명의 또 다른 실시예에서, ESG 서비스에 대한 부트스트래핑은 방송망 또는 브로드밴드에 의해 수행될 수 있다. 브로드밴드를 통한 ESG 획득을 통해, SLT 의 URL 정보가 활용될 수 있다. 이 URL 로 ESG 정보 등이 요청될 수 있다.
본 발명의 또 다른 실시예에서, 한 서비스의 서비스 컴포넌트가 하나는 방송망으로 하나는 브로드밴드로 전달될 수 있다(하이브리드). S-TSID 는 방송망으로 전달되는 컴포넌트들에 대해 기술해, ROUTE 클라이언트가 원하는 서비스 컴포넌트들을 획득케 할 수 있다. 또한 USBD 는 베이스 패턴 정보를 가지고 있어, 어느 세그먼트들이(어느 컴포넌트들이) 어느 경로로 전달되는지 기술할 수 있다. 따라서 수신기는 이를 이용해, 브로드밴드 서버로 요청해야될 세그먼트는 무엇인지, 방송 스트림에서 찾아야될 세그먼트는 무엇인지 알 수 있다.
본 발명의 또 다른 실시예에서, 서비스에 대한 스케일러블(scalable) 코딩이 수행될 수 있다. USBD 는 해당 서비스를 렌더링하기 위해 필요한 모든 캐패빌리티 정보를 가질 수 있다. 예를 들어 한 서비스가 HD 또는 UHD 로 제공되는 경우, USBD 의 캐패빌리티 정보는 "HD 또는 UHD" 값을 가질 수 있다. 수신기는 MPD 를 이용하여 UHD 또는 HD 서비스를 렌더링하기 위하여 어느 컴포넌트가 재생되어야 하는지 알 수 있다.
본 발명의 또 다른 실시예에서, SLS 를 전달하는 LCT 채널로 전달되는 LCT 패킷들의 TOI 필드를 통해, 해당 LCT 패킷들이 어느 SLS 프래그먼트를 전달하고 있는지(USBD, S-TSID, MPD 등..) 가 식별될 수 있다.
본 발명의 또 다른 실시예에서, 앱 기반 인핸스먼트/ 앱 기반 서비스에 사용될 앱 컴포넌트들은 NRT 컴포넌트로서 방송망을 통해 전달되거나 브로드밴드를 통해 전달될 수 있다. 또한 앱 기반 인핸스먼트에 대한 앱 시그널링은 SLS 와 함께 전달되는 AST (Application Signaling Table) 에 의해 수행될 수 있다. 또한 앱이 수행할 동작에 대한 시그널링인 이벤트는 SLS 와 함께 EMT (Event Message Table) 형태로 전달되거나, MPD 내에 시그널링되거나, DASH 레프리젠테이션 내에 box 형태로 인밴드(in-band) 시그널링될 수 있다. AST, EMT 등은 브로드밴드를 통해 전달될 수도 있다. 수집된 앱 컴포넌트들과 이러한 시그널링 정보들을 이용해 앱 기반 인핸스먼트 등이 제공될 수 있다.
본 발명의 또 다른 실시예에서, 긴급 경보를 위해 CAP 메시지가 전술한 LLS 테이블에 포함되어 제공될 수 있다. 긴급 경보를 위한 리치 미디어(Rich Media) 컨텐츠 역시 제공될 수 있다. 리치 미디어는 CAP 메시지에 의해 시그널링될 수 있으며, 리치 미디어가 존재하는 경우 이는 SLT 에 의해 시그널링되는 EAS 서비스로서 제공될 수 있다.
본 발명의 또 다른 실시예에서, MMT 프로토콜에 따라 리니어 서비스 컴포넌트들이 방송망을 통해 전달될 수 있다. 이 경우 해당 서비스에 대한 NRT 데이터(예를 들어 앱 컴포넌트)들은 ROUTE 프로토콜에 따라 방송망을 통해 전달될 수 있다. 또한 해당 서비스에 대한 데이터가 브로드밴드를 통해 전달될 수도 있다. 수신기는 SLT 의 부트스트랩 정보를 이용해 SLS 를 전달하는 MMTP 세션에 접근할 수 있다. MMT 에 따른 SLS 의 USBD 는 MP 테이블을 레퍼런싱하여, 수신기가 MMT 프로토콜에 따라 전달되는 MPU 로 포맷된 리니어 서비스 컴포넌트들을 획득케 할 수 있다. 또한, USBD 는 S-TSID 를 더 레퍼런싱하여, 수신기가 ROUTE 프로토콜에 따라 전달되는 NRT 데이터를 획득케 할 수 있다. 또한, USBD 는 MPD 를 더 레퍼런싱하여, 브로드밴드를 통해 전달되는 데이터에 대한 재생 디스크립션을 제공할 수 있다.
본 발명의 또 다른 실시예에서, 수신기는 그 컴패니언 디바이스에 스트리밍 컴포넌트 및/또는 파일 컨텐트 아이템(파일 등)을 획득할 수 있는 로케이션 URL 정보를, 웹소켓 등의 방법을 통해 전달할 수 있다. 컴패니언 디바이스의 어플리케이션은 이 URL 로 HTTP GET 등을 통해 요청하여 해당 컴포넌트, 데이터 등을 획득할 수 있다. 그 밖에 수신기는 시스템 타임 정보, 긴급 경보 정보 등의 정보를 컴패니언 디바이스 측에 전달할 수 있다.
도 8은 본 발명의 일 실시예에 따른 네트워크 토폴로지를 보여주는 블록도이다.
도 8에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50), 방송 수신 장치(60), 네트워크(70), 영상 표시 장치(100)를 포함한다.
컨텐츠 제공 서버(10)는 방송국 등에 해당할 수 있으며, 메인 시청각 컨텐트(main audio-visual content)를 포함하는 방송 신호를 방송한다. 방송 신호는 부가 서비스를 더 포함할 수 있다. 부가 서비스는 메인 시청각 컨텐트와 관련이 있을 수도 있고, 관련이 없을 수도 있다. 부가 서비스는 서비스 정보(service information), 메타데이터(metadata), 부가 데이터, 컴파일된 실행 파일, 웹 애플리케이션, HTML(Hypertext Markup Language) 문서, XML 문서, CSS(cascading style sheet) 문서, 오디오 파일, 비디오 파일, ATSC 2.0 컨텐트, URL(Uniform Resource Locator)과 같은 주소 등의 형태를 가질 수 있다. 하나 이상의 컨텐츠 제공 서버가 존재할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 영상 표시 장치(100)가 메인 시청각 컨텐트에 기초하여 컨텐트를 인식할 수 있게 하는 컨텐트 인식 서비스를 제공한다. 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐트에 수정을 가할 수도 있고 수정을 가하지 않을 수도 있다. 하나 이상의 컨텐츠 인식 서비스 제공 서버가 존재할 수 있다.
컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐트에 변형을 가하여 메인 시청각 컨텐트에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하는 워터마크 서버일 수 있다. 이 워터마크 서버는 메인 시청각 컨텐트의 각 프레임의 왼쪽 상단 또는 오른쪽 상단에 컨텐츠 제공자의 로고를 워터마크할 수 있다.
또, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐트에 변형을 가하여 메인 시청각 컨텐트에 컨텐츠 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하는 워터마크 서버일 수 있다.
또한, 컨텐츠 인식 서비스 제공 서버(20)는 메인 시청각 컨텐트의 일부의 프레임 또는 일부의 오디오 샘플로부터 특징 정보를 추출하여 저장하는 핑거프린트 서버일 수 있다. 이 특징 정보는 시그너처라고도 불린다.
멀티채널 비디오 분배 서버(30)는 복수의 방송국으로부터 방송 신호를 수신하고 다중화하여 다중화된 신호를 방송 수신 장치(60)에 제공한다. 특히, 멀티채널 비디오 분배 서버(30)는 수신한 방송 신호에 대해 복조와 채널 복호화를 수행하여 메인 시청각 컨텐트와 부가 서비스를 추출한 후, 추출된 메인 시청각 컨텐트와 추출한 부가 서비스에 대해 채널 부호화를 수행하여 분배를 위한 다중화 신호를 생성할 수 있다. 이때, 멀티채널 비디오 분배 서버(30)는 추출한 부가 서비스를 제외할 수도 있고, 또 다른 부가 서비스를 추가할 수도 있기 때문에, 방송국은 방송국 주도의 서비스를 제공할 수 없다. 하나 이상의 멀티채널 비디오 분배 서버가 존재할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고, 튜팅한 채널의 신호를 수신하고, 수신한 신호에 대해 복조와 채널 복호를 수행하여 메인 시청각 컨텐트를 추출한다. 그리고 방송 수신 장치(60)는 추출한 메인 시청각 컨텐트를 H.264/MPEG-4 AVC(Moving Picture Experts Group-4 advanced video coding), Dolby AC-3, MPEG-2 AAC (Moving Picture Experts Group-2 Advanced Audio Coding) 알고리즘 등을 이용하여 복호하여 비압축 메인 시청각 컨텐트(uncompressed main AV content)를 생성한다. 방송 수신 장치(60)는 생성한 비압축 메인 시청각 컨텐트를 영상 표시 장치(100)의 외부 입력 포트 등을 통해 영상 표시 장치(100)에 제공한다.
부가 서비스 정보 제공 서버(40)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐트와 관련된 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 제공한다. 하나 이상의 부가 서비스 주소 제공 서버가 존재할 수 있다. 부가 서비스 정보 제공 서버(40)는 복수의 이용가능한 부가 서비스 중에서 가장 우선순위가 높은 부가 서비스를 위한 부가 서비스 정보를 제공할 수도 있다.
부가 서비스 제공 서버(50)는 영상 표시 장치의 요청에 응답하여 메인 시청각 컨텐트와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공한다. 하나 이상의 부가 서비스 제공 서버가 존재할 수 있다.
영상 표시 장치(100)는 텔레비전, 노트북, 핸드폰, 스마트폰 등과 같이 디스플레이부를 장치일 수 있다. 영상 표시 장치(100)는 방송 수신 장치(60)로부터 비압축 메인 시청각 컨텐트를 수신할 수도 있고, 컨텐츠 제공 서버(10) 또는 멀티채널 비디오 분배 서버(30)로부터 부호화된 메인 시청각 컨텐트를 포함하는 방송 신호를 수신할 수 도 있다. 영상 표시 장치(100)는 네트워크(70)를 통해 컨텐츠 인식 서비스 제공 서버(20)로부터 컨텐츠 인식 서비스를 제공받을 수 있고, 네트워크(70)를 통해 부가 서비스 정보 제공 서버(40)로부터 메인 시청각 컨텐트와 관련하여 이용할 수 있는 하나 이상의 부가 서비스의 주소를 받을 수 있으며, 부가 서비스 제공 서버(50)로부터 메인 시청각 컨텐트와 관련하여 이용할 수 있는 하나 이상의 부가 서비스를 제공받을 수 있다.
컨텐츠 제공 서버(10), 컨텐츠 인식 서비스 제공 서버(20), 멀티채널 비디오 분배 서버(30), 부가 서비스 정보 제공 서버(40), 복수의 부가 서비스 제공 서버(50) 중 2 이상은 하나의 서버의 형태로 결합될 수도 있고, 한 사업자에 의해 운영될 수도 있다.
도 9는 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 9에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)를 더 포함한다.
도 9에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐트에 변형을 가하여 메인 시청각 컨텐트에 컨텐츠 정보를 삽입한다. 멀티채널 비디오 분배 서버(30)는 변형된 메인 시청각 컨텐트를 포함하는 방송 신호를 수신하여 분배한다. 특히, 워터마크 서버는 이하에서 설명하는 바와 같은 디지털 워터마킹 기술을 이용할 수 있다.
디지털 워터마크는 삭제하기 어려운 방법으로 디지털 신호에 정보를 삽입하는 프로세스이다. 예를 들면, 디지털 신호는 오디오, 사진, 또는 비디오일 수 있다. 이 디지털 신호가 복사되면, 삽입된 정보 또한 복사본에 담아진다. 한 디지털 신호가 동시에 다른 여러 개의 워터마크를 운반할 수 있다.
보이는 워터마킹(visible watermarking)에서, 삽입되는 정보는 사진 또는 비디오에서 눈으로 식별가능하다. 전형적으로, 삽입된 정보는 미디어의 소유자를 식별하는 텍스트 또는 로고이다. 텔레비전 방송국이 자신의 로고를 전송되는 비디오의 코너에 추가하면, 이것이 눈으로 식별가능한 워터마크이다.
눈으로 식별 불가능한 워터마킹(invisible watermarking)에서, 정보는 디지털 데이터로서 오디오, 사진, 또는 비디오에 추가되지만, 일정 량의 정보가 숨겨져 있다는 사실은 감지할 수 있다하더라도 그러한 정보는 인지할 수는 없다. 이러한 눈으로 식별불가능한 워터마킹을 통해 비밀 메시지가 전달될 수도 있다.
워터마킹의 한 응용은 디지털 미디어의 불법 복제를 막기 위한 저작권 보호 시스템에 있다. 예컨데, 복제 장치는 디지털 미디어의 복제 전에 디지털 미디어로부터 워터마크를 얻고, 워터마크의 내용에 기초하여 복제를 할지 말지를 결정할 수 있다.
워터마킹의 또 다른 응용은 디지털 미디어의 출처 추적에 있다. 배포 경로 상의 각 지점에서 워터마크가 디지털 미디어에 임베딩된다. 나중에 이와 같은 디지털 미디어가 발견된다면, 이 디지털 미디어로부터 워터마크가 추출될 수 있고, 워터마크의 내용으로부터 배포의 출처를 파악할 수 있다.
디지털 미디어에 대한 설명이 눈으로 식별불가능한 워터마킹의 또 다른 응용이다.
디지털 미디어를 위한 파일 포멧이 메타데이터라고 불리는 추가적인 정보를 포함할 수 있는데, 디지털 워터마크는 디지털 미디어의 시청각 신호 자체로 전달된다는 점에서 메타데이터와는 구별된다.
워터마킹 방법으로 스프레드 스펙트럼, 양자화, 앰플리튜드 변조가 있다.
마킹되는 신호가 추가적인 수정에 의해 얻어진다면, 워터마킹 방법은 스프레드 스펙트럼에 해당한다. 스프레드 스펙트럼 워터마크는 꽤 강인하다고 알려져 있지만, 워터마크가 임베딩되는 호스트 신호에 간섭을 주기 때문에 많은 정보가 실리지는 않는다.
마킹되는 신호가 양자화에 의해 얻어진다면, 워터마킹 방법은 양자화 타입에 해당한다. 양자화 워터마크는 강인성은 낮지만, 꽤 많은 정보를 실을 수 있다.
마킹되는 신호가 공간 도메인에서 스프레드 스펙트럼과 유사한 추가 수정 방법으로 얻어진다면, 워터마킹 방법은 앰플리튜드 변조에 해당한다.
도 10은 본 발명의 일 실시예에 따른 워터마크 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 전송한다(S101).
워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐트에 변형을 가하여 메인 시청각 컨텐트에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐트에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐트와 부가 서비스를 MVPD(30)에 제공한다(S103).
보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 워터마크 용도, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 워터마크 용도는 무단 복제 방지, 시청률 조사, 부가 서비스 획득 중 하나를 나타낼 수 있다.
컨텐츠 정보는 메인 시청각 컨텐트를 제공하는 컨텐츠 제공자의 식별 정보, 메인 시청각 컨텐트 식별 정보, 메인 시청각 컨텐트 등급 정보, 컨텐츠 정보 획득에 사용된 컨텐트 구간의 시간 정보, 메인 시청각 컨텐트가 방송되는 채널의 이름, 메인 시청각 컨텐트가 방송되는 채널의 로고, 메인 시청각 컨텐트가 방송되는 채널의 설명, 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간, 메인 시청각 컨텐트와 관련하여 이용가능한 부가 서비스 정보 중 하나 이상을 포함할 수 있다.
영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 워터마크를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐트 구간의 시간 정보는 이용된 워터마크가 내삽(embedding)된 컨텐트 구간의 시간 정보일 수 있다. 영상 표시 장치(100)가 컨텐츠 정보의 획득을 위하여 핑거프린트를 이용하였다면, 컨텐츠 정보 획득에 사용된 컨텐트 구간의 시간 정보는 특징 정보가 추출된 컨텐트 구간의 시간 정보일 수 있다. 컨텐츠 정보 획득에 사용된 컨텐트 구간의 시간 정보는 컨텐츠 정보 획득에 사용된 컨텐트 구간의 시작 시간, 컨텐츠 정보 획득에 사용된 컨텐트 구간의 지속 시간(duration), 컨텐츠 정보 획득에 사용된 컨텐트 구간의 종료 시간 중 하나 이상을 포함할 수 있다.
이용 정보 보고 주소는 메인 시청각 컨텐트 시청 정보 보고 주소, 부가 서비스 이용 정보 보고 주소 중 하나 이상을 포함할 수 있다. 이용 정보 보고 주기는 메인 시청각 컨텐트 시청 정보 보고 주기, 부가 서비스 이용 정보 보고 주기 중 하나 이상을 포함할 수 있다. 이용 정보 획득을 위한 최소 이용 시간은 메인 시청각 컨텐트 시청 정보 획득을 위한 최소 시청 시간, 부가 서비스 이용 정보 추출을 위한 최소 사용 시간 중 하나 이상을 포함할 수 있다.
메인 시청각 컨텐트가 최소 시청 시간 이상 시청된 경우에 기초하여 영상 표시 장치(100)는 메인 시청각 컨텐트의 시청 정보를 획득하고, 메인 시청각 컨텐트 시청 정보 보고 주기에서 메인 시청각 컨텐트 시청 정보 보고 주소로 추출한 시청 정보를 보고할 수 있다.
부가 서비스가 최소 사용 시간 이상 사용된 경우에 기초하여 영상 표시 장치(100)는 부가 서비스 이용 정보를 획득하고, 부가 서비스 이용 정보 보고 주기에서 부가 서비스 이용 정보 보고 주소로 추출한 이용 정보를 보고할 수 있다.
부가 서비스 정보는 부가 서비스가 존재하는지에 대한 정보, 부가 서비스 주소 제공 서버 주소, 각각의 이용가능한 부가 서비스의 획득 경로, 각각의 이용가능한 부가 서비스를 위한 주소, 각각의 이용가능한 부가 서비스의 시작 시간, 각각의 이용가능한 부가 서비스의 종료 시간, 각각의 이용가능한 부가 서비스의 수명 주기(lifetime), 각각의 이용가능한 부가 서비스의 획득 모드, 각각의 이용가능한 부가 서비스 위한 요청 주기, 각각의 이용가능한 부가 서비스의 우선 순위 정보, 각각의 이용가능한 부가 서비스의 설명, 각각의 이용가능한 부가 서비스의 항목(category), 이용 정보 보고 주소, 이용 정보 보고 주기, 이용 정보 획득을 위한 최소 이용 시간 중 하나 이상을 포함할 수 있다.
이용가능한 부가 서비스의 획득 경로는 IP 또는 ATSC M/H(Advanced Television Systems Committee - Mobile/Handheld)를 나타낼 수 있다. 이용가능한 부가 서비스의 획득 경로가 ATSC M/H인 경우에, 부가 서비스 정보는 주파수 정보, 채널 정보를 더 포함할 수 있다. 각각의 이용가능한 부가 서비스의 획득 모드는 Push 또는 Pull을 나타낼 수 있다.
한편, 워터마크 서버(21)는 메인 시청각 컨텐트의 로고에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입할 수 있다.
예컨데, 워터마크 서버(21)는 로고의 일정 위치에 바코드를 삽입할 수 있다. 이때 로고의 일정 위치는 로고가 디스플레이되는 구역의 하단 1 라인에 해당할 수 있다. 영상 표시 장치(100)는 이와 같이 바코드가 삽입된 로고를 포함하는 메인 시청각 컨텐트를 수신하는 경우에, 바코드를 디스플레이하지 않을 수 있다.
또한, 워터마크 서버(21)는 로고의 메타데이터 형태로 워터마크 정보를 삽입할 수 있다. 이때 로고의 형상은 유지될 수 있다.
또한, 워터마크 서버(21)는 M개의 프레임의 로고의 각각에 N 비트의 워터마크 정보를 삽입할 수 있다. 즉, 워터마크 서버(21)는 M개의 프레임을 통해 M*N개의 워터마크 정보를 삽입할 수 있다.
MVPD(30)는 워터마킹된 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S105). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐트를 생성한 후, 생성된 비압축 메인 시청각 컨텐트를 영상 표시 장치(100)에 제공한다(S106).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐트를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S107).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐트를 포함하는 방송 신호를 전송할 수도 있다(S108).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐트를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐트 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐트를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S109).
워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S111). 이 제1 응답은 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.
워터마크 정보와 제1 응답이 부가 서비스 주소를 포함하고 있지 않다면, 영상 표시 장치(100)는 부가 서비스을 획득할 수 없다. 그러나 워터마크 정보와 제1 응답이 부가 서비스 주소 제공 서버 주소를 포함할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보와 제1 응답을 통해 부가 서비스 주소나 부가 서비스를 획득하지 못하였고 부가 서비스 주소 제공 서버 주소를 획득하였다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S119).
부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S121).
영상 표시 장치(100)는 워터마크 정보, 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S123), 부가 서비스를 획득한다(S125).
도 11는 본 발명의 일 실시예에 따른 워터마크 기반의 컨텐츠 인식 타이밍을 보여준다.
도 11에 도시된 바와 같이, 방송 수신 장치(60)가 턴온되고 채널을 튜닝하고, 영상 표시 장치(100)가 외부 입력 포트(111)를 통해 방송 수신 장치(60)로부터 튜팅된 채널의 메인 시청각 컨텐트를 수신하면, 영상 표시 장치(100)는 메인 시청각 컨텐트의 워터마크로부터 컨텐츠 제공자 식별자(또는 방송국 식별자)를 감지할 수 있다. 이후, 영상 표시 장치(100)는 감지한 컨텐츠 제공자 식별자에 기초하여 메인 시청각 컨텐트의 워터마크로부터 컨텐츠 정보를 감지할 수 있다.
이때, 도 11에 도시된 바와 같이, 컨텐츠 제공자 식별자의 감지가능 주기와 컨텐츠 정보의 감지가능 주기는 다를 수 있다. 특히, 컨텐츠 제공자 식별자의 감지가능 주기는 컨텐츠 정보의 감지가능 주기보다 짧을 수 있다. 이를 통해, 영상 표시 장치(100)는 필요한 정보만을 감지하기 위한 효율적인 구성을 가질 수 있다.
도 12는 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 12에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 핑거프린트 서버(22)를 더 포함한다.
도 12에 도시된 바와 같은 핑거프린트 서버(22)는 메인 시청각 컨텐트에 변형을 가하지는 않으며 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐트의 식별자와 시간 정보를 제공한다.
도 13은 본 발명의 일 실시예에 따른 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 전송한다(S201).
핑거프린트 서버(22)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐트의 복수의 프레임 구간 또는 복수의 오디오 구간으로부터 복수의 특징 정보를 추출하며, 복수의 특징 정보에 각각 대응하는 복수의 질의 결과를 위한 데이터베이스를 구축한다(S203). 질의 결과는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다.
MVPD(30)는 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S205). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐트를 생성한 후, 생성된 비압축 메인 시청각 컨텐트를 영상 표시 장치(100)에 제공한다(S206).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐트를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S207).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐트를 포함하는 신호를 전송할 수도 있다(S208).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐트를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S213).
영상 표시 장치(100)는 미리 설정된 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송한다(S215).
핑거프린트 서버(22)는 제1 질의에 대한 제1 응답으로서 질의 결과를 제공한다(S217). 만약 제1 응답이 실패에 해당한다면, 영상 표시 장치(100)는 또 다른 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제1 질의를 전송할 수 있다.
핑거프린트 서버(22)는 질의 결과로서 XML (Extensible Markup Language) 문서를 제공할 수 있다. 이하, 질의 결과를 담는 XML 문서의 예를 설명한다.
도 14은 본 발명의 일 실시예에 따른 질의 결과를 담는 ACR-Resulttype의 XML 스키마 다이어그램(schema diagram)을 보여준다.
도 14에 도시된 바와 같이, 질의 결과를 담는 ACR-Resulttype은 ResultCode 속성과 ContentID, NTPTimestamp, SignalingChannelInformation, ServiceInformation 엘리먼트를 갖는다.
예컨데, ResultCode 속성이 200의 값을 가지면, 이는 질의 결과가 성공임을 의미할 수 있다. ResultCode 속성이 404의 값을 가지면, 이는 질의 결과가 실패임을 의미할 수 있다.
SignalingChannelInformation 엘리먼트는 SignalingChannelURL 엘리먼트를 갖고, SignalingChannelURL 엘리먼트는 UpdateMode, PollingCycle 속성을 갖는다. UpdateMode 속성은 Pull 값 또는 Push 값을 가질 수 있다.
ServiceInformation 엘리먼트는 ServiceName, ServiceLogo, ServiceDescription 엘리먼트를 갖는다.
다음은, 이와 같은 질의 결과를 담는 ACR-ResultType의 XML Schema를 보여준다.
Figure pct00001
ContentID 엘리먼트로서, 아래의 표에서 보여주는 바와 같은 ATSC 컨텐트 식별자(ATSC content identifier)가 이용될 수 있다.
Figure pct00002
상기 표에서 보여지는 바와 같이, ATSC content identifier는 TSID와 하우스 번호로 구성된 구조를 가진다.
16 비트 부호없는 정수 TSID는 트랜스포트 스트림 식별자(transport stream identifier)를 담는다(carry).
5 비트 부호 없는 정수 end_of_day는 방송이 끝나서 content_id 값이 재사용될 수 있는 날의 시(hour)로 셋팅된다.
9 비트 부호 없는 정수 unique_for는 content_id 값이 재사용될 수 없는 날의 수(the number of day)로 설정된다.
content_id는 컨텐트 식별자를 나타낸다. 영상 표시 장치(100)는 매일 end_of_day에 해당하는 시간에서 unique_for를 1씩 감소시키고, unique_for가 0이 되지 않았다면 content_id가 유일한 것이라고 간주할 수 있다.
한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC-M/H service를 위한 글로벌 서비스 식별자(Global Service Identifier)가 이용될 수 있다.
글로벌 서비스 식별자는 다음과 같은 폼을 갖는다.
- urn:oma:bcast:iauth:atsc:service:<region>:<xsid>:<serviceid>
여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 "0"이다. <serviceid> 는 <major>나 <minor>로 정의된다. <major> 는 메이저 채널 번호(Major Channel number)를 나타내고, <minor> 마이너 채널 번호(Minor Channel Number)를 나타낸다.
글로벌 서비스 식별자의 예는 아래와 같다.
- urn:oma:bcast:iauth:atsc:service:us:1234:5.1
- urn:oma:bcast:iauth:atsc:service:us:0:100.200
한편, ContentID 엘리먼트로서, 아래에서 설명하는 바와 같은 ATSC 컨텐트 식별자가 이용될 수 있다.
ATSC 컨텐트 식별자는 다음과 같은 폼을 갖는다.
urn:oma:bcast:iauth:atsc:content:<region>:<xsidz>:<contentid>:<unique_for>:<end_of_day>
여기에서 <region>는 ISO 639-2에 의해 규정되는 바와 같은 2개의 문자로 된 국제 국가 코드이다. 로컬 서비스(local service)를 위한 <xsid> 는 <region>에서 정의하는 바와 같은 TSID의 십진수이고, "."<serviceid>가 뒤따를 수 있다. 지역 서비스(regional service) (major > 69)를 위한 <xsid> 는 <serviceid>이다. <content_id> 는 상기 표에 정의되어 있는 content_id field의 base64 부호이고, <unique_for> 는 상기 표에 정의되어 있는 unique_for field의 십진수 부호이며, <end_of_day> 는 상기 표에 정의되어 있는 end_of_day field의 십진수 부호이다.
이하에서는 다시 도 13을 설명한다.
질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제2 질의를 전송한다(S219).
부가 서비스 정보 제공 서버(40)는 제2 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제2 질의에 대한 제2 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S221).
영상 표시 장치(100)는 제1 응답 또는 제2 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S223), 부가 서비스를 획득한다(S225).
UpdateMode 속성이 Pull 값을 가지는 경우, 영상 표시 장치(100)는 SignalingChannelURL을 통해 HTTP request를 부가서비스 제공 서버(50)에 전송하여 이에 대한 응답으로 PSIP 바이너리 스트림을 포함하는 HTTP response를 부가서비스 제공 서버(50)로부터 수신한다. 이 경우 영상 표시 장치(100)는 PollingCycle 속성으로 지정되는 Polling 주기에 따라 HTTP request를 전송할 수 있다. 또한, SignalingChannelURL 엘리먼트는 업데이트 시간 속성을 가질 수도 있다. 이 경우, 영상 표시 장치(100)는 업데이트 시간 속성으로 지정되는 업데이트 시간에서 HTTP request를 전송할 수 있다.
UpdateMode 속성이 Push 값을 가지는 경우, 영상 표시 장치(100)는 XMLHTTPRequest API 를 활용하여 비동기적으로 서버로부터 업데이트를 수신할 수 있다. 영상 표시 장치(100)가 서버로 XMLHTTPRequest object를 통해 비동기적인 request를 한 후에 서버가 시그널링 정보에 변경이 있을 경우에 이 채널을 통해 response로 시그널링 정보를 제공하는 방안이다. 세션의 대기 시간에 제한이 있을 경우에는 session timeout respond를 발생시키고, 바로 수신기는 이를 인지하여 재요청하여서 수신기와 서버간의 시그널링 채널을 항시 유지할 수 있다.
도 15은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지를 보여주는 블록도이다.
도 15에 도시된 바와 같이, 본 발명의 일 실시예에 따른 네트워크 토폴로지는 워터마크 서버(21)와 핑거프린트 서버(22)를 더 포함한다.
도 15에 도시된 바와 같은 워터마크 서버(21)는 메인 시청각 컨텐트에 컨텐츠 제공자 식별 정보를 삽입한다. 워터마크 서버(21)는 로고와 같이 보이는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐트에 삽입할 수도 있고, 보이지 않는 워터마크로서 컨텐츠 제공자 식별 정보를 메인 시청각 컨텐트에 삽입할 수도 있다.
핑거프린트 서버(22)는 메인 시청각 컨텐트에 변형을 가하지는 않으며 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출하여 저장한다. 이후에 핑거프린트 서버(22)는 영상 표시 장치(100)로부터의 특징 정보를 수신하면, 수신한 특징 정보에 해당하는 시청각 컨텐트의 식별자와 시간 정보를 제공한다.
도 16은 본 발명의 일 실시예에 따른 워터마크와 핑거프린트 기반의 네트워크 토폴로지 내의 데이터 흐름을 보여주는 래더 다이어그램이다.
먼저, 컨텐츠 제공 서버(10)는 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 전송한다(S301).
워터마크 서버(21)는 컨텐츠 제공 서버(10)가 제공하는 방송 신호를 수신하고, 메인 시청각 컨텐트에 변형을 가하여 메인 시청각 컨텐트에 로고와 같은 보이는 워터마크(visible watermark)를 삽입하거나, 메인 시청각 컨텐트에 워터마크 정보를 보이지 않는 워터마크(invisible watermark)로서 삽입하고, 워터마킹된 메인 시청각 컨텐트와 부가 서비스를 MVPD(30)에 제공한다(S303). 보이지 않는 워터마크를 통해 삽입되는 워터마크 정보는 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.
MVPD(30)는 워터마킹된 메인 시청각 컨텐트와 부가 서비스를 포함하는 방송 신호를 수신하고, 다중화 신호를 생성하여 방송 수신 장치(60)에 제공한다(S305). 이때 다중화 신호는 수신한 부가 서비스를 배제하거나 새로운 부가 서비스를 포함할 수 있다.
방송 수신 장치(60)는 사용자가 선택한 채널을 튜닝하고 튜닝한 채널의 신호를 수신하고, 수신된 방송 신호를 복조하고 채널 복호화(channel decoding)하고 시청각 복호(AV decoding)를 수행하여 비압축 메인 시청각 컨텐트를 생성한 후, 생성된 비압축 메인 시청각 컨텐트를 영상 표시 장치(100)에 제공한다(S306).
한편, 컨텐츠 제공 서버(10) 또한 메인 시청각 컨텐트를 포함하는 방송 신호를 무선 채널 등을 통해 방송한다(S307).
또한, MVPD(30)는 방송 수신 장치(60)를 통하지 않고 직접 영상 표시 장치(100)에 메인 시청각 컨텐트를 포함하는 신호를 전송할 수도 있다(S308).
영상 표시 장치(100)는 셋톱 박스(60)를 통해 비압축 메인 시청각 컨텐트를 수신할 수 있다. 또는, 영상 표시 장치(100)는 무선 채널을 통해 방송 신호를 수신하고 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 얻을 수 있다. 또는, 영상 표시 장치(100)는 MVPD(30)로부터 방송 신호를 수신하고, 수신한 방송 신호를 복조하고 복호하여 메인 시청각 컨텐트를 수신할 수도 있다. 영상 표시 장치(100)는 획득한 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 워터마크 정보를 추출한다. 워터마크 정보가 로고에 해당하면, 영상 표시 장치(100)는 복수의 로고와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 로고에 해당하는 워터마크 서버 주소를 확인한다. 워터마크 정보가 로고에 해당하는 경우에, 영상 표시 장치(100)는 로고만을 가지고서는 메인 시청각 컨텐츠를 식별할 수 없다. 또한, 워터마크 정보가 컨텐트 정보를 포함하고 있지 않은 경우에도 영상 표시 장치(100)는 메인 시청각 컨텐츠를 식별할 수 없으나, 워터마크 정보가 컨텐츠 제공자 식별 정보나 워터마크 서버 주소를 포함할 수 있다. 워터마크 정보가 컨텐츠 제공자 식별 정보를 포함하는 경우에, 영상 표시 장치(100)는 복수의 컨텐츠 제공자 식별 정보와 복수의 워터마크 서버 주소의 대응관계로부터 추출한 컨텐츠 제공자 식별 정보에 해당하는 워터마크 서버 주소를 확인할 수 있다. 이와 같이, 영상 표시 장치(100)는 워터마크 정보만으로 메인 시청각 컨텐트를 식별할 수 없는 경우에, 획득한 워터마크 서버 주소에 해당하는 워터마크 서버(21)에 접속하여 제1 질의를 전송한다(S309).
워터마크 서버(21)는 제1 질의에 대한 제1 응답을 제공한다(S311). 이 제1 응답은 핑거프린트 서버 주소, 컨텐츠 정보, 부가 서비스 정보, 이용가능한 부가 서비스 중 하나 이상을 포함할 수 있다. 컨텐츠 정보와 부가 서비스 정보는 앞서 설명한 바와 같다.
워터마크 정보와 제1 응답이 핑거프린트 서버 주소를 포함하고 있다면, 영상 표시 장치(100)는 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플로부터 특징 정보를 추출한다(S313).
영상 표시 장치(100)는 제1 응답 내의 핑거프린트 서버 주소에 해당하는 핑거프린트 서버(22)에 접속하여 추출한 특징 정보를 포함하는 제2 질의를 전송한다(S315).
핑거프린트 서버(22)는 제2 질의에 대한 제2 응답으로서 질의 결과를 제공한다(S317).
질의 결과가 부가 서비스 주소나 부가 서비스를 포함하고 있지 않고 부가 서비스 주소 제공 서버 주소를 포함한다면, 영상 표시 장치(100)는 획득한 부가 서비스 주소 제공 서버 주소에 해당하는 부가 서비스 정보 제공 서버(40)에 접속하여 컨텐츠 정보를 포함하는 제3 질의를 전송한다(S319).
부가 서비스 정보 제공 서버(40)는 제3 질의의 컨텐츠 정보와 관련된 하나 이상의 이용가능한 부가 서비스를 검색한다. 이후, 부가 서비스 정보 제공 서버(40)는 제3 질의에 대한 제3 응답으로 하나 이상의 이용가능한 부가 서비스를 위한 부가 서비스 정보를 영상 표시 장치(100)에 제공한다(S321).
영상 표시 장치(100)는 제1 응답, 제2 응답, 또는 제3 응답을 통해 하나 이상의 이용가능한 부가 서비스 주소를 획득하였다면, 이 하나 이상의 이용가능한 부가 서비스 주소에 접속하여 부가 서비스를 요청하고(S323), 부가 서비스를 획득한다(S325).
다음은 도 17을 참고하여, 본 발명의 실시예에 따른 영상 표시 장치(100)를 설명한다.
도 17은 본 발명의 실시예에 따른 영상 표시 장치의 블록도이다.
도 17에 도시된 바와 같이, 본 발명의 실시예에 따른 영상 표시 장치(100)는 방송 신호 수신부(101), 복조부(103), 채널 복호부(105), 역다중화부(107), 시청각 복호부(109), 외부 입력 포트(111), 재생 제어부(113), 재생 장치(120), 부가 서비스 관리부(130), 데이터 송수신부(141), 메모리(150)를 포함한다.
방송 신호 수신부(101)는 컨텐츠 제공 서버(10) 또는 MVPD(30)로부터 방송 신호를 수신한다.
복조부(103)는 수신한 방송 신호를 복조하여 복조된 신호를 생성한다.
채널 복호부(105)는 복조된 신호를 채널 복호하여 채널 복호된 데이터를 생성한다.
역다중화부(107)는 채널 복호된 데이터로부터 메인 시청각 컨텐트와 부가 서비스를 분리한다. 분리된 부가 서비스는 부가 서비스 저장부(152)에 저장된다.
시청각 복호부(109)는 분리된 메인 시청각 컨텐트를 시청각 복호(AV decoding)하여 비압축 메인 시청각 컨텐트를 생성한다.
한편, 외부 입력 포트(111)는 방송 수신 장치(60), 디브이디(digital versatile disk, DVD) 플레이어, 블루레이 디스크 (Blu-ray disc) 플레이어 등으로부터 비압축 메인 시청각 컨텐트를 수신한다. 외부 입력 포트(111)는 DSUB 포트, HDMI (High Definition Multimedia Interface) 포트, DVI (Digital Visual Interface) 포트, 컴포지트(composite) 포트, 컴포넌트(component) 포트, S-Video 포트 중 하나 이상을 포함할 수 있다.
재생 제어부(113)는 시청각 복호부(109)가 생성하는 비압축 메인 시청각 컨텐트 또는 외부 입력 포트(111)로부터 수신한 비압축 메인 시청각 컨텐트 중 적어도 하나를 사용자 선택에 의해 재생 장치(120)에 재생한다.
재생 장치(120)는 디스플레이부(121)와 스피커(123)를 포함한다. 디스플레이부(121)는 액정 디스플레이(liquid crystal display, LCD), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display, TFT LCD), 유기 발광 다이오드(organic light-emitting diode, OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display) 중에서 적어도 하나를 포함할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐트의 컨텐츠 정보를 획득하고, 획득된 컨텐츠 정보에 기초하여 이용가능한 부가 서비스를 획득한다. 특히, 앞서 설명한 바와 같이 부가 서비스 관리부(130)는 비압축 메인 시청각 컨텐트의 일부 프레임 또는 일부 구간의 오디오 샘플에 기초하여 메인 시청각 컨텐트의 식별 정보를 획득할 수 있는데, 본 명세서에서는 이를 자동 컨텐츠 인식(automatic contents recognition, ACR)이라 칭하기도 한다.
데이터 송수신부(141)는 ATSC-M/H (Advanced Television Systems Committee - Mobile/Handheld) 채널 송수신부(141a)와 IP 송수신부(141b)를 포함할 수 있다.
메모리(150)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(Random Access Memory, RAM), SRAM(Static Random Access Memory), 롬(Read-Only Memory, ROM), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상 표시 장치(100)는 인터넷(internet)상에서 상기 메모리(150)의 저장 기능을 수행하는 웹 스토리지(web storage)와 관련되어 동작할 수도 있다.
메모리(150)는 컨텐츠 정보 저장부(151), 부가 서비스 저장부(152), 로고 저장부(153), 설정 정보 저장부(154), 북마크 저장부(155), 사용자 정보 저장부(156), 이용 정보 저장부(157)를 포함할 수 있다.
컨텐츠 정보 저장부(151)는 복수의 특징 정보에 대응하는 복수의 컨텐츠 정보를 저장한다.
부가 서비스 저장부(152)는 복수의 특징 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있고, 복수의 컨텐츠 정보에 대응하는 복수의 부가 서비스를 저장할 수도 있다.
로고 저장부(153)는 복수의 로고를 저장한다. 또, 로고 저장부는 이 복수의 로고에 대응하는 컨텐츠 제공자 식별자 또는 복수의 로고에 대응하는 워터마크 서버 주소를 더 저장할 수도 있다.
설정 정보 저장부(154)는 ACR을 위한 설정 정보를 저장한다.
북마크 저장부(155)는 북마크를 저장한다.
사용자 정보 저장부(156)는 사용자 정보를 저장한다. 사용자 정보는 하나 이상의 서비스를 위한 하나 이상의 계정 정보, 지역 정보, 가족 구성원 정보, 선호 장르 정보, 영상 표시 장치 정보, 이용 정보 제공 범위 중 하나 이상을 포함할 수 있다. 하나 이상의 계정 정보는 이용 정보 측정 서버를 위한 계정 정보, 트위터(twitter), 페이스북(facebook)과 같은 소셜 네트워크 서비스(social network service)의 계정 정보를 포함할 수 있다. 지역 정보는 주소 정보, 우편 번호를 포함할 수 있다. 가족 구성원 정보는 가족 구성원의 수, 각 구성원의 나이, 각 구성원의 성별, 각 구성원의 종교, 각 구성원의 직업 등을 포함할 수 있다. 선호 장르 정보는 스포츠, 영화, 드라마, 교육, 뉴스, 오락, 기타 장르 중에서 하나 이상으로 설정될 수 있다. 영상 표시 장치 정보는 영상 표시 장치의 종류, 제조사, 펌웨어 버전, 해상도, 모델명, OS, 브라우저, 저장 장치 유무, 저장 장치의 용량, 네트워크 속도에 대한 정보를 포함할 수 있다. 이용 정보 제공 범위가 설정되면, 영상 표시 장치(100)는 설정된 범위 내에서 메인 시청각 컨텐트 시청 정보와 부가 서비스 이용 정보를 수집하고 보고할 수 있다. 이용 정보 제공 범위는 가상 채널 각각에 대해 설정될 수 있다. 또한, 이용 정보 측정 허용 범위는 물리 채널 전체에 대해 설정될 수도 있다.
이용 정보 저장부(157)는 영상 표시 장치(100)에 의해 수집되는 메인 시청각 컨텐트 시청 정보와 부가 서비스 사용 정보를 저장한다. 또한, 영상 표시 장치(100)는 수집한 메인 시청각 컨텐트 시청 정보와 수집한 부가 서비스 사용 정보에 기초하여 서비스 이용 패턴을 분석하고, 분석된 서비스 이용 패턴을 이용 정보 저장부(157)에 저장할 수 있다.
부가 서비스 관리부(130)는 핑거프린트 서버(22) 또는 컨텐츠 정보 저장부(151)로부터 메인 시청각 컨텐트의 컨텐츠 정보를 획득할 수 있다. 컨텐츠 정보 저장부(151)에 추출한 특징 정보에 해당하는 컨텐츠 정보가 없거나 충분한 컨텐츠 정보가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 컨텐츠 정보를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 컨텐츠 정보를 업데이트할 수 있다.
부가 서비스 관리부(130)는 부가 서비스 제공 서버(50) 또는 부가 서비스 저장부(153)로부터 이용가능한 부가 서비스를 획득할 수 있다. 부가 서비스 저장부(153)에 부가 서비스가 없거나 충분한 부가 서비스가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 부가 서비스를 업데이트할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 부가 서비스를 업데이트할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐트로부터 로고를 추출하고, 로고 저장부(155)에 질의하여 추출한 로고에 대응하는 컨텐츠 제공자 식별자 또는 워터마크 서버 주소를 획득할 수 있다. 로고 저장부(155)에 추출한 로고와 일치하는 로고가 없거나 충분한 로고가 없는 경우, 부가 서비스 관리부(130)는 데이터 송수신부(141)를 통해 추가 로고를 수신할 수 있다. 또한, 부가 서비스 관리부(130)는 지속적으로 로고를 업데이트할 수 있다.
부가 서비스 관리부(130)는 메인 시청각 컨텐트로부터 추출한 로고와 로고 저장부(155) 내의 복수의 로고와의 비교를 수행하는데 연산의 부담을 줄이기 위한 다양한 방법을 수행할 수 있다.
예컨데, 부가 서비스 관리부(130)는 색깔 특성에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 색깔 특성과 로고 저장부(155) 내의 로고의 색깔 특성을 비교하여 일치 여부를 판단할 수 있다.
또, 부가 서비스 관리부(130)는 문자 인식에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고로부터 인식되는 문자와 로고 저장부(155) 내의 로고로부터 인식되는 문자를 비교하여 일치 여부를 판단할 수 있다.
뿐만 아니라, 부가 서비스 관리부(130)는 로고의 윤곽에 대한 형상에 기초하여 비교를 수행할 수 있다. 즉, 부가 서비스 관리부(130)는 추출한 로고의 윤곽 형상과 로고 저장부(155) 내의 로고의 윤곽 형상을 비교하여 일치 여부를 판단할 수 있다.
다음은 도 18와 도 19을 참고하여 본 발명의 실시예에 따라 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 설명한다.
도 18는 본 발명의 실시예에 따라 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 흐름도이다.
부가 서비스 정보는 부가 서비스의 시작 시간을 포함할 수 있다. 이때, 영상 표시 장치(100)는 이 시작 시간에서 부가 서비스를 시작할 필요가 있다. 그러나, 영상 표시 장치(100)는 타임 스탬프를 가지지 않는 비압축 메인 시청각 컨텐트를 전송하는 신호를 수신하기 때문에, 메인 시청각 컨텐트의 재생 시간의 기준과 부가 서비스의 시작 시간의 기준은 서로 다르다. 영상 표시 장치(100)가 시간 정보를 가지는 메인 시청각 컨텐트를 수신하더라도, 재방송 등과 같이, 메인 시청각 컨텐트의 재생 시간의 기준과 부가 서비스의 시작 시간의 기준은 서로 다를 수 있다. 따라서, 영상 표시 장치(100)는 메인 시청각 컨텐트의 기준 시간과 부가 서비스의 기준 시간을 동기화할 필요가 있다. 특히 영상 표시 장치(100)는 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 시작 시간을 동기화할 필요가 있다.
먼저, 부가 서비스 관리부(130)는 메인 시청각 컨텐트의 일부 구간을 추출한다(S801). 메인 시청각 컨텐트의 일부 구간은 메인 시청각 컨텐트의 일부 비디오 프레임과 일부 오디오 구간 중 하나 이상을 포함할 수 있다. 부가 서비스 관리부(130)가 메인 시청각 컨텐트의 일부 구간을 추출한 시간을 Tn이라 한다.
부가 서비스 관리부(130)는 추출된 구간에 기초하여 메인 시청각 컨텐트의 컨텐츠 정보를 획득한다(S803). 구체적으로 부가 서비스 관리부(130)는 추출된 구간에 보이지 않는 워터마크(invisible watermark)로 부호화된 정보를 복호하여 컨텐츠 정보를 획득할 수 있다. 또한, 부가 서비스 관리부(130)는 추출된 구간의 특징 정보를 추출하고, 추출된 특징 정보에 기초하여 핑거프린트 서버(22) 또는 컨텐츠 정보 저장부(151)로부터 메인 시청각 컨텐트의 컨텐츠 정보를 획득할 수 있다. 부가 서비스 관리부(130)가 컨텐츠 정보를 획득한 시간을 Tm이라 한다.
한편, 컨텐츠 정보는 추출된 구간의 시작 시간(Ts)을 포함한다. 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간(Tm) 이후부터는 시간(Ts), 시간(Tm), 시간(Tn)에 기초하여 메인 시청각 컨텐트의 재생 시간을 부가 서비스의 시작 시간과 동기화한다(S805). 구체적으로, 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간(Tm)을 새로이 계산되는 시간(Tp)로 간주한다. 여기서, Tp = Ts + (Tm-Tn) 이라 할 수 있다.
그리고, 부가 서비스 관리부(130)는 컨텐츠 정보 획득 시간부터 시간(Tx)가 경과한 시간을 Tp + Tx로 간주할 수 있다.
이후, 부가 서비스 관리부(130)는 획득한 컨텐츠 정보에 기초하여 부가 서비스와 부가 서비스의 시작 시간(Ta)을 획득한다(S807).
메인 시청각 컨텐트의 동기화된 재생 시간이 부가 서비스의 시작 시간(Ta)와 일치하면, 부가 서비스 관리부(130)는 획득한 부가 서비스를 시작한다(S809). 구체적으로, 부가 서비스 관리부(130)는 Tp + Tx =Ta 를 만족하는 경우에 부가 서비스를 시작할 수 있다.
도 19은 발명의 실시예에 따라 메인 시청각 컨텐트의 재생 시간과 부가 서비스의 재생 시간을 동기화하는 방법을 보여주는 개념도이다.
도 19에 도시된 바와 같이, 영상 표시 장치(100)는 시스템 시간(Tn)에서 시청각 샘플을 추출한다.
영상 표시 장치(100)는 추출한 시청각 샘플로부터 특징 정보를 추출하고, 핑거프린트 서버(22)에 추출한 특징 정보를 포함하는 질의를 전송하여 질의 결과를 수신한다. 영상 표시 장치(100)는 질의 결과를 파싱하여 추출한 시청각 샘플의 시작 시간(Ts)가 11000ms에 해당함을 시간(Tm)에서 확인한다.
따라서, 영상 표시 장치는 추출한 시청각 샘플의 시작 시간을 확인한 시점을 Ts + (Tm - Tn)로 간주하여 이후부터 메인 시청각 컨텐트의 재생 시간을 부가 서비스의 시작 시간과 동기화할 수 있다.
도 20은 본 발명의 또 다른 실시예에 따른 핑거프린트 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 20에서, Tuner(501)는 air 채널을 통해 전송되는 8-VSB RF 신호로부터 Symbol을 추출한다.
8-VSB Demodulator(503)는 Tuner(501)가 추출한 8-VSB Symbol을 복조하여 의미 있는 디지털 데이터를 복원한다.
VSB Decoder(505)는 8-VSB Demodulator(503)가 복원한 디지털 데이터를 복호하여 ATSC 메인 서비스와 ATSC M/H 서비스를 복원한다.
MPEG-2 TP Demux(507)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet 또는 PVR Storage에 저장된 MPEG-2 Transport Packet 중에서 영상 표시 장치(100)가 처리하고자 하는 Transport Packet을 필터링하여 적절한 처리 모듈로 중계한다.
PES 디코더(539)는 MPEG-2 Transport Stream을 통하여 전송된 Packetized Elementary Stream을 Buffering하고 복원한다.
PSI/PSIP 디코더(541)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Section Data를 Buffering하고 분석한다. 분석된 PSI/PSIP 데이터는 Service Manager(미도시)에 의하여 수집되어, Service Map 및 Guide data 형태로 DB에 저장된다.
DSMCC Section Buffer/Handler (511)은 MPEG-2 TP를 통하여 전송되는 파일 전송 및 IP Datagram encapsulation 등을 위한 DSMCC Section Data를 버퍼링(Buffering)하고 처리한다.
IP/UDP Datagram Buffer/Header Parser(513)는 DSMCC Addressable section을 통해 encapsulate되어 MPEG-2 TP를 통하여 전송되는 IP Datagram을 버퍼링하고 복원하여 각 Datagram의 Header를 분석한다. 또한, IP/UDP Datagram Buffer/Header Parser(513)는 IP Datagram을 통하여 전송되는 UDP Datagram을 Buffering 및 복원하고, 복원된 UDP Header를 분석 및 처리한다.
Stream component handler(557)는 ES Buffer/Handler, PCR Handler, STC 모듈, Descrambler, CA Stream Buffer/Handler, Service Signaling Section Buffer/Handler를 포함할 수 있다.
ES Buffer/Handler는 PES 형태로 전송된 Video, Audio 데이터 등의 Elementary Stream을 Buffering 및 복원하여 적절한 A/V Decoder로 전달한다.
PCR Handler는 Audio 및 Video Stream의 Time synchronization 등을 위하여 사용되는 PCR (Program Clock Reference) Data를 처리한다.
STC 모듈은 PCR Handler를 통하여 전달받은 Reference Clock 값을 이용하여, A/V Decoder 들의 Clock 값을 보정하여 Time Synchronization를 수행한다.
수신된 IP Datagram의 Payload에 Scrambling이 적용된 경우, Descrambler는 CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.
CA Stream Buffer/Handler는 MPEG-2 TS또는 IP Stream을 통하여 전송되는 Conditional Access 기능을 위하여 전송되는 EMM, ECM 등의 Descrambling을 위한 Key 값 등의 Data를 Buffering 및 처리한다. CA Stream Buffer/Handler의 Output은 Descrambler로 전달되어, descrambler는 A/V Data 및 File Data등을 전송하는 MPEG-2 TP 또는 IP Datagram의 암호화 해제작업을 수행한다.
Service Signaling Section Buffer/Handler는 IP Datagram의 형태로 전송되는 NRT Service Signaling Channel Section Data를 Buffering 하고 복원하며 분석한다. Service Manager(미도시)는 분석된 NRT Service Signaling Channel Section 데이터를 수집하여, Service Map 및 Guide data 형태로 DB에 저장한다.
A/V Decoder(561)는 ES Handler를 통하여 전달받은 Audio/Video 데이터의 압축을 복호화하여, 사용자에게 Presentation한다.
MPEG-2 Service Demux(미도시)는 MPEG-2 TP Buffer/Parser, Descrambler, PVR Storage 모듈을 포함할 수 있다.
MPEG-2 TP Buffer/Parser (미도시)는 8-VSB 신호를 통하여 전송되는 MPEG-2 Transport Packet을 Buffering 및 복원하고, Transport Packet Header를 검출 및 처리한다.
Descrambler는 MPEG-2 TP 중, Scramble이 적용된 Packet payload에 대하여, CA Stream Handler로부터 전달 받은 Encryption key 등을 이용, Payload의 데이터를 복원한다.
PVR Storage 모듈은 사용자의 요구 등에 따라 8-VSB 신호를 이용하여 수신된 MPEG-2 TP를 저장하고, 또한 사용자의 요구에 의해 MPEG-2 TP를 출력한다. PVR Storage 모듈은 PVR Manager(미도시)에 의해 제어될 수 있다.
File Handler(551)는 ALC/LCT Buffer/Parser, FDT Handler, XML Parser, File Reconstruction Buffer, Decompressor, File Decoder, File Storage를 포함할 수 있다.
ALC/LCT Buffer/Parser는 UDP/IP Stream으로 전송되는 ALC/LCT 데이터를 Buffering 및 복원하고, ALC/LCT의 Header 및 Header extension을 분석한다. ALC/LCT Buffer/Parser는 NRT Service Manager(미도시)에 의해 제어될 수 있다.
FDT Handler는 ALC/LCT session을 통하여 전송되는 FLUTE protocol의 File Description Table을 분석 및 처리한다. FDT Handler는 NRT Service Manager(미도시)에 의해 제어될 수 있다.
XML Parser는 ALC/LCT session을 통하여 전송되는 XML Document를 분석하여, FDT Handler, SG Handler 등 적절한 모듈로 분석된 데이터를 전달한다.
File Reconstruction Buffer는 ALC/LCT, FLUTE session으로 전송되는 파일을 복원한다.
Decompressor는 ALC/LCT, FLUTE session으로 전송되는 파일이 압축되어 있는 경우, 그 압축을 해제하는 프로세스를 수행한다.
File Decoder는 File Reconstruction Buffer에서 복원된 File 또는 Decompressor에서 압축해제된 파일, 또는 File Storage에서 추출된 File을 Decoding한다.
File Storage는 복원된 파일을 필요에 의하여 저장하거나 추출한다.
M/W Engine(미도시)은 DSMCC Section, IP Datagram 등을 통하여 전송되는 A/V Stream이 아닌 파일 등의 Data를 처리한다. , M/W Engine은 처리된 데이터를 Presentation Manager 모듈로 전달한다.
SG Handler(미도시)는 XML Document 형태로 전송되는 Service Guide 데이터를 수집하고 분석하여 EPG Manager에게 전달하는 프로세스를 수행한다.
Service Manager(미도시)는 MPEG-2 Transport Stream을 통하여 전송되는 PSI/PSIP Data, IP Stream으로 전송되는 Service Signaling Section Data를 수집하고 분석하여 Service Map을 제작한다. Service Manager(미도시)는 제작한 service map을 Service Map & Guide Database에 저장하며, 사용자가 원하는 Service에 대한 access를 제어한다. Operation Controller(미도시)에 의하여 제어되며, Tuner(501), MPEG-2 TP Demux(507), IP Datagram Buffer/Handler (513) 등에 대한 제어를 수행한다.
NRT Service Manager(미도시)는 IP layer 상에서 FLUTE session을 통하여 object/file 형태로 전송되는 NRT 서비스에 대한 전반적인 관리를 수행한다. NRT Service Manager(미도시)는 FDT Handler, File Storage등을 제어할 수 있다.
Application Manager(미도시)는 Object, file 등의 형태로 전송되는 Application 데이터의 처리에 관한 전반적인 관리를 수행한다.
UI Manager(미도시)는 User Interface를 통하여 사용자의 Input을 Operation Controller에 전달하고, 사용자가 요구하는 서비스를 위한 Process의 동작을 시작한다.
Operation Controller(미도시)는 UI Manager를 통하여 전달받은 사용자의 Command를 처리하고, 필요한 모듈의 Manager가 해당 Action을 수행하게 한다.
Fingerprint Extractor(565)는 Audio/Video 스트림으로 부터 fingerprint 특징 정보를 추출한다.
Fingerprint Comparator(567)는 Fingerprint Extractor가 추출한 특징 정보와 Reference fingerprint를 비교하여 일치하는 컨텐트를 찾는다. Fingerprint Comparator(567)는 Local에 저장된 Reference fingerprint DB를 이용할 수도 있고, 인터넷 상의 Fingerprint 질의 서버에 질의하여 결과를 수신할 수도 있다. 비교 결과로 매칭된 결과 데이터는 Application에 전달되어 이용될 수 있다.
Application(569)은 ACR 기능을 관장하는 모듈 혹은 ACR에 기반하여 Enhanced 서비스를 제공하는 어플리케이션 모듈로서, 시청중인 방송 컨텐트를 식별하여 이와 연계된 확장된 서비스를 제공한다.
도 21은 본 발명의 또 다른 실시예에 따른 워트마크 기반의 영상 표시 장치의 구조를 보여주는 블록도이다.
도 21에 도시된 워트마크 기반의 영상 표시 장치는 도 20에 도시된 핑거프린트 기반의 영상 표시 장치와 유사하나, 핑거프린트 기반의 영상 표시 장치의 Fingerprint Extractor(565)와 Fingerprint Comparator(567)를 포함하지 않으며, 대신 Watermark Extractor(566)를 더 포함한다.
Watermark Extractor(566)는 Audio/Video 스트림으로부터 watermark형태로 삽입된 데이터를 추출한다. 이렇게 추출된 데이터는 Application에 전달되어 이용될 수 있다.
도 22 는 본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들을 예시한 도면이다.
전술한 바와 같이 WM 를 통한 ACR 은, 비압축적 오디오/비디오만을 접근가능한 환경(즉, 케이블/위성/IPTV 등으로부터 수신하는 환경) 에서, 그 비압축적 오디오/비디오로부터 컨텐츠에 대한 부가 서비스 관련 정보를 얻을 수 있다는 것에 목적이 있다. 이러한 환경을 ACR 환경이라고 부를 수 있다. ACR 환경에서, 수신기는 비압축적 오디오/비디오 데이터만을 전달받기 때문에 현재 디스플레이되고 있는 컨텐츠가 어떠한 컨텐츠인지를 알 수 없다. 따라서, 수신기는 WM 에 의해 전달되는 컨텐츠 소스 ID, 방송의 현재시점, 관련 어플리케이션의 URL 정보들을 활용하여, 디스플레이되고 있는 컨텐츠를 식별하고 인터렉티브 서비스를 제공할 수 있게 된다.
오디오/비디오 워터마크(WaterMark, WM) 을 사용하여 방송과 관련된 부가서비스를 전달함에 있어서, 가장 간단한 상황은 모든 부가 정보가 WM 에 의해 전달되는 경우라고 할 수 있다. 이 경우, 모든 부가 정보가 WM 검출기에 의해 검출되어 수신기가 검출된 정보들을 한번에 처리할 수 있다.
그러나, 이 경우에는 오디오/비디오 데이터에 WM 를 삽입하는 양이 증가하면 오디오/비디오의 전체 퀄리티가 저하될 수 있다. 위와 같은 이유에 의해서, WM 에는 가능한 최소한 필요한 데이터만을 삽입하는 것이 하나의 목표가 될 수 있다. 최소한의 데이터를 WM 로서 삽입하면서도, 많은 정보를 효율적으로 수신기가 수신하여 처리할 수 있도록 하는, WM 데이터의 구조가 정의될 필요가 있다. WM 에 사용되는 데이터 구조는, 상대적으로 전달되는 데이터의 양에 의해 영향을 적게 받는 핑거프린팅 방식에 있어서도 동일하게 활용될 수 있다.
도시된 바와 같이, 본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들에는, 컨텐츠 소스의 ID, 타임스탬프, 인터랙티브 어플리케이션의 URL, 타임스탬프의 종류, URL 프로토콜의 종류, 어플리케이션 이벤트, 데스티네이션의 종류 등이 있을 수 있다. 이 외에도 다양한 종류의 데이터들이 본 발명에 따른 WM 기법에 의해 전달될 수 있다.
본 발명은 WM 기법을 통해 ACR 이 이루어지는 경우에 있어서, WM 에 담겨지는 데이터의 구조를 제안한다. 각 도시된 데이터 종류들에 대하여, 가장 효율적인 데이터 구조가 본발명에 의해 제안될 수 있다.
본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들 중에는, 컨텐츠 소스의 ID 가 있을 수 있다. 셋톱박스(set-top box)를 이용한 환경에서 수신기(단말, TV)는, MVPD 가 셋톱박스를 통해 프로그램 관련 정보를 같이 전달하지 않는다면, 프로그램 이름, 채널 정보등의 정보를 알 수 없다. 따라서, 특정 컨텐츠 소스를 구분하기 위한 유니크 ID 가 필요할 수 있다. 본 발명에서는 컨텐츠 소스의 ID 종류를 한정하지 않는다. 컨텐츠 소스의 ID 에는 다음과 같은 실시예가 있을 수 있다.
먼저, 글로벌 프로그램 ID (Global Program ID) 는 각 방송 프로그램을 구분할 수 있는 글로벌한 식별자일 수 있다. 해당 ID 는 컨텐츠 프로바이더가 직접 생성할 수도 있고, 권위있는 단체에서 지정한 형식을 따를 수도 있다. 예를 들어, 북미 "TMS metadata" 의 TMSId, 또는 영화/방송 프로그램 구분자인 EIDR ID 등이 있을 수 있다.
글로벌 채널 ID (Global Channel ID) 는 MVPD 와 상관없는, 모든 채널을 구분할 수 있는 채널 식별자일 수 있다. 셋톱박스에서 제공하는 MVPD 마다 채널 번호가 다를 수 있다. 또한, 같은 MVPD 라고 하더라도, 사용자가 지정하는 서비스에 따라 채널 번호가 다를 수 있다. 글로벌 채널 ID 는 MVPD 등에 영향받지 않는 글로벌한 식별자로 사용될 수 있다. 실시예에 따라, 지상파로 전송되는 채널은 메이저 채널 넘버&마이너 채널 넘버로 식별될 수 있다. 프로그램 ID 만을 사용할 경우, 여러 방송국에서 동일 프로그램을 방영하는 경우에 문제가 발생할 수 있으므로, 특정 방송국을 지정하기 위하여 글로벌 채널 ID 가 사용될 수 있다.
WM 에 삽입할 컨텐츠 소스의 ID 로는, 프로그램 ID 와 채널 ID 가 있을 수 있다. WM 에는 프로그램 ID 와 채널 ID 가 모두 삽입되거나, 두 ID 를 조합한 새로운 형태의 ID, 또는 각각의 ID 가 삽입될 수 있다. 실시예에 따라 각 ID 또는 통합된 ID 를 해쉬(hash)화하여 데이터의 양을 줄일 수도 있다.
또한, 본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들 중에는, 타임 스탬프가 있을 수 있다. 수신기는 현재 시청중인 내용이 컨텐츠의 어느 시점인지를 알 수 있어야 한다. 이 시간 관련 정보는 타임 스탬프라고 불릴 수도 있으며, WM 에 삽입될 수 있다. 시간 관련 정보는 절대시간(UTC, GPS, 등 ...) 또는 미디어 타임의 형태를 띌 수 있다. 시간 관련 정보는 정확도를 위하여 밀리 세컨드 단위까지 전달할 수 있으며, 실시예에 따라 더 세밀한 단위까지도 전달될 수 있다. 타임 스탬프는 후술할 타임 스탬프의 종류 정보에 따라 가변의 길이를 가질 수도 있다.
또한, 본 발명의 일 실시예에 따른 워터마킹 기법을 통해 전달될 수 있는 데이터들 중에는, 인터랙티브 어플리케이션의 URL 이 있을 수 있다. 현재 시청중인 방송 프로그램과 관련된 인터액티브 어플리케이션이 있을 경우 해당 어플리케이션에 대한 URL 이 WM 에 삽입될 수 있다. 수신기는 WM 를 검출하여, 해당 URL 을 얻고, 브라우저를 통해 어플리케이션을 실행할 수 있다.
도 23 는 본 발명의 일 실시예에 따른 타임 스탬프 타입 필드의 각 값들의 의미를 도시한 도면이다.
본 발명은 워터마킹 기법을 통해 전달될 수 있는 데이터 중 하나로서, 타임 스탬프 타입 필드를 제안한다. 또한, 본 발명은 타임 스탬프 타입 필드의 효과적인 데이터 구조를 제안한다.
타임 스탬프 타입 필드에는 5 비트가 할당될 수 있다. 타임 스탬프의 처음 두 비트들은 타임 스탬프의 사이즈를 의미할 수 있고, 나머지 뒤따르는 3 비트들은 타임 스탬프가 나타내는 시간정보의 단위를 나타낼 수 있다. 여기서, 처음 두 비트는 타임스탬프 사이즈 필드, 나머지 3 비트들은 타임스탬프 유닛 필드라 불릴 수 있다.
도시된 바와 같이, 타임 스탬프의 크기(size)와 타임 스탬프의 단위 값에 따라, 실제 타임 스탬프 정보는 가변적인 양으로써 WM 에 삽입될 수 있다. 이 가변성을 이용하여, 설계자는 타임 스탬프의 정확도의 수준에 따라 타임스탬프에 할당되는 크기 및 그 단위를 선택할 수 있다. 타임 스탬프의 정확도가 높아지면 정확한 시각에 인터랙티브 서비스를 제공하는 것이 가능해지겠지만, 반대로 시스템의 복잡도가 증가하게 된다. 이 트레이드 오프를 고려해서 타임스탬프에 할당되는 크기 및 그 단위가 선택될 수 있다.
타임 스탬프 타입 필드의 첫 두 비트가 00 일 경우, 타임 스탬프는 1 바이트의 크기를 가질 수 있다. 타임 스탬프 타입 필드의 첫 두 비트가 01, 10, 11 일 경우 타임 스탬프의 크기는 각각 2, 4, 8 바이트의 크기를 가질 수 있다.
타임 스탬프 타입 필드의 마지막 3 비트가 000 일 경우, 타임 스탬프는 밀리세컨드의 단위를 가질 수 있다. 타임 스탬프 타입 필드의 마지막 3 비트가 001, 010, 011 일 경우, 타임 스탬프는 각각 초, 분, 시간의 단위를 가질 수 있다. 타임 스탬프 타입 필드의 마지막 3 비트가 101 에서 111 사이의 값일 경우는, 향후 사용을 위해 남겨둘 수 있다.
여기서, 타임 스탬프 타입 필드의 마지막 3 비트가 100 인 경우에는, 밀리세컨드, 세컨드 등의 특정 시간 단위가 아닌 별도의 타임 코드가 단위로서 사용될 수 있다. 예를 들어, SMPTE의 타임 코드 형태인 HH:MM:SS:FF 형태의 타임 코드가 WM 에 삽입될 수 있다. 여기서, HH 는 시간 단위, MM 은 분 단위, SS 는 초 단위일 수 있다. 그리고, FF 는 프레임 정보로서, 시간 단위가 아닌 프레임 정보까지 동시에 전달하여, 보다 정교한(Frame-accurate) 서비스가 제공될 수 있다. WM 에 삽입되기 위하여, 실제 타임 스탬프는 콜론을 제외한 HHMMSSFF 의 형태를 가지게 될 수도 있다. 이 경우, 타임 스탬프 사이즈 값은 11(8바이트)를 가지고, 타임 스탬프 유닛 값은 100 을 가질 수 있다. 가변 유닛일 경우에 어떠한 방식으로 타임 스탬프가 삽입되는지는 본 발명에 의해 한정되지 아니한다.
예를 들어, 타임 스탬프 종류 정보가 10 의 값을 가지고, 타임 스탬프의 단위 정보가 000 의 값을 가지는 경우, 타임 스탬프의 크기는 4 바이트이며, 타임 스탬프의 단위가 밀리세컨드일 수 있다. 이 때, 타임 스탬프가 Ts = 3265087 인 경우, 뒤의 3자리 087 은 밀리세컨드를 의미할 수 있고, 나머지 3265 는 초 단위일 수 있다. 따라서, 이 타임 스탬프를 해석하면, 현재 시간은 WM 이 삽입된 해당 프로그램의 시작 후 54분 25.087 초가 경과한 시점일 수 있다. 이는 일 실시예일 뿐이며, 타임 스탬프는 월 타임(Wall time) 의 역할로서, 컨텐츠에 무관하게 세그먼트 혹은 수신기 자체의 시간을 지시할 수도 있다.
도 24 은 본 발명의 일 실시예에 따른 URL 프로토콜 타입 필드의 각 값들의 의미를 도시한 도면이다.
본 발명은 워터마킹 기법을 통해 전달될 수 있는 데이터 중 하나로서, URL 프로토콜 타입 필드를 제안한다. 또한, 본 발명은 URL 프로토콜 타입 필드의 효과적인 데이터 구조를 제안한다.
전술한 정보 중, URL 은 그 길이가 길어 상대적으로 삽입될 데이터 양이 많은 것이 일반적이다. 전술한 바와 같이 WM 에 삽입되는 데이터는 적을수록 효율적인 바, URL 중에 고정적인 부분은 수신기에서 처리할 수 있다. 이를 위해서, 본 발명은 URL 프로토콜 타입을 위한 필드를 제안할 수 있다.
URL 프로토콜 타입 필드는 3 비트의 크기를 가질 수 있다. 서비스 프로바이더는 URL 프로토콜 타입 필드를 이용하여 WM 에 URL 프로토콜을 설정할 수 있다. 이 경우, 인터랙티브 어플리케이션의 URL 은 도메이부터 삽입되어 WM 로 전송될 수 있다.
수신기의 WM 검출기는 먼저, URL 프로토콜 타입 필드를 파싱하여 URL 프로토콜 정보를 얻고, 이후 전송된 URL 값 앞에 해당 프로토콜을 붙여 전체 URL 을 만들 수 있다. 수신기는 브라우저를 통해 완성된 URL 에 접근하여 해당 인터랙티브 어플리케이션을 실행할 수 있다.
여기서, URL 프로토콜 타입 필드의 값이 000 인 경우에는, URL 프로토콜이 WM 의 URL 필드에 직접 명시되어 삽입될 수 있다. URL 프로토콜 타입 필드의 값이 001, 010, 011 인 경우, URL 프로토콜은 각각 http://, https://, ws:// 일 수 있다. URL 프로토콜 타입 필드의 값이 100 에서 111 사이 값을 가지는 경우는, 향후 사용을 위해 남겨둘 수 있다.
어플리케이션 URL 은, 그 자체로 브라우저를 통해 어플리케이션의 실행이 가능할 수 있다(Web App. 의 형태). 또한, 실시예에 따라 컨텐츠 소스 ID 와 타임 스탬프 정보를 참조해야할 수 있다. 후자의 경우, 컨텐츠 소스 ID 정보와 타임 스탬프 정보를 어플리케이션 서버에 전달하기 위하여 최종적인 URL 이 다음과 같은 형태를 띌 수 있다. 여기서 어플리케이션 서버는, 실시예에 따라 후술할 리모트 서버에 해당할 수 있다.
요청(Request) URL :
이 실시예는, 컨텐츠 소스 ID 는 123456 이고, 타임 스탬프는 5005 인 경우일 수 있다. cid 는 어플리케이션 서버에 알릴 컨텐츠 소스 ID 의 요청(query) 식별자를 의미할 수 있다. t 는 어플리케이션 서버에 알릴 현재 시점의 요청 식별자를 의미할 수 있다.
도 25 은 본 발명의 일 실시예에 따른 URL 프로토콜 타입 필드의 처리과정을 순서도로 도시한 도면이다.
먼저, 서비스 프로바이더(47010) 는 WM 삽입기(47020) 에 컨텐츠를 전달할 수 있다(s47010). 여기서 서비스 프로바이더(47010) 은 전술한 컨텐츠 제공서버와 유사한 기능을 수행할 수 있다.
WM 삽입기(47020) 은 전달받은 컨텐츠에 WM 를 삽입할 수 있다(s47020). 여기서, WM 삽입기(47020) 은 전술한 워터마크 서버와 유사한 기능을 수행할 수 있다. WM 삽입기(47020) 은 전술한 것과 같은 WM 을 쯔 알고리즘에 의해 오디오 또는 비디오에 삽입할 수 있다. 여기서, 삽입되는 WM 에는 전술한 어플리케이션 URL 정보, 컨텐츠 소스 ID 정보등이 포함될 수 있다. 예를 들어, 삽입되는 WM 에는 전술한 타임 스탬프 타입 필드, 타임 스탬프, 컨텐츠 ID 등의 정보가 포함될 수 있다. 전술한 URL 프로토콜 타입 필드는 001 의 값을 가질 수 있고, URL 정보는 atsc.org 의 값을 가질 수 있다. WM 에 삽입되는 필드의 값들은 일 실시예일 뿐이며, 본 발명은 이 실시예에 한정되지 아니한다.
WM 삽입기(47020) 은 WM 가 삽입된 컨텐츠를 송출할 수 있다(s47030). WM 가 삽입된 컨텐츠의 송출은 서비스 프로바이더(47010) 에 의해서 수행될 수도 있다.
STB(47030) 은 WM 가 삽입된 컨텐츠를 전달받고, 비압축적 A/V 데이터 (또는 로(raw) A/V 데이터) 를 출력할 수 있다(s47040). 여기서, STB(47030) 은 전술한 방송 수신 장치, 또는 셋톱 박스를 의미할 수 있다. STB(47030) 은 수신기 외부 또는 내부에 설치될 수 있다.
WM 디텍터(47040) 은 전달받은 비압축적 A/V 데이터에서, 삽입되어 있는 WM 를 검출할 수 있다(s47050). WM 디텍터(47040) 은 WM 삽입기(47020) 이 삽입한 WM 를 검출한 후, 이 검출된 WM 를 WM 매니저로 전달할 수 있다.
WM 매니저(47050) 은 검출된 WM 를 파싱할 수 있다(s47060). 전술한 실시예에서, WM 는 URL 프로토콜 타입 필드 값이 001 이고, URL 값이 atsc.org 인 정보를 가지고 있을 수 있다. URL 프로토콜 타입 필드 값이 001 이므로, http:// 프로토콜이 사용됨을 의미할 수 있다. WM 매니저(47050) 은 이 정보들을 이용하여, http:// 와 atsc.org 를 붙여, 라는 전체 URL 을 생성할 수 있다(s47070).
WM 매니저(47050) 은 이 완성된 URL 을 Browser(47060) 으로 보내, 어플리케이션을 런칭할 수 있다(s47080). 경우에 따라, 컨텐츠 소스 ID 정보와 타임 스탬프 정보까지 전달해야 할 경우, 의 형태로 어플리케이션을 런칭할 수도 있다.
단말 내의 WM 검출기(47040)와 WM 매니저(47050)는 통합되어 한 모듈에서 그 기능들이 수행될 수 있다. 이 경우, 전술한 s47050, s47060, s47070 의 과정이 한 모듈에서 처리될 수 있다.
도 26 은 본 발명의 일 실시예에 따른 이벤트 필드의 각 값들의 의미를 도시한 도면이다.
본 발명은 워터마킹 기법을 통해 전달될 수 있는 데이터 중 하나로서, 이벤트 필드를 제안한다. 또한, 본 발명은 이벤트 필드의 효과적인 데이터 구조를 제안한다.
WM 에서 추출한 URL 을 통해서, 어플리케이션이 런칭될 수 있다. 보다 세부적인 이벤트를 통해서 어플리케이션이 제어될 수 있다. 어플리케이션을 제어할 수 있는 이벤트들이 이벤트 필드에 의해 표시되어 전달될 수 있다. 즉, 현재 시청중인 방송 프로그램과 관련된 인터랙티브 어플리케이션이 있을 경우, 해당 어플리케이션에 대한 URL 이 전송될 수 있고, 이벤트들을 이용하여 그 어플리케이션이 제어될 수 있다.
이벤트 필드는 3 비트의 크기를 가질 수 있다. 이벤트 필드의 값이 000 일 경우, 'Prepare' 명령을 의미할 수 있다. Prepare 란, 어플리케이션을 실행하기 전 준비단계로서, 이 명령을 받은 수신기는 미리 어플리케이션에 관련된 컨텐츠 아이템들을 다운로드 받아놓을 수 있다. 또한, 수신기는 해당 어플리케이션을 실행하기 위해 필요한 자원들을 해제해 놓을 수 있다. 여기서 필요한 자원들을 해제한다는 것은, 메모리를 정리한다거나, 미처 종료되지 못한 다른 어플리케이션들을 종료시켜 놓는 것을 의미할 수 있다.
이벤트 필드 값이 001 일 경우, 'Execute' 명령을 의미할 수 있다. Execute 란, 해당 어플리케이션을 실행하라는 명령일 수 있다. 이벤트 필드 값이 010 일 경우, 'Suspend' 명령을 의미할 수 있다. Suspend 란, 이미 실행되고 있는 해당 어플리케이션을 잠시동안 동작하지 않게 하는 것을 의미할 수 있다. 이벤트 필드 값이 011 일 경우, 'Kill' 명령을 의미할 수 있다. Kill 란, 이미 실행되고 있는 해당 어플리케이션을 종료시키는 명령일 수 있다. 이벤트 필드 값이 100 에서 111 사이의 값일 경우, 향후 사용을 위해 남겨둘 수 있다.
도 27 은 본 발명의 일 실시예에 따른 데스티네이션 타입 필드의 각 값들의 의미를 도시한 도면이다.
본 발명은 워터마킹 기법을 통해 전달될 수 있는 데이터 중 하나로서, 데스티네이션 타입 필드를 제안한다. 또한, 본 발명은 데스티네이션 타입 필드의 효과적인 데이터 구조를 제안한다.
DTV 관련 기술의 발전에 따라, 방송 컨텐츠와 관련된 부가 서비스들은 TV 수신기의 스크린이 아닌 컴패니언(companion) 디바이스에서도 제공될 수 있다. 그러나, 컴패니언 디바이스들은 방송 수신이 불가능하거나, 가능하더라도 WM 검출이 불가능할 수 있다. 따라서, 현재 방영중인 방송 컨텐츠와 관련된 부가 서비스를 제공하는 어플리케이션 중에서, 컴패니언 디바이스에서 실행되어야할 어플리케이션이 있다면, 그 관련 정보는 컴패니언 디바이스로 전달될 수 있어야 한다.
이 때, 수신기와 컴패니언 디바이스가 연동되어 동작할 수 있는 환경이더라도, WM 에서 검출된 어플리케이션 내지 데이터가 어느 기기에서 소비되어야 하는지 알아야할 필요가 있다. 즉, 각 데이터 내지 어플리케이션이 수신기에서 소비되어야 하는지, 아니면 컴패니언 디바이스에서 소비되어야 하는지에 관한 정보가 필요할 수 있다. 이러한 정보를 WM 로서 전달하기 위하여, 본 발명은 데스티네이션 타입 필드를 제안한다.
데스티네이션 타입 필드는 3 비트의 크기를 가질 수 있다. 데스티네이션 타입 필드의 값이 0x00 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 모든 기기를 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x01 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 TV 수신기를 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x02 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 스마트폰을 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x03 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 타블렛 기기를 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x04 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 퍼스널 컴퓨터를 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x05 인 경우, WM 에 의해 검출된 어플리케이션 내지 데이터가 리모터 서버를 타겟팅함을 의미할 수 있다. 데스티네이션 타입 필드의 값이 0x06 에서 0xFF 사이의 값을 가지는 경우는, 향후 사용을 위해 남겨둘 수 있다.
여기서, 리모트 서버란 방송과 관련된 모든 부가 정보를 가지고 있는 서버를 의미할 수 있다. 이 리모트 서버는 단말 외부에 위치할 수 있다. 리모트 서버가 사용될 경우, WM 에 삽입되는 URL 은 특정 어플리케이션의 URL 이 아니라, 리모트 서버의 URL 을 나타낼 수 있다. 수신기는 리모트 서버의 URL 을 통해 리모트 서버와 소통하여, 방송 프로그램과 관련된 부가 정보를 받아올 수 있다. 이 때 받아오는 부가 정보는 관련된 어플리케이션의 URL 뿐 아니라, 현재 방송 프로그램의 장르, 배우정보, 줄거리 등의 다양한 정보일 수 있다. 받아올 수 있는 정보는 시스템에 따라 다를 수 있다. 여기서, 리모트 서버는 전술한 어플리케이션 서버의 일 실시예일 수 있다.
다른 실시예에 따르면, 데스티네이션 타입 필드의 각 비트를 각 디바이스별로 할당하여, 어플리케이션의 목적지(destination)를 나타낼 수도 있다. 이 경우, 비트와이즈 OR 를 통해 여러 데스티네이션이 동시에 지정될 수도 있다.
예를 들어, 0x01 이 TV 수신기, 0x02 가 스마트폰, 0x04 가 태블릿, 0x08 이 PC, 0x10 이 리모트 서버라고 했을 때, 데스티네이션 타입 필드가 0x6 의 값을 가지면, 해당 어플리케이션 내지 데이터는 스마트 폰과 태블릿을 타겟으로 할 수 있다.
전술한 WM 매니저에 의해 파싱된 WM 의 데스티네이션 타입 필드의 값에 따라, WM 매니저는 각 어플리케이션 내지 데이터를 컴패니언 디바이스로 전달할 수 있다. 이 경우, WM 매니저는 수신기 내의 컴패니언 디바이스와의 연동을 처리하는 모듈로 각 어플리케이션 내지 데이터와 관련된 정보를 전달할 수도 있다.
도 28 은 본 발명의 실시예 #1 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 실시예에서, WM 에 삽입되는 데이터는 타임스탬프 타입 필드, 타임 스탬프, 컨텐츠 ID, 이벤트 필드, 데스티네이션 타입 필드, URL 프로토콜 타입 필드, URL 등의 정보를 가질 수 있다. 여기서, 각 데이터의 순서들을 바뀔 수 있으며, 각각의 데이터들은 실시예에 따라 생략될 수 있다.
본 실시예에서, 타임 스탬프 타입 필드의 타임 스탬프 사이즈 필드는 01, 타임 스탬프 유닛 필드는 000 의 값을 가질 수 있다. 이는 각각, 타임 스탬프에 2 비트가 할당되고, 타임 스탬프는 밀리세컨드의 단위를 가짐을 의미할 수 있다.
또한, 이벤트 필드는 001 의 값을 가지는데, 이는 해당되는 어플리케이션이 바로 실행되어야 함을 의미할 수 있다. 데스티네이션 타입 필드는 0x02 의 값을 가지는데 이는 WM 에 의해 전달된 데이터들이 스마트폰으로 전달되어야 함을 의미할 수 있다. URL 프로토콜 타입 필드는 001, URL 은 atsc.org 의 값을 가지므로, 부가정보 내지 어플리케이션의 URL 은 임을 의미할 수 있다.
도 29 은 본 발명의 실시예 #1 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
여기서, 서비스 프로바이더가 WM 삽입기에 컨텐츠를 전달하는 단계(s51010), WM 삽입기가 전달받은 컨텐츠에 WM 를 삽입하는 단계(s51020), WM 삽입기가 WM가 삽입된 컨텐츠를 송출하는 단계(s51030), STB 가 WM 가 삽입된 컨텐츠를 전달받고, 비압축적 A/V 데이터를 출력하는 단계(s51040), WM 디텍터가 WM 를 검출하는 단계(s51050), WM 매니저가 검출된 WM 를 파싱하는 단계(s51060) 및/또는 WM 매니저가 전체 URL 을 생성하는 단계(s51070) 는 전술한 각 단계들과 동일할 수 있다.
WM 매니저는 파싱된 WM 의 데스티네이션 타입 필드에 따라, 수신기 내의 컴패니언 디바이스 프로토콜 모듈로, 관련 데이터를 전달할 수 있다(s51080). 여기서, 컴패니언 디바이스 프로토콜 모듈은 수신기 내에서, 컴패니언 디바이스와의 연동 및 통신 등을 관장하는 모듈일 수 있다. 컴패니언 디바이스 프로토콜 모듈은 컴패니언 디바이스와 페어링(pairing) 되어있을 수 있다. 실시예에 따라, 컴패니언 디바이스 프로토콜 모듈은 UPnP 디바이스일 수 있다. 실시예에 따라, 컴패니언 디바이스 프로토콜 모듈은 단말 외부에 위치할 수도 있다.
컴패니언 디바이스 프로토콜 모듈은, 데스티네이션 타입 필드에 따른 컴패니언 디바이스로 관련 데이터를 전달할 수 있다(s51090). 본 실시예 #1 에서, 데스티네이션 타입 필드의 값은 0x02 로서, WM 에 삽입된 데이터 등은 스마트폰을 위한 데이터일 수 있다. 따라서, 컴패니언 디바이스 프로토콜 모듈은, 파싱된 데이터를 스마트폰 기기로 보낼 수 있다. 즉, 이 실시예에서 컴패니언 디바이스는 스마트폰일 수 있다.
실시예에 따라, WM 매니저 또는 컴패니언 디바이스 프로토콜 모듈은, 컴패니언 디바이스로 데이터를 전달하기 전에 데이터 처리과정을 수행할 수 있다. 컴패니언 디바이스의 경우 일반적으로 휴대성이 강조되어 상대적으로 프로세싱/컴퓨팅 능력이 떨어지거나, 메모리 양이 적을 수 있다. 따라서 수신기는 컴패니언 디바이스가 수행할 데이터 프로세싱을 대신 수행한 후, 프로세싱된 데이터를 컴패니언 디바이스로 전달할 수 있다.
이러한 프로세싱에는 여러가지 실시예가 있을 수 있다. 먼저, WM 매니저 또는 컴패니언 디바이스 프로토콜 모듈은 컴패니언 디바이스가 필요로 하는 데이터만을 선별하는 작업을 수행할 수 있다. 또한, 실시예에 따라 이벤트 필드가 어플리케이션을 종료하라는 내용을 담고 있는 경우, 어플리케이션 관련 정보를 전달하지 않을 수 있다. 또한, 데이터가 여러 WM 에 나눠서 전송되어 온 경우, 그 데이터들을 저장하였다가 합친 최종 정보를 컴패니언 디바이스에 전달할 수 있다. 타임 스탬프를 이용한 동기화를 대신 수행하여, 이미 동기화된 어플리케이션 관련 명령을 전달하건, 이미 동기화된 인터랙티브 서비스를 전달하여 컴패니언 디바이스는 단지 디스플레이만 하게 할 수도 있다. 또한 타임 스탬프 관련 정보를 전달하지 않고, 타임 베이스를 수신기 내에서만 유지하며, 어떠한 이벤트가 활성화되어야할 시간에 맞추어 관련 정보를 컴패니언 디바이스로 전달할 수도 있다. 이 경우, 컴패니언 디바이스는 타임 베이스를 유지할 필요 없이, 관련 정보를 전달받은 순간에 맞추어 해당 이벤트를 활성화하는 등의 동작을 수행할 수 있다.
전술한 것과 마찬가지로, 단말 내의 WM 검출기와 WM 매니저는 통합되어 한 모듈에서 그 기능들이 수행될 수 있다. 이 경우, 전술한 s51050, s51060, s51070, s51080 의 과정이 한 모듈에서 처리될 수 있다.
또한, 실시예에 따라, 컴패니언 디바이스들 역시 WM 검출기를 가질 수 있다. 각 컴패니언 디바이스가 WM 가 삽입된 방송을 수신하거나 전달받을 수 있는 경우, 각 컴패니언 디바이스는 WM 를 직접 검출한 후에 또 다른 컴패니언 디바이스로 전달할 수 있다. 예를 들어, 스마트폰이 WM 를 검출 및 파싱하여, TV 로 관련 정보를 전달할 수도 있다. 이 경우 데스티네이션 타입 필드는 0x01 의 값을 가질 수 있다.
도 30 는 본 발명의 실시예 #2 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 실시예에서, WM 에 삽입되는 데이터는 타임스탬프 타입 필드, 타임 스탬프, 컨텐츠 ID, 이벤트 필드, 데스티네이션 타입 필드, URL 프로토콜 타입 필드, URL 등의 정보를 가질 수 있다. 여기서, 각 데이터의 순서들을 바뀔 수 있으며, 각각의 데이터들은 실시예에 따라 생략될 수 있다.
본 실시예에서, 타임 스탬프 타입 필드의 타임 스탬프 사이즈 필드는 01, 타임 스탬프 유닛 필드는 000 의 값을 가질 수 있다. 이는 각각, 타임 스탬프에 2 비트가 할당되고, 타임 스탬프는 밀리세컨드의 단위를 가짐을 의미할 수 있다. 컨텐츠 ID 는 123456 의 값을 가질 수 있다.
또한, 이벤트 필드는 001 의 값을 가지는데, 이는 해당되는 어플리케이션이 바로 실행되어야 함을 의미할 수 있다. 데스티네이션 타입 필드는 0x05 의 값을 가지는데 이는 WM 에 의해 전달된 데이터들이 리모트 서버로 전달되어야 함을 의미할 수 있다. URL 프로토콜 타입 필드는 001, URL 은remoteserver.com 의 값을 가지므로, 부가정보 내지 어플리케이션의 URL 은 임을 의미할 수 있다.
전술한 바와 같이, 리모트 서버가 사용될 경우, 리모트 서버로부터 방송 프로그램에 대한 부가정보를 받아올 수 있다. 이 때, 리모트 서버의 URL 에 컨텐츠 ID 와 타임 스탬프를 파라미터로 삽입하여 리모트서버로 요청할 수 있다. 또한, 실시예에 따라 리모트 서버가 API 의 지원을 통해 현재 방송 프로그램에 대한 정보를 얻을 수도 있다. 이 때, API 는 수신기 내에 저장된 컨텐츠 ID, 타임 스탬프를 리모트 서버가 가져갈 수 있게 하거나, 관련된 부가 정보를 전달할 수 있게 한다.
본 실시예에서, 리모트 서버의 URL 에 컨텐츠 ID 와 타임 스탬프를 파라미터로 삽입될 경우, 전체 URL 은 와 같을 수 있다. 여기서, cid 는 리모트 서버에 알려줄 컨텐츠 ID 의 요청 식별자일 수 있다. 여기서, t 는 리모트 서버에 알려줄 현재 시점의 요청 식별자일 수 있다.
도 31 은 본 발명의 실시예 #2 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
여기서, 서비스 프로바이더가 WM 삽입기에 컨텐츠를 전달하는 단계(s53010), WM 삽입기가 전달받은 컨텐츠에 WM 를 삽입하는 단계(s53020), WM 삽입기가 WM가 삽입된 컨텐츠를 송출하는 단계(s53030), STB 가 WM 가 삽입된 컨텐츠를 전달받고, 비압축적 A/V 데이터를 출력하는 단계(s53040), WM 디텍터가 WM 를 검출하는 단계(s53050), 및/또는 WM 매니저가 검출된 WM 를 파싱하는 단계(s53060) 는 전술한 각 단계들과 동일할 수 있다.
WM 매니저는 파싱한 데스티네이션 타입 필드(0x05)를 통해, 리모트 서버와 소통해야하는 경우임을 알 수 있다. WM 매니저는 URL 프로토콜 타입 필드의 값과, URL 값을 이용하여 이라는 URL을 생성할 수 있다. 또한, 컨텐츠 ID 와 타임 스탬프의 값을 이용해 최종적으로 의 URL 을 생성할 수 있다. WM 매니저는 이 최종 URL 로 요청을 수행할 수 있다(s53070).
리모트 서버는 요청을 받고, 방송 프로그램에 맞는 관련 어플리케이션의 URL 을 WM 매니저로 전송할 수 있다(s53080). WM 매니저는 전달받은 어플리케이션의 URL 을 브라우저로 보내, 해당 어플리케이션을 런칭할 수 있다(s53090).
전술한 것과 마찬가지로, 단말 내의 WM 검출기와 WM 매니저는 통합되어 한 모듈에서 그 기능들이 수행될 수 있다. 이 경우, 전술한 s53050, s53060, s53070, s53090 의 과정이 한 모듈에서 처리될 수 있다.
도 32 는 본 발명의 실시예 #3 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 발명은 워터마킹 기법을 통해 전달될 수 있는 데이터 중 하나로서, 전달 타입(delivery type) 필드를 제안한다. 또한, 본 발명은 전달 타입 필드의 효과적인 데이터 구조를 제안한다.
WM 에 삽입되는 데이터 양의 증가로 인한 오디오/비디오 컨텐츠의 퀄리티 저하를 줄이기 위하여, WM 가 나눠서 삽입될 수 있다. WM 가 나뉘어서 삽입되는지 여부를 지시하기 위하여, 전달 타입 필드가 사용될 수 있다. 전달 타입 필드를 통해, 한번의 WM 검출로 방송 관련 정보 습득이 가능한지, 여러 개의 WM 가 검출되어야 하는지 구분될 수 있다.
전달 타입 필드가 0 의 값을 가질 경우, 하나의 WM 에 모든 데이터가 삽입되어 전송됨을 의미할 수 있다. 전달 타입 필드가 1 의 값을 가질 경우, 여러 개의 WM 에 데이터가 나뉘어져 삽입된 후 전송됨을 의미할 수 있다.
본 실시예는 전달 타입 필드의 값이 0 인 경우일 수 있다. 이 경우의 WM 의 데이터 구조는, 전술한 데이터 구조에 전달 타입 필드가 덧붙여진 형태일 수 있다. 본 실시예는 전달 타입 필드가 가장 앞에 위치하나, 실시예에 따라 다른 곳에 위치할 수도 있다.
WM 매니저 또는 WM 검출기는, 전달 타입 필드가 0 의 값을 가지는 경우, WM 의 길이를 참조하여 WM 를 파싱할 수 있다. 이 때, WM 의 길이는 기 정해진 필드의 비트 수를 고려하여 계산될 수 있다. 예를 들어, 전술한 바와 같이 이벤트 필드의 길이는 3 비트 일 수 있다. 컨텐츠 ID, URL 의 크기는 가변이나, 실시예에 따라 그 비트수가 제한될 수도 있다.
도 33 는 본 발명의 실시예 #4 에 따른 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 실시예는 전달 타입 필드의 값이 1 인 경우일 수 있다. 이 경우, WM 의 데이터 구조에 몇가지 필드가 추가될 수 있다.
WMId 필드는 WM 를 구분하는 식별자의 역할을 할 수 있다. 데이터가 여러 개의 WM 에 나뉘어서 전송될 경우, WM 검출기는 나뉘어진 데이터를 가진 각 WM 를 식별할 필요가 있다. 이 때, 나뉘어진 데이터를 가진 각 WM 는 같은 WMId 필드 값을 가질 수 있다. WMId 필드는 8 비트의 크기를 가질 수 있다.
블락 넘버(Block number) 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 식별 번호를 나타내는 필드일 수 있다. 나뉘어진 데이터를 가진 WM 들이 전송되는 순서에 따라 1 씩 값이 증가할 수 있다. 예를 들어, 나뉘어진 데이터를 가진 각 WM 중 첫번째 WM 의 경우, 블락 넘버 필드의 값이 0x00 일 수 있다. 이후 전송되는 두번째, 세번째 WM 들은 각각 0x01, 0x02 ... 의 값을 가질 수 있다. 블락 넘버 필드는 8 비트의 크기를 가질 수 있다.
마지막 블락 넘버(Last block number) 필드는 나뉘어진 데이터를 가진 각 WM 중, 마지막 WM 의 식별 번호를 나타내는 필드일 수 있다. 전술한 블락 넘버 필드와 마지막 블락 넘버 필드의 값이 같아질 때 까지, WM 검출기 또는 WM 매니저는 검출한 WM 들을 모으고, 파싱할 수 있다. 마지막 블락 넘버 필드는 8 비트의 크기를 가질 수 있다.
블락 길이(Block length) 필드는, 해당 WM 의 총 길이를 나타낼 수 있다. 여기서, 해당 WM 란, 나뉘어진 데이터를 가진 각 WM 중 하나를 의미할 수 있다. 블락 길이 필드는 7 비트의 크기를 가질 수 있다.
컨텐츠 ID 플래그(Content Identifier Flag) 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 페이로드에 컨텐츠 ID 가 포함되어 있는지를 알릴 수 있다. 컨텐츠 ID 가 포함되어 있는 경우, 컨텐츠 ID 플래그 필드는 1 로 세팅될 수 있고, 반대의 경우 0 으로 세팅될 수 있다. 컨텐츠 ID 플래그 필드는 1 비트의 크기를 가질 수 있다.
이벤트 플래그 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 페이로드에 이벤트 필드가 포함되어 있는지를 알릴 수 있다. 이벤트 필드가 포함되어 있는 경우, 이벤트 플래그 필드는 1 로 세팅될 수 있고, 반대의 경우 0 으로 세팅될 수 있다. 이벤트 플래그 필드는 1 비트의 크기를 가질 수 있다.
데스티네이션 플래그 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 페이로드에 데스티네이션 타입 필드가 포함되어 있는지를 알릴 수 있다. 데스티네이션 타입 필드가 포함되어 있는 경우, 데스티네이션 플래그 필드는 1 로 세팅될 수 있고, 반대의 경우 0 으로 세팅될 수 있다. 데스티네이션 플래그 필드는 1 비트의 크기를 가질 수 있다.
URL 프로토콜 플래그 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 페이로드에 URL 프로토콜 타입 필드가 포함되어 있는지를 알릴 수 있다. URL 프로토콜 타입 필드가 포함되어 있는 경우, URL 프로토콜 플래그 필드는 1 로 세팅될 수 있고, 반대의 경우 0 으로 세팅될 수 있다. URL 프로토콜 플래그 필드는 1 비트의 크기를 가질 수 있다.
URL 플래그 필드는, 나뉘어진 데이터를 가진 각 WM 중, 현재 WM 의 페이로드에 URL 정보가 포함되어 있는지를 알릴 수 있다. URL URL 정보가 포함되어 있는 경우, URL 플래그 필드는 1 로 세팅될 수 있고, 반대의 경우 0 으로 세팅될 수 있다. URL 플래그 필드는 1 비트의 크기를 가질 수 있다.
페이로드에는 전술한 필드들 외의, 실제 데이터들이 담길 수 있다.
여러 WM 에 나눠서 전송하는 경우, 각각의 WM 가 삽입된 시점의 시점 정보를 알 필요가 있을 수 있다. 이 경우, 실시예에 따라 각각의 WM 에 타임 스탬프가 삽입될 수 있다. 이 때, 타임 스탬프 타입 필드 역시, 타임 스탬프가 삽입된 WM 에 같이 삽입될 수 있다. WM 가 삽입된 시점을 알기 위해 필요하기 때문이다. 또는 실시예에 따라, 수신기가 WM 타임 스탬프 타입 정보를 저장하여 활용할 수도 있다. 수신기는 최초의 타임 스탬프, 마지막 타임 스탬프, 또는 각각의 타임 스탬프를 기준으로 하여 타임 싱크를 맞출 수 있다.
데이터를 여러 WM 에 나눠서 전송하는 경우, 각각의 WM 의 크기는 상기 플래그 필드들을 이용하여 조절될 수 있다. 전술한 바와 같이, WM 에 의해 전송되는 데이터 양이 커질 경우, 오디오/비디오 컨텐츠의 질이 영향을 받을 수 있다. 따라서, 전송되는 각 오디오/비디오 프레임 별 상황에 따라 해당 프레임에 삽입되는 WM 의 크기를 조절할 수 있다. 이 때 WM 의 크기는 전술한 플래그 필드들에 의해 조절될 수 있다.
예를 들어, 컨텐츠의 비디오 프레임 중 어느 한 비디오 프레임이 검은 화면만으로 되어 있다고 하자. 컨텐츠의 내용상 장면이 전환되거나 하는 경우에, 검은 화면만으로 된 비디오 프레임이 하나 삽입될 수 있다. 이러한 비디오 프레임의 경우, 많은 양의 WM 가 삽입된다고 하여, 컨텐츠의 질이 떨어지거나 하지 않을 수 있다. 즉, 유저가 컨텐츠의 질 저하를 느끼지 못할 수 있다. 이 경우, 해당 비디오 프레임에는 많은 양의 데이터를 가지는 WM 가 삽입될 수 있다. 이 때 해당 비디오 프레임에 삽입되는 WM 의 플래그 필드들은 대부분 값이 1 을 가질 수 있다. 그 WM 는 대부분의 필드를 실제로 가지기 때문이다. 특히, 많은 데이터 양을 차지하는 URL 필드가, 그 WM 에 포함될 수 있다. 이로 인하여, 다른 비디오 프레임에 삽입되는 WM 에는 상대적으로 적은 양의 데이터가 삽입될 수 있다. WM 에 삽입되는 데이터 양은 설계자의 의도에 따라 변경될 수 있다.
도 34 는 본 발명의 실시예 #4 에서, 첫번째 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 실시예는 전달 타입 필드의 값이 1 인 경우, 즉 데이터가 여러 개의 WM 에 나뉘어져 전송되는 경우에 있어, 첫번째 WM 의 구조는 도시된 바와 같을 수 있다.
나뉘어진 데이터를 가진 각 WM 중에서, 첫번째 WM 이므로, 블락 넘버 필드의 값이 0x00 일 수 있다. 물론, 실시예에 따라, 블락 넘버 필드의 값을 다르게 사용한다면, 도시된 WM 는 첫번째 WM 가 아닐 수도 있다.
수신기는 첫번째 WM 를 검출할 수 있다. 검출된 WM 는 WM 매니저에 의해 파싱될 수 있다. 이 때, WM 의 전달 타입 필드값이 1 이고, 블락 넘버 필드의 값과 마지막 블락 넘버 필드의 값이 다른 것을 알 수 있다. 따라서, WM 매니저는 WMId 가 0x00 인, 나머지 WM 가 올 때까지 파싱한 정보를 저장해 놓을 수 있다. 특히, URL 정보인 atsc.org 역시 저장될 수 있다. 여기서, 마지막 블락 넘버 필드의 값이 0x01 이므로, 앞으로 하나의 WM 만 더 받으면, WMId 가 0x00 인 WM 들에 대해서는 모두 수신하게됨을 알 수 있다.
본 실시예에서, 각 플래그 필드들의 값이 모두 1 이다. 따라서, 본 WM 의 페이로드에는 이벤트 필드 등 각 정보가 포함되어 있음을 알 수 있다. 또한, 타임 스탬프 값이 5005 이므로, 본 WM 가 삽입된 부분의 시점은 5.005초 임을 알 수 있다.
도 35 는 본 발명의 실시예 #4 에서, 두번째 WM 에 삽입될 데이터 구조를 도시한 도면이다.
본 실시예는 전달 타입 필드의 값이 1 인 경우, 즉 데이터가 여러 개의 WM 에 나뉘어져 전송되는 경우에 있어, 두번째 WM 의 구조는 도시된 바와 같을 수 있다.
나뉘어진 데이터를 가진 각 WM 중에서, 두번째 WM 이므로, 블락 넘버 필드의 값이 0x01 일 수 있다. 실시예에 따라, 블락 넘버 필드의 값을 다르게 사용하는 경우, 도시된 WM 는 두번째 WM 가 아닐 수도 있다.
수신기는 두번째 WM 를 검출할 수 있다. WM 매니저는 검출된 두번째 WM 를 파싱할 수 있다. 블락 넘버 필드와 마지막 블락 넘버 필드의 값이 같으므로, 본 WM 가 WMId 값이 0x00 인 WM 중 마지막 WM 임을 알 수 있다.
플래그 필드들 중, URL 플래그만 값이 1 이므로, 페이로드에는 URL 정보가 포함되어 있음을 알 수 있다. 현재 블락 넘버 필드의 값이 0x01 이므로, 이미 저장되어 있던 정보와 결합될 수 있다. 특히, 이미 저장되어 있던 atsc.org 부분과, 두번째 WM 에 포함된 /apps/app1.html 부분이 결합될 수 있다. 또한, 이미 저장되어 있던 정보 중, URL 프로토콜 타입 필드의 값이 001 이므로, 최종 결합된 URL 은 일 수 있다. 이 URL 이 Browser 를 통해 런칭될 수 있다.
두번째 WM 에 따르면, 두번째 WM 가 삽입된 부분의 시점은 10.005 초이다. 수신기는 첫번째 WM의 5.005초를 기준으로 타임 싱크를 맞출 수 있고, 마지막 WM의 10.005초를 기준으로 타임 싱크를 맞출 수도 있다. 본 실시예는 5초의 간격으로 WM을 두 번의 걸쳐서 전송한 예시로서, WM이 삽입되지 않은 5초간은 온전히 오디오/비디오만을 전송할 수 있는 장점이 있으므로 컨텐츠의 퀄리티 저하를 막을 수 있다. 즉, 여러 WM 로 나눠서 데이터가 전달되더라도 퀄리티 저하를 줄일 수 있다. WM을 나눠서 삽입하는 시기는 실시예에 따라 다를 수 있다.
도 36 은 본 발명의 실시예 #4 에 따른 WM 에 삽입될 데이터 구조를 처리하는 순서도를 도시한 도면이다.
여기서, 서비스 프로바이더가 WM 삽입기에 컨텐츠를 전달하는 단계(s58010), WM 삽입기가 전달받은 컨텐츠에 WM#1 를 삽입하는 단계(s58020), WM 삽입기가 WM#1이 삽입된 컨텐츠를 송출하는 단계(s58030), STB 가 WM#1 이 삽입된 컨텐츠를 전달받고, 비압축적 A/V 데이터를 출력하는 단계(s58040), 및/또는 WM 디텍터가 WM#1 를 검출하는 단계(s58050) 는 전술한 각 단계들과 동일할 수 있다.
여기서 WM#1 은 나뉘어진 데이터가 삽입된 WM 중 하나를 의미하며, 전술한 본 발명의 실시예 #4 에서의 첫번째 WM 일 수 있다. 전술한 바와 같이 이 WM 의 블락 넘버 필드는 0x00 이고, URL 정보는 atsc.org 일 수 있다.
WM 매니저는 검출된 WM#1 을 파싱한 후, 이를 저장해 놓을 수 있다(s58060). 이 때 WM 매니저는 기 정해진 각 필드들의 비트 수와 전체 WM 의 길이를 참조하여 파싱을 수행할 수 있다. 블락 넘버 필드와 마지막 블락 넘버 필드의 값이 다르므로, 또한 전달 타입 필드 값이 1 이므로, WM 매니저는 WM 를 파싱한 후 저장해 놓고, 다음 WM 를 기다릴 수 있다.
여기서, 서비스 프로바이더가 WM 삽입기에 컨텐츠를 전달하는 단계(s58070), WM 삽입기가 전달받은 컨텐츠에 WM#2 를 삽입하는 단계(s58080), WM 삽입기가 WM#2가 삽입된 컨텐츠를 송출하는 단계(s58090), STB 가 WM#2 가 삽입된 컨텐츠를 전달받고, 비압축적 A/V 데이터를 출력하는 단계(s58100), 및/또는 WM 디텍터가 WM#2 를 검출하는 단계(s58110) 는 전술한 각 단계들과 동일할 수 있다.
여기서, WM#2 는 나뉘어진 데이터가 삽입된 WM 중 하나를 의미하며, 전술한 본 발명의 실시예 #4 에서의 두번째 WM 일 수 있다. 전술한 바와 같이 이 WM 의 블락 넘버 필드는 0x01 이고, URL 정보는 /apps/app1.html 일 수 있다.
WM 매니저는 WM#2 를 파싱할 수 있다(s58120). WM#2 를 파싱해서 얻은 정보와, 이미 저장되어 있던 WM#1 를 파싱해서 얻은 정보를 합쳐서 전체 URL 을 생성할 수 있다(s58130). 이 경우, 전체 URL 은 전술한 바와 같이 일 수 있다.
여기서, WM 매니저가 데스티네이션 타입 필드에 따라, 수신기 내의 컴패니언 디바이스 프로토콜 모듈로, 관련 데이터를 전달하는 단계(s58140), 컴패니언 디바이스 프로토콜 모듈이 데스티네이션 타입 필드에 따른 컴패니언 디바이스로 관련 데이터를 전달하는 단계(s58150) 는 전술한 각 단계와 동일할 수 있다.
단, 여기서 데스티네이션 타입 필드는 전술한 바와 같이, WM#1 에 의해 전달되었을 수 있다. 본 발명의 실시예#4 의 첫번째 WM 의 데스티네이션 플래그 필드 값이 1 이기 때문이다. 전술한 바와 같이, 이 데스티네이션 타입 필드 값은 파싱되어 저장되고 있었을 수 있다. 데스티네이션 타입 필드 값이 0x02 이므로 스마트폰을 위한 데이터임을 알 수 있다.
컴패니언 디바이스 프로토콜 모듈은 컴패니언 디바이스와 소통하여, 관련 정보를 처리할 수 있다. 이는 전술한 바와 같다. 또한 전술한 바와 같이 WM 검출기와 WM 매니저는 통합되어 한 모듈에 포함될 수 있으며, 그 통합모듈이 WM 검출기와 WM 매니저의 역할을 모두 수행할 수 있다.
도 37 는 본 발명의 또 다른 실시예에 따른 워터마크 기반의 영상 표시 장치의 구조를 도시한 도면이다.
본 실시예는 전술한 워터마크 기반의 영상 표시 장치의 구조와 유사하나, 워터마크 추출기(t59030) 밑에 WM 매니저(t59010), 컴패니언 디바이스 프로토콜 모듈(t59020)이 추가되었다. 나머지 다른 모듈들은 전술한 바와 같을 수 있다.
여기서 워터마크 추출기(t59030)는 전술한 WM 검출기에 대응될 수 있다. 워터마크 추출기(t59030)는 전술한 워터마크 기반의 영상 표시 장치의 구조의 동명 모듈과 동일할 수 있다. 또한, WM 매니저(t59010)는 전술한 WM 매니저에, 컴패니언 디바이스 프로토콜 모듈(t59020)은 전술한 컴패니언 디바이스 프로토콜 모듈에 대응되는 구성일 수 있다. 각 모듈들의 동작은 전술한 바와 같다.
도 38 은 핑거프린팅 방식에 있어서, 본 발명의 일 실시예에 따른 데이터 구조를 도시한 도면이다.
핑거프린팅(FingerPrinting) 방식의 ACR 시스템의 경우, WM 를 사용하는 경우에 비하여 오디오/비디오 컨텐츠의 퀄리티 저하가 적을 수 있다. 핑거프린팅 방식의 ACR 시스템의 경우, 부가적인 정보를 ACR 서버로부터 받아오기 때문에, 컨텐츠에 직접 삽입되어 있는 WM 에 비해 상대적으로 퀄리티 저하가 적을 수 있다.
ACR 서버로부터 정보를 받아옴에 있어서, 전술한 바와 같이 퀄리티 저하에 따른 제약이 적으므로, WM 에서 사용한 데이터 구조가 그대로 활용될 수 있다. 즉, 본 발명이 제안하는 데이터 구조는 FP 방식에 있어서도 그대로 활용될 수 있다. 또는 실시예에 따라, WM 데이터 구조 중 일부의 구조만을 취해서 사용될 수 있다.
전술한 WM 의 데이터 구조가 사용될 경우, 데스티네이션 타입 필드의 값 중 0x05 가 나타내는 바는 바뀔 수 있다. 전술한 바와 같이, 데스티네이션 타입 필드의 값이 0x05 일 경우, 수신기가 리모트 서버로 데이터를 요청하게 된다. FP 방식에 있어서, 리모트 서버의 역할은 ACR 서버에 의해서 이루어질 수 있으므로, 데스티네이션 타입 필드가 0x05 인 경우는 삭제되거나 재정의될 수 있다.
나머지 필드들은 전술한 바와 같을 수 있다.
도 39 은 핑거프린팅 방식에 있어서, 본 발명의 일 실시예에 따른 데이터 구조를 처리하는 순서도를 도시한 도면이다.
서비스 프로바이더는 송출할 방송 프로그램으로부터 핑거프린트(FP)를 추출할 수 있다(s61010). 여기서 서비스 프로바이더는 전술한 서비스 프로바이더와 같을 수 있다. 서비스 프로바이더는 ACR 업체가 제공하는 툴을 사용하여 컨텐츠 별로 핑거프린트를 추출하거나, 자신의 툴을 사용하여 핑거프린트를 추출할 수 있다. 서비스 프로바이더는 오디오/비디오 핑거 프린트를 추출할 수 있다.
서비스 프로바이더는 ACR 서버로 추출한 핑거프린트를 전달할 수 있다(s61020). 이 때 전달되는 시점은, 사전제작 프로그램의 경우에는 방송으로 송출되기 전일 수 있고, 라이브 프로그램의 경우에는 실시간으로 FP가 추출되자마자 ACR 서버로 전달될 수도 있다. 실시간으로 FP 가 추출되어 ACR 서버로 전달되는 경우, 서비스 프로바이더는 컨텐츠에 대한 컨텐츠 ID 를 부여하고, 전송 타입, 데스티네이션 타입, URL 프로토콜 타입 등의 정보를 부여할 수 있다. 이 때 부여된 정보들은 실시간으로 추출된 FP 에 매핑되어 함께 ACR 서버로 전달될 수 있다.
ACR 서버는 전달받은 FP 및 관련 정보들을 ACR DB 에 저장할 수 있다(s61030). 수신기는 외부입력으로부터 들어오는 오디오/비디오 신호로부터 FP 를 추출할 수 있다. 여기서, 오디오/비디오 신호는 비압축적 신호일 수 있다. 이 FP 는 시그니쳐라고 불릴 수도 있다. 수신기는 FP 를 이용하여 ACR 서버로 요청을 보낼 수 있다(s61040).
ACR 서버는 수신한 FP 와 ACR DB 를 비교할 수 있다. 수신한 FP 와 매칭되는 FP 가 ACR DB 에 있을 경우, 수신기에서 방영중인 컨텐츠가 인식될 수 있다. 컨텐츠가 인식되면 전달 타입 정보, 타임 스탬프, 컨텐츠 ID, 이벤트 타입 정보, 데스티네이션 타입 정보, URL 프로토콜 타입 정보, URL 정보등을 수신기로 보낼 수 있다(s61050).
여기서, 각 정보들은 전술한 각 필드에 담겨 전송될 수 있다. 예를 들어, 데스티네이션 타입 정보는 데스티네이션 타입 필드에 담겨 전송될 수 있다. 수신기로 응답함에 있어, 전달되는 데이터의 구조는 전술한 WM 에서 사용되는 데이터 구조가 활용될 수 있다.
수신기는 ACR 서버로부터 전달받은 정보를 파싱할 수 있다. 본 실시예에서는 데스티네이션 타입 필드의 값이 0x01 이므로 어플리케이션의 URL 이 TV 에서 실행되어야함을 알 수 있다. URL 프로토콜 타입 필드의 값과, URL 정보를 이용하여 최종 URL 인 가 생성될 수 있다. URL 생성과정은 전술한 바와 같을 수 있다.
수신기는 해당 URL 을 이용하여 Browser 를 통해 방송 관련 어플리케이션을 실행할 수 있다(s61060). 여기서 Browser 는 전술한 Browser 와 동일할 수 있다. s61040, s61050, s61060 의 과정이 반복될 수 있다.
도 40 은 본 발명의 또 다른 실시예에 따른 워터마크 페이로드의 구조를 도시한 도면이다.
도시된 실시예의 워터마크 페이로드는 도메인 타입 정보, 서버 URL 정보, 타임 스탬프 정보 및/또는 트리거 타입 정보를 포함할 수 있다. 실시예에 따라 도시된 워터마크 페이로드는 오디오 또는 비디오 워터마크로 활용될 수 있다. 여기서 워터마크는 WM (Watermark) 로 부를 수도 있다. 실시예에 따라 WM 페이로드는 50 비트의 크기를 가질 수 있고, WM 시스템은 이 50 비트를 1.5 초마다 전달할 수 있다.
도메인 타입 정보는 해당 WM 페이로드의 타입을 지시할 수 있다. 도메인 타입 정보는 해당 페이로드의 서버 URL 정보 및 타임 스탬프 정보의 크기가 어떻게 할당되어 있는지를 지시할 수 있다. 도메인 타입 정보에 따라 서버 URL 필드가 가지는 서버 코드와 타임 스탬프 필드의 인터벌 코드 간의 유니크니스 범위(scope of uniquness) 가 서로 트레이드 오프(trade off) 될 수 있다. 도메인 타입 정보는 필드들의 크기 할당에 따라, 해당 페이로드가 스몰(small) 도메인, 미디엄(medium) 도메인, 라지(large) 도메인 구조 중 어떤 구조를 가지는지 지시할 수 있다. 실시예에 따라 도메인 타입 정보는 1 비트의 크기를 가질 수도 있는데, 이 경우 해당 페이로드가 스몰 도메인, 라지 도메인 중 어떤 구조를 가지는지가 지시될 수 있다.
서버 URL 정보는 서버 코드를 포함할 수 있다. 이 서버 코드는 부가(supplementary) 컨텐트 획득을 위한 시작 포인트(starting point)로서 동작하는 서버를 식별하기 위한 값일 수 있다. 서버 URL 정보 내지 서버 코드는 부가 컨텐트를 획득할 수 있는 인터넷 주소나 IP 주소 형식, 또는 이러한 주소들과 매핑되는 특정 코드의 형태일 수 있다. 서버 URL 정보를 통해 알 수 있는 URL 에 접근하여 다양한 부가 컨텐트를 획득할 수 있다.
부가 컨텐트는 현재 MVPD 에서 수신기로 전송되고 있는 서비스/컨텐트를 넘어 시청자에게 제공될 수 있는 컨텐트를 의미할 수 있다. 부가 컨텐트는 서비스, 컨텐트, 타임라인, 어플리케이션 데이터, 대체 컴포넌트 또는 어플리케이션 관련 정보들을 포함할 수 있다. 부가 컨텐트는 인터랙티브 서비스 정보로 불릴 수도 있다. 또한 부가 컨텐트에는 방송 서비스/컨텐트에 대한 인터랙티브 서비스 제공을 위한, 어플리케이션 특성(property) 정보가 포함될 수 있다. 또한 부가 컨텐트에는 특정(specific) 어플리케이션에 대한 이벤트 정보가 포함될 수 있다. 여기서 이벤트 정보는 어플리케이션에 의해 수행될 동작(action)들을 개시시키는(initiates) 알림(notification) 내지 시그널링 정보일 수 있다.
타임 스탬프 정보는 인터벌 코드를 포함할 수 있다. 이 인터벌 코드는 해당 페이로드가 삽입된(embedded), 컨텐트의 인터벌을 식별하기 위한 값일 수 있다. 타임 스탬프 정보 내지 인터벌 코드는 해당 페이로드가 삽입된 인터벌을 식별하거나, 해당 WM 패킷 내지 WM 페이로드가 삽입되는 전송 시점 정보 또는 해당 WM 패킷 내지 WM 페이로드가 몇번째 것인지를 식별할 수도 있다. 몇번째 것인지를 식별하는 경우에는 WM 간의 시간간격이 미리 정해져 있을 수 있다. 실시예에 따라 타임 스탬프 정보는 인터벌 정보로 불릴 수도 있다.
트리거 타입 정보는 이벤트가 언제 이용가능한지 시그널링할 수 있다. 연속된 WM 페이로드 내에서 해당 트리거 타입 정보의 값이 변한다는 것은, 이벤트가 이벤트 서버로부터 이용가능/ 획득가능하다는 것을 지시하는 것일 수 있다. 여기서 이벤트는 전술한 이벤트 정보일 수 있다. 여기서 이벤트는 다이나믹 이벤트일 수 있다. 다이나믹 이벤트는 해당 이벤트의 시작 시간을 이벤트 시작 시간에 거의 근접해서야(at the last minute) 알게 된 경우의 이벤트를 의미할 수 있다. 예를 들어 라이브 방송 서비스에 대한 이벤트 정보는 다이나믹 이벤트일 수 있다. 여기서 이벤트 서버는 다이나믹 이벤트 서버로 HTTP 서버일 수 있다. 실시예에 따라 트리거 타입 정보는 쿼리 정보, 쿼리 플래그 등으로 불릴 수도 있다.
즉, 트리거 타입 정보는 서버 URL 정보에 의한 URL 로 액세스해야될 필요가 있는지를 지시할 수 있다. 실시예에 따라 트리거 타입 정보는 URL 로 액세스하는 경우 어플리케이션 특성 정보를 얻을 수 있는지, 이벤트 정보를 얻을 수 있는지를 지시할 수도 있다. 이벤트 정보는 타임 센시티브(time sensitive)한 정보이므로, 어플리케이션 특성 정보 등과 구분될 필요가 있을 수 있다. 타임 센시티브하지 않은 정보를 얻기 위해 리소스를 낭비하여, 필요한 타임 센시티브한 정보를 얻지 못하게 되는 것을 막기 위함이다. 또한 실시예에 따라 트리거 타입 정보는 획득할 어플리케이션 특성 정보에 변경이 있는지 여부도 지시할 수 있다. 자세한 사항은 후술한다.
실시예에 따라 서버 URL 정보 및 타임 스탬프 정보는 각각 30 비트, 17 비트의 크기를 가지거나(스몰 도메인 타입), 22 비트, 25 비트의 크기를 가지거나(미디엄 도메인 타입), 18 비트, 29 비트의 크기를 가질 수 있다(라지 도메인 타입). 실시예에 따라 이 수치들은 변경될 수 있다. 이 경우 스몰 도메인의 경우, 약 10억개의 서버 코드와 약 54.6 시간의 인터벌 코드를 가질 수 있고, 미디엄 도메인의 경우, 약 420 만개의 서버 코드와 약 1.59 년의 인터벌 코드를 가질 수 있고, 라지 도메인의 경우, 약 262,144 개의 서버 코드와 약 25.5 년의 인터벌 코드를 가질 수 있다.
실시예에 따라 서버 URL 정보 및 타임 스탬프 정보는 각각 31 비트, 17 비트의 크기를 가지거나(스몰 도메인 타입), 23 비트, 25 비트의 크기를 가질 수 있다(라지 도메인 타입). 이 경우 도메인 타입 정보는 1 비트, 트리거 타입 정보는 1 비트의 크기를 가질 수 있다. 실시예에 따라 이 수치들은 변경될 수 있다.
실시예에 따라 도시된 WM 페이로드의 트리거 타입 정보는 2 비트의 크기를 가질 수 있다. 트리거 타입 정보가 00 인 경우, 이는 서버 URL 에 접근함으로써 어플리케이션 특성 정보가 획득될 수 있고, 이 특성 정보는 이전 WM 의 서버 URL 로 얻을 수 있는 특성 정보에 비해 변경되지 않았음을 의미할 수 있다. 트리거 타입 정보가 01 인 경우, 이는 서버 URL 에 접근함으로써 어플리케이션 특성 정보가 획득될 수 있고, 이 특성 정보는 이전 WM 의 서버 URL 로 얻을 수 있는 특성 정보에 비해 변경되었음을 의미할 수 있다. 트리거 타입 정보가 10 인 경우, 이는 서버 URL 에 접근함으로써 이벤트 정보가 획득될 수 있음을 의미할 수 있다. 트리거 타입 정보가 11 인 경우는 향후 사용을 위해 남겨둘 수 있다.
실시예에 따라, 트리거 타입 정보가 2 비트로 할당되는 경우에 있어서, 트리거 타입 정보의 값들이 의미하는 바는 달라질 수 있다. 예를 들어, 트리거 타입 정보가 00 인 경우, 이는 이 인터벌에서 서버로 요청을 함으로써 획득될 수 있는 추가적인 앱, 컴포넌트 또는 다른 정보들이 없음을 의미할 수 있다. 이 경우 요청(쿼리)가 서버로 보내지지 않을 수 있다. 트리거 타입 정보가 01 인 경우, 이는 이 인터벌에서 서버로 요청을 함으로써 획득될 수 있는 추가적인 앱, 컴포넌트 또는 다른 정보들이 있을 수 있음을 의미할 수 있다. 이 경우 요청(쿼리)이 서버로 보내질 수 있다. 트리거 타입 정보가 10 인 경우, 이는 서버 URL 에 접근함으로써 이벤트 정보가 획득될 수 있음을 의미할 수 있다. 따라서 이 경우 최근에 요청한 적 있더라도 다시 요청이 수행되어야 할 수 있다. 트리거 타입 정보가 11 인 경우는 향후 사용을 위해 남겨둘 수 있다.
실시예에 따라, 전술한 WM 페이로드의 구조는 서로 조합될 수 있다. 또한 실시예에 따라 전술한 WM 페이로드의 각 정보들의 할당된 크기는 서로 조합될 수 있다. 예를 들어 각각의 스몰, 미디엄, 라지 도메인에 따른 서버 URL 정보 및 타임 스탬프 정보의 크기에 대하여, 1 비트인 트리거 타입 정보가 조합되거나 2 비트인 트리거 타입 정보가 조합될 수 있다. 또한 각각의 경우에 대하여 1 비트인 도메인 타입 정보가 조합되거나 2 비트인 도메인 타입 정보가 조합될 수 있다.
도 41 는 본 발명의 일 실시예에 따른, 서비스/컨텐츠 정보를 이용한 워터마크 페이로드 구조의 변형을 도시한 도면이다.
전술한 각각의 WM 페이로드 구조 또는 조합될 수 있는 각각의 WM 페이로드 구조마다, 서비스 정보 및/또는 컨텐트 정보가 추가되어 전달될 수 있다. 여기서 서비스 정보는 해당 WM 이 삽입된 서비스와 관련된 정보일 수 있다. 이 서비스 정보는 서비스 ID 또는 채널 ID 의 형태일 수 있다. 서비스 정보가 WM 페이로드에 포함되어 전달되는 경우, 서버는 특정 서비스/채널에 대한 부가 컨텐트(인터랙티브 서비스)만을 선택적으로 제공할 수 있다. 또한 시청중인 서비스/채널이 변경되는 경우, 이전 서비스/채널의 인터랙티브 서비스가 빠르게 종료될 수 있다. 여기서 컨텐트 정보는 해당 WM 이 삽입된 컨텐트와 관련된 정보일 수 있다. 컨텐트 정보는 컨텐트 ID 의 형태일 수 있다. 컨텐트 정보가 WM 페이로드에 포함되어 함께 전달되는 경우, 서버는 특정 컨텐트에 대한 부가 컨텐트(인터랙티브 서비스)만을 선택적으로 제공할 수 있다.
도시된 실시예(t502010)에서, 전술한 WM 페이로드 구조 중 하나에, 서비스 정보 및/또는 컨텐트 정보가 추가되었다. 도시된 실시예(t502020)의 경우는, 전술한 WM 페이로드 구조를 최소화한 후에, 서비스 정보 및/또는 컨텐트 정보가 추가되는 경우이다. 이 경우 도메인 타입 정보는 생략되고, 서버 URL 정보, 타임 스탬프 정보 및 트리거 타입 정보는 각각 18 비트, 17 비트, 2 비트의 크기를 가지는 것으로 축소되었다. 두 실시예에서, 각각의 서비스 정보 및 컨텐트 정보는 관련 방송 시스템에 따라, 임의의 크기(x, y 비트)를 가질 수 있다. 실시예에 따라 두 정보 중 하나만 추가될 수도 있다.
도 42 은 본 발명의 일 실시예에 따른, NSC 필드를 이용한 워터마크 페이로드 구조의 변형을 도시한 도면이다.
전술한 각각의 WM 페이로드 구조들에 변형을 가하여, NSC (No Supplemental Content) 필드를 추가할 수 있다. NSC 필드는 부가 컨텐트가 이용가능한지 여부를 지시할 수 있다. NSC 필드는 1 비트로서 플래그로서 동작할 수 있다. 부가 컨텐트에 대해서는 전술하였다.
NSC 필드를 위한 1 비트는 전술한 도메인 타입 정보의 크기를 줄임으로써 획득될 수 있다. 실시예에 따라 도메인 타입 정보의 크기는 1 비트로 줄어들 수 있다. 전술한 바와 같이 도메인 타입 정보는 WM 페이로드의 타입을 지시하는데, 이 경우 도메인 타입 정보는 WM 페이로드가 스몰 도메인인지, 라지 도메인인지 2가지 경우를 지시할 수 있다. 즉, 2 가지 타입의 도메인이 충분하다면, 도메인 타입 정보의 1 비트를 NSC 필드로 할당해 부가 컨텐트의 가용여부가 지시될 수 있다. 실시예에 따라 도메인 타입 정보의 크기를 줄이지 않고, 전술한 WM 페이로드 구조들에 단순히 NSC 필드를 추가할 수도 있다.
이 실시예에서 스몰 도메인의 경우 서버 URL 필드는 22 비트, 타임 스탬프 필드는 25 비트일 수 있다. 라지 도메인의 경우 서버 URL 필드는 18 비트, 타임 스탬프 필드는 29 비트일 수 있다. 이는 스몰 도메인의 경우 약 420 만개의 서버 코드와 약 1.59 년의 인터벌 코드를 가질 수 있고, 라지 도메인의 경우, 약 262,144 개의 서버 코드와 약 25.5 년의 인터벌 코드를 가질 수 있다. 여기서 트리거 타입 정보는 1 비트 또는 2 비트의 크기를 가질 수 있다.
WM 페이로드의 정보에 따라, 수신기는 서버로 요청(query)을 보낼 수 있다. 이 요청을 보내는 경우는 (1) 수신기가 처음으로 워터마킹된 세그먼트를 수신(tuned)하여 요청하는 경우, (2) 부가 컨텐트의 요청 정보에 따라 추가로 요청을 보내는 경우, (3) 전술한 트리거 타입 정보에 따른 대응으로서 요청하는 경우가 있을 수 있다.
NSC 필드의 추가에 따라, 부가 컨텐트가 없는 경우에는 요청이 수행되지 않을 수 있다. 예를 들어, 수신기가 처음으로 워터마크를 수신한 경우에 보내는 요청은 수행되지 않을 수 있다. 따라서 채널 서핑(channel surfing)하는 경우에 있어 NSC 필드 추가는 효율적일 수 있다. 또한, 서비스/컨텐트들은 부가 컨텐트가 없는 경우에도, 서비스 사용(usage) 리포팅을 위하여 마킹(워터마킹) 될 수 있는데, 이러한 경우에도 NSC 필드 추가는 효율적일 수 있다. 특히 저장 & 사용 리포팅 전달하는 메커니즘의 경우에 더 효율적일 수 있다. 즉, 일반적으로, 많은 양의 컨텐트가 마킹(워터마킹)되어 있으나 부가 컨텐트는 없는 경우 등에 있어 효율적일 수 있다. 또한, SMPTE 오픈 ID 의 경우 계속적으로 워터마킹된 컨텐트가 바람직할 수 있다. 이 경우 계속적으로 마킹된 컨텐트는 두 SDO 들이 공통 WM 솔루션을 결정하는데 도움이 될 수 있다.
도 43 는 본 발명의 일 실시예에 따른, 비디오-오디오 워터마크 간의 링킹(linking) 을 위한 워터마크 페이로드 구조를 도시한 도면이다.
본 발명은 일 실시예로서, 비디오 WM 와 오디오 WM 를 동시에(simultaneously) 삽입하는 방법을 제안한다. 이를 위해 비디오 WM 페이로드의 일부를 오디오 WM 페이로드를 위해 할당할 수 있다. 비디오 WM 페이로드(예를 들어 30-60 바이트) 중 일부(예를 들어 50비트)는 오디오 WM 페이로드와 중복되는 정보(duplicate)를 운반할 수 있다. 이 중복되는 정보는 오디오 WM 페이로드의 정보와 같은 정보이며, 복사본일 수 있다.
또한 이 비디오 WM 와 오디오 WM 는 서로 싱크되어 전송될 수 있다. 비디오 WM 는 적어도 하나 이상의 메시지 블락을 포함할 수 있고, 이 메시지 블락 중 하나는 해당 구조의 WM 페이로드를 가질 수 있다. 이 경우, 그 서비스/컨텐트의 오디오에 삽입된 오디오 WM 는 비디오 WM 과 같은 WM 페이로드를 가질 수 있다. 이 때 비디오 WM 페이로드를 전달하는 메시지 블락의 최초 비디오 프레임은 해당하는 오디오 WM 의 처음부분과 타임 얼라인(time aligned)될 수 있다. 실시예에 따라 일정 오차내에서 양자가 타임 얼라인될 수 있다. 실시예에 따라 메시지 블락은 복수개의 비디오 프레임을 포함할 수 있고, 이 각각의 비디오 프레임은 같은 비디오 WM 페이로드를 반복해서(repeated) 가질 수 있다. 실시예에 따라 반대로 오디오 WM 페이로드 중 일부를 할당하여 비디오 WM 페이로드의 복사본을 운반케할 수도 있다.
예를 들어 사용자가 MVPD STB(Set top box) 로부터 ESG (Electronic Service Guide) 를 불러와 디스플레이시키는 경우에 문제가 생길 수 있다. 먼저, 오디오 WM 만이 사용되는 경우에 있어, ESG 가 디스플레이된다고 해도 오디오는 계속 재생될 수 있다. 그러나 오디오 WM 클라이언트는 ESG 가 디스플레이된다는 점을 모를 수 있다. 따라서 어플리케이션은 계속해서 실행되고, 이에 따른 그래픽 등은 ESG 에 겹쳐 방해를 줄 수도 있다.
또한, 비디오 WM 만이 사용되는 경우에 있어, ESG 가 디스플레이되면, 비디오 WM 클라이언트는 WM 가 사라졌다고 인지하고, 시청자가 채널을 변경했거나 인터랙티브 이벤트가 끝났다고 판단할 수 있다. 따라서 시청자가 채널 변경 없이 ESG 를 끄고, 다시 인터랙티브 서비스를 이전 시점에서 재개하려고 해도, 관련 어플리케이션은 비디오 WM 클라이언트에 의해 종료되었을 수 있다.
따라서, 오디오 WM 와 비디오 WM 를 직렬적으로(in tandem) 사용하는 것이 효율적이다. 오디오 WM 와 달리 비디오 WM 는 수신기에게, 메인 비디오가 현재 스크린에 포커스되고 있지 않다(ESG 가 사용되는 경우 등) 고 알려줄 수 있다. 또한 비디오 WM 와 달리 오디오 WM 는 ESG 가 사용되는 중에도 계속해서 WM 정보를 제공할 수 있다. 이에 따라 수신기는 ESG 작동 중에도 WM 들 내지 관련 부가 컨텐트에 변경이 있는지를 트랙킹할 수 있다.
따라서 비디오 WM 에 의해 ESG 가 스크린에 띄워져 있음을 인지할 수 있고, 오디오 WM 에 의해 적절한 수신기 동작이 계속 끊김없이 수행될 수 있다. 예를 들어 어플리케이션이 그래픽을 제공하지 않는 경우(예를 들어 백그라운드 앱), ESG 와 무관하게 계속 실행될 수 있다. 예를 들어 어플리케이션이 그래픽을 제공하는 경우, ESG 가 사라질 때까지 억제(suppressed)될 수 있다. 예를 들어 어플리케이션이 이벤트를 받으면, 수신기는 이를 ESG 가 사라질 때까지 백그라운드에서 처리할 수 있다. 즉, 오디오 WM 와 비디오 WM 를 링킹함으로써, 이 문제가 해결될 수 있다.
도 44 는 본 발명의 일 실시예에 따른, 링크된 비디오-오디오 워터마크를 이용한 동작을 도시한 도면이다.
먼저 사용자에 의해 ESG 가 스크린에 띄워지는 경우의 동작을 설명한다. 먼저 오리지널 서비스/컨텐트가 방송사로부터 STB 등의 MVPD 로 수신될 수 있다(t505010). STB, 케이블 등의 외부 입력 소스는 이를 수신기로 전달할 수 있다(t505020). 여기서 전달되는 AV 컨텐트는 언컴프레스드(uncompressed)된 상태이며, 링크된 오디오 WM 와 비디오 WM 를 가질 수 있다. 수신기는 오디오 WM 와 비디오 WM 를 감지하고 이에 따른 동작들을 수행할 수 있다.
여기서, 사용자가 STB 의 리모트 컨트롤러로 ESG 를 요청할 수 있다(t505030). STB 는 이에 따라 TV 스크린에 ESG 를 띄울 수 있다(t505040). ESG 는 재생중인 AV 컨텐트에 겹쳐질(overlaid) 수 있다. TV 수신기는 이제 오디오 WM 는 감지하지만, 비디오 WM 는 감지하지 못할 수 있다(t505050). 수신기는 메인 비디오 컨텐트가 ESG 등의 기타 그래픽에 의해 가려졌음을 인지하고, 링크된 오디오 WM 에 액세스하여 필요한 동작을 끊김없이 수행할 수 있다.
다음으로 사용자가 컨텐트를 음소거(mute) 시킨 경우의 동작을 설명한다. AV 컨텐트를 STB 를 통해 TV 수신기가 수신하는 내용(t505010-t505020)은 전술한 바와 같다. 여기서, 사용자는 STB 의 리모트 컨트롤러로 음소거(mute) 를 요청할 수 있다(t505030). STB 는 이에 따라 AV 컨텐트를 음소거 시킬 수 있다(t505040). TV 수신기는 이제 비디오 WM 는 감지하지만, 오디오 WM 는 감지하지 못할 수 있다(t505050). 수신기는 메인 오디오 컨텐트가 음소거되었음을 인지하고, 해당 오디오 WM 페이로드 데이터를 링크된 비디오 WM 페이로드를 통하여 획득할 수 있다. 이를 통해 수신기는 필요한 동작을 끊김없이 수행할 수 있다.
도 45 은 본 발명의 일 실시예에 따른 방송 컨텐트 처리 방법을 도시한 도면이다.
본 발명의 일 실시예에 따른 방송 컨텐트 처리 방법은 외부 입력 소스로부터 방송 컨텐트를 수신하는 단계, 방송 컨텐트로부터 오디오 또는 비디오 워터마크를 추출하는 단계, 워터마크로부터 생성된 URL 로 방송 컨텐트의 부가 컨텐트를 요청하는 단계 및/또는 서버로부터 부가 컨텐트를 획득하는 단계를 포함할 수 있다.
먼저 수신기의 수신유닛은 외부 입력 소스로부터 방송 컨텐트를 수신할 수 있다. 여기서 외부 입력 소스란 STB, 케이블, 위성 등 MVPD 를 의미할 수 있다. 방송 컨텐트는 방송 스트림으로부터 유도된 것으로서, 언컴프레스드(uncompressed) AV 컨텐트일 수 있다. 이 방송 컨텐트는 오디오 및/또는 비디오 컴포넌트를 포함하고, 이 컴포넌트들은 각각 오디오 WM, 비디오 WM 가 삽입되어 있을 수 있다.
수신기의 추출기는 방송 컨텐트로부터 오디오 WM, 비디오 WM 중 적어도 하나를 추출할 수 있다. 수신기의 네트워크 인터페이스는 오디오/비디오 WM 로부터 생성된 URL 로 특정되는 서버에, 부가 컨텐트를 요청할 수 있다. 부가 컨텐트는 방송 컨텐트와 관련된 것으로 자세한 사항은 전술하였다. URL 은 WM 페이로드의 서버 코드 내지 서버 URL 정보로부터 유도된 것일 수 있다. 네트워크 인터페이스는 서버로부터 부가 컨텐트를 획득할 수 있다. 오디오/비디오 WM 는 방송 컨텐트와 관련된 보충(auxiliary) 데이터의 전달에 사용될 수 있다.
본 발명의 다른 실시예에 따른 방송 컨텐트 처리 방법에서, 오디오 WM 들 중 적어도 하나의 오디오 WM는 오디오 WM 페이로드를 포함하고, 그 오디오 WM 페이로드는 도메인 타입 정보, 서버 정보, 인터벌 정보 및/또는 쿼리(query) 정보를 포함할 수 있다. 이 정보들은 차례대로 전술한 도메인 타입 정보, 서버 URL 정보, 타임 스탬프 정보 및/또는 트리거 타입 정보일 수 있다.
본 발명의 또 다른 실시예에 따른 방송 컨텐트 처리 방법에서, 도메인 타입 정보는 오디오 WM 페이로드의 타입을 특정하고, 서버 정보는 부가 컨텐트의 획득을 위한 서버를 식별하고, 인터벌 정보는 오디오 WM 페이로드가 삽입된 오디오 컴포넌트의 인터벌을 식별하고, 쿼리 정보는 서버로부터 이벤트 시그널링이 사용가능한지 여부를 시그널링할 수 있다. 이 정보들에 대해서는 자세히 전술하였다. 이벤트 시그널링은 어플리케이션의 동작을 개시하는, 전술한 이벤트 정보에 해당할 수 있다.
본 발명의 또 다른 실시예에 따른 방송 컨텐트 처리 방법에서, 비디오 WM 들 중 적어도 하나의 비디오 WM는 비디오 WM 페이로드를 포함하고, 그 비디오 WM 페이로드는 오디오 WM 페이로드와 동일한 정보를 포함하는 적어도 하나의 메시지 블락을 포함할 수 있다. 전술한 바와 같이 비디오 WM 페이로드는 오디오 WM 페이로드를 위한 공간을 할당하여, 이를 포함할 수 있다.
본 발명의 또 다른 실시예에 따른 방송 컨텐트 처리 방법에서, 오디오 WM 페이로드와 같은 정보를 포함하는 비디오 WM는, 오디오 WM 페이로드를 운반하는 오디오 WM 와 타임 얼라인(time-aligned) 될 수 있다. 오디오/비디오 WM 간의 링크는 자세히 전술하였다.
본 발명의 또 다른 실시예에 따른 방송 컨텐트 처리 방법에서, 부가 컨텐트에는 디스 컴포넌트(thisComponent) 정보 및/또는 아더 컴포넌트(otherComponent) 정보를 포함할 수 있다. 디스 컴포넌트 정보는, 해당 부가 컨텐트를 요청하는데 사용된 해당 WM 페이로드가 감지된 서비스 컴포넌트에 대한 정보를 기술할 수 있다. 해당 WM 페이로드의 서버 정보/인터벌 정보에 의해 해당 부가 컨텐트가 요청된 것일 수 있다. 아더 컴포넌트 정보는 디스 컴포넌트 정보가 기술하는 컴포넌트가 아닌 다른 컴포넌트들 중에서, 해당 WM 페이로드와 일치하는 WM 페이로드를 가지는 컴포넌트에 대해 기술할 수 있다. 이 WM 페이로드는 비디오 또는 오디오 WM 일 수 있다.
본 발명의 또 다른 실시예에 따른 방송 컨텐트 처리 방법은, 수신기의 추출기가 오디오 또는 비디오 WM 중 하나가 사라졌음을 인지하는 단계; 및 사라지지 않은 다른 WM 를 해당 컴포넌트로부터 추출하는 단계를 더 포함할 수 있다. 이는 전술한 동작과 같이, ESG 가 스크린에 띄워지거나 음소거되는 경우에 있어, 비디오 또는 오디오 WM 가 사라졌음을 인지하고, 같은 페이로드를 가지는 WM 에 액세스하여 끊김없이 정상 동작을 수행하기 위함일 수 있다.
본 발명의 일 실시예에 따른 방송 컨텐트 처리 방법(전송측)을 설명한다. 이 방법은 도면에 도시되지 아니하였다.
본 발명의 일 실시예에 따른 방송 컨텐트 처리 방법(전송측)은 서비스 데이터 생성 모듈이 비디오/오디오 컴포넌트를 가지는 방송 서비스를 생성하는 단계, WM 삽입 모듈이 비디오/오디오 컴포넌트에 비디오/오디오 WM 를 삽입하는 단계, 서비스 데이터 생성 모듈이 방송 서비스에 관련된 시그널링 정보를 생성하는 단계 및/또는 전송 유닛이 방송 서비스 데이터 및 시그널링 정보를 MVPD 로 전송하는 단계를 포함할 수 있다. 실시예에 따라, 서비스 데이터 생성 모듈이 방송 서비스에 대한 부가 컨텐트를 생성하고, 이를 부가 컨텐트 서버로 전달하고, WM 삽입 모듈이 이 서버 및 부가 컨텐트와 관련된 정보를 WM 에 포함시키는 단계를 더 포함할 수 있다.
본 발명의 실시예들에 따른 방송 컨텐트 처리 방법(전송측)들은, 전술한 본 발명의 실시예들에 따른 방송 컨텐트 처리 방법들에 대응될 수 있다. 방송 컨텐트 처리 방법(전송측)은, 전술한 방송 컨텐트 처리 방법의 실시예들에 대응되는 실시예들을 가질 수 있다.
전술한 단계들은 실시예에 따라 생략되거나, 유사/동일한 동작을 수행하는 다른 단계에 의해 대체될 수 있다.
도 46 는 본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치를 도시한 도면이다.
본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치는 전술한 수신 유닛, 추출기 및/또는 네트워크 인터페이스를 포함할 수 있다. 각각의 블락, 모듈들은 전술한 바와 같다. 본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치 및 그 내부 모듈/블락들은, 전술한 본 발명의 방송 컨텐트 처리 방법의 실시예들을 수행할 수 있다.
본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치(전송측)를 설명한다. 이 장치는 도면에 도시되지 아니하였다. 본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치(전송측)는 전술한 서비스 데이터 생성 모듈, WM 삽입 모듈 및/또는 전송 유닛을 포함할 수 있다. 각각의 블락, 모듈들은 전술한 바와 같다. 본 발명의 일 실시예에 따른 방송 컨텐트 처리 장치(전송측) 및 그 내부 모듈/블락들은, 전술한 본 발명의 방송 컨텐트 처리 방법(전송측)의 실시예들을 수행할 수 있다.
전술한 장치 내부의 블락/모듈 등은 메모리에 저장된 연속된 수행과정들을 실행하는 프로세서들일 수 있고, 실시예에 따라 장치 내/외부에 위치하는 하드웨어 엘레멘트들일 수 있다. 전술한 모듈들은 실시예에 따라 생략되거나, 유사/동일한 동작을 수행하는 다른 모듈에 의해 대체될 수 있다.
모듈 또는 유닛은 메모리(또는 저장 유닛)에 저장된 연속된 수행과정들을 실행하는 프로세서들일 수 있다. 전술한 실시예에 기술된 각 단계들은 하드웨어/프로세서들에 의해 수행될 수 있다. 전술한 실시예에 기술된 각 모듈/블락/유닛들은 하드웨어/프로세서로서 동작할 수 있다. 또한, 본 발명이 제시하는 방법들은 코드로서 실행될 수 있다. 이 코드는 프로세서가 읽을 수 있는 저장매체에 쓰여질 수 있고, 따라서 장치(apparatus)가 제공하는 프로세서에 의해 읽혀질 수 있다.
설명의 편의를 위하여 각 도면을 나누어 설명하였으나, 각 도면에 서술되어 있는 실시 예들을 병합하여 새로운 실시 예를 구현하도록 설계하는 것도 가능하다. 그리고, 통상의 기술자의 필요에 따라, 이전에 설명된 실시 예들을 실행하기 위한 프로그램이 기록되어 있는 컴퓨터에서 판독 가능한 기록 매체를 설계하는 것도 본 발명의 권리범위에 속한다.
본 발명에 따른 장치 및 방법은 상술한 바와 같이 설명된 실시 예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상술한 실시 예들은 다양한 변형이 이루어질 수 있도록 각 실시 예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.
한편, 본 발명이 제안하는 방법을 네트워크 디바이스에 구비된, 프로세서가 읽을 수 있는 기록매체에, 프로세서가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 프로세서가 읽을 수 있는 기록매체는 프로세서에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 프로세서가 읽을 수 있는 기록 매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한, 인터넷을 통한 전송 등과 같은 캐리어 웨이브의 형태로 구현되는 것도 포함한다. 또한, 프로세서가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 프로세서가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.
그리고, 당해 명세서에서는 물건 발명과 방법 발명이 모두 설명되고 있으며, 필요에 따라 양 발명의 설명은 보충적으로 적용될 수가 있다.
본 발명의 사상이나 범위를 벗어나지 않고 본 발명에서 다양한 변경 및 변형이 가능함은 당업자에게 이해된다. 따라서, 본 발명은 첨부된 청구항 및 그 동등 범위 내에서 제공되는 본 발명의 변경 및 변형을 포함하는 것으로 의도된다.
본 명세서에서 장치 및 방법 발명이 모두 언급되고, 장치 및 방법 발명 모두의 설명은 서로 보완하여 적용될 수 있다.
발명의 실시를 위한 형태
다양한 실시예가 본 발명을 실시하기 위한 최선의 형태에서 설명되었다.
본 발명은 일련의 방송 신호 제공 분야에서 이용된다.
본 발명의 사상이나 범위를 벗어나지 않고 본 발명에서 다양한 변경 및 변형이 가능함은 당업자에게 자명하다. 따라서, 본 발명은 첨부된 청구항 및 그 동등 범위 내에서 제공되는 본 발명의 변경 및 변형을 포함하는 것으로 의도된다.

Claims (14)

  1. 외부 입력 소스로부터 방송 컨텐트를 수신하는 단계, 여기서 상기 방송 컨텐트는 방송 스트림으로부터 유도되고, 상기 방송 컨텐트는 비디오 워터마크가 삽입된(embedded) 비디오 컴포넌트 및 오디오 워터마크가 삽입된 오디오 컴포넌트를 포함하고;
    상기 방송 컨텐트로부터 적어도 하나의 상기 오디오 또는 비디오 워터마크를 추출하는 단계;
    상기 오디오 또는 비디오 워터마크의 페이로드로부터 생성된 URL 에 의해 특정되는 서버로 상기 방송 컨텐트의 부가(supplementary) 컨텐트를 요청하는 단계; 및
    상기 서버로부터 상기 부가 컨텐트를 획득하는 단계; 를 포함하고,
    상기 오디오 또는 비디오 워터마크는 상기 방송 컨텐트의 보충(auxiliary) 데이터를 포함하는 방송컨텐트 처리 방법.
  2. 제 1 항에 있어서,
    상기 오디오 워터마크 중 적어도 하나의 오디오 워터마크는 오디오 워터마크 페이로드를 포함하고,
    상기 오디오 워터마크 페이로드는 도메인 타입 정보, 서버 정보, 인터벌 정보 또는 쿼리(query) 정보를 포함하는 방송 컨텐트 처리 방법.
  3. 제 2 항에 있어서,
    상기 도메인 타입 정보는 상기 오디오 워터마크 페이로드의 타입을 특정하고,
    상기 서버 정보는 상기 부가 컨텐트의 획득을 위한 서버를 식별하고,
    상기 인터벌 정보는 상기 오디오 워터마크 페이로드가 삽입된 상기 오디오 컴포넌트의 인터벌을식별하고,
    상기 쿼리 정보는 상기 서버로부터 이벤트 시그널링이 사용가능한지 여부를 시그널링하고, 상기 이벤트 시그널링은 어플리케이션의 동작을 개시하는 방송 컨텐트 처리 방법.
  4. 제 3 항에 있어서,
    상기 비디오 워터마크 중 적어도 하나의 비디오 워터마크는 비디오 워터마크 페이로드를 포함하고,
    상기 비디오 워터마크 페이로드는 상기 오디오 워터마크 페이로드와 동일한 정보를 포함하는 적어도 하나의 메시지 블락을 포함하는 방송 컨텐트 처리 방법.
  5. 제 4 항에 있어서,
    상기 오디오 워터마크 페이로드와 같은 정보를 포함하는 비디오 워터마크는 상기 오디오 워터마크 페이로드를 운반하는 상기 오디오 워터마크와 타임 얼라인(time-aligned)되는 것을 특징으로 하는 방송 컨텐트 처리 방법.
  6. 제 3 항에 있어서,
    상기 부가 컨텐트는 상기 서버 정보 및 상기 인터벌 정보를 포함하는 상기 오디오 또는 비디오 워터마크 페이로드가 감지된 특정 컴포넌트를 기술하는 정보를 포함하고,
    상기 부가 컨텐트는 상기 특정 컴포넌트가 아닌, 일치되는 상기 오디오 또는 비디오 워터마크 페이로드를 운반하는 컴포넌트들을 기술하는 정보를 더 포함하는 방송 컨텐트 처리 방법.
  7. 제 4 항에 있어서, 상기 방송 컨텐트 처리 방법은,
    상기 오디오 또는 비디오 워터마크 중 하나가 사라졌음을 인지하는 단계; 및
    상기 오디오 또는 비디오 워터마크 중 다른 하나를 상기 방송 컨텐트의 해당 컴포넌트로부터 추출하는 단계; 를 더 포함하는 방송 컨텐트 처리 방법.
  8. 외부 입력 소스로부터 방송 컨텐트를 수신하는 수신 유닛, 여기서 상기 방송 컨텐트는 방송 스트림으로부터 유도되고, 상기 방송 컨텐트는 비디오 워터마크가 삽입된(embedded) 비디오 컴포넌트 및 오디오 워터마크가 삽입된 오디오 컴포넌트를 포함하고;
    상기 방송 컨텐트로부터 적어도 하나의 상기 오디오 또는 비디오 워터마크를 추출하는 추출기; 및
    상기 오디오 또는 비디오 워터마크의 페이로드로부터 생성된 URL 에 의해 특정되는 서버로 상기 방송 컨텐트의 부가(supplementary) 컨텐트를 요청하는 네트워크 인터페이스; 를 포함하고,
    상기 네트워크 인터페이스는 상기 서버로부터 상기 부가 컨텐트를 획득하고,
    상기 오디오 또는 비디오 워터마크는 상기 방송 컨텐트의 보충(auxiliary) 데이터를 포함하는 방송컨텐트 처리 장치.
  9. 제 8 항에 있어서,
    상기 오디오 워터마크 중 적어도 하나의 오디오 워터마크는 오디오 워터마크 페이로드를 포함하고,
    상기 오디오 워터마크 페이로드는 도메인 타입 정보, 서버 정보, 인터벌 정보 또는 쿼리(query) 정보를 포함하는 방송 컨텐트 처리 장치.
  10. 제 9 항에 있어서,
    상기 도메인 타입 정보는 상기 오디오 워터마크 페이로드의 타입을 특정하고,
    상기 서버 정보는 상기 부가 컨텐트의 획득을 위한 서버를 식별하고,
    상기 인터벌 정보는 상기 오디오 워터마크 페이로드가 삽입된 상기 오디오 컴포넌트의 인터벌을식별하고,
    상기 쿼리 정보는 상기 서버로부터 이벤트 시그널링이 사용가능한지 여부를 시그널링하고, 상기 이벤트 시그널링은 어플리케이션의 동작을 개시하는 방송 컨텐트 처리 장치.
  11. 제 10 항에 있어서,
    상기 비디오 워터마크 중 적어도 하나의 비디오 워터마크는 비디오 워터마크 페이로드를 포함하고,
    상기 비디오 워터마크 페이로드는 상기 오디오 워터마크 페이로드와 동일한 정보를 포함하는 적어도 하나의 메시지 블락을 포함하는 방송 컨텐트 처리 장치.
  12. 제 11 항에 있어서,
    상기 오디오 워터마크 페이로드와 같은 정보를 포함하는 비디오 워터마크는 상기 오디오 워터마크 페이로드를 운반하는 상기 오디오 워터마크와 타임 얼라인(time-aligned)되는 것을 특징으로 하는 방송 컨텐트 처리 장치.
  13. 제 10 항에 있어서,
    상기 부가 컨텐트는 상기 서버 정보 및 상기 인터벌 정보를 포함하는 상기 오디오 또는 비디오 워터마크 페이로드가 감지된 특정 컴포넌트를 기술하는 정보를 포함하고,
    상기 부가 컨텐트는 상기 특정 컴포넌트가 아닌, 일치되는 상기 오디오 또는 비디오 워터마크 페이로드를 운반하는 컴포넌트들을 기술하는 정보를 더 포함하는 방송 컨텐트 처리 장치.
  14. 제 11 항에 있어서, 상기 방송 컨텐트 처리 방법은,
    상기 오디오 또는 비디오 워터마크 중 하나가 사라졌음을 인지하는 단계; 및
    상기 오디오 또는 비디오 워터마크 중 다른 하나를 상기 방송 컨텐트의 해당 컴포넌트로부터 추출하는 단계; 를 더 포함하는 방송 컨텐트 처리 장치.
KR1020167020611A 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법 KR101805538B1 (ko)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201562151447P 2015-04-23 2015-04-23
US62/151,447 2015-04-23
US201562152037P 2015-04-24 2015-04-24
US62/152,037 2015-04-24
US201562154733P 2015-04-30 2015-04-30
US201562155445P 2015-04-30 2015-04-30
US62/155,445 2015-04-30
US62/154,733 2015-04-30
PCT/KR2016/004174 WO2016171496A1 (ko) 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020177034595A Division KR101838084B1 (ko) 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Publications (2)

Publication Number Publication Date
KR20160137954A true KR20160137954A (ko) 2016-12-02
KR101805538B1 KR101805538B1 (ko) 2017-12-07

Family

ID=57143334

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020177034595A KR101838084B1 (ko) 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
KR1020167020611A KR101805538B1 (ko) 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020177034595A KR101838084B1 (ko) 2015-04-23 2016-04-21 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Country Status (6)

Country Link
US (1) US20170078765A1 (ko)
EP (1) EP3288277A4 (ko)
JP (1) JP6294503B2 (ko)
KR (2) KR101838084B1 (ko)
CN (1) CN106304851A (ko)
WO (1) WO2016171496A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190126319A (ko) * 2017-03-14 2019-11-11 소니 세미컨덕터 솔루션즈 가부시키가이샤 송신 장치, 수신 장치 및 데이터 처리 방법
WO2020040404A1 (ko) * 2018-08-20 2020-02-27 (주)스마일게이트스토브 게임 아이템의 구매를 위한 서버, 컨텐츠 제공자 단말 및 시청자 단말
WO2020131914A1 (en) * 2018-12-21 2020-06-25 The Nielsen Company (Us), Llc Apparatus and methods to associate different watermarks detected in media

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107852530B (zh) * 2015-07-06 2021-07-09 Lg电子株式会社 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
US20190253739A1 (en) * 2016-11-04 2019-08-15 Sharp Kabushiki Kaisha Dynamic event signaling
JP2019106592A (ja) * 2017-12-11 2019-06-27 トヨタ自動車株式会社 情報提供装置及び情報提供方法
WO2020259604A1 (zh) * 2019-06-28 2020-12-30 海信视像科技股份有限公司 数字内容发送装置、发送方法、数字内容接收装置、接收方法
CN110267062B (zh) * 2019-07-26 2022-07-08 深圳Tcl新技术有限公司 拼装视频帧的优化方法、装置及可读存储介质
KR102457065B1 (ko) 2021-02-18 2022-10-20 주식회사 엘지유플러스 컨텐츠 제공 서버 및 그 제어 방법, 컨텐츠 제공 방법 및 시스템

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6411725B1 (en) * 1995-07-27 2002-06-25 Digimarc Corporation Watermark enabled video objects
US7644282B2 (en) * 1998-05-28 2010-01-05 Verance Corporation Pre-processed information embedding system
JP2001292427A (ja) * 2000-04-06 2001-10-19 Nippon Television Network Corp コンテンツの連動方法、及びそのシステム
US7133534B2 (en) * 2002-09-03 2006-11-07 Koninklijke Philips Electronics N.V. Copy protection via redundant watermark encoding
US7970899B2 (en) 2006-03-03 2011-06-28 Barracuda Networks Inc Integrated data flow packet admission and traffic management apparatus
WO2008141169A1 (en) 2007-05-09 2008-11-20 Entropic Communications, Inc. Aggregating network packets for transmission to a destination node
KR100902887B1 (ko) * 2008-10-17 2009-06-16 주식회사 씨케이앤비 디지털 영상 장치의 영상 왜곡 판단 테스트 자동화 시스템
EP2257067A1 (en) * 2009-05-29 2010-12-01 Thomson Licensing Method for inserting watermark assistance data in a bitstream, method of watermarking said bitstream, device implementing the method of watermarking and bitstream comprising the watermark assistance data
GB2508451B (en) * 2010-12-26 2017-05-03 Lg Electronics Inc Broadcast service transmitting method, broadcast service receiving method and broadcast service receiving apparatus
KR101695514B1 (ko) * 2011-05-24 2017-01-11 엘지전자 주식회사 방송 서비스 전송 방법, 그 수신 장치 및 그 수신 장치의 부가 서비스 처리 방법
KR101995425B1 (ko) * 2011-08-21 2019-07-02 엘지전자 주식회사 영상 표시 장치, 단말 장치 및 그 동작 방법
CA2851607C (en) * 2011-10-20 2018-02-06 Lg Electronics Inc. Broadcast service receiving method and broadcast service receiving apparatus
WO2014007571A1 (en) * 2012-07-05 2014-01-09 Lg Electronics Inc. Method and apparatus for processing digital service signals
JP6193993B2 (ja) * 2012-07-16 2017-09-06 エルジー エレクトロニクス インコーポレイティド デジタルサービス信号処理方法及び装置
US9286912B2 (en) * 2012-09-26 2016-03-15 The Nielsen Company (Us), Llc Methods and apparatus for identifying media
KR102113503B1 (ko) * 2013-08-26 2020-06-05 삼성전자주식회사 전자 장치 및 전자 장치에서 컨텐츠 제공 방법
WO2015138798A1 (en) * 2014-03-13 2015-09-17 Verance Corporation Interactive content acquisition using embedded codes

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190126319A (ko) * 2017-03-14 2019-11-11 소니 세미컨덕터 솔루션즈 가부시키가이샤 송신 장치, 수신 장치 및 데이터 처리 방법
US11889145B2 (en) 2017-03-14 2024-01-30 Sony Corporation Transmission apparatus, reception apparatus, and data processing method
WO2020040404A1 (ko) * 2018-08-20 2020-02-27 (주)스마일게이트스토브 게임 아이템의 구매를 위한 서버, 컨텐츠 제공자 단말 및 시청자 단말
WO2020131914A1 (en) * 2018-12-21 2020-06-25 The Nielsen Company (Us), Llc Apparatus and methods to associate different watermarks detected in media
US11356747B2 (en) 2018-12-21 2022-06-07 The Nielsen Company (Us), Llc Apparatus and methods to associate different watermarks detected in media

Also Published As

Publication number Publication date
JP2017522742A (ja) 2017-08-10
KR101838084B1 (ko) 2018-03-13
WO2016171496A1 (ko) 2016-10-27
EP3288277A1 (en) 2018-02-28
US20170078765A1 (en) 2017-03-16
KR101805538B1 (ko) 2017-12-07
CN106304851A (zh) 2017-01-04
EP3288277A4 (en) 2018-09-12
JP6294503B2 (ja) 2018-03-14
KR20170136006A (ko) 2017-12-08

Similar Documents

Publication Publication Date Title
KR101805538B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US9596510B2 (en) Method for transmitting broadcast service, method for receiving broadcast service, and apparatus for receiving broadcast service
US10939145B2 (en) Broadcasting signal transmission device, broadcasting signal reception device, broadcasting signal transmission method, and broadcasting signal reception method
US9860611B2 (en) Broadcast service transmitting method, broadcasting service receiving method and broadcast service receiving apparatus
JP6290935B2 (ja) 映像表示装置及びその動作方法
US9667902B2 (en) Method for transmitting a broadcast service, method for receiving a broadcast service, and apparatus for receiving a broadcast service
KR20140125766A (ko) 영상 표시 장치 및 그 동작 방법
CA2851888C (en) Method of processing non-real time service and broadcast receiver
KR20150045918A (ko) 영상 표시 장치 및 그 동작 방법
KR20140119691A (ko) 영상 표시 장치 및 그 동작 방법
US20170164071A1 (en) Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method, and broadcast signal reception method
KR20150120350A (ko) 영상 표시 장치 및 그 동작 방법
US10171852B2 (en) Broadcast signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
KR102626634B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US20180359495A1 (en) Apparatus for broadcast signal transmission, apparatus for broadcast signal reception, method for broadcast signal transmission, and method for broadcast signal reception

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right