KR20170028372A - 미디어 데이터의 송신 및 수신을 위한 방법 및 장치 - Google Patents

미디어 데이터의 송신 및 수신을 위한 방법 및 장치 Download PDF

Info

Publication number
KR20170028372A
KR20170028372A KR1020177002180A KR20177002180A KR20170028372A KR 20170028372 A KR20170028372 A KR 20170028372A KR 1020177002180 A KR1020177002180 A KR 1020177002180A KR 20177002180 A KR20177002180 A KR 20177002180A KR 20170028372 A KR20170028372 A KR 20170028372A
Authority
KR
South Korea
Prior art keywords
media
configuration data
data set
display
rendering
Prior art date
Application number
KR1020177002180A
Other languages
English (en)
Other versions
KR102395590B1 (ko
Inventor
마리-뤽 샹?
마리-뤽 샹–y
알렉쌍드르 드쓰뇌
쎌린느 귀에드
쥴리앙 리샤르
죠앙 라크 뺑싸크
프랑크 오몽
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20170028372A publication Critical patent/KR20170028372A/ko
Application granted granted Critical
Publication of KR102395590B1 publication Critical patent/KR102395590B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H04L65/4084
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368Multiplexing of audio and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H04N21/4358Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen for generating different versions, e.g. for different peripheral devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/458Scheduling content for creating a personalised stream, e.g. by combining a locally stored advertisement with an incoming stream; Updating operations, e.g. for OS modules ; time-related management operations
    • H04N21/4586Content update operation triggered locally, e.g. by comparing the version of software modules in a DVB carousel to the version stored locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

본 발명은 각각의 미디어 패키지에 대해, 미디어 패키지의 미디어 엔티티들의 초기 공간적 렌더링을 정의하는 복수의 공간적 구성 데이터 세트들 및 각각의 공간적 구성 데이터 세트들에 대해, 복수의 시간적 구성 데이터 세트들을 제공하는 것에 관한 것이다. 본 발명은 MMT 데이터에 적용될 수 있다.

Description

미디어 데이터의 송신 및 수신을 위한 방법 및 장치{METHOD AND APPARATUS FOR TRANSMISSION AND RECEPTION OF MEDIA DATA}
본 발명은 미디어 데이터의 송신 및 수신을 위한 방법 및 장치에 관한 것이다. 특히, 배타적이지는 않지만, 본 발명은 예를 들어, MPEG 타입 데이터를 포함하는 미디어 패키지에 대한 데이터의 송신 및 수신, 그리고 미디어 콘텐츠를 디스플레이 상에 렌더링하는 방법 및 장치에 관한 것이다.
이미지, 그래픽, 텍스트, 오디오 및 비디오 데이터 또는 이들의 임의의 조합과 같은 미디어 콘텐츠는 통신 네트워크를 통해 전달될 수 있으며, 미디어 플레이어들 및 멀티미디어 플레이어들을 포함하는 사용자 단말기들 상에서 렌더링될 수 있다.
멀티미디어 플레이어들은 사용자들에 의한 소비를 위한 비디오, 오디오 또는 데이터 콘텐츠의 조합들을 렌더링하는 디바이스들이다. 미디어 콘텐츠의 렌더링 또는 재생은 가시 디스플레이, 오디오 사운드 등에 의해 수행될 수 있다. 상이한 미디어 콘텐츠 엔티티들이 멀티미디어의 형태로 사용자 단말기에 전달될 때, 효과적인 소비 및 프리젠테이션을 위해 미디어 콘텐츠의 타이밍 동기화 및 디스플레이 위치를 결정하는 것이 중요하다.
MPEG-H 파트 1 표준(MPEG 멀티미디어 전송 또는 MMT로서 또한 공지됨)은 예를 들어, 이미지 데이터, 오디오 데이터, 텍스트 데이터 등과 같은 타임드(timed) 및 넌-타임드(non-timed) 미디어 콘텐츠의 패키징, 전송 및 구성을 위한 솔루션을 정의한다. MMT는 IP 네트워크들을 주로 다루지만, 임의의 타입의 패킷-기반 네트워크들을 통한 콘텐츠의 전달을 또한 지원한다. 특히, MMT는 지상, 케이블 또는 위성 네트워크들과 같은 방송 네트워크들을 통한 시청각 서비스들의 전달을 위해 사용될 수 있다.
MMT에서, 용어 "애셋(Asset)"은 동일한 전송 특징을 갖는 데이터를 포함하고 동일한 애셋 ID를 갖는 하나 이상의 미디어 프로세싱 유닛들(MPUs)로 이루어진 데이터 엔티티를 지칭하고, 용어 "패키지"는 하나 이상의 애셋들 및 그들의 연관된 애셋 전달 특징(즉, 애셋들의 전달을 위한 요구된 서비스 품질에 관한 설명), 및 구성 정보(CI)(즉, 애셋들 사이의 공간적 및 시간적 관계들의 설명)로 이루어진 데이터의 논리적 집합을 지칭한다.
MMT-CI(여기서, CI는 구성 정보를 지칭함)는 콘텐츠 제공자가 디스플레이의 미디어 데이터의 초기 디스플레이 구성 및 초기 구성이 시간에 따라 어떻게 변화하는지를 정의할 수 있게 한다. 실제로, MMT-CI는 소비 및 프리젠테이션을 위한 MMT 애셋들 사이의 관계 배열을 특정하고 다음을 정의한다:
- 공간적 구성, 즉, 뷰(view)에서 렌더링된 각각의 애셋의 위치;
- 시간적 구성, 즉, 미디어 애셋들 사이의 타이밍 동기화 - 공간적 구성의 시간의 전개(evolution);
- 하나 이상의 디스플레이 디바이스들 상에서 동시 디스플레이 또는 가상 디스플레이들을 지원하는 다중 뷰들
초기 공간적 구성은 MMT 패키지와 연관된 HTML 페이지와 같은 공간적 구성 데이터 세트에서 정의되며, 구성의 시간의 전개는 XML 프래그먼트들에 설명된 CI 엘리먼트들에 의해 시간적 구성 데이터 세트에서 정의된다. XML 프래그먼트들은 시간이 지남에 따라 개별적으로 전송될 수 있다.
초기 HTML 페이지 및 후속 MMT-CI 프래그먼트들은 동일한 MMT 패키지와 모두 연관되며, 동일한 패키지에 통상적으로 저장된다. 이것은 저장되고 유한한 지속기간 미디어 콘텐츠와 어떠한 문제도 나타내지 않지만, HTML5 페이지가 동일한 TV 채널내에서 하나의 프로그램으로부터 다른 프로그램으로 현저하게 변경될 수 있기 때문에, 이러한 시스템은 (TV 채널들과 같은) 유한한 지속기간 콘텐츠와 작동하지 않을 수 있다. 잠재적 솔루션은 각각이 그 자신의 HTML 페이지 및 CI 프래그먼트들을 갖는 일련의 MMT 패키지들(TV 이벤트들, 영화들, 광고들, …)로서 TV 채널을 시그널링하는 것일 수 있지만, 이러한 접근방식은 상당한 양의 시그널링 정보 및 그에 따라 훨씬 더 높은 수신기 복잡성을 야기할 것이다.
더욱이, CI가 방송 채널에 사용되는 경우에, 다수의 CI 프래그먼트들이 전송될 것이 예상된다. 디스플레이 정보가 매우 풍부한 경우에, HTML 페이지와 CI 프래그먼트들 양자는 상당히 클 수 있고, 높은 수의 뷰들이 곱해진 뷰 당 높은 수의 구역들(a high number of areas per view)은 수신기에서 상당한 프로세싱을 요구한다.
본 발명은 상기한 바를 고려하여 고안되었다.
하나의 일반적인 양태에서, 본 발명은 각각의 미디어 패키지에 대해 복수의 공간적 구성 데이터 세트들 및 각각의 공간적 구성 데이터 세트들에 대해 복수의 시간적 구성 데이터 세트들을 제공하는 것에 관한 것이다. 시간적 구성 데이터 세트는 공간적 구성 데이터 세트에 의해 정의된 초기 공간적 구성의 시간의 전개를 정의할 수 있다.
다른 일반적인 양태에서, 본 발명은 하나 이상의 미디어 엔티티들의 시간적 렌더링(디스플레이의 공간적 구성의 시간의 전개) 및 디스플레이의 대응하는 뷰 또는 미디어 엔티티들의 디스플레이의 뷰의 구역이 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 정의하는 시간적 구성 데이터 세트를 제공하는 것에 관한 것이다.
본 발명의 제1 양태에 따르면, 미디어 패키지에 대한 데이터를 송신하는 방법이 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하며; 방법은 각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및 각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트를 송신하는 단계를 포함한다.
본 발명의 제2 양태에 따르면, 미디어 패키지에 대한 데이터를 프로세싱하는 방법이 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 방법은:
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 렌더링(시간적 렌더링)을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 획득하는 단계를 포함하고, 방법은
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 단계를 더 포함한다.
본 발명의 제3 양태에 따르면, 미디어 패키지에 대한 데이터를 송신하는 송신 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 초기 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 송신하도록 구성되는 송신 모듈을 포함한다.
본 발명의 제4 양태에 따르면, 미디어 패키지의 데이터를 프로세싱하는 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 제5 양태에 따르면, 미디어 패키지의 데이터를 프로세싱하는 디바이스를 포함하는 디스플레이 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 제6 양태에 따르면, 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터; 복수의 공간적 구성 데이터 세트들 - 공간적 구성 데이터를 포함하는 각각의 공간적 구성 데이터 세트는 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -; 및 각각의 공간적 구성 데이터 세트에 대해: 미디어 데이터의 상기 하나 이상의 미디어 엔티티들의 시간의 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트를 포함하는 미디어 데이터 패키지가 제공된다.
실시예에서, 상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 하나 이상의 구역들을 포함하고, 여기서, 각각의 공간적 구성 데이터는 뷰의 각자의 초기 공간적 구성을 정의한다.
실시예에서, 상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 여기서, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
본 발명의 제7 양태는 미디어 패키지에 대한 데이터를 송신하는 방법을 제공하고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 방법은:
각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 송신하는 단계를 포함하고,
상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 여기서, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
본 발명의 제8 양태는 미디어 패키지의 데이터를 프로세싱하는 방법을 제공하고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 방법은:
각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 획득하는 단계를 포함하고, 방법은:
적어도 하나의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 단계를 더 포함하고, 상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
본 발명의 제9 양태에 따르면, 미디어 패키지에 대한 데이터를 송신하는 송신 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 미디어 패키지의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 송신하도록 구성되는 송신 모듈을 포함한다.
본 발명의 제10 양태에 따르면, 미디어 패키지의 데이터를 프로세싱하는 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 미디어 패키지의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 제11 양태에 따르면, 미디어 패키지의 데이터를 프로세싱하는 디바이스 - 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함함 -; 를 포함하는 디스플레이 디바이스가 제공되고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 미디어 패키지의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 제12 양태는 미디어 데이터 패키지를 제공하고, 미디어 데이터 패키지는:
디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터; 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터는 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -; 및 각각의 공간적 구성 데이터 세트에 대해, 미디어 데이터의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트를 포함하고, 상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
실시예에서, 복수의 공간적 구성 데이터 세트가 각각의 미디어 패키지에 대해 제공된다. 각각의 공간적 구성 데이터 세트는 HTML 페이지일 수 있다. 각각의 시간적 구성 데이터 세트는 CI 프래그먼트일 수 있다.
본 발명의 12개의 양태 중 임의의 양태의 실시예들의 특징들은 아래와 같이 제시된다:
실시예에서, 상기 하나 이상의 미디어 엔티티들은 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고 적어도 하나의 디스플레이 영역으로 이루어지고, 여기서, 시간적 구성 데이터 세트는 디스플레이 구역이 선행 시간적 구성 데이터 세트에서 정의된 디스플레이 구역에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
실시예에서, 각각의 공간적 구성 데이터 세트는 각자의 버전 식별자를 갖는다.
실시예에서, 버전 식별자는 각자의 공간적 구성 데이터 세트의 헤더에 포함된다.
실시예에서, 각각의 시간적 구성 데이터 세트는 대응하는 공간적 구성 데이터 세트의 식별자를 포함한다.
실시예에서, 각각의 시간적 구성 데이터 세트는 CI 프래그먼트이며, 대응하는 공간적 구성 데이터 세트의 버전 번호가 CI 프래그먼트의 뷰 및 미디어 싱크 엘리먼트들과 동일한 레벨에서 CI 프래그먼트에 삽입된다.
실시예에서, 버전 번호에 의해 표시된 대응하는 공간적 구성 데이터 세트가 수신되면 시간적 구성 데이터 세트만이 미디어 엔티티들의 렌더링을 위해 프로세싱된다.
본 발명의 일부 실시예들에서, 공간적 구성 데이터 세트들 및 시간적 구성 데이터 세트들이 MPEG 미디어 전송 CI(MMT-CI)에 포함된다.
본 발명의 일부 실시예들에서, 각각의 공간적 구성 데이터 세트는 HTML 문서 또는 MMT-CI의 페이지이다. 각각의 시간적 구성 데이터 세트는 MMT-CI의 CI 프래그먼트일 수 있다. 각각의 미디어 엔티티는 MMT 미디어 애셋일 수 있다.
본 발명의 일부 실시예들에서, 각각의 시간적 구성 데이터 세트는: 미디어 패키지의 미디어 엔티티들 사이의 연관성; 디스플레이 상의 미디어 엔티티들의 렌더링에 대한 시간적 정보; 및 디스플레이 뷰에 대한 미디어 엔티티들의 매핑을 정의한다.
본 발명의 일부 실시예들에서, 각각의 시간적 구성 데이터 세트는 MMT 구성 데이터의 CI 프래그먼트이다.
본 발명의 다른 양태에 따르면, 미디어 패키지를 송신하는 방법이 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 방법은: 각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및 각각의 공간적 구성 데이터 세트에 대해, 미디어 애셋들 사이의 시간적 동기화를 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트를 송신하는 단계를 포함한다.
실시예에서, 복수의 공간적 구성 데이터 세트들은 초기에 송신된다.
실시예에서, 각각의 공간적 구성 데이터 세트는 각각의 대응하는 시간적 구성 데이터 세트와 링크하기 위해 각자의 식별자를 갖는다.
실시예에서, 각각의 뷰는 시간 의존적이고, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
각각의 공간적 구성 데이터 세트는 HTML 페이지일 수 있다. 각각의 시간적 구성 데이터 세트는 CI 프래그먼트일 수 있다.
본 발명의 다른 양태에 따르면, 미디어 패키지를 프로세싱하는 방법이 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 방법은:
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 렌더링(시간적 렌더링)을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 획득하는 단계를 포함하고, 방법은
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 단계를 더 포함한다.
본 발명의 다른 양태에 따르면, 미디어 패키지를 송신하는 송신 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 송신하도록 구성되는 송신 모듈을 포함한다.
본 발명의 다른 양태에 따르면, 미디어 패키지를 프로세싱하는 송신 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간의 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 다른 양태에 따르면, 미디어 패키지를 프로세싱하는 디바이스를 포함하는 디스플레이 디바이스가 제공되고, 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 디바이스는:
미디어 패키지를 포함하고/미디어 패키지와 연관된 데이터를 수신하는 수신 모듈;
각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -, 및
각각의 공간적 구성 데이터 세트에 대해, 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
를 수신된 데이터로부터 추출하는 모듈; 및
복수의 공간적 구성 데이터 세트들 및 대응하는 시간적 구성 데이터 세트들에 따라 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진을 포함한다.
본 발명의 다른 양태에 따르면, 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터; 복수의 공간적 구성 데이터 세트들 - 공간적 구성 데이터를 포함하는 각각의 공간적 구성 데이터 세트는 상기 하나 이상의 미디어 엔티티들의 공간적 렌더링을 정의함 -; 및 각각의 공간적 구성 데이터 세트에 대해: 미디어 데이터의 상기 하나 이상의 미디어 엔티티들의 시간의 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트를 포함하는 미디어 데이터 패키지가 제공된다.
다른 양태들 중 임의의 것의 실시예에서, 각각의 공간적 구성 데이터 세트는 각각의 대응하는 시간적 구성 데이터 세트와 링크하기 위해 각자의 식별자를 갖는다.
다른 양태들 중 임의의 것의 실시예에서, 각각의 뷰는 시간 의존적이고, 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함한다.
본 발명에 따른 방법들 중 적어도 일부들은 컴퓨터 구현될 수 있다. 그에 따라, 본 발명은 전체적으로 하드웨어 실시예, (펌웨어, 상주 소프트웨어, 마이크로-코드 등을 포함하는) 전체적으로 소프트웨어 실시예) 또는 소프트웨어와 하드웨어 양태들을 조합한 실시예의 형태를 취할 수 있고, 이들 모두는 본원에서 "회로", "모듈" 또는 "시스템"으로서 일반적으로 지칭될 수 있다. 또한, 본 발명은 매체에 수록된 컴퓨터 사용가능 프로그램 코드를 갖는 표현의 임의의 유형의 매체에 수록된 컴퓨터 프로그램 제품의 형태를 취할 수 있다.
본 발명이 소프트웨어에서 구현될 수 있기 때문에, 본 발명은 임의의 적합한 캐리어 매체상의 프로그램가능한 장치에 제공을 위한 컴퓨터 판독가능 코드로서 수록될 수 있다. 유형의 캐리어 매체가 플로피 디스크, CD-ROM, 하드 디스크 드라이브, 자기 테이프 디바이스 또는 고체 상태 메모리 디바이스 등과 같은 저장 매체를 포함할 수 있다. 일시적 캐리어 매체가 전기 신호, 전자 신호, 광신호, 음향 신호, 자기 신호 또는 전자기 신호, 예를 들어, 마이크로파 또는 RE 신호와 같은 신호를 포함할 수 있다.
이제, 본 발명의 실시예들이 아래의 도면들을 참조하여 예로서만 설명될 것이다.
도 1은 MMT-CI의 뷰의 예를 개략적으로 예시한다.
도 2는 MMT-CI의 CI 프래그먼트의 기본 구조 및 MMT-CI의 대응하는 HTLM 문서와의 관계의 예를 개략적으로 예시한다.
도 3은 본 발명의 하나 이상의 실시예들이 구현될 수 있는 데이터 통신 시스템의 예의 블록도이다.
도 4는 본 발명의 하나 이상의 실시예들이 구현될 수 있는 송신 디바이스의 예의 블록도이다.
도 5는 본 발명의 하나 이상의 실시예들이 구현될 수 있는 수신 디바이스의 예의 블록도이다.
도 6은 본 발명의 하나 이상의 실시예들이 구현될 수 있는 수신 디바이스의 다른 예의 블록도이다.
본 발명의 실시예들이 MPEG 멀티미디어 전송 또는 MMT에 관하여 설명될 것이다. 이러한 실시예들에서, 미디어 패키지는 MMT 패키지로서 지칭될 수 있으며, 미디어 엔티티가 MMT 애셋으로서 지칭될 수 있다. 그러나, 본 발명이 미디어 데이터의 송신 및 렌더링을 위한 다른 기법들에 적용될 수 있다는 것이 이해될 것이다.
MMT에서의 공간적 구성은 HTML 5 페이지 기술과 같은 HTML 페이지 기술에 의해 제공되며, 시간적 구성은 XML에 통상적으로 설명된 CI 층에 의해 제공된다. CI 층은 HTML5 페이지를 확장하고, 프리젠테이션의 자원으로서 MMT 패키지에서 MMT 애셋들의 연관성, MMT 애셋들의 전달 및 소비 순서를 위해 필요한 시간적 정보, 및 특정한 뷰에 대한 MMT 애셋들의 매핑을 정의하는 서술형 언어이다.
그 결과, 통상의 MMT 렌더링 엔진은 MMT 애셋들의 초기 공간적 구성을 정의하기 위해 MMT-CI 및 하나 이상의 MMT 애셋들을 포함하는 MMT 패키지와 연관된 HTML 페이지를 먼저 프로세싱한 후, 시간에서 MMT 애셋들의 프리젠테이션을 제어하기 위해 CI 데이터를 구문분석한다.
도 1은 MMT-CI의 뷰의 예를 개략적으로 예시한다. 뷰(100)는 하나 이상의 구역들(Areas) 또는 서브-영역들(sub-regions)로 이루어질 수 있는 전체 디스플레이 영역을 나타낸다. 예시된 예에서, 뷰는 구역 1, 구역 2 및 구역 3 각각으로 지정된 3개의 서브-영역들(110_1, 110_2 및 110_3)로 분할된다. 하나 이상의 MMT 미디어 애셋들(120_1 .. 120_5)은 각각의 구역에서 렌더링된다. 뷰에서의 콘텐츠 및 애셋 배열은 연관된 CI 데이터에 따라 시간에서 변할 수 있다.
MMT-CI는 애셋들, 구역 및 뷰에 관하여 MMT 패키지에서 공간적 및 시간적 관계를 설명한다. 도 2는 MMT 패키지와 연관된 CI(10)의 기본 구조 및 MMT 패키지와 연관된 HTML5 페이지(20)와의 관계의 예를 개략적으로 예시한다. 예시된 바와 같이, CI 파일의 기본 구조는 HTML 5 문서의 구조로부터 유도된다.
MMT-CI의 루트 엘리먼트가 헤드 및 바디 엘리먼트들(21 및 22)과 같은 2개의 엘리먼트들을 포함하는 html 엘리먼트(20)이다. 헤드 및 바디 엘리먼트들(21, 22)에서의 일부 엘리먼트들은 MMT-CI의 요건을 충족하기 위해 확장되거나 추가된다.
설명된 예에서, HTML 엘리먼트는 HTML 5 페이지이다. HTML5 페이지(20)의 헤드 엘리먼트(21)는 MMT 패키지에 관한 정보를 제공하기 위해 타이틀 엘리먼트(211)를 포함한다.
바디 엘리먼트(22)는 비디오, 오디오, 이미지(img), 텍스트 등과 같은 MMT 애셋 엘리먼트들(2211)을 포함하는 div 엘리먼트들(221)을 포함한다. div 엘리먼트(221)는 구역에 관한 공간적 정보를 제공한다. MMT 애셋(2211)(비디오, 오디오 ...)은 MMT 애셋의 공간적 및 시간적 정보를 제공한다.
뷰 엘리먼트(11)가 뷰에 관한 공간적 및 시간적 정보를 제공한다. div 위치 엘리먼트(divLocation element)(111)가 뷰의 구역에 관한 시간적으로 변경된 특수 정보를 제공한다.
HTML5 페이지에서의 div 엘리먼트들은 단일 MMT 디스플레이에 의해 소비될 수 있는 뷰의 초기 구역을 나타낸다. 뷰에서의 초기 구역들의 시간적 변경은 CI 문서의 div 위치 엘리먼트에 의해 (뷰들 및 구역들에 관한 업데이트 정보를 제공하는) CI 층의 뷰 엘리먼트에서 나중에 특정될 수 있다. 이들 2개의 엘리먼트들은 구역들의 공간적 위치가 전체 뷰 페이지를 재로딩하지 않고 동적으로 변경되고 업데이트되게 한다.
기본적으로, HTML 페이지는 MMT 패키지의 초기 뷰가 설명되게 할 수 있고, MMT-CI는 뷰가 업데이트되게 할 수 있고 새로운 추가의 뷰들이 작성되게 할 수 있다. 업데이트들은 뷰의 공간적 또는 시간적 수정, 새로운 뷰들의 도입, 또는 새로운 애셋들의 도입을 포함할 수 있다. CI 층에서의 미디어싱크(MediaSync) 엘리먼트가 미디어 애셋들상에 시간적 정보(일반적으로 동기화 정보)를 제공한다.
미디어 데이터에 대한 구성 데이터를 제공하는 본 발명의 실시예들을 도 3 내지 도 6을 참조하여 설명할 것이다.
도 3은 본 발명의 하나 이상의 실시예들이 구현될 수 있는 데이터 통신 시스템을 개략적으로 예시한다. 데이터 통신 시스템(500)은 데이터 스트림의 데이터 패킷들을 데이터 통신 네트워크(530)를 통해 수신 디바이스, 이 경우에, 클라이언트 단말기(510)에 송신하도록 동작가능한 송신 디바이스, 이 경우에, 서버(510)를 포함한다. 데이터 통신 네트워크(530)는 광역 네트워크(WAN) 또는 로컬 영역 네트워크(LAN)일 수 있다. 이러한 네트워크는 예를 들어, 무선 네트워크(Wifi I 802.11a 또는 b 또는 g), 이더넷 네트워크, 인터넷 네트워크 또는 여러 상이한 네트워크들로 구성된 혼합 네트워크일 수 있다. 본 발명의 특정한 실시예에서, 데이터 통신 시스템은 서버(510)가 동일한 데이터 콘텐츠를 다중의 클라이언트들(520)에게 전송하는 디지털 텔레비전 방송 시스템일 수 있다.
서버(510)에 의해 제공된 데이터 스트림(540)은 구성 정보를 갖는 MMT 패키지들의 형태로 송신된 비디오 및 오디오 데이터를 나타내는 멀티미디어 데이터를 포함한다. 멀티-미디어 데이터는 이미지들, 오디오 및 텍스트(문자열들)와 같은 다양한 타입의 미디어 데이터의 데이터를 포함한다. 구성 정보는 멀티-미디어 애셋들의 시간적/공간적 배열 데이터를 정의한다. 시간적/공간적 배열 데이터는 미디어 데이터의 각각의 컴포넌트 또는 미디어 엔티티에 대한 재생 타이밍 및 재생 형태, 즉, 시간적/공간적 배열, 예를 들어, 미디어 데이터를 재생할 시기 및/또는 미디어 데이터를 디스플레이할 위치를 결정한다. 본 발명의 실시예들에서, 각각의 MMT 패키지에 대한 공간적 구성 데이터는 MMT 패키지의 미디어 애셋들의 디스플레이 상의 공간적 렌더링을 정의하는 HTML 페이지들의 형태의 복수의 공간적 구성 데이터 세트들, 및 각각의 HTML 페이지에 대해, 미디어 애셋들 사이의 시간적 동기화를 정의하는 XML 데이터의 형태의 복수의 시간적 구성 데이터 세트들을 포함한다.
서버(510)에는 비디오 및 오디오 스트림들을 인코딩하여 인코더에 대한 입력으로서 제시된 데이터의 더욱 컴팩트한 표현인 송신을 위한 압축된 비트스트림을 특히 제공하는 인코더가 제공된다. 서버에는 공간적 구성 데이터 세트들 및 시간적 구성 데이터 세트들을 제공하는 MMT CI 디바이스(550)가 더 제공된다.
클라이언트(520)는 송신된 비트스트림을 수신하며, 재구성된 비트스트림을 디코딩하여 클라이언트 단말기상에서 멀티미디어 데이터를 렌더링한다. 클라이언트(520)의 사용은 본 발명의 실시예들의 변경 파라미터들에 의해 설정된 제약들에 따라 멀티미디어 콘텐츠의 프리젠테이션을 수정할 수 있다. 단말기에는 공간적 구성 데이터 세트들 및 시간적 구성 데이터 세트들의 데이터를 프로세싱하는 렌더링 에이전트가 제공된다.
도 4는 예시적인 송신 시스템(600)을 예시한다. 입력 미디어 데이터, 예를 들어, 오디오 및 비디오 데이터는 미디어 인코더(610)에서 인코딩된다. 인코딩된 데이터는 멀티플렉서(620)에서 멀티플렉싱되며, 송신기(630)에서 송신된다. 송신 시스템은 통상의 방송 TV 환경에서 사용될 수 있거나, 시청각 서비스를 제공하는 모바일 디바이스에서 사용될 수 있다. MMT CI 모듈(640)은 구성 정보에서 정의된 바와 같은 미디어 콘텐츠의 프리젠테이션을 수정하는, 선행 예에서 정의된 바와 같은 수정 파라미터들을 설정한다.
도 5는 예시적인 수신 시스템(700)을 예시한다. 시스템(700)의 입력 데이터는 전송 비트스트림, 예를 들어,시스템(600)의 출력일 수 있다. 데이터는 수신기(710)에서 수신되고, 디-멀티플렉서(720)에서 디-멀티플렉싱된 후, 미디어 디코더(730)에서 디코딩된다. 디코딩된 패킷들은 디-멀티플렉서(720)의 버퍼에 배치될 수 있다. 렌더링 엔진(740)이 MMT CI 데이터 및 수정 파라미터들에서 정의된 시간적/공간적 관계에 따라 미디어 콘텐츠를 렌더링한다. 렌더링 엔진에는 공간적 구성 데이터 세트들 및 시간적 구성 데이터 세트들을 프로세싱하는 CI 에이전트(745)가 제공된다.
본 발명의 실시예들에서, 아래의 특징들 중 하나 이상이 제공된다:
- 다중의 HTML 페이지들이 각각의 MMT 패키지에 대해 제공되고;
- 복수의 CI 프래그먼트들이 대응하는 HTML 페이지와 연관되며;
- CI 프래그먼트들의 프로세싱이 현재와 이전 CI 프래그먼트들 사이에서 변경된 뷰들 또는 구역들을 하이라이트함으로써 더 빠르게 이루어질 수 있다.
MMT 패키지와 연관된 상이한 HTML 페이지들 사이를 구별하기 위해, 각각의 HTML 페이지에는 각자의 버전 식별자가 제공된다. 본 발명의 하나의 특정한 실시예에서, 버전관리(versioning) 정보가 "버전" 속성을 작성하기 위해 예를 들어, <META> 지시문(directive)을 사용함으로써 각각의 HTML 페이지의 <HEAD> 섹션으로 도입된다. 그 후, 버전 속성의 콘텐츠는 HTML 페이지의 버전을 식별하기 위해 렌더링 에이전트의 CI 에이전트에 의해 사용된다.
버전 속성은 제1 페이지에 대해 0에서 시작하고 새로운 페이지가 수신 디바이스에 송신될 때마다 1씩 증분되는 정수일 수 있다. 후자의 실시예에서, 버전 번호는 무한히 사용될 수 있도록 (CI 에이전트에 대해 공지된) 미리 정의된 값을 둘러쌀 수 있다.
아래의 텍스트는 이러한 버전 속성이 HTML 페이지에 어떻게 추가될 수 있는지의 예시적인 예이다.
Figure pct00001
CI 프래그먼트들이 패스된 프래그먼트들을 사용하지 않는 그들 자체 버전 번호를 갖지만, CI 프래그먼트와 HTML 페이지 사이에 솔리드 링크(solid link)가 존재하지 않는다. CI 프래그먼트를 HTML 페이지와 연관시키기 위해, 연관되는 HTML 페이지를 식별하는 엘리먼트가 CI 프래그먼트에 도입된다. 예를 들어, 관련되는 HTML 페이지의 "버전" 속성과 동일한 값을 포함하는 새로운 엘리먼트 "HTMLpageVersion"이 CI 프래그먼트에 포함될 수 있다. 본 발명의 일 실시예에서, "HTMLpageVersion" 엘리먼트는 CI 프래그먼트의 "뷰" 및 "미디어싱크" 엘리먼트들과 동일한 레벨에서 삽입된다.
아래의 텍스트는 "CIType" 엘리먼트의 정의내에 다음의 라인을 삽입함으로써 연관되는 HTML 페이지를 식별하는 새로운 엘리먼트를 포함하기 위해 MMT CI XML 스키마가 어떻게 수정될 수 있는지를(볼드체 텍스트) 나타낸다(MMT-CI 사양의 A.1 장 참조).
Figure pct00002
이러한 XML 스키마에 후속하여, CI 프래그먼트가 예를 들어, 다음과 같이 시작할 수 있다:
Figure pct00003
HTML 페이지 및 CI 프래그먼트들 모두에 대한 버전 정보의 도입으로, 렌더링 엔진의 CI 에이전트는 CI 프래그먼트들을 정확한 HTML 페이지에 적용할 수 있으며, 따라서, (상이한 버전 번호들을 갖는) 여러 HTML 페이지들을 프로세싱할 수 있다. 일관성을 보장하기 위해, CI 에이전트는 HTMLpageVersion 엘리먼트에 의해 참조된 것 이외의 다른 HTML 페이지들에 CI 프래그먼트들을 적용하지 않는다. 대응하는 버전 번호를 갖는 HTML 페이지가 발견될 수 없는 경우에, CI 프래그먼트의 프로세싱은, 정확한 HTML 페이지가 수신되거나 새로운 CI 프래그먼트가 현재의 것을 구식이 되게 할 때까지 지연된다. 방송 환경에서, HTML 페이지들 및 CI 프래그먼트들이 캐러셀(carousel)되고, 새로운 서비스에 조인할 때 CI 에이전트가 먼저 수신할 것에 관한 확실성이 없다는 것에 유의해야 할 수 있다.
CI 에이전트가 새로운 CI 프래그먼트를 수신할 때마다, 현재 디스플레이에 적용해야 한다. 현재 디스플레이는 모두 이전에 수신된 CI 프래그먼트들을 (버전 번호의 순서로, CI 프래그먼트들의 수신의 수신일 가능성이 또한 있음) HTML 페이지에 적용한 결과이다.
CI 에이전트의 블런트(blunt) 구현은, 새로운 CI 프래그먼트가 수신될 때마다 초기 HTML 페이지에 전체 CI 프래그먼트를 재적용하지만, 이것은 이전의 CI 프래그먼트들의 적용에 관하여 실제로 수정되었던 부분보다는 전체 디스플레이를 업데이트하는 것을 실제로 초래한다.
본 발명의 일부 실시예들에서, 어느 뷰들 또는 뷰의 어느 구역들이 하나의 CI 프래그먼트로부터 후속 CI 프래그먼트로 변경되었는지를 나타내기 위해 표시자가 제공된다. 하나의 특정한 실시예에서, 속성이 참(true)으로 설정될 때, CI 에이전트가 대응하는 뷰 또는 구역이 선행 CI 프래그먼트 적용에서 그 상태에 관하여 수정되도록 예를 들어, "새로운"으로 지칭되는 속성이 CI의 뷰 및 div 위치 엘리먼트들에 추가된다. 그 결과, CI 에이전트가 CI 프래그먼트 버전 번호들 계속 추적하는 경우에, 2개의 연속하는 프래그먼트들(연속하는 버전 번호들을 갖는 프래그먼트들) 사이에 적용할 차이점들을 즉시 알 수 있다. 일부 경우들에서, CI 에이전트가 선행 CI 프래그먼트를 결코 프로세싱하지 않은 경우에, CI 프래그먼트들의 모든 엘리먼트들에 변경들을 적용해야 하며, "새로운" 속성으로 표시된 것들만을 고려하지 않는다.
이러한 메커니즘으로, 연속하는 CI 프래그먼트들이 수신되는 동안, CI 에이전트는 새로운 속성에 의해 표시된 구역들 또는 뷰들에 변경들을 단지 적용함으로써 디스플레이 대한 최소 업데이트 작업을 할 수 있으며, CI 프래그먼트가 시퀀스에서 미싱(missing)될 때마다, 전체 CI 프래그먼트를 적용함으로써 디스플레이를 업데이트할 수 있다.
CI 프래그먼트들에 의해 정의된 수정들은 뷰들 및 구역들과 관련될 수 있다; 따라서, 새로운 속성들이 뷰 및 div 위치 엘리먼트들에 대해 도입될 수 있다. 아래의 텍스트는 이러한 속성들이 이들 2개의 엘리먼트들에 대한 MMT-CI의 XML 스키마 정의에서 어떻게 추가될 수 있는지를 예시하는 예이다:
Figure pct00004
이러한 속성은 임의적이며, 일정한 뷰 또는 구역에 대해 제공되지 않으면, CI 에이전트는 이러한 뷰 또는 구역에 대해 변경이 발생하였다는 것을 가정해야 하고 디스플레이를 업데이트해야 한다. 따라서, 양호한 프랙티스(practice)는 이러한 속성을 항상 사용하여, CI 에이전트가 모든 뷰 및 구역과 행할 것을 정밀하게 알도록 이러한 속성을 참(TRUE) 또는 거짓(FALSE)으로 설정한다.
도 6은 본 발명의 하나 이상의 실시예들이 구현될 수 있는 다른 예시적인 수신 시스템(800)을 예시한다. 개요에서, 도 6의 비디오 수신기 시스템에서, 방송 프로그램 콘텐츠를 나타내는 오디오, 비디오 및 연관된 데이터를 반송하는 신호들로 변조된 방송 캐리어가 안테나(10)에 의해 수신되어, 입력 프로세서(13)에 의해 프로세싱된다. 결과적인 디지털 출력 신호는 복조기(15)에 의해 복조된다. 유닛(15)으로부터의 복조된 출력은 트렐리스 디코딩되고, 바이트 길이 데이터 세그먼트들로 매핑되고, 디인터리빙되며, 디코더(17)에 의해 리드-솔로몬 에러 정정된다. 유닛(17)으로부터의 출력 데이터는 프로그램을 대표하는 멀티플렉싱된 오디오, 비디오 및 데이터 컴포넌트들을 포함하는 MPEG 호환가능 전송 데이터스트림의 형태이다. 유닛(17)으로부터의 전송 스트림은 유닛(22)에 의해 오디오, 비디오 및 데이터 컴포넌트들로 디멀티플렉싱되어, 디코더(100)의 다른 엘리먼트들에 의해 더 프로세싱된다. 일 모드에서, 디코더(100)는 본 발명의 실시예들에 따라 대응하는 구성 정보에 의해 정의된 시간적/공간적 관계들에 따라 유닛들(50 및 55) 각각상에서 디스플레이 및 오디오 재생을 위한 MPEG 디코딩된 데이터를 제공한다. 다른 모드에서, 유닛(17)으로부터의 전송 스트림은 저장 디바이스(90)를 통해 저장 매체(105)상에 저장을 위해 MPEG 호환가능 데이터스트림을 제공하기 위해 디코더(100)에 의해 프로세싱된다.
사용자가 원격 제어 유닛(70)을 사용함으로써, 프로그램 가이드와 같은 TV 채널 또는 온-스크린 메뉴를 보기 위해 선택한다. 프로세서(60)는 도 6의 엘리먼트들을 적절하게 구성하여 보기 위한 원하는 프로그램 채널을 수신하기 위해 인터페이스(65)를 통해 원격 제어 유닛(70)으로부터 제공된 선택 정보를 사용한다. 프로세서(60)는 프로세서(62) 및 제어기(64)를 포함한다. 유닛(62)은 프로그램 가이드 및 시스템 정보를 포함하는 프로그램 특정 정보를 프로세싱하고(즉, 구문분석하고, 조합하고(collate), 어셈블링하고), 제어기(64)는 디코더(100)를 동작시키는데 요구되는 나머지 제어 기능들을 수행한다. 유닛(60)의 기능들이 도 6에 도시된 바와 같은 개별 엘리먼트들(62 및 64)로서 구현될 수 있지만, 이들은 대안으로는 단일 프로세서내에서 구현될 수 있다. 예를 들어, 유닛들(62 및 64)의 기능들은 마이크로프로세서의 프로그래밍된 명령어들내에 통합될 수 있다. 프로세서(60)는 입력 신호 포맷 및 코딩 타입을 복조하고 디코딩하기 위해 프로세서(13), 복조기(15), 디코더(17), 및 디코더 시스템(100)을 구성한다.
도 6을 상세히 고려하면, 안테나(10)에 의해 수신된 프로그램을 대표하는 오디오, 비디오 및 연관된 데이터를 반송하는 신호들로 변조된 캐리어가 입력 프로세서(13)에 의해 디지털 형태로 변환되어 프로세싱된다. 프로세서(13)는 무선 주파수(RF) 튜너, 중간 주파수(IF) 믹서 및 입력 신호를 추가 프로세싱에 적합한 저주파수 대역으로 햐향변환하는 증폭단들을 포함한다.
예시적인 목적을 위해, 비디오 수신기 사용자가 원격 제어 유닛(70)을 사용하여 보기 위한 서브-채널(SC)을 선택한다는 것이 가정된다. 프로세서(60)는 선택된 서브-채널(sc)에 대응하는 물리 채널을 수신하기 위해 디코더(100)의 엘리먼트들을 적절하게 구성하기 위해 인터페이스(65)를 통해 원격 제어 유닛(70)으로부터 제공된 선택 정보를 사용한다.
프로세서(22)에 제공된 출력 데이터는 여러 서브-채널들을 통해 분포된 다수의 프로그램들에 대한 프로그램 채널 콘텐츠 및 프로그램 특정 정보를 포함하는 전송 데이터스트림의 형태이다.
프로세서(22)는 디코더(17)에 의해 제공되는 들어오는 패킷들의 패킷 식별자들(PIDs)을 서브-채널(sc) 상에서 송신되는 비디오, 오디오 및 서브-픽처 스트림들의 PID 값들과 매칭한다. 이들 PID 값들은 프로세서(60)에 의해 유닛(22)내의 제어 레지스터들에 사전-로딩된다. 프로세서(22)는 서브-채널(SC)상에서 송신된 프로그램을 구성하는 패킷들을 캡처하고, 패킷들을 비디오 디코더 25, 오디오 디코더(35) 각각으로 출력을 위한 MPEG 호환가능 비디오, 오디오 데이터 스트림들로 형성한다. 비디오 및 오디오 스트림들은 선택된 서브-채널(SC) 프로그램 콘텐츠를 나타내는 압축된 비디오 및 오디오 데이터를 포함한다.
디코더(25)는 유닛(22)으로부터의 MPEG 호환가능 패킷화된 비디오 데이터를 디코딩하고 압축해제하며, 압축해제된 프로그램을 대표하는 픽셀 데이터를 디스플레이를 위한 디바이스(50)에 제공한다. 유사하게는, 오디오 프로세서(35)는 유닛(22)으로부터의 패킷화된 오디오 데이터를 디코딩하며, 연관된 압축해제된 비디오 데이터와 동기화된 디코딩된 오디오 데이터를 오디오 재생을 위한 디바이스(55)에 제공한다.
MPEG 데이터는 본 발명의 실시예들의 각각의 MMT 패킷에 대한 공간적 구성 데이터 세트들 및 각각의 공간적 구성 데이터 세트들에 대한 시간적 구성 데이터 세트들에서의 대응하는 구성 정보에 의해 정의된 시간적/공간적 관계들에 따라 렌더링될 수 있다.
도 6의 시스템의 저장 모드에서, 유닛(17)으로부터의 출력 데이터는 저장을 위한 MPEG 호환가능 데이터스트림을 제공하기 위해 디코더(100)에 의해 프로세싱된다. 이러한 모드에서, 프로그램은 원격 유닛(70) 및 인터페이스(65)를 통해 사용자에 의해 저장을 위해 선택된다.
프로세서(60)는, 프로세서(22)와 함께, 선택된 프로그램 및 연관된 프로그램 특정 정보의 패킷화된 콘텐츠를 포함하는 복합 MPEG 호환가능 데이터스트림을 형성한다. 복합 데이터스트림은 저장 인터페이스(95)로 출력된다. 저장 인터페이스(95)는 데이터에서의 갭들 및 비트 레이트 변동을 감소시키기 위해 복합 데이터스트림을 버퍼링한다. 결과적인 버퍼링된 데이터는 매체(105)상에 저장에 적합하도록 저장 디바이스(90)에 의해 프로세싱된다. 저장 디바이스(90)는 채널 코딩, 인터리빙 및 리드 솔로몬 인코딩과 같은 공지된 에러 인코딩 기법들을 사용하여 인터페이스(95)로부터의 버퍼링된 데이터스트림을 인코딩하여, 저장에 적합한 인코딩된 데이터스트림을 생성한다. 유닛(90)은 압축된 프로그램 특정 정보를 통합한 결과적인 인코딩된 데이터스트림을 매체(105)상에 저장한다.
본원에 설명하는 본 발명의 실시예들은 예를 들어, 방법 또는 프로세스, 장치, 소프트웨어 프로그램, 데이터 스트림, 또는 신호에서 구현될 수 있다. 단일 형태의 구현의 문맥에서만 논의되더라도(예를 들어, 방법으로만 논의됨), 논의된 특징들의 구현은 다른 형태들(예를 들어, 장치 또는 프로그램)로 또한 구현될 수 있다. 장치는 예를 들어, 적절한 하드웨어, 소프트웨어, 및 펌웨어에서 구현될 수 있다. 방법들은 예를 들어, 컴퓨터, 마이크로프로세서, 집적 회로, 또는 프로그램가능한 로직 디바이스를 포함하는 일반적으로 프로세싱 디바이스들을 지칭하는 예를 들어, 프로세서와 같은, 예를 들어, 장치에서 구현될 수 있다. 프로세서들은, 예를 들어, 컴퓨터들, 태블릿들, 셀 폰들, 휴대용/휴대 정보 단말기들("PDAs"), 및 종단 사용자들 사이의 정보의 통신을 용이하게 하는 다른 디바이스들과 같은 통신 디바이스들을 또한 포함한다.
본 원리들의 "일 실시예" 또는 "실시예" 또는 "일 구현" 또는 "구현" 뿐만 아니라 그의 변형들에 대한 참조는, 실시예와 관련하여 설명한 특정한 특징, 구조, 특성 등이 본 원리들의 적어도 하나의 실시예에 포함된다는 것을 의미한다. 따라서, 본 명세서 전반의 다양한 장소들에 나타나는 문구 "일 실시예에서" 또는 "실시예에서" 또는 "일 구현에서" 또는 "구현에서"의 출현들이 반드시 동일한 실시예를 모두 지칭하는 것은 아니다.
추가로, 본 출원 또는 그 청구항들은 다양한 정보를 "결정하는 것"을 지칭할 수 있다. 정보를 결정하는 것은, 예를 들어, 정보를 추정하는 것, 정보를 계산하는 것, 정보를 예측하는 것, 또는 메모리로부터 정보를 검색하는 것 중 하나 이상을 포함할 수 있다.
추가로, 본 출원 또는 그 청구항들은 다양한 정보를 "수신하는 것"을 지칭할 수 있다. 수신하는 것은 "액세스하는 것"과 마찬가지로, 넓은 용어인 것으로 의도된다. 정보를 수신하는 것은, 예를 들어, 정보에 액세스하는 것, 또는 (예를 들어, 메모리로부터) 정보를 검색하는 것 중 하나 이상을 포함할 수 있다. 또한, "수신하는 것"은 예를 들어, 정보를 저장하는 것, 정보를 프로세싱하는 것, 정보를 송신하는 것, 정보를 이동시키는 것, 정보를 카피하는 것, 정보를 소거하는 것, 정보를 계산하는 것, 정보를 결정하는 것, 정보를 예측하는 것, 또는 정보를 추정하는 것과 같은 동작들 동안 일 방식 또는 다른 방식으로 통상적으로 수반된다.
본 기술분야의 통상의 기술자에게 명백한 바와 같이, 구현들은 예를 들어, 저장되거나 송신될 수 있는 정보를 반송하도록 포맷된 각종 신호들을 생성할 수 있다. 정보는 예를 들어, 방법을 수행하는 명령어들, 또는 설명한 구현들 중 하나에 의해 생성된 데이터를 포함할 수 있다. 예를 들어, 신호는 설명한 실시예의 비트스트림을 반송하기 위해 포맷될 수 있다. 이러한 신호는 예를 들어, 전자기파(예를 들어, 스펙트럼의 무선 주파수 부분을 사용함) 또는 기저대역 신호로서 포맷될 수 있다. 포맷하는 것은, 예를 들어, 데이터 스트림을 인코딩하는 것 및 캐리어를 인코딩된 데이터 스트림으로 변조하는 것을 포함할 수 있다. 신호가 반송하는 정보는 예를 들어, 아날로그 또는 디지털 정보일 수 있다. 신호는 공지되어 있는 바와 같이, 각종의 상이한 유선 또는 무선 링크들을 통해 송신될 수 있다. 신호는 프로세서-판독가능 매체상에 저장될 수 있다.
본 발명이 특정 실시예들을 참조하여 상술되었지만, 본 발명은 특정 실시예들에 제한되지 않으며, 수정들이 본 기술분야의 통상의 기술자에게 명백할 것이고 본 발명의 범위내에 있다.
예를 들어, 상술한 예들이 MMT 애셋들에 관하여 설명되었지만, 본 발명이 다른 형태의 미디어 엔티티들 또는 컴포넌트들, 또는 다른 형태의 데이터에 적용될 수 있다는 것이 이해될 것이다.
다수의 추가 수정들 및 변경들이, 단지 예로서 제공되며 본 발명의 범위를 제한하려 의도되지 않는 상술한 예시적인 실시예들을 참조하여, 첨부한 청구항들에 의해서만 결정된다는 것을 본 기술분야의 통상의 기술자에게 제안할 것이다. 특히, 상이한 실시예들로부터의 상이한 특징들은 적절한 경우에 교환될 수 있다.

Claims (25)

  1. 미디어 패키지(media package)에 대한 데이터를 송신하는 방법으로서, 상기 미디어 패키지는 디스플레이 상에 렌더링(rendering)하는 하나 이상의 미디어 엔티티들(media entities)의 미디어 데이터를 포함하고, 상기 방법은:
    각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들(spatial composition data sets) - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 상기 미디어 패키지의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트(temporal composition data set)
    를 송신하는 단계
    를 포함하는 방법.
  2. 미디어 패키지의 데이터를 프로세싱하는 방법으로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 방법은:
    각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 미디어패키지의 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 획득하는 단계
    를 포함하고, 상기 방법은:
    상기 복수의 공간적 구성 데이터 세트들 및 상기 대응하는 시간적 구성 데이터 세트들에 따라 상기 하나 이상의 미디어 엔티티들을 렌더링하는 단계를 더 포함하는, 방법.
  3. 제1항 또는 제2항에 있어서, 상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰(view)에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 방법.
  4. 미디어 패키지에 대한 데이터를 송신하는 방법으로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 방법은:
    각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 송신하는 단계
    를 포함하고,
    상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 방법.
  5. 미디어 패키지의 데이터를 프로세싱하는 방법으로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 방법은:
    각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 획득하는 단계
    를 포함하고, 상기 방법은:
    상기 적어도 하나의 공간적 구성 데이터 세트들 및 상기 대응하는 시간적 구성 데이터 세트에 따라 상기 하나 이상의 미디어 엔티티들을 렌더링하는 단계를 더 포함하고, 상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 방법.
  6. 제4항 또는 제5항에 있어서, 복수의 공간적 구성 데이터 세트들이 각각의 미디어 패키지에 대해 송신되고, 각각의 공간적 구성 데이터 세트는 상기 미디어 패키지의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의하는, 방법.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서, 각각의 공간적 구성 데이터 세트는 HTML 페이지인, 방법.
  8. 제1항 내지 제7항 중 어느 한 항에 있어서, 상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고 적어도 하나의 디스플레이 영역으로 이루어지고, 상기 시간적 구성 데이터 세트는 디스플레이 영역이 선행 시간적 구성 데이터 세트에서 정의된 디스플레이 영역에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 방법.
  9. 제1항 내지 제8항 중 어느 한 항에 있어서, 각각의 공간적 구성 데이터 세트는 각각의 대응하는 시간적 구성 데이터 세트와 링크하기 위해 각자의 식별자를 갖는, 방법.
  10. 제9항에 있어서, 상기 식별자는 상기 각자의 공간적 구성 데이터 세트의 헤더에 포함되는, 방법.
  11. 제9항 또는 제10항에 있어서, 각각의 시간적 구성 데이터 세트는 상기 대응하는 공간적 구성 데이터 세트의 식별자를 포함하는, 방법.
  12. 제9항 내지 제11항 중 어느 한 항에 있어서, 각각의 시간적 구성 데이터 세트는 CI 프래그먼트(fragment)이며, 상기 대응하는 공간적 구성 데이터 세트의 식별자는 상기 CI 프래그먼트의 뷰 및 미디어 싱크 엘리먼트들과 동일한 레벨에서 상기 CI 프래그먼트에 삽입되는, 방법.
  13. 제9항 내지 제12항 중 어느 한 항에 있어서, 상기 시간적 구성 데이터 세트는, 각자의 식별자에 의해 표시된 상기 대응하는 공간적 구성 데이터 세트가 수신되는 경우에, 상기 미디어 엔티티들의 렌더링을 위해서만 프로세싱되는, 방법.
  14. 미디어 패키지에 대한 데이터를 송신하는 송신 디바이스로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 디바이스는:
    각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 상기 미디어 패키지의 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 송신하도록 구성되는 송신 모듈
    을 포함하는, 디바이스.
  15. 미디어 패키지의 데이터를 프로세싱하는 디바이스로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 디바이스는:
    미디어 패키지를 포함하고/상기 미디어 패키지와 연관되는 데이터를 수신하는 수신 모듈;
    각각의 미디어 패키지에 대해, 복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 상기 미디어 패키지의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 수신된 데이터로부터 추출하는 모듈; 및
    상기 복수의 공간적 구성 데이터 세트들 및 상기 대응하는 시간적 구성 데이터 세트들에 따라 상기 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진
    을 포함하는, 디바이스.
  16. 제14항 또는 제15항에 있어서, 각각의 공간적 구성 데이터 세트는 각각의 대응하는 시간적 구성 데이터 세트와 링크하기 위해 각자의 버전 식별자를 갖는, 디바이스.
  17. 미디어 패키지를 송신하는 송신 디바이스로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 디바이스는:
    각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 상기 미디어 패키지의 상기 하나 이상의 미디어 엔티티들의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 송신하도록 구성되는 송신 모듈
    을 포함하고,
    상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 디바이스.
  18. 미디어 패키지를 프로세싱하는 디바이스로서, 상기 미디어 패키지는 디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하고, 상기 디바이스는:
    상기 미디어 패키지를 포함하고/상기 미디어 패키지와 연관되는 데이터를 수신하는 수신 모듈;
    각각의 미디어 패키지에 대해, 적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 상기 디스플레이 상의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -, 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 디스플레이 상의 상기 하나 이상의 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 수신된 데이터로부터 추출하는 모듈; 및
    상기 하나 이상의 공간적 구성 데이터 세트들 및 상기 대응하는 시간적 구성 데이터 세트들에 따라 상기 하나 이상의 미디어 엔티티들을 렌더링하는 렌더링 엔진
    을 포함하고,
    상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 디바이스.
  19. 제14항 내지 제18항 중 어느 한 항에 있어서, 각각의 공간적 구성 데이터 세트는 HTML 페이지인, 디바이스.
  20. 하나 이상의 미디어 엔티티들의 미디어 데이터를 포함하는 미디어 패키지를 프로세싱하는, 제15항, 제16항, 제18항, 및 제19항 중 어느 한 항의 디바이스, 및 상기 미디어 엔티티들을 렌더링하는 디스플레이를 포함하는, 디스플레이 디바이스.
  21. 미디어 데이터 패키지로서,
    디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터;
    복수의 공간적 구성 데이터 세트들 - 각각의 공간적 구성 데이터 세트는 상기 미디어 패키지의 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의함 -; 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 미디어 데이터의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 포함하는, 미디어 데이터 패키지.
  22. 제21항에 있어서, 각각의 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 미디어 데이터 패키지.
  23. 미디어 데이터 패키지로서,
    디스플레이 상에 렌더링하는 하나 이상의 미디어 엔티티들의 미디어 데이터;
    적어도 하나의 공간적 구성 데이터 세트 - 각각의 공간적 구성 데이터 세트는 상기 하나 이상의 미디어 엔티티들의 각자의 초기 공간적 렌더링을 정의하는 공간적 구성 데이터를 포함함 -; 및
    각각의 공간적 구성 데이터 세트에 대해, 상기 미디어 데이터의 상기 하나 이상의 미디어 엔티티들의 시간적 렌더링을 정의하는 적어도 하나의 대응하는 시간적 구성 데이터 세트
    를 포함하고,
    상기 하나 이상의 미디어 엔티티들은 상기 디스플레이의 뷰에서 렌더링되고, 각각의 뷰는 시간 의존적이고, 상기 시간적 구성 데이터 세트는 대응하는 뷰가 선행 시간적 구성 데이터 세트에서 정의된 뷰에 관하여 변경되었다는 것을 나타내는 표시자를 포함하는, 미디어 데이터 패키지.
  24. 제21항 내지 제23항 중 어느 한 항에 있어서, 각각의 시간적 구성 데이터 세트는 대응하는 공간적 구성 데이터 세트의 식별자를 포함하는, 미디어 데이터 패키지.
  25. 프로그램가능한 장치용 컴퓨터 프로그램 제품으로서,
    상기 프로그램가능한 장치에 로딩되어 상기 프로그램가능한 장치에 의해 실행될 때 제1항 내지 제13항 중 어느 한 항의 방법을 구현하는 명령어들의 시퀀스를 포함하는, 컴퓨터 프로그램 제품.
KR1020177002180A 2014-06-30 2015-06-25 미디어 데이터의 송신 및 수신을 위한 방법 및 장치 KR102395590B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14306052.3A EP2963892A1 (en) 2014-06-30 2014-06-30 Method and apparatus for transmission and reception of media data
EP14306052.3 2014-06-30
PCT/EP2015/064358 WO2016001051A1 (en) 2014-06-30 2015-06-25 Method and apparatus for transmission and reception of media data

Publications (2)

Publication Number Publication Date
KR20170028372A true KR20170028372A (ko) 2017-03-13
KR102395590B1 KR102395590B1 (ko) 2022-05-09

Family

ID=51225456

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177002180A KR102395590B1 (ko) 2014-06-30 2015-06-25 미디어 데이터의 송신 및 수신을 위한 방법 및 장치

Country Status (11)

Country Link
US (1) US10057661B2 (ko)
EP (2) EP2963892A1 (ko)
JP (1) JP6646661B2 (ko)
KR (1) KR102395590B1 (ko)
CN (1) CN106605408B (ko)
AU (1) AU2015282731B2 (ko)
BR (1) BR112016030877B1 (ko)
CA (1) CA2953751C (ko)
MX (1) MX366928B (ko)
TW (1) TWI678921B (ko)
WO (1) WO2016001051A1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2963892A1 (en) * 2014-06-30 2016-01-06 Thomson Licensing Method and apparatus for transmission and reception of media data
US20160292295A1 (en) * 2015-03-30 2016-10-06 International Business Machines Corporation Change tracking for structured languages
US10231001B2 (en) 2016-05-24 2019-03-12 Divx, Llc Systems and methods for providing audio content during trick-play playback
US20170344523A1 (en) * 2016-05-25 2017-11-30 Samsung Electronics Co., Ltd Method and apparatus for presentation customization and interactivity
US20230111106A1 (en) * 2020-07-09 2023-04-13 Google Llc Systems and Methods for Multiplexing and De-Multiplexing Data Events of a Publishing Platform

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130086213A1 (en) * 2011-09-29 2013-04-04 Samsung Electronics Co. Ltd. Method and apparatus for transmitting and receiving content

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2924232T3 (es) * 2011-10-13 2022-10-05 Samsung Electronics Co Ltd Procedimiento y aparato para transmitir y recibir un servicio multimedia
KR102069538B1 (ko) * 2012-07-12 2020-03-23 삼성전자주식회사 멀티미디어 요소의 배치를 위한 마크업을 구성하는 방법
KR101952724B1 (ko) * 2012-07-31 2019-02-28 삼성전자주식회사 방송 시스템에서 엔-스크린 서비스 제공 장치 및 방법
KR102072989B1 (ko) * 2013-01-14 2020-03-02 삼성전자주식회사 멀티스크린 지원을 위한 마크-업 구성장치 및 방법
US20140298157A1 (en) * 2013-03-26 2014-10-02 Samsung Electronics Co., Ltd Apparatus and method for presenting html page
JPWO2014196335A1 (ja) * 2013-06-07 2017-02-23 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
EP2866436A1 (en) * 2013-10-23 2015-04-29 Thomson Licensing Method and apparatus for transmission and reception of media data
JP5725242B1 (ja) * 2014-06-04 2015-05-27 ソニー株式会社 送信装置及び送信方法、並びに受信装置並びに受信方法
EP2963892A1 (en) * 2014-06-30 2016-01-06 Thomson Licensing Method and apparatus for transmission and reception of media data
KR101988454B1 (ko) * 2015-02-13 2019-06-12 상하이 지아오통 유니버시티 멀티미디어 컨텐츠 개성화 프레젠테이션의 실현 방법 및 응용
JP6641731B2 (ja) * 2015-06-05 2020-02-05 ソニー株式会社 送信装置及び送信方法、並びに受信装置及び受信方法
US20170344523A1 (en) * 2016-05-25 2017-11-30 Samsung Electronics Co., Ltd Method and apparatus for presentation customization and interactivity

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130086213A1 (en) * 2011-09-29 2013-04-04 Samsung Electronics Co. Ltd. Method and apparatus for transmitting and receiving content

Also Published As

Publication number Publication date
TWI678921B (zh) 2019-12-01
MX2016017301A (es) 2017-11-30
KR102395590B1 (ko) 2022-05-09
CN106605408B (zh) 2020-05-15
CA2953751C (en) 2022-11-29
CA2953751A1 (en) 2016-01-07
TW201611590A (zh) 2016-03-16
EP2963892A1 (en) 2016-01-06
MX366928B (es) 2019-07-31
EP3162033B1 (en) 2023-03-22
WO2016001051A1 (en) 2016-01-07
BR112016030877A2 (ko) 2016-01-07
EP3162033A1 (en) 2017-05-03
JP6646661B2 (ja) 2020-02-14
BR112016030877B1 (pt) 2023-11-07
AU2015282731B2 (en) 2019-12-19
US10057661B2 (en) 2018-08-21
JP2017526313A (ja) 2017-09-07
CN106605408A (zh) 2017-04-26
US20170155975A1 (en) 2017-06-01
AU2015282731A1 (en) 2017-02-16

Similar Documents

Publication Publication Date Title
CN107852516B (zh) 一种用于发送广播信号的方法和设备
KR102117445B1 (ko) 패킷 헤더 압축을 위한 방법 및 장치
US20180115796A1 (en) Broadcast signal transmitting device, broadcast signal receiving device, broadcast signal transmitting method, and broadcast signal receiving method
US10573274B2 (en) Method and apparatus for transmission and reception of media data
US10609103B2 (en) Apparatus for transmitting broadcast signals, apparatus for receiving broadcast signals, method for transmitting broadcast signals and method for receiving broadcast signals
KR102395590B1 (ko) 미디어 데이터의 송신 및 수신을 위한 방법 및 장치
CN105900359B (zh) 广播信号发送设备、广播信号接收设备、广播信号发送方法和广播信号接收方法
JP6728246B2 (ja) マルチメディアシステムにおける信号送受信方法及び装置
WO2017065021A1 (ja) 受信装置、送信装置、及び、データ処理方法
KR101792519B1 (ko) 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US10412132B2 (en) Broadcasting signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
US11310094B2 (en) Apparatus and method for transmitting or receiving broadcast signal
KR20160074671A (ko) 방송 전송 장치, 방송 전송 장치의 동작 방법. 방송 수신 장치 및 방송 수신 장치의 동작 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant