WO2012173402A2 - 방송 시스템에서 컨텐트를 구성하는 방법 및 장치 - Google Patents

방송 시스템에서 컨텐트를 구성하는 방법 및 장치 Download PDF

Info

Publication number
WO2012173402A2
WO2012173402A2 PCT/KR2012/004691 KR2012004691W WO2012173402A2 WO 2012173402 A2 WO2012173402 A2 WO 2012173402A2 KR 2012004691 W KR2012004691 W KR 2012004691W WO 2012173402 A2 WO2012173402 A2 WO 2012173402A2
Authority
WO
WIPO (PCT)
Prior art keywords
assets
relationship
package
layer
configuration information
Prior art date
Application number
PCT/KR2012/004691
Other languages
English (en)
French (fr)
Other versions
WO2012173402A3 (ko
Inventor
유성열
박경모
황승오
송재연
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to EP12801417.2A priority Critical patent/EP2723085A4/en
Publication of WO2012173402A2 publication Critical patent/WO2012173402A2/ko
Publication of WO2012173402A3 publication Critical patent/WO2012173402A3/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format

Definitions

  • the present invention relates to a method and apparatus for organizing content in a broadcast system, and more particularly, to a method and apparatus for constructing a package of content in a broadcast system supporting a multimedia service based on an Internet protocol.
  • MPEG-2 TS Moving Picture Experts Group-2 Transport Stream
  • MPEG-2 TS is used as a representative transmission technology for transmitting multiplexed bitstreams in which a plurality of broadcast programs (coded multiple video bitstreams) are multiplexed in a faulty transmission environment.
  • MPEG-2 TS is suitable for use in digital TV broadcasting in a multimedia age.
  • FIG. 1 shows a hierarchical structure for supporting a conventional MPEG-2 TS.
  • a layer for supporting MPEG-2 TS includes a media coding layer 110, a sync layer 120, a transport layer 130, and a network layer.
  • (NETWORK LAYER) 140 a data link layer (DATA LINK LAYER) 150 and a physical layer (PHYSICAL LAYER) (160).
  • the MEDIA CODING LAYER 110 and the SYNC LAYER 120 are configured in a format that is easy to use as a basic unit of recording or transmission.
  • the transport layer (DELIVERY LAYER) 130, the network layer (NETWORK LAYER) 140, the data link layer (DATA LINK LAYER) 150 and the physical layer (PHYSICAL LAYER) 160 is the synchronization layer ( A data block of the format constituted by SYNC LAYER) 120 is recorded on a separate recording medium or constitutes a multimedia frame for transmission.
  • the configured multimedia frame is transmitted to a subscriber station through a predetermined network.
  • the SYNC LAYER 120 is constituted by a FRAGMENT BLOCK 122 and an ACCESS UNIT 124, and the DELIVERY LAYER 130 is MPEG-. 2 is configured by TS / MP4 132, RTP / HTTP 134, and UDP / TCP 136.
  • the MPEG-2 TS has some limitations in supporting multimedia services. That is, the MPEG-2 TS generates unnecessary overhead when transmitting using unidirectional communication, transmission inefficiency due to a fixed frame size, a transmission protocol specialized for audio / video, and an Internet protocol (IP). Etc. may be the limit point.
  • IP Internet protocol
  • MPEG has newly proposed the MMT (MPEG MEDIA Transport) standard as one of multimedia transmission technologies to support multimedia services based on MPEG technology.
  • MMT MPEG MEDIA Transport
  • the MMT standard has been proposed by MPEG to overcome the limitations of MPEG-2TS.
  • the MMT standard may be applied to efficiently transmit complex content through heterogeneous networks.
  • the composite content refers to a set of content having multimedia elements by video, audio, and application.
  • the heterogeneous network refers to a network in which a broadcast network and a communication network are mixed.
  • the MMT standard aims to define a transport technology that is more friendly to IP, which is a basic technology in a transport network for multimedia services.
  • the MMT standard is to provide an efficient MPEG transmission technology in a multimedia service environment that is typically changed based on IP, and standardization has been progressed with continuous research.
  • FIG. 2 illustrates a hierarchical structure for transmitting a multimedia frame according to a multi-service / content in a MMT system through a heterogeneous network.
  • the MMT system for configuring a multimedia frame and transmitting the multimedia frame includes a media coding layer 210, an encapsulation layer ENLayer E, and a transmission layer 220.
  • the layers include three description areas Layer E 220, Layer D 230, 290, and Layer C 270, 280, which are in charge of generating composite content.
  • the Layer D (230, 290) is responsible for the efficient transmission of the generated content over heterogeneous networks
  • the Layer C (270, 280) is in charge of the overall control for consumption management and delivery management of the composite content.
  • the layer E 220 includes an MMT E.3 222, an MMT E.2 224, and an MMT E.1 226.
  • the MMT E.3 222 generates a fragment which is the most basic unit for the MMT service using the coded multimedia data provided from the media coding layer 210 as an input.
  • the MMT E.2 224 generates an asset for an MMT service using the fragment generated by the MMT E.3 222.
  • the MMT E.1 226 combines the assets provided by the MMT E.2 224 to generate a package for generating, storing and transmitting a package.
  • the layer D includes MMT D.1 232, MMT D.2 234, and MMT D.3 290.
  • the MMT D.1 232 is in charge of an application protocol (AP) that plays a role similar to that of RTP or HTTP
  • the MMT D.2 234 is a network layer that plays a role similar to a UDP or TCP.
  • the MMT D.3 290 performs a protocol for optimizing each layer constituting the Layer E 220 and each layer constituting the Layer D 230.
  • the layer C is composed of MMT C.1 270 and MMT C.2 280.
  • the MMT C.1 270 provides information related to the creation and consumption of the composite content
  • the MMT C.2 280 provides information related to the delivery of the composite content.
  • FIG. 3 illustrates a general data transmission layer diagram in a broadcast system.
  • content components such as video and audio are transmitted by a codec encoder such as AVC (Advanced Video Codec) or SVC (Scalable Video Codec) in the E3 layer, which is the highest layer. layer) is encoded into a unit, a fragment, and the like, and is stored in an asset unit and transmitted to the lower layer E2 layer.
  • Video streams, audio streams, and the like are representative examples of assets.
  • the present invention uses the prior art for the E3 layer.
  • the E2 layer structures a plurality of assets and stores them in ES (Elementary Stream) units and delivers them to the lower layer E1 layer.
  • the E1 layer indicates the relationship and configuration between content elements such as video and audio, and encapsulates it with the ES and delivers the package to the D1 layer in a package form.
  • the D1 layer divides the package into a form suitable for transmission and delivers the package to the lower layer, and the lower layer delivers the packet to the lower layer.
  • the presentation consisting of a visual-audio screen is a service provided by the package.
  • the package combines the assets, provides composition information about the location of the assets in space and time, and provides transport characteristics to convey what the package provides.
  • An object of the present invention is to provide a method and apparatus for effectively configuring a package of content in a broadcast system.
  • a method for configuring content in a broadcast system supporting a multimedia service based on an Internet protocol comprising: combining a plurality of assets transmitted from a higher layer and composed of a plurality of contents into a package; And adding configuration information for multiplexing the plurality of assets to the package and delivering the configuration information to a lower layer, wherein the configuration information includes a list of assets included in the package and a relationship between the plurality of assets.
  • Configuration information including information on the transmission property and the transmission characteristics associated with the delivery path of the plurality of assets.
  • the apparatus for configuring content in a broadcast system supporting a multimedia service based on the Internet protocol combining a plurality of assets transmitted from a higher layer and composed of a plurality of content into a package, And an encapsulation layer configured to add configuration information for multiplexing the plurality of assets to the package and deliver the configuration information to a lower layer, wherein the configuration information includes a list of assets included in the package and a relationship between the plurality of assets.
  • Configuration information including information on the transmission property and the transmission characteristics associated with the delivery path of the plurality of assets.
  • the receiver when configuring assets into a package, when the receiver receives the package by inserting information about the assets included in the package into the package, the receiver parses the information, what the package is, and how it is decoded. You will know how to present.
  • FIG. 1 is a diagram illustrating a hierarchical structure for supporting a conventional MPEG-2 TS.
  • FIG. 2 is a diagram conceptually illustrating an MMT service by a broadcasting system based on the MMT standard
  • 3 is a general data transmission layer diagram of a broadcasting system
  • FIG. 4 is a diagram illustrating a configuration of setting information included in a package.
  • FIG. 5 is a diagram illustrating a broadcast service scenario according to an embodiment of the present invention.
  • the present invention proposes a method of constructing a package by combining a plurality of assets.
  • a plurality of assets are combined into a plurality of packages, and the packages provide multimedia services with the assets.
  • a package provides a method for consuming assets contained in other packages as well as assets contained therein. Multiple packages from various service providers may collaborate to provide mashed up services.
  • the content provider may configure a package by combining related assets and configuration information.
  • the receiver loads the package and parses the configuration information so that the receiver knows what the package is, how to decode it, and where to deliver it.
  • the E1 layer provides information for multiplexing assets within a package.
  • the asset is not physically multiplexed but the information provides virtual multiplexing.
  • the layer D looks up the information and multiplexes portions of different assets into packets and sends them.
  • the E1 layer also provides fragmentation of the asset's fragments.
  • the pieces of the plurality of assets may be arranged in order of consumption by considering the gradual download of the package.
  • the service provider broadcasts and transmits a large amount of packages at the same time.
  • the E1 layer provides an ID as package identification information.
  • the package may be identified through a combination of service provider ID, content ID, genre, and episode number of the content.
  • the package identification information may include metadata that can be read by the consumer, such as a service title, actor name, and synopsis.
  • the E1 layer provides a way to position assets in space-time with composition information included in the package.
  • the presentation position of an asset may be changed by an event such as selection of chapter thumbnails, and the selected asset may be displayed in various ways (eg, full screen) by triggering the event.
  • Assets included in a package may have a plurality of different relationships with each other. Such a relationship may be classified into a combinable relationship, a mutually exclusive relationship, a dependency relationship, and an adaptive relationship.
  • Some assets that are in a selection relationship as a binding relationship have different contexts and media types. For example, video, audio, and subtitles are in a selection relationship. Thus, the user can make a plurality of choices and consume them simultaneously.
  • Some assets in a switch relationship as mutually exclusive relationships have the same media type with different contexts. For example, English and French audio assets are switched. The user can select one of these but not both at the same time.
  • Some assets that are in a selective relationship as a dependent relationship may have additional relationships such as pair and primary selection.
  • a baseball game may have multiple views, such as a batter view and a pitcher view. The batter view has batter audio and the pitcher view has pitcher audio. If these four assets belong to one baseball game package, the pairing of batter view with batter audio, pitcher view, and pitcher audio must be clearly described to provide a seamless view change.
  • video, audio, and subtitles video and audio assets should be more important than subtitle assets, because subtitles without video are not meaningful.
  • Some assets that are adaptive have the same context and the same media type. For example, high quality video and medium quality audio are adaptive.
  • the receiver selects one of the assets in the adaptive relationship to adaptively indicate the same context according to the network bandwidth or device capabilities.
  • Groups of assets are in multiple relationships. One relationship group may be more important than another. The description for the group is machine or human readable.
  • the E1 layer provides a transport characteristic (TC).
  • the transport characteristics provide the criteria considered for each asset.
  • One or more assets with the same transmission characteristics may be delivered through the same delivery path. For example, video and audio that have a "Lossy" transfer characteristic that allows some loss are delivered through Real-time Transfer Protocol (RTP), and a widget and application that has a "Lossless” transfer characteristic that does not allow loss. Is delivered via Hyper Text Transfer Protocol (HTTP).
  • HTTP Hyper Text Transfer Protocol
  • signaling mechanisms for error resilience such as retransmission, automatic retransmission request (ARQ), and application layer forward error correction (AL-FEC) are provided.
  • ARQ automatic retransmission request
  • A-FEC application layer forward error correction
  • service characteristics for consumption such as rights management or content protection is provided.
  • free space may be reserved in the package for additional information to store the scheme dependent data and licenses.
  • configuration information of a package is generated and combined with the asset into a package.
  • Configuration information consists of a list of assets, configuration information, and transmission characteristics.
  • the description information describes the package and the asset.
  • the configuration information helps the consumption of the asset.
  • Transmission characteristic information provides a hint for delivery of an asset.
  • FIG. 4 is a diagram illustrating a configuration of setting information according to an embodiment of the present invention.
  • the configuration information includes the order and address of data information, package identification information, asset list information, configuration information, and transmission characteristics.
  • the data in the package can be arranged in order such as consumption order or priority.
  • the package provides the order and address of the data information, which is information about the physical location of the data within the package.
  • the package identification information includes machine readable information such as service provider ID, content ID, genre, and episode number of the package.
  • the package identification information distinguishes one package from another.
  • the package identification information also includes human readable information such as the title of the service, actor name, synopsis, and the like. This information helps the user to choose to consume the package.
  • the asset list information provides a list of assets included in one package.
  • the data in the package payload is an asset, which must be listed in the asset list.
  • the configuration information specifies how the asset is consumed by signaling the relationship between the assets.
  • the three main types of relationships that describe the organization of an asset are the temporal relationship, the spatial relationship, and the relationship between the assets.
  • the temporal relationship is the relationship between the asset timeline and the package timeline. All or part of the running time of an asset may be located at some time point or duration of the package timeline.
  • the spatial relationship is the relationship between the asset and the presentation area of the package.
  • the presentation position of an asset can be changed by an event, such as chapter thumbnail selection, etc.
  • the selected asset can be presented in another way, such as full screen, by triggering the event.
  • a coupling relationship is a relationship for selecting one or more from a plurality of selectables.
  • Assets that are associated with each other can have different contexts and different media types.
  • a mutually exclusive relationship is one that allows only one to select from a plurality of selectables.
  • Assets that are mutually exclusive have generally the same media type with different contexts.
  • a dependency relationship is one in which selecting an asset requires additional assets. Assets may have dependencies with other assets that are not mutually exclusive.
  • An adaptation relationship is a relationship between a plurality of assets or M units having the same context and the same media type. Switching from one asset to another in an adaptive relationship perceptually persists the same context.
  • the rights management information specifies whether the rights management required by the asset is considered.
  • the specific rights management algorithm and the signaling of the related information is described as asset attributes in the configuration information.
  • Transmission characteristic information provides a hint for delivering an asset.
  • One asset may have one or more sets of transmission characteristic information.
  • Packages do not have delivery paths for assets that are internal resources. Assets in the package have transmission characteristic information to help determine the delivery path for each service provider.
  • a broadcaster or an in-house server may use the same package. Delivery paths for providing the same assets in the same package may be different, such as a broadcast RF channel by a broadcaster and an RTP address by an in-house server.
  • Error robustness information is one of transmission characteristic information.
  • Transmission characteristic information for an asset may be "lossless” and “lossy”. Additional techniques for lossless delivery such as retransmission, ARQ and AL-FEC may be specified in the transmission characteristic information.
  • ARQ ARQ
  • AL-FEC AL-FEC
  • the use of a particular algorithm for lossless delivery is not described by the package and the service provider may choose to signal a particular algorithm via a C layer packet.
  • FIG. 5 illustrates a broadcast service scenario according to an embodiment of the present invention.
  • the service / content provider creates and encodes video, audio, sound effects, and widgets in the E3 layer and makes them assets in the E2 layer.
  • configuration information and transport characteristics for assets are packaged together.
  • the service discovery information for the package may be inserted at the end or the middle of the package, and then the updated service discovery information may be broadcast or pushed to the client device.
  • the service discovery information will have enough information to find the package and convey the path for delivering the assets by manifest, configuration information, and delivery characteristics.
  • the package is divided into pieces and sent through the C and D layers.
  • Information such as manifest, configuration information, and transmission characteristics are transmitted by the C layer, and data such as assets are transmitted by the D layer.
  • the client receiving the information and data restores the package at the E1 layer.
  • assets are delivered through transmission paths that follow transmission characteristics, assets from different paths arrive at different times with different delays.
  • video and audio assets are delivered over the broadcast network, and widgets are delivered over HTTP because they require a lossless connection. If congestion occurs, the widget will not be available until the buffers for video and audio assets are full. It is not easy to choose whether to stop playing the video / audio or ignore the download / play of the widget.
  • a BMP Buffer Management Policy
  • the package consists of assets, manifest, configuration information, transport characteristics, DRM (Digital Rights Management) technology signaling and DRM dependency information.
  • a manifest is a list of assets that contains the structural description of the asset and its physical allocation within the package.
  • the MPEG-2 TS / Simple Aggregation format base will be described.
  • Package elements are classified by type and encapsulated in the payload. Manifests exist at multiple times, so assets can be added at any time, so package elements can have dynamic configurations. For example, all broadcast packages may have letter box type news about the presidential ballot. But finding the required assets without looking at the package from start to finish is difficult.
  • ZIP has a handy format for describing manifest placeholders and file system structures, so once an asset is filed, it's easy to put the elements into a ZIP file.
  • the configuration information, transfer properties, and BMP can have a name assigned to easily handle registered files.
  • content generated in real time is not suitable for having ZIPs.
  • Multiple ZIPs for live broadcasts require filenames and versions to handle assets and packages that can cause overhead in the transport layer.
  • the requirements of the MMT package are as follows.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 방송 시스템의 컨텐트 구성 방법 및 장치에 관한 것이다. 본 발명에 따르면 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하며, 상기 설정 정보는 상기 패키지내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.

Description

방송 시스템에서 컨텐트를 구성하는 방법 및 장치
본 발명은 방송 시스템에서의 컨텐트 구성 방법 및 장치에 관한 것으로, 특히 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트의 패키지를 구성하는 방법 및 장치에 관한 것이다.
종래 방송 네트워크에서는 멀티미디어 컨텐트의 전송을 위해서 MPEG-2 TS(Moving Picture Experts Group-2 Transport Stream)를 사용하는 것이 일반적이었다. MPEG-2 TS는 오류가 있는 전송 환경에서 복수의 방송 프로그램(부호화된 다수의 비디오 비트 열)이 다중화된 비트 열을 전송하기 위한 대표적인 전송 기술로 사용되고 있다. 일 예로 MPEG-2 TS는 멀티미디어 시대의디지털 TV 방송 등에서의 사용이적합하다.
도 1은 종래 MPEG-2 TS를 지원하기 위한 계층 구조를 도시한 것이다.
도 1을 참조하면, MPEG-2 TS를 지원하기 위한 계층은 미디어코딩 계층 (MEDIA CODING LAYER)(110), 동기 계층 (SYNC LAYER)(120), 전송 계층 (DELIVERY LAYER)(130), 네트워크 계층 (NETWORK LAYER)(140), 데이터 링크 계층 (DATA LINK LAYER)(150) 및 물리 계층 (PHYSICAL LAYER)(160)으로 구성된다.
상기 미디어 코딩 계층 (MEDIA CODING LAYER)(110)와 상기 동기 계층 (SYNC LAYER)(120)은 미디어 데이터를 기록 또는 송신의 기본 단위로 사용하기에 용이한 포맷으로 구성한다. 그리고 상기 전송 계층 (DELIVERY LAYER)(130), 상기 네트워크 계층 (NETWORK LAYER)(140), 상기 데이터 링크 계층 (DATA LINK LAYER)(150) 및 물리 계층 (PHYSICAL LAYER)(160)은 상기 동기 계층 (SYNC LAYER)(120)에 의해 구성된 포맷의 데이터 블록을 별도의 기록 매체에 기록하거나 전송을 위한 멀티미디어 프레임을 구성한다. 상기 구성된 멀티미디어 프레임은 소정의 네트워크를 통해 가입자 단말 등으로 전송한다.
이를 위해 상기 동기 계층(SYNC LAYER)(120)은 분할 블록 (FRAGMENT BLOCK)(122)과 접근 유닛 (ACCESS UNIT)(124)에 의해 구성되며, 상기 전송 계층 (DELIVERY LAYER)(130)은 MPEG-2 TS/MP4 (132), RTP/HTTP (134) 및 UDP/TCP (136)에 의해 구성된다.
하지만 상기 MPEG-2 TS는 멀티미디어 서비스를 지원함에 있어 몇 가지의 한계점을 가진다. 즉 상기MPEG-2 TS는 단 방향 통신, 고정된 프레임 크기로 인한 전송의비효율성, 오디오/비디오에 특화되어 있는 전송 프로토콜 및 인터넷 프로토콜 (IP: Internet Protocol)을 사용하여 전송할 시에 불필요한 오버헤드 발생 등이 한계점이라 할 수 있다.
따라서 MPEG에서는 MPEG 기술을 기반으로 멀티미디어 서비스를 지원하기 위한 멀티미디어 전송 기술 중 하나로 MMT (MPEG MEDIA Transport) 표준을 새로이 제안하였다. 특히 상기 MMT 표준은MPEG-2TS의 한계점을 극복하기 위해 MPEG에 의해 제안되었다.
예컨대 상기 MMT 표준은 이종 네트워크를 통해 복합 컨텐트를 효율적으로 전송하기 위해 적용될 수 있다. 여기서 상기 복합 컨텐트는 비디오(Video)/오디오(Audio)/어플리케이션(Application) 등에 의한 멀티미디어 요소를 가지는 컨텐트의 집합을 의미한다. 그리고 상기 이종 네트워크는 방송 네트워크와 통신 네트워크 등이 혼재하는 네트워크를 의미한다.
뿐만 아니라 상기 MMT 표준은 멀티미디어 서비스를 위한 전송 네트워크에서의 기본 기술이 되고 있는 IP에 보다 친화적인 전송 기술을 정의하는 것을 목적으로 하고 있다.
따라서 상기 MMT 표준은 대표적으로 IP를 기반으로 변화하는 멀티미디어 서비스 환경에서 효율적인 MPEG 전송 기술을 제공하기 위한 것으로서, 지속적인 연구와 함께 표준화가 진행되고 있다.
도 2는 MMT 시스템에서 멀티-서비스/컨텐트에 따른 멀티미디어 프레임을 이종 네트워크를 통해 전송하기 위한 계층 구조를 도시한 것이다.
도 2를 참조하면, 멀티미디어 프레임을 구성하고, 이를 전송하기 위한 MMT 시스템은 미디어코딩 계층 (MEDIA CODING LAYER)(210), 캡슐화 계층(ENCAPSULATION LAYER, 이하 'Layer E'라 칭함)(220), 전송 계층(DELIVERY LAYER, 이하 'Layer D'라 칭함)(230, 290), 네트워크 계층 (NETWORK LAYER)(240), 데이터 링크 계층 (DATA LINK LAYER)(250), 물리 계층 (PHYSICAL LAYER)(260) 및 제어 계층 (CONTROL LAYER, 이하 'Layer C'라 칭함)(270, 280)을 포함한다.
상기 계층들은 세 개의 기술 영역 (area)인 Layer E(220), Layer D(230, 290), Layer C(270, 280)를 포함하며, 상기 Layer E(220)는 복합 컨텐트의 생성을 담당하고, 상기Layer D(230, 290)는 이종 네트워크를 통한 상기 생성 컨텐트의 효율적인 전송을 담당하며, 상기Layer C(270, 280)는 상기 복합 컨텐트의 소비 관리 및 전송 관리를 위한 전반적인 제어를담당한다.
상기 Layer E(220)는 MMT E.3 (222), MMT E.2 (224) 및 MMT E.1 (226)으로 구성된다. 상기 MMT E.3 (222)는 미디어코딩 계층(210)으로부터 제공되는 코딩된 멀티미디어 데이터를 입력으로 하여 MMT 서비스를 위한 가장 기본 단위인 프래그먼트(fragment)을 생성한다. 상기 MMT E.2 (224)는 상기MMT E.3 (222)에 의해 생성된 프래그먼트를 사용하여 MMT 서비스를 위한 애셋(Asset)을 생성한다. 상기 MMT E.1 (226)은 상기MMT E.2 (224)에 의해 제공되는 애셋들을 결합하여 패키지를 생성 및 저장과 전송을 위한 포맷을 생성한다.
상기 Layer D는 MMT D.1(232), MMT D.2 (234) 및 MMT D.3 (290)으로 구성된다. 상기 MMT D.1 (232)은 RTP 혹은 HTTP와 유사한 역할을 수행하는 어플리케이션 프로토콜 (AP: Application Protocol)을 담당하고, 상기 MMT D.2 (234)는 UDP 혹은 TCP와 유사한 역할을 수행하는 네트워크 계층 프로토콜을 담당하며, 상기MMT D.3 (290)는 상기 Layer E(220)을 구성하는 각 계층과 상기 Layer D(230)을 구성하는 각 계층 상호 간의 최적화를 위한 동작을 수행한다.
상기 Layer C는 MMT C.1(270)과 MMT C.2(280)로 구성된다. 상기MMT C.1(270)은 복합 컨텐트의 생성 및 소비와 관련된 정보를 제공하고, 상기 MMT C.2(280)는 복합 컨텐트의 전송에 관련된 정보를 제공한다.
도 3은 방송 시스템에서의 일반적인 데이터 전송 계층도를 도시한 것이다.
도 3을 참조하면, 송신측의 Layer E는 최상위 계층인 E3 계층에서 비디오, 오디오 등의 컨텐트 구성요소들이 AVC(Advenced Video Codec), SVC(Scalable Video Codec) 등의 코덱 인코더에 의해NAL(network abstraction layer) 유닛, 프래그먼트(Fragment) 등으로 부호화되고, 이를 애셋(Asset) 단위로 저장하여 하위계층인 E2 계층으로 전달한다. 비디오 스트림, 오디오 스트림 등이 애셋의 대표적인 예이다. 종래 기술에서 E3 계층에서 E2 계층으로 전달되는 애셋은 코덱별로 그 정의와 구성이 정해져 있으므로 본 발명에서는 E3 계층에 대해 종래 기술을 사용한다.
E2 계층은 복수 개의 애셋을 구조화하고 이를ES(Elementary Stream)단위로 저장하여 차하위 계층인E1 계층으로 전달한다. E1 계층은 비디오, 오디오 등의 컨텐트 구성요소 간의 관계와 구성을 지시하고 이를 ES와 함께 캡슐화(encapsulate)하여 패키지 형태로 D1 계층으로 전달한다.
D1 계층은 전송에 알맞은 형태로 패키지를 분할하여 하위계층으로 전달하고, 다시 하위계층은 차하위 계층으로 패킷을 전달한다.
한편, 시청각(visual-audio) 화면으로 구성되는 프리젠테이션은 패키지에 의해 제공되는 서비스이다. 패키지는 애셋들을 결합하고, 시공간에서 애셋들의 위치에 대한 구성 정보(composition information)를 제공하고, 패키지가 제공하는 것을 전달하기 위한 전송 특성(Transport Characteristic)을 제공한다.
본 발명이 해결하고자 하는 과제는 방송 시스템에서 컨텐트의 패키지를 효과적으로 구성하는 방법 및 장치를 제공하는 것이다.
본 발명의 실시예에 따르면, 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 방법에 있어서, 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하는 과정과, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를상기 패키지에 추가하여 하위계층으로 전달하는 과정을 포함하며, 상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.
또한 본 발명의 실시예에 따르면, 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 장치에 있어서, 상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 캡슐화 계층을 포함하며, 상기 설정 정보는 상기 패키지 내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함한다.
본 발명에 따르면 애셋들을 패키지로 구성할 때, 상기 패키지에 포함되는 애셋들에 대한 정보를 상기 패키지에 삽입함으로써 수신기에서 상기 패키지를 수신했을 때 상기 정보를 파싱해서 해당 패키지가 무엇이며 어떻게 디코딩되었으며, 어떻게 프리젠테이션할 것인지를 알 수 있다.
도 1은 종래MPEG-2 TS를 지원하기 위한 계층 구조를 도시한 도면
도 2는 MMT 표준을 기반으로 하는 방송 시스템에 의한 MMT 서비스를 개념적으로 도시한 도면
도 3은 방송 시스템의 일반적인 데이터 전송 계층도
도 4는 패키지에 포함되는 설정정보의 구성을 도시한 도면
도 5는 본 발명의 실시예에 따른 방송 서비스 시나리오를 도시한 도면
이하 첨부된 도면을 참조하여 본 발명의 실시예에 대한 동작 원리를 상세히설명한다. 하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
본 발명에서는 복수 개의 애셋을 결합하여 패키지를 구성하는 방법을 제안한다.
복수개의 애셋은 복수개의 패키지로 결합되고, 패키지는 애셋을 가지고 멀티미디어 서비스를 제공한다. 패키지는 내부에 포함된 애셋 뿐만 아니라 다른 패키지에 포함된 애셋을 소비하기 위한 방법을 제공한다. 다양한서비스 제공자로부터의 복수의 패키지는 매시업(mashed up) 서비스를 제공하기 위해 협력할 수 있다.
컨텐트 제공자는 관련된 애셋들과 설정 정보(Configuration information)를 결합하여 패키지를 구성할 수 있다.
수신기는 패키지를 로딩하고 설정 정보를 파싱해서 해당 패키지가 무엇이며 어떻게 디코딩되며, 어디로제공할 것인지를 알 수 있다.
E1 계층은 패키지 내에 애셋을 멀티플렉싱하기 위한 정보를 제공한다. 애셋은 물리적으로 멀티플렉싱 되지는 않지만 상기 정보가 가상 멀티플렉싱을 제공한다. D 계층은 상기 정보를 찾아보고(look up) 서로 다른 애셋들의 부분들을 패킷들로 멀티플렉싱하여 이를 전송한다.
또한 E1 계층은 애셋의 프래그멘테이션을 조각들로 제공한다. 복수의 애셋의 조각들은 패키지의 점진적인 다운로드를 고려함으로써 소비 순서에 따라 배열될 수 있다.
서비스 제공자는 동시에 많은 양의 패키지를 방송하고 전송한다. E1 계층은패키지 식별 정보로서 아이디(ID)를 제공한다. 예를 들어 서비스제공자 ID, 컨텐트 ID, 장르, 컨텐트의 에피소드 번호 등의 조합을 통해 패키지를 식별할 수 있다. 또한 패키지 식별 정보에는 서비스 제목, 배우 이름, 시놉시스와 같이 소비자가 판독할 수 있는 매타데이터 정보도 포함될 수 있다.
E1 계층은 패키지 내에 포함되는 구성 정보(Composition Information)를 가지고 시공간에서 애셋을 위치시키는 방법을 제공한다. 애셋의 프리젠테이션 위치는 챕터 썸네일의 선택 등과 같은 이벤트에 의해 바뀔 수 있고, 선택된 애셋은 이벤트를 트리거링 함으로써 다양한 방법(예를 들면 풀 스크린)으로 표시될 수 있다.
패키지 내에 포함되는 애셋들은 상호간에 복수의 서로 다른 관계를 가질 수 있다. 이러한 관계는 크게 결합 관계(combinable relationship), 상호 배타적 관계(mutually exclusive relationship), 종속 관계(dependency relationship), 적응 관계(adaptive relationship)로 구분될 수 있다.
결합 관계로서 선택 관계에 있는 몇몇 애셋들은 서로 다른 컨텍스트와 미디어 타입을 가진다. 예를 들어, 비디오, 오디오, 자막은 선택 관계에 있다. 따라서 사용자는 복수의 선택을 할 수 있고, 이것들을 동시에 소비할 수 있다.
상호 배타적 관계로서 스위치 관계에 있는 몇몇 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가진다. 예를 들어 영어 오디오와 불어 오디오 에셋들은 스위치 관계에 있다. 사용자는 이들 중 하나를 선택할수 있으며 동시에 두 가지를 선택할 수는 없다.
종속 관계로서 선택 관계에 있는 몇몇 애셋들은 페어(pair)와 프라이머리(primary) 선택과 같은 부가적인 관계를 가질 수 있다. 예를 들어, 야구 경기는 타자 뷰와 투수 뷰와 같은 복수의 뷰를 가질 수 있다. 타자 뷰는 타자 오디오를 가지며, 투수 뷰는 투수 오디오를 가진다. 만약 이들 4개의 애셋이 하나의 야구 경기 패키지에 속한다면, 끊김 없는 뷰 변경을 제공하기 위해 타자 뷰와 타자 오디오, 투수 뷰와 투수 오디오의 페어 관계가 분명하게 기술되어야 한다. 다른 예로서 비디오, 오디오, 자막의3개의 에셋을 가지는 패키지의 경우, 비디오가 없는 자막은의미가 없으므로 비디오와 오디오 애셋은 자막 애셋보다 중요도가 높아야 한다.
적응 관계에 있는 몇몇 애셋은 같은 컨텍스트와 같은 미디어 타입을 가진다. 예를 들어 고품질의 비디오와 중간 품질의 오디오는 적응 관계에 있다. 수신기는 동일한 컨텍스트를 네트워크 밴드폭이나 디바이스 능력에 따라 적응적으로 표시하기 위해 적응 관계에 있는 애셋들 중 하나를 선택한다.
애셋들의 그룹은 복수의 관계에 있다. 하나의 관계 그룹은 다른 관계 그룹보다 더 중요할 수 있다. 그룹에 대한 디스크립션은 기계 또는 사람이 판독 가능하다.
한편, E1 계층에서는 전송 특성(transport characteristic: TC)을 제공한다. 전송 특성은 각 애셋에 대해 고려되는 기준을 제공한다. 동일한 전송 특성을 가지는 하나 또는 그 이상의 애셋은 같은 전달 경로를 통해 전달될 수 있다. 예를 들어 약간의 손실이 허용되는"Lossy"라는 전송 특성을 가지는 비디오와 오디오는 RTP(Real-time Transfer Protocol)를 통해 전달되고, 손실이 허용되지 않는"Lossless"라는 전송 특성을 가지는 위젯과 애플리케이션은 HTTP(Hyper Text Transfer Protocol)를 통해 전달된다.
애셋 또는 전체 패키지가 보호될 경우에는 재전송, 자동 재전송요구(ARQ), AL-FEC(Application Layer-Forward Error Correction)등의 에러 강인성(error resilience)를 위한 시그널링 매커니즘이 제공된다. 또한 애셋 또는 전체 패키지가 보호될 경우에는 권한 관리 또는 컨텐트 보호 등의 소비를 위한 서비스 특성을 위한 시그널링 매커니즘이 제공된다. 또한 기술 종속 데이터(scheme dependent data)와 라이선스를 저장하기 위한 추가적인 정보를 위한 무료 공간이 패키지 내에 미리 확보될 수 있다.
이상에서 설명한 E1 계층의 동작에 따라 패키지의 설정 정보(configuration information)가 생성되고 애셋과 함께 패키지로 결합된다.
패키지는 설정 정보를 활용하기 위한 기능과 동작(operation)을 가진다. 설정 정보는 애셋의 리스트와 구성 정보, 그리고 전송 특성으로 구성된다. 디스크립션 정보는 패키지와 애셋을 기술한다. 구성 정보는 애셋의 소비를 돕는다. 전송 특성 정보는 애셋의 전달을 위한 힌트를 제공한다.
도 4는 본 발명의 실시예에 따른 설정 정보의 구성을 도시한 도면이다.
도 4를 참조하면, 설정 정보는 데이터 정보의 순서와 주소, 패키지 식별 정보, 애셋 리스트 정보, 구성 정보 및 전송 특성을 포함한다.
패키지 내의 데이터는 소비 순서나 우선순위와 같은 순서에 따라 배열될 수 있다. 따라서 패키지는 패키지 내에서의 데이터의 물리적인 위치에 대한 정보인 데이터 정보의 순서와 주소를 제공한다.
패키지 식별 정보는 서비스제공자 ID, 컨텐트 ID, 장르, 패키지의 에피소드 번호와 같이 기계로 판독 가능한 정보를 포함한다. 패키지식별 정보는 하나의 패키지를 다른 패키지와 구별한다. 또한 패키지 식별 정보는 서비스의 제목, 배우 이름, 시놉시스 등과 같이 사람이 판독 가능한 정보도 포함한다. 이러한 정보는 사용자가 패키지를 소비하기 위해 선택하도록 돕는다.
애셋 리스트 정보는 하나의 패키지에 포함되는 애셋들의 리스트를 제공한다. 패키지 페이로드 내에 있는 데이터는 애셋이며, 이것이 애셋 리스트 내에 열거되어야 한다.
구성 정보는 애셋간의 관계를 시그널링 함으로써 어떻게 애셋이 소비되는지를 명시한다. 애셋의 구성을 설명하는 관계의 3가지 주요한 종류는 시간 관계, 공간 관계, 애셋간의 관계이다.
시간 관계는 애셋 시각표(timeline)와 패키지 시각표간의 관계이다. 애셋의러닝타임 전체 또는 일부분은 패키지 시각표의 몇몇 타임 포인트나 구간(duration)에 위치할 수 있다.
공간 관계는 애셋과 패키지의 프리젠테이션 영역간의 관계이다. 애셋의 프리젠테이션 위치는 챕터 섬네일 선택 등과 같은 이벤트에 의해 변경될 수 있으며, 선택된 에셋은 이벤트의 트리거링에 의해 풀 스크린과 같은 다른 방법으로 프리젠테이션 될 수 있다.
복수의 애셋 간에는 복수의관계가 있다. 복수의 애셋으로부터 하나 또는 복수 개의 애셋을 선택하기 위해서는 애셋 간의 관계를 설명하는 추가적인 정보가 요구된다. 세 가지 관계는 결합, 상호 배타적, 종속 관계이다. 관계가 없는 하나의 에셋을 선택하는 것은 사용자의 결정 또는 클라이언트 실행에 의해 단독적으로 이루어진다.
결합 관계는 복수의 선택 가능한 것으로부터 하나 이상을 선택하도록 하는 관계이다. 결합관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어타입을 가질 수 있다.
상호 배타적 관계는 복수의 선택 가능한 것으로부터 오직 하나만을 선택하도록 하는 관계이다. 상호 배타적 관계에 있는 애셋들은 일반적으로 서로 다른 컨텍스트와 동일한 미디어 타입을 가진다.
종속 관계는 하나의 애셋을 선택하는 것이 추가적인 애셋을 요구하는 관계를 말한다. 애셋은 상호 배타적 관계가 아닌 다른 애셋과 종속 관계를 가질 수 있다.
적응 관계는 동일한 컨텍스트와 동일한 미디어 타입을 가지는 복수의 애셋들 또는 M 유닛들간의 관계이다. 적응 관계에 있는 하나의 애셋에서 다른 애셋으로의 스위칭은 동일 컨텍스트를 지각적으로 지속한다.
권한 관리 정보는 애셋이 요구하는 권한 관리가 고려되는지 여부를 명시한다. 특정 권환 관리 알고리즘과 이와 관련된 정보의 시그널링은 구성 정보 내에 애셋 속성으로서 기술된다.
전송 특성 정보는 애셋을 전달하기 위한 힌트를 제공한다. 하나의 애셋은 하나 또는 그 이상의 전송 특성 정보 셋을 가질 수 있다. 패키지는 내부 리소스인 애셋을 위한 전달 경로를 가지지 않는다. 패키지 내에 있는 애셋은 각 서비스제공자를 위한 전달 경로를 결정하도록 돕는 전송 특성 정보를 가진다. 예를 들어 방송사 또는 댁내 서버는 동일한 패키지를 사용할 수 있다. 동일한 패키지 내에서 동일한 애셋을 제공하기 위한 전달 경로는 방송사에 의한 방송 RF 채널, 댁내 서버에 의한 RTP 주소와 같이 서로 다를 수 있다.
에러 강인성 정보는 전송 특성 정보 중 하나이다. 애셋을 위한 전송 특성 정보는 "lossless"와 "lossy"일 수 있다. 재전송, ARQ, AL-FEC와 같은 무손실(lossless) 전달을 위한 추가적인 기술은 전송 특성 정보에 명시될 수 있다. 그러나 무손실 전달을 위한 특정 알고리즘의 사용은 패키지에 의해 기술되지 않고 서비스 제공자가 C 계층 패킷을 통해 특정 알고리즘을 시그널링하도록 선택할 수 있다.
도 5는 본 발명의 실시예에 따른 방송 서비스 시나리오를 도시한 것이다.
도 5를 참조하면, 서비스/컨텐트 제공자는 E3 계층에서 비디오, 오디오, 사운드효과, 위젯을 생성하여 인코딩하고 E2 계층에서 애셋으로 만든다. E1 계층에서는 애셋을 위한 구성 정보와 전송 특성이 함께 패키지로 만들어진다. 패키지를 위한 서비스 디스커버리 정보는 패키지의 끝 부분 또는 중간 부분에 삽입될 수 있고, 이후 업데이트된 서비스디스커버리 정보는 클라이언트 장치로 방송되거나 푸쉬될 수 있다.
서비스 디스커버리 정보는 패키지를 발견하기 위한 충분한 정보를 가질 것이고, 매니페스트(manifest), 구성 정보, 전송 특성에 의해 애셋을 전달하기 위한 경로를 전달한다.
패키지는 조각들로 나눠져서 C 계층과 D 계층을 통해 전송된다. Manifest, 구성정보, 전송 특성과 같은 정보는 C 계층에의해 전송되고, 애셋과 같은 데이터는 D 계층에 의해 전송된다. 상기 정보와 데이터를 수신한 클라이언트는 E1 계층에서 패키지를 복원한다.
애셋은 전송 특성을 따르는 전송 경로를 통해 전달되기 때문에, 서로 다른 경로로부터의 애셋은 서로 다른 딜레이를 가지고 서로 다른 시간에 도착한다. 예를 들어, 비디오와 오디오 애셋은 방송 네트워크를 통해 전달되고, 위젯은 무손실 연결을 요구하기 때문에HTTP를 통해 전달된다. 만약 혼잡이 발생하면, 위젯은 비디오와 오디오 애셋을 위한 버퍼가 다 찰 때까지 이용할 수 없다. 비디오/오디오의 재생을 중지할지 위젯의 다운로드/실행을 무시할지를 선택하는 것은 쉽지 않다. 따라서 클라이언트의 재생장치가 재생을 중지하든지, 딜레이된 애셋 없이 플레이 하든지, 딜레이 된 에셋이 이용 가능할 때 플레이 하든지하도록 하기 위한 BMP(Buffer Management Policy)가 요구된다.
패키지는 애셋, manifest, 구성 정보, 전송 특성, DRM(Digital Rights Management) 기술의 시그널링과 DRM 종속 정보로 구성된다. Manifest는 애셋의 구조적 디스크립션과 패키지 내에서의 물리적 할당을 포함하는 애셋의 리스트이다.
다음으로, 패키지를 구성하는 방법에 대해 설명한다.
먼저, MPEG-2 TS/Simple Aggregation 포맷 기반에 대해 설명한다. 패키지 요소들은 타입으로 분류되고 패이로드에 캡슐화된다. Manifest는 다중 시간에 존재하므로 애셋은 어느 시간에 추가될 수 있기 때문에 패키지요소들은 동적인 설정을 가질 수 있다. 예를 들어, 모든 방송된 패키지들은 대통령투표에 관한 레터 박스 타입의 뉴스를 가질 수 있다. 그러나 처음부터 끝까지 패키지를 보지 않고 요구되는 애셋을 찾는 것은 어렵다.
다음, ISOBMFF/ MPEG-21 파일 포맷에 대해 설명한다. 'moov'는 오직 한 시점에 허락되어서 패키지 구조는 고정적이고 동적으로 변할 수 없다. DID와 'meta' 내의 'iloc'도 한 시점에만 허락되므로 애셋 구조의 업데이트가 허락되지 않는다. 무비 프래그먼트는 실시간으로 생성된 컨텐트를 추가하기 위해 사용될 수 있으나 모든 'trek' ID는 'mvex'내에 있는 'trex'에서 미리 정의되므로 새로운 트랙을 추가하는 것은 허락되지 않는다.
ZIP은 간편한 포맷으로 manifest 플레이스 홀더(placeholder)와 파일 시스템구조를 설명하기 위한 방법을 가지므로 애셋이 파일링 되면 그 요소를 ZIP 파일로 넣는 것은 간단하다. 구성 정보, 전송 특성, BMP는 등록된 파일을 쉽게 핸들링하기 위해 지정된 이름을 가질 수 있다. 그러나 실시간으로 생성된 컨텐트는 ZIP을 가지기 적합하지 않다. 실시간 방송을 위한 복수의 ZIP은 전송 계층에서 오버해드를 일으킬 수 있는 애셋과 패키지를 핸들링하는 파일 이름과 버전을 요구한다.
MMT 패키지의 요구조건들은 다음과 같다.
첫째, 실시간으로 생성된 컨텐트를 제공해야 한다.
둘째, 애셋을 추가하고 애셋의 구조적 디스크립션을 업데이트해야 한다.
셋째, 패키지 내에서의 애셋의 위치를 제공해야 한다.
넷째, 패키지와 패키지의 연속에 대한 식별 정보를 제공해야 한다.
이러한 요구조건들을 고려할 때, 다음과 같은 패키지 포맷을제안할 수 있다.
표 1
Figure PCTKR2012004691-appb-T000001
Figure PCTKR2012004691-appb-I000001
Figure PCTKR2012004691-appb-I000002
또 다른 패키지 포맷으로 다음과 같은 포맷을 제안할 수 있다.
표 2
Figure PCTKR2012004691-appb-T000002
Figure PCTKR2012004691-appb-I000003
이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.

Claims (14)

  1. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 방법에 있어서,
    상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하는 과정과,
    상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 과정을 포함하며,
    상기 설정 정보는 상기 패키지내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함함을 특징으로 하는 컨텐트 구성 방법.
  2. 제1항에 있어서,
    상기 복수 개의 애셋들간의 관계는 결합 관계, 상호 배타적 관계, 종속 관계, 적응 관계 중 적어도 하나의 관계임을 특징으로 하는 컨텐트 구성 방법.
  3. 제1항에 있어서,
    상기 구성 정보는, 시공간에서 상기 애셋들을 위치시키기 위한 시간 관계 및 공간 관계를 더 포함함을 특징으로 하는 컨텐트구성 방법.
  4. 제2항에 있어서,
    상기 결합 관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
  5. 제2항에 있어서,
    상기 상호 배타적 관계에 있는 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
  6. 제2항에 있어서,
    상기 종속 관계에 있는 애셋들은 쌍을 이루어 선택되거나 서로 다른 우선순위를 가짐을 특징으로 하는 컨텐트 구성 방법.
  7. 제2항에 있어서,
    상기 적응 관계에 있는 애셋들은 동일한 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 방법.
  8. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 컨텐트를 구성하는 장치에 있어서,
    상위 계층으로부터 전송되며 복수 개의 컨텐트로 구성되는 복수 개의 애셋들을 패키지로 결합하고, 상기 복수 개의 애셋들을 멀티플랙싱하기 위한 설정 정보를 상기 패키지에 추가하여 하위계층으로 전달하는 캡슐화 계층을 포함하며,
    상기 설정 정보는 상기 패키지내에 포함된 애셋들의 리스트와, 상기 복수 개의 애셋들간의 관계에 대한 정보를 포함하는 구성 정보와, 상기 복수 개의 애셋들의 전달 경로와 관련된 전송 특성을 포함함을 특징으로 하는 컨텐트 구성 장치.
  9. 제8항에 있어서,
    상기 복수 개의 애셋들간의 관계는 결합 관계, 상호 배타적 관계, 종속 관계, 적응 관계 중 적어도 하나의 관계임을 특징으로 하는 컨텐트 구성 장치.
  10. 제8항에 있어서,
    상기 구성 정보는, 시공간에서 상기 애셋들을 위치시키기 위한 시간 관계 및 공간 관계를 더 포함함을 특징으로 하는 컨텐트 구성 장치.
  11. 제9항에 있어서,
    상기 결합 관계에 있는 애셋들은 서로 다른 컨텍스트와 서로 다른 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.
  12. 제9항에 있어서,
    상기 상호 배타적 관계에 있는 애셋들은 서로 다른 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.
  13. 제9항에 있어서,
    상기 종속 관계에 있는 애셋들은 쌍을 이루어 선택되거나 서로 다른 우선순위를 가짐을 특징으로 하는 컨텐트 구성 장치.
  14. 제9항에 있어서,
    상기 적응 관계에 있는 애셋들은 동일한 컨텍스트와 동일한 미디어 타입을 가짐을 특징으로 하는 컨텐트 구성 장치.
PCT/KR2012/004691 2011-06-14 2012-06-14 방송 시스템에서 컨텐트를 구성하는 방법 및 장치 WO2012173402A2 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP12801417.2A EP2723085A4 (en) 2011-06-14 2012-06-14 METHOD AND APPARATUS FOR INCLUDING CONTENT IN A BROADCASTING SYSTEM

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201161496741P 2011-06-14 2011-06-14
US61/496,741 2011-06-14
US201161507294P 2011-07-13 2011-07-13
US61/507,294 2011-07-13

Publications (2)

Publication Number Publication Date
WO2012173402A2 true WO2012173402A2 (ko) 2012-12-20
WO2012173402A3 WO2012173402A3 (ko) 2013-03-28

Family

ID=47354858

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/004691 WO2012173402A2 (ko) 2011-06-14 2012-06-14 방송 시스템에서 컨텐트를 구성하는 방법 및 장치

Country Status (4)

Country Link
US (1) US20120324521A1 (ko)
EP (1) EP2723085A4 (ko)
KR (1) KR20120138693A (ko)
WO (1) WO2012173402A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016018066A1 (ko) * 2014-08-01 2016-02-04 엘지전자 주식회사 방송신호 전송방법, 방송신호 수신방법, 방송신호 전송장치, 방송신호 수신장치

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101885852B1 (ko) 2011-09-29 2018-08-08 삼성전자주식회사 컨텐트 전송 및 수신 방법 및 장치
US9319721B2 (en) * 2011-10-13 2016-04-19 Electronics And Telecommunications Research Institute Method of configuring and transmitting an MMT transport packet
US20130094594A1 (en) * 2011-10-13 2013-04-18 Electronics And Telecommunications Research Institute Method for configuring and transmitting m-unit
KR101947111B1 (ko) * 2011-10-13 2019-02-14 한국전자통신연구원 Mmt 전송 패킷의 설정 방법 및 전송 방법
US20150124818A1 (en) * 2011-10-13 2015-05-07 Electronics And Telecommunications Research Institute Method for transmitting media data interlinked with composition information and transmission characteristics information via a heterogeneous ip network
US20130094518A1 (en) * 2011-10-13 2013-04-18 Electronics And Telecommunications Research Institute Method for configuring and transmitting mmt payload
KR20130058647A (ko) * 2011-11-25 2013-06-04 (주)휴맥스 Ｍｍｔ 패키지화 컨텐츠의하이브리드 전송 방법 및 컨텐츠 수신 방법
JP2015065488A (ja) * 2012-01-30 2015-04-09 シャープ株式会社 生成装置、再生装置、データ構造、生成方法、再生方法、制御プログラム、および記録媒体
KR102045073B1 (ko) 2013-01-24 2019-11-14 한국전자통신연구원 유연한 ｍｍｔ 애셋 송수신 방법 및 그 장치
EP2987284B1 (en) 2013-04-18 2019-09-18 Samsung Electronics Co., Ltd. Method and apparatus for controlling media delivery in multimedia transport network
WO2014210284A1 (en) 2013-06-27 2014-12-31 Dolby Laboratories Licensing Corporation Bitstream syntax for spatial voice coding
EP3036899B1 (en) 2013-08-19 2022-03-02 LG Electronics Inc. Method and apparatus for receiving broadcast signals
EP2866436A1 (en) * 2013-10-23 2015-04-29 Thomson Licensing Method and apparatus for transmission and reception of media data
KR102147676B1 (ko) * 2014-03-28 2020-08-26 삼성전자주식회사 멀티미디어 시스템에서 자원 할당 방법 및 장치
KR102249147B1 (ko) 2014-03-29 2021-05-07 삼성전자주식회사 복합 네트워크에서 멀티미디어 데이터 관련 정보를 송수신하기 위한 장치 및 방법과 그 구조
US10560514B2 (en) * 2014-03-29 2020-02-11 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving information related to multimedia data in a hybrid network and structure thereof
US10721538B2 (en) * 2015-03-08 2020-07-21 Lg Electronics Inc. Apparatus and method for transmitting and receiving broadcast signal
KR102153554B1 (ko) 2015-06-17 2020-09-08 한국전자통신연구원 미디어 데이터의 처리를 위한 mmt 장치 및 방법

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6573942B1 (en) * 1998-08-17 2003-06-03 Sharp Laboratories Of America, Inc. Buffer system for controlled and timely delivery of MPEG-2F data services
US6996098B2 (en) * 1999-03-31 2006-02-07 Sedna Patent Services, Llc Method and apparatus for injecting information assets into a content stream
US8250617B2 (en) * 1999-10-29 2012-08-21 Opentv, Inc. System and method for providing multi-perspective instant replay
DE60140902D1 (de) * 2001-05-30 2010-02-04 Opentv Inc Bedarfsgesteuertes interaktives magazin
JP2003037623A (ja) * 2001-07-23 2003-02-07 Philips Japan Ltd Ｍｐｅｇネットワーク上におけるダイレクトｒｔｐ伝送方法及びシステム
US7950033B2 (en) * 2001-10-10 2011-05-24 Opentv, Inc. Utilization of relational metadata in a television system
US20060136981A1 (en) * 2004-12-21 2006-06-22 Dmitrii Loukianov Transport stream demultiplexor with content indexing capability
CN102281465B (zh) * 2005-03-02 2014-12-24 松下电器产业株式会社 分发系统、分发装置及分发系统中的发送方法和接收方法
KR100649399B1 (ko) * 2006-05-17 2006-11-28 엠큐브웍스(주) 아이피를 통해 디지털 방송 서비스를 제공하는 방법
US8009742B2 (en) * 2006-09-12 2011-08-30 Samsung Electronics Co., Ltd. Method and system for retransmitting internet protocol packet for terrestrial digital multimedia broadcasting service
US8532174B2 (en) * 2009-01-27 2013-09-10 General Instrument Corporation Method and apparatus for distributing video program material
KR101777347B1 (ko) * 2009-11-13 2017-09-11 삼성전자주식회사 부분화에 기초한 적응적인 스트리밍 방법 및 장치
KR101786050B1 (ko) * 2009-11-13 2017-10-16 삼성전자 주식회사 데이터 전송 방법 및 장치

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None
See also references of EP2723085A4

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016018066A1 (ko) * 2014-08-01 2016-02-04 엘지전자 주식회사 방송신호 전송방법, 방송신호 수신방법, 방송신호 전송장치, 방송신호 수신장치
US10142706B2 (en) 2014-08-01 2018-11-27 Lg Electronics Inc. Broadcast signal transmitting method, broadcast signal receiving method, broadcast signal transmitting apparatus, and broadcast signal receiving apparatus
US10567851B2 (en) 2014-08-01 2020-02-18 Lg Electronics Inc. Broadcast signal transmitting method, broadcast signal receiving method, broadcast signal transmitting apparatus, and broadcast signal receiving apparatus
US11234058B2 (en) 2014-08-01 2022-01-25 Lg Electronics Inc. Broadcast signal transmitting method, broadcast signal receiving method, broadcast signal transmitting apparatus, and broadcast signal receiving apparatus
US11706501B2 (en) 2014-08-01 2023-07-18 Lg Electronics Inc. Broadcast signal transmitting method, broadcast signal receiving method, broadcast signal transmitting apparatus, and broadcast signal receiving apparatus

Also Published As

Publication number Publication date
KR20120138693A (ko) 2012-12-26
WO2012173402A3 (ko) 2013-03-28
EP2723085A4 (en) 2015-04-01
EP2723085A2 (en) 2014-04-23
US20120324521A1 (en) 2012-12-20

Similar Documents

Publication Publication Date Title
WO2012173402A2 (ko) 방송 시스템에서 컨텐트를 구성하는 방법 및 장치
US10728591B2 (en) Method of configuring and transmitting an MMT transport packet
JP6807852B2 (ja) Ｌｃｔに基づくｄａｓｈフォーマットを有するファイルフォーマットベースのストリーミング
EP2478703B1 (en) Multi-track video coding methods and apparatus using an extractor that references two or more non-consecutive nal units
WO2013077698A1 (ko) Mmt 미디어와 dash 미디어와의 연동 방법
KR101290467B1 (ko) 2 개 이상의 비연속적인 ｎａｌ 유닛들을 참조하는 추출자를 이용하는 멀티-트랙 비디오 코딩 방법들 및 장치
WO2012099423A2 (ko) 방송 시스템에서의 제어 메시지 구성 장치 및 방법
AU2011282166B2 (en) Arranging sub-track fragments for streaming video data
US9967582B2 (en) Hybrid delivery method and reception method for MMT packaged SVC video contents
Lim et al. MMT: An emerging MPEG standard for multimedia delivery over the internet
US20150113577A1 (en) Hybrid transmission method through mmt packet format extension
US9635394B2 (en) Method and device for flexible MMT asset transmission and reception
US20090106288A1 (en) Method and system for supporting media data of various coding formats
CN108702527A (zh) 用于使用通用夹层分发格式的媒体传送的系统和方法
Lim et al. New MPEG transport standard for next generation hybrid broadcasting system with IP
CN101448134A (zh) 广播接收机和用于接收自适应广播信号的方法
Park et al. Delivery of ATSC 3.0 services with MPEG media transport standard considering redistribution in MPEG-2 TS format
US20200021867A1 (en) Broadcast signal transmitting and receiving method and device
US20210160475A1 (en) Mmt apparatus and method for processing stereoscopic video data
WO2013055168A1 (ko) 콤포지션 정보 및 전송 특성 정보가 연동된 미디어 데이터를 이종 ip 네트워크를 통하여 전송하는 방법
Rauschenbach et al. A scalable interactive TV service supporting synchronized delivery over broadcast and broadband networks
WO2016204502A1 (ko) 스테레오스코픽 비디오 데이터를 처리하기 위한 mmt 장치 및 방법
WO2014116060A1 (ko) 유연한 ｍｍｔ 애셋 송수신 방법 및 그 장치
WO2014061925A1 (ko) 교차 계층 최적화를 사용한 fec 패리티 데이터의 적응적 전송 방법
Brassil et al. Large-scale personalized video streaming with program insertion proxies

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12801417

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2012801417

Country of ref document: EP