WO2012099403A2 - Method and apparatus for transmitting/receiving content in a broadcast system - Google Patents

Method and apparatus for transmitting/receiving content in a broadcast system Download PDF

Info

Publication number
WO2012099403A2
WO2012099403A2 PCT/KR2012/000453 KR2012000453W WO2012099403A2 WO 2012099403 A2 WO2012099403 A2 WO 2012099403A2 KR 2012000453 W KR2012000453 W KR 2012000453W WO 2012099403 A2 WO2012099403 A2 WO 2012099403A2
Authority
WO
WIPO (PCT)
Prior art keywords
mmt
package
item
asset
configuration information
Prior art date
Application number
PCT/KR2012/000453
Other languages
French (fr)
Korean (ko)
Other versions
WO2012099403A3 (en
Inventor
유성열
송재연
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020110005640A external-priority patent/KR20120083820A/en
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020187025083A priority Critical patent/KR101922988B1/en
Priority to KR1020137018666A priority patent/KR101855516B1/en
Priority to KR1020187012457A priority patent/KR101895443B1/en
Priority to US13/980,236 priority patent/US10116997B2/en
Publication of WO2012099403A2 publication Critical patent/WO2012099403A2/en
Publication of WO2012099403A3 publication Critical patent/WO2012099403A3/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols

Definitions

  • the present invention relates to a method and apparatus for transmitting / receiving content in a broadcast system, and more particularly, to an apparatus and method for transmitting / receiving content through a heterogeneous network in a broadcast system supporting a multimedia service based on an Internet protocol.
  • the service provider tries to provide more information on one service screen.
  • the screen of the frequently viewed news may have a smaller portion of the screen due to the ticker, stock information, and news titles.
  • the present invention provides an apparatus and method for constructing a service using a plurality of contents by a service provider and transmitting the same using one or a plurality of paths on a heterogeneous network.
  • the present invention provides an apparatus and method for consuming a service using a plurality of contents in a convergence environment.
  • a method for transmitting a content to be transmitted through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol includes generating at least one package including an MPEG Media Transport (MMT) item. And providing the at least one package to the terminal, wherein the MMT item includes MMT assets and configuration information of the MMT assets.
  • MMT MPEG Media Transport
  • An apparatus is a content transmission apparatus to be transmitted through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol, and generates at least one package including an MMT (MPEG Media Transport) item.
  • MMT MPEG Media Transport
  • MMT MPEG Media Transport
  • An apparatus is a receiving unit for receiving at least one package including an MMT (MPEG Media Transport) item in a content receiving apparatus through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol.
  • a package analyzing unit analyzing the package and a processing unit processing an MMT item and an MMT asset included in the package according to the analysis result, wherein the MMT item includes MMT assets and configuration information of the MMT assets.
  • MMT MPEG Media Transport
  • 1 is a block diagram showing a transmission system architecture based on MMT
  • FIG. 4 is a diagram illustrating a temporal and spatial MMT asset configuration of an MMT item
  • FIG. 5 is a block diagram of a service provider according to an embodiment of the present invention.
  • FIG. 6 is an operation flowchart of a service provider according to an embodiment of the present invention.
  • FIG. 7 is a block diagram of a playback apparatus according to an embodiment of the present invention.
  • 8A and 8B are flowcharts illustrating operations of a playback apparatus according to an embodiment of the present invention.
  • the MPEG-2 standard introduces unnecessary overhead when transmitting using unidirectional communication, transmission inefficiency due to fixed frame sizes, transmission protocols specific to audio / video, and Internet protocol (IP). It was proposed by MPEG to overcome the limitations of Moving Picture Expert Group-2 Transport Stream (TS).
  • TS Moving Picture Expert Group-2 Transport Stream
  • the MMT standard may be applied to efficiently transmit a plurality of contents through heterogeneous networks.
  • the plurality of contents means a set of contents having multimedia elements by video, audio, and application.
  • the heterogeneous network refers to a network in which a broadcast network and a communication network are mixed.
  • the MMT standard aims to define a transport technology that is more friendly to IP, which is a basic technology in a transport network for multimedia services.
  • the MMT standard is to provide an efficient MPEG transmission technology in a multimedia service environment that is typically changed based on IP, and standardization has been progressed with continuous research.
  • the MMT standard needs to provide a method for providing an efficient MPEG transmission technology in a multimedia service environment in which a hybrid network (or a heterogeneous network) and a hybrid content are provided.
  • a service provider constructs a service using a plurality of contents and transmits the service using one or a plurality of paths on a heterogeneous network, the service can be consumed in a converged environment.
  • 1 is a block diagram illustrating a transmission system architecture based on MMT.
  • the MMT divides a transmission system environment into an encapsulation (100), a delivery (120), and a control (130) to configure a role and to be in a cooperative relationship.
  • An encapsulation layer should generate MMT items using MMT assets.
  • MMT assets are composed of elements such as video, audio, web contents, applications, and the like. Each MMT asset may be independent content for user consumption.
  • Layer E has two sublayers. The second sub-layer E.2 generates MMT assets and provides configuration information of the MMT assets. E.2 communicates with control layers to provide MMT asset information.
  • the first sub layer E.1 generates an MMT package.
  • the MMT package is stored and used to deliver MMT items consumed by the user.
  • the MMT package may deliver a live type of MMT items, a file type of MMT items, and a hybrid type of MMT items.
  • E.1 also provides relevant information of MMT assets in a package.
  • Layer E communicates with layer C and layer D to deliver the MMT package.
  • the delivery layer (hereinafter, referred to as 'layer D') must deliver the MMT package and data received from the layer C to the receiving end.
  • layer D uses an access unit (AU).
  • AU access unit
  • Each MMT item (or package) may have a different type of AU because the QoS characteristics may be different.
  • Layer T also consists of two sublayers.
  • D.1 creates an AU based on the characteristics and data of the package from layer C.
  • D.1 communicates with Layer C and Layer D.
  • D.2 generates D frames and provides the functionality of flow control.
  • D.2 also provides information on the D-Frame that can be used by network nodes for QoS guarantees.
  • the control layer (hereinafter, referred to as 'layer C') manages all functions required for MMT assets and MMT item consumption.
  • Layer C.1 provides the functionality of MMT assets, MMT item information and consumption related information, manages connectivity to MMT packages, and provides device capabilities such as codec and memory status.
  • Manage. Layer C.2 shall perform session management and data transmission generated in layer C for MMT D frames.
  • the Encapsulation 100 types (ie, embodies or encapsulates) the service that the service provider intends to provide.
  • the delivery 120 transmits the content at the quality required by the service when one of the available paths between the service provider and the consumer is selected.
  • the control 130 displays a path through which the container and the content constituting the service can be provided along with a list of services currently available for starting the service.
  • FIG. 2 illustrates a configuration diagram of an MMT item, an MMT asset, and a package.
  • MMT Encapsulations are composed of MMT item, MMT asset, package, and slice.
  • the MMT item is a service to be provided by a service provider, and represents a minimum unit that a consumer can purchase.
  • the MMT item consists of MMT assets and configuration information of the MMT assets.
  • the MMT asset is a component constituting the MMT item and represents a minimum unit that can be consumed.
  • the MMT asset includes MPEG-2 TS, Moving Picture Expert Group-2 Program Stream (MPEG-2 PS), mp4, mp21, MPEG-U Widget, Application, Image, and Dynamic Adaptive Streaming over HTTP (DASH).
  • MPEG-2 PS Moving Picture Expert Group-2 Program Stream
  • mp4 mp21
  • MPEG-U Widget Application
  • Image Image
  • DASH Dynamic Adaptive Streaming over HTTP
  • the MMT asset may be provided from different MMT asset providers.
  • the package encapsulates MMT assets.
  • the MMT item is included in one or several packages and transmitted.
  • Slice represents one or several slices of an MMT asset.
  • the package may include one or several MMT assets.
  • the package includes a list of MMT assets, transmission characteristics of each MMT asset, detailed description, slice list, MMT item configuration information, and MMT asset as payload.
  • FIG. 3 shows a package and slice list configuration diagram.
  • the package includes a list of MMT assets, MMT item configuration information, and MMT assets.
  • the list of MMT assets includes transmission characteristics, detailed description, and slice list of each MMT asset.
  • the MMT asset list provides a list of MMT assets in one package.
  • the MMT asset list also provides a list of assets in another package.
  • the MMT asset list includes id, transmission characteristics, detailed description, and slice list for each MMT asset.
  • the actual MMT asset is stored as payload of the package.
  • Transport characteristics of the service provider's point of view recommended for playing the MMT asset are displayed. Transmission characteristics are a requirement to ensure quality when transmitted. Informs the information required for the MMT asset to be properly transmitted and consumed.
  • the MMT asset may be played in perfect or loosely synchronized with other MMT assets on the time axis of the MMT item. In addition, all clients connected to the service provider may need to be played simultaneously based on the wall clock. Alternatively, depending on the type of MMT asset, transmission may be performed without error or loss (widget, program) or loss may be allowed (adaptive streaming, frame drop).
  • MMT assets may require unicast or bidirectional connections. Connection types include one-to-one, one-to-n, one-way and two-way. In addition, loss loss, loss allowance, and connection relationship are included in the transport characteristics.
  • MMT-Delivery or MMT-Control are passed to MMT-Delivery or MMT-Control and used to map numerical and physical characteristics according to the functions provided by each.
  • Information required for individually consuming or storing the MMT asset for example, a filename, a mime-type, and the like of the MMT asset are provided. Used to store or separately consume MMT assets.
  • the detailed description may include things that are property values of the asset, in addition to contents in which the properties of the asset are enumerated.
  • the MMT asset is divided into slices and stored in a payload.
  • the slices can be one or several and each slice does not have to be the same length. According to the characteristics of the MMT asset, when slices are separated and stored temporally, spatially and semantically, they can be used to map from D1 to AU (Access Unit).
  • a slice has a relative position on the payload, its length, and the pts time of that slice.
  • the Slice list indicates how the slices cut the MMT asset are distributed on the payload.
  • MMT items are designed to be used for storage and transmission.
  • the general structure is basically used for storage purposes. Interleave is used for streaming transmission.
  • the live structure is used for live streaming of infinite length.
  • One MMT asset is stored as one slice.
  • one MMT asset is divided into several slices and stored.
  • the time point on the MMT asset individual time axis may be known through a presentation time stamp (pts) of the slice.
  • Slice is cut and provided in units of seconds or group of pictures based on pts.
  • one MMT asset is divided into several slices and stored. MMT assets to be reproduced together are interleaved and stored.
  • Slice is provided by cutting in units of seconds or group of pictures based on pts.
  • Slices of MMT assets representing the same time zone may be provided as a group according to the order of time expressed on the time axis of the MMT item.
  • a package transmits only a part of MMT assets and assumes that a package having the same id among subsequent packages is transmitting the rear part of the MMT asset.
  • the sequence number is checked to determine whether the sequence number of the previous package and the sequence number of the subsequent package are increased by one. If the sequence number has not increased by 1, this is a case where the package has been repeatedly sent for special purposes and should not be used unless there is a problem with the transfer. However, if the sequence number has increased by more than 1, you have not received a package that should have been sent in the middle, so you will need to request retransmission or reset the parameters needed to play the package.
  • the package interval can be adjusted according to the transmission time and transmission rate.
  • the rate is theoretically calculated at a fixed bit rate and specifies the size of the package so that the header of one or more integer packages starts at a given time, for example, 0.7 seconds.
  • information corresponding to additional information for example, MMT asset description, transmission characteristics, and MMT item configuration information may be omitted from the header of the package of the intermediate section that does not correspond to 0.7 seconds. At this time, the omitted information is considered to be valid between MMT items having the same package id.
  • FIG. 4 illustrates a temporal and spatial MMT asset configuration diagram of an MMT item.
  • MMT item is composed of MMT assets.
  • the MMT item configuration indicates the configuration of the corresponding / different encapsulation in the time and space of the MMT item, the configuration of the MMT asset in the encapsulation, and the configuration of the MMT asset component in the MMT asset in the encapsulation.
  • the MMT item configuration information has the following entities as sub-components, and how the MMT asset is arranged on the playing time and space of the MMT item and between each MMT asset as intended by the service provider through the MMT item configuration information Tell the relationship.
  • FIG. 4 it describes when and what part of the MMT asset is displayed and when it is displayed on the reproduction time of the MMT item.
  • FIG. 4 it describes which part of the MMT asset is displayed and where in the expression space of the MMT item.
  • Configuration information of MMT item is an xml document and is represented using seq, par, and sel elements. If the format is other than xml, other methods (e.g. fields, boxes such as ISOFF, etc.) that play a corresponding role are possible.
  • the Seq element executes the child elements in order.
  • Par elements execute child elements in parallel at the same time.
  • -Sel element selects and executes only one of its child elements.
  • the three elements have start as an attribute.
  • Start is the time on the MMT item time base that the element starts at.
  • Div is a temporal and spatial place holder for MMT assets.
  • Div element has target_characteristic as an attribute.
  • Target_characteristic is a characteristic required for executing the MMT asset. Even if all of the above described characteristics are not satisfied, it is recommended that the closest reproducing apparatus available among those available for reproducing the MMT item reproduce.
  • Target_characteristic values include main, 3d, interactivity, remote, n-screen, and mvc. However, this is not limitative.
  • ° Main means the playback device which is the center.
  • ° 3d means a device that supports 3-D playback.
  • N-screen means an n-screen configuration device or a plurality of devices participating in n-screen configuration.
  • Remote stands for remote controller.
  • Interactivity A device that can receive user interactive input.
  • the MMT asset B can be independently reproduced even without the MMT asset A. (independent)
  • MMT asset C, MMT asset D, and MMT asset E are relationships in which only one is selected on the time axis as shown in Table 2 below.
  • MMT asset F, MMT asset G, and MMT asset H are relationships that must be performed together as shown in Table 3 below. (More compelling AND)
  • Example 1 Syntax of Table 4 below shows a case in which MMT asset 1 or MMT asset 1 and MMT asset 2 are reproduced from 100 seconds to 200 seconds in MMT item time 50 seconds.
  • Example 2 The following Syntax shows a case where (0,0 ⁇ 800,600) of MMT asset 1 is attached to (100,100 ⁇ 800,600) of MMT item. (0,0) and (100,100) represent (x-axis, y-axis), and (800,600) represent (width, height).
  • MMT asset 1 is displayed on the main device and MMT asset 2 is displayed on the second device.
  • target_characteristics main, 3d, interactivity, remote, n-screen, mvc ...
  • Asset 1 can be displayed to the user as a main device (eg, TV screen), and Assest 2 as a second device (ie, a web page of a mobile phone).
  • a main device eg, TV screen
  • Assest 2 a second device
  • Transmission characteristics of package and transmission characteristics of MMT asset The transmission characteristics that the MMT asset should have in the unit of a package or in units of MMT assets in the package are described at a high level.
  • MMT-C the transmission characteristics are mapped to a network path that can be provided by an MMT item provider.
  • the MMT-T transmits a path on a network provided by the MMT-C.
  • a path that can be provided to the MMT asset should not be written. It is not meaningful to write down the path as it may vary depending on the environment.
  • the actual path is provided in another layer-C, and the hint that creates the path separates the content from the delivery environment.
  • the mime-type and file name are provided when the mmt asset is stored or separately consumed.
  • the value is described depending on whether slice is a regular array, or whether trick mode, live transfer, or file transfer is considered.
  • slice is composed of Access Unit units such as MPEG-2 and MPEG-4.
  • FIG. 5 is a flowchart illustrating an operation of a service provider according to an exemplary embodiment of the present invention.
  • FIG. 5 The operation of FIG. 5 is of course performed at the service provider of FIG. 6. However, it is not limited to the service provider of FIG. 6.
  • the service provider receives an MMT asset from an MMT asset provider and configures an MMT item to be sold using the MMT asset.
  • MMT asset configuration information for describing how to configure the MMT asset within the MMT item should be provided.
  • the MMT item configuration information is preferably provided together with the MMT asset. Accordingly, the MMT item configuration information is loaded and provided using a header-payload structure called a package.
  • Packages are created by the service provider to compose MMT items, and several packages may be used to compose one MMT item.
  • a package is identified by its package id, MMT item id, and sequence number.
  • the package has the MMT item id it represents.
  • the package id is for distinguishing between different packages. Even if the package ids are different, if the MMT item ids are the same, they are different packages that compose the same MMT item. If different packages with the same package id exist, they are distinguished by sequence number. There is a method of making a small package and transmitting the package several times for the above-mentioned purposes such as live broadcasting. At this time, the sequence number is used to check whether there is a missing package in the front and rear relationship.
  • the service provider uses MMT-Control and MMT-Delivery to make the discovery information and transmission information of the MMT item accessible to the playback device.
  • the initiation of the transmission may be at the request of the playback device in the case of a one-to-one relationship or in any transmission in which the participation of any playback device is expected in the case of a one-to-many relationship or broadcast transmission.
  • the service provider creates an MMT item in step 501 and determines whether an MMT asset is created in real time in step 503. That is, the service provider determines whether live transmission is possible. If the live transmission is possible, the service provider generates a package in step 505. In step 507, the service provider inserts header information into the package. At this time, when inserting header information, the same package id is used. In addition, when the header information is inserted in step 509, the service provider inserts creation time information using a time stamp. In addition, the service provider increments the sequence number by 1 when inserting the header information for transmission live at step 511. Thereafter, the service provider generates a payload in step 513. As such, the MMT asset is stored by generating the payload.
  • the service provider Simultaneously with the generation of the package in step 505, the service provider generates an MMT asset in step 515. Thereafter, the service provider proceeds to step 513.
  • the service provider determines whether to support the trick mode in step 517. If the trick mode is supported, the service provider generates a package in step 519. In step 521, the service provider inserts header information into the package.
  • the service provider identifies MMT item configuration information in step 523. Thereafter, the service provider generates a payload in step 525. As such, the MMT asset is stored by generating the payload.
  • the service provider has an MMT asset in step 529.
  • the service provider slices an MMT asset used on an MMT item time axis in units of time and proceeds to step 525.
  • the service provider completes the package generation in step 527.
  • the service provider If the trick mode is not supported in step 517, the service provider generates a package in step 533. Thereafter, the service provider inserts header information into the package in step 535 and generates a payload in step 537. As such, the MMT asset is stored by generating the payload. The service provider completes package generation in step 539.
  • the service provider has an MMT asset in step 541. Thereafter, the service provider proceeds to step 539.
  • FIG. 6 is a block diagram of a service provider according to an embodiment of the present invention.
  • the MMT MT asset is provided to the service provider 600. Then, the MMT asset decoder 620 in the service provider 600 receives the MMT asset and decodes the MMT asset.
  • the MMT item generator 630 creates an intended MMT item by reflecting the decoding result of the MMT asset decoder 620.
  • the MMT item generating unit 630 is used as a component, and delivers information about the MMT item and the MMT asset to the package generating unit 635 to store in the package.
  • the package generator 635 receives the MMT asset from the buffer 1 625 and stores the MMT asset as a payload in the package, and stores the MMT asset in the buffer 2 640 again.
  • the service provider 600 delivers information about the package to the MMT-Control 660 to provide the package, and delivers the information about the package to the playback device through the storage device 645, the network 650, or the like.
  • FIG. 7 is a block diagram of a playback apparatus according to an embodiment of the present invention.
  • the reproduction device may know the existence of the MMT item, a transmission method, a path, etc. for transmitting the same through the MMT-Control.
  • the playback device receives the package constituting the MMT item and starts playback of the MMT item.
  • the playback device selects a path that can be supported by the playback device from a plurality of available paths provided by the service provider and downloads the MMT asset. If the path taken down by changes in the surrounding environment is no longer available, the playback device is responsible for changing the network device for seamless transmission or playback.
  • the playback device attempts to divide a portion of the MMT asset from the available path periodically within the range that does not impair the playback and transmission performance of the entire playback device when more than one path is available. Since the MMT asset is divided into slices and the slice list is also given to the package, it is possible to download and download different slices for a plurality of paths.
  • Types of playback devices include home servers, main display devices, subdisplay devices, and the like. After the playback device receives the configuration packages of the MMT item from the service provider through the home server, the playback device searches for a playback device to which the MMT assets are appropriately played and instructs the playback device to play the MMT asset.
  • the home server of the playback apparatus refers to the MMT item configuration information.
  • This information specifies where the MMT assets should be represented in terms of time and space, and what device capabilities are required in target_characteristic. That is, if the value corresponding to the property cannot be supported by the playback device connected to the home server, it is inevitable.
  • the MMT asset may be played by the playback device that satisfies the target_characteristic. To be able.
  • the playback device may know the existence of an MMT item and a path on a network of a package configuring the MMT item through the MMT-Control.
  • Receiving unit 712 collectively includes everything that can accept information from the outside over the wired and wireless network, through which the package is transmitted.
  • the package may be primarily stored in package buffer 1 714 for processing and may be temporarily or semi-permanently stored in storage 716 in the playback device as needed.
  • the package is passed to the package parser 718 for interpretation, and the header information of the package is stored in the buffer 2 720 and used in the case of a continuous package such as a live broadcast.
  • the MMT item description in the package header is processed by a separate processing unit, which becomes the main processing unit for presenting the MMT item to the user.
  • the MMT asset stored in the buffer 3 724 is transmitted to the MMT asset processing unit 726 and then transferred to the display device 728 at a proper time. Final consumption. If the user issues a trick play command such as fast forwarding or playing after 30 seconds during playback, it is transmitted to the MMT item description processing unit 722, where the requested time corresponds to any of the MMT item time axis, and certain MMT assets are displayed. After re-determining whether it should be, the corresponding MMT asset is processed by the processor.
  • a trick play command such as fast forwarding or playing after 30 seconds during playback
  • FIGS. 8A and 8B are flowcharts illustrating operations of a reproducing apparatus according to an exemplary embodiment of the present invention.
  • 8A and 8B are of course performed in the playback apparatus of FIG.
  • the present invention is not limited to the playback apparatus in FIG.
  • step 801 the playback apparatus plays back the MMT item and receives information including whether the MMT item is recognized, the path is recognized, the live and the trick mode are supported.
  • step 805 the playback apparatus determines whether the transmission is a live transmission. If live, the playback device receives the package in step 807, and determines whether the package ids are the same in step 809. If the package ids are the same, the playback apparatus determines whether the sequence number has increased in step 811. If the sequence number is increased, the playback apparatus determines whether the MMT item description exists in step 813. If there is an MMT item description, the playback apparatus stores the MMT item description in a buffer in step 815 and interprets the MMT item description in step 817. Thereafter, the playback device receives the associated package in step 819, and plays the MMT item in step 821. The playback device returns to step 807 again.
  • step 809 If the package ids are not the same in step 809, and the sequence number does not increase in step 811, the playback apparatus returns to step 807. If there is no MMT item description in step 813, the playback apparatus proceeds to step 817.
  • the playback device receives a package associated with the package as well as the package in step 823, and interprets the MMT configuration information list in step 825.
  • the playback device plays the MMT item.
  • the playback apparatus receives a user trick command, and determines whether to support a trick mode in step 833. If the trick mode is supported, the playback apparatus searches for an MMT asset corresponding to a time on the MMT item in step 835. As a result of the search, the playback apparatus obtains pts by comparing the MMT item time and the MMT asset time in step 837.
  • the playback apparatus identifies a slice and searches for a slice corresponding to pts.
  • the playback device plays the MMT item in step 841.
  • the playback apparatus searches for an MMT asset corresponding to a time on the MMT item in operation 843.
  • the playback device determines whether all necessary MMT assets have been downloaded in step 845. If all necessary MMT assets have been downloaded, the playback device plays the MMT item in step 847.
  • a service provider configures a service using a plurality of contents and transmits the service using one or a plurality of paths on a heterogeneous network.
  • the present invention can consume an efficient service using a plurality of contents in a convergence environment.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

The present invention relates to a content-transmission system, and more particularly, to a method and apparatus for transmitting content in a content-transmission system. The present invention relates to an apparatus and method in which a service provider constructs a service using a plurality of pieces of content, and transmits the service via one or more paths over a heterogeneous network, such that the service may be consumed in a converged environment.

Description

방송 시스템에서 컨텐츠 전송/수신 방법 및 장치Method and device for transmitting / receiving content in broadcasting system
본 발명은 방송 시스템에서 컨텐츠 전송/수신 방법 및 장치에 관한 것으로, 특히, 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 컨텐츠를 전송/수신하는 장치 및 방법에 관한 것이다.The present invention relates to a method and apparatus for transmitting / receiving content in a broadcast system, and more particularly, to an apparatus and method for transmitting / receiving content through a heterogeneous network in a broadcast system supporting a multimedia service based on an Internet protocol.
서비스 제공자는 하나의 서비스 화면에 더 많은 정보를 제공하려고 한다. 이에 따라서, 흔히 보는 뉴스의 화면은 ticker와 주식 정보와 뉴스 타이틀 때문에 앵커의 얼굴은 화면이 차지하는 비중이 작아 질 수 있다.The service provider tries to provide more information on one service screen. As a result, the screen of the frequently viewed news may have a smaller portion of the screen due to the ticker, stock information, and news titles.
이러한 서비스를 제공하는 현재의 방송과 통신 환경은 점차 복잡해지고 있다. 각 기술들은 리비젼(revision)을 거듭하면서 다른 기술과 혼합되고 있다. 이에 따라서, 소비자는 컨버전스 환경에서 여러 개의 컨텐츠를 동시에 소비하고 있다. 또한 소비자는 TV를 보면서 제시된 검색어를 태블릿(tablet)에 넣고 검색하고, 그 결과를 볼 수도 있다. 또한 수신기의성능도 높아짐에 따라서 큰 화면 및 고해상도의 디스플레이(display)와 함께 방송과 통신을 융합하여 집에서나 이동 중에도 복수의 이종통신망에 접근이 가능한 장치들이 출시되고 있다.Current broadcasting and communication environments providing such services are becoming increasingly complex. Each technology is being blended with other technologies through revisions. As a result, consumers consume multiple contents simultaneously in a convergence environment. Consumers can also search for TVs on tablets and view the results. In addition, as the performance of the receiver is increased, devices capable of accessing a plurality of heterogeneous communication networks at home or on the move are being introduced by fusing broadcast and communication together with a large screen and a high resolution display.
이와 같이 다양한 환경에서 서비스를 소비자에게 유연하게 전달하기 위한 새로운 방안이 요구된다.As such, new methods for flexibly delivering services to consumers in various environments are required.
본 발명은 서비스 제공자가 복수 개의 컨텐츠를 사용하여 서비스를 구성하고 이를 이종망(heterogeneous network) 상의 하나 또는 복수 개의 경로를 사용하여 전송하는 장치 및 방법을 제공한다.The present invention provides an apparatus and method for constructing a service using a plurality of contents by a service provider and transmitting the same using one or a plurality of paths on a heterogeneous network.
본 발명은 컨버전스 환경에서 복수 개의 컨텐츠를 사용하여 서비스를 소비할 수 있는 장치 및 방법을 제공한다.The present invention provides an apparatus and method for consuming a service using a plurality of contents in a convergence environment.
본 발명의 실시 예에 따른 방법은 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 전송할 컨텐츠 전송 방법에 있어서, MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 생성하는 과정 및 상기 적어도 하나의 패키지를 단말로 제공하는 과정을 포함하고, 상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함한다.According to an embodiment of the present invention, a method for transmitting a content to be transmitted through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol is provided. The method includes generating at least one package including an MPEG Media Transport (MMT) item. And providing the at least one package to the terminal, wherein the MMT item includes MMT assets and configuration information of the MMT assets.
본 발명의 실시 예에 따른 장치는 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 전송할 컨텐츠 전송 장치에 있어서, MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 생성하는 패키지 생성부 및 상기 적어도 하나의 패키지를 단말로 전송하는 전송부를 포함하고, 상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함한다.An apparatus according to an embodiment of the present invention is a content transmission apparatus to be transmitted through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol, and generates at least one package including an MMT (MPEG Media Transport) item. A package generation unit and a transmission unit for transmitting the at least one package to the terminal, wherein the MMT item includes MMT assets and configuration information of the MMT assets.
본 발명의 실시 예에 따른 방법은 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 컨텐츠 수신 방법에 있어서, MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 수신하는 과정 상기 패키지를 분석하는 과정 및 상기 분석 결과에 따라 상기 패키지에 포함된 MMT item, MMT asset을 처리하는 과정을 포함하고, 상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함한다.According to an embodiment of the present invention, in a method for receiving content through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol, a method of receiving at least one package including an MMT (MPEG Media Transport) item Analyzing the package and processing an MMT item and an MMT asset included in the package according to the analysis result, wherein the MMT item includes MMT assets and configuration information of MMT assets.
본 발명의 실시 예에 따른 장치는 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 컨텐츠 수신 장치에 있어서, MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 수신하는 수신부 상기 패키지를 분석하는 패키지 분석부 및 상기 분석 결과에 따라 상기 패키지에 포함된 MMT item, MMT asset을 처리하는 처리부를 포함하고, 상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함한다.An apparatus according to an embodiment of the present invention is a receiving unit for receiving at least one package including an MMT (MPEG Media Transport) item in a content receiving apparatus through a heterogeneous network in a broadcasting system supporting a multimedia service based on an Internet protocol. A package analyzing unit analyzing the package and a processing unit processing an MMT item and an MMT asset included in the package according to the analysis result, wherein the MMT item includes MMT assets and configuration information of the MMT assets.
도 1은 MMT를 기반으로 한 전송 시스템 아키텍쳐를 나타낸 블록 구성도,1 is a block diagram showing a transmission system architecture based on MMT;
도 2는 MMT item, MMT asset, 및 패키지 구성도,2 is an MMT item, an MMT asset, and a package configuration diagram;
도 3은 패키지 및 슬라이스 리스트 구성도,3 is a package and slice list configuration diagram,
도 4는 MMT item에서의 시간적 및 공간적인 MMT asset 구성도,4 is a diagram illustrating a temporal and spatial MMT asset configuration of an MMT item;
도 5는 본 발명의 실시 예에 따른 서비스 제공자의 블록 구성도,5 is a block diagram of a service provider according to an embodiment of the present invention;
도 6은 본 발명의 실시 예에 따른 서비스 제공자의 동작 흐름도,6 is an operation flowchart of a service provider according to an embodiment of the present invention;
도 7은 본 발명의 실시 예에 따른 재생 장치의 블록 구성도,7 is a block diagram of a playback apparatus according to an embodiment of the present invention;
도 8a 및 도 8b는 본 발명의 실시 예에 따른 재생 장치의 동작 흐름도.8A and 8B are flowcharts illustrating operations of a playback apparatus according to an embodiment of the present invention.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다. 이때 첨부된 도면에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의하여야 한다. 또한 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. In this case, it should be noted that like elements are denoted by like reference numerals as much as possible. In addition, detailed descriptions of well-known functions and configurations that may blur the gist of the present invention will be omitted.
또한 이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석될 수 없음에 유의해야 한다.It should also be noted that the terms or words used in the specification and claims described below are not to be construed as being limited to the common or dictionary meaning.
상기 MMT 표준은 단방향 통신, 고정된 프레임 크기로 인한 전송의 비효율성, 오디오/비디오에 특화되어 있는 전송 프로토콜 및 인터넷 프로토콜(IP: Internet Protocol)을 사용하여 전송할 시에 불필요한 오버헤드 발생한다는 MPEG-2 TS(Moving Picture Expert Group-2 Transport Stream)의 한계점을 극복하기 위해 MPEG에 의해 제안되었다. 예컨대 상기 MMT 표준은 이종망을 통해 복수 개의 컨텐츠를 효율적으로 전송하기 위해 적용될 수 있다. 여기서 상기 복수 개의 컨텐츠는 비디오(Video)/오디오(Audio)/어플리케이션(Application) 등에 의한 멀티미디어 요소를 가지는 컨텐츠의 집합을 의미한다. 그리고 상기 이종망은 방송 네트워크와 통신 네트워크 등이 혼재하는 네트워크를 의미한다.The MPEG-2 standard introduces unnecessary overhead when transmitting using unidirectional communication, transmission inefficiency due to fixed frame sizes, transmission protocols specific to audio / video, and Internet protocol (IP). It was proposed by MPEG to overcome the limitations of Moving Picture Expert Group-2 Transport Stream (TS). For example, the MMT standard may be applied to efficiently transmit a plurality of contents through heterogeneous networks. Here, the plurality of contents means a set of contents having multimedia elements by video, audio, and application. The heterogeneous network refers to a network in which a broadcast network and a communication network are mixed.
뿐만 아니라 상기 MMT 표준은 멀티미디어 서비스를 위한 전송 네트워크에서의 기본 기술이 되고 있는 IP에 보다 친화적인 전송 기술을 정의하는 것을 목적으로 하고 있다.In addition, the MMT standard aims to define a transport technology that is more friendly to IP, which is a basic technology in a transport network for multimedia services.
따라서 상기 MMT 표준은 대표적으로 IP를 기반으로 변화하는 멀티미디어 서비스 환경에서 효율적인 MPEG 전송 기술을 제공하기 위한 것으로서, 지속적인 연구와 함께 표준화가 진행되고 있다. 특히 상기 MMT 표준에서는 혼합(hybrid) 네트워크(또는 이종망)와 혼합 콘텐츠(Hybrid content)를 제공하고자 하는 근래의 멀티미디어 서비스 환경에서 효율적인 MPEG 전송 기술을 제공하기 위한 방안 마련이 필요하다.Accordingly, the MMT standard is to provide an efficient MPEG transmission technology in a multimedia service environment that is typically changed based on IP, and standardization has been progressed with continuous research. In particular, the MMT standard needs to provide a method for providing an efficient MPEG transmission technology in a multimedia service environment in which a hybrid network (or a heterogeneous network) and a hybrid content are provided.
따라서 본 발명에서는 서비스 제공자가 복수 개의 컨텐츠를 사용하여 서비스를 구성하고 이를 이종망(heterogeneous network) 상의 하나 또는 복수 개의 경로를 사용하여 전송하면 컨버전스 환경에서 이러한 서비스가 소비될 수 있도록 한다.Therefore, in the present invention, if a service provider constructs a service using a plurality of contents and transmits the service using one or a plurality of paths on a heterogeneous network, the service can be consumed in a converged environment.
도 1은 MMT를 기반으로 한 전송 시스템 아키텍쳐를 나타낸 블록 구성도이다.1 is a block diagram illustrating a transmission system architecture based on MMT.
MMT는 전송 시스템 환경을 Encapsulation(100), Delivery(120), 및 Control(130)로 나누어 역할을 정하고 협조 관계에 있도록 구성한다.The MMT divides a transmission system environment into an encapsulation (100), a delivery (120), and a control (130) to configure a role and to be in a cooperative relationship.
Encapsulation 레이어(하기, '레이어 E'라 칭함)는 MMT asset들을 사용하여 MMT item들을 생성해야 한다. MMT asset들은 비디오(Video), 오디오(Audio), 웹 컨텐츠(Web contents), 에플리케이션(Application) 등과 같은 요소로 구성된다. 각 MMT asset는 사용자 소비를 위한 독립된 컨텐츠가 될 수 있다. 레이어 E는 두 개의 서브 레이어들을 갖는다. 두 번째 서브 레이어(E.2)는 MMT asset들을 생성하고, MMT asset의 구성 정보를 제공한다. E.2는 MMT asset 정보를 제공하기 위해 Control 레이어들과 통신한다. 첫 번째 서브 레이어(E.1)는 MMT 패키지를 생성한다. MMT 패키지는 사용자에 의해 소비되는 MMT item들의 전달을 위해 저장 및 사용된다. MMT 패키지는 MMT item들의 라이브(live) 타입, MMT item들의 파일(file) 타입 및 MMT item들의 하이브리드(hybrid) 타입을 전달할 수 있다. E.1은 또한 패키지에서 MMT asset들의 관련 정보를 제공한다. MMT 패키지의 전달을 위해서 레이어 E는 레이어 C 및 레이어 D와 통신한다.An encapsulation layer (hereinafter, referred to as 'layer E') should generate MMT items using MMT assets. MMT assets are composed of elements such as video, audio, web contents, applications, and the like. Each MMT asset may be independent content for user consumption. Layer E has two sublayers. The second sub-layer E.2 generates MMT assets and provides configuration information of the MMT assets. E.2 communicates with control layers to provide MMT asset information. The first sub layer E.1 generates an MMT package. The MMT package is stored and used to deliver MMT items consumed by the user. The MMT package may deliver a live type of MMT items, a file type of MMT items, and a hybrid type of MMT items. E.1 also provides relevant information of MMT assets in a package. Layer E communicates with layer C and layer D to deliver the MMT package.
Delivery 레이어(하기, '레이어 D'라 칭함)는 레이어 C로부터 수신된 MMT 패키지 및 데이터를 수신단으로 전달해야 한다. 효율적인 전달을 위해서, 레이어 D는 엑세스 유닛(AU: Access Unit)을 사용한다. 각 MMT 아이템들(또는 패키지)은 QoS 특성이 상이할 수 있기 때문에 상이한 타입의 AU를 가질 수 있다. 레이어 T는 또한 두 개의 서브 레이어들로 구성된다. D.1은 레이어 C로부터의 패키지의 특성 및 데이터를 기반으로 AU를 생성한다. QoS를 위해서 D.1은 레이어 C 및 레이어 D와 통신한다. D.2는 D 프레임을 생성하고, 플로우 제어의 기능(functionality)을 제공한다. D.2는 또한 QoS 개런티(guarantee)를 위해 네트워크 노드들에 의해 사용될 수 있는 D-Frame의 정보를 제공한다.The delivery layer (hereinafter, referred to as 'layer D') must deliver the MMT package and data received from the layer C to the receiving end. For efficient delivery, layer D uses an access unit (AU). Each MMT item (or package) may have a different type of AU because the QoS characteristics may be different. Layer T also consists of two sublayers. D.1 creates an AU based on the characteristics and data of the package from layer C. For QoS, D.1 communicates with Layer C and Layer D. D.2 generates D frames and provides the functionality of flow control. D.2 also provides information on the D-Frame that can be used by network nodes for QoS guarantees.
Control 레이어(하기, '레이어 C'라 칭함)는 MMT asset들 및 MMT item 소비를 위해 요구되는 모든 기능들을 관리한다. 레이어 C.1은 MMT asset들, MMT item 정보 및 소비 관련된 정보의 기능을 제공하고, MMT 패키지에 대한 연결을 관리해야 하며, 코덱(CODEC) 및 메모리(Memory) 상태와 같은 장치 능력(capability)들을 관리한다. 레이어 C.2는 MMT D Frame에 대한 레이어 C에서 생성된 데이터 전송 및 세션 매니지먼트를 해야 한다.The control layer (hereinafter, referred to as 'layer C') manages all functions required for MMT assets and MMT item consumption. Layer C.1 provides the functionality of MMT assets, MMT item information and consumption related information, manages connectivity to MMT packages, and provides device capabilities such as codec and memory status. Manage. Layer C.2 shall perform session management and data transmission generated in layer C for MMT D frames.
상기 Encapsulation(100)은 서비스 제공자가 제공하려는 서비스를 유형화한다(즉, 서비스를 embodiment하거나 encapsulate함.).The Encapsulation 100 types (ie, embodies or encapsulates) the service that the service provider intends to provide.
상기 Delivery(120)는 서비스 제공자와 소비자 사이에 가용한 경로 중의 하나가 선택되었을 때 서비스에서 요구하는 품질(quality)로 컨텐츠를 전송한다.The delivery 120 transmits the content at the quality required by the service when one of the available paths between the service provider and the consumer is selected.
상기 Control(130)은 서비스를 개시하기 위해 현재 가용한 서비스의 목록과 함께 해당 서비스를 구성하고 있는 컨테이너와 컨텐츠가 어떠한 경로를 통해 제공 가능한지를 표시한다. The control 130 displays a path through which the container and the content constituting the service can be provided along with a list of services currently available for starting the service.
도 2는 MMT item, MMT asset, 및 패키지의 구성도를 나타낸다.2 illustrates a configuration diagram of an MMT item, an MMT asset, and a package.
MMT Encapsulations은 MMT item, MMT asset, 패키지, Slice로 구성된다. MMT item은 서비스 제공자가 제공하려는 서비스로서, 소비자가 구매할 수 있는 최소 단위를 나타낸다. MMT item은 MMT asset들과 MMT asset들의 구성 정보로 이루어진다. MMT Encapsulations are composed of MMT item, MMT asset, package, and slice. The MMT item is a service to be provided by a service provider, and represents a minimum unit that a consumer can purchase. The MMT item consists of MMT assets and configuration information of the MMT assets.
MMT asset은 MMT item을 구성하는 구성요소로서, 소비될 수 있는 최소 단위를 나타낸다. 예컨데, MMT asset은 MPEG-2 TS, MPEG-2 PS(Moving Picture Expert Group-2 Program Stream), mp4, mp21, MPEG-U Widget, Application, Image, DASH(Dynamic Adaptive Streaming over HTTP) 등이 있다. 또한, MMT asset은 서로 다른 MMT asset 제공자(provider)로부터 제공될 수 있다.The MMT asset is a component constituting the MMT item and represents a minimum unit that can be consumed. For example, the MMT asset includes MPEG-2 TS, Moving Picture Expert Group-2 Program Stream (MPEG-2 PS), mp4, mp21, MPEG-U Widget, Application, Image, and Dynamic Adaptive Streaming over HTTP (DASH). In addition, the MMT asset may be provided from different MMT asset providers.
패키지는 MMT asset들을 encapsulate한다. 상기 MMT item은 하나 또는 여러 개의 패키지에 포함되어 전송된다.The package encapsulates MMT assets. The MMT item is included in one or several packages and transmitted.
Slice는 MMT asset을 자른 하나 또는 여러 개의 조각을 나타낸다.Slice represents one or several slices of an MMT asset.
상기 패키지는 하나 또는 여러 개의 MMT asset들을 포함할 수 있다. 상기 패키지에는 MMT asset의 목록, 각 MMT asset의 전송 특성, 상세 description, slice 목록, MMT item 구성 정보, 그리고 payload로서 MMT asset을 포함한다.The package may include one or several MMT assets. The package includes a list of MMT assets, transmission characteristics of each MMT asset, detailed description, slice list, MMT item configuration information, and MMT asset as payload.
1.1.1 구성 요소1.1.1 Components
도 3은 패키지 및 슬라이스 리스트 구성도를 나타낸 것이다.3 shows a package and slice list configuration diagram.
패키지는 도 3에 도시된 바와 같이, MMT asset의 목록, MMT item 구성정보, 그리고 MMT asset로 구성되어 있다. 상기 MMT asset의 목록은 각 MMT asset의 전송 특성, 상세 description, slice 목록을 포함한다.As illustrated in FIG. 3, the package includes a list of MMT assets, MMT item configuration information, and MMT assets. The list of MMT assets includes transmission characteristics, detailed description, and slice list of each MMT asset.
1.1.1.1 MMT asset 목록1.1.1.1 MMT asset list
상기 MMT asset 목록은 하나의 패키지 내의 MMT asset의 목록을 제공한다. 상기 MMT asset list는 다른 패키지 내의 asset 목록도 제공한다. 상기 MMT asset list에는 MMT asset 별로 id, 전송특성, 상세 description, 그리고 slice list가 포함된다. 실제 MMT asset은 패키지의 payload로서 저장된다.The MMT asset list provides a list of MMT assets in one package. The MMT asset list also provides a list of assets in another package. The MMT asset list includes id, transmission characteristics, detailed description, and slice list for each MMT asset. The actual MMT asset is stored as payload of the package.
1.1.1.1.1 전송특성(Transport characteristics)1.1.1.1.1 Transport characteristics
MMT asset을 재생하기 위해 recommended되는 서비스 제공자 관점의 전송특성 (Transport characteristics)이 표시된다. 전송특성은 전송될 때 품질을 보장하기 위한 요구사항이다. MMT asset이 제대로 전송되고 소비되기 위해 필요한 정보들을 알려준다. MMT asset은 MMT item의 시간축 상에서 다른 MMT asset들과 완벽히 또는 loosely 하게 동기화되어 재생될 수 있다. 또한 서비스 제공자에 연결된 모든 클라이언트들이 wall clock 등을 기준으로 동시에 재생되어야 할 수도 있다. 또는 MMT asset의 종류에 따라 에러나 손실 없이 전송되어야 하거나(widget, program) 손실을 허용할 수도 있다(adaptive streaming, frame drop). 마지막으로 MMT asset은 unicast나 bidirectional connection을 필요로 할 수 있다 연결 종류는 1대1, 1대n, 그리고 한방향, 양방향 등이 있다. 또한 손실 불허, 손실 허용, 연결관계 등이 Transport characteristics에 포함된다.Transport characteristics of the service provider's point of view recommended for playing the MMT asset are displayed. Transmission characteristics are a requirement to ensure quality when transmitted. Informs the information required for the MMT asset to be properly transmitted and consumed. The MMT asset may be played in perfect or loosely synchronized with other MMT assets on the time axis of the MMT item. In addition, all clients connected to the service provider may need to be played simultaneously based on the wall clock. Alternatively, depending on the type of MMT asset, transmission may be performed without error or loss (widget, program) or loss may be allowed (adaptive streaming, frame drop). Finally, MMT assets may require unicast or bidirectional connections. Connection types include one-to-one, one-to-n, one-way and two-way. In addition, loss loss, loss allowance, and connection relationship are included in the transport characteristics.
이러한 서비스 제공자 관점의 요구사항들은 MMT-Delivery나 MMT-Control로 전달되어 각각에서 제공하는 기능에 따라 수치적, 물리적 특성으로 매핑되는데 사용된다.These requirements from the service provider's point of view are passed to MMT-Delivery or MMT-Control and used to map numerical and physical characteristics according to the functions provided by each.
1.1.1.1.2 상세 description1.1.1.1.2 Detailed description
MMT asset을 개별적으로 소비하거나 저장하기 위해 필요한 정보들 예컨대, MMT asset의 파일명(filename), mime-type 등이 제공된다. MMT asset을 별도로 저장하거나, 별도로 소비하려고 할 때 사용한다. 상세 description에는 Asset의 properties이 열거된 내용 외에도 Asset의 속성값이 되는 것들이 포함될 수도 있다.Information required for individually consuming or storing the MMT asset, for example, a filename, a mime-type, and the like of the MMT asset are provided. Used to store or separately consume MMT assets. The detailed description may include things that are property values of the asset, in addition to contents in which the properties of the asset are enumerated.
1.1.1.1.3 Slice list1.1.1.1.3 Slice list
도 3에 도시된 바와 같이, MMT asset은 slice의 단위로 나누어 payload에 저장된다. slice는 하나 또는 여러 개가 될 수 있고 각각의 slice의 길이는 같지 않아도 된다. MMT asset의 특징에 따라 slice를 시간적, 공간적, 의미적으로 분리하여 저장하면 D1에서 AU(Access Unit)로 매핑시키는데 사용할 수 있다. slice는 payload 상의 상대 위치, 길이, 그리고 해당 slice의 pts 시간을 가진다. 상기 Slice 목록은 MMT asset을 자른 조각들이 payload 상에 어떻게 분포되어 있는지를 알려준다.As shown in FIG. 3, the MMT asset is divided into slices and stored in a payload. The slices can be one or several and each slice does not have to be the same length. According to the characteristics of the MMT asset, when slices are separated and stored temporally, spatially and semantically, they can be used to map from D1 to AU (Access Unit). A slice has a relative position on the payload, its length, and the pts time of that slice. The Slice list indicates how the slices cut the MMT asset are distributed on the payload.
1.1.1.2 MMT asset - slices구조1.1.1.2 MMT asset-slices structure
MMT item은 저장과 전송에 사용될 수 있도록 설계되었다. 일반 구조는 기본적으로 저장을 위한 용도로 사용된다. 인터리브는 스트리밍 전송을 위한 용도로 사용된다. 라이브 구조는 무한 길이의 라이브 스트리밍 전송을 위해 사용된다.MMT items are designed to be used for storage and transmission. The general structure is basically used for storage purposes. Interleave is used for streaming transmission. The live structure is used for live streaming of infinite length.
1.1.1.2.1 일반1.1.1.2.1 General
[헤더 | 리스트 | 구성][MMT asset A, B, C ][Header | List | Configuration] [MMT asset A, B, C]
하나의 MMT asset은 하나의 slice로 저장된다.One MMT asset is stored as one slice.
1.1.1.2.2 일반+trick mode(트릭 모드)1.1.1.2.2 Normal + trick mode
[헤더 | 리스트 | 구성][MMT asset A1A2A3..., B1B2B3..., C1C2C3... ][Header | List | Configuration] [MMT asset A1A2A3 ..., B1B2B3 ..., C1C2C3 ...]
도 3에 도시된 바와 같이, 하나의 MMT asset은 여러 개의 slice로 나뉘어 저장된다. MMT asset 개별 시간축 상의 시점은 slice의 pts(presentation time stamp)를 통해 알 수 있다.As shown in FIG. 3, one MMT asset is divided into several slices and stored. The time point on the MMT asset individual time axis may be known through a presentation time stamp (pts) of the slice.
Slice는 pts를 기준으로 초단위 또는 픽처의 그룹(Group of picture) 단위로 잘라 제공한다.Slice is cut and provided in units of seconds or group of pictures based on pts.
1.1.1.2.3 인터리브1.1.1.2.3 Interleaving
[헤더 | 리스트 | 구성][MMT asset A1B1C1A2B2C2A3B3C3, ... ][Header | List | Configuration] [MMT asset A1B1C1A2B2C2A3B3C3, ...]
도 3에 도시된 바와 같이, 하나의 MMT asset은 여러 개의 slice로 나뉘어 저장된다. 같이 재생되어야 할 MMT asset들이 인터리브(interleave)되어 저장된다.As shown in FIG. 3, one MMT asset is divided into several slices and stored. MMT assets to be reproduced together are interleaved and stored.
Slice는 pts를 기준으로 초단위 또는 픽처 그룹(group of picture) 단위로 잘라 제공한다. MMT item의 시간축 상에서 표현되는 시간의 순서에 따라 같은 시간대를 표현하는 MMT asset의 slice들끼리 그룹(group)으로 제공될 수 있다.Slice is provided by cutting in units of seconds or group of pictures based on pts. Slices of MMT assets representing the same time zone may be provided as a group according to the order of time expressed on the time axis of the MMT item.
1.1.1.2.4 라이브1.1.1.2.4 Live
[헤더 | 리스트 | 구성][MMT asset A1B1C1][헤더 | 리스트 | 구성][MMT asset A2B2C2]...[Header | List | Configuration] [MMT asset A1B1C1] [Header | List | Configuration] [MMT asset A2B2C2] ...
여러 개의 같이 재생되어야 할 MMT asset들이 적당한 시간 단위로 slice로 구분되어 저장된다. Several MMT assets to be played together are divided into slices and stored in appropriate time units.
패키지는 MMT asset들의 일부만 전송하고 뒤이어 전송되는 패키지들 중 같은 id를 가지는 패키지가 MMT asset의 뒷부분을 전송하고 있는 것으로 간주한다. 이때, sequence number를 확인하여 이전의 패키지의 sequence number와 이후의 패키지의 sequence number가 1 만큼 증가했는지 확인한다. 만약 sequence number가 1 만큼 증가하지 않았다면, 이는 특수 목적을 위해 패키지가 반복 전송된 경우이므로 전송에 문제가 없다면 사용하지 않는다. 그러나 sequence number가 1보다 많이 증가했다면, 중간에 전송되었어야 할 패키지를 수신하지 못한 것이므로 재전송을 요청하거나 패키지 재생에 필요한 파라미터를 재설정(reset) 해야 한다.A package transmits only a part of MMT assets and assumes that a package having the same id among subsequent packages is transmitting the rear part of the MMT asset. At this time, the sequence number is checked to determine whether the sequence number of the previous package and the sequence number of the subsequent package are increased by one. If the sequence number has not increased by 1, this is a case where the package has been repeatedly sent for special purposes and should not be used unless there is a problem with the transfer. However, if the sequence number has increased by more than 1, you have not received a package that should have been sent in the middle, so you will need to request retransmission or reset the parameters needed to play the package.
브로드캐스트 전송을 고려하여 패키지의 간격을 전송 시간과 전송률에 따라 조절할 수 있다. 브로드캐스트로 패키지가 전송되는 경우 전송률은 이론적으로 고정 비트 레이트로 계산하고, 일정 시간, 예를 들어 0.7초마다 하나 또는 그 이상의 정수개의 패키지의 헤더(header)가 시작되도록 패키지의 크기를 지정한다. 이때 매 0.7초에 해당하지 않는 중간 구간의 패키지의 헤더에서는 부가 정보에 해당하는 정보, 예를 들어 MMT asset description, 전송특성, MMT item 구성정보들이 생략될 수 있다. 이 때, 같은 패키지 id를 갖는 MMT item 사이에서는 생략된 정보가 계속 유효한 것으로 간주된다.Considering the broadcast transmission, the package interval can be adjusted according to the transmission time and transmission rate. When a package is transmitted by broadcast, the rate is theoretically calculated at a fixed bit rate and specifies the size of the package so that the header of one or more integer packages starts at a given time, for example, 0.7 seconds. In this case, information corresponding to additional information, for example, MMT asset description, transmission characteristics, and MMT item configuration information may be omitted from the header of the package of the intermediate section that does not correspond to 0.7 seconds. At this time, the omitted information is considered to be valid between MMT items having the same package id.
1.1.1.3 MMT item 구성정보1.1.1.3 MMT item configuration information
도 4는 MMT item에서의 시간적 및 공간적인 MMT asset 구성도를 나타낸다.4 illustrates a temporal and spatial MMT asset configuration diagram of an MMT item.
MMT item은 MMT asset들로 이루어져 있다.MMT item is composed of MMT assets.
MMT item 구성은 MMT item의 시간 및 공간상에서 해당/다른 encapsulation의 구성, encapsulation내의 MMT asset의 구성, encapsulation 내의 MMT asset 내의 MMT asset component의 구성을 지시한다. MMT item 구성정보는 하위 구성요소로서 다음과 같은 entity를 가지고, MMT item 구성정보를 통해서 서비스 제공자가 제공하려는 의도대로 MMT asset을 MMT item의 재생 시간 및 공간 상에 어떻게 배치하는 지와 각 MMT asset 간의 관계를 알려준다.The MMT item configuration indicates the configuration of the corresponding / different encapsulation in the time and space of the MMT item, the configuration of the MMT asset in the encapsulation, and the configuration of the MMT asset component in the MMT asset in the encapsulation. The MMT item configuration information has the following entities as sub-components, and how the MMT asset is arranged on the playing time and space of the MMT item and between each MMT asset as intended by the service provider through the MMT item configuration information Tell the relationship.
- 다른 패키지의 서비스 구성정보-Service configuration information of other packages
- 같은 또는 다른 패키지내의 MMT assetMMT assets in the same or different packages
- 같은 또는 다른 패키지 내의 MMT asset 내의 componentComponent in an MMT asset in the same or another package
MMT item 구성정보의 서술 내용Description of MMT item configuration information
- 도 4에 도시된 바와 같이, MMT item의 재생 시간상에서 MMT asset의 어떤 부분이 언제 표시되고 언제까지 표시될지를 서술한다.As illustrated in FIG. 4, it describes when and what part of the MMT asset is displayed and when it is displayed on the reproduction time of the MMT item.
- 도 4에 도시된 바와 같이, MMT item의 표현 공간상에서 MMT asset의 어떤 부분이 어디에 표시되는지를 서술한다.As illustrated in FIG. 4, it describes which part of the MMT asset is displayed and where in the expression space of the MMT item.
- MMT asset간의 관계를 표시한다.Indicates a relationship between MMT assets.
1.1.1.3.1 Schema1.1.1.3.1 Schema
1.1.1.3.2 Semantics1.1.1.3.2 Semantics
MMT item의 구성정보는 xml document로, seq, par, sel element를 사용하여 나타낸다. xml 이외의 다른 포맷일 경우 해당 역할을 하는 다른 방법(예컨대, 필드, ISOFF 등의 박스 등)이 가능하다.Configuration information of MMT item is an xml document and is represented using seq, par, and sel elements. If the format is other than xml, other methods (e.g. fields, boxes such as ISOFF, etc.) that play a corresponding role are possible.
- Seq element는 자식 element를 순서대로 실행한다. The Seq element executes the child elements in order.
- Par element는 자식 element를 병렬로 동시에 실행한다.Par elements execute child elements in parallel at the same time.
- Sel element는 자식 element중 하나만을 선택하여 실행한다.-Sel element selects and executes only one of its child elements.
위 세 가지 element는 start를 속성으로 가진다. The three elements have start as an attribute.
- Start는 해당 element가 시작하는 MMT item 시간축 상의 시간이다.Start is the time on the MMT item time base that the element starts at.
위 세 가지 element는 div를 자식 element로 가진다.The above three elements have divs as child elements.
- Div는 MMT asset의 시간적, 공간적 place holder이다.Div is a temporal and spatial place holder for MMT assets.
Div element는 target_characteristic을 속성으로 가진다.Div element has target_characteristic as an attribute.
- Target_characteristic은 MMT asset을 실행하기 위해 요구되는 특성이다. 서술된 특성을 모두 만족하지 않아도 MMT item을 재생하기 위해 available한 재생 장치들 중 가장 근접한 재생 장치가 재생하는 것이 권고(recommend)된다.Target_characteristic is a characteristic required for executing the MMT asset. Even if all of the above described characteristics are not satisfied, it is recommended that the closest reproducing apparatus available among those available for reproducing the MMT item reproduce.
- Target_characteristic의 값은 main, 3d, interactivity, remote, n-screen, mvc 등이 있다. 그러나 이에 한정하지 않는다.Target_characteristic values include main, 3d, interactivity, remote, n-screen, and mvc. However, this is not limitative.
°Main: 가장 중심이 되는 재생 장치를 의미한다. ° Main: means the playback device which is the center.
°3d: 3-D 재생 지원 장치를 의미한다. ° 3d: means a device that supports 3-D playback.
°Mvc: MVC 재생 지원 장치를 의미한다. ° Mvc: It means MVC playback support device.
°N-screen: n-screen 구성 장치 또는 n-screen 구성에 참여하는 복수 개의 장치를 의미한다. N-screen: means an n-screen configuration device or a plurality of devices participating in n-screen configuration.
° Remote: remote controller를 의미한다. Remote: stands for remote controller.
°Interactivity: 사용자 interactive input을 받을 수 있는 장치를 의미한다. Interactivity: A device that can receive user interactive input.
이를 사용하여 아래와 같은 관계를 나타낼 수 있다;This can be used to represent the following relationships;
관계 1. MMT asset A는 MMT asset B가 있어야만 재생할 수 있다. (dependent) Relationship 1. MMT asset A can be played only when MMT asset B is present. (dependent)
- MMT asset B는 하기 <표 1>과 같이, MMT asset A가 없어도 독립적으로 재생할 수 있다. (independent)-As shown in Table 1, the MMT asset B can be independently reproduced even without the MMT asset A. (independent)
표 1
Figure PCTKR2012000453-appb-T000001
Table 1
Figure PCTKR2012000453-appb-T000001
관계 2. MMT asset C, MMT asset D, MMT asset E는 하기 <표 2>와 같이, 시간축 상에서 하나만 선택되는 관계이다.(OR) Relationship 2. MMT asset C, MMT asset D, and MMT asset E are relationships in which only one is selected on the time axis as shown in Table 2 below.
표 2
Figure PCTKR2012000453-appb-T000002
TABLE 2
Figure PCTKR2012000453-appb-T000002
관계 3. MMT asset F, MMT asset G, MMT asset H는 하기 <표 3>과 같이, 꼭 같이 실행되어야 하는 관계이다. (보다 강제적인 AND) Relationship 3. MMT asset F, MMT asset G, and MMT asset H are relationships that must be performed together as shown in Table 3 below. (More compelling AND)
표 3
Figure PCTKR2012000453-appb-T000003
TABLE 3
Figure PCTKR2012000453-appb-T000003
MMT asset의 시간적으로 어느 부분을, MMT item의 시간적으로 어디에 재생할 지는 하기 <예 1>과 같이 표현할 수 있다. 하기 <예 1>에서 MMT asset의 시간적 부분은 URL fragment identifier를 사용하였다.Which part of the MMT asset is temporally and where to play the MMT item in time can be expressed as in <Example 1>. In <Example 1>, the temporal portion of the MMT asset uses a URL fragment identifier.
<예 1> 하기 <표 4>의 Syntax는 MMT asset 1, 또는 MMT asset 1과 MMT asset 2의 100초부터 200초까지를 MMT item 시간 50초에 재생하는 경우를 나타낸다.<Example 1> Syntax of Table 4 below shows a case in which MMT asset 1 or MMT asset 1 and MMT asset 2 are reproduced from 100 seconds to 200 seconds in MMT item time 50 seconds.
표 4
Figure PCTKR2012000453-appb-T000004
Table 4
Figure PCTKR2012000453-appb-T000004
MMT asset의 공간적으로 어느 부분을, MMT item의 공간적으로 어느 부분에 재생할지에 대해서 하기의 <예 2>와 같이 표현할 수 있다.Which part of the MMT asset is spatially reproduced and which part of the MMT item is spatially reproduced can be expressed as in <Example 2> below.
<예 2> 하기의 Syntax는 MMT asset 1의 (0,0 x 800,600)을 MMT item의 (100,100 x 800,600)에 부착(attach)하는 경우를 나타낸다. (0,0) 및 (100,100)는 (x축, y축)을 나타내고, (800,600)은 (width, height)를 나타낸다.<Example 2> The following Syntax shows a case where (0,0 × 800,600) of MMT asset 1 is attached to (100,100 × 800,600) of MMT item. (0,0) and (100,100) represent (x-axis, y-axis), and (800,600) represent (width, height).
<seq><seq>
<par>       <par>
<div x=100 y=100 width=800 height=600 source="self://asset#identifier=2*time(100s,200s)*rect(0,0,800,600)">  <div x = 100 y = 100 width = 800 height = 600 source = "self: // asset # identifier = 2 * time (100s, 200s) * rect (0,0,800,600)">
</par>      </ par>
</seq></ seq>
MMT item이 여러 장치에서 재생될 때, 어떤 MMT asset이 어떤 장치에서 재생될지는 하기 <예 3>과 같이 표현할 수 있다.When an MMT item is played on various devices, which MMT asset is played on which device can be expressed as in <Example 3>.
<예 3> 하기 Syntax는 MMT asset 1은 main device에, MMT asset 2는 second device에 표시하는 경우를 나타낸다. <Example 3> In the following syntax, MMT asset 1 is displayed on the main device and MMT asset 2 is displayed on the second device.
target_characteristics = main, 3d, interactivity, remote, n-screen, mvc...target_characteristics = main, 3d, interactivity, remote, n-screen, mvc ...
<seq><seq>
<par>    <par>
<div target_characteristics="main" source="self://asset#identifier=1">       <div target_characteristics = "main" source = "self: // asset # identifier = 1">
<div target_characteristics="interactivity | remote" source="self://asset#identifier=2"> <div target_characteristics = "interactivity | remote" source = "self: // asset # identifier = 2">
</par>   </ par>
</seq></ seq>
상기의 Syntax에서 나타낸 바와 같이, Asset 1은 main(예컨대, TV 화면) device에서, Assest 2는 second device(즉, 핸드폰의 웹페이지)로 사용자에게 표시할 수 있다.As shown in the above Syntax, Asset 1 can be displayed to the user as a main device (eg, TV screen), and Assest 2 as a second device (ie, a web page of a mobile phone).
1.1.2 Syntax1.1.2 Syntax
Syntax는 하기 <표 5>와 같다.Syntax is shown in Table 5 below.
표 5
Figure PCTKR2012000453-appb-T000005
Table 5
Figure PCTKR2012000453-appb-T000005
Figure PCTKR2012000453-appb-I000001
Figure PCTKR2012000453-appb-I000001
1.1.3 Semantics 1.1.3 Semantics
sequence number 사용여부; 라이브의 경우에만 사용한다.whether to use sequence number; Use only for live.
//라이브 컨텐트의 전송시 연속되는 컨테이너의 번호// number of consecutive containers when delivering live content
// timestamp 사용여부; VoD의 경우 전송시점에 container를 분석한다(parsing).// whether to use timestamp; In the case of VoD, the container is parsed at the time of transmission.
//컨테이너가 decode/parsing되어야 하는 시점(Decoding Time Stamps : DTS)// the time the container should be decoded / parsed (Decoding Time Stamps: DTS)
mmt_asset_list() mmt_asset_list ()
패키지 내의 MMT asset의 목록List of MMT assets in the package
전송특성Transmission characteristics
패키지의 전송특성 및 MMT asset의 전송특성. 패키지 단위 또는 패키지내의 MMT asset 단위로 해당 MMT asset이 가져야 할 전송특성을 상위 레벨로 기술한다. MMT-C에서는 전송특성을를 MMT item 제공자가 제공할 수 있는 네트워크 경로로 매핑한다. MMT-T에서는 MMT-C에서 제공된 네트워크 상의 경로로 전송한다.Transmission characteristics of package and transmission characteristics of MMT asset. The transmission characteristics that the MMT asset should have in the unit of a package or in units of MMT assets in the package are described at a high level. In MMT-C, the transmission characteristics are mapped to a network path that can be provided by an MMT item provider. The MMT-T transmits a path on a network provided by the MMT-C.
MMT asset을 여러 환경에서 전송하기 위해서는 MMT asset에 제공 가능한 경로를 적으면 안 된다. 환경에 따라 달라질 수 있으므로 경로를 적는 것은 의미가 없다. 실제 경로는 다른 레이어 - C 에서 제공하고 경로를 생성할 수 있는 hint를 적어 컨텐트와 전송환경을 분리한다.In order to transmit the MMT asset in various environments, a path that can be provided to the MMT asset should not be written. It is not meaningful to write down the path as it may vary depending on the environment. The actual path is provided in another layer-C, and the hint that creates the path separates the content from the delivery environment.
Transport characteristics() {Transport characteristics () {
sync_alignmentsync_alignment
client_alignmentclient_alignment
lossless_deliverylossless_delivery
return_channelreturn_channel
}}
sync_alignmentsync_alignment
0: play when available (재생하려는 시점보다 늦게 전송되어도 받고 나서 재생을 시작하기만 하면 된다.)0: play when available (Even if it is sent later than the time you want to play it, you only need to start playing after receiving it.)
1: loose sync (동기가 맞지 않아도 큰 문제가 없다. subtitle)1: loose sync (no sync, no subtitles)
2: lip-sync (동기가 안맞으면 느낌이 이상하다. lip-sync)2: lip-sync (I feel strange when I'm out of sync. Lip-sync)
3: reserved3: reserved
client_alignmentclient_alignment
0: 모든 클라이언트가 정시에 시작해야 한다.0: All clients should start on time.
1: 라이브 방송이라 해도 클라이언트마다 시작시간은 다를 수 있다.1: Even if the live broadcast, the start time may be different for each client.
lossy_deliverylossy_delivery
0: 전송오류가 있어선 안 된다 (예: 위젯)0: There should not be a transmission error (eg widget)
1: 전송오류, quality adaptation 등이 가능하다.1: Transmission error, quality adaptation, etc. are possible.
has_interactivityhas_interactivity
0: unidirectional 예:방송채널0: unidirectional Example: Broadcast channel
1: bidirectional; return channel이 있어야 한다.1: bidirectional; There must be a return channel.
mmt_asset_description()mmt_asset_description ()
mmt asset이 저장되는 경우, 또는 개별적으로 소비되는 경우를 위해 mime-type과 파일명을 제공한다.The mime-type and file name are provided when the mmt asset is stored or separately consumed.
mmt_asset_slice_list()mmt_asset_slice_list ()
mmt asset을 나눈 slice의 목록List of slices divided by mmt asset
slice_patternslice_pattern
slice가 일반 배열인지, 트릭모드나 라이브 전송, 파일 전송 등을 고려하였는지에 따라 값이 서술된다.The value is described depending on whether slice is a regular array, or whether trick mode, live transfer, or file transfer is considered.
slice()slice ()
mmt asset을 나눈 조각이다. 라이브 전송의 경우 slice는 MPEG-2, MPEG-4 등의 Access Unit 단위로 구성된다.The fragment divided by mmt asset. In the case of live transmission, slice is composed of Access Unit units such as MPEG-2 and MPEG-4.
mmt_item_composition()mmt_item_composition ()
mmt asset의 구성 정보.Configuration information of the mmt asset.
xml()xml ()
도 5는 본 발명의 실시 예에 따른 서비스 제공자의 동작 흐름도이다.5 is a flowchart illustrating an operation of a service provider according to an exemplary embodiment of the present invention.
도 5의 동작은 도 6의 서비스 제공자에서 수행됨은 물론이다. 그러나 도 6의 서비스 제공자로 한정하지 않는다.The operation of FIG. 5 is of course performed at the service provider of FIG. 6. However, it is not limited to the service provider of FIG. 6.
서비스 제공자는 501 단계에서 MMT asset 제공자로부터 MMT asset을 수신하고, MMT asset를 이용하여 판매하려는 MMT item을 구성한다. MMT asset을 그대로 제공하는 경우 MMT item을 구성하도록 서술할 수 있는 방법이 없기 때문에 MMT item 내에서 MMT asset을 어떻게 구성하는지를 서술하기 위한 MMT item 구성 정보를 제공하여야 한다.In step 501, the service provider receives an MMT asset from an MMT asset provider and configures an MMT item to be sold using the MMT asset. When the MMT asset is provided as it is, there is no way to describe the configuration of the MMT item. Therefore, MMT item configuration information for describing how to configure the MMT asset within the MMT item should be provided.
이러한 MMT item 구성 정보는 MMT asset과 함께 제공되는 것이 바람직하며 이에 따라 패키지라는 header-payload 구조를 사용하여 MMT item을 구성하는 구성요소를 적재하여 제공한다.The MMT item configuration information is preferably provided together with the MMT asset. Accordingly, the MMT item configuration information is loaded and provided using a header-payload structure called a package.
패키지는 서비스 제공자에 의해 MMT item을 구성하기 위해 작성되며, MMT item 하나를 구성하기 위해 패키지 여러 개를 사용할 수도 있다.Packages are created by the service provider to compose MMT items, and several packages may be used to compose one MMT item.
패키지는 패키지 id, MMT item id와 sequence number를 가지고 구분된다. 패키지는 자신이 표현하고 있는 MMT item id를 가진다. 패키지 id는 서로 다른 패키지 간의 구분을 위한 것이다. 패키지 id가 달라도 MMT item id가 같으면 같은 MMT item을 구성하고 있는 서로 다른 패키지다. 같은 패키지 id를 가진 서로 다른 패키지가 존재시 sequence number로 구별한다. 라이브 방송 등 전술된 용도를 위해 패키지를 작게 만들어 여러 번 전송하는 방법이 있으며 이때 전후 관계 및 도중에 누락된 패키지가 있는지 확인하기 위해 sequence number를 사용한다.A package is identified by its package id, MMT item id, and sequence number. The package has the MMT item id it represents. The package id is for distinguishing between different packages. Even if the package ids are different, if the MMT item ids are the same, they are different packages that compose the same MMT item. If different packages with the same package id exist, they are distinguished by sequence number. There is a method of making a small package and transmitting the package several times for the above-mentioned purposes such as live broadcasting. At this time, the sequence number is used to check whether there is a missing package in the front and rear relationship.
서비스 제공자는 MMT item을 작성한 후에 MMT-Control 과 MMT-Delivery를 사용하여 MMT item의 발견 정보(discovery information) 및 전송 정보를 재생 장치가 접근 가능하도록 만들어준다. 전송의 개시는 1 대 1 관계의 경우 재생 장치의 요청에 의하거나 1 대 다 관계 또는 브로드캐스트 전송의 경우 임의의 재생 장치의 참여를 예상한 임의의 전송이 가능하다.After creating a MMT item, the service provider uses MMT-Control and MMT-Delivery to make the discovery information and transmission information of the MMT item accessible to the playback device. The initiation of the transmission may be at the request of the playback device in the case of a one-to-one relationship or in any transmission in which the participation of any playback device is expected in the case of a one-to-many relationship or broadcast transmission.
도 5를 참조하면, 서비스 제공자는 501 단계에서 MMT item을 작성하고, 503 단계에서 MMT asset이 실시간으로 작성되는가를 판단한다. 즉, 서비스 제공자는 라이브 전송이 가능한가를 판단한다. 만약 라이브 전송이 가능한 경우, 서비스 제공자는 505 단계에서 패키지를 생성한다. 이후, 서비스 제공자는 507 단계에서 패키지에 헤더 정보를 삽입한다. 이때, 헤더 정보 삽입 시, 동일한 패키지 id를 사용한다. 또한, 서비스 제공자는 509 단계에서 헤더 정보 삽입시, 타임 스탬프를 이용하여 작성 시점 정보를 삽입한다. 또한, 서비스 제공자는 511 단계에서 라이브로 전송하기 위해 헤더 정보 삽입 시, 시퀀스 넘버를 1 증가시킨다. 이후, 서비스 제공자는 513 단계에서 페이로드를 생성한다. 이와 같이, 페이로드를 생성함으로써, MMT asset이 저장된다.Referring to FIG. 5, the service provider creates an MMT item in step 501 and determines whether an MMT asset is created in real time in step 503. That is, the service provider determines whether live transmission is possible. If the live transmission is possible, the service provider generates a package in step 505. In step 507, the service provider inserts header information into the package. At this time, when inserting header information, the same package id is used. In addition, when the header information is inserted in step 509, the service provider inserts creation time information using a time stamp. In addition, the service provider increments the sequence number by 1 when inserting the header information for transmission live at step 511. Thereafter, the service provider generates a payload in step 513. As such, the MMT asset is stored by generating the payload.
상기 505 단계의 패키지 생성과 동시에 서비스 제공자는 515 단계에서 MMT asset을 생성한다. 이후, 서비스 제공자는 513 단계로 진행한다.Simultaneously with the generation of the package in step 505, the service provider generates an MMT asset in step 515. Thereafter, the service provider proceeds to step 513.
한편, 503 단계에서 MMT asset이 실시간으로 작성되지 않는 경우, 서비스 제공자는 517 단계에서 trick mode를 지원할 것인가를 판단한다. 만약, trick mode를 지원할 경우, 서비스 제공자는 519 단계에서 패키지를 생성한다. 이후, 서비스 제공자는 521 단계에서 패키지에 헤더 정보를 삽입한다. If the MMT asset is not generated in real time in step 503, the service provider determines whether to support the trick mode in step 517. If the trick mode is supported, the service provider generates a package in step 519. In step 521, the service provider inserts header information into the package.
서비스 제공자는 523 단계에서 MMT item 구성정보를 확인한다. 이후, 서비스 제공자는 525 단계에서 페이로드를 생성한다. 이와 같이, 페이로드를 생성함으로써, MMT asset이 저장된다.The service provider identifies MMT item configuration information in step 523. Thereafter, the service provider generates a payload in step 525. As such, the MMT asset is stored by generating the payload.
519 단계의 패키지 생성과 동시에 서비스 제공자는 529 단계에서 MMT asset가 존재한다. 이후, 서비스 제공자는 531 단계에서 MMT item 시간축 상에서 사용되는 MMT asset을 시간 단위로 슬라이싱하고, 525 단계로 진행한다.Simultaneously with the creation of the package in step 519, the service provider has an MMT asset in step 529. In step 531, the service provider slices an MMT asset used on an MMT item time axis in units of time and proceeds to step 525.
상기 525 단계 이후, 서비스 제공자는 527 단계에서 패키지 생성을 완료한다.After the step 525, the service provider completes the package generation in step 527.
한편, 상기 517 단계에서 trick mode를 지원하지 않은 경우, 서비스 제공자는 533 단계에서 패키지를 생성한다. 이후, 서비스 제공자는 535 단계에서 패키지에 헤더 정보를 삽입하고, 537 단계에서 페이로드를 생성한다. 이와 같이, 페이로드를 생성함으로써, MMT asset이 저장된다. 서비스 제공자는 539 단계에서 패키지 생성을 완료한다.If the trick mode is not supported in step 517, the service provider generates a package in step 533. Thereafter, the service provider inserts header information into the package in step 535 and generates a payload in step 537. As such, the MMT asset is stored by generating the payload. The service provider completes package generation in step 539.
533 단계에서의 패키지 생성과 동시에 서비스 제공자는 541 단계에서 MMT asset가 존재한다. 이후, 서비스 제공자는 539 단계로 진행한다.Simultaneously with the generation of the package in step 533, the service provider has an MMT asset in step 541. Thereafter, the service provider proceeds to step 539.
도 6은 본 발명의 실시 예에 따른 서비스 제공자의 블록 구성도이다.6 is a block diagram of a service provider according to an embodiment of the present invention.
MㄹMT asset이 서비스 제공자(600)에게 제공된다. 그러면, 서비스 제공자(600) 내의 MMT asset 해독부(620)는 MMT asset을 수신하고, MMT asset을 해독한다.The MMT MT asset is provided to the service provider 600. Then, the MMT asset decoder 620 in the service provider 600 receives the MMT asset and decodes the MMT asset.
MMT item 생성부(630)는 MMT asset 해독부(620)의 해독 결과를 반영하여 의도하는 MMT item을 작성한다. 이때, MMT item 생성부(630)는 구성요소로서 사용하고, 패키지에 넣어 저장하기 위해 패키지 생성부(635)로 MMT item 및 MMT asset에 관한 정보를 전달한다.The MMT item generator 630 creates an intended MMT item by reflecting the decoding result of the MMT asset decoder 620. In this case, the MMT item generating unit 630 is used as a component, and delivers information about the MMT item and the MMT asset to the package generating unit 635 to store in the package.
패키지 생성부(635)는 MMT asset을 버퍼 1(625)로부터 공급받아 패키지 안에 payload로서 저장하고, 이를 버퍼 2(640)에 다시 저장한다. 서비스 제공자(600)는 패키지를 제공하기 위해서 MMT-Control(660)에 패키지에 관한 정보를 전달하고, 저장 장치(645)나 네트워크(650) 등을 통해 재생 장치에게 전달한다.The package generator 635 receives the MMT asset from the buffer 1 625 and stores the MMT asset as a payload in the package, and stores the MMT asset in the buffer 2 640 again. The service provider 600 delivers information about the package to the MMT-Control 660 to provide the package, and delivers the information about the package to the playback device through the storage device 645, the network 650, or the like.
도 7은 본 발명의 실시 예에 따른 재생 장치의 블록 구성도이다.7 is a block diagram of a playback apparatus according to an embodiment of the present invention.
재생 장치는 MMT-Control을 통해 MMT item의 존재와 이를 전송하기 위한 전송 방법, 경로 등을 알 수 있다. MMT item의 재생이 사용자에 의해 또는 자동으로 지시되면, 재생 장치는 MMT item을 구성하고 있는 패키지를 받아 MMT item의 재생을 개시한다.The reproduction device may know the existence of the MMT item, a transmission method, a path, etc. for transmitting the same through the MMT-Control. When playback of the MMT item is instructed by the user or automatically, the playback device receives the package constituting the MMT item and starts playback of the MMT item.
패키지에는 MMT asset 별로 해당 MMT asset이 제대로 실행되기 위해 필요한 전송 요구사항이 전송특성에 적시되어 있다. 재생 장치는 MMT asset을 내려 받기 위해, 서비스 제공자가 제공하는 가용한 여러 개의 경로 중에서 재생 장치가 지원 가능한 경로를 선택하여 MMT asset을 내려 받는다. 만약 주변 환경의 변화에 의해 내려 받고 있던 경로가 더 이상 가용하지 않은 경우에는 seamless하게 전송 또는 재생을 위해 네트워크 장치를 변경하는 것은 재생 장치가 담당한다.In the package, transmission requirements necessary for proper execution of the MMT asset for each MMT asset are indicated in the transmission characteristics. In order to download the MMT asset, the playback device selects a path that can be supported by the playback device from a plurality of available paths provided by the service provider and downloads the MMT asset. If the path taken down by changes in the surrounding environment is no longer available, the playback device is responsible for changing the network device for seamless transmission or playback.
재생 장치는 하나의 MMT asset의 전송개시 시, 가용한 경로가 한 개 이상일 때 전체적인 재생 장치의 재생 및 전송 performance를 해치지 않는 범위 내에서 주기적으로 가용한 경로로부터 MMT asset의 일부를 나눠 받도록 시도한다. MMT asset은 slice로 나눠져 있고, slice 목록도 패키지에 주어지기 때문에 복수 개의 경로에 대해 서로 다른 slice를 전송 요청하여 내려 받는 것이 가능하다.At the start of transmission of one MMT asset, the playback device attempts to divide a portion of the MMT asset from the available path periodically within the range that does not impair the playback and transmission performance of the entire playback device when more than one path is available. Since the MMT asset is divided into slices and the slice list is also given to the package, it is possible to download and download different slices for a plurality of paths.
재생 장치의 종류에는 홈 서버, 주표시 장치, 부표시 장치 등이 있다. 재생 장치는 홈서버를 통해 MMT item의 구성 패키지들을 서비스 제공자로부터 받은 후, MMT asset들이 적합하게 재생되어야 하는 재생 장치를 찾아 해당 재생 장치가 MMT asset을 재생하도록 지시한다.Types of playback devices include home servers, main display devices, subdisplay devices, and the like. After the playback device receives the configuration packages of the MMT item from the service provider through the home server, the playback device searches for a playback device to which the MMT assets are appropriately played and instructs the playback device to play the MMT asset.
이를 위해 재생 장치 중 홈 서버는 MMT item 구성정보를 참조한다. 이 정보에는 MMT asset들이 시간적, 공간적으로 어디에 표시되어야 하는지와 함께 어떤 장치 능력(device capability)가 요구되는지가 target_characteristic에 적시되어있다. 즉, 해당 속성에 해당하는 값이 홈서버에 연결된 재생 장치에서 지원이 될 수 없으면 어쩔 수 없지만, 홈서버에 연결된 복수 개의 재생 장치들 중에 되도록이면 target_characteristic을 만족시키는 재생 장치에서 해당 MMT asset이 재생될 수 있도록 한다.To this end, the home server of the playback apparatus refers to the MMT item configuration information. This information specifies where the MMT assets should be represented in terms of time and space, and what device capabilities are required in target_characteristic. That is, if the value corresponding to the property cannot be supported by the playback device connected to the home server, it is inevitable. However, among the plurality of playback devices connected to the home server, the MMT asset may be played by the playback device that satisfies the target_characteristic. To be able.
도 7을 참조하면, 재생 장치는 MMT-Control을 통해 MMT item의 존재 및 이를 구성하는 패키지의 네트워크 상의 경로를 알 수 있다.Referring to FIG. 7, the playback device may know the existence of an MMT item and a path on a network of a package configuring the MMT item through the MMT-Control.
수신부(712)는 유무선 네트워크를 망라하여 외부로부터 정보를 받아들일 수 있는 모든 것을 통칭하며, 이를 통해 패키지가 전송된다. 패키지는 처리를 위해 패키지 버퍼 1(714)에 1차 저장되고, 필요 시 재생 장치 내의 저장 장치(716)에 임시 또는 반영구적으로 저장될 수 있다. 패키지는 해석을 위해 패키지 파서(718)에 전달되며, 패키지의 header 정보는 버퍼 2(720)에 저장되어 라이브 방송과 같이 연속되는 패키지의 경우에 사용된다. 패키지 header 중 MMT item description은 별도의 처리부가 처리하며, 이것이 MMT item을 사용자에게 presentation하기 위한 주요 처리부가 된다. MMT item은 시간/공간 축상에서 MMT asset을 표시하고 있으므로 적정한 시점에 버퍼 3(724)에 저장되어 있던 MMT asset이 MMT asset 처리부(726)로 전송되고 이후 표시 장치(728)로 전달되어 사용자에 의해 최종 소비된다. 재생 중 사용자가 빨리 감기, 30초 후 재생과 같은 trick play 명령을 내리는 경우 이는 MMT item description 처리부(722)로 전달되고, 요청된 시간이 MMT item time axis 중 어디에 해당하고, 어떤 MMT asset들이 표시 되어져야 하는지 다시 판단된 후에 해당하는 MMT asset이 처리부에 의해 처리된다.Receiving unit 712 collectively includes everything that can accept information from the outside over the wired and wireless network, through which the package is transmitted. The package may be primarily stored in package buffer 1 714 for processing and may be temporarily or semi-permanently stored in storage 716 in the playback device as needed. The package is passed to the package parser 718 for interpretation, and the header information of the package is stored in the buffer 2 720 and used in the case of a continuous package such as a live broadcast. The MMT item description in the package header is processed by a separate processing unit, which becomes the main processing unit for presenting the MMT item to the user. Since the MMT item displays the MMT asset on the time / space axis, the MMT asset stored in the buffer 3 724 is transmitted to the MMT asset processing unit 726 and then transferred to the display device 728 at a proper time. Final consumption. If the user issues a trick play command such as fast forwarding or playing after 30 seconds during playback, it is transmitted to the MMT item description processing unit 722, where the requested time corresponds to any of the MMT item time axis, and certain MMT assets are displayed. After re-determining whether it should be, the corresponding MMT asset is processed by the processor.
도 8a 및 도 8b는 발명의 실시 예에 따른 재생 장치의 동작 흐름도이다.8A and 8B are flowcharts illustrating operations of a reproducing apparatus according to an exemplary embodiment of the present invention.
도 8a 및 도 8b의 동작은 도 7의 재생 장치에서 수행됨은 물론이다. 그러나 도 7의 재생 장치로 한정하지 않는다.8A and 8B are of course performed in the playback apparatus of FIG. However, the present invention is not limited to the playback apparatus in FIG.
재생 장치는 801 단계에서 MMT item을 재생하고, MMT item 인식, 경로 인식, 라이브, 및 트릭 모드 지원 여부 등을 포함하는 정보를 수신한다. 재생 장치는 805 단계에서 상기 수신된 정보를 통해 라이브 전송인가를 판단한다. 만약, 라이브일 경우, 재생 장치는 807 단계에서 패키지를 수신하고, 809 단계에서 패키지 id가 동일한지 여부를 판단한다. 만약, 패키지 id가 동일할 경우, 재생 장치는 811 단계에서 sequence number가 증가했는가를 판단한다. 만약, sequence number가 증가한 경우, 재생 장치는 813 단계에서 MMT item description이 있는가를 판단한다. 만약, MMT item description이 있는 경우, 재생 장치는 815 단계에서 MMT item description을 버퍼에 저장하고, 817 단계에서 MMT item description을 해석한다. 이후, 재생 장치는 819 단계에서 연관되는 패키지를 수신하고, 821 단계에서 MMT 아이템을 재생한다. 재생 장치는 다시 807 단계로 귀환한다.In step 801, the playback apparatus plays back the MMT item and receives information including whether the MMT item is recognized, the path is recognized, the live and the trick mode are supported. In step 805, the playback apparatus determines whether the transmission is a live transmission. If live, the playback device receives the package in step 807, and determines whether the package ids are the same in step 809. If the package ids are the same, the playback apparatus determines whether the sequence number has increased in step 811. If the sequence number is increased, the playback apparatus determines whether the MMT item description exists in step 813. If there is an MMT item description, the playback apparatus stores the MMT item description in a buffer in step 815 and interprets the MMT item description in step 817. Thereafter, the playback device receives the associated package in step 819, and plays the MMT item in step 821. The playback device returns to step 807 again.
상기 809 단계에서 패키지 id가 동일하지 않은 경우, 상기 811 단계에서 sequence number가 증가하지 않은 경우, 재생 장치는 807 단계로 귀환한다. 그리고, 상기 813 단계에서 MMT item description이 없는 경우, 재생 장치는 817 단계로 진행한다.If the package ids are not the same in step 809, and the sequence number does not increase in step 811, the playback apparatus returns to step 807. If there is no MMT item description in step 813, the playback apparatus proceeds to step 817.
한편, 805 단계에서 라이브 전송이 아닌 경우, 재생 장치는 823 단계에서 패키지 뿐만 아니라 상기 패키지와 연관되는 패키지를 수신하고, 825 단계에서 MMT 구성정보 목록을 해석한다. 이후, 재생 장치는 829 단계에서 MMT 아이템을 재생한다. 이후, 재생 장치는 831 단계에서 사용자 trick 명령을 수신하고, 833 단계에서 trick 모드를 지원하는가를 판단한다. 만약, trick 모드를 지원할 경우, 재생 장치는 835 단계에서 MMT item 상 시간에 해당하는 MMT asset을 검색한다. 검색 결과, 재생 장치는 837 단계에서 MMT item 상 시간과 MMT asset 시간을 비교하여 pts를 얻는다.On the other hand, if it is not a live transmission in step 805, the playback device receives a package associated with the package as well as the package in step 823, and interprets the MMT configuration information list in step 825. In step 829, the playback device plays the MMT item. In step 831, the playback apparatus receives a user trick command, and determines whether to support a trick mode in step 833. If the trick mode is supported, the playback apparatus searches for an MMT asset corresponding to a time on the MMT item in step 835. As a result of the search, the playback apparatus obtains pts by comparing the MMT item time and the MMT asset time in step 837.
또한, 재생 장치는 839 단계에서 slice를 확인하고, pts에 해당하는 slice를 검색한다. 재생 장치는 841 단계에서 MMT item을 재생한다.In operation 839, the playback apparatus identifies a slice and searches for a slice corresponding to pts. The playback device plays the MMT item in step 841.
한편, 833 단계에서 trick 모드를 지원하지 않는 경우, 재생 장치는 843 단계에서 MMT item 상 시간에 해당하는 MMT asset을 검색한다. 재생 장치는 845 단계에서 필요한 모든 MMT asset을 다운로드 했는가를 판단한다. 만약, 필요한 모든 MMT asset을 다운로드한 경우, 재생 장치는 847 단계에서 MMT item을 재생한다.If the trick mode is not supported in operation 833, the playback apparatus searches for an MMT asset corresponding to a time on the MMT item in operation 843. The playback device determines whether all necessary MMT assets have been downloaded in step 845. If all necessary MMT assets have been downloaded, the playback device plays the MMT item in step 847.
본 발명은 서비스 제공자가 복수 개의 컨텐츠를 사용하여 서비스를 구성하고 이를 이종망(heterogeneous network) 상의 하나 또는 복수 개의 경로를 사용하여 전송할 수 있다.According to the present invention, a service provider configures a service using a plurality of contents and transmits the service using one or a plurality of paths on a heterogeneous network.
본 발명은 컨버전스 환경에서 복수 개의 컨텐츠를 사용하여 효율적인 서비스를 소비할 수 있다.The present invention can consume an efficient service using a plurality of contents in a convergence environment.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되지 않으며, 후술되는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.Meanwhile, in the detailed description of the present invention, specific embodiments have been described, but various modifications are possible without departing from the scope of the present invention. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined not only by the scope of the following claims, but also by those equivalent to the scope of the claims.

Claims (32)

  1. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 전송할 컨텐츠 전송 방법에 있어서,In the broadcast system supporting a multimedia service based on the Internet protocol, a content transmission method to be transmitted through a heterogeneous network,
    MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 생성하는 과정; 및Generating at least one package including an MPEG Media Transport (MMT) item; And
    상기 적어도 하나의 패키지를 단말로 제공하는 과정을 포함하고,Providing the at least one package to a terminal;
    상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함함을 특징으로 하는 컨텐츠 전송 방법.Wherein the MMT item includes MMT assets and configuration information of MMT assets.
  2. 제1항에 있어서,The method of claim 1,
    상기 패키지는 MMT asset의 목록, MMT item 구성정보, 및 MMT asset 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 방법.The package includes at least one of a list of MMT asset, MMT item configuration information, and MMT asset.
  3. 제2항에 있어서,The method of claim 2,
    상기 MMT asset의 목록은,The list of MMT assets,
    각 MMT asset의 전송특성, 상세 description, slice 목록 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 방법.And at least one of a transmission characteristic, a detailed description, and a slice list of each MMT asset.
  4. 제2항에 있어서,The method of claim 2,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT asset을 상기 MMT item의 시간상 및 공간상 중 적어도 하나에 어떻게 배치하는 지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 전송 방법.And information on how to arrange the MMT asset in at least one of a time and a space of the MMT item.
  5. 제2항에 있어서,The method of claim 2,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT item이 복수의 장치에서 배치될 경우, 어떤 asset이 상기 복수의 장치 중 어떤 장치에서 배치되는지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 전송 방법.If the MMT item is arranged in a plurality of devices, the content transmission method comprising information on which asset is placed in which of the plurality of devices.
  6. 제2항에 있어서,The method of claim 2,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    다른 패키지의 서비스 구성정보, 같은 또는 다른 패키지 내의 MMT asset 정보, 및 같은 또는 다른 패키지 내의 MMT asset 내의 component 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 방법.And at least one of service configuration information of another package, MMT asset information in the same or another package, and components in the MMT asset in the same or different package.
  7. 제2항에 있어서,The method of claim 2,
    일반 방송의 경우, 상기 패키지는 패키지 id 및 MMT item id를 이용하여 구분되고,In the case of general broadcasting, the package is divided using a package id and an MMT item id.
    라이브 방송의 경우, 상기 패키지는 패키지 id, MMT item id, sequence number를 이용하여 구분됨을 특징으로 하는 컨텐츠 전송 방법.In the case of live broadcasting, the package is classified using a package id, an MMT item id, and a sequence number.
  8. 제2항에 있어서,The method of claim 2,
    일반모드일 경우, 하나의 MMT asset은 하나의 slice로 저장됨을 포함하고,In the normal mode, one MMT asset is stored as one slice,
    트릭모드일 경우, 상기 하나의 MMT asset은 여러 개의 slice로 저장됨을 포함하고,In the trick mode, the one MMT asset is stored as a plurality of slices,
    상기 여러 개의 slice의 시간축 상의 시점은, pts(presentation time stamp)로 나타냄을 특징으로 하는 컨텐츠 전송 방법.The time point on the time axis of the plurality of slices is represented by a presentation time stamp (pts).
  9. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 전송할 컨텐츠 전송 장치에 있어서,An apparatus for transmitting content to be transmitted through a heterogeneous network in a broadcasting system supporting a multimedia service based on an internet protocol,
    MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 생성하는 패키지 생성부; 및A package generation unit generating at least one package including an MPEG Media Transport (MMT) item; And
    상기 적어도 하나의 패키지를 단말로 전송하는 전송부를 포함하고,It includes a transmission unit for transmitting the at least one package to the terminal,
    상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함함을 특징으로 하는 컨텐츠 전송 장치.The MMT item includes MMT assets and configuration information of the MMT assets.
  10. 제9항에 있어서,The method of claim 9,
    상기 패키지는 MMT asset의 목록, MMT item 구성정보, 및 MMT asset 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 장치.The package may include at least one of a list of MMT assets, MMT item configuration information, and MMT assets.
  11. 제10항에 있어서,The method of claim 10,
    상기 MMT asset의 목록은,The list of MMT assets,
    각 MMT asset의 전송특성, 상세 description, slice 목록 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 장치.And at least one of a transmission characteristic, a detailed description, and a slice list of each MMT asset.
  12. 제10항에 있어서,The method of claim 10,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT asset을 상기 MMT item의 시간상 및 공간상 중 적어도 하나에 어떻게 배치하는 지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 전송 장치.And information on how to arrange the MMT asset in at least one of a time and a space of the MMT item.
  13. 제10항에 있어서,The method of claim 10,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT item이 복수의 장치에서 배치될 경우, 어떤 asset이 상기 복수의 장치 중 어떤 장치에서 배치되는지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 전송 장치.If the MMT item is arranged in a plurality of devices, the content delivery device comprising information on which asset is placed in which of the plurality of devices.
  14. 제10항에 있어서,The method of claim 10,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    다른 패키지의 서비스 구성정보, 같은 또는 다른 패키지 내의 MMT asset 정보, 및 같은 또는 다른 패키지 내의 MMT asset 내의 component 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 전송 장치.And at least one of service configuration information of another package, MMT asset information in the same or another package, and components in the MMT asset in the same or different package.
  15. 제10항에 있어서,The method of claim 10,
    일반 방송의 경우, 상기 패키지는 패키지 id 및 MMT item id를 이용하여 구분되고,In the case of general broadcasting, the package is divided using a package id and an MMT item id.
    라이브 방송의 경우, 상기 패키지는 패키지 id, MMT item id, sequence number를 이용하여 구분됨을 특징으로 하는 컨텐츠 전송 장치.In the case of live broadcast, the package is characterized in that the content is divided using a package id, MMT item id, sequence number.
  16. 제10항에 있어서,The method of claim 10,
    일반모드일 경우, 하나의 MMT asset은 하나의 slice로 저장됨을 포함하고,In the normal mode, one MMT asset is stored as one slice,
    트릭모드일 경우, 상기 하나의 MMT asset은 여러 개의 slice로 저장됨을 포함하고,In the trick mode, the one MMT asset is stored as a plurality of slices,
    상기 여러 개의 slice의 시간축 상의 시점은, pts(presentation time stamp)로 나타냄을 특징으로 하는 컨텐츠 전송 장치.And a time point on the time axis of the plurality of slices is represented by a presentation time stamp (pts).
  17. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 컨텐츠 수신 방법에 있어서,In the broadcast system supporting a multimedia service based on the Internet protocol, in a content receiving method through a heterogeneous network,
    MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 수신하는 과정;Receiving at least one package including an MPEG Media Transport (MMT) item;
    상기 패키지를 분석하는 과정; 및Analyzing the package; And
    상기 분석 결과에 따라 상기 패키지에 포함된 MMT item, MMT asset을 처리하는 과정을 포함하고,Processing MMT item and MMT asset included in the package according to the analysis result;
    상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.The MMT item includes content information of MMT assets and configuration of MMT assets.
  18. 제17항에 있어서,The method of claim 17,
    상기 패키지는 MMT asset의 목록, MMT item 구성정보, 및 MMT asset 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.The package includes at least one of a list of MMT asset, MMT item configuration information, and MMT asset.
  19. 제18항에 있어서,The method of claim 18,
    상기 MMT asset의 목록은,The list of MMT assets,
    각 MMT asset의 전송특성, 상세 description, slice 목록 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.And at least one of a transmission characteristic, a detailed description, and a slice list of each MMT asset.
  20. 제18항에 있어서,The method of claim 18,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT asset을 상기 MMT item의 시간상 및 공간상 중 적어도 하나에 어떻게 재생하는 지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.And information about how to play the MMT asset in at least one of a time and a space of the MMT item.
  21. 제18항에 있어서,The method of claim 18,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT item이 복수의 장치에서 재생될 경우, 어떤 asset이 상기 복수의 장치 중 어떤 장치에서 재생되는지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.When the MMT item is played on a plurality of devices, the content receiving method comprising information on which asset is played on which of the plurality of devices.
  22. 제18항에 있어서,The method of claim 18,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    다른 패키지의 서비스 구성정보, 같은 또는 다른 패키지 내의 MMT asset 정보, 및 같은 또는 다른 패키지 내의 MMT asset 내의 component 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.And at least one of service configuration information of another package, MMT asset information in the same or another package, and components in the MMT asset in the same or different package.
  23. 제18항에 있어서,The method of claim 18,
    일반 방송의 경우, 상기 패키지는 패키지 id 및 MMT item id를 이용하여 구분되고,In the case of general broadcasting, the package is divided using a package id and an MMT item id.
    라이브 방송의 경우, 상기 패키지는 패키지 id, MMT item id, sequence number를 이용하여 구분됨을 특징으로 하는 컨텐츠 수신 방법.In the case of live broadcasting, the package is divided into contents using a package id, an MMT item id, and a sequence number.
  24. 제18항에 있어서,The method of claim 18,
    일반모드일 경우, 하나의 MMT asset은 하나의 slice로 저장됨을 포함하고,In the normal mode, one MMT asset is stored as one slice,
    트릭모드일 경우, 상기 하나의 MMT asset은 여러 개의 slice로 저장됨을 포함하고,In the trick mode, the one MMT asset is stored as a plurality of slices,
    상기 여러 개의 slice의 시간축 상의 시점은, pts(presentation time stamp)로 나타냄을 특징으로 하는 컨텐츠 수신 방법.The time point on the time axis of the plurality of slices is represented by a presentation time stamp (pts).
  25. 인터넷 프로토콜을 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 네트워크를 통해 컨텐츠 수신 장치에 있어서,An apparatus for receiving content through a heterogeneous network in a broadcasting system supporting a multimedia service based on an internet protocol,
    MMT(MPEG Media Transport) item을 포함하는 적어도 하나의 패키지를 수신하는 수신부;A receiving unit for receiving at least one package including an MPEG Media Transport (MMT) item;
    상기 패키지를 분석하는 패키지 분석부; 및A package analyzer analyzing the package; And
    상기 분석 결과에 따라 상기 패키지에 포함된 MMT item, MMT asset을 처리하는 처리부를 포함하고,A processor configured to process an MMT item and an MMT asset included in the package according to the analysis result;
    상기 MMT item은 MMT asset들과 MMT asset들의 구성 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.The MMT item includes content information of MMT assets and configuration of MMT assets.
  26. 제25항에 있어서,The method of claim 25,
    상기 패키지는 MMT asset의 목록, MMT item 구성정보, 및 MMT asset 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.The package includes at least one of a list of MMT asset, MMT item configuration information, and MMT asset.
  27. 제26항에 있어서,The method of claim 26,
    상기 MMT asset의 목록은,The list of MMT assets,
    각 MMT asset의 전송특성, 상세 description, slice 목록 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.And at least one of a transmission characteristic, a detailed description, and a slice list of each MMT asset.
  28. 제26항에 있어서,The method of claim 26,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT asset을 상기 MMT item의 시간상 및 공간상 중 적어도 하나에 어떻게 재생하는 지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.And information about how to play the MMT asset in at least one of a time and a space of the MMT item.
  29. 제26항에 있어서,The method of claim 26,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    상기 MMT item이 복수의 장치에서 재생될 경우, 어떤 asset이 상기 복수의 장치 중 어떤 장치에서 재생되는지에 대한 정보를 포함함을 특징으로 하는 컨텐츠 수신 방법.When the MMT item is played on a plurality of devices, the content receiving method comprising information on which asset is played on which of the plurality of devices.
  30. 제26항에 있어서,The method of claim 26,
    상기 MMT item의 구성정보는,Configuration information of the MMT item,
    다른 패키지의 서비스 구성정보, 같은 또는 다른 패키지 내의 MMT asset 정보, 및 같은 또는 다른 패키지 내의 MMT asset 내의 component 중 적어도 하나를 포함함을 특징으로 하는 컨텐츠 수신 방법.And at least one of service configuration information of another package, MMT asset information in the same or another package, and components in the MMT asset in the same or different package.
  31. 제26항에 있어서,The method of claim 26,
    일반 방송의 경우, 상기 패키지는 패키지 id 및 MMT item id를 이용하여 구분되고,In the case of general broadcasting, the package is divided using a package id and an MMT item id.
    라이브 방송의 경우, 상기 패키지는 패키지 id, MMT item id, sequence number를 이용하여 구분됨을 특징으로 하는 컨텐츠 수신 방법.In the case of live broadcasting, the package is divided into contents using a package id, an MMT item id, and a sequence number.
  32. 제26항에 있어서,The method of claim 26,
    일반모드일 경우, 하나의 MMT asset은 하나의 slice로 저장됨을 포함하고,In the normal mode, one MMT asset is stored as one slice,
    트릭모드일 경우, 상기 하나의 MMT asset은 여러 개의 slice로 저장됨을 포함하고,In the trick mode, the one MMT asset is stored as a plurality of slices,
    상기 여러 개의 slice의 시간축 상의 시점은, pts(presentation time stamp)로 나타냄을 특징으로 하는 컨텐츠 수신 방법.The time point on the time axis of the plurality of slices is represented by a presentation time stamp (pts).
PCT/KR2012/000453 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system WO2012099403A2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020187025083A KR101922988B1 (en) 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system
KR1020137018666A KR101855516B1 (en) 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system
KR1020187012457A KR101895443B1 (en) 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system
US13/980,236 US10116997B2 (en) 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20110005174 2011-01-18
KR10-2011-0005174 2011-01-18
KR10-2011-0005640 2011-01-19
KR1020110005640A KR20120083820A (en) 2011-01-18 2011-01-19 Method and apparatus for transmitting contents in contents transmission system

Publications (2)

Publication Number Publication Date
WO2012099403A2 true WO2012099403A2 (en) 2012-07-26
WO2012099403A3 WO2012099403A3 (en) 2012-11-22

Family

ID=46516237

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2012/000453 WO2012099403A2 (en) 2011-01-18 2012-01-18 Method and apparatus for transmitting/receiving content in a broadcast system

Country Status (1)

Country Link
WO (1) WO2012099403A2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014058276A1 (en) * 2012-10-11 2014-04-17 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
WO2015065028A1 (en) * 2013-10-28 2015-05-07 Samsung Electronics Co., Ltd. Content presentation for mpeg media transport

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3447207B2 (en) * 1997-12-05 2003-09-16 松下電器産業株式会社 Program information creation transmission apparatus and method
KR20060114080A (en) * 2005-04-27 2006-11-06 삼성전자주식회사 System and method of providing multimedia streaming service
KR20070078238A (en) * 2006-01-26 2007-07-31 에스케이 텔레콤주식회사 Multimedia contents transmitting method and system in communication network

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014058276A1 (en) * 2012-10-11 2014-04-17 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
US9888293B2 (en) 2012-10-11 2018-02-06 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
US10469914B2 (en) 2012-10-11 2019-11-05 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
US10469915B2 (en) 2012-10-11 2019-11-05 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
US10477280B2 (en) 2012-10-11 2019-11-12 Samsung Electronics Co., Ltd. Apparatus and method for delivering and receiving multimedia data in hybrid network
WO2015065028A1 (en) * 2013-10-28 2015-05-07 Samsung Electronics Co., Ltd. Content presentation for mpeg media transport
JP2016541173A (en) * 2013-10-28 2016-12-28 サムスン エレクトロニクス カンパニー リミテッド Content representation for MPEG media transport

Also Published As

Publication number Publication date
WO2012099403A3 (en) 2012-11-22

Similar Documents

Publication Publication Date Title
WO2013077698A1 (en) Method for linking mmt media and dash media
WO2013141666A1 (en) Hybrid delivery method and reception method for mmt packaged svc video contents
WO2013169084A1 (en) Hybrid transmission method through mmt packet format extension
WO2013089437A1 (en) Device and method for receiving media content
WO2013055191A2 (en) Apparatus and method for configuring control message in broadcasting system
WO2012047028A2 (en) Apparatus and method for providing streaming content
WO2011152675A2 (en) Method and apparatus for adaptive streaming based on plurality of elements for determining quality of content
WO2013055164A1 (en) Method for displaying contents, method for synchronizing contents, and method and device for displaying broadcast contents
WO2012011724A2 (en) Method for transceiving media files and device for transmitting/receiving using same
WO2012060581A2 (en) Method for transreceiving media content and device for transreceiving using same
US9286214B2 (en) Content distribution and switching amongst data streams
WO2013077697A1 (en) Method for hybrid delivery of mmt pakcage and content and method for receiving content
WO2012011735A2 (en) Method and apparatus for transmitting and receiving adaptive streaming mechanism-based content
WO2011071290A2 (en) Streaming method and apparatus operating by inserting other content into main content
WO2012177041A2 (en) Media content transceiving method and transceiving apparatus using same
WO2011059291A2 (en) Method and apparatus for transmitting and receiving data
WO2011059274A2 (en) Adaptive streaming method and apparatus
WO2011108893A2 (en) Method and apparatus for generating and reproducing adaptive stream based on file format, and recording medium thereof
WO2011115454A2 (en) Method and apparatus for adaptively streaming content including plurality of chapters
WO2013025035A9 (en) Transmitting device, receiving device, and transceiving method thereof
WO2012033319A2 (en) Apparatus and method for providing streaming content
EP2499792A2 (en) Method and apparatus for adaptive streaming using segmentation
WO2015012605A1 (en) Method and apparatus for encoding three-dimensional content
WO2012121572A2 (en) Transmission device and method for providing program-linked stereoscopic broadcasting service, and reception device and method for same
KR20130140113A (en) Method and apparatus for transmitting/receiving content in a broadcast system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12736572

Country of ref document: EP

Kind code of ref document: A2

ENP Entry into the national phase in:

Ref document number: 20137018666

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 13980236

Country of ref document: US

NENP Non-entry into the national phase in:

Ref country code: DE

122 Ep: pct app. not ent. europ. phase

Ref document number: 12736572

Country of ref document: EP

Kind code of ref document: A2