KR20150035857A - Apparatus and method for delivering multimedia data in hybrid network - Google Patents
Apparatus and method for delivering multimedia data in hybrid network Download PDFInfo
- Publication number
- KR20150035857A KR20150035857A KR20150024328A KR20150024328A KR20150035857A KR 20150035857 A KR20150035857 A KR 20150035857A KR 20150024328 A KR20150024328 A KR 20150024328A KR 20150024328 A KR20150024328 A KR 20150024328A KR 20150035857 A KR20150035857 A KR 20150035857A
- Authority
- KR
- South Korea
- Prior art keywords
- data
- payload
- transmission
- multimedia
- unit
- Prior art date
Links
- 238000000034 method Methods 0.000 title description 9
- 230000005540 biological transmission Effects 0.000 claims abstract description 74
- 230000006870 function Effects 0.000 description 8
- 239000012634 fragment Substances 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 238000012546 transfer Methods 0.000 description 5
- 238000011084 recovery Methods 0.000 description 4
- 230000002776 aggregation Effects 0.000 description 3
- 238000004220 aggregation Methods 0.000 description 3
- 239000000470 constituent Substances 0.000 description 3
- 238000013467 fragmentation Methods 0.000 description 3
- 238000006062 fragmentation reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/762—Media network packet handling at the source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
- H04L47/2416—Real-time traffic
-
- H04L65/601—
-
- H04L65/608—
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/70—Media network packetisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5061—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the interaction between service providers and their network customers, e.g. customer relationship management
- H04L41/5067—Customer-centric QoS measurements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
Description
본 발명은 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것으로, MPEG Media Transport(MMT)을 적용하여 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention relates to an apparatus and method for transmitting multimedia data in a hybrid network, and an apparatus and method for transmitting multimedia data using an MPEG Media Transport (MMT).
최근의 멀티미디어 서비스에서는 방송망과 통신망을 동시에 연결하는 복합(Hybrid) 네트워크 망과 멀티미디어 데이터와 어플리케이션, 파일들이 함께 제공되는 복합 컨텐츠를 제공을 위한 MMT 기술이 고려되고 있다. In recent multimedia services, a hybrid network for connecting a broadcasting network and a communication network at the same time, and an MMT technology for providing multimedia contents, applications and files with combined contents are considered.
MMT 기술은 MPEG 기반의 멀티미디어 전송 기술에 관한 것으로, 다기능 스마트 TV, 다시점 TV(Multi-view TV) 등의 방송 및 멀티미디어 서비스를 위해 MPEG-2 TS(Transport Stream)를 대신하여 이용될 수 있으며, IP 기반으로 변화하는 멀티미디어 서비스 환경에서 효율적인 MPEG 전송 기술을 제공할 수 있다. 다만, 현재 복합 네트워크에서 멀티미디어 데이터를 전송하는 경우, 복합 네트워크 환경에 적합한 서비스를 제공하기 어려운 문제가 있다.The MMT technology relates to an MPEG-based multimedia transmission technology and can be used in place of an MPEG-2 TS (Transport Stream) for broadcasting and multimedia services such as a multi-function smart TV and a multi-view TV. It is possible to provide an efficient MPEG transmission technology in a multimedia service environment that changes based on IP. However, there is a problem that it is difficult to provide a service suitable for a hybrid network environment when multimedia data is transmitted in a hybrid network.
본 발명은 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention relates to an apparatus and method for transmitting multimedia data in a hybrid network.
또한, 본 발명은 복합 네트워크에서 MMT 전송 패킷(Transport Pack; TP) 데이터를 생성하여 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention also relates to an apparatus and method for transmitting multimedia data by generating MMT transport packet (TP) data in a hybrid network.
또한, 본 발명은 MMT TP 데이터 헤더 정보 및 페이로드(Payload) 데이터 정보를 정의하여 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention also relates to an apparatus and method for transmitting multimedia data by defining MMT TP data header information and payload data information.
또한, 본 발명은 MMT TP를 전송하기 위해 필요한 정보를 정의하여 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention also relates to an apparatus and method for transmitting multimedia data by defining information necessary for transmitting an MMT TP.
또한, 본 발명은 MMT TP에 대한 QoE(Quality of Experience)를 보장하여 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법에 관한 것이다.The present invention also relates to an apparatus and method for transmitting multimedia data by ensuring quality of experience (QoE) for an MMT TP.
본 발명의 실시 예에 따른 장치는; 멀티미디어 시스템에서 미디어 데이터 송신 장치에 있어서, 헤더와 멀티미디어 송신 유닛을 기반으로 생성된 데이터를 포함하는 페이로드로 구성된 적어도 하나의 멀티미디어 데이터 패킷을 생성하는 제어부와, 상기 적어도 하나의 멀티미디어 데이터 패킷을 송신하는 송신부를 포함하며; 상기 적어도 하나의 멀티미디어 데이터 패킷은, 상기 멀티미디어 송신 유닛의 분할에 의한 데이터 유닛으로 상기 데이터가 생성된 경우, 상기 데이터가 상기 데이터 유닛의 분할된 일부인지를 알려주는 타입 정보와, 상기 페이로드에 포함되는 미디어 데이터의 종류를 식별하기 위한 지시자와, 상기 페이로드에 포함되는 상기 데이터 유닛이 복수인 경우를 알려주는 지시자를 포함한다.An apparatus according to an embodiment of the present invention includes: A multimedia data transmission apparatus in a multimedia system, the apparatus comprising: a controller for generating at least one multimedia data packet including a header and a payload including data generated based on the multimedia transmission unit; A transmitter; Wherein the at least one multimedia data packet includes type information indicating whether the data is a segmented part of the data unit when the data is generated into a data unit by division of the multimedia transmission unit, An indicator for identifying the type of the media data to be transmitted, and an indicator for indicating when the payload contains a plurality of the data units.
본 발명은 복합 네트워크에서 복합 멀티미디어 데이터를 전송하기 위한 MMT 전송 패킷의 헤더 정보 및 페이로드정보를 제공할 수 있어, MMT 기술을 적용하여 복합 네트워크 환경에 적합한 서비스를 제공할 수 있다.The present invention can provide header information and payload information of an MMT transmission packet for transmitting complex multimedia data in a hybrid network, and can provide a service suitable for a hybrid network environment by applying the MMT technology.
도 1은 본 발명의 일 실시예에 의한 복합 멀티미디어 컨텐츠를 전송하기 위한 장치를 나타내는 도면.1 is a block diagram illustrating an apparatus for transmitting multimedia multimedia contents according to an exemplary embodiment of the present invention.
이하, 본 발명의 실시예를 도면과 함께 상세히 설명한다. 본 발명을 설명함에 있어서 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.
본 발명에서 복합 네트워크 환경은 서버(Server)와 클라이언트(Client)의 연결 구조가 브로드캐스트 방송을 위한 전용 네트워크(이하, 브로드캐스트)와 인터넷 통신을 위한 네트워크(이하, 브로드밴드)가 동일한 클라이언트에게 동시에 제공될 수 있으며, 클라이언트는 복수개의 네트워크을 통하여 서비스를 제공받을 수 있는 환경을 말한다. 또한, 복수개의 네트워크 환경은 브로드캐스트, 브로드캐스트 환경, 브로드밴드, 브로드밴드 환경의 복수 접속 환경을 포함하며, 두가지 환경이 복합적으로 연결 될 수도 있고, 유선 또는 무선 네트워크를 포함한다.In the complex network environment of the present invention, a connection structure between a server and a client is simultaneously provided to a client for a broadcast network (hereinafter referred to as broadcast) and a network for internet communication (hereinafter referred to as broadband) And a client is an environment in which services can be provided through a plurality of networks. In addition, the plurality of network environments include a plurality of connection environments of a broadcast, a broadcast environment, a broadband, and a broadband environment, and the two environments may be connected in a complex manner and include a wired or wireless network.
또한, 본 발명에서 복합 미디어 컨텐츠는 클라이언트에서 오디오, 비디오 및 동기화된 자막, 이미지와 같이 시간적인 성격을 가지고 재생되는 멀티미디어 컨텐츠와 비실시간적인 성격을 가지는 오디오북, 멀티미디어 위젯, 파일 등의 데이터가 함께 담겨져 있는 형태로 서비스되는 관계에 따라 복합적으로 사용 될 수 있는 컨텐츠를 말한다.In addition, in the present invention, multimedia media contents include data such as audio, video and synchronized subtitles, multimedia contents that are played back with time characteristics such as images, and audio books, multimedia widgets, Is a content that can be used in combination depending on the relationship in which it is stored in the form in which it is embedded.
도 1은 본 발명의 일 실시예에 의한 복합 멀티미디어 컨텐츠를 전송하기 위한 장치(10)를 나타내는 도면이다.1 is a block diagram of an
본 발명의 일 실시예에 의한 복합 멀티미디어 컨텐츠를 전송하기 위한 장치(10)는 MMT 기술을 이용하여 복합 멀티미디어 컨텐츠를 전송할 수 있는데, MMT의 전송 계층은 복합 멀티미디어 컨텐츠에 포함된 데이터에 따라 적합한 전송 구조를 구성하고 이를 효율적으로 전송하기 위한 기능을 담당한다. 이를 위하여 MMT 전송 계층은 공통적인 전송 정보와 특징적인 전송 정보로 구분된 구조를 포함할 수 있다.The
도 1을 참조하면, 본 발명의 전송 장치(10)의 MMT 페이로드는 크게, 실시간 방송 및 시간에 밀접한 관계가 있는 실시간 데이터 전송을 위한 스트리밍용 페이로드(150) 구조와 비실시간적인 데이터 전송을 위한 파일 전송용 페이로드(160) 구조로 구성될 수 있다. 또한, 스트리밍용 페이로드(150)는 실시간 데이터 전송을 위하여 전송되는 기본 단위로 복합 미디어 컨텐츠의 MMT M(Media)-Unit(110) 또는 MMT MFU (Media Fragment Unit; 100)을 이용하여 구성될 수 있다.Referring to FIG. 1, the MMT payload of the
파일 전송용 페이로드(160)는 비실시간 데이터 전송을 위하여 사용되며, 전송을 위한 기본 단위로는 복합 멀티 미디어 컨텐츠의 MMT Asset(120)(이하, Asset) 또는 MMT Package(130)(이하, Package)의 전체 또는 특정 일부 단위를 기본 단위로 구성될 수 있다. 복합 미디어 컨텐츠를 부호화한 단위는 MFU(100)혹은 M-Unit(110)으로 구성될 수 있는데, MFU(100)는 독자적으로 복호화가 가능한 비디오인 경우, 부호화의 한 프레임 혹은 프레임이 여러 Slice 구조로 구성된 경우 그 중 한 Slice 단위를 의미한다. 또한, M-Unit(110)은 독자적으로 복호화가 가능한 비디오인 경우, 부호화의 한 프레임 혹은 독자적으로 복호화가 가능한 부호화 취급 단위인 GOP (Group of Picture) 단위를 의미한다. MFU(100) 또는 M-Unit(110)은 복합 미디어의 속성과 서비스를 고려하여 그 구조가 결정될 수 있다.The
Asset(120)은 동일한 미디어 타입으로 구성된 M-Unit(110)들의 연속된 스트림이며, Package(130)는 단일 Asset(120) 혹은 복수개의 Asset(120)들의 묶음 형식으로 서비스를 위한 부가 정보 등이 포함되는데, 여기서, Package(130)는 단일 Asset(120) 혹은 복수개의 Asset(120)들의 묶음 형식으로 서비스를 위한 부가 정보 등이 포함되는데, 이때, 부가 정보는 시간, 공간적 배치 순서와 같은 복합 멀티미디어의 화면 구성 정보, 전송 요구 대역폭, 손실 가능 여부, 지연 시간 허용 여부 등에 관한 복합 네트워크 환경을 고려한 전송 환경 정보가 포함된다.
본 발명의 전송 장치(10)는 실시간 방송과 같이 실시간 전송을 요구하는 서비스의 경우에는 MFU(100), M-Unit(110)을 단위로 페이로드를 구성하여 멀티미디어 컨텐츠를 전송할 수 있으며, 방송망을 이용한 VoD(Video on Demand)서비스와 같이 비실시간 전송을 요구하는 서비스인 경우에는 Asset(120), Package(130)를 단위로 페이로드를 구성하여 멀티미디어 컨텐츠를 전송할 수 있다. 또한, 실시간 데이터 전송을 위한 스트리밍 페이로드(150) 및 비실시간 데이터 전송을 위한 파일 전송 페이로드(160)는 IP 기반의 인터넷 프로토콜인 TCP/ UDP(170) 환경에서 동작하는 MMT 전송 패킷(140) 또는 인터넷 프로토콜인 RTP(180)의 페이로드에 포함되어 단말에게 전송될 수 있다.In the case of a service requesting real-time transmission such as real-time broadcasting, the
한편, 스트리밍 페이로드(150) 및 파일 전송 페이로드(160)와 같은 MMT 페이로드는 전송 환경에 따라 사용되는 구성 정보를 포함하는 헤더 영역과 전송 데이터를 포함하는 데이터 영역으로 구성될 수 있고, 전송 데이터는 전송 환경에 따라 단일 페이로드 혹은 멀티플렉싱 되어 복수개의 페이로드로 전송될 수 있는데, 멀티플렉싱을 위한 페이로드는 일정한 단위로 둘 또는 그 이상의 조각으로 분리될 수 있다.
Meanwhile, the MMT payload, such as the
또한, 특정 전송 기능을 고려하여 일정 단위로의 인터리빙 기능을 제공할 수 있는데, 페이로드는 전송 계층의 가능한 일반적인 단위 구조로 상당히 효율적이고 단순한 것으로 정의될 수 있다.In addition, it is possible to provide a predetermined unit of interleaving function in consideration of a specific transmission function. The payload can be defined as a simple and effective unit structure of a transmission layer as much as possible.
본 발명에서 복합 네트워크 환경에서 복합 멀티미디어 컨텐츠 전송을 위한 범용적인 MMT 페이로드의 헤더 영역은 [표 1]과 같이 구성될 수 있다.
In the present invention, the header area of the general MMT payload for transmitting the multimedia contents in the complex network environment can be configured as shown in [Table 1].
i) 페이로드 유형(Payload Type)i) Payload Type
페이로트 유형은 페이로드 유형은 해당 페이로드의 데이터 구성 타입을 나타내며, 구체적으로는 전송되는 데이터의 타입과 구성 정보를 나타낸다. 이때, 데이터의 타입과 이에 따른 구성 정보는 페이로드 데이터의 유형 즉, 완전한 M-Unit(110)인지, M-Unit(110)의 단순 조각(fragment), 완전한 MFU(100) 또는 복수개의 MFU(100)들의 집합(Aggregation) 되어있는지를 가리킨다. 또한, 해당 페이로드가 전송하는 데이터의 유형이 전송 데이터인지, 제어를 위한 데이터인지를 구분하는 인자를 포함하며, 전송 데이터의 타입을 구분하는 구분자 정보를 포함한다.The payload type indicates the data configuration type of the payload, and specifically, the type and configuration information of the transmitted data. At this time, the type of data and the configuration information according to the type of the data are the type of the payload data, that is, a complete M-
일 예로, 전송하는 데이터가 비디오, 오디오, 이미지, 텍스트와 같은 미디어 타입의 대한 정보(media type)와 이와 관련된 부호화 정보 타입(codec type)을 포함한다. 또한, 추가적인 데이터 타입으로는 페이로드에 전송되는 데이터가 동일한 시간(single time stamp)의 데이터 타입, 동일하지 않고 복수 시간정보(multiple time stamp)를 나타내는지 여부, 시간 정보를 필요하지 않음(non-time stamp)을 나타내는 구분자 정보를 포함한다.For example, the data to be transmitted includes information on a media type such as video, audio, image, and text, and a codec type related thereto. Additional data types may include data types transmitted in a payload, data types of a single time stamp, whether or not they represent multiple time stamps, not time information, time stamp).
ii) 프레그먼트 지시자(Fragmentation indicator)ii) Fragmentation indicator
프레그먼트 지시자는 전송되는 페이로드가 조각으로 나누어진 경우, 페이로드의 시작, 중간 그리고 마지막임을 나타내는 정보를 나타낸다. 예를 들어 해당 페이로드의 데이터가 미디어의 MFU(100)인 경우, 클라이언트에서는 이 정보를 이용하여 데이터 처리의 묶음 단위로 취급하여 전송할 수 있다. 또한 페이로드의 마지막 조각을 수신 받은 경우 단말은 완전한 페이로드를 구성하여 복호화 처리를 진행할 수 있다.The fragment indicator indicates information indicating the beginning, middle, and end of the payload when the payload being transmitted is divided into fragments. For example, when the data of the corresponding payload is the
라이브 스트리밍(live streaming) 또는 VoD 전송의 경우, 전송을 위한 페이로드는 단수의 MFU(100) 혹은 M-Unit(110) 크기가 될 수 있으며, 파일 전송의 경우에는 페이로드는 파일 전체의 크기가 될 수 있다. 또한, 이와 같은 정보를 통해서 연쇄화된 페이로드임을 나타낼 수 있으며, 해당 정보 구성을 통하여 복수개의 MFU(100) 혹은 M-Unit(110) 단위로의 멀티플렉싱 기능을 제공할 수 있다. 하나의 페이로드안에서 복수 개의 M-Unit(110) 혹은 MFU(100)들을 전송하는 것이 가능하다.In the case of live streaming or VoD transmission, the payload for transmission may be a single MFU (100) or M-Unit (110) size, and in the case of file transmission, . In addition, it can indicate that the payload is chained through such information, and can provide a multiplexing function for a plurality of
iii) 시퀀스 번호(Sequence Number)iii) Sequence Number
시퀀스 번호는 각 페이로드에 대해 하나 단위로 증가되고, 전송되며, 페이로드 손실을 검출하기 위해 수신기에서 사용된다. MMT는 MMT 패킷 손실에 대한 어떠한 동작도 행하지 않는데, 이는 원하는 동작을 행하기 위해 어플리케이션에 남겨진다. MMT 전송은 전송의 보장을 제공하지 않지만, 시퀀스 번호의 존재는 손실된 페이로드를 검출하는 것을 가능하게 한다.The sequence number is incremented, transmitted, and used by the receiver to detect payload loss, one for each payload. The MMT does not perform any action on the MMT packet loss, which is left to the application to perform the desired operation. The MMT transmission does not provide a guarantee of transmission, but the presence of a sequence number makes it possible to detect a lost payload.
iv) 길이(Length) :iv) Length:
이 필드는 페이로드(헤더와 데이터)의 길이를 지시한다. This field indicates the length of the payload (header and data).
v) 타임스탬프(Time stamp):v) Time stamp:
이 필드는 페이로드의 재생 시점을 확인 할 수 있는 용도로 활용되며, 실시간 전송을 위하는 페이로드에 나타낸다.This field is used to confirm the playback point of the payload and indicates the payload for real-time transmission.
vi) 멀티프렉싱 정보(Multiplexing information)vi) Multiplexing information
이 필드 정보는 해당 페이로드에 포함된 전송 단위가 복합적으로 멀티플렉싱 되어 있음을 나타내는 것으로, 일예로 복수의 M-Unit이 페이로드에 포함된 경우를 나타낸다. 또한, 구체적인 해당 정보로는 멀티플렉스된 구성 단위의 개수, 각 구성 단위의 크기, 구성 단위의 오프셋(Offset) 등이다.This field information indicates that the transmission units included in the payload are multiplexed in a multiplexed manner. For example, the field information indicates that a plurality of M-Units are included in the payload. Specific information includes the number of multiplexed constituent units, the size of each constituent unit, and the offset of the constituent units.
vii) 집합(Aggregation)vii) Aggregation
이 필드는 페이로드의 설정 정보를 지시하며, 이 필드의 정보는 페이로드 타입에 의존한다. 이는 해당 페이로드가 단편화(Fragmented)된 상태인 경우에는 해당 정보가 잔여 조각된 페이로드의 개수를 의미하며, 집합(Aggregate) 된 상태에서는 해당 페이로드에 포함된 M-Unit(110) 혹은 MFU(100)의 개수를 의미한다.This field indicates the setting information of the payload, and the information of this field depends on the payload type. If the corresponding payload is in a fragmented state, the information indicates the number of remaining fragmented payloads. In the aggregated state, the M-
viii) 페이로드 구성(Payload Configuration)viii) Payload Configuration
페이로드의 구성은 다양한 전송 환경 및 서비스를 고려하여 효율적으로 구성될 필요가 있으며, 이는 모든 페이로드에 적용 될 수 있는 정보와 특정한 페이로드에만 적용될 수 있는 정보들로 구분되어 구성될 수 있다. 또한, 특정한 페이로드를 위해 전형적으로 매우 적은 구성이 필요할 수 있는데, 본 발명에서는 단순한 페이로드 구성을 허용하기 위해, 전용 수신기를 제외하고, 특정한 용도를 위해 정의되는 특정 모드들(modes)이 필요하다.The configuration of the payload needs to be efficiently configured considering various transmission environments and services, and it can be configured to be divided into information applicable to all payloads and information applicable only to a specific payload. Also, very few configurations are typically needed for a particular payload, but in the present invention, certain modes are defined for a particular use, except for a dedicated receiver, in order to allow simple payload configuration .
일 예로, 어느 MMT 컨텐츠를 전송하기 위해 이용될 수 있는 포괄 모드(generic mode) 뿐만 아니라, MMT 스트림스(streams) 모드, 파일 전송 (file delivery) 모드들을 고려해 볼 수 있다. 또한, 미래에 어느 추가적인 시스템에 관련된 정보의 전송을 위한 필요를 예상하기 위해 보조 필드(auxiliary field)가 어느 데이터를 전송할 수 있도록 구성될 수 있다. 구체적으로 보조 필드에는 손실 제어를 위한 기능을 제공할 수 있는 기능 제공 식별자, 손실 복원 부호화 정보, 자동 에러 손실 복구 요청을 위한 정보, 단말에서 제공해야 하는 최소 메모리 버퍼 크기, 전송 데이터에서 사용하는 임시 메모리 버퍼 크기, 임계 전송 데이터, 최대 손실 허용율, 최대 허용 패킷 지연 시간, 평균 패킷 지연 시간과 네트워크 동기화를 위한 동기화 부호 정보 등이 포함될 수 있다.For example, MMT streams mode, file delivery modes may be considered, as well as a generic mode that may be used to transmit certain MMT content. Also, an auxiliary field may be configured to transmit certain data to anticipate the need for the transmission of information relating to any additional systems in the future. Specifically, the auxiliary field includes a function providing identifier capable of providing a function for loss control, lossy reconstruction encoding information, information for requesting automatic error loss recovery, a minimum memory buffer size to be provided by the terminal, Buffer size, critical transmission data, maximum loss tolerance, maximum allowed packet delay time, average packet delay time, and synchronization code information for network synchronization.
다음에서는 상술한 바와 같이 구성되는 MMT 페이로드를 이용하여 데이터를 전송하는 경우를 살펴본다.Next, a case of transmitting data using the MMT payload configured as described above will be described.
먼저, 실시간 방송을 위한 복합 컨텐츠 데이터 전송을 살펴보면, 단말은 브로드캐스트 및 브로드밴드 네트워크 환경으로 단일 서버 혹은 복수개의 서버와 연결되어 있고, 이러한 네트워크 환경을 통하여 실시간 축구 경기 방송 서비스와 축구 경기와 관련된 사용자 부가 서비스, 즉 다른 언어의 자막과 사용자 오디오 해설 정보를 대화면 디스플레이 장치를 가진 클라이언트에게 실시간으로 제공하고자 한다.First, the multi-content data transmission for real-time broadcasting will be described. The terminal is connected to a single server or a plurality of servers in a broadcast and broadband network environment. Through the network environment, Service, i.e., subtitles of different languages and user audio commentary information to a client having a large display device in real time.
이와 같은 경우, 실시간 방송 컨텐츠를 구성하고 있는 데이터 단위 중 기본 전송 단위로 취급 될 수 있는 M-Unit(110) 혹은 MFU(100)를 단일 페이로드 혹은 복수개의 페이로드에 담아 전송할 수 있다. M-Unit(110)을 기본 전송 단위로 전송하는 경우, 비디오 데이터인 경우 하나의 GOP (Group of Picture)를 M-Unit(110)으로 취급하고 이를 단일 페이로드로 전송할 수 있다. 하나의 GOP 데이터는 독자적으로 복호화가 가능한 최대 비디오 단위이며, H.264 비디오 부호화인 경우, 독자적으로 복호화가 가능한 단위로 슬라이스가 있는데, 이를 본 실시예에서는 MFU(100)의 최소 단위로 이용할 수 있다.In this case, the M-
H.264로 부호화된 하나의 GOP를 M-Unit(110)을 이용하여 전송을 위한 페이로드로 구성하는 경우에는 [표 2]와 같이 구성될 수 있는데, 통상적으로 하나의 GOP 크기는 페이로드 크기 보다 크기 때문에, 여러 개의 페이로드로 구성될 수 있다. 또한, [표 2]와 같이 구성된 페이로드는 페이로드의 단위 데이터가 M-Unit(110)인 경우 뿐만 아니라, MFU(100)인 경우에도 동일한 구조로 나타낼 수 있다.In the case where one GOP encoded with H.264 is configured as a payload for transmission using the M-
- payload type : H.264 Video GOP
- fragmentation indicator : on
- sequence number : 0 에서부터 증가한다.
- length : 1024 (byte) payload의 길이를 나타낸다.
- timestamp : 해당 GOP 의 재생 시간의 대표값이 NTP timestamp로 표시된다.
- multiplexing information : off
- aggregation : 5 해당 GOP의 끝 payload는 5개 이후에 완료된다.
- payload configuration : ALFEC indicator, DRM indicator
- payload
- payload type: H.264 Video GOP
- fragmentation indicator: on
- sequence number: increases from 0.
- length: 1024 (byte) Indicates the length of the payload.
- timestamp: The representative value of the playback time of the corresponding GOP is indicated by the NTP timestamp.
- multiplexing information: off
- aggregation: 5 The end payload of the corresponding GOP is completed after five.
- payload configuration: ALFEC indicator, DRM indicator
- payload
다음으로, 복수개의 서버로부터 전송되는 서비스로 비실시간 방송으로 프로그레이시브 다운로드 컨텐츠를 전송하는 경우를 살펴본다. 비실시간 데이터 전송을 위한 MMT 페이로드의 전송 데이터 기본 단위 구조는 Asset(120) 또는 Package(130)인 경우로 구분할 수 있으며, 각 전송 데이터의 타입에 따라 페이로드 유형(type)이 구분될 수 있다. 또한, 해당 데이터의 전송 특성이 비실시간인 경우를 고려하는 것이므로 시간과 관련된 속성 정보는 해당 페이로드 데이터에서 제외될 수 있으며, 이는 대용량 데이터 전송에 있어 효율성을 제공할 수 있다. 또한, 손실에 민감한 전송 데이터의 특성에 따라 손실 복원에 필요한 추가 정보가 보조 필드를 통해서 서술 될 수 있는데, 보조 필드의 정보는 실시간 전송 보다는 손실 복원에 관한 데이터 구조 정보를 제공할 수 있다.Next, a case of transmitting progressive download contents by non-real-time broadcasting to a service transmitted from a plurality of servers will be described. The basic unit structure of the transmission data of the MMT payload for non real-time data transmission can be divided into
실시간 방송을 위한 복합 멀티미디어 컨텐츠 및 비실시간 복합 멀티미디어 컨텐츠 전송의 경우를 살펴보면, 단말은 브로드캐스트 및 브로드밴드 네트워크 환경으로 단일 서버 혹은 복수개의 서버와 연결되어 있고, 이러한 네트워크 환경을 통하여 실시간 축구 경기 방송 서비스와 축구 경기와 관련된 사용자 부가 서비스를 대화면 디스플레이 장치를 가진 클라이언트에게 실시간으로 제공하고자 한다.In the case of multimedia multimedia contents and non real-time multimedia contents transmission for real-time broadcasting, the terminal is connected to a single server or a plurality of servers in a broadcast and broadband network environment. And provide a user-added service related to a soccer game to a client having a large-screen display device in real time.
전송 구조의 기본 단위 데이터가 실시간 전송 데이터인 MFU(100), M-Unit(110) 과 비손실 전송 데이터인 Asset(120), Package(130)를 복합적으로 전송하는 경우를 고려할 수 있는데, 이에 대한 추가 정보는 멀티플레싱 정보(multiplexing information)를 통하여 해당 전송 구조에 대한 정보를 서술 할 수 있다. 이는 해당 전송 데이터 단위의 멀티플렉스(multiplex) 구조 정보인 멀티플렉스 유형(multiplex type), 각 전송 데이터 단위의 오프셋(offset), 길이(length) 그리고 전송 데이터 단위의 ID를 통해 해당 데이터 정보의 식별 및 구분 단위 정보를 제공할 수 있다.It may be considered that the basic unit data of the transmission structure is a combination of the
한편, 본 발명의 일 실시예에 의한 MMT 페이로드는 MMT 전송 패킷(140) 또는 인터넷 프로토콜인 RTP(Real Time transport Protocol) 패킷(180)에 의해 전송될 수 있는데, MMT 전송 패킷(140)은 MMT 페이로드 전송을 위한 데이터 패킷(packet) 구조이며, 페이로드를 구분 단위로 데이터를 패킷화하여 네트워크로 전송하는 기능을 수행한다. 또한, MMT 전송 패킷(140)은 헤더 영역에 전송에 관련된 추가 정보를 포함하는데, 추가적인 정보에는 패킷 ID, 패킷 번호, QoS(Quality of Service) 제공을 위한 Flow ID, 전송 시간 및 제어 정보로 응용될 수 있는 타임스탬프(timestamp)를 고려해 볼 수 있다.Meanwhile, the MMT payload according to an exemplary embodiment of the present invention may be transmitted by an
상술한 추가 정보에 대해 구체적으로 살펴보면 다음과 같다.The additional information will be described in detail as follows.
i) 패킷(Packet) IDi) Packet ID
패킷 ID는 MMT 패킷(140)의 식별자를 나타내는데, 패킷 ID는 하위 프로토콜의 데이터 그램(datagram)의 프래그먼트(fragments)를 어셈블링(assembling)하는 데 있어서, 송신측에 의하여 할당된 식별값이다.The packet ID represents the identifier of the
ii) 시퀀스 번호(Sequence Number)ii) Sequence Number
시퀀스 번호는 전송되는 패킷의 고유(Unique)의 식별 번호로 이를 통해 수신단에서는 해당 패킷의 손실 여부를 판단할 수 있으며, 시퀀스 번호에 따른 패킷 정렬 기능을 수행할 수 있게 된다. 또한 시퀀스 번호 정보는 순차적으로 증가할 수 있다.The sequence number is a unique identification number of a packet to be transmitted. The receiving terminal can determine whether the packet is lost or not and can perform a packet sorting function according to the sequence number. Sequence number information can also be sequentially increased.
iii) 플로우라벨(flowLabel)iii) flow label (flowLabel)
플로우 라벨은 각 데이터 전송에 요구되는 각각의 플로우에 있어서 요구되는 특정한 QoS를 식별한다. 예를 들어, 패킷 유형(Type of Packet), 지연(Delay), 처리량(Throughput), 동기 파라미터(Synchronization parameter) 등이 있으며, 구체적으로는 [표 3] 내지 [표 6]과 같이 데이터 전송 타입에 따라 세분화하여 나타낼 수 있다.The flow label identifies the specific QoS required for each flow required for each data transmission. For example, there are a packet type (Type of Packet), a delay (Delay), a throughput (Throughput), a synchronization parameter, and the like. Specifically, as shown in [Table 3] And can be represented in detail.
- 패킷 유형(Type of Packet)- Type of Packet
이 필드에서는, MMT 전송 패킷(140)에 대한 패킷의 타입 정보를 나타내며, 3bit를 이용할 수 있다.This field indicates the type information of the packet for the
- 지연(Delay)- Delay
이 필드에서는 지연 정도를 나타내며, 1비트를 이용할 수 있다.This field indicates the degree of delay, and one bit can be used.
- 처리량(Throughput)- Throughput
이 필드에서는 처리량의 정도를 나타내며, 1비트를 이용할 수 있다.This field indicates the degree of throughput, and one bit can be used.
- 동기 파라미터(Synchronization parameter)- Synchronization parameter
이 필드에서는 동기 정보를 나타내며, 3비트를 이용할 수 있다.This field indicates synchronization information, and 3 bits can be used.
iv) 패킷 구성 정보(Packet configuration Information)iv) Packet configuration information
패킷 구성 정보는, 패킷화된 데이터의 전송에 있어 해당 서비스 클래스(service class)의 유연(flexible)하고 효율적인 메커니즘(mechanism)에 접근하기 위한 구성 정보를 제공한다. 이러한 파라미터들은 네트워크 레이어(Network layer)에서 연결의 QoS와 종단간(end-to-end) 네트워크 성능을 측정하는데 이용된다.The packet configuration information provides configuration information for accessing the flexible and efficient mechanism of the corresponding service class in the transmission of the packetized data. These parameters are used to measure the QoS and end-to-end network performance of the connection at the network layer.
네트워크는 이러한 파라미터들의 특정 값을 만족함으로써 협상된 QoS를 보장하여야 하며, 해당 파라미터 정보들은 IPv4 tos field, IPv6의 QoS field 파라미터의 참조자로써 활용 가능하다. [표 7] 및 [표 8]은 구체적인 파라미터의 구조를 나타낸다.
The network must guarantee the negotiated QoS by satisfying a specific value of these parameters, and the corresponding parameter information is available as a reference to the QoS field parameter of the IPv4 tos field, IPv6. [Table 7] and [Table 8] show the structure of concrete parameters.
- 지연 (Delay)(range)- Delay (range)
이 필드에서는 전송에 관련된 최대 종단간 허용 지연 시간을 나타낸다. 해당 지연 정보를 바탕으로 수신측에서는 지연 시간 초과 여부를 쉽게 판단하여 이에 대한 지연 시간 감소 노력에 대한 대응 시간을 줄일 수 있다.This field indicates the maximum end-to-end latency associated with the transmission. Based on the delay information, the receiver can easily determine whether or not the delay time is exceeded and reduce the response time for the delay time reduction effort.
- AU 손실률(loss rate)(%)- AU loss rate (%)
전송 패킷의 허용 손실율(Loss Ratio)을 나타낸다. 이에 대한 백분율은 초당 패킷의 손실 허용(allowance)을 나타낸다. 해당 정보를 바탕으로 수신측에서는 패킷 손실에 대한 복구 기능에 대한 대처 방법 및 그 여부를 보다 빠르게 판단 할 수 있다.Represents a loss ratio of a transmission packet. The percentage of this represents the allowance of packets per second. Based on the information, the receiving side can quickly determine whether or not to cope with the packet loss recovery function.
한편, 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되지 않으며, 후술되는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.
While the invention has been shown and described with reference to certain preferred embodiments thereof, it will be understood by those skilled in the art that various changes and modifications may be made without departing from the spirit and scope of the invention. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the scope of the appended claims, and equivalents thereof.
100 : MMT MFU 110 : MMT M-Unit
120 : MMT Asset 130 : MMT Package
140 : MMT Packet 150 : 스트리밍용 페이로드
160 : 파일 전송용 페이로드 170 : TCP/UDP
180 : RTP100: MMT MFU 110: MMT M-Unit
120: MMT Asset 130: MMT Package
140: MMT Packet 150: payload for streaming
160: Payload for file transfer 170: TCP / UDP
180: RTP
Claims (2)
헤더와 멀티미디어 송신 유닛을 기반으로 생성된 데이터를 포함하는 페이로드로 구성된 적어도 하나의 멀티미디어 데이터 패킷을 생성하는 제어부와,
상기 적어도 하나의 멀티미디어 데이터 패킷을 송신하는 송신부를 포함하며;
상기 적어도 하나의 멀티미디어 데이터 패킷은,
상기 멀티미디어 송신 유닛의 분할에 의한 데이터 유닛으로 상기 데이터가 생성된 경우, 상기 데이터가 상기 데이터 유닛의 분할된 일부인지를 알려주는 타입 정보와, 상기 페이로드에 포함되는 미디어 데이터의 종류를 식별하기 위한 지시자와, 상기 페이로드에 포함되는 상기 데이터 유닛이 복수인 경우를 알려주는 지시자를 포함하는 송신 장치.
A media data transmitting apparatus in a multimedia system,
A control unit for generating at least one multimedia data packet including a header and a payload including data generated based on the multimedia transmission unit;
And a transmitter for transmitting the at least one multimedia data packet;
Wherein the at least one multimedia data packet comprises:
Type information indicating whether the data is a divided part of the data unit when the data is generated in the data unit by division of the multimedia transmission unit and information indicating a type of the media data included in the payload And an indicator for indicating when a plurality of the data units included in the payload are included.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150024328A KR101855327B1 (en) | 2015-02-17 | 2015-02-17 | Apparatus and method for delivering multimedia data in hybrid network |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150024328A KR101855327B1 (en) | 2015-02-17 | 2015-02-17 | Apparatus and method for delivering multimedia data in hybrid network |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110104879A Division KR20130040090A (en) | 2011-10-13 | 2011-10-13 | Apparatus and method for delivering multimedia data in hybrid network |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180041206A Division KR101955690B1 (en) | 2018-04-09 | 2018-04-09 | Apparatus and method for delivering multimedia data in hybrid network |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150035857A true KR20150035857A (en) | 2015-04-07 |
KR101855327B1 KR101855327B1 (en) | 2018-05-09 |
Family
ID=53032855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150024328A KR101855327B1 (en) | 2015-02-17 | 2015-02-17 | Apparatus and method for delivering multimedia data in hybrid network |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101855327B1 (en) |
-
2015
- 2015-02-17 KR KR1020150024328A patent/KR101855327B1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
KR101855327B1 (en) | 2018-05-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11381625B2 (en) | Apparatus and method for transmitting multimedia data in hybrid network | |
KR101972951B1 (en) | Method of delivering media data based on packet with header minimizing delivery overhead | |
CN107196941B (en) | Interface apparatus and method for transmitting and receiving media data | |
US10484445B2 (en) | Apparatus and method for transmitting multimedia data in a broadcast system | |
US10498788B2 (en) | Method and apparatus for transceiving data packet for transmitting and receiving multimedia data | |
KR101955690B1 (en) | Apparatus and method for delivering multimedia data in hybrid network | |
KR101983045B1 (en) | Apparatus and method for delivering multimedia data in hybrid network | |
KR101855327B1 (en) | Apparatus and method for delivering multimedia data in hybrid network | |
KR102074226B1 (en) | Method and apparatus for transmitting and receiving data packet |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
A107 | Divisional application of patent |