KR20130120422A - 멀티미디어 전송 시스템을 위한 데이터 송수신 방법 및 장치 - Google Patents

멀티미디어 전송 시스템을 위한 데이터 송수신 방법 및 장치 Download PDF

Info

Publication number
KR20130120422A
KR20130120422A KR1020130046166A KR20130046166A KR20130120422A KR 20130120422 A KR20130120422 A KR 20130120422A KR 1020130046166 A KR1020130046166 A KR 1020130046166A KR 20130046166 A KR20130046166 A KR 20130046166A KR 20130120422 A KR20130120422 A KR 20130120422A
Authority
KR
South Korea
Prior art keywords
payload
data
data unit
header information
type
Prior art date
Application number
KR1020130046166A
Other languages
English (en)
Other versions
KR101501347B1 (ko
Inventor
박경모
유성열
황승오
송재연
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of KR20130120422A publication Critical patent/KR20130120422A/ko
Application granted granted Critical
Publication of KR101501347B1 publication Critical patent/KR101501347B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware

Abstract

멀티미디어 전송 시스템을 위한 데이터 송수신 방법 및 장치를 개시한다. 본 발명의 방법은, 캡슐화 기능 계층으로부터 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 입력하는 과정과, 상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하는 과정과, 상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하는 과정과, 상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 과정과, 상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 과정을 포함한다. 상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함하여 구성된다.

Description

멀티미디어 전송 시스템을 위한 데이터 송수신 방법 및 장치{METHOD AND APPARATUS FOR TRANMITING AND RECEIVING DATA MULTIMEDIA TRANSFER SYSTEM}
본 발명은 멀티미디어 전송 시스템에 관한 것으로서, 특히 멀티미디어 데이터를 송신하고 수신하는 방법 및 장치에 관한 것이다.
멀티미디어 서비스란 화상전화와 같은 대화형 서비스, 주문형 비디오(Video On Demand: VOD) 서비스와 같은 스트리밍 서비스, 또는 멀티캐스트 및 브로드캐스트 서비스 등의 서비스를 의미한다. 실시간 멀티미디어 서비스는 서비스의 형태에 따라 대화형 서비스, 인터랙티브 서비스, 스트리밍 서비스로 나눌 수 있으며, 참여하는 사용자의 수에 따라 유니캐스트, 멀티캐스트, 브로드캐스트로 나눌 수도 있다.
종래 방송 네트워크에서 멀티미디어 컨텐츠의 전송을 위해서 MPEG-2 TS (Moving Picture Experts Group-2 Transport Stream)를 사용하는 것이 일반적이었다. MPEG-2 TS는 오류가 있는 전송 환경에서 복수의 방송 프로그램(부호화된 다수의 비디오 비트 열)이 다중화된 비트 열을 전송하기 위한 대표적인 전송 기술로 사용되고 있다. MPEG-2 TS는 멀티미디어 시대의 디지털 TV 방송 등에서의 사용이 적합하였다.
MPEG-2 TS는 멀티미디어 서비스를 지원함에 있어 몇 가지의 한계점을 가진다. 즉 MPEG-2 TS는 단방향 통신, 고정된 프레임 크기로 인한 전송의 비효율성, 오디오/비디오에 특화되어 있는 전송 프로토콜 및 인터넷 프로토콜(IP: Internet Protocol)을 사용하여 전송할 시에 불필요한 오버헤드의 발생 등과 같은 한계를 가지고 있었다.
따라서 MPEG에서는 MPEG 기술을 기반으로 멀티미디어 서비스를 지원하기 위한 멀티미디어 전송 기술 중 하나로 MMT (MPEG MEDIA Transport) 표준을 새로이 제안하였다. 예컨대 MMT 표준은 이종(heterogeneous) 네트워크를 통해 복합 컨텐츠를 효율적으로 전송하기 위해 적용될 수 있다. 여기서 복합 컨텐츠는 비디오(Video)/오디오(Audio)/어플리케이션(Application) 등에 의한 멀티미디어 요소를 가지는 컨텐츠의 집합을 의미한다. 그리고 이종 네트워크는 일 예로서 방송 네트워크와 이동 통신 네트워크 등이 혼재하는 네트워크가 될 수 있다.
MMT 표준은 멀티미디어 서비스를 위한 전송 네트워크에서의 기본 기술이 되고 있는 IP에 보다 친화적인 전송 기술을 정의하는 것을 목적으로 하고 있다. 이를 위해, 변화하는 멀티미디어 서비스 환경에서 부호화된 미디어 데이터를 포함하는 다양한 포맷의 논리 데이터 개체들을 보다 효율적으로 전달하기 위한 MMT 전송 패킷의 구조를 필요로 하게 되었다.
본 발명은 멀티미디어 전송 시스템에서 부호화된 미디어 데이터를 효율적으로 송신 및 수신하기 위한 방법 및 장치를 제공한다.
본 발명은 멀티미디어 전송 시스템에서 다양한 포맷의 논리 데이터 개체들을 송신 및 수신하기 위한 방법 및 장치를 제공한다.
본 발명은 IP를 기반으로 멀티미디어 서비스를 지원하는 방송 시스템에서 이종 멀티미디어 데이터 패킷을 구성하는 방법 및 장치를 제안한다.
본 발명의 일 실시예에 따른 방법은; 멀티미디어 전송 시스템을 위한 데이터 송신 방법에 있어서, 캡슐화 기능 계층으로부터 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 입력하는 과정과, 상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하는 과정과, 상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하는 과정과, 상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 과정과, 상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 과정을 포함한다.
본 발명의 일 실시예에 따른 방법은; 멀티미디어 전송 시스템을 위한 데이터 송신 장치에 있어서, 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 출력하는 데이터 생성부와, 상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하고, 상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하고, 상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 데이터 구성부와, 상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 데이터 전송부를 포함한다.
본 발명의 일 실시예에 따른 장치는; 멀티미디어 전송 시스템을 위한 데이터 송신 장치에 있어서, 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 출력하는 데이터 생성부와, 상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하고, 상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하고, 상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 데이터 구성부와, 상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 데이터 전송부를 포함한다.
본 발명의 일 실시예에 따른 장치는; 멀티미디어 전송 시스템을 위한 데이터 수신 장치에 있어서, 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보와 페이로드로 구성된 멀티미디어 데이터 패킷을 상대 개체로부터 수신하는 수신부와, 상기 멀티미디어 데이터 패킷으로부터, 캡슐화 기능 계층에 의해 생성된 하나 혹은 그 이상의 제1 데이터 유닛들 및 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛의 적어도 일부를 검출하는 해석부를 포함한다.
여기서 상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함할 수 있다.
도 1은 본 발명의 일 실시예에 따른 MMT 시스템의 계층 구조를 도시한 도면이다.
도 2는 본 발명의 일 실시예에 따른 MMT 페이로드의 구성을 도식화한 것이다.
도 3은 본 발명의 일 실시예에 따른 MMT 패키지의 논리적 구조를 나타낸 것이다.
도 4는 본 발명의 실시 예에 따른 MMT 시스템에서 MMT 페이로드를 포함하는 멀티미디어 데이터 패킷을 구성하고, 전송하기 위한 흐름도를 나타낸 것이다.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 데이터 패킷의 생성 동작을 설명하기 위한 것이다.
이하 본 발명의 바람직한 실시 예를 첨부된 도면을 참조하여 상세히 설명한다. 그리고, 본 발명을 설명함에 있어서, 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단된 경우 그 상세한 설명은 생략한다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하에서는 MMT 표준에서 정의하고 있는 계층 구조에 대해 설명할 것이다. 본 발명의 실시예들에서는 멀티미디어 데이터 패킷의 구성을 제공하며, 이를 위해 MMT 표준에서 정의하고 있는 계층 구조에서 멀티미디어 데이터 패킷을 생성하기 위한 계층들을 보다 구체적으로 설명할 것이다. 여기서 멀티미디어 데이터 패킷은 MMT 서비스를 위한 전달 프레임(Delivery Frame)을 의미한다.
MMT 프로토콜(MMT Protocol: MMTP)은 IP 네트워크를 통해 MMT 페이로드 포맷(Payload Format: PF)로 구성된 전달 프레임을 전달하기 위한 어플리케이션 계층 프로토콜을 정의한다. MMT 페이로드는 MMT 페이로드 포맷으로 구성되어 효율적으로 전달할 수 있도록 디자인된다. 이종(heterogeneous) IP 네트워크들을 통해 MPEG 미디어 데이터를 효율적으로 전달하기 위해서, MMT는 캡슐화 포맷들(Encapsulation Formats)과, 전달 프로토콜들(Delivery Protocols)과, 시그널링 메시지 포맷(signaling message format)들을 정의한다.
도 1은 본 발명의 일 실시예에 따른 MMT 시스템의 계층 구조를 도시한 도면이다.
도 1을 참조하면, 멀티미디어 데이터 패킷을 구성하고 이를 전송하기 위한 미디어 부호화 계층(Media Coding Layer)(110)과 캡슐화 기능 계층(Encapsulation Function Layer: Layer E)(120)과 전달 기능 계층(Delivery Function Layer: Layer D)(130)과 전송 프로토콜 계층(transport Protocol Layer)(140)과 인터넷 프로토콜(IP) 계층(150) 및 제어 기능 계층(Control Function Layer: Layer C)(100)이 도시되었다.
본 발명의 실시예에 따르면, 미디어 부호화 계층(110)과 캡슐화 기능 계층(120)은 멀티미디어 컨텐츠 및/또는 멀티미디어 서비스에 따른 멀티미디어 데이터를 생성하는 멀티미디어 데이터 생성부로서 동작한다. 또한 전달 기능 계층(130)는 데이터 생성부로부터 입력된 멀티미디어 데이터를 기반으로 멀티미디어 데이터 패킷을 구성하는 멀티미디어 데이터 구성부로서 동작한다. 멀티미디어 데이터 구성부에 해당하는 전달 기능 계층(130)은 멀티미디어 데이터 생성부로부터 제공된 적어도 하나의 멀티미디어 데이터를 식별하여 헤더 정보를 구성하고, 헤더 정보와 적어도 하나의 멀티미디어 데이터를 결합하여 멀티미디어 데이터 패킷을 구성한다.
미디어 부호화 계층(110)에서 압축된 멀티미디어 데이터는 캡슐화(Encapsulation) 기능 계층(120)를 거쳐 파일 포맷과 유사한 형태로 패키지화되어 출력된다. 캡슐화 기능 계층(120)은 미디어 부호화 계층(110)으로부터 제공되는 코딩된 미디어 데이터 혹은 저장된 미디어 데이터를 입력으로 하여 MMT 서비스를 위한 작은 단위인 데이터 조각(segment)를 생성하며, 상기 데이터 조각을 사용하여 MMT 서비스를 위한 액세스 유닛(Access Unit)들을 생성한다. 또한 캡슐화 기능 계층(120)은 상기 액세스 유닛들을 결합 및/또는 분할함으로써 복합 컨텐츠의 생성 및 저장과 전송을 위한 패킷 포맷을 생성한다.
전달 기능 계층(130)은 캡슐화 기능 계층(120)에서 출력되는 데이터 유닛(들)을 MMT 페이로드 포맷으로 변환화한 후 MMT 전송 패킷 헤더(MMT Transport Packet Header)를 부가하여 MMT 전송 패킷으로 구성하거나 또는 기존 전송 프로토콜인 RTP(Real-time Protocol)를 사용하여 RTP 패킷으로 구성한다.
전달 기능 계층(130)에서 구성된 패킷들은 UDP(User Datagram Protocol) 혹은 TCP(Transport Control Protocol)와 같은 전송 프로토콜 계층(140)을 거쳐 최종적으로 인터넷 프로토콜(IP) 계층(150)에서 IP 패킷화되어 전송된다. 전송 프로토콜 계층(140) 및 IP 계층(150)은 데이터 전송부로서 동작할 수 있다. 선택적으로 존재할 수 있는 제어 기능부(100)는 데이터의 전송에 필요한 제어 정보 혹은 시그널링 정보를 생성하여 데이터에 부가하여 전송하거나, 혹은 별도의 시그널링 수단을 통해 전송한다.
전달 기능 계층(130)에서 생성되는 MMT 페이로드 포맷은 MMT 프로토콜 혹은 RTP에 의해 전달될 미디어 유닛(들)의 논리 구조를 정의한다. MMT 페이로드는 캡슐화된 데이터 유닛 및 MMT 계층 프로토콜들 혹은 다른 기존 어플리케이션 전송 프로토콜들(Application Transport Protocols)에 의한 다른 정보를 전달하기 위한 페이로드 포맷에 의해 특정(specify)된다. MMT 페이로드는 스트리밍(streaming)에 대한 정보 및 파일 전달(file transfer)에 대한 정보를 제공한다. 스트리밍에서, 데이터 유닛은 MMT 미디어 프래그먼트 유닛(Media Fragment Unit: MFU) 혹은 MMT 프로세싱 유닛(MMT Processing Unit: MPU)이 될 수 있다. 파일 전달을 위한 경우, 데이터 유닛은 MMT 애셋(Asset) 및 MMT 패키지(Package)가 될 수 있다.
도 2는 본 발명의 일 실시예에 따른 MMT 페이로드의 구성을 도식화한 것이다.
도 2를 참조하면, MMT 페이로드(200)는 적어도 하나의 MMT MFU(210), 적어도 하나의 MPU(230), 적어도 하나의 MMT 애셋(230) 및 MMT 패키지 중 적어도 하나를 포함하여 구성될 수 있다.
여기서 MFU(210)은 어떤 특정 미디어 코덱(Media Codec)에도 독립적인, 미디어 디코더에 의해 독립적으로 처리 가능한 코딩된 미디어 데이터를 포함하는 일반적인 컨테이너 포맷이다. MFU(210)는 MPU(220)의 조각난 데이터의 일부분을 나타내는 것으로, 독자적으로 디코딩이 가능한 최소 단위가 된다. 일 예로서 하나의 프레임을 액세스 유닛으로 사용하여 부호화가 수행되는 경우 MFU(210)는 하나의 비디오 프레임이 될 수 있으며, 다른 경우 하나의 프레임 안에 포함된 하나의 슬라이스가 될 수 있다.
MPU(220)는 하나 혹은 그 이상의 MFU들과 추가적인 전달 및 처리 관련 정보를 포함하는 컨테이너 포맷으로서, 복수의 서로 다른 액세스 유닛들로부터 생성된 다양한 개수의 MFU들을 포함할 수 있다. MPU(220)는 MMT 구현 개체(MMT compliant entity)에 의해서 완전하고 독립적으로 처리될 수 있는 부호화된 미디어 데이터 유닛을 의미하는 것으로서, 어플리케이션 환경에 따른 특정한 크기(일 예로서 비디오의 경우 1 GOP(Group of Picture))를 가질 수 있다. 일 예로서 MPU(220)는 1 GOP(일 예로서 1초의 비디오)를 구성하는 복수의 픽쳐 프레임들로 구성될 수 있으며, MFU(220)는 각 픽쳐 프레임을 포함할 수 있다.
MMT 애셋(230)은 하나 혹은 그 이상의 MPU들로 구성되는 데이터 엔터티(data entity)로서, 동일한 합성 정보(composition information) 및 트랜스포트(transport) 특성이 적용되는 가장 큰 데이터 유닛(data unit)이다. MMT 애셋(230)은 패키지된 혹은 다중화된 데이터를 포함하는 오직 한 가지 타입의 데이터만을 포함한다. 일 예로 오디오(audio)의 엘리멘터리 스트림(Elementary Stream: ES)의 적어도 일부와, 비디오(video)의 ES의 적어도 일부와, MPEG-U(User Interface) 위젯(Widget) 패키지와, MPEG-2 전송 스트림(Transport Stream: TS)의 적어도 일부와, MP4(MPEG-4) 파일의 적어도 일부와, MMT 패키지의 전체 혹은 적어도 일부가 각 MMT 애셋(230)이 될 수 있다.
여기서 엘리멘터리 스트림(ES)은 특정 미디어 코덱에 의해 정의되는 것으로서, 논리적으로 하나 혹은 그 이상의 MMT 애셋들이 될 수 있다. 계층화 코덱 및 다시점 코덱을 지원하는 MMT 애셋(230)은 다른 MMT 에셋들과 오버랩(overlap)될 수 있다.
MMT 합성 정보(MMT Composition Information: MMT-CI)는 MMT 애셋들의 공간 및 시간 관계(spatial and temporal relationship)을 정의하는 정보를 의미하며, MMT 트랜스포트 특성(MMT Transport Characteristics: MMT-TC)은 MMT 애셋들의 전달을 위해 요구되는 서비스 품질(Quality of Service: QoS)을 정의한다. MMT-TC는 특정 전달 환경에 대해 애셋 전달 특성들(Asset Delivery Characteristics: ADC)로 표현될 수 있다.
MMT 패키지(240)는 MMT 구현 개체(MMT compliant entity)에 의해 처리되는, 부호화된 미디어 데이터와 관련 정보의 집합체(collection)로 정의된다.
도 3은 본 발명의 일 실시예에 따른 MMT 패키지의 논리적 구조를 나타낸 것으로서, 도시한 바와 같이 MMT 패키지(300)는 하나 혹은 그 이상의 MMT 애셋들(320)과 MMT 합성 정보(310) 및 MMT 트랜스포트 특성을 나타내는 하나 혹은 그 이상의 ADC들(330)로 구성된다. MMT 패키지(240)는 식별자와 같은 설명 정보 및 MMT 에셋들(320)의 위치를 포함하며, MMT 패키지(240) 내의 MMT 애셋들(320)은 다중화되거나 혹은 연접될 수 있다.
MMT 패키지(240)의 처리는 MPU의 단위로 적용되며, MMT 애셋(320)은 동일한 MMT 애셋 ID를 가지는 하나 혹은 그 이상의 MPU들의 집합체로서, 각 MMT 애셋(320)에 관련된 트랜스포트 특성은 ADC(330)에 의해 표현된다. ADC(330)는 MMT 패키지를 패킷화하는 개체에 의해, MMT 페이로드의 파라미터들과 이하 상세히 서술될 MMT 패킷의 헤더 정보를 구성하는데 사용될 수 있다.
MMT 패키지에 포함될 수 있는 논리적 개체들 중, MPU는 주어진 정의에 따른 헤더 필드(header field)들을 포함하는데, 이런 필드들 중 적어도 일부는 MPU의 프로세싱에 필수적일 수 있다. 한편, MPU의 페이로드 중 MFU의 경계들 외부의 부분을 잘라내는 경우, 해당 패킷이 손실되는 경우에 에러가 보다 길게 전파(propagation)될 수 있다. 또한 낮은 지연이 요구되는 미디어 데이터에 있어서, MFU는 생성되는 시점에서 바로 송신될 필요가 있으며, 이 경우 전송 지연 시간을 방지하기 위하여 전송 순서는 생성된 MFU 데이터들을 전송한 이후에 해당 MPU의 헤더 필드 정보가 전송되도록 정해진다.
이상과 같은 특성들을 고려할 때, MMT 페이로드는 MPU 패킷들과 MFU 패킷들 간의 호환성(compatibility)을 유지할 수 있도록 구성될 필요가 있다.
도 4는 본 발명의 실시 예에 따른 MMT 시스템에서 MMT 페이로드를 포함하는 멀티미디어 데이터 패킷을 구성하고, 전송하기 위한 흐름도를 나타낸 것이다. 도 4에서는 도 1의 계층들 중 전달 기능 계층(130)에 의해 수행되는 동작을 나타내었다.
도 4를 참조하면, 과정 410에서 전달 기능 계층(130)는 캡슐화 기능 계층(120)으로부터 제공되는 멀티미디어 데이터를 입력으로 한다. 이때 캡슐화 기능 계층(120)는 멀티미디어 데이터 패킷을 구성하는데 필요한 멀티미디어 데이터 및 각 멀티미디어 데이터에 관련된 정보를 제공할 수 있다.
과정 420에서 전달 기능 계층(130)는 상기 멀티미디어 데이터의 헤더 정보에 근거하여, 멀티미디어 데이터 패킷의 MMT 페이로드에 관련된 페이로드 헤더 정보를 구성한다. 일 실시예로서 상기 페이로드 헤더 정보는 MMT 페이로드의 길이, 페이로드 데이터의 타입, 분할(fragmentation) 및 결합(aggregation)에 관련된 정보 등을 제공할 수 있으며, 그 페이로드 헤더 포맷은 시스템 운영자나 프로토콜 표준 등에 의해 정의될 수 있다.
과정 430에서 전달 기능 계층(130)는 멀티미디어 데이터의 전달을 위한 멀티미디어 데이터 패킷의 페이로드를 생성한다. 즉 과정 410에서 입력받은 멀티미디어 데이터의 적어도 일부와 과정 420에서 구성한 페이로드 헤더 정보를 결합하여 MMT 페이로드를 구성한다.
상기 MMT 페이로드를 포함하는 멀티미디어 데이터 패킷인 MMT 패킷은 과정 440에서 주어진 전송 프로토콜을 통해 상대 개체, 즉 수신기로 전송된다.
이하 본 발명의 실시예에서 제안하는 MMT 서비스에 따른 멀티미디어 데이터의 전송을 담당하는 전달 기능 계층에 의해 멀티미디어 데이터 패킷을 구성하는 구체적인 절차와 페이로드 포맷에 대해 구체적으로 설명한다. 구체적으로는 캡슐화 기능 계층(120)에서 생성된 데이터의 종류(type)에 따른 전송 데이터 구조를 제공한다. 멀티미디어 데이터 패킷의 구성을 위해서 헤더 영역에 기록될 페이로드 헤더 정보와 페이로드 영역에 기록할 멀티미디어 데이터가 주어진 포맷에 따라 생성된다.
도 5는 본 발명의 일 실시예에 따른 멀티미디어 데이터 패킷의 생성 동작을 설명하기 위한 것이다.
도 5를 참조하면, MPU 파일(510)는 캡슐화 기능 계층에서 전송하고자 하는 데이터를 의미하며, MPU/MFU 빌딩 블록(Building Block)(520)은 전송 데이터를 구성하기 위한 데이터 구조이다. MPU 파일(510)은 파일의 타입을 나타내는 FTYP(File Type) 박스와 MPU의 구성을 나타내는 MMPU 박스와 코덱 설정 정보를 나타내는 MOOV 박스와 MOOF(Movie fragment) 박스와 같은 헤더 정보(512)와, 비디오 샘플들(Video samples: VS)(516) 및 MMT 힌트 샘플들(Hint Samples: HS)(518)로 구성된 MDAT 박스(514)를 포함한다. MMPU 박스는 MDAT 박스에 저장된 데이터의 타입이 MPU임을 지시하며, MOOV 박스는 MDAT 박스에 저장된 미디어 프레임에 대한 정보를 수록한다. MPU/MFU 빌딩 블록(520)은 FTYP, MMPU, MOOV, MOOF와 같은 MPU 메타 데이터(522)와, 관련된 HS(526)와 VS(528)의 쌍들로 구성된 MFU들(524)을 포함한다.
MMT 페이로드는 MPU/MFU 빌딩 블록(520)을 기반으로 구성되며, MMT 패킷에 실려 전송된다.
MMT 페이로드를 구성하는 구체적인 절차는 하기와 같다.
데이터 구성부는 데이터 생성부로부터 전달된 전송하고자 하는 MPU 파일 형태의 데이터(510)를 분석하여, 상기 MPU 데이터(510)의 헤더 정보(512)로부터, 타입, MPU의 구성 정보, 코덱의 설정 정보, 데이터의 시작점과 크기(길이) 정보를 결정한다. 데이터 구성부는 MPU 데이터(510)를 구성하는 MFU들(도 5에서 VS들에 해당함)(516)과 MFU HS들(518)의 구조를 분석하여, 각 MFU의 크기와 상호 중요도 및 상호 연결 정보(길이 등)를 담고 있는 MFU 헤더와 실제 미디어 데이터인 MFU 데이터를 결정하며, 각 MFU의 시작 옵셋 및 길이를 나타내는 MFU HS(518)을 통해서 각 MFU의 크기를 분석한다.
분석된 MPU 형태를 통해서, 전송 패킷을 구성하기 위한 MPU/MFU 빌딩 블록(520)이 구성된다. MFU HS(518)는 빌딩 블록(520)의 MFU 헤더가 된다.
데이터 구성부는 MFU HS(518)로부터 분석된 각 MFU의 크기를 바탕으로 각 MFU를 전송 단위로 구성한다. 이 경우, MFU의 크기에 따라서, 하나 혹은 복수개의 페이로드가 구성될 수 있다. 각 페이로드의 시작, 중간, 끝은 선택적인 비트(optional bits)인 start_end_indicator에 의해 지시된다. MPU 메타데이터(522) 또한 빌딩 블록(520)의 하나의 구성단위로 취급된다.
각 페이로드 엘리멘트의 데이터 종류는 아래와 같이 나타낼 수 있다.
i. FTYP, MMPU, MOOV, MOOF, MDAT로 구성된 하나의 페이로드(522)의 타입은 MPU_Partial()라 칭하며, MPU 헤더만을 포함하여 구성될 수도 있다.
ii. 하나의 MFU가 하나의 페이로드로 구성된 경우, 상기 페이로드의 타입은 MFU_set ()이라 칭한다.
iii. 하나의 MFU가 복수개의 페이로드로 구성될 때, 상기 각 페이로드의 타입은, MFU 헤더만 포함하는 경우, MFU_Partial()가 되고, MFU 헤더와 MFU 데이터 일부 혹은 MFU 데이터 일부를 포함하는 경우, MFU_chunk()가 된다.
iv. MPU_Partial()은 MPU 헤더만을 포함하는 페이로드의 타입을 의미한다.
v. MPU_Set()은 MPU를 완전하게 포함하는 페이로드의 타입을 의미한다.
하기는 본 발명의 일 실시예에 따른 MMT 페이로드의 신택스(Syntax)를 나타낸 것이다. 아래의 MMT 페이로드 포맷은 UDP 운반, 점대점 간 청크(chunk)의 교환, 파일들의 운반을 위해 사용될 수 있다.
MMT_Payload()
{
bit(N) type;
bit(N) asset_id;
switch (type) {
case 0:
//configuration;
if (asset_id==0) {
//package configuration data
} else {
//asset configuration data
}
break;
case 1:
MFU_Partial();
break;
case 2:
MFU_chunk();
break;
case 3:
MFU_set ();
break;
case 4:
MPU_Partial();
break;
case 5:
MPU_Set();
break;
...
}
}
상기한 바와 같이, MMT 페이로드는 해당 페이로드의 데이터 종류를 나타내는 type 필드와, 해당 페이로드(MPU 혹은 MFU)가 속하는 애셋의 식별자를 나타내는 asset_id를 포함한다. asset_id는 MMT 비트스트림을 다중화하기 위해 존재한다. MMT 페이로드가 RTP를 통해 전달되고 단일 애셋이 사용되는 경우 asset_id는 생략될 수 있다.
type 필드에 따라 하기와 같은 다양한 case의 엘리멘트가 MMT 페이로드에 포함될 수 있다.
case 0은 MMT 페이로드가, 전송하고자 하는 데이터의 구성(configuration) 데이터를 담고 있을 때 사용된다. asset_id=0인 경우 MMT 페이로드는 패키지 구성 데이터를 포함하며, 그렇지 않은 경우 애셋 구성 데이터가 포함된다.
case 1에 해당하는 MFU_Partial() 엘리멘트는 MMT 페이로드가 MFU 데이터의 구성 데이터(헤더 정보)를 운반하는 경우에 사용되며, case 2에 해당하는 MFU_chunk() 엘리멘트는 MMT 페이로드가 MFU 데이터의 구성 데이터(헤더 정보)와 함께 MFU 데이터의 일부를 담거나, 혹은 MFU 데이터의 전체 혹은 일부를 운반하는 경우에 사용되며, case 3에 해당하는 MFU_set() 엘리멘트는 MMT 페이로드가 MFU 데이터의 전체(헤더와 데이터)를 담는 경우에 사용된다. case 4에 해당하는 MPU_Partial() 엘리멘트는 MMT 페이로드가 MPU 데이터를 담는 경우에 사용되며, case 5에 해당하는 MPU_Set() 엘리멘트는 MMT 페이로드가 MPU 데이터의 전체(헤더와 데이터)를 담는 경우에 사용된다.
MMT 페이로드는 추가적으로, 파일 유닛, 제어 계층의 시그널링 정보, 보호 메시지(protection message)와 같은 다른 유닛들을 더 포함할 수 있다.
MFU_Partial()는 MFU의 크기가 최대 전송 유닛(Maximum Transmission Unit: MTU)의 크기를 초과할 때, 페이로드 바이트들의 시작에 부가되는, 상기 MFU 내에 정의되는 헤더들의 전체 집합이 되도록 정의된다.
MFU_chunk()는 MFU_Partial () 패킷들에서 송신되는 헤더들에 대한 MFU의 페이로드의 중간 혹은 마지막 부분이 되도록 정의된다.
MFU_set()는 소정 개수의 완전한 MFU들을 포함하는 패킷이 되도록 정의된다.
MPU_Partial()는 부가적인(optional) MFU_Partial() 엘리먼트(element)에 플러스되는 부가적인 MFU_set 엘리먼트에 더해지는, 상기 MPU 내에 정의되는 헤더들의 전체 집합이 되도록 정의된다. 부가적인 엘리먼트들의 존재 여부는 해당 패킷의 나머지 바이트들 및 MFU 길이에 의해 결정된다.
이하 MMT 페이로드 포맷 및 MMT 트랜스포트 패킷에 대한 매핑과 함께, MPU 및 MFU 엘리먼트에 대한 예제들을 설명한다. 하기에서 종래에 알려져 있거나 본 발명의 실시예와 큰 관련이 없는 파라미터 필드들에 대한 설명은 생략할 것이며, 그러한 파라미터 필드들이 본 발명을 한정하지 않음에 유의하여야 한다.
하기는 MFU 엘리먼트의 일 예를 나타낸 것이다.
mmt_mfu_element()
{
...
optional bit(2) start_end_indicator;
optional bit(1) rap_fragment_indicator;
optional bit(N) layer_dependency_info;
optional bit(N) scrambling_key_index;
payload();
}
상기한 예에서 start_end_indicator는 해당 페이로드가 MFU의 시작, 중간, 또는 끝임을 지시하는 선택적인 비트들이다. 추가적으로 MFU가 랜덤 액세스 시작점(Random Access Point: RAP) 데이터를 포함한다는 것과 디코딩될 시작 및/또는 끝 위치를 지시하는 선택적인 비트들이 포함될 수 있다. rap_fragment_indicator는 해당 페이로드가 랜덤 액세스 가능한 데이터의 시작점을 담는 경우 직접 디코딩될 수 있는 데이터의 시작점의 주소를 나타내는 선택적인 비트이다.
scrambling_key_index는 해당 페이로드가 암호화되어 있는 경우 암호화를 해독할 수 있는 일련의 값들에 대한 정보를 담는다.
layer_dependency_info는 픽처 레이어들 간의 종속관계를 나타내는 정보이다. 추가적으로 레이어 식별자(LayerIDs)와 종속관계 카운트(dependency count)와 MPEG-2 TS 패킷과 유사한 신호 롤링 키들(signal rolling keys) 등이 더 포함될 수 있다.
하기는 MPU 엘리먼트의 일 예를 나타낸 것이다.
mmt_mpu_element(multiple, timing)
{
optional bit(2) start_end_indicator;
bit (1) multiple_mfu_flag;
bit (1) no _ mfu ;
bit (1) timing_flag;
bit(1) codec_update_flag;
bit(1) event_list_flag;
bit(1) clock_map;
bit(1) headers_first;
bit(1) multiple_aus_flag;
if (codec_update_flag) {
bit(16) codec_config_size;
bytes(codec_config_size) codec_config_data;
bit(8) downcouter ;//processing delay (remove)
}
if (event_list_flag) {
bit(16) num_events;
for (i=0; i<num_events; i++) {
... //eventdata
}
}
if (multiple_mfu_flag) {
bit(N) num_MFUs;
} else {
num_MFUs = 1;
headers_first = 0;
multiple_aus_flag = 0;
}
if (timing_flag) {
optional bit(timestamps_bits) base_timestamp;
if (clock_map) {
bit(64) clock_ref;
}
optional bit(ts_inc_bits) ts_increment;
optional bit (2) constant _ flag ;
optional bit(N) interval ;
if (ts_inc_factor) ts_increment *= ts_inc_factor;
}
for (i=0; i<num_MFUs; i++) {
optional bit(N) decode_order_number;
if (timing && (!i || multiple_aus_flag) ) {
optional bit(N) dts_diff;
optional bit(N) composition_timestamp_offset;
mfu_dts = base_timestamp + dts_diff * ts_increment;
mfu_cts = base_timestamp + composition_timestamp_offset * ts_increment;
}
if (multiple_mfu_flag)
optional bit(N) mfu_size;
if (!headers_first) mmt_mfu_element();
}
if (headers_first) {
for (i=0; i<num_MFUs; i++) {
mmt_mfu_element();
}
}
}
상기한 예에서 start_end_indicator는 해당 페이로드가 MPU의 시작, 중간, 또는 끝임을 지시하는 선택적인 비트들이다. multiple_mfu_flag는 해당 MPU가 복수의 MFU로 구성되어 있는 경우 '1'로 설정된다. no_mfu는 파일 전송의 경우와 같이 MPU 데이터 내에 MFU가 포함되어 있지 않은 경우에 '1'로 설정된다.
timing flag는 이전 패킷이 손실(lost)된 경우에 현재 MFU가 이전 것과 동일한 액세스 유닛에 속하는지의 여부를 지시하여 타임스탬프를 정정하도록 하기 위해 사용된다. codec_update_flag는 해당 페이로드가 코덱 구성 정보를 가지고 있을 경우에 '1'로 설정된다. header_first는 해당 페이로드의 시작이 미디어 데이터의 헤더 정보로부터 시작하는 경우에 '1'로 설정된다. event_list_flag는 해당 페이로드가 사용자에게 표현될 이벤트 리스트를 가지고 있을 경우에 설정된다. 이벤트 리스트는 해당 컨텐츠에 속하는 이벤트들을 나열할 수 있다.
multiple_aus_flag는 해당 페이로드가 복수의 프레임을 담는 경우에 '1'로 설정된다. AAC(Advanced Audio Coding)와 같은 코덱이 사용되는 경우에, 인밴드 코덱 구성(in-band codec fonfiguration)을 위한 유닛들이 MPU 엘리멘트에 포함될 수 있다.
codec_update_flag은 코덱 구성 정보의 크기를 나타내는 codec_config_size와 코덱 구성 정보를 나타내는 codec_config_data를 포함한다. 선택 가능한 실시예로서 멀티미디어 스트리밍 서비스 초기 혹은 중간에 코덱 구성 정보를 통해 코덱을 변경하거나 코덱 구성 정보가 수정되는 경우, 해당 codec_update_flag를 통해 해당 정보의 유무를 설정할 수 있다. downcounter는 코덱 구성 정보가 복수의 페이로드들로 분할되어 있는 경우, 현재 페이로드 이후 상기 코덱 구성 정보를 담고 있는 몇 개의 페이로드가 더 존재함을 나타내기 위해 사용된다. 일 예로서 코덱 구성 정보가 복수로 조각나 있고, downcounter가 "3"으로 설정되어 있는 경우, 수신기는 코덱 구성 정보를 완성하기 위해 이후 2,1,0의 downcounter를 가지는 페이로드들이 더 필요함을 알 수 있다. downcounter 0의 페이로드가 수신되면 수신기는 코덱 구성 정보에 관련된 모든 페이로드들의 전송이 완료된 것으로 판단한다.
event_list_flag가 설정되어 있는 경우에, 전송 유닛을 통해 전달하려는 이벤트 리스트가 존재할 수 있으며, 상기 이벤트 리스트는 이벤트들의 개수를 나타내는 num_events와 적어도 하나의 이벤트 데이터를 포함할 수 있다. 선택 가능한 실시예로서 이전에 이미 전송한 이벤트 데이터를 사용하는 경우, 이벤트 데이터 대신 이벤트 식별자(event ID)만이 포함하여 해당 이벤트를 표현할 수 있다. 다른 선택 가능한 실시예로서 이벤트 데이터는 페이로드의 전송 이전에 소정의 전송 수단을 사용하여 미리 전송될 수 있다. 리스트된 이벤트들은 프레임의 디스플레이와 함께 동기화 되어 실행된다. 실시 가능한 실시예로는 해당 이벤트 리스트를 통해서 비디오 데이터 재생 중에 오디오를 선택적으로 변경할 수 있다.
multiple_mfu_flag가 설정되어 있는 경우에, 해당 페이로드가 몇 개의 MFU들로 구성되어 있는지를 나타내는 num_MFUs가 MPU 엘리멘트 내에 존재할 수 있다. multiple_mfu_flag가 설정되어 있지 않은 경우, num_MFUs는 '1'이 되고, header_first 및 multiple_au_flag는 '0'이 된다. 실시 가능한 실시예로서, 전송하고자 하는 멀티미디어 데이터 유닛이 복수개의 프레임 혹은 단일 프레임내 복수개의 슬라이스로 구성된 경우, 복수개의 개체 수를 설정하기 위한 해당 정보가 설정될 수 있다.
timing_flag가 설정되어 있는 경우에, MPU 내의 유닛에 대한 타이밍 정보가 MPU 엘리멘트 내에 포함될 수 있다.
추가적으로 num_MFUs만큼의 MFU들이 MPU 엘리멘트 내에 나열된다. MFU들의 순서는 디코더 입력의 순서와는 상이할 수 있으므로, 해당 MFU가 디코더로 입력되는 순서를 나타내는 decode_order_number가 선택적으로 포함될 수 있다.
multiple_mfu_flag가 '1'로 설정되어 있는 경우, 각 MFU의 크기를 나타내는 mfu_size가 더 포함될 수 있다. 본 명세서에서는 데이터 구성부로 입력되는 MFU들의 크기가 동일한 경우에 대해 설명한다.
headers_first가 '1'로 설정되어 있지 않은 경우, 하나의 mmt_mfu_element()가 포함된다.
headers_first가 '1'로 설정되어 있는 경우 num_MFUs 만큼의 mmt_mfu_element()가 MPU 엘리멘트에 포함된다.
본 발명의 실시예에 따라 구성된 수신기는 멀티미디어 데이터 패킷을 상대 개체로부터 수신하는 수신부와, 앞서 설명한 바와 같은 MMT 페이로드의 포맷에 따라 상기 멀티미디어 데이터 패킷에 포함된 적어도 하나의 MFU 혹은 MPU 혹은 그 적어도 일부를 추출하여 해석하는 해석부를 포함하여 구성될 수 있다.
이상에서 설명한 바와 같은 MMT 페이로드의 포맷은 MPU들 및 MFU들의 효율적인 전달과 응집(aggregation) 및 분할(fragmentation)을 가능하게 한다.
한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능하다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.

Claims (12)

  1. 멀티미디어 전송 시스템을 위한 데이터 송신 방법에 있어서,
    캡슐화 기능 계층으로부터 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 입력하는 과정과,
    상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하는 과정과,
    상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하는 과정과,
    상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 과정과,
    상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 과정을 포함하며,
    상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함함을 특징으로 하는 방법.
  2. 멀티미디어 전송 시스템을 위한 데이터 수신 방법에 있어서,
    페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보와 페이로드로 구성된 멀티미디어 데이터 패킷을 상대 개체로부터 수신하는 과정과,
    상기 멀티미디어 데이터 패킷으로부터, 캡슐화 기능 계층에 의해 생성된 하나 혹은 그 이상의 제1 데이터 유닛들 및 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛의 적어도 일부를 검출하는 과정을 포함하며,
    상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함함을 특징으로 하는 방법.
  3. 제 1 항 또는 제 2 항에 있어서, 상기 페이로드는,
    상기 페이로드 엘리멘트의 타입을 나타내는 타입 필드와, 상기 페이로드 엘리멘트의 데이터 유닛이 속한 애셋을 지시하는 애셋 식별자를 포함함을 특징으로 하는 방법.
  4. 제 1 항 또는 제 2 항에 있어서, 상기 제1 내지 제3 타입 중 어느 하나에 해당하는 페이로드는,
    상기 페이로드가 상기 제1 데이터 유닛의 시작, 중간 또는 끝임을 지시하는 제1 필드와, 상기 페이로드가 랜덤 액세스가 가능한 데이터의 시작점을 나타내는 제2 필드와, 상기 페이로드가 암호화되어 있는 경우 암호화를 해독할 수 있는 일련의 값들을 나타내는 스크램블링 키 인덱스와, 상기 페이로드 엘레멘트를 포함함을 특징으로 하는 방법.
  5. 제 1 항 또는 제 2 항에 있어서, 상기 제4 및 제5 타입 중 어느 하나에 해당하는 페이로드는,
    상기 페이로드가 상기 제2 데이터 유닛의 시작, 중간 또는 끝임을 지시하는 제1 필드와, 상기 제2 데이터 유닛이 복수의 제1 데이터 유닛들로 구성됨을 나타내는 제1 플래그와, 상기 페이로드가 코덱 구성 정보를 포함함을 나타내는 제2 플래그와, 상기 페이로드가 사용자에게 디스플레이될 이벤트 리스트를 포함함을 나타내는 제3 플래그와, 상기 페이로드가 헤더 정보로부터 시작됨을 나타내는 제4 플래그와, 상기 페이로드가 복수의 픽처 프레임들을 포함함을 나타내는 제5 플래그 중 적어도 하나를 포함함을 특징으로 하는 방법.
  6. 제 5 항에 있어서, 상기 제2 플래그가 '1'로 설정된 경우, 상기 페이로드는, 코덱 구성 정보의 크기와, 상기 코덱 구성 정보와, 상기 코덱 구성 정보가 복수의 조각으로 분할된 경우 상기 페이로드 이후 몇 개의 페이로드가 더 존재함을 나타내는 다운카운터를 더 포함함을 특징으로 하는 방법.
  7. 제 5 항에 있어서, 상기 제1 플래그가 '1'로 설정된 경우, 상기 페이로드는, 상기 페이로드에 몇 개의 제1 데이터 유닛들이 포함되는지를 지시하는 제2 필드를 더 포함함을 특징으로 하는 방법.
  8. 제 7 항에 있어서, 상기 페이로드는, 상기 제2 필드에 의해 지시되는 각 제1 데이터 유닛에 관련된 디코딩 순서 번호를 더 포함함을 특징으로 하는 방법.
  9. 제 7 항에 있어서, 상기 제4 플래그가 '1'로 설정되지 않은 경우, 상기 페이로드는, 상기 제1 내지 제3 타입 중 어느 하나인 하나의 페이로드 엘리멘트를 포함하며,
    상기 제4 플래그가 '1'로 설정된 경우, 상기 페이로드는, 상기 제1 필드만큼의 상기 제1 내지 제3 타입 중 어느 하나의 페이로드 엘리멘트들을 포함함을 특징으로 하는 방법.
  10. 제 1 항 또는 제 2 항에 있어서, 상기 페이로드는,
    상기 페이로드가 제1 데이터 유닛을 포함하지 않음을 지시하는 제1 필드를 포함함을 특징으로 하는 방법.
  11. 멀티미디어 전송 시스템을 위한 데이터 송신 장치에 있어서,
    하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛을 출력하는 데이터 생성부와,
    상기 제2 데이터 유닛의 헤더 정보를 분석하여 페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보를 구성하고, 상기 제1 데이터 유닛들의 크기들을 기반으로 상기 제2 데이터 유닛으로부터 하나 혹은 그 이상의 페이로드들을 구성하고, 상기 각 페이로드에 해당하는 페이로드 헤더 정보를 결합하여 멀티미디어 데이터 패킷을 구성하는 데이터 구성부와,
    상기 멀티미디어 데이터 패킷을 상대 개체로 전송하는 데이터 전송부를 포함하며,
    상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함함을 특징으로 하는 장치.
  12. 멀티미디어 전송 시스템을 위한 데이터 수신 장치에 있어서,
    페이로드 타입과 구성 정보를 포함하는 페이로드 헤더 정보와 페이로드로 구성된 멀티미디어 데이터 패킷을 상대 개체로부터 수신하는 수신부와,
    상기 멀티미디어 데이터 패킷으로부터, 캡슐화 기능 계층에 의해 생성된 하나 혹은 그 이상의 제1 데이터 유닛들 및 하나 혹은 그 이상의 제1 데이터 유닛들로 구성된 제2 데이터 유닛의 적어도 일부를 검출하는 해석부를 포함하며,
    상기 페이로드는, 하나의 제1 데이터 유닛을 포함하는 제1 타입과, 하나의 제1 데이터 유닛의 헤더 정보를 포함하는 제2 타입과, 하나의 제1 데이터 유닛의 헤더 정보와 데이터 일부 혹은 데이터 일부만을 포함하는 제3 타입과, 상기 제2 데이터 유닛의 헤더 정보를 포함하는 제4 타입과, 상기 제2 데이터 유닛의 전체를 포함하는 제5 타입 중 적어도 하나의 페이로드 엘리멘트를 포함함을 특징으로 하는 장치.
KR1020130046166A 2012-04-25 2013-04-25 멀티미디어 시스템에서 미디어 컨텐츠 전송 방법 KR101501347B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201261638048P 2012-04-25 2012-04-25
US61/638,048 2012-04-25

Publications (2)

Publication Number Publication Date
KR20130120422A true KR20130120422A (ko) 2013-11-04
KR101501347B1 KR101501347B1 (ko) 2015-03-10

Family

ID=49483526

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130046166A KR101501347B1 (ko) 2012-04-25 2013-04-25 멀티미디어 시스템에서 미디어 컨텐츠 전송 방법

Country Status (14)

Country Link
US (3) US9872051B2 (ko)
EP (3) EP4246932A3 (ko)
JP (4) JP5947454B2 (ko)
KR (1) KR101501347B1 (ko)
CN (3) CN108777676B (ko)
CA (1) CA2871578C (ko)
ES (1) ES2955327T3 (ko)
FI (1) FI2843955T3 (ko)
HU (1) HUE063722T2 (ko)
MX (1) MX343181B (ko)
PL (1) PL2843955T3 (ko)
PT (1) PT2843955T (ko)
RU (1) RU2639725C2 (ko)
WO (1) WO2013162312A1 (ko)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016144031A1 (ko) * 2015-03-11 2016-09-15 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
WO2017003248A1 (en) * 2015-07-01 2017-01-05 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving signal in multimedia system
WO2015147609A3 (ko) * 2014-03-28 2017-04-20 삼성전자 주식회사 통신 시스템에서 자원 할당 방법 및 장치
KR20170078613A (ko) * 2014-11-07 2017-07-07 소니 주식회사 송신 장치, 송신 방법, 수신 장치 및 수신 방법
KR20170119968A (ko) * 2016-04-20 2017-10-30 에스케이텔레콤 주식회사 컨텐츠 전송 방법 및 장치

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101781873B1 (ko) * 2010-04-19 2017-09-26 엘지전자 주식회사 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
US9544641B2 (en) * 2012-05-10 2017-01-10 Humax Co., Ltd. Hybrid transmission method through MMT packet format extension
JP5641090B2 (ja) * 2013-03-14 2014-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP6571314B2 (ja) * 2013-06-18 2019-09-04 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 送信方法
US20150032845A1 (en) * 2013-07-26 2015-01-29 Samsung Electronics Co., Ltd. Packet transmission protocol supporting downloading and streaming
KR20150047082A (ko) * 2013-10-23 2015-05-04 한국전자통신연구원 Mmt 페이로드 헤더 구성 장치 및 방법
KR102138075B1 (ko) 2014-01-09 2020-07-27 삼성전자주식회사 미디어 데이터를 전송하기 위한 가변 크기 데이터 패킷을 송수신하는 방법 및 장치
JP6574426B2 (ja) * 2014-01-09 2019-09-11 サムスン エレクトロニクス カンパニー リミテッド マルチメディア伝送システムにおけるメディアデータ関連情報を送信する方法及び装置
JP6302274B2 (ja) * 2014-02-07 2018-03-28 日本放送協会 送信装置及び受信装置
US9398068B2 (en) * 2014-02-20 2016-07-19 International Business Machines Corporation Bulk uploading of multiple self-referencing objects
JP6054324B2 (ja) * 2014-03-06 2016-12-27 株式会社東芝 Mmt送信システム、暗号化処理装置
US10560514B2 (en) 2014-03-29 2020-02-11 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving information related to multimedia data in a hybrid network and structure thereof
KR102249147B1 (ko) 2014-03-29 2021-05-07 삼성전자주식회사 복합 네트워크에서 멀티미디어 데이터 관련 정보를 송수신하기 위한 장치 및 방법과 그 구조
US10530828B2 (en) * 2014-03-31 2020-01-07 Samsung Electronics Co., Ltd. Method and apparatus for signaling and operation of low delay consumption of media data in MMT
WO2015194904A1 (ko) * 2014-06-20 2015-12-23 삼성전자 주식회사 Ip 기반 방송 망에서 전송 패킷 압축 기법
KR20160004858A (ko) * 2014-07-04 2016-01-13 삼성전자주식회사 멀티미디어 통신 시스템에서 패킷 송/수신 장치 및 방법
KR101607773B1 (ko) 2014-10-27 2016-04-11 삼성에스디에스 주식회사 데이터 송신 장치 및 이를 이용하는 데이터 통신 방법
US10498792B2 (en) 2015-05-17 2019-12-03 Lg Electronics Inc. Apparatus and method for transmitting or receiving broadcast signal
US11647384B2 (en) * 2015-09-01 2023-05-09 Telefonaktiebolaget Lm Ericsson (Publ) Computer program, computer-readable storage medium transmitting device, receiving device and methods performed therein for transferring background user data
KR102454746B1 (ko) * 2015-10-01 2022-10-17 삼성전자주식회사 통신 시스템에서 미디어 리소스 식별 정보를 송수신하는 장치 및 방법
KR102380285B1 (ko) 2015-10-14 2022-03-30 삼성전자주식회사 멀티미디어 시스템에서 패킷을 송/수신하는 방법 및 장치
CN108702529A (zh) * 2016-01-19 2018-10-23 索尼公司 发送设备、发送方法、接收设备和接收方法
CN107026887B (zh) * 2016-02-02 2019-12-06 上海交通大学 一种多媒体系统中快速信息交互方法及网络传输方法
WO2017146537A1 (ko) * 2016-02-25 2017-08-31 엘지전자(주) 방송 신호 송수신 장치 및 방법
TWI559753B (zh) * 2016-03-16 2016-11-21 晶睿通訊股份有限公司 傳輸隨選影音檔案的方法
EP3744124A4 (en) * 2018-01-23 2021-08-11 QUALCOMM Incorporated CHANNEL STATUS INFORMATION REPORT (CSI) RESOURCE DETERMINATION
CN112306579B (zh) * 2020-11-12 2023-09-01 北京轩宇信息技术有限公司 一种数据传输系统及方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5486864A (en) 1993-05-13 1996-01-23 Rca Thomson Licensing Corporation Differential time code method and apparatus as for a compressed video signal
US6377995B2 (en) * 1998-02-19 2002-04-23 At&T Corp. Indexing multimedia communications
KR20020064888A (ko) * 1999-10-22 2002-08-10 액티브스카이 인코포레이티드 객체 지향형 비디오 시스템
US7283502B1 (en) * 2000-09-21 2007-10-16 Lucent Technologies Inc. Enhancement of framing protocol frame format to support quality of service
US6618397B1 (en) 2000-10-05 2003-09-09 Provisionpoint Communications, Llc. Group packet encapsulation and compression system and method
KR100449742B1 (ko) * 2002-10-01 2004-09-22 삼성전자주식회사 멀티미디어 방송 송수신 장치 및 방법
US20040221312A1 (en) 2003-05-01 2004-11-04 Genesis Microchip Inc. Techniques for reducing multimedia data packet overhead
KR100608715B1 (ko) * 2003-09-27 2006-08-04 엘지전자 주식회사 QoS보장형 멀티미디어 스트리밍 서비스 시스템 및 방법
KR100556911B1 (ko) * 2003-12-05 2006-03-03 엘지전자 주식회사 무선 동영상 스트리밍 서비스를 위한 동영상 데이터의 구조
US7664109B2 (en) 2004-09-03 2010-02-16 Microsoft Corporation System and method for distributed streaming of scalable media
US8635526B2 (en) * 2006-05-25 2014-01-21 Qualcomm Incorporated Target advertisement in a broadcast system
EP1853045B1 (en) * 2006-05-02 2015-01-07 BlackBerry Limited Dynamic syndicated content delivery system and method
US20080037956A1 (en) * 2006-06-30 2008-02-14 Scientific-Atlanta, Inc. Systems and Methods of Generating Encapsulated MPEG Program Streams
JP4813602B2 (ja) * 2006-12-15 2011-11-09 トムソン ライセンシング 時分割多重アクセス媒体アクセス制御層における媒体アクセス制御プロトコル・データ単位集積
US20080162644A1 (en) * 2006-12-29 2008-07-03 Krishnan Kalyanaraman B Auto selection of connectors in a middleware framework
US7957307B2 (en) * 2007-03-14 2011-06-07 Microsoft Corporation Reducing effects of packet loss in video transmissions
KR101336243B1 (ko) * 2007-05-10 2013-12-03 삼성전자주식회사 부가 정보가 삽입된 영상 데이터의 전송 스트림 구조,송수신 방법 및 장치
US8180029B2 (en) * 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
KR101405975B1 (ko) * 2007-07-23 2014-06-12 엘지전자 주식회사 디지털 방송 시스템 및 데이터 처리 방법
US8817780B2 (en) * 2007-08-08 2014-08-26 Maxlinear, Inc. TS packet grooming
US8175065B2 (en) * 2007-08-24 2012-05-08 Lg Electronics Inc. Digital broadcasting system and method of processing data in the digital broadcasting system
WO2010049312A1 (en) * 2008-10-30 2010-05-06 Thomson Licensing Data container for transferring high resolution audio/video data in a high speed ip network
KR101357645B1 (ko) * 2009-07-10 2014-02-05 한국전자통신연구원 순방향 오류 정정 부호화 및 복호화 방법과 그 장치, 디지털 방송 수신 장치 및 그의 복호화 방법
WO2011108908A2 (en) * 2010-03-05 2011-09-09 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving a content file including multiple streams
EP2561664B1 (en) 2010-04-20 2019-03-06 Samsung Electronics Co., Ltd Interface apparatus for transmitting and receiving media data
US20110293021A1 (en) * 2010-05-28 2011-12-01 Jayant Kotalwar Prevent audio loss in the spliced content generated by the packet level video splicer
JP2012054788A (ja) * 2010-09-01 2012-03-15 Canon Inc データファイル転送装置、その制御方法、プログラム及び記憶媒体
KR101484843B1 (ko) * 2013-04-19 2015-01-20 삼성전자주식회사 멀티미디어 전송 시스템에서 미디어 전송 패킷 전송 방법 및 장치

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015147609A3 (ko) * 2014-03-28 2017-04-20 삼성전자 주식회사 통신 시스템에서 자원 할당 방법 및 장치
US10404617B2 (en) 2014-03-28 2019-09-03 Samsung Electronics Co., Ltd. Method and apparatus for resource allocation in communication system
KR20170078613A (ko) * 2014-11-07 2017-07-07 소니 주식회사 송신 장치, 송신 방법, 수신 장치 및 수신 방법
WO2016144031A1 (ko) * 2015-03-11 2016-09-15 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법
US10728590B2 (en) 2015-03-11 2020-07-28 Lg Electronics Inc. Apparatus and method for transmitting and receiving broadcast signal
US10856021B2 (en) 2015-03-11 2020-12-01 Lg Electronics Inc. Broadcast signal transmission apparatus, broadcast signal reception apparatus, broadcast signal transmission method, and broadcast signal reception method
US11297360B2 (en) 2015-03-11 2022-04-05 Lg Electronics Inc. Apparatus and method for transmitting and receiving broadcast signal
WO2017003248A1 (en) * 2015-07-01 2017-01-05 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving signal in multimedia system
US10313237B2 (en) 2015-07-01 2019-06-04 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving signal in multimedia system
US10715434B2 (en) 2015-07-01 2020-07-14 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving signal in multimedia system
US11349756B2 (en) 2015-07-01 2022-05-31 Samsung Electronics Co., Ltd. Apparatus and method for transmitting and receiving signal in multimedia system
KR20170119968A (ko) * 2016-04-20 2017-10-30 에스케이텔레콤 주식회사 컨텐츠 전송 방법 및 장치

Also Published As

Publication number Publication date
CN104303507A (zh) 2015-01-21
EP2843955A1 (en) 2015-03-04
US20150089560A1 (en) 2015-03-26
US10219012B2 (en) 2019-02-26
CN108306900A (zh) 2018-07-20
EP4246931A3 (en) 2023-12-20
CA2871578A1 (en) 2013-10-31
ES2955327T3 (es) 2023-11-30
EP4246932A3 (en) 2023-12-20
WO2013162312A1 (ko) 2013-10-31
HUE063722T2 (hu) 2024-01-28
KR101501347B1 (ko) 2015-03-10
EP2843955A4 (en) 2015-12-23
US9872051B2 (en) 2018-01-16
JP6422527B2 (ja) 2018-11-14
CN108777676A (zh) 2018-11-09
MX2014012947A (es) 2015-02-10
MX343181B (es) 2016-10-27
EP4246932A2 (en) 2023-09-20
US20180103280A1 (en) 2018-04-12
RU2014147209A (ru) 2016-06-20
JP2016140099A (ja) 2016-08-04
CA2871578C (en) 2020-06-02
JP2017147737A (ja) 2017-08-24
JP2019033524A (ja) 2019-02-28
PL2843955T3 (pl) 2024-02-19
JP5947454B2 (ja) 2016-07-06
EP2843955B1 (en) 2023-08-16
EP4246931A2 (en) 2023-09-20
JP6122986B2 (ja) 2017-04-26
JP2015518347A (ja) 2015-06-25
RU2639725C2 (ru) 2017-12-22
JP6754810B2 (ja) 2020-09-16
US10715844B2 (en) 2020-07-14
PT2843955T (pt) 2023-10-24
CN108306900B (zh) 2021-01-12
CN104303507B (zh) 2018-06-01
FI2843955T3 (fi) 2023-11-07
US20190158897A1 (en) 2019-05-23
CN108777676B (zh) 2021-01-12

Similar Documents

Publication Publication Date Title
JP6422527B2 (ja) マルチメディアシステムにおけるデータ受信方法及び装置
JP6122982B2 (ja) 放送システムにおける制御メッセージ構成装置及び方法
KR20130126538A (ko) Mmt 패킷 포맷 확장을 통한 하이브리드 전송 방법
US20150181003A1 (en) Method and apparatus for transmitting and receiving packets in hybrid transmission service of mmt
KR20140095445A (ko) 유연한 mmt 애셋 송수신 방법 및 그 장치
EP2667625A2 (en) Apparatus and method for transmitting multimedia data in a broadcast system
US20140344875A1 (en) Method for transmitting media data having access unit divided into media fragment units in heterogeneous network
KR102098723B1 (ko) Mmt 전송 패킷의 설정 방법 및 전송 방법
US10237196B2 (en) Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, method for transmitting broadcast signal and method for receiving broadcast signal
JP6927338B2 (ja) 送信方法
KR20160033027A (ko) 멀티미디어의 전송 또는 수신 방법 및 그 장치
KR20130058541A (ko) 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180227

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190227

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20200227

Year of fee payment: 6