KR102026266B1 - 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법 - Google Patents

부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법 Download PDF

Info

Publication number
KR102026266B1
KR102026266B1 KR1020130009251A KR20130009251A KR102026266B1 KR 102026266 B1 KR102026266 B1 KR 102026266B1 KR 1020130009251 A KR1020130009251 A KR 1020130009251A KR 20130009251 A KR20130009251 A KR 20130009251A KR 102026266 B1 KR102026266 B1 KR 102026266B1
Authority
KR
South Korea
Prior art keywords
mmt
time
transport packet
media data
packet
Prior art date
Application number
KR1020130009251A
Other languages
English (en)
Other versions
KR20130086991A (ko
Inventor
김창기
김태정
유정주
정영호
홍진우
서광덕
Original Assignee
한국전자통신연구원
연세대학교 원주산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원, 연세대학교 원주산학협력단 filed Critical 한국전자통신연구원
Priority to PCT/KR2013/000681 priority Critical patent/WO2013112027A1/ko
Priority to US14/374,292 priority patent/US20140369222A1/en
Publication of KR20130086991A publication Critical patent/KR20130086991A/ko
Application granted granted Critical
Publication of KR102026266B1 publication Critical patent/KR102026266B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852—Delays
    • H04L43/087—Jitter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
    • H04L43/106—Active monitoring, e.g. heartbeat, ping or trace-route using time related information in packets, e.g. by adding timestamps
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/54—Store-and-forward switching systems 
    • H04L12/56—Packet switching systems
    • H04L12/5601—Transfer mode dependent, e.g. ATM
    • H04L2012/5603—Access techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 전송 시점에 해당하는 시간 정보를 송신단의 전송 계층으로부터 수신단이 전송 받아 사용함으로써 네크워크 지터를 보다 정확히 추정할 수 있는 효과를 가지는 네트워크 지터 추정 방법을 제공한다.

Description

부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법{ESTIMATION METHOD OF NETWORK JITTER FOR APPARATUSES TRANSPORTING CODED MEDIA DATA}
본 발명은 네트워크 지터 추정 방법에 관한 것으로서, 보다 상세하게는 부호화된 미디어 데이터를 이종 IP 네트워크(heterogeneous IP network)를 통하여 전송하기 위한 시스템에서 네트워크 지터를 추정하는 방법에 관한 것이다.
MPEG-2시스템은 방송망에서 AV(Audio Video) 콘텐츠를 전송하기 위해 필요한 패킷화, 동기화, 멀티플렉싱 등 기능에 대한 표준으로 MPEG-2 TS(Transport Stream) 기술을 표준화했고 현재 널리 쓰여지고 있다. 그러나, 네트워크가 All IP (Internet Protocol) 화된 새로운 환경에서 MPEG-2 TS는 비효율적이다.
이에 새로운 미디어 전송환경과 앞으로 예상되는 미디어 전송환경을 고려하여 부호화된 미디어 데이터를 이종 IP 네트워크(heterogeneous IP network)를 통하여 전송하기 위한 시스템에서의 새로운 미디어 전송 기술이 요구된다.
도 4는 RTP 패킷의 구조를 나타낸다. RTP에서 제공하는 지터 추정 방법은 RTP 패킷헤더에 기록되어 있는 RTP 타임스탬프 (timestamp)를 활용하여 지터를 추정한다. 아래의 수학식 1과 수학식 2는 기존의 RTP에서 채택하고 있는 지터 계산을 위해 사용되는 수식들을 나타낸다.
Figure 112013008007126-pat00001
Figure 112013008007126-pat00002
수학식 1에서
Figure 112013008007126-pat00003
와
Figure 112013008007126-pat00004
는 각각 RTP 패킷 i와 패킷 j의 RTP 타임스탬프를 나타내고,
Figure 112013008007126-pat00005
와
Figure 112013008007126-pat00006
는 각각 RTP 패킷 i와 패킷 j의 수신측에서의 도착 시간을 나타낸다. 따라서
Figure 112013008007126-pat00007
는 이웃하는 패킷들의 샘플링 시점 및 도착 시점 간의 시간 간격의 차이를 수신측에서 측정한 결과를 나타낸다. 수학식 2는
Figure 112013008007126-pat00008
값을 활용하여 도착하는 패킷들에 대해서 지터 값을 반복적으로 계산하여 업데이트하는 과정을 나타낸다.
그런데, 수학식 1에 사용되는 RTP 타임스탬프는 미디어 프레임의 샘플링 시점(sampling instant)에 해당되는 시간을 의미하므로 패킷을 전송하는 순간에 해당하는 전송 시점을 정확하게 나타내지 못한다. 도 5는 미디어 샘플링 시점에 해당하는 시간 정보를 RTP 타임스탬프 값으로 활용하는 RTP 패킷 전송 시스템의 RTP 패킷 생성 과정을 나타낸다.
정확한 지터 값은 패킷이 네트워크를 통해 전송되는 도중에 순수하게 네트워크의 전달 상태에 의해서 영향을 받는 전송에 소요된 시간을 바탕으로 계산되어야 한다. 일반적으로 샘플링 시점과 실제 패킷이 전송되는 전송 시점 (delivery instant) 간에는 불규칙적인 시간적 갭(gap)이 존재한다. 이러한 불규칙적인 시간적 갭으로 인하여 샘플링 시점을 나타내는 RTP 타임스탬프 값을 전송 시점을 나타내는 시간으로 활용할 경우 부정확한 지터 계산 결과가 나타난다.
도 6은 이러한 문제점이 나타날 수 있는 MPEG 미디어 전송 서비스의 예를 나타낸다. UHD (ultra high definition) 비디오의 경우 해상도가 매우 높으므로 압축 후의 데이터 크기가 매우 클 수가 있다. 따라서, 하나의 비디오 프레임을 하나의 전송 패킷에 사상(mapping)하여 전송하는 것이 불가능할 수 있다. 이럴 경우 동일한 샘플링 시간을 갖는 하나의 비디오 프레임을 여러 개의 파트로 분할 (fragmentation)하게 되고, 분할된 개개의 파트를 개별적인 패킷에 실어서 보내게 된다. 도 6에서는 UHD 비디오 프레임을 세 개의 파트로 분할하여 개별적인 패킷에 실어서 보내는 경우를 나타낸다. 특히, 분할된 파트들을 네트워크 오류에 강인하도록 하기 위해서 응용 계층(application layer)에서 AL-FEC(application layer forward error correction) 혹은 인터리빙(interleaving) 등의 처리를 할 수 있다. 이러한 응용 계층 처리에 의해 분할된 파트들의 전송 순서가 서로 뒤 바뀔 수도 있고, 샘플링 시간 이후에 실제 전송이 이루어지는 시점까지 지연되는 시간이 서로 달라질 수도 있다. 이로 인하여, 도 6에서는 3개로 분할된 패킷들이 비록 동일한 샘플링 시간인 “3000”이 할당되었으나 실제 전송되는 순간에 해당하는 전송 시점은 각각 “3100”, “3200”, “3300” 으로 서로 다른 전송 시점을 가짐을 알 수 있다. 이 경우에 정확한 지터 계산에 필요한 시간 정보는 전송 시점에 해당하는 “3100”, “3200”, “3300” 등의 값이지만, 기존의 방법에서는 “3000” 인 값을 적용하여 계산하게 된다.
결과적으로 기존의 RTP에서 지터의 계산에 사용하는 RTP 타임스탬프는 샘플링 시간에 해당되어서 정확한 전송 시점을 나타내지 못하므로 정확한 지터의 계산에 부적절하다.
본 발명의 목적은 이종망 네트워크에서 부호화된 미디어 데이터를 전송하는 시스템에서 보다 정확히 네트워크 지터를 추정하는 방법을 제공하는 것이다.
본 발명은 부호화된 미디어 데이터(Coded Media Data)를 전송하기 위한 장치에서 미디어 데이터를 전송하는 방법에 있어서, 부호화된 미디어 데이터 및 MMT 전송 패킷(MMT transport packet)이 전송되는 시각을 나타내는 타임 스탬프(timestamp)를 사용하여 MMT 전송 패킷을 생성하는 단계를 포함하는 미디어 데이터 전송 방법을 제공한다.
상기 미디어 데이터 전송 방법은, 미디어 코덱 계층으로부터 특정 미디어 코덱에 독립적인 포맷을 가지는 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)을 제공받는 단계; 상기 미디어 프래그먼트 유닛을 사용하여 미디어 프로세싱 유닛(Media Processing Unit; MPU)을 생성하는 단계; 상기 생성된 미디어 프로세싱 유닛을 캡슐화하여 MMT 애셋(MMT Asset)을 생성하는 단계; 상기 생성된 MMT 애셋을 캡슐화하여 MMT 패키지(MMT Package)를 생성하는 단계; 및 상기 생성된 MMT 패키지를 받아서 MMT 페이로드(MMT Payload)를 생성하는 단계를 더 포함하고, 상기 MMT 전송 패킷을 생성하는 단계는 상기 MMT 페이로드를 사용하여 상기 MMT 전송 패킷을 생성할 수 있다.
상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 전송될 시간을 나타낼 수 있다.
상기 미디어 데이터 전송 방법은, 상기 MMT 전송 패킷을 전송하는 단계를 더 포함할 수 있다.
또한, 본 발명은 부호화된 미디어 데이터(Coded Media Data)를 전송하기 위한 미디어 데이터 전송 장치에서, 부호화된 미디어 데이터 및 MMT 전송 패킷(MMT transport packet)이 전송될 시간을 나타내는 타임 스탬프(timestamp)를 사용하여 MMT 전송 패킷(MMT transport packet)을 생성하는 MMT 전송 패킷 생성부를 포함하는 미디어 데이터 전송 장치를 제공한다.
상기 미디어 데이터 전송 장치는, 미디어 코덱 계층으로부터 특정 미디어 코덱에 독립적인 포맷을 가지는 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)을 제공받는 미디어 프래그먼트 생성부; 상기 미디어 프래그먼트 유닛을 사용하여 미디어 프로세싱 유닛(Media Processing Unit; MPU)을 생성하는 미디어 프로세싱 유닛 생성부; 상기 생성된 미디어 프로세싱 유닛을 캡슐화하여 MMT 애셋(MMT Asset)을 생성하는 MMT 애셋 생성부; 상기 생성된 MMT 애셋을 캡슐화하여 MMT 패키지(MMT Package)를 생성하는 MMT 패키지 생성부; 및 상기 생성된 MMT 패키지를 받아 MMT 페이로드(MMT Payload)를 생성하는 MMT 페이로드 생성부를 더 포함하고, 상기 MMT 전송 패킷 생성부는 상기 MMT 페이로드 및 상기 타임 스탬프를 사용하여 MMT 전송 패킷을 생성할 수 있다.
상기 MMT 전송 패킷 생성부는, 상기 타임 스탬프를 MMT 전송 패킷의 헤더 부분에 저장할 수 있다.
상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 전송될 시간을 나타낼 수 있다.
상기 미디어 데이터 전송 장치는 상기 MMT 전송 패킷을 전송하는 전송부를 더 포함할 수 있다.
또한, 본 발명은 부호화된 미디어 데이터(Coded Media Data)를 수신하기 위한 장치에서 네트워크 지터(Jitter)를 추정하는 방법에 있어서, 미디어 데이터 전송 장치의 MMT 전송 패킷(MMT transport packet) 생성부가 미디어 데이터가 전송된 시각을 나타내도록 MMT 전송 패킷(MMT transport packet)에 생성한 타임 스탬프(time stamp) 및 상기 미디어 데이터가 상기 미디어 데이터 수신 장치에 수신된 시각을 사용하여 네트워크 지터를 계산하는 단계를 포함하는 네트워크 지터 추정 방법을 제공한다.
상기 네트워크 지터 추정 방법은, 미디어 데이터 수신 장치가 상기 MMT 전송 패킷(MMT transport packet)을 수신하는 단계; 및 상기 미디어 데이터 수신 장치가 상기 MMT 전송 패킷을 수신한 시각을 얻는 단계를 더 포함하고, 상기 미디어 데이터가 수신된 시각은 상기 MMT 전송 패킷이 수신된 시각일 수 있다.
상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에서 전송된 시각을 나타낼 수 있다.
상기 네트워크 지터를 계산하는 단계는, 수신된 적어도 하나의 MMT 전송 패킷(MMT transport packet)의 전송 시점 및 수신 시점 간의 시각 차이를 이용하여 지터값을 반복적으로 계산하여 업데이트할 수 있다.
상기 네트워크 지터를 계산하는 단계는
Figure 112013008007126-pat00009
을 이용하여 - 여기서
Figure 112013008007126-pat00010
는 MMT 전송 패킷(MMT transport packet) i 및 j의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 나타내고, JMMT(i)는 i번째 전송 패킷의 네트워크 지터를 나타낸다.- 상기 네트워크 지터를 계산할 수 있다.
상기 전송 시각 및 수신 시각 간의 시각 간격 차이는 제 1 MMT 전송 패킷의 수신 시각과 제 2 MMT 전송 패킷의 수신 시각의 차이에 제 1 MMT 전송 패킷의 전송 시각 및 제 2 MMT 전송 패킷의 전송 시각의 차이를 감하여 계산될 수 있다.
또한, 본 발명은 부호화된 미디어 데이터(Coded Media Data)를 수신하기 위한 장치에서 네트워크 지터를 추정하는 장치에 있어서, 미디어 데이터 전송 장치의 MMT 전송 패킷(MMT transport packet) 생성부가 미디어 데이터가 전송된 시각을 나타내도록 MMT 전송 패킷(MMT transport packet)에 생성한 타임 스탬프(time stamp) 및 상기 미디어 데이터가 상기 미디어 데이터 수신 장치에 수신된 시각을 사용하여 네트워크 지터를 계산하는 네트워크 지터 추정부를 포함하는 네트워크 지터 추정 장치를 제공한다.
상기 네트워크 지터 추정 장치는, 상기 MMT 전송 패킷(MMT transport packet)을 수신하고 상기 MMT 전송 패킷을 수신한 시각을 얻는 수신부를 더 포함할 수 있다.
상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에서 전송된 시각을 나타낼 수 있다.
상기 네트워크 지터 추정부는, 상기 전송 시점 및 상기 수신 시점 간의 시각 차이를 이용하여 지터값을 반복적으로 계산하여 업데이트할 수 있다.
상기 네트워크 지터 추정부는
Figure 112013008007126-pat00011
을 이용하여 - 여기서
Figure 112013008007126-pat00012
는 MMT 패킷 i 및 j의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 나타내고, JMMT(i)는 i번째 패킷의 네트워크 지터를 나타낸다.- 상기 네트워크 지터를 계산할 수 있다.
상기 전송 시각 및 수신 시각 간의 시각 간격 차이는 제 1 MMT 전송 패킷의 수신 시각과 제 2 MMT 전송 패킷의 수신 시각의 차이에 제 1 MMT 전송 패킷의 전송 시각 및 제 2 MMT 전송 패킷의 전송 시각의 차이를 감하여 계산될 수 있다.
또한, 본 발명은 부호화된 미디어 데이터(Coded Media Data)의 전송에 사용되는 MMT 전송 패킷 구조에 있어서, 부호화된 미디어 데이터(Coded Media Data) 전송 장치의 MMT 전송 패킷 생성부에서 MMT 전송 패킷(MMT transport packet)이 전송되는 시점의 시간정보를 나타내도록 생성한 타임 스탬프(time stamp)를 포함하는 것을 특징으로 하는 MMT 전송 패킷 구조를 제공한다.
상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에 의해 전송된 시각을 나타낼 수 있다.
본 발명에 따른 네트워크 지터 추정 방법은 부호화된 미디어 데이터로 생성된 MMT 전송 패킷을 송신하는 측이 MMT 패킷의 전송 시점 정보를 MMT 전송 패킷을 생성하는 MMT 전송 계층에서 생성하고 MMT 전송 패킷에 포함시켜 전송함으로써 네트워크 지터를 보다 정확히 추정할 수 있는 효과를 가진다.
도 1은 MMT 계층 구조를 나타낸 개념도이다.
도 2는 MMT 계층 구조의 각 계층별로 사용되는 단위 정보(또는 데이터 또는 패킷)의 포맷을 나타내는 개념도이다.
도 3은 MMT 패키지 구성의 개념도이다.
도 4는 RTP 패킷의 구조를 나타낸 도면이다.
도 5는 미디어 샘플링 시점에 해당하는 시각 정보를 RTP 타임 스탬프 값으로 사용하는 RTP 패킷 전송 시스템의 RTP 패킷 생성 과정을 나타낸 도면이다.
도 6은 하나의 고해상도 비디오 프레임이 여러 개의 패킷으로 분할되어 각기 다른 전송시점을 갖게 되는 예를 도시한 도면이다.
도 7은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 시스템의 블록도이다.
도 8은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치의 블록도이다.
도 9는 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치의 작동순서도이다.
도 10은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치의 블록도이다.
도 11은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치의 작동 순서도이다.
도 12는 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치가 전송 시점 정보를 MMT 패킷의 헤더에 포함하여 MMT 전송 패킷을 생성하는 과정을 나타낸 도면이다.
도 13은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 시스템에서 네트워크 지터를 추정하는 방법의 동작 순서도이다.
도 14는 본 발명의 일 실시 예에 따른 MMT 전송 패킷의 헤더구조이다.
도 15는 본 발명의 일 실시 예에 따른 MMT 전송 패킷의 헤더구조이다.
도 16은 본 발명의 일 실시 에에 다른 MMT 전송 패킷 헤더의 시맨틱스이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 용어의 의미를 다음과 같이 정의한다.
부호화된 미디어 데이터(Media Data)를 이종 IP 네트워크(heterogeneous IP network)를 통하여 전송하기 위한 시스템은 이하 MMT(MPEG Media Transport) 시스템이라 한다.
컨텐츠 콤포넌트(content component) 또는 미디어 콤포넌트(media component)는 단일 종류의 미디어(media of a single type) 또는 단일 종류의 미디어의 부분 집합(subset of the media of a single type)으로 정의되며, 예를 들어, 비디오 트랙(video track), 영화 자막(movie subtitles), 또는 비디오 향상계층(enhancement layer of video)이 될 수 있다.
컨텐츠(content)는 컨텐츠 콤포넌트의 집합으로 정의하며, 예를 들어 영화(movie), 노래(song)등이 될 수 있다.
표현(presentation)은 사용자가 하나의 컨텐츠 컴포넌트 또는 하나의 서비스를 경험(예를 들어 영화 감상)할 수 있도록 하나 또는 하나 이상의 장치들에 의해 수행되는 동작(operation)으로 정의한다.
서비스(service)는 표현(presentation) 또는 저장(storage)을 위해 전송되는 하나 또는 하나 이상의 컨텐츠 컴포넌트로 정의한다.
서비스 정보(service information)는 하나의 서비스, 상기 서비스의 특성(characteristics) 및 컴포넌트들을 기술하는 메타 데이터로 정의한다.
엑세스 유닛(Access Unit; AU)은 시간 정보를 속성으로 가질 수 있는 가장 작은 데이터 개체이다.
디코딩 및 프리젠테이션을 위한 시간 정보가 지정되지 않은 부호화된 미디어 데이터가 관련되면, AU는 정의되지 않는다.
MMT 애셋(MMT Asset)은 동일한 MMT 애셋 ID와 함께 적어도 하나의 MPU로 구성되거나 또는 다른 표준에서 정의된 형식과 함께 특정 데이터 덩어리로 구성되는 논리적 데이터 개체이다. MMT 애셋은 동일한 콤포지션 정보 및 전송 특성이 적용되는 가장 큰 데이터 유닛이다.
MMT 애셋 전송 특성(MMT Asset Delivery Characteristics; MMT-ADC)은 MMT 애셋을 전송하기 위한 QoS 요구에 관련된 서술이다. MMT-ADC는 특정 전송 환경을 알 수 없게 표현된다.
MMT 콤포지션 정보(MMT Composition Information ; MMT CI)는 MMT 애셋간의 공간적 및 시간적 관계를 설명한다.
미디어 프래그먼트 유닛(Media Fragment Unit; MFU)는 일반적인 컨테이너로, 어떠한 특정 코덱에도 독립적이며, 미디어 디코더에 의해 독립적으로 소비될 수 있는 부호화된 미디어 데이터를 수용한다. 이는 엑세스 유닛(AU)보다 작거나 같은 크기를 가지고 전송계층에서 사용될 수 있는 정보를 수용한다.
MMT 패키지(MMT Package)는 논리적으로 구조화된 데이터의 모음으로, 적어도 하나의 MMT 애셋, MMT-콤포지션 정보, MMT-애셋 전송 특성 및 설명적인 정보로 구성된다.
MMT 패킷(MMT packet)은 MMT 프로토콜에 의해 생성 또는 소비되는 데이터의 포맷이다.
MMT 페이로드 포맷(MMT payload format)은 MMT 프로토콜 또는 인터넷 응용 계층 프로토콜(예를들면, RTP)에 의해 전달될 MMT 패키지 또는 MMT 시그날링 메시지의 페이로드를 위한 포맷이다.
미디어 프로세싱 유닛(Media Processing Unit;MPU)은 어떠한 특정 미디어 코덱에도 독립된 일반적인 컨테이너로, 적어도 하나의 AU 및 추가적인 전송 및 소비에 관련된 정보를 수용한다. 비-시간적 데이터를 위하여, MPU는 AU 범위에 속하지 않는 데이터의 부분을 수용한다. MPU는 완전하고 독립적으로 처리될 수 있는 부호화된 미디어 데이터이다. 이러한 맥락에서 처리는 전송을 위한 MMT 패키지로의 캡슐화 또는 패킷화를 의미한다.
비-시간 데이터(Non-timed data)는 시간을 명시하지 않고 소비되는 모든 데이터 요소를 정의한다. 비-시간 데이터는 데이터가 실행되거나 시작될 수 있는 시간 범위를 가질 수 있다.
시간 데이터(timed data)는 디코딩 및 프리젠테이션 되는 특정한 시간과 연관된 데이터 요소를 정의한다.
미디어 데이터(Media data)는 비-시간 데이터(non-timed data) 및 시간 데이터(timed-data) 모두를 포함한 데이터 요소를 의미한다.
미디어 유닛(Media Unit)은 미디어 프래그먼트 유닛(MFU) 또는 미디어 프로세싱 유닛(MPU)를 포함한 컨테이너(container)를 의미한다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 MMT 계층 구조를 나타낸 개념도이다.
도 1을 참조하면, MMT 계층은 캡슐화 계층(Encapsulation layer), 전송 계층(Delivery layer) 및 S 계층(S layer)을 포함한다. MMT 계층은 전송 계층(Transport layer) 위에서 동작한다.
캡슐화 계층(Encapsulation layer; E-layer)은 예를 들어 전송되는 미디어의 패킷화(packetization), 프래그먼테이션(Fragmentation), 동기화(Synchronization), 멀티플렉싱(Multiplexing)등의 기능을 담당할 수 있다.
캡슐화 기능 영역(encapsulation functional area)은 미디어 컨텐츠, MMT 패키지, 그리고 MMT를 준수하는 개체에 의해 처리될 데이터 유닛들의 포맷의 논리적 구조를 정의한다. 적응적 전송을 위해 필수적인 정보를 제공하기 위해 MMT 패키지는 미디어 컨텐츠를 포함하는 컴포넌트들 및 그들간의 관계를 명시한다. 데이터 유닛들의 포맷은 전송 프로토콜의 페이로드로 저장 또는 전송되도록, 그리고 그들 사이에서 쉽게 변환 되도록 부호화된 미디어를 캡슐화 하기 위해 정의된다.
캡슐화 계층(E-layer)은, 도 1에 도시된 바와 같이, MMT E.1 계층(MMT E.1 Layer), MMT E.2 계층(MMT E.2 Layer) 및 MMT E.3 계층(MMT E.3 Layer)으로 구성될 수 있다.
E.3 계층은 미디어 코덱(A) 계층으로부터 제공된 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)을 캡슐화하여 미디어 프로세싱 유닛(Media Processing Unit; MPU)을 생성한다.
상위 계층으로부터의 부호화된 미디어 데이터는 MFU로 캡슐화된다. 부호화된 미디어의 타입과 값은 MFU를 특정 코덱 기술에 일반적으로 사용될 수 있도록 추상화될 수 있다. 이는 하위 계층이 캡슐화된 부호화된 미디어에 접근없이 MFU를 처리할 수 있도록 한다. 하위 계층은 요구되는 부호화된 미디어 데이터를 네트워크나 저장소의 버퍼로부터 불러오고 미디어 디코더로 전송한다. MFU는 상기 작동을 수행하기 위한 충분한 정보 미디어 부분 유닛을 가지고 있다.
MFU는 미디어 디코더에서 독립적으로 소비될 수 있는 데이터 유닛을 싣을 수 있는, 임의의 특정 코덱(codec)에 독립적인, 포맷을 가질 수 있다. MFU는 예를 들어 비디오의 픽춰(picture) 또는 슬라이스(slice)가 될 수 있다.
독립적으로 전송가능하고 디코드할수 있는 하나 또는 한 그룹의 다수 MFU는 MPU를 생성한다. 독립적으로 전송가능하고 실행가능한 비-시간적 미디어 또한 MPU를 생성한다. MPU는 MFU에의 빠른 접근 및 부분적 소비를 가능하게 하는 MFU의 배열 및 패턴과 같은 내부 구조를 기술한다.
E.2 계층은 E.3계층에서 생성된 MPU를 캡슐화하여 MMT 애셋(MMT Asset)을 생성한다.
MMT 애셋은 단일의 데이터 소스로부터의 하나 또는 복수의 MPU로 이루어진 데이터 엔티티(data entity)로서, 콤포지션 정보(Composition Information; CI) 및 전송 특성(Transport Characteristics; TC)이 정의된 데이터 유닛이며, MMT 페이로드 포맷에 의해 다중화되고, MMT 프로토콜에 의해 전송된다. MMT 애셋은 PES(packetized elementary streams)에 대응될 수 있으며, 예를 들어 비디오, 오디오, 프로그램 정보(program information), MPEG-U 위젯(widget), JPEG 이미지, MPEG 4 파일 포맷(File Format), M2TS(MPEG transport stream)등에 대응될 수 있다.
E.1 계층(E.1 Layer)은 E.2 계층에서 생성된 MMT 애셋을 캡슐화하여 MMT 패키지(MMT Package)를 생성한다.
MMT 애셋은 다른 기능적 영역-전송 영역 및 시그날 영역-과 함께 또는 별도로 동일한 사용자 경험의 추후의 응답을 위해 MMT 콤포지션 정보(MMT-composition information;MMT-CI)와 패키지된다. 상기 MMT 패키지 또한 MMT 애셋의 체감 품질을 충족시키도록 각각의 MMT 애셋을 위한 적절한 전송 방법을 선정하는 전송 특성과 함께 패키지된다.
MMT 패키지는 콤포지션 정보(composition information) 및 전송 특성(transport characteristics)과 같은 부가 정보와 함께 하나 또는 복수의 MMT 애셋으로 구성될 수 있다. 콤포지션 정보(composition information)는 MMT 애셋들 사이의 관계(relationship)에 대한 정보를 포함하며, 하나의 컨텐츠(content)가 복수개의 MMT 패키지로 이루어질 경우 복수의 MMT 패키지간의 관계(relationship)를 나타내기 위한 정보를 더 포함할 수 있다. 전송 특성(transport characteristics)은 MMT 애셋 또는 MMT 패킷의 전송 조건(delivery condition)을 결정하기 위해 필요한 전송 특성 정보를 포함할 수 있으며, 예를 들어 트래픽 기술 파라미터(traffic description parameter) 및 QoS 기술자(QoS descriptor)를 포함할 수 있다. MMT 패키지는 MPEG-2 TS의 프로그램(Program)에 대응될 수 있다.
전송 계층(Delivery layer)은 예를 들어 네트워크를 통해 전송되는 미디어의 네트워크 플로우 멀티플렉싱(Network flow multiplexing), 네트워크 패킷화(Network packetization), QoS 제어 등을 수행할 수 있다.
전송 기능 영역(delivery functional area)은 응용 계층 프로토콜 및 페이로드의 포맷을 정의한다. 본 발명에서 응용 계층 프로토콜은 다중화를 포함하는 멀티미디어의 전송을 위한 종래의 응용 계층 프로토콜에 비하여 MMT 패키지의 전달을 위한 강화된 특징을 제공한다. 페이로드 포맷은 미디어 타입 또는 인코딩 방법을 불문하고 부호화된 미디어 데이터를 전달하도록 정의된다.
전송 계층 (D-layer)은, 도 1에 도시된 바와 같이, MMT D.1 계층(MMT D.1 Layer), MMT D.2 계층(MMT D.2 Layer) 및 MMT D.3 계층(MMT D.3 Layer)으로 구성될 수 있다.
D.1 계층(D.1-layer)은 E.1 계층에서 생성된 MMT 패키지를 받아서 MMT 페이로드(MMT Payload)를 생성한다. MMT 페이로드 포맷은 MMT 애셋을 전송하고, 그리고 MMT 애플리케이션 프로토콜 또는 RTP와 같은 다른 기존의 애플리케이션 전송 프로토콜에 의한 소비를 위한 정보를 전송하기 위한 페이로드 포맷이다. MMT 페이로드는 AL-FEC와 같은 정보와 함께 MFU의 프래그먼트를 포함할 수 있다.
D.2 계층(D.2-layer)은 D.1 계층에서 생성된 MMT 페이로드를 받아서 MMT 전송 패킷(MMT Transport Packet) 또는 MMT 패킷(MMT Packet)를 생성한다. MMT 전송 패킷 또는 MMT 패킷은 MMT를 위한 애플리케이션 전송 프로토콜에 사용되는 데이터 포맷이다.
D.3 계층(D.3-layer)은 교차 계층 설계(cross-layer Design)에 의해 계층간에 정보를 교환할 수 있는 기능을 제공하여 QoS를 지원한다. 예를 들어, D.3 계층은 MAC/PHY 계층의 QoS 파라미터를 이용하여 QoS 제어를 수행할 수 있다.
S 계층(S layer)은 시그널링 기능(signaling function)을 수행한다. 예를 들어 전송되는 미디어의 세션 초기화/제어/관리(session initialization/control/management), 서버 기반 및/또는 클라이언트 기반의 트릭 모드, 서비스 디스커버리(Service discovery), 동기화(Synchronization) 등을 위한 시그널링 기능을 수행할 수 있다.
시그날링 기능 영역(signaling functional area)는 MMT 패키지의 전달 및 소비를 관리하는 메시지의 포맷을 정의한다. 소비 관리를 위한 메시지는 MMT 패키지의 구조를 전송하기 위해 사용되고, 전달 관리를 위한 메시지는 페이로드 포맷의 구조 및 프로토콜의 구성을 전송하기 위해 사용된다.
S 계층(S layer)은, 도 1에 도시된 바와 같이, MMT S.1 계층(MMT S.1 Layer) 및 MMT S.2 계층(MMT S.2 Layer)으로 구성될 수 있다.
S.1 계층은 서비스 디스커버리(Service discovery), 미디어의 세션 초기화/종료(media session initialization/termination), 미디어의 세션 표현/제어(media session presentation/control), 전송(D) 계층 및 캡슐화(E) 계층과의 인터페이스 기능 등을 수행할 수 있다. S.1 계층은 미디어 표현 세션 관리(presentation session management)를 위한 애플리케이션들간의 제어 메시지들의 포맷을 정의할 수 있다.
S.2 계층은 흐름 제어(flow control), 전달 세션 관리(delivery session management), 전달 세션 모니터링(delivery session monitoring), 에러 제어(error control), 하이브리드망 동기화 제어(Hybrid network synchronization control)에 관한 전송 계층(D-layer)의 전달 엔드-포인트들(delivery end-points)간에 교환되는 제어 메시지의 포맷을 정의할 수 있다.
S.2 계층은 전송 계층의 동작을 지원하기 위하여 전달 세션 설정 및 해제(delivery session establishment and release), 전달 세션 모니터링, 흐름 제어, 에러 제어, 설정된 전달 세션에 대한 리소스 예약, 복합 전달 환경하에서의 동기화를 위한 시그널링, 적응적 전달(adaptive delivery)를 위한 시그널링을 포함할 수 있다. 송신측(sender)와 수신측(receiver)간에 필요한 시그널링을 제공할 수 있다. 즉, S.2 계층은 전술한 바와 같은 전송 계층의 동작을 지원하기 위하여 송신측(sender)와 수신측(receiver)간에 필요한 시그널링을 제공할 수 있다. 또한, S.2 계층은 전송 계층 및 캡슐화 계층과의 인터페이스 기능을 담당할 수 있다.
도 2는 도 1의 MMT 계층 구조의 각 계층별로 사용되는 단위 정보(또는 데이터 또는 패킷)의 포맷을 나타낸다.
미디어 프래그먼트 유닛(Media Fragment Unit; MFU)(130)은 부호화된 미디어 분할 데이터(coded media fragment data, 132)와 MFUH(Media Fragment Unit Header)(134)로 이루어질 수 있다. 미디어 프래그먼트 유닛(130)은 특정 코덱(codec)에 독립적으로 일반 컨테이너 포맷(general container format)을 가지며 미디어 디코더에서 독립적으로 소비될 수 있는 가장 작은 데이터 유닛을 싣을 수 있다. MFUH(134)는 미디어 특성-예를 들어 유실 허용한계(loss-tolerance)와 같은 부가 정보를 포함할 수 있다. MFU)(130)는 예를 들어 비디오의 픽춰(picture) 또는 슬라이스(slice)가 될 수 있다.
미디어 프래그먼트 유닛(Media Fragment Unit; MFU)은 MFU의 범위에서 적응적인 전송을 수행하기 위해 전송 계층에서 AU의 부분을 캡슐화하는 형식을 정의할 수 있다. MFU는 AU의 부분이 독립적으로 디코드되거나 폐기될 수 있도록 부호화된 미디어의 일정한 형식을 전송하는데 사용될 수 있다.
MFU는 다른 MFU들로부터 하나의 MFU를 구별하기 위한 식별자를 가지고, 단일 AU내의 MFU들 사이의 일반적인 관계 정보를 가질 수 있다. 단일 AU에서의 MFU 사이의 의존 관계가 설명되고, MFU의 관련 우선순위가 그러한 정보들의 부분으로 설명될 수 있다. 상기 정보는 하위 전송 계층에서 전송을 다루는데 사용될 수 있다. 예를 들면, 전송 계층은 불충분한 대역폭에서의 QoS 전송을 지원하도록, 폐기해도 되는 MFU들의 전송을 생략할 수 있다. MFU 구조의 상세한 설명은 후술한다.
MPU는 복수의 미디어 프래그먼트 유닛(130)을 포함하는 미디어 프래그먼트 유닛의 집합이다. MPU는 특정 코덱(codec)에 독립적으로 일반 콘테이너 포맷(general container format)을 가질 수 있으며 액세스 유닛(Access Unit)과 등가의 미디어 데이터를 포함할 수 있다. MPU는 시간 데이터 유닛(timed data unit) 또는 비-시간 데이터 유닛(non-timed data unit) 을 가질 수 있다.
MPU는 MMT를 따르는 개체에 의해 독립적이고 완전하게 처리된 데이터이고, 상기 처리는 캡슐화 및 패킷화를 포함할 수 있다. MPU는 적어도 하나의 MFU로 구성되거나 다른 표준에 의해 정의된 포맷을 가진 데이터의 부분을 가질 수 있다.
단일 MPU는 적어도 하나의 AU의 진정수(integral number) 또는 비-시간 데이터를 수용할 수 있다. 시간 데이터를 위하여, AU는 적어도 하나의 MFU로부터 전달될 수 있으나, 하나의 AU는 다수의 MPU로 분할될 수 없다. 비-시간 데이터에서, 하나의 MPU는 MMT를 준수하는 개체에 의해 독립적이고 완전하게 처리된 비-시간 데이터의 부분을 수용한다.
MPU는 시퀀스번호 및 이를 다른 MPU와 구분하여주는 연관된 애셋 ID로 MMT 패키지 내에서 유일하게 식별될 수 있다
MPU는 적어도 하나의 임의 접근점을 가질 수 있다. MPU 페이로드의 첫 바이트는 항상 임의 접근점으로 시작할 수 있다. 시간 데이터에서, 상기 사실은 MPU 페이로드에서 첫 MFU의 디코딩 순서는 항상 0임을 의미한다. 시간 데이터에서, 각 AU의 프리젠테이션 기간 및 디코딩 순서는 프리젠테이션 시간을 알리기 위해 보내질 수 있다. MPU는 자신의 초기 프리젠테이션 시간을 가지고 있지 않고, 하나의 MPU의 첫 AU의 프리젠테이션 시간은 콤포지션 정보에 기술되어 있을 수 있다. 콤포지션 정보는 MPU의 첫 프리젠테이션 시간을 명시할 수 있다. 상세한 사항은 후술한다.
MMT 애셋(150)은 복수의 MPU들로 이루어진 MPU의 집합이다. MMT 애셋(150)은 단일의 데이터 소스로부터의 다수의 MPU(시간(timed) 또는 비-시간(non-timed) 데이터)로 이루어진 데이터 엔티티로서, MMT 애셋 정보(152)는 애셋 패키징 메타데이터(Asset packaging metadata) 및 데이터 타입과 같은 부가 정보를 포함한다. MMT 애셋(150)은 예를 들어 비디오, 오디오, 프로그램 정보(program information), MPEG-U 위젯(widget), JPEG 이미지, MPEG 4 FF(File Format), PES(packetized elementary streams), M2TS(MPEG transport stream)등을 포함할 수 있다.
MMT 애셋(MMT Asset)은 부호화된 미디어 데이터를 수용하는 논리적 데이터 개체이다. MMT 애셋은 MMT 애셋 헤더 및 부호화된 미디어 데이터로 구성될 수 있다. 상기 부호화된 미디어 데이터는 동일한 MMT 애셋 ID로 MPU들의 집합적 참조 그룹이 될 수 있다. MMT 클라이언트에 직접적으로 연결된 개체에 의해 개별적으로 소비될 수 있는 타입의 데이터는 개별적인 MMT 애셋으로 고려될 수 있다. 개별적인 MMT 애셋으로 고려될 수 있는 데이터 타입의 예로 MPEG-2 TS, PES, MP4 file, MPEG-U Widget Package, JPEG file 등을 들 수 있다.
MMT 애셋의 부호화된 미디어는 시간 데이터 또는 비-시간 데이터 일 수 있다. 시간 데이터는 지정된 시간에 특정 데이터의 동기화된 디코딩 및 프리젠테이션이 요구되는 시청각 미디어 데이터이다. 비-시간 데이터는 서비스의 제공 또는 사용자 상호작용에 따라 임의의 시간에 디코딩되고 제공될 수 있는 데이터 타입의 데이터이다.
서비스 제공자(service provider)는 MMT 애셋들을 통합하여 MMT 애셋들을 공간-시간축상에 두고 멀티미디어 서비스를 생성할 수 있다.
MMT 패키지(160)는 하나 또는 하나 이상의 MMT 애셋(150)을 포함하는 MMT 애셋의 집합이다. MMT 패키지 내의 MMT 애셋들은 다중화되거나 또는 사슬같이 연결(concatenated)될 수 있다.
MMT 패키지는 MMT 애셋 및 구성 정보를 위한 컨테이너 포맷이다. MMT 패키지는 MMT 프로그램을 위한 MMT 애셋 및 구성 정보의 저장소를 제공한다.
MMT 프로그램 제공자는 부호화된 데이터를 MMT 애셋으로 캡슐화하고 MMT 애셋과 그들의 전송 특성의 시간적 및 공간적 레이아웃을 설명하는 것으로 구성 정보를 생성한다. MU 및 MMT 애셋은 D.1 페이로드 포맷으로 직접적으로 전송될 수 있다. 구성 정보는 C.1 프리젠테이션 세션 관리 메시지에 의해 전송될 수 있다. 그러나 MMT 프로그램의 릴레이 또는 추후의 재사용을 허용하는 MMT 프로그램 제공자 및 클라이언트는 MMT 패키지 포맷으로 이를 저장한다.
MMT 패키지를 파싱하는데 있어, MMT 프로그램 제공자는 MMT 애셋이 클라이언트에게 어떤 전송 경로(예를들면, 브로드캐스트 또는 브로드밴드)로 제공될지를 결정한다. MMT 패키지에서의 구성 정보는 전송 관련 정보와 함께 C.1 프리젠테이션 세션 관리 메시지로 전송된다.
클라이언트는 C.1 프리젠테이션 세션 관리 메시지를 수신하여 어떤 MMT 프로그램이 가능하고 어떻게 해당되는 MMT 프로그램을 위한 MMT 애셋을 수신하는지를 알게된다.
MMT 패키지는 D.1페이로드 포맷에 의해 또한 전송될 수 있다. MMT 패키지는 D.1 페이로드 포맷으로 패킷화되고 전달된다. 클라이언트는 패킷화된 MMT 패키지를 수신하고 이의 전부 또는 일부를 구성하고, 여기서 MMT 프로그램을 소비한다.
MMT 패키지(160)의 패키지 정보(package information)(165)는 구성 정보(Configuration Information)를 포함할 수 있다. 구성 정보(Configuration Information)는 MMT 애셋들의 리스트, 패키지 식별 정보(package identification information), 콤포지션 정보(composition information)(162) 및 전송 특성(transport characteristics)(164)와 같은 부가 정보를 포함할 수 있다. 콤포지션 정보(composition information)(162)는 MMT 애셋(150)들 사이의 관계(relationship)에 대한 정보를 포함한다.
또한, 콤포지션 정보(composition information)(162)는 하나의 컨텐츠(content)가 복수개의 MMT 패키지로 이루어질 경우 복수의 MMT 패키지간의 관계(relationship)를 나타내기 위한 정보를 더 포함할 수 있다. 콤포지션 정보(composition information)(162)는 MMT 패키지내의 시간적, 공간적, 적응적 관계(relationship)에 대한 정보를 포함할 수 있다.
MMT 패키지의 전송 및 프리젠테이션을 돕는 정보와 같이, MMT에서의 콤포지션 정보(Composition Information)는 도 3에 도시된 바와 같이 MMT 패키지 내의 MMT 애셋 사이의 공간적 및 시간적 관계에 대한 정보를 제공한다.
MMT-CI는 HTML5를 확장하여 그러한 정보를 제공하는 설명적인 언어이다. HTML5가 텍스트 기반 컨텐츠의 페이지기반 프리젠테이션을 설명하도록 설계됨에 따라, MMT-CI는 주로 소스들간의 공간적인 관계를 표현한다. MMT 애셋들 간의 시간적 관계를 알려주는 표현을 지원하기 위하여, 프리젠테이션 리소스와 같이 MMT 패키지에 있는 MMT 애셋에 관련된 정보, MMT 애셋의 전송 및 소비 순서를 결정하는 시간 정보 및 HTML5에서 다양한 MMT 애셋을 소비하는 미디어 요소들의 추가적인 속성을 가지도록 확장될 수 있다. 자세한 설명은 후술한다.
전송 특성(transport characteristics) 정보(164)는 전송 특성에 대한 정보를 포함하며, 도 3에 도시된 바와 같이 각각의 MMT 애셋(또는 MMT 패킷)의 전송 조건(delivery condition)을 결정하기 위해 필요한 정보를 제공할 수 있다. 전송 특성 정보는 트래픽 기술 파라미터(traffic description parameter) 및 QoS 기술자(QoS descriptor)를 포함할 수 있다.
트래픽 기술 파라미터는 미디어 프래그먼트 유닛(MFU)(130) 또는 MPU에 대한 비트율(bitrate) 정보, 우선 순위(priority) 정보등을 포함할 수 있다. 비트율 정보는 예를 들어 MMT 애셋이 가변 비트율(Variable BitRate; VBR) 또는 고정 비트율(Constant BitRate; CBR)인지 여부에 대한 정보, 미디어 프래그먼트 유닛(MFU)(또는 MPU)에 대해 보장된 비트율(guaranteed bitrate), 미디어 프래그먼트 유닛(MFU)(또는 MPU)에 대한 최대 비트율을 포함할 수 있다. 상기 트래픽 기술 파라미터는 전달 경로상의 서버, 클라이언트, 기타 다른 구성요소들 간에 리소스 예약(resource reservation)을 위해 사용될 수 있으며, 예를 들어 MMT 애셋내의 미디어 프래그먼트 유닛(MFU)(또는 MPU)의 최대 크기 정보를 포함할 수 있다. 상기 트래픽 기술 파라미터는 주기적 또는 비주기적으로 업데이트될 수 있다.
QoS 기술자는 QoS 제어를 위한 정보를 포함하며, 예를 들어 지연(delay) 정보 및 손실 정보(loss information)를 포함할 수 있다. 손실 정보는 예를 들어 MMT 애셋의 전달 손실(delivery loss)이 허용되는지 않되는지에 대한 손실 지시자(loss indicator)를 포함할 수 있다. 예를 들어 손실 지시자가 ‘1’인 경우 ‘lossless’를 나타내고, ‘0’인 경우에는 ‘lossy’를 나타낼 수 있다. 지연(delay) 정보는 MMT 애셋의 전송 지연의 민감도를 구분하는데 사용되는 지연 지시자(delay indicator)를 포함할 수 있다. 지연 지시자는 MMT 애셋의 타입이 대화(conversation), 인터랙티브(interactive), 실시간(real time) 및 비실시간(non-realtime) 인지 여부를 지시할 수 있다.
하나의 컨텐츠(content)는 하나의 MMT 패키지로 이루어질 수 있다. 또는 하나의 컨텐츠(content)는 복수개의 MMT 패키지로 이루어질 수도 있다.
하나의 컨텐츠(content)가 복수개의 MMT 패키지로 이루어질 경우 복수의 MMT 패키지간의 시간적(temporal), 공간적(spatial), 적응적(adaptive) 관계(relationship)를 나타내는 콤포지션 정보(composition information) 또는 구성 정보(configuration information)가 MMT 패키지들 중에 하나의 MMT 패키지 내부에 존재하거나 MMT 패키지 외부에 존재할 수 있다.
예를 들어 하이브리드 전송(hybrid delivery)의 경우 컨텐츠 컴포넌트(content component)들 중 일부는 방송망(broadcast network)을 통해 전송되고 컨텐츠 컴포넌트(content component)들 중 나머지 부분은 광대역망(broadband network)을 통해 전송될 수 있다. 예를 들어 하나의 멀티뷰 서비스를 구성하는 복수의 AV 스트림(audiovisual stream)의 경우 하나의 스트림은 방송망으로 전송되고 다른 스트림은 광대역망으로 전송될 수 있으며, 각각의 AV 스트림은 다중화되고 클라이언트 단말에 개별적으로 수신되어 저장될 수 있다. 또는 예를 들어 위젯(widget)과 같은 애플리케이션 소프트웨어는 광대역망으로 전송되고, AV 스트림(AV 프로그램)은 기존 방송망으로 전달되는 시나리오도 존재할 수 있다.
상기와 같은 멀티뷰 서비스 시나리오 및/또는 위젯(widget) 시나리오의 경우, 복수의 AV 스트림 전체가 하나의 MMT 패키지로 될 수 있으며, 이 경우에는 복수의 스트림 중의 하나는 하나의 클라이언트 단말에만 저장될 수 있고, 스토리지 컨텐츠(storage content)는 MMT 패키지의 부분이 되며, 클라이언트 단말은 콤포지션 정보(composition information) 또는 구성 정보(configuration information)를 재기록 해야하고, 재기록 된 컨텐츠는 서버와 무관한 새로운 MMT 패키지가 된다.
상기와 같은 멀티뷰 서비스 시나리오 및/또는 위젯(widget) 시나리오의 경우, 각각의 AV 스트림이 하나의 MMT 패키지로도 될 수 있으며, 이 경우에는 복수의 MMT 패키지가 하나의 컨텐츠를 구성하게 되며, 스토리지(storage)에는 MMT 패키지 단위로 기록되며, MMT 패키지들간의 관계(relationship)를 나타내는 콤포지션 정보 또는 구성 정보가 필요하다.
하나의 MMT 패키지내에 포함된 콤포지션 정보 또는 구성 정보(configuration information)는 다른 MMT 패키지내의 MMT 애셋을 참조할 수 있으며, 또한 아웃-밴드(out-band) 상황에서 MMT 패키지를 참조하는 MMT 패키지의 외부를 표현할 수 있다.
한편, 서비스 제공자(service provider)에 의해 제공된 MMT 애셋(160)들의 리스트 및 MMT 패키지(160)의 전달을 위해 가능한 경로를 클라이언트 단말에게 알려주기 위하여 MMT 패키지(160)는 제어(C) 계층을 통하여 서비스 디스커버리 정보(Service discovery information)로 번역되어 MMT 제어 메시지에는 서비스 디스커버리를 위한 정보 테이블을 포함할 수 있다.
멀티미디어 컨텐츠를 복수개의 세그먼트로 분할한 서버는 소정의 개수로 분할된 복수개의 세그먼트들에 URL 정보를 할당하고, 각각의 세그먼트들에 대한 URL 정보를 미디어 정보 파일에 저장하여 클라이언트로 전송한다.
상기 미디어 정보 파일은 HTTP 스트리밍을 표준화하는 표준화 기구에 따라서‘미디어 표현 기술(MPD: Media Presentation Description)’ 또는 ‘매니페스트 파일(Manifest file)’등의 다양한 명칭으로 불리어 질 수 있다. 이하에서는 상기 미디어 정보 파일은 미디어 표현 기술(MPD)로 지칭하고 설명한다.
이하 교차 계층 인터페이스에 대하여 설명한다.
교차 계층 인터페이스(Cross Layer Interface; CLI) 는 응용계층 및 MAC/PHY 계층을 포함하는 하위 계층 사이에서 QoS 관련 정보를 교환하는 것으로 QoS를 지원하는 수단을 단일 개체에서 제공한다. 하위 레이어가 네트워크 채널 상태와 같은 상향식 QoS 정보를 제공하는 한편 응용계층은 하향식 QoS정보로 미디어 특성에 관련된 정보를 제공한다..
교차 계층 인터페이스는 응용계층과 IEE802.11 WiFi, IEEE 802.16 WiMAX, 3G, 4G LTE 등을 포함하는 다양한 네트워크 계층 사이에서 통합된 인터페이스를 제공한다. 인기있는 네트워크 표준의 공통된 네트워크 파라미터들은 다양한 네트워크를 통하는 실시간 미디어 어플리케이션의 정적 및 동적 QoS 제어를 위하여 NAM 파라미터로 발췌된다. NAM 파라미터는 비트 에러율인 BER 값을 포함할 수 있다. BER은 PHY 또는 MAC 계층에서 측정될 수 있다. 또한 NAM은 하부 네트워크의 식별, 가능한 비트율, 버퍼상태, 피크 비트율, 서비스 유닛 크기 및 서비스 데이터 유닛 유실율을 제공한다.
두개의 상이한 방법이 NAM을 제공하는 데에 사용될 수 있다. 첫째 방법은 절대적인 값을 제공하는 것이다. 그리고 둘째 방법은 상대적인 값을 제공하는 것이다. 둘째 방법은 접속중에 NAM을 업데이트하는 용도로 사용할 수 있다.
응용계층은 하위 계층에 대한 미디어 특성에 관련된 하향식 QoS 정보를 제공한다. MMT 애셋 레벨 정보 및 패킷 레벨 정보와 같이 두 가지의 하향식 정보가 존재한다. MMT 애셋 정보는 하위 계층에서 용량 교환 및/또는 자원 (재)할당을 위하여 사용된다. 패킷 레벨 하향식 정보는 지원하는 QoS 레벨을 식별하도록 하위 계층을 위하여 모든 패킷의 적절한 필드에 기록되어 있다.
하위 계층은 응용 계층에 상향식 QoS 정보를 제공한다. 하위 계층은 응용 계층에서 빠르고 보다 정확한 QoS 제어를 가능하게 하는 시간에 따라 변하는 네트워크 상태에 관련된 정보를 제공한다. 상향식 정보는 이종의 네트워크 환경을 지원하기 위해 추상화된 형태로 표현된다. 이러한 파라미터들은 하위 계층에서 측정되고, 주기적으로 또는 MMT 어플리케이션의 요청에 따라 응용 계층에서 읽어진다.
이하 MMT 패키지를 패킷화하는 페이로드의 포멧 및 응용 프로토콜을 정의한다.
MMT 페이로드(MMT Payolad)는 MMT 패키지의 전송을 위한 일반적인 페이로드로 정의된다. MMT 페이로드는 부호화된 미디어 데이터에 사용되는 특정 미디어 코덱에 독립적이어서(agnostic to), MPU와 같이 캡슐화된 어떠한 타입의 미디어도 미디어 컨텐츠의 스트리밍 전송을 지원하는 응용 계층 프로토콜을 위한 페이로드들로 패킷화될 수 있다. MMT 페이로드는 RTP 또는 MMT 프로토콜의 페이로드 포멧으로 사용될 수 있다. 더하여, MMT 페이로드는 MMT 시그날링 메시지들을 전송하는데 사용될 수도 있다.
MMT 페이로드는 MMT 애셋 및 MMT 프로토콜 또는 다른 응용 계층 프로토콜을 사용하여 소비되는 정보를 패킷화하고 전달하는 일반적인 페이로드이다. MMT 페이로드는 MPU 및 MMT 시그날링 메시지를 패킷화하는데 사용될 수 있다.
MMT 페이로드는 동일한 애셋 ID를 가지는 적어도 하나의 MPU, MMT 시그날링 메시지, FEC 패리티 및 기타 정보를 전달한다. MMT 페이로드는 동일한 타입의 복수의 데이터 유닛을 단일 페이로드로 모을 수 있고, 단일 유닛의 데이터를 복수의 페이로드들로 나눌 수 있다.
MMT 페이로드는 페이로드의 헤더 및 데이터를 포함하는 길이 정보를 제공할 수 있다. MMT 페이로드 헤더는 가변적인 크기를 가진다.
MMT 프로토콜은 이종 IP 네트워크 환경을 통해 미디어 컨텐츠의 스트리밍 전송을 지원하는 응용 계층 프로토콜을 정의한다. MMT 프로토콜은 MMT 패키지를 효율적이고 신뢰성있게 전송하기 위한 응용 계층 프로토콜이다.
MMT 프로토콜은 MMT 패키지를 전송하는데 중요한 특징을 제공하는데, 다양한 MMT 애셋들이 단일 MMT 데이터 플로우상에서 전송되도록 하는 프로토콜 레벨 멀티플렉싱, 넓은 범위의 네트워크 지터에 적응할 수 있는 프리젠테이션 타임에 독립적인 전송 타이밍 모델, 및 QoS를 지원하는 정보들이 있다.
즉, MMT 프로토콜은 다양한 타입의 부호화된 미디어 데이터로 구성된 컨텐츠를 전송하기 위하여 요구되는 멀티플렉싱, 네트워크 지터 계산 및 QoS 인디케이션과 같은 기능을 지원할 수 있다.
MMT 프로토콜은 하부 전송 네트워크에 의해 유발되고 데이터 스트림의 지속적인 딜레이를 생성하는 지터를 계산하고 제거하는 수단을 제공한다. 패킷 헤더에 전송 시간 필드를 사용함으로써, 추가적인 시그날링 프로토콜들 없이도 정확하게 지터가 계산될 수 있다.
시간 제약을 가지는 미디어 데이터의 전송은 MMT 프로토콜의 일시적 필요성에 따른 중요한 특성이다. 단일 MMT 프로토콜 패킷 플로우의 패킷들 중에서 또는 상이한 MMT 프로토콜 패킷 플로우의 패킷 간에서의 타이밍 관계를 보전하는 것은 MMT 전송 환경에서 중요한 특성이다. MMT는 MMT 패키지의 전송에 사용될 타이밍 모델을 명시한다. 전송 타이밍 모델은 MMT 패키지의 전송중 기본적인(underlying) 전송 네트워크에 의해 유발되는 지터 및 지연(delay) 총량을 계산하는 기능을 제공한다. 전송 및 수신단의 클록을 동기화하기 위해 RFC 5905에 명시된 것과 같이 NTP가 사용될 수 있다.
본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치는 정확한 지터의 계산을 위해서 샘플링 시간이 아닌 전송 시점을 활용하여 지터를 계산하는 방법을 사용한다.
기존 RTP에서 제공하는 방법의 경우 네트워크 지터 계산을 위해서 샘플링 시간을 활용하므로 실제 패킷이 전송되기 이전에 전송 측에서 발생하게 되는 여러 가지 응용처리로 인한 지연 시간들이 지터의 계산에 포함될 수 있다. 따라서 순수하게 네트워크를 통한 전달 과정에서 발생하게 되는 네트워크 지터를 정확하게 계산할 수 없다. 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치는 기존 RTP에서 제공하는 지터 추정 방법의 부정확함을 개선하여 보다 정확한 지터 추정을 가능하게 하고 그 결과를 MMT 시스템 기반의 미디어 전송 서비스에 활용할 수 있게 한다.
본 발명의 일 실시 예에 따른 네트워크 지터 추정 방법은 MMT의 전송 계층에서 제공될 수 있는 전송 시점을 활용하여 지터를 계산한다. 따라서, MMT(MPEG Media Transport: MPEG 미디어 전송) 시스템 기반의 미디어 전송 서비스에서 IP (Internet Protocol) 네트워크를 통한 전달 과정에서 발생하게 되는 패킷들 간의 도착 시간 간격 (inter-arrival time)의 변이 (variation)를 나타내는 지터 (jitter)를 정확하게 계산할 수 있다. 본 발명의 일 실시 예에 따른 네트워크 지터 추정 방법은 MMT 패킷을 송신하는 측이 수신측에 전송하는 MMT 패킷의 전송 시점 정보를 전달 한다. 도 1에 도시된 바와 같이 D.2 계층에서 TCP/IP, UDP로 MMT 전송 패킷(MMT Transport Packet)이 전달되는 MMT 시스템의 프로토콜 구조와 해당되는 기능을 고려하여 전송 계층(D-layer)에서 전송 시점에 관한 정보를 전달할 수 있다. MMT 패킷을 전송할 때, 전송 계층에서 생성되는 패킷의 헤더에 전송하고자 하는 MMT 패킷의 전송 시점을 표현할 수 있는 시간 정보를 포함시킨다. 상기 시간 정보는 MMT 패킷이 전송부에서 전송되는 시간일 수 있으며, 보다 정확히는 MMT 패킷의 첫 비트가 전송부에 의해 전송되는 시간일 수 있다.
또한, 본 발명의 일 실시 예에 따른 네트워크 지터 추정 방법은 IP 네트워크 뿐만 아니라 방송망을 사용하여 미디어 데이터가 전송되는 전달과정에서 발생하게 되는 패킷들 간의 지터 또한 계산할 수도 있다. 상기 방송망의 예로 8-VSB을 들 수 있다. 이러한 경우 D.2 계층에서 IP 네트워크가 아닌 방송망으로 MMT 전송 패킷을 직접 전달할 수 있다. 또한, 방송망을 사용하는 경우 후술하는 바와 같이 MMT 전송 패킷을 사용하여 본 발명의 일 실시 예에 따른 네트워크 지터 추정 방법이 수행될 수도 있지만, MMT 전송 패킷이 고유의 전송 시점을 포함하는 것과 같은 방식으로 TS 패킷(Transport Stream Packet)이 생성될 수도 있다. 이때 TS 패킷은 MMT 전송 패킷 생성부가 아닌 TS 패킷 생성부에서 생성되며, TS 패킷 생성부는 TS 패킷을 TS 패킷의 전송 시점을 포함하도록 생성하여 후술할 내용이 적용될 수도 있다.
수학식 3은 MMT 패킷들의 전송 시점 및 도착 시점 간의 시간 간격의 차이인
Figure 112013008007126-pat00013
를 계산하기 위한 수식이다. MMT 패킷쌍 i및 j의 패킷 간격의 차이를 계산하는 상기 수식은 아래와 같이 표현될 수 있다.
Figure 112013008007126-pat00014
TD,i와 TD,j는 MMT 패킷 헤더에 존재하는 값으로 각각 MMT 패킷 i와 패킷 j의 전송 타임 인스턴스이다.
Figure 112013008007126-pat00015
및
Figure 112013008007126-pat00016
는 각각 MMT 패킷 i와 패킷 j가 MMT 수신기에 도달한 타임인스턴스이다. 즉, TD,i와 TD,j는 각각 MMT 패킷 i와 패킷 j의 전송 시각을 나타내고,
Figure 112013008007126-pat00017
와
Figure 112013008007126-pat00018
는 각각 MMT 패킷 i와 패킷 j의 수신측에서의 도착 시각을 나타낸다.
한편, MMT 인캡슐레이션(encapsulation) 데이터는 MMT의 D-layer 패킷화를 거쳐서 전송될 수 있을 뿐만 아니라 기존의 RTP 패킷화에 의해서도 전송이 될 수가 있다. 따라서, 기존의 RTP에서 활용되는 지터 계산 방법과의 호환성을 유지하기 위하여 패킷 간격 차이의 평균 분산으로 정의되는 도착 상호간의 지터 JMMT(i)는 다음의 수학식을 사용하여 각 MMT 패킷 i가 수신됨에 따라 계속적으로 계산될 수 있다.
Figure 112013008007126-pat00019
도 7은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 시스템의 블록도이다. 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 시스템은 미디어 데이터 전송장치(100) 및 미디어 데이터 수신장치(200)로 구성되고, 미디어 데이터 전송장치(100)는 IP네트워크를 통해 미디어 수신 장치로 부호화한 데이터를 전달된다.
도 8은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치의 블록도이다. 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치(100)는 MMT 페이로드(MMT payload) 생성부(110), MMT 전송 패킷(MMT transport packet) 생성부(120) 및 전송부(130)를 포함한다.
MMT 페이로드 생성부(110)는 미디어 데이터를 수신하여 전술한 MMT 페이로드(MMT payload)를 생성한다. MMT 페이로드 생성부(110)는 생성한 MMT 페이로드를 MMT 전송 패킷 생성부(120)로 전송한다. MMT 전송 패킷 생성부(120)는 MMT 페이로드를 받아 MMT 전송 패킷 헤더를 부가하여 MMT 전송 패킷(MMT transport packet)을 생성한다. MMT 전송 패킷 헤더에는 전송 시각 정보가 포함될 수 있다. MMT 전송 패킷 생성부(120)는 생성된 MMT 전송 패킷을 전송부(130)로 전달한다. 전송부(130)는 MMT 전송 패킷 생성부(120)로부터 수신한 MMT 전송 패킷을 IP 네트워크를 통해 미디어 데이터 수신장치(200)로 전송한다. 전송부는 MMT 전송 패킷에 전송 시각 정보를 전송 시의 시각으로 수정하여 전송할 수도 있다.
도 9는 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치의 작동 순서도이다. 먼저 MMT 페이로드 생성부(110)는 미디어 데이터를 수신한다(S110). 다음으로, MMT 페이로드 생성부(110)가 수신한 미디어 데이터를 사용하여 MMT 페이로드를 생성한다(S120). 다음으로, MMT 전송 패킷 생성부(110)는 MMT 페이로드와 MMT 전송 패킷 헤더를 사용하여 MMT 전송 패킷을 생성한다(S130). MMT 전송 패킷 생성부(110)는 MMT 전송 패킷 헤더에 전송 시작 정보를 나타내는 타임 스탬프(timestamp)필드를 사용할 수 있다. MMT 전송 패킷 생성부(110)는 MMT 전송 패킷 헤더에 전송 시각 정보를 삽입하여 MMT 전송 패킷을 생성할 수 있다. 다음으로 전송부(130)는 MMT 전송 패킷에 전송 시각 정보인 전송 타임 인스턴스를 넣어 전송한다(S140). 전송부(130)는 MMT 전송 패킷에 전송 시각 정보를 별도로 수정하지 않고 MMT 전송 패킷 생성부(130)가 삽입한 전송 시각 정보를 유지하여 전송할 수도 있다.
도 10은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치의 블록도이다. 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치는 수신부(210), 네트워크 지터 추정부(220) 및 미디어 데이터 생성부(230)를 포함한다.
수신부(210)는 IP 네트워크를 통해 미디어 데이터 전송 장치로부터 MMT 전송 패킷을 전송받는다. 수신부(210)는 MMT 전송 패킷이 수신된 시각을 측정할 수 있다. 네트워크 지터 추정부(220)는 네트워크 지터를 추정한다. 네트워크 지터 추정부(220)는 MMT 전송 패킷의 수신 시각을 직접 측정할 수도 있다. 네트워크 지터 추정부(220)는 전술한 바와 같이 MMT 전송 패킷이 수신된 시각과 MMT 전송 패킷의 헤더에 저장된 MMT 전송 패킷의 전송 시각 정보를 사용하여 네트워크 지터를 추정할 수 있다. 미디어 데이터 생성부(230)는 MMT 전송 패킷으로부터 미디어 데이터를 생성할 수 있다.
도 11은 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 수신 장치의 작동 순서도이다. 먼저 수신부(210)가 MMT 전송 패킷을 수신한다(S210). 다음으로 수신부(210) 또는 네트워크 지터 추정부(220)가 MMT 전송 패킷의 수신 시각을 측정한다(S220). 다음으로 네트워크 지터 추정부(220)가 MMT 전송 패킷의 측정된 수신시각과 MMT 전송 패킷에 담긴 MMT 전송 패킷의 전송시각을 사용하여 네트워크 지터를 추정할 수 있다.(S230). 네트워크 지터를 추정하는 단계는 여기에서 종료될 수 있으며, 이후 부호화된 미디어 데이터 수신에 따른 이하의 처리가 진행될 수 있다. 예를 들어 미디어 데이터 생성부(230)는 MMT 전송 패킷을 사용하여 미디어 데이터를 생성할 수 있다(S240).
도 12는 본 발명의 일 실시 예에 따른 부호화된 미디어 데이터 전송 장치의 기능 블록도이다. 미디어 프레임(310)이 미디어 인코더(320)로 유입된다. 여기서 미디어 프레임(310)은 미디어 픽쳐일 수 있다. 미디어 인코더(320)는 미디어 프레임(310)을 입력받아 미디어 프레임(310)을 부호화한다. 미디어 인코더(320)는 부호화한 미디어 프레임을 인코더 버퍼(330)로 전달하고, 인코더 버퍼(330)는 미디어 인코더(320)로부터 받은 부호화된 미디어 프레임을 일시적으로 저장하고 미디어 데이터의 전송 속도에 따라 부호화된 미디어 데이터를 어플리케이션 레이어 프로세싱부(340)로 전달한다. 인코더 버퍼(330)는 어플리케이션 레이어 프로세싱부(340)의 제어에 따라 또는 별도의 제어에 따라 어플리케이션 레이어 프로세싱부(340)로 저장하고 있던 부호화된 미디어 프레임을 전달할 수 있다. 어플리케이션 레이어 프로세싱부(340)는 부호화된 미디어 프레임에 AL-FEC, 인터리빙 등과 같은 처리를 하여 MMT 전송 패킷화부(350)로 전달할 수 있다. MMT 전송 패킷화부(350)는 패킷 전송 시각(Packet Delivery Instant; Td)(360)을 포함하여 MMT 전송 패킷을 생성한다. 패킷 전송 시각은 MMT 전송 패킷이 전송되기 직전의 단계에 생성되어 MMT 전송 패킷에 포함될 수 있고, MMT 전송 패킷이 전송될 시각을 예측한 값이 전송될 수도 있다. 또는 MMT 전송 패킷 전송부가 MMT 전송 패킷을 전송할 때 MMT 전송 패킷에 전송 시각을 입력할 수도 있다. MMT 전송 패킷화부(350)에서 생성된 MMT 전송 패킷은 IP네트워크를 통해 전송된다(370).
도 13은 본 발명의 일 실시 예에 따른 MMT 전송 시스템에서 네트워크 지터를 추정하는 방법의 동작 순서도이다. 먼저 i번째 MMT 패킷이 도착한다(S310). 다음으로 i번째 MMT 패킷의 수신측 도착 시간인 Ri를 측정한다(S320). 그리고 i번째 MMT 패킷의 전송계층 헤더에 기록되어 있는 TD,i값을 추출한다(S330). S310, S320 및 S330의 단계 진행 중 j번째 MMT 패킷이 도착할 수 있다(S311). j번째 MMT 패킷이 도착하면 j번재 MMT 패킷의 수신측 도착 시간인 Rj를 측정한다(S321). 다음으로 j번째 MMT 패킷의 전송 계층 헤더에 기록되어 있는 TD,j값을 추출한다(S331). i번째 패킷의 S310, S320 및 S330 단계와 j번째 패킷의 S311, S321 및 S331 단계는 병렬로 수행될 수 있다.
다음으로 MMT 패킷들의 전송 시점 및 도착 시점 간의 시간 간격의 차이인 DMMT(i,j)를 계산한다(S340). 전술한 수학식 3을 사용하여 DMMT(i,j)를 계산할 수 있다. 다음으로 패킷 간격 차이의 평균 분산으로 정의되는 도착 상호간의 지터 JMMT(i)를 계산한다(S350). 전술한 바와 같이 수학식 4를 사용하여 지터 JMMT(i)를 계산할 수 있다.
전송 시각 정보가 MMT 전송 패킷 헤더에 표현되는 일 실시 예를 설명한다. 도 14는 본 발명의 일 실시 예에 따른 MMT 전송 패킷의 헤더구조이다. 도 14에 도시된 바와 같이 MMT 전송 패킷의 헤더는 전송 시각 정보(TD)필드를 포함하여 MMT 전송 패킷이 전송되는 시각을 나타낼 수 있다.
도 15는 본 발명의 일 실시 예에 따른 MMT 전송 패킷의 헤더구조이다. 도 15에 도시된 바와 같이 MMT 전송 패킷은 시퀀스 번호(Sequence number), 타임스탬프(Timestamp), packet_flow_id, svc class, Qos class, flow id 등의 속성을 나타내는 필드와 MMT 페이로드 데이터를 포함할 수 있다. 타임스탬프(Timestamp)는 MMT 전송 패킷이 전송되는 시각을 나타낼 수 있다.
도 16은 본 발명의 일 실시 에에 다른 MMT 전송 패킷 헤더의 시맨틱스이다. MMT 전송 패킷 헤더에서 MMT 전송 패킷의 속성을 나타내는 필드의 일부에 대한 설명이 도시되어 있다. 시퀀스 번호(sequence_number)필드는 32비트로 표현되어 각각의 MMT 전송 패킷의 일련번호를 나타낼 수 있다. 시퀀스 번호(sequence_number)는 각각의 MMT 전송 패킷 마다 증가하는 값을 가질 수 있고, 최대값을 가지게 되면 그 다음 MMT 전송 패킷의 시퀀스 번호는 0의 값을 가질 수 있다. 시퀀스 번호의 시작값은 임의의 값일 수 있다.
타임 스탬프(timestamp) 필드는 MMT 전송 패킷의 전송을 위하여 사용되는 특유의 타임 인스턴스로 32비트로 표현될 수 있다. 이는 NTP 버전 4(RFC5905)의 6절(clause 6)에 명시된 숏 포멧(short format)과 같이 NTP 타임이 타임 스탬프에 사용될 수 있다. 타임 스탬프는 MMT 전송 패킷의 첫 번째 비트가 미디어 서버에 의해 전송되는 시간에 대응될 수 있다.
패킷 플로우 아이디(packet_flow_id) 필드는 16 비트로 표현되며, MMT 트랜스포트 패킷을 다른 애셋 또는 시그날링 메시지와 구분하게 할 수 있다.

Claims (23)

  1. 부호화된 미디어 데이터(Coded Media Data)를 전송하기 위한 장치에서 미디어 데이터를 전송하는 방법에 있어서,
    부호화된 미디어 데이터 및 MMT 전송 패킷(MMT transport packet)이 전송되는 시각을 나타내는 타임 스탬프(timestamp)를 사용하여 MMT 전송 패킷을 생성하는 단계를 포함하는 것을 특징으로 하는 미디어 데이터 전송 방법.
  2. 제 1 항에 있어서, 상기 미디어 데이터 전송 방법은,
    미디어 코덱 계층으로부터 특정 미디어 코덱에 독립적인 포맷을 가지는 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)을 제공받는 단계;
    상기 미디어 프래그먼트 유닛을 사용하여 미디어 프로세싱 유닛(Media Processing Unit; MPU)을 생성하는 단계;
    상기 생성된 미디어 프로세싱 유닛을 캡슐화하여 MMT 애셋(MMT Asset)을 생성하는 단계;
    상기 생성된 MMT 애셋을 캡슐화하여 MMT 패키지(MMT Package)를 생성하는 단계; 및
    상기 생성된 MMT 패키지를 받아서 MMT 페이로드(MMT Payload)를 생성하는 단계를 더 포함하고,
    상기 MMT 전송 패킷을 생성하는 단계는 상기 MMT 페이로드를 사용하여 상기 MMT 전송 패킷을 생성하는 것을 특징으로 하는 미디어 데이터 전송 방법.
  3. 제 1 항에 있어서, 상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 전송될 시간을 나타내는 것을 특징으로 하는 미디어 데이터 전송 방법.
  4. 제 3 항에 있어서, 상기 미디어 데이터 전송 방법은,
    상기 MMT 전송 패킷을 전송하는 단계를 더 포함하는 것을 특징으로 하는 미디어 데이터 전송 방법.
  5. 부호화된 미디어 데이터(Coded Media Data)를 전송하기 위한 미디어 데이터 전송 장치에서,
    부호화된 미디어 데이터 및 MMT 전송 패킷(MMT transport packet)이 전송될 시간을 나타내는 타임 스탬프(timestamp)를 사용하여 MMT 전송 패킷(MMT transport packet)을 생성하는 MMT 전송 패킷 생성부를 포함하는 것을 특징으로 하는 미디어 데이터 전송 장치.
  6. 제 5 항에 있어서, 상기 미디어 데이터 전송 장치는,
    미디어 코덱 계층으로부터 특정 미디어 코덱에 독립적인 포맷을 가지는 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)을 제공받는 미디어 프래그먼트 생성부;
    상기 미디어 프래그먼트 유닛을 사용하여 미디어 프로세싱 유닛(Media Processing Unit; MPU)을 생성하는 미디어 프로세싱 유닛 생성부;
    상기 생성된 미디어 프로세싱 유닛을 캡슐화하여 MMT 애셋(MMT Asset)을 생성하는 MMT 애셋 생성부;
    상기 생성된 MMT 애셋을 캡슐화하여 MMT 패키지(MMT Package)를 생성하는 MMT 패키지 생성부; 및
    상기 생성된 MMT 패키지를 받아 MMT 페이로드(MMT Payload)를 생성하는 MMT 페이로드 생성부를 더 포함하고,
    상기 MMT 전송 패킷 생성부는 상기 MMT 페이로드 및 상기 타임 스탬프를 사용하여 MMT 전송 패킷을 생성하는 것을 특징으로 하는 미디어 데이터 전송 장치.
  7. 제 5 항에 있어서, 상기 MMT 전송 패킷 생성부는,
    상기 타임 스탬프를 MMT 전송 패킷의 헤더 부분에 저장하는 것을 특징으로 하는 미디어 데이터 전송 장치.
  8. 제 5 항에 있어, 상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 전송될 시간을 나타내는 것을 특징으로 하는 미디어 데이터 전송 장치.
  9. 제 8 항에 있어, 상기 미디어 데이터 전송 장치는 상기 MMT 전송 패킷을 전송하는 전송부를 더 포함하는 것을 특징으로 하는 미디어 데이터 전송 장치.
  10. 부호화된 미디어 데이터(Coded Media Data)를 수신하기 위한 장치에서 네트워크 지터(Jitter)를 추정하는 방법에 있어서,
    미디어 데이터 전송 장치로부터 수신한, 타임 스탬프를 포함하는 MMT 전송 패킷(MMT transport packet)의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 이용하여 네트워크 지터를 계산하는 단계를 포함하고,
    상기 시각 간격의 차이는, 제 1 MMT 전송 패킷의 수신 시각과 제 2 MMT 전송 패킷의 수신 시각의 차이에 제 1 MMT 전송 패킷의 전송 시각 및 제 2 MMT 전송 패킷의 전송 시각의 차이를 감하여 계산되는 것을 특징으로 하는 네트워크 지터 추정 방법.
  11. 제 10 항에 있어서, 상기 네트워크 지터 추정 방법은,
    미디어 데이터 수신 장치가 상기 MMT 전송 패킷(MMT transport packet)을 수신하는 단계; 및
    상기 미디어 데이터 수신 장치가 상기 MMT 전송 패킷을 수신한 시각을 얻는 단계를 더 포함하고,
    상기 미디어 데이터가 수신된 시각은 상기 MMT 전송 패킷이 수신된 시각인 것을 특징으로 하는 네트워크 지터 추정 방법.
  12. 제 10 항에 있어, 상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에서 전송된 시각을 나타내는 것을 특징으로 하는 네트워크 지터 추정 방법.
  13. 제 10 항에 있어, 상기 네트워크 지터를 계산하는 단계는,
    수신된 적어도 하나의 MMT 전송 패킷(MMT transport packet)의 전송 시점 및 수신 시점 간의 시각 차이를 이용하여 지터값을 반복적으로 계산하여 업데이트하는 것을 특징으로 하는 네트워크 지터 추정 방법.
  14. 부호화된 미디어 데이터(Coded Media Data)를 수신하기 위한 장치에서 네트워크 지터(Jitter)를 추정하는 방법에 있어서,
    미디어 데이터 전송 장치로부터 수신한 MMT 전송 패킷(MMT transport packet)의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 이용하여 네트워크 지터를 계산하는 단계를 포함하고,
    상기 네트워크 지터를 계산하는 단계는
    Figure 112018118512821-pat00020
    을 이용하여 - 여기서
    Figure 112018118512821-pat00021
    는 MMT 전송 패킷(MMT transport packet) i 및 j의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 나타내고, JMMT(i)는 i번째 전송 패킷의 네트워크 지터를 나타낸다.- 상기 네트워크 지터를 계산하는 것을 특징으로 하는 네트워크 지터 추정 방법.
  15. 삭제
  16. 부호화된 미디어 데이터(Coded Media Data)를 수신하기 위한 장치에서 네트워크 지터를 추정하는 장치에 있어서,
    미디어 데이터 전송 장치로부터 수신한, 타임 스탬프를 포함하는 MMT 전송 패킷(MMT transport packet)의 전송 시점 및 수신 시점 간의 시각 간격의 차이를 이용하여 네트워크 지터를 계산하는 네트워크 지터 추정부를 포함하고,
    상기 시각 간격의 차이는, 제 1 MMT 전송 패킷의 수신 시각과 제 2 MMT 전송 패킷의 수신 시각의 차이에 제 1 MMT 전송 패킷의 전송 시각 및 제 2 MMT 전송 패킷의 전송 시각의 차이를 감하여 계산되는 것을 특징으로 하는 네트워크 지터 추정 장치.
  17. 제 16 항에 있어서, 상기 네트워크 지터 추정 장치는,
    상기 MMT 전송 패킷(MMT transport packet)을 수신하고 상기 MMT 전송 패킷을 수신한 시각을 얻는 수신부를 더 포함하는 것을 특징으로 하는 네트워크 지터 추정 장치.
  18. 제 16 항에 있어, 상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에서 전송된 시각을 나타내는 것을 특징으로 하는 네트워크 지터 추정 장치.
  19. 제 16 항에 있어, 상기 네트워크 지터 추정부는,
    상기 MMT 전송 패킷의 전송 시점 및 수신 시점 간의 시각 차이를 이용하여 지터값을 반복적으로 계산하여 업데이트하는 것을 특징으로 하는 네트워크 지터 추정 장치.
  20. 삭제
  21. 삭제
  22. 부호화된 미디어 데이터(Coded Media Data)의 전송에 사용되는 MMT 전송 패킷 구조에 있어서,
    부호화된 미디어 데이터(Coded Media Data) 전송 장치의 MMT 전송 패킷 생성부에서 MMT 전송 패킷(MMT transport packet)이 전송되는 시점의 시간정보를 나타내도록 생성한 타임 스탬프(time stamp)를 포함하는 것을 특징으로 하는 미디어 데이터 전송 장치의 MMT 전송 패킷 구조.
  23. 제 22 항에 있어, 상기 타임 스탬프는 상기 MMT 전송 패킷의 첫 번째 비트가 상기 미디어 데이터 전송 장치에 의해 전송된 시각을 나타내는 것을 특징으로 하는 미디어 데이터 전송 장치의 MMT 전송 패킷 구조.

KR1020130009251A 2012-01-26 2013-01-28 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법 KR102026266B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2013/000681 WO2013112027A1 (ko) 2012-01-26 2013-01-28 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법
US14/374,292 US20140369222A1 (en) 2012-01-26 2013-01-28 Method for estimating network jitter in apparatus for transmitting coded media data

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120007988 2012-01-26
KR20120007988 2012-01-26

Publications (2)

Publication Number Publication Date
KR20130086991A KR20130086991A (ko) 2013-08-05
KR102026266B1 true KR102026266B1 (ko) 2019-09-27

Family

ID=49213975

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130009251A KR102026266B1 (ko) 2012-01-26 2013-01-28 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법

Country Status (3)

Country Link
US (1) US20140369222A1 (ko)
KR (1) KR102026266B1 (ko)
WO (1) WO2013112027A1 (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108347491A (zh) * 2012-01-31 2018-07-31 夏普株式会社 生成装置以及生成方法
US20150032845A1 (en) * 2013-07-26 2015-01-29 Samsung Electronics Co., Ltd. Packet transmission protocol supporting downloading and streaming
KR20150047082A (ko) * 2013-10-23 2015-05-04 한국전자통신연구원 Ｍｍｔ 페이로드 헤더 구성 장치 및 방법
WO2015060586A1 (ko) * 2013-10-23 2015-04-30 한국전자통신연구원 Ｍｍｔ 페이로드 헤더 구성 장치 및 방법
US9930086B2 (en) * 2013-10-28 2018-03-27 Samsung Electronics Co., Ltd. Content presentation for MPEG media transport
CN103594103B (zh) * 2013-11-15 2017-04-05 腾讯科技(成都)有限公司 音频处理方法及相关装置
US10779035B2 (en) * 2014-01-09 2020-09-15 Samsung Electronics Co., Ltd. Method and apparatus of transmitting media data related information in multimedia transmission system
US10530828B2 (en) * 2014-03-31 2020-01-07 Samsung Electronics Co., Ltd. Method and apparatus for signaling and operation of low delay consumption of media data in MMT
KR102127641B1 (ko) * 2014-06-20 2020-06-30 삼성전자주식회사 응용 계층 순방향 오류 정정 방식을 사용하여 제공되는 방송 서비스의 수신을 제어하는 방법 및 장치
CN109151852A (zh) * 2017-06-16 2019-01-04 捷开通讯(深圳)有限公司 一种通信方法、通信设备及具有存储功能的设备

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110187926A1 (en) 2010-02-04 2011-08-04 Samsung Electronics Co., Ltd. Apparatus and method for correcting jitter

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5568403A (en) * 1994-08-19 1996-10-22 Thomson Consumer Electronics, Inc. Audio/video/data component system bus
US6801499B1 (en) * 1999-08-10 2004-10-05 Texas Instruments Incorporated Diversity schemes for packet communications
US6985501B2 (en) * 2000-04-07 2006-01-10 Ntt Docomo, Inc. Device and method for reducing delay jitter in data transmission
JP2002077233A (ja) * 2000-08-25 2002-03-15 Matsushita Electric Ind Co Ltd リアルタイム情報受信装置
JP2004531963A (ja) * 2001-05-14 2004-10-14 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ ジッタのない復号化を伴うａｔｍ網を通じたｍｐｅｇデータパケット伝送
JP3900413B2 (ja) * 2002-02-14 2007-04-04 Ｋｄｄｉ株式会社 映像情報伝送方式およびプログラム
CN1669320B (zh) * 2002-07-16 2011-03-23 松下电器产业株式会社 内容接收器
JP2005534219A (ja) * 2002-07-19 2005-11-10 コーニンクレッカ　フィリップス　エレクトロニクス　エヌ　ヴィ ウォールクロックを持つシステムに対するジッタ補正方法
KR100579132B1 (ko) * 2003-12-27 2006-05-12 한국전자통신연구원 타이밍정보 지터 방지를 위한 멀티미디어데이터전송스트림의 계층적 전송 장치 및 그 방법과, 계층적으로전송된 멀티미디어데이터 전송스트림의 복원 장치 및 그방법
WO2005076634A1 (en) * 2004-01-07 2005-08-18 Koninklijke Philips Electronics N.V. Jitter introduction in a data transmission system
JP4694969B2 (ja) * 2004-01-07 2011-06-08 パナソニック株式会社 データ受信装置
US20060007943A1 (en) * 2004-07-07 2006-01-12 Fellman Ronald D Method and system for providing site independent real-time multimedia transport over packet-switched networks
US7733919B2 (en) * 2004-07-12 2010-06-08 General Instrument Corporation Method and apparatus for processing transport stream packets to compensate for jitter
US7551647B2 (en) * 2004-07-19 2009-06-23 Qvidium Technologies, Inc. System and method for clock synchronization over packet-switched networks
JP4886689B2 (ja) * 2005-07-15 2012-02-29 パナソニック株式会社 パケット送信装置
US20080019398A1 (en) * 2006-07-20 2008-01-24 Adimos Systems Ltd. Clock recovery in wireless media streaming
KR100833510B1 (ko) * 2006-08-03 2008-05-29 한국전자통신연구원 Ｍｐｌｓ 네트워크 상에서 ｏａｍ 성능 감시 패킷을 이용한ｌｓｐ의 성능 파라미터 측정 방법과 그 장치
JP4434242B2 (ja) * 2007-07-11 2010-03-17 ソニー株式会社 送信装置、受信装置、誤り訂正システム、送信方法及び誤り訂正方法
US20100322084A1 (en) * 2008-02-07 2010-12-23 Telefonaktiebolaget Lm Ericsson (Publ) Method and Device for Transport Delay Analysis
CN101729303B (zh) * 2008-10-25 2012-12-12 华为技术有限公司 测量网络性能参数的方法和装置

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110187926A1 (en) 2010-02-04 2011-08-04 Samsung Electronics Co., Ltd. Apparatus and method for correcting jitter

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
유정주 외 5인. MPEG 미디어 전송 시스템을 위한 E-layer 타이밍 모델. 제13회 전자 정보통신 학술대회 CEIC 2011. 2011.12, pp.29-33*

Also Published As

Publication number Publication date
US20140369222A1 (en) 2014-12-18
WO2013112027A1 (ko) 2013-08-01
KR20130086991A (ko) 2013-08-05

Similar Documents

Publication Publication Date Title
KR102026266B1 (ko) 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법
KR102202143B1 (ko) 유연한 ｍｍｔ 애셋 송수신 방법 및 그 장치
US10728591B2 (en) Method of configuring and transmitting an MMT transport packet
US9414123B2 (en) Method for hybrid delivery of MMT package and content and method for receiving content
US9043849B2 (en) Method for linking MMT media and DASH media
US20150181003A1 (en) Method and apparatus for transmitting and receiving packets in hybrid transmission service of mmt
US9544641B2 (en) Hybrid transmission method through MMT packet format extension
KR20130108198A (ko) Ｍｍｔ 패키지화된 ｓｖｃ 비디오 콘텐츠의 하이브리드 전송 방법 및 수신 방법
US20140282799A1 (en) Method for transmitting media data via a heterogeneous ip network independently of a media codec
KR102170717B1 (ko) 멀티미디어 서비스를 위한 비트 에러율을 이용한 레이트 어댑테이션 방법 및 그 장치
KR102049039B1 (ko) Mmt 전송 패킷의 설정 방법 및 전송 방법
KR20130090824A (ko) 이종망 네트워크에서 부호화된 미디어 데이터를 전송하는 시스템에 랜덤 액세스를 지원하는 엠엠티 애셋의 구조, 생성 방법 및 생성 장치
KR20130085987A (ko) 이종망 네트워크에서 미디어 프래그먼트 유닛으로 나누어진 액세스 유닛을 가지는 미디어 데이터를 전송하는 방법
US20140351874A1 (en) Method and apparatus for transmitting media data for mmt system, and apparatus and method for receiving media data
US20150249835A1 (en) Method for adaptively transmitting fec parity data using cross-layer optimization
KR20130119885A (ko) 네트워크 적응적인 계층적 비디오 전송을 위한 mmt 패킷의 전송 방법 및 장치
KR20130040151A (ko) 콤포지션 정보 및 전송 특성 정보가 연동된 미디어 데이터를 이종 ip 네트워크를 통하여 전송하는 방법
KR20130040144A (ko) 엠엠티 시스템에서의 패킷 전송 장치 및 방법, 및 패킷 수신 장치 및 방법
KR20130058540A (ko) 하이브리드 전송시 동기화 방법

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant