KR20120138603A - 복합 멀티미디어 데이터를 송수신하는 장치 - Google Patents

복합 멀티미디어 데이터를 송수신하는 장치 Download PDF

Info

Publication number
KR20120138603A
KR20120138603A KR1020110104419A KR20110104419A KR20120138603A KR 20120138603 A KR20120138603 A KR 20120138603A KR 1020110104419 A KR1020110104419 A KR 1020110104419A KR 20110104419 A KR20110104419 A KR 20110104419A KR 20120138603 A KR20120138603 A KR 20120138603A
Authority
KR
South Korea
Prior art keywords
mfu
header
field
multimedia
type
Prior art date
Application number
KR1020110104419A
Other languages
English (en)
Inventor
황승오
박경모
유성열
송재연
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020110125454A priority Critical patent/KR101885858B1/ko
Publication of KR20120138603A publication Critical patent/KR20120138603A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/46—Receiver circuitry for the reception of television signals according to analogue transmission standards for receiving on more than one standard at will
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/38—Transmitter circuitry for the transmission of television signals according to analogue transmission standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명이 제공하는 복합 멀티미디어 데이터를 송신하는 방법은, 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나를 선택하는 과정과, 상기 선택된 헤더 포맷에 따라 MFU를 생성하는 과정과, 상기 생성된 MFU를 송신하는 과정을 포함한다.

Description

복합 멀티미디어 데이터를 송수신하는 장치{METHOD AND APPARATUS FOR TRANSIMITTING AND RECEIVING HYBRID MULTIMEDIA DATA}
본 발명은 멀티미디어 시스템에서 다양한 종류의 멀티미디어를 포함하는 복합 멀티미디어 데이터를 송수신하기 위한 방법 및 장치에 대한 것으로서, 특히 상기 복합 멀티미디어 데이터를 구성하고 있는 다양한 멀티미디어들의 특성을 고려하여 전송될 수 있도록 하는 방법 및 장치에 대한 것이다.
멀티미디어 컨텐츠의 증가 및 기술의 발달로 인해 종래 1개 혹은 2개의 멀티미디어 소스들만이 소비되던 시기에서 다양한 종류의 멀티미디어 컨텐츠들을 포함하는 복합 컨텐츠들이 등장하게 되었다.
상기 복합 컨텐츠들은 다양한 종류의 멀티미디어 컨텐츠들을 포함하고 있다. 상기 복합 컨텐츠의 전송 시에는 개개의 멀티미디어 컨텐츠들로 분리되어, 상기 멀티미디어 컨텐츠들이 각각 전송되게 된다.
예를 들면, 영상, 음성 및 위젯(Widget) 등의 어플리케이션(application)으로 구성된 복합 컨텐츠들은 영상 신호 전송 방법, 음성 신호 전송 방법 과 파일 전송방법 등을 통하여 각각 전송되게 되며, 각각 전송된 컨텐츠들은 수신단에서 재구성되어 복합 컨텐츠가 된다.
복합 미디어 컨텐츠의 수가 증가하는 요즘에 있어서 멀티미디어 컨텐츠의 특성에 따른 컨텐츠의 구성 방법은 복합 컨텐츠의 구성 및 분해라는 동작을 요구하게 된다.
본 발명은 멀티미디어 시스템에서 다양한 종류의 멀티미디어 소스를 가지는 복합 컨텐츠를 구성할 수 있는 장치 및 방법을 제공한다.
또한 본 발명은 복합 컨텐츠의 구성 방법에 있어서 다양한 종류의 멀티미디어 소스들을 구별할 수 있는 방법을 제공한다.
또한 본 발명은 복합 컨텐츠의 구성 요소인 멀티미디어 저장과 전송에 있어서, 시작, 계속, 종료 시점을 알 수 있는 방법을 제공한다.
또한 본 발명은 상기 멀티미디어 소스들을 구별할 수 있는 방법에 있어서 복합 컨텐츠를 구성하고 있는 멀티미디어들의 종류와 구성에 따라 효율적으로 구별할 수 있는 방법을 제공한다.
본 발명이 제공하는 복합 멀티미디어 데이터를 송신하는 방법은, 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나를 선택하는 과정과, 상기 선택된 헤더 포맷에 따라 MFU를 생성하는 과정과, 상기 생성된 MFU를 송신하는 과정을 포함한다.
본 발명이 제공하는 복합 멀티미디어 데이터를 송신하는 장치는, 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나를 선택하고, 상기 선택된 헤더 포맷에 따라 MFU를 생성하는 제어부와, 상기 생성된 MFU를 송신하는 과정을 전송부를 포함한다.
본 발명이 제공하는 복합 멀티미디어 데이터를 수신하는 방법은, 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나에 의하여 생성된 MFU를 수신하는 과정과, 상기 수신한 MFU의 헤더를 확인하는 과정과, 상기 확인된 MFU의 헤더에 따라 상기 MFU에 포함된 멀티미디어 데이터를 수신하는 과정을 포함한다.
본 발명이 제공하는 복합 멀티미디어 데이터를 수신하는 장치는, 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나에 의하여 생성된 MFU를 수신하는 수신부와, 상기 수신한 MFU의 헤더를 확인하는 헤더 검출부와, 상기 확인된 MFU의 헤더에 따라 상기 MFU에 포함된 멀티미디어 데이터를 수신하는 제어부를 포함한다.
도 1은 MPEG MMT에서 복합 컨텐츠를 가공하는 E 계층을 설명하는 도면,
도 2는 본 발명의 제1실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면,
도 3은 본 발명의 제2실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면,
도 4는 본 발명의 제1실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면,
도 5는 본 발명에 따른 MFU를 구성하는 동작의 일 예를 설명하는 도면,
도 6은 본 발명에 실시 예에 따라 수신측에서 MFU를 수신하는 동작을 설명하는 도면,
도 7은 본 발명의 실시 예에 따라 MFU를 생성하기 위한 장치를 설명하는 도면,
도 8은 본 발명의 실시 예에 따라 MFU를 수신하기 위한 장치를 설명하는 도면.
이하에서 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성 요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명 생략한다.
이하에서 설명되는 본 발명의 실시 예는 본 발명이 적용될 수 있는 기술들 중 하나인 MPEG MMT (MPEG Media Transport: 이하 MMT) 기술을 예로 들어 설명될 것이나, 이는 설명의 편의를 위한 예일 뿐이며, 본 발명이 MMT에만 적용되는 것은 아니다.
본 발명의 설명에 앞서 본 발명의 기본 개념을 간략히 설명한다.
본 발명은 복합 멀티미디어 데이터를 구성하는 멀티미디어의 특성에 따라 본 발명에서 제안하는 MFU 헤더들 중 하나를 선택하고, 선택된 MFU 헤더를 포함하는 MFU를 생성하고 송신한다. 특히, 본 발명에서는 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 헤더를 선택한다.
본 발명이 제1실시 예에서 제안되는 헤더 구조는 멀티미디어들의 개수가 상대적으로 적은 경우에 사용되고, 제2실시 예 또는 제3실시 예에서 제안되는 헤더 구조는 멀티미디어들의 개수가 상대적으로 많은 경우에 사용된다. 한편, 제3실시예의 헤더 구조는 멀티미디어들 간에 유사한 것들이 많은 경우에 사용된다.
이하에서 본 발명의 실시 예들을 첨부된 도면을 참조하여 상세히 설명한다.
도 1은 MPEG MMT에서 복합 컨텐츠를 가공하는 E 계층을 설명하는 도면이다.
E 계층은 3개의 부 계층으로 이루어진다. 참조 번호 100과 101은 각각 멀티미디어 코덱(A)와 멀티미디어 코덱(B)를 나타낸다. 코덱(Codec) 100과 코덱 101은 그 기능에 있어서 차이가 있다.
예를 들어, H.264 코덱은 디지털 압축된 영상 멀티미디어에 상기 멀티미디어의 특성 정보, 복호화에 필요한 시그널링 등을 제공하는 NAL unit (Network Adaptation Layer)이 코덱의 출력이다. 한편, H.262 코덱은 디지털 압축 영상 멀티미디어만 해당 코덱의 출력이 된다. 도 1에서 코덱 101은 H.264 코덱 같은 코덱이 될 수 있으며, 코덱 100은 H.262 코덱같은 예가 될 수 있다. 다만, 경우에 따라서는 H.264 코덱도 코덱 100 이 될 수 있다. 이 경우 H.264 코덱의 출력에 E.3 부 계층에서 생성된 정보가 더 포함될 수 있다.
한편 E3 부 계층(102)는 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MMT 프래그먼트 유닛(Fragment Unit)을 생성한다. 상기 MMT 프래그먼트 유닛은 앞서 설명된 NAL 유닛(Unit)의 기능과 유사하다. 다만 NAL 유닛과 비교할 때, 영상 신호 외에 음성, 텍스트(text), 어플리케이션(application), 웹(Web) 페이지 등의 모든 종류의 멀티미디어 소스를 페이로드로 가질 수 있는 점에서 차이가 있다. 상기 E3 부 계층(102)의 기능은 도 2, 도 3, 도 4의 설명에서 후술하기로 한다.
E2 부 계층(103)은 하나의 소스로부터 온 다양한 종류의 MMT 프래그먼트 유닛(MMT Fragment Unit: MFU)들을 취합하여 MMT 미디어 유닛 (M-unit)으로 구성하고, 이를 MMT 에셋(Asset)을 생성하며, E1. 부 계층(104)은 여러 개의 MMT 에셋(Asset)을 사용하여 사용자에게 서비스할 수 있는 MMT 패키지(package)를 구성한다.
도 2는 본 발명의 제1실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면이다.
도 2에서는 생략되어 있지만 상기 도 2의 헤더(Header)의 뒤에는 페이로드(Payload)가 있어서 멀티미디어 데이터를 전송할 수 있다.
도 2는 MFU 헤더의 길이가 1바이트로 가정하여 도시된 것이지만, 필요에 의해 MFU 헤더의 길이는 1바이트보다 커질 수 있으며, 도 2의 MFU 헤더에 포함된 각 필드의 길이도 변경될 수 있다.
도 2에 도시된 헤더는 시작 플래그(Start Flag) 필드(201), MFU 타입(Type) 필드(202)와 시작/계속/종료(Start/Conti/End) 필드(203)를 포함한다.
시작 플래그(Start Flag) 필드(201)는 MFU가 시작됨을 알려주는 필드로서, 도 2에서 3비트 길이를 가진다고 가정하였다. 즉, 수신측은 시작 플래그(Start Flag) 필드(201)에 사전에 약속된 특정 형식의 시작 플래그(start flag)가 포함되어 있는지 여부를 검사하고, 상기 특정 형식의 시작 플래그가 검출되면 수신측은 해당 필드로부터 MFU가 시작됨을 알 수 있다. 또한 상기 플래그 정보를 통하여 해당 MFU가 여러 조각의 MFU로 구성이 되었는지 여부와 분할 되지 않았음을 나타내는 정보로 사용 될 수 있다.
MFU 타입 필드(202)는 상기 MFU의 헤더에 첨부되어 전송되는 컨텐츠의 종류, 즉, 컨텐츠 타입에 대한 정보를 포함한다. 도 2에서는 MFU 타입 필드(202)의 길이를 3비트로 가정하였으며, 이 경우 MFU 타입 필드(202)는 8종류의 미디어 타입을 지시할 수 있다. 다만 복합 콘텐츠를 구성하는 미디어의 종류가 많지 않을 경우, 예를 들어 소정 임계 값 미만일 경우에는 짧은 길이의 MFU 타입 필드를 사용해도 충분하다.
3비트의 MFU 타입 필드를 이용하여 상기 8가지 미디어 타입을 나타내는 일 예를 설명하면 아래와 같다.
000: H.264 Video,
001: AAC- Audio,
002: Text,
003: Application,
004: web pages,
005: signaling for codec,
006: signaling for composition,
007: reserved for future use
한편, 복합 컨텐츠 제공자가 정해진 범위 내에서 임의의 값을 사용하여 적절한 콘텐츠의 종류를 지시할 수 있다.
또 다른 예로는,
000: H.264 I frame,
001: H.264 B frame,
002: H.264 P frame
등과 같이 특정 멀티미디어의 다양한 소스에 대해서 우선권을 부여하는 방법으로 사용될 수 있으며, 상기 우선권을 바탕으로 전송 시에 QoS를 고려해 줄 수 있다. 본 발명에서 중요도를 표시하는 방법에는 미디어 타입 별 중요도를 제공하는 방법과 별도의 중요도 표현 헤더 필드를 구성하여 해당 기능을 제공할 수 도 있다.
시작/계속/종료(Start/Conti/End) 필드(203)는 해당 MFU가 특정 멀티미디어 데이터의 첫 번째 MFU인지(Start), 마지막 MFU 인지(End), 또는 해당 MFU 이후에 상기 특정 멀티미디어 데이터를 전송하는 MFU가 계속되는지(Conti) 여부를 알려준다. 상기 시작/계속/종료(Start/Conti/End) 필드는 헤더의 마지막에 위치하기 때문에 "마지막 플래그(last flag)"로 칭해질 수 있다. 이하에서 양자는 혼용될 수 있으나 동일한 필드를 지시하는 것이다. 도 2에서는 2비트 길이를 사용했을 경우의 시작/계속/종료(Start/Conti/End) 필드(203)의 값은 하기와 같은 예로 구성될 수 있다.
00: 첫 번째 MFU,
01: 계속되는 MFU,
10: 마지막 MFU,
11: Non-Fragmented MFU.
상기한 바와 같이, 본 발명에서는 E3 부 계층(102)에서 상기 203 시작/계속/종료(Start/Conti/End) 필드(203)를 이용하여 크기가 큰 멀티미디어들에 대한 프래그먼테이션(fragmentation)을 지원한다.
도 3은 본 발명의 제2실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면이다.
도 3에서 시작 플래그(start flag) 필드(300)과 시작/계속/종료(Start/Conti/End) 필드(302)의 기능은 도 2의 시작 플래그(Start Flag) 필드(201)와 시작/계속/종료(Start/Conti/End) 필드(203)의 기능과 각각 동일하므로 이에 대한 설명은 생략한다.
또한 MFU 간의 종속적인 관계 정보 값을 통하여 상호 MFU 간의 종속적인 관계 정보를 제공하는 것이다. 예를 들어 이 카운트 값이 "4"이면, 해당 미디어 프래그먼트 유닛 데이터는 이후 4 개의 미디어 프래그먼트 유닛들과의 종속 관계도가 높은 MFU 데이터임을 의미한다. 이를 통해 해당 미디어 프래그먼트 유닛 데이터의 오류가 있을 경우 그 오류가 전파되는 정도를 나타낼 수 있다.
제2실시 예의 헤더와 상기 도 2의 제 1 실시예의 헤더와의 큰 차이점은 제2실시 예의 MFU 타입 필드(301)의 길이가 제1실시 예의 MFU 타입 필드(202)의 길이보다 매우 길다는 것이다. 도 3에서는 MFU 타입 필드(301)의 길이를 11비트로 설정하였다.
제2실시 예의 MFU 타입 필드(301)를 사용하여 멀티미디어 타입을 지시하는 방법은 여러 가지가 될 수 있다.
첫째 멀티미디어 소스를 정확히 지시하여 알려주는 방법이다.
근래에는 오디오 코덱, 비디오 코덱, 또는 각종 어플리케이션들이 다양하게 프로파일(profiling)되어 사용되기 때문에 대표 멀티미디어 소스(source) 명칭만을 이용하여서는 멀티미디어 소스를 정확하게 복호할 수 없는 경우가 발생한다. 일 예로, H.264 코덱에는 10여 종류의 프로파일(profiling)이 존재하여, 단순히 H.264로 MFU 종류를 지시하면, 복호 과정에서 오류가 발생할 수도 있다. 또한, MFU 패키지를 구성하는데 다수의 멀티미디어가 사용된다면 긴 길이의 MFU 타입 필드가 필요하게 된다.
두 번째로, 11비트 길이의 MFU를 8비트와 3비트의 두 부분으로 분할하고, 8 비트를 이용하여 일반적인(general) 미디어 이름을 지시하게 하고, 3 비트를 이용하여 우선 순위(Priority)를 지시하게 할 수 있다. 예를 들어, "00000000"은 H.264를 지시하는 것으로 하고 H.264의 영상들 중 I 프레임은 001, B 프레임은 010, P 프레임은 100으로 지시할 수 있다. 상기 우선 순위를 바탕으로 상기 MFU들을 전송하는 전송단에서 최대한의 QoS를 보장하기 위한 전송 우선 순위를 고려할 수 있다.
도 4는 본 발명의 제1실시 예에 따라 E3 부 계층에서 다양한 종류의 멀티미디어 소스들을 입력으로 하여 MFU를 생성할 시에 사용하는 헤더 정보의 일 예를 설명하는 도면이다.
도 4의 제3실시 예는 상기 제1실시 예와 호환성을 가지면서도 상기 제2실시 예가 가지는 확장성과 다양성을 지원할 수 있는 방법이다.
시작 플래그(Start Flag) 필드(400)는 MFU의 시작점을 알려주는 필드이다.
MFU 타입(Type) 필드(401)는 MFU 컨텐츠의 타입을 지시한다. 도 4에서는 3 비트 길이를 가지는 것으로 가정하였다. 만일 컨텐츠 타입을 표현하기에 상기 3비트 길이가 부족할 경우에는 시작/계속/종료(Start/Conti/End) 필드(402)를 MFU 타입 확장(Type extension) 필드로 사용하여 MFU 타입을 표시하기 위한 필드의 길이를 확장한다. 상기 MFU 타입 확장 필드롤 사용하여 계층 미디어에 따른 부가적인 정보 혹은 미디어 코덱 장치에 따른 부가 정보를 추가적으로 제공할 수 있다. 예를 들어 계층 미디어와 관련된 기본 미디어의 식별자, 향상 미디어의 식별자, 다중 시점 미디어 코딩과 같은 정보를 지시한다. 이 미디어 프래그먼트 유닛들은 스케일러블 미디어 코딩(scalable media coding) 또는 다중 계층화된 미디어 코딩(multi-layered media coding)의 정보와 관련되며, 코덱 장치와 관련된 정보로는 해당 미디어 코덱을 이용하여 부호화 하는 과정에서 장치에 따라 변경되는 정보를 의미한다. 이는 해당 미디어 코덱의 프로파일과 레벨 정보가 변경되거나 코덱의 종류가 변경되는 경우를 고려하여 해당 정보의 리스트 혹은 확장 정보를 표시한다.
앞서 도 2의 설명에서 시작/계속/종료(Start/Conti/End) 필드(203)의 값이 11인 경우는 사용되지 않았다. 그러나 도 4에서 시작/계속/종료(Start/Conti/End) 필드(401) 값이 11일 경우 MFU 타입 확장 필드(403)가 존재함을 의미하는 것으로 설정한다. 즉, 하나의 MFU 패키지 내에 적은 개수, 즉, 소정 임계 값 미만의 멀티미디어 소스가 존재하는 경우에는 3비트 길이를 가지는 MFU 타입 필드(401)로 멀티미디어 소스의 종류를 알려주고, 상기 소정 임계 값 이상인 다수의 멀티미디어 소스가 존재하는 경우에는 8비트의 MFU 타입 확장 필드(403)를 포함하여 총 11비트의 필드를 이용하여 멀티미디어 소스의 종류를 알려줄 수 있다.
또한 MFU 타입(Type) 필드(401)는 코덱 혹은 멀티미디어 소스(source)의 일반적인 이름을 나타내고, 상기 MFU 타입 확장 필드(403)는 코덱의 정확한 버전(version) 또는 멀티미디어 소스(source)의 우선 순위들을 표시하는 방식이 사용될 수도 있다.
도 2, 3, 4의 설명에 있어서 각 실시 예들의 차이를 설명하기 위해서 특정 길이, 즉 1 바이트와 2 바이트의 헤더 길이를 예로 들어 설명했으나 그 외의 다른 길이를 가진 MFU 헤더들도 사용될 수 있으며, 그 길이와 상관없이 본 발명에서 제안한 필드들이 사용된다면 본 발명에서 제안하는 MFU의 구성방법을 사용하는 것이라고 할 것이다.
도 5는 본 발명에 따른 MFU를 구성하는 동작의 일 예를 설명하는 도면이다.
501 단계에서는 복합 컨텐츠를 구성할 다양한 멀티미디어들이 E3 부 계층으로 입력된다. 502 단계에서 멀티미디어들의 수가 소정 임계 값(X) 이상인지 여부를 판단한다. 이는 멀티미디어들의 개수가 많은지 또는 적은지 여부에 따라 상술한 제1 내지 제3실시 예에 따른 헤더들 중 하나를 선택하기 위함이다. 상기 임계 값(X)은 시스템 설정에 따라 변경될 수 있는 값이다.
상기 502단계에서는 멀티미디어들의 개수 이외에, 멀티미디어 컨텐츠들의 우선 순위를 부여할 필요가 있는지 여부, 하나의 코덱 혹은 멀티미디어 데이터에 다양한 종류의 서브-버전(sub-version)이 존재하는가 여부, 멀티미디어들의 다양한 종류 등도 헤더를 결정하기 위한 요소가 될 수 있다. 다만, 도 5에서는 설명의 편의상 멀티미디어들의 개수만을 이용하여 헤더를 결정하기 위한 요소로서 기술하였다.
상기 502단계에서 MFU 에셋 또는 MFU 패키지를 구성할 멀티미디어들의 개수가 상기 임계 값(X) 이상이 아니라면, 510 단계로 진행하여 도 2에서 설명된 본 발명의 제1실시 예에 따른 MFU 헤더를 선택하고 제1실시 예에 따른 MFU 헤더를 생성한다.
반면, 502 단계에서 멀티미디어들의 상기 임계 값(X) 이상이라면 503 단계로 진행한다.
503단계에서는 상기 멀티미디어들에서 서로 유사한 종류의 멀티미디어들의 개수가 소정 임계 값(Y) 이상인지를 판단한다. 상기 임계 값(Y)은 시스템 설정에 따라 변경될 수 있는 값이다. 한편, 상기 멀티미디어들이 서로 유사한지 여부를 판단하는 기준은 시스템 설정에 따라 달라질 수 있다.
예를 들어, H.264의 다양한 종류의 프로파일(profile)을 구별할 필요가 있는 없는지를 판별한다. 다양한 종류의 프로파일을 구별할 필요가 있으면 504 단계로 진행하여 도 4에서 설명된 본 발명의 제3실시 예에 따른 MFU 헤더를 생성한다. 반면, 일반적인 멀티미디어 타입에 다양한 종류를 구별할 필요가 없을 시에는 520 단계로 진행하여 도 3에서 설명된 본 발명의 제2실시 예 2에 따른 MFU 헤더를 생성한다.
505단계에서는 510 단계, 504 단계 혹은 520 단계에서 생성된 헤더와 실제의 멀티미디어 데이터를 이용해서 MFU를 생성한다.
도 6은 본 발명에 실시 예에 따라 수신측에서 MFU를 수신하는 동작을 설명하는 도면이다.
601 단계에서는 MFH 헤더의 시작 플래그(Start Flag)를 검출하여 MFU의 시작점을 파악한다. 이후 602단계에서 상기 시작 플래그(Start flag)의 바로 뒤에 위치하는 MFU 타입(type) 필드를 확인하여 전송되는 컨텐츠의 타입을 확인한다. 이는 컨텐츠 타입에 따라 적절한 수신 동작을 준비하기 위함이다. 603 단계에서는 MFU 헤더의 시작/계속/종료(Start/Conti/End) 필드(203), 즉, 마지막 플래그(last flag)의 값을 확인한다. 상기 마지막 플래그의 값이 “00”으로 설정되어 있다면 이는 해당 NFU가 특정 멀티미디어의 첫 번째 NFU 임을 의미하는 것이고, "01"으로 설정되어 있다면 해당 NFU가 특정 멀티미디어의 계속되는 MFU 임을 의미하고, "10"으로 설정되어 있다면 해당 NFU가 특정 멀티미디어의 마지막 NFU 임을 의미하고, "11"로서 설정되어 있다면 해당 MFU 헤더가 MFU 타입 확장(type extension) 필드를 가지고 있음을 의미한다.
만일 상기 마지막 플래그 값의 확인 결과, 604 단계에서 해당 MFU 헤더가 MFU 타입 확장 필드를 가지고 있다면 605로 단계로 진행하여 MFU 타입 필드(type field) 와 MFU 타입 확장(Type extension) 필드를 함께 사용하여 MFU의 형식을 파악한다. 606 단계에서는 상기 마지막 플래그(last flag)의 값에 따른 동작을 수행하게 된다.
상술한 본 발명의 설명에서는 마지막 플래그(last flag)가 2비트 길이를 가질 경우 마지막 플래그 값을 11로 설정하여 MFU 타입 확장(type extension) 필드가 존재함을 지시하는 것으로 하였다. 그런데 이 경우에는 특정 멀티미디어의 첫 번째 NFU 인지, 01로서 특정 멀티미디어를 계속된 MFU 인지, 10으로서 특정 멀티미디어의 마지막 NFU 인지를 지시하기 어렵다. 멀티미디어의 특성에 따라 NFU의 프레그멘테이션이 필요하지 않은 경우에는 2비트 길이의 마지막 플래그(last flag)를 사용하면 되지만, NFU의 프레그멘테이션이 필요한 경우에는 3비트 길이 또는 4비트 길이의 마지막 플래그(last flag)를 사용해서 해결할 수 있다. 예를 들어, 3 비트 길이의 마지막 플래그(last flag)를 사용할 경우 최하위 비트(Least significant bit: LSB)가 1이면 MFU 타입 확장(type extension) 필드가 존재하는 것이고, 최하위 비트가 0이면 MFU 타입 확장(type extension) 필드가 존재하지 않는 것으로 설정한다. 이렇게 하면 3비트 길이를 가지는 마지막 플래그를 이용하여 앞서 설명된 모든 NFU의 전송 또는 저장 예를 지원할 수 있다. 즉, 마지막 플래그(last flag)의 값이 101이면 MFU 타입 확장(type extension) 필드를 가지는 특정 멀티미디어의 첫 번째 MFU라는 의미가 될 수 있다.
도 7은 본 발명의 실시 예에 따라 MFU를 생성하기 위한 장치를 설명하는 도면이다.
MFU 생성 장치는 멀티미디어 소스 입력부(701), 멀티미디어 소스 식별부(702), 멀티미디어 소스 저장부(703), 전송부(704) 및 제어부(700)를 포함한다.
멀티미디어 소스 입력부(701)는 다양한 종류의 멀티미디어를 수신 또는 입력 받아 상기 입력된 멀티미디어가 어떤 종류인지, 즉, 음성 데이터인지, 영상 데이터인지, 파일 데이터인지, 실행 파일 데이터인지 등을 식별한다.
멀티미디어 소스 저장부(703)는 본 발명에서 제안된 MFU의 구성 방법에 따라 생성된 MFU들을 저장한다.
전송부(704)는 상기 생성되어 저장된 MFU들을 장치 외부로 제공한다.
제어부(700)는 상술된 본 발명의 제1 내지 제3실시 예에서 설명된 바에 따라 MFU를 구성하기 위한 모든 제어 역할을 수행하는 장치이다.
도 8은 본 발명의 실시 예에 따라 MFU를 수신하기 위한 장치를 설명하는 도면이다.
도 8의 수신 장치는, 제어부(801), 헤더 검출부(803), MFU 수신부(805)를 포함한다.
MFU 수신부(805)는 송신기로부터 복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나에 의하여 생성된 MFU를 수신한다.
헤더 검출부(803)는 상기 수신한 MFU의 헤더를 확인한다. 즉, 상기 헤더에 포함된 시작 플래그를 확인하여 상기 MFU의 시작 위치를 확인하고, 상기 헤더에 포함된 MFU 타입 필드를 확인하고, 상기 헤더에 포함된 마지막 플래그를 확인하여 상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는지를 지시하는지 여부를 확인한다. 만일 상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하면, 상기 MFU 타입 필드와 상기 MFU 타입 확장 필드를 결합하여 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인하고, 상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하지 않으면, 상기 MFU 타입 필드에 따라 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인한다.
제어부(801)는 상기 확인된 MFU의 헤더에 따라 상기 MFU에 포함된 멀티미디어 데이터를 수신한다.
지금까지 상술한 본 발명에 따르면, 다양한 종류의 멀티미디어들을 포함하는 복합 컨텐츠를 효율적으로 구성할 수 있다. 또한, 임의의 크기를 가지는 멀티미디어를 전송 또는 저장 시에 적절하게 프레그멘테이션할 수 있다. 또한, 본 발명에 따르면 MFU 헤더를 통하여 MFU의 위치 또는 전송 시점, MFU 타입, MFU의 종류를 효율적으로 알려줄 수 있어 복합 컨텐츠를 효율적으로 송수신할 수 있다.

Claims (22)

  1. 복합 멀티미디어 데이터를 송신하는 방법에 있어서,
    복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나를 선택하는 과정과,
    상기 선택된 헤더 포맷에 따라 MFU를 생성하는 과정과,
    상기 생성된 MFU를 송신하는 과정을 포함하는 복합 멀티미디어 데이터를 송신하는 방법.
  2. 제1항에 있어서, 헤더 포맷 중 하나를 선택하는 과정은,
    상기 멀티미디어들의 개수가 제1 임계 값 미만인지 여부를 판단하는 과정과,
    상기 멀티미디어들의 개수가 상기 제1 임계 값 미만인 경우 제1 MFU 헤더를 선택하는 과정을 포함하는 복합 멀티미디어 데이터를 송신하는 방법.
  3. 제2항에 있어서, 헤더 포맷 중 하나를 선택하는 과정은,
    상기 멀티미디어들의 개수가 상기 제1 임계 값 이상인 경우, 상기 멀티미디어들 중 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상인지 여부를 판단하는 과정과,
    상기 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상이 아니면, 제2 MFU 헤더를 선택하는 과정을 포함하는 복합 멀티미디어 데이터를 송신하는 방법.
  4. 제3항에 있어서, 헤더 포맷 중 하나를 선택하는 과정은,
    상기 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상이면, 제3 MFU 헤더를 선택하는 과정을 포함하는 복합 멀티미디어 데이터를 송신하는 방법.
  5. 제4항에 있어서, 상기 제1 MFU 헤더는,
    상기 MFU가 시작됨을 알리는 미리 약속된 형식의 시작 플래그 필드와,
    상기 MFU에 포함된 미디어 타입을 지시하는 MFU 타입 필드와,
    상기 MFU가 특정 멀티미디어 데이터의 첫 번째 MFU인지(Start), 마지막 MFU 인지(End), 또는 상기 MFU 이후에 MFU가 계속되는지(Conti) 여부를 알려주는 마지막 플래그(last flag) 필드를 포함하는 복합 멀티미디어 데이터를 송신하는 방법.
  6. 제5항에 있어서, 상기 제2 MFU 헤더는,
    상기 시작 플래그 필드와, 상기 MFU 타입 필드와, 상기 마지막 플래그 필드를 포함하며,
    상기 제2 MFU 헤더의 MFU 타입 필드의 길이는 상기 제1 MFU 헤더의 MFU 타입 필드의 길이보다 긴 것임을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 방법.
  7. 제5항에 있어서, 상기 제3 MFU 헤더는,
    상기 시작 플래그 필드와, 상기 MFU 타입 필드와, 상기 마지막 플래그 필드와, MFU 타입 확장 필드를 포함하며,
    상기 MFU 타입 확장 필드는, 상기 제3 MFU 헤더의 MFU 타입 필드와 결합하여 상기 MFU에 포함된 미디어 타입을 지시하며,
    상기 마지막 플래그 필드는, 상기 MFU 타입 확장 필드가 존재함을 지시할 수 있음을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 방법.
  8. 복합 멀티미디어 데이터를 송신하는 장치에 있어서,
    복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나를 선택하고, 상기 선택된 헤더 포맷에 따라 MFU를 생성하는 제어부와,
    상기 생성된 MFU를 송신하는 과정을 전송부를 포함하는 복합 멀티미디어 데이터를 송신하는 장치.
  9. 제8항에 있어서, 상기 제어부는,
    상기 멀티미디어들의 개수가 제1 임계 값 미만인지 여부를 판단하고, 상기 멀티미디어들의 개수가 상기 제1 임계 값 미만인 경우 제1 MFU 헤더를 선택함을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 장치.
  10. 제9항에 있어서, 상기 제어부는,
    상기 멀티미디어들의 개수가 상기 제1 임계 값 이상인 경우, 상기 멀티미디어들 중 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상인지 여부를 판단하고, 상기 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상이 아니면, 제2 MFU 헤더를 선택함을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 장치.
  11. 제10항에 있어서, 상기 제어부는,
    상기 소정 기준에 따른 유사한 멀티미디어들의 개수가 제2 임계 값 이상이면, 제3 MFU 헤더를 선택함을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 장치.
  12. 제11항에 있어서, 상기 제1 MFU 헤더는,
    상기 MFU가 시작됨을 알리는 미리 약속된 형식의 시작 플래그 필드와,
    상기 MFU에 포함된 미디어 타입을 지시하는 MFU 타입 필드와,
    상기 MFU가 특정 멀티미디어 데이터의 첫 번째 MFU인지(Start), 마지막 MFU 인지(End), 또는 상기 MFU 이후에 MFU가 계속되는지(Conti) 여부를 알려주는 마지막 플래그(last flag) 필드를 포함하는 복합 멀티미디어 데이터를 송신하는 장치.
  13. 제11항에 있어서, 상기 제2 MFU 헤더는,
    상기 시작 플래그 필드와, 상기 MFU 타입 필드와, 상기 마지막 플래그 필드를 포함하며,
    상기 제2 MFU 헤더의 MFU 타입 필드의 길이는 상기 제1 MFU 헤더의 MFU 타입 필드의 길이보다 긴 것임을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 장치.
  14. 제12항에 있어서, 상기 제3 MFU 헤더는,
    상기 시작 플래그 필드와, 상기 MFU 타입 필드와, 상기 마지막 플래그 필드와, MFU 타입 확장 필드를 포함하며,
    상기 MFU 타입 확장 필드는, 상기 제3 MFU 헤더의 MFU 타입 필드와 결합하여 상기 MFU에 포함된 미디어 타입을 지시하며,
    상기 마지막 플래그 필드는, 상기 MFU 타입 확장 필드가 존재함을 지시할 수 있음을 특징으로 하는 복합 멀티미디어 데이터를 송신하는 장치.
  15. 복합 멀티미디어 데이터를 수신하는 방법에 있어서,
    복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나에 의하여 생성된 MFU를 수신하는 과정과,
    상기 수신한 MFU의 헤더를 확인하는 과정과,
    상기 확인된 MFU의 헤더에 따라 상기 MFU에 포함된 멀티미디어 데이터를 수신하는 과정을 포함하는 복합 멀티미디어 데이터를 수신하는 방법.
  16. 제15항에 있어서, 상기 MFU의 헤더를 확인하는 과정은,
    상기 헤더에 포함된 시작 플래그를 확인하여 상기 MFU의 시작 위치를 확인하는 과정과,
    상기 헤더에 포함된 MFU 타입 필드를 확인하는 과정과,
    상기 헤더에 포함된 마지막 플래그를 확인하여, 상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는지를 지시하는지 여부를 확인하는 과정을 포함하는 복합 멀티미디어 데이터를 수신하는 방법.
  17. 제16항에 있어서, 상기 MFU의 헤더를 확인하는 과정은,
    상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하면, 상기 MFU 타입 필드와 상기 MFU 타입 확장 필드를 결합하여 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인하는 과정을 포함하는 복합 멀티미디어 데이터를 수신하는 방법.
  18. 제16항에 있어서, 상기 MFU의 헤더를 확인하는 과정은,
    상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하지 않으면, 상기 MFU 타입 필드에 따라 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인하는 과정을 포함하는 복합 멀티미디어 데이터를 수신하는 방법.
  19. 복합 멀티미디어 데이터를 수신하는 장치에 있어서,
    복합 멀티미디어 데이터를 구성하는 멀티미디어들의 개수에 따라 미리 결정된 MFU(MMT Fragment Unit)헤더 포맷 중 하나에 의하여 생성된 MFU를 수신하는 MFU 수신부와,
    상기 수신한 MFU의 헤더를 확인하는 헤더 검출부와,
    상기 확인된 MFU의 헤더에 따라 상기 MFU에 포함된 멀티미디어 데이터를 수신하는 제어부를 포함하는 복합 멀티미디어 데이터를 수신하는 장치.
  20. 제19항에 있어서, 상기 헤더 검출부는,
    상기 헤더에 포함된 시작 플래그를 확인하여 상기 MFU의 시작 위치를 확인하고, 상기 헤더에 포함된 MFU 타입 필드를 확인하고, 상기 헤더에 포함된 마지막 플래그를 확인하여 상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는지를 지시하는지 여부를 확인함을 특징으로 하는 복합 멀티미디어 데이터를 수신하는 장치.
  21. 제20항에 있어서, 상기 헤더 검출부는,
    상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하면, 상기 MFU 타입 필드와 상기 MFU 타입 확장 필드를 결합하여 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인함을 특징으로 하는 복합 멀티미디어 데이터를 수신하는 장치.
  22. 제20항에 있어서, 상기 헤더 검출부는,
    상기 마지막 플래그가 상기 헤더가 MFU 타입 확장 필드를 포함하는 것으로 지시하지 않으면, 상기 MFU 타입 필드에 따라 상기 MFU에 포함된 멀티미디어 데이터의 타입을 확인함을 특징으로 하는 복합 멀티미디어 데이터를 수신하는 장치.
KR1020110104419A 2011-06-14 2011-10-13 복합 멀티미디어 데이터를 송수신하는 장치 KR20120138603A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110125454A KR101885858B1 (ko) 2011-06-14 2011-11-28 복합 멀티미디어 데이터를 송수신하는 장치

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020110057698 2011-06-14
KR20110057698 2011-06-14

Publications (1)

Publication Number Publication Date
KR20120138603A true KR20120138603A (ko) 2012-12-26

Family

ID=47905380

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020110104419A KR20120138603A (ko) 2011-06-14 2011-10-13 복합 멀티미디어 데이터를 송수신하는 장치
KR1020110125454A KR101885858B1 (ko) 2011-06-14 2011-11-28 복합 멀티미디어 데이터를 송수신하는 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020110125454A KR101885858B1 (ko) 2011-06-14 2011-11-28 복합 멀티미디어 데이터를 송수신하는 장치

Country Status (1)

Country Link
KR (2) KR20120138603A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016003244A1 (ko) * 2014-07-04 2016-01-07 삼성전자 주식회사 멀티미디어 시스템에서 미디어 패킷을 수신하는 방법 및 장치
US9369743B2 (en) 2013-04-22 2016-06-14 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving broadcasting data by using MMT in digital broadcasting system
KR20160147322A (ko) * 2015-06-15 2016-12-23 에스케이텔레콤 주식회사 미디어 컨텐츠 전송 제어 방법, 이를 위한 장치

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9635394B2 (en) 2013-01-24 2017-04-25 Electronics And Telecommunications Research Institute Method and device for flexible MMT asset transmission and reception
WO2014116060A1 (ko) * 2013-01-24 2014-07-31 한국전자통신연구원 유연한 ｍｍｔ 애셋 송수신 방법 및 그 장치
KR101484843B1 (ko) 2013-04-19 2015-01-20 삼성전자주식회사 멀티미디어 전송 시스템에서 미디어 전송 패킷 전송 방법 및 장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101498914B1 (ko) * 2008-01-07 2015-03-05 알카텔-루센트 유에스에이 인코포레이티드 송신 방법, 사용자 장비 및 네트워크 장비
US7975166B2 (en) * 2008-03-05 2011-07-05 Alcatel Lucent System, method and computer readable medium for providing redundancy in a media delivery system

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9369743B2 (en) 2013-04-22 2016-06-14 Samsung Electronics Co., Ltd. Method and apparatus for transmitting and receiving broadcasting data by using MMT in digital broadcasting system
WO2016003244A1 (ko) * 2014-07-04 2016-01-07 삼성전자 주식회사 멀티미디어 시스템에서 미디어 패킷을 수신하는 방법 및 장치
CN106664444A (zh) * 2014-07-04 2017-05-10 三星电子株式会社 用于在多媒体系统中接收媒体分组的方法和设备
US10148797B2 (en) 2014-07-04 2018-12-04 Samsung Electronics Co., Ltd. Method and device for receiving media packets in multimedia system
KR20160147322A (ko) * 2015-06-15 2016-12-23 에스케이텔레콤 주식회사 미디어 컨텐츠 전송 제어 방법, 이를 위한 장치

Also Published As

Publication number Publication date
KR101885858B1 (ko) 2018-08-08
KR20120138607A (ko) 2012-12-26

Similar Documents

Publication Publication Date Title
KR101918658B1 (ko) 멀티미디어 시스템에서 복합 미디어 컨텐츠를 송수신하는 방법 및 장치
KR20120138603A (ko) 복합 멀티미디어 데이터를 송수신하는 장치
EP2869569A1 (en) Method and apparatus for transmitting adaptive media structure in multimedia system
US11509594B2 (en) Method and apparatus for transmitting and receiving packet in communication system
KR102056438B1 (ko) 복합 멀티미디어 데이터를 전송하기 위한 데이터 패킷을 송수신하는 방법 및 장치
JP2016535507A (ja) 通信システムにおけるパケット送受信方法及び装置
JP6702875B2 (ja) マルチメディアシステムにおけるメディアデータを送受信するための方法及び装置
JP7194591B2 (ja) マルチメディアシステムにおけるデータパケットを送受信する方法及び装置
KR102093408B1 (ko) 동일 포트에 멀티플렉싱 된 다중 패킷 스트림의 패킷오류 구분을 선택적으로 수행하는 방법 및 그 장치
KR101902212B1 (ko) 초고해상도 비디오를 위한 효율적인 스케일러블 계층 정보 전송 방법 및 장치
KR20160149144A (ko) 미디어 데이터의 처리를 위한 mmt 장치 및 방법