KR20130058541A - 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법 - Google Patents

그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법 Download PDF

Info

Publication number
KR20130058541A
KR20130058541A KR1020110124606A KR20110124606A KR20130058541A KR 20130058541 A KR20130058541 A KR 20130058541A KR 1020110124606 A KR1020110124606 A KR 1020110124606A KR 20110124606 A KR20110124606 A KR 20110124606A KR 20130058541 A KR20130058541 A KR 20130058541A
Authority
KR
South Korea
Prior art keywords
group communication
mmt
information
packet
layer
Prior art date
Application number
KR1020110124606A
Other languages
English (en)
Inventor
이충구
이용재
Original Assignee
(주)휴맥스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)휴맥스 filed Critical (주)휴맥스
Priority to KR1020110124606A priority Critical patent/KR20130058541A/ko
Publication of KR20130058541A publication Critical patent/KR20130058541A/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343Extraction or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

본 발명은 MMT 패킷 생성 장치 및 방법을 개시하고 있다. MMT 패킷 생성 장치는 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 장치에 있어서, 상기 패킷의 MMT 패키지에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 관계 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성한다. 따라서, MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 정확한 시간 동기화를 유지하면서 그룹 통신을 지원할 수 있다.

Description

그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 장치 및 방법{PACKET GENERATION APPARATUS AND METHOD IN MPEG MEDIA TRANSPORT SYSTEM ENABLE TO SUPPORT AN GROUP COMMUNICATION}
본 발명은 패킷 생성 방법 및 장치에 관한 것으로, 보다 상세하게는 그룹 통신을 지원할 수 있는 MMT(MPEG Media Transport) 시스템에서의 전송을 위한 MMT 패킷 생성 방법 및 장치에 관한 것이다.
MPEG-2의 표준화 이후, 비디오 압축 표준(또는 오디오 압축 표준)은 과거 10년간 MPEG-4, H.264/AVC, SVC(Scalable Video Coding) 등으로 꾸준히 새로운 표준이 개발되었고 또한 각각의 새로운 표준들은 새로운 시장을 형성하면서 MPEG 표준의 활용 영역을 넓혀왔으나, MPEG-2 TS(Transport System)와 같은 전송 기술의 경우 20년 가까운 세월이 흐르는 동안 변함없이 시장에서 디지털방송, 모바일 방송(T-DMB, DVB-H등)등에 널리 사용되고 있으며, 심지어 표준 제정 당시 고려하지 않았던 인터넷을 통한 멀티미디어 전송, 즉 IPTV 서비스에도 널리 활용되고 있는 상황이다.
그러나, MPEG-2 TS가 개발될 때의 멀티미디어 전송환경과 오늘날의 멀티미디어 전송환경은 큰 변화를 겪고 있다. 예컨대, MPEG-2 TS 표준은 제정 당시 ATM 망을 통해 멀티미디어 데이터를 전송하는 것을 고려하여 개발되었으나, 오늘날 이러한 목적으로 이용되는 사례는 거의 찾아보기 힘들어졌다. 또한, MPEG-2 TS 표준 제정 당시 인터넷을 이용한 멀티미디어 전송 등의 요구사항(requirement)이 고려되지 않아 최근의 인터넷을 통한 멀티미디어 전송에 효율적이지 못한 요소들이 존재한다. 따라서, MPEG에서는 변화하는 멀티미디어 환경에 걸맞는 인터넷에서의 멀티미디어 서비스를 고려한 새로운 멀티미디어 전송 표준인 MMT(MPEG Multimedia Transport Layer)의 제정이 매우 중요한 과제로 인식되고 있다.
이와 같이, MMT 표준화가 진행되는 중요한 이유는 20 년 전에 만들어진 MPEG2-TS 표준이 최근 IPTV 방송 서비스, 인터넷 환경 등에 최적화되어 있지 않기 때문에 최근 다양한 이종망(Heterogeneous Network)에서의 멀티미디어 전송 환경에 최적화된 멀티미디어 전송 국제 표준의 시급한 필요에 의해 MPEG에서 MMT를 새로운 전송 기술 표준으로서 표준화를 진행하고 있는 것이다.
대한민국 공개 특허 KR 10-2006-0081966 ("원격회의를 위한 음상 정위 시스템", 엘지전자 주식회사, 2006.07.14 공개)
본 발명의 목적은 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 그룹 통신을 지원할 수 있는 MMT 패킷 생성 장치 및 방법을 제공하는 것이다.
상기한 목적을 달성하기 위한 본 발명의 MMT 패킷 생성 장치는 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 장치에 있어서, 상기 패킷의 MMT 패키지에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 관계 정보를 포함하여 상기 패킷을 생성할 수 있다. 상기 MMT 패키지의 전송 특성 정보(Transport Characteristics Information)에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 ID 정보, 전송시에 수용 가능한 최대한의 딜레이(delay)를 지시하는 최대 딜레이 수용 한도 및 전송 실패시 재전송 방법과 관련된 정보를 포함하여 상기 패킷을 생성할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 MMT 패킷 생성 장치는 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 장치에 있어서, 상기 MMT 패킷 헤더 또는 MMT 페이로드 중 어느 하나에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 관계 정보를 포함하여 상기 패킷을 생성할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 MMT 패킷 생성 방법은 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 방법에 있어서, 상기 패킷의 MMT 패키지에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 관계 정보를 포함하여 상기 패킷을 생성할 수 있다. 상기 MMT 패키지의 전송 특성 정보(Transport Characteristics Information)에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 ID 정보, 전송시에 수용 가능한 최대한의 딜레이(delay)를 지시하는 최대 딜레이 수용 한도 및 전송 실패시 재전송 방법과 관련된 정보를 포함하여 상기 패킷을 생성할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 MMT 패킷 생성 방법는 MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 방법에 있어서, 상기 MMT 패킷 헤더 또는 MMT 페이로드 중 어느 하나에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 관계 정보를 포함하여 상기 패킷을 생성할 수 있다.
본 발명의 MMT 패킷 생성 장치 및 방법에 따르면, MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 그룹 통신 참여자 간의 위치 관계를 명확히 할 수 있는 그룹 통신 관련 정보를 패킷에 포함시킴으로써 시선 일치 및 음성 정위를 달성하여 그룹 통신을 지원할 수 있는 효과가 있다.
도 1은 본 발명의 일실시예에 따른 MMT 계층 구조를 나타낸 개념도,
도 2는 도 1의 MMT 계층 구조의 각 계층별로 사용되는 단위 정보(또는 데이터 또는 패킷)의 포맷을 나타낸 도면,
도 3a는 본 발명의 일실시예에 따른 MMT 패킷의 그룹 통신 정보를 포함하는 콤포지션 정보의 일 예를 나타낸 도면,
도 3b는 본 발명의 제 2 실시예에 따른 페이로드 타입 정보 상에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면,
도 3c는 본 발명의 제 3 실시예에 따른 애셋 정보, 패키지 정보 또는 패키지의 콤포지션 정보 상에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면,
도 3d는 본 발명의 제 4 실시예에 따른 MMT 패킷 헤더 또는 MMT 페이로드에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면,
도 4는 본 발명의 일실시예에 따른 MMT 패킷의 그룹 통신 정보를 포함하는 전송 특성 정보의 일 예를 나타낸 표,
도 5는 본 발명의 일실시예에 따른 MMT 패킷 생성 장치를 개략적으로 나타낸 블록도,
도 6은 본 발명의 일실시예에 따른 MMT 패킷 생성 방법을 개략적으로 나타낸 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
이하, 컨텐츠 콤포넌트(content component), 컨텐츠(content), 하이브리드 전송(hybrid delievery), 표현(presentation), 서비스(service), 서비스 정보(service information)의 용어의 의미를 다음과 같이 정의한다.
컨텐츠 콤포넌트(content component) 또는 미디어 콤포넌트(media component)는 단일 종류의 미디어(media of a single type) 또는 단일 종류의 미디어의 부분 집합(subset of the media of a single type)으로 정의되며, 예를 들어, 비디오 트랙(video track), 영화 자막(movie subtitles), 또는 비디오 향상계층(enhancement layer of video)이 될 수 있다.
컨텐츠(content)는 컨텐츠 콤포넌트의 집합으로 정의하며, 예를 들어 영화(movie), 노래(song)등이 될 수 있다.
하이브리드 전송(hybrid delievery)은 하나 또는 하나 이상의 컨텐츠 컴포넌트들이 하나 이상의 물리적으로 서로 다른 형태의 망(network)을 통하여 동시에 전송되는 것으로 정의한다.
표현(presentation)은 사용자가 하나의 컨텐츠 컴포넌트 또는 하나의 서비스를 경험(예를 들어 영화 감상)할 수 있도록 하나 또는 하나 이상의 장치들에 의해 수행되는 동작(operation)으로 정의한다.
서비스(service)는 표현(presentation) 또는 저장(storage)을 위해 전송되는 하나 또는 하나 이상의 컨텐츠 컴포넌트로 정의한다.
서비스 정보(service information)는 하나의 서비스, 상기 서비스의 특성(characteristics) 및 컴포넌트들을 기술하는 메타 데이터로 정의한다.
이하에서, 망(network) 또는 네트워크 또는 통신망은 방송망(broadcast network), 광대역망(broadband network), 케이블망(cable network), 또는 위성통신망(satellite communication network)을 포함하는 다양한 네트워크를 포함한다.
이하, 하이브리드 전송시 MMT 애셋 단위, 서브스트림 단위, MMT 패키지 단위 또는 MMT 패킷 단위 로 전송될수도 있고 또한 비디오 컨텐츠가 제1 레이어, 제2 레이어와 같이 복수의 레이어로 구성된 경우 레이어 단위로 하이브리드 전송할 수도 있다.
도 1은 본 발명의 일실시예에 따른 MMT 계층 구조를 나타낸 개념도이다.
MMT(Mpeg Media Transport) 계층은 전송 계층(Transport layer)(10) 위에서 동작하며, 도 1을 참조하면, MMT 계층은 전송 계층(10) 위에서부터 순차적으로 전달 계층(Delivery layer), 캡슐화 계층(Encapsulation layer)의 기능 영역을 포함한다. 또한, MMT 계층은 전달(D) 계층 및 캡슐화(E) 계층과 상호 연동하여 계층간(Cross-layer) 제어 동작을 수행하는 제어 계층(Control layer)의 기능 영역을 더 포함할 수 있다.
캡슐화(E) 계층은 스토리지(storage) 장치에 저장되거나 페이로드(payload)로서 전달되도록 하기 위하여 부호화된 미디어 컴포넌트들을 캡슐화하는 포맷을 정의한다. 전달(D) 계층은 상기 캡슐화된 미디어 컴포넌트를 전송하는데 필요한 포맷과 기능을 제공한다. 제어(C) 계층은 미디어의 전달 및 소비를 제어하는 기능을 제공한다.
캡슐화(E) 계층은 예를 들어 전송되는 미디어의 패킷화(packetization), 프래그먼테이션(Fragmentation), 멀티플렉싱(Multiplexing)등의 기능을 담당할 수 있다.
다양한 종류의 멀티미디어 컴포넌트들이 캡슐화(E) 계층에서 제공되는 기능에 의하여 전송 및 소비되기 위하여 캡슐화(encapsulated)되고 서로 합해질 수 있다. 캡슐화된 미디어 컴포넌트 및 미디어 컴포넌트들의 구성(configurations) 정보는 캡슐화(E) 계층의 기능 영역에서 제공된다.
캡슐화된 미디어 컴포넌트들에 대한 주된 정보는 통합(aggregation), 우선 순위(prioritization), 미디어 프래그먼트의 의존성, M-유닛(140)의 타이밍 정보 및 구조 정보, MMT 애셋(150)의 식별 정보, 초기화 정보 및 코덱 정보를 포함할 수 있다. 미디어 컴포넌트들의 구성(configurations) 정보는 MMT 패키지(160) 및 MMT 애셋(150)의 식별 정보, MMT 애셋(150)의 리스트를 가지는 구성 정보, MMT 패키지(160)내의 MMT 애셋(150)들의 컴포지션 정보(composition information)(162) 및 전송 특성(transport characteristics) 정보(164)를 포함할 수 있다.
캡슐화(E) 계층은 크게 E.1 계층(230), E.2 계층(232) 및 E.3 계층(234) 3개의 계층으로 세분화될 수 있다.
E.3계층(234)은 미디어 코딩 계층(30)으로부터 제공된 미디어 프래그먼트 유닛(Media Fragment Unit; MFU)(130)을 캡슐화하여 M-유닛(M-Unit)(140)을 생성한다.
E.2 계층(232)은 E.3계층(234)으로부터 제공된 M-유닛(140)을 캡슐화하여 MMT 애셋(150)을 생성한다.
E.1 계층(E.1 Layer)은 E.2 계층(232)으로부터 제공된 MMT 애셋(150)을 캡슐화하여 MMT 패키지(MMT Package)를 생성한다.
전달(D) 계층은 전송 계층(10)과 캡슐화(E) 계층 사이에서, 네트워크를 통해 전송되는 비디오, 오디오등과 같은 미디어(Media)의 다중화(multiplexing), 패킷 레벨의 통합(aggregation) 및/또는 분할(Fragmentation), 네트워크 패킷화(Network packetization), QoS 제어, 동기화(Synchronization) 기능, 기존의 RTP와 같은 전송 계층(transport layer), 기존의 UDP, TCP와 같은 전송 계층(transport layer), 캡슐화(E) 계층, 제어(C) 계층과의 인터페이스 등을 담당한다.
전달(D) 계층은 캡슐화(E) 계층으로부터의 페이로드(payloads)를 핸들링하기 위하여 캡슐화(E) 계층으로부터의 넘어온 서로 다른 타입의 페이로드를 식별한다.
전달(D) 계층은 서로 다른 망과 서로 다른 채널을 통하여 전달되는 패킷들간의 임시적인 관계(temporal relation)를 다룰 수 있다. 상기 동기화(Synchronization) 기능은 타임스탬프등을 이용한 하이브리드망 동기화를 포함할 수 있다.
전달(D) 계층은 실시간 미디어 전송을 위해 MMT 전달 패킷(MMT delivery packets)의 타이밍 제약(timing constraints)을 다룰 수 있다.
전달(D) 계층은 전방향 에러 보정(Forward Error Correction) 및 재전송과 같은 MMT 미디어 패킷의 에러 제어를 수행할 수 있다.
전달(D) 계층은 MMT 미디어 패킷의 흐름 제어를 수행할 수 있다.
전달(D) 계층은 MMT 미디어 패킷의 전달을 위한 소정 레벨의 QoS를 유지하기 위하여 크로스 레이어 디자인(Cross-layer design)을 통하여 하위 계층(MAC, PHY) 뿐만 아니라 다른 MMT 계층과의 인터랙션(interaction)을 수행할 수 있다.
전달(D) 계층은 크게 D.1 계층(120), D.2 계층(110) 및 D.3 계층(115) 3개의 계층으로 세분화될 수 있다.
D.1 계층(120)은 E.1 계층(150)으로부터 전달된 MMT 패키지(MMT Package)(160)를 받아서 MMT 페이로드 포맷(MMT Payload format)(170)을 생성한다.
D.2 계층(110)은 D.1 계층(120)으로부터 전달된 MMT 페이로드 포맷(170)을 받아서 MMT 패키지(MMT Package)를 생성한다.
D.3 계층(115)은 교차 계층 설계(cross-layer Design)에 의해 계층간에 정보를 교환할 수 있는 기능을 제공하여 QoS를 지원한다. 예를 들어 D.3 계층(115)은 하위 계층인 MAC/PHY의 QoS 파라미터를 이용하여 QoS 제어를 수행할 수 있다. MAC/PHY의 QoS 파라미터는 예를 들어, 비트율(bitrate), 패킷 손실율(packet loss ratio), 예측된 지연(expected delay), 이용 가능한 버퍼 크기 등이 될 수 있다.
제어 계층(Control layer)은 크게 C.1 계층(220), C.2 계층(210) 2개의 계층으로 세분화될 수 있다.
제어 계층(Control layer)은 예를 들어 전송되는 미디어의 세션 초기화/제어/관리(session initialization/control/management), 서버 기반 및 또는 클라이언트 기반의 트릭 모드, 서비스 디스커버리(Service discovery), 동기화(Synchronization), 다른 계층, 즉 전달(D) 계층 및 캡슐화(E) 계층과의 인터페이스 기능 등을 담당할 수 있다. 상기 동기화는 하이브리드망에서의 동기화 제어를 포함할 수 있다.
C.2 계층(210)은 전달 세션 관리(delivery session management)를 수행할 수 있다. 상기 전달 세션 관리는 전달(D) 계층의 엔드-포인트들(end-points)간에 교환되는 제어 메시지의 포맷을 정의할 수 있다. 상기 전달 세션 관리에서 정의되는 제어 메시지는 흐름 제어(flow control), 전달 세션 관리, 전달 세션 모니터링, 에러 제어(error control), 하이브리드망 동기화 제어등에 사용될 수 있다. C.2 계층(210)은 전달(D) 계층의 동작을 지원하기 위하여 송신측(sender)와 수신측(receiver)간에 필요한 시그널링을 제공할 수 있다. 상기 전달(D) 계층의 동작을 지원하기 위하여 송신측(sender)와 수신측(receiver)간에 필요한 시그널링은 예를 들어 전달 세션 설정 및 해제(delivery session establishment and release), 전달 세션 관리(모니터링, 흐름 제어, 에러 제어등), 설정된 전달 세션에 대한 리소스 예약, 하이브리드망 동기화를 위한 시그널링, 적응적 전달(adaptive delivery)를 위한 시그널링을 포함할 수 있다. 또한, C.2 계층(210)은 전달(D) 계층 및 캡슐화(E) 계층과의 인터페이스 기능을 담당할 수 있다.
C.1 계층(220)은 표현 세션 관리(presentation session management)를 수행할 수 있다. 상기 표현 세션 관리는 미디어 표현, 세션 관리, 미디어 소비에 요구되는 정보 제공을 위하여 애플리케이션간에 교환된 제어 메시지의 포맷을 정의할 수 있다. C.1 계층(220)은 서비스 디스커버리(Service discovery), 미디어의 세션 초기화/종료(media session initialization/termination), 미디어의 세션 표현/제어(media session presentation, control), 전달(D) 계층 및 캡슐화(E) 계층과의 인터페이스 기능 등을 수행할 수 있다.
제어 메시지(control message; 또는 제어 정보(control information))는 제어(C) 계층에서 생성되어 방송망 및/또는 광대역망을 통하여 전송될 수 있다.
방송망 및 광대역망 모두를 통하여 전송되는 경우, 방송망을 통하여 전송되는 제어 메시지의 기능은 광대역망을 통하여 전송되는 제어 메시지의 기능과 동일할 수 있다. 애플리케이션 및 전송(delivery)의 종류에 따라서 제어 메시지의 신택스(syntax) 및 포맷(format)은 달라질 수 있다. 예를 들어, 하이브리드 전송의 경우, 동일한 공통 제어 정보(common control information)과 동일한 공통 포맷(common format)이 방송망 및 광대역망 각각으로 전송되는 제어 메시지에 사용될 수 있다. 또는, 하이브리드 전송의 경우, 동일한 공통 제어 정보(common control information)가 방송망 및 광대역망 각각마다 서로 다른 포맷(different format)으로 전송될 수도 있다. 또는, 하이브리드 전송의 경우, 방송망 및 광대역망 각각마다 서로 다른 제어 정보(different control information)와 서로 다른 포맷(different format)으로 전송될 수도 있다.
도 2는 도 1의 MMT 계층 구조의 각 계층별로 사용되는 단위 정보(또는 데이터 또는 패킷)의 포맷을 나타낸다.
미디어 프래그먼트 유닛(Media Fragment Unit; MFU)(130)는 부호화된 미디어 분할 데이터(coded media fragment data, 132)와 MFUH(Media Fragment Unit Header)(134)로 이루어진다. 미디어 프래그먼트 유닛(130)은 특정 코덱(codec)에 독립적으로 일반 콘테이너 포맷(general container format)을 가지며 미디어 디코더에서 독립적으로 소비될 수 있는 가장 작은 데이터 유닛을 싣는다. MFUH(134)는 미디어 특성-예를 들어 유실 허용한계(loss-tolerance)-과 같은 부가 정보를 포함할 수 있다. MFU)(130)는 예를 들어 비디오의 픽춰(picture) 또는 슬라이스(slice)가 될 수 있다.
M-유닛(140)은 복수의 미디어 프래그먼트 유닛(130)을 포함하는 미디어 프래그먼트 유닛의 집합이다. M-유닛(140)은 특정 코덱(codec)에 독립적으로 일반 콘테이너 포맷(general container format)을 가지며 액세스 유닛(Access Unit)과 등가의 미디어 데이터를 포함한다. M-유닛(140)은 타임드 데이터 유닛(timed data unit) 또는 논-타임드 데이터 유닛(non-timed data unit) 을 가질 수 있다. M-유닛(140)은 미디어 분할 유닛 데이터(media fragment unit data, 132)와 동기화를 위한 타임 스탬프와 같은 부가 정보를 가지는 미디어 유닛 헤더(Media Unit Header; MUH)(142)포함할 수 있다.
MMT 애셋(150)은 복수의 M-유닛(M-Unit)들로 이루어진 M-유닛의 집합이다. MMT 애셋(150)은 단일의 데이터 소스로부터의 다수의 M-유닛(140)(타임드(timed) 또는 논-타임드(non-timed) 데이터)으로 이루어진 데이터 엔티티로서, MMT 애셋 정보(152)는 애셋 패키징 메타데이터(Asset packaging metadata) 및 데이터 타입과 같은 부가 정보를 포함한다. MMT 애셋(150)은 예를 들어 비디오, 오디오 또는 프로그램 정보(program information)가 될 수 있다.
MMT 패키지(160)는 하나 또는 하나 이상의 MMT 애셋(150)을 포함하는 MMT 애셋의 집합이다. MMT 패키지 내의 MMT 애셋들은 다중화되거나 또는 사슬같이 연결(concatenated)될 수 있다. MMT 패키지(160)의 패키지 정보(package information)(165)는 구성 정보(Configuration Information)를 포함할 수 있다. 구성 정보(Configuration Information)는 MMT 애셋들의 리스트, 패키지 식별 정보(package identification information), 콤포지션 정보(composition information)(162) 및 전송 특성(transport characteristics)(164)와 같은 부가 정보를 포함할 수 있다. 콤포지션 정보(composition information)(162)는 MMT 애셋(150)들 사이의 관계(relationship)에 대한 정보를 포함한다.
또한, 콤포지션 정보(composition information)(162)는 하나의 컨텐츠(content)가 복수개의 MMT 패키지로 이루어질 경우 복수의 MMT 패키지간의 관계(relationship)를 나타내기 위한 정보를 더 포함할 수 있다. 콤포지션 정보(composition information)(162)는 MMT 패키지내의 시간적, 공간적, 적응적 관계(relationship)에 대한 정보를 포함할 수 있다. 자세한 설명은 후술한다.
전송 특성(transport characteristics) 정보(164)는 전송 특성에 대한 정보를 포함하며, 각각의 MMT 애셋(또는 MMT 패킷)의 전송 조건(delivery condition)을 결정하기 위해 필요한 정보를 제공할 수 있다. 전송 특성 정보는 트래픽 기술 파라미터(traffic description parameter) 및 QoS 기술자(QoS descriptor)를 포함할 수 있다.
트래픽 기술 파라미터는 미디어 프래그먼트 유닛(MFU)(130) 또는 M-유닛(140)에 대한 비트율(bitrate) 정보, 우선 순위(priority) 정보등을 포함할 수 있다. 비트율 정보는 예를 들어 MMT 애셋이 가변 비트율(Variable BitRate; VBR) 또는 고정 비트율(Constant BitRate; CBR)인지 여부에 대한 정보, 미디어 프래그먼트 유닛(MFU)(또는 M-유닛)에 대해 보장된 비트율(guaranteed bitrate), 미디어 프래그먼트 유닛(MFU)(또는 M-유닛)에 대한 최대 비트율을 포함할 수 있다. 상기 트래픽 기술 파라미터는 전달 경로상의 서버, 클라이언트, 기타 다른 구성요소들 간에 리소스 예약(resource reservation)을 위해 사용될 수 있으며, 예를 들어 MMT 애셋내의 미디어 프래그먼트 유닛(MFU)(또는 M-유닛)의 최대 크기 정보를 포함할 수 있다. 상기 트래픽 기술 파라미터는 주기적 또는 비주기적으로 업데이트될 수 있다.
QoS 기술자는 QoS 제어를 위한 정보를 포함하며, 예를 들어 지연(delay) 정보 및 손실 정보(loss information)를 포함할 수 있다. 손실 정보는 예를 들어 MMT 애셋의 전달 손실(delivery loss)이 허용되는지 않되는지에 대한 손실 지시자(loss indicator)를 포함할 수 있다. 예를 들어 손실 지시자가 '1'인 경우 'lossless'를 나타내고, '0'인 경우에는 'lossy'를 나타낼 수 있다. 지연(delay) 정보는 MMT 애셋의 전송 지연의 민감도를 구분하는데 사용되는 지연 지시자(delay indicator)를 포함할 수 있다. 지연 지시자는 MMT 애셋의 타입이 대화(conversation), 인터랙티브(interactive), 실시간(real time) 및 비실시간(non-realtime) 인지 여부를 지시할 수 있다.
하나의 컨텐츠(content)는 하나의 MMT 패키지로 이루어질 수 있다. 또는 하나의 컨텐츠(content)는 복수개의 MMT 패키지로 이루어질 수도 있다.
하나의 컨텐츠(content)가 복수개의 MMT 패키지로 이루어질 경우 복수의 MMT 패키지간의 시간적(temporal), 공간적(spatial), 적응적(adaptive) 관계(relationship)를 나타내는 콤포지션 정보(composition information) 또는 구성 정보(configuration information)가 MMT 패키지들 중에 하나의 MMT 패키지 내부에 존재하거나 MMT 패키지 외부에 존재할 수 있다.
예를 들어 하이브리드 전송(hybrid delivery)의 경우 컨텐츠 컴포넌트(content component)들 중 일부는 방송망(broadcast network)을 통해 전송되고 컨텐츠 컴포넌트(content component)들 중 나머지 부분은 광대역망(broadband network)을 통해 전송될 수 있다. 예를 들어 하나의 멀티뷰 서비스를 구성하는 복수의 AV 스트림(audiovisual stream)의 경우 하나의 스트림은 방송망으로 전송되고 다른 스트림은 광대역망으로 전송될 수 있으며, 각각의 AV 스트림은 다중화되고 클라이언트 단말에 개별적으로 수신되어 저장될 수 있다. 또는 예를 들어 위젯(widget)과 같은 애플리케이션 소프트웨어는 광대역망으로 전송되고, AV 스트림(AV 프로그램)은 기존 방송망으로 전달되는 시나리오도 존재할 수 있다.
상기와 같은 멀티뷰 서비스 시나리오 및/또는 위젯(widget) 시나리오의 경우, 복수의 AV 스트림 전체가 하나의 MMT 패키지로 될 수 있으며, 이 경우에는 복수의 스트림 중의 하나는 하나의 클라이언트 단말에만 저장될 수 있고, 스토리지 컨텐츠(storage content)는 MMT 패키지의 부분이 되며, 클라이언트 단말은 콤포지션 정보(composition information) 또는 구성 정보(configuration information)를 재기록 해야하고, 재기록 된 컨텐츠는 서버와 무관한 새로운 MMT 패키지가 된다.
상기와 같은 멀티뷰 서비스 시나리오 및/또는 위젯(widget) 시나리오의 경우, 각각의 AV 스트림이 하나의 MMT 패키지로도 될 수 있으며, 이 경우에는 복수의 MMT 패키지가 하나의 컨텐츠를 구성하게 되며, 스토리지(storage)에는 MMT 패키지 단위로 기록되며, MMT 패키지들간의 관계(relationship)를 나타내는 컴포지션 정보 또는 구성 정보가 필요하다.
하나의 MMT 패키지내에 포함된 컴포지션 정보 또는 구성 정보(configuration information)는 다른 MMT 패키지내의 MMT 애셋을 참조할 수 있으며, 또한 아웃-밴드(out-band) 상황에서 MMT 패키지를 참조하는 MMT 패키지의 외부를 표현할 수 있다.
한편, 서비스 제공자(service provider)에 의해 제공된 MMT 애셋(160)들의 리스트 및 MMT 패키지(160)의 전달을 위해 가능한 경로를 클라이언트 단말에게 알려주기 위하여 MMT 패키지(160)는 제어(C) 계층을 통하여 서비스 디스커버리 정보(Service discovery information)로 번역되어 MMT 제어 메시지에는 서비스 디스커버리를 위한 정보 테이블을 포함할 수 있다.
그룹 통신 지원을 위한 장치 및 방법
본 발명은 MMT 시스템에서 그룹 통신을 지원하기 위한 패킷 생성 장치 및 방법을 제공한다. 정확한 그룹 통신이 이루어지기 위해서는 실제 회의와 같이 시선 일치가 달성되어야 한다. 이를 위해서는 참여자 간의 위치 관계를 명확히 하는 것이 중요하다.
UHD와 같이 Large Size 스크린에서 다자간 통신을 수행하는 경우, 위치 관계를 사전에 정해 놓으면, 발언자와 시선 일치 및 음성 정위를 달성할 수 있다. 따라서, 위치 정보를 포함하는 그룹 통신 정보가 MMT 패킷에 포함되어야 한다. 비디오 뿐만 아니라 오디오에도 비디오와 같은 관계 정보를 포함하면 보다 정확한 음성 정위를 달성할 수 있다.
도 3a은 본 발명의 제 1 실시예에 따른 MMT 패킷의 그룹 통신 정보를 포함하는 콤포지션 정보(162)의 일 예를 나타낸 도면이다. 콤포지션 정보(162)는 시간적 관계 정보, 공간적 관계 정보, 애셋간 관계 정보, 권리 관리 정보를 포함할 수 있다. 도 3에 도시된 바와 같이, 본 발명의 일실시예에 따른 콤포지션 정보(162)는 페이로드 타입 정보(310), 그룹 통신 정보(320: Group Communication Information), 시퀀스 넘버(330: Sequence Number), 타임 스탬프(340: Time Stamp) 및 MMT 패킷 사이즈 정보(350: MMT Packet Size)를 포함할 수 있다. 상기 정보들은 D 계층의 헤더(header)에 포함된다. 즉, E 계층으로부터 전달된 MMT 패키지(160)를 받아서 MMT 페이로드(170)를 생성할 때, 상기 정보들을 포함하여 MMT 페이로드(170)를 생성한다. 전술한 바와 같이, MMT 패키지(160)는 콤포지션 정보(162)와 전송 특성 정보(164)를 포함할 수 있다. 도 3을 참조하여 먼저 콤포지션 정보(162)에 대해 설명한다.
페이로드 타입 정보(310)는 페이로드 데이터 타입, 미디어 타입 및 인코딩 방식을 구별하기 위한 정보이다. 페이로드 데이터 타입은 페이로드 데이터의 타입이 베이직 패킷(Basic Packet)인지, 패리티 패킷(Parity Packet)인지, 메타데이터 패킷(Metadata Packet)인지 구별할 수 있는 정보를 제공한다. 미디어 타입은 비디오 타입인지 오디오 타입인지 구별할 수 있는 정보를 제공한다. 인코딩 방식은 H.264, AAC 등 다양한 인코딩 방식 중 어느 인코딩 방식을 사용하였는지에 관한 정보를 제공한다.
그룹 통신 정보(320)는 그룹 통신과 관련된 정보(예컨대, 그룹 통신 참여자 수, 그룹 통신 형태 등)를 의미한다. 이는 이하 상세히 설명한다.
시퀀스 넘버(330)는 스트림 내에서 유니크(unique)한 데이터 블록을 구별하기 충분한 사이즈를 나타내는 정보이다. 시퀀스 넘버(330)는 32 비트 또는 48 비트의 용량을 차지한다. 타임 스탬프(340)는 RTP 또는 PCR을 포함하는 공유 타이밍 정보를 의미한다. 타임 스탬프(340)에는 미디어 간에 정확한 동기화를 유지하기 위해 고려해야 할 주요 시간 정보들을 포함한다. 타임 스탬프(340)는 32 비트 또는 42 비트의 용량을 차지한다. 다음으로 MMT Packet Size 정보(350)는 16 비트에 대해서는 가변 패킷 사이즈인 경우 단일 MMT 패킷에서의 데이터 사이즈를 의미하고, 3비트에 대해서는 단일 MMT 패킷 내의 TS 패킷의 수를 의미한다.
그룹 통신 정보(320)는 그룹 통신과 관련된 다양한 정보를 포함한다. 그룹 통신 정보(320)는 그룹 통신 지시자(321: Group Communication Indicator), 그룹 통신 참여자 수(323: Participant Number), 그룹 통신 형태(325: Group Communication Formation), 레퍼런스 지시자(327: reference indicator) 및 위치 관계 정보(329: Positional relationship with reference)를 포함할 수 있다.
그룹 통신 지시자(321)는 MMT 패킷이 그룹 통신을 지원하는지를 알려주는 지시자이다. 예컨대, 그룹 통신 지시자의 flag가 '1'인 경우, 수신된 MMT 패킷은 그룹 통신을 지원하는 패킷이고, '0'인 경우는 그룹 통신을 지원하지 않는 패킷이 될 수 있다.
그룹 통신 참여자 수(323)는 현재 그룹 통신에 참여하고 있는 사람의 수를 의미하는 정보이다.
그룹 통신 형태(325)는 그룹 통신에 참여하고 있는 참여자들이 어떤 형태로 위치하고 있는지 나타내는 정보를 포함할 수 있다. 예컨대, 그룹 통신에 참여하는 참여자들이 원탁에 위치하는 경우가 있을 수 있고, 직사각형의 탁자에 앉아 있는 경우가 있을 수 있고, 정사각형 모양으로 위치할 수도 있다. 따라서, 그룹 통신 형태(325) 정보를 통해 참여자들의 위치 정보를 지시할 수 있다. 또한, 그룹 통신 형태(325)는 참여자 간의 회의 형태를 나타내는 정보를 포함할 수 있다. 즉, 1:N 또는 N:M의 회의 형태인지를 나타내는 정보를 포함할 수 있다.
레퍼런스 지시자(327)는 해당 유저(user)가 레퍼런스인지 아닌지 알려주는 지시자이다. 그룹 통신 지시자(321)와 같이, 레퍼런스 지시자(327)가 '1'인 경우, 유저가 레퍼런스임을 지시하고, '0'인 경우, 유저는 레퍼런스가 아니라는 것을 지시한다.
위치 정보(329)는 레퍼런스와의 위치 관계를 나타낸다. 상기 해당 유저가 레퍼런스가 아닌 경우, 즉 레퍼런스 지시자(327)의 flag가 '0'인 경우, 해당 유저와 레퍼런스와의 위치 관계를 나타내는 정보를 포함하고, 해당 유저가 레퍼런스인 경우, 즉 레퍼런스 지시자(327)의 flag가 '1'인 경우, 다른 참여자와의 위치 관계를 포함할 수 있다.
도면에 도시되진 않았지만, 본 발명의 일실시예에 따른 MMT 패키지의 컴포지션 정보(162)에는 그룹 통신 참여자들의 시점 정보 또는 음성 방향 설정 정보를 포함할 수 있다. 시점 정보는 각 참여자들 간에 바라보고 있는 비디오 관련 정보를 포함하고, 음성 방향 설정 정보는 그룹 통신 참여자들 간의 오디오 관련 정보를 포함한다. 음성 방향 설정 정보를 획득하기 위해 음상 정위를 수행할 수 있는데 이는 일반적으로 좌/우 채널별로 신호의 지연 정도와 레벨의 차이 정도를 달리하여 적용시키거나, 정위치시킬 방향에 대응하는 공간 전달함수(HRTF: Head Related Transfer Function)를 좌/우 채널의 신호와 상승 적분하는 방법을 이용한다.
도 3b는 본 발명의 제 2 실시예에 따른 페이로드 타입 정보 상에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면이다. 본 발명의 제 2 실시예에 있어서, 페이로드 타입 정보(310) 상에 그룹 통신 관련 정보를 추가할 수 있다(360). 즉, 페이로드 타입 정보(310)의 페이로드 데이터 타입 정보에 그룹 통신(Group Communication) 타입을 정의할 수 있다. 즉, 상기 그룹 통신 지시자의 정보, 그룹 통신을 지원하는지 하지 않는지에 대한 정보를 그룹 통신 타입으로 정의하여 페이로드 데이터 타입 정보에 포함시킬 수 있다. 그리고 MMT Packet payload에 나머지 그룹 통신 관련 정보인 참여자 수, 그룹 통신 형태, 레퍼런스 지시자 및 위치 정보를 포함시킬 수 있다(362). 또한, 다른 실시예에 있어서, 페이로드 타입 정보(310)의 페이로드 데이터 타입 정보에 그룹 통신 타입을 정의하고, 상기 페이로드 타입 정보(310)의 다른 부분에 나머지 그룹 통신 정보를 포함할 수 있다.
도 3c는 본 발명의 제 3 실시예에 따른 애셋 정보, 패키지 정보 또는 패키지의 콤포지션 정보 상에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면이다. 본 발명의 제 3 실시예에 있어서, MMT 패키지 정보 내에 그룹 통신 정보를 삽입하여 그룹 통신을 지원할 수 있다. 즉, 애셋 정보(MMT ASSET의 ASSET INFO)(370), 패키지 정보(372) 또는 패키지의 콤포지션 정보(374) 등 그룹 통신과 관련하여 어디든지 상기 그룹 통신 정보를 포함시킬 수 있다.
도 3d는 본 발명의 제 4 실시예에 따른 MMT 패킷 헤더 또는 MMT 페이로드에 그룹 통신 정보를 포함하는 일 예를 나타낸 도면이다. 본 발명의 제 4 실시예에 있어서, MMT 패킷 헤더(380) 또는 MMT 페이로드(382)에 그룹 통신 정보를 추가하여 전송할 수 있다. 즉, 그룹 통신 정보가 MMT 패킷의 어디든지 삽입되어 전송될 수 있다.
도 4는 본 발명의 일실시예에 따른 MMT 패킷의 그룹 통신 정보를 포함하는 전송 특성 정보(164)의 일 예를 나타낸 표이다. 전술한 바와 같이, 전송 특성(transport characteristics) 정보(164)는 각각의 MMT 애셋(또는 MMT 패킷)의 전송 조건(delivery condition)을 결정하기 위해 필요한 정보를 제공한다. 도 4에 도시된 바와 같이, 본 발명의 일실시예에 따른 전송 특성 정보(164)는 loss_tolarant, 우선 순위 정보(priority), token_bucket_rate, token_bucket_size, peak_data_rate, max_MFU_size, mmt_asset_id, Group_Communication_id를 포함할 수 있다.
본 발명의 바람직한 실시예에 있어서, loss_tolarant는 수용할 수 있는 손실(loss)에 대한 최대값을 나타내는 정보로서, 그룹 통신의 경우, loss_tolarant는 최대 딜레이 수용한도, 전송 실패시 재전송(ARQ) 방법에 관한 정보를 포함할 수 있다. peak_data_rate는 MMT 애셋의 컴포넌트인 미디어 프래그먼트 유닛(MFU)의 피크 비트 레이트 정보를, max_MFU_size는 미디어 프래그먼트 유닛(MFU)의 최대 크기 정보를 포함할 수 있다. 또한, Group_Communication_id는 그룹 통신을 지원하는지 지원하지 않는지와 관련된 정보를 포함할 수 있다. 도 4에는 Group_Communication_id가 6 bit의 크기를 갖는다고 표시되어 있으나, 반드시 이에 국한되는 것은 아니다. 6 bit보다 큰 사이즈 또는 더 작은 사이즈를 가질 수 있다.
도 5는 본 발명의 일실시예에 따른 MMT 패킷 생성 장치를 개략적으로 나타낸 블록도이다. 도 5에 도시된 바와 같이, MMT 패킷 생성 장치는 그룹 통신 정보 생성부(510), 타이밍 정보 생성부(520), MMT 패킷 생성부(530) 및 MMT 패킷 전송부(540)를 포함할 수 있다.
도 5를 참조하면, 그룹 통신 정보 생성부(510)는 도 3 및 도 4를 참조하여 설명하였던 것과 같이, MMT 패키지의 콤포지션 정보에 포함될 그룹 통신 지시자(321), 그룹 통신 참여자 수(323), 그룹 통신 형태(325), 레퍼런스(reference) 지시자(327) 및 위치 관계 정보(329) 및 전송 특성 정보에 포함될 loss_tolarant, 우선 순위 정보(priority), token_bucket_rate, token_bucket_size, peak_data_rate, max_MFU_size, mmt_asset_id, Group_Communication_id를 생성한다. 전술한 바와 같이, 상기 생성된 그룹 통신 정보는 반드시 MMT 패키지의 콤포지션 정보 및 전송 특성 정보에 포함되야만 하는 것을 아니다. 상기 그룹 통신 정보는 페이로드 타입 정보에 포함될 수도 있고, MMT 패키지, MMT 패킷 헤더 또는 MMT 페이로드 상에 삽입될 수 있다.
타이밍 정보 생성부(520)는 나머지 페이로드 타입 정보(310), 시퀀스 넘버(330), 타임 스탬프(340) 및 MMT 패킷 사이즈(350)를 생성한다.
MMT 패킷 생성부(530)는 상기 그룹 통신 정보 생성부(510)에서 생성된 그룹 통신 관련 정보와 타이밍 정보 생성부(520)에서 생성된 타이밍 정보를 기반으로 MMT 시스템에서 미디어 전송을 위한 MMT 패킷을 생성한다. 이때, 교차 계층 설계에 의해 다른 계층과 정보를 교환할 수 있는 기능을 제공하여 QoS를 지원할 수 있다.
다음으로, MMT 패킷 전송부(540)는 상기 MMT 패킷 생성부(530)에서 생성된 MMT 패킷을 수신측으로 전송한다.
도 6은 본 발명의 일실시예에 따른 MMT 패킷 생성 방법을 개략적으로 나타낸 흐름도이다. 도 6에 도시된 바와 같이, MMT 패킷 생성 방법은 그룹 통신 관련 정보 생성 단계(610), 타이밍 정보 생성 단계(620), MMT 패킷 생성 단계(630) 및 MMT 패킷 전송 단계(640)를 포함할 수 있다.
그룹 통신 관련 정보 생성 단계(610)에서, 본 발명의 일실시예에 따른 패킷 생성 장치는 도 3에서 설명한 바와 같이, MMT 패키지의 콤포지션 정보에 포함될 그룹 통신 지시자(321), 그룹 통신 참여자 수(323), 그룹 통신 형태(325), 레퍼런스 지시자(327), 위치 관계 정보(329) 및 전송 특성 정보에 포함될 loss_tolarant, 우선 순위 정보(priority), token_bucket_rate, token_bucket_size, peak_data_rate, max_MFU_size, mmt_asset_id, Group_Communication_id를 생성한다. 전술한 바와 같이, 상기 생성된 그룹 통신 정보는 반드시 MMT 패키지의 콤포지션 정보 및 전송 특성 정보에 포함되야만 하는 것을 아니다. 상기 그룹 통신 정보는 페이로드 타입 정보에 포함될 수도 있고, MMT 패키지, MMT 패킷 헤더 또는 MMT 페이로드 상에 삽입될 수 있다.
타이밍 정보 생성 단계(620)에서, 패킷 생성 장치는 페이로드 타입 정보(310), 시퀀스 넘버(330), 타임 스탬프(340) 및 MMT 패킷 사이즈(350)를 생성한다.
MMT 패킷 생성 단계(630)에서, 패킷 생성 장치는 상기 그룹 통신 정보 생성 단계(610)에서 생성된 그룹 통신 관련 정보와 타이밍 정보 생성 단계(620)에서 생성된 타이밍 정보를 기반으로 MMT 시스템에서 미디어 전송을 위한 MMT 패킷을 생성한다. 이때, 교차 계층 설계에 의해 다른 계층과 정보를 교환할 수 있는 기능을 제공하여 QoS를 지원할 수 있다.
다음으로, MMT 패킷 전송 단계(640)에서, 패킷 생성 장치는 상기 MMT 패킷 생성 단계(630)에서 생성된 MMT 패킷을 수신측으로 전송한다.
본 발명의 실시예들에 따른 MMT 패킷 수신 및 재생 장치 및 방법에서는, 전술한 MMT 패킷 생성 장치로부터 전송된 MMT 패킷을 이용하여 동일한 서버에서 전송된 다중의 미디어 스트림 간의 동기화뿐만 아니라, 서로 다른 서버에서 전송된 다중의 미디어 스트림 간의 동기화도 간단하게 수행할 수 있고, 하이브리드 전송 환경에서도 동기화뿐만 아니라 다수의 참여자들이 참여하는 그룹 통신을 제공할 수 있다.
이상 도면 및 실시예를 참조하여 설명하였지만, 본 발명의 보호범위가 상기 도면 또는 실시예에 의해 한정되는 것을 의미하지는 않으며 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (6)

  1. MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 장치에 있어서,
    상기 패킷의 MMT 패키지에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스(reference)인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 장치.

  2. 제 1 항에 있어서,
    상기 MMT 패키지의 전송 특성 정보(Transport Characteristics Information)에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 ID 정보, 전송시에 수용 가능한 최대한의 딜레이(delay)를 지시하는 최대 딜레이 수용 한도 및 전송 실패시 재전송 방법과 관련된 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 장치.
  3. MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 장치에 있어서,
    상기 MMT 패킷의 헤더 또는 MMT 페이로드 중 어느 하나에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스(reference)인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 장치.
  4. MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 방법에 있어서,
    상기 패킷의 MMT 패키지에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스(reference)인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 방법.
  5. 제 4 항에 있어서,
    상기 MMT 패키지의 전송 특성 정보(Transport Characteristics Information)에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 ID 정보, 전송시에 수용 가능한 최대한의 딜레이(delay)를 지시하는 최대 딜레이 수용 한도 및 전송 실패시 재전송 방법과 관련된 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 방법.
  6. MMT(MPEG Media Transport) 시스템 기반의 미디어 전송 서비스에서 시간 동기화를 유지하면서 그룹 통신을 하기 위한 패킷 생성 방법에 있어서,
    상기 MMT 패킷의 헤더 또는 MMT 페이로드 중 어느 하나에 상기 그룹 통신을 지원하는지 지시하는 그룹 통신 지시자, 상기 그룹 통신의 참여자의 수를 나타내는 그룹 통신 참여자 정보, 상기 그룹 통신의 형태(formation)를 지시하는 그룹 통신 형태 정보, 해당 유저(user)가 레퍼런스(reference)인지 알려주는 레퍼런스 지시자 및 상기 레퍼런스와의 위치 관계를 나타내는 위치 정보 중 적어도 어느 하나를 포함하여 상기 패킷을 생성하는 것을 특징으로 하는 그룹 통신을 지원할 수 있는 MPEG 미디어 전송 시스템에서의 패킷 생성 방법.
KR1020110124606A 2011-11-25 2011-11-25 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법 KR20130058541A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110124606A KR20130058541A (ko) 2011-11-25 2011-11-25 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110124606A KR20130058541A (ko) 2011-11-25 2011-11-25 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20130058541A true KR20130058541A (ko) 2013-06-04

Family

ID=48857786

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110124606A KR20130058541A (ko) 2011-11-25 2011-11-25 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20130058541A (ko)

Similar Documents

Publication Publication Date Title
KR101866159B1 (ko) 단일 포트 또는 다중 포트에서 미디어 콘텐츠 전송 방법 및 장치
KR101501347B1 (ko) 멀티미디어 시스템에서 미디어 컨텐츠 전송 방법
US9043849B2 (en) Method for linking MMT media and DASH media
KR101972951B1 (ko) 오버헤드를 최소화한 헤더를 가지는 패킷 기반의 미디어 데이터 전송 방법
US9967582B2 (en) Hybrid delivery method and reception method for MMT packaged SVC video contents
EP2784953A1 (en) Method for hybrid delivery of mmt pakcage and content and method for receiving content
KR20130126538A (ko) Mmt 패킷 포맷 확장을 통한 하이브리드 전송 방법
KR20130040090A (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
KR102170717B1 (ko) 멀티미디어 서비스를 위한 비트 에러율을 이용한 레이트 어댑테이션 방법 및 그 장치
KR20140095445A (ko) 유연한 mmt 애셋 송수신 방법 및 그 장치
WO2007045140A1 (fr) Methode en temps reel pour transferer des donnees multimedia
KR20140042719A (ko) 교차 계층 최적화를 사용한 fec 패리티 데이터의 적응적 전송 방법
KR20190018142A (ko) Mmt 전송 패킷의 설정 방법 및 전송 방법
KR20140051493A (ko) 복합 멀티미디어 데이터를 전송하기 위한 데이터 패킷을 송수신하는 방법 및 장치
CN104025605A (zh) 用于多媒体内容的复用流传输的系统和方法
KR20130058541A (ko) 그룹 통신을 지원할 수 있는 mpeg 미디어 전송 시스템에서의 패킷 생성 장치 및 방법
KR101983045B1 (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
KR101955690B1 (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
KR20120100799A (ko) 미디어 데이터의 제공을 위한 인터페이스 및 미디어 데이터 제공 방법
KR101855327B1 (ko) 복합 네트워크에서 멀티미디어 데이터를 전송하기 위한 장치 및 그 방법
KR20130058539A (ko) 하이브리드 전송시 동기화 방법
KR20130058540A (ko) 하이브리드 전송시 동기화 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
N231 Notification of change of applicant
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid