KR102274520B1 - Mpeg 데이터를 처리하는 방법 및 시스템 - Google Patents

Mpeg 데이터를 처리하는 방법 및 시스템 Download PDF

Info

Publication number
KR102274520B1
KR102274520B1 KR1020200103444A KR20200103444A KR102274520B1 KR 102274520 B1 KR102274520 B1 KR 102274520B1 KR 1020200103444 A KR1020200103444 A KR 1020200103444A KR 20200103444 A KR20200103444 A KR 20200103444A KR 102274520 B1 KR102274520 B1 KR 102274520B1
Authority
KR
South Korea
Prior art keywords
mfu
mpu
flag
present
duration
Prior art date
Application number
KR1020200103444A
Other languages
English (en)
Other versions
KR20200101889A (ko
Inventor
이진영
윤국진
정원식
허남호
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20200101889A publication Critical patent/KR20200101889A/ko
Priority to KR1020210086473A priority Critical patent/KR20210084412A/ko
Application granted granted Critical
Publication of KR102274520B1 publication Critical patent/KR102274520B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343Extraction or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

MPEG 데이터를 처리하는 방법은 캡슐화 및 패킷화를 포함하는 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 적어도 하나의 억세스 유닛(Access Unit)을 획득하는 단계; 해당 MPU(Media Processing Unit)에서 상기 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한지 여부를 나타내는 듀레이션 플래그를 결정하는 단계; 및 상기 듀레이션 플래그를 상기 해당 MPU의 헤더에 삽입하는 단계를 포함한다.

Description

MPEG 데이터를 처리하는 방법 및 시스템{METHOD AND SYSTEM FOR PROCESSING MPEG DATA}
본 발명은 MPEG 데이터를 처리하는 시스템 및 그 방법에 관한 것으로, 보다 구체적으로, 캡슐화 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 억세스 유닛(Access Unit)으로부터, 개선된 MPU(Media Processing Unit) 및 MFU(Media Fragment Unit)를 설정하여 MPEG 데이터를 처리하는 기술에 관한 것이다.
MPEG 데이터를 처리하는 기술은 일반적인 변환 포맷을 제공하는 MMT(MPEG Media Transport) 시스템을 이용하여 MPEG 데이터를 처리하는 기술로써, MMT 시스템은 MMT ASSET의 포맷을 이용하여 MPEG 데이터를 처리할 수 있다.
본 발명의 실시예들은 캡슐화 처리를 통하여 코딩된 미디어 데이터를 포함하는 억세스 유닛으로부터, 개선된 MPU 및 MFU를 설정하여 MPEG 데이터를 처리하는 방법, 장치 및 시스템을 제공한다.
또한, 본 발명의 실시예들은 MPEG 데이터를 처리하는 과정에서, MPU 및 MFU의 헤더에 특정 플래그(flag)를 삽입하여 MPEG 데이터를 송신하는 방법, 장치 및 시스템을 제공한다.
또한, 본 발명의 실시예들은 MPEG 데이터를 처리하는 과정에서, MPU 및 MFU의 헤더에 포함된 특정 플래그를 추출하여 MPEG 데이터를 수신하는 방법, 장치 및 시스템을 제공한다.
본 발명의 일실시예에 따른 MPEG 데이터를 처리하는 방법은 캡슐화 및 패킷화를 포함하는 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 적어도 하나의 억세스 유닛(Access Unit)을 획득하는 단계; 상기 적어도 하나의 억세스 유닛을 그룹화하여 적어도 하나의 MPU를 생성하는 단계; 상기 적어도 하나의 MPU(Media Processing Unit)에서 상기 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한지 여부를 나타내는 듀레이션 플래그를 결정하는 단계; 및 상기 듀레이션 플래그를 상기 적어도 하나의 MPU의 헤더에 삽입하는 단계를 포함한다.
상기 듀레이션 플래그를 결정하는 단계는 상기 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한 경우, 상기 듀레이션 플래그를 1로 설정하는 단계를 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MPU에서 상기 적어도 하나의 억세스 유닛의 디폴트 듀레이션이 유효한지 여부를 나타내는 디폴트 듀레이션 플래그를 결정하는 단계; 및 상기 디폴트 듀레이션 플래그를 상기 적어도 하나의 MPU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
상기 디폴트 듀레이션 플래그를 결정하는 단계는 상기 적어도 하나의 억세스 유닛의 디폴트 듀레이션이 유효한 경우, 상기 디폴트 듀레이션 플래그를 1로 설정하는 단계를 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MPU에서 상기 적어도 하나의 억세스 유닛의 디폴트 프레젠테이션 듀레이션을 나타내는 디폴트 듀레이션을 결정하는 단계; 및 상기 디폴트 듀레이션을 상기 적어도 하나의 MPU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MPU에서 상기 적어도 하나의 억세스 유닛의 프레젠테이션 듀레이션을 나타내는 듀레이션을 결정하는 단계; 및 상기 듀레이션을 상기 적어도 하나의 MPU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
본 발명의 일실시예에 따른 MPEG 데이터를 처리하는 방법은 적어도 하나의 MPU를 수신하는 단계; 상기 적어도 하나의 MPU의 헤더에 포함된 듀레이션 플래그를 추출하는 단계; 상기 듀레이션 플래그를 기초로 상기 적어도 하나의 MPU에 포함된 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한지 여부를 판단하는 단계; 및 상기 판단 결과에 기초하여 상기 적어도 하나의 MPU를 처리하는 단계를 포함한다.
본 발명의 일실시예에 따른 MPEG 데이터를 처리하는 방법은 캡슐화 및 패킷화를 포함하는 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 적어도 하나의 억세스 유닛(Access Unit)을 획득하는 단계; 상기 적어도 하나의 억세스 유닛을 조각화하여 적어도 하나의 MFU(Media Fragment Unit)를 생성하는 단계; 상기 적어도 하나의 MFU에서 상기 적어도 하나의 MFU의 우선순위(Priority) 정보가 유효한지 여부를 나타내는 우선순위 프레젠트(Present) 플래그를 결정하는 단계; 및 상기 우선순위 프레젠트 플래그를 상기 적어도 하나의 MFU의 헤더에 삽입하는 단계를 포함한다.
상기 우선순위 프레젠트 플래그를 결정하는 단계는 상기 적어도 하나의 MFU의 우선순위 정보가 유효한 경우, 상기 우선순위 프레젠트 플래그를 1로 설정하는 단계를 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MFU에서 상기 적어도 하나의 억세스 유닛의 시작 MFU를 나타내는 스타트 플래그를 결정하는 단계; 및 상기 스타트 플래그를 상기 적어도 하나의 MFU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
상기 스타트 플래그를 결정하는 단계는 상기 적어도 하나의 MFU가 상기 적어도 하나의 억세스 유닛의 시작 MFU일 경우, 상기 스타트 플래그를 1로 설정하는 단계를 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MFU에서 상기 적어도 하나의 MFU의 전송 순서가 유효한지 여부를 나타내는 전송 순서 프레젠트 플래그를 결정하는 단계; 및 상기 전송 순서 프레젠트 플래그를 상기 적어도 하나의 MFU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
상기 전송 순서 프레젠트 플래그를 결정하는 단계는 상기 적어도 하나의 MFU의 전송 순서가 유효한 경우, 상기 전송 순서 프레젠트 플래그를 1로 설정하는 단계를 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MFU에서, 상기 적어도 하나의 MFU를 제외한 나머지 MFU들로부터 상기 적어도 하나의 MFU의 상대적인 우선순위를 지정하는 우선순위를 결정하는 단계; 및 상기 우선순위를 상기 적어도 하나의 MFU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
상기 MPEG 데이터를 처리하는 방법은 상기 적어도 하나의 MFU에서, 상기 적어도 하나의 MFU를 제외한 나머지 MFU들로부터 상기 적어도 하나의 MFU의 상대적인 전송 순서를 지정하는 전송 순서를 결정하는 단계; 및 상기 전송 순서를 상기 적어도 하나의 MFU의 헤더에 삽입하는 단계를 더 포함할 수 있다.
본 발명의 일실시예에 따른 MPEG 데이터를 처리하는 방법은 적어도 하나의 MFU를 수신하는 단계; 상기 적어도 하나의 MFU의 헤더에 포함된 우선순위 프레젠트(Present) 플래그를 추출하는 단계; 상기 우선순위 프레젠트 플래그를 기초로 상기 적어도 하나의 MFU에 포함된 상기 적어도 하나의 MFU의 우선순위 정보가 유효한지 여부를 판단하는 단계; 및 상기 판단 결과에 기초하여 상기 적어도 하나의 MFU를 처리하는 단계를 포함한다.
본 발명의 실시예들은 캡슐화 처리를 통하여 코딩된 미디어 데이터를 포함하는 억세스 유닛으로부터, 개선된 MPU 및 MFU를 설정하여 MPEG 데이터를 처리하는 방법, 장치 및 시스템을 제공할 수 있다.
또한, 본 발명의 실시예들은 MPEG 데이터를 처리하는 과정에서, MPU 및 MFU의 헤더에 특정 플래그(flag)를 삽입하여 MPEG 데이터를 송신하는 방법, 장치 및 시스템을 제공할 수 있다.
또한, 본 발명의 실시예들은 MPEG 데이터를 처리하는 과정에서, MPU 및 MFU의 헤더에 포함된 특정 플래그를 추출하여 MPEG 데이터를 수신하는 방법, 장치 및 시스템을 제공할 수 있다.
도 1은 MPU(Media Processing Unit) 및 MFU(Media Fragment Unit)를 나타낸 도면이다.
도 2는 억세스 유닛(Access Unit)을 조각화하여 획득한 MFU를 나타낸 도면이다.
도 3은 본 발명의 일실시예에 따른 MPU 패킷을 나타낸 도면이다.
도 4는 본 발명의 일실시예에 따른 MPU의 syntax를 나타낸 도면이다.
도 5는 본 발명의 일실시예에 따른 MFU 패킷을 나타낸 도면이다.
도 6은 본 발명의 일실시예에 따른 MFU의 syntax를 나타낸 도면이다.
도 7은 본 발명의 일실시예에 따른 송신 장치에서 MPU를 설정하여 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 8은 본 발명의 일실시예에 따른 수신 장치에서 MPU로 설정된 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 9는 본 발명의 일실시예에 따른 송신 장치에서 MFU를 설정하여 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 10은 본 발명의 일실시예에 따른 수신 장치에서 MFU로 설정된 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
이하, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 그러나, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. 또한, 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 MPU(Media Processing Unit) 및 MFU(Media Fragment Unit)를 나타낸 도면이다.
도 1을 참조하면, timed 미디어 데이터(111) 및 non-timed 미디어 데이터(121)는 MMT(MPEG Media Transport) ASSET의 포맷인 MPU 및 MFU로 설정되어 처리될 수 있다(110, 120).
여기서, MPU(118, 123)는 적어도 하나의 억세스 유닛(Access Unit), 적어도 하나의 MFU(119) 또는 non-timed 미디어 데이터(121)로부터 구성될 수 있고, 캡슐화 및 패킷화 처리된 데이터 포맷일 수 있다.
또한, MFU(119)는 억세스 유닛을 조각화하여 생성되거나, 단일 억세스 유닛으로부터 생성될 수 있고, 캡슐화 및 패킷화 처리된 데이터 포맷일 수 있다.
보다 구체적으로, timed 미디어 데이터의 처리(110)를 살펴보면, timed 미디어 데이터(111)는 캡슐화 처리를 통하여 코딩된 복수의 억세스 유닛들(113, 114, 115)으로 변환될 수 있다(112). 또한, 복수의 억세스 유닛들(113, 114, 115)은 MMT ASSET의 포맷인 MPU(118) 및 MFU(119)로 변환될 수 있다(116, 117). 여기서, MPU(118)는 복수의 억세스 유닛들(113, 114)이 그룹화되어 생성될 수 있고(116), MFU(119)는 단일 억세스 유닛(115)으로부터 생성될 수 있다(117). 이 때, MFU(119)는 단일 억세스 유닛(115)을 조각화하여 생성될 수 있다. 이에 대한 상세한 설명은 아래에서 기재하기로 한다.
non-timed 미디어 데이터의 처리(120)를 살펴보면, non-timed 미디어 데이터(121)는 MPU(123)로 변환될 수 있다(122).
도 2는 억세스 유닛(Access Unit)을 조각화하여 획득한 MFU를 나타낸 도면이다.
도 2를 참조하면, 복수의 MFU들(230, 240, 250)은 단일 억세스 유닛(210)을 조각화하여(220) 획득될 수 있다. 여기서, 복수의 MFU들(230, 240, 250) 각각은 독립적으로 사용될 수 있고, 각각 서로를 구별하는 식별자를 포함할 수 있으며, 단일 억세스 유닛 내의 복수의 MFU들(230, 240, 250) 사이의 관계 정보를 일반화하는 식별자를 포함할 수 있다.
위에서 상술한 MPU 및 MFU는 ISO/IEC JTC1/SC29/WG11 n12690에 명시된 "Working Draft of MPEG Media Transport" 및 ISO/IEC 23008에 명시된 "High efficiency coding and media delivery in heterogeneous environments"의 참고자료에 의해 정의될 수 있다.
도 3은 본 발명의 일실시예에 따른 MPU 패킷을 나타낸 도면이다.
도 3을 참조하면, MPU 패킷은 MPU 헤더(310) 및 MPU 페이로드(320)를 포함한다. 여기서, MPU 페이로드(320)에는 MPEG 데이터가 포함될 수 있고, MPU 헤더(310)에는 MPU의 길이, MPU 헤더의 길이, MPU 시퀀스 넘버, 억세스 유닛의 넘버, 듀레이션 플래그, 디폴트 듀레이션 플래그, 디폴트 듀레이션, 듀레이션, 프라이빗 헤더 플래그, 프라이빗 헤더 길이 및 프라이빗 헤더가 포함될 수 있다. 이에 대한 상세한 설명은 아래에서 기재하기로 한다.
도 4는 본 발명의 일실시예에 따른 MPU의 syntax를 나타낸 도면이다.
도 4를 참조하면, MPU의 헤더에는 MPU의 길이, MPU 헤더의 길이, MPU 시퀀스 넘버, 억세스 유닛의 넘버, 프라이빗 헤더 플래그, 프라이빗 헤더 길이, 프라이빗 헤더, 듀레이션 플래그(410), 디폴트 듀레이션 플래그(420), 디폴트 듀레이션(430) 및 듀레이션(440)이 포함될 수 있다.
여기서, 듀레이션 플래그(410)는 MPU에서 억세스 유닛의 듀레이션 정보가 유효한지 여부를 나타낼 수 있다. 이때, 듀레이션 플래그(410)는 억세스 유닛의 듀레이션 정보가 유효한 경우, 1의 비트 값으로 설정될 수 있다.
또한, 디폴트 듀레이션 플래그(420)는 MPU에서 억세스 유닛의 디폴트 듀레이션이 유효한지 여부를 나타낼 수 있다. 이 때, 디폴트 듀레이션 플래그(420)는 억세스 유닛의 디폴트 듀레이션이 유효한 경우, 1의 비트 값으로 설정될 수 있다.
또한, 디폴트 듀레이션(430)은 MPU에서 억세스 유닛의 디폴트 프레젠테이션 듀레이션을 나타낼 수 있다. 이 때, 디폴트 듀레이션(430)은 듀레이션 플래그(410)가 유효하고, 디폴트 듀레이션 플래그(420)가 유효한 경우, 설정될 수 있다.
또한, 듀레이션(440)은 MPU에서 억세스 유닛의 프레젠테이션 듀레이션을 나타낼 수 있다. 이 때, 듀레이션(440)은 듀레이션 플래그(410)가 유효하고, 디폴트 듀레이션 플래그(420)가 유효하지 않은 경우, 설정될 수 있다.
도 5는 본 발명의 일실시예에 따른 MFU 패킷을 나타낸 도면이다.
도 5를 참조하면, MFU 패킷은 MFU 헤더(510) 및 MFU 페이로드(520)를 포함한다. 여기서, MFU 페이로드(520)에는 MPEG 데이터가 포함될 수 있고, MFU 헤더(510)에는 MFU의 길이, MFU 헤더의 길이, 스타트 플래그, 우선순위 프레젠트 플래그, 전송 순서 프레젠트 플래그, 우선순위 및 전송 순서가 포함될 수 있다. 이에 대한 상세한 설명은 아래에서 기재하기로 한다.
도 6은 본 발명의 일실시예에 따른 MFU의 syntax를 나타낸 도면이다.
도 6을 참조하면, MFU의 헤더에는 MFU의 길이, MFU 헤더의 길이, 스타트 플래그(610), 우선순위 프레젠트 플래그(620), 전송 순서 프레젠트 플래그(630), 우선순위(640) 및 전송 순서(660)가 포함될 수 있다.
여기서, 우선순위 프레젠트 플래그(620)는 MFU에서 MFU의 우선순위 정보가 유효한지 여부를 나타낼 수 있다. 이때, 우선순위 프레젠트 플래그(620)는 MFU의 우선순위 정보가 유효한 경우, 1의 비트 값으로 설정될 수 있고, 단일 억세스 유닛 뿐만 아니라, 복수의 억세스 유닛들 각각의 MFU들에 대해서도 고려될 수 있다.
또한, 스타트 플래그(610)는 MFU에서 억세스 유닛의 시작 MFU를 나타낼 수 있다. 이 때, 스타트 플래그(610)는 해당 MFU가 억세스 유닛의 시작 MFU일 경우, 1의 비트 값으로 설정될 수 있고, 해당 억세스 유닛의 시작 MFU를 나타낼 뿐만 아니라, 이전 억세스 유닛의 마지막 MFU의 종료를 나타낼 수 있다.
또한, 전송 순서 프레젠트 플래그(630)는 MFU에서 MFU의 전송 순서가 유효한지 여부를 나타낼 수 있다. 이 때, MFU의 전송 순서가 유효한 경우, 1의 비트 값으로 설정될 수 있다.
기존의 MFU의 헤더에는 의존 카운터(650)가 포함될 수 있다. 이 때, 의존 카운터(650)는 단일 억세스 유닛 내의 해당 MFU에 의존하는 나머지 MFU의 넘버들을 명시할 수 있다. 그러나, 의존 카운터(650)의 사용은 신호 값과 남아 있는 MFU들의 불일치를 발생시킴으로써, 나머지 MFU들과 해당 MFU 사이의 우선순위의 불명확을 야기할 수 있다. 따라서, 본 발명의 실시예에 따른 방법은 의존 카운터(650) 대신에 우선순위(640)를 제안한다.
우선순위(640)는 MFU에서 해당 MFU를 제외한 나머지 MFU들로부터 해당 MFU의 상대적인 우선순위를 지정할 수 있다. 이 때, 우선순위(640)는 우선순위 프레젠트 플래그(620)가 유효한 경우, 설정될 수 있다.
또한, 전송 순서(660)는 MFU에서 해당 MFU를 제외한 나머지 MFU들로부터 해당 MFU의 상대적인 전송 순서를 지정할 수 있다. 이 때, 전송 순서(660)는 전송 순서 프레젠트 플래그(630)가 유효한 경우, 설정될 수 있다. 또한, 전송 순서(660)는 단일 억세스 유닛 내에서 복수의 MFU들 각각의 디코딩 순서를 의미할 수 있다.
도 7은 본 발명의 일실시예에 따른 송신 장치에서 MPU를 설정하여 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 7을 참조하면, 본 발명의 실시예에 따른 방법은 캡슐화 및 패킷화를 포함하는 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 적어도 하나의 억세스 유닛(Access Unit)을 획득한다(710).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 억세스 유닛을 그룹화하여 적어도 하나의 MPU를 생성한다(720).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU(Media Processing Unit)에서 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한지 여부를 나타내는 듀레이션 플래그를 결정한다(730). 이 때, 듀레이션 플래그를 결정하는 과정은 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한 경우, 듀레이션 플래그를 1로 설정하는 과정을 포함할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 듀레이션 플래그를 적어도 하나의 MPU의 헤더에 삽입한다(740).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU에서 적어도 하나의 억세스 유닛의 디폴트 듀레이션이 유효한지 여부를 나타내는 디폴트 듀레이션 플래그를 결정하고, 디폴트 듀레이션 플래그를 적어도 하나의 MPU의 헤더에 삽입할 수 있다. 이 때, 디폴트 듀레이션 플래그를 결정하는 과정은 적어도 하나의 억세스 유닛의 디폴트 듀레이션이 유효한 경우, 디폴트 듀레이션 플래그를 1로 설정하는 과정을 포함할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU에서 적어도 하나의 억세스 유닛의 디폴트 프레젠테이션 듀레이션을 나타내는 디폴트 듀레이션을 결정하고, 디폴트 듀레이션을 적어도 하나의 MPU의 헤더에 삽입할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU에서 적어도 하나의 억세스 유닛의 프레젠테이션 듀레이션을 나타내는 듀레이션을 결정하고, 듀레이션을 적어도 하나의 MPU의 헤더에 삽입할 수 있다.
도 8은 본 발명의 일실시예에 따른 수신 장치에서 MPU로 설정된 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 8을 참조하면, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU를 수신한다(810).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MPU의 헤더에 포함된 듀레이션 플래그를 추출한다(820).
또한, 본 발명의 실시예에 따른 방법은 듀레이션 플래그를 기초로 적어도 하나의 MPU에 포함된 적어도 하나의 억세스 유닛의 듀레이션 정보가 유효한지 여부를 판단한다(830).
또한, 본 발명의 실시예에 따른 방법은 판단 결과에 기초하여 적어도 하나의 MPU를 처리한다(840).
도 9는 본 발명의 일실시예에 따른 송신 장치에서 MFU를 설정하여 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 9를 참조하면, 본 발명의 실시예에 따른 방법은 캡슐화 및 패킷화를 포함하는 처리를 통하여 코딩된(coded) 미디어 데이터를 포함하는 적어도 하나의 억세스 유닛(Access Unit)을 획득한다(910).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 억세스 유닛을 조각화하여 적어도 하나의 MFU(Media Fragment Unit)를 생성한다(920).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU에서 적어도 하나의 MFU의 우선순위(Priority) 정보가 유효한지 여부를 나타내는 우선순위 프레젠트(Present) 플래그를 결정한다(930). 이 때, 우선순위 프레젠트 플래그를 결정하는 과정은 적어도 하나의 MFU의 우선순위 정보가 유효한 경우, 우선순위 프레젠트 플래그를 1로 설정하는 과정을 포함할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 우선순위 프레젠트 플래그를 적어도 하나의 MFU의 헤더에 삽입한다(940).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU에서 적어도 하나의 억세스 유닛의 시작 MFU를 나타내는 스타트 플래그를 결정하고, 스타트 플래그를 적어도 하나의 MFU의 헤더에 삽입할 수 있다. 이 때, 스타트 플래그를 결정하는 과정은 적어도 하나의 MFU가 적어도 하나의 억세스 유닛의 시작 MFU일 경우, 스타트 플래그를 1로 설정하는 과정을 포함할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU에서 적어도 하나의 MFU의 전송 순서가 유효한지 여부를 나타내는 전송 순서 프레젠트 플래그를 결정하고, 전송 순서 프레젠트 플래그를 적어도 하나의 MFU의 헤더에 삽입할 수 있다. 이 때, 전송 순서 프레젠트 플래그를 결정하는 과정은 적어도 하나의 MFU의 전송 순서가 유효한 경우, 전송 순서 프레젠트 플래그를 1로 설정하는 과정을 포함할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU에서, 적어도 하나의 MFU를 제외한 나머지 MFU들로부터 적어도 하나의 MFU의 상대적인 우선순위를 지정하는 우선순위를 결정하고, 우선순위를 적어도 하나의 MFU의 헤더에 삽입할 수 있다.
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU에서, 적어도 하나의 MFU를 제외한 나머지 MFU들로부터 적어도 하나의 MFU의 상대적인 전송 순서를 지정하는 전송 순서를 결정하고, 전송 순서를 적어도 하나의 MFU의 헤더에 삽입할 수 있다.
도 10은 본 발명의 일실시예에 따른 수신 장치에서 MFU로 설정된 MPEG 데이터를 처리하는 방법을 나타낸 플로우 차트이다.
도 10을 참조하면, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU를 수신한다(1010).
또한, 본 발명의 실시예에 따른 방법은 적어도 하나의 MFU의 헤더에 포함된 우선순위 프레젠트 플래그를 추출한다(1020).
또한, 본 발명의 실시예에 따른 방법은 우선순위 프레젠트 플래그를 기초로 적어도 하나의 MFU에 포함된 적어도 하나의 MFU의 우선순위 정보가 유효한지 여부를 판단한다(1030).
또한, 본 발명의 실시예에 따른 방법은 판단 결과에 기초하여 적어도 하나의 MFU를 처리한다(1040).
이상에서 설명된 장치는 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPA(field programmable array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 실시예와 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (10)

  1. 미디어 데이터를 처리하는 방법에 있어서,
    미디어 프래그먼트 유닛(MFU)을 식별하는 단계;
    상기 미디어 프래그먼트 유닛과 관련된 정보를 미디어 프래그먼트 유닛과 함께 제공하는 단계
    를 포함하고,
    상기 미디어 프래그먼트 유닛과 관련된 정보는,
    의존 카운터, 디코딩 순서, 스타트 플래그 및 전송 순서를 포함하는 미디어 데이터를 처리하는 방법.
  2. 삭제
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 삭제
  9. 삭제
  10. 컴퓨터로 판독 가능한 기록 매체에 있어서,
    상기 기록 매체는,
    미디어 프래그먼트 유닛 및 미디어 프래그먼트 유닛과 관련된 정보가 기록되고,
    상기 미디어 프래그먼트 유닛과 관련된 정보는, 의존 카운터, 디코딩 순서, 스타트 플래그 및 전송 순서를 포함하는 컴퓨터로 판독 가능한 기록 매체.
KR1020200103444A 2012-07-11 2020-08-18 Mpeg 데이터를 처리하는 방법 및 시스템 KR102274520B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210086473A KR20210084412A (ko) 2012-07-11 2021-07-01 Mpeg 데이터를 처리하는 방법 및 시스템

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261670354P 2012-07-11 2012-07-11
US61/670,354 2012-07-11
US201261711453P 2012-10-09 2012-10-09
US61/711,453 2012-10-09
KR1020130080839A KR102147475B1 (ko) 2012-07-11 2013-07-10 Mpeg 데이터를 처리하는 방법 및 시스템

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020130080839A Division KR102147475B1 (ko) 2012-07-11 2013-07-10 Mpeg 데이터를 처리하는 방법 및 시스템

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020210086473A Division KR20210084412A (ko) 2012-07-11 2021-07-01 Mpeg 데이터를 처리하는 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20200101889A KR20200101889A (ko) 2020-08-28
KR102274520B1 true KR102274520B1 (ko) 2021-07-08

Family

ID=50142640

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020130080839A KR102147475B1 (ko) 2012-07-11 2013-07-10 Mpeg 데이터를 처리하는 방법 및 시스템
KR1020200103444A KR102274520B1 (ko) 2012-07-11 2020-08-18 Mpeg 데이터를 처리하는 방법 및 시스템
KR1020210086473A KR20210084412A (ko) 2012-07-11 2021-07-01 Mpeg 데이터를 처리하는 방법 및 시스템

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020130080839A KR102147475B1 (ko) 2012-07-11 2013-07-10 Mpeg 데이터를 처리하는 방법 및 시스템

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020210086473A KR20210084412A (ko) 2012-07-11 2021-07-01 Mpeg 데이터를 처리하는 방법 및 시스템

Country Status (2)

Country Link
US (3) US9936232B2 (ko)
KR (3) KR102147475B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9729903B2 (en) * 2013-12-31 2017-08-08 Samsung Electronics Co., Ltd. Data transmitting device and method
CN105491394B (zh) 2014-09-17 2020-05-15 北京三星通信技术研究有限公司 发送mmt包的方法及装置、接收mmt包的方法
US20180107829A1 (en) * 2016-10-14 2018-04-19 Electronics And Telecommunications Research Institute Network entity and operation method of the same

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6172990B1 (en) * 1997-06-19 2001-01-09 Xaqti Corporation Media access control micro-RISC stream processor and method for implementing the same
JP3380763B2 (ja) 1998-01-23 2003-02-24 松下電器産業株式会社 画像処理方法
WO2000046803A1 (fr) * 1999-02-05 2000-08-10 Kabushiki Kaisha Toshiba Procede permettant de creer des trains de donnees et procede permettant d'effectuer des suppressions partielles
WO2004036840A1 (ja) * 2002-10-17 2004-04-29 Matsushita Electric Industrial Co., Ltd. パケット送受信装置
US20060184790A1 (en) * 2004-03-26 2006-08-17 Microsoft Corporation Protecting elementary stream content
EP1882343B1 (en) * 2005-05-13 2019-05-01 Qualcomm Incorporated Improving error resilience using out of band directory information
KR100809298B1 (ko) 2006-06-22 2008-03-04 삼성전자주식회사 플래그 인코딩 방법, 플래그 디코딩 방법, 및 상기 방법을이용한 장치
US20080040498A1 (en) * 2006-08-10 2008-02-14 Nokia Corporation System and method of XML based content fragmentation for rich media streaming
KR101345544B1 (ko) 2007-06-25 2013-12-26 세종대학교산학협력단 기본시점 복호 및 시점 임의 접근을 지원하기 위한 다시점비디오 부호화 시스템, 복호화 시스템 및 비트스트림 추출시스템
BRPI0818444A2 (pt) 2007-10-12 2016-10-11 Qualcomm Inc codificação adaptativa de informação de cabeçalho de bloco de vídeo
US9705935B2 (en) * 2008-01-14 2017-07-11 Qualcomm Incorporated Efficient interworking between circuit-switched and packet-switched multimedia services
US7787496B1 (en) * 2008-03-03 2010-08-31 Sprint Communications Company L.P. Packet fragmentation techniques for multiple T-1 lines
US9281847B2 (en) * 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
JP4676579B2 (ja) 2009-07-10 2011-04-27 パナソニック株式会社 記録媒体、再生装置、及び集積回路
US20110088076A1 (en) * 2009-10-08 2011-04-14 Futurewei Technologies, Inc. System and Method for Media Adaptation
US9553912B2 (en) 2011-01-19 2017-01-24 Electronics And Telecommunications Research Institute Method and apparatus for transmitting media content via a single port or multiple ports
US20160119455A1 (en) * 2014-10-27 2016-04-28 Robert J. Stacey Wireless device, method, and computer readable media for fragmentation and aggregation with block acknowledgement in a wireless local-area network

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Information technology-High efficiency coding and media delivety in heterogeneous environments-Part 1: MPEG media transport(MMT), ISO/IEC JTC1/SC29/WG11/w13516, Incheon, Korea, 2013.04.*
Working Draft for MPEG Media Transport, ISO/IEC JTC1/SC29/WG11/N12690, Geneva, Switzerland, 2012.04.*

Also Published As

Publication number Publication date
KR20140009043A (ko) 2014-01-22
US20180124441A1 (en) 2018-05-03
US20150146798A1 (en) 2015-05-28
US11218744B2 (en) 2022-01-04
US9936232B2 (en) 2018-04-03
KR20200101889A (ko) 2020-08-28
US10178418B2 (en) 2019-01-08
KR102147475B1 (ko) 2020-08-26
KR20210084412A (ko) 2021-07-07
US20190141371A1 (en) 2019-05-09

Similar Documents

Publication Publication Date Title
KR102306741B1 (ko) Mpeg 데이터의 랜덤 억세스를 지원하는 방법 및 시스템
KR102274520B1 (ko) Mpeg 데이터를 처리하는 방법 및 시스템
KR20170114582A (ko) 영상처리장치 및 그 제어방법
KR100831186B1 (ko) 스트림 데이터 프로세서
BR112020004043A2 (pt) técnicas escaláveis para executar algoritmos personalizados em itens de mídia
US10013824B2 (en) Audio data parsing method
US11218748B2 (en) Method and system for supporting random access of MPEG data
US8804764B2 (en) Data path for data extraction from streaming data
KR102126018B1 (ko) 필드의 위치 정보를 포함하는 패킷을 처리하는 송, 수신 노드의 동작 방법 및 필드의 위치 정보를 포함하는 패킷
US20160353128A1 (en) Decoding of intra-predicted images
KR101349487B1 (ko) 패킷의 길이가 가변적인 mpeg-2 트랜스포트 패킷 생성 장치 및 방법
KR102153554B1 (ko) 미디어 데이터의 처리를 위한 mmt 장치 및 방법
TW201721403A (zh) 記憶體系統協定中提供檔案資訊之系統及方法
EP4011089A1 (en) Media systems and methods including mixed event message tracks
CN116896642A (zh) 一种视频加密方法、装置、设备以及存储介质
CN111064717A (zh) 数据编码方法、数据解码方法以及相关终端、装置
KR102260089B1 (ko) 엠펙 미디어 트랜스포트 프로토콜 패킷의 처리 방법 및 장치
KR101489587B1 (ko) 미디어 클라우드 서비스를 위한 가상 프레임워크
WO2014010955A1 (ko) Mpeg 데이터를 처리하는 방법 및 시스템
CN115618027A (zh) 一种数据处理方法、装置、计算机及可读存储介质
JP2011072030A (ja) ストリームデータ通信方法及びストリームデータ通信装置

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent