KR100991803B1 - Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말 - Google Patents

Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말 Download PDF

Info

Publication number
KR100991803B1
KR100991803B1 KR1020090078860A KR20090078860A KR100991803B1 KR 100991803 B1 KR100991803 B1 KR 100991803B1 KR 1020090078860 A KR1020090078860 A KR 1020090078860A KR 20090078860 A KR20090078860 A KR 20090078860A KR 100991803 B1 KR100991803 B1 KR 100991803B1
Authority
KR
South Korea
Prior art keywords
layer packet
synchronization layer
information
saf
user terminal
Prior art date
Application number
KR1020090078860A
Other languages
English (en)
Other versions
KR20090110811A (ko
Inventor
정예선
정원식
차지훈
김규헌
임영권
Original Assignee
주식회사 넷앤티비
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 넷앤티비, 한국전자통신연구원 filed Critical 주식회사 넷앤티비
Priority to KR1020090078860A priority Critical patent/KR100991803B1/ko
Publication of KR20090110811A publication Critical patent/KR20090110811A/ko
Application granted granted Critical
Publication of KR100991803B1 publication Critical patent/KR100991803B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4345Extraction or processing of SI, e.g. extracting service information from an MPEG stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348Demultiplexing of additional data and video streams
    • H04N21/4349Demultiplexing of additional data and video streams by extracting from data carousels, e.g. extraction of software modules from a DVB carousel

Abstract

본 발명은 장면 기술 요소 스트림을 포함하는 다양한 요소 스트림을 다중화하는 SAF 동기화 계층 패킷 구조로서, 상기 SAF 동기화 계층 패킷 구조는 SAF 동기화 계층 패킷 헤더와 SAF 동기화 계층 패킷 페이로드로 구성되되, 상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 접근 단위와 관련된 시간 정보를 포함하고, 상기 SAF 동기화 계층 패킷 페이로드는 상기 접근 단위에 대한 헤더 정보 및 상기 접근 단위를 나타내는 페이로드 정보를 포함한다.
본 발명에 따르면, 다양한 요소 스트림들을 간단하고 효과적으로 다중화하여 하나의 데이터 스트림을 구성할 수 있으며, 동기화된 전송이 가능하다. 또한, 본 발명에 따르면, 엠펙-4 시스템의 동기화 계층 패킷을 수용하기 때문에 손쉽게 엠펙-4 시스템과의 통합을 가능하게 하며, 접근 단위 개념 혹은 디그라데이션 우선도와 같은 엠펙-4 동기화 계층 패킷의 장점을 그대로 사용할 수 있다.
SAF, LASeR, 엠펙4

Description

SAF 동기화 계층 패킷 구조를 제공하는 SAF 동기화 계층 패킷 제공 시스템 및 사용자 단말{System For Providing SAF Synchronization Layer Packet Structure and User Terminal}
본 발명은 SAF 동기화 계층 패킷 구조에 관한 것이다.
MPEG-4 시스템 표준은 객체 단위로 구성되는 다양한 멀티미디어의 자유로운 표현과 사용자와의 상호작용을 위해서 장면 기술 표준인 BIFS (BInary Format for Scene)를 포함하고 있다. 이는 3차원 모델을 표현하는 표준인 VRML (Virtual Reality Modeling Languages)을 수정, 보완하고 전송시의 효율을 높이기 위하여 텍스트 기반이던 것을 바이너리화한 것이다. 최초 표준 제정 당시 BIFS의 주요한 응용 분야는 EPG (Electronic Program Guide)와 같은 방송용 양방향 응용이나 게임이나 포털 사이트와 같은 인터넷 응용이었다. 그러나, 이러한 분야의 시장은 현재 각 분야에 특화된 표준 기술들이 대부분 장악하고 있는 상황으로 BIFS가 응용된 사례는 거의 없다.
이에 따라 최근 들어 모바일 단말에서의 애니메이션 서비스가 BIFS의 새로운 활용 분야로 거론되고 있다. 모바일 단말에서의 애니메이션 서비스를 위한 기술로는 SVG (Scalable Vector Graphics)가 존재하며, W3C를 통해 표준화되어 3GPP등에서 모바일의 표준으로 사용되고 있다. 또한, 국내 이동 통신사의 경우, 인터넷에서 널리 활용되고 있는 기술인 플래시(Flash) 기반의 서비스를 준비하고 있거나 일부 수행하고 있다.그러나 SVG는 텍스트 기반의 언어로 전송 및 저장시의 효율이 매우 낮고, 플래시의 경우는 특정 기업의 솔루션으로 추후 서비스가 솔루션에 종속 될 수 있는 우려가 있어서 장기적으로 활용되기 곤란하다는 문제점을 가지고 있다.
이 두가지 문제점을 적절히 해결해 줄 수 있는 BIFS기반의 애니메이션 기술이 대안으로 고려 되고 있으나, BIFS의 경우 모바일 응용을 주요한 응용 분야로 보지 않았기에 복잡도가 다소 높은 문제를 가지고 있다.
본 발명은 전술한 문제점을 해결하기 위한 것으로, LASeR와 같이 경량 미디어 응용 환경(예: 모바일 환경)의 장면을 표현하기 위한 장면 기술(scene description), 비디오(video), 오디오(audio), 이미지(image), 폰트(font), 메타데이터(metadata)와 같은 서로 다른 요소 스트림(Elementary Stream:ES)들을 간단하고 효과적으로 다중화하여 하나의 데이터 스트림으로 만들기 위한 구조를 제공한다. 여기서, LASeR (Lightweight Application ScenE Representation)는 BIFS의 기 능 중 모바일 응용에 주로 활용될 것으로 예상되는 단순한 2차원 애니메이션 콘텐츠를 표현하는데 필요한 노드들과 커맨드들을 사용하여 새로운 장면 표현을 정의하기 위한 것이다. 이때의 제한 사항은 모바일 단말에서 동작하는 프로그램이 필요로 하는 메모리의 크기를 50kb 내외로 줄일 수 있도록 하는 것과 복잡한 부동 소수점 연산을 필요로 하는 양자화 기술등을 단순화하여 성능 저하를 최소화 하면서 복잡도 요구 사항을 감소시키는 것이다.
본 발명은 장면 기술 요소 스트림을 포함하는 다양한 요소 스트림을 다중화하는 SAF(Simple Aggregation Format) 동기화 계층 패킷 구조로서, 상기 SAF 동기화 계층 패킷 구조는 SAF 동기화 계층 패킷 헤더와 SAF 동기화 계층 패킷 페이로드로 구성되되, 상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 접근 단위(Access Unit)와 관련된 시간 정보를 포함하고, 상기 SAF 동기화 계층 패킷 페이로드는 상기 접근 단위에 대한 헤더 정보 및 상기 접근 단위를 나타내는 페이로드 정보를 포함한다.
본 발명에 따르면, 접근 단위 타입 및 스트림 식별자 필드를 갖는 SAF 동기화 계층 패킷 구조에 의해 다양한 요소 스트림들을 간단하고 효과적으로 다중화하여 하나의 데이터 스트림을 구성할 수 있다. 또한, LASeR 장면 기술 요소 스트림과 비디오나 오디오와 같은 관련 요소 스트림이 하나의 스트림으로 전송되기 때문에 동기화된 전송이 가능하다. 또한, 본 발명에 따르면, 엠펙-4 시스템의 동기화 계층 패킷을 수용하기 때문에 손쉽게 엠펙-4 시스템과의 통합을 가능하게 하며, 접근 단위 개념 혹은 디그라데이션 우선도와 같은 엠펙-4 동기화 계층 패킷의 장점을 그대로 사용할 수 있다.
본 발명의 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 일실시예로서 LASeR와 관련된 실시예를 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 서버 및 사용자 단말 시스템의 구성도이다.
서버 시스템(10)은 LASeR 장면 인코더(1), SAF 인코더(3), 송신부(5)를 포함한다. LASeR 장면 인코더(1)은 장면에 대한 SVG(Scalable Vector Graphics) 파일 혹은 LASeR XML 파일을 입력받아 압축된 LASeR 장면 기술 요소 스트림을 생성한다. SAF 인코더(3)는 LASeR 장면 기술 요소 스트림과, LASeR 장면을 구성하는 비디오, 오디오, 이미지, 폰트, 혹은 메타데이터 요소 스트림 등 각각의 요소 스트 림(Elementary Stream)을 입력받은 후, 본 발명에서 제안하는 SAF(Simple Aggregation Format) 동기화 계층 패킷의 구조를 이용하여 하나의 데이터 스트림을 생성한다. 물론, SAF 인코더(3)는 각각의 요소 스트림을 입력받아 파일(예를들면, .lsr 파일) 형태로 출력할 수도 있다. 이렇게 생성된 데이터 스트림은 송신부(5)에 의해 IP, 무선 인터넷 혹은 CDMA망 등의 다양한 통신망을 통해 사용자 단말(20)로 전송된다.
사용자 단말(20)은 수신부(21), SAF 디코더(23), LASeR 장면 디코더(25), 렌더러(27)를 포함한다. SAF 디코더(23)는 수신부(21)에 의해 전송받은 데이터 스트림을 입력받아 LASeR 장면 기술, 비디오, 오디오, 이미지, 폰트, 혹은 메타데이터 요소 스트림 등을 생성한다. LASeR 장면 디코더(25)는 SAF 디코더(23)의 출력 중에서 LASeR 장면 기술 요소 스트림을 입력받아 SVG 파일 또는 LASeR XML 파일을 생성한다. 메모리(25)는 SAF 디코더(23)의 출력 중 LASeR 장면 기술 요소 스트림을 제외한 요소 스트림 즉, 비디오, 오디오, 이미지, 폰트, 혹은 메타데이터 요소 스트림 등을 저장한다. 렌더러(29)는 SVG 파일 또는 LASeR 파일을 입력받고, 또한 메모리(27)에 저장된 다양한 형태의 요소 스트림을 입력받아 데이터 처리하여 리치(rich) 미디어 데이터 서비스를 제공한다.
도 2는 본 발명에 따른 SAF 동기화 계층 패킷(SAF SL packet) 구조를 나타낸다. SAF 동기화 계층 패킷은 SAF 동기화 계층 패킷 헤더(SAF SL packet header)와 SAF 동기화 계층 패킷 페이로드(SAF SL packet payload)로 구성된다. SAF 동기화 계층 패킷 구조에 대한 코드는 다음과 같다.
class SAF_SL_Packet {
SAF_SL_PacketHeader slPacketHeader;
byte[slPacketHeader.accessUnitLength] slPacketPayload;
}
도 3은 본 발명에 따른 SAF 동기화 계층 패킷의 헤더 구조를 나타낸다. SAF 동기화 계층 패킷 헤더는 전송 중에 데이터 손실이 생겼을 경우에 대비하여 패킷의 연속성을 체크할 수 있는 방법을 제공하며, 시간 스탬프 및 이와 관련된 정보를 인코드된 표현으로 전달하는 방법을 제공한다. SAF 동기화 계층 패킷 헤더 구조에 대한 코드는 다음과 같다.
class SAF_SL_PacketHeader {
bit(1) accessUnitStartFlag;
bit(1) accessUnitEndFlag;
bit(14) packetSequenceNumber;
const bit(1) reserved=1;
bit(4) degradationPriority;
bit(1) randomAccessPointFlag;
const bit(1) reserved=0;
const bit(1) reserved=1;
bit(32) compositionTimeStamp;
uint(16) accessUnitLength;
}
SAF 동기화 계층 패킷 해더를 구성하는 각 필드(field)에 대해 설명하면 다음과 같다.
접근 단위 시작 플래그( accessUnitStartFlag ): 값이 1인 경우, 현재의 SAF 동기화 계층 패킷의 페이로드의 첫번째 바이트가 SAF 접근 단위(Access Unit)의 시작임을 나타낸다. 접근 단위란 임의의 시간에 표시되는 임의의 데이터를 의미한다. 예컨대, 비디오 데이터의 경우라면 한 개의 VOP를 하나의 접근단위로 할 수도 있으나, 이에 한정되지 아니한다.
접근 단위 끝 플래그( accessUnitEndFlag ): 값이 1인 경우, 현재의 동기화 계층 패킷의 페이로드의 마지막 바이트가 SAF 접근 단위(Access Unit)의 끝임을 나타낸다.
패킷 연속 번호( packetSequenceNumber ): 모듈로 카운터 (Modulo Counter)를 두어 동기화 계층 패킷화 되는 순서대로 일련 번호를 부여하며 이를 패킷 연속 번호라고 한다. 이 패킷 연속 번호를 SAF 디코더에서 체크하여 만약 이 값이 불연속적일 때는 하나 혹은 그 이상의 SAF 동기화 계층 패킷들이 분실된 경우로 간주한다. 이 경우 해당 에러는 동기화 계층 패킷을 소비하는 모듈 즉, 도1의 SAF 디코 더(23), LASER 장면 디코더(25) 또는 렌더러(29)에 알려진다.
디그라데이션 우선도( degradationPriority ): 현재의 SAF 동기화 계층 패킷을 구성하는 페이로드 내에 전달 되는 객체의 상대적인 중요도를 나타낸다. 이 정보는 전달된 객체의 우선도(graceful degradation)를 디코더에서 산정하는데 사용된다. 디코더가 장면의 모든 객체를 복호화 하기에 충분한 계산 능력(computational power)을 가지고 있지 않는 경우, 이 디그라데이션 우선도의 값을 바탕으로 각각의 객체에 대한 우선도의 값이 결정되는데, 상대적으로 디그라데이션 우선도 값이 낮아 질수록 객체에 대한 우선도 값은 증가 한다. 예를 들어 디그라데이션 우선도가 5인 동기화 계층 패킷 a 내의 객체에 대한 우선도보다 디그라데이션 우선도가 10인 동기화 계층 패킷 b내의 객체에 대한 우선도가 낮다.
임의의 접근 포인트 플래그( randomAccessPointFlag ): 값이 1인 경우 현재의 SAF 동기화 계층 패킷 페이로드로 전달되는 요소 스트림의 데이터가 임의로 접근 가능하다는 것을 나타낸다.
컴포지션 시간 스팸프 ( CompositionTimeStamp ): 동기화 계층 패킷 페이로드로 전달되는 객체들이 디코더에서 장면을 구성할 때 필요한 시간 정보를 나타낸다. 현재 동기화 계층 패킷이 전송하는 접근 단위의 첫번째 컴포지션 단위(Composition Unit)의 컴포지션 시간(tc)은 수학식1에 의해 현재 동기화 계층 패킷에 존재하는 컴포지션 시간 스탬프에 의해 산출된다.
tc = (compositionTimeStamp/1000 + k * 232/1000)
단, k는 컴포지션 시간 스탬프(CompositionTimeStamp) 카운터가 정해진 범위의 시간을 모두다 카운트한 횟수이다.
만약 두 개의 서로 다른 동기화 계층 패킷 페이로드로 전송되는 객체의 스트림 식별자(streamID)가 다른 경우라도, 이들 동기화 계층 패킷들의 컴포지션 시간 스탬프 값은 동일 할 수 있다.
접근 단위 길이( accessUnitLength ): SAF 패킷내 SAF 접근 단위의 길이를 나타내며 바이트 단위를 사용한다. SAF 접근 단위가 여러 개의 SAF 동기화 계층 패킷으로 나누어 졌을 경우, 접근 단위 길이 필드는 SAF 패킷의 프래그먼트 (fragment) 크기 정보를 전송한다. 따라서, 완전한 SAF 접근 단위의 전체 길이는 어떤 SAF 접근 단위의 프래그먼트를 전송하는 접근 단위 길이 필드의 값을 모두 더해서 알 수 있다.
도 4는 본 발명에 따른 SAF 동기화 계층 패킷의 페이로드 구조를 나타내며, 이에 대한 코드는 다음과 같다.
class safAU {
bit(4) accessUnitType;
bit(12) streamID;
byte(8)[slPacketHeader.accessUnitLength-2] payload;
}
접근 단위 타입( accessUnitType ): SAF 접근 단위를 구성하는 페이로드의 종류를 나타낸다. 각 접근 단위 타입의 값과 각 타입에 해당하는 데이터의 종류를 나타내는 도5에서와 같이, 접근 단위 타입은 단순 디코더 설정 기술자(SimpleDecoderConfigDescriptor), 스트림 끝(EndofStream), 요소 스트림 액세스 유닛(ES Access Unit), SAF세션 끝(EndOfSAFSession), 캐시 유닛(Cache Unit) 등일 수 있다.
스트림 식별자( streamID ): 현재의 접근 단위가 속한 요소 스트림을 가리키는 고유한 식별자 정보를 나타낸다. 예를 들어, 비디오 요소 스트림의 경우, 비디오 요소 스트림1,2,3…등이 될 수 있다.
페이로드 ( payload ): 접근 단위의 객체 데이터 부분으로서, 페이로드의 길이는 SAF 동기화 계층 헤더를 구성하는 접근 단위 길이(accessUnitLength) 필드 정보를 통해 알 수 있다. 페이로드 내의 데이터는 도5에서 정의 되듯이 접근 단위 타입에 의해 구분 된다.
예를 들어, 접근 단위 타입의 값이 0x01이나 0x02인 경우, 페이로드에 LASeR 장면 헤더(sceneHeader), 미디어 헤더(mediaHeader) 혹은 폰트 헤더(fontHeader) 등과 같이 단순 디코더 설정 기술자가 전달된다. 여기서 미디어 헤더는 비디오 헤 더나 오디오 헤더 또는 이미지 헤더를 포함한다.
접근 단위 타입의 값이 0x04인 경우, 페이로드에 LASeR 장면 단위(Scene Unit), 미디어 단위(Media Unit) 혹은 폰트 단위(Font Unit)를 포함하는 접근 단위(Access Unit, 도5의 “0x04” 참조)를 전송하며, 접근 단위 타입의 값이 0x06인 경우, 페이로드에 캐시 단위(Cache Unit)를 전송한다. 여기서, 미디어 단위는 비디오 단위나 오디오 단위 또는 이미지 단위를 포함한다.
도 6은 본 발명에 따른 SAF 동기화 계층 패킷 페이로드의 접근 단위 타입 값이 0x01,0x02일 때에 전송되는 단순 디코더 설정 기술자의 구성을 나타내며, 이에 대한 코드는 다음과 같다.
class SimpleDecoderConfigDescriptor {
bit(8) objectTypeIndication;
bit(8) streamType;
bit(16) bufferSizeDB;
SimpleDecoderSpecificInfo decSpecificInfo[0 .. 1];
}
단순 디코더 설정 기술자는 관련된 요소 스트림에 관하여 필요한 디코더 종류 및 요구되는 디코더 리소스들에 대한 정보들을 제공한다. 이 정보는 요소 스트 림을 받은 사용자 단말이 그 요소 스트림을 디코드 할 수 있는지 없는지를 결정하는데 필요하다. 스트림 타입(stream type)의 경우 스트림의 종류를 나타내고, 임의의 디코더 특정 정보 기술자가 현재의 계층의 스트림 특정 포맷에 대한 디코더를 준비하기 위한 스트림 특정 정보를 포함하고 있다.
객체 타입 표시( objectTypeIndication ): 엠펙-4 시스템 표준 스펙(ISO/IEC 14496-1)에 존재하는 객체 타입 표시(objectTypeIndication) 표에 따라 현재의 요소 스트림의 객체 또는 장면을 디코딩 하기 위해 필요한 디코더의 종류 정보를 나타낸다. 예를 들어 장면 기술 데이터인 경우 엠펙-4 시스템 버전 1 디코더가 필요한지 엠펙-4 시스템 버전 2 디코더가 필요한지 나타낸다.
스트림 타입( streamType ): 엠펙-4 시스템 표준 스펙(ISO/IEC 14496-1)에 정의된 스트림 타입 표에 따라 현재의 요소 스트림의 종류를 나타낸다. 예를 들어, 요소 스트림이 비디오 데이터인지 오디오 데이터인지를 구분한다.
버퍼 사이즈 데이터 바이트( bufferSizeDB ): 요소 스트림에 대한 디코딩 버퍼의 사이즈를 바이트 단위로 나타낸다.
특정 디코더 정보( decSpecificInfo ): 요소 스트림을 디코딩할 때 필요한 특정 정보들을 나타내는 필드로, 필요에 따라 여러 개의 배열 형태로 구성될 수 있다. 이 값은 스트림 타입에 따라 결정될 수 있다.
도 7은 본 발명에 따른 SAF 동기화 계층 패킷 페이로드 내의 접근 단위 타입이 0x06일 때에 전송되는 캐쉬 단위의 구성을 나타내며, 이에 대한 자세한 코드는 다음과 같다.
class cacheUnit {
bit(1) replace;
bit(1) permanent;
bit(6) reserved =0;
unit(16) urlLength;
byte(urlLength) url;
byte(SL_PacketHeader.accessUnitLength-urlLength-5] payload;
}
캐쉬 객체(Cache Object)는 캐쉬 단위 패킷(Cache Unit packet)의 페이로드를 구성하는 데이터로서, 유알엘(url)과 각종 요소 스트림 데이터를 전송한다. 만약 사용자 단말에서 유알엘을 요청하고 요청한 유알엘에 매칭되는 캐쉬 단위가 사용자 단말에 이미 존재한다면, 사용자 단말은 유알엘을 사용하여 서버에 데이터 조회를 요청하지 않고 사용자 단말에 이미 존재 하는 해당 데이터를 직접 로드 한다. 캐쉬 단위는 검색하자마자 메모리에 저장되고 항구적(permanent)이 될 수 있다. 캐쉬 객체는 수신 시각과 수신시각에 동기화 계층 패킷 헤더내의 컴포지션 시간 스탬프 필드에 나타난 초 단위의 시각을 더한 시각에 의해 정의된 기간 동안에 존재하며, 이 시간이 끝난 후에는 캐쉬 객체의 유효기간이 끝날 뿐만 아니라 해당 캐쉬 객체를 포함하는 SAF 콘텐츠를 실행 할 수 없다.
리플레이스 ( replace ): 값이 1인 경우, 동일한 유알엘에 대해 이전의 캐쉬 단위를 현재 동기화 계층 패킷 페이로드로 전송되는 캐쉬 단위로 바꾼다. 값이 0인 경우, 동일한 유알엘을 갖는 이전의 캐쉬 단위에 현재 동기화 계층 패킷 페이로드로 전송되는 캐쉬 단위가 부가된다.
퍼머넌드 ( permanent ): 값이 1인 경우, 사용자 단말의 리소스가 충분하다면 SAF 패킷의 컴포지션 시간 스탬프에 정의된 시간이 지난 후에도 현재의 캐쉬 단위는 사용자 단말에 유지된다.
유알엘 길이( urlLength ): 유알엘 데이터의 길이를 바이트 단위인 양의 정수로 나타낸다.
유알엘 ( url ): 페이로드 내에 전송되는 장면에 해당하는 유알엘 데이터를 나타낸다.
페이로드 ( payload ): 실제적인 데이터를 말하는 것으로 이 필드의 크기는 동기화 계층 패킷 헤더에 존재하는 접근 단위 길이로 알 수 있다. 특정 장면을 구성할 때, 접근 단위 타입이 0x06인 경우 페이로드 데이터는 현재의 장면 구성을 대체하고, 페이로드의 접근 단위 타입이 0x06이 아닌 경우 현재의 장면 구성에 부가된다.
이상과 같이, 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 이것에 의해 한정되지 않으며 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술 사상과 아래에 기재될 특허청구범위의 균등 범위 내에서 다양한 수정 및 변형이 가능함은 물론이다.
도 1은 본 발명의 일실시예에 따른 시스템 구성도이다.
도 2는 본 발명에 따른 SAF 동기화 계층 패킷의 구조도이다.
도 3은 본 발명에 따른 SAF 동기화 계층 패킷 헤더의 구조도이다.
도 4는 본 발명에 따른 SAF 동기화 계층 패킷 페이로드의 구조도이다.
도 5는 본 발명에 따른 SAF 동기화 계층 패킷 페이로드 내의 접근 단위 타입을 나타내는 도면이다.
도 6은 본 발명에 따른 SAF 동기화 계층 패킷 페이로드 내의 접근 단위 타입이 0x01, 0x02 일 때의 페이로드 구조도이다.
도 7은 본 발명에 따른 SAF 동기화 계층 패킷 페이로드 내의 접근 단위 타입이 0x06 일 때의 페이로드 구조도이다.

Claims (45)

  1. 장면 기술 요소 스트림을 포함하는 다양한 요소 스트림을 SAF(Simple Aggregration Format) 동기화 계층 패킷 구조를 이용하여 하나의 데이터 스트림이나 파일로 변환하는 SAF 인코딩부; 및
    상기 데이터 스트림이나 파일을 사용자 단말에 전송하는 송신부를 포함하는 SAF 동기화 계층 패킷 제공 시스템으로서,
    상기 SAF 동기화 계층 패킷 구조는 SAF 동기화 계층 패킷 헤더와 SAF 동기화 계층 패킷 페이로드로 구성되되,
    상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 접근 단위(Access Unit)와 관련된 시간 정보를 포함하고,
    상기 SAF 동기화 계층 패킷 페이로드는 상기 접근 단위에 대한 헤더 정보 및 상기 접근 단위를 나타내는 페이로드 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  2. 제1항에 있어서,
    SVG(Scalable Vector Graphics) 파일 또는 LASeR XML 파일을 입력받아 상기 장면 기술 요소 스트림을 생성하는 장면 인코딩부를 더 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  3. 제1항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷의 연속성 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  4. 제1항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 데이터가 임의로 접근 가능한지에 관한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  5. 제1항에 있어서,
    상기 시간 정보는 상기 접근 단위가 디코더에서 장면으로 구성될 때 필요한 시간 정보인
    SAF 동기화 계층 패킷 제공 시스템.
  6. 제1항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는 상기 접근 단위 길이에 관한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  7. 제1항에 있어서,
    상기 접근 단위에 대한 헤더 정보는 상기 접근 단위의 타입 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  8. 제1항에 있어서,
    상기 접근 단위에 대한 헤더 정보는 상기 접근 단위에 속한 요소 스트림의 식별자 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  9. 제1항에 있어서,
    상기 페이로드 정보는 장면 헤더, 미디어 헤더 또는 폰트 헤더 정보를 포함하는 단순 디코더 설정 기술자(SmpleDecoderConfig Descriptor) 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  10. 제1항에 있어서,
    상기 페이로드 정보는 상기 접근 단위에 속한 요소 스트림의 디코딩에 관한 단순 디코더 설정 기술자를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  11. 제10항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 관하여 필요한 디코더 종류에 관한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  12. 제10항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 관하여 요구되는 디코더 리소스에 대한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  13. 제10항에 있어서,
    상기 단순 디코더 설정 기술자는 엠펙-4 시스템 표준(ISO/IEC 14496-1)의 객체 타입 표시(objectTypeIndication) 표에 따라 상기 요소 스트림에 포함된 객체 또는 장면을 디코딩 하기 위해 필요한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  14. 제10항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림의 종류에 관한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  15. 제10항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 대한 디코딩 버퍼의 사이즈에 관한 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  16. 삭제
  17. 제1항에 있어서,
    상기 페이로드 정보는 접근 단위를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  18. 제1항에 있어서,
    상기 페이로드 정보는 유알엘(url) 및 상기 유알엘에 의해 참조되는 데이터에 관한 캐쉬 단위(Cache Unit) 정보를 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  19. 제18항에 있어서,
    상기 캐쉬 단위는
    동일한 유알엘에 관한 이전의 캐쉬 단위를 현재 패이로드 정보에 포함된 캐쉬 단위로 교체시키거나, 또는 상기 이전의 캐쉬 단위에 상기 현재 페이로드 정보에 포함된 캐쉬 단위를 부가시키는 정보를 더 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  20. 제18항에 있어서,
    상기 캐쉬 단위는
    사용자 단말에 저장 공간이 존재하는 경우에 계속하여 상기 캐쉬 단위를 상기 사용자 단말에 유지시키는 정보를 더 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  21. 제18항에 있어서,
    상기 캐쉬 단위는
    상기 유알엘의 길이에 관한 정보를 더 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  22. 제1항에 있어서,
    상기 요소 스트림은 비디오 요소 스트림, 오디오 요소 스트림, 이미지 요소 스트림, 폰트 요소 스트림, 메타데이터 요소 스트림 중에서 적어도 어느 하나를 더 포함하는
    SAF 동기화 계층 패킷 제공 시스템.
  23. SAF(Simple Aggregation Format) 동기화 계층 패킷 구조의 데이터 스트림이나 파일을 수신하는 수신부;
    상기 데이터 스트림이나 파일을 입력받아 장면 기술 요소 스트림을 포함하는 다양한 요소 스트림을 생성하는 SAF 디코딩부; 및
    상기 요소 스트림을 데이터 처리하여 표시하는 렌더링부를 포함하는 사용자 단말로서,
    상기 SAF 동기화 계층 패킷 구조는 SAF 동기화 계층 패킷 헤더와 SAF 동기화 계층 패킷 페이로드로 구성되되,
    상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 접근 단위(Access Unit)와 관련된 시간 정보를 포함하고,
    상기 SAF 동기화 계층 패킷 페이로드는 상기 접근 단위에 대한 헤더 정보 및 상기 접근 단위를 나타내는 페이로드 정보를 포함하는
    사용자 단말.
  24. 제23항에 있어서,
    상기 SAF 디코딩부로부터 상기 장면 기술 요소 스트림을 입력받아 SVG(Scalable Vector Graphics) 파일 또는 LASeR XML 파일을 생성하여 상기 렌더링부에 제공하는 장면 디코딩부를 더 포함하는
    사용자 단말.
  25. 제23항에 있어서,
    상기 SAF 디코딩부로부터 출력되는 요소 스트림 중에서 상기 장면기술 요소 스트림을 제외한 요소 스트림을 저장하고 상기 렌더링부에 제공하는 메모리를 더 포함하는
    사용자 단말.
  26. 제23항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는
    상기 SAF 동기화 계층 패킷의 연속성 정보를 포함하는
    사용자 단말.
  27. 제23항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는 상기 SAF 동기화 계층 패킷 페이로드에 포함된 데이터가 임의로 접근 가능한지에 관한 정보를 포함하는
    사용자 단말.
  28. 제23항에 있어서,
    상기 시간 정보는 상기 접근 단위가 디코더에서 장면으로 구성될 때 필요한 시간 정보인
    사용자 단말.
  29. 제23항에 있어서,
    상기 SAF 동기화 계층 패킷 헤더는 상기 접근 단위 길이에 관한 정보를 포함하는
    사용자 단말.
  30. 제23항에 있어서,
    상기 접근 단위에 대한 헤더 정보는 상기 접근 단위의 타입 정보를 포함하는
    사용자 단말.
  31. 제23항에 있어서,
    상기 접근 단위에 대한 헤더 정보는 상기 접근 단위에 속한 요소 스트림의 식별자 정보를 포함하는
    사용자 단말.
  32. 제23항에 있어서,
    상기 페이로드 정보는 장면 헤더, 미디어 헤더 또는 폰트 헤더 정보를 포함하는 단순 디코더 설정 기술자(SmpleDecoderConfig Descriptor) 정보를 포함하는
    사용자 단말.
  33. 제23항에 있어서,
    상기 페이로드 정보는 상기 접근 단위에 속한 요소 스트림의 디코딩에 관한 단순 디코더 설정 기술자를 포함하는
    사용자 단말.
  34. 제33항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 관하여 필요한 디코더 종류에 관한 정보를 포함하는
    사용자 단말.
  35. 제33항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 관하여 요구되는 디코더 리소스에 대한 정보를 포함하는
    사용자 단말.
  36. 제33항에 있어서,
    상기 단순 디코더 설정 기술자는 엠펙-4 시스템 표준(ISO/IEC 14496-1)의 객체 타입 표시(objectTypeIndication) 표에 따라 상기 요소 스트림에 포함된 객체 또는 장면을 디코딩 하기 위해 필요한 정보를 포함하는
    사용자 단말.
  37. 제33항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림의 종류에 관한 정보를 포 함하는
    사용자 단말.
  38. 제33항에 있어서,
    상기 단순 디코더 설정 기술자는 상기 요소 스트림에 대한 디코딩 버퍼의 사이즈에 관한 정보를 포함하는
    사용자 단말.
  39. 삭제
  40. 제23항에 있어서,
    상기 페이로드 정보는 접근 단위를 포함하는
    사용자 단말.
  41. 제23항에 있어서,
    상기 페이로드 정보는 유알엘(url) 및 상기 유알엘에 의해 참조되는 데이터에 관한 캐쉬 단위(Cache Unit) 정보를 포함하는
    사용자 단말.
  42. 제41항에 있어서,
    상기 캐쉬 단위는
    동일한 유알엘에 관한 이전의 캐쉬 단위를 현재 패이로드 정보에 포함된 캐쉬 단위로 교체시키거나, 또는 상기 이전의 캐쉬 단위에 상기 현재 페이로드 정보에 포함된 캐쉬 단위를 부가시키는 정보를 더 포함하는
    사용자 단말.
  43. 제41항에 있어서,
    상기 캐쉬 단위는
    사용자 단말에 저장 공간이 존재하는 경우에 계속하여 상기 캐쉬 단위를 상기 사용자 단말에 유지시키는 정보를 더 포함하는
    사용자 단말.
  44. 제41항에 있어서,
    상기 캐쉬 단위는
    상기 유알엘의 길이에 관한 정보를 더 포함하는
    사용자 단말.
  45. 제33항에 있어서,
    상기 요소 스트림은 비디오 요소 스트림, 오디오 요소 스트림, 이미지 요소 스트림, 폰트 요소 스트림, 메타데이터 요소 스트림 중에서 적어도 어느 하나를 더 포함하는
    사용자 단말.
KR1020090078860A 2004-07-22 2009-08-25 Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말 KR100991803B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090078860A KR100991803B1 (ko) 2004-07-22 2009-08-25 Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US60/590,448 2004-07-22
KR1020090078860A KR100991803B1 (ko) 2004-07-22 2009-08-25 Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020050004309A Division KR100937045B1 (ko) 2004-07-22 2005-01-17 Saf 동기화 계층 패킷 구조

Publications (2)

Publication Number Publication Date
KR20090110811A KR20090110811A (ko) 2009-10-22
KR100991803B1 true KR100991803B1 (ko) 2010-11-04

Family

ID=41538622

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090078860A KR100991803B1 (ko) 2004-07-22 2009-08-25 Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말

Country Status (1)

Country Link
KR (1) KR100991803B1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101268452B1 (ko) * 2011-03-30 2013-06-04 전자부품연구원 가상 세계를 기술하는 데이터 송수신 방법 및 장치
WO2013055168A1 (ko) * 2011-10-13 2013-04-18 한국전자통신연구원 콤포지션 정보 및 전송 특성 정보가 연동된 미디어 데이터를 이종 ip 네트워크를 통하여 전송하는 방법
KR102251763B1 (ko) * 2013-01-21 2021-05-14 돌비 레버러토리즈 라이쎈싱 코오포레이션 예약된 데이터 공간에 위치된 메타데이터 컨테이너를 갖는 인코딩된 오디오 비트스트림의 디코딩

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010018769A1 (en) 2000-01-24 2001-08-30 Yoshinori Matsui Data reception apparatus, data reception method, data transmission method, and data storage media
US20010027468A1 (en) 2000-03-09 2001-10-04 Sanyo Electric Co., Ltd. Transmission system, reception system, and transmission and reception system capable of displaying a scene with high quality
US20010031188A1 (en) 2000-04-18 2001-10-18 Honda Giken Kogyo Kabushiki Kaisha Clinch nut assembly and method of producing clinch nut
US20020133546A1 (en) 1998-06-29 2002-09-19 Tao Liang Method and apparatus for implementing multi-user grouping nodes in a multimedia player

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020133546A1 (en) 1998-06-29 2002-09-19 Tao Liang Method and apparatus for implementing multi-user grouping nodes in a multimedia player
US20010018769A1 (en) 2000-01-24 2001-08-30 Yoshinori Matsui Data reception apparatus, data reception method, data transmission method, and data storage media
US20010027468A1 (en) 2000-03-09 2001-10-04 Sanyo Electric Co., Ltd. Transmission system, reception system, and transmission and reception system capable of displaying a scene with high quality
US20010031188A1 (en) 2000-04-18 2001-10-18 Honda Giken Kogyo Kabushiki Kaisha Clinch nut assembly and method of producing clinch nut

Also Published As

Publication number Publication date
KR20090110811A (ko) 2009-10-22

Similar Documents

Publication Publication Date Title
KR100937045B1 (ko) Saf 동기화 계층 패킷 구조
EP1974526B1 (en) Extensions to rich media container format for use by mobile broadcast/multicast streaming servers
KR100927978B1 (ko) 리치 미디어 콘텐츠의 프로그레시브 다운로딩 및스트리밍을 위해 iso 기반 미디어 파일 포맷으로 svg콘텐츠를 임베딩 하는 방법
KR100593581B1 (ko) 데이터를 일정한 사이즈의 전송 패킷으로 캡슐화하는 방법
US20150113577A1 (en) Hybrid transmission method through mmt packet format extension
CN114503599A (zh) 使用gltf2场景描述中的扩展来支持视频和音频数据
US7149770B1 (en) Method and system for client-server interaction in interactive communications using server routes
US7958535B2 (en) URI pointer system and method for the carriage of MPEG-4 data in an MPEG-2 transport stream
JP4194240B2 (ja) 会話形通信におけるクライアント−サーバインタラクションの方法及びシステム
KR100991803B1 (ko) Saf 동기화 계층 패킷 구조를 제공하는 saf 동기화 계층 패킷 제공 시스템 및 사용자 단말
Herpel Elementary stream management in MPEG-4
KR100876462B1 (ko) 복수개의 터미널로 멀티미디어 신호를 방송하는 방법
KR100940603B1 (ko) Saf 동기화 계층 패킷 구조와 이를 제공하는 방법
Herpel et al. MPEG-4 systems: elementary stream management and delivery
CN115396647B (zh) 一种沉浸媒体的数据处理方法、装置、设备及存储介质
WO2024041239A1 (zh) 一种沉浸媒体的数据处理方法、装置、设备、存储介质及程序产品
KR101943214B1 (ko) Mmt 기반 8k 방송 스트림 생성 방법 및 이를 적용한 방송 서비스 시스템
Lee et al. Cooperation system of DSM-CC Data Carousel and MPEG-4 system via satellite
WO2022189700A2 (en) Timed media http request aggregation

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130923

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee