KR20040016566A - 엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 - Google Patents
엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 Download PDFInfo
- Publication number
- KR20040016566A KR20040016566A KR1020020048797A KR20020048797A KR20040016566A KR 20040016566 A KR20040016566 A KR 20040016566A KR 1020020048797 A KR1020020048797 A KR 1020020048797A KR 20020048797 A KR20020048797 A KR 20020048797A KR 20040016566 A KR20040016566 A KR 20040016566A
- Authority
- KR
- South Korea
- Prior art keywords
- stream
- group
- object descriptor
- audio
- video
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 238000012545 processing Methods 0.000 abstract description 3
- 239000000872 buffer Substances 0.000 description 12
- 230000008569 process Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 6
- 238000001914 filtration Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4341—Demultiplexing of audio and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
본 발명은 멀티미디어 컨텐츠를 구성하는 객체에 대한 메타 데이터의 연결을 비트스트림을 가진 객체나 초기객체기술자를 시작하는 장면(Scene) 전체에 한정하지 않고 객체들을 결합한 그룹객체에 대해서도 메타데이터를 연결할 수 있는 MPEG 멀티미디어 컨텐츠의 그룹메타데이터 표현방법에 관한 것이다.
본 발명은 오디오, 비디오에 대한 메타데이터 스트림을 갖는 MPEG4 기반의 멀티미디어 컨텐츠 정보구조에서 그룹노드에 그룹메타데이터를 특정하는 그룹객체기술자를 연결하여 MPEG 멀티미디어 컨텐츠를 표현한다.
본 발명의 MPEG 멀티미디어 컨텐츠 재생단말기는 디멀티플렉서, 초기객체기술자파서(parser), BIFS복호기, 객체기술자복호기, 비디오/오디오 복호기, 그룹객체기술함하는 각 메타데이터 스트림을 복호하는 MPEG7 복호기 및 콤포지터로 이루어진다.
Description
본 발명은 멀티미디어 컨텐츠를 구성하는 객체에 대한 메타 데이터의 연결을 비트스트림을 가진 객체나 초기객체기술자를 시작하는 장면(Scene) 전체에 한정하지 않고 객체들을 결합한 그룹객체에 대해서도 메타데이터를 연결할 수 있는 방법에 관한 것이다.
동영상, 정지영상, 컴퓨터 그래픽스, 애니메이션, 오디어, 텍스트, 프로그램 코드 등의 다양한 멀티미디어 객체를 하나의 콘텐츠에 통합하는 부호체계가 HTML, VRML, X3D, MPEG4 등에 의해 작성되어 교육, 오락 등 다양한 분야에 응용되고 있다.
또한, 멀티미디어 컨텐츠의 제작과 사용이 증가하면서 멀티미디어 컨텐츠의 검색, 브라우징, 필터링 등의 필요성이 대두되어, 멀티미디어 컨텐츠에 메타데이터 부호화에 대한 기술이 RDF, MPEG7 등에서 국제 표준으로 제정되었다.
여기서 메타데이터란 다양한 형태의 정보자원을 쉽게 검색하고 접근할 수 있도록 정보의 내용 및 특징을 일정한 형식에 따라 간결하게 서술한 데이터로서 정보자원에 대한 정보라고 할 수 있다.
이와 같은 메타데이터 부호화에는 멀티미디어 컨텐츠에 대한 식별자 혹은 위치 등을 기록하여 메타데이터로부터 해당하는 멀티미디어 컨텐츠에 쉽게 접근할 수 있도록 하기 위한 멀티미디어 컨텐츠와 메타데이터의 효과적인 연결방법이 개발되었다.
그러나 종래의 멀티미디어 컨텐츠에 대한 메타데이터 부호화에는 객체기술자(Object Descriptor)를 가질 수 있는 비트스트림 객체 단위 혹은 하나의 장면 전체 내에서만 연결할 수밖에 없는 단점이 있다.
이와 같은 종래의 방법은 비트스트림을 취하지 않는 그랙픽스 객체들의 집합 혹은 그룹 객체에 대한 메타데이터를 기술하려면 새로운 초기객체기술자(IOD; Initial Object Descriptor)로 시작하는 새로운 장면을 만들어 처리하여야 하는 불편이 있다.
도 1은 강의하는 장면을 MPEG4 장면으로 하나의 예를 든 것이고, 도2는 MPEG4 스트림 전달방식에 대한 프레임워크이다. MPEG4는 ISO/IEC 산하 WG11에서 제안하여 표준화하는 차세대 멀티미디어 표준으로서 그 응용분야가 방송, 방송을 이용한 홈쇼핑, 실시간 동화상과 애니메이션과 음성전달을 이용하는 인터넷상의 교육용, 오락용, 홈쇼핑용 혹은 정보안내용으로 다양하게 사용될 수 있다.
MPEG4가 갖는 장점은 기존의 멀티미디어 통신에서 사용하는 모든 미디어 각각을 하나의 객체로 보고 전체를 구성할 수 있게 하는 객체 지향형 시스템으로서 객체에 대한 독립적인 처리가 가능하다는 점이다.
도1을 살펴보면, 강의하는 장면을 각각의 객체로 구성한 것으로서, 각각의 객체는 강사(101), 칠판(102), 책상(103), 지구본(104), 강사의 목소리(110) 등이 될 수 있고, 이러한 객체를 이루고 있는 장면은 BIFS(Binary Format for Scene Description)로 표현된다.
도1의 강의 장면은 오디오 정보는 오디오 콤포지터(audio compositor)에 의하여 스피커(108)를 통해 청취되고, 비디오 정보는 비디오 콤포지터(video compositor)에 의하여 디스플레이(107) 장치를 통해 디스플레이된다.
도2는 MPEG4에서 전달되는 정보의 프레임워크를 나타낸 것으로서 초기 객체기술자(201), 장면기술스트림(202, 203), 객체기술스트림(204, 205), 위 객체기술스트림에서 객체 기술자가 특정하는 객체가 실연되는 구간정보인 비디오 스트림(206), 오디오 스트림(207) 등으로 이루어진다. 여기서 객체기술자는 MPEG4 정보구조에서 각각의 객체를 특정하는 포인터 역할과 함께 디코더 정보를 포함하고 있다. 또한, 초기객체기술자(201)는 장면기술스트림(202)과 객체기술스트림(204)을 특정하는 포인터 역할과 함께 각 스트림을 위한 디코더 정보 등을 전달하기 위한 것으로 전달되는 MPEG4 정보의 초기에 나타난다.
장면기술스트림(202, 203)에는 장면에 대한 정보가 트리(tree) 형태로 표현되어 있고, 객체기술스트림(204, 205)에는 위 장면기술스트림(202, 203)에서 특정하고 있는 각 객체에 대한 정보를 포함하고 있으므로 각 객체는 이를 이용하여 장면내의 해당하는 노드(node)에 연결될 수 있다.
도2의 208은 MPEG4 정보구조의 한 장면 내에 또 다른 장면을 포함하는 경우에 새로운 초기객체기술자를 포함하는 MPEG4 정보구조를 나타낸 것으로서 장면기술스트림(203)의 인라인(Inline) 노드에 연결되어 있다. 위 도1과 도2는 공개번호 특2001-0075804호에 자세하게 기술되어 있다.
도3은 MPEG4에 따른 종래의 멀티미디어 컨텐츠 정보구조로서 메타데이터 스트림(이하 '메타스트림'이라 한다)이 포함되어 있다. 초기객체기술자(201)은 장면기술스트림(202)과 객체기술스트림(204)을 가리키는 참조자('식별자'와 동일한 의미로 사용한다)와 함께 MPEG4 멀티미디어 컨텐츠를 단말기가 처리하기 위해 필요한 정보를 포함하고 있다. 객체기술스트림(204)은 비디오 스트림과 비디오 메타데이터를 가리키는 참조자를 포함하고 있는 비디오 객체기술자(215), 오디오 스트림과 오디오 메타데이터를 가리키는 참조자를 포함하고 있는 오디오 객체기술자(216) 등을 포함하고 있다.
비디오 메타스트림(210)은 비디오 스트림(206)에 포함되어 있는 비디오 객체에 대한 메타데이터를 포함하고 있다. 오디오 메타스트림(211)은 오디오 스트림(207)에 포함되어 있는 오디오 객체에 대한 메타데이터를 포함하고 있다. BIFS(217)는 그룹(212) 노드에 대해 무비텍스쳐(213) 노드와 오디오 소스(214) 노드가 트리 구조를 이루고 있는 멀티미디어 컨텐츠 구조이다. 무비텍스쳐(213) 노드는 비디오객체기술자(215)에 해당하는 객체기술자 식별자를 보유하고, 비디오객체기술자(215)는 실제 비디오 데이터인 비디오 스트림(206)에 해당하는 식별자를 보유함으로써 상호 연결된다.
또한, 비디오객체기술자(215)는 비디오 메타스트림(210)에 대한 식별자를 보유함으로써 상호연결된다. 오디오소스(214) 노드는 오디오객체기술자(216)에 해당하는 객체기술자 식별자를 보유하고, 오디오객체기술자(216)는 실제 오디오 데이터인 오디오 스트림(207)에 해당하는 식별자를 보유함으로써 상호 연결된다. 또한, 오디오객체기술자(216)는 오디오 메타스트림(211)에 대한 식별자를 보유함으로써상호연결된다.
이와 같이 구성함으로써 MPEG4 단말기는 비디오객체기술자(215)와 오디오객체기술자(216)를 각각 해석하여 비디오스트림(206)과 비디오메타스트림(210)을 읽어 들여 처리하거나 오디오 스트림(207)과 오디오메타스트림(211)을 읽어 들여 처리하여 사용자 인터페이스로 전송한다.
이와 같은 도3과 같은 종래의 멀티미디어 컨텐츠에 대한 메타데이터 부호화에는 객체기술자(Object Descriptor)를 가질 수 있는 비트스트림 객체 단위 혹은 하나의 장면 전체 내에서만 연결할 수밖에 없는 단점이 있다.
따라서 도3과 같은 종래의 멀티미디어 컨텐츠에 대한 메타데이터 부호화 방법에서 비트스트림을 취하지 않는 그랙픽스 객체들의 집합 혹은 그룹 객체에 대한 메타데이터를 기술하기 위해서는 도2에 나타나 있는 바와 같이 BIFS(203)의 인라인(Inline)노드에 연결되는 새로운 초기객체기술자(208)로 시작하는 새로운 장면을 만들어 처리하여야 하는 불편이 있다.
본 발명은 위에서 언급한 바와 같은 종래의 문제점을 해결하기 위한 것으로서 멀티미디어 컨텐츠를 구성하는 각 객체에 대한 메타 데이터의 연결을 비트스트림을 가진 객체나 초기객체기술자를 시작하는 장면(Scene) 전체에 한정하지 않고 각 객체들이 결합된 그룹객체에 대해서도 메타데이터를 연결할 수 있는 방법을 제공한다.
본 발명의 다른 목적은 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 멀티미디어 컨텐츠에 대한 검색, 브라우징, 필터링을 용이하게 하기 위한 멀티미디어 컨텐츠의 정보구조를 제공한다.
본 발명의 또 다른 목적은 멀티미디어 컨텐츠에 대한 메타데이터 부호화 방법에서 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 비트스트림을 취하지 않는 그랙픽스 객체들의 집합 혹은 그룹 객체에 대한 메타데이터를 기술하기 위해서 MPEG4 기반의 BIFS의 인라인(Inline)노드에 연결되는 새로운 초기객체기술자로 시작하는 새로운 장면을 만들어 처리함이 없이 용이하게 멀티미디어 컨텐츠에 대한 그룹 객체에 대해 메타데이터를 부여하기 위한 방법을 제공하는데 있다.
도1은 종래의 MPEG4 정보구조로 표현하기 위한 장면에 대한 예시도면
도2는 종래의 MPEG4 정보구조를 예시한 도면
도3은 메타데이터 스트림이 포함된 종래의 MPEG4 정보구조를 예시한 도면
도4는 그룹메타데이터 스트림을 포함하는 본 발명의 MPEG 정보구조를 예시한 도면
도5는 도4의 MPEG 정보구조를 재생하기 위한 단말기 구조도면
도6은 종래의 MPEG4에 대한 코딩 프로그램
도7은 본 발명의 MPEG에 대한 코딩 프로그램
도8은 도6을 적용한 코딩 프로그램
도9는 도7을 적용한 코딩 프로그램
<도면의 주요 부분에 대한 부호의 설명>
101:강사, 102:칠판, 103:책상, 104:지구본, 105:오디오 콤포지터,
106:비디오콤포지터, 107: 디스플레이장치, 108:스피커, 109:마우스,
110;강사의 목소리
201:초기객체기술자, 202:장면기술스트림, 203:BIFS,
204:객체묘사스트림, 205:객체기술자, 206:비디오스트림,
207:오디오스트림, 208: 다른 장면의 MPEG4 정보구조
210:비디오메타스트림, 211:오디오메타스트림, 212:그룹노드
213:무비텍스쳐노드, 214:오디오소스노드, 215:비디오객체기술자
216:오디오객체기술자, 217:BIFS, 218:객체기술자
219:그룹객체기술자, 220:그룹메타스트림
301:디멀티플렉서, 302 ~ 308:입력버퍼, 309:초기객체기술자 파서
310:BIFS 복호기, 311:객체기술자 복호기, 312:비디오복호기,
313:오디오 복호기, 314:MPEG7 복호기, 315:IPMP 제어기
316 ~ 320: 출력버퍼, 316:콤포지터, 322:사용자인터페이스
도4는 본 발명의 실시예로서 도3의 메타데이터 스트림을 포함하고 있는 MPEG4 멀티미디어 컨텐츠 정보구조에 그룹객체기술자(219)와 그룹메타스트림(220)이 추가되어 구성되어 있다. 도4에서 초기객체기술자(201), 장면기술스트림(202), 객체기술스트림(204), 비디오스트림(206), 오디오스트림(207), 비디오 메타스트림(210), 오디오메타스트림(211), 그룹노드(212), 무비텍스쳐노드(214), 오디오소스노드(214), 비디오 객체 기술자(215), 오디오 객체 기술자(216), BIFS(217), 객체기술자(218)는 도3에서와 동일한 기능을 수행한다. 도4의 각 구성요소 중 도3과 동일하게 참조번호가 부여된 구성요소는 다음과 같이 도3에서와 동일하게 기능을 수행한다.
도4는 MPEG4를 기반으로 하고 있는 도3에 그룹객체기술자(219)와 그룹메타스트림(220)이 추가되어 멀티미디어 컨텐츠의 정보구조를 나타내고 있으므로 도4에서는 MPEG4에 그룹객체기술자(219)와 그룹메타스트림(220)이 추가된 멀티미디어 컨텐츠의 정보구조를 간단히 MPEG이라 표현한다.
초기객체기술자(201)은 장면기술스트림(202)과 객체기술스트림(204)을 가리키는 참조자와 함께 MPEG 멀티미디어 컨텐츠를 단말기가 처리하기 위해 필요한 정보를 포함하고 있다. 객체기술스트림(204)은 비디오 스트림과 비디오 메타데이터를 가리키는 참조자를 포함하고 있는 비디오 객체기술자(215), 오디오 스트림과 오디오 메타데이터를 가리키는 참조자를 포함하고 있는 오디오 객체기술자(216) 등을 포함하고 있다.
비디오 메타스트림(210)은 비디오 스트림(206)에 포함되어 있는 비디오 객체에 대한 메타데이터를 포함하고 있다. 오디오 메타스트림(211)은 오디오 스트림(207)에 포함되어 있는 오디오 객체에 대한 메타데이터를 포함하고 있다. BIFS(217)는 그룹노드(212)에 대해 무비텍스쳐노드(213)와 오디오 소스노드(214) 가 트리 구조를 이루고 있는 멀티미디어 컨텐츠 구조이다. 무비텍스쳐노드(213)는 비디오객체기술자(215)에 해당하는 객체기술자 식별자를 보유하고, 비디오객체기술자(215)는 실제 비디오 데이터인 비디오 스트림(206)에 해당하는 식별자를 보유함으로써 상호 연결된다.
또한, 비디오객체기술자(215)는 비디오 메타스트림(210)에 대한 식별자를 보유함으로써 상호연결된다. 오디오소스노드(214)는 오디오객체기술자(216)에 해당하는 객체기술자 식별자를 보유하고, 오디오객체기술자(216)는 실제 오디오 데이터인 오디오 스트림(207)에 해당하는 식별자를 보유함으로써 상호 연결된다. 또한, 오디오객체기술자(216)는 오디오 메타스트림(211)에 대한 식별자를 보유함으로써 상호연결된다.
이와 같이 구성함으로써 MPEG 단말기는 비디오객체기술자(215)와 오디오객체기술자(216)를 각각 해석하여 비디오스트림(206)과 비디오메타스트림(210)을 읽어 들여 처리하거나 오디오 스트림(207)과 오디오메타스트림(211)을 읽어 들여 처리하여 사용자 인터페이스로 전송한다.
한편, 도4에 포함된 그룹객체기술자(219)는 그룹메타스트림(210)에 대한 식별자를 보유함으로써 그룹객체기술자(219)와 그룹메타스트림(210)이 상호연결 된다. 또한, 그룹메타스트림(210)은 그룹을 특정하기 위한 각종 정보에 해당하는 메타데이터로 이루어져 있다. 그룹노드(212)는 그룹객체기술자(219)에 해당하는 객체기술자 식별자를 보유하고, 그룹객체기술자(219)는 해당 그룹을 특정하는 각종 정보를 담고 있는 그룹메타 데이터를 포함하고 있는 그룹메타스트림(220)에 해당하는 식별자를 보유함으로써 그룹메타데이터는 그룹노드(212)에 상호 연결된다.
이와 같이 구성함으로써 MPEG 단말기는 그룹객체기술자(219)를 해석하여 그룹메타데이터스트림(220)을 읽어 들여 처리하여 사용자 인터페이스로 전송한다.
도5는 본 발명의 실시예인 MPEG 단말기 구조도이다. 디멀티플렉서(301)는 혼합된 도4의 MPEG 멀티미디어 컨텐츠 비트스트림으로부터 MPEG 멀티미디어 컨텐츠의 각 데이터를 분리하여 해당하는 처리기로 분배한다. 입력버퍼(302 ~ 308)은 입력된데이터를 일시 저장하는 기억장치이다. MPEG 멀티미디어 컨텐츠 재생은 먼저 MPEG 단말기가 초기객체기술자(201)를 초기객체기술자 파서(parser)(309)에 의해 장면기술스트림과 객체기술스트림을 해석하는 것으로부터 시작한다. 초기객체기술자파서(309)에 의해 초기객체기술자(201)를 해석한 MPEG 단말기는 장면기술스트림(202)을 BIFS복호기(310)에 의하여 복호하고, 객체기술스트림(204)은 객체기술자복호기(311)에 의하여 복호하여 멀티미디어 컨텐츠 객체 트리 구조와 객체 기술자 집합구조를 생성하여 각각 출력버퍼(317)과 출력버퍼(316)에 저장한다.
MPEG 단말기는 객체기술자복호기(311)에 의하여 해석된 객체기술자 집합구조의 각 객체기술자로부터 오디오, 비디오 등의 미디어 스트림과 각 메타 데이터 스트림에 대한 식별자를 획득하여, 해당하는 각 미디어 스트림과 각 메타 데이터 스트림을 읽어들인다.
계속해서, MPEG 단말기는 각 객체기술자의 식별자를 통해 읽어들인 각 미디어 스트림 중 비디오 스트림은 비디오복호기(312)에 의하여, 오디오스트림은 오디오복호기(313)에 의하여 복호처리되어 각각 출력버퍼(318), 출력버퍼(319)에 저장된다.
또한, MPEG 단말기는 각 객체기술자의 식별자를 통해 읽어들인 각 메타데이터 스트림은 MPEG7 복호기(314)에 의하여 복호처리되어 출력버퍼(320)에 저장된다. IPMP(저작권보호정보, Intellectual Property Management and Protection)데이터 스트림은 IPMP제어기(315)에 의하여 처리된다.
콤포지터(321)는 장면기술스트림(202)을 BIFS복호기(310)에 의하여 복호되어출력버퍼(316)에 저장된 객체트리정보를 읽어들여 비디오복호기(312)에 의하여 복호처리 되어 출력버퍼(318)에 저장된 비디오와 오디오복호기(313)에 의하여 복호처리 되어 출력버퍼(319)에 저장된 오디오를 최종적으로 사용자 인터페이스(322)에 출력한다. 또한, 콤포지터(321)는 MPEG7 복호기(314)에 의하여 복호처리 되어 출력버퍼(320)에 저장된 메터데이터를 읽어들여 사용자 인터페이스(322)에 출력함으로써 사용자와 상호작용에 따라 검색, 필터링, 브라우징 등에 응용된다.
도6은 종래의 MPEG4 BIFS 그룹노드에 대한 데이터 구조도이다. 그룹노드는 addChildren, removeChildren 및 children의 3 필드를 갖는다. children 필드에 기술된 다수의 멀티미디어 객체노드는 하나의 그룹을 형성한다. 이와 같은 종래의 MPEG4 BIFS 그룹노드는 객체기술자와 연결할 수 있는 식별자 필드가 없다.
도7은 본 발명의 BIFS 그룹노드에 대한 데이터 구조도이다. 본 발명의 그룹노드는 도6의 종래의 addChildren, removeChildren 및 children의 3 필드를 갖는 그룹노드에 Meta_url 필드가 추가된다. 위 Meta_url 필드는 그룹객체기술자와 연결된다. 그룹노드와 그룹객체기술자와의 연결은 Meta_url 필드와 그룹객체기술자의 그룹객체기술자 ID가 동일한 식별자를 갖도록 함으로써 달성된다.
도8은 도6의 종래의 MPEG4 객체기술자를 나타낸다. URL(Uniform Resource Locator) 플레그(URL_Flag)가 '참'으로 설정되어 있으면 URL을 읽어 다른 스트림에서 객체기술자 정보를 읽어 오고, URL 플래그가 '거짓'으로 설정되어 있으면 1에서 255 개의 비디오, 오디어, MPEG7 등의 미디어 및 메타데이터 비트스트림(ES_Descriptor)과 0 에서 255 개이 정적 객체에 대한 메터데이터정보(OCI_Descriptor) 그리고 저작권보호정보(IPMP_DescriptorPointer)에 대한 정보를 읽어온다.
도9는 도7의 본 발명의 객체기술자를 나타낸다. 그룹객체기술자 ID(GroupObjectDescriptorID)는 객체기술자ID(ObjectDescriptorID)와 하나의 MPEG4 멀티미디어 컨텐츠에서 독립된 네임스페이스를 갖는다. 따라서 그룹객체기술자ID와 객체기술자ID가 같은 식별자를 갖는다 하더라도 서로 다른 객체를 특정하게 된다. 도9와 같이 객체기술자를 표현함으로써, 종래의 객체기술자가 미디어 스트림과 함께 메타데이터 스트림에 대한 정보를 도8의 'ES_Descriptor' 변수에 저장할 수 있었던 것인데 반해, 본 발명의 그룹객체기술자는 메타데이터 스트림에 대한 정보만을 별도로 저장할 수 있다. 그럼으로써 본 발명의 그룹객체기술자는 메타데이터 스트림에 대해 정보의 저장여부를 선택할 수도 있다.
본 발명은 멀티미디어 컨텐츠를 구성하는 각 객체에 대한 메타 데이터의 연결을 비트스트림을 가진 객체나 초기객체기술자를 시작하는 장면(Scene) 전체에 한정하지 않고 각 객체들이 결합된 그룹객체에 대해서도 메타데이터를 연결할 수 있는 방법, 또는 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 멀티미디어 컨텐츠에 대한 검색, 브라우징, 필터링을 용이하게 하기 위한 멀티미디어 컨텐츠의 정보구조, 또는 미디어 컨텐츠에 대한 메타데이터 부호화 방법에서 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 비트스트림을 취하지 않는 그랙픽스 객체들의 집합 혹은 그룹 객체에 대한 메타데이터를 기술하기 위해서 MPEG4 기반의 BIFS의 인라인(Inline)노드에 연결되는 새로운 초기객체기술자로 시작하는 새로운 장면을 만들어 처리함이 없이 용이하게 멀티미디어 컨텐츠에 대한 그룹 객체에 대해 메타데이터를 부여하기 위한 방법으로서 전술한 실시예에 의하여 본 발명의 권리범위가 한정되지 않으며, 본 발명의 기술사상이 허용하는 범위 내에서 다양하게 변형하여 실시할 수 있다.
이상에서 설명한 바와 같이 본 발명은 멀티미디어 컨텐츠를 구성하는 각 객체에 대한 메타 데이터의 연결을 비트스트림을 가진 객체나 초기객체기술자를 시작하는 장면(Scene) 전체에 한정하지 않고 각 객체들이 결합된 그룹객체에 대해서도 메타데이터를 용이하게 연결할 수 있다.
또한, 본 발명은 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 멀티미디어 컨텐츠에 대한 검색, 브라우징, 필터링을 용이하게 한다.
본 발명은 멀티미디어 컨텐츠에 대한 메타데이터 부호화 방법에서 MPEG4 기반의 멀티미디어 컨텐츠의 정보구조의 그룹노드에 그룹메타데이터 스트림을 특정하는 그룹객체기술자를 추가함으로써 비트스트림을 취하지 않는 그랙픽스 객체들의 집합 혹은 그룹 객체에 대한 메타데이터를 기술하기 위해서 MPEG4 기반의 BIFS의 인라인(Inline)노드에 연결되는 새로운 초기객체기술자로 시작하는 새로운 장면을 만들어 처리함이 없이 용이하게 멀티미디어 컨텐츠에 대한 그룹 객체에 대해 메타데이터를 부여한다.
Claims (3)
- 오디오, 비디오에 대한 메타데이터 스트림을 갖는 MPEG4 기반의 멀티미디어 컨텐츠 정보구조에서 그룹노드에 그룹메타데이터를 특정하는 그룹객체기술자가 연결된 것을 특징으로 하는 MPEG 멀티미디어 컨텐츠의 그룹메타데이터 표현방법
- 제1항에 있어서, 상기 그룹객체기술자는 MPEG4 기반의 여타 객체기술자들과 독립된 번호체계를 부여하는 것을 특징으로 하는 MPEG 멀티미디어 컨텐츠의 그룹메타데이터 표현방법.
- MPEG 멀티미디어 컨텐츠 비트스트림으로부터 MPEG 멀티미디어 컨텐츠의 각 데이터를 분리하여 해당하는 처리기로 분배하는 디멀티플렉서;상기 디멀티플렉서로부터 입력된 초기객체기술자로부터 장면기술스트림과 객체기술스트림을 해석하는 초기객체기술자파서(parser);상기 초기객체기술자파서에 의해 해석된 장면기술스트림을 복호하는 BIFS복호기;상기 초기객체기술자파서에 의해 해석된 객체기술스트림을 복호하는 객체기술자복호기;상기 객체기술자복호기에 의하여 해석된 객체기술자 집합구조의 각 객체기술자로부터 오디오, 비디오 등의 각 미디어 스트림과 각 메타 데이터 스트림에 대한식별자를 획득하여, 해당하는 각 미디어 스트림과 각 메타 데이터 스트림을 읽어들인 후 복호하는 비디오/오디오 복호기;그룹객체기술자를 포함하는 상기 각 객체기술자의 식별자를 통해 읽어들인 그룹메타데이터를 포함하는 각 메타데이터 스트림을 복호하는 MPEG7 복호기; 및상기 각 복호기로부터 데이터를 입력받아 멀티미디어 컨텐츠를 재생하여 사용자 인터페이스로 출력하는 콤포지터로 이루이진 MPEG 멀티미디어 컨텐츠 재생단말기.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020020048797A KR20040016566A (ko) | 2002-08-19 | 2002-08-19 | 엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020020048797A KR20040016566A (ko) | 2002-08-19 | 2002-08-19 | 엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20040016566A true KR20040016566A (ko) | 2004-02-25 |
Family
ID=37322503
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020020048797A KR20040016566A (ko) | 2002-08-19 | 2002-08-19 | 엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20040016566A (ko) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100682910B1 (ko) * | 2004-12-31 | 2007-02-15 | 삼성전자주식회사 | Mpeg-4 인코딩/디코딩 방법 및 장치 |
US8688737B2 (en) | 2007-08-13 | 2014-04-01 | Samsung Electronics Co., Ltd. | Method and apparatus for generating and reproducing media object-based metadata |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000001154A1 (en) * | 1998-06-26 | 2000-01-06 | General Instrument Corporation | Terminal for composing and presenting mpeg-4 video programs |
KR20010075804A (ko) * | 2000-01-18 | 2001-08-11 | 구자홍 | Mpeg4 기반의 다지점 화상회의 제어장치와 제어방법 |
KR20020031457A (ko) * | 2000-10-20 | 2002-05-02 | 오길록 | 멀티미디어 데이터의 내용표현방식 및 미디어와의 연동을고려한 전송방법 |
US20020071030A1 (en) * | 2000-10-19 | 2002-06-13 | Zvi Lifshitz | Implementation of media sensor and segment descriptor in ISO/IEC 14496-5 (MPEG-4 reference software) |
KR20030058566A (ko) * | 2001-12-31 | 2003-07-07 | 주식회사 케이티 | 정지영상 모양기술자들의 통계적 특성을 나타내는 동영상모양기술자 추출 장치 및 그 방법과 그를 이용한 동영상색인 시스템 |
-
2002
- 2002-08-19 KR KR1020020048797A patent/KR20040016566A/ko not_active Application Discontinuation
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000001154A1 (en) * | 1998-06-26 | 2000-01-06 | General Instrument Corporation | Terminal for composing and presenting mpeg-4 video programs |
KR20010075804A (ko) * | 2000-01-18 | 2001-08-11 | 구자홍 | Mpeg4 기반의 다지점 화상회의 제어장치와 제어방법 |
US20020071030A1 (en) * | 2000-10-19 | 2002-06-13 | Zvi Lifshitz | Implementation of media sensor and segment descriptor in ISO/IEC 14496-5 (MPEG-4 reference software) |
KR20020031457A (ko) * | 2000-10-20 | 2002-05-02 | 오길록 | 멀티미디어 데이터의 내용표현방식 및 미디어와의 연동을고려한 전송방법 |
KR20030058566A (ko) * | 2001-12-31 | 2003-07-07 | 주식회사 케이티 | 정지영상 모양기술자들의 통계적 특성을 나타내는 동영상모양기술자 추출 장치 및 그 방법과 그를 이용한 동영상색인 시스템 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100682910B1 (ko) * | 2004-12-31 | 2007-02-15 | 삼성전자주식회사 | Mpeg-4 인코딩/디코딩 방법 및 장치 |
US8688737B2 (en) | 2007-08-13 | 2014-04-01 | Samsung Electronics Co., Ltd. | Method and apparatus for generating and reproducing media object-based metadata |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6463445B1 (en) | Multimedia information retrieval system and method including format conversion system and method | |
US6751623B1 (en) | Flexible interchange of coded multimedia facilitating access and streaming | |
JP5084644B2 (ja) | Mpegコード化オーディオ・ビジュアル対象物を表すビット・ストリームの発生およびインターフェースで連結するためのシステムおよび方法 | |
US7428547B2 (en) | System and method of organizing data to facilitate access and streaming | |
US20010000962A1 (en) | Terminal for composing and presenting MPEG-4 video programs | |
US8046338B2 (en) | System and method of organizing data to facilitate access and streaming | |
Avaro et al. | MPEG-4 systems: overview | |
TWI323126B (en) | Method to transmit and receive font information in streaming systems | |
JP2008136204A (ja) | FlexMuxストリームをストリーム形成、受信及び処理する装置及び方法 | |
US7734997B2 (en) | Transport hint table for synchronizing delivery time between multimedia content and multimedia content descriptions | |
US7149770B1 (en) | Method and system for client-server interaction in interactive communications using server routes | |
US12074934B2 (en) | Method and apparatus for grouping entities in media content | |
US20020184336A1 (en) | Occurrence description schemes for multimedia content | |
Goularte et al. | Structuring interactive TV documents | |
CA2319820A1 (en) | Method and system for client-server interaction in interactive communications | |
KR101295377B1 (ko) | 파일 포맷을 구성하는 방법과 상기 파일 포맷을 가지는파일을 포함한 방송 신호를 처리하는 장치 및 방법 | |
KR20030056034A (ko) | 엠펙 데이터의 수신 장치, 엠펙 데이터 송수신시스템 및송수신방법 | |
KR20040016566A (ko) | 엠펙 멀티미디어 컨텐츠의 그룹메타데이터 표현방법 및그의 재생단말기 | |
JP2002077855A (ja) | マルチメディア情報処理システム及び方法 | |
Eleftheriadis | MPEG-4 systems: architecting object-based audio-visual content | |
KR20110073174A (ko) | 장면 기술자를 이용하여 mpeg-2 전송스트림을 포함하는 콘텐츠 저작/재생 장치 및 방법 | |
KR101732803B1 (ko) | 실감 효과 미디어 데이터 파일 구성 방법 및 장치, 실감 효과 미디어 데이터 파일 재생 방법 및 그 장치 | |
Cheok et al. | SMIL vs MPEG-4 BIFS | |
Joung et al. | XMT tools for interactive broadcasting contents description | |
Lee et al. | Design and implementation of XMT-A to/from MP4 converter for authoring and retrieving MPEG-4/7 based interactive contents |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application |