KR20090081933A - 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체 - Google Patents

입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체 Download PDF

Info

Publication number
KR20090081933A
KR20090081933A KR1020080008118A KR20080008118A KR20090081933A KR 20090081933 A KR20090081933 A KR 20090081933A KR 1020080008118 A KR1020080008118 A KR 1020080008118A KR 20080008118 A KR20080008118 A KR 20080008118A KR 20090081933 A KR20090081933 A KR 20090081933A
Authority
KR
South Korea
Prior art keywords
box
information
stereoscopic
stereoscopic video
storing
Prior art date
Application number
KR1020080008118A
Other languages
English (en)
Other versions
KR100924757B1 (ko
Inventor
신화선
명진수
김제우
최병호
Original Assignee
전자부품연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전자부품연구원 filed Critical 전자부품연구원
Priority to KR1020080008118A priority Critical patent/KR100924757B1/ko
Priority to CN2009801093208A priority patent/CN101978699A/zh
Priority to EP09703099A priority patent/EP2247115A4/en
Priority to PCT/KR2009/000408 priority patent/WO2009093881A1/ko
Priority to US12/864,404 priority patent/US8659642B2/en
Publication of KR20090081933A publication Critical patent/KR20090081933A/ko
Application granted granted Critical
Publication of KR100924757B1 publication Critical patent/KR100924757B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

본 발명은 비트 효율성 및 처리 효율성을 향상시킬 수 있는 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체에 관한 것이다. 이와 같은 본 발명은, 파일 포맷 정보 및 모노 데이터 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스와; 입체형 비디오 스트림을 구성하는 다수의 트랙 박스들을 저장하는 무비 박스와; 멀티미디어 리소스를 저장하는 미디어 데이터 박스와; 적어도 하나의 공통되는 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스와; 상기 다수의 트랙 박스들이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 입체형 카메라 및 디스플레이 정보 레퍼런스 박스와; 상기 입체형 비디오 스트림의 각 입체형 영상 프레임마다에 존재하며 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 참조 정보를 저장하는 입체형 카메라 및 디스플레이 정보 박스와; 메타데이터의 저장을 위한 메타 박스를 포함하여, 중복되는 데이터를 최소화함과 동시에 파일 포맷의 구성을 단순한 형태로 최적화할 수 있도록 한다.
입체형 비디오, 파일 포맷, TRAK, SCDI, SVMI, SCDR

Description

입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체{STEREOSCOPIC VIDEO FILE FORMAT AND COMPUTER READABLE RECORDING MEDIUM FOR RECORDING A STEREOSCOPIC VIDEO FILE THEREFORE}
본 발명은 입체형 비디오에 관한 것으로, 특히 비트 효율성 및 처리 효율성을 향상시킬 수 있는 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체에 관한 것이다.
영상 기술 및 디지털 기술의 발전으로 영상에 보다 생동감을 부여하여 이를 보는 사람으로 하여금 실감을 느낄 수 있도록 하는 입체형 비디오에 관한 기술이 제안되었다.
특히 ISO/IEC에서 주관하는 영상관련 표준화 그룹인 'JTC 1/SC 29/WG 11'에서는 입체형 비디오의 보관 및 재생을 위한 입체형 비디오의 파일 포맷을 제안하고 효율적으로 최적화하는 방안을 논의 중에 있다.
종래에 제안된 입체형 비디오 파일 포맷은 양안시점의 영상에 관한 것으로서, 좌측 영상과 우측 영상의 배열 형태를 나타내는 정보, 중간 삽입 광고와 같은 모노 영상의 포함 여부를 알리는 정보, 권장 디스플레이 정보 및 카메라 파라미터 정보, 다른 영상의 참조 여부 및 어떤 영상을 참조한다는 것을 나타내는 정보 등 다양한 정보를 포함한다.
그러나 종래에 제안된 입체형 비디오 파일 포맷에는 일반적으로 각 영상마다의 권장 디스플레이 정보 및 카메라 파라미터 정보를 포함하고 있어 데이터 량이 많아지고 중복되는 부분을 배제하지 못하여 효율성이 떨어지는 문제점이 있다. 특히 엘리먼트 스트림(Element Stream: ES)이라 일컬어지는 비디오 스트림이 좌측 영상, 우측 영상에 대해 각각 부호화되는 2ES의 경우, 좌측 영상과 우측 영상의 대응 정보는 거의 대부분 혹은 전부가 중복된다.
도 1은 종래 제안된 2ES의 입체형 비디오 스트림 구조를 나타낸 구조도이다.
도 1에 도시된 바와 같이, 2ES의 입체형 비디오 스트림은 좌측 ES와 우측 ES, 두 개의 ES로 구성되며, 각 ES는 다수의 입체형 영상 프레임들(S1~Sn)과 중간에 삽입되는 모노 영상 프레임(M1~Mn)을 포함할 수 있다.
각 입체형 비디오 스트림은 카메라 파라미터 및 권장 디스플레이 정보를 명시하는 입체형 카메라 및 디스플레이 정보(Stereoscopic Camera and Display Information: scdi)와 함께 트랙 박스(trak box)라고 불리는 곳에 보관되는데, 이때 입체형 카메라 및 디스플레이 정보는 좌측 ES와 우측 ES 간에 거의 혹은 완전히 중복된다. 트랙 박스 간 참조가 불가능하기 때문에 종래에 제안된 구조로는 이러한 중복성 배제가 근본적으로 불가능하다는 문제점이 있다.
또한 한 ES 내에서 한 영상이 다른 영상을 참조하는데 있어서, 너무 많은 영 상들이 한 영상을 참조하거나 그 참조관계가 얽히는 경우 파일 포맷의 복잡도를 가중시킬 수 있다는 문제점이 있다.
또한 이런 경우 컴퓨터가 파일을 분석하는 과정에서 어떤 영상이 어떤 영상을 참조하는지 알기 위해서는, 모든 영상의 참조 정보를 분석해야만 알 수 있기 때문에 초기 맵 구성이 불가능하다는 문제점도 있다.
따라서 본 발명은 상기와 같은 문제점을 해결하기 위해 창안된 것으로, 본 발명의 목적은 중복되는 데이터를 최소화할 수 있는 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체를 제공함에 있다.
본 발명의 다른 목적은 파일 포맷의 구성을 단순한 형태로 최적화할 수 있는 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체를 제공함에 있다.
본 발명의 또 다른 목적은 초기 맵 구성을 가능토록 함으로써 특정 영상의 파일 포맷 설계를 용이하게 할 수 있는 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체를 제공함에 있다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 파일 포맷 정보 및 모노 데이터 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스와; 입체형 비디오 스트림을 구성하는 다수의 트랙 박스들을 저장하는 무비 박스와; 멀티미디어 리소스를 저장하는 미디어 데이터 박스와; 적어도 하나의 공통되는 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스와; 상기 다수의 트랙 박스들이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 입체형 카메라 및 디스플레이 정보 레퍼런스 박스와; 상기 입체형 비디오 스트림의 각 입체형 영상 프레임마다에 존재하며 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 참조 정보를 저장하는 입체형 카메라 및 디스플레이 정보 박스와; 메타데이터의 저장을 위한 메타 박스를 포함할 수 있다.
바람직하게, 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 재정의를 통한 확장을 위해 입체형 비디오 스트림 배열 정보의 재정의를 지정할 수 있는 입체형 비디오 미디어 정보 확장 박스를 더 포함하는 것을 특징으로 한다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 입체형 비디오 스트림을 구성하는 다수의 입체형 영상 프레임들을 저장하는 제 1 영역과; 상기 다수의 입체형 영상 프레임들의 공통 스트림 배열 정보를 저장하는 제 2 영역과; 적어도 하나의 입체형 영상 프레임이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 제 3 영역과; 상기 입체형 영상 프레임들 각각에 존재하며 상기 제 3 영역의 참조 정보를 저장하는 제 4 영역을 포함할 수 있다.
또한 상기와 같은 목적을 달성하기 위하여, 본 발명은 일 실시 예에서, 파일 포맷 정보 및 모노 데이터 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스와; 입체형 비디오 스트림을 구성하는 다수의 트랙 박스들을 저장하는 무비 박스와; 멀티미디어 리소스를 저장하는 미디어 데이터 박스와; 적어도 하나의 공통되는 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스와; 상기 다수의 트랙 박스들이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 입체형 카메라 및 디스플레이 정보 레퍼런스 박스와; 상기 입체형 비디오 스트림의 각 입체형 영상 프레임마다에 존재하며 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 참조 정보를 저장하는 입체형 카메라 및 디스플레이 정보 박스와; 메타데이터의 저장을 위한 메타 박스를 포함할 수 있는 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체를 제공한다.
본 발명에 따른 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체는, 종래에 입체형 영상 프레임마다에 존재하여 중복되는 정보를 한 영역에 모아 저장하고 복호화 시에 링크를 통해 해당 정보를 참조할 수 있도록 함으로써, 입체형 비디오 파일에서 중복되는 정보를 제거하고 비트 효율성 및 처리 효율성을 향상시킬 수 있다.
또한 본 발명은 입체형 비디오 파일의 복잡한 구조를 단순화하고 최적화한 입체형 비디오 파일 포맷을 제안함으로써, 본 기술 분야의 표준화에 기여할 수 있다.
이하, 본 발명의 바람직한 실시 예들을 첨부한 도면을 참조하여 상세히 설명한다. 도면들 중 동일한 구성요소들은 가능한 한 어느 곳에서든지 동일한 부호들로 나타내고 있음에 유의해야 한다. 또한 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.
도 2는 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷의 구조를 나타내는 구조도이다.
도 2에 도시된 바와 같이, 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 파일 포맷 정보 및 모노 데이터(monoscopic data)의 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스(file type(ftyp) box)(100)와; 입체형 비디오 스트림을 구성하는 다수의 트랙 박스(trak box)(200b)들을 저장하는 무비 박스(movie(moov) box)(200)와; 멀티미디어 리소스를 저장하는 미디어 데이터 박스(media data(mdat) box)(300)와; 메타데이터로 구성되는 제 1 메타 박스(meta box)(400)를 포함하여 구성될 수 있다.
상기 입체형 비디오 스트림은 적어도 하나의 엘리먼트 스트림(element stream: ES)으로 구성될 수 있다.
상기 파일 타입 박스(100)는 하기 [표 1]과 같은 형태로 구성될 수 있다.
types Specifications
ss01 Stereoscopic content without partial monoscopic data
ss02 Stereoscopic content with partial monoscopic data
즉, 상기 파일 타입 박스(100)는 파일 타입을 명시하며, 입체형 콘텐츠에 모노 데이터의 포함 여부를 나타내기 위해 "ss01"과 "ss02"와 같은 식별자를 포함할 수 있다. 상기 모노 데이터는 광고 영상의 데이터일 수 있다.
상기 무비 박스(200)는 영상의 헤더 정보인 무비 헤더 박스(movie header(mvhd) box)(200a)를 더 포함할 수 있다.
상기 무비 박스(200)는 트랙 박스들 사이에 삽입되는 적어도 하나의 모노 데이터를 더 포함할 수 있다.
상기 트랙 박스(200b)는 해당 트랙 박스(200b)의 전반적 정보를 저장하는 트랙 헤더 박스(trak header(trhd) box)(210)와; 트랙 박스(200b) 내의 미디어 정보를 저장하는 컨테이너인 미디어 박스(media(mdia) box)(220)를 포함할 수 있다. 상기 트랙 헤더 박스(210)는 트랙 참조 컨테이너인 트랙 참조 박스(trak reference(tref) box)(212)를 포함할 수 있다. 상기 미디어 박스(220)는 미디어에 대한 전반적 정보를 저장하는 미디어 헤더 박스(media header(mdhd) box)(222)와; 오디오 데이터나 비디오 데이터와 같은 미디어 타입을 명시하는 핸들러 박스(handler(hdlr) box)(224)와; 미디어 정보 컨테이너인 미디어 정보 박스(media information(minf) box)(226)를 포함할 수 있다.
본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 적어도 하나의 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스(stereoscopic video media information(svmi) box)(410)와; 상기 다수의 트랙 박스(200b)들이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 적어도 하나의 입체형 카메라 및 디스플레이 정보 레퍼런스 박스(stereoscopic camera and display information reference(scdr) box)(420-1~420-n)를 더 포함할 수 있다.
상기 svmi 박스(410) 및 scdr 박스(420-1~420-n)는 상기 제 1 메타 박스(400)에 포함될 수 있다. 상기 제 1 메타 박스(400)는 아이템 위치에 대한 정보를 저장하는 아이템 위치 박스(Item Location(iloc) box)(430)와; 아이템 정보를 저장하는 아이템 정보 박스(Item Information(iinf) box)(440)를 더 포함할 수 있다.
본 발명의 실시 예에 따른 입체형 비디오 파일 포맷은, 재정의를 통한 확장이 용이할 수 있도록 입체형 비디오 스트림 배열 정보의 재정의를 지정할 수 있는 입체형 비디오 미디어 정보 확장 박스(stereoscopic video media information extention(svi2) box)(232)와; 상기 scdr 박스(420-1~420-n) 중 하나를 링크하거나 카메라 파라미터 및 권장 디스플레이 정보의 재정의를 지정할 수 있는 적어도 하나의 입체형 카메라 및 디스플레이 정보 박스(scdi box)를 더 포함할 수 있다.
상기 svi2 박스(232) 및 scdr 박스(234)는 상기 트랙 박스(200b) 내에 저장되는 제 2 메타 박스(230)에 포함될 수 있다.
도면에서는 상기 svmi 박스(410) 및 scdr 박스(420-1~420-n)는 상기 제 1 메타 박스(400)에, 상기 svi2 박스(232) 및 scdr 박스(234)는 상기 트랙 박스(200b) 내에 저장되는 제 2 메타 박스(230)에 포함되는 것으로 도시하였으나, 상기 svmi 박스(410), scdr 박스(420-1~420-n), svi2 박스(232), scdr 박스(234)는 특정 메타 박스 내에 꼭 포함될 필요는 없으며 상황에 따라 유연하게 이동될 수 있다. 예컨대 상기 svmi 박스(410), scdr(420-1~420-n) 박스가 무비 박스(200)에 포함될 수도 있고, 상기 svmi 박스(410), scdr 박스(420-1~420-n), svi2 박스(232), scdr 박스(234)가 어느 박스에 포함되지 않고 외부에 독립적으로 존재할 수도 있다. 혹은 상기 박스들에 포함된 정보량이 많아져서 처리시간의 지연을 유발할 수 있는 경우, 박스들에 포함되는 정보가 소정 단위나 기준에 의해 별도의 박스 형태로 분리될 수도 있다. 예컨대, 상기 scdr 박스나 scdi 박스의 카메라 파라미터 정보에 관련된 부분과 권장 디스플레이 정보에 관련된 부분이 별도의 박스 형태로 분리될 수도 있다.
상기 svmi 박스(410)는 하기 [표 2]의 신택스(syntax)와 같은 형태로 구성될 수 있다. 각 필드에 할당되는 비트 사이즈는 일예일 뿐 이에 국한되지 않으며, 필요에 따라 다양하게 변형될 수 있다는 것은 당업자라면 쉽게 이해할 수 있을 것이다.
<Syntax of svmi box>
aligned(8) class StereoscopicVideoMediaInformationBox extends FullBox('svmi', version = 0, 0){ // stereoscopic visual type information unsigned int(8) stereoscopic_composition_type; if (stereoscopic_composition_type != 3) { unsigned int(1) is_left_first; unsigned int(7) reserved; } else unsigned int(8) reserved; // stereoscopic contents information unsigned int(32) stereo_mono_change_count; for(i=0; i<stereo_mono_change_count; i++){ unsigned int(32) sample_count; unsigned int(1) stereo_flag; unsigned int(7) reserved; } }
상기 [표 2]를 살펴보면, 상기 svmi 박스(410)는 각 콘텐츠의 공용 정보를 포함할 수 있다.
또한 입체형 비디오 파일 포맷의 ES(Element Stream) 구조를 나타내는 "stereoscopic_composition_type"의 필드 값은 하기 [표 3]과 같이 정의될 수 있다.
stereoscopic_composition_type Idenification
0 1 ES 만이 존재한다. Side-by-Side format
1 1 ES 만이 존재한다. Vertical Line integrated format
2 1 ES 만이 존재한다. Frame sequential format
3 2 ES가 존재한다. Monoscopic image
"stereoscopic_composition_type"의 값이 0, 1, 2인 경우, 좌측 영상 프레임이 먼저인지의 여부를 나타내는 "is_left_first"와 입체형 영상 프레임과 모노 영상 프레임의 구별 정보인 "stereo_mono_change"는 공용으로 사용될 수 있다.
한편, "stereoscopic_composition_type"의 값이 3인 경우, "is_left_first"는 공용으로 사용될 수 없어서 해당 트랙의 svi2 박스(232)의 정보를 이용할 수 있다. 또한 "stereo_mono_change"는 공용으로 사용되거나 그렇지 않은 경우도 있는데, 만약 공용으로 사용되지 않는 경우 해당 트랙의 svi2 박스(232)의 정보를 이용할 수 있다.
즉, 1ES인 경우에는 모든 트랙 박스(200b)가 상기 svmi 박스(410)의 정보를 참조하며, 2ES인 경우에는 각 트랙 박스(200b)는 자신이 저장하고 있는 svi2 박스(232)의 정보를 이용할 수 있다.
상기 svi2 박스(232)는 하기 [표 4]의 신택스와 같은 형태로 구성될 수 있다.
<Syntax of svi2 box>
aligned(8) class StereoscopicVideoMediaInformationBoxEx extends FullBox('svi2', version = 0, 0){ // stereoscopic visual type information unsigned int(1) is_left_first; unsigned int(1) is_update_flag; unsigned int(6) reserved; if(is_update_flag){ // stereoscopic fragment information unsigned int(32) stereo_mono_change_count; for(i=0; i<stereo_mono_change_count; i++){ unsigned int(32) sample_count; unsigned int(1) stereo_flag; unsigned int(7) reserved; } } }
상기 [표 4]를 살펴보면, 상기 svi2 박스(232)는 최상위에 선언된 svmi 박스(410)의 정보를 기반으로 각 트랙의 특성에 따른 정보만을 저장하며, 이 정보는 필요에 의해 업데이트 될 수 있다. 예컨대 "stereo_mono_count"의 업데이트 유무를 나타내는 필드인 "is_update_flag"의 정보가 1이면, 해당 트랙의 "stereo_mono_count" 정보를 기입한다. 또한 2ES인 경우 "is_left_first"의 값을 하기 [표 5]와 같이 지정할 수 있다.
is_left_first Identification
1 Monoscopic left image
0 Monoscopic right image
상기 scdr 박스(420-1~420-n)는 하기 [표 6]의 신택스와 같은 형태로 구성될 수 있다.
<Syntax of scdr box>
aligned(8) class StereoscopicCameraAndDisplayInformationBox extends FullBox('scdr', version = 0, 0){ unsigned int (16) scdr_ID; // stereoscopic display information unsigned int(16) expected_display_width; unsigned int(16) expected_display_height; unsigned int(16) expected_viewing_distance; int(16) min_of_disparity; int(16) max_of_disparity; // stereoscopic camera information unsigned int(32) baseline; unsigned int(32) focal_length; unsigned int(32) convergence_distance; unsigned int(1) is_camera_cross; unsigned int(7) reserved; if (is_camera_cross){ unsigned int (32) rotation; } }
상기 scdr 박스(420-1~420-n)는 비디오 시퀀스에 사용된 디스플레이와 카메라 조합의 개수만큼 생성될 수 있다. 따라서 scdr 박스(420-1~420-n)는 파일 전체에 사용될 scdi 박스(234)의 기준 레퍼런스가 되며 그에 따른 식별정보(scdr_ID)를 포함할 수 있다.
상기 scdi 박스(234)는 하기 [표 7]의 신택스와 같은 형태로 구성될 수 있다.
<Syntax of scdi box>
aligned(8) class StereoscopicCameraAndDisplayInformationBox extends FullBox('scdi', version = 0, 0){ unsigned int (16) item_count; for( i=0; i<item_count; i++ ){ unsigned int(16) item_ID; unsigned int(1) is_item_ID_ref; unsigned int(1) is_scdr_ID_ref; unsigned int(6) reserved; if(is_scdi_ID_ref) { unsigned int(16) ref_scdr_ID; } else{ if(is_item_ID_ref){ unsigned int(16) ref_item_ID; } else{ //stereoscopic display information unsigned int(1) is_display_safety_info; unsigned int(7) reserved; if(is_display_safety_info){ unsigned int(16) expected_display_width; unsigned int(16) expected_display_height; unsigned int(16) expected_viewing_distance; int(16) min_of_disparity; int(16) max_of_disparity; } // stereoscopic camera information unsigned int(1) is_cam_params; unsigned int(7) reserved; if(is_cam_params){ unsigned int(32) baseline; unsigned int(32) focal_length; unsigned int(32) convergence_distance; unsigned int(1) is_camera_cross; unsigned int(7) reserved; if (is_camera_cross){ unsigned int (32) rotation; } } } } } }
상기 [표 7]에서 "is_scdr_ID_ref"는 scdr 박스(420-1~420-n)의 디스플레이 및 카메라 정보를 사용하는지의 여부를 나타내며, "ref_scdr_ID"는 레퍼런스가 되는 scdr 박스(420-1~420-n)의 ID를 나타낸다. 예컨대 "is_scdr_ID_ref"가 1이면 이 scdi 박스(234)는 scdr 박스(420-1~420-n) 중 하나(420-i)의 디스플레이 및 카메라 정보를 사용하는 것이며 이에 따라 "ref_scdr_ID"의 식별정보를 갖는 scdr 박스(420-i)를 찾아 그 정보를 이용할 수 있다.
즉, 각 입체형 영상 프레임에 존재하는 svi2 박스(232) 및 scdi 박스(234)는 각각 메타 박스 레벨의 svmi 박스(410) 및 scdr 박스(420-1~420-n)를 링크하거나 그 안의 정보를 재정의할 수 있다.
이를 통해 트랙 박스 레벨의 중복되는 정보를 하나의 메타 박스 레벨에 모으고, 트랙 박스 레벨에서 이를 링크하거나 재정의함으로써 중복되는 데이터를 최소화할 수 있다.
상술한 바와 같은 본 발명의 입체형 비디오 파일 포맷에 따른 입체형 비디오 파일은 컴퓨터로 읽을 수 있는 형태로 기록매체(예컨대, 씨디롬, 램, 플로피 디스크, 하드 디스크, 광자기 디스크, 플래쉬 메모리 등)에 저장될 수 있다.
이상에서는 본 발명에서 특정의 바람직한 실시 예에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시 예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
도 1은 종래 제안된 2ES 방식의 입체형 비디오 스트림 구조를 나타낸 구조도.
도 2는 본 발명의 실시 예에 따른 입체형 비디오 파일 포맷의 구조를 나타내는 구조도.

Claims (20)

  1. 파일 포맷 정보 및 모노 데이터 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스와;
    입체형 비디오 스트림을 구성하는 다수의 트랙 박스들을 저장하는 무비 박스와;
    멀티미디어 리소스를 저장하는 미디어 데이터 박스와;
    적어도 하나의 공통되는 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스와;
    상기 다수의 트랙 박스들이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 입체형 카메라 및 디스플레이 정보 레퍼런스 박스와;
    상기 입체형 비디오 스트림의 각 입체형 영상 프레임마다에 존재하며 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 참조 정보를 저장하는 입체형 카메라 및 디스플레이 정보 박스와;
    메타데이터의 저장을 위한 메타 박스를 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  2. 제 1항에 있어서,
    재정의를 통한 확장을 위해 입체형 비디오 스트림 배열 정보의 재정의를 지정할 수 있는 입체형 비디오 미디어 정보 확장 박스를 더 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  3. 제 2항에 있어서, 상기 입체형 비디오 미디어 정보 확장 박스는
    상기 트랙 박스에 포함되는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  4. 제 2항에 있어서, 상기 트랙 박스는
    상기 입체형 비디오 미디어 정보 박스와 상기 입체형 비디오 미디어 정보 확장 박스 중 하나의 입체형 비디오 스트림 배열 정보를 참조하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  5. 제 1항에 있어서, 상기 입체형 카메라 및 디스플레이 정보 박스는
    상기 트랙 박스에 포함되는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  6. 제 1항에 있어서, 상기 입체형 비디오 미디어 정보 박스 및 입체형 카메라 및 디스플레이 정보 레퍼런스 박스는
    상기 메타 박스에 포함되는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  7. 제 1항에 있어서, 상기 트랙 박스는
    상기 입체형 카메라 및 디스플레이 정보 박스의 카메라 파라미터 및 권장 디스플레이 정보를 이용하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  8. 제 7항에 있어서, 상기 입체형 카메라 및 디스플레이 정보 박스는
    상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스를 링크하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  9. 제 8항에 있어서, 상기 입체형 카메라 및 디스플레이 정보 박스는
    링크할 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 식별 정보를 저장하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  10. 제 8항에 있어서, 상기 입체형 카메라 및 디스플레이 정보 박스는
    상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 카메라 파라미터 및 권장 디스플레이 정보의 재정의를 지정하는 정보를 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  11. 제 1항에 있어서, 상기 입체형 비디오 스트림은
    적어도 하나의 엘리먼트 스트림(element stream)으로 구성되는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  12. 제 1항에 있어서, 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스는
    비디오 시퀀스에 사용된 디스플레이와 카메라 조합의 개수만큼 생성되는 것 을 특징으로 하는 입체형 비디오 파일 포맷.
  13. 입체형 비디오 스트림을 구성하는 다수의 입체형 영상 프레임들을 저장하는 제 1 영역과;
    상기 다수의 입체형 영상 프레임들의 공통 스트림 배열 정보를 저장하는 제 2 영역과;
    적어도 하나의 입체형 영상 프레임이 참조할 카메라 파라미터 및 권장 디스플레이 정보를 저장하는 제 3 영역과;
    상기 입체형 영상 프레임들 각각에 존재하며 상기 제 3 영역의 참조 정보를 저장하는 제 4 영역을 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  14. 제 13항에 있어서,
    재정의를 통한 확장을 위해 입체형 비디오 스트림 배열 정보의 재정의를 지정하는 정보를 저장하는 제 5영역을 더 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  15. 제 13항에 있어서, 상기 입체형 영상 프레임은
    상기 제 3 영역의 카메라 파라미터 및 권장 디스플레이 정보를 이용하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  16. 제 15항에 있어서, 상기 제 4 영역은
    상기 제 3 영역과 링크되어, 해당 영역의 카메라 파라미터 및 권장 디스플레이 정보를 참조하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  17. 제 16항에 있어서, 상기 제 4 영역은
    상기 링크를 위해 상기 제 3 영역의 식별정보를 저장하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  18. 제 16항에 있어서, 상기 제 4 영역은
    상기 제 3 영역의 카메라 파라미터 및 권장 디스플레이 정보의 재정의를 지정하는 정보를 포함하는 것을 특징으로 하는 입체형 비디오 파일 포맷.
  19. 파일 포맷 정보 및 모노 데이터 포함 여부를 나타내는 정보를 저장하는 파일 타입 박스와;
    입체형 비디오 스트림을 구성하는 다수의 트랙 박스들을 저장하는 무비 박스와;
    멀티미디어 리소스를 저장하는 미디어 데이터 박스와;
    적어도 하나의 공통되는 입체형 비디오 스트림 배열 정보를 저장하는 입체형 비디오 미디어 정보 박스와;
    상기 다수의 트랙 박스들이 참조할 카메라 파라미터 및 권장 디스플레이 정 보를 저장하는 입체형 카메라 및 디스플레이 정보 레퍼런스 박스와;
    상기 입체형 비디오 스트림의 각 입체형 영상 프레임마다에 존재하며 상기 입체형 카메라 및 디스플레이 정보 레퍼런스 박스의 참조 정보를 저장하는 입체형 카메라 및 디스플레이 정보 박스와;
    메타데이터의 저장을 위한 메타 박스를 포함하는 것을 특징으로 하는 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체.
  20. 제 19항에 있어서,
    재정의를 통한 확장을 위해 입체형 비디오 스트림 배열 정보의 재정의를 지정할 수 있는 입체형 비디오 미디어 정보 확장 박스를 더 포함하는 것을 특징으로 하는 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체.
KR1020080008118A 2008-01-25 2008-01-25 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체 KR100924757B1 (ko)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020080008118A KR100924757B1 (ko) 2008-01-25 2008-01-25 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체
CN2009801093208A CN101978699A (zh) 2008-01-25 2009-01-28 立体视频文件格式和按照该格式记录有立体视频文件的计算机可读记录介质
EP09703099A EP2247115A4 (en) 2008-01-25 2009-01-28 STEREOSCOPIC VIDEO FILE FORMAT AND COMPUTER READABLE RECORDING MEDIUM IN WHICH A STEREOSCOPIC VIDEO FILE IS RECORDED IN SAID FORMAT
PCT/KR2009/000408 WO2009093881A1 (ko) 2008-01-25 2009-01-28 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오 파일을 기록한 컴퓨터로 판독 가능한 기록매체
US12/864,404 US8659642B2 (en) 2008-01-25 2009-01-28 Stereoscopic video file format and computer readable recording medium in which stereoscopic video file is recorded according thereto

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080008118A KR100924757B1 (ko) 2008-01-25 2008-01-25 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체

Publications (2)

Publication Number Publication Date
KR20090081933A true KR20090081933A (ko) 2009-07-29
KR100924757B1 KR100924757B1 (ko) 2009-11-05

Family

ID=40901291

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080008118A KR100924757B1 (ko) 2008-01-25 2008-01-25 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체

Country Status (5)

Country Link
US (1) US8659642B2 (ko)
EP (1) EP2247115A4 (ko)
KR (1) KR100924757B1 (ko)
CN (1) CN101978699A (ko)
WO (1) WO2009093881A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012023822A3 (ko) * 2010-08-19 2012-04-12 삼성전자 주식회사 영상 기록 재생 장치, 영상 기록 재생 방법, 및 기록매체

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009075495A1 (en) * 2007-12-10 2009-06-18 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
KR101591085B1 (ko) * 2008-05-19 2016-02-02 삼성전자주식회사 영상 파일 생성 및 재생 장치 및 방법
US20110276662A1 (en) * 2010-05-07 2011-11-10 Samsung Electronics Co., Ltd. Method of constructing multimedia streaming file format, and method and apparatus for servicing multimedia streaming using the multimedia streaming file format
CN102340681A (zh) * 2010-07-26 2012-02-01 深圳市锐取软件技术有限公司 3d立体视频单文件双视频流录制方法
CN102404577A (zh) * 2011-12-01 2012-04-04 无锡太行电子技术有限公司 3d立体视频编码存储方法
CN102780897A (zh) * 2012-05-31 2012-11-14 新奥特（北京）视频技术有限公司 一种单文件视频素材支持3d技术的方法
CN103179421B (zh) * 2013-01-25 2015-08-19 成都索贝数码科技股份有限公司 一种立体视频文件的描述与管理方法
CN109600601A (zh) * 2018-11-23 2019-04-09 维沃移动通信有限公司 一种存储3d图像的方法及终端设备
CN113542907B (zh) * 2020-04-16 2022-09-23 上海交通大学 多媒体数据收发方法、系统、处理器和播放器

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3108585B2 (ja) * 1993-07-28 2000-11-13 日本電信電話株式会社 ビデオ画像プリントアクセス方法およびシステム
US5642171A (en) * 1994-06-08 1997-06-24 Dell Usa, L.P. Method and apparatus for synchronizing audio and video data streams in a multimedia system
US6005607A (en) * 1995-06-29 1999-12-21 Matsushita Electric Industrial Co., Ltd. Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus
US7319720B2 (en) * 2002-01-28 2008-01-15 Microsoft Corporation Stereoscopic video
JPWO2003092304A1 (ja) * 2002-04-25 2005-09-08 シャープ株式会社 画像データ生成装置、画像データ再生装置、および画像データ記録媒体
JP4337502B2 (ja) * 2003-10-29 2009-09-30 ソニー株式会社 ファイル処理装置、ファイル処理方法、ファイル処理方法のプログラム、ファイル処理方法のプログラムを記録した記録媒体及び撮像装置
JP4529556B2 (ja) 2004-06-24 2010-08-25 パナソニック株式会社 立体視用の画像ファイルを生成する電子機器、３次元画像データを生成する電子機器、画像ファイル生成方法、３次元画像データ生成方法および画像ファイルのファイル構造
JP2006074531A (ja) * 2004-09-03 2006-03-16 Canon Inc データ記録再生装置及び方法
KR20050092688A (ko) * 2005-08-31 2005-09-22 한국정보통신대학교 산학협력단 통합 멀티미디어 파일 포맷 구조와 이를 기반으로 하는멀티미디어 서비스 제공 시스템 및 그 방법
US20070078898A1 (en) * 2005-09-30 2007-04-05 Yahoo! Inc. Server-based system and method for retrieving tagged portions of media files
KR100871740B1 (ko) * 2006-08-31 2008-12-05 한국정보통신대학교 산학협력단 멀티미디어 방송 콘텐츠용 통합 파일 포맷 구조를 가진 데이터를 기록한 기록 매체, 멀티미디어 방송 콘텐츠 서비스 시스템 및 그 방법
KR100716142B1 (ko) 2006-09-04 2007-05-11 주식회사 이시티 스테레오스코픽 영상 데이터의 전송 방법
EP2001235B1 (en) * 2007-06-08 2013-05-22 Samsung Electronics Co., Ltd. MPEG-4 format extension for recording stereoscopic or synthetic 3D video data with related metadata
US8274551B2 (en) * 2007-06-11 2012-09-25 Samsung Electronics Co., Ltd. Method and apparatus for generating header information of stereoscopic image data
US20080303832A1 (en) * 2007-06-11 2008-12-11 Samsung Electronics Co., Ltd. Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same
US8400497B2 (en) * 2007-09-07 2013-03-19 Samsung Electronics Co., Ltd Method and apparatus for generating stereoscopic file
WO2009075495A1 (en) * 2007-12-10 2009-06-18 Samsung Electronics Co., Ltd. System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
WO2009099307A1 (en) * 2008-02-05 2009-08-13 Samsung Electronics Co., Ltd Apparatus and method for generating and displaying media files
KR20090088772A (ko) * 2008-02-15 2009-08-20 삼성전자주식회사 슬라이드 쇼를 위한 영상파일을 생성 및 재생하기 위한시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012023822A3 (ko) * 2010-08-19 2012-04-12 삼성전자 주식회사 영상 기록 재생 장치, 영상 기록 재생 방법, 및 기록매체
US9049414B2 (en) 2010-08-19 2015-06-02 Samsung Electronics Co., Ltd. Device for recording and reproducing image, method for recording and reproducing image, and recording medium

Also Published As

Publication number Publication date
US20100289876A1 (en) 2010-11-18
KR100924757B1 (ko) 2009-11-05
US8659642B2 (en) 2014-02-25
WO2009093881A1 (ko) 2009-07-30
EP2247115A1 (en) 2010-11-03
CN101978699A (zh) 2011-02-16
EP2247115A4 (en) 2012-11-14

Similar Documents

Publication Publication Date Title
KR100924757B1 (ko) 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체
US9781403B2 (en) Method and apparatus for generating stereoscopic file
US8396906B2 (en) Metadata structure for storing and playing stereoscopic data, and method for storing stereoscopic content file using this metadata
KR101276605B1 (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
EP2088789A2 (en) Apparatus and method for generating and displaying media files
US20100171812A1 (en) Format for encoded stereoscopic image data file
CA2713857C (en) Apparatus and method for generating and displaying media files
KR101434674B1 (ko) 스테레오스코픽 파일을 생성하기 위한 장치 및 방법
EP2277319B1 (en) Apparatus and method for creating and displaying media file
KR100939641B1 (ko) 입체형 비디오 파일 포맷 및 그에 따른 입체형 비디오파일을 기록한 컴퓨터로 판독 가능한 기록매체
KR101396350B1 (ko) 다시점 영상 데이터스트림 생성 방법 및 장치와 다시점영상 데이터스트림 복호화 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130621

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20140708

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20150626

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20161018

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20181008

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20191001

Year of fee payment: 11