KR20080039797A - 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치 - Google Patents

스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치 Download PDF

Info

Publication number
KR20080039797A
KR20080039797A KR20070108435A KR20070108435A KR20080039797A KR 20080039797 A KR20080039797 A KR 20080039797A KR 20070108435 A KR20070108435 A KR 20070108435A KR 20070108435 A KR20070108435 A KR 20070108435A KR 20080039797 A KR20080039797 A KR 20080039797A
Authority
KR
South Korea
Prior art keywords
media data
content
stereoscopic
stereoscopic content
metadata
Prior art date
Application number
KR20070108435A
Other languages
English (en)
Other versions
KR101362941B1 (ko
Inventor
조숙희
윤국진
허남호
김진웅
이수인
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to PCT/KR2007/005358 priority Critical patent/WO2008054100A1/en
Priority to JP2009535205A priority patent/JP5022443B2/ja
Publication of KR20080039797A publication Critical patent/KR20080039797A/ko
Application granted granted Critical
Publication of KR101362941B1 publication Critical patent/KR101362941B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 스테레오 카메라 또는 CG/애니메이션 저작도구에 의하여 획득되어 생성된 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠를 전송하거나 저장한 뒤 재생하기 위해 새롭게 요구되는 메타 데이터를 제안하고, 제안하는 메타 데이터들이 MPEG-4 초기객체기술자(InitialObjectDescriptor), 객체기술자(Object Descriptor), 기초스트림 기술자(ES_Descriptor)의 구조 내부에 포함되도록 정의하여, 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠가 MPEG-4 systems 기반으로 전송되거나 MP4 파일 기반으로 저장되었을 때 원활히 재생이 가능하도록 한다.
Figure P1020070108435
스테레오스코픽 메타데이터, 스테레오스코픽 영상, Stereoscopic Descriptor

Description

스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의 복호화 방법 및 장치{Method and Apparatus for decoding metadata used for playing stereoscopic contents}
본 발명은 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠를 원활히 재생하기 위하여 필요한 메타데이터를 정의하고 이를 이용한 저장포맷 및 복호화 방법과 장치에 관한 것이다.
본 발명은 정보통신부 및 정보통신연구진흥원의 IT차세대핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2005-S-403-02, 과제명: 지능형 통합정보 방송(SmaR TV) 기술개발].
기존의 2D(모노) 영상 및 동영상을 포함하는 콘텐츠를 유통하여 재생하기 위하여 avi 파일, MPEG-4 MP4파일 등의 포맷이 존재한다. 그러나, 스테레오스코픽 비디오에 대해서는 전송 방식에 대한 연구가 주로 진행되어 왔으며, 2007년 1월부터 MPEG에서 스테레오스코픽 콘텐츠의 재생을 위한 저장포맷에 대한 표준화가 시작되었다.
스테레오 카메라 또는 CG/애니메이션 저작도구에 의하여 획득되어 생성되는 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠를 실시간 전송하거나 비실시간으로 전달하여 재생하고자 할 경우는 일정한 형태의 전송스트림 포맷이나 저장 포맷이 필요하며, 이 포맷에는 콘텐츠의 미디어 데이터와 더불어 재생에 필요한 메타 데이터가 요구된다.
본 발명은 스테레오 카메라 또는 CG/애니메이션 저작도구에 의하여 획득되어 생성된 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠를 전송하거나 저장한 뒤 재생하기 위해 새롭게 요구되는 메타데이터를 제안하고, 제안하는 메타 데이터들이 MPEG-4 초기객체기술자(InitialObjectDescriptor), 객체기술자(Object Descriptor), 기초스트림 기술자(ES_Descriptor)의 구조 내부에 포함되도록 정의하여, 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠가 MPEG-4 systems 기반으로 전송되거나 MP4 파일 기반으로 저장되었을 때 원활히 재생이 가능하도록 한다.
본 발명에서 제안하는 메타 데이터를 포함하는 새로운 기술자는 기존의 초기객체기술자, 객체기술자 및 기초스트림 기술자의 구조와 호환성을 유지하도록 정의하여 기존 플레이어를 가지고 있는 사용자는 2차원 영상을 볼 수 있도록 한다.
또한, 본 발명에서 제안하는 메타 데이터를 이용하여 사용자의 선택에 의하여 2차원 또는 다양한 스테레오스코픽 디스플레이 모드로 선택하여 재생할 수 있는 기 능을 갖는 스테레오스코픽 플레이어 구조를 제안하여 사용자의 시청방법을 다양하게 지원하도록 한다.
스테레오스코픽 영상 및 동영상 콘텐츠를 재생하기 위하여 필요한 메타데이터를 정의하고 이를 포함하는 MPEG-4기반 기술자 및 그 구조를 제안하여, 스테레오스코픽 콘텐츠의 전송이나 저장이 가능하도록 하였다.
본 발명의 바람직한 일 실시예로서, 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 컴퓨터 판독 기록매체는, 상기 메타 데이터는 수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별하는 구별코드;를 포함하고, 상기 수신한 콘텐츠가 스테레오스코픽 콘텐츠인 경우, 상기 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지를 나타내는 ES코드;를 더 포함한다.
또한, 바람직하게 상기 메타 데이터는 상기 스테레오스코픽 콘텐츠가 하나의 ES로 구성된 경우, 상기 하나의 ES로부터 복호화된 좌우영상의 형태가 탑다운(Top-down), 측면(Side-by-Side), 필드시퀀셜 및 프레임 시퀀셜포맷 중 어느 형태의 포맷인지를 나타내는 ES형태코드; 상기 스테레오스코픽 콘텐츠가 두개의 ES로 구성된 경우, 상기 스테레오스코픽 콘텐츠의 부가미디어데이터가 제2시점영상, 깊이맵 또는 양방향시차맵 중 어느 것에 해당하는지 나타내는 타입코드; 스테레오스코픽 콘텐츠의 메인미디어데이터와 부가미디어데이터 간의 영상크기 정보를 나타 내는 크기코드; 및 기초스트림 기술자(ES_descriptor)에 기술되는 ES가 스테레오스코픽 콘텐츠의 부가미디어데이터인지를 나타내는지를 나타내는 ES플래그코드;중 적어도 하나 이상을 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 복호화 장치는 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신하는 수신부;를 포함하고, 이 경우 상기 메타데이터는 수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별하는 구별코드;를 포함하며, 상기 수신한 콘텐츠가 스테레오스코픽 콘텐츠인 경우, 상기 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지를 나타내는 ES코드;를 더 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신하는 수신부; 상기 비트스트림에 포함된 상기 메타데이터를 기초로 사용자에게 2D 모드 또는 3D 모드 중 중 선택할 수 있는 기회를 제공하는 시청모드선택부; 상기 사용자의 선택에 따라 상기 비트스트림을 복호화하여 2D 장면 또는 3D 장면으로 디스플레이하는 디스플레이부;를 포함한다.
본 발명의 또 다른 바람직한 일 실시예로서, 스테레오스코픽 영상을 복호화하는 방법은 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신하 는 단계; 상기 비트스트림에 포함된 상기 메타데이터를 기초로 사용자에게 2D 모드 또는 3D 모드 중 중 선택할 수 있는 기회를 제공하는 시청모드선택제공단계; 상기 사용자의 선택에 따라 상기 비트스트림을 복호화하여 2D 장면 또는 3D 장면으로 디스플레이하는 단계;를 포함하는 것을 특징으로 한다.
이하 본 발명의 바람직한 실시예가 첨부된 도면들을 참조하여 설명될 것이다. 도면들 중 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 참조번호들 및 부호들로 나타내고 있음에 유의해야 한다. 하기에서 본 발명을 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
스테레오스코픽 영상 및 동영상 콘텐츠는 좌우 두 시점의 영상이 짝으로 구성되거나, 한 시점의 영상과 Depth map(깊이 맵) 또는 Disparity map(양방향 시차맵)으로 구성될 수 있다. 후자의 경우는 Depth map 또는 Disparity map을 이용하여 한 시점 영상의 짝이 되는 나머지 한 시점의 영상을 가상으로 생성함으로써 스테레오스코픽 콘텐츠를 만들 수 있게 된다.
본 발명에서는 한 시점의 영상을 Main 미디어 데이터로 정의하고, 나머지 한 시점의 영상, Depth map 및 Disparity map을 부가 미디어데이터로 정의하여 설명한다.
스테레오스코픽 콘텐츠를 디스플레이하는 방법은 여러 가지가 있다. 좌우영상을 겹쳐서 디스플레이하는 편광방식, 좌우영상의 프레임을 교대로 반복하여 재생 하는 프레임 시퀀셜(Frame sequential) 방식, 좌우영상의 필드영상을 교대로 반복하여 재생하는 필드 시퀀셜(Field sequential) 방식, 좌영상의 홀수라인, 우영상의 짝수라인만을 라인 단위로 인터리빙하여 재생하는 방식, 좌영상의 홀수열, 우영상의 짝수열을 픽셀 단위로 인터리빙하여 재생하는 방식이 주로 이용되고 있다.
본 발명에서 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠를 전송하거나 저장한 뒤 재생하기 위해 새롭게 요구되는 메타 데이터는 크게 다음과 같이 정리될 수 있다. 표 1을 참고하여 설명하면 다음과 같다.
표 1 은 스테레오스코픽 영상 재생에 필요한 메타데이터를 정리한 목록이다.
메타 데이터는 구별코드, ES 코드, ES형태코드,크기코드, 타입코드, ES플래그코드를 포함한다. 표 1에서 VisualContentsType는 구별코드, NumberOFVisualES_mius1는 ES코드, StereoVisualFormat는 ES형태코드, StereoAdditionalVisualSize는 크기코드, StereoAdditionalVisualType은 타입코드 및 StereoAdditioanlVisual_ES flag 는 ES플래그코드를 각각 나타낸다.
스테레오스코픽 콘텐츠를 처리하기 위해서는 전송되어 오거나 저장되어 있는 콘텐츠가 스테레오스코픽 콘텐츠인지 기존 2차원 콘텐츠인지를 구별하는 정보가 필요하다. 이를 위해 메타데이터의 구별코드(VisualContentsType)는 수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별한다.
구별코드가 수신한 콘텐츠가 스테레오스코픽 콘텐츠임을 나타내는 경우, ES코드(NumberOFVisualES_mius1)는 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지 정보를 알려준다. 부호화된 스테레오스코픽 기초스트림의 메인 미디어 데이터와 부가 미디어데이터가 한 개의 ES로 구성되어 있는지 각각의 ES로 구성되는지를 나타내는 정보이다.
ES형태코드(StereoVisualFormat)는 스테레오스코픽 콘텐츠가 하나의 ES로 구성된 경우, 상기 하나의 ES로부터 복호화된 좌우영상의 형태가 한 프레임내 상하로 구분되어 있는 탑다운(Top-down) 형태인지, 한프레임내 좌우로 구분되어 있는 측면(Side-by-Side)형태인지, 좌영상필드와 우영상필드가 교대로 되어 있는 필드시퀀셜(field sequential) 형태인지 좌영상 프레임과 우영상 프레임이 교대로 되어 있는 프레임 시퀀셜(frame sequential) 형태인지를 나타낸다.
타입코드(StereoAdditionalVisualType)는 스테레오스코픽 콘텐츠가 두개의 ES로 구성된 경우, 상기 스테레오스코픽 콘텐츠의 부가미디어데이터가 제2시점영상, 깊이맵 또는 양방향시차맵 중 어느 것에 해당하는지를 나타낸다.
스테레오스코픽 콘텐츠가 두 개의 ES로 구성되는 경우는 메인미디어데이터와 부가 미디어데이터의 부호화스트림에 각각의 ES_ID를 할당하는 경우로서, 부가 미디어데이터에 대한 메인미디어데이터가 어느 ES인지를 알아야만 복호화 후에 두 개의 미디어데이터를 이용하여 스테레오스코픽 콘텐츠를 생성할 수 있다.
따라서 이 경우에는 부가 미디어데이터가 나머지 한시점의 영상인지, Depth map인지, Disparity map인지를 나타내는 메타데이터인 타입코드가 필요하며, 상기에서와 마찬가지로 부가 미디어데이터에 대한 영상크기를 나타내는 메타데이터인 크기코드가 필요하다.
크기코드(StereoAdditionalVisualSize)는 스테레오스코픽 콘텐츠의 메인미디어데이터와 부가미디어데이터 간의 영상크기 정보를 나타내는 정보로서, 스테레오스코픽 콘텐츠의 부가 미디어데이터가 Main 미디어데이터의 영상크기와 동일한 크기인지, 수평방향 1/2크기인지, 수직방향 1/2크기인지, 수평 및 수직방향 1/2크기인지를 나타낸다.
일 예를 들면, ES형태코드(StereoVisualFormat)가 프레임시퀀셜 형태인 경우에는 부가 미디어데이터로 분류된 나머지 한 시점의 영상(우영상) 크기 정보를 나타내는 크기코드가 필요하다. 왜냐하면, 스테레오스코픽 디스플레이 방식에 있어서 편광방식이나 프레임 시퀀셜 방식의 경우는 좌우영상의 원래 크기의 영상이 모두 디스플레이되지만, 나머지 방식의 경우 원래 크기에서 수평 또는 수직 방향으로 1/2축소된 크기의 영상만으로 스테레오스코픽 콘텐츠를 디스플레이하기 때문이다.
따라서, 좌영상은 2차원 콘텐츠 재생을 고려하여 원래 크기를 유지하는 것으로 하고, 우영상은 스테레오스코픽 콘텐츠 재생시에만 이용되므로, 원영상의 크기, 원영상 크기에서 수평방향 1/2 축소된 크기, 수직방향 1/2 축소된 크기, 또는 수평 및 수직방향으로 각각 1/2 축소된 크기를 가질 수 있는 경우를 모두 고려하여 이를 나타내는 정보인 크기코드가 요구된다.
ES플래그코드(StereoAdditioanlVisual_ES flag)는 기초스트림 기술자(ES_descriptor)에 기술되는 ES가 스테레오스코픽 콘텐츠의 부가미디어데이터인지를 나타낸다.
도 1 (a) 내지 (c) 는 MPEG-4의 객체기술자(ObjectDescriptor), 초기객체기 술자(InitialObjectDescriptor) 및 기초스트림기술자(ES_Descriptor)의 구성도이다.
도 1 (a) 내지 (c) 는 MPEG-4의 객체기술자(ObjectDescriptor), 초기객체기술자(InitialObjectDescriptor) 및 기초스트림기술자(ES_Descriptor) 각각에 포함되어 있는 'extDescr' 필드는 추후에 필요한 기술자를 추가적으로 기술하기 위하여 MPEG-4 에서 정의된 필드이다.
본 발명에서는 MPEG-4 초기객체기술자(InitialObjectDescriptor), 객체기술자(Object Descriptor), 기초스트림 기술자(ES_Descriptor)의 extDescr 필드 내부에 메타데이터를 기술한 기술자를 포함되도록 정의하여, 스테레오스코픽 영상 및 동영상을 포함하는 콘텐츠가 MPEG-4 systems 기반으로 전송되거나 MP4 파일 기반으로 저장되었을 때 원활히 재생이 가능하도록 한다.
도 2(a) 및 (b) 는 본 발명에서 제시하는 메타데이터를 기술한 기술자의 예를 도시한다.
본 발명의 메타데이터를 기술한 기술자인 'ObjectStereoscopicDescriptor' 및 'ES_stereoscopicDescriptor' 2 개의 기술자는 MPEG-4에 이미 정의된 객체기술자, 초기객체기술자 및 기초스트림기술자의 구조와 호환성이 유지되도록 기술되는 것을 특징으로 한다.
표2는 MPEG-4 part1:systems에 정의되어 있는 기술자 목록을 나타내며, 본 발명에서 제안하는 2개의 기술자를 는 표3에 나타낸 바와 같이 'private value' 값으로 할당하여 기술자 목록에 추가한다.
도 2(a) 에 도시된 'ObjectStereoscopicDescriptor' 는 초기객체기술자 또는 객체기술자 내에 포함되어야 하는 정보를 나타내는 기술자로서, 기존의 초기객체기술자 또는 객체기술자의 구조와 호환성을 유지하기 위하여 MPEG-4 초기객체기술자(InitialObjectDescriptor), 객체기술자(Object Descriptor) 내의 'extDescr' 필드에 포함되는 구조를 지닌다.
따라서, MPEG-4 초기객체기술자(InitialObjectDescriptor), 객체기술자(Object Descriptor) 내에 'ObjectStereoscopicDescriptor' 를 포함하고 있으면 수신한 비트스트림 내의 콘텐츠가 스테레오스코픽 콘텐츠임을 알 수 있다.
도 2(a)는 'ObjectStereoscopicDescriptor'에 포함되는 메타데이터 및 구조의 일 실시예를 나타낸다.
'ObjectStereoscopicDescriptor'에서 NumberOfVisualES_mius1=0인 경우(210)는 스테레오스코픽 미디어데이터가 한 개의 ES로 구성되어 있는 경우를 나타내고, ES형태코드(StereoVisualFormat)를 통해 하나의 ES로부터 복호화된 좌우영상의 포맷이Top-down format인지, Side-by-side format인지, Field sequential format인지, Frame sequential format인지를 나타낸다. 이 경우 사용되는 ES형태코드(StereoVisualFormat)의 분류 및 값은 표 4와 같이 정의한다.
또한 메타데이터 기술자인 'ObjectStereoscopicDescriptor'에 부가 미디어데이터량을 줄이기 위하여 영상크기를 축소하여 표현하는 경우를 고려한 메타데이터인 ES형태코드(StereoVisualFormat)가 프레임시퀀셜 포맷을 나타내는 경우 크기코드(StereoAdditionalVisualSize)를 조건부로 포함할 수 있다. 크기코 드(StereoAdditionalVisualSize)는 표 5에 나타낸 바와 같이 4가지로 정의한다.
'ObjectStereoscopicDescriptor'에서 NumberOfVisualES_mius1=1인 경우(220)는 스테레오스코픽 미디어데이터가 한 개의 오브젝트(object)내에 메인미디어데이터와 부가 미디어데이터에 대한 ES가 각각 존재하는 경우를 나타내고. 크기코드(StereoAdditionalVisualSize)와 타입코드(StereoAdditionalVisualType)를 이용하여 정보를 서술한다. 크기코드는 표 5에 나타난 바와 같이, 타입코드는 표 6에 나타난 바와 같이 분류하여 값을 할당한다.
도 2(b)는 'ES_stereoscopicDescriptor'에 포함되는 메타데이터 및 구조의 일 실시예를 나타낸다.
'ES_stereoscopicDescriptor'는 ES_Descriptor 내에 포함되어야 할 정보를 나타내는 기술자로서, 기존의 ES_Descriptor의 구조와 호환성을 유지하기 위하여 ES_Descriptor 내의 'extDescr' 필드 에 하나의 기술자로 포함된다.
한 개의 오브젝트(object)내에 메인미디어데이터와 부가 미디어데이터에 대한 ES가 각각 존재하는 경우, 부가 미디어데이터에 대한 ES를 기술하는 ES_Descriptor에서는 'streamDependenceFlag'를 1로 설정하고, 메인미디어데이터를 기술하는 ES_ID값을 포함한다.
그러나 'streamDependenceFlag'를 1로 설정하더라도 본 ES가 스테레오스코픽 콘텐츠 생성을 위한 메인미디어데이터의 부가 미디어데이터로 한정할 수는 없다. 스테레오스코픽 콘텐츠가 아니더라도 한 개의 오브젝트 내에 여러 개의 ES가 존재하여 'streamDependenceFlag'를 1로 설정할 수 있기 때문이다.
따라서, 'ObjectStereoscopicDescriptor'에서 NumberOfVisualES_mius1=1로 설정되어 한 개의 오브젝트 내의 스트레오스코픽 미디어데이터에 메인미디어데이터와 부가 미디어데이터에 대한 ES가 각각 존재하는 경우, 'ES_stereoscopicDescriptor'를 'ES_Descriptor'에 추가하여, 본 ES가 스테레오스코픽 콘텐츠를 생성하기 위한 부가 미디어 데이터임을 나타낸다. 'ES_stereoscopicDescriptor'는 도 2(b)에 도시된 바와 같이 ES플래그코드(StereoAdditionalVisual_ES flag)값을 지니고, 표 7과 같이 정의된다.
ES플래그코드(StereoAdditionalVisual_ES flag)값이 1로 설정되면, 'ES_Descriptor'내의 'DependsOn_ES_ID'에 기술된 ES가 메인미디어데이터이고, 본 ES가 부가미디어데이터인 스테레오스코픽 콘텐츠로 인식한다.
도 3 은 본 발명의 스테레오스코픽 콘텐츠 재생을 위한 복호화 장치의 구성도를 도시한다.
메타데이터를 포함하여 전송되거나 저장된 스테레오스코픽 콘텐츠의 스트림를 재생하는 스테레오스코픽 플레이어는 미디어데이터를 복호화한 후, 스테레오스코픽 콘텐츠를 디스플레이하는 방식에 맞도록 미디어데이터 포맷을 변환하여 디스플레이 할 수 있어야 하며, 2차원 디스플레이 모드와 스테레오스코픽 디스플레이 모드를 사용자가 선택할 수 있는 기능을 포함하여야 한다.
이를 위해 본 발명의 복호화 장치는 수신부(310), 시청모드선택부(320), 콘텐츠생성부(330) 및 디스플레이부(340)를 포함한다.
수신부(310)는 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장 한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신한다. 복호화부에서 수신한 비트스트림을 복호하여 콘텐츠 재생부로 복호화된 메타데이터와 미디어데이터를 전송한다.
시청모드선택부(320)에서는 메타데이터를 기초로 사용자에게 2D 모드 또는 3D 모드 중 중 선택할 수 있는 기회를 제공한다. 현재 수신한 비트스트림이 스테레오스코픽 콘텐츠인 경우 복호화부에서 복호화된 3D 콘텐츠를 플레이한다. 이 경우 디스플레이되는 화면에 3D 콘텐츠임을 나타내는 표시나 로그를 삽입한다. 즉, 사용자는 3D 콘텐츠인 경우 시청모드선택부(320)를 통해 3D 또는 2D로 선택하여 시청할 수 있다.
콘텐츠 생성부(330)는 복호된 데이터와 시청모드 선택부(320)로부터 입력된 사용자입력을 이용하여 복호화 장치의 일 예인 플레이어의 디스플레이부 판넬에 맞는 형태의 콘텐츠를 생성한다. 일 실시예로서, 플레이어에 장착된 디스플레이 판넬이 좌우영상을line-by-line으로 interleaving된 프레임을 입력으로 받아서 스테레오스코픽 콘텐츠를 재생하는 경우, 좌우영상은 각각 좌영상의 원래 크기에 비해 수직방향으로 1/2축소된 크기의 좌우영상을 line-by-line으로 인터리빙한 스테레오스코픽 콘텐츠가 생성된다.
디스플레이부(340)는 콘텐츠 생성부(330)에서 출력되는 영상을 입력받아 재생한다. 사용자의 선택에 따라 콘텐츠 생성부(330)에서 출력되는 콘텐츠 영상을 2D 장면 또는 3D 장면으로 디스플레이한다.
이 경우, 3D 디스플레이 모드로 선택이 되면, 부호화되어 있는 메인 미디어 데이터와 부가 미디어 데이터를 모두 복호하여 3D 장면을 생성하여 출력하고, 2D 디스플레이 모드로 선택이 되면, 메인 미디어 데이터만 복호가 되어 2D 장면을 출력한다.
콘텐츠 생성부(330)에서 시청모드선택부(320)를 통해 입력된 사용자가 원하는 디스플레이 모드가 2D 모드인 경우, 디스플레이부(340)에서는 미디어데이터에서 메인미디어데이터를 추출하여 출력하고, StereoMode인 경우는 ObjectStereosocpicDescriptor에 포함된 StereoVisualFormat, StereoAdditionalVisualType, StereoAddtionalVisualSize 메타데이터 및 ES_StereoscopicDescriptor에 포함된 StereoAdditionalVisual_ES flag 정보를 이용하여 각각 좌영상의 원래 크기에 비해 수직방향으로 1/2축소된 크기의 좌우영상으로 크기를 변환한 후, line-by-line으로 인터리빙한다.
일 예를 들면, ObjectStereosocpicDescriptor에 포함된 StereoVisualFormat정보가 Top-down format인 경우는 좌우영상이 한 프레임내에서 상하로 구성되어 있는 포맷이므로 좌우영상을 분리하여 line-by-line으로 인터리빙하여 출력하고, Side-by-side format인 경우는 좌우영상을 분리하여 수평방향으로 2배 확대하고 수직방향으로 1/2 축소하여 영상크기를 변환한 다음 line-by-line으로 인터리빙하여 출력한다.
또한, 필드시퀀셜 포맷인 경우는 각 좌우 필드영상을 한 쌍으로 보고 line-by-line으로 인터리빙하여 출력하고, 프레임시퀀셜포맷인 경우는 좌영상 프레임은 수직방향으로 1/2 축소하고 우영상 프레임은 StereoAddtionalVisualSize정보를 사 용하여 스테레오스코픽 콘텐츠로 생성하여 디스플레이부에서 출력한다.
즉, StereoAddtionalVisualSize가 좌영상과 동일크기의 영상이라면 수직방향으로 1/2축소하고, 좌영상 크기의 수평방향 1/2 이라면 수평방향으로 2배 확대하고 수직방향으로는 1/2축소한다.
또한 좌영상 크기의 수직방향 1/2이라면 크기에 아무런 변화를 주지 않고, 좌영상 크기의 수평 및 수직방향 1/2인 경우는 수평방향으로 2배 확대한 뒤 좌우영상을 line-by-line으로 인터리빙하여 출력한다,
또한, ObjectStereosocpicDescriptor에 포함된 StereoAddtionalVisualSize 정보를 바탕으로 우영상 및 Depth map, Disparity map의 크기 변환후, StereoAddtionalVisualType 정보에 의하여 우영상일 경우는 line-by-line으로 인터리빙하여 출력하고, Depth map또는 Disparity map일 경우는 기존의 Depth또는 Disparity기반 가상시점 영상 생성 알고리즘을 이용하여 우측시점의 가상영상을 생성한 뒤 line-by-line으로 인터리빙하여 재생부로 출력한다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이상 도면과 명세서에서 최적 실시예들이 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다.
그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
Figure 112007077033337-PAT00001
Figure 112007077033337-PAT00002
Figure 112007077033337-PAT00003
Figure 112007077033337-PAT00004
Figure 112007077033337-PAT00005
Figure 112007077033337-PAT00006
Figure 112007077033337-PAT00007
도 1 (a) 내지 (c) 는 MPEG-4의 객체기술자(ObjectDescriptor), 초기객체기술자(InitialObjectDescriptor) 및 기초스트림기술자(ES_Descriptor)의 구성도이다.
도 2(a) 및 (b) 는 본 발명에서 제시하는 메타데이터를 기술한 기술자의 예를 도시한다.
도 3 은 본 발명의 스테레오스코픽 콘텐츠 재생을 위한 복호화 장치의 구성도를 도시한다.
<표의 간단한 설명>
표 1 은 스테레오스코픽 콘텐츠 처리를 위하여 제안한 메타데이터 목록이다.
표 2 는 MPEG-4 systems에 정의된 Descriptors에 대한 Class Tags 목록이다.
표 3 은 스테레오스코픽 콘텐츠 처리를 위하여 새롭게 제안한 Descriptors에 대한 Class Tags 목록이다.
표 4는 스테레오스코픽 콘텐츠 처리를 위하여 제안한 메타데이터 StereoVisualFormat의 분류이다.
표 5는 스테레오스코픽 콘텐츠 처리를 위하여 제안한 메타데이터 StereoAdditionalVisualSize의 분류이다.
표 6은 스테레오스코픽 콘텐츠 처리를 위하여 제안한 메타데이터 StereoAdditionalVisualType의 분류이다.
표 7은 스테레오스코픽 콘텐츠 처리를 위하여 제안한 메타데이터 StereoAdditionalVisual_ES의 분류이다.

Claims (20)

  1. 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 컴퓨터 판독 기록매체로서, 상기 메타 데이터는 수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별하는 구별코드;를 포함하고,
    상기 수신한 콘텐츠가 스테레오스코픽 콘텐츠인 경우, 상기 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지를 나타내는 ES코드;를 더 포함하는 것을 특징으로 하는 메타 데이터를 저장한 컴퓨터 판독 기록매체.
  2. 제 1 항에 있어서, 상기 메타 데이터는
    상기 스테레오스코픽 콘텐츠가 하나의 ES로 구성된 경우, 상기 하나의 ES로부터 복호화된 좌우영상의 형태가 탑다운(Top-down), 측면(Side-by-Side), 필드시퀀셜 및 프레임 시퀀셜포맷 중 어느 형태의 포맷인지를 나타내는 ES형태코드;
    상기 스테레오스코픽 콘텐츠가 두개의 ES로 구성된 경우, 상기 스테레오스코픽 콘텐츠의 부가미디어데이터가 제2시점영상, 깊이맵 또는 양방향시차맵 중 어느 것에 해당하는지 나타내는 타입코드;
    스테레오스코픽 콘텐츠의 메인미디어데이터와 부가미디어데이터 간의 영상크기 정보를 나타내는 크기코드; 및
    기초스트림 기술자(ES_descriptor)에 기술되는 ES가 스테레오스코픽 콘텐츠 의 부가미디어데이터인지를 나타내는지를 나타내는 ES플래그코드;중 적어도 하나 이상을 포함하는 것을 특징으로 하는 메타 데이터를 저장한 컴퓨터 판독 기록매체.
  3. 제 1 항에 있어서,
    상기 메인미디어데이터는 상기 스테레오스코픽 콘텐츠의 제 1시점영상을 나타내고, 상기 부가미디어 데이터는 상기 스테레오스코픽 콘텐츠의 제 2시점영상, 깊이맵 및 양방향시차맵 중 어느 하나를 나타내는 것을 특징으로 하는 메타 데이터를 저장한 컴퓨터 판독 기록매체.
  4. 제 1 항에 있어서, 상기 메타데이터는
    상기 ES형태코드가 프레임 시퀀셜 포맷에 해당함을 나타내는 경우 상기 크기코드를 포함하는 특징으로 하는 메타 데이터를 저장한 컴퓨터 판독 기록매체.
  5. 제 1 항에 있어서, 상기 메타데이터를 기술한 기술자는
    MPEG-4에 정의된 초기객체기술자(InitialObjectDescriptor), 객체기술자(ObjectDescriptor) 및 기초스트림기술자 내의 extDescr 필드에 포함되고, 상기 extDescr 필드는 MPEG-4에서 향후 필요한 기술자를 추가 기술하기 위하여 정의된 필드인 것을 특징으로 하는 메타 데이터를 저장한 컴퓨터 판독 기록매체.
  6. 스테레오스코픽 영상을 복호화하는 방법으로서,
    스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신하는 단계;를 포함하고,
    이 경우 상기 메타데이터는 수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별하는 구별코드;를 포함하며, 상기 수신한 콘텐츠가 스테레오스코픽 콘텐츠인 경우, 상기 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지를 나타내는 ES코드;를 더 포함하는 것을 특징으로 하는 복호화방법.
  7. 제 6 항에 있어서, 상기 메타 데이터는
    상기 스테레오스코픽 콘텐츠가 하나의 ES로 구성된 경우, 상기 하나의 ES로부터 복호화된 좌우영상의 형태가 탑다운(Top-down), 측면(Side-by-Side), 필드시퀀셜 및 프레임 시퀀셜포맷 중 어느 형태의 포맷인지를 나타내는 ES형태코드;
    상기 스테레오스코픽 콘텐츠가 두개의 ES로 구성된 경우, 상기 스테레오스코픽 콘텐츠의 부가미디어데이터가 제2시점영상, 깊이맵 또는 양방향시차맵 중 어느 것에 해당하는지 나타내는 타입코드;
    스테레오스코픽 콘텐츠의 메인미디어데이터와 부가미디어데이터 간의 영상크기 정보를 나타내는 크기코드; 및
    기초스트림 기술자(ES_descriptor)에 기술되는 ES가 스테레오스코픽 콘텐츠의 부가미디어데이터인지를 나타내는지를 나타내는 ES플래그코드;중 적어도 하나 이상을 포함하는 것을 특징으로 하는 복호화방법.
  8. 제 6 항에 있어서,
    상기 메인미디어데이터는 상기 스테레오스코픽 콘텐츠의 제 1시점영상을 나타내고, 상기 부가미디어 데이터는 상기 스테레오스코픽 콘텐츠의 제 2시점영상, 깊이맵 및 양방향시차맵 중 어느 하나를 나타내는 것을 특징으로 하는 복호화방법.
  9. 제 6 항에 있어서, 상기 메타데이터는
    상기 ES형태코드가 프레임 시퀀셜 포맷에 해당함을 나타내는 경우 상기 크기코드를 포함하는 특징으로 하는 복호화방법.
  10. 제 6 항에 있어서, 상기 메타데이터를 기술한 기술자는
    MPEG-4에 정의된 초기객체기술자(InitialObjectDescriptor), 객체기술자(ObjectDescriptor) 및 기초스트림기술자 내의 extDescr 필드에 포함되고, 상기 extDescr 필드는 MPEG-4에서 향후 필요한 기술자를 추가 기술하기 위하여 정의된 필드인 것을 특징으로 하는 복호화방법.
  11. 제 6 항에 있어서,
    상기 구별코드가 수신한 콘텐츠가 스테레오스코픽 콘텐츠임을 나타내는 경우, 사용자가 수신한 콘텐츠를 2차원으로 디스플레이하는 2D모드와 3차원으로 디스 플레이하는 3D모드 중 어느 모드에서 시청할지 선택하는 단계;및
    상기 메타데이터 및 상기 사용자가 선택한 모드를 이용하여 수신한 비트스트림을 복호화하여 콘텐츠를 생성하는 콘텐츠 생성단계;를 포함하는 것을 특징으로 하는 복호화방법.
  12. 제 11 항에 있어서, 3D모드인 경우
    부호화된 메인미디어데이터 및 부가미디어 데이터를 모두 복호화하여 상기 콘텐츠를 3D 장면으로 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 복호화장치.
  13. 제 11 항에 있어서, 2D모드인 경우
    부호화된 메인미디어데이터만 복호화하여 상기 콘텐츠를 2D 장면으로 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 복호화방법.
  14. 스테레오스코픽 영상을 복호화하는 방법으로서,
    스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터를 저장한 헤더, 부호화된 메인미디어데이터 및 부가미디어데이터를 포함하는 비트스트림을 수신하는 단계;
    상기 비트스트림에 포함된 상기 메타데이터를 기초로 사용자에게 2D 모드 또는 3D 모드 중 중 선택할 수 있는 기회를 제공하는 시청모드선택제공단계;
    상기 메타데이터 및 상기 사용자가 선택한 모드를 이용하여 수신한 비트스트림을 복호화하여 콘텐츠를 생성하는 콘텐츠 생성단계;및
    상기 사용자의 선택에 따라 상기 비트스트림을 복호화하여 2D 장면 또는 3D 장면으로 디스플레이하는 단계;를 포함하는 것을 특징으로 하는 복호화 방법.
  15. 제 14 항에 있어서, 상기 메타 데이터는
    수신한 콘텐츠가 스테레오스코픽 콘텐츠인지 2차원 콘텐츠인지를 구별하는 구별코드;를 포함하고,
    상기 수신한 콘텐츠가 스테레오스코픽 콘텐츠인 경우, 상기 스테레오스코픽 콘텐츠가 하나의 ES(Elementary Stream, 기초스트림)으로 구성되었는지 두개의 ES로 구성되었는지를 나타내는 ES코드;를 더 포함하는 것을 특징으로 하는 복호화 방법.
  16. 제 15 항에 있어서, 상기 메타 데이터는
    상기 스테레오스코픽 콘텐츠가 하나의 ES로 구성된 경우, 상기 하나의 ES로부터 복호화된 좌우영상의 형태가 탑다운(Top-down), 측면(Side-by-Side), 필드시퀀셜 및 프레임 시퀀셜포맷 중 어느 형태의 포맷인지를 나타내는 ES형태코드;
    상기 스테레오스코픽 콘텐츠가 두개의 ES로 구성된 경우, 상기 스테레오스코픽 콘텐츠의 부가미디어데이터가 제2시점영상, 깊이맵 또는 양방향시차맵 중 어느 것에 해당하는지 나타내는 타입코드;
    스테레오스코픽 콘텐츠의 메인미디어데이터와 부가미디어데이터 간의 영상크기 정보를 나타내는 크기코드; 및
    기초스트림 기술자(ES_descriptor)에 기술되는 ES가 스테레오스코픽 콘텐츠의 부가미디어데이터인지를 나타내는지를 나타내는 ES플래그코드;중 적어도 하나 이상을 포함하는 것을 특징으로 하는 복호화 방법.
  17. 제 14 항에 있어서,
    상기 메인미디어데이터는 상기 스테레오스코픽 콘텐츠의 제 1시점영상을 나타내고, 상기 부가미디어 데이터는 상기 스테레오스코픽 콘텐츠의 제 2시점영상, 깊이맵 및 양방향시차맵 중 어느 하나를 나타내는 것을 특징으로 하는 복호화 방법.
  18. 제 14 항에 있어서, 상기 메타데이터를 기술한 기술자는
    MPEG-4에 정의된 초기객체기술자(InitialObjectDescriptor), 객체기술자(ObjectDescriptor) 및 기초스트림기술자 내의 extDescr 필드에 포함되고, 상기 extDescr 필드는 MPEG-4에서 향후 필요한 기술자를 추가 기술하기 위하여 정의된 필드인 것을 특징으로 하는 복호화 방법.
  19. 제 14 항에 있어서, 상기 디스플레이단계는 3D모드인 경우
    부호화된 메인미디어데이터 및 부가미디어 데이터를 모두 복호화하여 상기 콘텐츠를 3D 장면으로 디스플레이하는 것을 특징으로 하는 복호화방법.
  20. 제 14 항에 있어서, 상기 디스플레이단계는 2D모드인 경우
    부호화된 메인미디어데이터만 복호화하여 상기 콘텐츠를 2D 장면으로 디스플레이하는 것을 특징으로 하는 복호화방법.
KR20070108435A 2006-11-01 2007-10-26 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치 KR101362941B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2007/005358 WO2008054100A1 (en) 2006-11-01 2007-10-29 Method and apparatus for decoding metadata used for playing stereoscopic contents
JP2009535205A JP5022443B2 (ja) 2006-11-01 2007-10-29 立体映像コンテンツ再生に利用されるメタデータの復号化方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060107491 2006-11-01
KR20060107491 2006-11-01

Publications (2)

Publication Number Publication Date
KR20080039797A true KR20080039797A (ko) 2008-05-07
KR101362941B1 KR101362941B1 (ko) 2014-02-17

Family

ID=39647752

Family Applications (1)

Application Number Title Priority Date Filing Date
KR20070108435A KR101362941B1 (ko) 2006-11-01 2007-10-26 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치

Country Status (2)

Country Link
JP (1) JP5022443B2 (ko)
KR (1) KR101362941B1 (ko)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010064774A1 (ko) * 2008-12-02 2010-06-10 (주)엘지전자 3차원 영상신호 전송 방법과, 3차원 영상표시 장치 및 그에 있어서의 신호 처리 방법
KR100970649B1 (ko) * 2008-10-10 2010-07-15 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
EP2279625A2 (en) * 2008-06-24 2011-02-02 Samsung Electronics Co., Ltd. Method and apparatus for processing 3d video image
KR20110090914A (ko) * 2008-10-10 2011-08-10 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
EP2355533A1 (en) * 2008-09-30 2011-08-10 Panasonic Corporation Recording medium, reproduction device, system lsi, reproduction method, spectacle, and display device associated with 3d video
KR20110090366A (ko) * 2010-02-03 2011-08-10 삼성전자주식회사 영상 처리 장치 및 방법
KR20110113752A (ko) * 2009-01-26 2011-10-18 톰슨 라이센싱 비디오 코딩을 위한 프레임 패킹
KR20120013974A (ko) * 2009-04-07 2012-02-15 엘지전자 주식회사 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
EP2451172A1 (en) * 2009-06-29 2012-05-09 Sony Corporation Stereoscopic image data transmitter and stereoscopic image data receiver
EP2451171A1 (en) * 2009-06-29 2012-05-09 Sony Corporation Stereoscopic image data transmitter and stereoscopic image data receiver
US8730303B2 (en) 2009-04-27 2014-05-20 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
US20230070744A1 (en) * 2011-10-14 2023-03-09 Advanced Micro Devices, Inc. Region-based image decompression

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IT1401731B1 (it) 2010-06-28 2013-08-02 Sisvel Technology Srl Metodo per la decodifica 2d-compatibile di flussi video stereoscopici
WO2012029885A1 (ja) * 2010-09-03 2012-03-08 ソニー株式会社 画像処理装置および方法
AU2011296956A1 (en) 2010-09-03 2013-02-14 Sony Corporation Encoding device and encoding method, as well as decoding device and decoding method
MX338309B (es) * 2010-09-03 2016-04-12 Sony Corp Dispositivo de codificacion, metodo de codificacion, dispositivo de descodificacion, y metodo de descodificacion.
AU2011296953A1 (en) * 2010-09-03 2013-03-14 Sony Corporation Encoding device, encoding method, decoding device, and decoding method
CN103354997A (zh) * 2011-02-18 2013-10-16 索尼公司 图像处理设备和图像处理方法
US9235749B2 (en) 2011-02-24 2016-01-12 Sony Corporation Image processing device and image processing method

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4190357B2 (ja) * 2003-06-12 2008-12-03 シャープ株式会社 放送データ送信装置、放送データ送信方法および放送データ受信装置
KR100585966B1 (ko) * 2004-05-21 2006-06-01 한국전자통신연구원 3차원 입체 영상 부가 데이터를 이용한 3차원 입체 디지털방송 송/수신 장치 및 그 방법

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2292019A2 (en) * 2008-06-24 2011-03-09 Samsung Electronics Co., Ltd. Method and apparatus for outputting and displaying image data
EP2292019A4 (en) * 2008-06-24 2014-04-30 Samsung Electronics Co Ltd METHOD AND DEVICE FOR PRODUCTION AND DISPLAY OF DATA
EP2279625A4 (en) * 2008-06-24 2013-07-03 Samsung Electronics Co Ltd METHOD AND APPARATUS FOR PROCESSING 3D VIDEO IMAGE
EP2279625A2 (en) * 2008-06-24 2011-02-02 Samsung Electronics Co., Ltd. Method and apparatus for processing 3d video image
EP2355533A1 (en) * 2008-09-30 2011-08-10 Panasonic Corporation Recording medium, reproduction device, system lsi, reproduction method, spectacle, and display device associated with 3d video
US9344703B2 (en) 2008-09-30 2016-05-17 Panasonic Intellectual Property Management Co., Ltd. Recording medium, playback device, system LSI, playback method, glasses, and display device for 3D images
EP2482564A3 (en) * 2008-09-30 2013-09-25 Panasonic Corporation Recording medium, playback device, system LSI, playback method, glasses, and display device for 3D images
EP2355533A4 (en) * 2008-09-30 2013-09-18 Panasonic Corp RECORDING MEDIUM, REPRODUCING DEVICE, SYSTEM LSI, REPRODUCTION METHOD, GLASSES, AND DISPLAY DEVICE ASSOCIATED WITH 3D VIDEO
KR20110090914A (ko) * 2008-10-10 2011-08-10 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
WO2010041896A3 (en) * 2008-10-10 2010-07-22 Lg Electronics Inc. Receiving system and method of processing data
US9762888B2 (en) 2008-10-10 2017-09-12 Lg Electronics Inc. Receiving system and method of processing data
US9712803B2 (en) 2008-10-10 2017-07-18 Lg Electronics Inc. Receiving system and method of processing data
KR100970649B1 (ko) * 2008-10-10 2010-07-15 엘지전자 주식회사 수신 시스템 및 데이터 처리 방법
US8248461B2 (en) 2008-10-10 2012-08-21 Lg Electronics Inc. Receiving system and method of processing data
US9288470B2 (en) 2008-12-02 2016-03-15 Lg Electronics Inc. 3D image signal transmission method, 3D image display apparatus and signal processing method therein
WO2010064774A1 (ko) * 2008-12-02 2010-06-10 (주)엘지전자 3차원 영상신호 전송 방법과, 3차원 영상표시 장치 및 그에 있어서의 신호 처리 방법
KR20110113752A (ko) * 2009-01-26 2011-10-18 톰슨 라이센싱 비디오 코딩을 위한 프레임 패킹
US9756311B2 (en) 2009-04-07 2017-09-05 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
KR20120013974A (ko) * 2009-04-07 2012-02-15 엘지전자 주식회사 방송 송신기, 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
US9762885B2 (en) 2009-04-07 2017-09-12 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
US10129525B2 (en) 2009-04-07 2018-11-13 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
US8730303B2 (en) 2009-04-27 2014-05-20 Lg Electronics Inc. Broadcast transmitter, broadcast receiver and 3D video data processing method thereof
EP2451171A4 (en) * 2009-06-29 2014-04-02 Sony Corp STEREOSCOPIC IMAGE DATA TRANSMITTER AND STEREOSCOPIC IMAGE DATA RECEIVER
EP2451172A4 (en) * 2009-06-29 2014-04-02 Sony Corp TRANSMITTER FOR STEREOSCOPIC IMAGE DATA AND RECEIVER FOR STEREOSCOPIC IMAGE DATA
EP2451172A1 (en) * 2009-06-29 2012-05-09 Sony Corporation Stereoscopic image data transmitter and stereoscopic image data receiver
EP2451171A1 (en) * 2009-06-29 2012-05-09 Sony Corporation Stereoscopic image data transmitter and stereoscopic image data receiver
KR20110090366A (ko) * 2010-02-03 2011-08-10 삼성전자주식회사 영상 처리 장치 및 방법
US20230070744A1 (en) * 2011-10-14 2023-03-09 Advanced Micro Devices, Inc. Region-based image decompression

Also Published As

Publication number Publication date
KR101362941B1 (ko) 2014-02-17
JP5022443B2 (ja) 2012-09-12
JP2010508752A (ja) 2010-03-18

Similar Documents

Publication Publication Date Title
KR101362941B1 (ko) 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치
WO2008054100A1 (en) Method and apparatus for decoding metadata used for playing stereoscopic contents
KR101276605B1 (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
KR101398168B1 (ko) 스테레오스코픽 데이터의 저장 및 재생을 위한 메타데이터구조 및 이를 이용하는 스테레오스코픽 콘텐츠 파일의 저장방법
US8508579B2 (en) System and method for generating and reproducing 3D stereoscopic image file including 2D image
US20110293240A1 (en) Method and system for transmitting over a video interface and for compositing 3d video and 3d overlays
TWI573425B (zh) 產生三維視訊信號
US20100103168A1 (en) Methods and apparatuses for processing and displaying image
US20080252719A1 (en) Apparatus, method, and system for generating stereo-scopic image file based on media standards
KR100955578B1 (ko) 스테레오스코픽 콘텐츠 장면 재생 방법 및 그 장치
US20090199100A1 (en) Apparatus and method for generating and displaying media files
EP2242262A2 (en) Data structure, recording medium, playback apparatus and method, and program
AU2009210926B2 (en) Apparatus and method for generating and displaying media files
KR20090084259A (ko) 스테레오스코픽 영상의 부분 데이터 구간 재생을 위한스테레오스코픽 영상 데이터스트림 생성 방법과 장치, 및스테레오스코픽 영상의 부분 데이터 구간 재생 방법과 장치
WO2009075495A1 (en) System and method for generating and reproducing image file including 2d image and 3d stereoscopic image
GB2594899A (en) Method, device, and computer program for transmitting media content
KR20090088772A (ko) 슬라이드 쇼를 위한 영상파일을 생성 및 재생하기 위한시스템 및 방법
KR101480186B1 (ko) 2ｄ 영상과 3ｄ 입체영상을 포함하는 영상파일을 생성 및재생하기 위한 시스템 및 방법
KR101390810B1 (ko) 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치
US20110254838A1 (en) Method for transmitting data on stereoscopic image, method for playing back stereoscopic image, and method for creating file of stereoscopic image
JP5957770B2 (ja) 映像処理装置、方法、プログラム、記録媒体及び集積回路
CN102948154A (zh) 内容分发系统、再现装置、分发服务器、再现方法及分发方法
KR100959534B1 (ko) Ｍａｆ 파일 포맷을 구성하는 방법 및 이를 이용한 비디오 신호의 디코딩 장치
KR20080092810A (ko) 미디어 표준 기반의 입체영상 파일 생성 장치 및 방법과이를 구현하기 위한 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170206

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180206

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190207

Year of fee payment: 6