KR20090034695A - 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치 - Google Patents

로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치 Download PDF

Info

Publication number
KR20090034695A
KR20090034695A KR1020070121396A KR20070121396A KR20090034695A KR 20090034695 A KR20090034695 A KR 20090034695A KR 1020070121396 A KR1020070121396 A KR 1020070121396A KR 20070121396 A KR20070121396 A KR 20070121396A KR 20090034695 A KR20090034695 A KR 20090034695A
Authority
KR
South Korea
Prior art keywords
image
format
image data
local
box
Prior art date
Application number
KR1020070121396A
Other languages
English (en)
Other versions
KR101390810B1 (ko
Inventor
김용태
김재승
김대식
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US12/146,942 priority Critical patent/US8538134B2/en
Publication of KR20090034695A publication Critical patent/KR20090034695A/ko
Application granted granted Critical
Publication of KR101390810B1 publication Critical patent/KR101390810B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/398—Synchronisation thereof; Control thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/002—Eyestrain reduction by processing stereoscopic signals or controlling stereoscopic devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

본 발명의 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 방법은, 2차원 영상 데이터 구간 및 3차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하고, 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하며, 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하며, 추출된 로컬 3차원 영상 파라미터를 이용하여 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원함으로써, 3차원 영상의 시청이 필요한 순간에만 3차원 영상을 재생함으로써 시청자의 피로도를 줄일 수 있다.
스트레오 영상, 양안식 영상, 3차원 영상, 로컬 3차원 영상

Description

로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는 영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는 영상 데이터스트림을 생성하는 방법 및 장치{Method and apparatus for receiving image data stream comprising parameters for displaying local three dimensional image, and method and apparatus for generating image data stream comprising parameters for displaying local three dimensional image}
본 발명은 3차원 영상을 포함하는 영상 데이터스트림을 수신하는 방법 및 장치, 그리고 3차원 영상 데이터스트림을 생성하는 방법 및 장치에 관한 것으로, 상세하게는 3차원 영상 데이터 구간을 포함하는 영상 데이터스트림으로부터 3차원 데이터 구간에 대한 세부적인 파라미터를 추출하거나, 영상 데이터스트림에 3차원 데이터 구간에 대한 파라미터를 기록하는 방법 및 장치에 관한 것이다.
3차원 영상에 대한 관심이 증대되고 있으나 영상 컨텐츠의 전체를 3차원 영상으로 제작하는 데에는 아직 한계점이 많다. 3차원 영상 시청시 발생할 수 있는 피로감, 3차원 영상의 획득 과정의 어려움, 3차원 영상의 전송 상의 문제점 등이 제기될 수 있다.
이러한 문제점을 극복하기 위해, 2차원 영상 데이터에 3차원 영상 데이터가 일부 조합되는 로컬 3차원 영상이 제안되었다. 영상 컨텐츠의 전체 재생 구간에는, 영상 컨텐츠가 2차원으로 표시되기 위한 2차원 영상 데이터가 제공되고, 영상 컨텐츠 데이터의 하나 이상의 일부 구간에 영상 컨텐츠를 3차원으로 표시하기 위한 3차원 영상 데이터가 제공된다.
현재 제안되고 있는 스테레오 영상의 저장 포맷은 하나 또는 두 개의 기초 스트림을 사용한다. 도 1a 은 2차원 영상 기반의 로컬 3차원 영상의 구현 방식의 일례을 도시한다. 전체적으로 2차원 영상 데이터가 기록된 기초 스트림(120)과 일부 3차원 영상 데이터(112, 114)가 기록된 기초 스트림(110), 즉 두 개의 기초 스트림을 이용하여 로컬 3차원 영상 데이터가 표현된다. 도 1b 은 2차원 영상 기반의 로컬 3차원 영상의 구현 방식의 다른 예시를 도시한다. 이 경우는 하나의 기초 스트림(130)에 2차원 영상 데이터가 기록되고 3차원 영상으로 재생될 일부 구간(132, 134)에 3차원 영상 데이터가 기록된다.
도 1a 및 도 1b 에서 도시된 기존 기술에서는 로컬 3차원 영상 데이터를 표현하기 위한 영상 데이터 구간의 위치 정보만이 전송되며, 3차원 영상을 재생하기 위한 세부적인 정보가 전송되지 않는다.
본 발명이 해결하고자 하는 과제는, 영상 데이터 구간의 위치 정보 뿐만 아니라, 기준 시점 영상 및 부가 시점 영상이 조합된 3차원 영상에 관한 다양한 정보를 추출하여, 수신된 2차원 영상 및 3차원 영상의 영상 데이터스트림으로부터 로컬 3차원 영상을 효과적으로 재생하는 데 있다.
또한 영상 데이터 구간의 위치 정보 뿐만 아니라, 기준 시점 영상 및 부가 시점 영상이 조합된 3차원 영상에 관한 다양한 정보를 파라미터로써 영상 데이터스트림에 기록함으로써, 2차원 영상 데이터에 로컬 3차원 영상 데이터가 조합된 영상 데이터 스트림을 생성하는데 있다.
상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 일 실시예에 따른 영상 데이터스트림 수신 방법은, 2차원 영상 데이터 구간 및 3차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하는 단계; 상기 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하며, 상기 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 단계; 및 상기 추출된 파라미터를 이용하여 상기 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원하는 단계를 포함한다.
일 실시예는, 상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보를 상기 영상 데이터스트림으로부터 추출하는 단계를 더 포함하고, 상기 로컬 3차원 영상 파라미터 추출 단계는, 상기 로컬 3차원 영상 파라미터가, 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보, 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 영상 데이터 구간 위치 정보가 더 포함한다.
일 실시예의 상기 로컬 3차원 영상 파라미터 추출 단계는, 현재 영상 데이터 구간이 3차원 영상 데이터 구간이라면, 상기 로컬 3차원 영상 파라미터는 상기 영상 배치 순서 정보를 포함한다.
일 실시예의 영상 데이터 구간 위치 정보는, 상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 포함한다.
일 실시예의 로컬 3차원 영상 파라미터 추출 단계는, 각각의 기초 스트림의 시작 위치를 나타내는 기초 스트림 시작 위치 정보를 추출하는 단계를 더 포함하며, 상기 영상 데이터 구간 위치 정보가, 상기 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 포함한다.
일 실시예의 로컬 3차원 영상 파라미터 추출 단계는, 상기 로컬 3차원 영상 파라미터가, 상기 기준 시준 영상 및 상기 부가 시점 영상을 3차원 영상으로 구성한 방법을 나타내는 영상 구성 형식 정보를 더 포함하며, 상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식(Side by side format), 탑 앤 바텀 형식(Top and bottom format), 버티컬 라인 인터리브드 형식(Vertical line interleaved format), 호리즌털 라인 인터리브드 형식(Horizonal line interleaved format), 프레임 시퀀셜 형식(Frame sequential format), 필드 시퀀셜 포맷(Field sequential format), 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함한다.
일 실시예의 로컬 3차원 영상 파라미터 추출 단계는, 상기 영상 구성 형식 정보가 사이드 바이 사이드 형식 또는 탑 앤 바텀 형식인 경우, 상기 로컬 3차원 영상 파라미터가, 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보를 더 포함한다.
일 실시예의 로컬 3차원 영상 파라미터는, 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보를 더 포함하는 단계를 포함한다.
일 실시예에서, 상기 로컬 3차원 영상 파라미터 정보는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷으로부터 추출하는 단계를 포함한다.
일 실시예에서, 상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함하고, 상기 로컬 3차원 영상 파라미터 정보는, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나로부터 추출 된다.
상기 해결하고자 하는 과제를 해결하기 위해, 본 발명의 일 실시예에 따른 영상 데이터스트림 생성 방법은, 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함하는 영상 데이터스트림을 생성하는 방법에 있어서, 각각의 영상 데이터 구간에 2차원 영상 데이터 또는 3차원 영상 데이터를 기록하는 단계; 및각각의 영상 데이터 구간의 영상 구성 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터를 상기 영상 데이터스트림에 기록하는 단계를 포함한다.
일 실시예의 상기 로컬 3차원 영상 파라미터는, 상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보; 상기 영상 데이터 구간이 기록된 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보; 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 영상 데이터 구간 위치 정보 중 적어도 하나를 더 포함한다.
일 실시예의 상기 로컬 3차원 영상 파라미터는, 상기 기준 시점 영상 및 상기 부가 시점 영상을 3차원 영상 형식으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보 중 적어도 하나를 더 포함하며, 상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함한다.
일 실시예의 상기 영상 데이터 구간 위치 정보는, 상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 이용하여 표현되는 위치 정보; 및 기초 스트림 시작 위치 정보 및 상기 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 이용하여 표현되는 위치 정보 중 적어도 하나를 포함한다.
일 실시예에서, 로컬 3차원 영상 파라미터 기록 단계는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷에 상기 로컬 3차원 영상 파라미터를 기록한다.
일 실시예에서, 상기 로컬 3차원 영상 파라미터 기록 단계는, 상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함할 때, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나에 상기 로컬 3차원 영상 파라미터 정보를 기록한다.
상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 일 실시예에 따른 영상 데이터스트림 수신 장치는 2차원 영상 데이터 구간 및 3차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하는 수신부; 상기 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하며, 상기 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터 추출부; 및 상기 추출된 파라미터를 이용하여 상기 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원하는 영상 복원부를 포함한다.
일 실시예는, 상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보를 상기 영상 데이터스트림으로부터 더 추출하고, 상기 로컬 3차원 영상 파라미터 추출부는, 상기 로컬 3차원 영상 파라미터가, 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보, 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 영상 데이터 구간 위치 정보를 더 포함한다.
일 실시예의 상기 로컬 3차원 영상 파라미터 추출부는, 상기 로컬 3차원 영상 파라미터가, 상기 기준 시준 영상 및 상기 부가 시점 영상을 3차원 영상으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보를 더 포함하며, 상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함한다.
상기 해결하고자 하는 과제를 달성하기 위해, 본 발명의 일 실시예에 따른 영상 데이터스트림 생성 장치는, 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함하는 영상 데이터스트림을 생성하는 장치에 있어서, 각각의 영 상 데이터 구간에 2차원 영상 데이터 또는 3차원 영상 데이터를 기록하는 영상 데이터 기록부; 및 각각의 영상 데이터 구간의 영상 구성 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터를 상기 영상 데이터스트림에 기록하는 로컬 3차원 영상 파라미터 기록부를 포함한다.
일 실시예의 상기 로컬 3차원 영상 파라미터는, 상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보; 상기 영상 데이터 구간이 기록된 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보; 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 영상 데이터 구간 위치 정보 중 적어도 하나를 더 포함한다.
일 실시예의 로컬 3차원 영상 파라미터는, 상기 기준 시점 영상 및 상기 부가 시점 영상을 3차원 영상 형식으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보 중 적어도 하나를 더 포함하며, 상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함한다.
본 발명은, 본 발명의 실시예에 의한 영상 데이터스트림 수신 방법을 구현하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체를 포함한다.
또한 본 발명은, 본 발명의 일 실시예에 의한 영상 데이터스트림 생성 방법 을 구현하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체를 포함한다
본 발명의 영상 데이터스트림 추출 방법 및 장치는, 영상 데이터 구간의 위치 정보 뿐만 아니라, 기준 시점 영상 및 부가 시점 영상이 조합된 3차원 영상의 영상 구성 방식, 기준 시점 영상 및 부가 시점 영상의 폭 너비에 관한 정보, 기준 시점 영상 및 부가 시점 영상이 배치된 방법에 관한 다양한 정보를 추출하여, 수신된 2차원 영상 및 3차원 영상의 영상 데이터스트림으로부터 로컬 3차원 영상을 정확하고 효과적으로 재생하는 효과가 있다.
또한, 본 발명의 영상 데이터스트림 생성 방법 및 장치는, 영상 데이터 구간의 위치 정보 뿐만 아니라, 기준 시점 영상 및 부가 시점 영상이 조합된 3차원 영상의 영상 구성 방식, 기준 시점 영상 및 부가 시점 영상의 폭 너비에 관한 정보, 기준 시점 영상 및 부가 시점 영상이 배치된 방법에 관한 다양한 정보를 파라미터로써 영상 데이터스트림에 기록함으로써, 2차원 영상 데이터에 로컬 3차원 영상 데이터가 조합된 영상 데이터 스트림을 생성할 수 있다.
본 발명은, 3차원 영상 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서 정보를 제공함으로써, 기준 시점 영상 및 부가 시점 영상의 배치 순서가 바뀌어 재생됨으로써, 시청자에게 발생할 수 있는 괴리감을 예방하는 효과가 있다.
또한, 데이터 구간마다 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보, 영상 배치 순서 정보 등의 파라미터가 개별적으로 정의될 수 있으므로, 각각의 데이터 구간의 특성에 따라 적응적으로 영상을 정확하게 표현하거나 복 원할 수 있다.
전체적인 2차원 영상 데이터 상에 일부 3차원 영상 데이터를 조합함으로써, 강조되고자 하는 일부 구간에서만 영상 컨텐츠가 3차원으로 재생되고 시청자에게 3차원 영상 재생 구간이 강하게 인식되도록 한다.
3차원 스테레오 영상을 장시간 시청하는 경우 시청자는 피로감이 증가하므로, 중요한 순간에만 로컬 3차원 영상으로 컨텐츠를 시청함으로써 시청자의 몰입도를 증가시킬 수 있으며, 3차원 영상 컨텐츠의 제작 및 촬영시에도 다량의 3차원 영상을 획득하는데 발생할 수 있는 어려움을 극복할 수 있다. 이를 통해 3차원 영상의 활성화에 기여할 것으로 예상되고, 본 발명은 디지털 TV, PC 모니터, 캠코더 등의 멀티미디어 기기에서 다양하게 이용될 수 있다.
이하, 도 2 내지 도 13을 참조하여, 본 발명의 일 실시예에 따른 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 방법 및 장치, 그리고 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 방법 및 장치가 상세히 설명된다.
도 2 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 장치의 블록도를 도시한다.
로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 장치(200)는 수신부(210), 로컬 3차원 영상 파라미터 추출부(220) 및 영상 복원부(230)를 포함한다.
수신부(210)는 2차원 영상 데이터 구간 및 3차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하여, 로컬 3차원 영상 파라미터 추출부(220)로 출력한다. 일 실시예에서, 3차원 영상은 기준 시점 영상 및 부가 시점 영상의 두 시점의 영상이 조합되어 구성된다.
2차원 영상은 하나의 카메라로 획득된 한 시점의 영상인데 반해, 3차원 영상은 둘 이상의 카메라로 획득된 둘 이상의 시점의 영상으로 구성된다. 예를 들면, 좌측 카메라로부터 획득된 좌측 시점 영상과 우측 카메라로부터 획득된 우측 시점 영상이 있을 수 있다. 본 발명의 일 실시예는 하나의 기준 시점 영상과 그와 다른 시점의 부가 시점 영상으로 구성된 3차원 영상을 취급한다.
로컬 3차원 영상 파라미터 추출부(220)는, 수신부(210)로부터 영상 데이터스트림을 입력받아, 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하여, 영상 복원부(230)로 출력한다. 본 발명의 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함한다.
또한, 본 발명의 로컬 3차원 영상 파라미터는, 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보 중 적어도 하나를 더 포함한다.
영상 데이터스트림 수신부(200)의 일 실시예에서, 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보가 영상 데이터스트림으로부터 추출된다. 로컬 3차원 영상 파라미터 추출부(220)의 일 실시예의 로컬 3차원 영상 파라미터 는, 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보, 영상 데이터스트림 중 현재 영상 데이터 구간이 기록된 영상 데이터 구간 위치 정보를 포함한다.
로컬 3차원 영상 파라미터 추출부(220)의 다른 실시예는, 현재 영상 데이터 구간이 3차원 영상 데이터 구간이라면, 로컬 3차원 영상 파라미터가 영상 배치 순서 정보를 포함한다.
로컬 3차원 영상 파라미터 추출부(220)의 일 실시예에서, 영상 데이터 구간 위치 정보는, 영상 데이터 구간의 시작 위치 정보 및 영상 데이터 구간의 종료 위치 정보를 포함한다.
로컬 3차원 영상 파라미터 추출부(220)의 다른 실시예에서, 각각의 기초 스트림의 시작 위치를 나타내는 기초 스트림 시작 위치 정보를 추출하고, 영상 데이터 구간 위치 정보는, 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 포함한다.
로컬 3차원 영상 파라미터 추출부(220)의 일 실시예에서, 로컬 3차원 영상 파라미터는, 기준 시준 영상 및 부가 시점 영상을 3차원 영상으로 구성한 방법을 나타내는 영상 구성 형식 정보를 더 포함한다.
영상 구성 형식 정보의 일 실시예는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함한다.
로컬 3차원 영상 파라미터 추출부(220)의 일 실시예에서, 로컬 3차원 영상 파라미터는, 영상 구성 형식에서의 기준 시점 영상과 부가 시점 영상의 폭 너비 정보인 폭 너비 정보를 포함한다. 다른 실시예에서 로컬 3차원 영상 파라미터는, 영상 구성 형식 정보가 사이드 바이 사이드 형식 또는 탑 앤 바텀 형식인 경우에만, 로컬 3차원 영상 파라미터가 영상 구성 형식에서의 기준 시점 영상과 부가 시점 영상의 폭 너비 정보를 포함한다.
ISO(International Standardization Organization) 기반의 미디어 파일 포맷이 데이터스트림은 moov 박스, mdat 박스 및 meta 박스를 포함한다. 본 발명의 영상 데이터스트림이 ISO 기반의 미디어 파일 포맷일 때, 로컬 3차원 영상 파라미터 추출부(220)의 일 실시예는 meta 박스의 하위 레벨에 구비된 로컬 3차원 영상 파라미터 박스로부터 로컬 3차원 영상 파라미터를 추출한다.
로컬 3차원 영상 파라미터 추출부(220)의 다른 실시예는, meta 박스의 하위 레벨의 iloc 박스로부터 기초 스트림의 식별 정보 및 영상 데이터 구간 위치 정보를 추출하고, meta 박스의 하위 레벨에 구비된 3차원 영상 정보 박스로부터 기초 스트림의 식별 정보 및 영상 데이터 구간 위치 정보를 제외한 파라미터를 추출한다.
영상 복원부(230)는 로컬 3차원 영상 파라미터 추출부(220)로부터 로컬 3차원 영상 파라미터를 입력받아, 추출된 파라미터를 이용하여, 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원한다.
도 3 은 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 장치의 블록도를 도시한다.
로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 장치(300)의 일 실시예는 영상 데이터 기록부(310) 및 로컬 3차원 영상 파라미터 기록부(320)를 포함한다. 본 발명의 영상 데이터스트림 생성 장치(300)에서, 영상 데이터 스트림은 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함한다.
영상 데이터 기록부(310)는 각각의 영상 데이터 구간에 2차원 영상 데이터 또는 3차원 영상 데이터를 기록하여 출력한다.
로컬 3차원 영상 파라미터 기록부(320)는, 각각의 영상 데이터 구간의 영상 구성 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터를 영상 데이터스트림에 기록하여 출력한다.
영상 데이터스트림 생성 장치(300)의 로컬 3차원 영상 파라미터는, 전술된 영상 데이터스트림 추출 장치(200)에서의 로컬 3차원 영상 파라미터와 동일하다. 로컬 3차원 영상 파라미터에 대한 상세한 설명은 이하 도 4 내지 도 12를 참조하여 후술된다.
도 4 는 본 발명의 일 실시예에 따라 로컬 3차원 영상을 구현하는 방식을 도시한다.
영상 데이터스트림 추출 장치(200) 및 영상 데이터스트림 생성 장치(300)에서 취급되는 영상 데이터스트림은 복수 개의 데이터 구간으로 나뉘어 있으며, 2차원 영상 데이터를 기초로 한 데이터스트림(410)에서 하나 이상의 일부 데이터 구간 에 3차원 데이터가 기록된 3차원 데이터 구간(420, 430, 440)이다.
본 발명의 로컬 3차원 영상 파라미터는 각각의 3차원 데이터 구간(420, 430, 440)에 대한 세부 정보를 제공하며, 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보, 영상 배치 순서 정보 중 적어도 하나를 포함한다.
영상 데이터 구간 위치 정보는, 현재 영상 데이터스트림에서 각각의 영상 데이터 구간이 기록된 위치를 나타낸다.
영상 구성 형식 정보는, 각각의 영상 데이터 구간의 3차원 영상에 대해, 기준 시준 영상 및 부가 시점 영상을 3차원 영상 형식으로 구성한 방법을 나타낸다.
폭 너비 정보는, 각각의 영상 데이터 구간의 3차원 영상에 대해, 영상 구성 방법 중 3차원 영상 형식에서 기준 시점 영상과 부가 시점 영상의 각각의 폭 정보 및 너비 정보를 나타낸다.
영상 배치 순서 정보는 각각의 영상 데이터 구간의 3차원 영상 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타낸다.
본 발명의 일 실시예에 의한 로컬 3차원 영상 파라미터는 각각의 데이터 구간마다 정의되므로, 로컬 3차원 영상 파라미터에 포함될 수 있는 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보, 영상 배치 순서 정보는 각각의 데이터 구간마다 개별적으로 정의될 수 있다. 또한, 영상 구성 형식 정보, 폭 너비 정보, 영상 배치 순서 정보가 모든 영상 데이터 구간마다 통일적으로 설정될 수도 있다.
도 5 는 본 발명의 일 실시예에 따른 로컬 3차원 영상 파라미터를 도시한다.
Local3D(500)은 로컬 3차원 영상 파라미터를 나타낸다. 로컬 3차원 영상 파라미터(500)는 영상 데이터 구간 개수 정보(number_of_interval, 510)를 포함하며, 영상 데이터 구간 개수 정보(510)는 현재 영상 데이터 스트림에서 포함된 영상 데이터 구간의 개수를 나타낸다.
for문(520)을 통해 각각의 영상 데이터 구간마다 변하는 정보를 포함하는 파라미터가 정의된다. 도 5의 실시예에서는, 영상 데이터 구간 위치 정보가, 현재 영상 데이터 구간의 시작 위치(start_position, 530) 및 현재 영상 데이터 구간의 종료 위치(end_position, 540)를 이용하여 표현된다.
stereo_file_format(550)은 영상 구성 형식 정보를 나타내며, composition_width (560)는 폭 너비 정보 중 폭의 크기, composition_height(570)는 폭 너비 정보 중 너비의 크기를 나타낸다. LR_First(580)는 영상 배치 순서 정보를 나타낸다.
도 5의 로컬 3차원 영상 파라미터(500)의 일 실시예는 영상 데이터 구간 개수 정보, 영상 데이터 구간 위치 정보(530, 540), 영상 구성 형식 정보(550), 폭 너비 정보(560, 570) 및 영상 배치 순서 정보(580)를 포함한다.
도 6a 은 본 발명의 일 실시예에 따른 영상 구성 형식 정보의 종류를 도시한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 0이라면, 해당 영상 데이터 구간의 영상 데이터는 사이드 바이 사이드 형식(Side by side format)의 3차원 영상 형식임을 나타낸다. 사이드 바이 사이드 형식은 예를 들면, 기준 시점 영상과 부가 시점 영상이 가로 방향으로 나란히 배치되어 한 장의 3차원 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 1 이라면, 해당 영상 데이터 구간의 영상 데이터는 탑 앤 바텀 형식(Top and bottom format)의 3차원 영상 형식임을 나타낸다. 탑 앤 바텀 형식은 예를 들면, 기준 시점 영상과 부가 시점 영상이 세로 방향으로 나란히 배치되어 한 장의 3차원 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 2 라면, 해당 영상 데이터 구간의 영상 데이터는 버티컬 라인 인터리브드 형식(Vertical line interleaved format)의 3차원 영상 형식임을 나타낸다. 버티컬 라인 인터리브드 형식은 예를 들면, 기준 시점 영상 및 부가 시점 영상의 수직 방향의 라인을 교대로 배치하여 3차원 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 3이라면, 해당 영상 데이터 구간의 영상 데이터는 호리즌털 라인 인터리브드 형식(Horizonal line interleaved format)의 3차원 영상 형식임을 나타낸다. 호리즌털 라인 인터리브드 형식은 예를 들면, 기준 시점 영상 및 부가 시점 영상의 수평 방향의 라인을 교대로 배치하여 3차원 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 4이라면, 프레임 시퀀셜 형식(Frame sequential format)을 나타낸다. 프레임 시퀀셜 형식은 예를 들면, 기준 시점 영상 프레임 및 부가 시점 영상 프레 임이 번갈아 디스플레이됨으로써 3차원 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 5이라면, 필드 시퀀셜 형식(Field sequential format)을 나타낸다. 필드 시퀀셜 형식은 예를 들면, 기준 시점 영상 필드 및 부가 시점 영상 필드가 번갈아 디스플레이됨으로써 3차원 영상을 구성한다. 프레임 시퀀셜 형식 및 필드 시퀀셜 형식은 기초 스트림이 두 개 이상인 경우에 적용된다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 6이라면, 단일 기준 시점 영상 형식(Monoscopic left image)을 나타낸다. 단일 기준 시점 영상 형식(Monoscopic left image)은 예를 들면, 좌측 시점 영상만을 이용하여 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 7이라면, 단일 부가 시점 영상 형식(Monoscopic Right image)을 나타낸다. 단일 단일 부가 시점 영상 형식(Monoscopic Right image)은 예를 들면, 우측 시점 영상만을 이용하여 영상을 구성한다.
현재 영상 데이터 구간의 영상 구성 형식 정보(StereoScopic Composition Type) 값이 8 내지 255 중 하나의 값이라면, 임의의 영상 구성 형식임을 나타낸다.
도 6b 는 본 발명의 일 실시예에 따른 영상 배치 순서 정보의 일례를 도시한다.
LR_first는 본 발명의 일 실시예에 따른 3차원 영상을 구성하는 기준 시점 영상 및 부가 시점 영상의 배치 순서 정보에 대한 파라미터이다. 본 발명의 일 실 시예는 LR_first를 한 비트(u(1))로 나타낸다.
LR_first가 0인 경우 좌측 영상(Left view)이 기준 시점 영상이며, 좌측 영상의 영상 데이터가 수직 방향 라인 인터리브드 형식(Vertical line interleaved format(Parallax barrier format))에서의 홀수 번째 라인(Odd line), 수평 방향 라인 인터리브드 형식(Horizontal line interleaved format)에서의 홀수 번째 라인, 탑 다운 형식(Top-down format)에서의 상단(Upper side), 사이드 바이 사이드 형식(Side-by-side format)에서의 좌측 영역(Left side), 필드 시퀀셜 형식(Field sequential format)에서의 홀수 번째 필드(Odd field), 프레임 시퀀셜 형식(Frame sequential format)에서의 홀수 번째 프레임(Odd frame) 및 블록 인터리브드 형식(Block-interleaved format)에서의 홀수 번째 블록(Odd number of MB), 두 개의 기초 스트림(Two ES)이 있는 경우에는 기본 미디어(Main media)에 배치된다. 마찬가지로 우측 영상(Right view)은 부가 시점 영상이 되어, 전술한 각 영상 구성 형식 정보에서 좌측 영상이 배치된 영역의 반대 영역에 배치된다.
LR_first가 1인 경우 우측 영상(Right view)이 기준 시점 영상이며, 우측 영상(Right view) 및 좌측 영상(Left view)의 배치 순서가 전술된 LR_first가 0인 경우와 정반대가 된다.
본 발명의 일 실시예는 하나의 데이터 스트림 상의 데이터 구간마다 개별적인 3차원 영상 구성 형식 정보를 가질 수 있다. 본 실시예의 로컬 3차원 파라미터는 데이터 구간 별로 각각의 3차원 영상 구성 형식 정보를 포함한다. 또한, 로컬 3차원 파라미터의 일 실시예는, 3차원 영상 구성 형식 정보의 영상 배치 순서 정보 를 포함한다. 또한 로컬 3차원 파라미터는, 기본 시점 영상의 폭(가로 크기) 정보 및 너비(세로 크기) 정보, 부가 시점 영상의 폭(가로 크기) 정보 및 너비(세로 크기) 정보를 포함할 수 있다.
도 7 은 ISO 기반의 미디어 파일 포맷의 기본 구조를 도시한다.
ISO 파일 박스(700)는 moov 박스(710) 및 mdat 박스(720)를 포함한다.
moov 박스(710)는 영상(video trak) 또는 음성(audio trak) 정보에 대한 기본적인 헤더 정보들을 포함하고, mdat 박스(720)는 실질적인 영상 데이터들 또는 음성 데이터들을 포함하고 있다. mdat 박스(720)의 일 실시예는, 인터리브드 타임 순서로(interleaved time-ordered) 영상 또는 음성 프레임들을 포함하고 있다.
도 8 은 ISO 기반의 미디어 파일 포맷의 박스 리스트를 도시한다.
ftyp 박스(810)는 파일 형식 및 호환성(file type and compatibility)을 나타내고 해당 파일의 주된 종류(major_brand)에 대한 정보를 포함한다. 본 발명의 일 실시예는 해당 파일이 3차원 스테레오 영상임을 나타내기 위해 "ssav"로 설정한다. 여기서 ssav는 스테레오스코픽 AV(stereoscopic audio-video)의 약어를 나타낸다.
moov 박스(820)는 타임드 리소스(timed resources)의 모든 메타데이터를 위한 공간이다. 도 7 를 참조하여서 전술한 바와 같이, moov 박스(820)는 mdat 박스(830)에 포함되어 있는 실질 미디어 데이터를 위한 헤더 정보 또는 메타데이터들이 포함되어 있다.
mdat 박스(830)는 도 7 를 참고하여 전술한 바와 같이, 미디어 데이터를 위 한 공간이다.
meta 박스(840)도 moov 박스(820) 이외의 메타데이터를 위한 공간이다. 본 발명의 일 실시예는 로컬 3차원 영상 파라미터를 위한 공간으로써 sinf(Stereoscopic information) 박스(850)를 meta 박스(840)의 하위 레벨에 포함시킨다.
moov 박스(820)의 하위 레벨인 trak 박스(860)는 메인 AV 데이터 또는 보조 데이터에 대한 각각의 독립적인 트랙 또는 스트림을 위한 공간이다. 본 발명의 다른 실시예는 로컬 3차원 영상 파라미터를 위한 공간으로써 sinf 박스(850)를 trak 박스 이하의 다른 meta 박스의 하위 레벨(870)에 포함시킨다.
따라서, 영상 데이터스트림 수신부(200)의 로컬 3차원 영상 파라미터 추출부(220)의 일 실시예는 전술된 ISO 기반의 미디어 파일 포맷의 sinf 박스로부터 로컬 3차원 영상 파라미터를 추출한다. 또한, 영상 데이터스트림 생성부(300)의 로컬 3차원 영상 파라미터 기록부(320)의 일 실시예는 로컬 3차원 영상 파라미터를 ISO 기반의 미디어 파일 포맷의 sinf 박스에 기록한다.
도 9 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
도 9 에 도시된 저피로도 파라미터의 표현 기술(Syntax)은, 도 8 를 참고하여 전술된 일 실시예에서, 로컬 3차원 영상 파라미터를 위한 snif 박스(850)가 meta 박스(840)의 하위 레벨인 경우(Box type : 'snmi' / Container : Meta box('meta'))에 해당한다. ISO 기반의 미디어 파일 포맷에서 로컬 3차원 영상 파라 미터의 구비 여부는 필수가 아니며(Mandatory : No), 파라미터의 양은 0 또는 1 (Quantity : Zero or one)이다. 각각의 변수들의 정의는 도 8 에서 전술된 바와 동일하다.
각각의 영상 데이터 구간마다(910), 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보(ES_ID, 920), 영상 데이터 위치 정보(930), 영상 구성 형식 정보가 정의된다. 도 9의 일 실시예에서는, 영상 구성 형식 정보가 6보다 작은 값일 때에만(940) 현재 영상 데이터 구간의 영상 구성 형식 정보가 3차원 영상 형식이므로, 로컬 3차원 영상 파라미터가 영상 배치 순서 정보(950)를 포함한다. 또한 영상 구성 형식 정보가 2보다 작아(960) 사이드 바이 사이드 형식 또는 탑 앤 바텀 형식인 경우에, 로컬 3차원 영상 파라미터가 폭 너비 정보(970)를 포함한다.
도 10 은 본 발명의 다른 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
도 10 에 도시된 일 실시예에서 로컬 3차원 영상 파라미터 값은 기초 스트림의 시작 위치 정보(1010)를 갖는다. 기초 스트림마다 기초 스트림의 시작 위치가 다를 수 있으므로, 기초 스트림이 두 개인 경우 두 개의 시작 위치 정보(base_offsetES1 및 base_offsetES2)가 존재한다.
본 실시예에서 영상 데이터 구간 위치 정보는 기초 스트림의 시작 위치 정보를 기준으로 해당 영상 데이터 구간의 길이를 이용하여 표현된다. 따라서 각각의 영상 데이터구간마다(1020), 로컬 3차원 영상 파라미터는 기초 스트림의 식별 정보(ES_ID) 및 영상 데이터 구간 길이 정보(interval_length)(1030)를 갖는다.
도 9 에서 전술된 실시예에서는 영상 데이터 구간 위치 정보로써 각각의 영상 데이터 구간마다 영상 데이터 구간의 시작 위치 정보 및 종료 위치 정보가 필요하였다. 그러나, 도 10의 일 실시예에는 기초 스트림의 시작 위치 정보를 이용함으로써 각각의 영상 데이터 구간마다의 영상 데이터 구간 위치 정보가 영상 데이터 구간 길이 정보만으로 표현이 가능하므로 정보량이 줄어든다.
도 10의 일 실시예에서도, 도 9의 실시예와 마찬가지로 3차원 영상인 경우에만(1040) 영상 배치 순서 정보(1050)가 존재하며, 사이드 바이 사이드 형식 또는 탑 앤 바텀 형식의 3차원 영상 형식인 경우에만(1060) 폭 너비 정보(1070)가 로컬 3차원 영상 파라미터로 이용된다.
도 11 은 본 발명의 또 다른 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
ISO 기반의 미디어 파일 포맷의 meta 박스(840)의 하위 레벨에는 메타데이터 파일 관리를 위한 iloc 박스가 위치한다. iloc 박스(1110)의 item_ID에는 기초 스트림의 식별 정보(ES_ID)가 기록되고, base_offset 및 extent_offset을 이용하여 영상 데이터 구간의 시작점이 표현되고, extent_length를 이용하여 영상 데이터 구간의 길이가 표현된다. 따라서 iloc 박스의 기초 스트림의 시작 위치 및 영상 데이터 구간 길이 정보(1110)를 이용하여 전술된 영상 데이터 위치 정보를 표현하는 방법이 구현된다.
iloc 박스(1110)에 영상 데이터 위치 정보가 기록되어 있으므로, sinf 박스(1120)에는 전술된 실시예들과 동일한 방식으로 영상 구성 형식 정보, 영상 배치 순서 정보, 폭 너비 정보들이 기록되면 된다.
도 12a 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 다르게 표현하는 방법을 도시한다.
전술된 실시예들에서는, 영상 구성 형식에 따라 영상 배치 순서 정보(LR_first) 또는 폭 너비 정보(composition_width, composition_height)의 존재 여부가 가변적이었으나, 도 12의 실시예에서는 대부분의 3차원 영상의 경우 영상 배치 순서 정보 및 폭 너비 정보가 필요할 것으로 가정하여, 조건문 없이 모든 정보이 파라미터 값으로 표현된다(1210).
도 12a 에 도시된 로컬 3차원 영상 파라미터의 신택스는 영상 구성 형식 정보(stereo_file_format), 영상 배치 순서 정보(LR_first) 및 폭 너비 정보(composition_width, composition_height)가 for문에 포함되어 영상 데이터 구간마다 개별적으로 설정될 수 있다.
도 12b 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 표현하는 또 다른 방법을 도시한다.
도 12b 에서 도시된 로컬 3차원 영상 파라미터의 신택스는 영상 구성 형식 정보(stereo_file_format), 영상 배치 순서 정보(LR_first) 및 폭 너비 정보(composition_width, composition_height)(이상 1220)가 for 문에 포함되지 않아, 모든 영상 데이터 구간에 대해 통일적으로 설정된 경우를 표현한다.
본 발명의 영상 구성 형식 정보, 영상 배치 순서 정보 및 폭 너비 정보가 영상 데이터 구간에 따라 설정되는 방식이, 세 정보가 모두 개별적으로 설정되거나 (도 12a) 모두 통일적으로 설정되는 경우(도 12b)에만 한정되는 것은 아니다.
예를 들면, 영상 구성 형식 정보는 모든 영상 데이터 구간에 대해 통일적으로 설정되었으나, 영상 배치 순서 정보 및 폭 너비 정보는 각각의 영상 데이터 구간마다 개별적으로 설정될 수도 있다. 또한, 영상 구성 형식 정보 및 영상 배치 순서 정보는 각각의 영상 데이터 구간마다 개별적으로 설정된 데 반해, 폭 너비 정보는 모든 영상 데이터 구간에 대해 통일적으로 설정될 수도 있다.
도 13 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 방법의 흐름도를 도시한다.
단계 1310에서, 2차원 영상 데이터 구간 및 3차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림이 수신된다.
단계 1320에서, 수신된 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터가 추출되며, 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함한다.
본 발명의 일 실시예에서, 로컬 3차원 영상 파라미터는 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보 및 영상 배치 순서 정보 중 적어도 하나를 포함한다.
본 발명의 일 실시예에서 로컬 3차원 영상 파라미터 정보는, 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, ISO 기반의 미디어 파일 포맷으로부터 추출된다.
본 발명의 다른 실시예에서 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함하고, 로컬 3차원 영상 파라미터 정보는, meta 박스의 하위 레벨 박스, moov 박스의 하위 레벨 박스, moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, trak 박스의 하위 레벨 박스 및 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나로부터 추출된다.
단계 1330에서, 추출된 로컬 3차원 영상 파라미터를 이용하여 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나가 복원된다.
도 14 은 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 방법의 흐름도를 도시한다.
단계 1410에서, 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함하는 영상 데이터스트림에 있어서, 각각의 영상 데이터 구간에 2차원 영상 데이터 또는 3차원 영상 데이터가 기록된다.
단계 1420에서, 각각의 영상 데이터 구간의 영상 구성 형식에서 기준 시점 영상 및 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터가 영상 데이터스트림에 기록된다.
본 발명의 일 실시예에서, 로컬 3차원 영상 파라미터는 영상 데이터 구간 위치 정보, 영상 구성 형식 정보, 폭 너비 정보 및 영상 배치 순서 정보 중 적어도 하나를 포함한다.
본 발명의 일 실시예에서 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, ISO 기반의 미디어 파일 포맷에 상기 로컬 3차원 영상 파라미터가 기록된다.
본 발명의 다른 실시예에서 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함할 때, meta 박스의 하위 레벨 박스, moov 박스의 하위 레벨 박스, moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, trak 박스의 하위 레벨 박스 및 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나에 로컬 3차원 영상 파라미터 정보가 기록된다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1a 은 2차원 영상 기반의 로컬 3차원 영상의 구현 방식의 일례을 도시한다.
도 1b 은 2차원 영상 기반의 로컬 3차원 영상의 구현 방식의 다른 예시를 도시한다.
도 2 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 장치의 블록도를 도시한다.
도 3 은 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 장치의 블록도를 도시한다.
도 4 는 본 발명의 일 실시예에 따라 로컬 3차원 영상을 구현하는 방식을 도시한다.
도 5 는 본 발명의 일 실시예에 따른 로컬 3차원 영상 파라미터를 도시한다.
도 6a 은 본 발명의 일 실시예에 따른 영상 구성 형식 정보의 종류를 도시한다.
도 6b 는 본 발명의 일 실시예에 따른 영상 배치 순서 정보의 일례를 도시한다.
도 7 은 ISO(International Standardization Organization, 국제표준화기구) 기반의 미디어 파일 포맷의 기본 구조를 도시한다.
도 8 은 ISO 기반의 미디어 파일 포맷의 박스 리스트를 도시한다.
도 9 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
도 10 은 본 발명의 다른 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
도 11 은 본 발명의 또 다른 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 도시한다.
도 12a 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 다르게 표현하는 방법을 도시한다.
도 12b 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터의 신택스를 표현하는 또 다른 방법을 도시한다.
도 13 는 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 수신 방법의 흐름도를 도시한다.
도 14 은 본 발명의 일 실시예에 따른, 로컬 3차원 영상 파라미터를 포함하는 영상 데이터스트림 생성 방법의 흐름도를 도시한다.

Claims (30)

  1. 기준 시점 영상 및 부가 시점 영상 중 적어도 하나로 구성된 3차원 영상에 대한 3차원 영상 데이터 구간 및 2차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하는 단계;
    상기 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하며, 상기 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 상기 기준 시점 영상 및 상기 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 단계; 및
    상기 추출된 로컬 3차원 영상 파라미터를 이용하여 상기 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원하는 단계를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  2. 제 1 항에 있어서,
    상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보를 상기 영상 데이터스트림으로부터 추출하는 단계를 더 포함하고,
    상기 로컬 3차원 영상 파라미터 추출 단계는, 상기 로컬 3차원 영상 파라미터가, 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보, 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 위치를 나타내는 영상 데이터 구간 위치 정보가 더 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  3. 제 1 항에 있어서, 상기 로컬 3차원 영상 파라미터 추출 단계는,
    현재 영상 데이터 구간이 3차원 영상 데이터 구간이라면, 상기 로컬 3차원 영상 파라미터는 상기 영상 배치 순서 정보를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  4. 제 2 항에 있어서,
    상기 영상 데이터 구간 위치 정보는, 상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  5. 제 2 항에 있어서, 상기 로컬 3차원 영상 파라미터 추출 단계는,
    각각의 기초 스트림의 시작 위치를 나타내는 기초 스트림 시작 위치 정보를 추출하는 단계를 더 포함하며,
    상기 영상 데이터 구간 위치 정보가, 상기 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  6. 제 1 항에 있어서, 상기 로컬 3차원 영상 파라미터 추출 단계는,
    상기 로컬 3차원 영상 파라미터가, 상기 기준 시준 영상 및 상기 부가 시점 영상을 3차원 영상으로 구성한 방법을 나타내는 영상 구성 형식 정보를 더 포함하며,
    상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식(Side by side format), 탑 앤 바텀 형식(Top and bottom format), 버티컬 라인 인터리브드 형식(Vertical line interleaved format), 호리즌털 라인 인터리브드 형식(Horizonal line interleaved format), 프레임 시퀀셜 형식(Frame sequential format), 필드 시퀀셜 포맷(Field sequential format), 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함하 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  7. 제 6 항에 있어서, 상기 로컬 3차원 영상 파라미터 추출 단계는,
    상기 영상 구성 형식 정보가 사이드 바이 사이드 형식 또는 탑 앤 바텀 형식인 경우,
    상기 로컬 3차원 영상 파라미터가, 상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 각각의 폭 너비 정보를 더 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  8. 제 1 항에 있어서, 상기 로컬 3차원 영상 파라미터는,
    상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 각각의 폭 너비 정보를 포함하는 단계를 더 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  9. 제 1 항에 있어서,
    상기 로컬 3차원 영상 파라미터 정보는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷으로부터 추출되는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  10. 제 9 항에 있어서,
    상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함하고,
    상기 로컬 3차원 영상 파라미터 정보는, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나로부터 추출되는 것을 특징으로 하는 영상 데이터스트림 수신 방법.
  11. 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함하는 영상 데이터스트림을 생성하는 방법에 있어서,
    각각의 영상 데이터 구간에 기준 시점 영상 및 부가 시점 영상 중 적어도 하 나로 구성된 3차원 영상 데이터 또는 2차원 영상 데이터를 기록하는 단계; 및
    각각의 영상 데이터 구간의 3차원 영상에서 상기 기준 시점 영상 및 상기 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터를 상기 영상 데이터스트림에 기록하는 단계를 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  12. 제 11 항에 있어서, 상기 로컬 3차원 영상 파라미터는,
    상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보;
    상기 영상 데이터 구간이 기록된 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보;
    상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 위치를 나타내는 영상 데이터 구간 위치 정보 중 적어도 하나를 더 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  13. 제 11 항에 있어서, 상기 로컬 3차원 영상 파라미터는,
    상기 기준 시점 영상 및 상기 부가 시점 영상을 3차원 영상 형식으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및
    상기 영상 구성 형식 정보에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 각각의 폭 너비 정보; 중 적어도 하나를 더 포함하며,
    상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  14. 제 12 항에 있어서, 상기 영상 데이터 구간 위치 정보는,
    상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 이용하여 표현되는 위치 정보; 및
    기초 스트림 시작 위치 정보 및 상기 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 이용하여 표현되는 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  15. 제 11 항에 있어서,
    상기 로컬 3차원 영상 파라미터 기록 단계는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷에 상기 로컬 3차원 영상 파라미터를 기록하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  16. 제 15 항에 있어서,
    상기 로컬 3차원 영상 파라미터 기록 단계는, 상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함할 때, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나에 상기 로컬 3차원 영상 파라미터 정보를 기록하는 것을 특징으로 하는 영상 데이터스트림 생성 방법.
  17. 기준 시점 영상 및 부가 시점 영상 중 적어도 하나로 구성된 3차원 영상에 대한 3차원 영상 데이터 구간 및 2차원 영상 데이터 구간의 영상 데이터 구간을 포함하는 영상 데이터스트림을 수신하는 수신부;
    상기 영상 데이터스트림으로부터 각각의 영상 데이터 구간의 영상에 대한 파라미터인 로컬 3차원 영상 파라미터를 추출하며, 상기 로컬 3차원 영상 파라미터는 각각의 영상 데이터 구간의 3차원 영상에서 상기 기준 시점 영상 및 상기 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터 추출부; 및
    상기 추출된 로컬 3차원 영상 파라미터를 이용하여 상기 영상 데이터 구간의 2차원 영상 및 3차원 영상 중 적어도 하나를 복원하는 영상 복원부를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  18. 제 17 항에 있어서,
    상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보를 상기 영상 데이터스트림으로부터 더 추출하고,
    상기 로컬 3차원 영상 파라미터 추출부는, 상기 로컬 3차원 영상 파라미터가, 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보, 상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 위치를 나타내는 영상 데이터 구간 위치 정보를 더 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  19. 제 18 항에 있어서, 상기 영상 데이터 구간 위치 정보는,
    상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 이용하여 표현되는 위치 정보; 및
    각각의 기초 스트림 시작 위치 정보 및 상기 기초 스트림의 시작 위치를 기준으로의 각각의 영상 데이터 구간의 길이 정보를 이용하여 표현되는 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  20. 제 17 항에 있어서, 상기 로컬 3차원 영상 파라미터 추출부는,
    상기 로컬 3차원 영상 파라미터가, 상기 기준 시준 영상 및 상기 부가 시점 영상을 3차원 영상으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및
    상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보를 더 포함하며,
    상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함하는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  21. 제 17 항에 있어서,
    상기 로컬 3차원 영상 파라미터 정보는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷으로부터 추출되는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  22. 제 21 항에 있어서,
    상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함하고,
    상기 로컬 3차원 영상 파라미터 정보는, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나로부터 추출되는 것을 특징으로 하는 영상 데이터스트림 수신 장치.
  23. 복수 개의 영상 데이터 구간으로 구분된 미디어 데이터 영역을 포함하는 영상 데이터스트림을 생성하는 장치에 있어서,
    각각의 영상 데이터 구간에 기준 시점 영상 및 부가 시점 영상 중 적어도 하나로 구성된 3차원 영상 데이터 또는 2차원 영상 데이터를 기록하는 영상 데이터 기록부; 및
    각각의 영상 데이터 구간의 영상 구성 형식에서 상기 기준 시점 영상 및 상기 부가 시점 영상이 배치된 순서를 나타내는 영상 배치 순서 정보를 포함하는 로컬 3차원 영상 파라미터를 상기 영상 데이터스트림에 기록하는 로컬 3차원 영상 파라미터 기록부를 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  24. 제 23 항에 있어서, 상기 로컬 3차원 영상 파라미터는,
    상기 영상 데이터 구간의 개수를 나타내는 영상 데이터 구간 개수 정보;
    상기 영상 데이터 구간이 기록된 기초 스트림이 복수 개인 경우 현재 영상 데이터 구간이 기록된 기초 스트림의 식별 정보;
    상기 영상 데이터스트림 중 상기 현재 영상 데이터 구간이 기록된 위치를 나타내는 영상 데이터 구간 위치 정보 중 적어도 하나를 더 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  25. 제 23 항에 있어서, 상기 로컬 3차원 영상 파라미터는,
    상기 기준 시점 영상 및 상기 부가 시점 영상을 3차원 영상 형식으로 구성한 방법을 나타내는 영상 구성 형식 정보; 및
    상기 영상 구성 형식에서의 상기 기준 시점 영상과 상기 부가 시점 영상의 폭 너비 정보 중 적어도 하나를 더 포함하며,
    상기 영상 구성 형식 정보는, 사이드 바이 사이드 형식, 탑 앤 바텀 형식, 버티컬 라인 인터리브드 형식, 호리즌털 라인 인터리브드 형식, 프레임 시퀀셜 형식, 필드 시퀀셜 포맷, 단일 기준 시점 영상 형식, 단일 부가 시점 영상 형식 중 적어도 하나의 영상 구성 형식을 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  26. 제 24 항에 있어서, 상기 영상 데이터 구간 위치 정보는,
    상기 영상 데이터 구간의 시작 위치 정보 및 상기 영상 데이터 구간의 종료 위치 정보를 이용하여 표현되는 위치 정보; 및
    기초 스트림 시작 위치 정보 및 상기 기초 스트림의 시작 위치를 기준으로 각각의 영상 데이터 구간의 길이를 나타내는 영상 데이터 구간 길이 정보를 이용하여 표현되는 위치 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  27. 제 23 항에 있어서,
    상기 로컬 3차원 영상 파라미터 기록부는, 상기 3차원 영상 데이터 스트림이 ISO 기반의 미디어 파일 포맷인 경우, 상기 ISO 기반의 미디어 파일 포맷에 상기 로컬 3차원 영상 파라미터를 기록하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  28. 제 27 항에 있어서,
    상기 로컬 3차원 영상 파라미터 기록부는, 상기 ISO 기반의 미디어 파일 포맷은 moov 박스, mdat 박스 및 meta 박스를 포함할 때, 상기 meta 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨 박스, 상기 moov 박스의 하위 레벨인 trak 박스의 하위 레벨 박스, 상기 trak 박스의 하위 레벨 박스 및 상기 trak 박스의 하위 레벨인 meta 박스의 하위 레벨 박스 중 적어도 어느 하나에 상기 로컬 3차원 영상 파라미터 정보를 기록하는 것을 특징으로 하는 영상 데이터스트림 생성 장치.
  29. 제 1 항 내지 제 10 항 중 한 항의 영상 데이터스트림 수신 방법을 구현하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체.
  30. 제 11 항 내지 제 16 항 중 한 항의 영상 데이터스트림 생성 방법을 구현하기 위한 프로그램이 수록된 컴퓨터로 판독 가능한 기록 매체.
KR1020070121396A 2007-10-04 2007-11-27 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치 KR101390810B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US12/146,942 US8538134B2 (en) 2007-10-04 2008-06-26 Method and apparatus for receiving and generating image data stream including parameters for displaying local three dimensional image

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US97747907P 2007-10-04 2007-10-04
US60/977,479 2007-10-04

Publications (2)

Publication Number Publication Date
KR20090034695A true KR20090034695A (ko) 2009-04-08
KR101390810B1 KR101390810B1 (ko) 2014-05-26

Family

ID=40760524

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070121396A KR101390810B1 (ko) 2007-10-04 2007-11-27 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치

Country Status (1)

Country Link
KR (1) KR101390810B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110088332A (ko) * 2010-01-28 2011-08-03 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
WO2014007525A1 (ko) * 2012-07-02 2014-01-09 삼성전자 주식회사 3차원 영상 데이터 스트림 생성 방법 및 장치, 3차원 영상 데이터 스트림 재생 방법 및 장치

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102435519B1 (ko) * 2018-06-20 2022-08-24 삼성전자주식회사 360도 영상을 처리하는 방법 및 장치

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005026800A (ja) * 2003-06-30 2005-01-27 Konica Minolta Photo Imaging Inc 画像処理方法、撮像装置、画像処理装置及び画像記録装置
KR100871740B1 (ko) * 2006-08-31 2008-12-05 한국정보통신대학교 산학협력단 멀티미디어 방송 콘텐츠용 통합 파일 포맷 구조를 가진 데이터를 기록한 기록 매체, 멀티미디어 방송 콘텐츠 서비스 시스템 및 그 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120026026A (ko) * 2009-04-27 2012-03-16 엘지전자 주식회사 방송 수신기 및 3ｄ 비디오 데이터 처리 방법
KR20110088332A (ko) * 2010-01-28 2011-08-03 삼성전자주식회사 다시점 비디오스트림에 대한 링크 정보를 이용하는 디지털 데이터스트림 전송 방법와 그 장치, 및 링크 정보를 이용하는 디지털 데이터스트림 전송 방법과 그 장치
WO2014007525A1 (ko) * 2012-07-02 2014-01-09 삼성전자 주식회사 3차원 영상 데이터 스트림 생성 방법 및 장치, 3차원 영상 데이터 스트림 재생 방법 및 장치

Also Published As

Publication number Publication date
KR101390810B1 (ko) 2014-05-26

Similar Documents

Publication Publication Date Title
US8538134B2 (en) Method and apparatus for receiving and generating image data stream including parameters for displaying local three dimensional image
US8259162B2 (en) Method and apparatus for generating stereoscopic image data stream for temporally partial three-dimensional (3D) data, and method and apparatus for displaying temporally partial 3D data of stereoscopic image
US8780173B2 (en) Method and apparatus for reducing fatigue resulting from viewing three-dimensional image display, and method and apparatus for generating data stream of low visual fatigue three-dimensional image
US8878836B2 (en) Method and apparatus for encoding datastream including additional information on multiview image and method and apparatus for decoding datastream by using the same
JP5022443B2 (ja) 立体映像コンテンツ再生に利用されるメタデータの復号化方法
CN102510464B (zh) 记录方法、再现装置和集成电路
US9456196B2 (en) Method and apparatus for providing a multi-view still image service, and method and apparatus for receiving a multi-view still image service
US20080303832A1 (en) Method of generating two-dimensional/three-dimensional convertible stereoscopic image bitstream and method and apparatus for displaying the same
CN101971639B (zh) 用于生成和显示媒体文件的装置和方法
WO2008054100A1 (en) Method and apparatus for decoding metadata used for playing stereoscopic contents
WO2011083626A1 (ja) 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム
WO2011083625A1 (ja) 画像処理装置、情報記録媒体、および画像処理方法、並びにプログラム
JP2011523285A (ja) カメラ・パラメータを利用したステレオスコピック映像データ・ストリーム生成方法及びその装置、並びにステレオスコピック映像復元方法及びその装置
JP2011223482A (ja) 画像処理装置、画像処理方法、およびプログラム
CN103202021A (zh) 编码装置、解码装置、再现装置、编码方法及解码方法
CN102484735A (zh) 用于视频图像的变速再现的方法和设备
JP2004274091A (ja) 画像データ作成装置、画像データ再生装置、画像データ記録方式および画像データ記録媒体
KR101390810B1 (ko) 로컬 3차원 영상을 재생하기 위한 파라미터를 포함하는영상 데이터스트림을 수신하는 방법 및 장치, 그리고 로컬3차원 영상을 재생하기 위한 파라미터를 포함하는 영상데이터스트림을 생성하는 방법 및 장치
JP2015534745A (ja) 立体画像の生成、送信、及び受信方法、及び関連する装置
KR101176065B1 (ko) 스테레오스코픽 영상에 관한 데이터를 전송하는 방법, 스테레오스코픽 영상을 재생하는 방법, 및 스테레오스코픽 영상 데이터의 파일 생성 방법
KR101390811B1 (ko) 3차원 영상을 위한 다시점 카메라 파라미터 수신 방법 및그 장치, 그리고 다시점 카메라 파라미터 전송 방법 및 그장치
KR101396350B1 (ko) 다시점 영상 데이터스트림 생성 방법 및 장치와 다시점영상 데이터스트림 복호화 방법 및 장치
KR20080108882A (ko) 2차원/3차원 재생 모드 전환이 가능한 입체 영상비트스트림 생성 방법 및 이를 구현하기 위한 입체 영상비트스트림 재생 방법 및 장치
US20140219640A1 (en) Method and apparatus for storing and playing 3d video source
KR20080092810A (ko) 미디어 표준 기반의 입체영상 파일 생성 장치 및 방법과이를 구현하기 위한 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170330

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180329

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee