KR20100002048A - 영상 처리 방법, 영상 출력 방법 및 그 장치 - Google Patents

영상 처리 방법, 영상 출력 방법 및 그 장치 Download PDF

Info

Publication number
KR20100002048A
KR20100002048A KR1020080105485A KR20080105485A KR20100002048A KR 20100002048 A KR20100002048 A KR 20100002048A KR 1020080105485 A KR1020080105485 A KR 1020080105485A KR 20080105485 A KR20080105485 A KR 20080105485A KR 20100002048 A KR20100002048 A KR 20100002048A
Authority
KR
South Korea
Prior art keywords
image
metadata
depth map
title
disc
Prior art date
Application number
KR1020080105485A
Other languages
English (en)
Inventor
정길수
박성욱
정현권
이대종
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US12/564,201 priority Critical patent/US20100103168A1/en
Priority to PCT/KR2009/006067 priority patent/WO2010050691A2/en
Priority to EP09823771A priority patent/EP2319247A4/en
Publication of KR20100002048A publication Critical patent/KR20100002048A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00—Image coding
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/40—Image enhancement or restoration using histogram techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/133—Equalising the characteristics of different image components, e.g. their average brightness or colour balance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/139—Format conversion, e.g. of frame-rate or size
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/158—Switching image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178—Metadata, e.g. disparity information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/339—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spatial multiplexing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359—Switching between monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H04N5/145—Movement estimation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00—Control of display operating conditions
    • G09G2320/06—Adjustment of display parameters
    • G09G2320/0626—Adjustment of display parameters for control of overall brightness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/156—Mixing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/005—Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Library & Information Science (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하고, 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 영상 처리 방법이 개시된다.
3차원, 디스크 관리 메타데이터, 뎁쓰 맵 생성용 메타데이터, 그래픽 정보

Description

영상 처리 방법, 영상 출력 방법 및 그 장치{Image processing method, image outputting method, and apparatuses thereof}
본 발명은 영상 처리 방법, 영상 출력 방법 및 그러한 방법들을 수행하는 장치들에 대한 것으로, 보다 구체적으로 디스크 관리 메타데이터를 이용하여 디스크에 기록된 타이틀 별로 3차원 영상 변환이 가능한지 여부를 판단하고, 그 결과에 따라 영상 출력 장치를 제어하는 영상 처리 방법, 영상 출력 방법 및 그 장치에 대한 것이다.
디지털 기술의 발달로 3차원 영상 기술이 널리 보급되고 있다. 3차원 영상 기술은 2차원 영상에 깊이에 대한 정보를 부여하여 보다 사실적인 영상을 표현하는 기술이다.
사람의 눈은 가로 방향으로 소정 거리만큼 떨어져 있으므로 좌안과 우안이 보는 2차원 영상이 서로 다른데 이를 양안시차라고 한다. 뇌는 서로 다른 두 개의 2차원 영상을 융합하여 원근감과 실재감이 있는 3차원 영상을 생성한다.
3차원 영상 기술은 처음부터 비디오 데이터를 3차원으로 영상으로 생성하는 기술과, 2차원 영상으로 생성된 비디오 데이터를 3차원 영상으로 변환하는 기술이 있으며, 두 기술에 대한 연구가 함께 이루어지고 있다.
본 발명은 디스크 관리 메타데이터를 이용하여 디스크에 기록된 타이틀 별로 3차원 영상 변환이 가능 여부를 판단하고, 그 결과에 따라 화면에 출력되는 영상이 2차원인지 3차원인지를 표시하는 그래픽 정보를 생성하고, 영상 출력 장치의 영상 출력 모드가 자동으로 변환되도록 하기 위한 것이다.
본 발명의 일 측면에 따르면, 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 단계 및 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함하는 영상 처리 방법을 제공할 수 있다.
바람직한 실시 예에서, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는 상기 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀에 포함된 프레임에 대한 뎁쓰 정보를 추출하는 단계, 상기 뎁쓰 정보를 이용하여 뎁쓰 맵을 생성하는 단계 및 상기 뎁쓰 맵 및 상기 프레임을 이용하여, 상기 프레임에 대한 좌 영상 및 우 영상을 생성하는 단계를 포함할 수 있다. 또한, 상기 디스크 관리 메타데이터에는, 뎁쓰 맵 생성용 메타데이터 중에 상기 타이틀에 대한 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보가 포함할 수 있다.
또한, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는 영 상 출력 장치로부터, 상기 영상 출력 장치가 2차원 영상만을 출력할 수 있는지 또는 2차원 영상과 3차원 영상을 모두 출력할 수 있는지에 대한 정보를 수신하는 단계 및 상기 영상 출력 장치가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함할 수 있다. 또한, 상기 디스크로부터 디스크 식별자를 추출하는 단계, 상기 디스크 식별자를 통신망을 통해 서버로 전송하는 단계 및 상기 서버로부터 상기 디스크 식별자에 상응하는 디스크 관리 메타데이터를 다운로드하는 단계를 더 포함할 수 있다.
또한, 상기 소정 타이틀의 2차원 영상이 상기 3차원 영상으로 변환되었음을 표시하는 그래픽 정보를 생성하는 단계 및 상기 그래픽 정보를 상기 3차원 영상에 오버레이하는 단계를 더 포함할 수 있다. 또한, 영상 출력 장치의 영상 출력 모드가 2차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계 및 상기 모드 변경 제어 신호를 상기 영상 출력 장치로 전송하는 단계를 더 포함할 수 있다. 또한, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 상기 소정 타이틀의 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성하는 단계 및 상기 그래픽 정보를 상기 소정 타이틀의 2차원 영상에 오버레이하는 단계를 더 포함할 수 있다.
또한, 영상 출력 장치의 영상 출력 모드가 3차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계 및 상기 모드 변경 제어 신호를 상기 영상 출력 장 치로 전송하는 단계를 더 포함할 수 있다. 또한, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀의 비디오 프레임들을 샷(shot)으로 구분하기 위한 샷 정보를 추출하는 단계 및 상기 샷 정보를 이용하여 상기 소정 타이틀의 비디오 프레임들 중, 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계를 포함하고, 상기 샷 정보는 이전 프레임을 이용하여 현재 프레임의 배경 구도가 예측될 수 있는 일련의 프레임들을 별개의 묶음으로 구분하기 위한 정보인 영상 처리 방법을 제공할 수 있다.
또한, 상기 뎁쓰 맵 생성용 메타데이터는 샷별로 샷에 포함되는 프레임들을 2차원 영상으로 출력할 것인지 3차원 영상으로 출력할 것인지를 나타내는 샷 타입 정보를 포함하고, 상기 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계는 상기 소정 샷에 대한 샷 타입 정보를 이용하여, 상기 소정 샷에 포함되는 프레임들을 상기 3차원 영상으로 변환하는 단계를 포함할 수 있다.
본 발명의 다른 측면에 따르면, 통신망을 통해 영상 처리 장치와 통신하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법에 있어서, 상기 영상 처리 장치로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받는 단계, 상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 단계 및 상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 단계를 포함하고, 상기 디스크에 대한 디스크 관리 메타데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메 타데이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법을 제공할 수 있다.
본 발명의 또 다른 측면에 따르면 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 디스크 관리 메타데이터 처리부, 뎁쓰 맵 생성용 메타데이터를 해석하는 뎁쓰 맵 생성용 메타데이터 해석부 및 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 3차원 영상 변환부를 포함하는 영상 처리 장치를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면 통신망을 통해 영상 처리 장치와 통신하는 서버에 있어서, 상기 영상 처리 장로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받고, 상기 요청에 상응하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 송수신부, 디스크에 대한 디스크 관리 메타데이터를 저장하는 디스크 관리 메타데이터 저장부 및 상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 디스크 관리 메타데이터 검색부 포함하고, 상기 디스크에 대한 디스크 관리 메이데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메타데 이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 통신망을 통해 영상 처리 장치와 통신하는 서버를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 단계 및 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함하는 영상 처리 방법을 실행하기 위한 컴퓨터로 읽을 수 있는 기록 매체를 제공할 수 있다.
본 발명의 또 다른 측면에 따르면 통신망을 통해 영상 처리 장치와 통신하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법에 있어서, 상기 영상 처리 장치로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받는 단계, 상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 단계 및 상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 단계를 포함하고, 상기 디스크에 대한 디스크 관리 메타데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법을 실행하기 위한 컴퓨터로 읽을 수 있는 기록 매체를 제공할 수 있다.
본 발명에 따르면, 디스크 관리 메타데이터를 이용하여 디스크에 기록된 타이틀 별로 3차원 영상 변환이 가능 여부를 판단하고, 그 결과에 따라 화면에 출력되는 영상이 2차원인지 3차원인지를 표시하는 정보를 생성하고, 영상 출력 장치의 모드가 자동으로 변환되도록 할 수 있다.
본 발명에서는 2차원 영상으로 생성된 비디오 데이터를 3차원 영상으로 변환하기 위해, 비디오 데이터에 대한 메타 데이터를 이용한다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시 예에 따른, 비디오 데이터에 대한 메타데이터를 도시한 도면이다. 본 발명의 일 실시 예에 따른 메타데이터에는 디스크 관리 메타데이터와 뎁쓰 맵 생성용 메타데이터가 포함된다.
일반적으로 하나의 디스크에는 복수의 타이틀이 기록될 수 있다. 한 예로, 디스크 하나에는 퍼스트 플레이 백 타이틀(first playback title), 탑 메뉴 타이틀(top menu title) 및 N 개의 영화 타이틀이 기록될 수 있다. 위 타이틀 중에 퍼스트 플레이 백 타이틀은 디스크가 영상 처리 장치(미도시)에 로딩될 때 처음으로 읽히는 타이틀로 뎁쓰 맵 생성용 메타데이터가 필요하지 않다. 또한, 탑 메뉴 타이틀은 타이틀에 대한 메뉴를 제공하는 타이틀로 메뉴를 표시하는 텍스트를 출력하기 위한 것이므로 탑 메뉴 타이틀에 대해서도 뎁쓰 맵 생성용 메타데이터가 필요하지 않을 수 있다. 위 디스크에 기록된 N 개의 영화 타이틀에 대해서는 영화를 3차원 영상으로 재생하기 위한 뎁쓰 맵 생성용 메타데이터가 필요할 수 있다.
일반적으로 하나의 뎁쓰 맵 생성용 메타데이터는 하나의 타이틀을 기준으로 작성되므로, 하나의 디스크에 복수의 타이틀이 기록되어 있는 경우 하나의 디스크에 대한 뎁쓰 맵 생성용 메타데이터 또는 복수개가 될 수 있다. 따라서 위 예에서, N개의 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터는 최대 N개까지 있을 수 있다.
디스크 관리 메타데이터는 디스크에 기록된 복수의 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 관리하기 위한 정보로, 디스크 관리 메타데이터에는 디스크 식별 정보와 디스크에 기록된 복수의 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터를 관리하기 위한 정보가 포함된다. 디스크 관리 메타데이터에 대해서는 도 2를 참조하여 설명하기로 한다.
뎁쓰 맵 생성용 메타데이터에는 비디오 데이터 프레임들을 3차원 영상으로 변환하기 위한 정보가 포함되어 있다. 비디오 데이터는 일련의 프레임들으로 이루어져 있으므로, 뎁쓰 맵 생성용 메타데이터에는 프레임들에 대한 정보가 포함되어 있다. 프레임들에 대한 정보는 프레임들을 소정의 기준에 따라 구분하기 위한 정보를 포함한다. 유사성이 있는 일련의 프레임들의 묶음을 하나의 유닛(unit)이라고 할 때, 비디오 데이터의 프레임들은 복수의 유닛들로 구분될 수 있다. 본 발명에서 뎁쓰 맵 생성용 메타데이터는 비디오 데이터의 프레임들을 소정의 유닛들로 구분하기 위한 정보를 포함한다.
본 발명에서는 프레임의 구도가 유사하여 이전 프레임을 이용하여 현재 프레임의 구도를 예측할 수 있는 경우, 구도가 유사한 일련의 프레임들을 하나의 샷(shot)으로 부르기로 한다. 뎁쓰 맵 생성용 메타데이터에는 비디오 데이터의 프레임들을 샷으로 구분하기 위한 샷 정보가 저장되어 있다. 프레임들의 구도가 현저하게 바뀌어서 현재 프레임의 구도가 이전 프레임의 구도와 다른 경우, 현재 프레임과 이전 프레임은 서로 다른 샷으로 구분된다.
도 1에는 도시되지 않았으나, 샷 정보는 샷 시작 시각 및 샷 종료 시각을 포함할 수 있다. 샷 시작 시각은 소정의 샷으로 구분되는 프레임들 중 최초로 출력되는 프레임의 출력 시각이고, 샷 종료 시각은 최후로 출력되는 프레임의 출력 시각을 의미한다.
뎁쓰 맵 생성용 메타데이터는 하나의 샷으로 구분되는 프레임들에 대한 샷 타입 정보를 포함할 수 있다. 샷 타입 정보는 각 샷별로, 그 샷으로 구분되는 프레임들을 2차원 영상으로 출력해야 하는지, 또는 3차원 영상으로 출력해야 하는지를 나타내는 정보이다.
샷 타입 정보가, 소정 샷으로 구분되는 프레임들이 3차원 영상으로 출력되어야 함을 나타내는 경우, 뎁쓰 맵 생성용 메타데이터에는 프레임들을 3차원 영상으로 변환하기 위해 필요한 정보가 더 포함될 수 있다.
2차원 영상에 입체감을 주기 위해서는 2차원 영상에 깊이감을 부여해야 한다. 사람이 화면을 볼 때, 화면에 투사된 영상이 두 눈에 맺히는 데, 눈에 맺힌 영상의 두 점 사이의 거리를 시차라고 한다. 시차는 양의 시차(positive parallax), 영의 시차(zero parallax), 음의 시차(negative parallax)로 구분된다. 양의 시차는 영상이 화면 안쪽에 맺히는 경우의 시차를 말하며 시차가 눈 사이의 거리와 같거나 그보다 작을 때를 말한다. 시차 값이 커질수록 영상이 화면보다 더 깊게 위치한 듯한 입체감을 준다.
영상이 화면 평면에 2차원으로 맺힌 경우의 시차는 0이 된다. 시차가 0인 경우, 영상이 화면 평면에 맺히므로 사용자는 입체감을 느끼지 못하게 된다. 음의 시차는 영상이 화면보다 앞쪽에 있는 경우의 시차를 말하고 시선이 교차할 때 발생하여 마치 물체가 튀어나와있는 듯한 입체감을 준다.
2차원 영상에 깊이감을 주어 3차원 영상을 생성하는 방법으로, 본 발명에서는 프레임에 대한 뎁쓰 맵을 생성하여 프레임에 깊이감을 부여하는 방법을 이용한다. 이를 위해 뎁쓰 맵 생성용 메타데이터에는 프레임에 깊이감을 주기 위한 정보인 뎁쓰 정보가 포함된다. 뎁쓰 정보는 프레임에 깊이감을 부여하여, 2차원 영상이 3차원 영상으로 변환되도록 하기 위한 정보로 배경용 뎁쓰 정보와 오브젝트용 뎁쓰 정보로 나뉜다.
하나의 프레임의 영상은 배경을 이루는 영상과, 배경을 제외한 오브젝트에 대한 영상으로 구성된다. 배경용 뎁쓰 정보는 배경을 이루는 영상에 깊이감을 주기 위한 정보이다. 배경을 이루는 영상에 깊이감을 준다는 것은 배경의 위치나 모양의 짜임새 등의 구도에 깊이감을 준다는 것을 의미한다.
각 프레임의 구도는 다양할 수 있으므로, 뎁쓰 맵 생성용 메타데이터에 포함된 각 샷에 대한 배경용 뎁쓰 정보에는 프레임의 배경이 어떤 구도인가를 나타내는 구도의 유형(구도의 타입)에 대한 정보가 포함되어 있다. 또한, 배경용 뎁쓰 정보에는 배경의 좌표점 값, 좌표점 값에 대응하는 배경의 뎁쓰 값, 그리고 패널 포지션 값이 포함될 수 있다.
배경의 좌표점 값은 2차원 영상의 프레임에 포함된 배경의 좌표점들의 값을 말한다. 뎁쓰 값은 영상에 부여될 깊이의 정도를 말하며, 뎁쓰 맵 생성용 메타데이터에는 2차원 영상의 프레임의 각 좌표점 값에 부여될 뎁쓰 값이 포함되어 있다. 패널 포지션은 영상이 맺히는 화면의 위치를 말한다.
오브젝트용 뎁쓰 정보는 배경을 제외한, 수직으로 서 있는 사람이나 건물 등의 개체(object, 이하 오브젝트라 한다)에 대해 뎁쓰 맵을 생성하기 위해 사용되는 정보이다. 오브젝트용 뎁쓰 정보는 오브젝트 출력 시간 및 오브젝트 영역 정보를 포함한다. 오브젝트 출력 시간은, 소정 샷으로 구분되는 프레임들 중에 오브젝트가 등장하는 프레임이 출력되는 시간을 의미한다. 오브젝트 영역 정보는 오브젝트의 영역을 나타내기 위한 정보로 오브젝트의 영역을 표시하기 위한 좌표점들이 포함될 수 있으며, 오브젝트의 영역을 표시하기 위한 좌표점들에는 오브젝트와 배경이 맞닿은 지점의 좌표점 정보가 포함된다. 경우에 따라 오브젝트 영역 정보로 오브젝트의 영역이 표시된 마스크를 이용할 수도 있다. 배경용 뎁쓰 정보와 오브젝트용 뎁쓰 정보에 대해서는 도 3 및 6을 참조하여 보다 구체적으로 살펴보기로 한다.
이와 같이, 본 발명의 일 실시 예에 의하면, 비디오 데이터에 대한 메타데이터는 디스크 관리 메타데이터와 뎁쓰 맵 생성용 메타데이터를 포함한다.
도 2는 디스크 관리 메타데이터를 도시한 도면이다. 도 2를 참조하면, 디스 크 관리 메타데이터에는 디스크 식별 정보가 포함되어 있다. 디스크 식별 정보는 디스크 관리 메타데이터가 어느 디스크에 대한 정보인지를 표시하기 위한 정보이다.
디스크 관리 메타데이터에는 각 타이틀 별로 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 표시하는 정보와, 뎁쓰 맵 생성용 메타데이터가 존재하는 타이틀에 대해 그 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 표시하는 정보가 포함되어 있다.
도 2를 참조하면, 소정의 디스크에 5개의 타이틀이 기록되어 있는 경우, 디스크 관리 메타데이터에는 소정의 디스크에 기록된 각 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하는지를 알려주는 정보가 포함되어 있다. 도 2를 참조하면, 타이틀 1, 2, 5에 대해서는 뎁쓰 맵 생성용 메타데이터가 존재하지 않고, 타이틀 3 및 4에 대해서는 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터가 존재함을 알 수 있다. 이 경우 디스크 관리 정보에는 타이틀 3 및 4에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 알려주는 정보가 더 포함되어 있다. 즉, 소정 디스크에 적용할 수 있는 뎁쓰 맵 생성용 메타데이터 중 소정 타이틀에 적용할 전체 뎁쓰 맵 생성용 메타데이터가 무엇인지를 나타내는 정보가 더 포함될 수 있다.
도 3은 도 1의 뎁쓰 맵 생성용 메타데이터에 포함된 뎁쓰 정보를 설명하기 위한 도면이다. 도 3의 (a)는 영상에 부여되는 깊이감을 설명하기 위한 도면이고, 도 3의 (b)는 화면의 측면에서 관찰할 때, 영상에 부여되는 깊이감을 설명하기 위한 도면이다.
본 발명에서는 뎁쓰 정보를 이용하여 2차원 평면의 프레임에 깊이감을 부여한다. 도 3의 (a)및 (b)를 참조하면, 사용자가 화면을 시청하는 방향과 평행한 방향인 X축 방향은 프레임의 깊이 정도를 나타낸다. 뎁쓰 값은 영상의 깊이 정도를 뜻하며, 본 발명에서 뎁쓰 값은 0부터 255까지 256개 중 하나의 값을 갖을 수 있다. 뎁쓰 값이 작아져 0에 가까워질수록 영상이 깊어져, 영상이 시청자에게 멀어지고, 뎁쓰 값이 커져 255에 가까워질수록 영상이 시청자에게 가까워지게 된다.
패널 포지션은 영상이 맺히는 화면의 위치를 말하며, 패널 포지션 값은 시차가 0인 경우, 즉, 영상이 화면 표면에 맺힐 때의 영상의 뎁쓰 값을 뜻한다. 도 3에서와 같이, 패널 포지션 값은 0부터 255 중 하나의 뎁쓰 값을 갖을 수 있다. 패널 포지션 값이 255인 경우, 프레임에 포함된 영상은 모두 화면과 같은 뎁쓰를 갖거나 또는 화면보다 작은 뎁쓰 값을 갖게 되므로 영상이 시청자에게 멀어지는 방향, 즉, 화면 안쪽에 맺힌다. 이는 프레임에 포함된 영상이 0 또는 양의 시차를 갖게 됨을 의미한다. 패널 포지션 값이 0인 경우, 프레임에 포함된 영상은 모두 화면과 같은 뎁쓰 값을 갖거나 또는 화면보다 큰 뎁쓰 값을 갖게 되므로 영상이 화면 밖으로 튀어나와 맺히게 된다. 이는 프레임에 포함된 모든 영상이 0 또는 음의 시차를 갖게 됨을 의미한다.
오브젝트는 화면 평면과 평행한 방향으로 서 있는 사람이나 건물 등의 개체를 말한다. 도 3의 (b)에서와 같이, 오브젝트의 뎁쓰 값은, 배경과 오브젝트가 맞닿은 지점에서 배경이 갖는 뎁쓰 값과 동일한 뎁쓰 값을 갖게 된다. 경우에 따라, 오브젝트는 패널 포지션 값을 뎁쓰 값으로 갖을 수도 있다. 오브젝트는 Z축 방향, 즉, 패널 포지션에 평행한 방향으로 동일한 뎁쓰 값을 갖게 된다.
도 4는 본 발명의 일 실시 예에 따른 영상 처리 방법 및 영상 출력 방법을 설명하기 위한 영상 처리 시스템을 나타낸 도면이다.
도 4를 참조하면, 영상 처리 시스템은 서버(100), 영상 처리 장치(200) 및 영상 출력 장치(300)를 포함한다.
영상 처리 장치(200)는 비디오 데이터를 디코딩하여 2차원의 비디오 영상을 생성하고, 디스크 관리 메타데이터를 이용하여 2차원의 비디오 영상을 3차원 영상으로 변환하여 영상 출력 장치(300)로 전송하거나, 2차원 영상 그대로를 영상 출력 장치(300)에 전송하는 기기로, DVD 플레이어나 셋 탑 박스 등이 될 수 있다.
영상 출력 장치(300)는 영상 처리 장치(200)가 전송한 영상을 화면에 출력하는 기기로, 모니터나 티브이 화면 등이 될 수 있다.
도 4에서는 영상 처리 장치(200)와 영상 출력 장치(300)를 분리하여 도시하였으나, 경우에 따라서는 영상 처리 장치(200)에 영상 출력 장치(300)의 기능을 수행하는 출력부가 포함되어 영상 처리 장치(200)가 영상을 화면에 출력하는 기능까지 수행할 수도 있다.
영상 처리 장치(200)는 통신망을 통하여 서버(100)와 결합되어 있다. 통신망은 유선 또는 무선 통신망을 포함한다.
서버(100)는 방송국이나 일반 콘텐츠 생성 업체 등의 콘텐츠 제공자가 운영하는 것으로, 오디오 신호, 비디오 신호, 텍스트 신호, 이들에 대한 메타데이터 신호 등의 콘텐츠가 저장되어 있다.
사용자가 리모트 콘트롤러(미도시) 등의 유저 인터페이스를 통하여 영상 처리 장치(200)의 전원을 켜면, 영상 처리 장치(200)는 영상 출력 장치(300)가 2차원 영상만 출력할 수 있는지 또는 2차원 영상 외에 3차원 영상도 출력할 수 있는지에 대한 정보를 영상 출력 장치(300)로부터 수신한다. 영상 출력 장치(300)가 3차원 영상 출력을 지원하는 경우, 영상 처리 장치(200)는 로딩된 디스크로부터 디스크 식별 정보를 추출하고 이를 서버(100)에 전송하고, 디스크 식별 정보에 상응하는 메타데이터를 요청한다.
서버(100)는 사용자가 전송한 디스크 식별 정보를 이용하여 소정 디스크에 대한 메타데이터가 서버(100)에 저장되어 있는지를 검색하고, 소정 디스크에 대한 메타데이터가 있는 경우 이를 추출하여 영상 처리 장치(200)로 전송한다. 영상 처리 장치(200)는 서버(100)로부터 다운로드한 메타데이터를 영상 처리 장치(200) 내부의 소정 위치에 디스크 식별 정보 별로 구분하여 저장할 수 있다.
경우에 따라 메타데이터는 비디오 데이터가 기록된 디스크에 기록되어 있을 수도 있다. 메타데이터는 디스크의 리드인 영역, 사용자 데이터 영역, 리드 아웃 영역 중 하나 이상의 영역에 기록되어 있을 수 있다. 또한, 디스크 관리 메타데이터와 뎁쓰 맵 생성용 메타데이터는 독립적으로 저장되어 있을 수 있다. 즉, 디스크 관리 메타데이터는 서버(100)에 저장되어 있고 뎁쓰 맵 생성용 메타데이터는 디스크에 기록되어 있을 수도 있다.
영상 처리 장치(200)는 디스크에 기록된 타이틀을 디코딩하여 2차원 영상을 생성한다. 영상 처리 장치(200)는 서버(100)로부터 다운로드하거나 또는 디스크로 부터 독출한 디스크 관리 메타데이터를 이용하여 로딩된 디스크에 기록된 타이틀 별로 각 타이틀에 적용될 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단한다.
디스크 관리 정보를 이용하여 소정의 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재한다고 판단되면, 영상 처리 장치(200)는 소정의 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보를 이용하여 소정의 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터를 찾는다.
영상 처리 장치(200)는 소정의 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터를 이용하여 소정 타이틀의 2차원 영상을 3차원 영상으로 변환한다. 영상 처리 장치(200)는 뎁쓰 맵 생성용 메타데이터로부터 소정 타이틀에 포함된 프레임에 대한 배경용 뎁쓰 정보 및 오브젝트용 뎁쓰 정보를 추출하고, 추출한 뎁쓰 정보를 이용하여 배경에 대한 뎁쓰 맵과 오브젝트에 대한 뎁쓰 맵을 각 각 생성한다. 영상 처리 장치(200)는 배경에 대한 뎁쓰 맵과 오브젝트에 대한 뎁쓰 맵을 더하여 완성된 뎁쓰 맵을 생성하고, 뎁쓰 맵 및 2차원 영상을 이용하여, 2차원 영상에 대한 좌 영상 및 우 영상, 즉, 3차원 영상을 생성한다.
영상 처리 장치(200)는 3차원 영상을 영상 출력 장치(300)로 전송하기 전, 현재 영상 출력 장치(300)로 전송되는 영상이 3차원 영상임을 표시하기 위한 그래픽 정보를 생성할 수 있다. 그래픽 정보는 이모티콘이나 이모콘, 텍스트, 이미지 등이 될 수 있다. 영상 처리 장치(200)는 생성된 그래픽 정보를 3차원 영상에 오버레이하여 영상 출력 장치(300)로 전송한다.
영상 출력 장치(300)는 그래픽 정보가 오버레이된 비디오 영상을 3차원 영상으로 출력한다. 사용자는 비디오 영상에 오버레이되어 출력되는 그래픽 정보를 이용하여, 현재 영상 출력 장치(300)로부터 출력되는 영상이 3차원 영상임을 인식할 수 있다. 현재 영상 출력 장치(300)가 2차원 영상을 출력할 수 있는 모드로 설정되어 있는 경우, 사용자는 리모트 콘트롤러(미도시) 등을 이용하여 영상 출력 장치(300)의 모드를 변경하여, 영상 출력 장치(300)가 3차원 영상을 출력할 수 있도록 모드 변경을 할 수 있다.
경우에 따라, 영상 처리 장치(200)가 영상 출력 장치(300)의 모드를 자동으로 변경할 수도 있다. 영상 처리 장치(200)는 영상 출력 장치(300)로부터, 영상 출력 장치(300)가 2차원 영상 출력 모드로 설정되어 있는지, 3차원 영상 출력 모드로 설정되어 있는지에 대한 정보를 수신하거나 또는 현재 타이틀 이전에 영상 출력 장치(300)로 전송한 영상이 2차원 영상인지 3차원 영상인지에 대한 정보를 이용하여, 영상 출력 장치(300)의 영상 출력 모드가 2차원 영상 출력 모드로 설정되어 있는지 또는 3차원 영상 출력 모드로 설정되어 있는지를 판단한다.
영상 출력 장치(300)가 2차원 영상 출력 모드로 설정되어 있는 경우, 영상 처리 장치(200)는 3차원 영상을 출력할 수 있는 모드로 변경될 것을 지시하는 제어 신호를 생성하고 이를 영상 출력 장치로 전송함으로써, 영상 출력 장치가 3차원 영상을 출력하도록 할 수 있다.
영상 처리 장치(200)는 디스크 관리 정보를 이용하여 소정의 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하지 않는다고 판단되면, 디코딩된 2차원 영상을 그대로 영상 출력 장치(300)로 전송한다. 영상 처리 장치(200)는 3차원 영상을 영상 출력 장치(300)로 전송하기 전, 현재 영상 출력 장치(300)로 전송되는 영상이 2차원 영상임을 표시하기 위한 그래픽 정보를 생성하고, 생성된 그래픽 정보를 2차원 영상에 오버레이하여 영상 출력 장치(300)로 전송한다.
영상 출력 장치(300)는 영상이 2차원 영상임을 표시하는 그래픽 정보가 오버레이된 비디오 영상을 출력한다. 사용자는 비디오 영상에 오버레이되어 출력되는 그래픽 정보를 이용하여, 현재 영상 출력 장치(300)로부터 출력되는 영상이 2차원 영상임을 인식할 수 있다. 현재 영상 출력 장치(300)가 3차원 영상을 출력할 수 있는 모드로 설정되어 있는 경우, 사용자가 리모트 콘트롤러(미도시) 등을 이용하여 영상 출력 장치(300)의 모드를 변경하여, 영상 출력 장치(300)가 2차원 영상을 출력할 수 있도록 모드 변경을 할 수 있고 전술한 바와 같이 영상 처리 장치(200)가 자동으로 영상 출력 장치(300)의 영상 출력 모드를 인식하고 이를 변경할 수도 있다. 영상 처리 장치(200)는 영상 출력 장치(300)가 3차원 영상 출력 모드로 설정되어 있는 경우, 2차원 영상을 출력할 수 있는 모드로 변경될 것을 지시하는 제어 신호를 생성하고 이를 영상 출력 장치(300)로 전송함으로써, 영상 출력 장치(300)가 2차원 영상을 출력하도록 할 수 있다.
영상 출력 장치(300)는 좌안 영상과 우안 영상을 순차적으로 화면에 출력한다. 시청자는 한쪽 눈을 기준으로 최소 60Hz의 frame rate로 영상이 출력되어야 이미지가 끊기지 않고 순차적으로 재생된다고 인지하므로 좌/우 양안을 통해 입력된 이미지가 합쳐져서 3차원 영상으로 인지되기 위해서는 디스플레이 장치가 최소한 120Hz의 frame rate로 화면을 출력해야 한다. 영상 출력 장치(300)는 1/120초 단위로 프레임에 포함된 좌, 우 영상을 순차적으로 표시한다.
영상 처리 장치(200)와 영상 출력 장치(300)가 고선명 멀티미디오 인터페이스(High Definition Multimedia Interface, 이하, HDMI라 한다)를 지원하는 경우, 영상 처리 장치(200)와 영상 출력 장치(300)는 HDMI를 이용하여 정보를 송수신할 수 있다. HDMI는 비압축 방식의 디지털 비디오/오디오 인터페이스 규격의 하나로, HDMI를 지원하는 장치들 사이의 인터페이스를 제공한다. HDMI는 TMDS, DDC, 그리고 CEC 세개의 통신 채널을 가진다.
먼저, 영상 처리 장치(200)와 영상 출력 장치(300)가 TMDS(Transition Minimized differential Signaling) 채널을 이용하여 정보를 송수신하는 경우를 살펴본다. TMDS는 영상 데이터 구간(period), 데이터 섬 구간 및 제어 구간의 세가지 방법으로 영상, 음성 및 부가 데이터를 전송한다. 영상 데이터 구간에서는 동영상 라인의 화소 정보가 전송되고, 데이터 섬 구간에서는 음성 정보와 일련의 조각으로 이루어진 부가 정보가 전송된다. 데이터 섬 구간은 수평 귀선 기간이나 수직 귀선 기간 때 발생한다. 마지막으로 제어 구간은 영상 데이터 구간과 데이터 섬 구간 사이에서 발생한다. 영상 처리 장치(200)는 제어 구간에서 영상 출력 장치(300)의 모드가 3차원 영상 출력 모드로 변환되도록 지시하거나 또는 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 전송할 수 있다.
다음으로, 영상 처리 장치(200)와 영상 출력 장치(300)가 CEC(Consumer Electronics Control) 라인을 이용하여 모드 변경 제어 신호를 전송하는 경우를 살 펴본다. CEC 라인은 HDMI를 이용하는 장치간 제어를 위해 전송되는 제어 데이터를 전송한다.
CEC 라인에 의해 전송되는 제어 데이터에는 전송되는 데이터가 모드 변경에 관한 제어 데이터라는 정보와, 영상 출력 장치의 모드를 3차원 영상 출력 모드로 또는 2차원 영상 출력 모드로 변경할 것을 지시하는 정보 및 제어 데이터를 수신하게 되는 영상 출력 장치(300)의 주소가 포함될 수 있다.
이와 같이, 본 발명의 일 실시 예에 의하면, 영상 처리 장치(200)는 디스크 관리 메타데이터를 이용하여 출력하려는 영상이 2차원 영상인지 3차원 영상인지를 표시하는 그래픽 정보를 생성하여 영상에 오버레이하고, 영상 출력 장치(300)의 영상 출력 모드에 따라, 영상 출력 장치(300)의 영상 출력 모드를 변경하는 제어 신호를 생성하여 영상 출력 장치(300)로 전송함으로써, 사용자가 별도로 영상 출력 장치(300)의 영상 출력 모드를 변경하지 않아도 자동으로 영상 출력 장치(300)의 모드가 변경되도록 할 수 있다.
도 5는 도 4의 영상 출력 장치(200)의 내부 블록도이다. 도 5를 참조하면, 영상 출력 장치(200)는 비디오 데이터 디코딩부(210), 디스크 관리 메타데이터 처리부(220), 뎁쓰 맵 생성용 메타데이터 해석부(230), 3차원 영상 변환부(240), 비디오 영상 버퍼(250), 그래픽 정보 처리부(260) 및 그래픽 정보 버퍼(270)를 포함한다. 도 5에는 도시되지 않았으나, 영상 출력 장치(200)는 통신망을 통해 외부 서버(100)와 정보를 송수신하기 위한 통신부 및 통신부를 통해 다운로드된 정보를 저장하기 위한 로컬 스토리지를 더 포함할 수 있다. 또한, 도 5에는 도시되지 않았으 나, 영상 처리 장치(200)는 STC(System Time Clock)카운터를 포함할 수 있다. 영상 처리 장치(200)는 시스템 타임 클럭인 STC카운터에 의해 디코딩되고 출력된다.
비디오 데이터 디코딩부(210)는 디스크로부터 비디오 데이터를 독출하여 이를 디코딩하거나, 로컬 스토리지에 다운로드되어 저장되어 있는 비디오 데이터를 독출하여 이를 디코딩한다.
영상 처리 장치(200)에 디스크가 로딩되면, 디스크 관리 메타데이터 처리부(220)는 디스크로부터 메타데이터를 독출한다. 디스크에 메타데이터가 저장되어 있지 않은 경우, 디스크 관리 메타데이터 처리부(220)는 디스크로부터 디스크 식별 정보를 추출하고 이를 통신부를 통해 서버(100)로 전송한다. 영상 처리 장치(200)는 서버(100)로부터 소정 디스크에 대한 메타데이터를 수신하고 이를 로컬 스토리지에 디스크 식별 정보 별로 저장할 수 있다.
디스크 관리 메타데이터 처리부(220)는 디스크 관리 메타데이터를 이용하여 디스크에 기록된 타이틀 별로, 소정 타이틀의 비디오 데이터에 적용할 뎁쓰 맵 생성용 메타데이터가 포함되어 있는지 판단한다.
소정 타이틀의 비디오 데이터에 적용할 뎁쓰 맵 생성용 메타데이터가 없는 경우, 3차원 영상 변환부(240)는 비디오 데이터 디코딩부(210)에 의해 디코딩된 2차원 영상을 그대로 비디오 영상 버퍼(250)로 보낸다. 디스크 관리 메타데이터 처리부(210)는 그래픽 정보 처리부(260)를 제어하여 현재 출력될 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성케 한다. 그래픽 정보 처리부(260)는 생성된 그래픽 정보를 그래픽 정보 버퍼(270)로 보낸다.
디스크 관리 메타데이터 처리부(210)는 영상 출력 장치(300)의 영상 출력 모드가 3차원 영상 출력 모드인지, 2차원 영상 출력 모드인지를 판단한다. 영상 출력 장치(300)의 모드가 3차원 영상 출력 모드로 설정되어 있다고 판단되면, 디스크 관리 메타데이터 처리부(220)는 영상 출력 장치(300)의 영상 출력 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하고 이를 영상 출력 장치(300)로 전송한다.
비디오 영상 버퍼(250)와 그래픽 정보 버퍼(270)는 각각 비디오 영상 및 그래픽 정보를 일시적으로 저장하고 있다가 STC이 PTS(Presentation Time Stamp)와 일치할 때 비디오 영상과 그래픽 정보를 블렌더(280)로 보낸다. 블렌더(280)는 비디오 영상과 그래픽 정보를 오버레이하여 이를 영상 출력 장치(300)로 전송한다.
소정 타이틀의 비디오 데이터에 적용할 뎁쓰 맵 생성용 메타데이터가 있는 경우, 디스크 관리 메타데이터 처리부(220)는 뎁쓰 맵 생성용 메타데이터 중에 소정 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 파악한다. 디스크 관리 메타데이터 처리부(220)는 뎁쓰 맵 생성용 메타데이터 해석부(230)를 제어하여, 소정의 타이틀에 적용될 뎁쓰 맵 생성용 메타데이터를 해석케 한다. 뎁쓰 맵 생성용 메타데이터 해석부(230)는 뎁쓰 맵 생성용 메타데이터를 해석하여 뎁쓰 정보를 추출한다.
3차원 영상 변환부(240)는 뎁쓰 맵 생성용 메타데이터 해석부(230)가 추출한 뎁쓰 정보를 이용하여 비디오 데이터 디코딩부(210)에 의해 디코딩된 2차원 영상에 대해 뎁쓰 맵을 생성하고, 뎁쓰 맵을 이용하여 2차원 영상을 3차원 영상으로 변환 한다.
디스크 관리 메타데이터 처리부(210)는 그래픽 정보 처리부(260)를 제어하여 현재 출력될 영상이 3차원 영상임을 표시하는 그래픽 정보를 생성케 한다. 그래픽 정보 처리부(260)는 생성된 그래픽 정보를 그래픽 정보 버퍼(270)로 보낸다.
디스크 관리 메타데이터 처리부(210)는 영상 출력 장치(300)의 영상 출력 모드가 3차원 영상 출력 모드인지, 2차원 영상 출력 모드인지를 판단한다. 영상 출력 장치(300)의 모드가 2차원 영상 출력 모드로 설정되어 있다고 판단되면, 디스크 관리 메타데이터 처리부(220)는 영상 출력 장치(300)의 영상 출력 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성한다.
영상 처리 장치(200)는 3차원 영상임을 표시하는 그래픽 정보가 오버레이된 3차원 영상 및 모드 변경 제어 신호를 영상 출력 장치(300)로 전송한다.
경우에 따라, 소정 타이틀은 2차원 영상으로 출력되어야 하는 프레임들과 3차원 영상으로 출력되어야 하는 프레임들을 모두 포함할 수 있다. 이 경우, 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터에는 3차원 영상으로 출력되어야 하는 일부 프레임들에 대한 뎁쓰 정보만 포함되어 있다.
뎁쓰 맵 생성용 메타데이터 해석부(230)는 뎁쓰 맵 생성용 메타데이터를 해석하여 소정의 샷으로 구분되는 비디오 데이터의 프레임들에 대한 샷 정보를 추출한다. 뎁쓰 맵 생성용 메타데이터 해석부(230)는 샷 타입 정보를 이용하여 소정 샷으로 구분되는 프레임들이 2차원 영상으로 출력되어야 하는지 3차원 영상으로 출력되어야 하는지를 판단한다. 뎁쓰 맵 생성용 메타데이터 해석부(230)는 소정 샷으로 구분되는 프레임들이 3차원 영상으로 변환되어야 하는 경우, 뎁쓰 맵 생성용 메타데이터로부터 소정 샷으로 구분되는 프레임들에 적용할 뎁쓰 정보를 추출하고 이를 3차원 영상 변환부(240)로 보낸다.
이 경우, 디스크 관리 메타데이터 처리부(210)는 그래픽 정보 처리부(260)를 제어하여 현재 출력될 영상이 2차원 영상인지 또는 3차원 영상인지를 표시하는 그래픽 정보를 생성케 하고, 영상 출력 장치(300)의 영상 출력 모드를 변경하기 위한 모드 변경 제어 신호를 생성하여 영상 출력 장치(300)로 전송한다.
이와 같이 본 발명의 일 실시 예에 의하면, 사용자는 영상과 함께 출력되는 그래픽 정보를 이용하여, 출력되는 영상이 2차원 영상인지 3차원 영상인지를 파악할 수 있다. 또한, 사용자가 별도로 영상 출력 장치(300)의 영상 출력 모드를 조절하지 않아도 영상 출력 장치(300)의 모드가 자동으로 변경될 수 있다.
도 6은 도 5의 3차원 영상 변환부(240)를 구체적으로 도시한 블록도이다. 도 6을 참조하면, 3차원 영상 변환부(240)는 백그라운드 뎁쓰맵 생성부(610), 오브젝트 뎁쓰 맵 생성부(620), 필터링부(630) 및 뎁쓰 맵 버퍼부(640)를 포함한다.
백그라운드 뎁쓰 맵 생성부(610)는 메타데이터 해석부(420)로부터 배경용 뎁쓰 정보에 포함된, 배경의 타입 정보, 배경의 좌표점 값, 좌표점 값에 대응하는 배경의 뎁쓰 값 및 패널 포지션 값을 받고, 이를 이용하여 배경에 대한 뎁쓰 맵을 생성한다. 백그라운드 뎁쓰 맵 생성부(610)는 생성된 배경에 대한 뎁쓰 맵을 필터링부(630)로 보낸다.
오브젝트 뎁쓰 맵 생성부(620)는 메타데이터 해석부(420)로부터 오브젝트용 뎁쓰 정보에 포함된, 오브젝트 식별 정보와 오브젝트 타입 정보를 받고, 이를 이용하여 오브젝트에 대한 뎁쓰 맵을 생성한다. 오브젝트의 식별 정보가 마스크에 대한 정보인 경우, 오브젝트 뎁쓰 맵 생성부(620)는 마스크 버퍼(미도시)로부터 해당 프레임에 적용할 마스크를 받고 이를 이용하여 오브젝트에 대한 뎁쓰 맵을 생성한다.
오브젝트 뎁쓰 맵 생성부(620)는 오브젝트에 대한 뎁쓰 맵을 생성하고, 오브젝트에 대한 뎁쓰 맵을 필터링부(630)로 보낸다.
필터링부(630)는 배경에 대한 뎁쓰 맵 및 오브젝트에 대한 뎁쓰 맵에 필터를 적용한다. 오브젝트에 대한 뎁쓰 맵은 화면 평면에 평행한 뎁쓰 값을 갖는다. 필터링부(630)는 화면에 평행한 뎁쓰 값을 갖는 오브젝트에 입체감을 주기 위해 오브젝트에 필터를 적용할 수 있다. 배경에 대한 뎁쓰 맵이 평면인 경우, 즉, 배경의 뎁쓰 값이 모두 패널 포지션 값인 경우에도, 배경에 입체감을 주기 위해서 필터를 적용할 수도 있다.
뎁쓰 맵 버퍼부(640)는 필터링부(630)를 거친 배경에 대한 뎁쓰 맵을 일시적으로 저장하고 있다가, 오브젝트에 대한 뎁쓰 맵이 생성되면, 배경에 대한 뎁쓰 맵에 오브젝트에 대한 뎁쓰 맵을 더하여 프레임에 대한 뎁쓰 맵을 갱신한다. 오브젝트가 복수인 경우, 뎁쓰 맵 버퍼부(640)는 복수의 오브젝트에 대한 뎁쓰 맵을 차례로 덮어 씌워 뎁쓰 맵을 갱신한다. 뎁쓰 맵 버퍼부(640)는 뎁쓰 맵이 완성되면, 완성된 뎁쓰 맵을 스테레오 렌더링부(650)로 보낸다.
스테레오 렌더링부(650)는 비디오 데이터 디코딩부(210)로부터 받은 비디오 영상과 뎁쓰 맵 버퍼부(640)로부터 받은 뎁쓰 맵을 이용하여 좌안 영상 및 우안 영 상을 생성하고 좌안 및 우안 영상을 모두 포함하는 3차원 포맷의 영상을 생성한다. 3차원 포맷으로는 탑-다운(Top and down) 포맷, 사이드-바이-사이드(Side by Side) 포맷, 그리고 인터레이스드(interlaced) 포맷 등이 있다. 스테레오 렌더링부(650)는 3차원 포맷의 영상을 영상 출력 장치(300)로 보낸다.
도 7은 본 발명의 일 실시예에 따른 디스크 관리 메타데이터 전송 방법을 수행하는 서버의 모듈 구성도이다. 도 7을 참조하면, 서버(100)는 송수신 처리 모듈(721), 디스크 관리 메타데이터 저장 모듈(743) 및 디스크 관리 메타데이터 검색 모듈(745)를 포함한다. 송수신 처리 모듈(741)은 영상 처리 장치(200)와의 통신을 처리하고, 디스크 관리 메타데이터 저장 모듈(743)은 디스크 관리 메타데이터를 비롯하여 배경용 뎁쓰 정보 메타데이터, 비디오 데이터 등을 저장하고 관리한다.
디스크 관리 메타데이터 검색 모듈(745)은 사용자로부터 전송된 디스크 식별 정보를 이용하여 사용자가 요청한 디스크 식별 정보를 가진 디스크 관리 메타데이터가 존재하는지 여부를 검색한다.
이러한 응용 모듈을 통하여 서버(100)의 전체적인 구성을 살펴보면 다음과 같다. 서버(100)는 다양한 OS(Operating System)를 시스템의 OS로서 사용할 수 있다. 이러한 OS는 API(Application Program Interface: 301)에 하이 레벨 명령어를 제공하여 각 응용 모듈(740)의 동작을 제어한다. 서버(100)는 API(701)로부터 제공되는 하이 레벨 명령어에 따라 대응하는 각 응용 모듈(740)을 식별하고, 하이 레벨 명령어를 디코딩하여 해당하는 곳으로 제공하는 하이 레벨 명령어 처리부(710)를 포함한다.
응용 모듈 제어부(720)는 하이 레벨 명령어 처리부(710)로부터 제공된 명령어에 따라 응용 모듈(740)의 동작을 제어한다. 즉, 하이 레벨 명령어 처리부(710)는 API(710)를 통하여 제공된 하이 레벨 명령어에 따라 여기에 대응하는 응용 모듈(740)이 존재하는지를 식별하고, 대응되는 응용 모듈(740)이 존재하는 경우 해당하는 응용 모듈(740)에서 인식할 수 있는 명령어로 디코딩하여 해당하는 매핑부에 전송하거나 메시지 전송을 제어한다. 따라서, 응용 모듈 제어부(720)는 송수신 처리 모듈(741)과, 디스크 관리 메타데이터 저장 모듈(743) 및 디스크 관리 메타데이터 검색 모듈(745)에 대한 매핑부(721, 725, 729)와 인터페이스부(723, 727, 731)를 각각 포함한다.
송수신 처리 모듈 매핑부(721)는 하이 레벨 명령어 처리부(710)로부터 기록 장치(100)와의 통신을 수행하기 위한 하이 레벨의 명령어를 제공받아, 송수신 처리 모듈(741)에서 처리할 수 있는 디바이스 레벨로 매핑하고, 송수신 처리 모듈 인터페이스부(723)를 통하여 송수신 처리 모듈(741)로 제공한다.
디스크 관리 메타데이터 저장 모듈 매핑부(725) 및 디스크 관리 메타데이터 저장 모듈 인터페이스부(727)는 디스크 관리 메타데이터를 저장한다. 디스크 관리 메타데이터 저장 모듈 매핑부(725)는 하이 레벨 명령어 처리부(710)로부터 디스크 관리 메타데이터 저장 모듈(743)을 이용하기 위한 하이 레벨 명령어를 제공받아 이를 디바이스 레벨의 명령어로 매핑시키고, 디스크 관리 메타데이터 저장 모듈 인터페이스부(727)를 통하여 디스크 관리 메타데이터 저장 모듈(743)로 제공한다.
디스크 관리 메타데이터 검색 모듈(745)은 사용자가 요청한 디스크 관리 메 타데이터를 검색한다. 디스크 관리 메타데이터 검색 모듈 매핑부(729)는 하이 레벨 명령어 처리부(710)를 통하여 인가된 하이 레벨 명령어를 제공받아 디스크 관리 메타데이터 검색 모듈(745)이 인식할 수 있는 디바이스 레벨의 명령어로 매핑한다. 디바이스 레벨의 명령어는 디스크 관리 메타데이터 검색 모듈 인터페이스부(731)를 통하여 디스크 관리 메타데이터 검색 모듈(745)로 제공된다.
도 8은 영상 출력 장치(300)에 의해 출력되는, 그래픽 정보가 오버레이된 영상을 도시한다.
영상 출력 장치(300)가 영상을 3차원 영상으로 출력하는 방법으로는, 영상 출력 장치(300)와 동기화된 안경을 이용하여 3차원 영상을 화면에 출력하는 방법이 있다. 이 경우, 사용자는 안경을 착용하여 3차원 영상을 시청할 수 있게 된다. 안경을 착용하지 않고 3차원 영상을 구현하는 방법으로는, 렌티큘라 렌즈(lenticular lens), barallax barrier, barallax illumination 등이 구비된 장치를 이용하여 소정의 위치(sweet spot)에서만 3차원 영상이 시청될 수 있도록 영상을 출력하는 방법에 있다. 이 경우, 사용자는 소정의 위치에서 3차원 영상을 시청할 수 있다.
도 8의 (a)와 (b)는 각 각 영상 출력 장치(300)가 3차원 영상 출력을 위해 안경을 이용하는 방법과 안경을 이용하지 않는 방법을 사용할 때, 영상 출력 장치(300)에서 출력되는 영상에 오버레이된 그래픽 영상을 도시한 도면이다.
영상 출력 장치(300)가 안경과 동기화되어 3차원 영상을 화면에 출력하는 방법을 이용하는 경우, 영상 처리 장치(200)는 안경 모양의 그래픽 정보를 생성하고 이를 영상에 오버레이하여 영상 출력 장치(300)에 보낸다. 도 8의 (a)는 영상 출력 장치(300)에 의해 출력되는 영상이 2차원인지 또는 3차원 영상인지를 표시하기 위한 그래픽 정보가 오버레이된 영상을 도시한 것이다. 도 8의 (a)의 좌측 도면에는 영상 위에 안경 모양의 그래픽 정보가 오버레이되어 있음을 알 수 있다. 이는 영상 출력 장치(300)를 통해 출력되는 영상이 3차원 영상이라는 것을 표시하기 위한 것으로, 사용자는 안경 모양의 그래픽 정보를 보고, 현재 출력되는 영상이 3차원 영상임을 인식하고, 안경을 착용하여 영상을 3차원으로 시청할 수 있다.
도 8의 (a)의 우측 도면에는 영상 위에 안경에 X자가 표시된 그래픽 정보가 오버레이되어 있음을 알 수 있다. 이는 영상 출력 장치(300)를 통해 출력되는 영상이 2차원 영상이라는 것을 표시하기 위한 것으로, 사용자는 안경에 X자가 표시된 모양의 그래픽 정보를 보고, 현재 출력되는 영상이 3차원 영상이 아닌 2차원 영상임을 인식하고, 안경 착용 없이 영상을 시청할 수 있다.
영상 출력 장치(300)가 정해진 소정 위치에서만 3차원 영상을 시청할 수 있는 방법을 이용하는 경우, 영상 처리 장치(200)는 사용자의 위치가 정해진 소정 위치에 있어야 함을 표시하는 그래픽 정보를 생성하고 이를 영상에 오버레이하여 영상 출력 장치(300)로 보낸다. 도 8의 (b)의 좌측 도면에는 사람이 서 있는 모양의 그래픽 정보가 영상에 오버레이 되어 있음을 알 수 있다. 사용자는 영상 출력 장치(300)를 통해 출력되는 영상이 3차원 영상이라는 것을 인식하고, 미리 정해진 소정 위치에서 영상을 3차원으로 시청할 수 있다. 도 8의 (b)의 우측 도면에는 영상 위에 사람이 누워 있는 모양의 그래픽 정보가 오버레이되어 있음을 알 수 있다. 이는 영상 출력 장치(300)를 통해 출력되는 영상이 2차원 영상이라는 것을 표시하기 위한 것으로, 사용자는 그래픽 정보를 이용하여 영상 출력 장치(300)를 통해 출력되는 영상이 2차원 영상이라는 것을 인식하고, 정해진 위치가 아닌 다른 위치에서도 영상을 시청할 수 있음을 인식하게 된다.
도 9는 본 발명의 일 실시 예에 따른 영상 출력 방법을 설명하기 위한 순서도이다. 도 9를 참조하면, 영상 처리 장치(200)는 비디오 데이터를 디코딩하여 2차원 영상을 생성하고, 영상 출력 장치(300)가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 장치인가를 확인한다(단계 910). 영상 출력 장치(300)가 2차원 영상만을 출력할 수 있는 경우, 영상 처리 장치(200)는 2차원 영상을 영상 출력 장치(300)로 전송한다(단계 980).
영상 출력 장치(300)가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우, 영상 처리 장치(200)는 디스크에서 디스크 고유 식별자를 추출하고 이를 서버(100)에 전송한다(단계 920). 영상 처리 장치(200)는 고유 식별자에 대응하는 디스크 관리 메타데이터를 서버(100)로부터 다운로드한다(단계 930). 영상 처리 장치(200)는 디스크 관리 메타데이터를 이용하여 디스크에 기록된 타이틀 별로, 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지를 판단한다(단계 940).
소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 영상 처리 장치(200)는 영상이 2차원임을 표시하는 그래픽 정보를 생성하고, 그래픽 정보를 2차원 영상에 오버레이하여 영상 출력 장치(300)로 전송한다(단계 990). 영상 처리 장치(200)는 소정 타이틀 전에 영상 출력 장치(300)로 전송된 타이틀 영상이 3차원 영상인 경우, 영상 출력 모드가 2차원 모드로 변경되도록 지시하는 모드 변 경 제어 신호를 생성하고 이를 영상 출력 장치(300)로 전송한다(단계 1000).
소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 영상 처리 장치(200)는 뎁쓰 맵 생성용 메타데이터를 이용하여, 2차원 영상을 3차원 영상으로 변환한다(단계 950). 영상 처리 장치(200)는 영상이 3차원 영상임을 표시하는 그래픽 정보를 생성하고, 그래픽 정보를 3차원 영상에 오버레이하여 영상 출력 장치(300)로 전송한다(단계 960). 영상 처리 장치(200)는 소정 타이틀 전에 영상 출력 장치(300)로 전송된 타이틀 영상이 2차원 영상인 경우, 영상 출력 모드가 3차원 모드로 변경되도록 지시하는 모드 변경 제어 신호를 생성하고 이를 영상 출력 장치(300)로 전송한다(단계 970).
이제까지 본 발명에 대하여 그 바람직한 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
도 1은 본 발명의 일 실시 예에 따른, 비디오 데이터에 대한 메타데이터를 도시한 도면이다.
도 2는 디스크 관리 메타데이터를 도시한 도면이다.
도 3은 도 1의 뎁쓰 맵 생성용 메타데이터에 포함된 뎁쓰 정보를 설명하기 위한 도면으로, 도 3의 (a)는 영상에 부여되는 깊이감을 설명하기 위한 도면이고, 도 3의 (b)는 화면의 측면에서 관찰할 때, 영상에 부여되는 깊이감을 설명하기 위한 도면이다.
도 4는 본 발명의 일 실시 예에 따른 영상 처리 방법 및 영상 출력 방법을 설명하기 위한 영상 처리 시스템을 나타낸 도면이다.
도 5는 도 4의 영상 출력 장치의 내부 블록도이다.
도 6은 도 5의 3차원 영상 변환부를 구체적으로 도시한 블록도이다.
도 7은 본 발명의 일 실시예에 따른 디스크 관리 메타데이터 전송 방법을 수행하는 서버의 모듈 구성도이다.
도 8은 영상 출력 장치에 의해 출력되는, 그래픽 정보가 오버레이된 영상을 도시한다.
도 9는 본 발명의 일 실시 예에 따른 영상 출력 방법을 설명하기 위한 순서도이다.

Claims (42)

  1. 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 단계; 및
    상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  2. 제1 항에 있어서, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는
    상기 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀에 포함된 프레임에 대한 뎁쓰 정보를 추출하는 단계;
    상기 뎁쓰 정보를 이용하여 뎁쓰 맵을 생성하는 단계; 및
    상기 뎁쓰 맵 및 상기 프레임을 이용하여, 상기 프레임에 대한 좌 영상 및 우 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  3. 제1 항에 있어서, 상기 디스크 관리 메타데이터에는, 뎁쓰 맵 생성용 메타데 이터 중에 상기 타이틀에 대한 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보가 포함되어 있는 것을 특징으로 하는 영상 처리 방법.
  4. 제1 항에 있어서, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는
    영상 출력 장치로부터, 상기 영상 출력 장치가 2차원 영상만을 출력할 수 있는지 또는 2차원 영상과 3차원 영상을 모두 출력할 수 있는지에 대한 정보를 수신하는 단계; 및
    상기 영상 출력 장치가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  5. 제1 항에 있어서, 상기 디스크로부터 디스크 식별자를 추출하는 단계;
    상기 디스크 식별자를 통신망을 통해 서버로 전송하는 단계; 및
    상기 서버로부터 상기 디스크 식별자에 상응하는 디스크 관리 메타데이터를 다운로드하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  6. 제1 항에 있어서, 상기 소정 타이틀의 2차원 영상이 상기 3차원 영상으로 변환되었음을 표시하는 그래픽 정보를 생성하는 단계; 및
    상기 그래픽 정보를 상기 3차원 영상에 오버레이하는 단계를 더 포함하는 것 을 특징으로 하는 영상 처리 방법.
  7. 제6 항에 있어서, 영상 출력 장치의 영상 출력 모드가 2차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계; 및
    상기 모드 변경 제어 신호를 상기 영상 출력 장치로 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  8. 제1 항에 있어서, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 상기 소정 타이틀의 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성하는 단계; 및
    상기 그래픽 정보를 상기 소정 타이틀의 2차원 영상에 오버레이하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  9. 제8 항에 있어서, 영상 출력 장치의 영상 출력 모드가 3차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계; 및
    상기 모드 변경 제어 신호를 상기 영상 출력 장치로 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  10. 제1 항에 있어서, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는
    상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀의 비디오 프레임들을 샷(shot)으로 구분하기 위한 샷 정보를 추출하는 단계; 및
    상기 샷 정보를 이용하여 상기 소정 타이틀의 비디오 프레임들 중, 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계를 포함하고, 상기 샷 정보는 이전 프레임을 이용하여 현재 프레임의 배경 구도가 예측될 수 있는 일련의 프레임들을 별개의 묶음으로 구분하기 위한 정보인 것을 특징으로 하는 영상 처리 방법.
  11. 제10 항에 있어서, 상기 뎁쓰 맵 생성용 메타데이터는 샷별로 샷에 포함되는 프레임들을 2차원 영상으로 출력할 것인지 3차원 영상으로 출력할 것인지를 나타내는 샷 타입 정보를 포함하고,
    상기 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계는 상기 소정 샷에 대한 샷 타입 정보를 이용하여, 상기 소정 샷에 포함되는 프레임들을 상기 3차원 영상으로 변환하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  12. 제10 항에 있어서, 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계는 상기 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀에 포함된 프레임에 대한 뎁쓰 정보를 추출하는 단계;
    상기 뎁쓰 정보를 이용하여 뎁쓰 맵을 생성하는 단계; 및
    상기 뎁쓰 맵 및 상기 프레임을 이용하여, 상기 프레임에 대한 좌 영상 및 우 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  13. 제10 항에 있어서, 상기 디스크 관리 메타데이터에는, 뎁쓰 맵 생성용 메타데이터 중에 상기 타이틀에 대한 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보가 포함되어 있는 것을 특징으로 하는 영상 처리 방법.
  14. 제10 항에 있어서, 상기 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계는
    상기 영상 출력 장치로부터, 상기 영상 출력 장치가 2차원 영상만을 출력할 수 있는지 또는 2차원 영상과 3차원 영상을 모두 출력할 수 있는지에 대한 정보를 수신하는 단계; 및
    상기 영상 출력 장치가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우, 상기 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법.
  15. 제10 항에 있어서, 상기 디스크로부터 디스크 식별자를 추출하는 단계;
    상기 디스크 식별자를 통신망을 통해 서버로 전송하는 단계; 및
    상기 서버로부터 상기 디스크 식별자에 상응하는 디스크 관리 메타데이터를 다운로드하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  16. 제10 항에 있어서, 상기 소정 샷에 포함되는 프레임들의 2차원 영상이 3차원 영상으로 변환되었음을 표시하는 그래픽 정보를 생성하는 단계; 및
    상기 그래픽 정보를 상기 3차원 영상에 오버레이하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  17. 제16 항에 있어서, 영상 출력 장치의 영상 출력 모드가 2차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계; 및
    상기 모드 변경 제어 신호를 상기 영상 출력 장치로 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  18. 제10 항에 있어서, 상기 소정 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 상기 소정 타이틀의 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성하는 단계; 및
    상기 그래픽 정보를 상기 소정 타이틀의 2차원 영상에 오버레이하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  19. 제18 항에 있어서, 영상 출력 장치의 영상 출력 모드가 3차원 영상 출력 모 드인 경우, 상기 영상 출력 장치의 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 단계; 및
    상기 모드 변경 제어 신호를 상기 영상 출력 장치로 전송하는 단계를 더 포함하는 것을 특징으로 하는 영상 처리 방법.
  20. 통신망을 통해 영상 처리 장치와 통신하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법에 있어서,
    상기 영상 처리 장치로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받는 단계;
    상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 단계; 및
    상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 단계를 포함하고,
    상기 디스크에 대한 디스크 관리 메타데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 것을 특징으로 하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법.
  21. 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 디스크 관리 메타데이터 처리부;
    뎁쓰 맵 생성용 메타데이터를 해석하는 뎁쓰 맵 생성용 메타데이터 해석부; 및
    상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 3차원 영상 변환부를 포함하는 것을 특징으로 하는 영상 처리 장치.
  22. 제21 항에 있어서, 상기 3차원 영상 변환부는 상기 뎁쓰 맵 생성용 메타데이터로부터 추출된 상기 소정 타이틀에 포함된 프레임에 대한 뎁쓰 정보를 이용하여 뎁쓰 맵을 생성하고, 상기 뎁쓰 맵 및 상기 프레임을 이용하여 상기 프레임에 대한 좌 영상 및 우 영상을 생성하는 것을 특징으로 하는 영상 처리 장치.
  23. 제21 항에 있어서, 상기 디스크 관리 메타데이터에는, 뎁쓰 맵 생성용 메타데이터 중에 상기 타이틀에 대한 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보가 포함되어 있는 것을 특징으로 하는 영상 처리 장치.
  24. 제21 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치로 부터, 상기 영상 출력 장치가 2차원 영상만을 출력할 수 있는지 또는 2차원 영상과 3차원 영상을 모두 출력할 수 있는지에 대한 정보를 수신하고,
    상기 3차원 영상 변환부는 상기 영상 출력 장치가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 것을 특징으로 하는 영상 처리 장치.
  25. 제21 항에 있어서, 통신망을 통해 서버와 정보를 송수신하는 통신부를 더 포함하고,
    상기 디스크 관리 메타데이터 처리부는 상기 디스크로부터 디스크 식별자를 추출하고,
    상기 통신부는 상기 디스크 식별자를 상기 서버로 전송하고, 상기 서버로부터 상기 디스크 식별자에 상응하는 디스크 관리 메타데이터를 다운로드하는 것을 특징으로 하는 영상 처리 장치.
  26. 제21 항에 있어서, 상기 소정 타이틀의 2차원 영상이 상기 3차원 영상으로 변환되었음을 표시하는 그래픽 정보를 생성하는 그래픽 정보 생성부; 및
    상기 그래픽 정보를 상기 3차원 영상에 오버레이하는 블렌더를 더 포함하는 것을 특징으로 하는 영상 처리 장치.
  27. 제26 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치의 영상 출력 모드가 2차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 것을 특징으로 하는 영상 처리 장치.
  28. 제21 항에 있어서, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 상기 소정 타이틀의 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성하는 그래픽 정보 생성부; 및
    상기 그래픽 정보를 상기 소정 타이틀의 2차원 영상에 오버레이하는 블렌더를 더 포함하는 것을 특징으로 하는 영상 처리 장치.
  29. 제28 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치의 영상 출력 모드가 3차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 것을 특징으로 하는 영상 처리 장치.
  30. 제21 항에 있어서, 상기 3차원 영상 변환부는 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터로부터 상기 소정 타이틀의 비디오 프레임들을 샷(shot)으로 구분하기 위한 샷 정보를 추출하고, 상기 샷 정보를 이용하여 상기 소정 타이틀의 비디오 프레임들 중, 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하고, 상기 샷 정보는 이전 프레임을 이용하여 현재 프레임의 배경 구도가 예측될 수 있는 일련의 프레임들을 별개의 묶음으로 구분하기 위한 정보인 것을 특징으로 하는 영상 처리 장치.
  31. 제30 항에 있어서, 상기 뎁쓰 맵 생성용 메타데이터는 샷별로 샷에 포함되는 프레임들을 2차원 영상으로 출력할 것인지 3차원 영상으로 출력할 것인지를 나타내는 샷 타입 정보를 포함하고,
    상기 3차원 영상 변환부는 상기 소정 샷에 대한 샷 타입 정보를 이용하여, 상기 소정 샷에 포함되는 프레임들을 상기 3차원 영상으로 변환하는 것을 특징으로 하는 영상 처리 장치.
  32. 제30 항에 있어서, 상기 3차원 영상 변환부는 상기 뎁쓰 맵 생성용 메타데이터로부터 추출된 상기 소정 타이틀에 포함된 프레임에 대한 뎁쓰 정보를 이용하여 뎁쓰 맵을 생성하고, 상기 뎁쓰 맵 및 상기 프레임을 이용하여, 상기 프레임에 대한 좌 영상 및 우 영상을 생성하는 것을 특징으로 하는 영상 처리 장치.
  33. 제30 항에 있어서, 상기 디스크 관리 메타데이터에는, 뎁쓰 맵 생성용 메타데이터 중에 상기 타이틀에 대한 뎁쓰 맵 생성용 메타데이터의 위치에 대한 정보가 포함되어 있는 것을 특징으로 하는 영상 처리 장치.
  34. 제30 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치로 부터, 상기 영상 출력 장치가 2차원 영상만을 출력할 수 있는지 또는 2차원 영상과 3차원 영상을 모두 출력할 수 있는지에 대한 정보를 수신하고,
    상기 3차원 영상 변환부는 상기 영상 출력 장치가 2차원 영상과 3차원 영상을 모두 출력할 수 있는 경우, 상기 소정 샷에 포함되는 프레임들을 3차원 영상으로 변환하는 것을 특징으로 하는 영상 처리 장치.
  35. 제30 항에 있어서, 통신망을 통해 서버와 정보를 송수신하는 통신부를 더 포함하고,
    상기 디스크 관리 메타데이터 처리부는 상기 디스크로부터 디스크 식별자를 추출하고,
    상기 통신부는 상기 디스크 식별자를 통신망을 통해 서버로 전송하고, 상기 서버로부터 상기 디스크 식별자에 상응하는 디스크 관리 메타데이터를 다운로드하는 것을 특징으로 하는 영상 처리 장치.
  36. 제30 항에 있어서, 상기 소정 샷에 포함되는 프레임들의 2차원 영상이 3차원 영상으로 변환되었음을 표시하는 그래픽 정보를 생성하는 그래픽 정보 생성부; 및
    상기 그래픽 정보를 상기 3차원 영상에 오버레이하는 블렌더를 더 포함하는 것을 특징으로 하는 영상 처리 장치.
  37. 제36 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치의 영상 출력 모드가 2차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 3차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 것을 특징으로 하는 영상 처리 장치.
  38. 제30 항에 있어서, 상기 소정 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하지 않는 경우, 상기 소정 타이틀의 영상이 2차원 영상임을 표시하는 그래픽 정보를 생성하는 그래픽 정보 생성부; 및
    상기 그래픽 정보를 상기 소정 타이틀의 2차원 영상에 오버레이하는 블렌더를 더 포함하는 것을 특징으로 하는 영상 처리 장치.
  39. 제38 항에 있어서, 상기 디스크 관리 메타데이터 처리부는 영상 출력 장치의 영상 출력 모드가 3차원 영상 출력 모드인 경우, 상기 영상 출력 장치의 모드가 2차원 영상 출력 모드로 변환되도록 지시하는 모드 변경 제어 신호를 생성하는 것을 특징으로 하는 영상 처리 장치.
  40. 통신망을 통해 영상 처리 장치와 통신하는 서버에 있어서,
    상기 영상 처리 장로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받고, 상기 요청에 상응하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 송수신부;
    디스크에 대한 디스크 관리 메타데이터를 저장하는 디스크 관리 메타데이터 저장부; 및
    상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 디스크 관리 메타데이터 검색부 포함하고,
    상기 디스크에 대한 디스크 관리 메타데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 것을 특징으로 하는 통신망을 통해 영상 처리 장치와 통신하는 서버.
  41. 디스크에 기록된 타이틀별로 각 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 나타내는 디스크 관리 메타데이터를 이용하여, 상기 디스크에 기록된 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부를 판단하는 단계; 및
    상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 상기 소정 타이틀에 대한 뎁쓰 맵 생성용 메타데이터를 이용하여 상기 소정 타이틀의 2차원 영상을 3차원 영상으로 변환하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법을 실행하기 위한 컴퓨터로 읽을 수 있는 기록 매체.
  42. 통신망을 통해 영상 처리 장치와 통신하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법에 있어서,
    상기 영상 처리 장치로부터 소정 디스크에 대한 디스크 관리 메타데이터를 요청받는 단계;
    상기 디스크의 디스크 식별자를 이용하여 상기 소정 디스크에 대한 디스크 관리 메타데이터를 검색하는 단계; 및
    상기 소정 디스크에 대한 디스크 관리 메타데이터를 상기 영상 처리 장치로 전송하는 단계를 포함하고,
    상기 디스크에 대한 디스크 관리 메타데이터는 상기 디스크에 기록된 타이틀별로 각 타이틀에 대해 뎁쓰 맵 생성용 메타데이터가 존재하는지 여부 및 상기 뎁쓰 맵 생성용 메타데이터가 존재하는 경우, 타이틀에 적용할 뎁쓰 맵 생성용 메타데이터의 위치를 나타내는 것을 특징으로 하는 서버에서 수행하는 디스크 관리 메타데이터 전송 방법을 실행하기 위한 컴퓨터로 읽을 수 있는 기록 매체.
KR1020080105485A 2008-06-24 2008-10-27 영상 처리 방법, 영상 출력 방법 및 그 장치 KR20100002048A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US12/564,201 US20100103168A1 (en) 2008-06-24 2009-09-22 Methods and apparatuses for processing and displaying image
PCT/KR2009/006067 WO2010050691A2 (en) 2008-10-27 2009-10-21 Methods and apparatuses for processing and displaying image
EP09823771A EP2319247A4 (en) 2008-10-27 2009-10-21 METHODS AND APPARATUS FOR PROCESSING AND DISPLAYING IMAGE

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US7518408P 2008-06-24 2008-06-24
US61/075,184 2008-06-24

Publications (1)

Publication Number Publication Date
KR20100002048A true KR20100002048A (ko) 2010-01-06

Family

ID=41812276

Family Applications (9)

Application Number Title Priority Date Filing Date
KR1020080091268A KR101539935B1 (ko) 2008-06-24 2008-09-17 3차원 비디오 영상 처리 방법 및 장치
KR1020080091269A KR20100002032A (ko) 2008-06-24 2008-09-17 영상 생성 방법, 영상 처리 방법, 및 그 장치
KR1020080092417A KR20100002033A (ko) 2008-06-24 2008-09-19 영상 데이터 출력 방법 및 장치와, 영상 데이터 디스플레이방법 및 장치
KR1020080093371A KR20100002035A (ko) 2008-06-24 2008-09-23 3차원 비디오 영상 처리 방법 및 장치
KR1020080093867A KR20100002037A (ko) 2008-06-24 2008-09-24 영상 처리 방법 및 장치
KR1020080093866A KR20100002036A (ko) 2008-06-24 2008-09-24 영상 처리 방법 및 장치
KR1020080094896A KR20100002038A (ko) 2008-06-24 2008-09-26 영상 처리 방법 및 장치
KR1020080105485A KR20100002048A (ko) 2008-06-24 2008-10-27 영상 처리 방법, 영상 출력 방법 및 그 장치
KR1020080105928A KR20100002049A (ko) 2008-06-24 2008-10-28 영상 처리 방법 및 장치

Family Applications Before (7)

Application Number Title Priority Date Filing Date
KR1020080091268A KR101539935B1 (ko) 2008-06-24 2008-09-17 3차원 비디오 영상 처리 방법 및 장치
KR1020080091269A KR20100002032A (ko) 2008-06-24 2008-09-17 영상 생성 방법, 영상 처리 방법, 및 그 장치
KR1020080092417A KR20100002033A (ko) 2008-06-24 2008-09-19 영상 데이터 출력 방법 및 장치와, 영상 데이터 디스플레이방법 및 장치
KR1020080093371A KR20100002035A (ko) 2008-06-24 2008-09-23 3차원 비디오 영상 처리 방법 및 장치
KR1020080093867A KR20100002037A (ko) 2008-06-24 2008-09-24 영상 처리 방법 및 장치
KR1020080093866A KR20100002036A (ko) 2008-06-24 2008-09-24 영상 처리 방법 및 장치
KR1020080094896A KR20100002038A (ko) 2008-06-24 2008-09-26 영상 처리 방법 및 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020080105928A KR20100002049A (ko) 2008-06-24 2008-10-28 영상 처리 방법 및 장치

Country Status (7)

Country Link
US (6) US20090315884A1 (ko)
EP (4) EP2292019A4 (ko)
JP (4) JP2011525743A (ko)
KR (9) KR101539935B1 (ko)
CN (4) CN102077600A (ko)
MY (1) MY159672A (ko)
WO (4) WO2009157668A2 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120015666A (ko) * 2010-08-12 2012-02-22 엘지전자 주식회사 입체영상 재생 장치 및 입체영상 재생 방법
KR101445777B1 (ko) * 2010-02-19 2014-11-04 삼성전자 주식회사 재생 기기 및 그 제어방법

Families Citing this family (205)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
KR101733443B1 (ko) 2008-05-20 2017-05-10 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US20100045779A1 (en) * 2008-08-20 2010-02-25 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method of providing on screen display applied thereto
JP2010062695A (ja) * 2008-09-02 2010-03-18 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2010088092A (ja) * 2008-09-02 2010-04-15 Panasonic Corp 立体映像伝送システム、映像表示装置および映像出力装置
US9264690B2 (en) * 2008-09-07 2016-02-16 Dolby Laboratories Licensing Corporation Conversion of interleaved data sets, including chroma correction and/or correction of checkerboard interleaved formatted 3D images
JP5859309B2 (ja) * 2008-11-24 2016-02-10 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． ３ｄビデオ及び補助データの組み合わせ
CA2745021C (en) * 2008-12-02 2014-10-28 Lg Electronics Inc. Method for displaying 3d caption and 3d display apparatus for implementing the same
KR20110106371A (ko) * 2008-12-19 2011-09-28 코닌클리케 필립스 일렉트로닉스 엔.브이. 3ｄ 비디오상에 3ｄ 그래픽스를 오버레이하는 방법 및 디바이스
CN102576412B (zh) 2009-01-13 2014-11-05 华为技术有限公司 图像处理以为图像中的对象进行分类的方法和系统
KR20100112940A (ko) * 2009-04-10 2010-10-20 엘지전자 주식회사 데이터 처리방법 및 수신 시스템
US9215435B2 (en) 2009-06-24 2015-12-15 Dolby Laboratories Licensing Corp. Method for embedding subtitles and/or graphic overlays in a 3D or multi-view video data
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
WO2011006104A1 (en) * 2009-07-10 2011-01-13 Dolby Laboratories Licensing Corporation Modifying images for a 3-dimensional display mode
JP2011029849A (ja) * 2009-07-23 2011-02-10 Sony Corp 受信装置、通信システム、立体画像への字幕合成方法、プログラム、及びデータ構造
RU2554465C2 (ru) * 2009-07-27 2015-06-27 Конинклейке Филипс Электроникс Н.В. Комбинирование 3d видео и вспомогательных данных
KR101056281B1 (ko) * 2009-08-03 2011-08-11 삼성모바일디스플레이주식회사 유기 전계발광 표시장치 및 그의 구동방법
KR20110013693A (ko) * 2009-08-03 2011-02-10 삼성모바일디스플레이주식회사 유기 전계발광 표시장치 및 그의 구동방법
JP5444955B2 (ja) * 2009-08-31 2014-03-19 ソニー株式会社 立体画像表示システム、視差変換装置、視差変換方法およびプログラム
US8614737B2 (en) * 2009-09-11 2013-12-24 Disney Enterprises, Inc. System and method for three-dimensional video capture workflow for dynamic rendering
US20110063298A1 (en) * 2009-09-15 2011-03-17 Samir Hulyalkar Method and system for rendering 3d graphics based on 3d display capabilities
US8988495B2 (en) * 2009-11-03 2015-03-24 Lg Eletronics Inc. Image display apparatus, method for controlling the image display apparatus, and image display system
JP2011109398A (ja) * 2009-11-17 2011-06-02 Sony Corp 画像送信方法、画像受信方法、画像送信装置、画像受信装置及び画像伝送システム
US8514491B2 (en) 2009-11-20 2013-08-20 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
JP5502436B2 (ja) * 2009-11-27 2014-05-28 パナソニック株式会社 映像信号処理装置
WO2011072016A1 (en) * 2009-12-08 2011-06-16 Broadcom Corporation Method and system for handling multiple 3-d video formats
TWI491243B (zh) * 2009-12-21 2015-07-01 Chunghwa Picture Tubes Ltd 影像處理方法
JP2011139261A (ja) * 2009-12-28 2011-07-14 Sony Corp 画像処理装置、画像処理方法、およびプログラム
EP2524510B1 (en) * 2010-01-13 2019-05-01 InterDigital Madison Patent Holdings System and method for combining 3d text with 3d content
US8687116B2 (en) * 2010-01-14 2014-04-01 Panasonic Corporation Video output device and video display system
MX2012008461A (es) * 2010-01-21 2012-08-15 Gen Instrument Corp Superposicion de graficos de video estereoscopico.
RU2568309C2 (ru) * 2010-02-09 2015-11-20 Конинклейке Филипс Электроникс Н.В. Обнаружение формата трехмерного видео
US9025933B2 (en) * 2010-02-12 2015-05-05 Sony Corporation Information processing device, information processing method, playback device, playback method, program and recording medium
JP2011166666A (ja) * 2010-02-15 2011-08-25 Sony Corp 画像処理装置、画像処理方法およびプログラム
CN102860014A (zh) * 2010-02-19 2013-01-02 汤姆森特许公司 立体徽标插入
MX2012009888A (es) * 2010-02-24 2012-09-12 Thomson Licensing Subtitulado para imagenes estereoscopicas.
KR20110098420A (ko) * 2010-02-26 2011-09-01 삼성전자주식회사 디스플레이장치 및 그 구동방법
US20110216083A1 (en) * 2010-03-03 2011-09-08 Vizio, Inc. System, method and apparatus for controlling brightness of a device
CN102783160A (zh) * 2010-03-05 2012-11-14 通用仪表公司 将用于插入的二维视频内容转换为三维视频内容的方法和设备
US9426441B2 (en) * 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
US8830300B2 (en) * 2010-03-11 2014-09-09 Dolby Laboratories Licensing Corporation Multiscalar stereo video format conversion
US8817072B2 (en) 2010-03-12 2014-08-26 Sony Corporation Disparity data transport and signaling
JP2011199388A (ja) * 2010-03-17 2011-10-06 Sony Corp 再生装置、再生制御方法、およびプログラム
JP2011217361A (ja) * 2010-03-18 2011-10-27 Panasonic Corp 立体映像再生装置、立体映像再生方法、及び集積回路
US20130010064A1 (en) * 2010-03-24 2013-01-10 Panasonic Corporation Video processing device
KR20110107151A (ko) * 2010-03-24 2011-09-30 삼성전자주식회사 휴대 단말기의 입체 영상 처리 방법 및 장치
JP5526929B2 (ja) * 2010-03-30 2014-06-18 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
CA2795269A1 (en) * 2010-04-12 2011-10-20 Fortem Solutions Inc. Camera projection meshes
CN102939748B (zh) * 2010-04-14 2015-12-16 三星电子株式会社 用于产生用于具有字幕的数字广播的广播比特流的方法和设备以及用于接收用于具有字幕的数字广播的广播比特流的方法和设备
US20110255003A1 (en) * 2010-04-16 2011-10-20 The Directv Group, Inc. Method and apparatus for presenting on-screen graphics in a frame-compatible 3d format
US9237366B2 (en) 2010-04-16 2016-01-12 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
KR101697184B1 (ko) 2010-04-20 2017-01-17 삼성전자주식회사 메쉬 생성 장치 및 그 방법, 그리고, 영상 처리 장치 및 그 방법
US9414042B2 (en) * 2010-05-05 2016-08-09 Google Technology Holdings LLC Program guide graphics and video in window for 3DTV
KR20120119927A (ko) * 2010-05-11 2012-11-01 삼성전자주식회사 무선 충전이 가능한 3ｄ 안경 및 무선전력전송 시스템
JP5848754B2 (ja) 2010-05-12 2016-01-27 ペリカン イメージング コーポレイション 撮像装置アレイおよびアレイカメラのためのアーキテクチャ
KR101082234B1 (ko) * 2010-05-13 2011-11-09 삼성모바일디스플레이주식회사 유기전계발광 표시장치 및 그의 구동방법
JP2011249895A (ja) * 2010-05-24 2011-12-08 Panasonic Corp 信号処理システム及び信号処理装置
US20110292038A1 (en) * 2010-05-27 2011-12-01 Sony Computer Entertainment America, LLC 3d video conversion
KR101699875B1 (ko) * 2010-06-03 2017-01-25 엘지디스플레이 주식회사 3ｄ 액정 표시장치 및 구동방법
US9030536B2 (en) 2010-06-04 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for presenting media content
JP5682149B2 (ja) * 2010-06-10 2015-03-11 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US8402502B2 (en) 2010-06-16 2013-03-19 At&T Intellectual Property I, L.P. Method and apparatus for presenting media content
US9053562B1 (en) 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
US9787974B2 (en) 2010-06-30 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content
US8593574B2 (en) 2010-06-30 2013-11-26 At&T Intellectual Property I, L.P. Apparatus and method for providing dimensional media content based on detected display capability
US8640182B2 (en) 2010-06-30 2014-01-28 At&T Intellectual Property I, L.P. Method for detecting a viewing apparatus
US8918831B2 (en) 2010-07-06 2014-12-23 At&T Intellectual Property I, Lp Method and apparatus for managing a presentation of media content
KR101645404B1 (ko) 2010-07-06 2016-08-04 삼성디스플레이 주식회사 유기 전계발광 표시장치
US9049426B2 (en) 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
KR101279660B1 (ko) * 2010-07-07 2013-06-27 엘지디스플레이 주식회사 입체영상 표시장치 및 그 구동방법
JP5609336B2 (ja) * 2010-07-07 2014-10-22 ソニー株式会社 画像データ送信装置、画像データ送信方法、画像データ受信装置、画像データ受信方法および画像データ送受信システム
US8848038B2 (en) * 2010-07-09 2014-09-30 Lg Electronics Inc. Method and device for converting 3D images
US9232274B2 (en) 2010-07-20 2016-01-05 At&T Intellectual Property I, L.P. Apparatus for adapting a presentation of media content to a requesting device
US9032470B2 (en) 2010-07-20 2015-05-12 At&T Intellectual Property I, Lp Apparatus for adapting a presentation of media content according to a position of a viewing apparatus
US9560406B2 (en) 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
IT1401367B1 (it) * 2010-07-28 2013-07-18 Sisvel Technology Srl Metodo per combinare immagini riferentesi ad un contenuto tridimensionale.
US8994716B2 (en) 2010-08-02 2015-03-31 At&T Intellectual Property I, Lp Apparatus and method for providing media content
WO2012017687A1 (ja) * 2010-08-05 2012-02-09 パナソニック株式会社 映像再生装置
JP2012044625A (ja) * 2010-08-23 2012-03-01 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US8438502B2 (en) 2010-08-25 2013-05-07 At&T Intellectual Property I, L.P. Apparatus for controlling three-dimensional images
KR101218815B1 (ko) * 2010-08-26 2013-01-21 주식회사 티스마트 ３ｄ 사용자 인터페이스 처리방법 및 이를 이용하는 셋탑박스
US8994792B2 (en) * 2010-08-27 2015-03-31 Broadcom Corporation Method and system for creating a 3D video from a monoscopic 2D video and corresponding depth information
JP5058316B2 (ja) * 2010-09-03 2012-10-24 株式会社東芝 電子機器、画像処理方法、及び画像処理プログラム
EP2426931A1 (en) * 2010-09-06 2012-03-07 Advanced Digital Broadcast S.A. A method and a system for determining a video frame type
CN103262544A (zh) * 2010-09-10 2013-08-21 青岛海信电器股份有限公司 3d电视界面的显示方法和装置
JP2012094111A (ja) * 2010-09-29 2012-05-17 Sony Corp 画像処理装置、画像処理方法及びプログラム
WO2012044272A1 (en) * 2010-09-29 2012-04-05 Thomson Licensing Automatically switching between three dimensional and two dimensional contents for display
CN102447959A (zh) * 2010-10-01 2012-05-09 日立民用电子株式会社 接收机
JP5543892B2 (ja) * 2010-10-01 2014-07-09 日立コンシューマエレクトロニクス株式会社 再生装置、再生方法、表示装置、及び表示方法
US8947511B2 (en) 2010-10-01 2015-02-03 At&T Intellectual Property I, L.P. Apparatus and method for presenting three-dimensional media content
TWI420151B (zh) * 2010-10-07 2013-12-21 Innolux Corp 顯示方法
KR101232086B1 (ko) * 2010-10-08 2013-02-08 엘지디스플레이 주식회사 액정표시장치 및 그의 로컬디밍 제어방법
US20120092327A1 (en) * 2010-10-14 2012-04-19 Sony Corporation Overlaying graphical assets onto viewing plane of 3d glasses per metadata accompanying 3d image
JP5550520B2 (ja) * 2010-10-20 2014-07-16 日立コンシューマエレクトロニクス株式会社 再生装置及び再生方法
KR20120047055A (ko) * 2010-11-03 2012-05-11 삼성전자주식회사 디스플레이 장치 및 이에 적용되는 그래픽 영상 제공방법
CN102469319A (zh) * 2010-11-10 2012-05-23 康佳集团股份有限公司 三维菜单生成方法及三维显示装置
JP5789960B2 (ja) * 2010-11-18 2015-10-07 セイコーエプソン株式会社 表示装置、表示装置の制御方法、及び、プログラム
JP5786315B2 (ja) * 2010-11-24 2015-09-30 セイコーエプソン株式会社 表示装置、表示装置の制御方法、及び、プログラム
CN101980545B (zh) * 2010-11-29 2012-08-01 深圳市九洲电器有限公司 一种自动检测3dtv视频节目格式的方法
CN101984671B (zh) * 2010-11-29 2013-04-17 深圳市九洲电器有限公司 一种3dtv接收系统合成视频图像和界面图形的方法
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP2012129845A (ja) * 2010-12-16 2012-07-05 Jvc Kenwood Corp 画像処理装置
JP5611807B2 (ja) * 2010-12-27 2014-10-22 Ｎｅｃパーソナルコンピュータ株式会社 映像表示装置
US8600151B2 (en) * 2011-01-03 2013-12-03 Apple Inc. Producing stereoscopic image
KR101814798B1 (ko) * 2011-01-26 2018-01-04 삼성전자주식회사 입체영상 처리 장치 및 방법
CN105554551A (zh) * 2011-03-02 2016-05-04 华为技术有限公司 3d格式描述信息的获取方法和装置
CN102157012B (zh) * 2011-03-23 2012-11-28 深圳超多维光电子有限公司 对场景进行立体渲染的方法、图形图像处理装置及设备、系统
EP2697975A1 (en) 2011-04-15 2014-02-19 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3d images independent of display size and viewing distance
KR101801141B1 (ko) * 2011-04-19 2017-11-24 엘지전자 주식회사 영상표시장치 및 그 동작방법
KR20120119173A (ko) * 2011-04-20 2012-10-30 삼성전자주식회사 3ｄ 영상처리장치 및 그 입체감 조정방법
JP2012231254A (ja) * 2011-04-25 2012-11-22 Toshiba Corp 立体映像生成装置及び立体映像生成方法
JP2014519741A (ja) 2011-05-11 2014-08-14 ペリカン イメージング コーポレイション アレイカメラ画像データを伝送および受信するためのシステムおよび方法
US8947497B2 (en) 2011-06-24 2015-02-03 At&T Intellectual Property I, Lp Apparatus and method for managing telepresence sessions
US9445046B2 (en) 2011-06-24 2016-09-13 At&T Intellectual Property I, L.P. Apparatus and method for presenting media content with telepresence
US9602766B2 (en) 2011-06-24 2017-03-21 At&T Intellectual Property I, L.P. Apparatus and method for presenting three dimensional objects with telepresence
US9030522B2 (en) 2011-06-24 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for providing media content
CN102231829B (zh) * 2011-06-27 2014-12-17 深圳超多维光电子有限公司 一种视频文件的显示格式识别方法、装置及视频播放器
US9294752B2 (en) 2011-07-13 2016-03-22 Google Technology Holdings LLC Dual mode user interface system and method for 3D video
US8587635B2 (en) 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
JP2014504468A (ja) * 2011-08-18 2014-02-20 ベイジン・ゴランド・テック・カンパニー・リミテッド 画像運動情報に基づく２ｄから３ｄへの変換方法
CN103002297A (zh) * 2011-09-16 2013-03-27 联咏科技股份有限公司 动态深度值产生方法及其装置
WO2013043761A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Determining depth from multiple views of a scene that include aliasing using hypothesized fusion
US8952996B2 (en) * 2011-09-27 2015-02-10 Delta Electronics, Inc. Image display system
KR102002165B1 (ko) 2011-09-28 2019-07-25 포토내이션 리미티드 라이트 필드 이미지 파일의 인코딩 및 디코딩을 위한 시스템 및 방법
US8813109B2 (en) 2011-10-21 2014-08-19 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality
JP5289538B2 (ja) * 2011-11-11 2013-09-11 株式会社東芝 電子機器、表示制御方法及びプログラム
CN102413350B (zh) * 2011-11-30 2014-04-16 四川长虹电器股份有限公司 蓝光3d视频处理方法
FR2983673A1 (fr) * 2011-12-02 2013-06-07 Binocle Procede de correction pour la projection alternative d'images stereoscopiques
EP2817955B1 (en) 2012-02-21 2018-04-11 FotoNation Cayman Limited Systems and methods for the manipulation of captured light field image data
US8479226B1 (en) * 2012-02-21 2013-07-02 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US8713590B2 (en) 2012-02-21 2014-04-29 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US10445398B2 (en) * 2012-03-01 2019-10-15 Sony Corporation Asset management during production of media
WO2013155215A1 (en) 2012-04-10 2013-10-17 Dirtt Environmental Solutions Inc. Tamper evident wall cladding system
US20150109411A1 (en) * 2012-04-26 2015-04-23 Electronics And Telecommunications Research Institute Image playback apparatus for 3dtv and method performed by the apparatus
EP2873028A4 (en) 2012-06-28 2016-05-25 Pelican Imaging Corp SYSTEMS AND METHOD FOR DETECTING DEFECTIVE CAMERA ARRAYS, OPTICAL ARRAYS AND SENSORS
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
EP4296963A3 (en) 2012-08-21 2024-03-27 Adeia Imaging LLC Method for depth detection in images captured using array cameras
CN104685513B (zh) 2012-08-23 2018-04-27 派力肯影像公司 根据使用阵列源捕捉的低分辨率图像的基于特征的高分辨率运动估计
KR20140039649A (ko) 2012-09-24 2014-04-02 삼성전자주식회사 다시점 영상 생성 방법 및 다시점 영상 디스플레이 장치
KR20140049834A (ko) * 2012-10-18 2014-04-28 삼성전자주식회사 방송 수신 장치 및 그 제어 방법, 사용자 단말 장치 및 그 화면 제공 방법
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US20150296198A1 (en) * 2012-11-27 2015-10-15 Intellectual Discovery Co., Ltd. Method for encoding and decoding image using depth information, and device and image system using same
KR101430985B1 (ko) * 2013-02-20 2014-09-18 주식회사 카몬 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법
WO2014130849A1 (en) 2013-02-21 2014-08-28 Pelican Imaging Corporation Generating compressed light field representation data
WO2014133974A1 (en) 2013-02-24 2014-09-04 Pelican Imaging Corporation Thin form computational and modular array cameras
WO2014138697A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for high dynamic range imaging using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
WO2014164550A2 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation System and methods for calibration of an array camera
WO2014164909A1 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation Array camera architecture implementing quantum film sensors
WO2014159779A1 (en) 2013-03-14 2014-10-02 Pelican Imaging Corporation Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
WO2014153098A1 (en) 2013-03-14 2014-09-25 Pelican Imaging Corporation Photmetric normalization in array cameras
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
CN104079941B (zh) * 2013-03-27 2017-08-25 中兴通讯股份有限公司 一种深度信息编解码方法、装置及视频处理播放设备
CN104469338B (zh) * 2013-09-25 2016-08-17 联想(北京)有限公司 一种控制方法和装置
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US10491916B2 (en) * 2013-10-01 2019-11-26 Advanced Micro Devices, Inc. Exploiting camera depth information for video encoding
CN103543953B (zh) * 2013-11-08 2017-01-04 深圳市汉普电子技术开发有限公司 播放无3d标识的3d片源的方法及触摸设备
JP2015119464A (ja) * 2013-11-12 2015-06-25 セイコーエプソン株式会社 表示装置、および表示装置の制御方法
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US9426361B2 (en) 2013-11-26 2016-08-23 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
CN104143308B (zh) 2014-07-24 2016-09-07 京东方科技集团股份有限公司 一种三维图像的显示方法及装置
US10228751B2 (en) 2014-08-06 2019-03-12 Apple Inc. Low power mode
US9647489B2 (en) 2014-08-26 2017-05-09 Apple Inc. Brownout avoidance
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US10231033B1 (en) * 2014-09-30 2019-03-12 Apple Inc. Synchronizing out-of-band content with a media stream
US10708391B1 (en) 2014-09-30 2020-07-07 Apple Inc. Delivery of apps in a media stream
CN105095895B (zh) * 2015-04-23 2018-09-25 广州广电运通金融电子股份有限公司 有价文件识别装置自修正识别方法
CN105376546A (zh) * 2015-11-09 2016-03-02 中科创达软件股份有限公司 一种2d转3d方法、装置及移动终端
CN105472374A (zh) * 2015-11-19 2016-04-06 广州华多网络科技有限公司 一种3d视频直播方法、装置及系统
US20170150138A1 (en) * 2015-11-25 2017-05-25 Atheer, Inc. Method and apparatus for selective mono/stereo visual display
US20170150137A1 (en) * 2015-11-25 2017-05-25 Atheer, Inc. Method and apparatus for selective mono/stereo visual display
CN105872519B (zh) * 2016-04-13 2018-03-27 万云数码媒体有限公司 一种基于rgb压缩的2d加深度3d图像横向存储方法
US10433025B2 (en) * 2016-05-10 2019-10-01 Jaunt Inc. Virtual reality resource scheduling of process in a cloud-based virtual reality processing system
CN106101681A (zh) * 2016-06-21 2016-11-09 青岛海信电器股份有限公司 三维图像显示处理方法、信号输入设备及电视终端
CN106982367A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 视频传输方法及其装置
US10038500B1 (en) * 2017-05-11 2018-07-31 Qualcomm Incorporated Visible light communication
US10735707B2 (en) * 2017-08-15 2020-08-04 International Business Machines Corporation Generating three-dimensional imagery
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
CN107589989A (zh) 2017-09-14 2018-01-16 晨星半导体股份有限公司 基于安卓平台的显示装置及其图像显示方法
US10817307B1 (en) 2017-12-20 2020-10-27 Apple Inc. API behavior modification based on power source health
US11363133B1 (en) 2017-12-20 2022-06-14 Apple Inc. Battery health-based power management
EP3644604A1 (en) * 2018-10-23 2020-04-29 Koninklijke Philips N.V. Image generating apparatus and method therefor
CN109257585B (zh) * 2018-10-25 2021-04-06 京东方科技集团股份有限公司 一种亮度校正装置及方法、显示装置、显示系统及方法
CN109274949A (zh) * 2018-10-30 2019-01-25 京东方科技集团股份有限公司 一种视频图像处理方法及其装置、显示设备
CN112188181B (zh) * 2019-07-02 2023-07-04 中强光电股份有限公司 图像显示设备、立体图像处理电路及其同步信号校正方法
EP3821267A4 (en) 2019-09-17 2022-04-13 Boston Polarimetrics, Inc. SURFACE MODELING SYSTEMS AND METHODS USING POLARIZATION MARKERS
CN114746717A (zh) 2019-10-07 2022-07-12 波士顿偏振测定公司 利用偏振进行表面法线感测的系统和方法
MX2022005289A (es) 2019-11-30 2022-08-08 Boston Polarimetrics Inc Sistemas y metodos para segmentacion de objetos transparentes usando se?ales de polarizacion.
KR102241615B1 (ko) * 2020-01-15 2021-04-19 한국과학기술원 비디오 웹페이지 소스코드의 메타데이터를 이용하여 비디오 제목을 식별하는 방법 및 이를 수행하는 장치들
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
JP2023511747A (ja) 2020-01-30 2023-03-22 イントリンジック イノベーション エルエルシー 偏光画像を含む異なる撮像モダリティで統計モデルを訓練するためのデータを合成するためのシステムおよび方法
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
CN112004162B (zh) * 2020-09-08 2022-06-21 宁波视睿迪光电有限公司 一种在线3d内容播放系统及方法
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
US11770513B1 (en) * 2022-07-13 2023-09-26 Rovi Guides, Inc. Systems and methods for reducing a number of focal planes used to display three-dimensional objects

Family Cites Families (123)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4523226A (en) * 1982-01-27 1985-06-11 Stereographics Corporation Stereoscopic television system
US4667228A (en) * 1983-10-14 1987-05-19 Canon Kabushiki Kaisha Image signal processing apparatus
JPS63116593A (ja) * 1986-11-04 1988-05-20 Matsushita Electric Ind Co Ltd 立体画像再生装置
US5262879A (en) * 1988-07-18 1993-11-16 Dimensional Arts. Inc. Holographic image conversion method for making a controlled holographic grating
US5058992A (en) * 1988-09-07 1991-10-22 Toppan Printing Co., Ltd. Method for producing a display with a diffraction grating pattern and a display produced by the method
JP2508387B2 (ja) * 1989-10-16 1996-06-19 凸版印刷株式会社 回折格子パタ―ンを有するディスプレイの作製方法
US5291317A (en) * 1990-07-12 1994-03-01 Applied Holographics Corporation Holographic diffraction grating patterns and methods for creating the same
JP3081675B2 (ja) * 1991-07-24 2000-08-28 オリンパス光学工業株式会社 画像記録装置および画像再生装置
US5740274A (en) * 1991-09-12 1998-04-14 Fuji Photo Film Co., Ltd. Method for recognizing object images and learning method for neural networks
US6011581A (en) * 1992-11-16 2000-01-04 Reveo, Inc. Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments
US6084978A (en) * 1993-12-16 2000-07-04 Eastman Kodak Company Hierarchical storage and display of digital images used in constructing three-dimensional image hard copy
KR100358021B1 (ko) * 1994-02-01 2003-01-24 산요 덴키 가부시키가이샤 2차원영상을3차원영상으로변환시키는방법및입체영상표시시스템
US5739844A (en) * 1994-02-04 1998-04-14 Sanyo Electric Co. Ltd. Method of converting two-dimensional image into three-dimensional image
US5684890A (en) * 1994-02-28 1997-11-04 Nec Corporation Three-dimensional reference image segmenting method and apparatus
US6104828A (en) * 1994-03-24 2000-08-15 Kabushiki Kaisha Topcon Ophthalmologic image processor
JP2846840B2 (ja) * 1994-07-14 1999-01-13 三洋電機株式会社 ２次元映像から３次元映像を生成する方法
EP0703716B1 (en) * 1994-09-22 2002-11-27 Sanyo Electric Co. Ltd Method of converting two-dimensional images into three-dimensional images
US6985168B2 (en) * 1994-11-14 2006-01-10 Reveo, Inc. Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments
JPH09116931A (ja) * 1995-10-18 1997-05-02 Sanyo Electric Co Ltd 時分割立体映像信号の左右映像識別方法
US5917940A (en) * 1996-01-23 1999-06-29 Nec Corporation Three dimensional reference image segmenting method and device and object discrimination system
JPH09322199A (ja) * 1996-05-29 1997-12-12 Olympus Optical Co Ltd 立体映像ディスプレイ装置
US5986781A (en) * 1996-10-28 1999-11-16 Pacific Holographics, Inc. Apparatus and method for generating diffractive element using liquid crystal display
JPH10224822A (ja) * 1997-01-31 1998-08-21 Sony Corp 映像表示方法および表示装置
JPH10313417A (ja) * 1997-03-12 1998-11-24 Seiko Epson Corp デジタルガンマ補正回路並びにそれを用いた液晶表示装置及び電子機器
DE19806547C2 (de) * 1997-04-30 2001-01-25 Hewlett Packard Co System und Verfahren zur Erzeugung von stereoskopischen Anzeigesignalen von einer Einzelcomputergraphikpipeline
JPH11113028A (ja) * 1997-09-30 1999-04-23 Toshiba Corp ３次元映像表示装置
CN1173296C (zh) * 1997-12-05 2004-10-27 动力数字深度研究有限公司 改进的图像转换和编码技术
US6850631B1 (en) * 1998-02-20 2005-02-01 Oki Electric Industry Co., Ltd. Photographing device, iris input device and iris image input method
JP4149037B2 (ja) * 1998-06-04 2008-09-10 オリンパス株式会社 映像システム
US6704042B2 (en) * 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
JP2000298246A (ja) * 1999-02-12 2000-10-24 Canon Inc 表示装置、表示方法および記憶媒体
JP2000275575A (ja) * 1999-03-24 2000-10-06 Sharp Corp 立体映像表示装置
KR100334722B1 (ko) * 1999-06-05 2002-05-04 강호석 Ｍｐｅｇ 데이터를 이용한 입체영상생성방법 및 그 장치
JP2001012946A (ja) * 1999-06-30 2001-01-19 Toshiba Corp 動画像処理装置及び方法
US6839663B1 (en) * 1999-09-30 2005-01-04 Texas Tech University Haptic rendering of volumetric soft-bodies objects
CA2394352C (en) * 1999-12-14 2008-07-15 Scientific-Atlanta, Inc. System and method for adaptive decoding of a video signal with coordinated resource allocation
US6968568B1 (en) * 1999-12-20 2005-11-22 International Business Machines Corporation Methods and apparatus of disseminating broadcast information to a handheld device
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
KR100865464B1 (ko) * 2000-04-04 2008-10-28 소니 가부시끼 가이샤 입체 화상 작성 방법 및 그 장치
JP2001320693A (ja) * 2000-05-12 2001-11-16 Sony Corp サービス提供装置および方法、受信端末装置および方法、サービス提供システム
AU2001266862A1 (en) * 2000-06-12 2001-12-24 Vrex, Inc. Electronic stereoscopic media delivery system
JP3667620B2 (ja) * 2000-10-16 2005-07-06 株式会社アイ・オー・データ機器 ステレオ画像撮影アダプタ、ステレオ画像撮影用カメラ、および、ステレオ画像処理装置
US6762755B2 (en) * 2000-10-16 2004-07-13 Pixel Science, Inc. Method and apparatus for creating and displaying interactive three dimensional computer images
GB0100563D0 (en) * 2001-01-09 2001-02-21 Pace Micro Tech Plc Dynamic adjustment of on-screen displays to cope with different widescreen signalling types
US6678323B2 (en) * 2001-01-24 2004-01-13 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry Through Communications Research Centre Bandwidth reduction for stereoscopic imagery and video signals
KR20020096203A (ko) * 2001-06-18 2002-12-31 (주)디지털국영 입체영상을 확대/축소하는 방법
JP2003157292A (ja) * 2001-11-20 2003-05-30 Nec Corp 製品レイアウト管理方式および管理方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
GB0129992D0 (en) * 2001-12-14 2002-02-06 Ocuity Ltd Control of optical switching apparatus
US20040218269A1 (en) * 2002-01-14 2004-11-04 Divelbiss Adam W. General purpose stereoscopic 3D format conversion system and method
US7319720B2 (en) * 2002-01-28 2008-01-15 Microsoft Corporation Stereoscopic video
JP2003284099A (ja) * 2002-03-22 2003-10-03 Olympus Optical Co Ltd 映像情報信号記録媒体及び映像表示装置
US6771274B2 (en) * 2002-03-27 2004-08-03 Sony Corporation Graphics and video integration with alpha and video blending
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
JP4652389B2 (ja) * 2002-04-12 2011-03-16 三菱電機株式会社 メタデータ処理方法
EP2202979A1 (en) * 2002-04-12 2010-06-30 Mitsubishi Denki Kabushiki Kaisha Hint information describing method for manipulating metadata
WO2003092303A1 (en) * 2002-04-25 2003-11-06 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
JP4154569B2 (ja) * 2002-07-10 2008-09-24 日本電気株式会社 画像圧縮伸長装置
EP1529400A4 (en) * 2002-07-16 2009-09-23 Korea Electronics Telecomm DEVICE AND METHOD FOR ADAPTING A TWO-DIMENSIONAL AND THREE-DIMENSIONAL STEREOSCOPIC VIDEO SIGNAL
KR100488804B1 (ko) * 2002-10-07 2005-05-12 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법
JP2004186863A (ja) * 2002-12-02 2004-07-02 Amita Technology Kk 立体映像表示装置及び立体映像信号処理回路
JP4183499B2 (ja) * 2002-12-16 2008-11-19 三洋電機株式会社 映像ファイル処理方法及び映像処理方法
JP2004246066A (ja) * 2003-02-13 2004-09-02 Fujitsu Ltd 仮想環境作成方法
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
JP4677175B2 (ja) * 2003-03-24 2011-04-27 シャープ株式会社 画像処理装置、画像撮像システム、画像表示システム、画像撮像表示システム、画像処理プログラム、及び画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2004309868A (ja) * 2003-04-08 2004-11-04 Sony Corp 撮像装置及び立体映像生成装置
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Ｍｐｅｇ-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
WO2004093467A1 (ja) * 2003-04-17 2004-10-28 Sharp Kabushiki Kaisha ３次元画像作成装置、３次元画像再生装置、３次元画像処理装置、３次元画像処理プログラムおよびそのプログラムを記録した記録媒体
JP2004357156A (ja) * 2003-05-30 2004-12-16 Sharp Corp 映像受信装置および映像再生装置
JP2005026800A (ja) * 2003-06-30 2005-01-27 Konica Minolta Photo Imaging Inc 画像処理方法、撮像装置、画像処理装置及び画像記録装置
ITRM20030345A1 (it) * 2003-07-15 2005-01-16 St Microelectronics Srl Metodo per ricavare una mappa di profondita'
US7411611B2 (en) * 2003-08-25 2008-08-12 Barco N. V. Device and method for performing multiple view imaging by means of a plurality of video processing devices
EP1510940A1 (en) * 2003-08-29 2005-03-02 Sap Ag A method of providing a visualisation graph on a computer and a computer for providing a visualisation graph
US7613344B2 (en) * 2003-12-08 2009-11-03 Electronics And Telecommunications Research Institute System and method for encoding and decoding an image using bitstream map and recording medium thereof
JP2005175997A (ja) * 2003-12-12 2005-06-30 Sony Corp 復号化装置、電子機器、コンピュータ、復号化方法、プログラム及び記録媒体
KR100544677B1 (ko) * 2003-12-26 2006-01-23 한국전자통신연구원 다시점 영상 및 깊이 정보를 이용한 3차원 객체 추적 장치및 그 방법
JP3746506B2 (ja) * 2004-03-08 2006-02-15 一成 江良 立体視化パラメータ埋込装置及び立体視画像再生装置
JP4230959B2 (ja) * 2004-05-19 2009-02-25 株式会社東芝 メディアデータ再生装置、メディアデータ再生システム、メディアデータ再生プログラムおよび遠隔操作プログラム
JP4227076B2 (ja) * 2004-05-24 2009-02-18 株式会社東芝 立体画像を表示する表示装置及び立体画像を表示する表示方法
KR100543219B1 (ko) * 2004-05-24 2006-01-20 한국과학기술연구원 2차원 이미지에서의 햅틱 벡터 필드 생성방법 및 3차원높이 정보 추출방법
KR100708838B1 (ko) 2004-06-30 2007-04-17 삼성에스디아이 주식회사 입체 영상 표시 장치 및 그 구동 방법
JP2006041811A (ja) * 2004-07-26 2006-02-09 Kddi Corp 自由視点画像ストリーミング方式
KR20040077596A (ko) * 2004-07-28 2004-09-04 손귀연 평판 표시패널을 이용한 입체 영상표시장치
US7843402B2 (en) * 2004-09-08 2010-11-30 Nippon Telegraph And Telephone Corporation 3D displaying method, device and program
KR100694069B1 (ko) * 2004-11-29 2007-03-12 삼성전자주식회사 상이한 크기를 가지는 복수 개의 데이터 블록들을포함하는 저장 장치 및 이를 이용한 파일 관리 방법 및이를 포함하는 인쇄 장치
KR100656575B1 (ko) 2004-12-31 2006-12-11 광운대학교 산학협력단 3차원 입체 동영상 디스플레이 장치
TWI261099B (en) * 2005-02-17 2006-09-01 Au Optronics Corp Backlight modules
KR20060122672A (ko) * 2005-05-26 2006-11-30 삼성전자주식회사 메타 데이터를 획득하기 위한 애플리케이션을 포함하는정보저장매체, 메타 데이터를 획득하는 장치 및 방법
KR100828358B1 (ko) * 2005-06-14 2008-05-08 삼성전자주식회사 영상 디스플레이 모드 전환 방법, 장치, 및 그 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
US7404645B2 (en) * 2005-06-20 2008-07-29 Digital Display Innovations, Llc Image and light source modulation for a digital display system
KR100813977B1 (ko) * 2005-07-08 2008-03-14 삼성전자주식회사 2차원/3차원 영상 호환용 고해상도 입체 영상 디스플레이장치
US8384763B2 (en) * 2005-07-26 2013-02-26 Her Majesty the Queen in right of Canada as represented by the Minster of Industry, Through the Communications Research Centre Canada Generating a depth map from a two-dimensional source image for stereoscopic and multiview imaging
JP4717728B2 (ja) * 2005-08-29 2011-07-06 キヤノン株式会社 ステレオ表示装置及びその制御方法
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
EP1946563A2 (en) * 2005-10-19 2008-07-23 Thomson Licensing Multi-view video coding using scalable video coding
KR100739764B1 (ko) * 2005-11-28 2007-07-13 삼성전자주식회사 입체 영상 신호 처리 장치 및 방법
KR100793750B1 (ko) * 2006-02-14 2008-01-10 엘지전자 주식회사 다양한 셋팅 정보를 저장하는 영상기기 및 그 제어방법
KR100780701B1 (ko) 2006-03-28 2007-11-30 (주)오픈브이알 3차원 이미지 자동 생성장치 및 방법
KR20070098364A (ko) * 2006-03-31 2007-10-05 (주)엔브이엘소프트 3차원 영상 데이터를 코드화하여 저장하는 장치 및 방법
JP2007304325A (ja) * 2006-05-11 2007-11-22 Ｎｅｃディスプレイソリューションズ株式会社 液晶表示装置および液晶パネル駆動方法
KR101137347B1 (ko) * 2006-05-11 2012-04-19 엘지전자 주식회사 이동통신 단말기 및 그 단말기를 이용한 이미지 표출 방법
US7953315B2 (en) * 2006-05-22 2011-05-31 Broadcom Corporation Adaptive video processing circuitry and player using sub-frame metadata
US20070294737A1 (en) * 2006-06-16 2007-12-20 Sbc Knowledge Ventures, L.P. Internet Protocol Television (IPTV) stream management within a home viewing network
EP2160037A3 (en) * 2006-06-23 2010-11-17 Imax Corporation Methods and systems for converting 2D motion pictures for stereoscopic 3D exhibition
KR100761022B1 (ko) * 2006-08-14 2007-09-21 광주과학기술원 깊이 영상 기반의 햅틱 렌더링 방법과 장치, 및 이를이용한 촉각 방송 시스템
KR100716142B1 (ko) * 2006-09-04 2007-05-11 주식회사 이시티 스테레오스코픽 영상 데이터의 전송 방법
EP1901474B1 (en) 2006-09-13 2011-11-30 Stmicroelectronics Sa System for synchronizing modules in an integrated circuit in mesochronous clock domains
CN101523924B (zh) * 2006-09-28 2011-07-06 皇家飞利浦电子股份有限公司 3d菜单显示
JP2010510558A (ja) * 2006-10-11 2010-04-02 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 三次元グラフィックスのデータの作成
JP4755565B2 (ja) * 2006-10-17 2011-08-24 シャープ株式会社 立体画像処理装置
KR101362941B1 (ko) * 2006-11-01 2014-02-17 한국전자통신연구원 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치
TWI324477B (en) * 2006-11-03 2010-05-01 Quanta Comp Inc Stereoscopic image format transformation method applied to display system
JP5008677B2 (ja) * 2006-11-29 2012-08-22 パナソニック株式会社 映像音声装置ネットワークおよび信号再生方法
KR100786468B1 (ko) * 2007-01-02 2007-12-17 삼성에스디아이 주식회사 2차원 및 3차원 영상 선택 가능 디스플레이 장치
US8488868B2 (en) * 2007-04-03 2013-07-16 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Generation of a depth map from a monoscopic color image for rendering stereoscopic still and video images
US8213711B2 (en) * 2007-04-03 2012-07-03 Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Method and graphical user interface for modifying depth maps
JP4564512B2 (ja) 2007-04-16 2010-10-20 富士通株式会社 表示装置、表示プログラム、および表示方法
KR100839429B1 (ko) * 2007-04-17 2008-06-19 삼성에스디아이 주식회사 전자 영상 기기 및 그 구동방법
WO2008140190A1 (en) * 2007-05-14 2008-11-20 Samsung Electronics Co, . Ltd. Method and apparatus for encoding and decoding multi-view image
JP4462288B2 (ja) * 2007-05-16 2010-05-12 株式会社日立製作所 映像表示装置及びそれを適用した３次元映像表示装置
CN101897193A (zh) * 2007-10-10 2010-11-24 韩国电子通信研究院 用于存储和播放立体数据的元数据结构、以及用于使用该元数据来存储立体内容文件的方法
WO2009157707A2 (en) * 2008-06-24 2009-12-30 Samsung Electronics Co,. Ltd. Image processing method and apparatus
WO2010048632A1 (en) * 2008-10-24 2010-04-29 Real D Stereoscopic image format with depth information

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101445777B1 (ko) * 2010-02-19 2014-11-04 삼성전자 주식회사 재생 기기 및 그 제어방법
KR20120015666A (ko) * 2010-08-12 2012-02-22 엘지전자 주식회사 입체영상 재생 장치 및 입체영상 재생 방법

Also Published As

Publication number Publication date
WO2009157668A3 (en) 2010-03-25
KR20100002031A (ko) 2010-01-06
EP2292019A2 (en) 2011-03-09
EP2289247A4 (en) 2014-05-28
WO2009157714A2 (en) 2009-12-30
EP2279625A2 (en) 2011-02-02
US20090317061A1 (en) 2009-12-24
CN102067613B (zh) 2016-04-13
CN102067614A (zh) 2011-05-18
US20090315884A1 (en) 2009-12-24
WO2009157668A2 (en) 2009-12-30
KR20100002049A (ko) 2010-01-06
EP2292019A4 (en) 2014-04-30
CN102067614B (zh) 2014-06-11
WO2009157708A2 (en) 2009-12-30
WO2009157708A3 (en) 2010-04-15
KR20100002032A (ko) 2010-01-06
EP2289247A2 (en) 2011-03-02
KR101539935B1 (ko) 2015-07-28
EP2289248A4 (en) 2014-07-02
JP2011525746A (ja) 2011-09-22
US20100104219A1 (en) 2010-04-29
WO2009157701A2 (en) 2009-12-30
WO2009157701A3 (en) 2010-04-15
KR20100002033A (ko) 2010-01-06
JP2011525745A (ja) 2011-09-22
CN102067615A (zh) 2011-05-18
EP2279625A4 (en) 2013-07-03
KR20100002035A (ko) 2010-01-06
KR20100002036A (ko) 2010-01-06
US20090315977A1 (en) 2009-12-24
JP2011525743A (ja) 2011-09-22
EP2289248A2 (en) 2011-03-02
US20100103168A1 (en) 2010-04-29
KR20100002037A (ko) 2010-01-06
CN102067615B (zh) 2015-02-25
US20090315979A1 (en) 2009-12-24
US8488869B2 (en) 2013-07-16
KR20100002038A (ko) 2010-01-06
WO2009157714A3 (en) 2010-03-25
CN102067613A (zh) 2011-05-18
CN102077600A (zh) 2011-05-25
JP5547725B2 (ja) 2014-07-16
MY159672A (en) 2017-01-13
JP2011526103A (ja) 2011-09-29

Similar Documents

Publication Publication Date Title
KR20100002048A (ko) 영상 처리 방법, 영상 출력 방법 및 그 장치
US10158841B2 (en) Method and device for overlaying 3D graphics over 3D video
EP2430839B1 (en) Receiving system and method of providing 3d image
JP4755565B2 (ja) 立体画像処理装置
EP2371139B1 (en) Image processing method and apparatus therefor
JP5809064B2 (ja) ３ｄ画像データの転送
US9035942B2 (en) Graphic image processing method and apparatus
EP2242262A2 (en) Data structure, recording medium, playback apparatus and method, and program
KR20100046584A (ko) 영상 디코딩 방법, 영상 출력 방법, 영상 처리 방법 및 그 장치
KR20110129903A (ko) ３ｄ 시청자 메타데이터의 전송
US20090315981A1 (en) Image processing method and apparatus
KR20110113186A (ko) 비디오 인터페이스를 통해 송신하고 ３ｄ 비디오 및 ３ｄ 오버레이들을 합성하기 위한 방법 및 시스템
EP2400766A2 (en) Method and apparatus for processing video image
US20110164118A1 (en) Display apparatuses synchronized by one synchronization signal
KR20120023268A (ko) 디스플레이 장치 및 그 영상 생성 방법
KR20120004203A (ko) 디스플레이 방법 및 장치
US20110134226A1 (en) 3d image display apparatus and method for determining 3d image thereof
WO2010050691A2 (en) Methods and apparatuses for processing and displaying image
US20110310222A1 (en) Image distributing apparatus, display apparatus, and image distributing method thereof
JP5496802B2 (ja) 画像表示装置、制御方法、プログラム、及び、記録媒体
KR101620969B1 (ko) 디스플레이 장치 및 이에 적용되는 3ｄ 영상 미리보기 제공 방법, 그리고 3ｄ 영상 제공 시스템
KR20110057950A (ko) 디스플레이 장치 및 이에 적용되는 3ｄ 영상 변환 방법, 그리고 3ｄ 영상 제공 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application