CN102067615A - 图像产生方法和设备以及图像处理方法和设备 - Google Patents

图像产生方法和设备以及图像处理方法和设备 Download PDF

Info

Publication number
CN102067615A
CN102067615A CN2009801236396A CN200980123639A CN102067615A CN 102067615 A CN102067615 A CN 102067615A CN 2009801236396 A CN2009801236396 A CN 2009801236396A CN 200980123639 A CN200980123639 A CN 200980123639A CN 102067615 A CN102067615 A CN 102067615A
Authority
CN
China
Prior art keywords
video data
information
frame
divided
metadata
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009801236396A
Other languages
English (en)
Other versions
CN102067615B (zh
Inventor
郑吉洙
郑铉权
李大钟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN102067615A publication Critical patent/CN102067615A/zh
Application granted granted Critical
Publication of CN102067615B publication Critical patent/CN102067615B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • G06T5/92Dynamic range modification of images or parts thereof based on global image properties
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/111Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/122Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/133Equalising the characteristics of different image components, e.g. their average brightness or colour balance
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/139Format conversion, e.g. of frame-rate or size
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/158Switching image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/161Encoding, multiplexing or demultiplexing different image signal components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/178Metadata, e.g. disparity information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/172Processing image signals image signals comprising non-image signal components, e.g. headers or format information
    • H04N13/183On-screen display [OSD] information, e.g. subtitles or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189Recording image signals; Reproducing recorded image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/261Image signal generators with monoscopic-to-stereoscopic image conversion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/339Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spatial multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • H04N13/341Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/356Image reproducers having separate monoscopic and stereoscopic modes
    • H04N13/359Switching between monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106Processing image signals
    • H04N13/156Mixing image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/286Image signal generators having separate monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/005Aspects relating to the "3D+depth" image format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Processing (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

一种图像处理方法和设备以及图像产生方法和设备,用于将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法包括:从与视频数据关联的元数据中提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像。

Description

图像产生方法和设备以及图像处理方法和设备
技术领域
本发明的各方面总体涉及一种图像产生方法和设备以及一种图像处理方法和设备,更具体地,涉及这样一种图像产生方法和设备以及一种图像处理方法和设备,其中,通过使用与视频数据关联的元数据,图像数据被输出为二维(2D)图像或三维(3D)图像。
背景技术
随着数字技术的发展,三维(3D)图像技术已经广泛运用。3D图像技术通过将深度信息添加到二维(2D)图像来表现更真实的图像。3D图像技术可被划分为产生作为3D图像的视频数据的技术和将产生为2D图像的视频数据转换为3D图像的技术。已经同时研究这两种技术。
发明内容
技术问题
本发明的各方面提供一种通过使用与视频数据关联的元数据将视频数据输出为二维图像或三维图像的图像处理方法和设备。
有益效果
以这种方式,根据本发明的各方面,通过使用包括在元数据中的镜头(shot)信息,视频数据可在镜头改变点被输出为2D图像。此外,根据本发明的实施例,为每个镜头确定是将视频数据输出为2D图像还是3D图像并根据确定的结果输出视频数据,从而减少由于将全部视频数据转换为3D图像而可能增加的计算量。
附图说明
图1是根据本发明实施例的图像产生设备的框图;
图2示出由图1中示出的图像产生设备产生的元数据;
图3A到图3C是解释通过使用背景深度信息而产生的深度图的示图;
图4是根据本发明实施例的图像处理设备的框图;
图5是根据本发明另一实施例的图像处理设备的框图;
图6是示出根据本发明实施例的图像处理方法的流程图;
图7是详细示出图6中示出的视频数据被输出为二维(2D)图像或三维(3D)图像的操作的流程图。
具体实施方式
最佳模式
根据本发明的一方面,提供了一种将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法,所述图像处理方法包括:从与视频数据关联的元数据提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像,其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,用于将视频数据的帧划分为预定单元的信息可以是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息。
根据本发明的一方面,元数据可包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的帧将被输出为2D图像还是3D图像,输出视频数据的步骤可包括:通过使用镜头类型信息将被划分为该镜头的帧输出为2D图像或3D图像。
根据本发明的一方面,输出视频数据的步骤可包括:通过使用元数据,确定是否不能通过使用在当前帧之前的先前帧预测当前帧的背景构成因而将当前帧划分为新的镜头,在当前帧被划分为新的镜头时,将当前帧输出为2D图像;将被划分为新的镜头的帧的其余帧转换为3D图像并输出转换的3D图像。
根据本发明的一方面,输出视频数据的步骤可包括:通过使用元数据,确定是否不能通过使用在当前帧之前的先前帧预测当前帧的背景构成因而将当前帧划分为新的镜头;在当前帧被划分为新的镜头时,从元数据中提取应用于被划分为新的镜头的当前帧的背景深度信息;通过使用背景深度信息产生当前帧的深度图。
根据本发明的一方面,产生当前帧的深度图的步骤可包括:通过使用当前帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值产生当前帧的背景的深度图,其中,背景深度信息包括坐标点值、深度值和面板位置值。
根据本发明的一方面,图像处理方法还可包括:从记录有视频数据的盘读取元数据或通过通信网络从服务器下载元数据。
根据本发明的一方面,元数据可包括用于标识视频数据的标识信息,所述标识信息可包括盘标识符(ID)和标题ID,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于指示记录在由盘ID标识的盘中记录的多个标题中包括视频数据的标题。
根据本发明的另一方面,提供了一种图像产生方法,包括:接收作为二维(2D)图像的视频数据;产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括在被划分为该镜头的帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的帧中最后被输出的帧的输出时刻信息,和/或可包括指示被划分为该镜头的帧将被输出为2D图像还是三维(3D)图像的镜头类型信息。
根据本发明的一方面,元数据可包括被划分为预定镜头的帧的背景深度信息,背景深度信息可包括:被划分为预定镜头的帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值。
根据本发明的另一方面,提供了一种将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理设备,所述图像处理设备包括:元数据分析单元,通过使用与视频数据关联的元数据确定视频数据将被输出为2D图像还是3D图像;3D图像转换单元,当视频数据将被输出为3D图像时,将视频数据转换为3D图像;输出单元,将视频数据输出为2D图像或3D图像,其中,元数据包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,用于将视频数据的帧划分为预定单元的信息可以是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括:在被划分为该镜头的帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的帧中最后被输出的帧的输出时刻信息。
根据本发明的一方面,元数据可包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的帧将被输出为2D图像还是3D图像。
根据本发明的一方面,元数据可包括被划分为预定镜头的帧的背景深度信息,背景深度信息可包括:被划分为预定镜头的帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值。
根据本发明的另一方面,提供了一种图像产生设备,包括:视频数据编码单元,对作为二维(2D)图像的视频数据进行编码;元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息;元数据编码单元,对元数据进行编码,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种计算机可读信息存储介质,包括作为二维(2D)图像的视频数据和与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种其上记录有图像处理方法的程序的计算机可读信息存储介质,所述图像处理方法用于执行将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像,所述图像处理方法包括:从与视频数据关联的元数据中提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像,其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,提供了一种将视频数据输出为二维(2D)图像或三维(3D)图像的系统,所述系统包括:图像产生设备和图像处理设备。所述图像产生设备包括:视频数据编码单元,对作为二维(2D)图像的视频数据进行编码;元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为3D图像的信息。所述图像处理设备包括:元数据分析单元,通过使用包含在接收的与视频数据关联的元数据中的用于对视频数据的帧划分的信息来确定视频数据将被输出为2D图像还是3D图像;3D图像转换单元,当元数据分析单元确定视频数据将被输出为3D图像时,将视频数据转换为3D图像;输出单元,根据元数据分析单元的确定将视频数据输出为2D图像或3D图像,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种计算机可读信息存储介质,包括:与包括二维(2D)帧的视频数据关联的元数据,所述元数据包括由图像处理设备用于将视频数据的帧划分为预定单元的信息以及由图像处理设备用于确定每个划分的帧是否将被图像处理设备转换为三维(3D)图像的信息,其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种用于将具有二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法,所述图像处理方法包括:由图像处理设备确定与视频数据关联的元数据是否存在于包含所述视频数据的盘上;如果确定元数据存在于盘上,则由图像处理设备从盘中读取元数据;如果确定元数据不存在于盘上,则由图像处理设备从服务器检索元数据;由图像处理设备根据元数据选择性地将视频数据输出为2D图像或3D图像。
本发明的其他方面和/或优点将在以下说明中部分地阐述,通过说明部分地将是清楚的,或者可通过本发明的实践而得知。
发明模式
本申请要求于2008年6月24日提交到美国专利商标局的第61/075,184号美国临时申请的权益以及于2008年9月17日提交到韩国知识产权局的第10-2008-0091269号韩国专利申请的权益,其公开全部合并于此以资参考。
现在将详细地参照本发明的现有实施例,其示例在附图中示出,其中,相同的标号始终表示相同的元件。下面描述实施例以便通过参照附图解释本方发明。
图1是根据本发明实施例的图像产生设备100的框图。参照图1,图像产生设备100包括视频数据产生单元110、视频数据编码单元120、元数据产生单元130、元数据编码单元140和复用单元150。视频数据产生单元110产生视频数据并将产生的视频数据输出到视频数据编码单元120。视频数据编码单元120对输入的视频数据进行编码并将编码的视频数据(OUT1)输出到复用单元150,和/或通过通信网络将编码的视频数据(OUT1)输出到图像处理设备(未示出),但是应理解,视频数据编码单元120可通过任意的有线和/或无线连接(例如,IEEE1394、通用串行总线、蓝牙、红外等)将编码的视频数据输出到图像处理设备。图像产生设备100可以是计算机、工作站、相机装置、移动装置、独立装置等。此外,尽管不要求,单元110、120、130、140和150中的每一个可以是一个或多个芯片或集成电路上的一个或多个处理器或者处理元件。
元数据产生单元130分析由视频数据产生单元110产生的视频数据以产生包括与视频数据的帧有关的信息的元数据。元数据包括用于将产生的视频数据从二维(2D)图像转换为三维(3D)图像的信息。元数据还包括用于将视频数据的帧划分为预定单元的信息。将参照图2更详细地描述由元数据产生单元130产生的元数据。元数据产生单元130将产生的元数据输出到元数据编码单元140。
元数据编码单元140对输入的元数据进行编码并将编码的元数据(OUT3)输出到复用单元150和/或图像处理设备。复用单元150将编码的视频数据(OUT1)与编码的元数据(OUT3)进行复用,并通过如上所述的有线和/或无线通信网络或任意的有线和/或无线连接将复用结果(OUT2)发送到图像处理设备。元数据编码单元140除了将编码的元数据(OUT3)和编码的视频数据(OUT1)发送到复用单元150,或者作为替代方式,还可将编码的元数据(OUT3)与编码的视频数据(OUT1)分开地发送到图像处理设备。以这种方式,图像产生设备100产生与视频数据关联的元数据,所述元数据包括用于将视频数据从2D图像转换为3D图像的信息。
图2示出由图1中示出的图像产生设备100产生的元数据。元数据包括关于视频数据的信息。为了指示包括在元数据中的信息与哪个视频数据关联,用于标识视频数据被记录在哪个盘中的盘标识信息被包括在元数据中,但是应理解,在其他实施例中,元数据不包括盘标识信息。盘标识信息可包括盘标识符(ID)和标题ID,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于标识在由盘ID标识的盘中记录的多个标题中包括视频数据的标题。
由于视频数据具有一系列帧,因此元数据包括关于帧的信息。关于帧的信息可包括用于根据预定标准对帧进行划分的信息。假设一组相似的帧是一个单元,视频数据的全部帧可被划分为多个单元。在本实施例中,用于将视频数据的帧划分为预定单元的信息被包括在元数据中。具体地,具有相似背景构成的一组帧被划分为一个镜头(shot),在相似的背景构成中,可通过使用在当前帧之前的先前帧来预测当前帧的背景构成。元数据产生单元130将视频数据的帧划分为预定的镜头并将关于该镜头的信息(即,镜头信息)并入元数据中。当由于帧背景构成的明显改变使得当前帧的背景构成与先前帧的背景构成不同时,可将当前帧和先前帧划分为不同的镜头。
镜头信息包括与被划分在该镜头内的输出帧相关的时刻的信息。例如,这样的信息包括在被划分为每个镜头的帧中首先被输出的帧的输出时刻信息(图2中的镜头开始时刻信息)和被最后输出的帧的输出时刻信息(图2中的镜头结束时刻信息),但是本发明的各方面不限于此。例如,根据另外的方面,镜头信息包括镜头开始时刻信息和与在该镜头中包含的多个帧相关的信息。元数据还包括与被划分为该镜头的帧有关的镜头类型信息。镜头类型信息为每个镜头指示被划分为镜头的帧将被输出为2D图像还是3D图像。元数据还包括背景深度信息,将参照图3A到图3C进行详细描述。
图3A到图3C是用于解释通过使用背景深度信息产生的深度图的示图。图3A示出2D图像,图3B示出应用于图3A中示出的2D图像的深度图,图3C示出将深度图应用于2D图像的结果。为了将立体效果加入2D图像,为2D图像赋予深度感。当用户观看屏幕时,投影到屏幕上的图像形成于用户的双眼的每个眼睛中。形成于眼中的图像的两点之间的距离被称为视差,视差可被划分为正视差、零视差和负视差。正视差指的是与图像看上去形成于屏幕内的情况对应的视差,正视差小于或等于两眼之间的距离。随着正视差增加,由于图像看上去位于屏幕之后而产生更立体的效果。当图像看上去二维地形成在屏幕平面上时,视差为0(即,零视差)。在零视差的情况下,由于图像形成于屏幕平面上,用户不能感觉到立体效果。负视差指的是与图像看上去位于屏幕之前的情况对应的视差。当用户的视线交叉时产生该视差。负视差产生由于图像看上去向前凸出的立体效果。
为了通过将深度感加入2D图像来产生3D图像,可通过使用先前帧预测当前帧的运动并可通过使用预测的运动将深度感加入当前帧的图像。为了同样的目的,可通过使用帧的构成来产生帧的深度图,并通过使用深度图将深度感加入帧。将参照图4详细描述前者,并将参照图5详细描述后者。
如上所述,元数据包括用于将视频数据的帧划分为预定镜头的信息。当由于当前帧和先前帧之间的构成不具有相似性而不能通过使用先前帧来预测当前帧的构成时,将当前帧和先前帧划分为不同的镜头。元数据包括与将应用于由于帧的构成的相似性而被划分为一个镜头的帧的构成有关的信息和/或包括与将应用于每个镜头的构成有关的信息。
帧的背景构成可变化。元数据包括用于指示相应帧的构成的背景深度信息。背景深度信息可包括:帧中所包含的背景的类型信息、背景的坐标点信息和与坐标点相应的背景的深度值。背景的类型信息可以是指示多个构成中的背景的构成的ID。
参照图3A,帧包括背景,该背景包括地面和天空。在此帧中,地面和天空相接的水平线对于观看者的视角是最远点,与地面的底部相应的图像对于观看者的视角是最近点。图像产生设备100确定图3B中示出的类型的构成将应用于图3A中示出的帧,并产生元数据,该元数据包括为图3A中示出的帧指示图3B中示出的构成的类型信息。
坐标点值指的是2D图像中的预定位置的坐标点的值。深度值指的是图像的深度的程度。在本发明的各方面,深度值可以是范围从0到255的256个值中的一个。随着深度值减小,深度变大从而图像看上去远离观看者。相反,随着深度值增大,图像看上去靠近观看者。参照图3B和图3C,可以看出,在该帧中,地面和天空交接的部分(即,水平线部分)具有最小的深度值,地面的底部具有最大的深度值。图像处理设备(未示出)提取包括在元数据中的背景深度信息,通过使用提取的深度信息产生如图3C所示的深度图,并通过使用深度图将2D图像输出为3D图像。
图4是根据本发明实施例的图像处理设备400的框图。参照图4,图像处理设备400包括视频数据解码单元410、元数据分析单元420、3D图像转换单元430和将3D图像输出到屏幕的输出单元440。然而,应理解图像处理设备400不必在所有实施例中都包括输出单元440,和/或输出单元440可设置为与图像处理设备400分离。此外,图像处理设备400可以是计算机、移动装置、机顶盒、工作站等。输出单元440可以是阴极射线管装置、液晶显示装置、等离子显示装置、有机发光二极管显示装置等,和/或通过有线和/或无线协议连接到上述装置和/或连接到护目镜(goggle)。
视频数据解码单元410从盘(例如DVD、蓝光等)、本地存储、从图1的图像产生装置100发送的或任意外部存储装置(例如,硬盘驱动器、闪存等)读取视频数据(IN2),并对读取的视频数据进行解码。元数据分析单元420对元数据(IN3)进行解码以从元数据中提取与读取的视频数据的帧有关的信息,并分析提取的信息。通过使用元数据,元数据分析单元420控制包括在3D图像转换单元430中的开关单元433以便将帧作为2D图像或3D图像输出。元数据分析单元420从盘、本地存储、从图1的图像产生装置100发送的或任意外部存储装置(例如,硬盘驱动器、闪存等)接收元数据IN3。在本发明的所有方面,元数据不必与视频数据一起存储。
3D图像转换单元430将接收自视频数据解码单元410的视频数据从2D图像转换为3D图像。在图4中,3D图像转换单元430通过使用先前帧估计当前帧的运动以产生当前帧的3D图像。
元数据分析单元420从元数据中提取在被划分为一个镜头的帧中被首先输出的帧的输出时刻信息和/或被最后输出的帧的输出时刻信息,并基于提取的输出时刻信息确定是否将目前正由视频数据解码单元410解码的当前帧划分为新的镜头,当元数据分析单元420确定极爱能够当前帧划分为新的镜头时,元数据分析单元420控制开关单元433以便不将当前帧转换为3D图像,从而使运动估计单元434不通过使用存储在先前帧存储单元432中的先前帧来估计当前帧的运动。这是因为通过参照先前帧提取了当前帧的运动信息以便将视频数据从2D图像转换为3D图像。然而,如果当前帧和先前帧被划分为不同的镜头,则当前帧和先前帧之间不具有足够的相似度,因而不能通过使用先前帧预测当前帧的构成。如所示,开关单元433断开与存储单元432的连接以阻止使用先前帧,但是本发明的各方面不限于此。
当视频数据没有被转换为3D图像(例如,当视频数据是警告词句、菜单屏幕、结束广告等)时,元数据包括指示视频数据的帧将被输出为2D图像的镜头类型信息。元数据分析单元420使用镜头类型信息为每个镜头确定视频数据将被输出为2D图像还是3D图像,并根据确定的结果控制开关单元433。具体地,当元数据分析单元420基于镜头类型信息确定被划分为预定镜头的视频数据将不被转换为3D图像时,元数据分析单元420控制开关单元433将存储单元432从运动估计单元434断开,从而使3D图像转换单元430不通过使用先前帧来估计当前帧的运动。当元数据分析单元420基于镜头类型信息确定被划分为预定镜头的视频数据将被转换为3D图像时,元数据分析单元420控制开关单元433将存储单元432与运动估计单元434连接,从而使图像转换单元430通过使用先前帧来将当前帧转换为3D图像。
当视频数据被划分为预定镜头并将被输出为3D图像时,3D图像转换单元430将接收自视频数据解码单元410的作为2D图像的视频数据转换为3D图像。3D图像转换单元430包括图像分块单元431、先前帧存储单元432、运动估计单元434、块合成单元435、左/右视角图像确定单元436和开关单元433。图像分块单元431将作为2D图像的视频数据的帧划分为预定大小的块。先前帧存储单元432存储在当前帧之前的预定数量的先前帧。在元数据分析单元420的控制下,开关单元433启用或停止将存储在先前帧存储单元432中的先前帧输出到运动估计单元434。
运动估计单元434使用当前帧的块和先前帧的块来获得关于运动的量和方向的每块的运动向量。块合成单元435对从先前帧的预定块中使用由运动估计单元434获得的运动向量选择的块进行合成,以便产生新的帧。当运动估计单元434由于元数据分析单元420对开关单元33的控制而不使用先前帧时,运动估计单元434将接收自图像分块单元431的当前帧输出到块合成单元435。
产生的新的帧或当前帧被输入到左/右视角图像确定单元436。左/右视角图像确定单元436通过使用从块合成单元435接收的帧和从视频数据解码单元410接收的帧来确定左视角图像和右视角图像。当元数据分析单元420控制开关单元433不将视频数据转换为3D图像时,左/右视角图像确定单元436通过使用从块合成单元435接收的具有2D图像的帧和从视频数据解码单元410接收的具有2D图像的帧,来产生彼此相同的左视角图像和右视角图像。左/右视角图像确定单元436将左视角图像和右视角图像输出到输出单元440、外部输出装置和/或外部终端(例如,计算机、外部显示装置、服务器等)。
图像处理设备400还包括输出单元440,用于将由左/右视角图像确定单元436确定的左视角图像和右视角图像(OUT2)以至少1/120秒的间隔交替地输出到屏幕。同样,通过使用包括在元数据中的镜头信息,根据本发明实施例的图像处理设备400根据基于在元数据中提供的镜头信息的确定,不转换与镜头改变点相应的视频数据,或者不转换不需要3D图像转换的图像数据,从而减少了设备400的不必要的计算和复杂度。虽然不要求,但是可通过有线和/或无线协议在接收单元接收输出图像OUT2,通过所述接收单元(例如,护目镜)用户观看屏幕。
图5是根据本发明另一实施例的图像处理设备500的框图。参照图5,图像处理设备500包括视频数据解码单元510、元数据分析单元520、3D图像转换单元530和输出单元540。然而,应理解,图像处理设备500不必在所有实施例中包括输出单元540,和/或输出单元可被设置为与图像处理设备500分离。此外,图像处理设备500可以是计算机、移动装置、机顶盒、工作站等。输出单元540可以是阴极射线管装置、液晶显示装置、等离子显示装置、有机发光二极管显示装置等,和/或可通过有线和/或无线协议连接到上述装置或连接到护目镜。此外,尽管不要求,但是单元510、520和530中的每一个可以是一个或多个芯片或集成电路上的一个或多个处理器或处理元件。
当作为2D图像的视频数据以及与该视频数据关联的元数据以复用状态或彼此分离地被记录在盘(未示出)中时,一旦将记录有视频数据和元数据的盘加载到图像处理设备500中时,视频数据解码单元510和元数据分析单元520从加载的盘读取视频数据(IN4)和元数据(IN5)。元数据可被记录在盘的导入区、用户数据区和/或导出区。然而,应理解,本发明的各方面不限于从盘接收视频数据和元数据。例如,根据其他方面,图像处理设备500还可包括通信单元(未示出),用于与外部服务器或外部终端通信(例如,通过通信网络和/或任意的有线/无线连接)。图像处理设备500可从外部服务器或外部终端下载视频数据和/或与其关联的元数据,并将下载的数据存储在本地存储(未示出)中。此外,图像处理设备500可从不同于盘的任意的外部存储装置(例如,闪存)接收视频数据和/或元数据。
视频数据解码单元510从盘、外部存储装置、外部终端或本地存储读取视频数据,并对读取的视频数据进行解码。元数据分析单元520从盘外部存储装置、外部终端或本地存储读取与视频数据关联的元数据,并分析读取的元数据。当视频数据被记录在盘中时,元数据分析单元520从元数据中提取盘ID和标题ID,并通过使用提取的盘ID和标题ID确定元数据与哪些视频数据关联,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于指示盘中的多个标题中包括视频数据的标题。
元数据分析单元520分析元数据以提取与被划分为预定镜头的视频数据的帧有关的信息。元数据分析单元520确定当前帧是否是与镜头改变点相应的视频数据(即,被划分为新的镜头),以控制深度图产生单元531。元数据分析单元520通过使用镜头类型信息确定被划分为预定镜头的帧将被输出为2D图像还是3D图像,并根据确定的结果来控制深度图产生单元531。此外,元数据分析单元520从元数据中提取深度信息并将深度信息输出到深度图产生单元531。
3D图像转换单元530产生视频数据的3D图像。3D图像转换单元530包括深度图产生单元531和立体渲染单元533。深度图产生单元531通过使用从元数据分析单元520接收的背景深度信息来产生帧的深度图。背景深度信息包括当前帧所包含的背景的坐标点值、与坐标点值相应的深度值和表示输出图像的屏幕的深度值的面板位置值。深度图产生单元531通过使用背景深度信息来产生当前帧的背景的深度图并将产生的深度图输出到立体渲染单元533。然而,在当前帧将被输出为2D图像时,深度图产生单元531将当前帧输出到立体渲染单元533而不产生当前帧的深度图。
立体渲染单元533通过使用从视频数据解码单元510接收的视频数据和从深度图产生单元531接收的深度图来产生左视角图像和右视角图像。因此,立体渲染单元533产生包括产生的左视角图像和产生的右视角图像的3D格式图像。在当前帧将被输出为2D图像时,从深度图产生单元531接收的帧与从视频数据解码单元510接收的帧彼此相同,因此由立体渲染单元533产生的左视角图像和右视角图像也彼此相同。3D格式可以是上下格式、并排格式或交错格式。立体渲染单元533将左视角图像和右视角图像输出到输出单元540、外部输出装置和/或外部终端(例如,计算机、外部显示装置、服务器等)。
在本实施例中,图像处理设备500还包括作为输出装置工作的输出单元540。在这种情况下,输出单元540将从立体渲染单元533接收的左视角图像和右视角图像顺序地输出到屏幕。当图像以如单眼观看的至少60Hz的帧速率被输出时,观看者感觉图像被顺序和无缝地再现。因此,输出单元540以至少120Hz的帧速率输出屏幕,从而观看者可感觉到3D图像被无缝地再现。因此,输出单元540以至少1/120秒的间隔顺序地将包括在帧中的左视角图像和右视角图像(OUT3)输出到屏幕。观看者可使用使眼睛交替接收图像的护目镜和/或使用偏振光将他/她的视线选择性的遮挡。
图6是示出根据本发明实施例的图像处理方法的流程图。参照图6,在操作610,图像处理设备400或500确定是否存在与读取的视频数据关联的元数据。例如,当在盘上提供视频数据和元数据并且盘被加载,图像处理设备400或500被指令输出加载的盘的预定标题时,在操作610,图像处理设备400或500通过使用盘ID和标题ID来确定与标题关联的元数据是否存在于盘中。如果图像处理设备400或500确定盘中不具有元数据,则在操作620,图像处理设备400或500可通过通信网络从外部服务器等下载元数据。以这种方式,可通过仅下载相应的元数据,现有的视频(例如,DVD和蓝光盘上的电影或计算机游戏)可变为3D。可替换地,盘可仅包含元数据,当选择了特定视频的元数据时,从服务器下载视频。
在操作630,图像处理设备400或500从与视频数据关联的元数据中提取关于视频数据被划分的单元的信息。如前面所述,在本发明的某些方面中,关于单元的信息可以是关于镜头的信息(即,镜头信息)。镜头信息指示当前帧是否被划分为与先前帧相同的镜头,并且可包括指示当前帧将被输出为2D图像还是3D图像的镜头类型信息。图像处理设备400或500通过使用镜头信息确定是将帧输出为2D图像还是3D图像,并在操作640根据确定的结果将被分类为预定镜头的帧输出为2D图像或3D图像。
图7是详细示出图6的操作640的流程图。参照图7,在操作710,当输出视频数据时,图像处理设备400或500确定当前帧是否具有与先前帧不同的构成并且因此将当前帧划分为新的镜头。当图像处理设备400或500确定当前帧被划分为新的镜头时,在操作720,图像处理设备400或500将包括在新的镜头中的初始帧输出为2D图像而不将该初始帧转换为3D图像。
在操作730,图像处理设备400或500通过使用在元数据中提供的关于新的镜头的镜头类型信息,确定将被划分为新的镜头的所有帧中的初始帧之后的其余帧输出为2D图像还是3D图像。当关于新的镜头的镜头类型信息指示被划分为新的镜头的视频数据将被输出为3D图像时,在操作740,图像处理设备400或500将被划分为新的镜头的视频数据转换为3D图像。具体地,在操作740,图像处理设备400或500从转换为3D图像的视频数据和作为2D图像的视频数据确定左视角图像和右视角图像,并将被划分为新的镜头的视频数据输出为3D图像。当图像处理设备400或500通过使用如图5所示的构成信息来产生3D图像时,图像处理设备500从元数据中提取将应用于被划分为新的镜头的当前帧的背景深度信息,并通过使用背景深度信息来产生当前帧的深度图。
当关于新的镜头的镜头类型信息指示被划分为新的镜头的视频数据将被输出为2D图像(操作730)时,在操作750,图像处理设备400或500将视频数据输出为2D图像而不将视频数据转换为3D图像。在操作760,图像处理设备400或500确定全部视频数据是否已完全被输出。如果否,则图像处理设备400或500重复操作710。
以这种方式,根据本发明的各方面,通过使用包括在元数据中的镜头信息,可在镜头改变点将视频数据输出为2D图像。此外,根据本发明的实施例,为每个镜头确定将视频数据输出为2D图像还是3D图像,并根据确定的结果输出视频数据,从而减少了由于将全部视频数据转换为3D图像而可能增加的计算量。
虽然不限于此,但是本发明的各方面还可被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质可以是能够存储其后由计算机系统读取的数据的任意数据存储装置。计算机可读记录介质的示例包括:只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储装置。计算机可读记录介质还可分布于联网的计算机系统,从而以分布的方式存储和执行计算机可读代码。本发明的各方面还可被实现为以载波实施的包括可由计算机读取并可通过互联网发送的程序的数据信号。此外,尽管没有在所有方面中要求,图像处理设备400和500的一个或多个单元可包括执行存储在计算机可读介质(诸如本地存储(未示出))中的计算机程序的处理器或微处理器。此外,应理解,在某些实施例中,图像产生设备100和图像处理设备400或500可被设置在单个设备中。
虽然已经示出和描述了本发明的若干实施例,但是本领域的技术人员将理解,在不脱离本发明的原理和精神的情况下,可以对实施例做出各种改变,本发明的范围在权利要求及其等同物中限定。

Claims (15)

1.一种将具有二维图像的视频数据输出为二维图像或三维图像的图像处理方法,所述图像处理方法包括:
由图像处理设备从与视频数据关联的元数据中提取关于视频数据的信息;
由图像处理设备根据提取的关于视频数据的信息将视频数据输出为可在二维图像和三维图像之间选择,
其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
2.如权利要求1所述的图像处理方法,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
3.如权利要求2所述的图像处理方法,其中,镜头信息包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息和/或在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息。
4.如权利要求2所述的图像处理方法,其中:
元数据包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的一组帧将被输出为二维图像还是三维图像;
输出视频数据的步骤包括:根据镜头类型信息将被划分为该镜头的一组帧输出为二维图像或三维图像。
5.如权利要求2所述的图像处理方法,其中,输出视频数据的步骤包括:
根据元数据,当不能通过使用先前帧预测当前帧的背景构成时,确定当前帧被划分为与当前帧之前的先前帧不同的新的镜头;
当当前帧被划分为新的镜头时,将当前帧输出为二维图像;
将被划分为新的镜头的一组帧的其他帧转换为三维图像并输出转换的三维图像。
6.如权利要求2所述的图像处理方法,其中,输出视频数据的步骤包括:
根据元数据,当不能通过使用先前帧预测当前帧的背景构成时,确定当前帧被划分为与当前帧之前的先前帧不同的新的镜头;
当当前帧被划分为新的镜头时,从元数据中提取将应用于被划分为新的镜头的当前帧的背景深度信息;
当当前帧被划分为新的镜头时,通过使用背景深度信息产生当前帧的深度图。
7.如权利要求6所述的图像处理方法,其中:
背景深度信息包括:当前帧的背景的坐标点值、与坐标点值分别对应的深度值和面板位置值;
产生当前帧的深度图的步骤包括:通过使用坐标点值、深度值和表示输出屏幕的深度值的面板位置值来产生当前帧的背景的深度图。
8.如权利要求1所述的图像处理方法,还包括:从记录有视频数据的盘读取元数据或通过通信网络从服务器下载元数据。
9.如权利要求1所述的图像处理方法,其中,元数据包括用于标识视频数据的标识信息,所述标识信息包括盘标识符和标题标识符,所述盘标识符用于标识记录有视频数据的盘,所述标题标识符用于指示记录在由盘标识符标识的盘中的多个标题中包括视频数据的标题。
10.一种图像产生方法,包括:
由图像产生设备接收作为二维图像的视频数据;
由图像产生设备产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为三维图像的信息,
其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
11.如权利要求10所述的图像产生方法,其中,镜头信息包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息、在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息和/或指示被划分为该镜头的一组帧将被输出为二维图像还是三维图像的镜头类型信息。
12.如权利要求10所述的图像产生方法,其中:
元数据还包括被划分为预定镜头的一组帧的背景深度信息;
背景深度信息包括:被划分为预定镜头的一组帧的背景的坐标点值、与坐标点值对应的深度值和表示输出屏幕的深度值的面板位置值。
13.一种将具有二维图像的视频数据输出为二维图像或三维图像的图像处理设备,所述图像处理设备包括:
元数据分析单元,通过使用与视频数据关联的元数据来确定视频数据将被输出为二维图像还是三维图像;
三维图像转换单元,当元数据分析单元确定视频数据将被输出为三维图像时,将视频数据转换为三维图像;
输出单元,根据元数据分析单元的确定将视频数据输出为二维图像或三维图像,
其中,元数据包括用于将视频数据的帧划分为预定单元的信息。
14.一种图像产生设备,包括:
视频数据编码单元,对作为二维图像的视频数据进行编码;
元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为三维图像的信息;
元数据编码单元,对元数据进行编码,
其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
15.一种计算机可读信息存储介质,包括:
记录为二维图像的视频数据;
与视频数据关联的元数据,所述元数据包括由图像处理设备用于将视频数据的帧划分为预定单元的信息以及由图像处理设备用于确定每个划分的帧是否将被图像处理设备转换为三维图像的信息,
其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成,
其中,镜头信息包括在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息、在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息和/或指示被划分为该镜头的一组帧将被输出为2D图像还是3D图像的镜头类型信息。
CN200980123639.6A 2008-06-24 2009-06-24 图像产生方法和设备以及图像处理方法和设备 Expired - Fee Related CN102067615B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US7518408P 2008-06-24 2008-06-24
US61/075,184 2008-06-24
KR10-2008-0091269 2008-09-17
KR1020080091269A KR20100002032A (ko) 2008-06-24 2008-09-17 영상 생성 방법, 영상 처리 방법, 및 그 장치
PCT/KR2009/003383 WO2009157701A2 (en) 2008-06-24 2009-06-24 Image generating method and apparatus and image processing method and apparatus

Publications (2)

Publication Number Publication Date
CN102067615A true CN102067615A (zh) 2011-05-18
CN102067615B CN102067615B (zh) 2015-02-25

Family

ID=41812276

Family Applications (4)

Application Number Title Priority Date Filing Date
CN2009801242749A Pending CN102077600A (zh) 2008-06-24 2009-06-17 输出和显示图像数据的方法和设备
CN200980123462.XA Expired - Fee Related CN102067613B (zh) 2008-06-24 2009-06-24 用于处理3d视频图像的方法和设备
CN200980123638.1A Expired - Fee Related CN102067614B (zh) 2008-06-24 2009-06-24 处理三维视频数据的方法和设备
CN200980123639.6A Expired - Fee Related CN102067615B (zh) 2008-06-24 2009-06-24 图像产生方法和设备以及图像处理方法和设备

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN2009801242749A Pending CN102077600A (zh) 2008-06-24 2009-06-17 输出和显示图像数据的方法和设备
CN200980123462.XA Expired - Fee Related CN102067613B (zh) 2008-06-24 2009-06-24 用于处理3d视频图像的方法和设备
CN200980123638.1A Expired - Fee Related CN102067614B (zh) 2008-06-24 2009-06-24 处理三维视频数据的方法和设备

Country Status (7)

Country Link
US (6) US20090315884A1 (zh)
EP (4) EP2292019A4 (zh)
JP (4) JP2011525743A (zh)
KR (9) KR20100002032A (zh)
CN (4) CN102077600A (zh)
MY (1) MY159672A (zh)
WO (4) WO2009157668A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104143308A (zh) * 2014-07-24 2014-11-12 京东方科技集团股份有限公司 一种三维图像的显示方法及装置
CN106982367A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 视频传输方法及其装置

Families Citing this family (208)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
KR101733443B1 (ko) 2008-05-20 2017-05-10 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8520979B2 (en) 2008-08-19 2013-08-27 Digimarc Corporation Methods and systems for content processing
US20100045779A1 (en) * 2008-08-20 2010-02-25 Samsung Electronics Co., Ltd. Three-dimensional video apparatus and method of providing on screen display applied thereto
JP2010062695A (ja) * 2008-09-02 2010-03-18 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2010088092A (ja) * 2008-09-02 2010-04-15 Panasonic Corp 立体映像伝送システム、映像表示装置および映像出力装置
WO2010028107A1 (en) * 2008-09-07 2010-03-11 Dolby Laboratories Licensing Corporation Conversion of interleaved data sets, including chroma correction and/or correction of checkerboard interleaved formatted 3d images
US20110234754A1 (en) * 2008-11-24 2011-09-29 Koninklijke Philips Electronics N.V. Combining 3d video and auxiliary data
WO2010064784A2 (ko) * 2008-12-02 2010-06-10 (주)엘지전자 3차원 캡션 디스플레이 방법 및 이를 구현하기 위한 3차원 디스플레이 장치
BRPI0917764B1 (pt) * 2008-12-19 2021-03-16 Koninklijke Philips N.V. método de decodificação e envio de informação de vídeo adequado para apresentação tridimensional [3d] e dispositivo para decodificação e envio de informação de vídeo adequado para monitor tridimensional [3d]
US9269154B2 (en) * 2009-01-13 2016-02-23 Futurewei Technologies, Inc. Method and system for image processing to classify an object in an image
KR20100112940A (ko) * 2009-04-10 2010-10-20 엘지전자 주식회사 데이터 처리방법 및 수신 시스템
US9215435B2 (en) 2009-06-24 2015-12-15 Dolby Laboratories Licensing Corp. Method for embedding subtitles and/or graphic overlays in a 3D or multi-view video data
TW201119353A (en) 2009-06-24 2011-06-01 Dolby Lab Licensing Corp Perceptual depth placement for 3D objects
WO2011006104A1 (en) * 2009-07-10 2011-01-13 Dolby Laboratories Licensing Corporation Modifying images for a 3-dimensional display mode
JP2011029849A (ja) * 2009-07-23 2011-02-10 Sony Corp 受信装置、通信システム、立体画像への字幕合成方法、プログラム、及びデータ構造
KR101716636B1 (ko) * 2009-07-27 2017-03-15 코닌클리케 필립스 엔.브이. 3d 비디오 및 보조 데이터의 결합
KR20110013693A (ko) 2009-08-03 2011-02-10 삼성모바일디스플레이주식회사 유기 전계발광 표시장치 및 그의 구동방법
KR101056281B1 (ko) * 2009-08-03 2011-08-11 삼성모바일디스플레이주식회사 유기 전계발광 표시장치 및 그의 구동방법
JP5444955B2 (ja) * 2009-08-31 2014-03-19 ソニー株式会社 立体画像表示システム、視差変換装置、視差変換方法およびプログラム
US8614737B2 (en) * 2009-09-11 2013-12-24 Disney Enterprises, Inc. System and method for three-dimensional video capture workflow for dynamic rendering
US20110063298A1 (en) * 2009-09-15 2011-03-17 Samir Hulyalkar Method and system for rendering 3d graphics based on 3d display capabilities
US8988495B2 (en) * 2009-11-03 2015-03-24 Lg Eletronics Inc. Image display apparatus, method for controlling the image display apparatus, and image display system
JP2011109398A (ja) * 2009-11-17 2011-06-02 Sony Corp 画像送信方法、画像受信方法、画像送信装置、画像受信装置及び画像伝送システム
EP2502115A4 (en) 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
JP5502436B2 (ja) * 2009-11-27 2014-05-28 パナソニック株式会社 映像信号処理装置
CN102474632A (zh) * 2009-12-08 2012-05-23 美国博通公司 处理多个3-d视频格式的方法和系统
TWI491243B (zh) * 2009-12-21 2015-07-01 Chunghwa Picture Tubes Ltd 影像處理方法
JP2011139261A (ja) * 2009-12-28 2011-07-14 Sony Corp 画像処理装置、画像処理方法、およびプログラム
KR20120123087A (ko) * 2010-01-13 2012-11-07 톰슨 라이센싱 3d 텍스트를 3d 콘텐츠와 결합하기 위한 시스템 및 방법
JPWO2011086653A1 (ja) * 2010-01-14 2013-05-16 パナソニック株式会社 映像出力装置、映像表示システム
WO2011091309A1 (en) * 2010-01-21 2011-07-28 General Instrument Corporation Stereoscopic video graphics overlay
EP2534844A2 (en) * 2010-02-09 2012-12-19 Koninklijke Philips Electronics N.V. 3d video format detection
US9025933B2 (en) * 2010-02-12 2015-05-05 Sony Corporation Information processing device, information processing method, playback device, playback method, program and recording medium
JP2011166666A (ja) * 2010-02-15 2011-08-25 Sony Corp 画像処理装置、画像処理方法およびプログラム
EP2537346B1 (en) 2010-02-19 2019-01-23 InterDigital Madison Patent Holdings Stereo logo insertion
KR101445777B1 (ko) * 2010-02-19 2014-11-04 삼성전자 주식회사 재생 기기 및 그 제어방법
CN102771129A (zh) * 2010-02-24 2012-11-07 汤姆森特许公司 立体图像的字幕加载
KR20110098420A (ko) * 2010-02-26 2011-09-01 삼성전자주식회사 디스플레이장치 및 그 구동방법
US20110216083A1 (en) * 2010-03-03 2011-09-08 Vizio, Inc. System, method and apparatus for controlling brightness of a device
US9154814B2 (en) * 2010-03-05 2015-10-06 Google Technology Holdings LLC Method and apparatus for converting two-dimensional video content for insertion into three-dimensional video content
US9426441B2 (en) * 2010-03-08 2016-08-23 Dolby Laboratories Licensing Corporation Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning
US8830300B2 (en) * 2010-03-11 2014-09-09 Dolby Laboratories Licensing Corporation Multiscalar stereo video format conversion
US8817072B2 (en) 2010-03-12 2014-08-26 Sony Corporation Disparity data transport and signaling
JP2011199388A (ja) * 2010-03-17 2011-10-06 Sony Corp 再生装置、再生制御方法、およびプログラム
JP2011217361A (ja) * 2010-03-18 2011-10-27 Panasonic Corp 立体映像再生装置、立体映像再生方法、及び集積回路
KR20110107151A (ko) * 2010-03-24 2011-09-30 삼성전자주식회사 휴대 단말기의 입체 영상 처리 방법 및 장치
WO2011118215A1 (ja) * 2010-03-24 2011-09-29 パナソニック株式会社 映像処理装置
JP5526929B2 (ja) * 2010-03-30 2014-06-18 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
SG10201502669RA (en) * 2010-04-12 2015-05-28 Fortem Solutions Inc Camera projection meshes
EP2547101A4 (en) * 2010-04-14 2013-12-18 Samsung Electronics Co Ltd METHOD AND DEVICE FOR PRODUCING A BROADCASTING BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES AND METHOD AND DEVICE FOR RECEIVING A BROADBAND RADIO BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES
US9237366B2 (en) 2010-04-16 2016-01-12 Google Technology Holdings LLC Method and apparatus for distribution of 3D television program materials
US20110255003A1 (en) * 2010-04-16 2011-10-20 The Directv Group, Inc. Method and apparatus for presenting on-screen graphics in a frame-compatible 3d format
KR101697184B1 (ko) 2010-04-20 2017-01-17 삼성전자주식회사 메쉬 생성 장치 및 그 방법, 그리고, 영상 처리 장치 및 그 방법
US9414042B2 (en) * 2010-05-05 2016-08-09 Google Technology Holdings LLC Program guide graphics and video in window for 3DTV
KR20120119927A (ko) * 2010-05-11 2012-11-01 삼성전자주식회사 무선 충전이 가능한 3d 안경 및 무선전력전송 시스템
US20120012748A1 (en) 2010-05-12 2012-01-19 Pelican Imaging Corporation Architectures for imager arrays and array cameras
KR101082234B1 (ko) * 2010-05-13 2011-11-09 삼성모바일디스플레이주식회사 유기전계발광 표시장치 및 그의 구동방법
JP2011249895A (ja) * 2010-05-24 2011-12-08 Panasonic Corp 信号処理システム及び信号処理装置
US20110292038A1 (en) * 2010-05-27 2011-12-01 Sony Computer Entertainment America, LLC 3d video conversion
KR101699875B1 (ko) 2010-06-03 2017-01-25 엘지디스플레이 주식회사 3d 액정 표시장치 및 구동방법
US9030536B2 (en) 2010-06-04 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for presenting media content
JP5682149B2 (ja) * 2010-06-10 2015-03-11 ソニー株式会社 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US8402502B2 (en) 2010-06-16 2013-03-19 At&T Intellectual Property I, L.P. Method and apparatus for presenting media content
US9053562B1 (en) 2010-06-24 2015-06-09 Gregory S. Rabin Two dimensional to three dimensional moving image converter
US8593574B2 (en) 2010-06-30 2013-11-26 At&T Intellectual Property I, L.P. Apparatus and method for providing dimensional media content based on detected display capability
US9787974B2 (en) 2010-06-30 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content
US8640182B2 (en) 2010-06-30 2014-01-28 At&T Intellectual Property I, L.P. Method for detecting a viewing apparatus
KR101645404B1 (ko) 2010-07-06 2016-08-04 삼성디스플레이 주식회사 유기 전계발광 표시장치
US8918831B2 (en) * 2010-07-06 2014-12-23 At&T Intellectual Property I, Lp Method and apparatus for managing a presentation of media content
JP5609336B2 (ja) * 2010-07-07 2014-10-22 ソニー株式会社 画像データ送信装置、画像データ送信方法、画像データ受信装置、画像データ受信方法および画像データ送受信システム
US9049426B2 (en) 2010-07-07 2015-06-02 At&T Intellectual Property I, Lp Apparatus and method for distributing three dimensional media content
KR101279660B1 (ko) * 2010-07-07 2013-06-27 엘지디스플레이 주식회사 입체영상 표시장치 및 그 구동방법
US8848038B2 (en) * 2010-07-09 2014-09-30 Lg Electronics Inc. Method and device for converting 3D images
US9032470B2 (en) 2010-07-20 2015-05-12 At&T Intellectual Property I, Lp Apparatus for adapting a presentation of media content according to a position of a viewing apparatus
US9232274B2 (en) 2010-07-20 2016-01-05 At&T Intellectual Property I, L.P. Apparatus for adapting a presentation of media content to a requesting device
US9560406B2 (en) 2010-07-20 2017-01-31 At&T Intellectual Property I, L.P. Method and apparatus for adapting a presentation of media content
IT1401367B1 (it) * 2010-07-28 2013-07-18 Sisvel Technology Srl Metodo per combinare immagini riferentesi ad un contenuto tridimensionale.
US8994716B2 (en) 2010-08-02 2015-03-31 At&T Intellectual Property I, Lp Apparatus and method for providing media content
JPWO2012017687A1 (ja) * 2010-08-05 2013-10-03 パナソニック株式会社 映像再生装置
KR101674688B1 (ko) * 2010-08-12 2016-11-09 엘지전자 주식회사 입체영상 재생 장치 및 입체영상 재생 방법
JP2012044625A (ja) * 2010-08-23 2012-03-01 Sony Corp 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法
US8438502B2 (en) 2010-08-25 2013-05-07 At&T Intellectual Property I, L.P. Apparatus for controlling three-dimensional images
KR101218815B1 (ko) * 2010-08-26 2013-01-21 주식회사 티스마트 3d 사용자 인터페이스 처리방법 및 이를 이용하는 셋탑박스
US8994792B2 (en) * 2010-08-27 2015-03-31 Broadcom Corporation Method and system for creating a 3D video from a monoscopic 2D video and corresponding depth information
JP5058316B2 (ja) * 2010-09-03 2012-10-24 株式会社東芝 電子機器、画像処理方法、及び画像処理プログラム
EP2426931A1 (en) * 2010-09-06 2012-03-07 Advanced Digital Broadcast S.A. A method and a system for determining a video frame type
CN103262544A (zh) * 2010-09-10 2013-08-21 青岛海信电器股份有限公司 3d电视界面的显示方法和装置
JP2012094111A (ja) * 2010-09-29 2012-05-17 Sony Corp 画像処理装置、画像処理方法及びプログラム
WO2012044272A1 (en) * 2010-09-29 2012-04-05 Thomson Licensing Automatically switching between three dimensional and two dimensional contents for display
US8947511B2 (en) 2010-10-01 2015-02-03 At&T Intellectual Property I, L.P. Apparatus and method for presenting three-dimensional media content
JP5543892B2 (ja) * 2010-10-01 2014-07-09 日立コンシューマエレクトロニクス株式会社 再生装置、再生方法、表示装置、及び表示方法
CN102447959A (zh) * 2010-10-01 2012-05-09 日立民用电子株式会社 接收机
TWI420151B (zh) * 2010-10-07 2013-12-21 Innolux Corp 顯示方法
KR101232086B1 (ko) * 2010-10-08 2013-02-08 엘지디스플레이 주식회사 액정표시장치 및 그의 로컬디밍 제어방법
US20120092327A1 (en) * 2010-10-14 2012-04-19 Sony Corporation Overlaying graphical assets onto viewing plane of 3d glasses per metadata accompanying 3d image
JP5550520B2 (ja) * 2010-10-20 2014-07-16 日立コンシューマエレクトロニクス株式会社 再生装置及び再生方法
KR20120047055A (ko) * 2010-11-03 2012-05-11 삼성전자주식회사 디스플레이 장치 및 이에 적용되는 그래픽 영상 제공방법
CN102469319A (zh) * 2010-11-10 2012-05-23 康佳集团股份有限公司 三维菜单生成方法及三维显示装置
JP5789960B2 (ja) * 2010-11-18 2015-10-07 セイコーエプソン株式会社 表示装置、表示装置の制御方法、及び、プログラム
JP5786315B2 (ja) * 2010-11-24 2015-09-30 セイコーエプソン株式会社 表示装置、表示装置の制御方法、及び、プログラム
CN101984671B (zh) * 2010-11-29 2013-04-17 深圳市九洲电器有限公司 一种3dtv接收系统合成视频图像和界面图形的方法
CN101980545B (zh) * 2010-11-29 2012-08-01 深圳市九洲电器有限公司 一种自动检测3dtv视频节目格式的方法
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP2012129845A (ja) * 2010-12-16 2012-07-05 Jvc Kenwood Corp 画像処理装置
JP5611807B2 (ja) * 2010-12-27 2014-10-22 Necパーソナルコンピュータ株式会社 映像表示装置
US8600151B2 (en) * 2011-01-03 2013-12-03 Apple Inc. Producing stereoscopic image
KR101814798B1 (ko) * 2011-01-26 2018-01-04 삼성전자주식회사 입체영상 처리 장치 및 방법
CN102137298B (zh) * 2011-03-02 2015-12-09 华为技术有限公司 3d格式描述信息的获取方法和装置
CN102157012B (zh) * 2011-03-23 2012-11-28 深圳超多维光电子有限公司 对场景进行立体渲染的方法、图形图像处理装置及设备、系统
US9519994B2 (en) 2011-04-15 2016-12-13 Dolby Laboratories Licensing Corporation Systems and methods for rendering 3D image independent of display size and viewing distance
KR101801141B1 (ko) * 2011-04-19 2017-11-24 엘지전자 주식회사 영상표시장치 및 그 동작방법
KR20120119173A (ko) * 2011-04-20 2012-10-30 삼성전자주식회사 3d 영상처리장치 및 그 입체감 조정방법
JP2012231254A (ja) * 2011-04-25 2012-11-22 Toshiba Corp 立体映像生成装置及び立体映像生成方法
KR101973822B1 (ko) 2011-05-11 2019-04-29 포토네이션 케이맨 리미티드 어레이 카메라 이미지 데이터를 송신 및 수신하기 위한 시스템들 및 방법들
US8947497B2 (en) 2011-06-24 2015-02-03 At&T Intellectual Property I, Lp Apparatus and method for managing telepresence sessions
US9602766B2 (en) 2011-06-24 2017-03-21 At&T Intellectual Property I, L.P. Apparatus and method for presenting three dimensional objects with telepresence
US9030522B2 (en) 2011-06-24 2015-05-12 At&T Intellectual Property I, Lp Apparatus and method for providing media content
US9445046B2 (en) 2011-06-24 2016-09-13 At&T Intellectual Property I, L.P. Apparatus and method for presenting media content with telepresence
CN102231829B (zh) * 2011-06-27 2014-12-17 深圳超多维光电子有限公司 一种视频文件的显示格式识别方法、装置及视频播放器
US9294752B2 (en) 2011-07-13 2016-03-22 Google Technology Holdings LLC Dual mode user interface system and method for 3D video
US8587635B2 (en) 2011-07-15 2013-11-19 At&T Intellectual Property I, L.P. Apparatus and method for providing media services with telepresence
US20130235155A1 (en) * 2011-08-18 2013-09-12 Beijing Goland Tech Co., Ltd. Method of converting 2d into 3d based on image motion information
CN103002297A (zh) * 2011-09-16 2013-03-27 联咏科技股份有限公司 动态深度值产生方法及其装置
US20130070060A1 (en) 2011-09-19 2013-03-21 Pelican Imaging Corporation Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion
US8952996B2 (en) * 2011-09-27 2015-02-10 Delta Electronics, Inc. Image display system
EP2761534B1 (en) 2011-09-28 2020-11-18 FotoNation Limited Systems for encoding light field image files
US8813109B2 (en) 2011-10-21 2014-08-19 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US8687470B2 (en) 2011-10-24 2014-04-01 Lsi Corporation Optical disk playback device with three-dimensional playback functionality
JP5289538B2 (ja) * 2011-11-11 2013-09-11 株式会社東芝 電子機器、表示制御方法及びプログラム
CN102413350B (zh) * 2011-11-30 2014-04-16 四川长虹电器股份有限公司 蓝光3d视频处理方法
FR2983673A1 (fr) * 2011-12-02 2013-06-07 Binocle Procede de correction pour la projection alternative d'images stereoscopiques
US8713590B2 (en) 2012-02-21 2014-04-29 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
EP2817955B1 (en) 2012-02-21 2018-04-11 FotoNation Cayman Limited Systems and methods for the manipulation of captured light field image data
US8479226B1 (en) * 2012-02-21 2013-07-02 The Nielsen Company (Us), Llc Methods and apparatus to identify exposure to 3D media presentations
US10445398B2 (en) * 2012-03-01 2019-10-15 Sony Corporation Asset management during production of media
EP2836657B1 (en) 2012-04-10 2017-12-06 Dirtt Environmental Solutions, Ltd. Tamper evident wall cladding system
KR20130121058A (ko) * 2012-04-26 2013-11-05 한국전자통신연구원 3dtv를 위한 영상 재생 장치 및 상기 장치가 수행하는 방법
JP2015534734A (ja) 2012-06-28 2015-12-03 ペリカン イメージング コーポレイション 欠陥のあるカメラアレイ、光学アレイ、およびセンサを検出するためのシステムおよび方法
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
EP3869797B1 (en) 2012-08-21 2023-07-19 Adeia Imaging LLC Method for depth detection in images captured using array cameras
US20140055632A1 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
KR20140039649A (ko) 2012-09-24 2014-04-02 삼성전자주식회사 다시점 영상 생성 방법 및 다시점 영상 디스플레이 장치
KR20140049834A (ko) * 2012-10-18 2014-04-28 삼성전자주식회사 방송 수신 장치 및 그 제어 방법, 사용자 단말 장치 및 그 화면 제공 방법
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US20150296198A1 (en) * 2012-11-27 2015-10-15 Intellectual Discovery Co., Ltd. Method for encoding and decoding image using depth information, and device and image system using same
KR101430985B1 (ko) * 2013-02-20 2014-09-18 주식회사 카몬 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
WO2014164550A2 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation System and methods for calibration of an array camera
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9992021B1 (en) 2013-03-14 2018-06-05 GoTenna, Inc. System and method for private and point-to-point communication between computing devices
WO2014153098A1 (en) 2013-03-14 2014-09-25 Pelican Imaging Corporation Photmetric normalization in array cameras
WO2014159779A1 (en) 2013-03-14 2014-10-02 Pelican Imaging Corporation Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
CN104079941B (zh) * 2013-03-27 2017-08-25 中兴通讯股份有限公司 一种深度信息编解码方法、装置及视频处理播放设备
CN104469338B (zh) * 2013-09-25 2016-08-17 联想(北京)有限公司 一种控制方法和装置
WO2015048694A2 (en) 2013-09-27 2015-04-02 Pelican Imaging Corporation Systems and methods for depth-assisted perspective distortion correction
US10491916B2 (en) * 2013-10-01 2019-11-26 Advanced Micro Devices, Inc. Exploiting camera depth information for video encoding
CN103543953B (zh) * 2013-11-08 2017-01-04 深圳市汉普电子技术开发有限公司 播放无3d标识的3d片源的方法及触摸设备
JP2015119464A (ja) * 2013-11-12 2015-06-25 セイコーエプソン株式会社 表示装置、および表示装置の制御方法
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
WO2015081279A1 (en) 2013-11-26 2015-06-04 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
WO2015134996A1 (en) 2014-03-07 2015-09-11 Pelican Imaging Corporation System and methods for depth regularization and semiautomatic interactive matting using rgb-d images
US10228751B2 (en) 2014-08-06 2019-03-12 Apple Inc. Low power mode
US9647489B2 (en) 2014-08-26 2017-05-09 Apple Inc. Brownout avoidance
EP3201877B1 (en) 2014-09-29 2018-12-19 Fotonation Cayman Limited Systems and methods for dynamic calibration of array cameras
US10231033B1 (en) 2014-09-30 2019-03-12 Apple Inc. Synchronizing out-of-band content with a media stream
US10708391B1 (en) 2014-09-30 2020-07-07 Apple Inc. Delivery of apps in a media stream
CN105095895B (zh) * 2015-04-23 2018-09-25 广州广电运通金融电子股份有限公司 有价文件识别装置自修正识别方法
CN105376546A (zh) * 2015-11-09 2016-03-02 中科创达软件股份有限公司 一种2d转3d方法、装置及移动终端
CN105472374A (zh) * 2015-11-19 2016-04-06 广州华多网络科技有限公司 一种3d视频直播方法、装置及系统
US20170150138A1 (en) * 2015-11-25 2017-05-25 Atheer, Inc. Method and apparatus for selective mono/stereo visual display
US20170150137A1 (en) * 2015-11-25 2017-05-25 Atheer, Inc. Method and apparatus for selective mono/stereo visual display
CN105872519B (zh) * 2016-04-13 2018-03-27 万云数码媒体有限公司 一种基于rgb压缩的2d加深度3d图像横向存储方法
US10433025B2 (en) 2016-05-10 2019-10-01 Jaunt Inc. Virtual reality resource scheduling of process in a cloud-based virtual reality processing system
CN106101681A (zh) * 2016-06-21 2016-11-09 青岛海信电器股份有限公司 三维图像显示处理方法、信号输入设备及电视终端
US10038500B1 (en) * 2017-05-11 2018-07-31 Qualcomm Incorporated Visible light communication
US10735707B2 (en) * 2017-08-15 2020-08-04 International Business Machines Corporation Generating three-dimensional imagery
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
CN107589989A (zh) * 2017-09-14 2018-01-16 晨星半导体股份有限公司 基于安卓平台的显示装置及其图像显示方法
US11363133B1 (en) 2017-12-20 2022-06-14 Apple Inc. Battery health-based power management
US10817307B1 (en) 2017-12-20 2020-10-27 Apple Inc. API behavior modification based on power source health
EP3644604A1 (en) * 2018-10-23 2020-04-29 Koninklijke Philips N.V. Image generating apparatus and method therefor
CN109257585B (zh) * 2018-10-25 2021-04-06 京东方科技集团股份有限公司 一种亮度校正装置及方法、显示装置、显示系统及方法
CN109274949A (zh) * 2018-10-30 2019-01-25 京东方科技集团股份有限公司 一种视频图像处理方法及其装置、显示设备
CN112188181B (zh) * 2019-07-02 2023-07-04 中强光电股份有限公司 图像显示设备、立体图像处理电路及其同步信号校正方法
MX2022003020A (es) 2019-09-17 2022-06-14 Boston Polarimetrics Inc Sistemas y metodos para modelado de superficie usando se?ales de polarizacion.
KR20230004423A (ko) 2019-10-07 2023-01-06 보스턴 폴라리메트릭스, 인크. 편광을 사용한 표면 법선 감지 시스템 및 방법
WO2021108002A1 (en) 2019-11-30 2021-06-03 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
KR102241615B1 (ko) * 2020-01-15 2021-04-19 한국과학기술원 비디오 웹페이지 소스코드의 메타데이터를 이용하여 비디오 제목을 식별하는 방법 및 이를 수행하는 장치들
US11195303B2 (en) 2020-01-29 2021-12-07 Boston Polarimetrics, Inc. Systems and methods for characterizing object pose detection and measurement systems
KR20220133973A (ko) 2020-01-30 2022-10-05 인트린식 이노베이션 엘엘씨 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들
WO2021243088A1 (en) 2020-05-27 2021-12-02 Boston Polarimetrics, Inc. Multi-aperture polarization optical systems using beam splitters
CN112004162B (zh) * 2020-09-08 2022-06-21 宁波视睿迪光电有限公司 一种在线3d内容播放系统及方法
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
US11770513B1 (en) * 2022-07-13 2023-09-26 Rovi Guides, Inc. Systems and methods for reducing a number of focal planes used to display three-dimensional objects

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050053276A1 (en) * 2003-07-15 2005-03-10 Stmicroelectronics S.R.I. Method of obtaining a depth map from a digital image
US20060288081A1 (en) * 2005-05-26 2006-12-21 Samsung Electronics Co., Ltd. Information storage medium including application for obtaining metadata and apparatus and method of obtaining metadata
US20070081587A1 (en) * 2005-09-27 2007-04-12 Raveendran Vijayalakshmi R Content driven transcoder that orchestrates multimedia transcoding using content information
WO2007047736A2 (en) * 2005-10-19 2007-04-26 Thomson Licensing Multi-view video coding using scalable video coding

Family Cites Families (119)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4523226A (en) * 1982-01-27 1985-06-11 Stereographics Corporation Stereoscopic television system
US4667228A (en) * 1983-10-14 1987-05-19 Canon Kabushiki Kaisha Image signal processing apparatus
JPS63116593A (ja) * 1986-11-04 1988-05-20 Matsushita Electric Ind Co Ltd 立体画像再生装置
US5262879A (en) * 1988-07-18 1993-11-16 Dimensional Arts. Inc. Holographic image conversion method for making a controlled holographic grating
US5058992A (en) * 1988-09-07 1991-10-22 Toppan Printing Co., Ltd. Method for producing a display with a diffraction grating pattern and a display produced by the method
JP2508387B2 (ja) * 1989-10-16 1996-06-19 凸版印刷株式会社 回折格子パタ―ンを有するディスプレイの作製方法
US5291317A (en) * 1990-07-12 1994-03-01 Applied Holographics Corporation Holographic diffraction grating patterns and methods for creating the same
JP3081675B2 (ja) * 1991-07-24 2000-08-28 オリンパス光学工業株式会社 画像記録装置および画像再生装置
US5740274A (en) * 1991-09-12 1998-04-14 Fuji Photo Film Co., Ltd. Method for recognizing object images and learning method for neural networks
US6011581A (en) * 1992-11-16 2000-01-04 Reveo, Inc. Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments
US6084978A (en) * 1993-12-16 2000-07-04 Eastman Kodak Company Hierarchical storage and display of digital images used in constructing three-dimensional image hard copy
CN1113320C (zh) * 1994-02-01 2003-07-02 三洋电机株式会社 将二维图像转换成三维图像的方法以及三维图像显示系统
US5739844A (en) * 1994-02-04 1998-04-14 Sanyo Electric Co. Ltd. Method of converting two-dimensional image into three-dimensional image
US5684890A (en) * 1994-02-28 1997-11-04 Nec Corporation Three-dimensional reference image segmenting method and apparatus
US6104828A (en) * 1994-03-24 2000-08-15 Kabushiki Kaisha Topcon Ophthalmologic image processor
JP2846840B2 (ja) * 1994-07-14 1999-01-13 三洋電機株式会社 2次元映像から3次元映像を生成する方法
EP0703716B1 (en) * 1994-09-22 2002-11-27 Sanyo Electric Co. Ltd Method of converting two-dimensional images into three-dimensional images
US6985168B2 (en) * 1994-11-14 2006-01-10 Reveo, Inc. Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments
JPH09116931A (ja) * 1995-10-18 1997-05-02 Sanyo Electric Co Ltd 時分割立体映像信号の左右映像識別方法
US5917940A (en) * 1996-01-23 1999-06-29 Nec Corporation Three dimensional reference image segmenting method and device and object discrimination system
JPH09322199A (ja) * 1996-05-29 1997-12-12 Olympus Optical Co Ltd 立体映像ディスプレイ装置
US5986781A (en) * 1996-10-28 1999-11-16 Pacific Holographics, Inc. Apparatus and method for generating diffractive element using liquid crystal display
JPH10224822A (ja) * 1997-01-31 1998-08-21 Sony Corp 映像表示方法および表示装置
JPH10313417A (ja) * 1997-03-12 1998-11-24 Seiko Epson Corp デジタルガンマ補正回路並びにそれを用いた液晶表示装置及び電子機器
DE19806547C2 (de) * 1997-04-30 2001-01-25 Hewlett Packard Co System und Verfahren zur Erzeugung von stereoskopischen Anzeigesignalen von einer Einzelcomputergraphikpipeline
JPH11113028A (ja) * 1997-09-30 1999-04-23 Toshiba Corp 3次元映像表示装置
WO1999030280A1 (en) * 1997-12-05 1999-06-17 Dynamic Digital Depth Research Pty. Ltd. Improved image conversion and encoding techniques
US6850631B1 (en) * 1998-02-20 2005-02-01 Oki Electric Industry Co., Ltd. Photographing device, iris input device and iris image input method
JP4149037B2 (ja) * 1998-06-04 2008-09-10 オリンパス株式会社 映像システム
US6704042B2 (en) * 1998-12-10 2004-03-09 Canon Kabushiki Kaisha Video processing apparatus, control method therefor, and storage medium
JP2000298246A (ja) * 1999-02-12 2000-10-24 Canon Inc 表示装置、表示方法および記憶媒体
JP2000275575A (ja) * 1999-03-24 2000-10-06 Sharp Corp 立体映像表示装置
KR100334722B1 (ko) * 1999-06-05 2002-05-04 강호석 Mpeg 데이터를 이용한 입체영상생성방법 및 그 장치
JP2001012946A (ja) * 1999-06-30 2001-01-19 Toshiba Corp 動画像処理装置及び方法
US6839663B1 (en) * 1999-09-30 2005-01-04 Texas Tech University Haptic rendering of volumetric soft-bodies objects
EP1243141B1 (en) * 1999-12-14 2011-10-19 Scientific-Atlanta, LLC System and method for adaptive decoding of a video signal with coordinated resource allocation
US6968568B1 (en) * 1999-12-20 2005-11-22 International Business Machines Corporation Methods and apparatus of disseminating broadcast information to a handheld device
US20020009137A1 (en) * 2000-02-01 2002-01-24 Nelson John E. Three-dimensional video broadcasting system
KR100908989B1 (ko) * 2000-04-04 2009-07-22 소니 가부시끼 가이샤 입체 화상 작성 방법 및 그 장치
JP2001320693A (ja) * 2000-05-12 2001-11-16 Sony Corp サービス提供装置および方法、受信端末装置および方法、サービス提供システム
US6765568B2 (en) * 2000-06-12 2004-07-20 Vrex, Inc. Electronic stereoscopic media delivery system
JP3667620B2 (ja) * 2000-10-16 2005-07-06 株式会社アイ・オー・データ機器 ステレオ画像撮影アダプタ、ステレオ画像撮影用カメラ、および、ステレオ画像処理装置
US6762755B2 (en) * 2000-10-16 2004-07-13 Pixel Science, Inc. Method and apparatus for creating and displaying interactive three dimensional computer images
GB0100563D0 (en) * 2001-01-09 2001-02-21 Pace Micro Tech Plc Dynamic adjustment of on-screen displays to cope with different widescreen signalling types
US6678323B2 (en) * 2001-01-24 2004-01-13 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry Through Communications Research Centre Bandwidth reduction for stereoscopic imagery and video signals
KR20020096203A (ko) * 2001-06-18 2002-12-31 (주)디지털국영 입체영상을 확대/축소하는 방법
JP2003157292A (ja) * 2001-11-20 2003-05-30 Nec Corp 製品レイアウト管理方式および管理方法
KR100397511B1 (ko) * 2001-11-21 2003-09-13 한국전자통신연구원 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법
GB0129992D0 (en) * 2001-12-14 2002-02-06 Ocuity Ltd Control of optical switching apparatus
US20040218269A1 (en) * 2002-01-14 2004-11-04 Divelbiss Adam W. General purpose stereoscopic 3D format conversion system and method
US7319720B2 (en) * 2002-01-28 2008-01-15 Microsoft Corporation Stereoscopic video
JP2003284099A (ja) * 2002-03-22 2003-10-03 Olympus Optical Co Ltd 映像情報信号記録媒体及び映像表示装置
US6771274B2 (en) * 2002-03-27 2004-08-03 Sony Corporation Graphics and video integration with alpha and video blending
CA2380105A1 (en) * 2002-04-09 2003-10-09 Nicholas Routhier Process and system for encoding and playback of stereoscopic video sequences
JP4652389B2 (ja) * 2002-04-12 2011-03-16 三菱電機株式会社 メタデータ処理方法
CA2664732C (en) * 2002-04-12 2013-07-02 Mitsubishi Denki Kabushiki Kaisha An apparatus to edit, reproduce, deliver, search and re-generate condition settings for metadata
AU2003231508A1 (en) * 2002-04-25 2003-11-10 Sharp Kabushiki Kaisha Multimedia information generation method and multimedia information reproduction device
JP4154569B2 (ja) * 2002-07-10 2008-09-24 日本電気株式会社 画像圧縮伸長装置
JP4362105B2 (ja) * 2002-07-16 2009-11-11 韓國電子通信研究院 2次元および3次元立体ビデオ信号の適応変換装置およびその方法
KR100488804B1 (ko) * 2002-10-07 2005-05-12 한국전자통신연구원 Mpeg-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법
JP2004186863A (ja) * 2002-12-02 2004-07-02 Amita Technology Kk 立体映像表示装置及び立体映像信号処理回路
JP4183499B2 (ja) * 2002-12-16 2008-11-19 三洋電機株式会社 映像ファイル処理方法及び映像処理方法
JP2004246066A (ja) * 2003-02-13 2004-09-02 Fujitsu Ltd 仮想環境作成方法
JP2004274125A (ja) * 2003-03-05 2004-09-30 Sony Corp 画像処理装置および方法
JP4677175B2 (ja) * 2003-03-24 2011-04-27 シャープ株式会社 画像処理装置、画像撮像システム、画像表示システム、画像撮像表示システム、画像処理プログラム、及び画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体
JP2004309868A (ja) * 2003-04-08 2004-11-04 Sony Corp 撮像装置及び立体映像生成装置
KR100556826B1 (ko) * 2003-04-17 2006-03-10 한국전자통신연구원 Mpeg-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법
EP1617684A4 (en) * 2003-04-17 2009-06-03 Sharp Kk THREE-DIMENSIONAL IMAGE CREATION DEVICE, THREE-DIMENSIONAL IMAGE REPRODUCING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING PROGRAM, AND RECORDING MEDIUM CONTAINING THE SAME
JP2004357156A (ja) * 2003-05-30 2004-12-16 Sharp Corp 映像受信装置および映像再生装置
JP2005026800A (ja) * 2003-06-30 2005-01-27 Konica Minolta Photo Imaging Inc 画像処理方法、撮像装置、画像処理装置及び画像記録装置
US7411611B2 (en) * 2003-08-25 2008-08-12 Barco N. V. Device and method for performing multiple view imaging by means of a plurality of video processing devices
EP1510940A1 (en) * 2003-08-29 2005-03-02 Sap Ag A method of providing a visualisation graph on a computer and a computer for providing a visualisation graph
US7613344B2 (en) * 2003-12-08 2009-11-03 Electronics And Telecommunications Research Institute System and method for encoding and decoding an image using bitstream map and recording medium thereof
JP2005175997A (ja) * 2003-12-12 2005-06-30 Sony Corp 復号化装置、電子機器、コンピュータ、復号化方法、プログラム及び記録媒体
KR100544677B1 (ko) * 2003-12-26 2006-01-23 한국전자통신연구원 다시점 영상 및 깊이 정보를 이용한 3차원 객체 추적 장치및 그 방법
JP3746506B2 (ja) * 2004-03-08 2006-02-15 一成 江良 立体視化パラメータ埋込装置及び立体視画像再生装置
JP4230959B2 (ja) * 2004-05-19 2009-02-25 株式会社東芝 メディアデータ再生装置、メディアデータ再生システム、メディアデータ再生プログラムおよび遠隔操作プログラム
JP4227076B2 (ja) * 2004-05-24 2009-02-18 株式会社東芝 立体画像を表示する表示装置及び立体画像を表示する表示方法
KR100543219B1 (ko) * 2004-05-24 2006-01-20 한국과학기술연구원 2차원 이미지에서의 햅틱 벡터 필드 생성방법 및 3차원높이 정보 추출방법
KR100708838B1 (ko) 2004-06-30 2007-04-17 삼성에스디아이 주식회사 입체 영상 표시 장치 및 그 구동 방법
JP2006041811A (ja) * 2004-07-26 2006-02-09 Kddi Corp 自由視点画像ストリーミング方式
KR20040077596A (ko) * 2004-07-28 2004-09-04 손귀연 평판 표시패널을 이용한 입체 영상표시장치
JP4468370B2 (ja) * 2004-09-08 2010-05-26 日本電信電話株式会社 三次元表示方法、装置およびプログラム
KR100694069B1 (ko) * 2004-11-29 2007-03-12 삼성전자주식회사 상이한 크기를 가지는 복수 개의 데이터 블록들을포함하는 저장 장치 및 이를 이용한 파일 관리 방법 및이를 포함하는 인쇄 장치
KR100656575B1 (ko) 2004-12-31 2006-12-11 광운대학교 산학협력단 3차원 입체 동영상 디스플레이 장치
TWI261099B (en) * 2005-02-17 2006-09-01 Au Optronics Corp Backlight modules
KR100828358B1 (ko) * 2005-06-14 2008-05-08 삼성전자주식회사 영상 디스플레이 모드 전환 방법, 장치, 및 그 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
US7404645B2 (en) * 2005-06-20 2008-07-29 Digital Display Innovations, Llc Image and light source modulation for a digital display system
KR100813977B1 (ko) * 2005-07-08 2008-03-14 삼성전자주식회사 2차원/3차원 영상 호환용 고해상도 입체 영상 디스플레이장치
US8384763B2 (en) * 2005-07-26 2013-02-26 Her Majesty the Queen in right of Canada as represented by the Minster of Industry, Through the Communications Research Centre Canada Generating a depth map from a two-dimensional source image for stereoscopic and multiview imaging
JP4717728B2 (ja) * 2005-08-29 2011-07-06 キヤノン株式会社 ステレオ表示装置及びその制御方法
KR100739764B1 (ko) * 2005-11-28 2007-07-13 삼성전자주식회사 입체 영상 신호 처리 장치 및 방법
KR100793750B1 (ko) * 2006-02-14 2008-01-10 엘지전자 주식회사 다양한 셋팅 정보를 저장하는 영상기기 및 그 제어방법
KR100780701B1 (ko) 2006-03-28 2007-11-30 (주)오픈브이알 3차원 이미지 자동 생성장치 및 방법
KR20070098364A (ko) * 2006-03-31 2007-10-05 (주)엔브이엘소프트 3차원 영상 데이터를 코드화하여 저장하는 장치 및 방법
KR101137347B1 (ko) * 2006-05-11 2012-04-19 엘지전자 주식회사 이동통신 단말기 및 그 단말기를 이용한 이미지 표출 방법
JP2007304325A (ja) * 2006-05-11 2007-11-22 Necディスプレイソリューションズ株式会社 液晶表示装置および液晶パネル駆動方法
US7953315B2 (en) * 2006-05-22 2011-05-31 Broadcom Corporation Adaptive video processing circuitry and player using sub-frame metadata
US20070294737A1 (en) * 2006-06-16 2007-12-20 Sbc Knowledge Ventures, L.P. Internet Protocol Television (IPTV) stream management within a home viewing network
CA2884702C (en) * 2006-06-23 2018-06-05 Samuel Zhou Methods and systems for converting 2d motion pictures for stereoscopic 3d exhibition
KR100761022B1 (ko) * 2006-08-14 2007-09-21 광주과학기술원 깊이 영상 기반의 햅틱 렌더링 방법과 장치, 및 이를이용한 촉각 방송 시스템
KR100716142B1 (ko) * 2006-09-04 2007-05-11 주식회사 이시티 스테레오스코픽 영상 데이터의 전송 방법
EP1901474B1 (en) 2006-09-13 2011-11-30 Stmicroelectronics Sa System for synchronizing modules in an integrated circuit in mesochronous clock domains
WO2008038205A2 (en) * 2006-09-28 2008-04-03 Koninklijke Philips Electronics N.V. 3 menu display
EP2105032A2 (en) * 2006-10-11 2009-09-30 Koninklijke Philips Electronics N.V. Creating three dimensional graphics data
JP4755565B2 (ja) * 2006-10-17 2011-08-24 シャープ株式会社 立体画像処理装置
KR101362941B1 (ko) * 2006-11-01 2014-02-17 한국전자통신연구원 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치
TWI324477B (en) * 2006-11-03 2010-05-01 Quanta Comp Inc Stereoscopic image format transformation method applied to display system
US8325278B2 (en) * 2006-11-29 2012-12-04 Panasonic Corporation Video display based on video signal and audio output based on audio signal, video/audio device network including video/audio signal input/output device and video/audio reproduction device, and signal reproducing method
KR100786468B1 (ko) * 2007-01-02 2007-12-17 삼성에스디아이 주식회사 2차원 및 3차원 영상 선택 가능 디스플레이 장치
US8213711B2 (en) * 2007-04-03 2012-07-03 Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Method and graphical user interface for modifying depth maps
US8488868B2 (en) * 2007-04-03 2013-07-16 Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Generation of a depth map from a monoscopic color image for rendering stereoscopic still and video images
JP4564512B2 (ja) 2007-04-16 2010-10-20 富士通株式会社 表示装置、表示プログラム、および表示方法
KR100839429B1 (ko) * 2007-04-17 2008-06-19 삼성에스디아이 주식회사 전자 영상 기기 및 그 구동방법
WO2008140190A1 (en) * 2007-05-14 2008-11-20 Samsung Electronics Co, . Ltd. Method and apparatus for encoding and decoding multi-view image
JP4462288B2 (ja) * 2007-05-16 2010-05-12 株式会社日立製作所 映像表示装置及びそれを適用した3次元映像表示装置
EP2198625A4 (en) * 2007-10-10 2013-11-06 Korea Electronics Telecomm METADATA STRUCTURE FOR STORING AND REPRODUCING STEREOSCOPIC DATA AND METHOD FOR STORING A STEREOSCOPIC CONTENT FILE USING THESE METADATA
US20090315981A1 (en) * 2008-06-24 2009-12-24 Samsung Electronics Co., Ltd. Image processing method and apparatus
US8482654B2 (en) * 2008-10-24 2013-07-09 Reald Inc. Stereoscopic image format with depth information

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050053276A1 (en) * 2003-07-15 2005-03-10 Stmicroelectronics S.R.I. Method of obtaining a depth map from a digital image
US20060288081A1 (en) * 2005-05-26 2006-12-21 Samsung Electronics Co., Ltd. Information storage medium including application for obtaining metadata and apparatus and method of obtaining metadata
US20070081587A1 (en) * 2005-09-27 2007-04-12 Raveendran Vijayalakshmi R Content driven transcoder that orchestrates multimedia transcoding using content information
WO2007047736A2 (en) * 2005-10-19 2007-04-26 Thomson Licensing Multi-view video coding using scalable video coding

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104143308A (zh) * 2014-07-24 2014-11-12 京东方科技集团股份有限公司 一种三维图像的显示方法及装置
CN104143308B (zh) * 2014-07-24 2016-09-07 京东方科技集团股份有限公司 一种三维图像的显示方法及装置
US10326984B2 (en) 2014-07-24 2019-06-18 Boe Technology Group Co., Ltd. Three-dimensional image display method and three-dimensional image display device
CN106982367A (zh) * 2017-03-31 2017-07-25 联想(北京)有限公司 视频传输方法及其装置

Also Published As

Publication number Publication date
EP2289248A2 (en) 2011-03-02
WO2009157714A3 (en) 2010-03-25
KR20100002032A (ko) 2010-01-06
WO2009157701A2 (en) 2009-12-30
EP2279625A2 (en) 2011-02-02
US20090317061A1 (en) 2009-12-24
KR20100002049A (ko) 2010-01-06
JP2011525746A (ja) 2011-09-22
WO2009157708A2 (en) 2009-12-30
KR20100002035A (ko) 2010-01-06
EP2292019A4 (en) 2014-04-30
KR20100002033A (ko) 2010-01-06
WO2009157714A2 (en) 2009-12-30
US20090315977A1 (en) 2009-12-24
US20100103168A1 (en) 2010-04-29
KR20100002037A (ko) 2010-01-06
EP2292019A2 (en) 2011-03-09
WO2009157701A3 (en) 2010-04-15
KR20100002031A (ko) 2010-01-06
EP2289247A4 (en) 2014-05-28
JP2011525745A (ja) 2011-09-22
US20090315979A1 (en) 2009-12-24
JP2011526103A (ja) 2011-09-29
JP5547725B2 (ja) 2014-07-16
WO2009157668A3 (en) 2010-03-25
MY159672A (en) 2017-01-13
KR20100002038A (ko) 2010-01-06
EP2289247A2 (en) 2011-03-02
EP2289248A4 (en) 2014-07-02
US20100104219A1 (en) 2010-04-29
CN102067613B (zh) 2016-04-13
KR101539935B1 (ko) 2015-07-28
US8488869B2 (en) 2013-07-16
US20090315884A1 (en) 2009-12-24
WO2009157668A2 (en) 2009-12-30
CN102077600A (zh) 2011-05-25
CN102067614A (zh) 2011-05-18
CN102067615B (zh) 2015-02-25
KR20100002048A (ko) 2010-01-06
CN102067613A (zh) 2011-05-18
WO2009157708A3 (en) 2010-04-15
JP2011525743A (ja) 2011-09-22
KR20100002036A (ko) 2010-01-06
CN102067614B (zh) 2014-06-11
EP2279625A4 (en) 2013-07-03

Similar Documents

Publication Publication Date Title
CN102067615A (zh) 图像产生方法和设备以及图像处理方法和设备
CN101273635B (zh) 使用相机参数对多视图画面编码和解码的设备和方法
CN101754040B (zh) 用于估计深度和将2d视频转换为3d视频的方法和设备
CN102549507B (zh) 选择视点用于在3d视频中生成附加视图
CN1741619B (zh) 动画图像解码方法和装置、 动画图像编码方法和装置
CN105635712A (zh) 基于增强现实的视频实时录制方法及录制设备
CN102265624A (zh) 图像处理方法及其设备
US10244259B2 (en) Method and apparatus of disparity vector derivation for three-dimensional video coding
CN103202026A (zh) 图像转换设备及使用其的显示设备和方法
CN104335579B (zh) 对供多视图立体显示设备所用的视频数据信号进行编码的方法
CN103581646A (zh) 将二维图像转换成三维图像的方法及其显示装置
CN102484735A (zh) 用于视频图像的变速再现的方法和设备
CN103348685A (zh) 图像处理装置和图像处理方法
CN102740101A (zh) 显示控制装置、方法及程序
CN104067615A (zh) 编码装置和编码方法以及解码装置和解码方法
CN103139588A (zh) 用于3d视频的补充信息编码设备和方法
JP2015534745A (ja) 立体画像の生成、送信、及び受信方法、及び関連する装置
CN109246433B (zh) 视频编码方法及装置、解码方法及装置、视频传输系统
CN102209251A (zh) 信息处理设备和方法、重现设备和方法、及程序
CN113542907B (zh) 多媒体数据收发方法、系统、处理器和播放器
CN108683900B (zh) 一种图像数据处理方法及装置
CN113784105A (zh) 一种沉浸式vr终端的信息处理方法及系统
CN103517062A (zh) 影像的同步方法及其装置
CN115442580A (zh) 一种便携式智能设备裸眼3d图片效果处理方法
US9210406B2 (en) Apparatus and method for converting 2D content into 3D content

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150225

Termination date: 20190624

CF01 Termination of patent right due to non-payment of annual fee