CN102067615A - 图像产生方法和设备以及图像处理方法和设备 - Google Patents
图像产生方法和设备以及图像处理方法和设备 Download PDFInfo
- Publication number
- CN102067615A CN102067615A CN2009801236396A CN200980123639A CN102067615A CN 102067615 A CN102067615 A CN 102067615A CN 2009801236396 A CN2009801236396 A CN 2009801236396A CN 200980123639 A CN200980123639 A CN 200980123639A CN 102067615 A CN102067615 A CN 102067615A
- Authority
- CN
- China
- Prior art keywords
- video data
- information
- frame
- divided
- metadata
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 27
- 238000000034 method Methods 0.000 title claims abstract description 10
- 238000009877 rendering Methods 0.000 claims description 79
- 238000012545 processing Methods 0.000 claims description 63
- 238000009432 framing Methods 0.000 claims description 38
- 238000004458 analytical method Methods 0.000 claims description 32
- 239000000284 extract Substances 0.000 claims description 9
- 238000004891 communication Methods 0.000 claims description 7
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000015572 biosynthetic process Effects 0.000 description 19
- 230000015654 memory Effects 0.000 description 17
- 238000005755 formation reaction Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000003786 synthesis reaction Methods 0.000 description 5
- 230000008447 perception Effects 0.000 description 4
- 230000007704 transition Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 108091092195 Intron Proteins 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000013075 data extraction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 210000000162 simple eye Anatomy 0.000 description 1
- 238000004513 sizing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/40—Image enhancement or restoration using histogram techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/111—Transformation of image signals corresponding to virtual viewpoints, e.g. spatial image interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/122—Improving the 3D impression of stereoscopic images by modifying image signal contents, e.g. by filtering or adding monoscopic depth cues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/133—Equalising the characteristics of different image components, e.g. their average brightness or colour balance
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/139—Format conversion, e.g. of frame-rate or size
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/158—Switching image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/161—Encoding, multiplexing or demultiplexing different image signal components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/178—Metadata, e.g. disparity information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/172—Processing image signals image signals comprising non-image signal components, e.g. headers or format information
- H04N13/183—On-screen display [OSD] information, e.g. subtitles or menus
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/189—Recording image signals; Reproducing recorded image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/339—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using spatial multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
- H04N13/341—Displays for viewing with the aid of special glasses or head-mounted displays [HMD] using temporal multiplexing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/356—Image reproducers having separate monoscopic and stereoscopic modes
- H04N13/359—Switching between monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
- H04N13/361—Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/144—Movement detection
- H04N5/145—Movement estimation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2320/00—Control of display operating conditions
- G09G2320/06—Adjustment of display parameters
- G09G2320/0626—Adjustment of display parameters for control of overall brightness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/106—Processing image signals
- H04N13/156—Mixing image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
- H04N13/194—Transmission of image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
- H04N13/286—Image signal generators having separate monoscopic and stereoscopic modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2213/00—Details of stereoscopic systems
- H04N2213/005—Aspects relating to the "3D+depth" image format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Processing (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
一种图像处理方法和设备以及图像产生方法和设备,用于将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法包括:从与视频数据关联的元数据中提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像。
Description
技术领域
本发明的各方面总体涉及一种图像产生方法和设备以及一种图像处理方法和设备,更具体地,涉及这样一种图像产生方法和设备以及一种图像处理方法和设备,其中,通过使用与视频数据关联的元数据,图像数据被输出为二维(2D)图像或三维(3D)图像。
背景技术
随着数字技术的发展,三维(3D)图像技术已经广泛运用。3D图像技术通过将深度信息添加到二维(2D)图像来表现更真实的图像。3D图像技术可被划分为产生作为3D图像的视频数据的技术和将产生为2D图像的视频数据转换为3D图像的技术。已经同时研究这两种技术。
发明内容
技术问题
本发明的各方面提供一种通过使用与视频数据关联的元数据将视频数据输出为二维图像或三维图像的图像处理方法和设备。
有益效果
以这种方式,根据本发明的各方面,通过使用包括在元数据中的镜头(shot)信息,视频数据可在镜头改变点被输出为2D图像。此外,根据本发明的实施例,为每个镜头确定是将视频数据输出为2D图像还是3D图像并根据确定的结果输出视频数据,从而减少由于将全部视频数据转换为3D图像而可能增加的计算量。
附图说明
图1是根据本发明实施例的图像产生设备的框图;
图2示出由图1中示出的图像产生设备产生的元数据;
图3A到图3C是解释通过使用背景深度信息而产生的深度图的示图;
图4是根据本发明实施例的图像处理设备的框图;
图5是根据本发明另一实施例的图像处理设备的框图;
图6是示出根据本发明实施例的图像处理方法的流程图;
图7是详细示出图6中示出的视频数据被输出为二维(2D)图像或三维(3D)图像的操作的流程图。
具体实施方式
最佳模式
根据本发明的一方面,提供了一种将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法,所述图像处理方法包括:从与视频数据关联的元数据提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像,其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,用于将视频数据的帧划分为预定单元的信息可以是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息。
根据本发明的一方面,元数据可包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的帧将被输出为2D图像还是3D图像,输出视频数据的步骤可包括:通过使用镜头类型信息将被划分为该镜头的帧输出为2D图像或3D图像。
根据本发明的一方面,输出视频数据的步骤可包括:通过使用元数据,确定是否不能通过使用在当前帧之前的先前帧预测当前帧的背景构成因而将当前帧划分为新的镜头,在当前帧被划分为新的镜头时,将当前帧输出为2D图像;将被划分为新的镜头的帧的其余帧转换为3D图像并输出转换的3D图像。
根据本发明的一方面,输出视频数据的步骤可包括:通过使用元数据,确定是否不能通过使用在当前帧之前的先前帧预测当前帧的背景构成因而将当前帧划分为新的镜头;在当前帧被划分为新的镜头时,从元数据中提取应用于被划分为新的镜头的当前帧的背景深度信息;通过使用背景深度信息产生当前帧的深度图。
根据本发明的一方面,产生当前帧的深度图的步骤可包括:通过使用当前帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值产生当前帧的背景的深度图,其中,背景深度信息包括坐标点值、深度值和面板位置值。
根据本发明的一方面,图像处理方法还可包括:从记录有视频数据的盘读取元数据或通过通信网络从服务器下载元数据。
根据本发明的一方面,元数据可包括用于标识视频数据的标识信息,所述标识信息可包括盘标识符(ID)和标题ID,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于指示记录在由盘ID标识的盘中记录的多个标题中包括视频数据的标题。
根据本发明的另一方面,提供了一种图像产生方法,包括:接收作为二维(2D)图像的视频数据;产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括在被划分为该镜头的帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的帧中最后被输出的帧的输出时刻信息,和/或可包括指示被划分为该镜头的帧将被输出为2D图像还是三维(3D)图像的镜头类型信息。
根据本发明的一方面,元数据可包括被划分为预定镜头的帧的背景深度信息,背景深度信息可包括:被划分为预定镜头的帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值。
根据本发明的另一方面,提供了一种将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理设备,所述图像处理设备包括:元数据分析单元,通过使用与视频数据关联的元数据确定视频数据将被输出为2D图像还是3D图像;3D图像转换单元,当视频数据将被输出为3D图像时,将视频数据转换为3D图像;输出单元,将视频数据输出为2D图像或3D图像,其中,元数据包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,用于将视频数据的帧划分为预定单元的信息可以是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的一方面,镜头信息可包括:在被划分为该镜头的帧中首先被输出的帧的输出时刻信息和在被划分为该镜头的帧中最后被输出的帧的输出时刻信息。
根据本发明的一方面,元数据可包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的帧将被输出为2D图像还是3D图像。
根据本发明的一方面,元数据可包括被划分为预定镜头的帧的背景深度信息,背景深度信息可包括:被划分为预定镜头的帧的背景的坐标点值、与坐标点值对应的深度值和面板位置值。
根据本发明的另一方面,提供了一种图像产生设备,包括:视频数据编码单元,对作为二维(2D)图像的视频数据进行编码;元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息;元数据编码单元,对元数据进行编码,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种计算机可读信息存储介质,包括作为二维(2D)图像的视频数据和与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种其上记录有图像处理方法的程序的计算机可读信息存储介质,所述图像处理方法用于执行将作为二维(2D)图像的视频数据输出为2D图像或三维(3D)图像,所述图像处理方法包括:从与视频数据关联的元数据中提取关于视频数据的信息;通过使用提取的关于视频数据的信息将视频数据输出为2D图像或3D图像,其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
根据本发明的一方面,提供了一种将视频数据输出为二维(2D)图像或三维(3D)图像的系统,所述系统包括:图像产生设备和图像处理设备。所述图像产生设备包括:视频数据编码单元,对作为二维(2D)图像的视频数据进行编码;元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为3D图像的信息。所述图像处理设备包括:元数据分析单元,通过使用包含在接收的与视频数据关联的元数据中的用于对视频数据的帧划分的信息来确定视频数据将被输出为2D图像还是3D图像;3D图像转换单元,当元数据分析单元确定视频数据将被输出为3D图像时,将视频数据转换为3D图像;输出单元,根据元数据分析单元的确定将视频数据输出为2D图像或3D图像,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种计算机可读信息存储介质,包括:与包括二维(2D)帧的视频数据关联的元数据,所述元数据包括由图像处理设备用于将视频数据的帧划分为预定单元的信息以及由图像处理设备用于确定每个划分的帧是否将被图像处理设备转换为三维(3D)图像的信息,其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
根据本发明的另一方面,提供了一种用于将具有二维(2D)图像的视频数据输出为2D图像或三维(3D)图像的图像处理方法,所述图像处理方法包括:由图像处理设备确定与视频数据关联的元数据是否存在于包含所述视频数据的盘上;如果确定元数据存在于盘上,则由图像处理设备从盘中读取元数据;如果确定元数据不存在于盘上,则由图像处理设备从服务器检索元数据;由图像处理设备根据元数据选择性地将视频数据输出为2D图像或3D图像。
本发明的其他方面和/或优点将在以下说明中部分地阐述,通过说明部分地将是清楚的,或者可通过本发明的实践而得知。
发明模式
本申请要求于2008年6月24日提交到美国专利商标局的第61/075,184号美国临时申请的权益以及于2008年9月17日提交到韩国知识产权局的第10-2008-0091269号韩国专利申请的权益,其公开全部合并于此以资参考。
现在将详细地参照本发明的现有实施例,其示例在附图中示出,其中,相同的标号始终表示相同的元件。下面描述实施例以便通过参照附图解释本方发明。
图1是根据本发明实施例的图像产生设备100的框图。参照图1,图像产生设备100包括视频数据产生单元110、视频数据编码单元120、元数据产生单元130、元数据编码单元140和复用单元150。视频数据产生单元110产生视频数据并将产生的视频数据输出到视频数据编码单元120。视频数据编码单元120对输入的视频数据进行编码并将编码的视频数据(OUT1)输出到复用单元150,和/或通过通信网络将编码的视频数据(OUT1)输出到图像处理设备(未示出),但是应理解,视频数据编码单元120可通过任意的有线和/或无线连接(例如,IEEE1394、通用串行总线、蓝牙、红外等)将编码的视频数据输出到图像处理设备。图像产生设备100可以是计算机、工作站、相机装置、移动装置、独立装置等。此外,尽管不要求,单元110、120、130、140和150中的每一个可以是一个或多个芯片或集成电路上的一个或多个处理器或者处理元件。
元数据产生单元130分析由视频数据产生单元110产生的视频数据以产生包括与视频数据的帧有关的信息的元数据。元数据包括用于将产生的视频数据从二维(2D)图像转换为三维(3D)图像的信息。元数据还包括用于将视频数据的帧划分为预定单元的信息。将参照图2更详细地描述由元数据产生单元130产生的元数据。元数据产生单元130将产生的元数据输出到元数据编码单元140。
元数据编码单元140对输入的元数据进行编码并将编码的元数据(OUT3)输出到复用单元150和/或图像处理设备。复用单元150将编码的视频数据(OUT1)与编码的元数据(OUT3)进行复用,并通过如上所述的有线和/或无线通信网络或任意的有线和/或无线连接将复用结果(OUT2)发送到图像处理设备。元数据编码单元140除了将编码的元数据(OUT3)和编码的视频数据(OUT1)发送到复用单元150,或者作为替代方式,还可将编码的元数据(OUT3)与编码的视频数据(OUT1)分开地发送到图像处理设备。以这种方式,图像产生设备100产生与视频数据关联的元数据,所述元数据包括用于将视频数据从2D图像转换为3D图像的信息。
图2示出由图1中示出的图像产生设备100产生的元数据。元数据包括关于视频数据的信息。为了指示包括在元数据中的信息与哪个视频数据关联,用于标识视频数据被记录在哪个盘中的盘标识信息被包括在元数据中,但是应理解,在其他实施例中,元数据不包括盘标识信息。盘标识信息可包括盘标识符(ID)和标题ID,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于标识在由盘ID标识的盘中记录的多个标题中包括视频数据的标题。
由于视频数据具有一系列帧,因此元数据包括关于帧的信息。关于帧的信息可包括用于根据预定标准对帧进行划分的信息。假设一组相似的帧是一个单元,视频数据的全部帧可被划分为多个单元。在本实施例中,用于将视频数据的帧划分为预定单元的信息被包括在元数据中。具体地,具有相似背景构成的一组帧被划分为一个镜头(shot),在相似的背景构成中,可通过使用在当前帧之前的先前帧来预测当前帧的背景构成。元数据产生单元130将视频数据的帧划分为预定的镜头并将关于该镜头的信息(即,镜头信息)并入元数据中。当由于帧背景构成的明显改变使得当前帧的背景构成与先前帧的背景构成不同时,可将当前帧和先前帧划分为不同的镜头。
镜头信息包括与被划分在该镜头内的输出帧相关的时刻的信息。例如,这样的信息包括在被划分为每个镜头的帧中首先被输出的帧的输出时刻信息(图2中的镜头开始时刻信息)和被最后输出的帧的输出时刻信息(图2中的镜头结束时刻信息),但是本发明的各方面不限于此。例如,根据另外的方面,镜头信息包括镜头开始时刻信息和与在该镜头中包含的多个帧相关的信息。元数据还包括与被划分为该镜头的帧有关的镜头类型信息。镜头类型信息为每个镜头指示被划分为镜头的帧将被输出为2D图像还是3D图像。元数据还包括背景深度信息,将参照图3A到图3C进行详细描述。
图3A到图3C是用于解释通过使用背景深度信息产生的深度图的示图。图3A示出2D图像,图3B示出应用于图3A中示出的2D图像的深度图,图3C示出将深度图应用于2D图像的结果。为了将立体效果加入2D图像,为2D图像赋予深度感。当用户观看屏幕时,投影到屏幕上的图像形成于用户的双眼的每个眼睛中。形成于眼中的图像的两点之间的距离被称为视差,视差可被划分为正视差、零视差和负视差。正视差指的是与图像看上去形成于屏幕内的情况对应的视差,正视差小于或等于两眼之间的距离。随着正视差增加,由于图像看上去位于屏幕之后而产生更立体的效果。当图像看上去二维地形成在屏幕平面上时,视差为0(即,零视差)。在零视差的情况下,由于图像形成于屏幕平面上,用户不能感觉到立体效果。负视差指的是与图像看上去位于屏幕之前的情况对应的视差。当用户的视线交叉时产生该视差。负视差产生由于图像看上去向前凸出的立体效果。
为了通过将深度感加入2D图像来产生3D图像,可通过使用先前帧预测当前帧的运动并可通过使用预测的运动将深度感加入当前帧的图像。为了同样的目的,可通过使用帧的构成来产生帧的深度图,并通过使用深度图将深度感加入帧。将参照图4详细描述前者,并将参照图5详细描述后者。
如上所述,元数据包括用于将视频数据的帧划分为预定镜头的信息。当由于当前帧和先前帧之间的构成不具有相似性而不能通过使用先前帧来预测当前帧的构成时,将当前帧和先前帧划分为不同的镜头。元数据包括与将应用于由于帧的构成的相似性而被划分为一个镜头的帧的构成有关的信息和/或包括与将应用于每个镜头的构成有关的信息。
帧的背景构成可变化。元数据包括用于指示相应帧的构成的背景深度信息。背景深度信息可包括:帧中所包含的背景的类型信息、背景的坐标点信息和与坐标点相应的背景的深度值。背景的类型信息可以是指示多个构成中的背景的构成的ID。
参照图3A,帧包括背景,该背景包括地面和天空。在此帧中,地面和天空相接的水平线对于观看者的视角是最远点,与地面的底部相应的图像对于观看者的视角是最近点。图像产生设备100确定图3B中示出的类型的构成将应用于图3A中示出的帧,并产生元数据,该元数据包括为图3A中示出的帧指示图3B中示出的构成的类型信息。
坐标点值指的是2D图像中的预定位置的坐标点的值。深度值指的是图像的深度的程度。在本发明的各方面,深度值可以是范围从0到255的256个值中的一个。随着深度值减小,深度变大从而图像看上去远离观看者。相反,随着深度值增大,图像看上去靠近观看者。参照图3B和图3C,可以看出,在该帧中,地面和天空交接的部分(即,水平线部分)具有最小的深度值,地面的底部具有最大的深度值。图像处理设备(未示出)提取包括在元数据中的背景深度信息,通过使用提取的深度信息产生如图3C所示的深度图,并通过使用深度图将2D图像输出为3D图像。
图4是根据本发明实施例的图像处理设备400的框图。参照图4,图像处理设备400包括视频数据解码单元410、元数据分析单元420、3D图像转换单元430和将3D图像输出到屏幕的输出单元440。然而,应理解图像处理设备400不必在所有实施例中都包括输出单元440,和/或输出单元440可设置为与图像处理设备400分离。此外,图像处理设备400可以是计算机、移动装置、机顶盒、工作站等。输出单元440可以是阴极射线管装置、液晶显示装置、等离子显示装置、有机发光二极管显示装置等,和/或通过有线和/或无线协议连接到上述装置和/或连接到护目镜(goggle)。
视频数据解码单元410从盘(例如DVD、蓝光等)、本地存储、从图1的图像产生装置100发送的或任意外部存储装置(例如,硬盘驱动器、闪存等)读取视频数据(IN2),并对读取的视频数据进行解码。元数据分析单元420对元数据(IN3)进行解码以从元数据中提取与读取的视频数据的帧有关的信息,并分析提取的信息。通过使用元数据,元数据分析单元420控制包括在3D图像转换单元430中的开关单元433以便将帧作为2D图像或3D图像输出。元数据分析单元420从盘、本地存储、从图1的图像产生装置100发送的或任意外部存储装置(例如,硬盘驱动器、闪存等)接收元数据IN3。在本发明的所有方面,元数据不必与视频数据一起存储。
3D图像转换单元430将接收自视频数据解码单元410的视频数据从2D图像转换为3D图像。在图4中,3D图像转换单元430通过使用先前帧估计当前帧的运动以产生当前帧的3D图像。
元数据分析单元420从元数据中提取在被划分为一个镜头的帧中被首先输出的帧的输出时刻信息和/或被最后输出的帧的输出时刻信息,并基于提取的输出时刻信息确定是否将目前正由视频数据解码单元410解码的当前帧划分为新的镜头,当元数据分析单元420确定极爱能够当前帧划分为新的镜头时,元数据分析单元420控制开关单元433以便不将当前帧转换为3D图像,从而使运动估计单元434不通过使用存储在先前帧存储单元432中的先前帧来估计当前帧的运动。这是因为通过参照先前帧提取了当前帧的运动信息以便将视频数据从2D图像转换为3D图像。然而,如果当前帧和先前帧被划分为不同的镜头,则当前帧和先前帧之间不具有足够的相似度,因而不能通过使用先前帧预测当前帧的构成。如所示,开关单元433断开与存储单元432的连接以阻止使用先前帧,但是本发明的各方面不限于此。
当视频数据没有被转换为3D图像(例如,当视频数据是警告词句、菜单屏幕、结束广告等)时,元数据包括指示视频数据的帧将被输出为2D图像的镜头类型信息。元数据分析单元420使用镜头类型信息为每个镜头确定视频数据将被输出为2D图像还是3D图像,并根据确定的结果控制开关单元433。具体地,当元数据分析单元420基于镜头类型信息确定被划分为预定镜头的视频数据将不被转换为3D图像时,元数据分析单元420控制开关单元433将存储单元432从运动估计单元434断开,从而使3D图像转换单元430不通过使用先前帧来估计当前帧的运动。当元数据分析单元420基于镜头类型信息确定被划分为预定镜头的视频数据将被转换为3D图像时,元数据分析单元420控制开关单元433将存储单元432与运动估计单元434连接,从而使图像转换单元430通过使用先前帧来将当前帧转换为3D图像。
当视频数据被划分为预定镜头并将被输出为3D图像时,3D图像转换单元430将接收自视频数据解码单元410的作为2D图像的视频数据转换为3D图像。3D图像转换单元430包括图像分块单元431、先前帧存储单元432、运动估计单元434、块合成单元435、左/右视角图像确定单元436和开关单元433。图像分块单元431将作为2D图像的视频数据的帧划分为预定大小的块。先前帧存储单元432存储在当前帧之前的预定数量的先前帧。在元数据分析单元420的控制下,开关单元433启用或停止将存储在先前帧存储单元432中的先前帧输出到运动估计单元434。
运动估计单元434使用当前帧的块和先前帧的块来获得关于运动的量和方向的每块的运动向量。块合成单元435对从先前帧的预定块中使用由运动估计单元434获得的运动向量选择的块进行合成,以便产生新的帧。当运动估计单元434由于元数据分析单元420对开关单元33的控制而不使用先前帧时,运动估计单元434将接收自图像分块单元431的当前帧输出到块合成单元435。
产生的新的帧或当前帧被输入到左/右视角图像确定单元436。左/右视角图像确定单元436通过使用从块合成单元435接收的帧和从视频数据解码单元410接收的帧来确定左视角图像和右视角图像。当元数据分析单元420控制开关单元433不将视频数据转换为3D图像时,左/右视角图像确定单元436通过使用从块合成单元435接收的具有2D图像的帧和从视频数据解码单元410接收的具有2D图像的帧,来产生彼此相同的左视角图像和右视角图像。左/右视角图像确定单元436将左视角图像和右视角图像输出到输出单元440、外部输出装置和/或外部终端(例如,计算机、外部显示装置、服务器等)。
图像处理设备400还包括输出单元440,用于将由左/右视角图像确定单元436确定的左视角图像和右视角图像(OUT2)以至少1/120秒的间隔交替地输出到屏幕。同样,通过使用包括在元数据中的镜头信息,根据本发明实施例的图像处理设备400根据基于在元数据中提供的镜头信息的确定,不转换与镜头改变点相应的视频数据,或者不转换不需要3D图像转换的图像数据,从而减少了设备400的不必要的计算和复杂度。虽然不要求,但是可通过有线和/或无线协议在接收单元接收输出图像OUT2,通过所述接收单元(例如,护目镜)用户观看屏幕。
图5是根据本发明另一实施例的图像处理设备500的框图。参照图5,图像处理设备500包括视频数据解码单元510、元数据分析单元520、3D图像转换单元530和输出单元540。然而,应理解,图像处理设备500不必在所有实施例中包括输出单元540,和/或输出单元可被设置为与图像处理设备500分离。此外,图像处理设备500可以是计算机、移动装置、机顶盒、工作站等。输出单元540可以是阴极射线管装置、液晶显示装置、等离子显示装置、有机发光二极管显示装置等,和/或可通过有线和/或无线协议连接到上述装置或连接到护目镜。此外,尽管不要求,但是单元510、520和530中的每一个可以是一个或多个芯片或集成电路上的一个或多个处理器或处理元件。
当作为2D图像的视频数据以及与该视频数据关联的元数据以复用状态或彼此分离地被记录在盘(未示出)中时,一旦将记录有视频数据和元数据的盘加载到图像处理设备500中时,视频数据解码单元510和元数据分析单元520从加载的盘读取视频数据(IN4)和元数据(IN5)。元数据可被记录在盘的导入区、用户数据区和/或导出区。然而,应理解,本发明的各方面不限于从盘接收视频数据和元数据。例如,根据其他方面,图像处理设备500还可包括通信单元(未示出),用于与外部服务器或外部终端通信(例如,通过通信网络和/或任意的有线/无线连接)。图像处理设备500可从外部服务器或外部终端下载视频数据和/或与其关联的元数据,并将下载的数据存储在本地存储(未示出)中。此外,图像处理设备500可从不同于盘的任意的外部存储装置(例如,闪存)接收视频数据和/或元数据。
视频数据解码单元510从盘、外部存储装置、外部终端或本地存储读取视频数据,并对读取的视频数据进行解码。元数据分析单元520从盘外部存储装置、外部终端或本地存储读取与视频数据关联的元数据,并分析读取的元数据。当视频数据被记录在盘中时,元数据分析单元520从元数据中提取盘ID和标题ID,并通过使用提取的盘ID和标题ID确定元数据与哪些视频数据关联,所述盘ID用于标识记录有视频数据的盘,所述标题ID用于指示盘中的多个标题中包括视频数据的标题。
元数据分析单元520分析元数据以提取与被划分为预定镜头的视频数据的帧有关的信息。元数据分析单元520确定当前帧是否是与镜头改变点相应的视频数据(即,被划分为新的镜头),以控制深度图产生单元531。元数据分析单元520通过使用镜头类型信息确定被划分为预定镜头的帧将被输出为2D图像还是3D图像,并根据确定的结果来控制深度图产生单元531。此外,元数据分析单元520从元数据中提取深度信息并将深度信息输出到深度图产生单元531。
3D图像转换单元530产生视频数据的3D图像。3D图像转换单元530包括深度图产生单元531和立体渲染单元533。深度图产生单元531通过使用从元数据分析单元520接收的背景深度信息来产生帧的深度图。背景深度信息包括当前帧所包含的背景的坐标点值、与坐标点值相应的深度值和表示输出图像的屏幕的深度值的面板位置值。深度图产生单元531通过使用背景深度信息来产生当前帧的背景的深度图并将产生的深度图输出到立体渲染单元533。然而,在当前帧将被输出为2D图像时,深度图产生单元531将当前帧输出到立体渲染单元533而不产生当前帧的深度图。
立体渲染单元533通过使用从视频数据解码单元510接收的视频数据和从深度图产生单元531接收的深度图来产生左视角图像和右视角图像。因此,立体渲染单元533产生包括产生的左视角图像和产生的右视角图像的3D格式图像。在当前帧将被输出为2D图像时,从深度图产生单元531接收的帧与从视频数据解码单元510接收的帧彼此相同,因此由立体渲染单元533产生的左视角图像和右视角图像也彼此相同。3D格式可以是上下格式、并排格式或交错格式。立体渲染单元533将左视角图像和右视角图像输出到输出单元540、外部输出装置和/或外部终端(例如,计算机、外部显示装置、服务器等)。
在本实施例中,图像处理设备500还包括作为输出装置工作的输出单元540。在这种情况下,输出单元540将从立体渲染单元533接收的左视角图像和右视角图像顺序地输出到屏幕。当图像以如单眼观看的至少60Hz的帧速率被输出时,观看者感觉图像被顺序和无缝地再现。因此,输出单元540以至少120Hz的帧速率输出屏幕,从而观看者可感觉到3D图像被无缝地再现。因此,输出单元540以至少1/120秒的间隔顺序地将包括在帧中的左视角图像和右视角图像(OUT3)输出到屏幕。观看者可使用使眼睛交替接收图像的护目镜和/或使用偏振光将他/她的视线选择性的遮挡。
图6是示出根据本发明实施例的图像处理方法的流程图。参照图6,在操作610,图像处理设备400或500确定是否存在与读取的视频数据关联的元数据。例如,当在盘上提供视频数据和元数据并且盘被加载,图像处理设备400或500被指令输出加载的盘的预定标题时,在操作610,图像处理设备400或500通过使用盘ID和标题ID来确定与标题关联的元数据是否存在于盘中。如果图像处理设备400或500确定盘中不具有元数据,则在操作620,图像处理设备400或500可通过通信网络从外部服务器等下载元数据。以这种方式,可通过仅下载相应的元数据,现有的视频(例如,DVD和蓝光盘上的电影或计算机游戏)可变为3D。可替换地,盘可仅包含元数据,当选择了特定视频的元数据时,从服务器下载视频。
在操作630,图像处理设备400或500从与视频数据关联的元数据中提取关于视频数据被划分的单元的信息。如前面所述,在本发明的某些方面中,关于单元的信息可以是关于镜头的信息(即,镜头信息)。镜头信息指示当前帧是否被划分为与先前帧相同的镜头,并且可包括指示当前帧将被输出为2D图像还是3D图像的镜头类型信息。图像处理设备400或500通过使用镜头信息确定是将帧输出为2D图像还是3D图像,并在操作640根据确定的结果将被分类为预定镜头的帧输出为2D图像或3D图像。
图7是详细示出图6的操作640的流程图。参照图7,在操作710,当输出视频数据时,图像处理设备400或500确定当前帧是否具有与先前帧不同的构成并且因此将当前帧划分为新的镜头。当图像处理设备400或500确定当前帧被划分为新的镜头时,在操作720,图像处理设备400或500将包括在新的镜头中的初始帧输出为2D图像而不将该初始帧转换为3D图像。
在操作730,图像处理设备400或500通过使用在元数据中提供的关于新的镜头的镜头类型信息,确定将被划分为新的镜头的所有帧中的初始帧之后的其余帧输出为2D图像还是3D图像。当关于新的镜头的镜头类型信息指示被划分为新的镜头的视频数据将被输出为3D图像时,在操作740,图像处理设备400或500将被划分为新的镜头的视频数据转换为3D图像。具体地,在操作740,图像处理设备400或500从转换为3D图像的视频数据和作为2D图像的视频数据确定左视角图像和右视角图像,并将被划分为新的镜头的视频数据输出为3D图像。当图像处理设备400或500通过使用如图5所示的构成信息来产生3D图像时,图像处理设备500从元数据中提取将应用于被划分为新的镜头的当前帧的背景深度信息,并通过使用背景深度信息来产生当前帧的深度图。
当关于新的镜头的镜头类型信息指示被划分为新的镜头的视频数据将被输出为2D图像(操作730)时,在操作750,图像处理设备400或500将视频数据输出为2D图像而不将视频数据转换为3D图像。在操作760,图像处理设备400或500确定全部视频数据是否已完全被输出。如果否,则图像处理设备400或500重复操作710。
以这种方式,根据本发明的各方面,通过使用包括在元数据中的镜头信息,可在镜头改变点将视频数据输出为2D图像。此外,根据本发明的实施例,为每个镜头确定将视频数据输出为2D图像还是3D图像,并根据确定的结果输出视频数据,从而减少了由于将全部视频数据转换为3D图像而可能增加的计算量。
虽然不限于此,但是本发明的各方面还可被实施为计算机可读记录介质上的计算机可读代码。计算机可读记录介质可以是能够存储其后由计算机系统读取的数据的任意数据存储装置。计算机可读记录介质的示例包括:只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储装置。计算机可读记录介质还可分布于联网的计算机系统,从而以分布的方式存储和执行计算机可读代码。本发明的各方面还可被实现为以载波实施的包括可由计算机读取并可通过互联网发送的程序的数据信号。此外,尽管没有在所有方面中要求,图像处理设备400和500的一个或多个单元可包括执行存储在计算机可读介质(诸如本地存储(未示出))中的计算机程序的处理器或微处理器。此外,应理解,在某些实施例中,图像产生设备100和图像处理设备400或500可被设置在单个设备中。
虽然已经示出和描述了本发明的若干实施例,但是本领域的技术人员将理解,在不脱离本发明的原理和精神的情况下,可以对实施例做出各种改变,本发明的范围在权利要求及其等同物中限定。
Claims (15)
1.一种将具有二维图像的视频数据输出为二维图像或三维图像的图像处理方法,所述图像处理方法包括:
由图像处理设备从与视频数据关联的元数据中提取关于视频数据的信息;
由图像处理设备根据提取的关于视频数据的信息将视频数据输出为可在二维图像和三维图像之间选择,
其中,关于视频数据的信息包括用于将视频数据的帧划分为预定单元的信息。
2.如权利要求1所述的图像处理方法,其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
3.如权利要求2所述的图像处理方法,其中,镜头信息包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息和/或在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息。
4.如权利要求2所述的图像处理方法,其中:
元数据包括镜头类型信息,所述镜头类型信息指示被划分为该镜头的一组帧将被输出为二维图像还是三维图像;
输出视频数据的步骤包括:根据镜头类型信息将被划分为该镜头的一组帧输出为二维图像或三维图像。
5.如权利要求2所述的图像处理方法,其中,输出视频数据的步骤包括:
根据元数据,当不能通过使用先前帧预测当前帧的背景构成时,确定当前帧被划分为与当前帧之前的先前帧不同的新的镜头;
当当前帧被划分为新的镜头时,将当前帧输出为二维图像;
将被划分为新的镜头的一组帧的其他帧转换为三维图像并输出转换的三维图像。
6.如权利要求2所述的图像处理方法,其中,输出视频数据的步骤包括:
根据元数据,当不能通过使用先前帧预测当前帧的背景构成时,确定当前帧被划分为与当前帧之前的先前帧不同的新的镜头;
当当前帧被划分为新的镜头时,从元数据中提取将应用于被划分为新的镜头的当前帧的背景深度信息;
当当前帧被划分为新的镜头时,通过使用背景深度信息产生当前帧的深度图。
7.如权利要求6所述的图像处理方法,其中:
背景深度信息包括:当前帧的背景的坐标点值、与坐标点值分别对应的深度值和面板位置值;
产生当前帧的深度图的步骤包括:通过使用坐标点值、深度值和表示输出屏幕的深度值的面板位置值来产生当前帧的背景的深度图。
8.如权利要求1所述的图像处理方法,还包括:从记录有视频数据的盘读取元数据或通过通信网络从服务器下载元数据。
9.如权利要求1所述的图像处理方法,其中,元数据包括用于标识视频数据的标识信息,所述标识信息包括盘标识符和标题标识符,所述盘标识符用于标识记录有视频数据的盘,所述标题标识符用于指示记录在由盘标识符标识的盘中的多个标题中包括视频数据的标题。
10.一种图像产生方法,包括:
由图像产生设备接收作为二维图像的视频数据;
由图像产生设备产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为三维图像的信息,
其中,用于将视频数据的帧划分为预定单元的信息是用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
11.如权利要求10所述的图像产生方法,其中,镜头信息包括:在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息、在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息和/或指示被划分为该镜头的一组帧将被输出为二维图像还是三维图像的镜头类型信息。
12.如权利要求10所述的图像产生方法,其中:
元数据还包括被划分为预定镜头的一组帧的背景深度信息;
背景深度信息包括:被划分为预定镜头的一组帧的背景的坐标点值、与坐标点值对应的深度值和表示输出屏幕的深度值的面板位置值。
13.一种将具有二维图像的视频数据输出为二维图像或三维图像的图像处理设备,所述图像处理设备包括:
元数据分析单元,通过使用与视频数据关联的元数据来确定视频数据将被输出为二维图像还是三维图像;
三维图像转换单元,当元数据分析单元确定视频数据将被输出为三维图像时,将视频数据转换为三维图像;
输出单元,根据元数据分析单元的确定将视频数据输出为二维图像或三维图像,
其中,元数据包括用于将视频数据的帧划分为预定单元的信息。
14.一种图像产生设备,包括:
视频数据编码单元,对作为二维图像的视频数据进行编码;
元数据产生单元,产生与视频数据关联的元数据,所述元数据包括用于将视频数据的帧划分为预定单元的信息以及用于确定每个划分的帧是否将被转换为三维图像的信息;
元数据编码单元,对元数据进行编码,
其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成。
15.一种计算机可读信息存储介质,包括:
记录为二维图像的视频数据;
与视频数据关联的元数据,所述元数据包括由图像处理设备用于将视频数据的帧划分为预定单元的信息以及由图像处理设备用于确定每个划分的帧是否将被图像处理设备转换为三维图像的信息,
其中,用于将视频数据的帧划分为预定单元的信息包括用于将一组帧划分为一个镜头的镜头信息,在所述一组帧中,通过使用在当前帧之前的先前帧可预测当前帧的背景构成,
其中,镜头信息包括在被划分为该镜头的一组帧中首先被输出的帧的输出时刻信息、在被划分为该镜头的一组帧中最后被输出的帧的输出时刻信息和/或指示被划分为该镜头的一组帧将被输出为2D图像还是3D图像的镜头类型信息。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US7518408P | 2008-06-24 | 2008-06-24 | |
US61/075,184 | 2008-06-24 | ||
KR10-2008-0091269 | 2008-09-17 | ||
KR1020080091269A KR20100002032A (ko) | 2008-06-24 | 2008-09-17 | 영상 생성 방법, 영상 처리 방법, 및 그 장치 |
PCT/KR2009/003383 WO2009157701A2 (en) | 2008-06-24 | 2009-06-24 | Image generating method and apparatus and image processing method and apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102067615A true CN102067615A (zh) | 2011-05-18 |
CN102067615B CN102067615B (zh) | 2015-02-25 |
Family
ID=41812276
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009801242749A Pending CN102077600A (zh) | 2008-06-24 | 2009-06-17 | 输出和显示图像数据的方法和设备 |
CN200980123462.XA Expired - Fee Related CN102067613B (zh) | 2008-06-24 | 2009-06-24 | 用于处理3d视频图像的方法和设备 |
CN200980123638.1A Expired - Fee Related CN102067614B (zh) | 2008-06-24 | 2009-06-24 | 处理三维视频数据的方法和设备 |
CN200980123639.6A Expired - Fee Related CN102067615B (zh) | 2008-06-24 | 2009-06-24 | 图像产生方法和设备以及图像处理方法和设备 |
Family Applications Before (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2009801242749A Pending CN102077600A (zh) | 2008-06-24 | 2009-06-17 | 输出和显示图像数据的方法和设备 |
CN200980123462.XA Expired - Fee Related CN102067613B (zh) | 2008-06-24 | 2009-06-24 | 用于处理3d视频图像的方法和设备 |
CN200980123638.1A Expired - Fee Related CN102067614B (zh) | 2008-06-24 | 2009-06-24 | 处理三维视频数据的方法和设备 |
Country Status (7)
Country | Link |
---|---|
US (6) | US20090315884A1 (zh) |
EP (4) | EP2292019A4 (zh) |
JP (4) | JP2011525743A (zh) |
KR (9) | KR20100002032A (zh) |
CN (4) | CN102077600A (zh) |
MY (1) | MY159672A (zh) |
WO (4) | WO2009157668A2 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104143308A (zh) * | 2014-07-24 | 2014-11-12 | 京东方科技集团股份有限公司 | 一种三维图像的显示方法及装置 |
CN106982367A (zh) * | 2017-03-31 | 2017-07-25 | 联想(北京)有限公司 | 视频传输方法及其装置 |
Families Citing this family (208)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11792538B2 (en) | 2008-05-20 | 2023-10-17 | Adeia Imaging Llc | Capturing and processing of images including occlusions focused on an image sensor by a lens stack array |
KR101733443B1 (ko) | 2008-05-20 | 2017-05-10 | 펠리칸 이매징 코포레이션 | 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리 |
US8866920B2 (en) | 2008-05-20 | 2014-10-21 | Pelican Imaging Corporation | Capturing and processing of images using monolithic camera array with heterogeneous imagers |
US8520979B2 (en) | 2008-08-19 | 2013-08-27 | Digimarc Corporation | Methods and systems for content processing |
US20100045779A1 (en) * | 2008-08-20 | 2010-02-25 | Samsung Electronics Co., Ltd. | Three-dimensional video apparatus and method of providing on screen display applied thereto |
JP2010062695A (ja) * | 2008-09-02 | 2010-03-18 | Sony Corp | 画像処理装置、および画像処理方法、並びにプログラム |
JP2010088092A (ja) * | 2008-09-02 | 2010-04-15 | Panasonic Corp | 立体映像伝送システム、映像表示装置および映像出力装置 |
WO2010028107A1 (en) * | 2008-09-07 | 2010-03-11 | Dolby Laboratories Licensing Corporation | Conversion of interleaved data sets, including chroma correction and/or correction of checkerboard interleaved formatted 3d images |
US20110234754A1 (en) * | 2008-11-24 | 2011-09-29 | Koninklijke Philips Electronics N.V. | Combining 3d video and auxiliary data |
WO2010064784A2 (ko) * | 2008-12-02 | 2010-06-10 | (주)엘지전자 | 3차원 캡션 디스플레이 방법 및 이를 구현하기 위한 3차원 디스플레이 장치 |
BRPI0917764B1 (pt) * | 2008-12-19 | 2021-03-16 | Koninklijke Philips N.V. | método de decodificação e envio de informação de vídeo adequado para apresentação tridimensional [3d] e dispositivo para decodificação e envio de informação de vídeo adequado para monitor tridimensional [3d] |
US9269154B2 (en) * | 2009-01-13 | 2016-02-23 | Futurewei Technologies, Inc. | Method and system for image processing to classify an object in an image |
KR20100112940A (ko) * | 2009-04-10 | 2010-10-20 | 엘지전자 주식회사 | 데이터 처리방법 및 수신 시스템 |
US9215435B2 (en) | 2009-06-24 | 2015-12-15 | Dolby Laboratories Licensing Corp. | Method for embedding subtitles and/or graphic overlays in a 3D or multi-view video data |
TW201119353A (en) | 2009-06-24 | 2011-06-01 | Dolby Lab Licensing Corp | Perceptual depth placement for 3D objects |
WO2011006104A1 (en) * | 2009-07-10 | 2011-01-13 | Dolby Laboratories Licensing Corporation | Modifying images for a 3-dimensional display mode |
JP2011029849A (ja) * | 2009-07-23 | 2011-02-10 | Sony Corp | 受信装置、通信システム、立体画像への字幕合成方法、プログラム、及びデータ構造 |
KR101716636B1 (ko) * | 2009-07-27 | 2017-03-15 | 코닌클리케 필립스 엔.브이. | 3d 비디오 및 보조 데이터의 결합 |
KR20110013693A (ko) | 2009-08-03 | 2011-02-10 | 삼성모바일디스플레이주식회사 | 유기 전계발광 표시장치 및 그의 구동방법 |
KR101056281B1 (ko) * | 2009-08-03 | 2011-08-11 | 삼성모바일디스플레이주식회사 | 유기 전계발광 표시장치 및 그의 구동방법 |
JP5444955B2 (ja) * | 2009-08-31 | 2014-03-19 | ソニー株式会社 | 立体画像表示システム、視差変換装置、視差変換方法およびプログラム |
US8614737B2 (en) * | 2009-09-11 | 2013-12-24 | Disney Enterprises, Inc. | System and method for three-dimensional video capture workflow for dynamic rendering |
US20110063298A1 (en) * | 2009-09-15 | 2011-03-17 | Samir Hulyalkar | Method and system for rendering 3d graphics based on 3d display capabilities |
US8988495B2 (en) * | 2009-11-03 | 2015-03-24 | Lg Eletronics Inc. | Image display apparatus, method for controlling the image display apparatus, and image display system |
JP2011109398A (ja) * | 2009-11-17 | 2011-06-02 | Sony Corp | 画像送信方法、画像受信方法、画像送信装置、画像受信装置及び画像伝送システム |
EP2502115A4 (en) | 2009-11-20 | 2013-11-06 | Pelican Imaging Corp | RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER |
JP5502436B2 (ja) * | 2009-11-27 | 2014-05-28 | パナソニック株式会社 | 映像信号処理装置 |
CN102474632A (zh) * | 2009-12-08 | 2012-05-23 | 美国博通公司 | 处理多个3-d视频格式的方法和系统 |
TWI491243B (zh) * | 2009-12-21 | 2015-07-01 | Chunghwa Picture Tubes Ltd | 影像處理方法 |
JP2011139261A (ja) * | 2009-12-28 | 2011-07-14 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
KR20120123087A (ko) * | 2010-01-13 | 2012-11-07 | 톰슨 라이센싱 | 3d 텍스트를 3d 콘텐츠와 결합하기 위한 시스템 및 방법 |
JPWO2011086653A1 (ja) * | 2010-01-14 | 2013-05-16 | パナソニック株式会社 | 映像出力装置、映像表示システム |
WO2011091309A1 (en) * | 2010-01-21 | 2011-07-28 | General Instrument Corporation | Stereoscopic video graphics overlay |
EP2534844A2 (en) * | 2010-02-09 | 2012-12-19 | Koninklijke Philips Electronics N.V. | 3d video format detection |
US9025933B2 (en) * | 2010-02-12 | 2015-05-05 | Sony Corporation | Information processing device, information processing method, playback device, playback method, program and recording medium |
JP2011166666A (ja) * | 2010-02-15 | 2011-08-25 | Sony Corp | 画像処理装置、画像処理方法およびプログラム |
EP2537346B1 (en) | 2010-02-19 | 2019-01-23 | InterDigital Madison Patent Holdings | Stereo logo insertion |
KR101445777B1 (ko) * | 2010-02-19 | 2014-11-04 | 삼성전자 주식회사 | 재생 기기 및 그 제어방법 |
CN102771129A (zh) * | 2010-02-24 | 2012-11-07 | 汤姆森特许公司 | 立体图像的字幕加载 |
KR20110098420A (ko) * | 2010-02-26 | 2011-09-01 | 삼성전자주식회사 | 디스플레이장치 및 그 구동방법 |
US20110216083A1 (en) * | 2010-03-03 | 2011-09-08 | Vizio, Inc. | System, method and apparatus for controlling brightness of a device |
US9154814B2 (en) * | 2010-03-05 | 2015-10-06 | Google Technology Holdings LLC | Method and apparatus for converting two-dimensional video content for insertion into three-dimensional video content |
US9426441B2 (en) * | 2010-03-08 | 2016-08-23 | Dolby Laboratories Licensing Corporation | Methods for carrying and transmitting 3D z-norm attributes in digital TV closed captioning |
US8830300B2 (en) * | 2010-03-11 | 2014-09-09 | Dolby Laboratories Licensing Corporation | Multiscalar stereo video format conversion |
US8817072B2 (en) | 2010-03-12 | 2014-08-26 | Sony Corporation | Disparity data transport and signaling |
JP2011199388A (ja) * | 2010-03-17 | 2011-10-06 | Sony Corp | 再生装置、再生制御方法、およびプログラム |
JP2011217361A (ja) * | 2010-03-18 | 2011-10-27 | Panasonic Corp | 立体映像再生装置、立体映像再生方法、及び集積回路 |
KR20110107151A (ko) * | 2010-03-24 | 2011-09-30 | 삼성전자주식회사 | 휴대 단말기의 입체 영상 처리 방법 및 장치 |
WO2011118215A1 (ja) * | 2010-03-24 | 2011-09-29 | パナソニック株式会社 | 映像処理装置 |
JP5526929B2 (ja) * | 2010-03-30 | 2014-06-18 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにプログラム |
SG10201502669RA (en) * | 2010-04-12 | 2015-05-28 | Fortem Solutions Inc | Camera projection meshes |
EP2547101A4 (en) * | 2010-04-14 | 2013-12-18 | Samsung Electronics Co Ltd | METHOD AND DEVICE FOR PRODUCING A BROADCASTING BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES AND METHOD AND DEVICE FOR RECEIVING A BROADBAND RADIO BITSTREAM FOR DIGITAL BROADCASTING WITH SUBTITLES |
US9237366B2 (en) | 2010-04-16 | 2016-01-12 | Google Technology Holdings LLC | Method and apparatus for distribution of 3D television program materials |
US20110255003A1 (en) * | 2010-04-16 | 2011-10-20 | The Directv Group, Inc. | Method and apparatus for presenting on-screen graphics in a frame-compatible 3d format |
KR101697184B1 (ko) | 2010-04-20 | 2017-01-17 | 삼성전자주식회사 | 메쉬 생성 장치 및 그 방법, 그리고, 영상 처리 장치 및 그 방법 |
US9414042B2 (en) * | 2010-05-05 | 2016-08-09 | Google Technology Holdings LLC | Program guide graphics and video in window for 3DTV |
KR20120119927A (ko) * | 2010-05-11 | 2012-11-01 | 삼성전자주식회사 | 무선 충전이 가능한 3d 안경 및 무선전력전송 시스템 |
US20120012748A1 (en) | 2010-05-12 | 2012-01-19 | Pelican Imaging Corporation | Architectures for imager arrays and array cameras |
KR101082234B1 (ko) * | 2010-05-13 | 2011-11-09 | 삼성모바일디스플레이주식회사 | 유기전계발광 표시장치 및 그의 구동방법 |
JP2011249895A (ja) * | 2010-05-24 | 2011-12-08 | Panasonic Corp | 信号処理システム及び信号処理装置 |
US20110292038A1 (en) * | 2010-05-27 | 2011-12-01 | Sony Computer Entertainment America, LLC | 3d video conversion |
KR101699875B1 (ko) | 2010-06-03 | 2017-01-25 | 엘지디스플레이 주식회사 | 3d 액정 표시장치 및 구동방법 |
US9030536B2 (en) | 2010-06-04 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus and method for presenting media content |
JP5682149B2 (ja) * | 2010-06-10 | 2015-03-11 | ソニー株式会社 | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
US8402502B2 (en) | 2010-06-16 | 2013-03-19 | At&T Intellectual Property I, L.P. | Method and apparatus for presenting media content |
US9053562B1 (en) | 2010-06-24 | 2015-06-09 | Gregory S. Rabin | Two dimensional to three dimensional moving image converter |
US8593574B2 (en) | 2010-06-30 | 2013-11-26 | At&T Intellectual Property I, L.P. | Apparatus and method for providing dimensional media content based on detected display capability |
US9787974B2 (en) | 2010-06-30 | 2017-10-10 | At&T Intellectual Property I, L.P. | Method and apparatus for delivering media content |
US8640182B2 (en) | 2010-06-30 | 2014-01-28 | At&T Intellectual Property I, L.P. | Method for detecting a viewing apparatus |
KR101645404B1 (ko) | 2010-07-06 | 2016-08-04 | 삼성디스플레이 주식회사 | 유기 전계발광 표시장치 |
US8918831B2 (en) * | 2010-07-06 | 2014-12-23 | At&T Intellectual Property I, Lp | Method and apparatus for managing a presentation of media content |
JP5609336B2 (ja) * | 2010-07-07 | 2014-10-22 | ソニー株式会社 | 画像データ送信装置、画像データ送信方法、画像データ受信装置、画像データ受信方法および画像データ送受信システム |
US9049426B2 (en) | 2010-07-07 | 2015-06-02 | At&T Intellectual Property I, Lp | Apparatus and method for distributing three dimensional media content |
KR101279660B1 (ko) * | 2010-07-07 | 2013-06-27 | 엘지디스플레이 주식회사 | 입체영상 표시장치 및 그 구동방법 |
US8848038B2 (en) * | 2010-07-09 | 2014-09-30 | Lg Electronics Inc. | Method and device for converting 3D images |
US9032470B2 (en) | 2010-07-20 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus for adapting a presentation of media content according to a position of a viewing apparatus |
US9232274B2 (en) | 2010-07-20 | 2016-01-05 | At&T Intellectual Property I, L.P. | Apparatus for adapting a presentation of media content to a requesting device |
US9560406B2 (en) | 2010-07-20 | 2017-01-31 | At&T Intellectual Property I, L.P. | Method and apparatus for adapting a presentation of media content |
IT1401367B1 (it) * | 2010-07-28 | 2013-07-18 | Sisvel Technology Srl | Metodo per combinare immagini riferentesi ad un contenuto tridimensionale. |
US8994716B2 (en) | 2010-08-02 | 2015-03-31 | At&T Intellectual Property I, Lp | Apparatus and method for providing media content |
JPWO2012017687A1 (ja) * | 2010-08-05 | 2013-10-03 | パナソニック株式会社 | 映像再生装置 |
KR101674688B1 (ko) * | 2010-08-12 | 2016-11-09 | 엘지전자 주식회사 | 입체영상 재생 장치 및 입체영상 재생 방법 |
JP2012044625A (ja) * | 2010-08-23 | 2012-03-01 | Sony Corp | 立体画像データ送信装置、立体画像データ送信方法、立体画像データ受信装置および立体画像データ受信方法 |
US8438502B2 (en) | 2010-08-25 | 2013-05-07 | At&T Intellectual Property I, L.P. | Apparatus for controlling three-dimensional images |
KR101218815B1 (ko) * | 2010-08-26 | 2013-01-21 | 주식회사 티스마트 | 3d 사용자 인터페이스 처리방법 및 이를 이용하는 셋탑박스 |
US8994792B2 (en) * | 2010-08-27 | 2015-03-31 | Broadcom Corporation | Method and system for creating a 3D video from a monoscopic 2D video and corresponding depth information |
JP5058316B2 (ja) * | 2010-09-03 | 2012-10-24 | 株式会社東芝 | 電子機器、画像処理方法、及び画像処理プログラム |
EP2426931A1 (en) * | 2010-09-06 | 2012-03-07 | Advanced Digital Broadcast S.A. | A method and a system for determining a video frame type |
CN103262544A (zh) * | 2010-09-10 | 2013-08-21 | 青岛海信电器股份有限公司 | 3d电视界面的显示方法和装置 |
JP2012094111A (ja) * | 2010-09-29 | 2012-05-17 | Sony Corp | 画像処理装置、画像処理方法及びプログラム |
WO2012044272A1 (en) * | 2010-09-29 | 2012-04-05 | Thomson Licensing | Automatically switching between three dimensional and two dimensional contents for display |
US8947511B2 (en) | 2010-10-01 | 2015-02-03 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting three-dimensional media content |
JP5543892B2 (ja) * | 2010-10-01 | 2014-07-09 | 日立コンシューマエレクトロニクス株式会社 | 再生装置、再生方法、表示装置、及び表示方法 |
CN102447959A (zh) * | 2010-10-01 | 2012-05-09 | 日立民用电子株式会社 | 接收机 |
TWI420151B (zh) * | 2010-10-07 | 2013-12-21 | Innolux Corp | 顯示方法 |
KR101232086B1 (ko) * | 2010-10-08 | 2013-02-08 | 엘지디스플레이 주식회사 | 액정표시장치 및 그의 로컬디밍 제어방법 |
US20120092327A1 (en) * | 2010-10-14 | 2012-04-19 | Sony Corporation | Overlaying graphical assets onto viewing plane of 3d glasses per metadata accompanying 3d image |
JP5550520B2 (ja) * | 2010-10-20 | 2014-07-16 | 日立コンシューマエレクトロニクス株式会社 | 再生装置及び再生方法 |
KR20120047055A (ko) * | 2010-11-03 | 2012-05-11 | 삼성전자주식회사 | 디스플레이 장치 및 이에 적용되는 그래픽 영상 제공방법 |
CN102469319A (zh) * | 2010-11-10 | 2012-05-23 | 康佳集团股份有限公司 | 三维菜单生成方法及三维显示装置 |
JP5789960B2 (ja) * | 2010-11-18 | 2015-10-07 | セイコーエプソン株式会社 | 表示装置、表示装置の制御方法、及び、プログラム |
JP5786315B2 (ja) * | 2010-11-24 | 2015-09-30 | セイコーエプソン株式会社 | 表示装置、表示装置の制御方法、及び、プログラム |
CN101984671B (zh) * | 2010-11-29 | 2013-04-17 | 深圳市九洲电器有限公司 | 一种3dtv接收系统合成视频图像和界面图形的方法 |
CN101980545B (zh) * | 2010-11-29 | 2012-08-01 | 深圳市九洲电器有限公司 | 一种自动检测3dtv视频节目格式的方法 |
US8878950B2 (en) | 2010-12-14 | 2014-11-04 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using super-resolution processes |
JP2012129845A (ja) * | 2010-12-16 | 2012-07-05 | Jvc Kenwood Corp | 画像処理装置 |
JP5611807B2 (ja) * | 2010-12-27 | 2014-10-22 | Necパーソナルコンピュータ株式会社 | 映像表示装置 |
US8600151B2 (en) * | 2011-01-03 | 2013-12-03 | Apple Inc. | Producing stereoscopic image |
KR101814798B1 (ko) * | 2011-01-26 | 2018-01-04 | 삼성전자주식회사 | 입체영상 처리 장치 및 방법 |
CN102137298B (zh) * | 2011-03-02 | 2015-12-09 | 华为技术有限公司 | 3d格式描述信息的获取方法和装置 |
CN102157012B (zh) * | 2011-03-23 | 2012-11-28 | 深圳超多维光电子有限公司 | 对场景进行立体渲染的方法、图形图像处理装置及设备、系统 |
US9519994B2 (en) | 2011-04-15 | 2016-12-13 | Dolby Laboratories Licensing Corporation | Systems and methods for rendering 3D image independent of display size and viewing distance |
KR101801141B1 (ko) * | 2011-04-19 | 2017-11-24 | 엘지전자 주식회사 | 영상표시장치 및 그 동작방법 |
KR20120119173A (ko) * | 2011-04-20 | 2012-10-30 | 삼성전자주식회사 | 3d 영상처리장치 및 그 입체감 조정방법 |
JP2012231254A (ja) * | 2011-04-25 | 2012-11-22 | Toshiba Corp | 立体映像生成装置及び立体映像生成方法 |
KR101973822B1 (ko) | 2011-05-11 | 2019-04-29 | 포토네이션 케이맨 리미티드 | 어레이 카메라 이미지 데이터를 송신 및 수신하기 위한 시스템들 및 방법들 |
US8947497B2 (en) | 2011-06-24 | 2015-02-03 | At&T Intellectual Property I, Lp | Apparatus and method for managing telepresence sessions |
US9602766B2 (en) | 2011-06-24 | 2017-03-21 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting three dimensional objects with telepresence |
US9030522B2 (en) | 2011-06-24 | 2015-05-12 | At&T Intellectual Property I, Lp | Apparatus and method for providing media content |
US9445046B2 (en) | 2011-06-24 | 2016-09-13 | At&T Intellectual Property I, L.P. | Apparatus and method for presenting media content with telepresence |
CN102231829B (zh) * | 2011-06-27 | 2014-12-17 | 深圳超多维光电子有限公司 | 一种视频文件的显示格式识别方法、装置及视频播放器 |
US9294752B2 (en) | 2011-07-13 | 2016-03-22 | Google Technology Holdings LLC | Dual mode user interface system and method for 3D video |
US8587635B2 (en) | 2011-07-15 | 2013-11-19 | At&T Intellectual Property I, L.P. | Apparatus and method for providing media services with telepresence |
US20130235155A1 (en) * | 2011-08-18 | 2013-09-12 | Beijing Goland Tech Co., Ltd. | Method of converting 2d into 3d based on image motion information |
CN103002297A (zh) * | 2011-09-16 | 2013-03-27 | 联咏科技股份有限公司 | 动态深度值产生方法及其装置 |
US20130070060A1 (en) | 2011-09-19 | 2013-03-21 | Pelican Imaging Corporation | Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion |
US8952996B2 (en) * | 2011-09-27 | 2015-02-10 | Delta Electronics, Inc. | Image display system |
EP2761534B1 (en) | 2011-09-28 | 2020-11-18 | FotoNation Limited | Systems for encoding light field image files |
US8813109B2 (en) | 2011-10-21 | 2014-08-19 | The Nielsen Company (Us), Llc | Methods and apparatus to identify exposure to 3D media presentations |
US8687470B2 (en) | 2011-10-24 | 2014-04-01 | Lsi Corporation | Optical disk playback device with three-dimensional playback functionality |
JP5289538B2 (ja) * | 2011-11-11 | 2013-09-11 | 株式会社東芝 | 電子機器、表示制御方法及びプログラム |
CN102413350B (zh) * | 2011-11-30 | 2014-04-16 | 四川长虹电器股份有限公司 | 蓝光3d视频处理方法 |
FR2983673A1 (fr) * | 2011-12-02 | 2013-06-07 | Binocle | Procede de correction pour la projection alternative d'images stereoscopiques |
US8713590B2 (en) | 2012-02-21 | 2014-04-29 | The Nielsen Company (Us), Llc | Methods and apparatus to identify exposure to 3D media presentations |
EP2817955B1 (en) | 2012-02-21 | 2018-04-11 | FotoNation Cayman Limited | Systems and methods for the manipulation of captured light field image data |
US8479226B1 (en) * | 2012-02-21 | 2013-07-02 | The Nielsen Company (Us), Llc | Methods and apparatus to identify exposure to 3D media presentations |
US10445398B2 (en) * | 2012-03-01 | 2019-10-15 | Sony Corporation | Asset management during production of media |
EP2836657B1 (en) | 2012-04-10 | 2017-12-06 | Dirtt Environmental Solutions, Ltd. | Tamper evident wall cladding system |
KR20130121058A (ko) * | 2012-04-26 | 2013-11-05 | 한국전자통신연구원 | 3dtv를 위한 영상 재생 장치 및 상기 장치가 수행하는 방법 |
JP2015534734A (ja) | 2012-06-28 | 2015-12-03 | ペリカン イメージング コーポレイション | 欠陥のあるカメラアレイ、光学アレイ、およびセンサを検出するためのシステムおよび方法 |
US20140002674A1 (en) | 2012-06-30 | 2014-01-02 | Pelican Imaging Corporation | Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors |
EP3869797B1 (en) | 2012-08-21 | 2023-07-19 | Adeia Imaging LLC | Method for depth detection in images captured using array cameras |
US20140055632A1 (en) | 2012-08-23 | 2014-02-27 | Pelican Imaging Corporation | Feature based high resolution motion estimation from low resolution images captured using an array source |
KR20140039649A (ko) | 2012-09-24 | 2014-04-02 | 삼성전자주식회사 | 다시점 영상 생성 방법 및 다시점 영상 디스플레이 장치 |
KR20140049834A (ko) * | 2012-10-18 | 2014-04-28 | 삼성전자주식회사 | 방송 수신 장치 및 그 제어 방법, 사용자 단말 장치 및 그 화면 제공 방법 |
US9143711B2 (en) | 2012-11-13 | 2015-09-22 | Pelican Imaging Corporation | Systems and methods for array camera focal plane control |
US20150296198A1 (en) * | 2012-11-27 | 2015-10-15 | Intellectual Discovery Co., Ltd. | Method for encoding and decoding image using depth information, and device and image system using same |
KR101430985B1 (ko) * | 2013-02-20 | 2014-09-18 | 주식회사 카몬 | 2d-3d 복합 차원 콘텐츠 파일을 사용하는 복합 차원 콘텐츠 서비스 제공 시스템, 그 서비스 제공 방법 |
US9462164B2 (en) | 2013-02-21 | 2016-10-04 | Pelican Imaging Corporation | Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information |
US9374512B2 (en) | 2013-02-24 | 2016-06-21 | Pelican Imaging Corporation | Thin form factor computational array cameras and modular array cameras |
US9774789B2 (en) | 2013-03-08 | 2017-09-26 | Fotonation Cayman Limited | Systems and methods for high dynamic range imaging using array cameras |
US8866912B2 (en) | 2013-03-10 | 2014-10-21 | Pelican Imaging Corporation | System and methods for calibration of an array camera using a single captured image |
WO2014164550A2 (en) | 2013-03-13 | 2014-10-09 | Pelican Imaging Corporation | System and methods for calibration of an array camera |
US9888194B2 (en) | 2013-03-13 | 2018-02-06 | Fotonation Cayman Limited | Array camera architecture implementing quantum film image sensors |
US9992021B1 (en) | 2013-03-14 | 2018-06-05 | GoTenna, Inc. | System and method for private and point-to-point communication between computing devices |
WO2014153098A1 (en) | 2013-03-14 | 2014-09-25 | Pelican Imaging Corporation | Photmetric normalization in array cameras |
WO2014159779A1 (en) | 2013-03-14 | 2014-10-02 | Pelican Imaging Corporation | Systems and methods for reducing motion blur in images or video in ultra low light with array cameras |
US10122993B2 (en) | 2013-03-15 | 2018-11-06 | Fotonation Limited | Autofocus system for a conventional camera that uses depth information from an array camera |
US9438888B2 (en) | 2013-03-15 | 2016-09-06 | Pelican Imaging Corporation | Systems and methods for stereo imaging with camera arrays |
US9445003B1 (en) | 2013-03-15 | 2016-09-13 | Pelican Imaging Corporation | Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information |
US9497429B2 (en) | 2013-03-15 | 2016-11-15 | Pelican Imaging Corporation | Extended color processing on pelican array cameras |
CN104079941B (zh) * | 2013-03-27 | 2017-08-25 | 中兴通讯股份有限公司 | 一种深度信息编解码方法、装置及视频处理播放设备 |
CN104469338B (zh) * | 2013-09-25 | 2016-08-17 | 联想(北京)有限公司 | 一种控制方法和装置 |
WO2015048694A2 (en) | 2013-09-27 | 2015-04-02 | Pelican Imaging Corporation | Systems and methods for depth-assisted perspective distortion correction |
US10491916B2 (en) * | 2013-10-01 | 2019-11-26 | Advanced Micro Devices, Inc. | Exploiting camera depth information for video encoding |
CN103543953B (zh) * | 2013-11-08 | 2017-01-04 | 深圳市汉普电子技术开发有限公司 | 播放无3d标识的3d片源的方法及触摸设备 |
JP2015119464A (ja) * | 2013-11-12 | 2015-06-25 | セイコーエプソン株式会社 | 表示装置、および表示装置の制御方法 |
US10119808B2 (en) | 2013-11-18 | 2018-11-06 | Fotonation Limited | Systems and methods for estimating depth from projected texture using camera arrays |
WO2015081279A1 (en) | 2013-11-26 | 2015-06-04 | Pelican Imaging Corporation | Array camera configurations incorporating multiple constituent array cameras |
WO2015134996A1 (en) | 2014-03-07 | 2015-09-11 | Pelican Imaging Corporation | System and methods for depth regularization and semiautomatic interactive matting using rgb-d images |
US10228751B2 (en) | 2014-08-06 | 2019-03-12 | Apple Inc. | Low power mode |
US9647489B2 (en) | 2014-08-26 | 2017-05-09 | Apple Inc. | Brownout avoidance |
EP3201877B1 (en) | 2014-09-29 | 2018-12-19 | Fotonation Cayman Limited | Systems and methods for dynamic calibration of array cameras |
US10231033B1 (en) | 2014-09-30 | 2019-03-12 | Apple Inc. | Synchronizing out-of-band content with a media stream |
US10708391B1 (en) | 2014-09-30 | 2020-07-07 | Apple Inc. | Delivery of apps in a media stream |
CN105095895B (zh) * | 2015-04-23 | 2018-09-25 | 广州广电运通金融电子股份有限公司 | 有价文件识别装置自修正识别方法 |
CN105376546A (zh) * | 2015-11-09 | 2016-03-02 | 中科创达软件股份有限公司 | 一种2d转3d方法、装置及移动终端 |
CN105472374A (zh) * | 2015-11-19 | 2016-04-06 | 广州华多网络科技有限公司 | 一种3d视频直播方法、装置及系统 |
US20170150138A1 (en) * | 2015-11-25 | 2017-05-25 | Atheer, Inc. | Method and apparatus for selective mono/stereo visual display |
US20170150137A1 (en) * | 2015-11-25 | 2017-05-25 | Atheer, Inc. | Method and apparatus for selective mono/stereo visual display |
CN105872519B (zh) * | 2016-04-13 | 2018-03-27 | 万云数码媒体有限公司 | 一种基于rgb压缩的2d加深度3d图像横向存储方法 |
US10433025B2 (en) | 2016-05-10 | 2019-10-01 | Jaunt Inc. | Virtual reality resource scheduling of process in a cloud-based virtual reality processing system |
CN106101681A (zh) * | 2016-06-21 | 2016-11-09 | 青岛海信电器股份有限公司 | 三维图像显示处理方法、信号输入设备及电视终端 |
US10038500B1 (en) * | 2017-05-11 | 2018-07-31 | Qualcomm Incorporated | Visible light communication |
US10735707B2 (en) * | 2017-08-15 | 2020-08-04 | International Business Machines Corporation | Generating three-dimensional imagery |
US10482618B2 (en) | 2017-08-21 | 2019-11-19 | Fotonation Limited | Systems and methods for hybrid depth regularization |
CN107589989A (zh) * | 2017-09-14 | 2018-01-16 | 晨星半导体股份有限公司 | 基于安卓平台的显示装置及其图像显示方法 |
US11363133B1 (en) | 2017-12-20 | 2022-06-14 | Apple Inc. | Battery health-based power management |
US10817307B1 (en) | 2017-12-20 | 2020-10-27 | Apple Inc. | API behavior modification based on power source health |
EP3644604A1 (en) * | 2018-10-23 | 2020-04-29 | Koninklijke Philips N.V. | Image generating apparatus and method therefor |
CN109257585B (zh) * | 2018-10-25 | 2021-04-06 | 京东方科技集团股份有限公司 | 一种亮度校正装置及方法、显示装置、显示系统及方法 |
CN109274949A (zh) * | 2018-10-30 | 2019-01-25 | 京东方科技集团股份有限公司 | 一种视频图像处理方法及其装置、显示设备 |
CN112188181B (zh) * | 2019-07-02 | 2023-07-04 | 中强光电股份有限公司 | 图像显示设备、立体图像处理电路及其同步信号校正方法 |
MX2022003020A (es) | 2019-09-17 | 2022-06-14 | Boston Polarimetrics Inc | Sistemas y metodos para modelado de superficie usando se?ales de polarizacion. |
KR20230004423A (ko) | 2019-10-07 | 2023-01-06 | 보스턴 폴라리메트릭스, 인크. | 편광을 사용한 표면 법선 감지 시스템 및 방법 |
WO2021108002A1 (en) | 2019-11-30 | 2021-06-03 | Boston Polarimetrics, Inc. | Systems and methods for transparent object segmentation using polarization cues |
KR102241615B1 (ko) * | 2020-01-15 | 2021-04-19 | 한국과학기술원 | 비디오 웹페이지 소스코드의 메타데이터를 이용하여 비디오 제목을 식별하는 방법 및 이를 수행하는 장치들 |
US11195303B2 (en) | 2020-01-29 | 2021-12-07 | Boston Polarimetrics, Inc. | Systems and methods for characterizing object pose detection and measurement systems |
KR20220133973A (ko) | 2020-01-30 | 2022-10-05 | 인트린식 이노베이션 엘엘씨 | 편광된 이미지들을 포함하는 상이한 이미징 양식들에 대해 통계적 모델들을 훈련하기 위해 데이터를 합성하기 위한 시스템들 및 방법들 |
WO2021243088A1 (en) | 2020-05-27 | 2021-12-02 | Boston Polarimetrics, Inc. | Multi-aperture polarization optical systems using beam splitters |
CN112004162B (zh) * | 2020-09-08 | 2022-06-21 | 宁波视睿迪光电有限公司 | 一种在线3d内容播放系统及方法 |
US12020455B2 (en) | 2021-03-10 | 2024-06-25 | Intrinsic Innovation Llc | Systems and methods for high dynamic range image reconstruction |
US12069227B2 (en) | 2021-03-10 | 2024-08-20 | Intrinsic Innovation Llc | Multi-modal and multi-spectral stereo camera arrays |
US11290658B1 (en) | 2021-04-15 | 2022-03-29 | Boston Polarimetrics, Inc. | Systems and methods for camera exposure control |
US11954886B2 (en) | 2021-04-15 | 2024-04-09 | Intrinsic Innovation Llc | Systems and methods for six-degree of freedom pose estimation of deformable objects |
US12067746B2 (en) | 2021-05-07 | 2024-08-20 | Intrinsic Innovation Llc | Systems and methods for using computer vision to pick up small objects |
US11689813B2 (en) | 2021-07-01 | 2023-06-27 | Intrinsic Innovation Llc | Systems and methods for high dynamic range imaging using crossed polarizers |
US11770513B1 (en) * | 2022-07-13 | 2023-09-26 | Rovi Guides, Inc. | Systems and methods for reducing a number of focal planes used to display three-dimensional objects |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050053276A1 (en) * | 2003-07-15 | 2005-03-10 | Stmicroelectronics S.R.I. | Method of obtaining a depth map from a digital image |
US20060288081A1 (en) * | 2005-05-26 | 2006-12-21 | Samsung Electronics Co., Ltd. | Information storage medium including application for obtaining metadata and apparatus and method of obtaining metadata |
US20070081587A1 (en) * | 2005-09-27 | 2007-04-12 | Raveendran Vijayalakshmi R | Content driven transcoder that orchestrates multimedia transcoding using content information |
WO2007047736A2 (en) * | 2005-10-19 | 2007-04-26 | Thomson Licensing | Multi-view video coding using scalable video coding |
Family Cites Families (119)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4523226A (en) * | 1982-01-27 | 1985-06-11 | Stereographics Corporation | Stereoscopic television system |
US4667228A (en) * | 1983-10-14 | 1987-05-19 | Canon Kabushiki Kaisha | Image signal processing apparatus |
JPS63116593A (ja) * | 1986-11-04 | 1988-05-20 | Matsushita Electric Ind Co Ltd | 立体画像再生装置 |
US5262879A (en) * | 1988-07-18 | 1993-11-16 | Dimensional Arts. Inc. | Holographic image conversion method for making a controlled holographic grating |
US5058992A (en) * | 1988-09-07 | 1991-10-22 | Toppan Printing Co., Ltd. | Method for producing a display with a diffraction grating pattern and a display produced by the method |
JP2508387B2 (ja) * | 1989-10-16 | 1996-06-19 | 凸版印刷株式会社 | 回折格子パタ―ンを有するディスプレイの作製方法 |
US5291317A (en) * | 1990-07-12 | 1994-03-01 | Applied Holographics Corporation | Holographic diffraction grating patterns and methods for creating the same |
JP3081675B2 (ja) * | 1991-07-24 | 2000-08-28 | オリンパス光学工業株式会社 | 画像記録装置および画像再生装置 |
US5740274A (en) * | 1991-09-12 | 1998-04-14 | Fuji Photo Film Co., Ltd. | Method for recognizing object images and learning method for neural networks |
US6011581A (en) * | 1992-11-16 | 2000-01-04 | Reveo, Inc. | Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments |
US6084978A (en) * | 1993-12-16 | 2000-07-04 | Eastman Kodak Company | Hierarchical storage and display of digital images used in constructing three-dimensional image hard copy |
CN1113320C (zh) * | 1994-02-01 | 2003-07-02 | 三洋电机株式会社 | 将二维图像转换成三维图像的方法以及三维图像显示系统 |
US5739844A (en) * | 1994-02-04 | 1998-04-14 | Sanyo Electric Co. Ltd. | Method of converting two-dimensional image into three-dimensional image |
US5684890A (en) * | 1994-02-28 | 1997-11-04 | Nec Corporation | Three-dimensional reference image segmenting method and apparatus |
US6104828A (en) * | 1994-03-24 | 2000-08-15 | Kabushiki Kaisha Topcon | Ophthalmologic image processor |
JP2846840B2 (ja) * | 1994-07-14 | 1999-01-13 | 三洋電機株式会社 | 2次元映像から3次元映像を生成する方法 |
EP0703716B1 (en) * | 1994-09-22 | 2002-11-27 | Sanyo Electric Co. Ltd | Method of converting two-dimensional images into three-dimensional images |
US6985168B2 (en) * | 1994-11-14 | 2006-01-10 | Reveo, Inc. | Intelligent method and system for producing and displaying stereoscopically-multiplexed images of three-dimensional objects for use in realistic stereoscopic viewing thereof in interactive virtual reality display environments |
JPH09116931A (ja) * | 1995-10-18 | 1997-05-02 | Sanyo Electric Co Ltd | 時分割立体映像信号の左右映像識別方法 |
US5917940A (en) * | 1996-01-23 | 1999-06-29 | Nec Corporation | Three dimensional reference image segmenting method and device and object discrimination system |
JPH09322199A (ja) * | 1996-05-29 | 1997-12-12 | Olympus Optical Co Ltd | 立体映像ディスプレイ装置 |
US5986781A (en) * | 1996-10-28 | 1999-11-16 | Pacific Holographics, Inc. | Apparatus and method for generating diffractive element using liquid crystal display |
JPH10224822A (ja) * | 1997-01-31 | 1998-08-21 | Sony Corp | 映像表示方法および表示装置 |
JPH10313417A (ja) * | 1997-03-12 | 1998-11-24 | Seiko Epson Corp | デジタルガンマ補正回路並びにそれを用いた液晶表示装置及び電子機器 |
DE19806547C2 (de) * | 1997-04-30 | 2001-01-25 | Hewlett Packard Co | System und Verfahren zur Erzeugung von stereoskopischen Anzeigesignalen von einer Einzelcomputergraphikpipeline |
JPH11113028A (ja) * | 1997-09-30 | 1999-04-23 | Toshiba Corp | 3次元映像表示装置 |
WO1999030280A1 (en) * | 1997-12-05 | 1999-06-17 | Dynamic Digital Depth Research Pty. Ltd. | Improved image conversion and encoding techniques |
US6850631B1 (en) * | 1998-02-20 | 2005-02-01 | Oki Electric Industry Co., Ltd. | Photographing device, iris input device and iris image input method |
JP4149037B2 (ja) * | 1998-06-04 | 2008-09-10 | オリンパス株式会社 | 映像システム |
US6704042B2 (en) * | 1998-12-10 | 2004-03-09 | Canon Kabushiki Kaisha | Video processing apparatus, control method therefor, and storage medium |
JP2000298246A (ja) * | 1999-02-12 | 2000-10-24 | Canon Inc | 表示装置、表示方法および記憶媒体 |
JP2000275575A (ja) * | 1999-03-24 | 2000-10-06 | Sharp Corp | 立体映像表示装置 |
KR100334722B1 (ko) * | 1999-06-05 | 2002-05-04 | 강호석 | Mpeg 데이터를 이용한 입체영상생성방법 및 그 장치 |
JP2001012946A (ja) * | 1999-06-30 | 2001-01-19 | Toshiba Corp | 動画像処理装置及び方法 |
US6839663B1 (en) * | 1999-09-30 | 2005-01-04 | Texas Tech University | Haptic rendering of volumetric soft-bodies objects |
EP1243141B1 (en) * | 1999-12-14 | 2011-10-19 | Scientific-Atlanta, LLC | System and method for adaptive decoding of a video signal with coordinated resource allocation |
US6968568B1 (en) * | 1999-12-20 | 2005-11-22 | International Business Machines Corporation | Methods and apparatus of disseminating broadcast information to a handheld device |
US20020009137A1 (en) * | 2000-02-01 | 2002-01-24 | Nelson John E. | Three-dimensional video broadcasting system |
KR100908989B1 (ko) * | 2000-04-04 | 2009-07-22 | 소니 가부시끼 가이샤 | 입체 화상 작성 방법 및 그 장치 |
JP2001320693A (ja) * | 2000-05-12 | 2001-11-16 | Sony Corp | サービス提供装置および方法、受信端末装置および方法、サービス提供システム |
US6765568B2 (en) * | 2000-06-12 | 2004-07-20 | Vrex, Inc. | Electronic stereoscopic media delivery system |
JP3667620B2 (ja) * | 2000-10-16 | 2005-07-06 | 株式会社アイ・オー・データ機器 | ステレオ画像撮影アダプタ、ステレオ画像撮影用カメラ、および、ステレオ画像処理装置 |
US6762755B2 (en) * | 2000-10-16 | 2004-07-13 | Pixel Science, Inc. | Method and apparatus for creating and displaying interactive three dimensional computer images |
GB0100563D0 (en) * | 2001-01-09 | 2001-02-21 | Pace Micro Tech Plc | Dynamic adjustment of on-screen displays to cope with different widescreen signalling types |
US6678323B2 (en) * | 2001-01-24 | 2004-01-13 | Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry Through Communications Research Centre | Bandwidth reduction for stereoscopic imagery and video signals |
KR20020096203A (ko) * | 2001-06-18 | 2002-12-31 | (주)디지털국영 | 입체영상을 확대/축소하는 방법 |
JP2003157292A (ja) * | 2001-11-20 | 2003-05-30 | Nec Corp | 製品レイアウト管理方式および管理方法 |
KR100397511B1 (ko) * | 2001-11-21 | 2003-09-13 | 한국전자통신연구원 | 양안식/다시점 3차원 동영상 처리 시스템 및 그 방법 |
GB0129992D0 (en) * | 2001-12-14 | 2002-02-06 | Ocuity Ltd | Control of optical switching apparatus |
US20040218269A1 (en) * | 2002-01-14 | 2004-11-04 | Divelbiss Adam W. | General purpose stereoscopic 3D format conversion system and method |
US7319720B2 (en) * | 2002-01-28 | 2008-01-15 | Microsoft Corporation | Stereoscopic video |
JP2003284099A (ja) * | 2002-03-22 | 2003-10-03 | Olympus Optical Co Ltd | 映像情報信号記録媒体及び映像表示装置 |
US6771274B2 (en) * | 2002-03-27 | 2004-08-03 | Sony Corporation | Graphics and video integration with alpha and video blending |
CA2380105A1 (en) * | 2002-04-09 | 2003-10-09 | Nicholas Routhier | Process and system for encoding and playback of stereoscopic video sequences |
JP4652389B2 (ja) * | 2002-04-12 | 2011-03-16 | 三菱電機株式会社 | メタデータ処理方法 |
CA2664732C (en) * | 2002-04-12 | 2013-07-02 | Mitsubishi Denki Kabushiki Kaisha | An apparatus to edit, reproduce, deliver, search and re-generate condition settings for metadata |
AU2003231508A1 (en) * | 2002-04-25 | 2003-11-10 | Sharp Kabushiki Kaisha | Multimedia information generation method and multimedia information reproduction device |
JP4154569B2 (ja) * | 2002-07-10 | 2008-09-24 | 日本電気株式会社 | 画像圧縮伸長装置 |
JP4362105B2 (ja) * | 2002-07-16 | 2009-11-11 | 韓國電子通信研究院 | 2次元および3次元立体ビデオ信号の適応変換装置およびその方法 |
KR100488804B1 (ko) * | 2002-10-07 | 2005-05-12 | 한국전자통신연구원 | Mpeg-4 기반의 양안식 3차원 동영상 데이터 처리시스템 및 그 방법 |
JP2004186863A (ja) * | 2002-12-02 | 2004-07-02 | Amita Technology Kk | 立体映像表示装置及び立体映像信号処理回路 |
JP4183499B2 (ja) * | 2002-12-16 | 2008-11-19 | 三洋電機株式会社 | 映像ファイル処理方法及び映像処理方法 |
JP2004246066A (ja) * | 2003-02-13 | 2004-09-02 | Fujitsu Ltd | 仮想環境作成方法 |
JP2004274125A (ja) * | 2003-03-05 | 2004-09-30 | Sony Corp | 画像処理装置および方法 |
JP4677175B2 (ja) * | 2003-03-24 | 2011-04-27 | シャープ株式会社 | 画像処理装置、画像撮像システム、画像表示システム、画像撮像表示システム、画像処理プログラム、及び画像処理プログラムを記録したコンピュータ読み取り可能な記録媒体 |
JP2004309868A (ja) * | 2003-04-08 | 2004-11-04 | Sony Corp | 撮像装置及び立体映像生成装置 |
KR100556826B1 (ko) * | 2003-04-17 | 2006-03-10 | 한국전자통신연구원 | Mpeg-4 기반의 양안식 3차원 동영상을 서비스하기 위한 인터넷 방송 시스템 및 그 방법 |
EP1617684A4 (en) * | 2003-04-17 | 2009-06-03 | Sharp Kk | THREE-DIMENSIONAL IMAGE CREATION DEVICE, THREE-DIMENSIONAL IMAGE REPRODUCING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING DEVICE, THREE-DIMENSIONAL IMAGE PROCESSING PROGRAM, AND RECORDING MEDIUM CONTAINING THE SAME |
JP2004357156A (ja) * | 2003-05-30 | 2004-12-16 | Sharp Corp | 映像受信装置および映像再生装置 |
JP2005026800A (ja) * | 2003-06-30 | 2005-01-27 | Konica Minolta Photo Imaging Inc | 画像処理方法、撮像装置、画像処理装置及び画像記録装置 |
US7411611B2 (en) * | 2003-08-25 | 2008-08-12 | Barco N. V. | Device and method for performing multiple view imaging by means of a plurality of video processing devices |
EP1510940A1 (en) * | 2003-08-29 | 2005-03-02 | Sap Ag | A method of providing a visualisation graph on a computer and a computer for providing a visualisation graph |
US7613344B2 (en) * | 2003-12-08 | 2009-11-03 | Electronics And Telecommunications Research Institute | System and method for encoding and decoding an image using bitstream map and recording medium thereof |
JP2005175997A (ja) * | 2003-12-12 | 2005-06-30 | Sony Corp | 復号化装置、電子機器、コンピュータ、復号化方法、プログラム及び記録媒体 |
KR100544677B1 (ko) * | 2003-12-26 | 2006-01-23 | 한국전자통신연구원 | 다시점 영상 및 깊이 정보를 이용한 3차원 객체 추적 장치및 그 방법 |
JP3746506B2 (ja) * | 2004-03-08 | 2006-02-15 | 一成 江良 | 立体視化パラメータ埋込装置及び立体視画像再生装置 |
JP4230959B2 (ja) * | 2004-05-19 | 2009-02-25 | 株式会社東芝 | メディアデータ再生装置、メディアデータ再生システム、メディアデータ再生プログラムおよび遠隔操作プログラム |
JP4227076B2 (ja) * | 2004-05-24 | 2009-02-18 | 株式会社東芝 | 立体画像を表示する表示装置及び立体画像を表示する表示方法 |
KR100543219B1 (ko) * | 2004-05-24 | 2006-01-20 | 한국과학기술연구원 | 2차원 이미지에서의 햅틱 벡터 필드 생성방법 및 3차원높이 정보 추출방법 |
KR100708838B1 (ko) | 2004-06-30 | 2007-04-17 | 삼성에스디아이 주식회사 | 입체 영상 표시 장치 및 그 구동 방법 |
JP2006041811A (ja) * | 2004-07-26 | 2006-02-09 | Kddi Corp | 自由視点画像ストリーミング方式 |
KR20040077596A (ko) * | 2004-07-28 | 2004-09-04 | 손귀연 | 평판 표시패널을 이용한 입체 영상표시장치 |
JP4468370B2 (ja) * | 2004-09-08 | 2010-05-26 | 日本電信電話株式会社 | 三次元表示方法、装置およびプログラム |
KR100694069B1 (ko) * | 2004-11-29 | 2007-03-12 | 삼성전자주식회사 | 상이한 크기를 가지는 복수 개의 데이터 블록들을포함하는 저장 장치 및 이를 이용한 파일 관리 방법 및이를 포함하는 인쇄 장치 |
KR100656575B1 (ko) | 2004-12-31 | 2006-12-11 | 광운대학교 산학협력단 | 3차원 입체 동영상 디스플레이 장치 |
TWI261099B (en) * | 2005-02-17 | 2006-09-01 | Au Optronics Corp | Backlight modules |
KR100828358B1 (ko) * | 2005-06-14 | 2008-05-08 | 삼성전자주식회사 | 영상 디스플레이 모드 전환 방법, 장치, 및 그 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체 |
US7404645B2 (en) * | 2005-06-20 | 2008-07-29 | Digital Display Innovations, Llc | Image and light source modulation for a digital display system |
KR100813977B1 (ko) * | 2005-07-08 | 2008-03-14 | 삼성전자주식회사 | 2차원/3차원 영상 호환용 고해상도 입체 영상 디스플레이장치 |
US8384763B2 (en) * | 2005-07-26 | 2013-02-26 | Her Majesty the Queen in right of Canada as represented by the Minster of Industry, Through the Communications Research Centre Canada | Generating a depth map from a two-dimensional source image for stereoscopic and multiview imaging |
JP4717728B2 (ja) * | 2005-08-29 | 2011-07-06 | キヤノン株式会社 | ステレオ表示装置及びその制御方法 |
KR100739764B1 (ko) * | 2005-11-28 | 2007-07-13 | 삼성전자주식회사 | 입체 영상 신호 처리 장치 및 방법 |
KR100793750B1 (ko) * | 2006-02-14 | 2008-01-10 | 엘지전자 주식회사 | 다양한 셋팅 정보를 저장하는 영상기기 및 그 제어방법 |
KR100780701B1 (ko) | 2006-03-28 | 2007-11-30 | (주)오픈브이알 | 3차원 이미지 자동 생성장치 및 방법 |
KR20070098364A (ko) * | 2006-03-31 | 2007-10-05 | (주)엔브이엘소프트 | 3차원 영상 데이터를 코드화하여 저장하는 장치 및 방법 |
KR101137347B1 (ko) * | 2006-05-11 | 2012-04-19 | 엘지전자 주식회사 | 이동통신 단말기 및 그 단말기를 이용한 이미지 표출 방법 |
JP2007304325A (ja) * | 2006-05-11 | 2007-11-22 | Necディスプレイソリューションズ株式会社 | 液晶表示装置および液晶パネル駆動方法 |
US7953315B2 (en) * | 2006-05-22 | 2011-05-31 | Broadcom Corporation | Adaptive video processing circuitry and player using sub-frame metadata |
US20070294737A1 (en) * | 2006-06-16 | 2007-12-20 | Sbc Knowledge Ventures, L.P. | Internet Protocol Television (IPTV) stream management within a home viewing network |
CA2884702C (en) * | 2006-06-23 | 2018-06-05 | Samuel Zhou | Methods and systems for converting 2d motion pictures for stereoscopic 3d exhibition |
KR100761022B1 (ko) * | 2006-08-14 | 2007-09-21 | 광주과학기술원 | 깊이 영상 기반의 햅틱 렌더링 방법과 장치, 및 이를이용한 촉각 방송 시스템 |
KR100716142B1 (ko) * | 2006-09-04 | 2007-05-11 | 주식회사 이시티 | 스테레오스코픽 영상 데이터의 전송 방법 |
EP1901474B1 (en) | 2006-09-13 | 2011-11-30 | Stmicroelectronics Sa | System for synchronizing modules in an integrated circuit in mesochronous clock domains |
WO2008038205A2 (en) * | 2006-09-28 | 2008-04-03 | Koninklijke Philips Electronics N.V. | 3 menu display |
EP2105032A2 (en) * | 2006-10-11 | 2009-09-30 | Koninklijke Philips Electronics N.V. | Creating three dimensional graphics data |
JP4755565B2 (ja) * | 2006-10-17 | 2011-08-24 | シャープ株式会社 | 立体画像処理装置 |
KR101362941B1 (ko) * | 2006-11-01 | 2014-02-17 | 한국전자통신연구원 | 스테레오스코픽 콘텐츠 재생에 이용되는 메타 데이터의복호화 방법 및 장치 |
TWI324477B (en) * | 2006-11-03 | 2010-05-01 | Quanta Comp Inc | Stereoscopic image format transformation method applied to display system |
US8325278B2 (en) * | 2006-11-29 | 2012-12-04 | Panasonic Corporation | Video display based on video signal and audio output based on audio signal, video/audio device network including video/audio signal input/output device and video/audio reproduction device, and signal reproducing method |
KR100786468B1 (ko) * | 2007-01-02 | 2007-12-17 | 삼성에스디아이 주식회사 | 2차원 및 3차원 영상 선택 가능 디스플레이 장치 |
US8213711B2 (en) * | 2007-04-03 | 2012-07-03 | Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada | Method and graphical user interface for modifying depth maps |
US8488868B2 (en) * | 2007-04-03 | 2013-07-16 | Her Majesty The Queen In Right Of Canada, As Represented By The Minister Of Industry, Through The Communications Research Centre Canada | Generation of a depth map from a monoscopic color image for rendering stereoscopic still and video images |
JP4564512B2 (ja) | 2007-04-16 | 2010-10-20 | 富士通株式会社 | 表示装置、表示プログラム、および表示方法 |
KR100839429B1 (ko) * | 2007-04-17 | 2008-06-19 | 삼성에스디아이 주식회사 | 전자 영상 기기 및 그 구동방법 |
WO2008140190A1 (en) * | 2007-05-14 | 2008-11-20 | Samsung Electronics Co, . Ltd. | Method and apparatus for encoding and decoding multi-view image |
JP4462288B2 (ja) * | 2007-05-16 | 2010-05-12 | 株式会社日立製作所 | 映像表示装置及びそれを適用した3次元映像表示装置 |
EP2198625A4 (en) * | 2007-10-10 | 2013-11-06 | Korea Electronics Telecomm | METADATA STRUCTURE FOR STORING AND REPRODUCING STEREOSCOPIC DATA AND METHOD FOR STORING A STEREOSCOPIC CONTENT FILE USING THESE METADATA |
US20090315981A1 (en) * | 2008-06-24 | 2009-12-24 | Samsung Electronics Co., Ltd. | Image processing method and apparatus |
US8482654B2 (en) * | 2008-10-24 | 2013-07-09 | Reald Inc. | Stereoscopic image format with depth information |
-
2008
- 2008-09-17 KR KR1020080091269A patent/KR20100002032A/ko not_active Application Discontinuation
- 2008-09-17 KR KR1020080091268A patent/KR101539935B1/ko active IP Right Grant
- 2008-09-19 KR KR1020080092417A patent/KR20100002033A/ko not_active Application Discontinuation
- 2008-09-23 KR KR1020080093371A patent/KR20100002035A/ko not_active Application Discontinuation
- 2008-09-24 KR KR1020080093866A patent/KR20100002036A/ko not_active Application Discontinuation
- 2008-09-24 KR KR1020080093867A patent/KR20100002037A/ko not_active Application Discontinuation
- 2008-09-26 KR KR1020080094896A patent/KR20100002038A/ko not_active Application Discontinuation
- 2008-10-27 KR KR1020080105485A patent/KR20100002048A/ko not_active Application Discontinuation
- 2008-10-28 KR KR1020080105928A patent/KR20100002049A/ko not_active Application Discontinuation
-
2009
- 2009-06-08 US US12/479,978 patent/US20090315884A1/en not_active Abandoned
- 2009-06-17 JP JP2011514491A patent/JP2011525743A/ja active Pending
- 2009-06-17 EP EP09770340.9A patent/EP2292019A4/en active Pending
- 2009-06-17 CN CN2009801242749A patent/CN102077600A/zh active Pending
- 2009-06-17 WO PCT/KR2009/003235 patent/WO2009157668A2/en active Application Filing
- 2009-06-23 US US12/489,726 patent/US20090315979A1/en not_active Abandoned
- 2009-06-23 US US12/489,758 patent/US20090317061A1/en not_active Abandoned
- 2009-06-24 US US12/490,589 patent/US20090315977A1/en not_active Abandoned
- 2009-06-24 WO PCT/KR2009/003399 patent/WO2009157708A2/en active Application Filing
- 2009-06-24 WO PCT/KR2009/003406 patent/WO2009157714A2/en active Application Filing
- 2009-06-24 JP JP2011514504A patent/JP2011525746A/ja active Pending
- 2009-06-24 EP EP09770380.5A patent/EP2279625A4/en not_active Withdrawn
- 2009-06-24 WO PCT/KR2009/003383 patent/WO2009157701A2/en active Application Filing
- 2009-06-24 CN CN200980123462.XA patent/CN102067613B/zh not_active Expired - Fee Related
- 2009-06-24 EP EP09770386.2A patent/EP2289248A4/en not_active Withdrawn
- 2009-06-24 MY MYPI2010005488A patent/MY159672A/en unknown
- 2009-06-24 CN CN200980123638.1A patent/CN102067614B/zh not_active Expired - Fee Related
- 2009-06-24 JP JP2011514502A patent/JP2011525745A/ja active Pending
- 2009-06-24 EP EP09770373.0A patent/EP2289247A4/en not_active Withdrawn
- 2009-06-24 JP JP2011514503A patent/JP5547725B2/ja not_active Expired - Fee Related
- 2009-06-24 CN CN200980123639.6A patent/CN102067615B/zh not_active Expired - Fee Related
- 2009-09-10 US US12/556,699 patent/US8488869B2/en not_active Expired - Fee Related
- 2009-09-22 US US12/564,201 patent/US20100103168A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050053276A1 (en) * | 2003-07-15 | 2005-03-10 | Stmicroelectronics S.R.I. | Method of obtaining a depth map from a digital image |
US20060288081A1 (en) * | 2005-05-26 | 2006-12-21 | Samsung Electronics Co., Ltd. | Information storage medium including application for obtaining metadata and apparatus and method of obtaining metadata |
US20070081587A1 (en) * | 2005-09-27 | 2007-04-12 | Raveendran Vijayalakshmi R | Content driven transcoder that orchestrates multimedia transcoding using content information |
WO2007047736A2 (en) * | 2005-10-19 | 2007-04-26 | Thomson Licensing | Multi-view video coding using scalable video coding |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104143308A (zh) * | 2014-07-24 | 2014-11-12 | 京东方科技集团股份有限公司 | 一种三维图像的显示方法及装置 |
CN104143308B (zh) * | 2014-07-24 | 2016-09-07 | 京东方科技集团股份有限公司 | 一种三维图像的显示方法及装置 |
US10326984B2 (en) | 2014-07-24 | 2019-06-18 | Boe Technology Group Co., Ltd. | Three-dimensional image display method and three-dimensional image display device |
CN106982367A (zh) * | 2017-03-31 | 2017-07-25 | 联想(北京)有限公司 | 视频传输方法及其装置 |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102067615A (zh) | 图像产生方法和设备以及图像处理方法和设备 | |
CN101273635B (zh) | 使用相机参数对多视图画面编码和解码的设备和方法 | |
CN101754040B (zh) | 用于估计深度和将2d视频转换为3d视频的方法和设备 | |
CN102549507B (zh) | 选择视点用于在3d视频中生成附加视图 | |
CN1741619B (zh) | 动画图像解码方法和装置、 动画图像编码方法和装置 | |
CN105635712A (zh) | 基于增强现实的视频实时录制方法及录制设备 | |
CN102265624A (zh) | 图像处理方法及其设备 | |
US10244259B2 (en) | Method and apparatus of disparity vector derivation for three-dimensional video coding | |
CN103202026A (zh) | 图像转换设备及使用其的显示设备和方法 | |
CN104335579B (zh) | 对供多视图立体显示设备所用的视频数据信号进行编码的方法 | |
CN103581646A (zh) | 将二维图像转换成三维图像的方法及其显示装置 | |
CN102484735A (zh) | 用于视频图像的变速再现的方法和设备 | |
CN103348685A (zh) | 图像处理装置和图像处理方法 | |
CN102740101A (zh) | 显示控制装置、方法及程序 | |
CN104067615A (zh) | 编码装置和编码方法以及解码装置和解码方法 | |
CN103139588A (zh) | 用于3d视频的补充信息编码设备和方法 | |
JP2015534745A (ja) | 立体画像の生成、送信、及び受信方法、及び関連する装置 | |
CN109246433B (zh) | 视频编码方法及装置、解码方法及装置、视频传输系统 | |
CN102209251A (zh) | 信息处理设备和方法、重现设备和方法、及程序 | |
CN113542907B (zh) | 多媒体数据收发方法、系统、处理器和播放器 | |
CN108683900B (zh) | 一种图像数据处理方法及装置 | |
CN113784105A (zh) | 一种沉浸式vr终端的信息处理方法及系统 | |
CN103517062A (zh) | 影像的同步方法及其装置 | |
CN115442580A (zh) | 一种便携式智能设备裸眼3d图片效果处理方法 | |
US9210406B2 (en) | Apparatus and method for converting 2D content into 3D content |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150225 Termination date: 20190624 |
|
CF01 | Termination of patent right due to non-payment of annual fee |