CN1739303A - 立体观察用图像提供方法和立体图像显示装置 - Google Patents

立体观察用图像提供方法和立体图像显示装置 Download PDF

Info

Publication number
CN1739303A
CN1739303A CNA2004800024405A CN200480002440A CN1739303A CN 1739303 A CN1739303 A CN 1739303A CN A2004800024405 A CNA2004800024405 A CN A2004800024405A CN 200480002440 A CN200480002440 A CN 200480002440A CN 1739303 A CN1739303 A CN 1739303A
Authority
CN
China
Prior art keywords
information
image
dimensional image
stereovision
depth
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2004800024405A
Other languages
English (en)
Other versions
CN100551083C (zh
Inventor
竹本贤史
滨岸五郎
野村敏男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Sanyo Electric Co Ltd
Original Assignee
Sharp Corp
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp, Sanyo Electric Co Ltd filed Critical Sharp Corp
Publication of CN1739303A publication Critical patent/CN1739303A/zh
Application granted granted Critical
Publication of CN100551083C publication Critical patent/CN100551083C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/261—Image signal generators with monoscopic-to-stereoscopic image conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H04N13/128—Adjusting depth or disparity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Processing Or Creating Images (AREA)

Abstract

在发送侧装置(1)中，对实际摄影的二维图像(100)进行图像分析后生成图像数据，同时生成：对将所述二维图像变换为立体观察用图像有用的深度信息。并且，也生成标度信息、函数指定信息、表指定信息等其他附属信息，并向接收侧装置(2)发送这些信息。接收侧装置(2)接收图像数据、深度信息、和所述其他附属信息，根据这些信息生成视差图像，对观察者进行立体观察。

Description

立体观察用图像提供方法和立体图像显示装置
技术领域
本发明涉及立体观察用图像提供方法和立体图像显示装置。
背景技术
作为现有技术，提出一种根据从二维图像信号抽出的深度信息和二维图像信号来生成立体图像的立体图像接收装置和立体图像系统(参照特开2000-78611号公报)。
根据上述的现有技术，利用所述深度信息，可以从实际摄影的二维图像生成具有视差信息的立体观察用图像。然而，在上述现有技术中，没有实现：使多样的立体图像显示成为可能或减少发送的信息量。
发明内容
本发明是鉴于上述问题而进行的，其目的在于，提供一种使多样的立体图像显示成为可能或可以减少发送的信息量的立体观察用图像提供方法和立体图像显示装置。
为了解决上述的问题，本发明的立体观察用图像提供方法的特征在于，在将二维图像作为数据提供时，对将所述二维图像的数据变换为立体观察用图像有用的深度信息和该深度信息的标度信息作为所述二维图像的附属信息，而和该二维图像一起提供。
如果是上述构成，则由于将标度信息作为所述二维图像的附属信息，和该二维图像的数据一起提供，故在被提供侧可以制作具有各种宽窄的深度信息的立体观察用图像成为可能。
并且，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，作为附属信息，和该二维图像数据一起提供：对将所述二维图像数据变换为立体观察用图像有用的深度信息；将由该深度信息的值表示的距离等效值相对该深度信息值的等级差别设为非等间隔用的定义信息。
如果是上述构成，则能够在深度上的任意位置设定所希望的分辨能力，使多样的立体图像显示成为可能。所述定义信息可以是从函数群指定任意函数的信息。并且，也可以使所述附属信息包含：表示所述深度信息值中的哪一个值变为图像显示位置的信息。或者，所述定义信息也可以是：从相对深度信息值而预先设定视差量的表群中指定任意表的信息。另外，可以将所述定义信息设定为：所述非等间隔变为大间隔的区域形成在距离观察者远的位置上，变为小间隔的区域形成在距离观察者近的位置上。此外，也可以将所述定义信息设定为：所述非等间隔变为大间隔的区域形成在距离图像显示面位置远的位置上，变为小间隔的区域形成在距离图像显示面位置近的位置上。
另外，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将根据所述二维图像的画面区域而不同的位数所表示的深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。
如果是上述构成，则和涉及二维图像全体设定为同样的位数的情况相比，可以削减所提供的深度信息量、且能够生成被提供侧的良好质量的立体观察用图像。与所述二维图像的中央侧相比，可以在外周侧减少所述深度信息的位数。另外，也可以将表示画面的哪一个区域中用哪一位来表示深度信息的信息作为附属信息，和该二维图像的数据一起提供。此外，也可以将表示在每一个像素以哪一位表示深度信息的信息作为附属信息，和该二维图像数据一起提供。
另外，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将附加在所述二维图像的多个像素上的共同值的深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。
如果是上述构成，则和针对二维图像的全部像素设定每一个深度信息的情况相比，可以削减所提供的深度信息量，并且能够生成被提供侧的良好质量的立体观察用图像。与所述二维图像的中央侧相比，也可以在外周侧增多提供所述共同值的深度信息的像素数。
并且，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和向构成每一个目标的像素提供的第二深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。
如果是上述构成，则因为可以由第一深度信息提供二维图像中的每一个目标的深度，由第二深度信息中提供构成每一个目标的像素的深度，所以，和针对二维图像的全部像素设定各自的深度信息的情况相比，可以削减所提供的深度信息量，并且能够生成被提供侧的良好质量的立体观察用图像。
并且，本发明的立体观察用图像提供方法，其特征在于，将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和每一个目标的形状信息，作为所述二维图像的附属信息，和该二维图像的数据一起提供。
如果是上述构成，则通过由深度信息提供二维图像中的每一个目标的深度，并提供其形状信息，从而利用被提供侧中所保有的每一个形状的深度值表，可以获得构成每一个目标的像素的深度，和针对二维图像的全部像素设定各个深度信息的情况相比，可以削减所提供的深度信息量，同时能够生成被提供侧的良好质量的立体观察用图像。
在这些立体观察用图像提供方法中，可以通过广播、通信、向记录介质的记录的任意一个来进行信息的提供。
另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得标度信息和深度信息的机构；利用所述标度信息和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构。
此外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得深度信息和函数指定信息的机构；存储使由所述深度值表示的距离等效值相对该深度信息值的等级差别而设为非等间隔的多个函数、的机构；根据所述函数指定信息来选择函数的机构；利用所选择的函数和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构。
在上述构成中，也可以构成为：利用表示图像显示面位置的信息，判定提供基准视差量的深度值。
另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得深度信息和表指定信息的机构；存储使由所述深度值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的多个表、的机构；根据所述表指定信息来选择表的机构；利用所选择的表和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构。
此外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：在从所述附属信息，取得由于所述二维图像的画面区域不同而以不同位数表示的深度信息的情况下，将所述二维图像的画面区域中用不同位数表示的深度信息，应用于画面区域的每一个像素，以生成立体观察用图像的机构。
进而，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：在从所述附属信息取得数量比所述二维图像像素数还少的深度信息的情况下，采用附加在所述二维图像多个像素上的共同值的所述深度信息，以生成立体观察用图像的机构。
再有，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得向所述二维图像中的每一个目标提供的第一深度信息和向构成每一个目标的像素提供的第二深度信息的机构；对所述第一深度信息加入所述第二深度信息而生成每一个像素的深度信息的机构；根据所述每一个像素的深度信息，生成立体观察用图像的机构。
另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得向所述二维图像中的每一个目标提供的深度信息和每一个目标的形状信息的机构；存储将深度信息与构成每一个形状的像素群的每一个像素对应的表、的机构；根据所述形状信息选择所述表的机构；将从所述表获得的深度信息加入对所述每一个目标提供的深度信息中，以生成每一个像素的深度信息的机构；根据所述每一个像素的深度信息，生成立体观察用图像的机构。
附图说明
图1(a)、(b)、(c)是表示本发明实施方式的立体观察用图像提供方法和立体图像显示装置的说明图。
图2是表示二维图像和附随其中的深度图像的说明图。
图3(a)、(b)是表示分辨能力与表现范围的关系的说明图。
图4(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。
图5(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。
图6(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。
图7是表示：将深度信息在图像的外周侧设为3位而在中央的50％×50％区域设为6位的、说明图。
图8是表示使深度信息在图像上的不同位置变为不同的其他例子的说明图。
图9(a)是表示提供附加在二维图像的多数像素中的共同值的深度信息的说明图；图9(b)是表示该深度信息的发送形态的说明图。
图10(a)、(b)、(c)、(d)是表示深度信息的提供方法的其他例子的说明图。
图11是表示图10的具体例子的说明图。
图12是表示图10的其他具体例子的说明图。
具体实施方式
下面，根据附图1至12，说明本发明的立体观察用图像提供方法和立体图像显示装置。
根据图1来说明：利用二维图像和深度图像(深度信息)，生成立体图像。另外，在图1中，作为由作为广播局或互联网上的服务器而构成的发送侧装置1；和广播接收装置或具备网络连接环境的个人用电子计算机或移动电话等接收侧装置2所构成的系统来说明。
图1(a)表示作为原图像的二维图像100。在发送侧装置1中，对二维图像100进行图像分析。如图1(b)所示，抽出背景图像101、山的图像102、树的图像103、人的图像104。将这些被抽出的图像作为目标(例如，边界信息)来处理。并且，以像素为单位提供深度值，以生成深度图像。另外，也可以以目标为单位提供深度值。深度值可以自动(估计)提供，也可以手动操作来提供。
这样，在发送侧装置1中，在提供(发送、广播)图像时，将深度图像作为所述图像的附属信息发送。并且，在本实施方式中，也发送其他附属信息。至于其他附属信息，在后面叙述。在数字化广播的情况下，可以将图像数据和各种附属信息多重化为传送流(transport stream)后进行广播。在利用计算机网络的传送中，也可以将图像数据和各种附属信息多重化后发送。
但是，在利用二维图像和深度图像来生成立体观察用图像的情况下，可以将深度图像考虑为一种二维图像，所以，如图2所示，只要提供二维图像和深度图像的两张图像就可以。因此，在双眼式立体观察中，可以应用和提供两张L图像和R图像同样的想法。但是，在双眼式立体观察用图像或多视点用图像中，每一个视点图像之间格式不会不同，与此相反，利用二维图像和深度图像来制作立体观察用图像的情况下，深度图像在单色(monochrome)图像中可以容易变为对每一个像素分配了几位的图像。因此，预先规定用哪一位来表现深度图像的一个像素(对应于二维图像的每一个像素的深度信息)，或者从发送侧装置1向接收侧装置2提供表示一个像素的位数的信息。并且，在将深度图像作为单色图像来表现的情况下，变为区别：如果更白就表示近距离等效值或如果更黑就表示近距离等效值，因此，可以对此预先规定，或也可以从发送侧发送表示该意思的信息。
[其他附属信息]
①发送侧装置1在将二维图像作为数据提供时，将所述深度图像和该深度图像值的标度信息，作为所述二维图像的附属信息，和该二维图像数据一起发送。最好是：设为深度图像的每一个像素的位数已经决定，并且表示分辨能力与绝对距离等效值之间的关系。图3例示了用3位表示一个像素的深度值的情况(实际上不会存在3位的情况，但是为了说明的方便，设为3位)。对每一个像素分配3位的情况下，可以表现8级的深度，但为了表示一个刻度相当于多大的绝对距离，发送标度信息。在图3(a)中，将分辨能力设为100mm，可以覆盖从0至800mm的宽的范围。并且，在图3(b)中，将分辨能力设为10mm，可以覆盖从0至80mm的窄的范围。因此，通过发送标度信息，从而能够使接收侧装置2制作具有宽窄各式各样深度的立体观察用图像。
②在将二维图像作为数据提供时，发送侧装置1将所述深度图像、与使由该深度图像值表示的距离等效值相对深度图像值的等级差别设为非等间隔的定义信息作为附属信息，和该二维图像数据一起发送。在上述的图3中，示出了以等间隔来表现深度(depth)的情况，但是没有必要必须是等间隔。对深度的分辨能力，例如，虽然前面为细的较好，但也可认为远的为粗也可以，所以，在每一个像素的位数有限的情况下，考虑用非等间隔来表现的方法效率高的情形。在图4(a)中表示使前面侧的分辨能力变细的对数(log)型的表现。利用图5更详细叙述。在图5中，定义：M为最大深度值(在此为7(111))；深度值A为从1到M的正数；B＝(M-A)/2；将深度值A与A-1之间的视差间隔进行2的B次方。并且，在图5(a)中将管面位置设为(010)，在图5(b)中将管面位置设为(100)。在利用这种函数的情况下，与管面位置无关，使前面侧(观察者侧)的分辨能力变细。
另一方面，在图4(b)所示的例子中，越接近管面(图像显示面位置)则深度的分辨能力越细，随着离开管面、深度的分辨能力越粗。利用图6更详细地叙述。在图6中，将最大视差(正)与最小视差(负)之间的差设为22，将视差间隔规定为按顺序使用“1、1、2、2、4、4、8、8”的数值的列。并且，在图6(a)中，管面位置为010，在图6(b)中，管面位置作为011。于是，可以将管面位置附近的深度设定为细。
在设为上述的非等间隔表现的情况下，虽然可以采用在发送接收期间固定性地决定一个非等间隔表现的方法，但是，在接收侧可以自在地指定几个非等间隔表现的方法较好。例如，通过设为发送2位的指定信息并在接收侧准备四个函数(包含上述的数值列的规定)，可以实现4种非等间隔表现。另外，对于管面位置，虽然可以采用在发送接收期间固定性地决定一个管面位置的方法(例如，010固定性地作为管面位置等)，但在接收侧可以任意指定管面位置更好。该情况下，如果将010作为管面位置，则作为管面位置信息只要发送010就可以。
不限于上述的利用函数的非等间隔表现，也可以是接收侧具备表。当然，也可以在接收侧准备多个这样的表，根据从发送侧发送来的表指定信息来选择表。
③在将二维图像作为数据提供时，发送侧装置1将因所述二维图像的画面区域不同而以不同位数表示的深度图像作为所述二维图像的附属信息，和该二维图像数据一起发送。该情况下，优选与二维图像的中央侧相比，在外周侧减少所述深度信息的位数。例如，如图7所示，外周设为3位，中央的50％×50％区域设为6位。虽然可以采用在发送接收期间固定性地决定一个区域分割图案的方法，但也可以是准备多个区域分割图案，在接收侧指定任意图案。或者也可以记述每一个像素的最初是哪个位的信息。例如，如果定义0为3位、定义1为6位，则像素信息可以记述为，像素1(0 000)、像素2(0 000)、像素3(1 000000)......。
而且，在上述的区域分割例子中是分割为两个，但不限于这些，也可以如图8所示，分割为3位区域、4位区域、和6位区域等三个区域。另外，也可以根据图像内容(目标配置状态)或景物(在时间轴上)而使分割区域图案不同。另外，在图8所示的人物图像的情况下，人物的脸、身体等结构是可以唯一定义的，所以，其构成可以是：准备对应于那些的深度图像表，当摄像对象为人物时，通过选择(由操作者的选择或通过自动判定摄像对象来选择)对应其的深度图像表，从而可以自动选择图8的分割区域图案。
④是在将二维图像作为数据提供时，发送侧装置1将附加在所述二维图像上的共同值的深度图像作为所述二维图像的附属信息，和该二维图像数据一起发送。虽然可以使深度图像基本上等于二维图像，但不限于这些，也可能不同于二维图像。例如，对二维图像的2×2像素分配深度图像的一个像素(深度图像的分辨率变为2D图像的1/4)。并且，也可以与二维图像的中央从相比，在外周侧增加提供所述共同值的深度信息的像素数。例如，如图9(a)所示，在外周以3×3像素(pixel)提供共同的深度信息，在中央的50％×50％区域以2×2像素提供共同的深度信息。虽然可以采用在接收发送期间固定性地决定一个区域分割图案的方法，但也可以采用：先准备多个区域分割图案，在接收侧指定任意图案的方法。在深度图像(单色图像)的发送中，如图9(b)所示，分割为4个区域(区域V相当于所述中央的50％×50％区域)，以每一个区域为单位按顺序发送。
⑤在将二维图像作为数据提供时，发送侧装置1将向所述二维图像中的每一个目标提供的第一深度图像和向构成每一个目标的像素提供的第二深度图像，作为所述二维图像的附属信息，和该二维图像数据一起发送。即，一旦用深度图像大量地表现目标，进一步细分深度图像后分配给每一个目标。图10是表示该方法的概念的说明图。在图10(b)中表示：从上侧看图10(a)所示的摄像状态时的被摄像体(目标)的深度状态。该图10(b)的深度状态不仅作为图像存在，还在摄影时或编辑时等中作为信息提供。即，如图10(c)所示，将深度状态分割为笼统的层，对位于其层上位置的每一个目标提供分层信息(第一深度图像)。然后，对每一个目标的像素分配第二深度图像。图11是表示图像发送的具体例。该图11的图像号码1是作为原图像而被发送的图像，对此附加图像号码2的图像(第一深度图像)。进一步，附加作为每一个目标的第二深度图像的图像(图像号码3、图像号码4、图像号码5)。即，从发送侧发送图像号码1到图像号码5的图像，在接收侧利用这些5个图像来合成1个图像。并且，在此例中，每一个目标的第二深度图像信息并未设为相同位数，而是人为8位、树为4位等不同的位。
⑥在将二维图像作为数据提供时，发送侧装置1将提供给所述二维图像中的每一个目标的深度图像和每一个目标的形状信息作为所述二维图像的附属信息，和该二维图像数据一起发送。图12表示该图像发送的具体例。该图12的图像号码1是作为原图像而被发送的图像，对此附加图像号码2的单色图像(深度图像)。进一步，附加每一个目标的构成要素的形状信息。该形状信息，例如，由目标号码(例如，表示人、树中的哪一个的信息)、构成要素号码(例如，表示人的头部、身体、腿等构成要素的信息)、形状信息(表示所述构成要素是球、圆柱还是圆锥的信息)、构成要素之间的配置信息(例如，在树中三角锥球的下面存在圆柱等的信息)等构成。对不能特定形状的山，作为单色图像(深度图像)发送。在接收侧，利用这些信息来合成一个图像。
[接收侧装置]
如图1(c)所示，接收侧装置2接收图像数据、深度图像、其他附属信息。这些数据只要是多路复用，就可以进行多路分配(DEMUX)处理。对图像数据的译码处理基本上采用：例如基于MPEG的处理等。然后，在接收侧装置2中，根据图像数据和深度图像等生成提供视差的右眼图像105R和左眼图像105L。因此，在接收侧装置2具备：用于接收数据的接收部21(调制解调器、调谐器等)、多路分配器22(DEMUX)、译码部23、根据二维图像数据和深度图像来生成视差图像的图像生成部24、监视器25等。
接收侧装置2例如通过在监视器前面位置具备液晶阻挡层，从而可以进行平面观察图像的显示和立体观察图像的显示的双方。例如，立体观察图像若为右眼图像和左眼图像交替配置成纵向带状的图像，则通过CPU的控制，在液晶阻挡层形成纵向带状的遮光区域。另外，不限于右眼图像和左眼图像交替配置成纵向带状的立体图像，例如，也可以是将右眼图像和左眼图像交替配置成斜向配置的立体图像(参照特许第3096613号公报)，该情况下，在液晶阻挡层形成斜向阻挡层。
接收侧装置2的CPU26从多路分配器22接收所述其他附属信息，并执行基于该附属信息的图像显示控制处理。下面，说明该图像显示控制处理。
如果接收侧装置2的CPU26将标度信息作为附属信息而取得，则根据该标度信息和深度图像来决定视差量(像素偏移量)。即，即使对于某些像素已经设定有A值的深度值，在标度信息为B的情况和C的情况(B≠C)，视差图像的像素偏移量也会变得不同。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息生成视差图像。
如果接收侧装置2的CPU26将函数指定信息作为附属信息而取得，则根据该函数指定信息来选择函数。存储器27中存储有：使由深度图像值表示的距离等效值相对该深度信息值的等级差别变为非等间隔的多个函数(定义)。CPU26根据所选择的函数和所接收的深度值，运算出视差量(像素偏移量)。在此利用图5(a)进行具体说明。接收侧装置2利用B＝(M-A)/2的运算和2的B次方的运算，获得深度值A与A-1之间的视差间隔。另外，由于视差间隔本身可以由表示深度值的位数来决定，故也可以将视差间隔本身与位数加以对应后存储在所述存储器27中，读出这些。管面位置是深度值设为010的地点。在所接收的深度值为010时，101比101大三个刻度，所以通过4+2+2的运算而获得视差量8。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息来生成视差图像。
如果接收侧装置2的CPU26将表指定信息作为附属信息而取得，则根据该表指定信息来选择表。在存储器27中存储有将深度值与视差量加以对应的多个表。如果以所述图5(a)为例，则表的内容变为：000＝-12、001＝-4、010＝0......的表。例如，CPU26作为地址例如向所述表提供所接收的深度值之后，从该表中读出视差量信息，并将该视差量信息提供给图像生成部24，图像生成部24根据视差量信息来生成视差图像。
接收侧装置2依据图5(a)(b)所示的设定时生成视差图像，该图像相当于：非等间隔的成为大间隔的区域形成在距离观察者远的位置上，变为小间隔的区域形成在距离观察者近的位置上。并且，接收侧装置2依据图5(a)(b)所示的设定时，生成视差图像，该视差图像相当于：非等间隔的变为大间隔的区域形成在距离图像显示面位置远的位置上，变为小间隔的区域形成在距离图像显示面位置近的位置上。
在接收侧装置2取得因二维图像的画面不同区域而以不同位数表示的深度图像的情况下，将所述二维图像的画面区域中以不同位数表示的深度图像应用在每一个像素中，以生成立体观察用图像。例如，如图7所示，在从发送侧接收了表示已经选择其外周设为3位、中央的50％×50％的区域设为6位的图案的情况下，从由该信息特定的图案，CPU26判断每一个深度值的位数。并且，在记述有每一个深度值(像素)的最初为哪个位的信息的情况下，按照其记述可以判断每一个深度值的位数。
接收侧装置2取得比二维图像像素数还少的深度信息的情况下，应用附加在所述二维图像多数像素上的共同值的所述深度信息，生成立体观察用图像。例如，如图9(a)所示，从发送侧接收了表示已经选择外周以3×3像素提供共同的深度信息、中央的50％×50％的区域以2×2像素提供共同的深度信息模型的情况下，从由该信息特定的图案，CPU26判断：哪一个像素已经组合化并提供有共同的深度信息。然后，例如，在图像生成部24进行对二维图像的第一行的从左的3个像素份、第二行的从左的3个像素份、第三行的从左的3个像素份合计9个像素份的视差图像生成处理时，变为利用从CPU26提供的共同的(一个)视差量。
接收侧装置2取得对二维图像中的每一个目标提供的第一深度信息和对构成每一个目标的像素提供的第二深度信息，在第一深度信息中加进所述第二深度信息，以生成每一个像素的深度信息。例如，如图11所示，接收侧装置2接收发送侧所发送的图像号码1到图像号码5的图像，CPU26根据利用图像号码2的每一个目标的2位的深度图像、和利用图像号码3到图像号码5的每一个目标的构成像素的深度图像，来生成每一个像素的视差量信息。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息而生成视差图像。
接收侧装置2在其存储器27中存储有：构成每一个形状(球、圆柱、三角锥)的像素群的每一个像素上加以对应了深度信息的深度表。并且，在作为附属信息取得每一个目标的形状信息时，选择对应于其形状的深度表而读出深度信息。对该深度信息(单色图像)进行与所谓的像素补充或像素剔除处理相当的处理，可以使深度图像对应于目标的大小。CPU26在向各目标提供的深度信息中加入从上述表得到的深度信息，生成各像素的视差量信心。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息而生成视差图像。
如上述所说明的，根据本发明，能够进行多样的立体图像显示。并且，获得可以削减所提供的信息量的效果。

Claims (24)

1、一种立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，作为附属信息，和该二维图像的数据一起提供的是：对将所述二维图像的数据变换为立体观察用图像有用的深度信息；和该深度信息值的标度信息。
2、一种立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，作为附属信息，和该二维图像的数据一起提供的是：对将所述二维图像的数据变换为立体观察用图像有用的深度信息；将该深度信息值所表示的距离等效值相对该深度信息值的等级差别设为非等间距用的定义信息。
3、根据权利要求2所述的立体观察用图像提供方法，其特征在于，所述定义信息是从函数群指定任意函数的信息。
4、根据权利要求3所述的立体观察用图像提供方法，其特征在于，使附属信息中包含：表示所述深度信息值中的哪一个值成为图像显示面位置的信息。
5、根据权利要求2所述的立体观察用图像提供方法，其特征在于，所述定义信息是从相对深度信息值而预先设定视差量的表群中指定任意表的信息。
6、根据权利要求2至5中任一项所述的立体观察用图像提供方法，其特征在于，设定所述定义信息，以便将所述非等间隔的变为大间隔的区域形成在距离观察者远的位置上，将变为小间隔的区域形成在距离观察者近的位置上。
7、根据权利要求2至5所述的立体观察用图像提供方法，其特征在于，设定所述定义信息，以便将所述非等间隔的变为大间隔的区域形成在距离图像显示面位置远的位置上，将变为小间隔的区域形成在距离图像显示面位置近的位置上。
8、一种立体观察用图像提供方法，其特征在，在将二维图像作为数据提供时，将以所述二维图像的画面区域不同而以不同位数表示的深度信息作为所述二维图像的附属信息，和该二维图像的数据一起提供。
9、根据权利要求8所述的立体观察用图像提供方法，其特征在于，与所述二维图像的中央侧相比，在外周侧减少所述深度信息的位数。
10、根据权利要求8或9所述的立体观察用图像提供方法，其特征在于，将表示在画面的哪一个区域中以哪个位来表示深度信息的信息，作为附属信息，和该二维图像的数据一起提供。
11、根据权利要求8或9所述的立体观察用图像提供方法，其特征在于，将表示每一个像素是以哪个位来表示深度信息的信息，作为附属信息，和该二维图像的数据一起提供。
12、一种立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将附加在所述二维图像的多个像素上的共同值的深度信息作为所述二维图像的附属信息，和该二维图像的数据一起提供。
13、根据权利要求12所述的立体观察用图像提供方法，其特征在于，与所述二维图像的中央侧相比，在外周侧增多提供所述共同值的深度信息的像素数。
14、一种立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和向构成每一个目标的像素提供的第二深度信息，作为所述二维图像的附属信息，和该二维图像的数据一起提供。
15、一种立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和每一个目标的形状信息，作为所述二维图像的附属信息，和该二维图像的数据一起提供。
16、根据权利要求1至15所述的立体观察用图像提供方法，其特征在于，信息的提供是通过广播、通信、向记录介质的记录的任意一种来进行的。
17、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得标度信息和深度信息的机构；
由所述标度信息和所述深度信息来生成视差量的机构；和
根据所述视差量生成立体观察用图像的机构。
18、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得深度信息和函数指定信息的机构；
存储将由所述深度值来表示的距离等效值相对该深度信息值的等级差别设为非等间隔的多个函数、的机构；
根据所述函数指定信息来选择函数的机构；
利用所选择的函数和所述深度信息来生成视差量的机构；和
根据所述视差量来生成立体观察用图像的机构。
19、根据权利要求18所述的立体图像显示装置，其特征在于，利用表示图像显示面位置的信息，可以判定提供基准视差量的深度值。
20、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得深度信息和表指定信息的机构；
存储将由所述深度值来表示的距离等效值相对该深度信息值的等级差别设为非等间隔的多个表、的机构；
根据所述表指定信息来选择表的机构；
利用所选择的表和所述深度信息来生成视差量的机构；和
利用所述视差量来生成立体观察用图像的机构。
21、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得因所述二维图像的画面区域不同而以不同位数表示的深度信息的情况下，将所述二维图像的画面区域中用不同位数表示的深度信息应用在画面区域的每一个像素，以生成立体观察用图像的机构。
22、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得数量比所述二维图像的像素数还少的深度信息的情况下，应用附加在所述二维图像的多个像素上的共同值的所述深度信息，以生成立体观察用图像的机构。
23、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得向所述二维图像中的每一个目标提供的第一深度信息和提供给构成每一个目标的像素的第二深度信息的机构；
在所述第一深度信息中加入所述第二深度信息，以生成每一个像素的深度信息的机构；和
根据每一个像素的深度信息，生成立体观察用图像的机构。
24、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：
从所述附属信息取得提供给所述二维图像中的每一个目标的深度信息和每一个目标的形状信息的机构；
存储将深度信息与构成每一个形状的像素群的每一个像素加以对应的表、的机构；
根据所述形状信息选择所述表的机构；
将从所述表获得的深度信息加入到提供给所述每一个目标的深度信息中，以生成每一个像素的深度信息的机构；和
根据所述每一个像素的深度信息，生成立体观察用图像的机构。
CNB2004800024405A 2003-01-20 2004-01-19 立体观察用图像提供方法和立体图像显示装置 Expired - Fee Related CN100551083C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003010804 2003-01-20
JP010804/2003 2003-01-20

Publications (2)

Publication Number Publication Date
CN1739303A true CN1739303A (zh) 2006-02-22
CN100551083C CN100551083C (zh) 2009-10-14

Family

ID=32844080

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004800024405A Expired - Fee Related CN100551083C (zh) 2003-01-20 2004-01-19 立体观察用图像提供方法和立体图像显示装置

Country Status (6)

Country Link
US (1) US7403201B2 (zh)
EP (1) EP1587329B1 (zh)
JP (1) JP4188968B2 (zh)
KR (1) KR100905371B1 (zh)
CN (1) CN100551083C (zh)
WO (1) WO2004071102A1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101917643A (zh) * 2010-07-09 2010-12-15 清华大学 一种全自动2d转3d技术中的实时镜头检测方法和装置
CN101951527A (zh) * 2009-07-10 2011-01-19 索尼公司 信息处理设备和信息处理方法
CN102055998A (zh) * 2009-10-28 2011-05-11 索尼公司 图像处理装置、图像处理方法和程序
CN102158725A (zh) * 2011-05-06 2011-08-17 深圳超多维光电子有限公司 一种生成立体图像的方法和系统
CN102177721A (zh) * 2008-10-10 2011-09-07 皇家飞利浦电子股份有限公司 处理信号中包括的视差信息的方法
CN102187267A (zh) * 2008-10-20 2011-09-14 夏普株式会社 用于处理图像数据以由显示装置显示的方法和设备
CN102246529A (zh) * 2008-12-15 2011-11-16 皇家飞利浦电子股份有限公司 基于图像的3d视频格式
CN102428501A (zh) * 2009-09-18 2012-04-25 株式会社东芝 图像处理装置
CN102812715A (zh) * 2011-01-27 2012-12-05 松下电器产业株式会社 三维图像摄影装置以及三维图像拍摄方法
CN102884803A (zh) * 2011-05-11 2013-01-16 松下电器产业株式会社 图像处理装置、影像处理方法、程序、集成电路
CN102986231A (zh) * 2010-06-11 2013-03-20 富士胶片株式会社 立体图像显示装置、立体成像装置及方法
CN103024408A (zh) * 2011-09-22 2013-04-03 株式会社东芝 立体图像转换装置和方法、立体图像输出装置
CN101765020B (zh) * 2008-12-23 2013-10-23 康佳集团股份有限公司 一种可感应立体图像的电视机
CN105074781A (zh) * 2013-03-15 2015-11-18 英特尔公司 可变分辨率深度表示
CN106537909A (zh) * 2014-07-17 2017-03-22 索尼互动娱乐股份有限公司 立体图像呈现装置、立体图像呈现方法和头戴式显示器
CN109255810A (zh) * 2014-08-20 2019-01-22 佳能株式会社 图像处理装置及图像处理方法

Families Citing this family (75)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0329312D0 (en) * 2003-12-18 2004-01-21 Univ Durham Mapping perceived depth to regions of interest in stereoscopic images
KR100579135B1 (ko) * 2004-11-11 2006-05-12 한국전자통신연구원 수렴형 3차원 다시점 영상 획득 방법
CN100565589C (zh) * 2005-01-12 2009-12-02 皇家飞利浦电子股份有限公司 用于深度感知的装置和方法
JP4283785B2 (ja) * 2005-05-10 2009-06-24 株式会社マーキュリーシステム 立体視画像生成装置およびプログラム
JP4645356B2 (ja) * 2005-08-16 2011-03-09 ソニー株式会社 映像表示方法、映像表示方法のプログラム、映像表示方法のプログラムを記録した記録媒体及び映像表示装置
JP4463215B2 (ja) * 2006-01-30 2010-05-19 日本電気株式会社 立体化処理装置及び立体情報端末
WO2007096816A2 (en) * 2006-02-27 2007-08-30 Koninklijke Philips Electronics N.V. Rendering an output image
KR100763753B1 (ko) * 2006-09-21 2007-10-04 에스케이 텔레콤주식회사 통신망 기반의 3차원 입체방송 서비스 시스템 및 방법
EP2105032A2 (en) * 2006-10-11 2009-09-30 Koninklijke Philips Electronics N.V. Creating three dimensional graphics data
US8358301B2 (en) * 2006-10-30 2013-01-22 Koninklijke Philips Electronics N.V. Video depth map alignment
US8496575B2 (en) * 2006-11-14 2013-07-30 Olympus Corporation Measuring endoscope apparatus, program and recording medium
KR100913397B1 (ko) * 2006-12-04 2009-08-21 한국전자통신연구원 Ｄｍｂ기반의 3차원 입체영상 서비스를 위한 객체 기술방법과, 그에 따른 3차원 입체영상 서비스 수신 및 영상포맷 변환 방법
JP2008141666A (ja) * 2006-12-05 2008-06-19 Fujifilm Corp 立体視画像作成装置、立体視画像出力装置及び立体視画像作成方法
KR100905723B1 (ko) * 2006-12-08 2009-07-01 한국전자통신연구원 비실시간 기반의 디지털 실감방송 송수신 시스템 및 그방법
WO2009034519A1 (en) * 2007-09-13 2009-03-19 Koninklijke Philips Electronics N.V. Generation of a signal
JP2009135686A (ja) * 2007-11-29 2009-06-18 Mitsubishi Electric Corp 立体映像記録方法、立体映像記録媒体、立体映像再生方法、立体映像記録装置、立体映像再生装置
JP2009163717A (ja) * 2007-12-10 2009-07-23 Fujifilm Corp 距離画像処理装置および方法、距離画像再生装置および方法並びにプログラム
JP2009162748A (ja) * 2007-12-10 2009-07-23 Fujifilm Corp 距離画像処理装置および方法、距離画像再生装置および方法並びにプログラム
JP5147650B2 (ja) * 2007-12-10 2013-02-20 富士フイルム株式会社 距離画像処理装置および方法、距離画像再生装置および方法並びにプログラム
JP4998956B2 (ja) * 2007-12-10 2012-08-15 富士フイルム株式会社 距離画像処理装置および方法、距離画像再生装置および方法並びにプログラム
US20090148038A1 (en) * 2007-12-10 2009-06-11 Youichi Sawachi Distance image processing apparatus and method
KR101367282B1 (ko) * 2007-12-21 2014-03-12 삼성전자주식회사 깊이 정보에 대한 적응적 정보 표현 방법 및 그 장치
WO2009147581A1 (en) * 2008-06-02 2009-12-10 Koninklijke Philips Electronics N.V. Video signal with depth information
JP2010028456A (ja) * 2008-07-18 2010-02-04 Sony Corp データ構造、再生装置および方法、並びにプログラム
KR101749893B1 (ko) 2008-07-24 2017-06-22 코닌클리케 필립스 엔.브이. 다목적 ３―ｄ 화상 포맷
WO2010023592A1 (en) * 2008-08-26 2010-03-04 Koninklijke Philips Electronics N.V. Method and system for encoding a 3d video signal, encoder for encoding a 3-d video signal, encoded 3d video signal, method and system for decoding a 3d video signal, decoder for decoding a 3d video signal
CN101754042B (zh) * 2008-10-30 2012-07-11 华为终端有限公司 图像重构方法和图像重构系统
KR101502365B1 (ko) 2008-11-06 2015-03-13 삼성전자주식회사 삼차원 영상 생성기 및 그 제어 방법
US8335425B2 (en) * 2008-11-18 2012-12-18 Panasonic Corporation Playback apparatus, playback method, and program for performing stereoscopic playback
US9013551B2 (en) 2008-12-01 2015-04-21 Imax Corporation Methods and systems for presenting three-dimensional motion pictures with content adaptive information
EP2194504A1 (en) * 2008-12-02 2010-06-09 Koninklijke Philips Electronics N.V. Generation of a depth map
JP5627860B2 (ja) 2009-04-27 2014-11-19 三菱電機株式会社 立体映像配信システム、立体映像配信方法、立体映像配信装置、立体映像視聴システム、立体映像視聴方法、立体映像視聴装置
JP5274359B2 (ja) 2009-04-27 2013-08-28 三菱電機株式会社 立体映像および音声記録方法、立体映像および音声再生方法、立体映像および音声記録装置、立体映像および音声再生装置、立体映像および音声記録媒体
US9294751B2 (en) 2009-09-09 2016-03-22 Mattel, Inc. Method and system for disparity adjustment during stereoscopic zoom
US8614737B2 (en) * 2009-09-11 2013-12-24 Disney Enterprises, Inc. System and method for three-dimensional video capture workflow for dynamic rendering
WO2011033668A1 (ja) * 2009-09-18 2011-03-24 株式会社 東芝 視差画像生成装置
US8884948B2 (en) * 2009-09-30 2014-11-11 Disney Enterprises, Inc. Method and system for creating depth and volume in a 2-D planar image
BR112012007115A2 (pt) * 2009-10-02 2020-02-27 Koninklijke Philips Electronics N.V. Método de codificação de um sinal de dados de vídeo 3d, método de decodificação de um sinal de vídeo 3d, codificador para codificar um sinal de dados de vídeo 3d, decodificador para decodificar um sinal de dados de vídeo 3d, produto de programa de computador para codificar um sinal de dados de vídeo, produto de programa de computador para decodificar um sinal de vídeo, sinal de dados de vídeo 3d, e portador de dados digitais
JP2011120233A (ja) * 2009-11-09 2011-06-16 Panasonic Corp ３ｄ映像特殊効果装置、３ｄ映像特殊効果方法、および、３ｄ映像特殊効果プログラム
EP2323412A1 (en) * 2009-11-13 2011-05-18 Koninklijke Philips Electronics N.V. Generating an image signal
US8538135B2 (en) 2009-12-09 2013-09-17 Deluxe 3D Llc Pulling keys from color segmented images
US8638329B2 (en) * 2009-12-09 2014-01-28 Deluxe 3D Llc Auto-stereoscopic interpolation
US20110169818A1 (en) * 2010-01-13 2011-07-14 Sharp Laboratories Of America, Inc. Reducing viewing discomfort
JP5505881B2 (ja) * 2010-02-02 2014-05-28 学校法人早稲田大学 立体映像制作装置およびプログラム
KR101669486B1 (ko) * 2010-02-12 2016-10-26 엘지전자 주식회사 영상표시장치 및 그 동작방법
GB2477793A (en) 2010-02-15 2011-08-17 Sony Corp A method of creating a stereoscopic image in a client device
JP5660361B2 (ja) * 2010-03-26 2015-01-28 ソニー株式会社 画像処理装置および方法、並びにプログラム
JP4860763B2 (ja) * 2010-03-29 2012-01-25 シャープ株式会社 画像符号化装置、画像符号化装置の制御方法、制御プログラムおよび記録媒体
JP5227993B2 (ja) * 2010-03-31 2013-07-03 株式会社東芝 視差画像生成装置、及びその方法
JP2011223481A (ja) * 2010-04-14 2011-11-04 Sony Corp データ構造、画像処理装置、画像処理方法、およびプログラム
JP4806088B1 (ja) * 2010-06-28 2011-11-02 シャープ株式会社 画像変換装置、画像変換装置の制御方法、画像変換装置制御プログラムおよび記録媒体
US8446461B2 (en) * 2010-07-23 2013-05-21 Superd Co. Ltd. Three-dimensional (3D) display method and system
KR20120023268A (ko) * 2010-09-01 2012-03-13 삼성전자주식회사 디스플레이 장치 및 그 영상 생성 방법
JP2012089931A (ja) * 2010-10-15 2012-05-10 Sony Corp 情報処理装置、情報処理方法およびプログラム
WO2012060172A1 (ja) * 2010-11-04 2012-05-10 シャープ株式会社 動画像符号化装置、動画像復号装置、動画像伝送システム、動画像符号化装置の制御方法、動画像復号装置の制御方法、動画像符号化装置制御プログラム、動画像復号装置制御プログラム、および記録媒体
WO2012060168A1 (ja) * 2010-11-04 2012-05-10 シャープ株式会社 符号化装置、復号装置、符号化方法、復号方法、プログラム、記録媒体、および符号化データ
WO2012060179A1 (ja) * 2010-11-04 2012-05-10 シャープ株式会社 符号化装置、復号装置、符号化方法、復号方法、プログラム、記録媒体、および符号化データのデータ構造
JP5438082B2 (ja) * 2010-11-16 2014-03-12 パナソニック株式会社 表示装置及び表示方法
KR20120105169A (ko) * 2011-03-15 2012-09-25 삼성전자주식회사 복수의 거리 픽셀들을 포함하는 3차원 이미지 센서의 구동 방법
JP5792662B2 (ja) * 2011-03-23 2015-10-14 シャープ株式会社 視差算出装置、距離算出装置及び視差算出方法
JP5291755B2 (ja) * 2011-04-21 2013-09-18 株式会社エム・ソフト 立体視画像生成方法および立体視画像生成システム
JP5355616B2 (ja) * 2011-04-21 2013-11-27 株式会社エム・ソフト 立体視画像生成方法および立体視画像生成システム
JP2011211739A (ja) * 2011-06-01 2011-10-20 Fujifilm Corp 立体視画像作成装置、立体視画像出力装置及び立体視画像作成方法
JP5582101B2 (ja) * 2011-06-23 2014-09-03 コニカミノルタ株式会社 画像処理装置、そのプログラム、および画像処理方法
JP5377589B2 (ja) * 2011-07-07 2013-12-25 三菱電機株式会社 再生方法、再生装置、光ディスク
JP5383833B2 (ja) * 2012-01-20 2014-01-08 三菱電機株式会社 映像情報記録方法、映像情報再生方法、映像情報記録装置、映像情報再生装置、光ディスク
CN104769940B (zh) * 2012-04-13 2017-07-11 皇家飞利浦有限公司 深度信令数据
WO2013186882A1 (ja) * 2012-06-13 2013-12-19 株式会社エム・ソフト 立体視画像生成方法および立体視画像生成システム
JP6109371B2 (ja) * 2016-03-31 2017-04-05 三菱電機株式会社 映像再生方法、映像再生装置、光ディスク
US10255714B2 (en) 2016-08-24 2019-04-09 Disney Enterprises, Inc. System and method of gaze predictive rendering of a focal area of an animation
US10042421B2 (en) 2016-08-24 2018-08-07 Disney Enterprises, Inc. System and method of latency-aware rendering of a focal area of an animation
CN109891463B (zh) * 2016-10-25 2023-08-29 索尼公司 图像处理设备和图像处理方法
WO2018123801A1 (ja) 2016-12-28 2018-07-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置
CN111406412B (zh) 2017-04-11 2021-09-03 杜比实验室特许公司 分层的增强型娱乐体验
WO2019167453A1 (ja) * 2018-02-28 2019-09-06 富士フイルム株式会社 画像処理装置、画像処理方法、およびプログラム

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6590573B1 (en) * 1983-05-09 2003-07-08 David Michael Geshwind Interactive computer system for creating three-dimensional image information and for converting two-dimensional image information for three-dimensional display systems
US5257345A (en) * 1990-05-11 1993-10-26 International Business Machines Corporation Computer system and method for displaying functional information with parallax shift
TW335466B (en) * 1995-02-28 1998-07-01 Hitachi Ltd Data processor and shade processor
US6384859B1 (en) * 1995-03-29 2002-05-07 Sanyo Electric Co., Ltd. Methods for creating an image for a three-dimensional display, for calculating depth information and for image processing using the depth information
US5798762A (en) * 1995-05-10 1998-08-25 Cagent Technologies, Inc. Controlling a real-time rendering engine using a list-based control mechanism
JP3096613B2 (ja) 1995-05-30 2000-10-10 三洋電機株式会社 立体表示装置
JP3635359B2 (ja) * 1995-11-09 2005-04-06 株式会社ルネサステクノロジ 透視投影計算装置および透視投影計算方法
JP3231618B2 (ja) * 1996-04-23 2001-11-26 日本電気株式会社 ３次元画像符号化復号方式
EP0928460B1 (en) * 1997-07-29 2003-01-29 Philips Electronics N.V. Method of reconstruction of tridimensional scenes and corresponding reconstruction device and decoding system
JPH11113028A (ja) * 1997-09-30 1999-04-23 Toshiba Corp ３次元映像表示装置
US6208348B1 (en) * 1998-05-27 2001-03-27 In-Three, Inc. System and method for dimensionalization processing of images in consideration of a pedetermined image projection format
JP2000078611A (ja) 1998-08-31 2000-03-14 Toshiba Corp 立体映像受信装置及び立体映像システム
JP3596314B2 (ja) * 1998-11-02 2004-12-02 日産自動車株式会社 物体端の位置計測装置および移動体の通行判断装置
US6285779B1 (en) * 1999-08-02 2001-09-04 Trident Microsystems Floating-point complementary depth buffer
JP2001061164A (ja) 1999-08-19 2001-03-06 Toshiba Corp 立体映像信号伝送方法
KR100381817B1 (ko) * 1999-11-17 2003-04-26 한국과학기술원 제트버퍼를 이용한 입체영상 생성방법 및 기록매체
WO2001039512A1 (en) * 1999-11-26 2001-05-31 Sanyo Electric Co., Ltd. Device and method for converting two-dimensional video to three-dimensional video
JP2001320731A (ja) 1999-11-26 2001-11-16 Sanyo Electric Co Ltd ２次元映像を３次元映像に変換する装置及びその方法
CA2418089A1 (en) * 2000-08-04 2002-02-14 Dynamic Digital Depth Research Pty Ltd. Image conversion and encoding technique
JP2002152776A (ja) 2000-11-09 2002-05-24 Nippon Telegr & Teleph Corp <Ntt> 距離画像符号化方法及び装置、並びに、距離画像復号化方法及び装置
US6677945B2 (en) 2001-04-20 2004-01-13 Xgi Cayman, Ltd. Multi-resolution depth buffer
JP2003131683A (ja) * 2001-10-22 2003-05-09 Sony Corp 音声認識装置および音声認識方法、並びにプログラムおよび記録媒体
KR100436904B1 (ko) 2002-09-06 2004-06-23 강호석 2차원이미지에 대한 입체영상생성방법
WO2004051577A1 (en) * 2002-11-27 2004-06-17 Vision Iii Imaging, Inc. Parallax scanning through scene object position manipulation
JP4463215B2 (ja) * 2006-01-30 2010-05-19 日本電気株式会社 立体化処理装置及び立体情報端末

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102177721B (zh) * 2008-10-10 2015-09-16 皇家飞利浦电子股份有限公司 处理信号中包括的视差信息的方法
CN102177721A (zh) * 2008-10-10 2011-09-07 皇家飞利浦电子股份有限公司 处理信号中包括的视差信息的方法
CN102187267B (zh) * 2008-10-20 2014-06-11 夏普株式会社 用于处理图像数据以由显示装置显示的方法和设备
CN102187267A (zh) * 2008-10-20 2011-09-14 夏普株式会社 用于处理图像数据以由显示装置显示的方法和设备
CN102246529A (zh) * 2008-12-15 2011-11-16 皇家飞利浦电子股份有限公司 基于图像的3d视频格式
CN101765020B (zh) * 2008-12-23 2013-10-23 康佳集团股份有限公司 一种可感应立体图像的电视机
CN101951527B (zh) * 2009-07-10 2013-09-04 索尼公司 信息处理设备和信息处理方法
CN101951527A (zh) * 2009-07-10 2011-01-19 索尼公司 信息处理设备和信息处理方法
CN102428501A (zh) * 2009-09-18 2012-04-25 株式会社东芝 图像处理装置
US9053575B2 (en) 2009-09-18 2015-06-09 Kabushiki Kaisha Toshiba Image processing apparatus for generating an image for three-dimensional display
CN102055998B (zh) * 2009-10-28 2015-04-01 索尼公司 图像处理装置和图像处理方法
CN102055998A (zh) * 2009-10-28 2011-05-11 索尼公司 图像处理装置、图像处理方法和程序
CN102986231A (zh) * 2010-06-11 2013-03-20 富士胶片株式会社 立体图像显示装置、立体成像装置及方法
CN102986231B (zh) * 2010-06-11 2015-06-24 富士胶片株式会社 立体图像显示装置、立体成像装置及方法
CN101917643B (zh) * 2010-07-09 2012-05-30 清华大学 一种全自动2d转3d技术中的实时镜头检测方法和装置
CN101917643A (zh) * 2010-07-09 2010-12-15 清华大学 一种全自动2d转3d技术中的实时镜头检测方法和装置
CN102812715B (zh) * 2011-01-27 2015-08-19 松下电器产业株式会社 三维图像摄影装置以及三维图像拍摄方法
CN102812715A (zh) * 2011-01-27 2012-12-05 松下电器产业株式会社 三维图像摄影装置以及三维图像拍摄方法
CN102158725A (zh) * 2011-05-06 2011-08-17 深圳超多维光电子有限公司 一种生成立体图像的方法和系统
CN102884803A (zh) * 2011-05-11 2013-01-16 松下电器产业株式会社 图像处理装置、影像处理方法、程序、集成电路
CN103024408A (zh) * 2011-09-22 2013-04-03 株式会社东芝 立体图像转换装置和方法、立体图像输出装置
US9094657B2 (en) 2011-09-22 2015-07-28 Kabushiki Kaisha Toshiba Electronic apparatus and method
CN103024408B (zh) * 2011-09-22 2015-07-15 株式会社东芝 立体图像转换装置和方法、立体图像输出装置
CN105074781A (zh) * 2013-03-15 2015-11-18 英特尔公司 可变分辨率深度表示
CN106537909A (zh) * 2014-07-17 2017-03-22 索尼互动娱乐股份有限公司 立体图像呈现装置、立体图像呈现方法和头戴式显示器
US10306214B2 (en) 2014-07-17 2019-05-28 Sony Interactive Entertainment Inc. Stereoscopic image presenting device, stereoscopic image presenting method, and head-mounted display
CN106537909B (zh) * 2014-07-17 2019-09-27 索尼互动娱乐股份有限公司 立体图像呈现装置、立体图像呈现方法和头戴式显示器
CN109255810A (zh) * 2014-08-20 2019-01-22 佳能株式会社 图像处理装置及图像处理方法

Also Published As

Publication number Publication date
JP4188968B2 (ja) 2008-12-03
CN100551083C (zh) 2009-10-14
KR20050092122A (ko) 2005-09-20
EP1587329B1 (en) 2015-04-15
US7403201B2 (en) 2008-07-22
JPWO2004071102A1 (ja) 2006-06-01
EP1587329A4 (en) 2009-12-23
US20060050383A1 (en) 2006-03-09
EP1587329A1 (en) 2005-10-19
WO2004071102A1 (ja) 2004-08-19
KR100905371B1 (ko) 2009-07-01

Similar Documents

Publication Publication Date Title
CN1739303A (zh) 立体观察用图像提供方法和立体图像显示装置
CN109691094B (zh) 发送全向视频的方法、接收全向视频的方法、发送全向视频的装置和接收全向视频的装置
CN109076255B (zh) 发送、接收360度视频的方法及设备
CN108702528B (zh) 发送360视频的方法、接收360视频的方法、发送360视频的设备和接收360视频的设备
US11044455B2 (en) Multiple-viewpoints related metadata transmission and reception method and apparatus
EP3668092B1 (en) Method and device for transmitting or receiving 6dof video using stitching and re-projection related metadata
US10951871B2 (en) Generation device, identification information generation method, reproduction device, and image reproduction related to stereo packing of projected frames
JP6984841B2 (ja) イメージ処理方法、端末およびサーバ
CN102246529B (zh) 基于图像的3d视频格式
CN111615715A (zh) 编码/解码体积视频的方法、装置和流
KR100816965B1 (ko) 입체시용 영상 제공 방법 및 입체 영상 표시 장치
EP3780595A1 (en) Method and device for transmitting 360-degree video by using metadata related to hotspot and roi
CN111557094A (zh) 用于编码/解码体积式视频的方法、设备和流
You et al. Internet of Things (IoT) for seamless virtual reality space: Challenges and perspectives
US20190320156A1 (en) Multiple-viewpoints related metadata transmission and reception method and apparatus
CN101651841A (zh) 一种立体视频通讯的实现方法、系统和设备
CN104756489A (zh) 一种虚拟视点合成方法及系统
WO2020004593A1 (ja) データ生成装置およびデータ生成方法
CN114374675B (zh) 媒体文件的封装方法、媒体文件的解封装方法及相关设备
US20230360678A1 (en) Data processing method and storage medium
WO2022193875A1 (zh) 多视角视频的处理方法、装置、设备及存储介质
TW201937937A (zh) 資訊處理裝置及方法
CN114556962B (zh) 多视点视频处理方法和装置
EP4394718A1 (en) Media file encapsulation method and device, media file decapsulation method and device, and storage medium
US11558597B2 (en) Method for transmitting video, apparatus for transmitting video, method for receiving video, and apparatus for receiving video

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20091014

Termination date: 20170119

CF01 Termination of patent right due to non-payment of annual fee