CN100551083C - 立体观察用图像提供方法和立体图像显示装置 - Google Patents

Abstract

在发送侧装置(1)中，对实际摄影的二维图像(100)进行图像分析后生成图像数据，同时生成：对将所述二维图像变换为立体观察用图像有用的深度信息。并且，也生成标度信息、函数指定信息、表指定信息等其他附属信息，并向接收侧装置(2)发送这些信息。接收侧装置(2)接收图像数据、深度信息、和所述其他附属信息，根据这些信息生成视差图像，对观察者进行立体观察。

Description

立体观察用图像提供方法和立体图像显示装置

技术领域

本发明涉及立体观察用图像提供方法和立体图像显示装置。

背景技术

作为现有技术，提出一种根据从二维图像信号抽出的深度信息和二维图像信号来生成立体图像的立体图像接收装置和立体图像系统(参照特开2000-78611号公报)。

根据上述的现有技术，利用所述深度信息，可以从实际摄影的二维图像生成具有视差信息的立体观察用图像。然而，在上述现有技术中，没有实现：使多样的立体图像显示成为可能或减少发送的信息量。

发明内容

本发明是鉴于上述问题而进行的，其目的在于，提供一种使多样的立体图像显示成为可能或可以减少发送的信息量的立体观察用图像提供方法和立体图像显示装置。

为了解决上述的问题，本发明的立体观察用图像提供方法的特征在于，在将二维图像作为数据提供时，对将所述二维图像的数据变换为立体观察用图像有用的深度信息和该深度信息的标度信息作为所述二维图像的附属信息，而和该二维图像一起提供。

如果是上述构成，则由于将标度信息作为所述二维图像的附属信息，和该二维图像的数据一起提供，故在被提供侧可以制作具有各种宽窄的深度信息的立体观察用图像成为可能。

并且，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，作为附属信息，和该二维图像数据一起提供：对将所述二维图像数据变换为立体观察用图像有用的深度信息；将由该深度信息的值表示的距离等效值相对该深度信息的值的等级差别设为非等间隔用的定义信息，所述定义信息是从相对深度信息的值而预先设定视差量的表群中指定任意表的信息，使附属信息中包含：表示所述深度信息值中的哪一个值成为图像显示面位置的信息。

如果是上述构成，则能够在深度上的任意位置设定所希望的分辨能力，使多样的立体图像显示成为可能。所述定义信息可以是从函数群指定任意函数的信息。并且，也可以使所述附属信息包含：表示所述深度信息的值中的哪一个值变为图像显示位置的信息。或者，所述定义信息也可以是：从相对深度信息的值而预先设定视差量的表群中指定任意表的信息。另外，可以将所述定义信息设定为：所述非等间隔变为大间隔的区域形成在距离观察者远的位置上，变为小间隔的区域形成在距离观察者近的位置上。此外，也可以将所述定义信息设定为：所述非等间隔变为大间隔的区域形成在距离图像显示面位置远的位置上，变为小间隔的区域形成在距离图像显示面位置近的位置上。

另外，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将根据所述二维图像的画面区域而不同的位数所表示的深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。

如果是上述构成，则和涉及二维图像全体设定为同样的位数的情况相比，可以削减所提供的深度信息量、且能够生成被提供侧的良好质量的立体观察用图像。与所述二维图像的中央侧相比，可以在外周侧减少所述深度信息的位数。另外，也可以将表示画面的哪一个区域中用哪一位来表示深度信息的信息作为附属信息，和该二维图像的数据一起提供。此外，也可以将表示在每一个像素以哪一位表示深度信息的信息作为附属信息，和该二维图像数据一起提供。

另外，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将附加在所述二维图像的多个像素上的共同值的深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。

如果是上述构成，则和针对二维图像的全部像素设定每一个深度信息的情况相比，可以削减所提供的深度信息量，并且能够生成被提供侧的良好质量的立体观察用图像。与所述二维图像的中央侧相比，也可以在外周侧增多提供所述共同值的深度信息的像素数。

并且，本发明的立体观察用图像提供方法，其特征在于，在将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和向构成每一个目标的像素提供的第二深度信息，作为所述二维图像的附属信息，和该二维图像数据一起提供。

如果是上述构成，则因为可以由第一深度信息提供二维图像中的每一个目标的深度，由第二深度信息中提供构成每一个目标的像素的深度，所以，和针对二维图像的全部像素设定各自的深度信息的情况相比，可以削减所提供的深度信息量，并且能够生成被提供侧的良好质量的立体观察用图像。

并且，本发明的立体观察用图像提供方法，其特征在于，将二维图像作为数据提供时，将向所述二维图像中的每一个目标提供的第一深度信息和每一个目标的形状信息，作为所述二维图像的附属信息，和该二维图像的数据一起提供。

如果是上述构成，则通过由深度信息提供二维图像中的每一个目标的深度，并提供其形状信息，从而利用被提供侧中所保有的每一个形状的深度值表，可以获得构成每一个目标的像素的深度，和针对二维图像的全部像素设定各个深度信息的情况相比，可以削减所提供的深度信息量，同时能够生成被提供侧的良好质量的立体观察用图像。

在这些立体观察用图像提供方法中，可以通过广播、通信、向记录介质的记录的任意一个来进行信息的提供。

另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得标度信息和深度信息的机构；利用所述标度信息和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构。

此外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得深度信息和函数指定信息的机构；存储使由所述深度信息的值表示的距离等效值相对该深度信息的值的等级差别而设为非等间隔的多个函数的机构；根据所述函数指定信息来选择函数的机构；利用所选择的函数和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构；和利用表示图像显示面位置的信息，判定提供基准视差量的深度信息的值的机构。

另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得深度信息和表指定信息的机构；存储使由所述深度信息的值表示的距离等效值相对该深度信息的值的等级差别设为非等间隔的多个表的机构；根据所述表指定信息来选择表的机构；利用所选择的表和所述深度信息来生成视差量的机构；根据所述视差量来生成立体观察用图像的机构；和利用表示图像显示面位置的信息，判定提供基准视差量的深度信息的值的机构。

此外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：在从所述附属信息，取得由于所述二维图像的画面区域不同而以不同位数表示的深度信息的情况下，将所述二维图像的画面区域中用不同位数表示的深度信息，应用于画面区域的每一个像素，以生成立体观察用图像的机构。

进而，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：在从所述附属信息取得数量比所述二维图像像素数还少的深度信息的情况下，采用附加在所述二维图像多个像素上的共同值的所述深度信息，以生成立体观察用图像的机构。

再有，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得向所述二维图像中的每一个目标提供的第一深度信息和向构成每一个目标的像素提供的第二深度信息的机构；对所述第一深度信息加入所述第二深度信息而生成每一个像素的深度信息的机构；根据所述每一个像素的深度信息，生成立体观察用图像的机构。

另外，本发明的立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：从所述附属信息取得向所述二维图像中的每一个目标提供的深度信息和每一个目标的形状信息的机构；存储将深度信息与构成每一个形状的像素群的每一个像素对应的表、的机构；根据所述形状信息选择所述表的机构；将从所述表获得的深度信息加入对所述每一个目标提供的深度信息中，以生成每一个像素的深度信息的机构；根据所述每一个像素的深度信息，生成立体观察用图像的机构。

附图说明

图1(a)、(b)、(c)是表示本发明实施方式的立体观察用图像提供方法和立体图像显示装置的说明图。

图2是表示二维图像和附随其中的深度图像的说明图。

图3(a)、(b)是表示分辨能力与表现范围的关系的说明图。

图4(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。

图5(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。

图6(a)、(b)是表示使由深度信息值表示的距离等效值相对该深度信息值的等级差别设为非等间隔的说明图。

图7是表示：将深度信息在图像的外周侧设为3位而在中央的50％×50％区域设为6位的、说明图。

图8是表示使深度信息在图像上的不同位置变为不同的其他例子的说明图。

图9(a)是表示提供附加在二维图像的多数像素中的共同值的深度信息的说明图；图9(b)是表示该深度信息的发送形态的说明图。

图10(a)、(b)、(c)、(d)是表示深度信息的提供方法的其他例子的说明图。

图11是表示图10的具体例子的说明图。

图12是表示图10的其他具体例子的说明图。

具体实施方式

下面，根据附图1至12，说明本发明的立体观察用图像提供方法和立体图像显示装置。

根据图1来说明：利用二维图像和深度图像(深度信息)，生成立体图像。另外，在图1中，作为由作为广播局或互联网上的服务器而构成的发送侧装置1；和广播接收装置或具备网络连接环境的个人用电子计算机或移动电话等接收侧装置2所构成的系统来说明。

图1(a)表示作为原图像的二维图像100。在发送侧装置1中，对二维图像100进行图像分析。如图1(b)所示，抽出背景图像101、山的图像102、树的图像103、人的图像104。将这些被抽出的图像作为目标(例如，边界信息)来处理。并且，以像素为单位提供深度值，以生成深度图像。另外，也可以以目标为单位提供深度值。深度值可以自动(估计)提供，也可以手动操作来提供。

这样，在发送侧装置1中，在提供(发送、广播)图像时，将深度图像作为所述图像的附属信息发送。并且，在本实施方式中，也发送其他附属信息。至于其他附属信息，在后面叙述。在数字化广播的情况下，可以将图像数据和各种附属信息多重化为传送流(transport stream)后进行广播。在利用计算机网络的传送中，也可以将图像数据和各种附属信息多重化后发送。

但是，在利用二维图像和深度图像来生成立体观察用图像的情况下，可以将深度图像考虑为一种二维图像，所以，如图2所示，只要提供二维图像和深度图像的两张图像就可以。因此，在双眼式立体观察中，可以应用和提供两张L图像和R图像同样的想法。但是，在双眼式立体观察用图像或多视点用图像中，每一个视点图像之间格式不会不同，与此相反，利用二维图像和深度图像来制作立体观察用图像的情况下，深度图像在单色(monochrome)图像中可以容易变为对每一个像素分配了几位的图像。因此，预先规定用哪一位来表现深度图像的一个像素(对应于二维图像的每一个像素的深度信息)，或者从发送侧装置1向接收侧装置2提供表示一个像素的位数的信息。并且，在将深度图像作为单色图像来表现的情况下，变为区别：如果更白就表示近距离等效值或如果更黑就表示近距离等效值，因此，可以对此预先规定，或也可以从发送侧发送表示该意思的信息。

[其他附属信息]

①发送侧装置1在将二维图像作为数据提供时，将所述深度图像和该深度图像值的标度信息，作为所述二维图像的附属信息，和该二维图像数据一起发送。最好是：设为深度图像的每一个像素的位数已经决定，并且表示分辨能力与绝对距离等效值之间的关系。图3例示了用3位表示一个像素的深度值的情况(实际上不会存在3位的情况，但是为了说明的方便，设为3位)。对每一个像素分配3位的情况下，可以表现8级的深度，但为了表示一个刻度相当于多大的绝对距离，发送标度信息。在图3(a)中，将分辨能力设为100mm，可以覆盖从0至800mm的宽的范围。并且，在图3(b)中，将分辨能力设为10mm，可以覆盖从0至80mm的窄的范围。因此，通过发送标度信息，从而能够使接收侧装置2制作具有宽窄各式各样深度的立体观察用图像。

②在将二维图像作为数据提供时，发送侧装置1将所述深度图像、与使由该深度图像值表示的距离等效值相对深度图像值的等级差别设为非等间隔的定义信息作为附属信息，和该二维图像数据一起发送。在上述的图3中，示出了以等间隔来表现深度(depth)的情况，但是没有必要必须是等间隔。对深度的分辨能力，例如，虽然前面为细的较好，但也可认为远的为粗也可以，所以，在每一个像素的位数有限的情况下，考虑用非等间隔来表现的方法效率高的情形。在图4(a)中表示使前面侧的分辨能力变细的对数(log)型的表现。利用图5更详细叙述。在图5中，定义：M为最大深度值(在此为7(111))；深度值A为从1到M的正数；B＝(M-A)/2；将深度值A与A-1之间的视差间隔进行2的B次方。并且，在图5(a)中将管面位置设为(010)，在图5(b)中将管面位置设为(100)。在利用这种函数的情况下，与管面位置无关，使前面侧(观察者侧)的分辨能力变细。

另一方面，在图4(b)所示的例子中，越接近管面(图像显示面位置)则深度的分辨能力越细，随着离开管面、深度的分辨能力越粗。利用图6更详细地叙述。在图6中，将最大视差(正)与最小视差(负)之间的差设为22，将视差间隔规定为按顺序使用“1、1、2、2、4、4、8、8”的数值的列。并且，在图6(a)中，管面位置为010，在图6(b)中，管面位置作为011。于是，可以将管面位置附近的深度设定为细。

在设为上述的非等间隔表现的情况下，虽然可以采用在发送接收期间固定性地决定一个非等间隔表现的方法，但是，在接收侧可以自在地指定几个非等间隔表现的方法较好。例如，通过设为发送2位的指定信息并在接收侧准备四个函数(包含上述的数值列的规定)，可以实现4种非等间隔表现。另外，对于管面位置，虽然可以采用在发送接收期间固定性地决定一个管面位置的方法(例如，010固定性地作为管面位置等)，但在接收侧可以任意指定管面位置更好。该情况下，如果将010作为管面位置，则作为管面位置信息只要发送010就可以。

不限于上述的利用函数的非等间隔表现，也可以是接收侧具备表。当然，也可以在接收侧准备多个这样的表，根据从发送侧发送来的表指定信息来选择表。

③在将二维图像作为数据提供时，发送侧装置1将因所述二维图像的画面区域不同而以不同位数表示的深度图像作为所述二维图像的附属信息，和该二维图像数据一起发送。该情况下，优选与二维图像的中央侧相比，在外周侧减少所述深度信息的位数。例如，如图7所示，外周设为3位，中央的50％×50％区域设为6位。虽然可以采用在发送接收期间固定性地决定一个区域分割图案的方法，但也可以是准备多个区域分割图案，在接收侧指定任意图案。或者也可以记述每一个像素的最初是哪个位的信息。例如，如果定义0为3位、定义1为6位，则像素信息可以记述为，像素1(0000)、像素2(0000)、像素3(1000000)......。

而且，在上述的区域分割例子中是分割为两个，但不限于这些，也可以如图8所示，分割为3位区域、4位区域、和6位区域等三个区域。另外，也可以根据图像内容(目标配置状态)或景物(在时间轴上)而使分割区域图案不同。另外，在图8所示的人物图像的情况下，人物的脸、身体等结构是可以唯一定义的，所以，其构成可以是：准备对应于那些的深度图像表，当摄像对象为人物时，通过选择(由操作者的选择或通过自动判定摄像对象来选择)对应其的深度图像表，从而可以自动选择图8的分割区域图案。

④是在将二维图像作为数据提供时，发送侧装置1将附加在所述二维图像上的共同值的深度图像作为所述二维图像的附属信息，和该二维图像数据一起发送。虽然可以使深度图像基本上等于二维图像，但不限于这些，也可能不同于二维图像。例如，对二维图像的2×2像素分配深度图像的一个像素(深度图像的分辨率变为2D图像的1/4)。并且，也可以与二维图像的中央从相比，在外周侧增加提供所述共同值的深度信息的像素数。例如，如图9(a)所示，在外周以3×3像素(pixel)提供共同的深度信息，在中央的50％×50％区域以2×2像素提供共同的深度信息。虽然可以采用在接收发送期间固定性地决定一个区域分割图案的方法，但也可以采用：先准备多个区域分割图案，在接收侧指定任意图案的方法。在深度图像(单色图像)的发送中，如图9(b)所示，分割为4个区域(区域V相当于所述中央的50％×50％区域)，以每一个区域为单位按顺序发送。

⑤在将二维图像作为数据提供时，发送侧装置1将向所述二维图像中的每一个目标提供的第一深度图像和向构成每一个目标的像素提供的第二深度图像，作为所述二维图像的附属信息，和该二维图像数据一起发送。即，一旦用深度图像大量地表现目标，进一步细分深度图像后分配给每一个目标。图10是表示该方法的概念的说明图。在图10(b)中表示：从上侧看图10(a)所示的摄像状态时的被摄像体(目标)的深度状态。该图10(b)的深度状态不仅作为图像存在，还在摄影时或编辑时等中作为信息提供。即，如图10(c)所示，将深度状态分割为笼统的层，对位于其层上位置的每一个目标提供分层信息(第一深度图像)。然后，对每一个目标的像素分配第二深度图像。图11是表示图像发送的具体例。该图11的图像号码1是作为原图像而被发送的图像，对此附加图像号码2的图像(第一深度图像)。进一步，附加作为每一个目标的第二深度图像的图像(图像号码3、图像号码4、图像号码5)。即，从发送侧发送图像号码1到图像号码5的图像，在接收侧利用这些5个图像来合成1个图像。并且，在此例中，每一个目标的第二深度图像信息并未设为相同位数，而是人为8位、树为4位等不同的位。

⑥在将二维图像作为数据提供时，发送侧装置1将提供给所述二维图像中的每一个目标的深度图像和每一个目标的形状信息作为所述二维图像的附属信息，和该二维图像数据一起发送。图12表示该图像发送的具体例。该图12的图像号码1是作为原图像而被发送的图像，对此附加图像号码2的单色图像(深度图像)。进一步，附加每一个目标的构成要素的形状信息。该形状信息，例如，由目标号码(例如，表示人、树中的哪一个的信息)、构成要素号码(例如，表示人的头部、身体、腿等构成要素的信息)、形状信息(表示所述构成要素是球、圆柱还是圆锥的信息)、构成要素之间的配置信息(例如，在树中三角锥球的下面存在圆柱等的信息)等构成。对不能特定形状的山，作为单色图像(深度图像)发送。在接收侧，利用这些信息来合成一个图像。

[接收侧装置]

如图1(c)所示，接收侧装置2接收图像数据、深度图像、其他附属信息。这些数据只要是多路复用，就可以进行多路分配(DEMUX)处理。对图像数据的译码处理基本上采用：例如基于MPEG的处理等。然后，在接收侧装置2中，根据图像数据和深度图像等生成提供视差的右眼图像105R和左眼图像105L。因此，在接收侧装置2具备：用于接收数据的接收部21(调制解调器、调谐器等)、多路分配器22(DEMUX)、译码部23、根据二维图像数据和深度图像来生成视差图像的图像生成部24、监视器25等。

接收侧装置2例如通过在监视器前面位置具备液晶阻挡层，从而可以进行平面观察图像的显示和立体观察图像的显示的双方。例如，立体观察图像若为右眼图像和左眼图像交替配置成纵向带状的图像，则通过CPU的控制，在液晶阻挡层形成纵向带状的遮光区域。另外，不限于右眼图像和左眼图像交替配置成纵向带状的立体图像，例如，也可以是将右眼图像和左眼图像交替配置成斜向配置的立体图像(参照特许第3096613号公报)，该情况下，在液晶阻挡层形成斜向阻挡层。

接收侧装置2的CPU26从多路分配器22接收所述其他附属信息，并执行基于该附属信息的图像显示控制处理。下面，说明该图像显示控制处理。

如果接收侧装置2的CPU26将标度信息作为附属信息而取得，则根据该标度信息和深度图像来决定视差量(像素偏移量)。即，即使对于某些像素已经设定有A值的深度值，在标度信息为B的情况和C的情况(B≠C)，视差图像的像素偏移量也会变得不同。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息生成视差图像。

如果接收侧装置2的CPU26将函数指定信息作为附属信息而取得，则根据该函数指定信息来选择函数。存储器27中存储有：使由深度图像值表示的距离等效值相对该深度信息值的等级差别变为非等间隔的多个函数(定义)。CPU26根据所选择的函数和所接收的深度值，运算出视差量(像素偏移量)。在此利用图5(a)进行具体说明。接收侧装置2利用B＝(M-A)/2的运算和2的B次方的运算，获得深度值A与A-1之间的视差间隔。另外，由于视差间隔本身可以由表示深度值的位数来决定，故也可以将视差间隔本身与位数加以对应后存储在所述存储器27中，读出这些。管面位置是深度值设为010的地点。在所接收的深度值为010时，101比101大三个刻度，所以通过4+2+2的运算而获得视差量8。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息来生成视差图像。

如果接收侧装置2的CPU26将表指定信息作为附属信息而取得，则根据该表指定信息来选择表。在存储器27中存储有将深度值与视差量加以对应的多个表。如果以所述图5(a)为例，则表的内容变为：000＝-12、001＝-4、010＝0......的表。例如，CPU26作为地址例如向所述表提供所接收的深度值之后，从该表中读出视差量信息，并将该视差量信息提供给图像生成部24，图像生成部24根据视差量信息来生成视差图像。

接收侧装置2依据图5(a)(b)所示的设定时生成视差图像，该图像相当于：非等间隔的成为大间隔的区域形成在距离观察者远的位置上，变为小间隔的区域形成在距离观察者近的位置上。并且，接收侧装置2依据图5(a)(b)所示的设定时，生成视差图像，该视差图像相当于：非等间隔的变为大间隔的区域形成在距离图像显示面位置远的位置上，变为小间隔的区域形成在距离图像显示面位置近的位置上。

在接收侧装置2取得因二维图像的画面不同区域而以不同位数表示的深度图像的情况下，将所述二维图像的画面区域中以不同位数表示的深度图像应用在每一个像素中，以生成立体观察用图像。例如，如图7所示，在从发送侧接收了表示已经选择其外周设为3位、中央的50％×50％的区域设为6位的图案的情况下，从由该信息特定的图案，CPU26判断每一个深度值的位数。并且，在记述有每一个深度值(像素)的最初为哪个位的信息的情况下，按照其记述可以判断每一个深度值的位数。

接收侧装置2取得比二维图像像素数还少的深度信息的情况下，应用附加在所述二维图像多数像素上的共同值的所述深度信息，生成立体观察用图像。例如，如图9(a)所示，从发送侧接收了表示已经选择外周以3×3像素提供共同的深度信息、中央的50％×50％的区域以2×2像素提供共同的深度信息模型的情况下，从由该信息特定的图案，CPU26判断：哪一个像素已经组合化并提供有共同的深度信息。然后，例如，在图像生成部24进行对二维图像的第一行的从左的3个像素份、第二行的从左的3个像素份、第三行的从左的3个像素份合计9个像素份的视差图像生成处理时，变为利用从CPU26提供的共同的(一个)视差量。

接收侧装置2取得对二维图像中的每一个目标提供的第一深度信息和对构成每一个目标的像素提供的第二深度信息，在第一深度信息中加进所述第二深度信息，以生成每一个像素的深度信息。例如，如图11所示，接收侧装置2接收发送侧所发送的图像号码1到图像号码5的图像，CPU26根据利用图像号码2的每一个目标的2位的深度图像、和利用图像号码3到图像号码5的每一个目标的构成像素的深度图像，来生成每一个像素的视差量信息。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息而生成视差图像。

接收侧装置2在其存储器27中存储有：构成每一个形状(球、圆柱、三角锥)的像素群的每一个像素上加以对应了深度信息的深度表。并且，在作为附属信息取得每一个目标的形状信息时，选择对应于其形状的深度表而读出深度信息。对该深度信息(单色图像)进行与所谓的像素补充或像素剔除处理相当的处理，可以使深度图像对应于目标的大小。CPU26在向各目标提供的深度信息中加入从上述表得到的深度信息，生成各像素的视差量信心。CPU26向图像生成部24提供视差量信息，图像生成部24根据视差量信息而生成视差图像。

如上述所说明的，根据本发明，能够进行多样的立体图像显示。并且，获得可以削减所提供的信息量的效果。

Claims (7)

1、一种立体观察用图像提供方法，其特征在于，

在将二维图像作为数据提供时，作为附属信息，和该二维图像的数据一起提供的是：对将所述二维图像的数据变换为立体观察用图像有用的深度信息；将该深度信息的值所表示的距离等效值相对该深度信息的值的等级差别设为非等间距用的定义信息，

所述定义信息是从函数群指定任意函数的信息，

使附属信息中包含：表示所述深度信息值中的哪一个值成为图像显示面位置的信息。

2、一种立体观察用图像提供方法，其特征在于，

在将二维图像作为数据提供时，作为附属信息，和该二维图像的数据一起提供的是：对将所述二维图像的数据变换为立体观察用图像有用的深度信息；将该深度信息的值所表示的距离等效值相对该深度信息的值的等级差别设为非等间距用的定义信息，

所述定义信息是从相对深度信息的值而预先设定视差量的表群中指定任意表的信息，

使附属信息中包含：表示所述深度信息值中的哪一个值成为图像显示面位置的信息。

3、根据权利要求1或2所述的立体观察用图像提供方法，其特征在于，设定所述定义信息，以便将所述非等间隔的变为大间隔的区域形成在距离观察者远的位置上，将变为小间隔的区域形成在距离观察者近的位置上。

4、根据权利要求1或2所述的立体观察用图像提供方法，其特征在于，设定所述定义信息，以便将所述非等间隔的变为大间隔的区域形成在距离图像显示面位置远的位置上，将变为小间隔的区域形成在距离图像显示面位置近的位置上。

5、根据权利要求1或2所述的立体观察用图像提供方法，其特征在于，信息的提供是通过广播、通信、向记录介质的记录的任意一种来进行的。

6、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：

从所述附属信息取得深度信息和函数指定信息的机构；

存储将由所述深度信息的值来表示的距离等效值相对该深度信息的值的等级差别设为非等间隔的多个函数的机构；

根据所述函数指定信息来选择函数的机构；

利用所选择的函数和所述深度信息来生成视差量的机构；

根据所述视差量来生成立体观察用图像的机构；和

利用表示图像显示面位置的信息，判定提供基准视差量的深度信息的值的机构。

7、一种立体图像显示装置，其中利用所取得的二维图像数据及其附属信息来生成立体观察用图像，其特征在于，包括：

从所述附属信息取得深度信息和表指定信息的机构；

存储将由所述深度信息的值来表示的距离等效值相对该深度信息的值的等级差别设为非等间隔的多个表的机构；

根据所述表指定信息来选择表的机构；

利用所选择的表和所述深度信息来生成视差量的机构；

利用所述视差量来生成立体观察用图像的机构；和

利用表示图像显示面位置的信息，判定提供基准视差量的深度信息的值的机构。

Images