CN103220541A - 图像处理装置、图像处理方法和程序 - Google Patents

Abstract

本发明公开了图像处理装置，图像处理方法和程序。图像处理装置包括：信息获取单元，所述信息获取单元被配置成获取关于视差调节后的三维显示素材的视差调节信息；以及图形变换单元，所述图像变换单元被配置成基于由所述信息获取单元所获取的视差调节信息在视差调节后的三维显示素材上执行反变换处理以使所述视差调节后的三维显示素材被恢复到视差调节之前的素材，并且生成二维显示素材。

Description

图像处理装置、图像处理方法和程序

技术领域

本技术涉及图像处理装置、图像处理方法和程序。具体地，将自然地和更舒适地实现三维显示和二维显示。

背景技术

近年来，提供了具有实现三维显示功能的图像显示装置。当观看上述图像显示装置显示的三维图像时，即使在会聚角度与真实世界相同时，焦距也会变化，这成为视觉疲劳的原因。具体地，如果视差变化很大，例如，在屏幕上的某个部分突出过多或在电影放映期间对象突然跳出的情形下，观看者就会过度疲劳。由于所述原因，为了减少观看者的过度疲劳并且自然地和更舒适地显示三维图像，提出了在水平方向上移动图像以调节视差的技术（例如，参见公开号为2011-055022的日本未经审查的专利申请）。

发明内容

顺便提及，当使用通过水平移动来调节视差的三维显示素材实现二维显示时，在一些情形下，在所显示的图像中，难免可能生成基于视差调节的运动。例如，在当屏幕上同时存在静止对象和移动对象的情形中，如果移动对象的深度变化大，则图像在水平方向上被移动，以便自然地和更舒适地显示三维图像。基于所述原因，通过图像的在水平方向上的移动，静止对象也可被移动。因此，当使用视差调节后的三维显示素材实现二维显示时，根据移动对象的深度的变化，静止对象被显示为有运动。

鉴于上述，根据本技术的一个实施例，提供可以自然地和更舒适地实现三维显示和二维显示的图像处理装置和图像处理方法和程序（是期望的。

根据本技术的一个实施例，提供了一种图像处理装置，该图像处理装置包括：信息获取单元，该信息获取单元被配置成获取关于视差调节后的三维显示素材的视差调节信息；以及图像转换单元，该图像转换单元被配置成基于信息获取单元获取的视差调节信息，从视差调节后的三维显示素材中生成作为二维显示素材的视差调节之前的素材。

根据本技术的实施例，获取了关于视差调节后的三维显示素材的视差调节信息，并且基于所述视差调节信息，在视差调节后的三维显示素材上进行反变换处理，以使所述视差调节后的三维显示素材恢复成视差调节之前的素材，以生成二维显示素材。例如，在视差调节中整个图像被移动的情形中，在反变换处理中，可以沿相反的方向移动整个图像。另外，在视差调节中对象被移动的情形中，在反转变换处理中，可以沿相反的方向移动对象。

另外，在反变换处理中，图像可被放大，或在不存在图像的区域上可进行内插处理，以通过反变换处理除去不存在图像的区域。在图像被放大的情形中，图像可根据视差调节的调节量被放大，以除去不存在图像的区域。替换地，图像可根据视差调节的最大的调节量被放大，以除去不存在图像的区域。替换地，图像可根据每一场景的视差调节的最大调节量被放大，以除去不存在图像的区域。

此外，可以获得表示三维显示素材是否是视差调节后的素材的识别信息，并且在实现三维显示的情形下，当信息获取单元获取的识别信息表示没有进行视差调节时，则可进行视差调节。

根据本技术的另一个实施例，提供了图像处理方法，该图像处理方法包括：获取关于视差调节后的三维显示素材的视差调节信息；以及在获取的视差调节信息的基础上，在视差调节后的三维显示素材上执行反变换处理，以使所述视差调节后的三维显示素材恢复成视差调节前的素材，并且生成二维显示素材。

根据本技术的另一实施例，提供了使计算机在三维显示素材上执行图像处理的程序，该图像处理包括：获取关于视差调节后的三维显示素材的视差调节信息；以及在所获取的视差调节信息的基础上，在视差调节后的三维显示素材上执行反变换处理，以恢复成视差调节之前的素材，并且生成二维显示素材。

应该注意到，根据本技术的实施例的程序是可以用计算机可读格式而被提供到例如通过存储介质或通信介质（例如诸如光盘，磁盘，或半导体存储器等的存储介质或诸如网络等的通信介质）可以执行各种程序代码的通用的计算机。通过以计算机可读格式提供上述程序，在计算机上实现根据该程序的处理。

根据本技术的实施例，获取关于视差调节后的三维显示素材的视差调节信息，并且基于所获取的视差调节信息，从视差调节后的三维显示素材中生成作为二维显示素材的在进行视差调节之前的素材。基于所述原因，在二维显示中，在显示期间可以避免由于视差调节而引起的静止对象的运动，并且可以自然地和更舒适地实现三维显示和二维显示。

附图说明

图1是描述视差和到三维图像的距离之间的关系的说明图；

图2示出了移动处理的方式；

图3是示出在三维图像距离中的变化之间的关系的图形表示；

图4是描述立体视野的舒适范围的说明图；

图5示出了图像处理装置的配置；

图6是示出图像处理装置的第一操作的流程图；

图7示出了图像处理装置的第一操作；

图8A-8D是阐述图像内插的说明图；

图9A-9D示出了在进行图像放大的情形下的操作；

图10是示出图像处理装置的第二操作的流程图；

图11示出了在图像处理装置的第二操作中在记录介质中记录在视差调节之前的素材的情形；以及

图12示出了计算机装置的配置。

具体实施方式

下面，将阐述实现本技术的实施例。应该注意到，将以下列顺序给出说明。

1.关于视差调节

2.根据实施例的配置和操作

2-1.图像处理装置的配置

2-2.图像处理装置的第一操作

2-3.图像处理装置的第二操作

3.软件处理示例

1.关于视差调节

首先，将阐述视差调节。在坐标（x,y）处的像素被设置为p(x,y)，在左图像和右图像上的关注像素被设置为p(x_L,y_L)和p(x_R,y_R)，在视差控制后的左图像和右图像上的像素被设置为p(x'_L,y'_L)和p(x'_R,y'_R)。在本文中，在视差调节的图像变换中，表达式（1）定义了移动左图像和右图像的相对位置的移动处理。此时，视差控制参数是移动量s。

$\left(\begin{array}{cc}{x^{\′}}_L& {x^{\′}}_R\\ {y^{\′}}_L& {y^{\′}}_R\end{array}\right)=\left(\begin{array}{cc}{x}_L-\frac{s}{2}& x_R+\frac{s}{2}\\ y_L& y_R\end{array}\right)...\left(\text{1}\right)$

图1是描述视差和到三维图像的距离之间的关系的说明图。在图1中，左眼和右眼之间的间距被设置为两眼间距d_e，从左眼和右眼之间的中心到三维显示的显示表面的距离被设置为视距L_s，并且从左眼和右眼之间的中心到三维图像的距离被设置为三维图像距离L_d。此外，在左图像的显示表面上的水平坐标被设置为x_L，并且在右图像的显示表面上的水平坐标被设为x_R。此时，如表达式（2）所表示，视差d被定义为x_L和x_R之间的相对距离。

d=x_R-x_L…(2)

即，在三维图像存在于三维显示器的显示表面的后面的情形下，视差d是正数，而在三维图像存在于三维显示器的显示表面的前面的情形下，视差d是负数。

此外，在图1中，可以使用两眼间距d_e和视差d，根据表达式（3）来计算三维图像距离L_d和视距L_s的比率。此外，表达式（4）可以表示三维图像距离L_d。

L_d:L_s=d_e:(d_e-d)…(3)

L_d=L_s·d_e/(d_e-d)…(4)

在本文中，当考虑将内插间隔d_e和视距L_s设置为固定值时，如表达式（4）所表示的，三维图像距离L_d依赖于视差d。即，显然，三维外观（三维图像距离L_d）根据视差d而改变。

图2示出了移动处理的方式。图2（A）示出了当移动量s=0时的左图像和右图像，即，图像处于没有进行移动处理的状态中。左图像在水平（x）方向上的目标像素的坐标（左视点素材）被设置为x_L，并且右图像在水平方向上的目标像素的坐标（右视点素材）被设置为X_R。

图2（B）示出了在移动量s>0时的左图像和右图像，即，图像处于在左和右图像彼此分离的方向上进行移动处理的状态中。为了使左图像中的目标像素的坐标从x_L改变到x'_L，左图像在向左方向上移动s/2个像素。另一方面，为了使右图像中的目标像素的坐标从x_R改变到x'_R，右图像在向右方向上被移动s/2个像素。即，左图像和右图像被分别移动s/2个像素，整体上被移动s个像素。

图2（C）示出了当移动量s<0时的左图像和右图像，即，图像处于在左和右图像相互靠近的方向上进行移动处理的状态中。为了使左图像中的目标像素的坐标从x_L改变到x″_L，左图像在向右方向上被移动s/2个像素。另一方面，为了使右图像中的目标像素的坐标从x_R改变到x''_R，右图像在向左方向上被移动s/2个像素。即，左图像和右图像被分别移动s/2个像素，整体上被移动s个像素。

在本文中，当在坐标（x,y）处的像素被设置为p(x,y)并且在左图像和右图像上的目标像素被设置为p(x_L,y_L)和p(x_R,y_R)时，根据表达式（5）和（6），通过移动量s，可计算视差调节后的左图像和右图像上的像素p(x'_L,y'_L)和p(x'_R,y'_R)。

p(x'_L,y'_L)=p(x_L-s/2,y_L)…(5)

p(x'_R,y'_R)=p(x_R+s/2,y_R)…(6)

图3是示出三维图像距离中的变化之间的关系的图形表示。垂直粗线表示三维显示器的显示表面的位置，并且在本文中，例如，假定为1.5[m]。

在通过移动量s进行移动处理的情形中，由于视差改变到（d+s），表达式（7）表示移动处理之后的三维图像距离L'_d。

L'_d=L_s·d_e/(d_e-(d+s))…(7)

即，在左图像和右图像彼此分离（s>0）的方向上进行移动处理的情形下，可以察觉到三维图像进一步移动到后面。此时，随着移动量的增加，可以察觉到三维图像进一步移动到后面，并且在更后面的对象向后移动得更多。另一方面，在左图像和右图像彼此靠近（s<0）的方向上进行移动处理的情形中，可以察觉到三维图像进一步向前移动。此时，随着移动量的绝对值的增加，可以察觉到三维图像进一步向前移动，并且在更后面的对象向前移动得更多。

此外，可以设想到，三维视野的舒适范围是相对于三维显示器的显示表面上的视差角度在±1°的视差角度范围。图4是阐述三维视野的舒适范围的说明图。在本文中，使用了两眼间距d_e、视距L_s以及三维图像距离L_d，并且三维显示器的显示表面上的视差角度被设置为视差角度β。在所述情形中，当在±1°处的视差角度被表示为α时，视差角度α和视差角度β之间的关系被表示为表达式（8）。即，视差角度α对应于表达式（9）所表示的角度。

|α-β|≤1°(=π/180)…(8)

α=β±(π/180)…(9)

视距L_s和视差角度β之间的关系对应于表达式（10）。因此，视差角度β可以根据表达式（11）计算。

(d_e/2)/L_s=tan(β/2)…(10)

β=2tan-1(d_e/(2L_s))…(11)

此外，三维图像距离L_d和α之间的关系对应于表达式（12）。

L_d=d_e/2tan(α/2)…(12)

因此，可以舒适地进行观看的深度方向上的范围对应于表达式（13）。

d_e/2tan(α_max/2)至d_e/2tan(α_min/2)…(13)

应该注意到，视差角度α_max和α_min对应于表达式（14）和（15）的值。

α_max=β+π/180…(14)

α_min=β-π/180…(15)

以所述方式，当调节移动量s使得三维图像距离L_d落入表达式（13）所表示的范围中时，视差的改变被抑制，并且可以实现舒适地观看。

此外，在上述视差调节中，已经阐述了在水平方向上移动左图像和右图像的情形，但是可以用对象为单位实现视差调节。例如，通过使用提供有测距功能的图像拾取元件，可以检测到包含在图像拾取范围中的各个对象的距离。因此，也可基于各个对象的测距结果，以对象为单位实现视差调节。此外，通过图像处理，根据左图像和右图像来确定关于各个对象的视差量，并且也可基于该确定结果以对象为单位实现视差调节。

2.根据实施例的配置和操作

当使用三维显示素材来实现二维显示时（在该三维显示素材中，进行根据三维图像距离来移动图像的视差调节，以便能够实现三维图像的舒适观看），由于来自变换处理的影响，可使得静止对象作出运动。鉴于此，根据本技术，在通过使用视差调节之后的三维显示素材实现二维显示的情形中，基于关于视差调节后的三维显示素材的视差调节信息，生成在视差调节之前的显示素材，以作为二维显示素材使用。

2-1．图像处理装置的配置

图5示出了图像处理装置的配置。图像处理装置10包括信息获取单元11和图像变换单元12。

信息获取单元11获取与用于二维显示的视差调节后的三维显示素材有关的视差调节信息。例如，在通过使用诸如H.264/AVC或HEVC等编码系统生成的图像数据流中，表示附加信息的SEI（Supplemental enhancementinformation，补偿增强信息）被提供作为句法元素。在表示水平移动的移动量的视差调节信息被包含在所述SEI中的情形下，信息获取单元11获取来自SEI流的视差信息。另外，在从三维显示素材中以分离的方式归档视差调节信息的情形下，从对应于用于二维显示的三维显示素材的文件中获取视差信息。应该注意到，例如，在以帧为单位进行视差调节的情形下，视差调节信息表示为每一帧所实现的水平移动的移动量，并且在以图片集(Group Of Pictures，GOP)为单位进行视差调节的情形中，视差调节信息表示为每一GOP所实现的水平移动的移动量。信息获取单元11将所获取的视差调节信息输出到图像变换单元12。

基于视差调节信息，图像变换单元12在视差调节后的三维显示素材上执行反变换处理，以恢复到视差调节之前的素材。在本文中，在坐标（x,y）处的像素被设置为p（x,y）,在左图像和右图像上的目标像素被设置为p(x_L,y_L)和p(x_R,y_R)，并且在视差调节后的左图像和右图像上的像素被设置为p(x'_L,y'_L)和p(x'_R,y'_R)。在视差调节中，表达式（1）定义了左图像和右图像的相对位置在水平方向上移动的处理。在所述情形中，视差调节信息表示移动量s。基于视差调节信息，以表达式（1）的相反的方式，图像变换单元12根据视差调节后的左图像和右图像上的目标像素p(x'_L,y'_L)和p(x'_R,y'_R)来计算在视差调节前的左图像和右图像上的目标像素p(x_L,y_L)和p(x_R,y_R)，以生成视差调节前的素材。另外，图像变换单元12输出通过反变换处理所生成的素材，即，视差调节之前的左视点素材和右视点素材中的一个素材，作为二维显示素材。

在反变换处理中，当图像变换单元12以与视差调节时的方向相反的方向在整个图像上执行水平移动时，在图像的左端和右端中的一端生成不存在图像的区域。因此，图像变换单元12执行针对该不存在图像的区域的图像内插处理。图像变换单元12将不存在图像的区域设置为例如图像内插处理的黑带显示。另外，图像变换单元12可执行图像放大处理，以避免在图像内插处理中生成不存在图像的区域。此外，通过利用用于图像内插处理的不同时间的图像或不同视点的图像，图像变换单元12可执行对不存在图像的区域的内插。

在反变换处理中，当图像变换单元12以与视差调节时的方向相反的方向在图像中的对象上执行水平移动时，假定可以在对象的边缘（遮挡区（occlusion area））上生成不存在图像的区域。因此，图像变换单元12在遮挡区上执行图像内插处理。通过利用用于图像内插处理的不同时间的图像或不同视点的图像，图像变换单元12内插该遮挡区。

此外，在反变换处理中，图像变换单元12可执行图像放大处理，使得即使当进行水平移动时，也不生成不存在图像的区域。

2-2.图像处理装置的第一操作

在图像处理装置10的第一操作中，将阐述在通过使用在其上进行水平移动处理的素材来实现图像显示的情形中的操作。

图6是示出图像处理装置的第一操作的流程图。在步骤ST1中，图像变换单元12确定是否实现了二维显示。在实现了二维显示的情形中，例如，在用户指示二维显示的情形下或用于图像显示的显示装置不具有三维显示功能的情形下，图像变换单元12进行到步骤ST2。另外，例如，在用户指示三维显示的情况下或显示装置具有三维显示功能的情形下，图像变换单元12进行到步骤ST3。

在步骤ST2中，图像变换单元12执行二维显示处理。图像变换单元12基于由信息获取单元11提供的视差调节信息，执行反变换处理，并且从视差调节后的三维显示素材中生成视差调节之前的素材。此外，图像变换单元12输出所生成的视差调节前的素材，例如左视点素材和右视点素材中的一个，作为二维显示素材。

在步骤ST3中，图像变换单元12执行三维显示处理。图像变换单元12输出视差调节后的三维显示素材。

图7示出了图像处理装置的第一操作。例如，如图7（A）所示，图像拾取装置拾取目标的图像。在本文中，如图7（B）所示，在目标位置位于舒适范围之前的情形下，在左视点素材和右视点素材上进行视差调节，并且如图7（C）所示，目标的位置被移动了。通过以上述方式进行视差调节，目标位置被设置成位于舒适范围以内。进行视差调节的左视点素材和右视点素材被记录在例如记录介质中。如图7（D）所示，在通过使用所记录的左视点素材和右视点素材实现三维显示的情形下，通过使用所记录的左视点素材，显示左边的图像，并且通过使用所记录的右视点素材，显示右边的图像。另外，如图7（E）所示，在实现二维显示的情形中，在视差调节后的所记录的左视点素材和所记录的右视点素材中的一个上进行反变换处理，以生成视差调节前的素材。通过使用所生成的素材，实现二维显示。

当通过反变换处理在与视差调节时的方向相反的方向上进行水平移动时，生成不存在图像的区域。因此，在反变换处理中，进行对不存在图像的区域的内插。图8A-8D示出了阐述图像内插的说明图。例如，如图8B中所示，在图8A中示出的素材在向右方向上水平地移动，并且在如阴影部分表示的左侧端上生成不存在图像的区域。因此，图像变换单元12设置不存在图像的区域，例如，作为图像内插处理的黑带显示。另外，在左侧端上的图像可在水平方向被拷贝。

另外，在对每一对象进行视差调节的情形下，例如，如图8D中所示，沿向右方向水平地移动图8C中示出的对象，并且在一些情形下，可能生成由对象边缘上的黑色部分表示的不存在图像的遮挡区。因此，图像变换单元12通过利用用于图像内插处理的不同时间的图像或不同视点的图像，来执行对遮挡区的内插。

此外，通过放大图像，图像变换单元可以避免生成不存在图像的区域。在进行图像放大的情形中，图像变换单元12根据移动量设置放大因数。例如，通过随着移动量的增大而增加放大因数，可以除去不存在图像的区域。另外，如果该放大因数没有突然地波动，则用户认为图像的放大是在编辑等时所添加的效果，可以避免图像涉及不适感的反应。

此外，图像变换单元12可根据最大的移动量来决定放大因数。在所述情形下，可除去不存在图像的区域，并且即使当移动量被改变时，图像大小也不变。最大的移动量可以被预先设置为在产生三维显示素材时的移动量的最大量，并且在产生三维显示素材时，还可存储该最大的移动量。此外，可根据以场景为单位的最大移动量来决定放大因数，以及以三维显示素材的素材为单位的最大移动量来决定放大因数。

图9A-9D示出了在进行图像放大的情形中的操作。图9A示出了在图像拾取时的移动量的改变。图9B示出了根据该移动量设置放大因数的情形。如图9B所示，通过随着移动量的绝对值的增大而增加放大因数，可以除去不存在图像的区域是。图9C示出了根据最大的移动量设置放大因数的情形。在所述情形下，不仅除去了不存在图像的区域，而且即使当移动量被改变时，图像的大小不变。图9D示出了根据以场景为单位的最大移动量来设置放大因数的情形。应该注意到，在图9A-9D中，场景切换位置被表示为场景改变位置SC。在所述情形下，不对图像进行不必要的放大。

另外，在以GOP（Group Of Pictures，图片集）为单位进行视差调节并且视差调节信息表示对应每一个GOP所进行的移动量的情形下，图像变换单元12基于该视差调节信息执行反变换处理，并且以GOP为单位生成视差调节之前的素材。此外，在以帧为单位进行视差调节并且视差调节信息表示以GOP为单位的移动量的情形下，通过使用对应于前面的和后续的GOP中的至少一个的视差调节信息所表示的移动量来进行线性内插，以计算在GOP中的各个帧的移动量。通过使用所计算的移动量来在各个帧上进行反变换处理，以生成视差调节之前的素材。

如上所述，在实现三维显示的情形下，由于输出了视差调节后的三维显示素材，如果通过使用从图像处理装置10输出的图像数据来实现三维显示，则可以更自然地和更舒适地显示三维图像。另外，在实现二维显示的情形下，输出左视点素材和右视点素材中对应于视差调节前素材的一个素材，其中所述视差调节前素材基于视差调节信息，通过在视差调节后的三维显示素材上进行反变换处理来生成。因此，即使使用视差调节后的三维显示素材时，仍可以避免在二维显示中静止而没有运动的对象显示。另外，由于在二维显示中进行图像内插处理，可以除去不存在图像的区域。应该注意到，在通过切换到或选择整个图像或对象单元来进行视差调节的情形中，表示是否通过选择整个图像或对象单元来进行视差调节的信息以及与进行视差调节的对象有关的信息被包含在视差调节信息中。

2-3.图像处理装置的第二操作

附带地，在第一操作中，已经阐述了在通过使用视差调节后的三维显示素材来实现图像显示的情形中的操作。在图像处理装置10中，不仅可利用视差调节后的三维显示素材，还可利用视差调节前的三维显示素材。在第二操作中，将阐述利用视差调节前的三维显示素材和视差调节后的三维显示素材的情形。应该注意到，图像处理装置10所使用的素材具有表示该三维显示素材是否是进行过视差调节的素材的识别信息。识别信息被提供作为例如在三维显示素材的头部的标记。在本文中，在该标记为“0”的情形下，三维显示素材是没有进行视差调节的素材。另一方面，在标记为“1”的情形下，三维显示素材是进行过视差调节的素材。另外，在标记为“1”的情形下，提供了表示视差调节的调节量的视差调节信息。

图10示出了图像处理装置的第二操作。在步骤ST11中，图像变换单元12确定视差调节是否是三维显示素材。基于识别信息，在确定三维显示素材是视差调节后的素材的情形下，图像变换单元12进行到步骤ST12，并且在未确定三维显示素材是视差调节后的素材的情形下，图像变换单元12进行到步骤ST15。

在步骤ST12中，图像变换单元12确定是否实现了二维显示。在实现了二维显示的情形下，例如，在用户指示二维显示或用于图像显示的显示装置不具有三维显示功能的情形下，图像变换单元12进行到步骤ST13。另外，例如，在用户指示三维显示或显示装置具有三维显示功能的情形下，图像变换单元12进行到步骤ST14。

在步骤ST13中，图像变换单元12执行二维显示处理。图像变换单元12基于由信息获取单元11提供的视差调节信息，执行反变换处理，并且从视差调节后的三维显示素材中生成视差调节前的素材。此外，图像变换单元12输出左视点素材和右视点素材中的对应于所生成的视差调节前素材的一个素材，作为二维显示素材。

在步骤ST14中，图像变换单元12执行三维显示处理。图像变换单元12输出视差调节后的三维显示素材。

当图像变换单元12从步骤ST11进行到步骤ST15时，图像变换单元12确定是否实现了二维显示。在实现了二维显示的情形下，例如，在用户指示二维显示或在用于图像显示的显示装置不具有三维显示功能的情形下，图像变换单元12进行到步骤ST16。另外，例如，在用户指示三维显示或在显示装置具有三维显示功能的情形下，图像变换单元12进行到步骤ST17。

在步骤ST16中，图像变换单元12执行二维显示处理。由于三维显示素材是没有进行视差调节的素材，图像变换单元12输出三维显示素材的左视点素材和右视点素材中的一个作为二维显示素材。

在步骤ST17中，图像变换单元12执行三维显示处理。由于三维显示素材是没有进行视差调节的素材，使得可以实现自然地和更舒适的三维显示，图像变换单元12在三维显示素材上执行视差调节。此外，图像变换单元12输出视差调节后的三维显示素材。

图11示出了在图像处理装置的第二操作中，在记录介质中记录视差调节前的素材的情形。例如，如图11（A）所示，图像拾取装置拾取目标的图像。图11（B）所示的由图像拾取装置所生成的左视点素材和右视点素材被记录在例如记录介质中。在使用在记录介质中所记录的左视点素材和右视点素材的三维显示中，在目标位置位于舒适范围之前的情形下，在左视点素材和右视点素材上进行视差调节，并且如图11（C）所示，目标的位置被移动。通过以上述方式进行视差调节，目标位置被设置成位于舒适范围内。此外，如图11（D）所示，通过使用视差调节后的左视点素材来显示左图像，并且通过使用视差调节后的右视点素材来显示右图像。另外，在实现二维显示的情形下，如图11（E）所示，通过使用被记录的左视点素材和右视点素材中的一个，实现二维显示。

当进行上述处理时，根据用于图像显示的三维显示素材是否是视差调节后的素材，图像处理装置10可输出适合于二维显示或三维显示的素材。因此，不管用于图像显示的三维显示素材是否是视差调节后的素材，在实现三维显示的情形下，可以自然地和更舒适地显示三维图像。此外，在实现二维显示的情形下，可以避免静止对象被显示为运动的情形。

3.软件处理的示例

另外，在说明书中阐述的一系列处理可以用硬件、软件或两者的组合结构来执行。在处理用软件俩执行的情形下，记录有处理序列的程序被装载到计算机的与专用硬件一体的存储器中来运行。替换地，程序也可被安装到可以执行各种处理的通用计算机中来运行。

图12示出了计算机装置的配置，该计算机装置被配置成基于程序来执行上述一系列处理。计算机装置80的CPU(Central Processing Unit，中央处理单元)801被配置成根据在ROM(Read Only Memory，只读存储器)802或记录单元808中记录的计算机程序，执行各种处理。

RAM(Random Access Memory，随机访问存储器)803适当地存储CPU801所执行的计算机程序和数据等。CPU801、ROM802以及RAM803通过总线804相互连接。

输入和输出接口805通过总线804也连接到CPU801。输入单元806（诸如触摸面板、键盘、鼠标以及微型电话等）和包括显示器等的输出单元807被连接到输入和输出接口805。CPU801执行与从输入单元806所输入的指令对应的各种处理。然后，CPU801输出处理结果到输出单元807。

连接到输入和输出接口805的记录单元808包括例如硬盘，并且记录由CPU801所执行的计算机程序和各种数据。通过经由有线或无线通信介质连接到因特网或局域网来使通信单元809与外部装置进行通信。另外，计算机装置80可经由通信单元809获取计算机程序，以将所获取的计算机程序存储在ROM802中或记录单元808中。

当可移动介质85（诸如磁盘、光盘、光磁盘或半导体盘等）被安装到驱动器810上时，驱动器810驱动可移动介质，以获得所记录的计算机程序和数据等。所获取的计算机程序和数据视情况而被转移到ROM802、RAM803或记录单元808。

CPU801读取并且执行实现上述一系列处理的计算机程序，并且在记录单元808和可移动介质85上所记录的素材以及经由通信单元809所提供的素材上进行上述的一系列处理。

应该注意到，本技术不应被认为限制于上述实施例。本技术的实施例通过例证的方式公开本技术，并且，本领域中的技术人员应该理解，根据在所附的权利要求书或其等同实施方式的范围内的设计需求和其他因素，可以存在各种修改、组合、部分组合和替代。即，为了确定本技术的要旨，应该参考所附的权利要求书的范围。

另外，本技术的图像处理装置可以采用下列配置：

（1）图像处理装置，包括：信息获取单元，该信息获取单元被配置成获取关于视差调节后的三维显示素材的视差调节信息；以及图像变换单元，该图像变换单元被配置成基于信息获取单元所获取的视差调节信息在视差调节后的三维显示素材上执行反变换处理以恢复到视差调节之前的素材，并且生成二维显示素材。

（2）根据（1）的图像处理装置，其中，图像变换单元放大图像或在不存在图像的区域执行内插处理，以通过反变换处理来除去不存在图像的区域。

（3）根据（2）的图像变换装置，其中，图像变换单元根据视差调节的调节量来放大图像，以除去不存在图像的区域。

（4）根据（2）的图像处理装置，其中，图像变换单元根据视差调节的最大调节量来放大图像以除去不存在图像的区域。

（5）根据（4）的图像处理装置，其中，图像变换单元根据每一场景的视差调节的最大调节量来放大图像，以除去不存在图像的区域。

（6）根据（1）到（5）的任一个的图像处理装置，其中，在视差调节中整个图像被移动的情形下，在反变换处理中，图像变换单元沿相反的方向移动整个图像。

（7）根据（1）到（5）的任一个的图像处理装置，其中，在视差调节中对象被移动的情形下，在反变换处理中，图像变换单元沿相反的方向移动该对象。

（8）根据（1）到（7）的任一个的图像处理装置，其中，信息获取单元获取表示三维显示素材是否是视差调节后的素材的识别信息，并且其中，在实现三维显示的情形下，当信息获取单元所获取的识别信息表示没有进行视差调节时，图像变换单元执行视差调节。

本公开包括与在2012年1月23日向日本专利局提交的日本优先权专利申请JP2012-011063中所公开的主题有关的主题，其整体内容以引用的方式并入本文中。

Claims (10)

1.一种图像处理装置，所述图像处理装置包括：

信息获取单元，所述信息获取单元被配置成获取关于视差调节后的三维显示素材的视差调节信息；以及

图像变换单元，所述图像变换单元被配置成，基于由所述信息获取单元获取的视差调节信息，通过对视差调节后的三维显示素材执行恢复成视差调节之前的素材的反变换处理来生成二维显示素材。

2.如权利要求1所述的图像处理装置，其中，所述图像变换单元放大图像或在不存在图像的区域上执行内插处理，以通过所述反变换处理去除不存在图像的区域。

3.如权利要求2所述的图像处理装置，其中，所述图像变换单元根据所述视差调节的调节量来放大所述图像，以去除不存在图像的区域。

4.如权利要求2所述的图像处理装置，其中，所述图像变换单元根据所述视差调节的最大调节量来放大所述图像，以去除不存在图像的区域。

5.如权利要求4所述的图像处理装置，其中，所述图像变换单元根据每一场景的视差调节的最大调节量来放大所述图像，以除去不存在图像的区域。

6.如权利要求1至5中任一项所述的图像处理装置，其中，在视差调节中整个图像被偏移的情形下，所述图像变换单元在所述反变换处理中沿相反方向偏移所述整个图像。

7.如权利要求1至5中任一项所述的图像处理装置，其中，在视差调节中对象被偏移的情形下，所述图像变换单元在所述反变换处理中沿相反的方向偏移所述对象。

8.如权利要求1至5中任一项所述的图像处理装置，

其中，所述信息获取单元获取表示三维显示素材是否是视差调节后的素材的识别信息，以及

其中，在进行三维显示的情形下，当由所述信息获取单元所获取的识别信息表示没有进行视差调节时，所述图像变换单元执行所述视差调节。

9.一种图像处理方法，所述图像处理方法包括：

获取关于视差调节后的三维显示素材的视差调节信息；以及

基于所获取的视差调节信息，通过对视差调节后的三维显示素材执行恢复成视差调节之前的素材的反变换处理来生成二维显示素材。

10.一种使计算机在三维显示素材上执行图像处理的程序，所述图像处理包括：

获取关于视差调节后的三维显示素材的视差调节信息；以及

基于所获取的视差调节信息，通过对视差调节后的三维显示素材执行恢复成视差调节之前的素材的反变换处理来生成二维显示素材。

Images