CN102780873A - 图像处理装置和方法 - Google Patents

Abstract

公开了一种图像处理装置和方法。该图像处理装置包括：图像生成单元，被配置为根据对象的关注部分的改变量，生成通过从不同角度拍摄所述对象得到的图像或者相当于通过从不同角度拍摄所述对象得到的图像的图像，作为对象图像；以及显示控制单元，被配置为使得显示屏幕显示由所述图像生成单元生成的所述对象图像。

Description

图像处理装置和方法

技术领域

本技术涉及图像处理装置和方法。特别地，本技术涉及这样的图像处理装置和方法，其中通过该装置和方法从任意角度观看的外形可以被检查。

背景技术

人们在传统上使用镜子来检查他们的外形。人们很难仅使用一个镜子来检查他们自己外形的侧面和背面，所以人们使用通过结合两个镜子得到的耦合镜子或者三折叠镜子。最近几年，作为使用耦合镜子或者三折叠镜子的方法的替代，存在用于在显示器上显示由相机拍摄的人的侧面和背面外形、以及正面外形的方法。

发明内容

但是，在日本未审查专利申请公开No.2010-87569中公开的相关技术方法中，人们很难从没有设置相机的角度检查他/她自己的外形。另外，在日本未审查专利申请公开No.2010-87569中公开的相关技术方法中，存在人的除了正面以外的侧面的外形的显示位置或者尺寸被限制的情况，所以人们很难检查正面以外的侧面的外形。

期望使能对从任意角度观看的一个人自己的外形的检查。

根据本技术的实施例的图像处理装置，包括：图像生成单元，被配置为根据对象的关注部分的改变量，生成通过从不同的视角拍摄对象得到的图像、或者相当于通过从不同的视角拍摄对象得到的图像的图像，作为对象图像；以及显示控制单元，被配置为允许显示屏幕显示由图像生成单元生成的对象图像。

图像生成单元可以生成通过从参考位置和参考方向的视角拍摄对象得到的图像、或者相当于通过从参考位置和参考方向的视角拍摄对象得到的图像的图像，作为参考对象图像；并且可以在对象的关注部分从参考对象图像被生成时的初始状态开始改变时根据改变量来改变视角的位置和方向中的至少一者，以生成通过从改变后的视角拍摄对象得到的图像或者相当于通过从改变后的视角拍摄对象得到的图像的图像，作为对象图像。

图像处理装置还可以包括被配置为检测对象的关注部分的改变量的检测单元，并且图像生成单元可以根据检测单元检测出的改变量生成对象图像。

图像处理装置还可以包括分别被放置在不同的位置并且在各个拍摄方向拍摄对象从而分别输出拍摄图像的数据的多个拍摄单元，并且当改变后的视角的位置和方向不与多个拍摄单元中的任意拍摄单元的设置位置和拍摄方向一致时，图像生成单元可以对从多个拍摄单元选出的拍摄单元所输出的拍摄图像的数据进行合成，以生成相当于通过从改变后的视角拍摄对象得到的图像的图像，作为对象图像。

对象的关注部分的改变量可以是对象的关注部分被从初始状态开始旋转并移动的情况下的旋转角度。

旋转方向可以是水平方向的。

旋转方向可以是竖直方向的。

合成图像为静止图像的情况下的改变量可以为对象的姿势的操作内容的改变量。

合成图像为运动图像的情况下的改变量可以为对象的面部位置的改变量或者对象的视线方向的改变量。

图像生成单元可以生成对象图像，从而使得显示屏幕上的对象图像的尺寸和对象图像的显示区域与显示屏幕上的参考对象图像的尺寸和参考对象图像的显示区域一致。

对象图像可以是通过拍摄对象的过去的外形得到的图像或者相当于对象的过去的外形的图像的图像。

对象图像可以是通过拍摄不同于该对象的另一对象得到的图像或者相当于通过拍摄另一对象得到的图像的图像。

显示控制单元可以允许叠加作为对象图像的以下图像中的两个以上图像以显示叠加图像：通过拍摄对象的过去的外形得到的图像或者相当于通过拍摄对象的过去的外形得到的图像的图像，通过拍摄对象的当前的外形得到的图像或者相当于通过拍摄对象的当前的外形得到的图像的图像，以及通过拍摄对象的未来的外形得到的图像或者相当于通过拍摄对象的未来的外形得到的图像的图像。

显示控制单元可以允许并排显示作为对象图像的以下图像中的两个以上图像：通过拍摄对象的过去的外形得到的图像或者相当于通过拍摄对象的过去的外形得到的图像的图像，通过拍摄对象的当前的外形得到的图像或者相当于通过拍摄对象的当前的外形得到的图像的图像，以及通过拍摄对象的未来的外形得到的图像或者相当于通过拍摄对象的未来的外形得到的图像的图像。

显示控制单元可以允许以使各个图像具有不同透射率的方式显示以下图像：通过拍摄对象的过去的外形得到的图像或者相当于通过拍摄对象的过去的外形得到的图像的图像，通过拍摄对象的当前的外形得到的图像或者相当于通过拍摄对象的当前的外形得到的图像的图像，以及通过拍摄对象的未来的外形得到的图像或者相当于通过拍摄对象的未来的外形得到的图像的图像。

根据本技术的另一实施例的图像处理方法对应于本技术的上述实施例的图像处理装置。

根据本技术的另一实施例的图像处理装置和方法根据对象的关注对象的改变量，生成通过从不同的视角拍摄对象得到的图像或者相当于通过从不同的视角拍摄对象得到的图像的图像，作为对象图像；以及允许显示屏幕显示所生成的对象图像。

如上所述，根据本技术的实施例，从任意角度观看的自己的外形可以被检查。

附图说明

图1示出了本技术的实施例的概况；

图2示出了用户面部的改变量和预定视角之间的关系；

图3示意性地示出了用于生成用户图像的数据的方法；

图4示意性地示出了用于生成用户图像的数据的方法；

图5示出了显示类型镜像装置的外部配置示例；

图6是示出主控制设备的功能配置示例的框图；

图7是示出显示处理的示例的流程图；

图8示出了用于转变用户图像的显示内容的方法；

图9示出了显示类型镜像装置的另一外部配置示例；

图10示出了叠加显示模式中的显示示例；

图11示出了并列显示模式中的显示示例；以及

图12是示出根据本技术的实施例的图像处理装置的硬件的配置示例的框图。

具体实施方式

[本技术的实施例的概况]

首先描述本技术的实施例的概况，以比较容易地理解本技术。

图1示出了本技术的实施例的概况。

根据本技术的实施例的显示类型镜像装置1包括显示器11和用于拍摄用户U的正面图像的相机(图1中未示出)，其中用户U是处于与显示器11相对的位置的人。

这里，用户U的正面图像不仅包括由单个相机拍摄的拍摄图像，而且包括通过处理分别由多个相机拍摄的多个拍摄图像得到的合成图像。换言之，用于拍摄用户U的正面图像的相机不仅包括从正面拍摄用户U的单个相机，而且包括从各个方向拍摄用户U的多个相机。所以，不仅由单个相机拍摄并被直接用作正面图像的拍摄图像，而且通过处理由多个相机拍摄的多个拍摄图像得到并且被用作正面图像的合成图像被称为由相机拍摄的正面图像。

当用户U站在与显示器11相对的位置时，作为初始状态的图像，显示器11显示由相机拍摄的正面图像(即，相当于在显示器11被当作镜子时得到的镜像图像的图像)，作为用户图像UP，如图1的左侧示图中所描绘的。这里，显示器11的系统没有被特别限制，并且可以是显示普通二维图像的系统或者是使能三维观看的系统。

当用户U移动她/他的面部时，显示在显示器11上的用户图像UP的外形改变。具体地，在用户U被从预定视角拍摄时所得到的用户图像UP被显示在显示器11上。在初始状态的情况中，例如，显示器11的从后向前的方向被设置为预定视角的方向。结果，用户U的正面图像被作为用户图像UP显示在显示器11上。

预定视角的位置和方向根据用户U的面部的移动方向和移动量改变，其中从预定视角对用户U进行拍摄，并且在下文中通过结合移动方向和移动量将它们统称为改变量。即，在用户U站在与显示器11相对的位置之后当用户U移动她/他的面部时，预定视角的位置和方向也根据改变量而改变。然后，当从位置和方向改变之后得到的预定视角对用户U进行拍摄时得到的图像被作为用户图像UP显示在显示器11上。

例如，在用户U的侧面被拍摄之前预定视角的位置和方向改变的情况下，用户U的侧面图像被作为用户图像UP显示在显示器11上，如图1的中心示图所描绘的。

当用户U的面部进一步移动并且面部的改变量进一步增加时，预定视角的位置和方向进一步根据改变量而改变。例如，在用户U的背面被拍摄之前预定视角的位置和方向改变的情况下，用户U的背面图像被作为用户图像UP显示在显示器11上，如图1的右侧示图所描绘的。

这里，尽管没有在图1中描绘，但是除了上述用于拍摄用户U的正面图像的相机以外的用于拍摄用户U的多个相机被放置在显示类型镜像装置1的各个位置上(参考随后描述的图5)。因此，在该多个相机中的一个相机的设置位置和拍摄方向(即，透镜的光轴方向)与预定视角的位置和方向一致的情况下，当一个相机实际拍摄用户U时得到的拍摄图像被作为用户图像UP显示在显示器11上。

但是，由于在多个相机的设置数目方面存在限制，所以自由改变的预定视角的位置和方向很少与相机的设置位置和拍摄方向一致。所以，当预定视角的位置和方向不与任意相机的设置位置和拍摄方向一致时，显示类型镜像装置1选择被放置在接近预定视角的位置上的多个相机。然后，显示类型镜像装置1对通过利用多个所选择的相机实际拍摄用户U得到的多个拍摄图像的数据进行合成，来生成相当于通过从预定视角实际拍摄用户U所得到的图像的合成图像的数据。然后，显示类型镜像装置1在显示器11上显示作为用户图像UP的合成图像。

所以，当用户U的面部移动时，显示类型镜像装置1根据面部的改变量来更新预定视角的位置和方向，并且在显示器11上显示在用户U被从更新后的预定视角的位置和方向拍摄时所得到的图像。因此，用户U可以仅通过执行诸如站在显示类型镜像装置1的显示器11的前面，然后在保持将视线对准显示器11的同时将她/他的面部向预定方向移动预定量之类的简单且直观的操作，来如同她/他的外形被从任意位置和方向上的预定视角查看一样检查她/他自己的外形。

下面描述根据本技术的实施例的显示类型镜像装置1。

[面部的改变量和预定相机的拍摄角度之间的关系]

图2示出了用户U的面部的改变量和预定视角之间的关系。

这里，从用户U的头部的后面到面部的通过中心(图2中的鼻子的一部分)的方向在下面被称为用户观看方向。另外，用户U站在与显示器11的显示表面相对的位置并且显示器11的正常方向和用户观看方向基本相互一致的状态被设置为初始状态。即，在初始状态的情况中，用户U的正面图像被作为用户图像UP显示在显示器11上，如图1的上述左图中所描绘的。

假设用户U例如在关于通过竖直方向中的头部中心的轴ax的水平方向(即，平行于图2的面部的方向)中，以逆时针旋转的方式转动她/他的头部。在这种情况中，用户U的面部的移动量Δx可以由初始状态中的用户观看方向(即，基本与显示器11的正常方向一致的方向)和移动面部之后的用户观看方向之间的角度表示，如图2中所描绘的。另外，根据移动量Δx改变的视角P被预先确定，并且改变量Δθ被表示为例如下面的公式(1)。

Δθ＝a×Δx+b  ...(1)

在公式(1)中，系数a和b是用于调节的参数，并且显示类型镜像装置1的设计者、制造者、或者用户U可以随意改变并设置参数a和b。

即，视角P对应于用于拍摄被显示在显示器11上的用户U的图像的相机实际被放置的位置，并且视角P沿着以用户U的头部中心的轴ax为中心的预定圆周移动。特别地，当假设在初始状态中视角P在圆周rp上的位置A1被设置为初始位置时，视角P根据用户U的面部的移动量为Δx的移动，从初始位置A1移动到圆周rp上的对应于改变量Δθ的旋转的位置A2。在这种情况下，视角P沿着连接视角P和用户U的头部中心的轴ax的直线对准用户U。因此，当用户被以下面的方式拍摄时所得到的图像被作为用户图像UP显示在显示器11上，其中存在于圆周rp上的位置A2上的视角P被定向在去往用户U的头部中心的轴ax的方向。

这里，如上所述，位置A2和由改变量Δθ指定的视角P的方向很少与实际被放置在显示类型镜像装置1中的相机的设置位置和拍摄方向一致。因此，显示类型镜像装置1通常选择被放置在接近视角P的位置上的多个相机，并且对通过利用多个所选择的相机实际拍摄用户U所得到的多个拍摄图像的数据进行合成来生成来自视角P的用户图像UP的数据。

下文中，将参考图3和图4，描述在位置A2和由改变量Δθ指定的视角P的方向与显示类型镜像装置1的任意相机的设置位置和拍摄方向不一致的情况下用于生成用户图像UP的数据的方法。

[用于生成用户图像UP的数据的方法的先决条件]

图3示意性地示出了用于生成用户图像UP的数据的方法，并且示出了该描述的先决条件。

在图3的示例中，相机C1被放置在相机C1可以拍摄用户U的正面的位置(即，对应于圆周rp上的初始位置A1的位置)上。另外，相机C2被放置在相机C2可以拍摄用户U的左侧面的位置(即，从初始位置A1开始沿着圆周rp向左移动90度的位置)上。

这里，作为视角P移动到相机C1和相机C2的设置位置以外的位置的情况的示例，分别假设视角P移动到圆周rp上的对应于改变量Δθ1的第一位置A21的情况和视角P移动到圆周rp上的对应于改变量Δθ2的第二位置A22的情况，如图3中所示。

[用于生成用户图像UP的数据的方法的具体示例]

图4示意性地示出了用于生成用户图像UP的数据的方法，并且示出了基于图3的先决条件生成的用户图像UP的数据的具体示例。

在图4中，拍摄图像CP1是通过利用相机C1实际拍摄用户U得到的图像，并且拍摄图像CP2是通过利用相机C2实际拍摄用户U得到的图像。

在视角P移动改变量Δθ1而移动到圆周rp上的位置A21的情况中，显示类型镜像装置1对相机C1的拍摄图像CP1的数据和相机C2的拍摄图像CP2的数据进行合成，以生成相当于从视角P实际拍摄用户U得到的图像的合成图像的数据，作为用户图像UP21的数据，如图4的右上示图中所描绘的。

另一方面，在视角P移动改变量Δθ2而移动到圆周rp上的位置A22的情况中，显示类型镜像装置1对相机C1的拍摄图像CP1的数据与相机C2的拍摄图像CP2的数据进行合成。从而，相当于通过从视角P实际拍摄用户U得到的图像的合成图像的数据被生成，作为用户图像UP22的数据，如图4的右下示图中所描绘的。在用户U在相反的方向转动他/她的面部(即，水平方向的顺时针旋转)的情况下，相当于通过在右侧方向从视角P实际拍摄用户U所得到的图像的合成图像的数据被生成，作为用户图像UP的数据。即，显示类型镜像装置1通过使用被放置在用户U的右侧方向中的预定相机的拍摄图像，来生成用户图像UP的数据。

所以，即使在视角P的位置和方向不与任意相机的设置位置和拍摄方向相一致的情况下，从由多个相机得到的拍摄图像的数据生成的合成图像的数据可以被用作用户图像UP的数据。因此，显示类型镜像装置1中的相机的设置数目可以被减少，从而可以减少显示类型镜像装置1的制造成本。

另外，显示器11上显示的用户图像UP响应于用户U的面部的移动而平滑改变，从而使得用户U可以检查自己的外形的改变而不会感到奇怪。

这里，显示器11上显示的用户图像UP可以是静止图像或者运动图像。另外，用户U可以随意设置显示器11上显示的用户图像UP的帧率。另外，可以通过设置用户U的面部的移动量Δx的预定阈值，来设置根据移动量Δx改变的视角P的改变量Δθ的上限。在这种情况下，可以规定，当用户U的面部的移动量Δx变得大于预定阈值时，防止基于根据移动量Δx而改变的视角P生成的用户图像UP的显示内容进一步改变。

显示类型镜像装置1可以根据用户U的预定操作，终止根据用户U的面部的移动量Δx而改变的用户图像UP的显示内容。因此，在终止用户图像UP的显示内容之后，用户U可以如同用户U在任意姿势(例如，用户将他/她的面部转向显示器11的正面的姿势)从任意位置和方向的预定视角看她/他自己一样检查她/他自己的外形。

另外，在显示类型镜像装置1从由多个相机得到的拍摄图像的数据生成用户图像UP的情况中，显示类型镜像装置1可以使用人体的形状作为约束条件。

现在描述显示类型镜像装置1的外观。

[显示类型镜像装置1的外部配置示例]

图5示出了显示类型镜像装置1的外部配置示例。

如图5中所描绘的，显示类型镜像装置1除了包括上述显示器11外，还包括相机12-1至12-10(任意包括图3的相机C1和C2)以及主控制设备13。相机12-1和12-2被放置在显示器11的侧面，并且相机12-3至12-10以被相机支架CF按照基本相等的间隔保持的方式被放置。当不必单独区分相机12-1至12-10时，这些相机被统称为相机12。

相机支架CF被放置在相机支架CF不打扰用户U的移动的位置上，例如，在图5的示例中被放置在用户U的站立位置之上(比用户U的高度更高的位置)。在这种情况中，被放置在相机支架CF上的相机12-3至12-10的拍摄方向是图中箭头所示的斜向下的方向。结果，通过利用相机12-3至12-10拍摄用户U所得到的拍摄图像示出了被从上往下看的用户U。另一方面，在被放置在显示器11的侧面、基本处于用户U的一半高度的水平的相机12-1和12-2方面，拍摄方向是水平方向，但是设置位置低于用户U的面部。结果，通过利用相机12-1和12-2拍摄用户U所得到的拍摄图像主要示出了用户U的面部以下的身体。因此，显示类型镜像装置1随意地对从相机12-1和12-2输出的拍摄图像的数据与从被放置在相机支架CF上的相机12-3至12-10中的一些相机输出的拍摄图像的数据进行合成，能够生成作为用户图像UP的数据的、其中用户U的整个外形被从水平方向观看的图像的数据。所以，相机12可以被以围绕用户U的方式接近用户U所站立的地面放置，并且可以对从被放置在上侧和下侧的相机12输出的拍摄图像的数据进行合成。

这里，相机支架CF的形状在图5的示例中为正方形。但是，该形状不限于图5的示例，并且形状可以是诸如长方形和圆形之类的其他形状。另外，相机12的设置位置不限于图5的示例，并且相机12可以被以例如可移动的方式设置。另外，相机12的设置数目不限于图5的示例。另外，相机12可以是常用的单镜头相机或者立体相机。

显示器11、相机12、以及主控制设备13的各个通信系统没有被特别限制，并且可以是有线系统或者无线系统。另外，在图5的示例中，显示器11和主控制设备13被以物理上分离的方式配置。然而，显示器11和主控制设备13的配置没有被特别限制为图5的示例，并且显示器11和主控制设备13可以被以集成方式配置。

在图5中所描绘的显示类型镜像装置1的主控制设备13的功能中，现在将参考图6描述用于实现各种功能以在显示器11上显示用户图像UP的功能配置示例。

[显示类型镜像装置1的主控制设备13的功能配置示例]

图6是示出显示类型镜像装置1的主控制设备13的功能配置示例的框图。

图6的显示类型镜像装置1的主控制设备13包括图像处理单元31、设备位置信息记录单元32、以及图像信息记录单元33。图像处理单元31包括相机控制单元51、图像获取单元52、面部位置检测单元53、显示图像生成单元54、以及图像显示控制单元55。

相机控制单元51进行控制，以使相机12-1至12-10中的至少一个相机拍摄用户U。

当拍摄图像的相应数据被从相机12-1至12-10中的一个或多个相机输出时，图像获取单元52根据相机控制单元51的控制获取拍摄图像的相应数据，以将相应数据存储在图像信息记录单元33中。

设备位置信息记录单元32起初记录表示相机12-1至12-1中的每个相机相对于显示器11的位置关系的信息(下面称为设备位置信息)。当图像获取单元52获取到相机12-K(K是1到10中的任意整数)的拍摄图像的数据时，图像获取单元52从设备位置信息记录单元32读取相机12-K的设备位置信息，以使图像信息记录单元33记录设备位置信息和相机12-K的拍摄图像的数据。

面部位置检测单元53从图像信息记录单元33读出拍摄图像的数据，以从拍摄图像中检测用户U的面部的位置。面部位置检测单元53的检测结果被供应给显示图像生成单元54。这里，面部位置检测单元53的检测结果还被根据需要供应给相机控制单元51。在这种情况下，相机控制单元51可以基于检测结果减少相机12-1至12-10中将被操作的相机(即，被允许输出由图像获取单元52获取的拍摄图像的数据的相机)。

显示图像生成单元54根据从被以时间分离的方式拍摄的多个拍摄图像的每个数据检测出的用户U的面部的每个位置，计算用户U的面部的移动量Δx。然后，显示图像生成单元54向公式(1)指派移动量Δx，以计算视角P的改变量Δθ。另外，显示图像生成单元54从图像信息记录单元33读出拍摄图像的数据，以生成相当于通过从移动了改变量Δθ的视角P拍摄用户U得到的图像的图像的数据，作为用户图像UP的数据。

图像显示控制单元55允许显示器11显示对应于显示图像生成单元54所生成的图像的用户图像UP。

这里，设备位置信息可以被图像获取单元52利用相机12-K的拍摄图像的数据规律地获取，而不必最初被记录在设备位置信息记录单元32中。

描述具有这种配置的显示类型镜像装置1显示用户图像UP(下面称为显示处理)的示例。

[显示处理]

图7是示出显示处理的示例的流程图。

当用户U站立在与显示器11相对的位置上时，显示类型镜像装置1开始处理。

在步骤S1，显示图像生成单元54读出相机12的拍摄图像的数据。即，显示图像生成单元54根据相机控制单元51的控制，从图像信息记录单元33读出由相机12进行拍摄处理所得到的拍摄图像的用于生成用户U的正面图像的数据所必需的数据。在这种情况中，例如，由相机12-1、12-2、和12-10进行的拍摄处理所得到的拍摄图像的数据被读出。

在步骤S2，显示图像生成单元54从在步骤S1中读出的相应图像数据，生成用户U的正面图像的数据。

在步骤S3，图像显示控制单元55允许显示器11显示用户U的正面图像。即，图像显示控制单元55允许显示器11显示对应于在步骤S2中由显示图像生成单元54生成的数据的用户U的正面图像，作为用户图像UP。

在步骤S4，面部位置检测单元53从图像信息记录单元33读出拍摄图像的数据，以从拍摄图像的数据检测用户U的面部的位置。

在步骤S5，显示图像生成单元54计算从以前的时间移动后(包括没有移动)的视角P的位置和方向。即，显示图像生成单元54从面部位置检测单元53检测出的用户U的面部的位置，计算用户U的面部的移动量Δx。然后，显示图像生成单元54通过向公式(1)指派移动量Δx执行操作，以计算视角P的改变量Δθ，从而指定视角P的位置和方向。

在步骤S6，显示图像生成单元54从图像信息记录单元33读出处于视角P的位置上的一个相机12或者处于接近视角P的位置的多个相机12输出的拍摄图像的数据。

在步骤S7，显示图像生成单元54基于在步骤S6中读出的一个或多个拍摄图像的数据生成用户图像UP的数据。即，显示图像生成单元54生成相当于通过从移动了改变量Δθ(该改变量在步骤S5中被计算出来)的视角P拍摄用户U所得到的图像的图像的数据，作为用户图像UP的数据。

在步骤S8，显示图像生成单元54校正用户图像UP的数据。即，显示图像生成单元54校正用户图像UP的数据，从而使得由在步骤S7中生成的用户图像UP的数据表示的用户U的整个身体的尺寸(即，在显示器11的显示屏幕中用户U的整个身体的区域的占用)对应于在步骤S2中生成的正面图像的数据(即，显示高度相互一致)。另外，显示图像生成单元54允许在步骤S7中生成的用户图像UP的数据所表示的用户图像UP在显示器11上的显示区域对应于在步骤S2中生成的用户U的正面图像的数据。该校正被执行，以不向用户U提供奇怪的感觉。

在步骤S9，图像显示控制单元55允许显示器11显示经过校正的用户图像UP。此时，用户U可以通过在移动面部的位置的同时仅将视线对准显示器11来检查用户图像UP。

在步骤S10，图像处理单元31确定处理的结束是否被指示。这里，处理结束的指示没有被特别限制。例如，相机12检测出用户U不再存在于显示器11的前面可以被用作处理结束的指示。另外，例如，用户U用于指示处理结束的表达操作可以是处理结束的指示。

当处理结束没有被指示时，在步骤S10中确定为“否(NO)”。然后，处理返回到步骤S4，并且步骤S4的处理和随后的处理被重复。即，从步骤S4到步骤S10的循环处理被重复，直到处理结束被指示为止。

然后，当处理结束被指示时，在步骤S10中确定为“是(YES)”，并且显示处理结束。

这里，在步骤S3和S9中，用户U可以随意设置被显示在显示器11上的用户图像UP的尺寸。例如，用户U可以允许显示器11显示比用户自己的实际外形更苗条或者更高大的用户图像UP。另外，在步骤S3和S9中被显示在显示器11上的用户图像UP的显示区域经常可以是显示器11的显示区域中的任意区域或者中心。例如，当显示类型镜像装置1辨认出用户U站立在与显示器11相对的位置上并保持静止持续等于或长于预定时间时(例如，数秒)，显示类型镜像装置1可以在正面对该位置的显示器11的显示区域中显示用户图像UP。

在上述示例中，被显示在显示器11上的用户图像UP的显示内容(即，用户U的姿势)在视角P的位置和方向根据用户U的面部的移动量Δx改变时被转变。但是，用户图像UP的显示内容的转变可以通过根据其他目标的改变而改变视角P的位置和方向来执行。

[用于转变用户图像UP的显示内容的方法]

图8示出了用于转变用户图像UP的显示内容的方法。

作为用于转变用户图像UP的显示内容的方法，可以根据用户U的操作类型使用多种方法。在图8的示例中，存在根据用户U的面部位置的移动操作、根据用户U的视线方向的移动操作、根据手和手指的手势操作、以及根据利用单独提供的游戏面板的操作来改变视角P的位置和方向的方法。

下面在比较以下三个特征的同时分别描述这些方法：“可以面向前方在视觉上进行观察”、“可以空手进行操作”、以及“没有姿势的限制”。这里，“可以面向前方在视觉上进行观察”表示用户U可以在相对于显示器11面向前方的同时在视觉上观察被显示的用户图像UP，并且各个方法中采用的操作可以被执行。“可以空手进行操作”表示各个方法中采用的操作可以在用户U空手的状态下被执行。“没有姿势的限制”表示各个方法中采用的操作可以在用户U的姿势不受限制的状态下被执行。

用于根据面部位置的移动操作来转变用户图像UP的显示内容的方法是这样的一种方法：当用户U执行移动她/他的面部位置的操作时，视角P的位置和方向根据面部位置的移动量Δx而改变，从而使得被显示在显示器11上的用户图像UP的显示内容被转变。如图8中所示，针对各个条目描绘了圆圈，并且在使用这种方法时，用户U可以以下面的方式操作她/他的面部的移动操作：用户U可以在空手面向前方的同时视觉地观察被显示在显示器11上的用户图像UP，并且用户U的姿势没有被限制。

用于根据视线方向的移动操作来转变用户图像UP的显示内容的方法是这样一种方法：当用户U执行移动视线方向的操作时，视角P的位置和方向根据视线的移动量Δx而改变，从而使得显示在显示器11上的用户图像UP的显示内容被转变。如图8中所示，针对各个条目描绘了圆圈，并且在使用这种方法时，用户U可以按照以下方式操作视线方向的移动操作：用户U可以在空手面向前方的同时视觉地观察显示在显示器11上的用户图像UP，并且用户U的姿势不受限制。如上所述，用户U可以通过执行预定操作终止用户图像UP的显示内容。作为预定操作，例如，用户U的持续等于或长于预定时间的眨眼操作可以被采用。因此，在用户U通过持续等于或者长于预定时间的眨眼操作等终止用户图像UP的显示内容之后，用户U可以在将视线对准显示器11的正面的同时，如同用户U自己被从任意位置和方向的预定视角观看一样检查外形。

用于根据手和手指的手势操作转变用户图像UP的显示内容的方法是这样一种方法：当用户U执行手和手指的预定手势操作时，视角P的位置和方向根据操作内容的改变而改变，从而使得显示在显示器11上的用户图像UP的显示内容被转变。如图8中所示，针对各个条目描绘出了圆圈和交叉标记，在使用这种方法时，用户U可以以下面的方式操作手和手指的手势操作：用户U在空手面向前方的同时以视觉地观察被显示在显示器11上的用户图像UP。但是，用户U在姿势被限制的状态下执行手和手指的手势操作。

用于根据利用游戏面板进行的操作来转变用户图像UP的显示内容的方法是这样一种方法：当用户U针对游戏面板执行操作时，视角P的位置和方向根据操作内容的改变而改变，从而使得被显示在显示器11上的用户图像UP的显示内容被转变。如图8中所示，针对各个条目描绘了圆圈、交叉标记、以及三角标记，在使用这种方法时，用户U可以按照以下方式针对游戏面板执行操作：用户U可以在面向前方的同时视觉地观察被显示在显示器11上的用户图像UP。但是，用户U不能空手针对游戏面板执行操作。另外，用户U在针对游戏面板执行操作时没有困难，并且无需限制用户U的姿势。

所以，作为用于转变用户图像UP的显示内容的用户U的操作，优选采用满足所有的以下三个特征的操作：“可以面向前方在视觉上进行观察”、“可以空手进行操作”、“没有姿势的限制”(即，上述的面部位置的移动操作以及上述的视线方向的移动操作)。如果三个特征中的某些点被满足，则诸如手和手指的手势操作和利用游戏面板的操作之类的各种类型的操作可以被用作用户U转变用户图像UP的显示内容的操作。

在被显示在显示器11上的用户图像UP为静止图像的情况下，优选的是手和手指的手势操作被用作转变用户图像UP的显示内容的方法。另一方面，在被显示在显示器11上的用户图像UP为运动图像的情况下，优选的是用户U的面部的移动操作以及视线方向的移动操作被用作转变用户图像UP的显示内容的方法。

在任何情况下，不会对用户造成负担的简单且直观的操作可以被用作用户U转变用户图像UP的显示内容的操作。这里，应该注意，用户U用于转变用户图像UP的显示内容的操作不限于上述示例。

[显示类型镜像装置1的另一外部配置示例]

在上述示例中，在显示类型镜像装置1中，多个相机12被放置在相机支架CF上。但是，显示类型镜像装置1的外部配置不限于此。

图9示出了显示类型镜像装置1的另一外部配置示例。

如图9中所描绘的，显示类型镜像装置1包括显示器11、周边镜子(circumference mirror)71、以及相机72-1至72-3。相机72-1和72-2被放置在显示器11的侧面，并且相机72-3被放置在显示器11的上面。周边镜子71被放置在周边镜子71不会妨碍用户U的移动的位置，例如，在图9的示例中被放置在用户U的站立位置上方。当不必单独区别相机71-1至71-3时，这些相机被统称为相机72。

相机72-3拍摄被反射在周边镜子71上的用户U。即，相机72-3任意移动拍摄方向以摄取由周边镜子71反射的光束，能够输出相当于从多个方向拍摄用户U所得到的图像的拍摄图像的数据。即，相机72-3独立施加与被放置在图5的相机支架CF上的多个相机12-3至12-10相同的功能。另外，通过精确控制相机72-3的拍摄方向的移动，一个拍摄图像的数据可以被直接用作通过从任意方向拍摄用户U获取的用户图像UP的数据，而无需对多个拍摄图像的数据进行合成。

这里，周边镜子71在图9的示例中为正方形，但是周边镜子71的形状不限于图9的示例。周边镜子71可以具有诸如圆形或者半球形之类的其他形状。另外，相机72的设置位置不限于图9的示例，并且相机72例如是可移动的。另外，相机72的设置数目不限于图9的示例。

在上述示例中，用户U的当前外形被作为用户图像UP显示在显示器11上。但是，用户图像UP可以是用户U的过去的或者未来的外形、或者是用户U以外的其他人的外形。在这种情况下，用户U可以允许显示类型镜像装置1将用户U的过去或者未来的外形的用户图像UP或者其他人的外形的用户图像UP叠加在用户U的当前的外形的用户图像UP上以显示叠加图像，或者并排显示用户U的过去或者未来的外形的用户图像UP或者其他人的外形的用户图像UP与用户U的当前的外形的用户图像UP。然后，前一种用户图像UP的显示方法被称为叠加显示模式，并且后一种用户图像UP的显示方法被称为并列显示模式。参考图10和11描述用户图像UP的显示示例。

[叠加显示模式的显示示例]

图10示出了叠加显示模式的显示示例。

被显示在显示器11上并被用实线描绘出来的用户图像UP41、被显示在显示器11上并被用虚线描绘出来的用户图像UP42、以及被显示在显示器11上并被用点划线(dashed-dotted line)描绘出来的用户图像UP43分别表示用户U的当前的外形、过去的外形、以及未来的外形。如图10中所描绘的，在叠加显示模式中，用户图像UP42和用户图像UP43相对于参考用户图像UP41的显示区域被相叠加，从而被以身体的中心相互一致的方式显示在用户图像UP41的显示区域上。

示出了用户U的过去的外形的用户图像UP42由显示图像生成单元54利用图像信息记录单元33中记录的用户U的过去的拍摄图像的数据生成。示出了用户U的未来的外形的用户图像UP43由显示图像生成单元54利用用户U的未来的拍摄图像的数据生成，其中用户U的未来的拍摄图像的数据是利用图像信息记录单元33中记录的用户U的过去的拍摄图像的数据和用户U的当前的拍摄图像的数据计算出来的。具体地，例如，显示图像生成单元54使用诸如校正函数和预测函数之类的预定函数，基于分别被包括在用户U的过去和当前的拍摄图像的数据中的用户U的形状的差异来计算用户U的未来的外形，从而生成用户图像UP43。

在叠加显示模式中，用户图像UP41至UP43被分别显示，从而使得用户图像UP41至UP43可以被以时间顺序辨认出来。具体地，用户图像UP41至UP43被显示，从而使得透射率按照用户图像UP42、用户图像UP41、以及用户图像UP43的次序(即，用户U的过去的外形、当前的外形、以及未来的外形的次序)增大。显然，显示器可以被执行从而使得透射率被按照以上次序的相反次序增大。

在示出用户U的过去的外形的用户图像UP42中，显示可以被执行，从而使得基于更早的拍摄图像的数据生成的用户图像UP42的透射率高，并且基于更当前的拍摄图像的数据生成的用户图像UP42的透射率低。以同样的方式，在示出了用户U的未来的外形的用户图像UP43中，显示可以被执行，从而使得基于更未来的预测生成的用户图像UP43的透射率高，并且基于更当前的拍摄图像的数据生成的用户图像UP43的透射率低。

所以，分别示出了用户U的当前的外形、过去的外形、以及未来的外形的用户图像UP41至UP43被叠加并被按照可辨认的时间顺序显示在显示器11上，从而使得用户U可以容易地察觉到自己身体形态的改变。

这里，用户图像UP41至UP43分别示出了用户U以外的人的当前的、过去的、以及未来的外形。另外，用户图像UP41至UP43可以是示出同一对象的全部图像(即，所有图像示出了用户U或者用户U以外的其他人)或者是其中的一部分示出了其他对象的图像(即，用户U和用户U以外的其他人被混合在一起)。另外，所有用户图像UP41至UP43不必被相互叠加，但是用户图像UP41至UP43可以被显示从而使得用户图像UP41至UP43中的任意两个被相互叠加。

[并列显示模式的显示示例]

图11示出了并列显示模式的显示示例。

如图11中所描绘的，在并列显示模式中，示出了用户U的过去的外形的用户图像UP42邻接示出了用户U的当前的外形的用户图像UP41被显示。这里，被以并列显示模式显示的用户图像UP不限于此，并且用户图像UP41至UP43中的任意两个或者全部图像可以被显示。

所以，分别示出了用户U的当前的外形、过去的外形、以及未来的外形的用户图像UP41至UP43被以能够按照时间顺序辨认出来的方式并排显示在显示器11上。所以，用户U可以在详细检查她/他自己的当前的外形、过去的外形、以及未来的外形中的每个外形的身体形态的同时察觉到自己身体形态的改变。

另外，在并列显示模式中，如同在叠加显示模式中的情况一样，用户图像UP41至UP43分别示出了用户U以外的其他人的当前的外形、过去的外形、以及未来的外形。另外，用户图像UP41至UP43可以是示出同一对象的所有图像(即，所有图像示出了用户U或者用户U以外的其他人)，或者是其中的一部分示出了其他对象的图像(即，用户U和用户U以外的其他人被混合在一起)。这里，示出了用户U以外的其他人的用户图像UP42由显示图像生成单元54使用示出了用户U以外的其他人的拍摄图像的被记录在图像信息记录单元33中的数据生成。

尽管在上述示例中用户图像UP的数据被基于用户U的面部的移动量Δx而更新，但是用户图像UP的数据也可以被基于用户U的面部的移动速度而更新。即，显示类型镜像装置1可以生成用户图像UP的数据，从而使得显示类型镜像装置1在用户U的面部的移动速度增大时增大视角P的改变量Δθ。

另外，尽管用户U的面部的移动量Δx是用户U在水平方向转动并移动她/他的面部的情况的旋转角，但是转动方向也可以是竖直方向。在这种情况下，例如，当用户U向上看或者伸手时，显示类型镜像装置1可以在显示器11上显示用户U的头部的顶部，并且当用户U向下看或者蹲下时，显示类型镜像装置1可以在显示器11上显示用户被从较低的方向观看的外形。

另外，尽管在上述示例中用户U的整个身体被显示在显示器11上，但是很显然可以仅显示用户U的面部、上半身、或者下半身。

另外，在上述示例中相当于显示器11被假设为镜子的情况的镜像图像的图像被显示为用户图像UP，但是用户图像UP不限于此。示出了从其他方向观看的用户U的外形的图像(即，与相当于镜像图像的图像对称的图像)可以被作为用户图像UP显示。在这种情况下，用于显示用户图像UP的前一种模式被设置为镜像模式，并且用于显示用户图像UP的后一种模式被设置为正常模式，以使用户U能够选择任意的显示模式。

另外，在上述示例中用户U的面部的移动量Δx由面部位置检测单元53检测出来，并且用户图像UP的数据被基于移动量Δx更新，但是不必特别采用面部位置检测单元53。即，可以被用在更新对象的图像的数据的处理中并且可以检测对象的被关注点的改变量的检测单元可以被用作面部位置检测单元53的替代。换言之，这种检测单元被用在显示类型镜像装置1中是足够了，并且面部位置检测单元53仅是用户U被用作对象并且拍摄图像中所包括的用户U的面部的区域被用作关注点的情况的检测单元的示例。

[本技术的实施例到程序的应用]

以上所述的一系列处理可以由硬件或软件执行。

在这种情况下，图12中描绘的个人计算机例如可以被用作上述图像处理装置的至少一部分。

在图12中，CPU 101根据ROM 102中记录的程序执行各种处理。替代地，CPU 101根据从存储单元108装载到RAM 103上的程序执行各种处理。RAM 103随意记录例如CPU 101的各种处理的执行所必需的数据。

CPU 101、ROM 102、和RAM 103经由总线104相互连接。输入/输出接口105也被连接至该总线104。

包括键盘、鼠标等的输入单元106和包括显示器等的输出单元107被连接至输入/输出接口105。包括硬盘等的存储单元108、以及包括调制解调器、终端适配器等的通信单元109也被连接至输入/输出接口105。通信单元109控制经由包括互联网的网络与其他设备(未示出)执行的通信。

设备110还在必要时被连接到输入/输出接口105，并且作为磁盘、光盘、磁光盘、半导体存储器等的可移除介质111被任意地附接。从可移除介质111读出的计算机程序在必要时被安装到存储单元108上。

在一系列处理由软件执行的情况中，构成软件的程序被从网络或者记录介质装载到被合并在专用硬件或者能够在各种程序被安装时执行各种功能的通用计算机中的计算机中。

包含有这样的程序的记录介质不仅包括可移除介质(封装介质)211而且包括图12中所示的记录程序的ROM 102和被包括在存储单元108中的硬盘。可移除介质211被分发以向与设备主体相分离的用户提供程序，并且是磁盘(包括软盘)、光盘(包括压缩盘只读存储器(CD-ROM)和数字通用盘(DVD))、磁光盘(包括迷你盘(MD))、半导体存储器等。ROM 102和硬盘已经被合并到设备主体中。

在本说明书中，描述被记录在记录介质中的程序的步骤不仅包括被以时间顺序执行的处理，而且包括不必以时间顺序执行而被并列或者单独执行的处理。

应该理解，本技术的实施例不限于上述实施例，并且在本技术的范围内可以想出各种修改。

本技术的实施例还可以采用以下配置。

(1)一种图像处理装置，包括：图像生成单元，被配置为根据对象的关注部分的改变量，生成通过从不同的视角拍摄所述对象得到的图像或者相当于通过从不同的视角拍摄所述对象得到的图像的图像，作为对象图像；以及显示控制单元，被配置为使显示屏幕显示由所述图像生成单元生成的所述对象图像。

(2)在根据(1)所述的图像处理装置中，所述图像生成单元生成通过从参考位置和参考方向的视角拍摄所述对象得到的图像以及相当于从所述参考位置和所述参考方向的视角拍摄所述对象得到的所述图像的图像，作为参考对象图像，并且当所述对象的所述关注部分从所述参考对象图像被生成的初始状态开始改变时根据所述改变量来改变所述视角的位置和方向中的至少一者，以生成通过从改变后的视角拍摄所述对象得到的图像或者相当于通过从所述改变后的视角拍摄所述对象得到的所述图像的图像，作为所述对象图像。

(3)根据(1)或(2)所述的图像处理装置，还包括：检测单元，被配置为检测所述对象的关注部分的改变量。在该图像处理装置中，所述图像生成单元根据由所述检测单元检测出的所述改变量生成所述对象图像。

(4)根据(1)、(2)或(3)所述的图像处理装置，还包括：多个拍摄单元，分别被放置在不同的位置上，并且在各个拍摄方向中拍摄所述对象以分别输出拍摄图像的数据。在该图像处理装置中，当所述改变后的视角的位置和方向不与所述多个拍摄单元中的任意拍摄单元的设置位置和拍摄方向一致时，所述图像生成单元对从所述多个拍摄单元中选出的拍摄单元所输出的拍摄图像的数据进行合成，以生成相当于通过从所述改变后的视角拍摄所述对象获取的图像的图像，作为所述对象图像。

(5)根据(1)至(4)中任一项所述的图像处理装置，其中所述对象的所述关注部分的改变量是所述对象的所述关注部分被从所述初始状态开始旋转并移动的情况下的旋转角度。

(6)根据(1)至(5)中任一项所述的图像处理装置，其中旋转方向是水平方向。

(7)根据(1)至(6)中任一项所述的图像处理装置，其中所述旋转方向是竖直方向。

(8)在根据(1)至(7)中任一项所述的图像处理装置中，其中合成图像为静止图像的情况下的改变量为所述对象的姿态的操作内容的改变量。

(9)根据(1)至(8)中任一项所述的图像处理装置，其中所述合成图像为运动图像的情况下的改变量为所述对象的面部位置的改变量或者所述对象的视线方向的改变量。

(10)在根据(1)至(9)中任一项所述的图像处理装置中，其中所述图像生成单元生成所述对象图像，从而使得所述对象图像的尺寸和所述显示屏幕上的所述对象图像的显示区域与所述参考对象图像的尺寸和所述显示屏幕上的所述参考对象图像的显示区域一致。

(11)在根据(1)至(10)中任一项所述的图像处理装置中，其中所述对象图像是通过拍摄所述对象的过去的外形得到的图像，或者相当于所述对象的过去的外形的图像的图像。

(12)在根据(1)至(11)中任一项所述的图像处理装置中，其中所述对象图像是通过拍摄不同于所述对象的另一对象得到的图像或者相当于通过拍摄所述另一对象得到的图像的图像。

(13)在根据(1)至(12)中任一项所述的图像处理装置中，其中所述显示控制单元允许叠加作为所述对象图像的以下图像中的两个以上图像以显示叠加图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

(14)在根据(1)至(13)中任一项所述的图像处理装置中，其中所述显示控制单元允许并排显示作为所述对象图像的以下图像中的两个以上图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

(15)在根据(1)至(14)中任一项所述的图像处理装置中，其中所述显示控制单元允许以使各个图像具有不同透射率的方式显示以下图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

本技术的实施例可以应用于显示对象的图像的图像处理装置中。

本公开包含涉及于2011年5月13日在日本专利局递交的日本优先权专利申请JP 2011-108843中公开的内容的主题，其全部内容通过引用被结合于此。

Claims (16)

1.一种图像处理装置，包括：

图像生成单元，被配置为根据对象的关注部分的改变量，生成通过从不同的视角拍摄所述对象得到的图像或者相当于通过从不同的视角拍摄所述对象得到的图像的图像，作为对象图像；以及

显示控制单元，被配置为使显示屏幕显示由所述图像生成单元生成的所述对象图像。

2.根据权利要求1所述的图像处理装置，其中

所述图像生成单元

生成通过从参考位置和参考方向的视角拍摄所述对象得到的图像或者相当于从所述参考位置和所述参考方向的视角拍摄所述对象得到的所述图像的图像，作为参考对象图像，并且

当所述对象的所述关注部分从所述参考对象图像被生成的初始状态开始改变时根据所述改变量来改变所述视角的位置和方向中的至少一者，以生成通过从改变后的视角拍摄所述对象得到的图像或者相当于通过从所述改变后的视角拍摄所述对象得到的所述图像的图像，作为所述对象图像。

3.根据权利要求2所述的图像处理装置，还包括：

检测单元，被配置为检测所述对象的关注部分的改变量，其中

所述图像生成单元根据由所述检测单元检测出的所述改变量生成所述对象图像。

4.根据权利要求3所述的图像处理装置，还包括：

多个拍摄单元，分别被放置在不同的位置上，并且在各个拍摄方向中拍摄所述对象以分别输出拍摄图像的数据，其中

当所述改变后的视角的位置和方向不与所述多个拍摄单元中的任意拍摄单元的设置位置和拍摄方向一致时，所述图像生成单元对从所述多个拍摄单元中选出的拍摄单元所输出的拍摄图像的数据进行合成，以生成相当于通过从所述改变后的视角拍摄所述对象获取的图像的图像，作为所述对象图像。

5.根据权利要求4所述的图像处理装置，其中所述对象的所述关注部分的改变量是所述对象的所述关注部分被从所述初始状态开始旋转并移动的情况下的旋转角度。

6.根据权利要求5所述的图像处理装置，其中旋转方向是水平方向。

7.根据权利要求5所述的图像处理装置，其中所述旋转方向是竖直方向。

8.根据权利要求6所述的图像处理装置，其中合成图像为静止图像的情况下的改变量是所述对象的姿态的操作内容的改变量。

9.根据权利要求6所述的图像处理装置，其中所述合成图像为运动图像的情况下的改变量是所述对象的面部位置的改变量或者所述对象的视线方向的改变量。

10.根据权利要求8所述的图像处理装置，其中所述图像生成单元生成所述对象图像，从而使得所述对象图像的尺寸和所述显示屏幕上的所述对象图像的显示区域与所述参考对象图像的尺寸和所述显示屏幕上的所述参考对象图像的显示区域一致。

11.根据权利要求10所述的图像处理装置，其中所述对象图像是通过拍摄所述对象的过去的外形得到的图像，或者相当于通过拍摄所述对象的过去的外形得到的所述图像的图像。

12.根据权利要求10所述的图像处理装置，其中所述对象图像是通过拍摄不同于所述对象的另一对象得到的图像或者相当于通过拍摄所述另一对象得到的所述图像的图像。

13.根据权利要求10所述的图像处理装置，其中所述显示控制单元允许叠加作为所述对象图像的以下图像中的两个以上图像以显示叠加图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

14.根据权利要求10所述的图像处理装置，其中所述显示控制单元允许并排显示作为所述对象图像的以下图像中的两个以上图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

15.根据权利要求13所述的图像处理装置，其中所述显示控制单元允许以使各个图像具有不同透射率的方式显示以下图像：通过拍摄所述对象的过去的外形得到的图像或者相当于通过拍摄所述对象的过去的外形得到的图像的图像，通过拍摄所述对象的当前的外形得到的图像或者相当于通过拍摄所述对象的当前的外形得到的图像的图像，以及通过拍摄所述对象的未来的外形得到的图像或者相当于通过拍摄所述对象的未来的外形得到的图像的图像。

16.一种图像处理方法，包括：

根据对象的关注部分的改变量，生成通过从不同的视角拍摄所述对象得到的图像或者相当于通过从不同的视角拍摄所述对象得到的图像的图像，作为对象图像；以及

使显示屏幕显示在生成图像的处理中生成的所述对象图像。

Images