CN102986231B - 立体图像显示装置、立体成像装置及方法 - Google Patents

Abstract

本申请公开的3D图像显示装置能够读出并设置适用于显示图像的显示监视器的监视器尺寸的立体效果调节值。基于多视点图像，立体图像生成单元（59）生成用于立体显示图像的立体图像。显示处理单元（61）在能够进行立体显示的显示监视器（51）上显示立体图像。立体效果控制单元（58）为立体图像生成单元设置立体效果调节值，以便调节在显示监视器（51）上显示立体图像使呈现的立体效果。调节值记录单元（60）将立体效果控制单元（58）所调节的立体效果调节值与多视点图像以及用于显示立体效果调节后的立体图像的显示监视器（51）的尺寸相关联地记录在记录介质（57）中。

Description

立体图像显示装置、立体成像装置及方法

技术领域

本发明涉及一种立体图像显示装置，并且更具体地涉及用于显示其间具有视差的多个图像的立体图像显示装置，以允许立体观看图像。本发明还涉及一种用于从多个视点捕获图像的立体成像装置。本发明还涉及立体效果控制方法和立体图像显示方法。

背景技术

显示图像以允许使用多个其间具有视差的图像（多视点图像）来立体观看图像的技术是已知的。这种多视点图像包括：从两个或更多个视点拍摄的多个图像（典型地为右眼用图像和左眼用图像）。可以通过从不同位置捕获同一对象来获得多视点图像。对多视点图像包含的各图像进行组合以生成立体图像。通过使用各图像之间的视差来实现立体图像的立体显示。

已知几种用于实现立体显示的特定的系统。例如，已知平行观看是允许裸眼观看立体显示的系统。在平行观看中，通过并排布置多个图像来实现立体显示。另外，作为用于使用眼镜实现立体观看的系统，补色立体系统和偏振滤光器系统是已知的。在补色立体系统中，通过将各图像的颜色改变成例如红色和蓝色来将这些图像彼此叠加，来组合所述多个图像以生成立体图像。在这种情况下，可以通过红色和蓝色的眼镜观看立体图像来实现图像的立体显示。在偏振滤光器系统中，通过将具有不同的偏振方向的图像彼此叠加起来来组合多个图像，以生成立体图像。在偏振滤光器系统中，通过偏振眼镜观看立体图像可以实现图像的立体显示。

除了上述的系统，有视差屏障系统和双凸透镜系统是已知的。在这些系统中，通过将多个图像切割成细的竖条并交替布置这些图像条来生成立体图像。在视差屏障系统和双凸透镜系统中，在立体显示器上显示立体图像，该立体显示器允许立体观看而不需要偏振眼镜等。另外，液晶快门系统和扫描背光系统是已知的。在液晶快门系统中，立体显示器是通过在显示屏幕上交替显示右眼用图像和左眼用图像，并且与所显示的图像的切换同步地驱动液晶快门眼镜来实现的。在扫描背光系统中，光学元件附接在液晶显示装置的显示表面上，并且以不同的光束方向高速交替显示左图像和右图像，从而使用残像效果实现立体显示。

在一般情况下，当立体图像的左眼用图像和右眼用图像之间的相对偏移被改变时，用户观看立体图像所感受到的立体效果也发生变化。即，用户在图像中感觉到的对象的三维深度发生改变。相对于立体显示器，优选观看立体显示图像的用户可以控制立体效果。这是因为不同的用户对于立体效果具有不同的偏好。有些用户可能更喜欢强烈的立体效果（具有增强的三维深度的立体显示），而其他用户可能更喜欢温和的立体效果。另外，由用户感觉到的立体效果取决于正在观看立体显示的用户，并且不同的用户观看相同的立体图像所感觉到的立体效果可能并不总是相同的。

日本未审查的专利公开第2004-129186号和10（1998）-090814（以下分别称为专利文献1和2）公开了进行立体效果控制（视差控制）。专利文献1所公开的立体图像数据处理装置包括三维深度控制单元，其作为立体效果控制装置。三维深度控制单元接收指令来控制立体显示的立体图像的视差。用户在观看预览显示的同时操作三维深度控制条，来控制视差以提供优选的立体效果。立体图像数据处理装置根据用户确定的视差控制值组合所述左眼用图像和右眼用图像，并将其转换成可立体显示的格式，并输出转换后的图像。专利文献2中公开的立体相机包括显示装置，其可以进行立体显示。利用专利文献2所公开的技术，这样的显示装置用于在拍摄操作期间始终显示立体图像，从而允许在拍摄操作期间控制图像的立体效果。

日本未审查专利公开第2004-180069号（下文中称作专利文献3）公开了一种立体图像显示装置，其中设置显示图像之间的偏移量（视差）。其图像信号包括右眼用图像和左眼用图像，以及适当的尺寸信息。所述适当的尺寸信息是适合于显示立体图像的屏幕尺寸的信息。立体图像显示装置基于图像信号中包括的适当的尺寸信息以及关于显示图像的显示单元的显示区域的信息（屏幕尺寸信息），设置右眼用图像和左眼用图像之间的偏移量。专利文献3指教了这允许提供一种具有根据所述显示单元的屏幕尺寸控制的最佳立体水平（深度级别）的立体图像。另外，在专利文献3指教了根据观看者指定的立体水平对左眼用图像和右眼用图像彼此偏移地进行显示，并且观看者可控制视差以提供最佳的立体效果。

在专利文献1和2所公开的技术中，在控制视差之后组合右眼用图像和左眼用图像，并且在被输出之前将组合图像转换成预定的格式。因此，专利文献1和2所公开的技术不允许在后来对曾经进行了控制的立体效果进行控制。与此相反，在专利文献3公开的技术中，右眼用图像和左眼用图像被分别传送。因此，利用专利文献3中公开的技术，可以任意地基于图像信号控制立体效果。但是，在专利文献3中并没有提到存储所控制的立体效果。因此，根据专利文献3中公开的技术，即使通过控制实现了优选的立体效果，在以后观看图像时也必须再次控制立体效果。

虽然不是公知的技术，日本专利申请第2009-084719号提出了一种方法，用于记录与图像相关联的视差控制值。这种技术的使用允许任意控制立体效果和使用所控制的立体效果在以后观看图像。使用在日本专利申请第2009-084719号公开的技术，通过成像装置捕获的图像的立体效果在拍摄操作期间受到控制，立体效果控制所得到的控制值与捕获到的图像相关联并被记录，于是在拍摄操作期间控制的立体效果可以用于以后在显示装置上显示该图像。

现在，对利用日本专利申请第2009-084719号公开的技术使用多个装置对特定图像的立体效果控制执行超过一次，并且记录同一图像的两个或两个以上的控制值的情况进行讨论。用于控制立体效果的装置的显示器可能具有不同的尺寸。例如，在使用三个设备执行图像的立体效果控制并且记录三个立体效果控制值的情况下，三个立体效果控制值可能已被观看具有三个不同的显示器尺寸的显示器的用户所控制。

在图像被显示在与控制立体效果所使用的监视器具有相同尺寸的监视器上的情况下，用户可以观看按照控制立体效果时已经被设置的优选的立体效果显示的图像。然而，在与控制立体效果所使用的监视器具有不同尺寸的监视器上显示图像的情况下，用户以不同于控制立体效果时所获得的立体效果的立体效果观看图像。这是因为，即使根据相同的立体效果控制值生成了立体图像，用户观看图像时所感受到的立体效果也根据显示监视器的尺寸变化。

在日本专利申请第2009-084719号中未考虑显示器大小的差异。例如，如果利用三个显示器尺寸控制的三个立体效果控制值与图像相关联并被记录，则不做特别区分地将这些立体效果控制值与所述图像相关联并记录。也就是说，是在用于设置每个立体效果控制值的监视器的尺寸不清楚的状态下将每个立体效果控制值记录在记录介质中。因此，即使利用与用于显示图像的显示监视器的尺寸相同的监视器尺寸所控制的立体效果控制值与图像相关联并被记录，也无法为了显示该图像而读出和设置该立体效果控制值。

发明内容

鉴于上述情况，本发明的目的是提供一种立体图像显示装置，立体成像装置，立体效果控制方法和立体图像显示方法，该方法允许读出和设置适合于用来显示图像的显示监视器的监视器尺寸的立体效果控制值。

为了实现上述目的，本发明提供的第一方面的立体图像显示装置包括：立体图像生成单元，用于基于包括从多个视点捕获的多个图像的多视点图像来生成用于立体显示图像的立体图像；显示处理单元，用于在能够进行立体显示的显示监视器上显示立体图像；立体效果控制单元，用于设置立体图像生成单元的立体效果控制值，以控制在显示监视器上显示的立体图像的立体效果；控制值记录单元，用于将利用多视点图像控制立体效果时所述立体效果控制单元所设置的立体效果控制值和用于显示立体图像的显示监视器的监视器尺寸与所述多视点图像相关联，并且将立体效果控制值和监视器尺寸记录在记录介质中；和监视器尺寸获取单元，用于获取显示监视器的尺寸，其中在进行图像显示时，立体效果控制单元从记录介质读出所记录的与要显示的多视点图像相关联并且与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，并且为立体图像生成单元设置所读出的立体效果控制值。

在本发明第一方面的立体图像像是装置中，如果不存在与通过监视器尺寸获取单元所获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元从记录介质中读出与最接近所获取的监视器尺寸的监视器尺寸相对应的立体效果控制值。

在本发明第一方面的立体图像显示装置中，控制值记录单元还可以将控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸相对应的一个或多个因子与多视点图像相关联并记录这些因子，并且如果不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元可以从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸相对应的立体效果控制值和因子，并将通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的因子所得到的值设置为立体效果控制值。

本发明第一方面的立体图像显示装置还可以包括参数计算单元，用于计算用于估计公式的参数，所述估计公式用于基于在控制立体效果时用于显示立体图像的显示监视器的监视器尺寸和立体效果控制值而根据监视器尺寸来估计立体效果控制值，其中控制值记录单元可以将计算的参数与多视点图像相关联，并且代替立体效果控制值来记录所述参数或者除了立体效果控制值之外还记录所述参数。

在本发明第一方面的立体图像显示装置中，立体效果控制单元可以从记录介质读出估算公式的参数，并基于所读出的参数和通过监视器尺寸获取单元获取的监视器尺寸来计算立体效果控制值。

本发明第一方面的立体图像显示装置还可以包括显示图像选择单元，用于从记录在记录介质中的各多视点图像选择要被显示的图像，其中所述立体效果控制单元可以读出与被选择作为要被显示的图像的多视点图像相关联地记录的一个或多个立体效果控制值，并为立体图像生成单元设置所读出的一个或多个立体效果控制值中的每一个，立体图像生成单元可以基于选择作为要被显示的图像的多视点图像生成具有由所设置的一个或多个立体效果控制值所表示的一个或多个立体效果的一个或多个立体图像，显示处理单元可以在显示监视器上顺序地显示通过立体图像生成单元生成的一个或多个立体图像。

在本发明第一方面的立体图像显示装置中，显示图像选择单元可以选择多个多视点图像作为要显示的图像，并且如果多个立体效果控制值与一个多视点图像相关联，则显示处理单元可以顺序显示根据与所述一个多视点图像相关联的各立体效果控制值生成的立体图像，然后显示下一个多视点图像的立体图像。作为替代，显示处理单元可以基于选择作为要被显示的图像的多视点图像，顺序显示根据多视点图像的第i个立体效果控制值生成的多个立体图像，其中i是从1到立体效果控制值的数量，然后，显示根据多视点图像的第i+1个立体效果控制值生成的立体图像。

在本发明第一方面的立体图像显示装置中，显示处理单元可以按照立体效果强度从最弱开始的顺序显示立体图像。

本发明第二方面的立体图像显示装置包括：立体图像生成单元，用于从记录介质读出要显示的多视点图像，并基于读出的多视点图像生成用于立体显示图像的立体图像，所述记录介质存储：包括从多个视点捕获的图像的多视点图像、用于在立体显示多视点图像时控制立体效果的一个或多个立体效果控制值（所述立体效果控制值与多视点图像相关联）、以及在控制立体效果控制值时使用的显示监视器的监视器尺寸（监视器尺寸与每个立体效果控制值相关联）；监视器尺寸获取单元，用于获取能够立体显示立体图像的显示监视器的监视器尺寸；立体效果控制单元，用于从与要显示的多视点图像相关联并被记录在记录介质中的一个或多个立体效果控制值中读出与通过监视器尺寸获取单元获取的监视器尺寸相关联的立体效果控制值，并且为立体图像生成单元设置所读出的立体效果控制值；和显示处理单元，用于在显示监视器上显示通过立体图像生成单元生成的立体图像。

在本发明第二方面的立体图像显示装置中，如果不存在与通过监视器尺寸获取单元所获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元可以从记录介质中读出与最接近所获取的监视器尺寸的监视器尺寸相对应的立体效果控制值。作为替代，可以将在控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸相对应的一个或多个因子与立体效果控制值相关联地记录在记录介质中，并且如果不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元可以从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸相对应的立体效果控制值和因子，并可以将通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的一个因子所得到的值设置为立体效果控制值。

在本发明第二方面的立体图像显示装置中，用于根据监视器尺寸估计立体效果控制值的估计公式的参数可以代替立体效果控制值与多视点图像相关联地记录在记录介质中，或者除了立体效果控制值之外，将用于根据监视器尺寸估计立体效果控制值的估计公式的参数与多视点图像相关联地记录在记录介质中，立体效果控制单元可以从记录介质读出估算公式的参数来代替从记录介质读出立体效果控制值，并可以基于所读出的参数和通过监视器尺寸获取单元获取的监视器尺寸来计算立体效果控制值。

本发明提供的立体成像装置包括：成像单元，用于捕获包括从多个视点捕获的多个图像的多视点图像，并将所述多视点图像记录在记录介质中；立体图像生成单元，用于基于多视点图像来生成用于立体显示图像的立体图像；显示处理单元，用于在能够进行立体显示的显示监视器上显示立体图像；立体效果控制单元，用于设置立体图像生成单元的立体效果控制值，以控制在显示监视器上显示的立体图像的立体效果；控制值记录单元，用于在利用多视点图像控制立体效果时将所述立体效果控制单元所设置的立体效果控制值与用于显示立体图像的显示监视器的监视器尺寸相关联，并且将立体效果控制值和监视器尺寸记录在记录介质中；和监视器尺寸获取单元，用于获取显示监视器的尺寸，其中在进行图像显示时，立体效果控制单元从记录介质读出所记录的与要显示的多视点图像相关联并且与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，并且为立体图像生成单元设置所读出的立体效果控制值。

本发明提供的立体效果控制方法包括如下步骤：基于包括从多个视点捕获的多个图像的多视点图像来生成用于立体显示图像的立体图像；在能够进行立体显示的显示监视器上显示立体图像；在于显示监视器上显示立体图像的状态下控制立体图像的立体效果；以及，在利用多视点图像控制立体效果时将表示所控制的立体效果的立体效果控制值以及用于显示立体图像的显示监视器的监视器尺寸与多视点图像相关联，并且将立体效果控制值和监视器尺寸记录在记录介质中。

本发明提供的立体图像显示方法包括如下步骤：从记录介质中读出要显示的多视点图像，所述记录介质存储包括从多个视点捕获的图像的多视点图像、用于在立体显示多视点图像时控制立体效果的一个或多个立体效果控制值（所述立体效果控制值与多视点图像相关联）、以及在控制立体效果控制值时使用的显示监视器的监视器尺寸（该监视器尺寸与每个立体效果控制值相关联）；获取能够显示图像以允许立体观看图像的显示监视器的监视器尺寸；从与要显示的多视点图像相关联并记录在记录介质中的一个或多个立体效果控制值中读出与所获取的监视器尺寸相关联的立体效果控制值；基于要显示的多视点图像生成用于立体显示图像的立体图像，所述立体图像具有由所读出的立体效果控制值所表示的立体效果；和在显示监视器上显示所生成的立体图像。

本发明还提供了用于使计算机分别执行上述本发明的立体效果控制方法和立体图像显示方法的程序。

在本发明第一方面的立体图像显示装置和立体效果控制方法中，设置了在控制立体效果时与显示监视器的监视器尺寸相关联地记录的控制值。这允许确定已被用来对立体效果控制值进行了控制的显示监视器的监视器尺寸。因此，可以在显示图像时读出并设置适合用于显示特定图像的显示监视器的监视器尺寸的立体效果控制值。

在本发明第二方面的立体图像显示装置和立体效果控制方法中，从记录介质中读出并设置与要显示的图像相关联地记录的立体效果控制值中与用于显示特定图像的显示监视器的监视器尺寸相关联地记录的立体效果控制值。这允许根据适合用于显示图像的显示监视器的立体效果控制值来显示图像。

附图说明

图1是示出根据本发明的第一实施例的显示装置的外观的透视图，

图2是示出显示装置的内部结构的方框图，

图3是示出视差控制的示意图，

图4是示出用于控制立体效果的处理的流程图，

图5示出图像和与图像相关联并被记录的视差控制值，

图6是示出了用于显示图像的处理的流程图，

图7A示出图像和与图像相关联并被记录的视差控制值，

图7B示出图像和与图像相关联并被记录的视差控制值，

图7C示出图像和与图像相关联并被记录的视差控制值，

图7D示出图像和与图像相关联并被记录的视差控制值，

图8是示出了根据本发明的第二实施例的用于控制立体效果的处理的流程图，

图9示出了图像、与图像相关联并被记录的视差控制值，以及对应于不同的监视器尺寸的因子，

图10是示出了根据第二实施例的用于显示图像的处理的流程图，

图11是示出根据本发明的第三实施例的立体成像装置的内部结构的框图，

图12示出估算公式的一个示例，

图13是示出了根据第三实施例的用于控制立体效果的处理的流程图，

图14示出了图像以及与图像相关联并被记录的参数，

图15是示出了根据第三实施例的用于显示图像的处理的流程图，

图16是示出根据本发明的第四实施例的立体成像装置的内部结构的方框图，

图17是示出了根据第四实施例的，用于显示立体图像的处理的流程图，

图18A是示出显示监视器上显示的立体图像的示意图，

图18B是示出显示监视器上显示的立体图像的示意图，

图18C是示出显示监视器上显示的立体图像的示意图，

图19示出视差控制值记录文件的一个具体示例，

图20是示出第四实施例中的图像显示顺序的框图，

图21是示出了根据本发明第五实施例的用于显示立体图像的处理的流程图，

图22是示出第五实施例中的图像的显示顺序的框图，

图23A是示出了一种立体成像装置的外观的透视图，

图23B是示出了立体成像装置的外观的透视图，以及

图24是示出了立体成像装置的内部功能的框图。

具体实施方式

下面将参照附图详细描述本发明的实施例。图1示出根据本发明第一实施例的立体图像显示装置的外观。显示装置50包括显示监视器51、操作按钮52和卡插槽53。卡插槽53是一个槽，用于容纳插入其中的卡型记录介质57。记录介质57上记录多视点图像。记录介质57还存储与多视点图像相关联的一个或多个立体效果控制值。立体效果控制值用于在立体显示多视点图像时控制立体效果。记录介质57中存储有用于控制每个立体效果控制值的显示监视器的监视器尺寸，并且将监视器尺寸与立体效果控制值相关联。多视点图像包括其间具有视差的第1至第n（n是2或更大的整数）个视点图像。多视点图像通常包括右眼用图像和左眼用图像。形成多视点图像的各图像可以一个文件中或者以多个单独的文件的形式进行存储。

操作按钮52用于由用户进行各种设置等。显示监视器51显示用于各种操作和设置等的菜单屏幕。显示器51能够显示基于多视点图像生成的立体图像，以允许对其进行立体观看。可以例如使用双凸透镜系统实现立体显示。双凸透镜系统允许用裸眼进行立体观看。立体显示系统并不限于双凸透镜系统，还可以是裸眼的平行观看系统、视差屏障系统、扫描背光系统等。显示监视器51可以使用任何系统实现立体显示，而不必使用允许用裸眼进行立体观看的系统。立体显示系统可以是需要图像分离眼镜的系统，如补色立体系统、偏振滤光器系统或液晶快门系统。

图2示出显示装置50的内部结构。显示装置50还包括操作输入单元54、通信接口55、记录介质记录单元56、立体效果控制单元58、立体图像生成单元59、控制值记录单元60、显示处理单元61和监视器尺寸获取单元62。形成显示装置50的组件一般被分类为用于在显示监视器51（立体显示单元）上显示立体图像的组件和用于控制立体图像的立体效果的组件（立体效果控制单元）。显示装置50的各个单元的功能可以由计算机根据预定的程序执行操作来实现。

操作输入单元54用于由用户输入各种操作。图1所示的操作按钮52包括在操作输入单元54中。用户可以显示图像，并经由操作输入单元54对显示装置50输入指令来控制所显示图像的立体效果。记录介质记录单元56在记录介质57上记录信息，并读出记录在记录介质57中的信息。记录介质57不限于卡型记录介质，而可以是任何记录介质，例如内置在显示装置50中的存储器或硬盘。

通信接口55是一个接口，用于在显示装置50和外部设备之间进行通信。显示装置50和外部设备之间的通信可以通过非接触式通信（如无线通信或红外线通信）实现。可替换地，在显示装置50和外部设备之间的通信可以通过有线连接来实现。显示装置50能够经由通信接口55将记录在记录介质57的多视点图像（包括第一至第n个视点图像）输出到外部设备。另外，显示装置50可以接收通过通信接口55输入到其中的多视点图像，并通过记录介质记录单元56将所输入的多视点图像记录在记录介质57中。

立体图像生成单元59和显示处理单元61对应于用于实现图像的立体显示的立体显示单元。立体图像生成单元59基于第1到第n个视点图像生成立体图像以对该图像进行立体显示。立体图像生成单元59经由记录介质记录单元56例如从记录介质57中读出多视点图像，并根据所读出的多视点图像生成立体图像。

立体图像生成单元59根据显示监视器51所使用的立体显示系统生成立体图像。例如，在立体显示系统为双凸透镜系统的情况下，显示监视器51的显示区域中的偶数行对应于右眼用图像并且显示区域的奇数行对应于左眼用图像，则立体图像生成部59通过将右眼用图像的行布置在显示监视器51的显示区域中的偶数行、并且将左眼用图像布置在显示区域的奇数行，来生成立体图像。显示处理单元61将立体图像输出到显示器51，以显示允许对其进行立体观看的图像。

立体效果控制单元58和控制值记录单元60对应于用于实现立体图像的立体效果控制的立体效果控制单元。立体效果控制单元58为立体图像生成单元59设置立体效果控制值，以在于显示监视器51上立体显示图像时控制立体图像的立体效果。通过控制包含在多视点图像中的各图像之间的视差来实现立体效果的控制。立体效果控制单元58基于用户的指令控制各图像之间的视差，使得所显示的图像的三维深度增加或减少。除了由用户任意控制之外，视差控制可以包括基于多视点图像进行自动控制。优选的是，立体效果控制单元58在立体图像被显示在显示监视器51上的状态下控制立体效果。

监视器尺寸获取单元62获取显示监视器51的监视器尺寸。监视器尺寸可以例如由矩形显示区域的对角线长度定义。控制值记录单元60将通过立体效果控制单元58控制的视差控制值以及通过监视器尺寸获取单元62获得的监视器尺寸同图像相关联，并将它们记录在记录介质57中。换言之，控制值记录单元60将视差控制值与多视点图像相关联地存储，并将用于控制视差控制值的显示监视器的监视器尺寸与视差控制值相关联地存储。控制值记录单元60可以针对单个图像记录多个视差控制值。如果视差控制值已经与图像相关联并被记录，则控制值记录单元60可以提示用户选择是否覆盖记录的视差控制值，或添加新的视差控制值。

记录介质57可以从一个设备移动到另一个设备。例如存在这种情况，其中使用显示装置执行立体效果控制并且将控制值记录在记录介质中之后，将所述记录介质插入另一个显示装置以在该显示装置上显示图像。如果用于控制立体效果的显示监视器和用于显示图像的显示监视器的监视器尺寸相同，则可以以与控制立体效果时实现的立体效果相同的立体效果进行显示。然而，如果用于控制立体效果的显示监视器和用于显示图像的显示监视器的监视器尺寸彼此不同，则用户观看显示图像时所感受到的立体效果与通过立体效果控制实现的立体效果不同。

在本实施例中，关于监视器尺寸的信息被添加到视差控制值中，以使用该信息显示图像。当图像被显示时，立体效果控制单元58从监视器尺寸获取单元62获得将要显示图像的显示监视器51的监视器尺寸。立体效果控制部58从与要显示的多视点图像相关联的一个或多个所记录的视差控制值中读出与从监视器尺寸获取单元62获得的监视器尺寸相对应的视差控制值。立体效果控制单元58为立体图像生成单元59设置所读出的视差控制值。

例如，假设针对特定的多视点图像记录了与监视器尺寸A对应的视差控制值A和与监视器尺寸B对应的视差控制值B。在显示图像时，如果监视器尺寸获取单元62获取的监视器尺寸为监视器尺寸A，则立体效果控制单元58从记录介质57读出视差控制值A，如果监视器尺寸为监视器尺寸B，则立体效果控制单元58从记录介质57读出视差控制值B。如果不存在与监视器尺寸获取单元62获取的监视器尺寸对应的视差控制值，则立体效果控制单元58从记录介质读出与所获得的监视器尺寸最接近的监视器尺寸对应的视差控制值之一。

图3示出了视差控制。在这个示例中，对于通过将右眼用图像的行布置在显示区域中的偶数行、并且将左眼用图像布置在显示区域的奇数行来生成立体图像的情况进行描述。图示平面的左下点被定义为原点。应该指出的是，虽然图3所示的显示区域和图像在y方向上具有不同的尺寸以便清楚地显示各图像是如何彼此重叠的，但监视器的显示区域在y方向上的像素数目（在y方向上的图像尺寸）与右眼用图像和左眼用图像在y方向上的图像尺寸实际上是相同的。对于x方向，右眼用图像和左眼用图像在x方向上具有相同的图像尺寸，立体图像在x方向上的图像尺寸是右眼用图像和左眼用图像在x方向上的图像尺寸的大约两倍。

在不进行立体效果控制的情况下，换句话说，在按照右眼用图像和左眼用图像之间的原始视差执行立体显示的情况下，立体图像生成单元59将右眼用图像的第0行、第1行、第2行等布置在显示区域的第0行、第2行、第四行等，并将左眼用图像的第0行、第1行、第2行等布置在显示区域的第1行、第3行、第5行等。当用户控制立体效果时，立体图像生成单元59以偏移各图像的相对位置的方式组合右眼用图像和左眼用图像。例如，如果用户指示强化立体效果，则立体效果控制单元58将右眼用图像相对图示表面向右平移，并将左眼用图像相对图示表面向左平移。与此相反，当用户指示减弱立体效果时，立体效果控制单元58将右眼用图像相对图示表面向左平移，并将左眼用图像相对图示表面向右平移。

在本实施例中，立体效果（视差）的控制值由立体效果控制之前和之后右眼用图像和左眼用图像在x方向上的位置之间的差别来表示。例如，在右眼用图像相对于图示平面向右平移对应于立体图像的XR个像素（XR是正偶数）的距离、并且在立体效果控制后右眼用图像的第0行布置在立体图像（显示区域）的第XR行的情况下，右眼用图像的视差控制值是“向右XR个像素”。相反，在右眼用图像相对于图示平面向左平移对应于XR个像素的距离的情况下，右眼用图像的第0行布置在立体图像的第-XR行，这实际上不存在。在这种情况下，由于每隔一行布置右眼用图像，因此右眼用图像的第（XR/2）行布置在立体图像的第0行。这种情况下的视差控制值是“向左XR个像素”。当向左平移通过负号表示时，视差控制值表达为“-XR”。

在左眼用图像相对于图示平面向左平移对应于XL个像素（XL是正偶数）的距离的情况下，将要布置在立体图像的第1行的左眼用图像的第0行布置在立体图像的第（-XL+1）行，这实际上不存在。在这种情况下，由于每隔一行布置左眼用图像，因此左眼用图像的第（XL/2）行布置在立体图像的第1行。这种情况下的视差控制值是“向左XR个像素”（-XL）。相反，在左眼用图像相对于图示平面向右平移对应于立体图像的XL个像素的距离、并且左眼用图像的第0行布置在立体图像（显示区域）的第（XL+1）行的情况下，左眼用图像的视差控制值是“向右XR个像素”（+XL）。注意，由于右眼用图像和左眼用图像交替布置，因此可以将XL/2和XR/2定义为视差控制值。

图4示出了用于控制立体效果的处理。用户选择记录在记录介质57中的图像之一（步骤S101）。可替代地，显示装置50可以选择记录在记录介质57中的任一图像。立体图像生成单元59基于选定的图像生成立体图像，显示处理单元61在显示监视器51上显示立体图像。此时，立体效果控制单元58可以检查与显示监视器的监视器尺寸对应的视差控制值是否与所选图像相关联并被记录。如果视差控制值存在，立体效果控制单元58可以根据该视差控制值为立体图像生成单元59设置视差。如果视差控制值不存在，则立体图像生成单元59可以生成零视差的立体图像。可替代地，立体效果控制单元58可以从记录介质57读出与另一图像相关联的显示监视器的监视器尺寸对应并被记录的视差控制值，并为立体图像生成单元59设置该视差控制值。

立体效果控制单元58控制在步骤S101中选择的图像的立体效果（步骤S102）。可以由立体效果控制单元58基于多视点图像自动执行立体效果控制，或者可以通过提示用户控制视差来基于用户的指令执行立体效果控制。优选地可以在用户检查显示在显示监视器51上的由立体图像生成单元59利用控制的视差生成的立体图像时执行视差控制。

例如，立体效果控制单元58在显示监视器51上显示表示立体效果的强度水平的细条以及表示立体效果的当前强度的滑块，以便从用户接收关于立体效果的强度的指令。例如，用户按压操作按钮52（图1）中包括的光标键的“右”或“左”键，以在“渐强”或“渐弱”的方向上移动滑块，从而指示立体效果的强度。立体效果控制单元58根据用户指令改变视差。例如，当用户在“渐强”的方向上移动滑块时，立体效果控制单元58将右眼用图像相对图3平面向右平移，并将左眼用图像相对图3平面向左平移。与此相反，当用户在“渐弱”的方向上移动滑块时，立体效果控制单元58将右眼用图像相对图3平面向左平移，并将左眼用图像相对图3平面向右平移。具有改变后的视差的图像被显示在显示监视器51上。然后，用户可以在观看显示监视器51的同时重复上述控制，直到获得所希望的立体效果。当视差控制值超过了可控的范围时，立体效果控制单元58可以在显示监视器51上显示该效果的指示。

立体图像生成单元59利用由立体效果控制单元58控制的视差生成立体图像。显示处理单元61在显示监视器51上显示立体图像（步骤S103）。当用户指示重做控制时，立体效果控制单元58可以取消之前做出的控制，并返回初始状态的视差控制值。

立体效果控制单元58确定是否用户已指示结束控制（步骤S104）。如果用户还没有指示结束控制，则处理返回步骤S102继续立体效果控制。如果用户已指示结束控制，则监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S105）。控制值记录单元60将受控视差控制值和在步骤S105中获得的监视器尺寸与在步骤S101中选择的图像相关联，并记录它们（步骤S106）。

图5示出图像、和与图像相关联并被记录的视差控制值。在该示例中，对使用具有不同监视器尺寸的三个装置对特定图像执行立体效果控制的情况进行说明。每个装置的立体效果控制单元将显示监视器的监视器尺寸与视差控制值记录在多视点图像的文件头中。如图5所示，在文件头中将三个记录视差控制值与监视器尺寸一起记录。

图6示出了用于显示图像的处理。用户选择记录在记录介质57中的图像之一（步骤S201）。可替代地，显示装置50可以选择记录在记录介质57中的任一图像。监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S202）。

立体效果控制单元58参考记录介质57来确定是否针对在步骤S201中选择的图像记录了与在步骤S202获得的监视器尺寸对应的视差控制值（步骤S203）。如果确定记录了视差控制值，则立体效果控制单元58从记录介质57中读出与在步骤S202中获得的监视器尺寸相对应的视差控制值（步骤S204）。与此相反，如果在步骤S203中确定没有记录视差控制值，则立体效果控制单元58从记录介质57中记录的与在步骤S201中选择的图像相关联的视差控制值中，读出与在步骤S202中获得的监视器尺寸最接近的监视器尺寸相对应的视差控制值（步骤S205）。

立体效果控制单元58为立体图像生成单元59设置在步骤S204或S205读出的视差控制值（步骤S206）。立体图像生成单元59利用所设置的视差控制值生成立体图像。显示处理单元61在显示监视器51上显示立体图像（步骤S207）。

例如，对将图5所示的图像数据和视差控制值记录在记录介质57中的情况进行描述。在使用显示装置50显示图像时，如果显示监视器51的监视器尺寸为3英寸，立体效果控制单元58在步骤S204中读出“左眼用图像-6，右眼用图像+8”的视差控制值。在这种情况下，立体图像生成单元59通过将左眼用图像的像素从原始显示位置（视差为0的显示位置）向左平移6个像素、并且将右眼用图像的像素从原始显示位置向右平移8个像素来生成立体图像。

如果显示监视器51的监视器尺寸为7英寸，在记录介质57中没有记录与7英寸显示监视器的立体效果控制对应的视差控制值，因此使用记录的三个视差控制值之一。用户感觉到的立体效果随着显示器的尺寸而变化。因此，为了以尽量靠近立体效果控制期间用户控制的立体效果的立体效果来显示图像，优选使用记录在记录介质57中的视差控制值中与最接近7英寸的监视器尺寸对应的视差控制值。在图5所示的情况下，三个监视器尺寸中最接近7英寸的监视器尺寸为5英寸。因此，立体效果控制单元58在步骤S205中读出对应于5英寸的监视器尺寸的视差控制值，即“左眼用图像-4，右眼用图像+6”。

在本实施例中，控制值记录单元60将视差控制值和监视器尺寸与图像相关联，并记录它们。通过这种方式，用于控制立体效果的监视器尺寸与每个视差控制值相关联。通过使监视器尺寸与视差控制值相关联，可以在显示图像时从记录介质读出适合于用于显示图像的显示监视器的监视器尺寸的视差控制值。

在一般情况下，在显示根据特定视差控制值产生的立体图像时，显示器尺寸越大，则用户（观看者）感觉到的立体效果越强。因此，在尺寸大于控制立体效果的监视器尺寸的显示监视器上显示图像时，如果根据在观看显示具有较小的监视器尺寸的监视器的同时控制的立体效果的控制值来显示图像，则立体效果可能过强。在本实施例中，视差控制值和监视器尺寸与图像相关联并被记录，因此允许选择适合于显示监视器尺寸的视差控制值。通过根据这样选择的视差控制值显示图像，可以按照用户喜欢的立体效果显示图像。

应该指出的是，视差控制值与图像相关联的方式并不限于图5所示，还可以以其他任何方式实现。图7A至图7D示出了图像和与图像相关联并被记录的视差控制值的其他示例。在图7A的示例中，视差控制值被记录在图像文件头中，与图5所示的示例相似。与图5示例的不同之处在于针对形成多视点图像的每个图像形成单独的文件。在这种情况下，控制值记录单元60将控制值和监视器尺寸记录在每一个图像文件的文件头中。

7B和图7C示出了根据图像数据文件分别生成记录了视差控制值的文件的示例。例如，多视点图像可被分成单独的组，并且可以为每个组生成用于记录视差控制值的文件（视差控制值记录文件）。视差控制值记录文件可以是例如文本文件。可以以任何方式进行分组。例如可以基于图像的存储位置对图像进行分组。作为替换，属性信息（如每个图像的拍摄时间和日期以及分类）可以与该图像相关联并被记录，并可以基于属性信息进行分组。在图7B和图7C的示例中，针对每个存储文件夹对图像进行分组。

图7B示出了在图像存储文件夹中生成视差控制值记录文件的情况。在这种情况下，在相同文件夹中的各图像的视差控制值被记录在相同的视差控制值记录文件（“parallax control value.txt”）中。具体地，在某个文件夹中存在多视点图像A和多视点图像B的情况下，在该文件夹中生成的视差控制值记录文件中，记录针对多视点图像A的左眼用图像和右眼用图像的视差控制值及监视器尺寸、以及针对多视点图像B的左眼用图像和右眼用图像的视差控制值及监视器尺寸。

图7C示出了在与图像文件的存储位置（文件夹）不同的位置生成视差控制值记录文件的情况。除了视差控制值记录文件的位置与图像数据文件的存储文件夹的位置不同以外，按照与图7B所示相同的方式记录视差控制值和监视器尺寸。例如，用于存储视差控制值记录文件的文件夹准备为独立于图像数据文件的存储文件夹。然后，将对应于多个图像数据存储文件夹的视差控制值记录文件存储在用于存储视差控制值记录文件的文件夹中。

图7D示出了独立于图像数据文件生成的用于记录视差控制值的文件，并且将视差控制值和监视器尺寸记录在用于记录视差控制值的文件中的另一示例。在图7D所示的示例中，在执行立体效果控制时生成对应于图像文件的文件夹，并将原始图像文件的副本和视差控制值记录文件存储在该文件夹中。例如，在对多视点图像A执行立体效果控制时，生成用于多视点图像A的文件夹，并且将多视点图像A的图像文件复制到该文件夹中。此外，在同一文件夹中生成视差控制值记录文件，并将形成多视点图像A的图像的视差控制值以及监视器尺寸记录在该文件中。在对另一多视点图像B执行立体效果控制时，生成用于多视点图像B的文件夹，并且将多视点图像B的图像文件复制到该文件夹中。此外，在该文件夹中生成视差控制值记录文件，并将形成多视点图像B的图像的视差控制值以及监视器尺寸记录在该文件中。

用户可以选择记录图像数据和视差控制值的方式。在捕获图像之前，用户可以选择将形成多视点图像的第1至第n个视点图像存储为单个文件还是n个文件。记录介质记录单元56根据用户的选择将多视点图像存储在记录介质57中。此外，在捕获图像和执行立体效果控制之前，用户可以选择将视差控制值记录在图像数据文件的文件头中还是记录在与图像数据文件分离的视差控制值记录文件中。控制值记录单元60根据用户的选择来记录与图像相关联的视差控制值。

接下来对本发明的第二实施例进行说明。该实施例的立体图像显示装置的内部构造与图2所示的第一实施例的显示装置50相同。在此实施例中，控制值记录单元60将用于在立体效果控制期间显示立体图像的显示监视器51的监视器尺寸、以及与一个或多个与用在立体效果控制期间的监视器的监视器尺寸不同的监视器尺寸对应的因子与图像相关联，并记录它们。

控制值记录单元60将视差控制值以及通过监视器尺寸获取单元62获得的监视器尺寸与图像相关联并记录它们。另外，控制值记录单元60将用于乘以对应于一个或多个与通过监视器尺寸获取单元62获得的监视器尺寸不同的监视器尺寸的视差控制值的因子与图像相关联，并记录它们。这些因子可以根据用户和显示监视器51之间的距离而改变。

在显示图像时，立体效果控制单元58从监视器尺寸获取单元62获得要用于显示图像的显示监视器51的监视器尺寸。立体效果控制单元58从记录介质57读出与要显示的多视点图像相关联地记录的并且对应于从监视器尺寸获取单元62获得的监视器尺寸的视差控制值。如果不存在对应于从监视器尺寸获取单元62获得的监视器尺寸的视差控制值，则立体效果控制单元58从记录介质57读出视差控制值和多个因子之一，并将通过将所读出的立体效果控制值乘以该因子所得的值设置为立体效果控制值。

例如，对于特定的多视点图像，假设记录了与监视器尺寸A对应的视差控制值A以及与监视器尺寸B对应的因子k_B。然后，如果监视器尺寸获取单元62在显示图像时获得的监视器尺寸为监视器尺寸A，则立体效果控制单元58从记录介质57读出视差控制值A。如果所获得的监视器尺寸为监视器尺寸B，则立体效果控制单元58从记录介质57读出视差控制值A和因子k_B，并将视差控制值A乘以因子k_B所得的值设为与监视器尺寸B对应的视差控制值。如果不存在与监视器尺寸获取单元62获得的监视器尺寸对应的因子，则立体效果控制单元58使用与最接近所获得的监视器尺寸的监视器尺寸对应的因子之一。

图8示出了用于控制立体效果的处理。用户选择记录在记录介质57中的图像之一（步骤S301）。可替代地，显示装置50可以选择记录在记录介质57中的任一图像。立体图像生成单元59基于所选择的图像生成立体图像，显示处理单元61在显示监视器51上显示立体图像。如果视差控制值已经与在步骤S301中选择的图像相关联并被记录，则立体效果控制单元58可以从记录介质57读出视差控制值，并为立体图像生成单元59设置该视差控制值。

立体效果控制单元58控制在步骤S301中选择的图像的立体效果（步骤S302）。立体图像生成单元59利用由立体效果控制单元58控制的视差生成立体图像。显示处理单元61在显示监视器51显示立体图像（步骤S303）。当用户指示重做控制时，立体效果控制单元58可以取消到目前为止做出的控制，并返回初始状态的视差控制值。

立体效果控制单元58确定是否用户已指示结束控制（步骤S304）。如果用户还没有指示结束控制，则处理返回步骤S302，并且继续立体效果控制。如果用户已指示结束控制，则监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S305）。这些步骤可以与图4所示步骤S101至S105相同。

控制值记录单元60将控制的视差控制值、在步骤S305中获得的监视器尺寸、以及与不同于在步骤S305中获得的监视器尺寸的一个或多个监视器尺寸相对应的因子与在步骤S301中选择的图像相关联并记录它们（步骤S306）。

图9示出了图像、与图像相关联并被记录的对应于其他监视器尺寸的视差控制值和因子。在此示例中假设显示监视器51的监视器尺寸是3英寸。控制值记录单元60将3英寸的监视器尺寸以及在步骤S302中控制的视差控制值“左眼用图像-6，右眼用图像+8”记录在文件头中。此外，控制值记录单元60将与不同于3英寸的监视器尺寸的监视器尺寸相对应的因子记录在文件头中。

假设预先在显示装置50中设置了与不同于显示装置50的显示监视器51的监视器尺寸的监视器尺寸相对应的因子。例如，如果显示装置50的监视器尺寸为3英寸，则预先设置对应于5英寸、10英寸和15英寸的监视器尺寸的因子。控制值记录单元60参考该设置信息来记录与各个监视器尺寸对应的因子。在图9的示例中，为5英寸的监视器尺寸设置因子0.75，为10英寸的监视器尺寸设置因子0.5，并为15英寸的监视器尺寸设置因子0.25。因此，控制值记录单元60将对应于3英寸的监视器尺寸的视差控制值以及对应于各个监视器尺寸的因子记录在文件头中。

作为替换，可以在显示装置50中设置容纳监视器尺寸的变化的因子，并使用设置信息来确定对应于每个监视器尺寸的因子。例如，可以在显示装置50中设置如下信息，包括针对2英寸的尺寸差别的因子0.75，针对7英寸的尺寸差别的因子0.5，以及针对12英寸的尺寸差别的因子0.25。在这种情况下，如果显示装置50的监视器尺寸为3英寸，则控制值记录单元60将针对5英寸监视器尺寸的因子0.75、针对10英寸监视器尺寸的因子0.5以及针对15英寸监视器尺寸的因子0.25同针对3英寸监视器尺寸的视差控制值一起记录在文件头中。

注意，图像可以通过任何方式存储。例如，可以如图7A所示将左眼用图像和右眼用图像存储在单独的文件中。图像与视差控制值之间的关联可以通过任何方式实现。如图7B至图7D所示，可以在与图像文件分离的文件中管理视差控制值。

图10示出用于显示图像的处理。用户选择记录在记录介质57中的图像之一（步骤S401）。可替代地，显示装置50可以选择记录在记录介质57中的任一图像。监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S402）。

立体效果控制单元58从记录介质57读出与在步骤S401中选择的图像相关联的所记录的视差控制值（步骤S403）。立体效果控制单元58确定所读出的视差控制值是否与步骤S402中得到监视器尺寸相对应（步骤S404）。如果确定读出的视差控制值对应于所得到的监视器尺寸，则立体效果控制单元58为立体图像生成单元59设置所读出的视差控制值（步骤S405）。立体图像生成单元59利用所设置的视差控制值生成立体图像。显示处理单元61在显示监视器51上显示立体图像（步骤S409）。

如果在步骤S404中确定所读出的视差控制值不对应于所得到的监视器尺寸，立体效果控制单元58读出与视差控制值一起记录在记录介质57中的因子之一（步骤S406）。在步骤S406，立体效果控制单元58从与视差控制值一起记录的因子中读出与在步骤S402中获得的监视器尺寸对应的因子。如果不存在与所获得的监视器尺寸对应的因子，则立体效果控制单元58读出与所获得的监视器尺寸最接近的监视器尺寸相对应的因子。

立体效果控制单元58将在步骤S403读出的视差控制值与在步骤S405读出的因子相乘（步骤S407）。如果将视差控制值与因子相乘所得的值包括小数部分，则通过适当的数学运算（如舍入，不进位舍入和进位舍入）将该值转换成整数。立体效果控制单元58为立体图像生成单元59设置乘以因子的视差控制值（步骤S408）。立体图像生成单元59根据所设置的视差控制值生成立体图像。然后处理进入步骤S409，由显示处理单元61在显示监视器51上显示立体图像。

例如，对在记录介质57中记录了图9所示的图像文件和视差控制值的情况进行说明。立体效果控制单元58在步骤S403中读出视差控制值“左眼用图像-6，右眼用图像+8”。该视差控制值对应于3英寸的监视器尺寸。如果监视器尺寸获取单元62在步骤S402获得的监视器尺寸为3英寸，则处理从步骤S404进入步骤S405，由立体效果控制单元58为立体图像生成单元59设置所读出的视差控制值。

如果监视器尺寸获取单元62在步骤S402获得的监视器尺寸为例如5英寸，则处理随后从步骤S404进入步骤S406，立体效果控制单元58读出与5英寸的监视器尺寸对应的因子0.75。立体效果控制单元58在步骤S407将该视差控制值与该因子相乘，并在步骤S408为立体图像生成单元59设置所得值作为视差控制值。在这种情况下，对应于5英寸的监视器尺寸的因子为小于1的值。因此在步骤S409，以小于根据与3英寸的监视器尺寸对应的视差控制值的视差的视差显示图像。

具体来说，立体效果控制单元58将对应于3英寸的监视器尺寸的左眼用图像的视差控制值-6与对应于5英寸的监视器尺寸的因子0.75相乘，并将通过将所得值转换成整数所获得的值（-4）设置为左眼用图像的视差控制值。此外，立体效果控制单元58将对应于3英寸的监视器尺寸的右眼用图像的视差控制值+8与对应于5英寸的监视器尺寸的因子0.75相乘，并将所获得的值（+6）设置为右眼用图像的视差控制值。

在此实施例中，当用于控制立体效果的显示监视器51的监视器尺寸与用于显示图像的显示监视器的监视器尺寸不同时，将视差控制值乘以因子所得的值用作视差控制值。例如，当用于观看图像的显示监视器的监视器尺寸大于用于控制立体效果的显示监视器的监视器尺寸时，将视差控制值乘以小于1的因子，从而以相比使用原始视差控制值的情况较弱的立体效果显示图像。与此相反，当用于观看图像的显示监视器的监视器尺寸小于用于控制立体效果的显示监视器的监视器尺寸时，将视差控制值乘以大于1的因子，从而以相比使用原始视差控制值的情况较强的立体效果显示图像。在此实施例中，即使用于控制立体效果的显示监视器的监视器尺寸与用于显示图像的显示监视器的监视器尺寸不同，也可以按照用户控制立体效果时所喜欢的立体效果显示图像。

应当注意，在此实施例中当使用两个不同的监视器尺寸执行立体效果控制时，两个视差控制值与图像相关联并被记录，并可以针对每个视差控制值记录对应于其他监视器尺寸的因子。例如，当使用监视器尺寸为3英寸的显示监视器51来控制立体效果时，表示“控制值为1（3英寸），针对5英寸的因子为0.75，针对10英寸的因子为0.5，针对15英寸的因子为0.25”的信息与图像相关联并被记录。此后，当使用监视器尺寸为10英寸的显示监视器511来控制立体效果时，除了上述与3英寸的监视器尺寸相对应的控制值和因子之外，表示“控制值为2（10英寸），针对3英寸的因子为2，针对5英寸的因子为1.5，针对15英寸的因子为0.5”的信息还可以与图像相关联并被记录。

在上述情况下，当用于显示图像的监视器尺寸为3英寸时，将控制值1设置为视差控制值，而当用于显示图像的监视器尺寸为10英寸时，将控制值2设置为视差控制值。当没有记录与用于显示图像的监视器尺寸对应的控制值时，可以任意选择使用将控制值1与控制值的对应因子相乘所得的值作为控制值还是使用将控制值2与控制值的对应因子相乘所得的值作为控制值。

例如，可以选择导致视差变化较小的控制值之一。具体来说，当显示监视器51的监视器尺寸为5英寸时，可以对控制值1与控制值1×0.75所得的值之间的差以及控制值2与控制值2×1.5所得的值之间的差进行比较，并选择导致差较小的控制值。进行这种选择是因为视差的显著变化对于观看图像的用户眼睛并不总是有利。选择变化较小的控制值能够有效降低用户眼睛的负担。

在无法执行上述选择的情况下，或者为了代替上述选择，可以选择提供较小视差值（绝对值）的控制值。具体来说，当显示监视器51的监视器尺寸为5英寸时，将控制值1×0.75所得的值与控制值2×1.5所得的值进行比较，并选择具有较小绝对值的控制值。这是因为选择提供较大视差的控制值很有可能导致过大的视差。通过选择提供较小视差值的控制值，能够避免过大的视差。

接下来对本发明的第三实施例进行说明。图11示出根据第三实施例的立体图像显示装置的内部结构。除了图2所示第一实施例的显示装置50的构造之外，本实施例的显示装置50a还包括参数计算单元6。显示装置50a与图1所示的第一实施例的显示装置50具有相同的外观。

基于用于在立体效果控制期间显示立体图像的显示监视器的监视器尺寸以及视差控制值，参数计算单元63计算用于根据监视器尺寸估计视差控制值的估计公式的参数。可以使用例如表示监视器尺寸与视差控制值之间的关系的线性表达式作为估计公式。在此实施例中，控制值记录单元60将参数计算单元63计算的参数与图像相关联并进行记录。

图12示出一个估算公式的例子。水平轴（x）表示监视器尺寸，垂直轴（y）表示视差控制值。假设监视器尺寸与视差控制值之间的关系（估算公式）由y=ax+b表示。在这种情况下，参数计算单元63所计算出的参数为斜率a和截距b。参数计算单元63基于使用两个不同的监视器尺寸控制的视差控制值来计算斜率a和截距b。估计公式不限于线性表达式，还可以使用高阶的估计公式。

在显示图像时，立体效果控制单元58从监视器尺寸获取单元62获得用于显示图像的显示监视器51的监视器尺寸。立体效果控制单元58从记录介质57读取与要显示的多视点图像相关联记录的估计公式的参数。立体效果控制单元58基于读出的估计公式的参数和监视器尺寸来确定视差控制值。

应当注意，相对控制立体效果时设置的视差控制值，通过基于估计公式的参数和监视器尺寸进行计算获得的视差控制值可能导致伪立体感。例如，即使用户在立体效果控制期间控制了视差以提供强于视差为0的立体效果，所计算的视差控制值可能提供弱于视差为0的立体效果。在此情况下，可以将0视差设置为视差控制值，以代替计算的视差控制值。

图13示出了用于控制立体效果的处理。用户选择记录在记录介质57中的图像之一（步骤S501）。可替代地，显示装置50a可以选择记录在记录介质57中的任一图像。立体图像生成单元59基于所选择的图像生成立体图像，显示处理单元61在显示监视器51上显示立体图像。如果视差控制值已经与在步骤S501中选择的图像相关联并被记录，立体效果控制单元58可以从记录介质57读出视差控制值，并为立体图像生成单元59设置该视差控制值。

立体效果控制单元58控制在步骤S501中选择的图像的立体效果（步骤S502）。立体图像生成单元59利用立体效果控制单元58控制的视差生成立体图像。显示处理单元61在显示监视器51显示立体图像（步骤S503）。当用户指示重做控制时，立体效果控制单元58可以取消到目前为止做出的控制，并返回初始状态的视差控制值。

立体效果控制单元58确定是否用户已指示结束控制（步骤S504）。如果用户还没有指示结束控制，则处理返回步骤S502，并且继续立体效果控制。如果用户已指示结束控制，则监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S505）。这些步骤可以与图4所示步骤S101至S105相同。

参数计算单元63基于受控的视差控制值和在步骤S505中获得的监视器尺寸计算估算公式的参数（步骤S506）。在步骤S506中，参数计算单元63从记录介质57读出前一次立体效果控制的视差控制值和监视器尺寸，并且使用读出的视差控制值和监视器尺寸计算估算公式的参数。例如，假定当前的立体效果控制的视差控制值是y1，当前的立体效果控制的监视器尺寸是x1，并且前一次的立体效果控制的视差控制值是y2，前一次立体效果控制的监视器尺寸是x2。在这种情况下，参数计算单元63找出连接点（x1，y1）和点（x2，y2）的直线，并使用该直线的斜率和y截距作为估算公式的参数。

控制值记录单元60将在步骤S506中计算的估计公式的参数与在步骤S501中选择的图像相关联并记录它们（步骤S507）。此时，控制值记录单元60还可以将控制的视差控制值和监视器尺寸与图像相关联并记录它们。

在将线性表达式用作估计公式的情况下，需要利用至少两个监视器尺寸控制的视差控制值来计算斜率a和截距b。在第一次立体效果控制期间，无法计算斜率a和截距b，因为不存在前一次立体效果控制的视差控制值。在第一次立体效果控制期间可以跳过步骤S506，并且视差控制值和监视器尺寸在步骤S507与图像相关联并被记录。作为替代，可以预先确定参数之一（如斜率a）的初始值，并在步骤S506基于视差控制值、监视器尺寸和斜率的初始值计算截距b。然后可以在步骤S507将斜率a（初始值）和计算的截距b与图像相关联并记录它们。

图14示出了图像以及与图像相关联地记录的参数。在此示例中，控制值记录单元60将算斜率a和截距b的值作为估计公式的参数记录在文件头中。在为估计公式的参数设置初始值的情况下，要记录的参数可以分别由同初始值之差来代表。

注意，可以通过任何方式存储图像。例如，如图7A所示将左眼用图像和右眼用图像存储在单独的文件中。图像与视差控制值之间的关联可以通过任何方式实现。例如如图7B至图7D所示，可以在与图像文件分离的文件中管理视差控制值。

图15示出用于显示图像的处理。用户选择记录在记录介质57中的图像之一（步骤S601）。可替代地，显示装置50a可以选择记录在记录介质57中的任一图像。监视器尺寸获取单元62获取显示监视器51的监视器尺寸（步骤S602）。

立体效果控制单元58从记录介质57读出与在步骤S601中选择的图像相关联地记录的估计公式的参数（步骤S603）。立体效果控制单元58根据读出的参数和在步骤S602获得的监视器尺寸计算视差控制值（步骤S604）。例如立体效果控制单元58读出斜率a和截距b作为估计公式的参数，并计算从aX+b所得的值作为视差控制值，其中X是所获得的监视器尺寸。

立体效果控制单元58为立体图像生成单元59设置在步骤S604计算的视差控制值。立体图像生成单元59根据所设置的视差控制值生成立体图像。显示处理单元61在显示监视器51上显示立体图像（步骤S605）。

在此实施例中，在控制立体效果时，用于基于监视器尺寸估计视差控制值的估计公式的参数与图像相关联并被记录。在显示图像时，读出估计公式的参数，所读出的参数和通过监视器尺寸获取单元62获取的监视器尺寸被用于估计与所得的监视器尺寸对应的视差控制值。通过这种方式，即使在尚未执行立体效果控制的尺寸的显示监视器上，也可以显示具有用户所喜欢的立体效果的图像。

接下来对本发明的第四实施例进行说明。图16示出根据第四实施例的显示装置的内部结构。显示装置50b与图1所示第一实施例的显示装置50具有相同的外观。除了图2所示第一实施例的显示装置50的构造之外，本实施例的显示装置50b还包括显示图像选择单元64。显示图像选择单元64从记录介质57中记录的多视点图像中选择要显示的多视点图像。

在此实施例中，当显示图像时，立体效果控制单元58从记录介质57中读出与选择作为要显示的图像的多视点图像相关联记录的一个或多个视差控制值，并为立体图像生成单元59设置这些视差控制值。立体图像生成单元59基于所选择的多视点图像生成一个或多个立体图像，这些立体图像分别具有由立体效果控制单元58读出的一个或多个视差控制值所代表的立体效果。

由立体效果控制单元58读出的视差控制值可以是与监视器尺寸获取单元62获得的监视器尺寸对应的视差控制值。例如，当具有与特定的图像相关联地记录的五个视差控制值，并且其中三个视差控制值对应于与显示监视器51相同的监视器尺寸，则立体效果控制单元58中读出这三个视差控制值。可替代地，立体效果控制单元58可以读出与显示监视器51的监视器尺寸相似的监视器尺寸相对应的视差控制值，例如对应于与所获得的监视器尺寸具有预定范围内的差值的监视器尺寸相对应的视差控制值。可替代地，立体效果控制单元58可以读出所有与图像相关联地记录的记录视差控制值，而不管每个视差控制值对应的监视器尺寸如何。如针对第二实施例所描述的，当视差控制值与因子一起记录时，可以为立体图像生成单元59设置将对应于显示监视器51的监视器尺寸的因子之一乘以视差控制值所得的值。

显示处理单元61在显示监视器51上顺序显示所生成的一个或多个立体图像。当选择显示两个或更多图像、并且者两个或更多图像与一个多视点图像相关联时，显示处理单元61顺序显示根据视差控制值生成的一个多视点图像的立体图像，然后显示下一个多视点图像的立体图像。

图17示出了用于显示立体图像的处理。显示图像选择单元64从记录在记录介质57的图像中选择一个或多个图像，作为要被显示的图像（步骤S701）。显示图像选择单元64可以例如将记录在记录介质57中的图像的列表经由显示处理单元61显示在显示监视器51上，从而由用户选择要显示的图像。用户可以通过操作操作按钮52（图1）等逐个选择列表中的图像。可选地，可以通过选择文件夹立即选择文件夹中的一个或多个图像。在步骤S701中，用户可以指定例如类别、拍摄时间和日期等来搜索记录介质57中的图像，并且可以选择搜索出的图像。图像的选择可以由用户执行，或者由显示图像选择单元64自动地进行。例如，显示图像选择单元64可以从记录在记录介质57的图像中自动而随机地选择一个或多个图像。

立体效果控制单元58选择在步骤S701中选择的一个或多个图像之一（步骤S702）。立体效果控制单元58读出与在步骤S702中选择的图像相关联地记录的一个或多个视差控制值（步骤S703）。在图像文件的文件头中记录了视差控制值的情况下（如图5和图7A所示），立体效果控制单元58从在步骤S702中选择的图像的图像文件头中读出视差控制值。或者，在视差控制值被记录在与图像文件分离的文件中的情况下，如图7B至7D所示，立体效果控制单元58从用于记录图像的视差控制值的视差控制值记录文件中读出与在步骤S702中选择的图像相关联的视差控制值。

立体效果控制单元58选择一个读出的视差控制值（步骤S704）。立体效果控制单元58为立体图像生成单元59设置所选择的视差控制值。立体图像生成单元59生成具有根据所选择的视差控制值的视差的立体图像（步骤S705）。显示处理单元61在显示监视器51上显示通过立体图像生成单元59生成的立体图像（步骤S706）。

立体效果控制单元58确定所读出的视差控制值中是否存在未处理的视差控制值（步骤S707）。如果确定存在未处理的视差控制值，则处理返回步骤S704，并且立体效果控制单元58选择未处理的视差控制值。然后，在步骤S705中，立体图像生成单元59生成具有根据所选的视差控制值的视差的立体图像。在步骤S706中，显示处理单元61在显示监视器51上显示立体图像。显示装置50b针对每个读出的视差控制值重复步骤S704到S706的操作，并根据读出的每个视差控制值在显示监视器51上显示图像。

如果在步骤S707中确定不存在未处理的视差控制值，则立体效果控制单元58确定在步骤S701中选择作为要显示的图像的图像中是否存在未处理的图像（步骤S708）。如果确定存在未处理的图像，则处理返回步骤S702，并且立体效果控制单元58中选择未处理的图像之一。然后对所选择的图像执行步骤S703到S706的操作，并根据与所选择的图像相关联地记录的每个视差控制值显示图像。如果在步骤S708中确定不存在未处理的图像，则处理结束。

图18A至18C示出了在显示监视器51上显示的图像。在这个例子中，对三个视差控制值与特定的图像相关联并被记录的情况进行说明。假设视差控制值中的第一个是由立体效果控制单元58视差基于右眼用图像和左眼用图像自动控制的视差控制值，其余的两个视差控制值是由用户任意控制的视差控制值。自动控制的控制值被称为“控制值1”，用户控制的控制值分别称为“控制值2”和“控制值3”。假设这些控制值已经使用显示装置50b或者与显示装置50b的显示监视器51具有相同监视器尺寸的显示监视器进行了控制。

图18A示出了根据“控制值1”显示图像的示例。假设立体效果控制单元58已经在步骤S702读出了视差控制值并且在步骤S703首先选择了“控制值1”。在步骤S704中，立体图像生成单元59通过将右眼用图像从对应于视差为0的位置相对图示平面向右平移XR1的量，并将左眼用图像从对应于视差为0的位置相对图示平面向左平移XL1的量，来生成立体图像。在步骤S705中，在显示监视器51上显示根据其控制值相对彼此偏移的右眼用图像和左眼用图像所形成的立体图像，如图18A所示。

图18B示出了根据“控制值2”显示图像的示例。在步骤S706中，确定存在未处理的控制值，并且处理返回步骤S703，其中立体效果控制单元58选择“控制值2”。在步骤S704中，立体图像生成单元59通过将右眼用图像从对应于视差为0的位置相对图示平面向右平移XR2的量，并将左眼用图像从对应于视差为0的位置相对图示平面向左平移XL2的量，来生成立体图像。在步骤S705中，在显示监视器51上显示根据其控制值相对彼此偏移的右眼用图像和左眼用图像所形成的立体图像，如图18B所示。

图18C示出了根据“控制值3”显示图像的示例。在步骤S706中，确定存在未处理的控制值，并且处理返回步骤S703，其中立体效果控制单元58选择“控制值3”。在步骤S704中，立体图像生成单元59通过将右眼用图像从对应于视差为0的位置相对图示平面向右平移XR3的量，并将左眼用图像从对应于视差为0的位置相对图示平面向左平移XL3的量，来生成立体图像。在步骤S705中，在显示监视器51上显示根据其控制值相对彼此偏移的右眼用图像和左眼用图像所形成的立体图像，如图18C所示。

假设根据“控制值2”的视差（XR2+XL2）略小于根据“控制值1”的视差（XR1+XL1）。相反，根据“控制值3”的视差（XR3+XL3）略大于根据“控制值1”的视差（XR1+XL1）。在每个视差控制值由与“控制值1”之差来代表的情况下，根据“控制值2”的右眼用图像的视差控制值是负值（ΔXR2<0），左眼用图像的视差控制值是正值（ΔXL2>0）。另一方面，根据“控制值3”的右眼用图像的视差控制值是正值（ΔXR3>0），左眼用图像的视差控制值是负值（ΔXL3<0）。“控制值3”提供最强的立体效果，“控制值1”提供次强的立体效果，“控制值2”提供最弱的立体效果。

用户可以在观看所显示的图像的同时任意选择提供最喜欢的立体效果的控制值。例如，如果用户更喜欢具有强烈的立体效果的显示，用户可以选择“控制值3”。如果用户更喜欢较弱的立体效果的显示，用户可以选择“控制值2”。如果用户更喜欢具有温和的立体效果的显示，用户可以选择“控制值1”。另外，如果用户感觉没有控制值提供适当的立体效果，则用户可以控制立体效果并记录另一个视差控制值。

图19示出视差控制值记录文件的一个具体示例。假设视差控制值记录文件（parallax control value.txt）记录了在图像存储文件夹中存储的图像相对应的视差控制值，如图7B所示。假设图像存储文件夹中存储了包括图像A、图像B和图像C三个图像，并且视差控制值记录文件记录了针对图像A的包括控制值1-1、控制值1-2和控制值1-3的三个视差控制值，作为用于图像B的视差控制值的控制值2，和用于图像C的包括控制值3-1和3-2的两个视差控制值。假设这些控制值对应于3英寸的监视器尺寸。尽管图19未示出，但视差控制值记录文件还可以记录与与3英寸的监视器尺寸以外的监视器尺寸相对应的视差控制值。

图20示出了图像的显示顺序。假设，显示监视器51的监视器尺寸是3英寸。假设显示图像选择单元64在步骤S701中已经选择了视差控制值文件所在的文件夹中的图像（即，图像A，图像B和图像C）来作为要显示的图像，如图19所示。在步骤S702中，立体效果控制单元58选择图像A。在步骤S703中，立体效果控制单元58从图19所示的视差控制值记录文件中读出针对图像A记录的并且对应于3英寸的监视器尺寸的视差控制值（控制值1-1，控制值1-2和控制值1-3）。

在步骤S704中，立体效果控制单元58从读出的视差控制值中选择控制值1-1。在步骤S705中，立体图像生成单元59生成具有根据控制值1-1的视差的图像A的立体图像。在步骤S706中，显示处理单元61在显示监视器51上根据控制值1-1显示图像A的立体图像。由于针对图像A的视差控制值中仍然存在控制值1-1以外的控制值，处理从步骤S707返回步骤S703。

在步骤S703中，立体效果控制单元58选择控制值1-2。通过步骤S705和步骤S706，在显示监视器51上显示图像A的具有根据控制值1-2的视差的立体图像。立体效果控制单元58检查针对图像A的视差控制值中是否存在未处理的的视差控制值。由于控制值1-3尚未处理，则处理从步骤S707返回步骤S703。在步骤S703，立体效果控制单元58选择控制值1-3。通过步骤S705至S706，在显示监视器51上显示图像A的具有根据控制值1-3的视差的立体图像。

在显示了根据控制值1-3的图像A的立体图像之后，立体效果控制单元58在步骤S706中确定针对图像A不存在未处理的视差控制值。在步骤S707，立体效果控制单元58确定存在未处理的图像，处理返回步骤S702以选择图像B。在步骤S703，立体效果控制单元58从图19所示的视差控制值记录文件中读出针对与3英寸的监视器尺寸对应的图像B记录的视差控制值（控制值2）。

在步骤S704中，立体效果控制单元58选择控制值2。在步骤S705中，立体图像生成单元59利用根据控制值2设置的视差来生成图像B的立体图像。在步骤S706，显示处理单元61在显示监视器51上根据控制值2显示图像B的立体图像。由于针对图像B的视差控制值仅有控制值2，因此立体效果控制单元58确定不存在未处理的视差控制值。在步骤S707，立体效果控制单元58确定存在未处理的图像，处理返回步骤S702以选择图像C。

在步骤S703，立体效果控制单元58从图19所示的视差控制值记录文件中读出针对与3英寸的监视器尺寸对应的图像C记录的视差控制值（控制值3-1和控制值3-2）。在步骤S704，立体效果控制单元58选择所读出的视差控制值之一。通过步骤S705至S706，显示图像C的具有根据控制值3-1的视差的立体图像。由于针对图像C的视差控制值除了控制值3-1还包括一个控制值，因此立体效果控制单元58从步骤S707返回步骤S703。

在步骤S703中，立体效果控制单元58选择控制值3-2。通过步骤S705至S706，在显示监视器51上显示图像C的具有根据控制值3-2的视差的立体图像。在步骤S707，立体效果控制单元58确定不存在未处理的视差控制值。在步骤S707，立体效果控制单元58检查是否存在未处理的图像。由于不存在未处理的图像，该处理结束。因此如图20所示，图像A（根据控制值1-1）、在图像A（根据控制值1-2）、在图像A（根据控制值1-3）、图像B（根据控制值2）、图像C的（根据控制值3-1）和图像C（根据控制值3-2）以该顺序显示在显示监视器51上。

在此实施例中，在针对选择为要显示的图像的图像记录了两个或更多视差控制值的情况下，立体图像生成单元59使用每个视差控制值生成立体图像，并且在显示监视器51上顺序显示所生成的立体图像。通过这种方式，用户可以从与图像相关联地记录的视差控制值中选择提供了用户喜欢的立体效果的视差控制值。

接下来对本发明的第五实施例进行说明。本实施例的立体图像显示装置的内部结构与图16所示的显示装置50b相同。与第四实施例类似，当读出两个或更多的视差控制值时，本实施例的立体图像生成单元59生成具有根据每个视差控制值的视差的立体图像。在本实施例中，利用不同视差生成的立体图像的显示顺序与第四实施例中的显示顺序不同。在本实施例中，显示处理单元61顺序显示根据多视点图像的第i个视差控制值（其中i=1至视差控制值的数量）生成的立体图像，然后显示根据多视点图像的第(i+1)个视差控制值生成的立体图像。

图21示出了用于显示立体图像的处理。显示图像选择单元64从记录在记录介质57的图像中选择一个或多个图像，作为要被显示的图像（步骤S801）。步骤S801可以与图17所示的步骤S701相同。在步骤S801中，代替由用户选择图像，显示图像选择单元64可以从记录在记录介质57中的图像中随机地选择一个或多个图像。

立体效果控制单元58读出与在步骤S801中选择的每个图像相关联地记录的一个或多个视差控制值（步骤S802）。在步骤S802中，立体效果控制单元58读出对应于显示监视器51的监视器尺寸的视差控制值。作为替换，立体效果控制单元58读出的视差控制值可以包括与不同于显示监视器51的监视器尺寸的监视器尺寸相对应的视差控制值。在除了每个视差控制值外还记录了因子的情况下，可以将通过将视差控制值乘以因子之一所得的值设为视差控制值。

立体效果控制单元58将变量i初始化为i=1（步骤S803）。立体效果控制单元58选择在步骤S801中选择的一个或多个图像之一（步骤S804）。立体效果控制单元58选择与在步骤S804中选择的图像相关联地记录的第i个视差控制值（步骤S805）。立体效果控制单元58为立体图像生成单元59设置该第i个视差控制值。立体图像生成单元59基于在步骤S804中选择的图像生成具有根据第i个视差控制值的视差的立体图像（步骤S806）。显示处理单元61在显示监视器51上显示立体图像生成单元59所生成的立体图像（步骤S807）。

立体效果控制单元58确定在步骤S801中选择作为要显示的图像的图像中是否存在未处理的图像（步骤S808）。如果在步骤S808中确定存在未处理的图像，则处理返回步骤S804，并且立体效果控制单元58选择一个未处理的图像。然后，在步骤S805中，立体效果控制单元58选择所选图像的第i个视差控制值。在步骤S806中，立体图像生成单元59生成所选图像的具有根据第i个视差控制值的视差的立体图像。在步骤S807，显示处理单元61在显示监视器51上显示该立体图像。显示装置重复步骤S804至S807的操作，直到不存在未处理的图像，并在显示监视器51上根据第i个视差控制值显示每个立体图像。

如果在步骤S808中确定不存在未处理的图像，则立体效果控制单元58确定在步骤S802中读出的视差控制值中是否存在未处理的视差控制值（步骤S809）。换言之，立体效果控制单元58确定是否存在针对至少一个多视点图像的第(i+1)个视差控制值。如果存在未处理的视差控制值，则立体效果控制单元58将变量i加一（步骤S810）。然后处理返回步骤S804，并重复步骤S804到S807的操作，直到不存在未处理的图像。然后在显示监视器51上显示根据第i个视差控制值的每个立体图像。如果在步骤S809确定不存在未处理的视差控制值，则显示装置结束处理。

图22示出了图像的显示顺序。假设，显示监视器51的监视器尺寸是3英寸。假定显示图像选择单元64在步骤S801中已经选择了存在视差控制值文件的文件夹中的图像（即图像A、图像B和图像C）作为要显示的图像，如图19所示。立体效果控制单元58从图19所示的视差控制值文件中读出针对图像A、B和C的分别对应于3英寸监视器尺寸的视差控制值，包括控制值1-1、控制值1-2、控制值1-3、控制值2、控制值3-1和控制值3-2。

立体效果控制单元58通过为每个控制值提供对应于每个图像的唯一编号，来管理所读出的控制值。例如，对于图像A，控制值1-1是第一视差控制值，控制值1-2是第二视差控制值，控制值1-3是第三视差控制值。对于图像B，控制值2是第一视差控制值。对于图像C，控制值3-1是第一视差控制值，控制值3-2是第二视差控制值。在步骤S803中，立体效果控制单元58将变量i初始化为i=1。

立体效果控制单元58在步骤S804中选择图像A，并在步骤S805中选择图像A的第一视差控制值（控制值1-1）。在步骤S806，立体图像生成单元59根据控制值1-1设置视差，以产生图像A的立体图像。在步骤S807，显示处理单元61根据控制值1-1在显示监视器51上显示图像A的立体图像。在步骤S808，立体效果控制单元58确定存在未处理的图像。然后处理返回步骤S804以选择图像B。

在步骤S805中，立体效果控制单元58选择图像B的第一视差控制值（控制值2）。通过步骤S806和S807，根据控制值2在显示监视器51上显示图像B的立体图像。在步骤S808，立体效果控制单元58检查是否存在未处理的图像。由于图像C尚未处理，处理返回步骤S804。在步骤S804，立体效果控制单元58选择图像C，并在步骤S805选择图像C的第一视差控制值（控制值3-1）。通过步骤S806和S807，在显示监视器51上显示图像C的具有根据控制值3-1的视差的立体图像。

在步骤S808中，立体效果控制单元58判断是否存在未处理的图像，并且处理前进到步骤S809。在步骤S809，立体效果控制单元58检查是否存在未处理的视差控制值。由于图像A和图像C具有未处理的视差控制值，处理从步骤S809前进到步骤S810，并且立体效果控制单元58将变量i的值递增1变成i=2。然后，处理返回步骤S804，立体效果控制单元58选择图像A。在变量i递增1后，立体效果控制单元58可以列出在步骤S801选择的图像中具有第i个视差控制值的图像，并在步骤S804选择列表中的图像之一。

在步骤S805中，立体效果控制单元58选择图像A的第二视差控制值（控制值1-2）。通过步骤S806和S807，在显示监视器51上显示图像A的具有根据控制值1-2的视差的立体图像。在步骤S808，立体效果控制单元58检查是否存在未处理的图像。由于图像C尚未处理，处理返回步骤S804。在步骤S804，立体效果控制单元58选择图像C，并在步骤S805选择图像C的第二视差控制值（控制值3-2）。由于图像B不具有第二视差控制值，因此图像B不包括在步骤S804中用于选择的列表中。通过步骤S806和S807，在显示监视器51上显示图像C的具有根据控制值3-2的视差的立体图像。在步骤S808，立体效果控制单元58检查是否存在未处理的图像。由于不存在未处理图像，处理前进到步骤S809。

在步骤S809，立体效果控制单元58检查是否存在未处理的视差控制值。由于图像A具有未处理的视差控制值，处理从步骤S809前进到步骤S810，并且立体效果控制单元58将变量i的值递增1变成i=3。然后，处理返回步骤S804，立体效果控制单元58选择图像A。在步骤S805中，立体效果控制单元58选择图像A的第三视差控制值（控制值1-3）。由于图像C不具有第三视差控制值，图像C不包含在步骤S804用于选择的列表中。通过步骤S806和步骤S807，图像A的根据控制值1-3的视差的立体图像被显示在显示监视器51上。在步骤S808中，立体效果控制单元58检查是否存在未处理的图像。由于不存在未处理的图像，则处理前进到步骤S809。

在步骤S809，立体效果控制单元58检查是否存在未处理的视差控制值。由于已经选择了在步骤S802中读出的所有的视差控制值，因此立体效果控制单元58确定不存在未处理的视差控制值，并且该处理结束。因此如图22所示，在显示监视器51上按下列顺序显示图像A（根据控制值1-1）、图像B（根据控制值2）、图像C（根据于控制值3-1）、图像A（根据该控制值1-2）、图像C（根据于控制值3-2）和图像A（根据于控制值1-3）。在本实施例中，用户可以从与图像相关联地记录的视差控制值中选择提供了用户喜欢的立体效果的视差控制值，这与第四实施例类似。

在第四和第五实施例中，可以按照立体效果强度从最弱开始的顺序显示图像。例如，在第四实施例中，如图17所示在步骤S703中读出的一个或多个视差控制值可以按照立体效果强度从最弱开始的顺序进行排序，并且可以在步骤S704中按照立体效果强度从最弱开始的顺序选择每个视差控制值，从而按照立体效果强度从最弱开始的顺序显示同一图像的各立体图像。在第五实施例中，图21所示的在步骤S802中读出的每个图像的视差控制值可以针对每个图像按照立体效果强度从最弱开始的顺序进行排序，并且可以在步骤S805中按照立体效果强度从最弱开始的顺序选择每个视差控制值。按照立体效果强度从最弱开始的顺序显示图像能够有效降低观看图像的用户眼睛的负担。

可替换地，在第四实施例中，所有要显示的图像的视差控制值可以按照立体效果强度从最弱开始的顺序进行排序，以按照该顺序进行显示各图像。例如，按照立体效果强度从最弱开始的顺序对要显示的每个图像的视差控制值进行排序，并且针对每个图像获得提供最差立体效果的视差控制值。这种视差控制值被称作“最小立体效果视差控制值”。将如此获得的图像的最小立体效果视差控制值彼此进行比较，并按照立体效果强度从最弱开始的顺序对要显示的图像进行排序。具体而言，在图19所示的示例中，假设图像A的最小立体效果视差控制值是控制值1-1，图像B的最小立体效果视差控制值是控制值2，图像C的最小立体效果视差控制值是控制值3-1。在这种情况下，如果这些最小立体效果视差控制值的立体效果的强度是：控制值3-1<控制值1-1<控制值2，则按照图像C、图像A和图像B的顺序对图像进行排序。通过在图17所示的步骤S702中以该顺序选择图像，可以按照立体效果强度从最弱开始的顺序显示图像。

在图17所示的流程图中，虽然首先显示特定图像的根据各个视差控制值的立体图像，然后显示下一个图像的立体图像，但本发明不限于此。例如，可以按照立体效果强度从最弱开始的顺序对要显示的全部图像的视差控制值进行排序，并且按照视差控制值提供的立体效果从最弱开始的顺序显示图像。具体而言，在图19所示的示例中，如果视差控制值提供的立体效果的强度为：控制值3-1<控制值1-2<控制值1-1<控制值3-2<控制值2<控制值1-3，则要显示的立体图像的顺序为：图像C（根据控制值3-1），图像A（根据控制值1-2），图像A（根据控制值1-1），图像C（根据控制值3-2），图像B（根据控制值2）和图像A（根据控制值1-2），而不是按照图20的顺序显示每个图像的立体图像。

虽然在上述实施例中说明的示例中显示装置50包括显示监视器51，但显示装置50不一定包括显示监视器。例如，外部显示器可以通过连接电缆等连接到显示装置50，并可以在外部监视器上执行图像的立体显示和立体效果控制。另外，即使在显示装置50包括显示监视器51的配置中，也可以将外部显示器通过连接电缆等连接到显示装置50，并可以在外部监视器上而不是在显示装置50中包括的显示监视器51执行图像的立体显示和立体效果控制。

虽然在上述实施例中立体效果控制单元58具有控制图像的立体效果的功能，但一些设备中的立体效果控制单元58可以不必提供控制立体效果的功能。换言之，一些立体图像显示设备可以不具有控制立体效果并且将立体效果控制值与图像相关联地记录在记录介质中的功能。在使用这种立体图像显示装置显示图像时，立体图像显示装置可以读出已经由具有控制立体效果的功能的装置进行控制并且记录在记录介质中的视差控制值，并利用读出的视差控制值显示多视点图像以允许图像的立体观看。

虽然在上述实施例中通过立体图像显示装置来执行立体效果控制和图像显示，但也可以通过捕获多视点图像的立体成像设备（立体相机）来执行立体效果控制和图像显示。图23A是包括立体相机10的正面的透视图，图23B是包括立体相机10的背面的透视图。立体相机10在其正面包括多个镜头11（11A，11B）、闪光灯12和释放按钮13。立体相机10还在其背面包括显示监视器14和操作按钮15。

显示监视器14对应于图1所示的显示装置50的显示监视器51，而操作按钮15对应于显示装置50的操作按钮52。虽然在图23A和23B中未示出，但立体相机10可以包括用于与外部设备进行通信的通信接口，以及用于容纳记录介质的记录介质插槽。

立体相机10包括：n个镜头11（其中n是2或更大的整数），用于捕获第1到第n个视点图像。在图23A的示例中，提供了两个镜头（n=2时）。镜头11A和11B分别用来捕获右眼用图像和左眼用图像。透镜11A和透镜11B之间的距离被设定为约等于例如人类的右眼和左眼之间的距离。

闪光灯12用于捕获黑暗处的图像。释放按钮13被用户（操作者）用来输入指令来捕获图像。当用户按压释放按钮13时，立体相机10在相机的记录介质中或在插入记录介质插槽的记录介质中存储右眼用图像和左眼用图像。右眼用图像和左眼用图像可被存储为单个文件或者存储为独立的多个文件。

图24示出立体相机10的内部功能。立体相机10还包括传感器16、A/D转换器17、图像处理单元18、操作输入单元19、相机控制单元20、通信接口21、记录介质记录单元22、立体效果控制单元24、立体图像生成单元25、控制值记录单元26、显示处理单元27和监视器尺寸获取单元28。操作输入单元19对应于图2所示的显示装置50的操作输入单元54，通信接口21对应于通信接口55。记录介质记录单元22、立体效果控制部24、立体图像生成单元25、控制值记录单元26和显示处理单元27分别对应于记录介质记录单元56、立体效果控制单元58、立体图像生成单元59、控制值记录单元60和显示处理单元61。立体相机10的结构除了显示装置50的结构还包括用于捕获多视点图像的单元（成像单元）。

镜头11、传感器16、A/D转换器17、图像处理单元18和相机控制单元20对应于捕获多视点图像并将捕获的图像记录在记录介质23中的成像单元。传感器16对镜头11聚焦的图像应用光电转换。A/D转换器17将从传感器16输出的模拟信号转换成数字信号。图像处理单元18对转换后的数字图像信号应用预定的图像处理。所述图像处理可以包括例如白平衡控制、色调校正、锐度校正、颜色校正等。传感器16、A/D转换器17和图像处理单元18对应于每个镜头11来提供。立体相机10针对第1至第n个镜头11中的每一个生成图像。即生成第1至第n个视点图像。

相机控制单元20控制捕获图像的捕获操作。例如，相机控制单元20确定捕获定时、捕获期间的控制参数等。当用户指令提供例如变焦放大时，相机控制单元20驱动镜头11实现用户指令的变焦放大。变焦不仅包括光学变焦，还可以包括通过图像处理实现的数字变焦。在数字变焦的情况下，相机控制单元20指令图像处理单元18提供变焦放大，图像处理单元18放大图像的一部分。

在拍摄操作期间，包括从图像处理单元18输出的第1到第n个图像的多视点图像（实时取景图像）可以被输入到立体图像生成单元25，并且立体图像生成单元25可根据所输入的多视点图像生成实时取景立体图像。立体效果控制单元24可以控制实时取景图像的立体效果。在这种情况下，当用户捕获多视点图像并记录在记录介质中时，控制值记录单元26可以将立体效果控制单元24控制的视差控制值以及显示监视器14的监视器尺寸一起记录在记录介质23中。在立体效果控制和图像显示期间，通过执行与上述每个实施例所述的显示装置50相同的操作，可以在立体相机10的情况下提供与显示装置50情况下相同的效果。

基于优选实施例对本发明进行了描述。本发明的立体图像显示装置、立体成像装置、立体效果控制方法和立体图像显示方法不限于上述实施例，上述实施例的各种修改和变型也落入本发明的范围内。

Claims (8)

1.一种立体图像显示装置，包括：

立体图像生成单元，用于基于包括从多个视点捕获的多个图像的多视点图像来生成用于立体显示图像的立体图像；

显示处理单元，用于在能够进行立体显示的显示监视器上显示立体图像；

立体效果控制单元，用于设置立体图像生成单元的立体效果控制值，以控制在显示监视器上显示的立体图像的立体效果；

控制值记录单元，用于将控制立体效果时所述立体效果控制单元所设置的立体效果控制值和用于显示立体图像的显示监视器的监视器尺寸与所述多视点图像相关联，并且将立体效果控制值和监视器尺寸记录在记录介质中；和

监视器尺寸获取单元，用于获取显示监视器的尺寸，

其中控制值记录单元还将控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸所对应的一个或多个因子与多视点图像相关联并记录这些因子，并且

在显示图像时，如果在记录介质上存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元从所述记录介质读出所记录的与要显示的多视点图像相关联的并且与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，并且将所读出的立体效果控制值设置用于所述立体图像生成单元，并且如果在记录介质上不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸所对应的立体效果控制值和所述因子，并将通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的一个因子所得到的值设置为所述立体图像生成单元的立体效果控制值。

2.如权利要求1所述的立体图像显示装置，还包括显示图像选择单元，用于从记录在记录介质中的各多视点图像中选择要被显示的图像，

其中所述立体效果控制单元读出与被选择作为要被显示的图像的多视点图像相关联地所记录的一个或多个立体效果控制值，并为立体图像生成单元设置所读出的一个或多个立体效果控制值中的每一个，

立体图像生成单元基于选择作为要被显示的图像的多视点图像生成具有由所设置的一个或多个立体效果控制值所表示的一个或多个立体效果的一个或多个立体图像，以及

显示处理单元在显示监视器上顺序地显示通过立体图像生成单元生成的一个或多个立体图像。

3.如权利要求2所述的立体图像显示装置，其中显示图像选择单元选择多个多视点图像作为要显示的图像，并且

如果多个立体效果控制值与一个多视点图像相关联，则显示处理单元顺序显示根据与所述一个多视点图像相关联的各立体效果控制值生成的立体图像，然后显示下一个多视点图像的立体图像。

4.如权利要求2所述的立体图像显示装置，其中显示图像选择单元选择多个多视点图像作为要显示的图像，并且

所述显示处理单元基于被选择作为要被显示的图像的多视点图像，顺序显示根据多视点图像的第i个立体效果控制值生成的多个立体图像，其中i是从1到立体效果控制值的数量，然后，显示根据多视点图像的第i+1个立体效果控制值生成的立体图像。

5.如权利要求2至4中任一项所述的立体图像显示装置，其中显示处理单元按照立体效果强度从最弱开始的顺序显示立体图像。

6.一种立体图像显示装置，包括：

立体图像生成单元，用于从记录介质读出要显示的多视点图像，并基于读出的多视点图像生成用于立体显示图像的立体图像，所述记录介质存储：包括从多个视点捕获的多个图像的多视点图像；用于在立体显示多视点图像时控制立体效果的一个或多个立体效果控制值，所述立体效果控制值与多视点图像相关联；以及在控制立体效果控制值时使用的显示监视器的监视器尺寸，所述监视器尺寸与每个立体效果控制值相关联；

监视器尺寸获取单元，用于获取能够立体显示立体图像的显示监视器的监视器尺寸；

立体效果控制单元，用于从与要显示的多视点图像相关联并被记录在记录介质中的一个或多个立体效果控制值中读出与通过监视器尺寸获取单元获取的监视器尺寸相关联的立体效果控制值，并且将所读出的立体效果控制值设置用于立体图像生成单元；和

显示处理单元，用于在显示监视器上显示通过立体图像生成单元生成的立体图像，

其中将在控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸所对应的一个或多个因子与立体效果控制值相关联地记录在记录介质中，并且

如果不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸所对应的立体效果控制值和因子，并将通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的一个因子所得到的值设置为立体效果控制值。

7.一种立体成像装置，包括：

成像单元，用于捕获包括从多个视点捕获的多个图像的多视点图像，并将所述多视点图像记录在记录介质中；

立体图像生成单元，用于基于多视点图像来生成用于立体显示图像的立体图像；

显示处理单元，用于在能够进行立体显示的显示监视器上显示立体图像；

立体效果控制单元，用于设置立体图像生成单元的立体效果控制值，以控制在显示监视器上显示的立体图像的立体效果；

控制值记录单元，用于在利用多视点图像控制立体效果时将所述立体效果控制单元所控制的立体效果控制值与用于显示立体图像的显示监视器的监视器尺寸相关联，并且将立体效果控制值和监视器尺寸记录在记录介质中；和

监视器尺寸获取单元，用于获取显示监视器的尺寸，

其中所述控制值记录单元还将在控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸所对应的一个或多个因子与多视点图像相关联并记录这些因子，并且

在显示图像时，如果在记录介质上存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，立体效果控制单元从记录介质读出所记录的与要显示的多视点图像相关联并且与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，并且将所读出的立体效果控制值设置用于立体图像生成单元，并且如果在记录介质上不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则立体效果控制单元从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸所对应的立体效果控制值和所述因子，并将通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的一个因子所得到的值设置为所述立体图像生成单元的立体效果控制值。

8.一种立体图像显示方法，包括如下步骤：

从记录介质中读出要显示的多视点图像，所述记录介质存储：包括从多个视点捕获的多个图像的多视点图像；用于在立体显示多视点图像时控制立体效果的一个或多个立体效果控制值，所述立体效果控制值与多视点图像相关联；以及在控制立体效果控制值时使用的显示监视器的监视器尺寸，该监视器尺寸与每个立体效果控制值相关联；

获取显示图像以允许立体观看图像的显示监视器的监视器尺寸；

从与要显示的多视点图像相关联且记录在记录介质中的一个或多个立体效果控制值中读出与所获取的监视器尺寸相关联的立体效果控制值；

基于要显示的多视点图像生成用于立体显示图像的立体图像，所述立体图像具有由所读出的立体效果控制值所表示的立体效果；和

在显示监视器上显示所生成的立体图像，

其中还将在控制立体效果时与用于显示立体图像的显示监视器的监视器尺寸不同的一个或多个监视器尺寸所对应的一个或多个因子与立体效果控制值相关联地记录在记录介质中，并且

如果在记录介质上不存在与通过监视器尺寸获取单元获取的监视器尺寸相对应的立体效果控制值，则在读出立体效果控制值的步骤中从所述记录介质读出与通过监视器尺寸获取单元获取的监视器尺寸不同的监视器尺寸所对应的立体效果控制值和因子，并在生成立体图像的步骤中利用通过将所读出的立体效果控制值乘以所述因子中与所获取的监视器尺寸相对应的一个因子所得到的值所表示的立体效果来生成立体图像。