CN102164235A - 图像处理装置、图像处理方法和程序 - Google Patents

Abstract

本发明涉及图像处理装置、图像处理方法和程序。该图像处理装置包括：显示部分，该显示部分显示在记录介质中存储的图像；信息输出部分，该信息输出部分与显示平面图像或立体图像的显示装置连接，以输出用于在显示装置上显示存储于记录介质中的图像的图像信息；以及控制部分，该控制部分执行在显示部分和显示装置上显示存储于记录介质中的图像和用于支持该图像的显示操作的操作支持信息的控制，并且执行控制，使得当作为显示对象的图像是立体图像时，在显示部分上显示操作支持信息，而在显示部分上不显示作为显示对象的图像。

Description

图像处理装置、图像处理方法和程序

技术领域

本发明涉及图像处理装置。具体地说，本发明涉及显示立体图像的图像处理装置和图像处理方法、以及在计算机中执行该方法的程序。

背景技术

近来，诸如数字静止照相机或数字摄像机(例如，装备有照相机的录像机)的成像装置的使用日益增多，该成像装置对诸如人或动物的被摄体进行成像以产生图像数据，从而将该图像数据记录为图像内容。而且，提出了一种再现方法，该再现方法将这样记录的各个图像内容顺序地输出到诸如电视机的显示装置，并且针对该显示装置显示各个图像内容。结果，例如，由于可以在大的显示装置上显示和观看由成像装置记录的图像内容，所以用户可以进一步观看图像内容。

以这样的方式，在图像内容从成像装置顺序地输出到显示装置并被显示的情况下，例如，可以考虑到，与操作有关的操作支持信息与图像(图像内容)重叠并在成像装置和显示装置的显示部分上显示。以这样的方式，操作支持信息与图像重叠并在成像装置和显示装置的显示部分上显示，从而用户在观看图像内容的同时可以容易地执行操作。

这里，作为显示对象的图像内容，假设这样的图像：所述图像根据作为成像对象的被摄体、成像条件、成像环境等而在颜色或亮度方面大大地不同。由于此原因，为了用户容易地观看图像内容，可以考虑对图像内容进行调节和观看。然而，虽然可以通过调节来容易地观看图像自身，但是，还可以假设，难以看见以重叠的方式显示在图像上的操作支持信息。

因此，例如，提出了一种同屏显示电平校正装置(on-screendisplay level correction device)，其中，在视频的亮度被控制为较低的情况下，大大地校正RGB输出电平(例如，日本未审专利申请公开No.10-290407(图1))。

发明内容

根据上述的现有技术，由于在将视频信号与RGB信号混合时可以放大RGB信号相对于视频信号的电平比，所以，即使在将视频的亮度调节为较低时，也可以防止同屏显示难以被看见。

因此，近来，已经提出了多种立体图像显示方法，所述立体图像显示方法使用左眼和右眼的视差来显示可以获得三维视觉的立体图像。此外，提出了诸如数字静止照相机或数字摄像机(装备有照相机的录像机)的成像装置，该成像装置记录用于显示作为图像内容(立体图像内容)的立体图像的图像数据。

由于此原因，例如，还假设由成像装置记录的立体图像内容顺序地输出到诸如电视机的显示装置并在显示装置上显示立体图像。在这种情况下，考虑以重叠的方式在立体图像上显示操作支持信息(平面图像)。

然而，由于立体图像是以三维的方式观看的图像，所以，以与显示普通的平面图像的情况相似的方式，当以重叠的方式在立体图像上显示操作支持信息(平面图像)时，还假设操作支持信息被立体图像覆盖，从而难以看见操作支持信息。此外，考虑以重叠的方式在立体图像上显示操作支持信息，使得通过考虑作为显示对象的立体图像的深度感，操作支持信息的深度感变成合适的位置。在这种情况下，由于与应该布置操作支持信息的位置有关的计算量增加并且施加到显示处理的负荷增加，所以存在如下问题：操作支持信息的显示被延迟并难以被看见。

希望在显示立体图像的情况下较容易地看见操作支持信息。

根据本发明的第一实施例，提供一种图像处理装置、图像处理方法和在计算机中执行该方法的程序，该图像处理装置在其第一侧面上包含：显示部分，该显示部分显示在记录介质中存储的图像；信息输出部分，该信息输出部分与显示平面图像或立体图像的显示装置连接，以输出用于在显示装置上显示存储于记录介质中的图像的图像信息；以及控制部分，该控制部分执行在显示部分和显示装置上显示存储于记录介质中的图像和用于支持该图像的显示操作的操作支持信息的控制，并且执行控制，使得当作为显示对象的图像是立体图像时，在显示部分上显示操作支持信息，而在显示部分上不显示作为显示对象的图像。结果，提供了这样一种作用(action)，其中，执行控制，使得存储于记录介质中的图像和操作支持信息显示在显示部分和显示装置上，从而，当作为显示对象的图像是立体图像时，操作支持信息显示在显示部分上，作为显示对象的图像没有显示在显示部分上。

而且，在第一实施例中，还包含显示模式设置部分，该显示模式设置部分设置用于在显示装置上显示立体图像的立体图像显示模式或者用于在显示装置上显示平面图像的平面图像显示模式。在作为显示对象的图像是立体图像的情况下，当设置立体图像显示模式时，控制部分执行在显示装置上仅仅显示立体图像并在显示部分上仅仅显示操作支持信息的控制，并且，当设置平面图像显示模式时，控制部分可以使立体图像成为平面图像并在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。结果，提供了这样一种作用，其中，在作为显示对象的图像是立体图像的情况下，当设置立体图像显示模式时，执行在显示装置上仅仅显示立体图像并在显示部分上仅仅显示操作支持信息的控制，并且，当设置平面图像显示模式时，使立体图像成为平面图像，并且在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。

此外，在第一实施例中，根据作为显示对象的图像是平面图像还是立体图像，控制部分可以改变操作支持信息的显示部分中的布置、颜色、亮度和字符的尺寸中的至少一种。结果，提供了这样一种作用，其中，根据作为显示对象的图像是平面图像还是立体图像，改变操作支持信息的显示部分中的布置、颜色、亮度和字符的尺寸中的至少一种。

此外，在第一实施例中，当作为显示对象的图像是立体图像时，控制部分可以在显示装置上仅仅显示立体图像并在显示部分上仅仅显示操作支持信息。结果，提供了这样一种作用，其中，当作为显示对象的图像是立体图像时，在显示装置上仅仅显示立体图像，并且，在显示部分上仅仅显示操作支持信息。

此外，在第一实施例中，当作为显示对象的图像是立体图像时，控制部分可以将显示部分上的操作支持信息的至少一部分显示为立体图像。结果，还提供了这样一种作用，其中，当作为显示对象的图像是立体图像时，将显示部分上的操作支持信息的至少一部分显示为立体图像。

此外，在第一实施例中，当作为显示对象的图像是平面图像时，控制部分可以在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。结果，提供了这样一种作用，其中，当作为显示对象的图像是平面图像时，在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。

根据本发明的实施例，可以获得这样的优异的效果：在显示立体图像的情况下，容易地观看到操作支持信息。

附图说明

图1是示出本发明第一实施例中的内容再现系统的系统配置例子的示图；

图2是示出本发明第一实施例中的成像装置的功能配置例子的框图；

图3是示出本发明第一实施例中的显示部分(成像装置)和显示部分(显示装置)的显示例子的示图；

图4是示出本发明第一实施例中的显示部分(成像装置)和显示部分(显示装置)的显示例子的示图；

图5是示出由本发明第一实施例中的成像装置执行的图像内容再现处理的处理序列的例子的流程图；

图6是示出本发明第一实施例中的成像装置的图像内容再现处理的处理序列的例子的流程图；

图7是示出本发明第一实施例中的显示装置的图像内容再现处理的处理序列的例子的流程图；

图8A和8B是示出本发明第一实施例中要显示在显示部分上的显示屏幕的转变例子的示图；

图9A至9C是示出本发明第二实施例中要显示在显示部分上的显示屏幕的转变例子的示图；以及

图10A至10C是示出本发明第二实施例中要显示在显示部分上的显示屏幕的转变例子的示图。

具体实施方式

在下文中将描述实施本发明的实施例(在下文中称为实施例)。将按照下面的顺序进行描述。

1.第一实施例(显示控制：根据作为显示对象的图像内容是否为立体图像来改变成像装置和显示装置的显示状态的例子)

2.第二实施例(显示控制：当作为显示对象的图像内容是立体图像时在成像装置上显示操作支持信息(立体图像)的例子)

1.第一实施例

内容再现系统的配置例子

图1是示出本发明第一实施例的内容再现系统10的系统配置例子的示图。内容再现系统10包含成像装置100和显示装置200。此外，成像装置100和显示装置200通过装置内接口20相互连接。例如，装置内接口20可以使用HDMI(高分辨率多媒体接口)线缆。另外，作为装置内接口20，另一个装置内接口20可以在成像装置100和显示装置200通过有线或无线地相互连接的情况中使用，从而可以执行成像装置100和显示装置200之间的通信。

成像装置100可以这样的成像装置，该成像装置对被摄体进行成像以产生捕获的图像(图像数据)，并且能够将由此产生的捕获的图像作为图像内容(静止画面内容或运动画面内容)记录在记录介质上。此外，成像装置100是可以产生用于显示立体图像(三维图像)的图像内容的成像装置。例如，成像装置100对被摄体进行成像以产生两个捕获的图像(用于显示立体图像的左眼图像和右眼图像)，并且基于由此产生的两个捕获的图像产生用于显示立体图像的图像内容。

此外，成像装置100经由装置内接口20将存储于记录介质中的图像内容输出到显示装置200，并且在显示装置200上显示输出的图像内容。在这种情况下，可以在显示部分180上显示与在显示装置200上显示的图像相同的图像。此外，例如，成像装置100具有将存储于记录介质中的图像内容(立体图像)输出到显示装置200并在显示装置200中执行三维观看再现(例如，幻灯片放映)的功能。在再现等期间，使用各个操作构件(131至135)。另外，通过数字静止照相机或数字摄像机(例如，装备有照相机的录像机)来实现成像装置100。此外，将参照图2具体地描述成像装置100的功能配置。

显示装置200是能够在显示部分220上显示经由装置内接口20和连接端子(未示出)从成像装置100输入的图像内容的显示装置。此外，用户佩戴用于观看立体图像的专用眼镜(例如，主动快门式眼镜或偏振片式眼镜)，从而显示装置200可以向用户提供立体图像。

例如，假设这样的情况：其中，用户佩戴主动快门式眼镜(附着有快门机构的眼镜)作为专用眼镜，并且显示立体图像。在这种情况下，显示装置200按照帧序列显示方法(交替地显示右眼图像和左眼图像的方法)在显示部分220上显示从成像装置100输入的图像内容(立体图像内容)。此外，专用眼镜(主动快门式眼镜)与在显示部分220上交替地显示的左眼图像和右眼图像同步地、交替地打开和关闭相当于专用眼镜的透镜部分的液晶快门(电子快门)。也就是说，当在显示部分220上显示右眼图像时，关闭专用眼镜的左眼，当在显示部分220上显示左眼图像时，关闭专用眼镜的右眼。以这样的方式，用户使用该专用眼镜来观看在显示部分220(一个显示器)上显示的图像，从而能够观看到立体图像。例如，通过能够显示立体图像的诸如电视机的视频监视装置(video watching device)来实现显示装置200。

成像装置的配置例子

图2是示出本发明第一实施例中的成像装置100的功能配置例子的框图。成像装置100包括成像控制部分110、记录控制部分120、操作接收部分130、UI控制部分140、再现控制部分150、图像存储器160、显示控制部分170、显示部分180、以及信息输入和输出部分190。此外，成像装置100包括图像内容存储器部分300和图像管理信息存储器部分310。

图像内容存储器部分300基于记录控制部分120的记录控制来存储图像内容(图像文件)。作为图像内容，例如，存储平面图像(二维图像)内容、立体图像(三维图像)内容和运动图像内容。另外，例如，基于DCF(用于照相机文件系统的设计规则)标准，存储各个图像内容。此外，在各个图像内容中记录属性信息(诸如图像内容的种类、图像更新日期和时间、图像尺寸、色空间信息和制造商名称的属性信息)。结果，可以区分各个图像内容的种类。

图像管理信息存储器部分310基于记录控制部分120的记录控制来存储与存储于图像内容存储器部分300中的图像内容有关的管理信息(图像管理信息)。可以使用图像管理信息来区分各个图像内容的种类。另外，图像内容存储器部分300和图像管理信息存储器部分310可以置于成像装置100中，可以附着到成像装置100上，并且可以从成像装置100拆卸下来。

成像控制部分110包括与立体成像相对应的成像部分，基于由操作接收部分130接收的用户操作来对被摄体进行捕获以产生捕获的图像(图像数据)，并且将产生的捕获的图像输出至记录控制部分120。例如，当接收到记录二维图像内容的记录指示操作(例如，图1中所示的快门按钮131的按压操作)时，成像控制部分110产生一个捕获的图像。此外，例如，当接收到记录运动画面内容的记录指示操作时，成像控制部分110产生运动画面。此外，例如，当接收到记录三维图像内容的记录指示操作时，成像控制部分110对被摄体进行捕获以产生两个捕获的图像(用于显示立体图像的左眼图像和右眼图像)。

记录控制部分120将从成像控制部分110供应的捕获的图像作为图像内容(图像文件)记录在图像内容存储器部分300中。在记录期间，在图像内容中记录与成像控制部分110的成像时间有关的各种信息(成像日期和时间、图像尺寸和内容的种类)。此外，记录控制部分120将与记录的图像内容有关的图像管理信息记录在图像管理信息存储器部分310中。

操作接收部分130是这样的操作接收部分：该操作接收部分接收来自用户的操作输入，并且根据输入至成像控制部分110、记录控制部分120和UI控制部分140的接收操作来输出操作内容。例如，在成像装置100中包含诸如图1中所示的快门按钮131、十字按钮(crossbutton)132、决定按钮133和操作按钮134，135的操作构件，并且，由这些构件接收操作输入。例如，当接收设置二维观看模式或三维观看模式作为显示装置200的观看模式的设置操作时，操作接收部分130将此输出到UI控制部分140。此外，当在显示装置200上显示改变图像的显示状态的改变操作(例如，图像传送(image forwarding)操作和图像返回操作)时，操作接收部分130将此输出至UI控制部分140。

UI控制部分140执行基于由操作接收部分130接收的操作输入在显示部分180和显示装置200上显示存储于图像内容存储器部分300中的图像内容的控制。例如，当作为显示对象的图像是平面图像时，UI控制部分140执行在显示部分180和显示装置200上显示操作支持信息(例如，图3中所示的操作支持信息401至406)与平面图像重叠的图像的控制。此外，例如，当作为显示对象的图像是立体图像时，UI控制部分140执行控制，使得在显示部分180上不显示作为显示对象的图像，而在显示部分180上显示操作支持信息(例如，图4中所示的操作支持信息411至416)。在这种情况下，UI控制部分140在显示装置200上仅仅显示立体图像。此外，例如，UI控制部分140设置用于在显示装置200上显示立体图像的立体图像显示模式或者用于在显示装置200上显示平面图像的平面图像显示模式。另外，UI控制部分140是控制部分和显示模式设置部分的例子。

再现控制部分150执行用于基于UI控制部分140的控制在显示部分180和显示装置200上显示存储于图像内容存储器部分300中的图像内容的再现控制。例如，当执行图像内容的再现指示操作时，再现控制部分150从图像内容存储器部分300获取用户指定的图像内容，对该图像内容进行解码，并且，将解码的图像数据展开到图像存储器160中的预定区域。此外，再现控制部分150区分从图像内容存储器部分300获取的图像内容的种类(二维图像内容、三维图像内容和运动图像内容)，并且向UI控制部分140通知其区分结果。另外，关于图像内容的种类的区分，可以使用记录在图像内容中的属性信息，并且，可以使用在图像管理信息存储器部分310中存储的图像管理信息。

图像存储器160保持从再现控制部分150解码的图像数据，并且将保持的图像数据供应给显示控制部分170。

显示控制部分170基于UI控制部分140的控制来控制显示部分180和显示装置200中的显示状态。例如，在设置二维观看模式的情况中，当作为显示对象的图像是二维图像时，显示控制部分170产生操作支持信息与图像存储器160中保持的图像数据重叠的图像(二维图像)。操作支持信息是OSD(同屏显示)图像，并且，例如，是图3中所示的操作支持信息401至406。另外，将参照图3、4等具体地描述操作支持信息。此外，显示控制部分170在显示部分180和显示装置200上显示产生的二维图像。也就是说，显示控制部分170在显示部分180上显示产生的二维图像，并且，经由信息输入和输出部分190将用于在显示装置200上显示产生的二维图像的图像信息(例如，数据流)发送到显示装置200。

此外，例如，在设置二维观看模式的情况下，当作为显示对象的图像是三维图像时，显示控制部分170将在图像存储器160中保持的图像数据作为二维图像显示在显示部分180和显示装置200上。也就是说，显示控制部分170使用构成三维图像的右眼图像或左眼图像来产生二维图像，将操作支持信息和二维图像重叠，并且将其显示在显示部分180和显示装置200上。

此外，例如，在设置三维观看模式的情况下，当作为显示对象的图像是三维图像时，显示控制部分170将在图像存储器160中保持的图像数据作为三维图像显示在显示装置200上。在这种情况下，显示控制部分170在显示装置200上显示三维图像，在显示部分180上不显示三维图像，但是在显示部分180上显示操作支持信息(例如，图4中所示的操作支持信息411至416)。也就是说，显示控制部分170在显示部分180上显示操作支持信息，并且，经由信息输入和输出部分190将用于在显示装置200上显示三维图像的图像信息(例如，数据流)发送到显示装置200。

此外，例如，在设置三维观看模式的情况中，当作为显示对象的图像是二维图像时，显示控制部分170产生操作支持信息与图像存储器160中保持的图像数据重叠的图像(二维图像)。此外，显示控制部分170在显示部分180和显示装置200上显示产生的二维图像。将参照图3、4等具体地描述其显示例子。

显示部分180是基于显示控制部分170的控制显示各种信息(平面图像)的显示部分。作为显示部分180，例如，可以使用LCD(液晶显示器)、有机EL(电致发光)面板等。另外，操作接收部分130和显示部分180可以由触摸面板一体地构成，该触摸面板能够通过手指等在显示屏幕上的接触或接近来执行各种输入操作。

信息输入和输出部分190经由装置内接口20与显示装置200连接，并且，基于UI控制部分140的控制，执行在该信息输入和输出部分190与显示装置200之间执行的各种信息的输入和输出。例如，信息输入和输出部分190将数据流发送至显示装置200，该数据流由显示控制部分170产生，作为用于在显示装置200上显示图像的图像信息。此外，例如，在由操作接收部分130接收设置三维观看模式作为显示装置200的观看模式的设置操作的情况下，信息输入和输出部分190将用于设置三维观看模式的三维观看模式设置信息发送到显示装置200。此外，例如，在由操作接收部分130接收设置二维观看模式作为显示装置200的观看模式的设置操作的情况下，信息输入和输出部分190将用于设置二维观看模式的二维观看模式设置信息发送到显示装置200。另外，信息输入和输出部分190是信息输出部分的例子。

成像装置和显示装置的显示例子

图3和4是示出本发明第一实施例中的显示部分180(成像装置100)和显示部分220(显示装置200)的显示例子的示图。图3示出在二维图像被显示为图像内容的情况下的显示例子，图4示出在三维图像被显示为图像内容的情况下的显示例子。

如图3中所示，当二维图像被显示为图像内容时，在显示部分180(成像装置100)和显示部分220(显示装置200)上显示近似相同的图像。也就是说，在显示部分180(成像装置100)和显示部分220(显示装置200)上，以重叠的方式在二维图像(包含图3中所示的螃蟹400的平面图像)上显示操作支持信息401至406。

这里，例如，操作支持信息401至406是用于在用户执行图像内容的再现时支持其操作的信息。作为操作支持信息，例如，显示与作为显示对象的图像有关的各个图像信息(例如，成像日期和时间、以及图像尺寸)、操作构件(例如，图像发送按钮、图像返回按钮和停止按钮)、用支持操作的操作指南信息(operation guide information)和指示各种信息的图标。

具体地说，操作支持信息410是指示显示图像的纵横比的值，操作支持信息402是指示显示图像的图像尺寸的值。此外，操作支持信息403是指示作为显示对象的图像的总数和该总数之中的显示图像的项目(item)的数目的值。操作支持信息404是指示存储有显示图像的记录介质的种类的图标。此外，操作支持信息405是指示显示图像的成像日期和时间的值，操作支持信息406是指示用于支持作为显示对象的图像的图像传送操作或图像返回操作的操作指南的字符。另外，在本例子中，示出将操作支持信息401至406显示为操作支持信息的情况，但是，可以显示其它的操作支持信息。另外，由于以重叠的方式在二维图像上显示操作支持信息401至406，所以希望在二维图像的边缘部分(例如，二维图像的上部分或下部分)处显示它们，使得该二维图像被容易地观看到。

这里，当二维图像被显示为图像内容时，由于用户以二维的方式观看显示图像，所以考虑到，即使当以重叠的方式在显示图像上显示二维图像(操作支持信息)时，观看二维图像也几乎没有任何困难。与此相反，当三维图像被显示为图像内容时，用户以三维的方式观看其显示图像。由于此原因，当以重叠的方式在其显示屏幕上显示二维图像(操作支持信息)时，还假设由立体图像覆盖操作支持信息，使得难以看见操作支持信息。

例如，当操作支持信息被显示为在背面布置时，操作支持信息被观看成由其刚好之前出现的立体图像覆盖，从而难以看见操作支持信息，并且，可以产生不自然的图像。另一方面，当操作支持信息被显示为在正面时，操作支持信息出现在其它的立体图像之前，从而可能会导致难以被用户看见的图像(例如，在阅读时使眼睛疲劳的图像)。

这里，由于诸如电影的立体图像能够预先区分最佳深度，所以操作支持信息也可以布置在合适的位置处。与此相反，在由成像装置100记录的立体图像的情况下，深度量根据图像而完全不同。由于此原因，为了在最佳位置中布置操作支持信息，例如，有必要使用具有快速算术运算处理的处理器执行大量的计算。由于此原因，例如，还考虑了提供用于布置操作支持信息的专用电路。然而，在诸如成像装置100的便携式装置的情况下，提供低成本的模型并降低成本是重要的。由于此原因，希望合适地显示操作支持信息，而不用安装具有快速算术运算处理的专用电路或处理器。

因此，在本发明的第一实施例中，当在显示部分220(显示装置200)上显示作为图像内容的三维图像时，操作支持信息没有以重叠的方式显示在显示图像上。在这种情况下，没有显示三维图像，而在显示部分180(成像装置100)上仅仅显示操作支持信息。该显示例子在图4中示出。

如图4中所示，当三维图像被显示为图像内容时，在显示部分180(成像装置100)和显示部分220(显示装置200)上显示不同的图像。也就是说，在显示部分220(显示装置200)上仅仅显示三维图像(包含图4的工作台(table)上的玩具企鹅410的立体图像)。此外，在显示部分180(成像装置100)上仅仅显示操作支持信息411至416。

这里，假设用户佩戴专用眼镜(主动快门式眼镜)来观看立体图像的情况。专用眼镜与在显示部分220上交替地显示的右眼图像和左眼图像同步地、交替地打开和关闭液晶快门，并且，具有插入在其中的偏振片。由于此原因，当用户佩戴专用眼镜时，亮度似乎总体上下降(即，亮度似乎相对地降低)。由于此原因，当在显示部分220(显示装置200)上显示立体图像以观看立体图像时，考虑提高显示面板的亮度以对付此。此外，甚至就显示部分180(成像装置100)而言，在设置三维观看模式时，可以通过提高显示面板的亮度以对付此来确保对比度。

此外，当在显示部分220(显示装置200)上显示立体图像时，通过以重叠的方式在黑色图像上显示以白色着色的操作支持信息411至416，可以在显示部分180(成像装置100)上获得具有高对比度的图像。另外，在本例子中，已经示出了通过白色和黑色的组合来显示操作支持信息的例子，但是，例如，可以通过黄色和黑色的组合来显示操作支持信息。

例如，操作支持信息411至416对应于图3中所示的操作支持信息401至406。

此外，当三维图像被显示为图像内容时，在显示部分180(成像装置100)上不显示三维图像，但是，在显示部分180(成像装置100)上仅仅显示操作支持信息411至416。由于此原因，可以在容易被用户观看到的位置处布置和显示操作支持信息411至416，而无需在显示屏幕的边缘部分中显示操作支持信息411至416。也就是说，在二维图像被显示为图像内容的情况下，可以改变操作支持信息的布置，在显示三维图像的情况下，可以改变操作支持信息。此外，除了布置以外，例如，还可以改变显示屏幕中的颜色、亮度和字符的尺寸中的至少一种。将参照图8A和8B具体地描述布置等的改变。

另外，在本例子中，已经示出将操作支持信息411至416显示为操作支持信息的情况，但是，可以显示其它的操作支持信息。

此外，由于在显示部分220(显示装置200)上仅仅显示三维图像(包含工作台上的玩具企鹅410的立体图像)，所以用户可以欣赏更容易被看见的立体图像。

以这样的方式，根据本发明的第一实施例，例如，即使当用户佩戴专用眼镜(主动快门式眼镜)来观看立体图像时，也可以使立体图像和操作支持信息更容易地被看见。此外，在观看立体图像的情况下，由于在显示装置200上显示立体图像，所以可以在不妨碍三维效果的情况下观看立体图像。在这种情况下，由于在成像装置100上仅仅显示操作支持信息，所以操作支持信息不被立体图像覆盖，并且，可以舒服地执行立体图像中的操作。

成像装置的操作例子

图5和6是示出由本发明第一实施例中的成像装置100执行的图像内容再现处理的处理序列的例子的流程图。在本例子中，将解释作为如下例子的情况：其中，通过用户的图像传送操作或图像返回操作，在显示装置200上显示存储于成像装置100中的图像内容。此外，将解释作为如下例子的情况：其中，在成像装置100的显示部分180上仅仅显示二维图像。另外，将参照图7具体地描述显示装置200的操作例子。

首先，当在通过用户操作接通成像装置100的电源的情况中接收操作输入时，激励成像装置100(步骤S901)。接下来，设置二维观看模式(步骤S902)。接下来，决定是否连接装置内接口20(步骤S903)。也就是说，决定是否经由装置内接口20将成像装置100与显示装置200连接。

当没有连接装置内接口20(步骤S903)时，执行取决于来自用户的操作输入的各种处理(步骤S904)。另一方面，当连接装置内接口20(步骤S903)时(当成像装置100经由装置内接口20连接至显示装置200时)，二维观看模式的设置信息被发送到显示装置200(步骤S905)。也就是说，UI控制部分140将二维观看模式的设置信息经由信息输入和输出部分190发送至显示装置200。结果，在显示装置200上设置二维观看模式。此外，用户在必要的时候佩戴专用眼镜。

接下来，决定是否执行图像传送操作或图像返回操作(步骤S906)。当不执行图像传送操作或图像返回操作(步骤S906)时，处理前进至步骤S917。另一方面，当执行图像传送操作或图像返回操作(步骤S906)时，根据操作输入(图像传送操作或图像返回操作)选择作为显示对象的图像(步骤S907)。也就是说，再现控制部分150根据其操作输入从图像内容存储器部分300获取图像内容，并且对该图像内容进行解码，从而将解码的图像数据展开到图像存储器160中的预定区域。

接下来，决定作为显示对象的图像是否为三维图像(步骤S908)。也就是说，UI控制部分140基于由再现控制部分150进行的图像内容的区分结果来决定该图像是否为三维图像。当作为显示对象的图像不是三维图像(步骤S908)时(当作为显示对象的图像是二维图像时)，在显示部分180(成像装置100)和显示部分220(显示装置200)上显示操作支持信息与二维图像重叠的图像(步骤S909)。也就是说，显示控制部分170在显示部分180上显示操作支持信息与保持在图像存储器160中的二维图像重叠的图像，从而将用于显示与该图像基本上相同的图像的图像信息经由信息输入和输出部分190输出至显示装置200。另外，步骤S908是判定序列的例子。另外，步骤S909是第一控制序列的例子。

此外，当作为显示对象的图像是三维图像(步骤S908)时，决定是否设置了三维观看模式(步骤S910)。当设置了三维观看模式时，处理前进至步骤S916。另一方面，当没有设置三维观看模式(步骤S910)时，显示控制部分170在显示部分180上显示用于设置三维观看模式的三维观看模式设置屏幕(步骤S911)。

接下来，决定在显示于显示部分180上的三维观看模式设置屏幕中是否执行了三维观看模式的设置操作(步骤S912)。当没有执行三维观看模式的设置操作(步骤S912)时，在显示部分180和显示部分220上显示这样的图像(步骤S913)，在该图像中，使作为显示对象的三维图像成为二维图像，并且，操作支持信息与二维图像重叠。也就是说，显示控制部分170使在图像存储器160中保持的三维图像成为二维图像，在显示部分180上显示操作支持信息重叠在该二维图像上的图像，并且将用于显示与该图像基本上相同的图像的图像信息经由信息输入和输出部分190输出至显示装置200。

此外，当执行三维观看模式的设置操作(步骤S912)时，在成像装置100中设置三维观看模式(步骤S914)，并且，将三维观看模式的设置信息发送至显示装置200(步骤S915)。也就是说，UI控制部分140将三维观看模式的设置信息经由信息输入和输出部分190发送至显示装置200。结果，在显示装置200上设置三维观看模式。

接下来，在显示部分180(成像装置100)上显示操作支持信息，并且，在显示部分220(显示装置200)上显示作为显示对象的三维图像(步骤S916)。也就是说，显示控制部分170在显示部分180上显示操作支持信息，并且，在显示装置200上显示在图像存储器160中保持的三维图像。在这种情况下，在显示装置200上不显示操作支持信息，但是仅仅显示三维图像，并且，在显示部分180上不显示三维图像，但是仅仅显示操作支持信息。另外，步骤S916是第二控制序列的例子。

接下来，决定是否执行二维观看模式的设置操作(步骤S917)。当执行二维观看模式的设置操作(步骤S917)时，在成像装置100中设置二维观看模式(步骤S918)，并且，将二维观看模式的设置信息发送至显示装置200(步骤S905)。

此外，当不执行二维观看模式的设置操作(步骤S917)时，决定是否执行内容再现完成指示操作(步骤S919)。当执行内容再现完成指示操作时，完成图像内容再现处理的操作。另一方面，当不执行内容再现完成指示操作(步骤S919)时，处理返回至步骤S906。

另外，本例子已经示出了这样的例子：其中，当作为显示对象的图像是三维图像并且没有设置三维观看模式时，显示三维观看模式设置屏幕，并且，在三维观看模式设置屏幕中执行三维观看模式的设置操作。然而，显示观看模式设置屏幕，以便通过预定的用户操作来设置二维观看模式或三维观看模式，从而可以在观看模式设置屏幕中执行期望的观看模式的设置操作。

显示装置的操作例子

图7是示出由本发明第一实施例中的显示装置200执行的图像内容再现处理的处理序列的例子的流程图。在本例子中，将解释作为如下例子的情况：其中，通过用户的图像传送操作或图像返回操作，在显示装置200上显示存储于成像装置100中的图像内容。

首先，当在通过用户操作接通显示装置200的电源的情况中接收操作输入时，激励显示装置200(步骤S921)。接下来，决定是否连接装置内接口20(步骤S922)。也就是说，决定是否经由装置内接口20将显示装置200与成像装置100连接。

当没有连接装置内接口20(步骤S922)时，执行取决于来自用户的操作输入的各种处理(步骤S923)。另一方面，当连接装置内接口20(步骤S922)时(当显示装置200经由装置内接口20连接至成像装置100时)，设置二维观看模式(步骤S924)。此外，用户在必要的时候佩戴专用眼镜。

接下来，决定是否接收到来自成像装置100的观看模式的设置信息(步骤S925)，从而，当没有接收到观看模式的设置信息时，处理前进至步骤S929。另一方面，当接收到观看模式的设置信息(步骤S925)时，决定是否接收到三维观看模式的设置信息(接收到的观看模式的设置信息是否为三维观看模式的设置信息)(步骤S926)。

当接收到三维观看模式的设置信息(步骤S926)时，设置三维观看模式(步骤S927)。另一方面，当没有接收到三维观看模式的设置信息(步骤S926)时(当接收到二维观看模式的设置信息)时，设置二维观看模式(步骤S928)。

接下来，决定是否接收到来自成像装置100的图像信息(步骤S929)，从而，当没有接收到图像信息时，处理前进至步骤S931。另一方面，当接收到图像信息(步骤S929)时，基于接收到的图像信息，在显示部分220上显示该图像(立体图像和操作支持信息重叠的二维图像)(步骤S930)。

另外，决定是否执行内容再现完成指示操作(步骤S931)。当执行内容再现完成指示操作时，完成图像内容再现处理的操作。另一方面，当不执行内容再现完成指示操作(步骤S931)时，处理返回至步骤S925。

操作支持信息的布置例子

图3和4解释作为例子的下述情况：其中，在二维图像的显示期间被显示为与二维图像重叠的操作支持信息基本上与在三维图像的显示期间在成像装置100上显示的操作支持信息相同。这里，在二维图像的显示期间，由于操作支持信息被显示为与二维图像重叠，所以有必要布置操作支持信息，使得它尽可能少地覆盖二维图像。由于此原因，希望在二维图像的上下边缘部分和左右边缘部分的附近布置操作支持信息。与此相反，在三维图像的显示期间，由于在成像装置100中仅仅显示操作支持信息，所以不管要显示的三维图像如何都可以布置操作支持信息。因此，为了即使在用户佩戴专用眼镜(例如，主动快门式眼镜)的状态下也容易地看见操作支持信息，在二维图像的显示期间的操作支持信息可以与在三维图像的显示期间的操作支持信息不同地显示。例如，在三维图像的显示期间，可以改变操作支持信息的布置，以放大字符等。该显示例子在图8A和8B中示出。

图8A和8B是示出本发明第一实施例中要显示在显示部分180上的显示屏幕的转变例子的示图。图8A示出在二维图像的显示期间的显示部分180的显示例子，图8B示出在三维图像的显示期间的显示部分180的显示例子。另外，图8A和8B中示出的例子仅仅简要地示出字符(“二维图像(2D image)”或“三维图像(3D image)”)作为在显示部分220(显示装置200)上显示的图像，所述字符示出作为显示对象的图像的种类。

如图8A中所示，当在显示部分220上显示二维图像时，在显示部分180上操作支持信息421至426被显示为与二维图像(包含图8A中的工作台上的玩具熊420的平面图像)重叠。在这种情况下，在显示部分220上也显示近似相同的显示屏幕。

操作支持信息421是示出成像装置100的电池容量的图标，操作支持信息422是示出显示图像的图像尺寸的值。此外，操作支持信息423是示出作为显示对象的图像的文件名(2199)和该文件所属的文件夹名(101)的数字。此外，操作支持信息424是示出显示图像的成像日期和时间的值。此外，操作支持信息425和426是用于操作显示图像的操作指南。例如，操作支持信息425是示出可以通过按压十字按钮132的左右按钮来执行图像传送操作或图像返回操作的操作指南。此外，操作支持信息426是示出可以通过按压十字按钮132的下按钮来显示用于执行音量调节的设置屏幕的操作指南。

如图8B中所示，当在显示部分220上显示三维图像时，在显示部分180上仅有操作支持信息431至434被显示为与黑色图像重叠。在这种情况下，在显示部分220上仅仅显示三维图像，但是，不显示操作支持信息431至434。

操作支持信息431是示出可以通过按压决定按钮133来执行滚动再现操作的操作指南。此外，操作支持信息432是示出可以通过按压十字按钮132的左右按钮来执行图像传送操作或图像返回操作的操作指南。此外，操作支持信息433是示出可以通过按压十字按钮132的上按钮来执行连续的再现的操作指南。此外，操作支持信息434是示出可以通过按压十字按钮132的下按钮来完成三维观看模式并设置二维观看模式的操作指南。例如，通过在操作支持信息434中示出的操作输入(十字按钮132的下按钮的按压操作)来执行图6中所示的步骤S917的二维观看模式的设置操作。

此外，如图8A和8B中所示，通过将当在显示部分220上显示三维图像时的操作支持信息431至434的数目进一步减少为小于当在显示部分220上显示二维图像时的操作支持信息421至426的数目，可以放大字符。以这样的方式，通过将最少的操作支持信息431至434以相对较大的尺寸显示为当在显示部分220上显示三维图像时的操作支持信息，即使在用户佩戴专用眼镜的状态下也可以容易地观看到操作支持信息。结果，可以进一步舒服地、容易地执行在三维图像的显示期间的操作。

2.第二实施例

在下述例子中已经示出了本发明的第一实施例：其中，当在显示装置200上显示三维图像时，在成像装置100上显示包含操作支持信息的平面图像。这里，当在显示装置200上显示三维图像时，由于用户佩戴专用眼镜，所以假设可以自然地观看三维图像。因此，本发明的第二实施例示出下述例子：其中，当在显示装置200上显示三维图像时，在成像装置100上也显示三维图像(用于以三维的方式显示操作支持信息的三维图像)。另外，除了在成像装置100上显示立体图像以外，本发明的第二实施例中的内容再现系统的配置以及成像装置和显示装置的功能结构与图1和2中示出的例子的那些相同。由于此原因，将用相同的附图标记表示与本发明的第一实施例相同的部分，并且，将省略其部分描述。

也就是说，在第二实施例中，以与显示装置200相似的方式，成像装置100的显示部分180是可以通过佩戴用于观看立体图像的专用眼镜来向用户提供立体图像的显示装置。作为显示部分180，可以使用能够显示立体图像的液晶显示器等。

此外，基于来自UI控制部分140的控制，当在显示部分220上显示的图像内容是三维图像时，成像装置100的显示控制部分170在显示部分180上显示操作支持信息作为立体图像。在这种情况下，在显示部分180上与在显示装置200的显示部分220上交替地显示的右眼图像和左眼图像同步地显示立体图像。结果，用户在佩戴专用眼镜的状态下可以看见在成像装置100和显示装置200上显示的立体图像。

操作支持信息的显示例子

图9A至9C和图10A至10C是示出本发明第二实施例中显示在显示部分180上的显示屏幕的转变例子的示图。

图9A至9C示出在下述情况中在执行图像传送操作时的显示转变例子：在显示装置200上显示三维图像。此外，在图9A至9C中示出的例子中，显示部分180包含触摸面板。

在成像装置100的显示部分180上，显示用于执行图像返回操作的操作支持信息(“前一图像(PRECEDING IMAGE)”按钮)451和用于执行图像传送操作的操作支持信息(“下一图像(SUCCEEDINGIMAGE)”按钮)452。另外，在图9A至9C中示出的例子中，为了便于解释，省略了其它操作支持信息的显示。此外，图9A至9C中示出的例子示出下述例子：其中，仅有主要使用的操作按钮被显示为立体图像，并且，其它操作按钮被显示为二维图像。也就是说，仅有操作支持信息(“下一图像”按钮)452被显示为立体图像，并且，操作支持信息(“前一图像”按钮)451被显示为二维图像。

例如，当在图9A中所示的状态中执行在显示装置200上显示的三维图像的图像传送操作时，用户执行用手指455按压操作支持信息(“下一图像”按钮)452的操作(按压操作)。在图9B中示出在执行按压操作之后的显示例子。

如图9B中所示，当用户用手指455按压操作支持信息(“下一图像”按钮)452时，字符部分由于动画而变形，使得按压操作支持信息(“下一图像”按钮)452的字符部分(下一图像)。结果，用户容易地掌握执行以三维的方式显示的操作支持信息(“下一图像”按钮)452的按压操作。另外，在用户将手指455与显示部分180的显示屏幕接触的状态中，获得保持状态(hold state)。

接下来，在图9B中所示的状态中，用户将手指455从操作支持信息(“下一图像”按钮)452分离。在这种情况下，如图9C中所示，字符部分由于动画而变形，使得操作支持信息(“下一图像”按钮)452的字符部分(下一图像)变成原始状态。结果，用户容易地掌握暂停以三维的方式显示的操作支持信息(“下一图像”按钮)452的按压。另外，用户将手指455从显示部分180的显示屏幕分离，从而执行在显示装置200上显示的三维图像的图像传送处理。

以这样的方式，通过使操作支持信息经受使得它以三维的方式出现的特殊效果(三维视觉效果)，可以提供欣赏立体图像的用户容易地操作的环境。也就是说，在执行以三维的方式显示的操作支持信息(操作按钮)的按压操作的情况下，可以获得按压实际按钮的特殊效果，从而可以向用户提供操作享受。

另外，本例子示出了下述例子：其中，仅有主要使用的操作支持信息(例如，操作按钮)被显示为立体图像，但是，其它的操作支持信息可以以与立体图像相似的方式显示。此外，可以基于重要性等改变和显示每一个深度。

此外，本例子示出了下述例子：其中，使用触摸面板执行用户操作，但是，可以使用图10A至10C中所示的光标来执行用户操作，还可以通过其它用户操作来执行用户操作。

图10A至10C示出在当在显示装置200上显示三维图像时执行连续的再现操作的情况下的显示转变例子。

在成像装置100的显示部分180上，显示操作支持信息(滚动再现(SCROLL REGENERATION))501、操作支持信息(图像传送/图像返回(IMAGE TRANSPORT/IMAGE RETURN))502和操作支持信息(连续再现(CONTINUOUS REGENERATION))503。另外，操作支持信息(SCROLL REGENERATION)501是用于执行滚动再现操作的操作支持信息，操作支持信息(IMAGETRANSPORT/IMAGE RETURN)502是用于执行图像传送操作或图像返回操作的操作支持信息。此外，操作支持信息(CONTINUOUSREGENERATION)503是连续再现操作。另外，在图10A至10C中示出的例子中，为了便于解释，省略了其它操作支持信息的显示。另外，连续再现是再现处理，通过该再现处理，成像装置100自动地执行图像传送。

例如，当在图10A中所示的状态中执行在显示装置200上显示的三维图像的连续再现操作时，通过用户操作，光标500与操作支持信息(CONTINUOUS REGENERATION)503重叠。例如，可以通过十字按钮132的操作移动光标500。以这样的方式，在图10B中示出在光标500与操作支持信息(CONTINUOUS REGENERATION)503重叠的状态中的显示例子。

如图10B中所示，当光标500通过用户操作与操作支持信息(CONTINUOUS REGENERATION)503重叠时，字符部分由于动画而变形，从而操作支持信息(CONTINUOUS REGENERATION)503的字符部分(CONTINUOUS REGENERATION)进一步突显。结果，作为用户操作的对象的操作支持信息的三维效果可以进一步被加强，并且容易被用户掌握。另外，通过在光标500与操作支持信息(CONTINUOUS REGENERATION)503重叠的状态中执行决定操作(例如，决定按钮133的按压操作)，可以开始连续再现处理。

此外，在图10B中示出的状态中，光标500从操作支持信息(CONTINUOUS REGENERATION)503分离。在这种情况下，如图10C中所示，字符部分由于动画而变形，使得操作支持信息(CONTINUOUS  REGENERATION)503的字符部分(CONTINUOUS REGENERATION)变成原始状态。结果，用户容易地掌握光标500从以三维的方式显示的操作支持信息(CONTINUOUS REGENERATION)503分离。

以这样的方式，通过使操作支持信息经受使得它以三维的方式出现的特殊效果(三维视觉效果)，可以提供欣赏立体图像的用户容易地操作的环境。也就是说，由于在光标与以三维的方式显示的操作支持信息重叠的状态中，以加强的方式显示操作支持信息的三维效果，用户容易地操作操作支持信息，从而可以提高图像内容的欣赏。

此外，本例子已经示出了下述例子：其中，使用光标执行用户操作，但是，如图9A至9C所示，可以使用触摸面板执行用户操作，还可以通过其它用户操作来执行用户操作。

另外，在本发明的实施例中，成像装置被解释为一个例子，但是，可以在外部的显示装置上显示存储于记录介质中的立体图像内容，并且，本发明的实施例可以应用于包含显示部分的图像处理装置。例如，本发明的实施例可以应用于诸如具有成像功能的移动电话、导航系统和便携式媒体播放器的图像处理装置。

另外，本发明的实施例示出了用于实施本发明的例子，并且，如本发明的实施例中所说明的那样，本发明的实施例与本发明实施例中的每一个项目和权利要求书中的本发明的每一个特定项目具有对应的关系。以类似的方式，本发明的实施例与权利要求书中的本发明的每一个特定项目和本发明实施例中的具有相同名称的每一个项目具有对应的关系。然而，本发明并不局限于这些实施例，而且，可以通过在不脱离本发明的要旨的范围内以各种方式修改所述实施例来实施本发明。

此外，在本发明的实施例中解释的处理序列可以被理解为具有一系列序列的方法，并且，可以被理解为在计算机中执行所述一系列序列的程序和存储该程序的记录介质。可以使用诸如CD(压缩盘)、MD(迷你盘)、DVD(数字多功能盘)、存储卡、Blu-ray Disc(商标)(蓝光盘)等的记录介质。

本申请包含与在2010年2月15日提交在日本专利局中的日本在先专利申请JP 2010-030100中公开的主题相关的主题，该专利申请的全部内容以引用的方式并入本文中。

本领域的技术人员应该理解，可以根据设计要求和其它因素进行各种修改、组合、子组合和替换，只要它们在所附权利要求书或其等同物的范围即可。

Claims (8)

1.一种图像处理装置，包括：

显示部分，该显示部分显示在记录介质中存储的图像；

信息输出部分，该信息输出部分与显示平面图像或立体图像的显示装置连接，以输出用于在显示装置上显示存储于记录介质中的图像的图像信息；以及

控制部分，该控制部分执行在显示部分和显示装置上显示存储于记录介质中的图像和用于支持该图像的显示操作的操作支持信息的控制，并且执行控制，使得当作为显示对象的图像是立体图像时，在显示部分上显示操作支持信息，而在显示部分上不显示作为显示对象的图像。

2.根据权利要求1所述的图像处理装置，还包括：

显示模式设置部分，该显示模式设置部分设置用于在显示装置上显示立体图像的立体图像显示模式或者用于在显示装置上显示平面图像的平面图像显示模式，

其中，在作为显示对象的图像是立体图像的情况下，当设置立体图像显示模式时，控制部分执行在显示装置上仅仅显示立体图像和在显示部分上仅仅显示操作支持信息的控制，并且，当设置平面图像显示模式时，控制部分使立体图像成为平面图像并在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。

3.根据权利要求1所述的图像处理装置，

其中，根据作为显示对象的图像是平面图像还是立体图像，控制部分改变操作支持信息的显示部分中的布置、颜色、亮度和字符的尺寸中的至少一种。

4.根据权利要求1所述的图像处理装置，

其中，当作为显示对象的图像是立体图像时，控制部分在显示装置上仅仅显示立体图像并在显示部分上仅仅显示操作支持信息。

5.根据权利要求1所述的图像处理装置，

其中，当作为显示对象的图像是立体图像时，控制部分将显示部分上的操作支持信息的至少一部分显示为立体图像。

6.根据权利要求1所述的图像处理装置，

其中，当作为显示对象的图像是平面图像时，控制部分在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像。

7.一种图像处理方法，包括下述步骤：

当在经由信息输出部分连接的显示装置上显示存储于记录介质中的图像时，判定该图像是平面图像还是立体图像；

执行第一控制，使得当在显示装置上显示的图像是平面图像时，在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像，所述操作支持信息用于支持存储于记录介质中的图像的显示操作；以及

执行第二控制，使得当在显示装置上显示的图像是立体图像时，在显示部分上显示操作支持信息，在显示部分上不显示作为显示对象的图像，而在显示装置上显示作为显示对象的图像。

8.一种在计算机中执行下述步骤的程序：

当在经由信息输出部分连接的显示装置上显示存储于记录介质中的图像时，判定该图像是平面图像还是立体图像；

执行第一控制，使得当在显示装置上显示的图像是平面图像时，在显示部分和显示装置上显示操作支持信息与平面图像重叠的图像，所述操作支持信息用于支持存储于记录介质中的图像的显示操作；以及

执行第二控制，使得当在显示装置上显示的图像是立体图像时，在显示部分上显示操作支持信息，在显示部分上不显示作为显示对象的图像，而在显示装置上显示作为显示对象的图像。

Images