CN101742101B - 成像设备和成像设备中的显示控制方法 - Google Patents

Abstract

一种成像设备，包括：第一显示面板，其被安装在设备外壳上，以便在向着用户的方向上显示图像或数据；第二显示面板，其被安装在设备外壳上，以便在向着对象的方向上显示图像或数据；成像处理器，其对来自对象方向的入射光进行光电转换以获得图像信号；人检测器，其检测在对象方向上是否有人存在；以及控制器，其使得在第一显示面板上显示基于由成像处理器获得的图像信号的图像或数据，并至少根据人检测器的检测结果，控制在第二显示面板上显示基于由成像处理器获得的图像信号的图像或数据的操作。

Description

成像设备和成像设备中的显示控制方法

技术领域

本发明涉及成像设备及其显示控制方法，并且更具体地，涉及在外壳上具有多个显示面板的成像设备上显示图像或数据的操作。

背景技术

近来，诸如数码相机或数字摄像机的成像设备已普及，并且许多成像设备配有由例如液晶面板构成的显示面板。

例如，日本未审专利申请公开No.2007-158799公开了一种成像设备，其中在相机外壳上提供了相对大的显示面板，以便在拍摄期间监视显示面板上的对象(subject)图像并在回放期间回放所拍摄的图像。

发明内容

本发明提出了在其外壳上配有两个显示面板的新颖的成像设备。

也就是说，成像装置不仅配有类似于现有技术的在设备外壳上安装的用来在对着用户(拍照者)的方向上显示图像或数据的显示面板，还配有在设备外壳的前侧(对象侧)上安装的用来在对着对象的方向上显示图像或数据的另一显示面板。

当按这样的方式提供两个显示面板时，适当期望的是，根据与拍摄有关的操作状态或条件，在各个显示面板上显示图像或数据。即，期望的是，实现能够显示对用户有用的图像和数据并防止非必要功耗的显示操作。

因而，适当期望的是，在具有两个显示面板的成像设备上显示图像或数据。

根据本发明的一个实施例，一种成像设备包括：第一显示面板，其被安装在设备外壳上，以便在向着用户的方向上显示图像或数据；第二显示面板，其被安装在设备外壳上，以便在向着对象的方向上显示图像或数据；成像处理器，其对来自对象方向的入射光进行光电转换以获得图像信号；人检测器，其检测在对象方向上是否有人存在；以及控制器，其使得在第一显示面板上显示基于成像处理器获得的图像信号的图像或数据，并至少根据人检测器的检测结果，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作。

根据本发明的另一实施例，一种成像设备包括：成像处理器，其对通过透镜系统进入的入射光进行光电转换以获得图像信号；第一显示面板，其被布置在入射光入射的设备外壳的表面上；第二显示面板，其被布置在与第一显示面板相对的表面上；人检测器，其检测在对象方向是是否有人存在；以及控制器，其使得在第一显示面板上显示基于成像处理器获得的图像信号的图像或数据，并至少根据人检测器的检测结果，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作。

当人检测器检测到人的存在时，控制器可进行控制使得在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据。

此外，当人检测器未检测到人的存在时，控制器可进行控制使得不在第二显示面板上显示图像或数据。

可替换地，当人检测器未检测到人的存在时，控制器可进行控制使得在第二显示面板上以与正常显示操作相比的低亮度状态显示基于成像处理器获得的图像信号的图像或数据。

可替换地，根据本发明实施例的成像设备还可包括图像数据读取器，其读取在记录介质上记录的图像数据，并且当人检测器未检测到人的存在时，控制器可进行控制使得在第二显示面板上显示基于图像数据读取器读取的图像数据的图像或数据。

此外，控制器可根据人检测器的检测结果和关于成像设备的操作的用户选择的设置，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作。

另外，控制器可根据人检测器的检测结果和成像设备内部检测的内部检测信息，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作。

另外，控制器可根据人检测器的检测结果和通过分析成像处理器获得的图像信息而获得的图像分析信息，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作。

另外，人检测器可通过对成像处理器获得的图像信息进行图像分析，检测在对象方向上是否有人存在。

在此情况下，人检测器可以基于对成像处理器获得的图像信号的图像分析的结果，通过确定图像信号中是否包括作为对象的人脸，进行人检测。

可替换地，人检测器可由检测对象方向上人的存在的邻近传感器构成。

此外，根据本发明实施例的成像设备还可包括图像数据读取器，其读取在记录介质上记录的图像数据，并且控制器可使得在第一显示面板上显示基于图像数据读取器读取的图像数据的图像或数据，并可以至少根据人检测器的检测结果，控制在第二显示面板上显示基于图像数据读取器读取的图像数据的图像或数据的操作。

此外，当在第一显示面板上显示基于图像数据读取器读取的多个图像数据的图像或数据时，控制器可使得在第二显示面板上显示基于从正在第一显示面板上显示的多个图像数据中选择的图像数据的图像或数据。

根据本发明的再一实施例，一种成像设备中的显示控制方法包括步骤：检测在对象方向上是否有人存在；在被安装在设备外壳上以便在用户方向上显示图像或数据的第一显示面板上，显示基于通过对来自对象方向的入射光进行光电转换而获得的图像信号的图像或数据；以及至少根据人检测步骤中的检测结果，控制在被安装在设备外壳上以便在对象方向上显式图像或数据的第二显示面板上显示基于图像信号的图像或数据的操作。

根据本发明的再一实施例，一种成像设备中的显示控制方法包括步骤：检测在对象方向上是否有人存在；在被安装在设备外壳的入射光入射的表面上的第一显示面板上，显示基于通过对经过透镜系统进入的入射光进行光电转换而获得的图像信号的图像或数据；以及至少根据人检测步骤中的检测结果，控制在被安装在与第一显示面板相对的表面上的第二显示面板上显示基于图像信号的图像或数据的操作。

也就是说，根据本发明的实施例，根据对象方向上是否有人存在，在第二显示面板上进行必要的显示操作。

例如，在静态图像拍摄期间的监视时段中(即，在抓住良好的快门时机(timing)以捕捉静态图像时)，成像设备的用户(即，用成像设备拍摄静态图像的照相者)监视第一显示面板上的对象图像。监视图像是图像传感器在该时段中获得的图像信号，并且是对象场景的实时影像，也被称为直通图像(through image)。以此方式，照相者监视要捕捉的对象图像并在期望的时刻进行释放操作(快门操作)。所述操作与一般成像设备的操作相同。

可优选的是，在监视时段中，在第二显示面板上显式基于图像信号的图像或数据，即作为直通图像的监视图像。例如，如果对象是人，则该人能够从第二显示面板上显示的图像或数据确认要拍摄的他/她的表情(look)或姿态。

然而，仅仅当人存在于对象侧上时，这样的附加显示才有用。例如，当照相者正对没有任何人的风景进行成像时，没有人监视第二显示面板的显示。因而，在这种情形下，在第二显示面板上显示监视图像是没有用的。因而，合适的是，关闭第二显示面板以防止非必要的功耗。

例如，通过根据情形适当控制第二显示面板的显示操作，可以使用两个显示面板显示有用或有意思的图像或数据，同时，即使在提供两个显示面板时，也防止非必要的功耗。

根据本发明的实施例，显示设备配有可从用户和对象两侧观看的两个显示面板，由此能够根据与拍摄有关的操作状态或条件，在各个显示面板上显示合适的图像或数据。特别是，根据人在对象侧上的存在情况，控制第二显示面板的显示操作。因而，可以提供能够显示有用或特别有意思的图像并防止非必要显示操作的新颖有用的成像设备。

附图说明

图1A和图1B是示出根据本发明实施例的成像设备的外部视图的示意图；

图2是示出根据实施例的成像设备的框图；

图3是示出根据实施例的成像设备的操作状态转变(transition)的示意图；

图4A至图4C是示出根据实施例的成像设备的图像显示例子的示意图；

图5A至图5C是示出根据实施例的成像设备的图像显示例子的示意图；

图6A和图6B是示出根据实施例基于人识别的前显示面板的显示控制例子的流程图；

图7是示出根据实施例基于人识别的前显示面板的显示控制例子的流程图；

图8是示出根据实施例基于人识别的前显示面板的显示控制例子的流程图；

图9是示出根据实施例基于人识别和用户设置的前显示面板的显示控制例子的流程图；

图10是示出根据实施例的前显示面板的显示控制例子的流程图，其中考虑了自拍模式；

图11是示出根据实施例基于人识别和相机检测信息的前显示面板的显示控制例子的流程图；

图12是示出根据实施例基于人识别和图像分析结果的前显示面板的显示控制例子的流程图；

图13是示出根据实施例的前显示面板的显示控制例子的流程图，其中考虑了微笑(smile)快门模式；以及

图14是示出根据实施例在回放期间的前显示面板的显示控制例子的流图。

具体实施方式

下文中，将按以下顺序描述本发明的优选实施例：

1.成像设备的配置；

2.操作状态转变；

3.两显示面板的屏幕显示例子；

4.监视期间前显示面板的显示控制；

4-1.基于人识别的示例处理；

4-2.基于人识别和用户设置的示例处理；

4-3.基于人识别和内部检查信息的示例处理；

4-4.基于人识别和其他图像分析信息的示例处理；

5.回放期间前显示面板的显示控制；以及

6.变型

1.成像设备的配置

将参照图1A和图1B以及图2，描述根据本发明实施例的成像设备(如数码相机)的配置。

图1A和图1B分别示出了从后表面侧(用户侧)和前表面侧(对象侧)看到的根据本实施例的成像设备1的外部视图。

成像设备1具有在其前表面上安装的成像透镜20、闪光发光器15等。

此外，分别在其外壳的顶部表面或其后表面上的位置处安装用户操作的控件。例如，控件包括释放钮5a、模式盘5b、W/T(变焦，zoom)钮5c、各种控制钮5d和箭头钮5e。

模式盘5b用于例如选择拍摄模式。控制钮5d使得用户能够显示菜单、进入回放模式、或调整曝光值。

箭头钮5e用于各种操作，例如包括选择/确定在显示面板6上显示的操作菜单项目。

成像设备1配有主显示面板6M和前显示面板6F，主显示面板6M安装在后表面侧上，并由液晶面板或有机EL(电致发光)面板配置，如图1A所示，前显示面板6F安装在前表面侧上，并由液晶面板或有机EL面板配置，如图1B所示。也就是说，主显示面板6M和前显示面板6F被安装在外壳上相互对着的表面(相对表面)上。

主显示面板6M和前显示面板6F例如配有相同的屏幕尺寸，并且被提供为分别占据外壳的后表面和前表面上的相对大的面积。

主显示面板6M基本被配置为在监视时段(即，在拍摄模式期间在捕捉好的快门定时时)显示对象的监视图像(直通图像，a through image)，使得用户能监视要拍摄的对象场景。此外，在回放模式下，主显示面板6M根据用户操作显示回放图像或缩略图像。

另一方面，前显示面板6F向着对象侧显示图像或数据。如下文将描述的，前显示面板6F也被配置为显示监视图像等，使得存在于对象侧上的人能监视所显示的图像或数据。

将参照图2描述成像设备1的示例配置。

如图2所示，成像设备1包括成像系统2、控制系统3、相机DSP(数字信号处理器)4、操作单元5、主显示面板6M、前显示面板6F、显示控制器7、外部接口8、SDRAM(同步动态随机存取存储器)9以及介质接口10。

成像系统2是执行成像操作的部分，包括透镜机构21、光圈/ND过滤器机构22、图像传感器23、模拟信号处理器24、A/D转换器25、透镜驱动单元26、透镜位置检测器27、定时生成电路28、模糊检测器13、发光驱动单元14、闪光(flash)发光器15、透镜驱动器17、光圈/ND驱动器18和图像传感器驱动器19。

来自对象的入射光通过透镜机构21和光圈/ND过滤器机构22传入图像传感器23。

透镜机构21是如图1B所示的成像透镜20的内部组件，包括多个光学透镜组，例如，盖透镜(cover lens)、聚焦透镜和变焦透镜。通过在光轴方向上移送(convey)聚焦透镜或变焦透镜的移送系统来配置透镜驱动单元26。从透镜驱动器17向透镜驱动单元26提供驱动功率，以移送聚焦透镜或变焦透镜。后面描述的CPU(中央处理单元)31控制透镜驱动器17以执行聚焦或变焦控制。

光圈/ND过滤器机构22包括光圈机构和ND过滤器机构，其被插入透镜光学系统中，以减弱(调整)入射光强度，由此进行光强度调整。

光圈/ND驱动器18通过开/关光圈机构，调节入射光强度。此外，光圈/ND驱动器18通过将ND过滤器插入到位于入射光的光轴上，选择性地调节入射光强度。CPU 31控制光圈/ND驱动器18驱动光圈机构或ND过滤器，由此进行入射光强度控制(曝光调整控制)。

来自对象的光通量(light flux)经过透镜机构21和光圈/ND过滤器机构22，以作为对象图像成像在图像传感器23上。

图像传感器23对成像的对象图像进行光电转换，以输出对应于对象图像的图像信号。

图像传感器23具有矩形成像区域，其由多个像素构成，并逐像素地向模拟信号处理器24顺序输出图像信号(其是模拟信号，对应于每个像素中存储的电荷)。例如，由CCD(电荷耦合器件)传感器阵列、CMOS(互补金属氧化物半导体)传感器阵列等配置图像传感器23。

模拟信号处理器24合并了CDS(correlated double sampling，相关双采样)电路、AGC(自动增益控制)电路等，并对从图像传感器23输入的图像信号进行预订模拟信号处理。

A/D转换器25将模拟信号处理器24处理的模拟信号转换为数字信号，并将数字信号提供给相机DSP 4。

定时生成电路28由CPU 31控制，并控制图像传感器23、模拟信号处理器24和A/D转换器25的操作定时。

也就是说，定时生成电路28经由图像传感器驱动器19，向图像传感器23提供用于控制图像传感器23的成像定时的各种定时信号，例如，曝光/电荷读出定时信号、电子快门定时信号、传输(transfer)时钟和帧率同步信号。此外，定时生成电路28向模拟信号处理器24提供各种定时信号，使得模拟信号处理器24与来自图像传感器23的图像信号的传输同步地进行上述处理。

CPU 31能够通过控制定时生成电路28生成的各个定时信号，改变图像的帧率，并控制电子快门(具体地，帧中的可变曝光信号)。此外，CPU 31能够例如通过使得定时生成电路28向模拟信号处理器24提供增益控制信号，对图像信号进行可变增益控制。

模糊检测器13检测手抖动的量和成像设备1自身的移动量。模糊检测器13例如由加速度传感器或振动传感器构成，并向CPU 31提供检测信息，作为模糊量。

闪光发光器15由发光驱动单元14驱动。CPU 31能够根据用户操作等，通过向发光驱动单元14传送闪光启动(activation)命令，在预定的定时启动闪光发光器15。

相机DSP 4对从成像系统2的A/D转换器25输入的图像信号进行各种数字信号处理。

例如，如图所示，相机DSP 4包括图像信号处理器41、压缩/解压缩处理器42、SDRAM控制器43和图像分析器44，它们的处理功能通过相机DSP4的内部硬件和软件来实现。

图像信号处理器41处理向其输入的图像信号。例如，图像信号处理器41进行的处理包括自动聚焦(auto focus，AF)处理和自动光阑(auto iris，AE)处理(它们是基于图像信号控制成像系统2的驱动的计算处理)，以及自动白平衡(AWB)处理(它是对输入的图像信号的处理)。

对于自动聚焦处理，图像信号处理器41检测输入图像信号的对比度，并向CPU 31传送检测信息。作为自动聚焦控制方法的各种控制方法为公众所知。在所谓对比度AF方法中，强制移动聚焦透镜以检测各时间点上图像信号的对比度，由此确定产生最佳对比度的聚焦透镜的位置。也就是说，CPU31在拍摄前监视图像信号处理器41检测的对比度值，同时控制聚焦透镜的移动，使得使用最佳对比度位置作为最佳聚焦位置。

作为拍摄期间的聚焦控制方法，可执行所谓摆动(wobbling)AF检测方法。CPU 31在拍摄期间监视图像信号处理器41检测的对比度值，同时细微地不断前后移动聚焦透镜。尽管聚焦透镜的最佳位置随着对象的状况而改变，但通过检测对比度同时细微地前后移动聚焦透镜，可以根据对象的改变来确定聚焦控制方向上的改变。以此方式，可执行跟踪对象状况的自动聚焦。

可以对透镜驱动单元26的移送机构的每个移送位置分配地址，使得可通过移送位置地址来确定透镜位置。

透镜位置检测器27读取作为聚焦透镜的当前透镜位置的地址，以计算到聚焦对象(focused subject)的距离，并向CPU 31提供所计算的距离，作为距离信息。以此方式，CPU 31能够确定对于正聚焦的主对象的距离。

作为相机DSP 4的图像信号处理器41执行的自动光阑处理，例如，计算对象亮度。例如，计算并向CPU 31提供输入图像信号的平均亮度，作为对象亮度信息，即曝光值信息。可使用计算平均亮度的各种方法。例如，可计算一帧图像数据的全部像素的亮度信号值的平均值，或对图像的中央区域加权的亮度信号值的平均值。

基于曝光值信息，CPU 31进行自动曝光控制。也就是说，CPU 31通过控制光圈机构、ND过滤器或图像传感器23中的电子快门以及控制模拟信号处理器24使用的增益，进行曝光调整。

相机DSP 4的图像信号处理器41不仅进行自动聚焦处理和自动光阑处理所使用的信号生成处理，还进行图像信号的处理，例如，自动白平衡、γ校正、边缘增强和手抖动模糊校正。

相机DSP 4的压缩/解压缩处理器42对图像信号进行压缩处理，或对压缩图像数据进行解压缩处理。例如，根据JPEG(联合图形专家组)或MPEG(移动画面专家组)标准进行压缩/解压缩处理。

SDRAM控制器43向/从SDRAM 9写入/读取数据。SDRAM 9例如用于临时存储从成像系统2输入的图像信号、保护在图像信号处理器41或压缩/解压缩处理器42的处理期间使用的存储或工作区域，并存储由图像分析器44获得的信息。SDRAM控制器43向/从SDRAM 9写入/读取这样的数据。

图像分析器44对图像信号处理器41处理的图像数据进行图像分析，例如，由此进行各种图像识别操作。

在本实施例中，图像分析器44进行处理以识别对象图像中包括的人或人脸。此外，当识别出人脸时，图像分析器44可进行用于识别脸的朝向或视线方向的处理。另外，图像分析器44可检测可由图像分析识别的各种类型的信息，如环境光条件或对象相对于成像设备1的移动量。

控制系统3包括CPU 31、RAM 32、闪烁ROM 33、时钟电路34。控制系统3的每个部分，相机DSP 4，成像系统2的每个部分、显示控制器7、外部接口8以及介质接口10经由系统总线连接，以便能够相互传送图像数据或控制信息。

CPU 31控制成像设备1的整体操作。也就是说，CPU 31基于内部ROM等中存储的程序和经由操作单元5的用户操作输入，进行各种计算操作并与各个部分交换控制信号，由此各个部分执行必要的操作。具体地，CPU 31进行主显示面板6M的显示控制，以及用于控制前显示面板6F的显示操作的下述控制处理。

RAM(随机存取存储器)32临时存储由相机DSP 4处理的图像信号(每帧的图像数据)，或存储CPU 31处理期间生成的信息。

闪烁ROM 33用于将图像数据存储为图像(其由用户成像为静态图像或影像)或存储有必要按非易失性方式存储的其他信息。闪烁ROM 33可存储成像设备1的控制软件程序或相机设置数据。

时钟电路34对当前日期和时间信息进行计时(以yyyy/mm/dd hh/mm/ss的格式)。

操作单元5由图1中所示的各种控件5a至5e以及生成与用户已经进行的操作相对应的信号的信号生成器构成。将从各种控件获得的用户操作信息从操作单元5传送到CPU 31。

除了控件之外，操作单元5还可被配置为支持触摸面板操作。例如，可在主显示面板6M上安装触摸传感器，使得用户能在屏幕显示上经由触摸操作而输入其操作。

显示控制器7基于CPU 31的控制，在主显示面板6M和前显示面板6F上进行必要的显示操作。

主显示面板6M的显示操作是在主显示面板6M上显示监视图像(直通图像)、从记录介质90或闪烁ROM读取的回放图像、控制菜单、各种图标以及时间的操作。

此外，前显示面板6F的显示操作是在前显示面板6F上显示监视图像和回放图像的操作。

介质接口10基于CPU 31的控制，进行数据从/向成像设备1中设置的诸如存储卡(卡形可移除存储器)的记录介质90的读取/写入。例如，介质接口10进行在记录介质90上记录作为拍摄结果而获得的静态图像数据或影像(movie)数据的操作。此外，在回放模式下，介质接口10进行从记录介质90读取图像数据的操作。

尽管可移除存储卡被例示为记录介质90，但可使用能够记录作为拍摄结果而获得的静态图像数据或影像数据的其他类型的记录介质。例如，可使用可移除盘介质，如光盘，并且可在其上安装HDD(硬盘驱动器)以进行记录。

外部接口8根据信号格式，如USB(通用串行总线)，经由预定线缆向/从外部装置传送/接收各种数据。信号格式不限于USB格式，还可以使用兼容诸如IEEE(电子和电气工程师协会)1394等的其他格式的外部接口。

此外，外部接口8可配置为替代有线传输方法支持红外传输、近距无线通信和其他无线通信方法。

成像设备1能够经由外部接口8向/从个人计算机和其他各种设备传送/接收数据。例如，成像设备1能够向外部设备传送图像数据。

图2示出了邻近传感器50。邻近传感器50是被配置为检测人是否存在于成像设备1的前侧(对象侧)上的传感器。例如，热电传感器可用作邻近传感器50。

如上所述，当通过图像分析器44的图像分析进行人检测时，可不提供邻近传感器50，并且可替换地，图像分析的人检测和邻近传感器50的检测可一起进行。

2.操作状态转变

将参照图3描述根据本实施例的成像设备1的操作状态转变。这里所使用的操作状态具体是指从主显示面板6M上显示的内容的角度看的操作状态。

根据用户操作等，成像设备1的操作状态在监视时段、记录时段、预览时段和回放时段之间转变。尽管实践中存在其他操作状态，如成像设备与外部装置通信的时段，但为了简化描述，将省略这样的操作状态。

例如，成像设备1在开机时开始监视操作。然而，例如，如果用户在关机状态下已经选择了回放模式，则成像设备1可在开机时进入回放操作状态。

监视时段是由成像系统2对图像进行成像的操作时段。当用户用成像设备1进行静态图像拍摄时，成像设备1通常先进行监视操作。

在监视时段中，在主显示面板6M上显示对象图像(直通图像)。

也就是说，CPU 31使得成像系统2和相机DSP 4在监视时段中执行各自必要的操作。然后，例如，将从相机DSP 4提供的每帧的图像数据读取到RAM 32中。每帧的图像数据被传递到显示控制器7，使得主显示面板6M显示监视图像。如下文将描述的，可在前显示面板6F上显示监视图像。

在监视时段中，用户在监视主显示面板6M上的监视图像的同时，选择对象或捕捉快门定时。

当用户在监视时段中按下释放钮5a，即操作快门时，操作状态转变为记录时段。

CPU 31进行将在释放定时捕捉的一帧图像数据存储为静态图像数据的处理。也就是说，CPU 31将在相应定时捕捉的图像数据传送到介质接口10，以记录在记录介质90上。

此外，响应于快门释放，可在闪烁ROM 33上而不是在记录介质90上记录图像数据。尽管通常在记录介质90上记录图像数据，但如果其上没有安装记录介质90，则可在闪烁ROM 33上记录图像数据。

从用户角度来看，该记录时段是在快门释放之后紧接着发生的非常短的时段，在此期间，例如，在主显示面板6M上不显示图像或数据。

在响应于快门释放进行记录操作之后紧接着的预定时段，操作状态转变为预览时段。预览时段是在主显示面板6M上显示先前记录操作所记录的图像的时段。即，该时段允许用户在拍摄之后紧接着检查所拍摄的静态图像。

预览时段持续两秒或数秒，并且CPU 31在该时段期间控制主显示面板6M显示所记录的静态图像。

当经过了对预览时段设置的预定时段时，操作状态返回到监视状态，其中CPU 31进行对应于监视时段的控制。

也就是说，通过监视时段、记录时段和预览时段中这样的操作，完成用于拍摄静态图像的一系列操作。

成像设备1还能够拍摄影像(movie)，并且在影像拍摄的情况下，记录时段从影像拍摄的开始持续到结束。此外，不提供预览时段。

当用户进行指示回放操作的操作时，操作状态转变为回放操作状态(回放时段)。

在回放时段中，进行回放在记录介质90或闪烁ROM 33上通过拍摄记录的图像等的操作。

CPU 31根据用户操作读取在记录介质90或闪烁ROM 33上记录的图像，并控制显示控制器7在主显示面板6M上显示缩略图像或单个回放图像。可在前显示面板6F上显示回放图像。

3.两显示面板的屏幕显示例子

将参照图4A至图4C和图5A至图5C，描述根据本实施例由成像设备1在主显示面板6M和前显示面板6F上进行的示例屏幕显示。

图4A至图4C和图5A示出了在监视时段中进行的屏幕显示的例子。

图4A示出了在主显示面板6M上显示监视图像(直通图像)而在前显示面板6F上不显示图像的状态。

图4B示出了在主显示面板6M上显示监视图像并在前显示面板6F上显示同一监视图像的状态。

图4C示出了在主显示面板6M上显示监视图像而在前显示面板6F上显示不同图像(例如，回放图像)的状态。回放图像可以是先前记录在记录介质90或闪烁ROM 33中的图像，或者可以是预先在成像设备1中存储的图像。例如，该例子示出了如下状态，其中，将在监视图像不显示在前显示面板6F上时显示的图像数据被存储在闪烁ROM 33等中，作为预设图像数据，并且该预设图像数据被读取和显示。此外，所显示的数据不限于所记录的图像，而文本数据、动画数据、计算机图形数据等可以被记录在记录介质90或闪烁ROM 33上并显示。也就是说，回放数据包括所有可显示的数据。

图5A示出了在主显示面板6M上不显示图像而在前显示面板6F上显示监视图像的例子。

尽管这些例子可被当作在监视时段中主显示面板6M和前显示面板6F的显示状态例子，但是所显示的内容由CPU 31根据监视时段期间的对象条件、成像设备1的操作条件、拍摄模式等来控制。

图5B和图5C示出了在回放时段中进行的屏幕显示的例子。

图5B示出了按缩略视图在主显示面板6M上显示回放图像，而在前显示面板6F上显示用光标K在缩略图像中选择的回放图像的状态。

图5C示出了在主显示面板6M上显示单个回放图像而在前显示面板6F上显示同一回放图像的状态。

这些例子可被当作在回放时段中主显示面板6M和前显示面板6F的显示状态例子。此外，可配置其他例子。

例如，可考虑如下例子，其中，在主显示面板6M上显示回放图像，而在前显示面板6F上显示预设图像。

此外，可考虑如下例子，其中，在主显示面板6M上缩略图像的列表，而在前显示面板6F上顺序显示(幻灯片形式)回放图像。

尽管图4A至图4C和图5A至图5C中示出了显示例子，但在面对进行拍摄和回放操作的用户的主显示面板6M上的显示基本如下所述进行。

首先，在监视时段中显示监视图像。此外，在预览时段中，将已经记录的图像显示预定时段。

在回放时段中，根据用户操作显示缩略图像或回放图像。

CPU 31进行控制，使得根据操作状态或用户操作，在主显示面板6M上显示这样的图像。

另一方面，对于前显示面板6F，CPU 31进行显示控制，使得显示对前显示面板6F的观看者有用或有趣的图像或数据，或者取消非必要的显示操作。

下面将描述前显示面板6F上的各种显示控制例子。

4.前显示面板在监视期间的显示控制

4-1.基于人识别的示例处理

图6A示出了CPU 31在监视时段中在前显示面板6F上执行的示例显示控制。

如上所述，在监视时段中，在主显示面板6M上显示由成像系统2和相机DSP 4的处理获得的监视图像。也就是说，在监视时段中，CPU 31进行显示控制，使得在主显示面板6M上显示从相机DSP 4提供的图像数据，作为直通图像。

此时，为了进行前显示面板6F上的显示控制，CPU 31与主显示面板6M的显示控制并行地进行图6A中所示的处理。

首先，在步骤F101，CPU 31检查图像分析器44的图像分析结果。图像分析器44对成像系统2在监视时段中成像的并由相机DSP 4接收的图像数据进行图像分析。例如，图像分析器44对图像信号处理器41处理的每帧或间断提取的帧的图像数据进行图像分析。然后，图像分析器44确定在正被分析的图像数据中是否包括可被识别为人的图像。即，确定在图像中是否包括可被识别为人的轮廓。确定结果被提供给CPU 31。在步骤F101，作为确定的结果，CPU 31检查是否识别出人的存在。

当根据图像分析的结果，识别出人的存在时，流程从步骤F102前进到步骤F103，并且CPU 31使得前显示面板6F显示监视图像。也就是说，CPU31指示显示控制器7在前显示面板6F上显示正在主显示面板6M上显示的相同的监视图像。

在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4B所示的状态。

另一方面，当作为步骤F101中图像分析的结果，未检测到人时，流程从F102前进到步骤F104，并且CPU 31关闭前显示面板6F的显示。

在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4A所示的状态。

CPU 31在监视时段中重复执行图6A所示的处理。

例如，监视时段在操作状态响应于快门释放而转变为记录操作时、在操作状态响应于按下回放钮而转变为回放操作时、或者在用户关闭成像设备1时结束。CPU 31重复执行图6A所示的处理，直到监视时段响应于这样的动作而结束。

因而，当用户在监视时段期间将成像设备1朝向某人而使得该人变为对象时，如图4B所示，在前显示面板6F上显示监视图像。另一方面，当用户针对没有任何人的对象场景，如风景时，如图4A所示，前显示面板6F关闭。此外，当在图4A的状态下再次检测出人作为对象时，在前显示面板6F上显示包括人的监视图像。

即，根据该处理例子，当作为被监视的对象的人存在于前侧时，在前显示面板6F上显示监视图像，而当不包括人作为对象时，前显示面板6F关闭。

当人是对象时，该作为对象的人能看到前显示面板6F。因而，用户能从用户正被拍摄的监视图像确认他/她的表情或姿势。因而，用户能有效地利用前显示面板6F的显示，例如，自己确认是否希望该表情作为照片。

另一方面，如果人未作为对象存在，则可确定没有人在观看前显示面板6F。因而，通过关闭前显示面板6F的显示(例如，仅仅关闭前显示面板6F)，可以实现功耗的降低。也就是说，消除了没人在看的非必要显示。

尽管在步骤F101中，基于图像分析确定人是否作为对象存在于前侧，但在步骤F101中可执行检查(check)图2所示的邻近传感器50的检测结果的处理。此外，在步骤F101中可检查图像分析结果和邻近传感器50的检测结果这两者。

此外，尽管在下述图7至图14的处理例子中，基于通过图像分析的脸检测来确定人在前侧的存在，但使用邻近传感器50的变型同样可应用于图7至图14的情况。

尽管图6A所示的处理基于人检测来控制前显示面板6F的显示操作，但也可执行“脸”检测，作为人检测。

例如，图像分析器44确定在图像数据中是否存在可被识别为脸或脸部元素(如眼睛、鼻或嘴)的轮廓，由此确定图像数据中是否包括作为对象的人的“脸”。

图6B中示出了这样的情况下CPU 31的处理。

在步骤F 101中，CPU 31检查图像分析器44的图像分析结果，以确定是否存在“脸”。当检测到“脸”时，流程从步骤F102A前进到步骤F103，并且CPU 31使得前显示面板6F显示监视图像。另一方面，当未检测到“脸”时，流程从步骤F102A前进到步骤F104，并且CPU 31关闭前显示面板6F。

如上所述，可基于脸检测而不是人的整个身体的检测，来检测人在前侧的存在。

图7示出了另一处理例子，其中即使在前侧没有人时，也不关闭前显示面板6F。

步骤F101和F102中的操作与图6A所示的相同。

当确定作为对象的人在前侧存在时，流程前进到步骤F103A，并且CPU31指示显示控制器7在前显示面板6F上以高亮度状态显示监视图像。

当确定没有人在前侧存在作为对象时，流程前进到步骤F104A，并且CPU 31指示显示控制器7在前显示面板6F上以低亮度状态显示监视图像。

也就是说，当存在能看到前显示面板6F的人时，前显示面板6F的显示亮度增加，使得人能容易地看到监视图像。另一方面，当确定在前侧没有人存在时，显示亮度减少，由此实现功耗降低。例如，当使用自发光元件(如有机EL面板)的显示装置被用作前显示面板6F时，减少的显示亮度能有效地降低功耗。

接着，将描述图8所示的处理例子。

步骤F101和F102中的操作与图6A所示的相同。

当确定作为对象的人在前侧存在时，流程前进到步骤F103，并且CPU 31指示显示控制器7在前显示面板6F上显示监视图像。

当确定没有人在前侧存在作为对象时，流程前进到步骤F105，并且CPU31进行读取在记录介质90等上记录的图像数据或预设图像数据的处理。例如，CPU 31指示介质接口10回放来自记录介质90的图像数据(已记录的图像数据等)。可替换地，CPU 31进行从闪烁ROM 33读取预设图像数据或已记录的图像数据的处理。然后，CPU 31指示显示控制器7在前显示面板6F上显示所读取的图像数据。也就是说，类似于图4C所示的例子，在前显示面板6F上显示不同于监视图像的图像。

在此情况下，当人作为对象存在时，类似于图4B所示的例子，该人可监视他/她正被记录的图像。

另一方面，当不存在作为对象的人时，类似于图4C所示的例子，在前显示面板6F上显示与对象无关的图像。在许多情况下，即使在没有人作为对象存在时，也会有人在附近。对于在附近的那些人，前显示面板6F上的显示可被当作成像设备1的有趣外部设计。

此外，在此情况下，通过允许用户选择要在前显示面板6F上显示的图像，用户能自由地自己设置成像设备1的外观，由此拓宽相机使用的乐趣。

在图7和图8所示的处理例子的情况下，可将人识别执行为图6B中描述的脸识别。

此外，从记录介质90读取的用于显示的图像数据可以是文本数据或动画数据。

4-2.基于人识别和用户设置的示例处理

尽管图6至图8示出了基于人在前侧存在的识别结果来控制前显示面板6F的显示状态的例子，但在此段落中，将描述除了人识别之外，还考虑成像设备1上的用户设置状态来进行前显示面板6F的显示控制的例子。

用户设置是指用户选择的设置状态，如拍摄模式设置、闪光设置或变焦位置设置。

图9示出了在监视时段中CPU 31在前显示面板6F上执行的示例显示控制。

在监视时段中，在主显示面板6M上显示由成像系统2和相机DSP 4的处理获得的监视图像。CPU 31与图9所示的处理并行地进行显示控制，使得从相机DSP 4提供的图像数据作为直通图像在主显示面板6M上显示。

此时，为了对前显示面板6F进行显示控制，CPU 31进行图9所示的处理。

在步骤F201中，CPU 31检查图像分析器44的图像分析结果。在此例中，类似于图6B的情况，图像分析器44对在监视时段中由程序系统2记录的并由相机DSP 4接收的图像数据进行图像分析，由此确定图像数据中是否包括作为对象的人的脸。在步骤F201中，作为图像分析器44的图像分析结果，CPU 31检查是否识别出人脸的存在。

当作为图像分析结果识别出人脸的存在时，流程从步骤F202前进到步骤F203，并且CPU 31基于目前用户设置状态是否适合于在前显示面板6F上显示监视图像而分支(branch)其处理。

当确定用户设置适合于在前显示面板6F上显示监视图像时，流程前进到步骤F204，并且CPU 31使得前显示面板6F显示监视图像。也就是说，CPU 31指示显示控制器7在前显示面板6F上显示正在主显示面板6M上显示的相同的监视图像。在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4B所示的状态。

另一方面，当在步骤F201中从图像分析的结果确定在对象图像中不包括人脸时，流程从步骤F202前进到步骤F205，并且CPU 31关闭前显示面板6F的显示。

此外，当在步骤F203中确定用户设置不适合于在前显示面板6F上显示监视图像时，流程前进到步骤F205，并且CPU 31关闭前显示面板6F的显示。

在这样的情况下，主显示面板6M和前显示面板6F的显示状态对应于图4A所示的状态。

CPU 31在监视时段中重复执行图9所示的处理。

因而，在监视时段中，用户移动成像设备1，使得对象图像中包括人脸，并且当用户设置状态在此时处于预定状态时，如图4B所示，在前显示面板6F上显示监视图像。

另一方面，即使当用户针对没有任何人的对象场景(如风景)或人脸是对象时，如果用户设置状态不处于预定状态，则如图4A所示关闭前显示面板6F。

即，根据该处理例子，当在前侧存在作为被监视的对象的人的脸时，以及当根据用户设置状态，认为该对象人能够合适地观看前显示面板6F时，在前显示面板6F上显示监视图像。另一方面，当人脸未被包括为对象，或认为对象人不能合适地观看前显示面板6F时，关闭前显示面板6F。

如上所述，用户设置包括拍摄模式设置、闪光设置和变焦位置设置。将对于每种用户设置描述图9所示的处理的应用。

拍摄模式是用户选择使得可按各种情形适当进行拍摄的模式，包括夜景模式、夜景人像模式、人像模式、风景模式、柔和快照模式、雪天模式、海滩模式、快速快门模式、高灵敏度模式和微笑快门模式。

对于每个拍摄模式，预设了合适的设置，如快门速度、曝光值、图像信号的信号增益，以及如边缘增强或色彩处理的信号处理的设置，并且用户可通过例如操作图1中所示的模式盘5b，选择拍摄模式。

夜景模式是允许用户利用适合于拍摄夜景的设置进行拍摄的拍摄模式。

夜景人像模式是允许用户利用能够以夜景为背景拍摄人的清晰图像(包括人的表情)的设置进行拍摄的拍摄模式。

人像模式是允许用户利用适合于拍摄人的图像的设置进行拍摄的拍摄模式。

风景模式是允许用户利用适合于拍摄风景的设置进行拍摄的拍摄模式。

柔和快照模式是允许用户利用使得能够拍摄具有更柔和更明亮的印象的人的皮肤纹理的图像的设置进行拍摄的拍摄模式。

快速快门模式是允许用户利用适合于拍摄移动对象的设置进行拍摄的拍摄模式。

高灵敏度模式是允许用户在自然氛围下拍摄黑场景而不使用闪光灯的拍摄模式。

微笑快门模式是当在对象人的脸上检测到微笑时自动释放快门的拍摄模式。

将假设，在这些拍摄模式中，例如，CPU 31在步骤F203中确定适合于在前显示面板6F上进行显示的拍摄模式是夜景人像模式、人像模式、柔和快照模式和微笑快门模式。

这些拍摄模式是当拍摄人的图像时被选择的，因此最有可能将人包括为对象。也就是说，很可能能看到前显示面板6F的人作为对象存在。

因而，当在步骤F203中确定拍摄模式是夜景人像模式、人像模式、柔和快照模式和微笑快门模式中的任何一种时，在步骤F204中，CPU 31使得前显示面板6F显示监视图像。

在选择其他拍摄模式，即夜景模式、风景模式、快速快门模式和高灵敏度模式的情况下，可认为用户想要拍摄除了人之外的对象的图像，或者前显示面板6F的可视性较差。

例如，选择夜景模式和风景模式拍摄风景，因此可认为对象图像中没有人存在，或者如果存在，则人不是图像中的主要对象。此外，在夜景模式和高灵敏度模式下，即使有人在前侧并且在前显示面板6F上显示监视图像，在拍摄黑暗场景时获得的监视图像也只对于前侧的人提供较差的可视性。

另外，快速快门模式下的物体将会是移动对象。例如，即使人是对象，人也将处于这样的状况下，例如进行体育比赛或舞蹈，因而将不能平静地观看前显示面板6F。

即，在这样的拍摄模式下，可认为没有人存在于前侧，或者如果存在，人也不能以好的可视性来观看前显示面板6F，或者未在观看前显示面板6F。

因而，当拍摄模式是夜景模式、风景模式、快速快门模式和高灵敏度模式中的任何一个时，即使在步骤F202中检测到人脸，流程也前进到步骤F205，并且CPU 31关闭前显示面板6F。

上述拍摄模式是例子，除了这些拍摄模式之外，可提供其他拍摄模式。例如，可提供适合于拍摄微光(twilight)场景的微光模式、适合于植物或昆虫的近距离拍摄的微距模式、适合于拍摄焰火的焰火模式、适合于水下拍摄的水下模式。此外，可提供允许用户利用能够表达滑雪坡道或雪景的真实色彩的设置进行拍摄的雪天模式，以及允许用户利用能够对海或天空的蓝色清楚成像的设置进行拍摄的海滩模式。

在这样的情况下，可根据人的存在、前显示面板6F上所显示内容的可视性以及对象侧的人的状况，预设在步骤F203中将如何处理各个拍摄模式(确定每个拍摄模式是否属于进行前显示面板6F的显示的预定拍摄模式)。

在用户设置中，可按以上方式处理拍摄模式设置。

在用户设置中，可按以下方式处理闪光设置。闪光设置是用户选择是(闪光：开)否(闪光：关)进行闪光，或者是否自动开启/关闭(闪光：自动)的设置。

当用户选择了闪光开设置时，周围通常较暗。

在黑暗条件下，监视时段中监视图像的亮度较低，因此认为前显示面板6F的显示的可视性较差。

因而，当闪光设置被设为“闪光开”时，流程前进到步骤F205，CPU 31关闭前显示面板6F。

在用户设置中，可按以下方式处理变焦位置设置。变焦位置设置是用户通过操作图1所示的W/T钮5c选择的变焦位置的设置。

例如，即使当人是对象时，当变焦位置与预定比例相比过于接近T侧(远距拍摄)时，可认为对象人远离成像设备1。在此情况下，位于如此远距离的此人将不能合适地观看前显示面板6F上的显示。

因而，当在步骤F203中确定用户选择的变焦位置是预定远距拍摄或更远时，流程前进到步骤F205，CPU 31关闭前显示面板6F的显示。

在图9的步骤F203中，CPU 31基于用户设置进行上述确定，由此可以进行适合于前显示面板6F的显示控制。

即，根据图9所示的处理，当检测到脸并且用户设置是预定状态时，在步骤F204中，在前显示面板6F上显示监视图像。换言之，当人是对象并且认为人能够合适地观看监视图像时，在前显示面板6F上显示监视图像。

因而，对象人能从显示该人正在被拍摄的监视图像的前显示面板6F确认他/她的表情或姿态。

另一方面，当人未作为对象存在，或者如果存在但认为不必在前显示面板6F上显示监视图像时，关闭前显示面板6F的显示(例如，仅仅关闭前显示面板6F)。通过这样做，可以更合适地实现功耗降低。

可基于部分或全部的上述用户设置：拍摄模式设置、闪光设置和变焦位置设置来进行步骤F203的上述确定。

作为用户设置，除了上述设置之外，可考虑其他设置，如灵敏度设置、曝光设置、手抖动模糊校正开/关设置或特殊拍摄设置。对于每种设置，可确定对象人是否被认为能够合适地观看前显示面板6F的显示，并且可在步骤F203的确定上反映该确定结果。

图10示出了另一处理例子。图10示出了对应于以下情况的处理，其中，允许用户选择自拍模式作为上述拍摄模式之一。自拍模式是用户在成像设备1的前面拍摄他/她的图像的拍摄模式。

图10中的步骤F201至F205中的操作与图9所示的步骤F201至F205的相同。当拍摄模式被设置为自拍模式时，流程从步骤F203前进到步骤F204，而不考虑其他用户设置，并且CPU 31进行步骤F204的操作。

当拍摄模式被设置为不同于自拍模式的其他模式时，进行与图9相同的处理。

当拍摄模式被设置为自拍模式时，在步骤F204中，CPU 31进行在前显示面板6F上显示监视图像的显示控制，然后流程从步骤F210前进到步骤F211，并且CPU 31关闭主显示面板6M的显示。

也就是说，当选择自拍模式作为用户设置时，前显示面板6F和主显示面板6M的显示状态对应于如图5A所示的状态。

在自拍模式的情况下，用户在成像设备1的前面进行拍摄，因此不能看到主显示面板6M。因而，在前显示面板6F上显示监视图像，使得用户能从前显示面板6F监视对象。此外，关闭主显示面板6M，由此实现功耗降低。

图9和图10所示的处理可以进行修改，使得在步骤F205中不是关闭前显示面板6F的显示，而是可以如参照图7所述以低亮度状态显示图像，或者可如参照图8所述显示回放图像或预设图像。

4-3.基于人识别和内部检测信息的示例处理

接着，将描述以下例子，其中，除了人识别之外，基于由成像设备1内部检测到的相机检测信息(内部检测信息)进行前显示面板6F的显示控制。

这里所使用的相机检测信息是指成像设备1的内部传感器检测到的信息或者伴随成像设备1的操作控制CPU 31可以识别出的信息。例如，相机检测信息可以是环境光强度信息(其用于控制闪光或曝光)、变焦位置信息、聚焦信息或手抖动模糊检测信息。

图11示出了CPU 31在监视时段中对前显示面板6F执行的示例显示控制。

在监视时段中，与在主显示面板6M上显示从相机DSP 4提供的图像数据作为直通图像的显示控制并行地，CPU 31进行图11所示的处理，以便对前显示面板6F进行显示控制。

在步骤F301中，CPU 31检查图像分析器44的图像分析结果。在此例中，图像分析器44对成像系统2在监视时段中记录的并且由相机DSP 4接收的图像数据进行图像分析，由此确定图像数据中是否包括作为对象的人的脸。

在步骤F301中，作为图像分析器44的图像分析结果，CPU 31检查是否识别出人脸的存在。

当作为图像分析结果识别出人脸的存在时，流程从步骤F302前进到步骤F303，并且CPU 31检查预定相机检测信息，并基于相机检测信息是否适合于在前显示面板6F上显示监视图像而分支其处理。

当从相机检测信息确定目前的状态适合于在前显示面板6F上显示监视图像时，流程前进到步骤F304，并且CPU 31使得前显示面板6F显示监视图像。也就是说，CPU 31指示显示控制器7在前显示面板6F上显示与正在主显示面板6M上显示的相同的监视图像。在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4B所示的状态。

另一方面，当在步骤F301中从图像分析的结果确定在对象图像中不包括人脸时，流程前进到步骤F305，并且CPU 31关闭前显示面板6F的显示。

此外，当在步骤F303中从相机检测信息确定目前的状态不适合于在前显示面板6F上显示监视图像时，流程前进到步骤F305，并且CPU 31关闭前显示面板6F的显示。

在这样的情况下，主显示面板6M和前显示面板6F的显示状态对应于图4A所示的状态。

CPU 31在监视时段中重复执行图9所示的处理。

因而，在监视时段中，用户移动成像设备1，使得对象图像中包括人脸，并且当通过相机检测信息识别出的状态在此时处于预定状态时，如图4B所示，在前显示面板6F上显示监视图像。

另一方面，即使当用户针对没有任何人的对象场景(如风景)或人脸是对象时，如果通过相机检测信息识别出的状态不处于预定状态，则如图4A所示关闭前显示面板6F。

即，根据该处理例子，当在前侧存在作为被监视的对象的人脸时，以及当根据相机检测信息，认为对象人能够合适地观看前显示面板6F时，在前显示面板6F上显示监视图像。另一方面，当不包括作为对象的人脸，或认为对象人不能合适地观看前显示面板6F时，关闭前显示面板6F。

例如，相机检测信息是如上所述的环境光强度检测信息、变焦位置信息、对象距离信息、聚焦信息和手抖动模糊检测信息。按以下方式进行基于相机检测信息的步骤F303的确定。

可从图像数据的平均亮度值，或通过对屏幕图像的部分区域加权而获得的平均加权亮度值，来检测环境光强度。这些值通常用于自动曝光控制或在自动闪光设置的情况下用于闪光照明控制。例如，由相机DSP 4的图像信号处理器41计算这些亮度值，并且CPU 31可获得这样的信息。

尽管图2中未示出，但可提供环境光强度传感器等，以直接检测环境光强度。

如果这些方法检测到的环境光强度较低，则可认为图像的亮度低，由此，即使在前显示面板6F上显示监视图像，也不能获得良好的可视性。此外，如果环境光强度水平过高，如在所谓逆光(counterlight)状态下，则可认为用户不能合适地观看前显示面板6F上的监视图像。

因而，即使检测到脸，如果确定环境光强度低于预定水平或者对应于逆光状态，则CPU 31也确定不适合在前显示面板6F上显示监视图像。然后，流程从步骤F303前进到步骤F305，CPU 31关闭前显示面板6F的显示。

对于变焦位置信息，CPU 31可通过根据用户操作控制变焦透镜，来检测变焦位置。此外，即使人是对象，当变焦位置与预定比例相比过于接近T侧(远距拍摄)时，可认为对象人远离成像设备1。也就是说，在此情况下，可认为该对象人不能合适地观看前显示面板6F上的显示。

因而，当在步骤F303中确定变焦位置是处于预定远距拍摄(telephoto)位置或更远时，流程前进到步骤F305，CPU 31关闭前显示面板6F的显示。

对象距离信息是关于从成像设备1到对象的距离的信息，例如，CPU 31可通过使用如上所述来自透镜位置检测器27的信息来获得对象距离信息。

例如，即使当人是对象时，如果从对象距离信息确定对象人远离成像设备1，则可认为位于该对象人不能合适地观看前显示面板6F上的显示。

因而，当在步骤F303中根据对象距离信息确定对象处于预定距离或更远时，流程前进到步骤F305，CPU 31关闭前显示面板6F的显示。

聚焦信息是用于图像信号处理器41中的自动聚焦处理的聚焦确定信息。

当不在聚焦状态(focused state)下时，CPU 31确定不能显示监视图像。然后，流程从步骤F303前进到步骤F305，CPU 31可以关闭前显示面板6F的显示。也就是说，仅仅在聚焦状态下才在前显示面板6F上显示监视图像。

模糊检测信息是手抖动模糊或成像设备1的移动的检测信息。例如，CPU31可以获得作为来自模糊检测器13的信息的模糊检测信息。

当手抖动模糊过大，或者用户正在跟踪移动对象从而成像设备1在移动时，用户可能不能合适地观看前显示面板6F上的监视图像。因而，当在步骤F303中从模糊检测信息确定模糊或成像设备1的移动过大时，流程可前进到步骤F305，并且CPU 31可关闭前显示面板6F的显示。

在图11的步骤F303中，CPU 31基于相机检测信息进行上述确定，由此可以进行适合于前显示面板6F的显示控制。

即，根据图11所示的处理，当检测到脸并且相机检测信息是预定状态时，即当人是对象并且认为人能够合适地观看监视图像时，在前显示面板6F上显示监视图像。

因而，对象人能从显示该人正在被拍摄的监视图像的前显示面板6F确认他/她的表情或姿态。

另一方面，当不存在作为对象的人，或者如果存在但认为不必在前显示面板6F上显示监视图像时，关闭前显示面板6F的显示。通过这样做，可以更合适地实现功耗降低。

图11中示出的处理例子可以修改，使得不在步骤F305中关闭前显示面板6F的显示，而是可以如参照图7所述以低亮度状态显示图像，或者可如参照图8所述显示回放图像或预设图像。

4-4.基于人识别和其他图像分析信息的示例处理

接着，将描述以下例子，其中，除了人识别之外，基于由作为图像分析器44进行图像分析的结果而获得的各种分析结果信息进行前显示面板6F的显示控制。

根据图像分析器44的图像分析处理，除了人识别和脸识别之外，可获得各种图像识别结果。例如，可获得关于环境光强度的确定信息。此外，可通过进行帧间运动检测或分析每像素的模糊量，检测成像设备1相对于对象的移动量。

作为在检测脸图像时进行的图像识别处理，作为分析结果可获得屏幕图像中脸的大小(脸部分占据一帧图像的百分比)、脸的朝向或目光方向。

在此例中，将描述通过这样的方法获得的各种图像分析结果用于显示控制的情况。

图12示出了CPU 31在监视时段中对前显示面板6F执行的示例显示控制。

在监视时段中，与在主显示面板6M上显示监视图像的显示控制并行地，CPU 31进行图12所示的处理，以便对前显示面板6F进行显示控制。

在步骤F401中，CPU 31检查图像分析器44的图像分析结果。在此例中，图像分析器44对成像系统2在监视时段中记录的并且由相机DSP 4接收的图像数据进行图像分析，由此确定图像数据中是否包括人脸作为对象。

在此例中，图像分析器44不仅进行脸检测的处理，还进行如上所述的各种图像识别处理。

在步骤F401中，CPU 31检查图像分析器44的各种图像分析结果。

然后，作为图像分析结果之一，CPU 31在步骤F402中确定是否检测到人脸的存在，并且如果检测到存在，则流程前进到步骤F403。

在步骤F403中，CPU 31检查另一图像分析结果，并基于图像分析结果是否适合于在前显示面板6F上显示监视图像而分支其处理。

即，当从各种图像分析结果确定目前的状态适合于在前显示面板6F上显示监视图像时，流程前进到步骤F404，并且CPU 31使得前显示面板6F显示监视图像。也就是说，CPU 31指示显示控制器7在前显示面板6F上显示与正在主显示面板6M上显示的相同的监视图像。在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4B所示的状态。

另一方面，当在步骤F401中从图像分析的结果确定在对象图像中不包括人脸时，流程前进到步骤F405，并且CPU 31关闭前显示面板6F的显示。

即使当检测到人脸时，如果在步骤F403中从另一分析结果确定目前的状态不适合于在前显示面板6F上显示监视图像，则流程前进到步骤F405，并且CPU 31关闭前显示面板6F的显示。

在此情况下，主显示面板6M和前显示面板6F的显示状态对应于图4A所示的状态。

CPU 31在监视时段中重复执行图9所示的处理。

因而，在监视时段中，用户移动成像设备1，使得对象图像中包括人脸，并且当各种图像分析结果识别出的状态在此时处于预定状态时，如图4B所示，在前显示面板6F上显示监视图像。

另一方面，即使当用户针对没有任何人的对象场景(如风景)或人脸是对象时，如果各种图像分析结果识别出的状态不处于预定状态，则如图4A所示关闭前显示面板6F。

下面将描述与脸的存在之外的图像分析结果对应的步骤F403的处理例子。

作为图像分析结果，可检测环境光强度。如上面结合相机检测信息描述的，当环境光强度较低或尤其高(如在所谓逆光状态下)，可认为用户不能合适地观看前显示面板6F上的监视图像。

因而，即使检测到脸，如果确定环境光强度低于预定水平或者对应于逆光状态，则CPU 31也确定不适合在前显示面板6F上显示监视图像。流程前进到步骤F405，CPU 31关闭前显示面板6F的显示。

此外，作为图像分析结果，可检测成像设备1相对于对象的移动量。也就是说，可考虑成像设备1自身正在抖动或移动(用户在移动成像设备1)的情况、对象在移动的情况、或者成像设备1和对象两者均在移动的情况。

在这样的情况下，如果移动量过大，则可认为当有人作为对象存在时，该人将不可能观看前显示面板6F。

因而，当在步骤F403中确定成像设备1相对于对象的移动量较大时，流程前进到步骤F405，并且CPU 31可关闭前显示面板6F的显示。

根据图像分析结果，不仅可以检测脸，还可检测脸的大小(脸部分在屏幕图像中的百分比)。

尽管脸大小随着变焦位置而改变，预定变焦位置处的脸大小充当用于确定从成像设备1到对象人的距离的指示之一。

例如，如果变焦位置位于宽广(wide)位置，则当脸被记录得较小时，可认为人在远距离处。

因而，在步骤F403中，CPU 31考虑变焦位置基于脸大小而确定对象人的距离。当确定人在远到不能观看前显示面板6F上显示的内容的距离时，在步骤F405中，CPU 31可关闭前显示面板6F的显示。

此外，作为图像分析结果，可识别脸的朝向或目光方向。

当脸不朝向图像的前侧或者目光方向不在向前的方向上时，对象人将不能观看成像设备1。即，可确认人未在观看前显示面板6F。

因而，CPU 31在步骤F403中检查脸的朝向或目光方向。当确定人未在观看前显示面板6F上所显示的内容时，在步骤F405中，CPU 31可关闭前显示面板6F的显示。

在图12的步骤F403中，CPU 31基于图像分析结果进行上述确定，由此可以进行适合于前显示面板6F的显示控制。

即，根据图12所示的处理，当检测到脸并且根据其他图像分析结果确定目前的状态是预定状态时，即当人是对象并且认为人能够合适地观看(或看到)监视图像时，在前显示面板6F上显示监视图像。

因而，对象人能从显示该人正在被拍摄的监视图像的前显示面板6F确认他/她的表情或姿态。

另一方面，当不存在作为对象的人，或者如果存在但认为不必在前显示面板6F上显示监视图像时，关闭前显示面板6F的显示。通过这样做，可以更合适地实现功耗降低。

图12中示出的处理例子可以修改，使得不在步骤F405中关闭前显示面板6F的显示，而是可以如参照图7所述以低亮度状态显示图像，或者可如参照图8所述显示回放图像或预设图像。

图13示出了图12所示处理例子的修改，其可在拍摄模式被设置为微笑快门模式时应用。

图13的步骤F401至F405中的操作与图12所示相同。尽管图12未描述用户的释放操作(其触发至拍摄时段的转变)，但图13中包括了转变到拍摄时段的处理。

作为图像分析的结果，除了脸检测和上述各种检测外，还可检测对象人的表情。

因而，当响应于对象人的存在或其他分析结果而在前显示面板6F上显示监视图像时，在步骤F410中，CPU 31检查对象人表情的确定结果。

当通过表情确定作为图像分析结果检测到笑脸时，流程自动前进到步骤F412，并且CPU 31进行释放操作，即记录此时的图像数据。

当用户手动进行释放操作时，流程从步骤F411前进到步骤F412，并且进行释放处理。

通过在前显示面板6F上显示监视图像并进行微笑快门模式下的处理，对象人能够在前显示面板6F上监视他/她的表情的同时，记录他/她带笑脸的图像。

5.前显示面板在回放期间的显示控制

尽管上文已经描述了在监视时段中前显示面板6F的控制处理例子，下面将描述在回放时段中前显示面板的示例显示控制。

如结合图3所述，当用户进行指示回放操作的操作时，操作状态转变至回放操作状态(回放时段)。在回放时段中，进行回放在记录介质90或闪烁ROM 33上记录的图像的操作。

CPU 31根据用户操作读取记录介质90或闪烁ROM 33上记录的图像，并控制显示控制器7在主显示面板6M上显示缩略图像或单个回放图像。

此时，对于前显示面板6F，CPU 31执行图14中所示的处理。

即，在回放时段中，在步骤F501中，CPU 31检查图像分析器44的图像分析结果。

尽管通常成像系统2和相机DSP 4在回放时段中不必进行成像处理，但在进行此例的处理的情况下，将假设成像系统2和相机DSP 4进行成像处理。此外，图像分析器44对于由成像系统2记录并由相机DSP 4接收的图像数据进行图像分析，由此确定在对象方向上是否有人存在。

在步骤F501中，CPU 31检查图像分析器44的图像分析结果，并且当检测到人脸的存在时，流程从步骤F502前进到步骤F503。

在此情况下，CPU 31基于主显示面板6M上目前的回放显示状态，分支其处理。也就是说，基于在主显示面板6M上以缩略视图显示回放图像，还是在主显示面板6M上显示单个图像，分支处理。

当目前正在主显示面板6M上显示单个回放图像时，流程前进到步骤F504，并且CPU 31指示显示控制器7在前显示面板6F上显示相同的回放图像数据。在此情况下，主显示面板6M和前显示面板6F的显示状态对应于如图5C所示的状态。

另一方面，目前正在主显示面板6M上显示缩略图像的列表，CPU 31使得流程前进到步骤F505。在此情况下，CPU 31指示显示控制器7在前显示面板6F上显示用光标K在缩略列表视图上选择的回放图像数据。在此情况下，主显示面板6M和前显示面板6F的显示状态对应于如图5B所示的状态。

当在回放期间，在步骤F502中未检测到人脸存在时，流程从步骤F502前进到步骤F506，并且CPU 31关闭前显示面板6F。

通过执行这样的处理，位于前侧的人能够在前显示面板6F上看到相同的回放图像。因而，成像设备1的用户和位于前侧的人能享受到相同的回放图像。

此外，当如图5B所示在主显示面板6M上显示缩略图像的列表时，成像设备1的用户可移动光标K，使得位于前侧的人能在前显示面板6F上看到所选的回放图像。

另外，当没有人在前侧时，可以通过关闭前显示面板6F，实现功耗降低。

图14中示出的处理例子可以修改，使得不在步骤F506中关闭前显示面板6F的显示，而是可以如参照图7所述以低亮度状态显示图像，或者可显示特殊回放图像或预设图像。

6.变型

尽管已经描述了根据实施例和变型的各种处理例子，但还可考虑其他多种变型，作为本发明的实施例。

尽管在图9至图14中示出的处理例子中，基于通过图像分析获得的脸检测结果，确定在前侧是否存在能够观看前显示面板6F的人，但可基于人检测(图像中人身体的检测)而不是脸检测来进行确定。此外，可基于邻近传感器50的检测结果来进行确定。

此外，当没有人在前侧存在，或者如果存在，但认为该人不能观看或未在观看前显示面板6F时，用户可选择是否将关闭前显示面板6F，是否将以低亮度状态显示图像，以及是否将显示回放图像或预设图像。

已经关于以下例子描述了上述实施例：在通过脸识别等检测到人的存在的情况下，基于用户设置状态和相机检测信息(内部检测信息)，或者结合其他图像分析结果，进行前显示面板6F的显示控制。可进一步组合该信息。

例如，可考虑如下例子，其中，基于人检测结果、用户设置状态和相机检测信息，进行前显示面板6F的显示控制。

此外，可考虑如下例子，其中，基于人检测结果、用户设置状态和通过不同于人识别的处理获得的图像分析结果，进行前显示面板6F的显示控制。

此外，可考虑如下例子，其中，基于人检测结果、相机检测信息和通过不同于人识别的处理获得的图像分析结果，进行前显示面板6F的显示控制。

此外，可考虑如下例子，其中，基于人检测结果、用户设置状态、相机检测信息和通过不同于人识别的处理获得的图像分析结果，进行前显示面板6F的显示控制。

尽管已经关于静态图像拍摄描述本实施例，但本发明可应用于影像拍摄。

在影像拍摄的情况下，监视时段对应于拍摄之前的待机(standby)时段。此外，记录时段对应于从记录开始到结束的影像记录时段。

因而，在待机时段或记录时段中，可基于人检测结果、用户设置状态和相机检测信息，或者结合其他图像分析结果，进行前显示面板6F的影像显示控制。

在本实施例中，尽管通常称为数码相机的设备被例示为成像设备1，但本发明可应用于各种设备，如摄像机，或具有成像能力的蜂窝电话和PDA(个人数字助手)。

本申请包含关于在2008年11月5日向日本特许厅提交的日本优先权专利申请JP 2008-284292中公开的主题，其全部内容通过引用合并于此。

本领域技术人员应理解，根据设计需求和其他因素，可进行各种修改、组合、子组合和替换，只要它们在所附权利要求及其等价物的范围内即可。

Claims (15)

1.一种成像设备，包括：

第一显示面板，其被安装在设备外壳上，以便在向着用户的方向上显示图像或数据；

第二显示面板，其被安装在设备外壳上，以便在向着对象的方向上显示图像或数据；

成像处理器，其对来自对象方向的入射光进行光电转换以获得图像信号；

人检测器，其检测在对象方向上是否有人存在；以及

控制器，其允许在第一显示面板上显示基于成像处理器获得的图像信号的图像或数据，并至少根据所述人检测器的检测结果，控制在第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作，

其中，当所述人检测器检测到人的存在，并且判断为所述人检测器检测到的人能够适合地观看图像时，所述控制器进行控制使得在所述第二显示面板上显示所述基于成像处理器获得的图像信号的图像或数据，

其中，当所述人检测器未检测到人的存在时，以及当所述人检测器检测到人的存在然而判断为所述人检测器检测到的人不能够适合地观看图像时，所述控制器进行控制使得不在所述第二显示面板上显示图像或数据。

2.根据权利要求1的成像设备，

还包括图像分析器，用于分析所述成像处理器所获得的图像信号，其中，所述图像分析器还检测所述成像设备相对于对象的移动量，以及

所述控制器基于作为所述图像分析器的图像分析结果而获得的成像设备相对于对象的移动量，来判断所述人检测器检测到的人是否能够适合地观看图像。

3.根据权利要求1的成像设备，其中，当所述人检测器未检测到人的存在时，所述控制器进行控制使得在所述第二显示面板上以与正常显示操作相比的低亮度状态显示所述基于成像处理器获得的图像信号的图像或数据。

4.根据权利要求1的成像设备，还包括图像数据读取器，其读取在记录介质上记录的图像数据，

其中当所述人检测器未检测到人的存在时，所述控制器进行控制使得在所述第二显示面板上显示基于所述图像数据读取器读取的图像数据的图像或数据。

5.根据权利要求1的成像设备，其中，所述控制器根据所述人检测器的检测结果和关于所述成像设备的操作的用户选择的设置，控制在所述第二显示面板上显示所述基于成像处理器获得的图像信号的图像或数据的操作。

6.根据权利要求1的成像设备，其中，所述控制器根据所述人检测器的检测结果和由所述成像设备内部地检测的内部检测信息，控制在所述第二显示面板上显示所述基于成像处理器获得的图像信号的图像或数据的操作。

7.根据权利要求1的成像设备，其中，所述控制器根据所述人检测器的检测结果和通过分析所述成像处理器获得的图像信息而获得的图像分析信息，控制在所述第二显示面板上显示所述基于成像处理器获得的图像信号的图像或数据的操作。

8.根据权利要求1的成像设备，其中，所述人检测器通过对所述成像处理器获得的图像信号进行图像分析，检测在对象方向上是否有人存在。

9.根据权利要求8的成像设备，其中所述人检测器通过基于对所述成像处理器获得的图像信号的图像分析的结果而确定图像信号中是否包括作为对象的人的脸，来进行人检测。

10.根据权利要求1的成像设备，其中，所述人检测器由检测在对象方向上人的存在的邻近传感器构成。

11.根据权利要求1的成像设备，还包括图像数据读取器，其读取在记录介质上记录的图像数据，

其中所述控制器允许在所述第一显示面板上显示基于图像数据读取器读取的图像数据的图像或数据，并至少根据所述人检测器的检测结果，控制在所述第二显示面板上显示所述基于图像数据读取器读取的图像数据的图像或数据的操作。

12.根据权利要求11的成像设备，其中当在所述第一显示面板上显示基于图像数据读取器读取的多个图像数据的图像或数据时，所述控制器允许在所述第二显示面板上显示基于从正在所述第一显示面板上显示的多个图像数据中选择的图像数据的图像或数据。

13.一种成像设备，包括：

成像处理器，其对通过透镜系统进入的入射光进行光电转换以获得图像信号；

第一显示面板；

第二显示面板，其被布置在设备外壳的所述入射光入射的表面中的与所述第一显示面板相对的表面上；

人检测器，其检测在对象方向是是否有人存在；以及

控制器，其允许在所述第一显示面板上显示基于成像处理器获得的图像信号的图像或数据，并至少根据所述人检测器的检测结果，控制在所述第二显示面板上显示基于成像处理器获得的图像信号的图像或数据的操作，

其中，当所述人检测器检测到人的存在，并且判断为所述人检测器检测到的人能够合适地观看图像时，所述控制器进行控制使得在所述第二显示面板上显示所述基于成像处理器获得的图像信号的图像或数据，

其中，当所述人检测器未检测到人的存在时，以及当所述人检测器检测到人的存在然而判断为所述人检测器检测到的人不能够合适地观看图像时，所述控制器进行控制使得不在所述第二显示面板上显示图像或数据。

14.一种成像设备中的显示控制方法，包括步骤：

检测在对象方向上是否有人存在；

允许在被安装在设备外壳上以便在用户方向上显示图像或数据的第一显示面板上，显示基于通过对来自所述对象方向的入射光进行光电转换而获得的图像信号的图像或数据；以及

至少根据人检测步骤中的检测结果，控制在被安装在所述设备外壳上以便在对象方向上显示图像或数据的第二显示面板上显示基于所述图像信号的图像或数据的操作，

其中，在控制步骤中，当在检测步骤中检测到人的存在，并且判断为所述检测步骤检测到的人能够合适地观看图像时，进行控制使得在所述第二显示面板上显示所述基于图像信号的图像或数据，

其中，当所述检测步骤未检测到人的存在时，以及当所述检测步骤检测到人的存在然而判断为所述检测步骤检测到的人不能够合适地观看图像时，进行控制使得不在所述第二显示面板上显示图像或数据。

15.一种成像设备中的显示控制方法，包括步骤：

检测在对象方向上是否有人存在；

允许在第一显示面板上，显示基于通过对经过透镜系统进入的入射光进行光电转换而获得的图像信号的图像或数据；以及

至少根据人检测步骤中的检测结果，控制在被安装在设备外壳的所述入射光入射的表面中的与所述第一显示面板相对的表面上的第二显示面板上显示基于所述图像信号的图像或数据的操作，

其中，在控制步骤中，当在检测步骤中检测到人的存在，并且判断为所述检测步骤检测到的人能够合适地观看图像时，进行控制使得在所述第二显示面板上显示所述基于图像信号的图像或数据，

其中，当所述检测步骤未检测到人的存在时，以及当所述检测步骤检测到人的存在然而判断为所述检测步骤检测到的人不能够合适地观看图像时，进行控制使得不在所述第二显示面板上显示图像或数据。

Images