CN107306336A - 摄像装置和摄像方法 - Google Patents

Abstract

本发明提供摄像装置和摄像方法。摄像装置(100)具有：摄像部(102)，其对对象物进行摄像而得到所述对象物的图像数据；显示部(104)，其显示基于所述图像数据的图像；图像分析部(1124)，其对所述图像数据的特征进行分析；以及辅助图像生成部(1125)，其根据分析出的所述图像数据的特征，决定对所述显示部中显示的图像中的所述对象物的焦点状态的确认有用的至少一个适用处理，根据所决定的适用处理设定所述摄像部的摄像条件，然后使所述摄像部进行工作，生成辅助图像。

Description

摄像装置和摄像方法

技术领域

本发明涉及摄像装置和摄像方法。

背景技术

公知有如下技术：在摄像装置中，为了容易进行显示部中显示的图像的焦点状态的确认，例如在手动对焦时，放大实时取景画面显示的图像的一部分区域。与该技术相关联，例如，日本特开2014-53666号公报的数字照相机根据被放大的区域中是否包含焦点调节所使用的区域的判定结果，切换是否对图像中被放大的区域进行超解析度处理。

发明内容

在日本特开2014-53666号公报的技术中，在被放大的区域中包含焦点调节所使用的区域的情况下，不进行超解析度处理。但是，根据状况，实施包含超解析度处理的各种处理有时对焦点状态的确认是有用的。

本发明是鉴于所述情况而完成的，其目的在于，提供能够自适应地实施对焦点状态的确认有用的处理的摄像装置和摄像方法。

为了实现所述目的，第1方式的摄像装置具有：摄像部，其对对象物进行摄像而得到与所述对象物相关的图像数据；显示部，其显示基于所述图像数据的图像；图像分析部，其对所述图像数据的特征进行分析；以及辅助图像生成部，其根据分析出的所述图像数据的特征，决定对所述显示部中显示的图像中的所述对象物的焦点状态的确认有用的至少一个适用处理，根据所决定的适用处理设定所述摄像部的摄像条件，然后使所述摄像部进行工作，生成辅助图像。

为了实现所述目的，第2方式的摄像方法具有以下步骤：通过摄像部对对象物进行摄像而得到所述对象物的图像数据；在显示部中显示基于所述图像数据的图像；对所述图像数据的特征进行分析；根据分析出的所述图像数据的特征，决定对所述显示部中显示的图像中的所述对象物的焦点状态的确认有用的至少一个适用处理；以及根据所决定的适用处理设定所述摄像部的摄像条件，然后使所述摄像部进行工作，生成辅助图像。

附图说明

图1是示出本发明的一个实施方式的摄像装置的一例的结构的框图；

图2是示出本发明的一个实施方式的摄像装置的主处理的流程图；

图3是示出辅助图像生成处理的流程图；

图4是示出适用处理的决定处理的流程图；

图5是示出辅助图像生成处理的概要的图；

图6是用于说明辅助图像生成处理的具体例的图。

具体实施方式

下面，参照附图对本发明的实施方式进行说明。图1是示出本发明的一个实施方式的摄像装置的一例的结构的框图。图1所示的摄像装置100例如是数字照相机、带照相机功能的便携电话机、智能手机这样的各种便携终端设备。图1所示的摄像装置100具有摄像部102、显示部104、临时记录部106、记录部108、操作部110、控制部112。

摄像部102具有摄像光学系统102a、摄像元件102b、驱动部102c。摄像光学系统102a具有光圈和镜头等，使来自未图示的被摄体的光束入射到摄像元件102b。摄像光学系统102a包含用于调节合焦状态的对焦镜头。摄像元件102b例如包含CMOS图像传感器或CCD图像传感器，对被摄体进行摄像，取得被摄体的图像数据。摄像元件102b也可以包含相位差检测像素，以使得能够进行与拍摄对象物之间的距离检测。并且，本实施方式中的摄像元件102b构成为能够在与摄像光学系统102a的光轴垂直的平面内移动。驱动部102c根据控制部112的控制，在其光轴方向上驱动摄像光学系统102a的对焦镜头，或者驱动摄像元件102b。

显示部104例如是液晶显示器或有机EL显示器，显示基于由摄像部102取得的图像数据的图像等各种图像。这里，本实施方式中的显示部104也可以构成为窥视式的电子取景器。

临时记录部106是RAM等易失性存储器，是用于临时记录各种数据的记录介质。在临时记录部106中临时记录例如辅助图像生成用的图像数据。

记录部108是闪存等非易失性存储器，是用于记录各种数据的记录介质。在记录部108中记录例如作为拍摄动作的结果而得到的图像文件。并且，在记录部108中记录摄像装置100的控制所使用的程序。

操作部110是用于供用户进行摄像装置100的操作的操作部件。操作部110具有电源开关、释放按钮等作为操作部件。电源开关是用于给出摄像装置100的电源的接通/断开的指示的操作部件。释放按钮是用于给出拍摄开始的指示的操作部件。并且，操作部110也可以具有触摸面板等其他操作部件。进而，在本实施方式中，操作部110具有手动对焦(MF)操作部110a。MF操作部110a是用于供用户手动进行摄像光学系统102a的焦点调节的操作部件。MF操作部110a例如是在收纳摄像光学系统102a的镜筒的周围形成的对焦环。但是，MF操作部110a不限于对焦环。当然，为了容易进行观察，也可以不是手动而是自动控制，控制对象也不限于对焦。根据需要，在控制部中搭载这样的控制用电路即可。

控制部112是CPU和ASIC等控制电路，对摄像装置100的动作进行总括控制。控制部112具有作为摄像控制部1121的功能、作为显示控制部1122的功能、作为图像处理部1123的功能、作为图像分析部1124的功能、作为辅助图像生成部1125的功能。这里，控制部112的各功能可以通过一个硬件或软件来实现，也可以通过多个硬件或软件来实现。并且，一部分功能也可以独立于控制部112进行设置。

摄像控制部1121对基于摄像部102的被摄体的摄像动作和来自摄像部102的图像数据的读出动作进行控制。

显示控制部1122进行在显示部104中显示各种图像时的控制。

图像处理部1123对图像数据进行各种图像处理。该图像处理包含白平衡处理、灰度校正处理等。并且，该图像处理包含对多个图像数据进行合成的合成处理。

图像分析部1124进行图像数据的特征的分析。图像数据的特征例如包含亮度、对比度、颜色、图像数据中的特定对象物的运动。特定对象物例如是图像数据中认为重要的对象物。例如，如果拍摄对象物是人物，则认为重要的对象物是面部。除此之外，认为重要的对象物存在于图像数据的中央部，或者近距离存在。

辅助图像生成部1125生成辅助图像。辅助图像是用于辅助用户进行对象物的焦点状态的确认的图像。在后面详细说明，但是，根据由图像分析部1124分析出的图像数据的特征、操作和操作状态的特征、设备的特征、控制的对象中的至少任意一方生成辅助图像。

接着，对本实施方式的摄像装置的动作进行说明。图2是示出本实施方式的摄像装置的主处理的流程图。以控制部112为主体来进行图2的处理。并且，在以下的说明中，摄像装置100具有拍摄模式和再现模式作为动作模式。拍摄模式是用于将通过拍摄得到的图像记录在记录部108中的模式。再现模式是用于再现通过拍摄模式记录的图像的模式。当然，摄像装置100也可以具有拍摄模式和再现模式以外的模式作为动作模式。例如，通过用户对操作部110的操作来进行动作模式的设定。

例如，摄像装置100的电源被接通，由此开始进行图2的处理。在步骤S1中，控制部112判定摄像装置100的动作模式是否是拍摄模式。在步骤S1中判定为摄像装置100的动作模式是拍摄模式时，处理转移到步骤S2。在步骤S1中判定为摄像装置100的动作模式不是拍摄模式、即是再现模式时，处理转移到步骤S13。

在步骤S2中，控制部112开始进行基于摄像部102的摄像动作并取得图像数据，以进行实时取景画面显示。在步骤S3中，控制部112进行实时取景画面显示。作为实时取景画面显示，控制部112对通过步骤S2的摄像部102的动作而取得的图像数据实施图像处理。然后，控制部112使显示部104依次显示基于图像处理后的图像数据的实时取景画面。在这种实时取景画面显示开始后，处理转移到步骤S4。

在步骤S4中，控制部112判定用户是否对摄像装置100进行了设定指示。例如，通过显示部104中显示的菜单画面上的用户对操作部110的操作来进行设定指示。该设定指示例如包含摄像装置100的对焦模式的变更的指示。对焦模式至少包含伴有基于用户的合焦操作的MF模式。在步骤S4中判定为用户进行了设定指示时，处理转移到步骤S5。在步骤S4中判定为用户未进行设定指示时处理转移到步骤S6。

在步骤S5中，控制部112根据用户的设定，对摄像装置100的各种设定进行变更。在设定变更后，处理转移到步骤S6。

在步骤S6中，控制部112判定对焦模式是否是MF模式。例如，在接收对焦模式的变更的指示而将对焦模式变更为MF模式时，在步骤S6中判定为对焦模式是MF模式。除此以外，在对焦模式是MF模式以外的模式的情况下，在对MF操作部110a进行了操作时，对焦模式也成为MF模式。该情况下，在步骤S6中也判定为对焦模式是MF模式。在步骤S6中判定为对焦模式是MF模式时，处理转移到步骤S7。在步骤S6中判定为对焦模式不是MF模式时处理转移到步骤S11。

在步骤S7中，控制部112判定是否存在用户对MF操作部110a的操作。在步骤S7中判定为存在用户对MF操作部110a的操作时，处理转移到步骤S8。在步骤S7中判定为不存在用户对MF操作部110a的操作时，处理转移到步骤S9。

在步骤S8中，控制部112根据MF操作部110a的操作，对摄像光学系统102a的对焦镜头进行驱动。然后，处理转移到步骤S9。

在步骤S9中，控制部112从由摄像部102取得的图像数据中取得放大图像。然后，处理转移到步骤S10。作为放大图像的取得处理，控制部112从通过使摄像部102进行工作而取得的图像数据中切出一部分图像数据。然后，控制部112对所切出的图像数据进行放大，由此取得放大图像。这里，切出范围例如是由用户指定的范围。当然，也可以是固定范围。在设为固定范围的情况下，切出范围例如是所取得的图像数据中以最对焦的位置为中心的范围。例如通过从图像数据得到的对比度来判定最对准焦点的位置。并且，切出范围的大小可以是固定的，也可以由用户指定。进而，放大倍率可以是固定的，也可以由用户指定。

在步骤S10中，控制部112进行辅助图像生成处理。在辅助图像生成处理后，处理转移到步骤S11。下面，对辅助图像生成处理进行说明。图3是示出辅助图像生成处理的流程图。

在步骤S21中，控制部112检测放大图像的亮度分布。例如，针对各像素的数据，按照每个颜色乘以规定的系数，对它们进行相加，由此得到亮度。

在步骤S22中，控制部112检测放大图像的颜色分布。

在步骤S23中，控制部112检测放大图像中的对象物。使用边缘检测或模板匹配等来进行对象物的检测。例如，如果对象物是人的面部，则对象物是通过使用面部模板的匹配而检测到的放大图像。因此，通常，对象物是一个。当然，放大图像中也可能包含多个对象物，所以，也可以在步骤S23中检测多个对象物。进而，在检测到多个对象物的情况下，也可以仅检测更靠近中央的对象物。

在步骤S24中，控制部112检测与对象物之间的拍摄距离。例如，如果摄像元件102b包含相位差检测像素，则能够通过公知的相位差方式来检测拍摄距离。除此以外，也可以通过图像数据中的各部的对比度评价值的比较来检测相对的拍摄距离。例如，按照每个规定区域对根据图像数据生成的亮度进行累积，由此得到对比度评价值。

在步骤S25中，控制部112检测图像数据中的对象物的运动。例如，通过多个帧的图像数据之间的运动向量来检测对象物的运动。

在步骤S26中，控制部112根据步骤S21-S25中检测到的信息，决定适用于生成辅助图像的处理。下面，对适用处理的决定处理进行说明。图4是示出适用处理的决定处理的流程图。

在步骤S41中，控制部112判定对象物中是否存在亮度差较大的部分或是否存在对象物的颜色再现较差的部分。关于亮度差较大的部分的判定，例如，根据与对象物的边缘部相当的像素及其相邻像素的亮度的差是否超过规定值来进行判定。关于颜色再现，根据是否再现了每个该对象物特有的颜色来进行判定。例如，如果对象物是人物的面部，则判定是否在图像上再现了预定的适当肤色(适当肤色与图像数据的面部中的颜色的差是否在规定值以内)。在步骤S41中判定为存在亮度差较大的部分或存在颜色再现较差的部分时，处理转移到步骤S42。在步骤S41中判定为不存在亮度差较大的部分且不存在颜色再现较差的部分时，处理转移到步骤S43。

在步骤S42中，控制部112将高动态范围(HDR)处理作为适用处理的候选。进而，控制部112计算HDR处理的优先级。优先级是放大图像中的亮度差较大的部分和颜色再现较差的部分所占的比例。然后，处理转移到步骤S43。HDR处理是如下处理：对通过曝光量不同的多次摄像而得到的图像数据进行合成，由此对图像数据的动态范围进行放大。即，在HDR中，能够使亮度差较大的部分各自的明亮度适当，并且，关于颜色再现较差的部分，仅改变曝光就能够使颜色再现适当。在图像数据内的亮度差较大时或对象物的颜色再现较差时进行HDR处理，由此，对象物的视觉辨认性提高。

在步骤S43中，控制部112判定对象物中的对比度的差异是否较小。例如，在对象物的附近的对比度评价值彼此的差小于规定值时，在步骤S43中判定为对比度的差异较小。在步骤S43中判定为对比度的差异较小时，处理转移到步骤S44。在步骤S43中判定为对比度的差异不小时，处理转移到步骤S45。

在步骤S44中，控制部112将深度削减处理作为适用处理的候选。进而，控制部112计算深度削减处理的优先级。优先级是放大图像中的对比度的差异较小的部分所占的比例。然后，处理转移到步骤S45。深度削减处理是如下处理：对有意脱焦的图像数据进行合成，由此使对焦的部分的对比度明显。由此，合焦的部位更加明确。另外，深度削减处理是为了使对焦的部分的对比度明显而降低其周边的部分对比度的处理。用于实现该处理的手法不是必须伴有合成处理。例如，通过对未对焦的部分的灰度进行校正或附加模糊，也能够得到与深度削减处理相同的效果。

在步骤S45中，控制部112判定对象物是否较小。例如，在对象物的大小在放大前的图像数据中占据的比例(例如，步骤S23中检测到的放大图像中的对象物的面积除以放大率而得到的值)小于规定值时，在步骤S45中判定为对象物较小。另外，更加优选在放大图像中的对象物的面积的计算中考虑拍摄距离。在步骤S45中判定为对象物较小时，处理转移到步骤S46。在步骤S45中判定为对象物不小时，处理转移到步骤S47。

在步骤S46中，控制部112将超解析度处理作为适用处理的候选。进而，控制部112计算超解析度处理的优先级。优先级是放大图像中的对象物所占的比例。超解析度处理是如下处理：对通过使摄像元件102b以像素间距以下的单位(例如0.5像素)偏移并进行的多次摄像而得到的图像数据进行合成，由此实现图像数据的高分辨率化。通过超解析度处理，即使对象物被放大也依然是高精细的。因此，放大图像中的对象物的视觉辨认性提高。

在步骤S47中，控制部112判定对象物是否处于移动中。在步骤S47中判定为对象物处于移动中时，处理转移到步骤S48。在步骤S47中判定为对象物未处于移动中时，图4的处理结束。

在步骤S48中，控制部112将使摄像的帧率高速化的处理作为适用处理的候选。然后，图4的处理结束。通过使帧率高速化，能够可靠地捕捉运动的对象物。

在图4中，作为适用处理的候选，举出了HDR处理、深度削减处理、超解析度处理、帧率高速化处理。但是，适用处理的候选不限于这些处理。即，只要是对对象物的焦点状态的确认有用的处理，则能够成为这些以外的适用处理的候选。例如，认为噪声降低处理是对对象物的焦点状态的确认有用的处理之一。该有用性特别是基于用户操作或与用户操作相伴的有用性，不仅视觉辨认性优良，还假设有助于操作前后、操作中途的用户判断的性质。因此，可以根据被操作的设备的特性、操作时的观察对象的特征等进行变更。并且，还假设根据这种条件，通过表参照或加权处理来选择后述各种效果和处理。即，具有对对象物进行摄像而得到对象物的图像数据的摄像部、显示基于图像数据的图像的显示部、对图像数据的特征进行分析的图像分析部，由此可以生成实施了有用处理的辅助图像，但是，也可以根据设备本身的特征、操作部件或操作的状况，决定对显示部中显示的图像中的对象物的摄像调整确认(例如焦点调整)有用的至少一个适用处理。

即，根据如上所述决定的适用处理设定摄像部的摄像条件，然后使摄像部进行工作，生成辅助图像。通过具有这种辅助图像生成部的摄像装置，能够使用户更好地进行对象物确认的操作迅速化、简单化。如果操作结束，则这些处理也可以结束，如果操作中途不需要这些处理，则不需要始终进行处理。并且，也可以在自动调整中应用该想法，此时，不考虑基于操作的有用性，则考虑基于控制对象的有用性。

这里，再次返回图3的说明。在步骤S27中，控制部112判定是否多个处理成为适用处理的候选。在步骤S27中判定为多个处理成为适用处理的候选时，处理转移到步骤S28。在判定为不是多个处理成为适用处理的候选时，处理转移到步骤S30。

在步骤S28中，控制部112判定成为候选的适用处理之间的相容性是否良好。在所述HDR处理、深度削减处理、超解析度处理、帧率高速化处理之间存在相容性。例如，在超解析度处理中，图像中的存在模糊的部分高精细化，所以，与使图像中的模糊明显的深度削减处理之间的相容性不良好。并且，HDR处理、深度削减处理、超解析度处理是包含多张图像的合成的处理，所以，很难实现帧率高速化。因此，HDR处理、深度削减处理和超解析度处理与帧率高速化处理之间的相容性不良好。在步骤S28中判定这种适用处理之间的相容性是否良好。另一方面，HDR处理与帧率高速化处理以外的处理之间的相容性良好。另外，相容性的例子不限于这里所示的例子。在步骤S28中判定为成为候选的适用处理之间的相容性良好时，处理转移到步骤S29。在步骤S28中判定为成为候选的适用处理之间的相容性不良好时，处理转移到步骤S30。

在步骤S29中，控制部112生成辅助图像。例如，使用HDR处理、深度削减处理、超解析度处理中的优先级较高的2个适用处理来进行辅助图像的生成。即，优先进行改善的可能性较高的2个处理。这里示出仅使用2个适用处理的例子，但是，这是为了缩短实现辅助图像生成所需要的时间。如果时间允许，则也可以不考虑优先级而进行3个处理。并且，也可以通过其他组合来进行处理，例如如果上位2个适用处理的相容性较差，则应用优先级次高的适用处理。

图5是示出辅助图像生成处理的概要的图。如图5所示，在辅助图像的生成时，控制部112进行多个摄像条件的设定，以使得在按照每个适用处理而确定的摄像条件下进行拍摄。即，控制部112设定与适用处理1相关联的摄像条件1，接着，设定与适用处理2相关联的摄像条件2。如果是HDR处理，则摄像条件是曝光量，如果是深度削减处理，则摄像条件是对焦镜头的位置，如果是超解析度处理，则摄像条件是摄像元件102b的偏移位置。在设定了摄像条件1和摄像条件2后，控制部112进行拍摄动作。由此，生成对原来的图像进行了摄像条件1和摄像条件2的变更的辅助图像。

根据需要，所生成的辅助图像与原来的放大图像进行合成。与原来的放大图像相比，该合成放大图像是视觉辨认性提高的图像。在MF模式时，如果使显示部104显示合成放大图像，则用户能够在拍摄中更好地确认对象物的焦点状态。这里，可以不是MF模式时，而是例如根据再现模式中的用户的操作来生成合成放大图像。该情况下，用户能够在拍摄后更好地确认对象物的焦点状态。

下面，具体进行说明。图6是用于说明辅助图像生成处理的具体例的图。在图6的场景中，用户将停在植物上的蜻蜓作为拍摄对象物进行MF拍摄。

图6的图像200是原来的图像。在图像200中，作为拍摄对象物的蜻蜓成为逆光状态。此时，背景200a的山与对象物的蜻蜓的亮度差较大，并且，蜻蜓的颜色再现较差。因此，采用HDR处理作为第一个适用处理。另一方面，原来的图像中的蜻蜓部分的垂直方向的对比度分布如图6的参照标号204所示。这里，图6的横轴表示位置(拍摄距离)。当图6的横轴的值增加时，表示远距离。另一方面，图6的纵轴表示对象物的对比度。当图6的纵轴的值增加时，表示对比度较高。如图6所示，对比度分布204具有3个对比度的峰值。从近距离侧观察，这些峰值的位置对应于蜻蜓的头、躯体、尾的位置。在对比度分布204中，尾与躯体204a的对比度的差异较小。因此，采用深度削减处理作为第二个适用处理。

控制部112将作为HDR处理的摄像条件的曝光量设定为比原来的图像的拍摄时的曝光量高(以使得作为对象物的蜻蜓的明亮度成为适当值)。并且，控制部112将作为深度削减处理的摄像条件的对焦镜头的位置设定为与原来的图像的摄像时相同的位置。在这些设定后，控制部112进行辅助图像的摄像动作。通过该摄像动作，得到图6的图像202。在图6的图像202中，蜻蜓202a的部分的明亮度成为适当值。另一方面，蜻蜓202a以外的背景的部分泛白。

接着，控制部112将作为HDR处理的摄像条件的曝光量设定为与第一次的辅助图像的摄像时相同。并且，控制部112将作为深度削减处理的摄像条件的对焦镜头的位置设定为比辅助图像的摄像时(原来的图像的摄像时)更靠例如远距离侧的位置。对焦镜头的位置的偏移量例如是固定量，是被摄场深度外的位置。在这些设定后，控制部112进行辅助图像的摄像动作。例如，通过使对焦镜头的位置向远距离侧偏移时的摄像动作而得到的辅助图像的对比度分布如图6的参照标号206所示。在对比度分布206中，尾206a的部分的对比度变高，躯体206b的部分的对比度变低。因此，可知原来的图像200中的合焦位置是躯体206b的部分。

因此，控制部112将作为HDR处理的摄像条件的曝光量设定为与第一次的辅助图像的摄像时相同。并且，控制部112将作为深度削减处理的摄像条件的对焦镜头的位置设定为尾206a的部分的对比度降低的方向的位置、在图6的例子中为近距离侧的位置。在这些设定后，控制部112进行辅助图像的摄像动作。例如，通过使对焦镜头的位置向近距离侧偏移时的摄像动作得到的辅助图像的对比度分布如图6的参照标号208所示。在对比度分布208中，尾的部分的对比度变低，躯体的部分的对比度变高。

接着，控制部112从各辅助图像中决定应该采用的部分，通过对这些部分进行合成，生成合成图像。首先，控制部112在合成图像中的背景的部分中采用原来的图像200中的背景200a的部分。并且，控制部112在合成图像中的蜻蜓的头的部分和躯体的部分中采用第一张辅助图像(曝光为辅助图像202、对比度分布为对比度分布204的图像)中的蜻蜓的头的部分。并且，控制部112在合成图像中的蜻蜓的尾的部分中采用第三张辅助图像(曝光为辅助图像202、对比度分布为对比度分布208的图像)中的蜻蜓的尾的部分。然后，控制部112从合成图像中切出与原来的放大图像相同的切出范围的图像数据。然后，控制部112对切出的图像数据进行放大，由此取得合成放大图像。这种合成放大图像是如下图像：如图6的参照标号210所示，通过HDR处理使蜻蜓的部分的明亮度和背景的部分的明亮度适当，并且，通过深度削减处理使蜻蜓的躯体与尾的焦点状态的差明确。通过这种合成放大图像，用户能够更好地确认作为对象物的蜻蜓的焦点状态。另外，通过用户对操作部110的操作，预先设定是否生成合成放大图像。在指示了不生成合成放大图像的意思时，所生成的辅助图像与通过后面的拍摄而得到的图像文件关联起来记录在记录部108中。

这里，再次返回图3的说明。在步骤S30中，控制部112判定是否可以仅进行一个适用处理。例如，在步骤S26中判定为作为适用处理的候选的处理仅为一个时或步骤S28中判定为多个适用处理的候选之间的相容性较差时，进行步骤S30的判定。在步骤S30中，例如在显示部104中进行例如用于向用户示出辅助图像生成时进行的适用处理的确认显示。另外，在相容性较差的多个适用处理成为候选的情况下，进行示出其中优先级最高的适用处理的显示。看到该确认显示的用户对操作部110进行操作，指示是否可以仅进行一个适用处理。通过该指示进行步骤S30的判定。在步骤S30中判定为可以仅进行一个适用处理时，处理转移到步骤S31。在步骤S30中判定为不需要仅进行一个适用处理时，图3的处理结束。

在步骤S31中，控制部112使用一个适用处理生成辅助图像。然后，图3的处理结束。辅助图像的生成方法基本上与使用2个适用处理生成辅助图像的情况同样。即，在使用2个适用处理生成辅助图像的情况下，设定与2个适用处理分别对应的摄像条件后进行摄像，与此相对，在使用一个适用处理生成辅助图像的情况下，设定与该适用处理对应的摄像条件后进行摄像。

这里，再次返回图2的说明。在步骤S11中，控制部112判定是否存在基于用户的拍摄开始的操作。拍摄开始的操作例如是释放按钮的按压操作或触摸面板的规定部位的触摸操作。在步骤S11中判定为不存在基于用户的拍摄开始的操作时，处理返回步骤S1。在步骤S11中判定为存在基于用户的拍摄开始的操作时，处理转移到步骤S12。

在步骤S12中，控制部112开始进行拍摄动作。例如，控制部112根据被摄体亮度进行摄像光学系统102a的光圈的设定和摄像元件102b的曝光时间的设定等。然后，控制部112开始进行摄像部102的摄像动作。然后，控制部112对通过摄像动作而得到的图像数据实施必要的图像处理，将其记录在记录部108中。在这种拍摄动作后，处理返回步骤S1。

在步骤S13中，控制部112判定摄像装置100的动作模式是否是再现模式。在步骤S13中判定为摄像装置100的动作模式是再现模式时，处理转移到步骤S14。在步骤S13中判定为摄像装置100的动作模式不是再现模式时，处理返回步骤S1。

在步骤S14中，控制部112使显示部104显示记录部108中记录的图像文件的一览。

在步骤S15中，控制部112判定用户是否选择了显示部104中一览显示的图像文件中的一个图像文件。例如，通过用户对触摸面板的操作来进行图像文件的选择。在步骤S15中判定为进行了图像文件的选择时，处理转移到步骤S16。在步骤S15中判定为未进行图像文件的选择时，处理返回步骤S13。

在步骤S16中，控制部112判定是否存在与要再现的图像文件对应且还未与要再现的图像文件中的图像数据进行合成的辅助图像。如上所述，辅助图像生成处理中生成的一个以上的辅助图像有时与原来的图像进行合成，有时不与原来的图像进行合成。在步骤S16中判定为存在还未与要再现的图像文件中的图像数据进行合成的辅助图像时，处理转移到步骤S17。在步骤S16中判定为不存在还未与要再现的图像文件中的图像数据进行合成的辅助图像时，处理转移到步骤S18。

在步骤S17中，控制部112根据由用户选择出的图像文件中记录的辅助图像生成合成放大图像，将所生成的合成放大图像与原来的图像进行合成，显示在显示部104中。然后，处理转移到步骤S19。

在步骤S18中，控制部112在显示部104中显示由用户选择出的图像文件中记录的图像。然后，处理转移到步骤S19。

在步骤S19中，控制部112判定是否结束图像文件的再现。例如，在通过用户对操作部110的操作而指示了图像文件的再现结束的情况下，判定为结束图像文件的再现。在步骤S19中判定为指示了图像文件的再现结束时，处理返回步骤S1。在步骤S19中判定为未指示图像文件的再现结束时，处理返回步骤S16。

如以上说明的那样，根据本实施方式，根据图像数据的特征的分析结果进行对对象物的焦点状态的确认有用的适用处理。由此，用户能够更好地确认对象物的焦点状态。

在所述实施方式中，在放大图像的取得后生成辅助图像。但是，不是必须在放大图像的取得后生成辅助图像。并且，不是必须生成合成放大图像，在图像文件的再现时，也可以显示对原来的图像文件中记录的图像和辅助图像进行简单合成而得到的图像。

并且，在所述实施方式中，关于摄像装置，举例了数字照相机等以图像记录为目的的摄像装置。与此相对，本实施方式的技术应用于各种摄像装置，还能够应用于不进行图像记录的摄像装置。关于这点，例如能够对内窥镜装置、显微镜装置、监视装置这样的摄像装置应用本实施方式的技术。特别是在需要严格的目视调节的设备中发挥效果，但是，当然，多数情况下，提高视觉辨认性的处理在自动判定时也是有用的处理。本发明还假设了在有用处理后进行自动控制的情况，可以认为在自动控制用方面也是有用的。

并且，所述实施方式的各处理也可以作为能够由作为计算机的控制部112执行的程序进行存储。除此之外，可以存储在磁盘、光盘、半导体存储器等外部存储装置的记录介质中进行发布。而且，控制部112读入该外部存储装置的记录介质中存储的程序，通过该读入的程序对动作进行控制，由此能够执行上述处理。

本领域技术人员将容易地想到其他优点和变形例。因此，本发明的更广的方面不限于这里给出和描述的具体细节和代表性实施例。因此，可以在不脱离如用所附权利要求及它们的等同例定义的一般发明概念的精神或范围的情况下进行各种变形。

Claims (7)

1.一种摄像装置，其具有：

摄像部，其对对象物进行摄像而得到与所述对象物相关的图像数据；

显示部，其显示基于所述图像数据的图像；

图像分析部，其对所述图像数据的特征进行分析；以及

辅助图像生成部，其根据分析出的所述图像数据的特征，决定对所述显示部中显示的图像中的所述对象物的焦点状态的确认有用的至少一个适用处理，根据所决定的适用处理设定所述摄像部的摄像条件，然后使所述摄像部进行工作，生成辅助图像。

2.根据权利要求1所述的摄像装置，其中，

当存在多个所述适用处理时，所述辅助图像生成部同时设定与多个所述适用处理分别对应的摄像条件，然后使所述摄像部进行工作，生成所述辅助图像。

3.根据权利要求1所述的摄像装置，其中，

当存在多个所述适用处理时，所述辅助图像生成部判定多个所述适用处理之间的相容性，仅在该相容性优良时，根据多个所述适用处理使所述摄像部进行工作，生成所述辅助图像。

4.根据权利要求1所述的摄像装置，其中，

所述适用处理包含高动态范围处理、深度削减处理、超解析度处理、帧率高速化处理中的至少任意一种处理。

5.根据权利要求1所述的摄像装置，其中，

所述摄像装置具有用户能够手动进行焦点调节的手动对焦模式作为动作模式，

当处于所述手动对焦模式时，所述辅助图像生成部生成所述辅助图像。

6.根据权利要求1所述的摄像装置，其中，

所述辅助图像生成部对由所述摄像部得到的图像数据和所述辅助图像进行合成而生成合成图像，以在所述显示部中进行显示，

所述显示部显示所述合成图像。

7.一种摄像方法，其具有以下步骤：

通过摄像部对对象物进行摄像而得到所述对象物的图像数据；

在显示部中显示基于所述图像数据的图像；

对所述图像数据的特征进行分析；

根据分析出的所述图像数据的特征，决定对所述显示部中显示的图像中的所述对象物的焦点状态的确认有用的至少一个适用处理；以及

根据所决定的适用处理设定所述摄像部的摄像条件，然后使所述摄像部进行工作，生成辅助图像。